Təbii dilin emalı: Redaktələr arasındakı fərq

Vikipediya saytından
Naviqasiyaya keç Axtarışa keç
Silinən məzmun Əlavə edilmiş məzmun
Yanaşmalar
Sətir 2: Sətir 2:
{{Süni intellekt yanqutu}}
{{Süni intellekt yanqutu}}
'''Təbii dilin emalı''' '''(Natural Language Processing (NLP))''' – [[süni intellekt]] və riyazi dilçiliyin ümumi istiqaməti; danışıq, yaxud mətn şəklində təqdim olunan təbii dillərin kompüterin köməyilə analiz və sintezi problemlərini öyrənir. Analiz dedikdə dilin başa düşülməsi, sintez dedikdə isə savadlı mətnin generasiyası nəzərdə tutulur. Bu problemlərin həlli [[kompüter]] və insan arasında qarşılıqlı təsirin daha əlverişli formasının yaradıldığını bildirəcək.
'''Təbii dilin emalı''' '''(Natural Language Processing (NLP))''' – [[süni intellekt]] və riyazi dilçiliyin ümumi istiqaməti; danışıq, yaxud mətn şəklində təqdim olunan təbii dillərin kompüterin köməyilə analiz və sintezi problemlərini öyrənir. Analiz dedikdə dilin başa düşülməsi, sintez dedikdə isə savadlı mətnin generasiyası nəzərdə tutulur. Bu problemlərin həlli [[kompüter]] və insan arasında qarşılıqlı təsirin daha əlverişli formasının yaradıldığını bildirəcək.

== Yanaşmalar ==
=== Statistik yanaşma ===
1980-ci illərin sonu və 1990-cı illərin ortalarında statistik yanaşma, qaydalara əsaslanan yanaşmaların səmərəsizliyi səbəbindən süni intellektin qış dövrünün sonunu gətirdi.<ref>{{Cite web|title=How the Statistical Revolution Changes (Computational) Linguistics|url=https://aclanthology.org/W09-0103/|access-date=2024-05-18|website=aclanthology.org}}</ref><ref>{{Cite web|title=Four revolutions|url=https://languagelog.ldc.upenn.edu/nll/?p=2946|access-date=2024-05-18|website=languagelog.ldc.upenn.edu}}</ref>

Ən erkən qərar ağacları, "əgər–onda" sərt qaydalar sistemlərini yaradan, hələ də qaydalara əsaslanan köhnə yanaşmalara çox bənzəyirdi. Yalnız nitqin hissələrini qeyd etmək üçün tətbiq edilən gizli Markov modellərinin təqdimatı, qaydalara əsaslanan köhnə yanaşmanın sonunu elan etdi.

=== Neyron şəbəkələri ===
Statistik metodların əsas çatışmazlığı ondan ibarətdir ki, onlar kompleks funksiya inkişafını tələb edirlər. 2015-ci ildən etibarən, statistik yanaşma, sözlərin semantik xüsusiyyətlərini tutmaq üçün söz yerləşdirmələrindən istifadə edən neyron şəbəkələri yanaşması ilə əvəz olundu.<ref>{{Cite web|title=Word Embeddings in NLP|url=https://www.geeksforgeeks.org/word-embeddings-in-nlp/|access-date=2024-05-18|website=www.geeksforgeeks.org}}</ref><ref>{{Cite web|title=Natural language processing: state of the art, current trends and challenges Multimedia Tools and Applications|url=https://ugai-pmr.org/natural-language-processing-state-of-the-art/|access-date=2024-05-18|website=ugai-pmr.org}}</ref>

Aralıq tapşırıqlar (məsələn, nitq hissələrinin qeyd edilməsi və asılılıq təhlili) artıq tələb olunmurdu.

== Ümumi meyllər və (mümkün) gələcək istiqamətlər ==
Koqnitiv dilçiliklə əlaqələr NLP-nin tarixi irsinin bir hissəsidir, lakin 1990-cı illərin statistik dönüşündən sonra onlara daha az müraciət olunurdu.<ref>{{Cite web|title=The Evolution Of Natural Language Processing And Its Impact On AI|url=https://www.forbes.com/sites/forbestechcouncil/2018/11/06/the-evolution-of-natural-language-processing-and-its-impact-on-ai/|access-date=2024-05-18|website=www.forbes.com}}</ref><ref>{{Cite web|title=The Evolution of NLP: Past, Present, and Future|url=https://www.peppercontent.io/blog/tracing-the-evolution-of-nlp/|access-date=2024-05-18|website=www.peppercontent.io}}</ref> Buna baxmayaraq, texniki olaraq fəaliyyət göstərə bilən çərçivələr yaratmaq üçün koqnitiv modellərin hazırlanmasına yanaşmalar müxtəlif çərçivələr kontekstində tətbiq olunurdu, məsələn, koqnitiv qrammatika,<ref>{{Cite web|title=US patent 9269353|url=https://worldwide.espacenet.com/patent/search/family/055314712/publication/US9269353B1?q=pn%3DUS9269353|access-date=2024-05-18|website=worldwide.espacenet.com}}</ref> funksional qrammatika,<ref>{{Cite web|title=Universal Conceptual Cognitive Annotation (UCCA)|url=https://universalconceptualcognitiveannotation.github.io/|access-date=2024-05-18|website=universalconceptualcognitiveannotation.github.io}}</ref> konstruksiya qrammatikası, kompüter psixolinqvistikası və koqnitiv nevroelm (məsələn, ACT-R). Eynilə, koqnitiv NLP ideyaları multimodal NLP-nin neyron modellərində mövcuddur (baxmayaraq ki, nadir hallarda açıq şəkildə bildirilir) və süni intellekt sahəsində inkişaflar, xüsusən də böyük dil modellərindən istifadə edən yanaşmaları<ref>{{Cite web|title=Understanding the Anatomies of LLM Prompts: How To Structure Your Prompts To Get Better LLM Responses|url=https://www.codesmith.io/blog/understanding-the-anatomies-of-llm-prompts|access-date=2024-05-18|website=www.codesmith.io}}</ref><ref>{{Cite web|title=Grounded Compositional Semantics for Finding and Describing Images with Sentences|url=https://direct.mit.edu/tacl/article/doi/10.1162/tacl_a_00177/43306/Grounded-Compositional-Semantics-for-Finding-and|access-date=2024-05-18|website=direct.mit.edu}}</ref> və ümumi süni intellektdə yeni istiqamətləri, Londondakı Universitet Kollecindən olan britaniyalı neyrobioloq və nəzəriyyəçi Karl J. Fristonun azad enerji prinsipi əsasında inkişaf etdirir.<ref>{{Cite web|title=Language models show human-like content effects on reasoning tasks|url=https://arxiv.org/abs/2207.07051|access-date=2024-05-18|website=arxiv.org}}</ref>


==Proqram təminatları==
==Proqram təminatları==
Sətir 13: Sətir 27:
==Ədəbiyyat==
==Ədəbiyyat==
* İsmayıl Calallı (Sadıqov), "İnformatika terminlərinin izahlı lüğəti", 2017, "Bakı" nəşriyyatı, 996 s.
* İsmayıl Calallı (Sadıqov), "İnformatika terminlərinin izahlı lüğəti", 2017, "Bakı" nəşriyyatı, 996 s.

== İstinadlar ==
<references />

{{Süni intellekt}}
{{Süni intellekt}}
{{İnformatika}}
{{İnformatika}}

08:24, 18 may 2024 tarixindəki versiya

Təbii dilin emalı (Natural Language Processing (NLP))süni intellekt və riyazi dilçiliyin ümumi istiqaməti; danışıq, yaxud mətn şəklində təqdim olunan təbii dillərin kompüterin köməyilə analiz və sintezi problemlərini öyrənir. Analiz dedikdə dilin başa düşülməsi, sintez dedikdə isə savadlı mətnin generasiyası nəzərdə tutulur. Bu problemlərin həlli kompüter və insan arasında qarşılıqlı təsirin daha əlverişli formasının yaradıldığını bildirəcək.

Yanaşmalar

Statistik yanaşma

1980-ci illərin sonu və 1990-cı illərin ortalarında statistik yanaşma, qaydalara əsaslanan yanaşmaların səmərəsizliyi səbəbindən süni intellektin qış dövrünün sonunu gətirdi.[1][2]

Ən erkən qərar ağacları, "əgər–onda" sərt qaydalar sistemlərini yaradan, hələ də qaydalara əsaslanan köhnə yanaşmalara çox bənzəyirdi. Yalnız nitqin hissələrini qeyd etmək üçün tətbiq edilən gizli Markov modellərinin təqdimatı, qaydalara əsaslanan köhnə yanaşmanın sonunu elan etdi.

Neyron şəbəkələri

Statistik metodların əsas çatışmazlığı ondan ibarətdir ki, onlar kompleks funksiya inkişafını tələb edirlər. 2015-ci ildən etibarən, statistik yanaşma, sözlərin semantik xüsusiyyətlərini tutmaq üçün söz yerləşdirmələrindən istifadə edən neyron şəbəkələri yanaşması ilə əvəz olundu.[3][4]

Aralıq tapşırıqlar (məsələn, nitq hissələrinin qeyd edilməsi və asılılıq təhlili) artıq tələb olunmurdu.

Ümumi meyllər və (mümkün) gələcək istiqamətlər

Koqnitiv dilçiliklə əlaqələr NLP-nin tarixi irsinin bir hissəsidir, lakin 1990-cı illərin statistik dönüşündən sonra onlara daha az müraciət olunurdu.[5][6] Buna baxmayaraq, texniki olaraq fəaliyyət göstərə bilən çərçivələr yaratmaq üçün koqnitiv modellərin hazırlanmasına yanaşmalar müxtəlif çərçivələr kontekstində tətbiq olunurdu, məsələn, koqnitiv qrammatika,[7] funksional qrammatika,[8] konstruksiya qrammatikası, kompüter psixolinqvistikası və koqnitiv nevroelm (məsələn, ACT-R). Eynilə, koqnitiv NLP ideyaları multimodal NLP-nin neyron modellərində mövcuddur (baxmayaraq ki, nadir hallarda açıq şəkildə bildirilir) və süni intellekt sahəsində inkişaflar, xüsusən də böyük dil modellərindən istifadə edən yanaşmaları[9][10] və ümumi süni intellektdə yeni istiqamətləri, Londondakı Universitet Kollecindən olan britaniyalı neyrobioloq və nəzəriyyəçi Karl J. Fristonun azad enerji prinsipi əsasında inkişaf etdirir.[11]

Proqram təminatları

  • AlchemyAPI
  • Expert System S.p.A.
  • General Architecture for Text Engineering
  • Modular Audio Recognition Framework
  • MontyLingua
  • Natural Language Toolkit)

Ədəbiyyat

  • İsmayıl Calallı (Sadıqov), "İnformatika terminlərinin izahlı lüğəti", 2017, "Bakı" nəşriyyatı, 996 s.

İstinadlar

  1. "How the Statistical Revolution Changes (Computational) Linguistics". aclanthology.org. İstifadə tarixi: 2024-05-18.
  2. "Four revolutions". languagelog.ldc.upenn.edu. İstifadə tarixi: 2024-05-18.
  3. "Word Embeddings in NLP". www.geeksforgeeks.org. İstifadə tarixi: 2024-05-18.
  4. "Natural language processing: state of the art, current trends and challenges Multimedia Tools and Applications". ugai-pmr.org. İstifadə tarixi: 2024-05-18.
  5. "The Evolution Of Natural Language Processing And Its Impact On AI". www.forbes.com. İstifadə tarixi: 2024-05-18.
  6. "The Evolution of NLP: Past, Present, and Future". www.peppercontent.io. İstifadə tarixi: 2024-05-18.
  7. "US patent 9269353". worldwide.espacenet.com. İstifadə tarixi: 2024-05-18.
  8. "Universal Conceptual Cognitive Annotation (UCCA)". universalconceptualcognitiveannotation.github.io. İstifadə tarixi: 2024-05-18.
  9. "Understanding the Anatomies of LLM Prompts: How To Structure Your Prompts To Get Better LLM Responses". www.codesmith.io. İstifadə tarixi: 2024-05-18.
  10. "Grounded Compositional Semantics for Finding and Describing Images with Sentences". direct.mit.edu. İstifadə tarixi: 2024-05-18.
  11. "Language models show human-like content effects on reasoning tasks". arxiv.org. İstifadə tarixi: 2024-05-18.