AI 101
X'inhu NLU (Natural Language Understanding)?
Fehim tal-lingwa naturali (NLU) huwa kunċett tekniku fi ħdan is-suġġett ikbar tal-ipproċessar tal-lingwa naturali. NLU huwa l-proċess responsabbli għat-traduzzjoni naturali, kliem uman f'format li kompjuter jista' jinterpreta. Essenzjalment, qabel ma kompjuter ikun jista' jipproċessa d-dejta tal-lingwa, irid jifhem id-dejta.
It-tekniki għall-NLU jinkludu l-użu ta’ sintassi komuni u regoli grammatikali biex il-kompjuter ikun jista’ jifhem it-tifsira u l-kuntest tal-lingwaġġ naturali tal-bniedem. L-għan aħħari ta 'dawn it-tekniki huwa li kompjuter jasal biex ikollu fehim "intuwittiv" tal-lingwa, kapaċi jikteb u jifhem il-lingwa eżatt kif jagħmel bniedem, mingħajr ma jirreferi kontinwament għad-definizzjonijiet tal-kliem.
Id-definizzjoni tal-NLU (Fehim tal-Lingwa Naturali)
Hemm bosta tekniki li x-xjenzati tal-kompjuter u l-esperti tal-NLP jużaw biex jippermettu lill-kompjuters jifhmu l-lingwa umana. Ħafna mit-tekniki jaqgħu fil-kategorija ta '"analiżi sintattika". Tekniki analitiċi sintattiċi jinkludu:
- lematizzazzjoni
- burdata
- segmentazzjoni tal-kliem
- parsing
- segmentazzjoni morfoloġika
- tkissir tas-sentenza
- parti mit-tagging tad-diskors
Dawn it-tekniki analitiċi sintattiċi japplikaw regoli grammatikali għal gruppi ta 'kliem u jippruvaw jużaw dawn ir-regoli biex jiksbu tifsira. B'kuntrast, NLU topera billi tuża tekniki ta '"analiżi semantika".
L-analiżi semantika tapplika algoritmi tal-kompjuter għat-test, billi tipprova tifhem it-tifsira tal-kliem fil-kuntest naturali tagħhom, minflok ma tistrieħ fuq approċċi bbażati fuq ir-regoli. Il-korrettezza grammatikali/inkorrettezza ta' frażi mhux neċessarjament tikkorrelata mal-validità ta' frażi. Jista 'jkun hemm frażijiet li huma grammatikament korretti iżda bla sens, u frażijiet li huma grammatikament skorretti iżda għandhom tifsira. Sabiex tiddistingwi l-aspetti l-aktar sinifikanti tal-kliem, NLU tapplika varjetà ta 'tekniki maħsuba biex jaqbdu t-tifsira ta' grupp ta 'kliem b'inqas dipendenza fuq l-istruttura grammatikali u r-regoli.
NLU huwa qasam li qed jevolvi u li qed jinbidel, u huwa meqjus bħala wieħed mill-problemi iebsa tal-AI. Diversi tekniki u għodod qed jiġu żviluppati biex jagħtu lill-magni fehim tal-lingwa umana. Ħafna sistemi NLU għandhom ċerti komponenti ewlenin komuni. Huwa meħtieġ lessiku għal-lingwa, kif ukoll xi tip ta' parser tat-test u regoli tal-grammatika biex jiggwidaw il-ħolqien ta' rappreżentazzjonijiet tat-test. Is-sistema teħtieġ ukoll teorija tas-semantika biex tippermetti l-komprensjoni tar-rappreżentazzjonijiet. Hemm diversi teoriji semantiċi użati biex jinterpretaw il-lingwa, bħal analiżi semantika stokastika jew semantika naive.
Tekniki NLU komuni jinkludu:
Ir-Rikonoxximent tal-Entitajiet bl-Ismijiet huwa l-proċess ta’ rikonoxximent ta’ “entitajiet imsemmija”, li huma nies, u postijiet/affarijiet importanti. Ir-Rikonoxximent tal-Entitajiet bl-Ismijiet jopera billi jiddistingwi kunċetti u referenzi fundamentali f'korp ta' test, jidentifika entitajiet imsemmija u jpoġġihom f'kategoriji bħal postijiet, dati, organizzazzjonijiet, nies, xogħlijiet, eċċ. Mudelli sorveljati bbażati fuq regoli tal-grammatika huma tipikament użati biex iwettqu NER ħidmiet.
Id-diżambigwazzjoni tas-sens tal-kelma hija l-proċess tad-determinazzjoni tat-tifsira, jew is-sens, ta' kelma bbażata fuq il-kuntest li fih tidher il-kelma. Id-diżambigwazzjoni tas-sens tal-kelma spiss tagħmel użu minn parti mit-taggers tad-diskors sabiex tikkuntestwalizza l-kelma fil-mira. Metodi sorveljati ta 'diżambigwazzjoni tas-sens tal-kelma jinkludu l-utent ta' magni tal-vettur ta 'appoġġ u tagħlim ibbażat fuq il-memorja. Madankollu, il-biċċa l-kbira tal-mudelli tad-diżambigwazzjoni tas-sens tal-kelma huma mudelli semi-superviżjoni li jimpjegaw kemm dejta tikkettata kif ukoll mhux tikkettata.
Eżempji ta' NLU (Fehim tal-Lingwa Naturali)
Eżempji komuni ta 'NLU jinkludu Raġunar Awtomatizzat, Rotot Awtomatiku tal-Biljett, Traduzzjoni Magna, u Tweġiba tal-Mistoqsijiet.
Raġunar Awtomatizzat
Raġunar awtomatizzat hija dixxiplina li timmira li tagħti magni jingħataw tip ta 'loġika jew raġunament. Hija fergħa tax-xjenza konjittiva li tagħmel ħilitha biex tagħmel tnaqqis ibbażat fuq dijanjosi mediċi jew issolvi b'mod programmatiku/awtomatiku teoremi matematiċi. NLU jintuża biex jgħin jiġbor u janalizza l-informazzjoni u jiġġenera konklużjonijiet ibbażati fuq l-informazzjoni.
Rotot Awtomatiku tal-Biljett
L-NLU spiss jintuża biex jiġu awtomatizzati l-kompiti tas-servizz tal-konsumatur. Meta jiġi ġġenerat biljett tas-servizz tal-klijent, chatbots u magni oħra jistgħu jinterpretaw in-natura bażika tal-ħtieġa tal-klijent u jgħadduhom fid-dipartiment korrett. Kumpaniji jirċievu eluf ta 'talbiet għal appoġġ kuljum, għalhekk l-algoritmi NLU huma utli biex jipprijoritizzaw il-biljetti u jippermettu lill-aġenti ta' appoġġ jimmaniġġjawhom b'modi aktar effiċjenti.
Traduzzjoni bil-Magni
Huwa diffiċli li tittraduċi b'mod preċiż diskors jew test minn lingwa għal lingwa oħra. Fil-fatt, traduzzjoni awtomatika hija waħda mill-aktar problemi diffiċli fl-NLP u l-NLU. Ħafna sistemi ta’ traduzzjoni awtomatika jiddependu fuq regoli lingwistiċi biex jittraduċu bejn il-lingwi, iżda r-riċerkaturi qed isegwu modi aktar sofistikati ta’ traduzzjoni bejn il-lingwi. It-traduzzjoni awtomatika NLU tipprova tippermetti traduzzjoni aktar preċiża billi tippreserva l-kuntest u l-informazzjoni semantika assoċjata mat-test fil-mira. L-aktar sistemi preċiżi ta’ traduzzjoni awtomatika jgħaqqdu regoli lingwistiċi ma’ algoritmi li joħorġu tifsira semantika.
Mistoqsija Tweġiba
Ir-rikonoxximent tad-diskors juża tekniki NLU biex iħalli kompjuters tifhem mistoqsijiet poża b’lingwaġġ naturali. NLU jintuża biex jagħti lill-utenti tal-apparat rispons fil-lingwa naturali tagħhom, minflok ma jipprovdilhom lista ta’ tweġibiet possibbli. Meta tistaqsi mistoqsija lil assistent diġitali, NLU tintuża biex tgħin lill-magni jifhmu l-mistoqsijiet, billi tagħżel l-aktar tweġibiet xierqa bbażati fuq karatteristiċi bħal entitajiet rikonoxxuti u l-kuntest ta 'dikjarazzjonijiet preċedenti.
