Natuurliketaalverwerking
| Deel van 'n reeks oor |
| Kunsmatige intelligensie |
|---|
 |
|
Tegnologie
|
|
Woordelys
|
Natuurliketaalverwerking(NLP), ook bekend asnatuurliketaalprosessering,is 'n veld in dierekenaarwetenskap,kunsmatige intelligensie en rekenaarlinguistiek, waar die fokus op die interaksie tussenrekenaarsen menslike (natuurlike) tale is. NLP is dus verwant aan die gebied van mens-rekenaar-interaksie. Heelwat uitdagings in NLP het te doen met natuurliketaalbegrip, met ander woorde, om rekenaars in staat te stel om betekenis van menslike of natuurlike taal te onttrek. Ander het weer te doen met natuurliketaalgenerering.
Geskiedenis
[wysig|wysig bron]Die geskiedenis van NLP het min of meer in die 1950's begin, alhoewel vroeëre navorsing wel bestaan. In 1950 hetAlan Turing'n artikel gepubliseer, "Computing Machinery and Intelligence",waarin hy die sogenaamdeTuringtoetsvoorstel wat deesdae as 'n maatstaf van intelligensie gebruik word.
Die Georgetown-eksperiment in 1954 het die volledige outomatiese vertaling van meer as sestig Russiese sinne na Engels behels. Die outeurs het beweer dat die probleem vanmasjienvertalingbinne drie tot vyf jaar volledig opgelos sou word.[2]Vordering was in werklikheid heelwat stadiger. Na die ALPAC-verslag in 1966, wat bevind het dat navorsing oor 'n tydperk van tien jaar nie aan verwagtinge voldoen het nie, is befondsing vir masjienvertaling dramaties verminder. Min navorsing in masjienvertaling het daarna plaasgevind tot aan die einde van die 1980s, toe die eerste statistiesemasjienvertaalstelsels ontwikkel is.
Voorbeelde van suksesvolle NLP-stelsels wat in die 1960s ontwikkel is sluit SHRDLU en ELIZA in. SHRDLU werk met sogenaamde beperkte "blokwêrelde" en beperkte woordeskat. ELIZA, geskryf deur Joseph Weizenbaum tussen 1964 en 1966, is 'n simulasie van 'n Rogeriaanse psigoterapeut. ELIZA skep 'n verrassend menslike interaksie alhoewel die program byna geen inligting oor menslike gedagtes of emosie gebruik nie. Wanneer die "pasiënt" die baie klein kennisbasis oorskry, verskaf ELIZA gewoonlik 'n generiese antwoord. Die Engelse "My head hurts", byvoorbeeld, word geantwoord met "Why do you say your head hurts?".
In die 1970s het baie programmeerders sogenaamde "konsepsuele ontologieë" begin skryf. Dit omskep inligting oor die regte wêreld na data wat deur rekenaars verstaan kan word. Voorbeelde sluit MARGIE (Schank, 1975), SAM (Cullingford, 1978), PAM (Wilensky, 1978), TaleSpin (Meehan, 1976), QUALM (Lehnert, 1977), Politics (Carbonell, 1979), en Plot Units (Lehnert 1981) in. In hierdie tyd is daar ook kletsbotte geskryf soos PARRY, Racter en Jabberwacky.
Tot en met die tagtigerjare is die meeste NLP-stelsels op komplekse stelle handgeskrewe reëls gebaseer. Vanaf die laat tagtigerjare was daar egter 'n ommekeer in NLP met die totstandkoming van masjienleeralgoritmes vir taalverwerking. Dit was as gevolg van die bestendige toename in rekenkrag (sienMoore se wet) en 'n afname in die invloed vanChomskyaansetaalkundige teorieë (soos transformasionele grammatika), waar die teoretiese onderbou nie strook met die tipe korpuslinguistiek waarop hierdie soortmasjienleergebaseer is nie.[3]Van die vroegste masjienleeralgoritmes soos beslissingsbome het stelsels geproduseer met harde "if-then" -reëls wat soortgelyk is aan bestaande handgeskrewe reëls. Woordsoortetikettering het begin om sogenaamde versteekte Markovmodelle te implementeer, en van toe af het navorsing in NLP algaande begin om meer op statistiese modelle te fokus, waar sagte, waarskynlikheidsgebaseerde besluite geneem word. Die besluite word gebaseer op gewigte met reële waardes wat met kenmerke in die invoerdata geassosieer word. Sogenaamde "kastaalmodelle" (taalmodellewat kasgeheue gebruik), waarop baie spraakherkenningstelsels berus, is voorbeelde van sulke statistiese modelle. Hierdie modelle is oor die algemeen meer robuust wanneer dit onbekende invoer ontvang, veral invoer wat foute bevat (wat baie dikwels die geval is met data van die regte wêreld). Die resultate van die modelle is oor die algemeen ook meer betroubaar wanneer dit by 'n groter stelsel wat veelvoudige subtake bevat, geïntegreer word.
Heelwat van die noemenswaardige vroeë suksesse was in die veld vanmasjienvertaling,veral as gevolg van werk byIBM Researchwaar steeds meer ingewikkelde statistiese modelle ontwikkel is. Hierdie stelsels was daartoe in staat om uit bestaande veeltaligetekskorpora,ontwikkel deur dieKanadese Parlementen dieEuropese Unie,voordeel te trek. Hierdie bronne is geskep danksy wette wat die vertaling van alle regeringsverrigtinge na al die amptelike tale van die ooreenstemmende regeringstelsels vereis het. Die meeste ander stelsels het egter staatgemaak op korpora wat spesifiek ontwikkel is vir die take wat deur hierdie stelsels geïmplementeer is. Dit was (en is nog dikwels) beskou as ’n groot tekortkoming vir die suksesvolle gebruik van hierdie stelsels. As gevolg hiervan is daar baie navorsing gedoen in die implementering van metodes om op ’n meer effektiewe manier masjienleer toe te pas op beperkte hoeveelhede data.
Onlangse navorsing fokus al meer opongekontroleerdeensemi-gekontroleerde masjienleeralgoritmes.Sulke algoritmes is in staat om van data te leer wat nie handmatig met die gewenste antwoorde geannoteer is nie, of met behulp van ’n kombinasie van geannoteerde en ongeannoteerde data. Hierdie taak is oor die algemeen baie moeiliker asgekontroleerde leeralgoritmesen lei tipies tot minder akkurate resultate vir ’n gegewe stel invoerdata. Daar is egter ’n enorme aantal ongeannoteerde data beskikbaar (onder andere die heleWêreldwye web).
Verwysings
[wysig|wysig bron]- ↑Implementing an online help desk system based on conversational agentAuthors: Alisa Kongthon, Chatchawal Sangkeettrakarn, Sarawoot Kongyoung and Choochart Haruechaiyasak.
- ↑Hutchins, J. (2005)."The history of machine translation in a nutshell"(PDF).Geargiveer vanafdie oorspronklike(PDF)op 13 Julie 2019.Besoek op4 Junie2015.
- ↑Chomskyaanse taalkunde moedig die taalpraktisyn aan om sogenaamde “hoekgevalle” te ondersoek wat die grense van sy teoretiese modelle beklemtoon (soortgelyk aan patologiese verskynsels in wiskunde). Dit is meestal die resultaat van gedagte-eksperimente in plaas van die stelselmatige ondersoek van tipiese verskynsels wat in werklike data voorkom, soos wat die geval is in die korpuslinguistiek.
