Studo publikigita en Nature Neuroscience montras, ke homa lingva antaŭvido dependas de pli grandaj lingvaj unuoj ol simpla vorto-post-vorto prognozo. La aŭtoroj konkludas, ke homoj anticipas vortojn konsiderante gramatikajn konstituentojn anstataŭ nur la sekvan vorton. David Poeppel, kunaŭtoro, substrekas la diferencon inter la cerba strategio kaj la trejnitaj celoj de grandaj lingvaj modeloj.
La esploro inkluzivis plurajn eksperimentojn kun parolantoj de mandarena ĉina kaj uzis magnetoencefalografion (MEG) por mezuri cerban aktivecon. Krome okazis Cloze-testoj, en kiuj partoprenantoj plenigis malplenaĵojn en tekstoj. La teamo ankaŭ analizis cerbajn datumojn de pacientoj eksponitaj al la angla por kontroli translingvan validon.
Por taksi vortarajn antaŭvideblojn, la sciencistoj uzis grandajn lingvajn modelojn por kalkuli entropion (kiun ili uzis por mezuri kiom multaj eblaj sekvaj vortoj estas) kaj surprizon (kiu montras kiom neatendita estas vorto). Ili komparis la modelajn antaŭdirojn kun cerbaj respondoj kaj trovis, ke la cerbo montras sentemon al konstituentostrukturo, ne nur al sekva-vorta probableco.
Malfacilaj vortoj
- konstituento — lingva elemento aŭ grupo en frazokonstituentojn, konstituentostrukturo
- entropio — mezuro de kiom multaj eblaj sekvojentropion
- surprizo — mezuro de kiom neatendita estas vortosurprizon
- magnetoencefalografio — mezurado de cerba aktiveco per aparatomagnetoencefalografion
- Cloze-testo — testo kun malplenaj lokoj por plenigiCloze-testoj
- antaŭvideblo — kiom facile oni povas antaŭdiri vortonantaŭvideblojn
- anticipi — atendi aŭ antaŭvidi ion antaŭ ĝia aperoanticipas
- sentemo — kapablo reagi al specifaj signaloj aŭ ŝanĝojsentemon
Konsilo: ŝovu la musmontrilon, fokusu aŭ tuŝu la reliefigitajn vortojn en la artikolo por vidi rapidajn difinojn dum legado aŭ aŭskultado.
Diskutaj demandoj
- Ĉu vi pensas grandaj lingvaj modeloj povas plene imiti la cerban strategion? Kial aŭ kial ne?
- Kiel vi uzus Cloze-testojn por studi antaŭvidon en via lingvo?
- Kion por vi signifas, ke la cerbo uzas konstituentojn anstataŭ nur la sekvan vorton?
Rilataj artikoloj
7amleh: EU-reguloj pri artefarita inteligenteco ne regas eksportojn
La organizaĵo 7amleh trovas, ke eŭropaj reguloj pri artefarita inteligenteco ne protektas homajn rajtojn kiam teknologio estas eksportata al Okcidenta Azio kaj Norda Afriko. La raporto priskribas tri kanalojn de influo kaj postulas leĝajn ŝanĝojn.
Studado: AI ne faciligas verkadon por studentoj
Nova studo sekvis studentojn en kurso pri 'AI and Writing' kaj trovis, ke uzi generivan AI ofte plialtigas la kognajn postulojn de verkado anstataŭ malpliigi ilin. Esploristoj diras, ke studentoj bezonos teknikajn kapablojn kaj pli profundan komprenon pri verkado.