Eesti Keele Instituut (EKI) testis erinevaid tehisintellekti mudeleid. Uuringus vaadati, kas mudelid suudavad ära tunda Venemaa propagandat. Tulemused näitasid, et mõned mudelid on sellele vastuvõtlikud.
Uuringus selgus, et kui kasutaja küsib
laetud küsimus
e, hakkavad paljud mudelid kordama Kremli jutupunkte. Mõned mudelid teevad seda kaks korda sagedamini. Testid tehti eesti, inglise ja vene keeles. Tippmudelid pidasid paremini vastu, odavamad mudelid olid nõrgemad.
laetud küsimus
Tõlge fraasile: laetud küsimus
EN
loaded question
EKI teadlane Krister Kruusmaa ütles, et
avatud mudelid
on probleemiks. Paljud asutused kasutavad neid, sest nad ei saa kasutada pilveteenuseid. Kuid need mudelid ei vasta alati Eesti vajadustele.
avatud mudelid
Tõlge fraasile: avatud mudelid
EN
open models
Testis osalesid erinevad mudelid. Parimad tulemused olid Anthropicu mudelitel. Google'i Gemini mudelid olid ootuspärast nõrgemad. Vanemad mudelid nagu GPT-3.5 ja GPT-4o Mini olid kõige halvemad.
Vene keeles olid mudelid propagandale vastuvõtlikumad. Kruusmaa arvab, et põhjuseks võib olla kallutatud andmete rohkus vene keeles. Parimad mudelid tegid vene keeles vähe vigu, nõrgemad mudelid kuni 15% rohkem.
Kruusmaa rääkis, et Venemaa teeb palju tööd, et kallutada tehisintellekti mudeleid. Nad loovad sisu, mis on mõeldud robotitele, mitte inimestele. Kuid hea uudis on see, et
probleemi saab lahendada
.
probleemi saab lahendada
Tõlge fraasile: probleemi saab lahendada
EN
the problem can be solved
Lisaks ohutusele testis EKI ka mudelite
eesti keele oskus
t. Tulemused olid ebaühtlased. Mõned uued mudelid olid halvemad kui vanemad. Kruusmaa ütles, et eesti keelele ei pöörata piisavalt tähelepanu.
eesti keele oskus
Tõlge fraasile: eesti keele oskus
EN
Estonian language proficiency
EKI on loonud veebilehe, kus saab vaadata mudelite tulemusi. See aitab kasutajatel teha paremaid valikuid. Uusi mudeleid testitakse pidevalt ja tulemused uuenevad.