Haridus- ja noorteamet (harno) on rääkinud Tallinna Ülikooli teadlastega. Nad uurivad, kas emakeele eksami töid saaks tulevikus hinnata
tehisaru abil
. Teadlased on juba teinud uuringu, mis näitas, et keelemudelid annavad eksamile sarnaseid hindeid kui inimesed.
tehisaru abil
Tõlge fraasile: tehisaru abil
EN
with the help of artificial intelligence
Merilin Aruvee on Tallinna Ülikooli lektor. Ta on osalenud 9. klassi e-eksamite katsetustes. Koos teaduriga Katarin Leppikuga töötas Aruvee välja
uued hindamiskriteeriumid
. Nad küsivad: kas saaks eksamitööd hinnata
tehisaru abil
?
uued hindamiskriteeriumid
Tõlge fraasile: uued hindamiskriteeriumid
EN
new assessment criteria
tehisaru abil
Tõlge fraasile: tehisaru abil
EN
with the help of artificial intelligence
Teadlased uurisid, kuidas eksamitööd hinnata. Nad tegid koostööd harno hindajatega. Hindajad olid
kogenud emakeele õpetajad
. Nad proovisid hinnata eksamitöid uute kriteeriumide järgi. Teadlased kohendasid oma mudelit vastavalt õpetajate soovitustele.
kogenud emakeele õpetajad
Tõlge fraasile: kogenud emakeele õpetajad
EN
experienced native language teachers
Inspiratsiooni saadi Kais Allkivilt, kes töötab TLÜ digitehnoloogiate instituudis. Ta on uurinud, kuidas
masinõpe aitab hindada
eesti keele oskust.
masinõpe aitab hindada
Tõlge fraasile: masinõpe aitab hindada
EN
machine learning helps to evaluate
Teadlased tegid harnoga lepingu. Nad said ligipääsu 2024. ja 2025. aasta katseeksami töödele. Need tööd olid kodeeritud ja anonüümsed. Teadlased võisid näha ainult teksti ja hindajate hindeid.
Uuringu tulemusel leidsid teadlased, et keelemudelid annavad sarnaseid hindeid kui inimesed. Aruvee ütleb, et mudelite hinded ei erine palju inimeste hinnetest. Tehisaru jääb 60% juhtudest samadesse piiridesse, kus inimesed varieeruvad.
Tehisarud on kasulikud alusteksti kasutamise hindamisel. Alustekst on tekst, mida õpilane kasutab oma kirjutamises. Masin saab võrrelda alusteksti ja õpilase teksti. Masin näitab, millised laused on alustekstist kopeeritud.
Aruvee ütleb, et inimesed on vajalikud hindamisel. Näiteks
teksti sissejuhatus ja lõpetus
nõuavad inimese hinnangut. Inimene hindab, kas tekst tundub sisuline ja mõttekas.
teksti sissejuhatus ja lõpetus
Tõlge fraasile: teksti sissejuhatus ja lõpetus
EN
introduction and conclusion of the text
Aruvee ütleb, et keelemudelid oskavad hinnata ka eesti keeles kirjutatud tekste. See oli teadlastele üllatus. Keelmudelid kasutavad tavaliselt internetti tekste, aga eesti keeles kirjutatud tekstid on erinevad.
Tehisaru ei saa teha lõplikku otsust eksami tööde hindamisel.
Euroopa Liidu direktiivid
ja
hea tava
ei luba seda.
Euroopa Liidu direktiivid
Tõlge fraasile: Euroopa Liidu direktiivid
EN
European Union directives
hea tava
Tõlge fraasile: hea tava
EN
good practice
Veebruaris tutvustavad teadlased harnole oma uuringu tulemusi. Harno pressiesindaja ütleb, et nad ei võta veel uuringu kohta seisukohta.
Aruvee ütleb, et õpilased vajavad rohkem harjutamist
alusteksti kasutamisel
. Selle jaoks on vaja välja töötata õppematerjale, mis aitada õpilastel paremini kirjutada.
alusteksti kasutamisel
Tõlge fraasile: alusteksti kasutamisel
EN
using source text