Slovník IT, managementu a projektového řízení
Automatické hodnocení odpovědi jazykovým modelem
Autorater model evaluation
Autorater je model využitý k automatickému posouzení kvality výstupu jiného modelu podle zadaných kritérií.
Hodnoticí model může porovnávat odpověď s rubrikou, hledat chyby nebo řadit varianty. Výsledek podléhá vlastním omezením, například zaujatosti vůči délce, stylu nebo konkrétnímu modelu. Spolehlivost se ověřuje na lidsky označené sadě a u důležitých rozhodnutí se automatické skóre nepoužívá jako jediný důkaz.