Automatické vyhodnocení kvality modelu

Automatic model evaluation

Automatické vyhodnocení používá předem určené metriky nebo testy k porovnání výstupů modelu bez ručního posouzení každého případu.

Může měřit přesnost, formát, shodu s referencí nebo bezpečnostní vlastnosti. Automatizace umožňuje rychle opakovat testy při změně modelu, ale metrika nemusí zachytit všechny uživatelské potřeby. Výsledek se ověřuje na reprezentativních příkladech a doplňuje lidským přezkumem rizikových oblastí.