Bevezetés és üzemeltetés
Kiértékelés (evaluation)
A kiértékelés az AI-kimenet minőségének mérése rögzített tesztkészleten, hogy a változtatások hatása számokban legyen látható.
Angolul: Evaluation / Evals
Mit jelent: Kiértékelés (evaluation)?
Egy vállalati eval jellemzően 50–300 valós esetből áll, ismert helyes válasszal. Minden promptváltozás, modellcsere vagy adatfrissítés után ezen futtatunk.
Mérhető például a mezőszintű pontosság, a hivatkozás helyessége, a formátumhibák aránya és a válaszidő.
Miért számít ez a cégednek?
Eval nélkül nincs mit átvenni: a „jónak tűnik” nem szerződéses teljesítési feltétel. Ez a projekt legfontosabb átadandója.
Gyakori kérdések
Mit jelent a(z) Kiértékelés (evaluation)?
A kiértékelés az AI-kimenet minőségének mérése rögzített tesztkészleten, hogy a változtatások hatása számokban legyen látható.
Miért fontos a(z) Kiértékelés (evaluation) egy középvállalatnak?
Eval nélkül nincs mit átvenni: a „jónak tűnik” nem szerződéses teljesítési feltétel. Ez a projekt legfontosabb átadandója.