Hodnoťte AI
Kdo to smí dělat:Manažer znalostíExpert / ověřovatelSprávce organizaceČtení: vedoucí servisu
Přepis
- Hodnocení AI testuje AI servisního inženýra referenčními dotazy z vaší vlastní servisní praxe.
- Verze projde, jen když platí všechna kritéria pro vydání, například eskalace každého bezpečnostního dotazu.
- Ukazatele kvality zachycují, jak se odpovědi měnily od verze k verzi.
- Otevřete běh a přečtěte si každou odpověď s jejím výsledkem.
- Přidejte vlastní referenční případy, například dotazy, které kdysi dopadly špatně.
Hodnocení AI testuje AI servisního inženýra referenčními dotazy z vaší vlastní servisní praxe. Každý běh odpoví na všechny referenční případy a odpovědi ohodnotí, takže nová verze asistenta nebo vašich znalostí je prověřena dřív, než se na ni technici spolehnou.
Co ukazuje
Sekce “Co ukazuje”- Poslední běh: zda prošel, verze, model AI a počet případů.
- Kritéria pro vydání: prahové hodnoty, které musí běh splnit, například eskalace každého bezpečnostně kritického dotazu; u každého kritéria je uvedena hodnota a stav.
- Ukazatele kvality: jak byly odpovědi ohodnoceny a změna oproti předchozímu běhu.
- Běhy hodnocení: všechny běhy s datem, verzí, modelem a výsledkem.
Krok za krokem
Sekce “Krok za krokem”- Otevřete stránku Hodnocení AI.
- V části Běhy hodnocení otevřete běh. Výsledky uvádějí všechny referenční případy; Zobrazit odpověď ukáže, co asistent odpověděl.
- Referenční případy přidáte v části Referenční případy tlačítkem Přidat případ: dotaz, jeho jazyk a model stroje a to, zda se očekává eskalace nebo zda je dotaz bezpečnostně kritický. Totéž z reálné zakázky udělá Přidat mezi referenční případy u servisního případu.
- Zvolte Spustit hodnocení a otestujte aktuální verzi.