Ocena AI
Kto może to zrobić:Menedżer wiedzyEkspert / weryfikatorAdministrator organizacjiOdczyt: kierownik serwisu
Transkrypcja
- Ocena AI sprawdza Inżyniera serwisowego AI za pomocą pytań referencyjnych z Państwa pracy serwisowej.
- Wersja przechodzi tylko wtedy, gdy spełnia wszystkie kryteria wydania, na przykład eskaluje każde pytanie o bezpieczeństwo.
- Wskaźniki jakości pokazują, jak odpowiedzi zmieniały się z wersji na wersję.
- Proszę otworzyć przebieg, aby przeczytać każdą odpowiedź z jej wynikiem.
- Proszę dodać własne przypadki referencyjne, na przykład pytania, przy których kiedyś coś poszło nie tak.
Strona Ocena AI sprawdza Inżyniera serwisowego AI za pomocą pytań referencyjnych z pracy serwisowej organizacji. Każdy przebieg odpowiada na wszystkie przypadki referencyjne i ocenia odpowiedzi, dzięki czemu nowa wersja asystenta lub wiedzy zostaje sprawdzona, zanim technicy zaczną na niej polegać.
Co pokazuje
Dział zatytułowany „Co pokazuje”- Ostatni przebieg: czy został zaliczony, wersja, model AI i liczba przypadków.
- Kryteria wydania: progi, które przebieg musi spełnić, np. eskalowanie każdego pytania krytycznego dla bezpieczeństwa – każde kryterium z wartością i statusem.
- Wskaźniki jakości: jak oceniono odpowiedzi oraz zmiana względem poprzedniego przebiegu.
- Przebiegi oceny: wszystkie przebiegi z datą, wersją, modelem i wynikiem.
Krok po kroku
Dział zatytułowany „Krok po kroku”- Otworzyć stronę Ocena AI.
- Otworzyć przebieg w karcie Przebiegi oceny. Karta Wyniki wymienia wszystkie przypadki referencyjne; przycisk Pokaż odpowiedź pokazuje, co odpowiedział asystent.
- W karcie Przypadki referencyjne dodawać przypadki przyciskiem Dodaj przypadek: pytanie, jego język i model maszyny oraz informację, czy oczekiwana jest eskalacja lub czy pytanie jest krytyczne dla bezpieczeństwa. Przycisk Dodaj jako przypadek referencyjny w sprawie serwisowej robi to samo na podstawie rzeczywistego zlecenia.
- Wybrać przycisk Uruchom ocenę, aby sprawdzić bieżącą wersję.