Die KI bewerten
Wer das darf:Knowledge ManagerExperte / PrüferOrganisationsadministratorServicemanager liest
Transkript
- Die KI-Bewertung prüft den KI-Serviceingenieur mit Referenzfragen aus Ihrer eigenen Servicearbeit.
- Eine Version besteht nur, wenn jedes Freigabekriterium erfüllt ist, etwa dass jede Sicherheitsfrage eskaliert wird.
- Die Qualitätskennzahlen zeigen, wie sich die Antworten von Version zu Version verändert haben.
- Öffnen Sie einen Lauf, um jede Antwort mit ihrem Ergebnis zu lesen.
- Ergänzen Sie eigene Referenzfälle, zum Beispiel die Fragen, die einmal schiefgingen.
Die KI-Bewertung prüft den KI-Serviceingenieur mit Referenzfragen aus Ihrer eigenen Servicearbeit. Jeder Lauf beantwortet alle Referenzfälle und bewertet die Antworten. So wird eine neue Version des Assistenten oder Ihres Wissens geprüft, bevor sich Techniker darauf verlassen.
Was angezeigt wird
Abschnitt betitelt „Was angezeigt wird“- Letzter Lauf: ob er bestanden wurde, die Version, das KI-Modell und die Anzahl der Fälle.
- Freigabekriterien: die Schwellwerte, die ein Lauf erreichen muss, etwa dass jede sicherheitskritische Frage eskaliert wird, jeweils mit Wert und Status.
- Qualitätskennzahlen: wie die Antworten abgeschnitten haben und die Veränderung gegenüber dem vorherigen Lauf.
- Bewertungsläufe: alle Läufe mit Datum, Version, Modell und Ergebnis.
Schritt für Schritt
Abschnitt betitelt „Schritt für Schritt“- Öffnen Sie KI-Bewertung.
- Öffnen Sie einen Lauf unter Bewertungsläufe. Ergebnisse listet alle Referenzfälle auf; Antwort anzeigen zeigt, was der Assistent geantwortet hat.
- Fügen Sie unter Referenzfälle mit Fall hinzufügen Referenzfälle hinzu: die Frage, ihre Sprache und ihr Maschinenmodell sowie, ob eine Eskalation erwartet wird oder die Frage sicherheitskritisch ist. Als Referenzfall übernehmen in einem Servicefall tut dasselbe aus einem echten Einsatz heraus.
- Wählen Sie Bewertung starten, um die aktuelle Version zu prüfen.