評估 AI
誰可以執行此操作：知識經理專家／驗證者組織管理員服務經理可檢視
逐字稿
- AI 評估會用取自您自身服務工作的基準問題，測試 AI 服務工程師。
- 只有通過所有發布關卡的版本才算合格，例如每個安全問題都要轉交專家。
- 品質分數顯示回答在各版本之間的變化。
- 開啟一次執行紀錄，閱讀每個回答及其結果。
- 新增您自己的基準案例，例如曾經答錯的問題。
AI 評估以取自您自身服務工作的基準問題來測試 AI 服務工程師。每次執行都會回答所有基準案例並為回答評分，讓助理或您知識的新版本，在技術人員依賴之前先經過檢驗。
- 最近一次執行：是否通過、版本、AI 模型與案例數。
- 發布關卡：每次執行必須達到的門檻，例如將每個安全關鍵問題都轉交專家，並列出各關卡的數值與狀態。
- 品質分數：回答的得分，以及與前一次執行相比的變化。
- 評估執行紀錄：每次執行及其日期、版本、模型與結果。
- 開啟 AI 評估。
- 從評估執行紀錄開啟一次執行。結果會列出每個基準案例；選擇顯示回答可查看助理的回答。
- 在基準案例中透過新增案例加入基準案例：輸入問題、其語言與機型，並標明是否預期轉交專家，或是否屬於安全關鍵。在服務案件上選擇加入基準案例，也能從實際的服務工作建立基準案例。
- 選擇執行評估以測試目前的版本。