Antwortqualität mit Tests prüfen
Öffnen Sie mit administrativen Chat-Rechten Einstellungen → Administration → Einblicke → Tests. Zusätzliche Evaluationsansichten erscheinen nur bei entsprechender Freischaltung.
Einen Test vorbereiten
Abschnitt betitelt „Einen Test vorbereiten“Erstellen oder wählen Sie eine Fragensammlung. Verwenden Sie Fragen, die den tatsächlichen Anwendungsfall abbilden, und ergänzen Sie passende Referenzantworten, wenn die Sammlung dies anbietet. Halten Sie die Ausgangssituation für Vergleiche gleich.
Lauf ausführen
Abschnitt betitelt „Lauf ausführen“Wählen Sie den angebotenen Agenten und die angebotenen Bewertungsmodelle oder Optionen. Starten Sie den Lauf und warten Sie auf seinen Abschluss. Öffnen Sie die Ergebnisse und prüfen Sie einzelne Antworten, Fehler und vorhandene Bewertungen.
Ergebnisse beurteilen
Abschnitt betitelt „Ergebnisse beurteilen“Vergleichen Sie nur Läufe mit passender Sammlung und Konfiguration. Ein Gesamtscore ersetzt nicht die Prüfung von Quellen, fachlicher Richtigkeit und unerwünschten Aktionen. Fragen ohne Referenzantwort können nicht dieselbe referenzbasierte Bewertung liefern wie Fragen mit Referenzantwort.
Änderungen am Agenten oder seinen Quellen können das Ergebnis verändern. Notieren Sie deshalb Konfiguration und Testzeitpunkt für die interne Qualitätsbewertung.