Zum Inhalt springen
Dokumentation
Zum Portal

Antwortqualität mit Tests prüfen

Öffnen Sie mit administrativen Chat-Rechten Einstellungen → Administration → Einblicke → Tests. Zusätzliche Evaluationsansichten erscheinen nur bei entsprechender Freischaltung.

Erstellen oder wählen Sie eine Fragensammlung. Verwenden Sie Fragen, die den tatsächlichen Anwendungsfall abbilden, und ergänzen Sie passende Referenzantworten, wenn die Sammlung dies anbietet. Halten Sie die Ausgangssituation für Vergleiche gleich.

Wählen Sie den angebotenen Agenten und die angebotenen Bewertungsmodelle oder Optionen. Starten Sie den Lauf und warten Sie auf seinen Abschluss. Öffnen Sie die Ergebnisse und prüfen Sie einzelne Antworten, Fehler und vorhandene Bewertungen.

Vergleichen Sie nur Läufe mit passender Sammlung und Konfiguration. Ein Gesamtscore ersetzt nicht die Prüfung von Quellen, fachlicher Richtigkeit und unerwünschten Aktionen. Fragen ohne Referenzantwort können nicht dieselbe referenzbasierte Bewertung liefern wie Fragen mit Referenzantwort.

Änderungen am Agenten oder seinen Quellen können das Ergebnis verändern. Notieren Sie deshalb Konfiguration und Testzeitpunkt für die interne Qualitätsbewertung.