Zum Inhalt springen

Leitfaden

Antworten des KI-Assistenten prüfen und Lücken schließen

KI-Funktionen · 4 Min. Lesezeit

Die Trefferprotokolle zeigen, was Mitglieder den KI-Assistenten (KI-Copilot) deiner Community fragen und wie gut er geantwortet hat. Unter Admin → KI-Copilot → Trefferprotokolle prüfst du Antworten und ihre Quellen, findest Fragen, mit denen der Assistent Probleme hat, und fügst die fehlenden Antworten deiner Wissensdatenbank hinzu.

Wer kann das tun: Inhaber und Administratoren. · Wo: Web (Admin-Konsole). · Tarif: Erfordert einen Plattform-Tarif, der den KI-Copilot enthält.

Was die Trefferprotokolle des KI-Assistenten erfassen

Gehe zu Admin → KI-Copilot → Trefferprotokolle. Die Seite heißt Fragen-Protokolle und hat zwei Tabs: Aktuelle Fragen und Inhaltslücken.

Aktuelle Fragen listet jede Frage auf, die Mitglieder dem KI-Assistenten stellen:

Spalte Was sie zeigt
Anfrage Die Frage des Mitglieds. Darunter erscheint ein Fehlercode, wenn der Assistent nicht antworten konnte
Konfidenz Hoch, Mittel oder Niedrig
Quelle Woher die Antwort stammt: KB (Wissensdatenbank), Community oder Hybrid
Modus Suche per Stichwort oder Semantisch
Nachprüfung Das Ergebnis der abschließenden Prüfung der Antwort: passed, failed oder rejected_low_confidence
Abdeckung Wie viel der Antwort durch ihre Quellennachweise belegt ist, von 0 bis 1
L1 / L2 Wie viele Treffer in der Wissensdatenbank (L1) und in Community-Beiträgen (L2) gefunden wurden
Latenz und Zeit Wie lange die Antwort gedauert hat und wann die Frage gestellt wurde

Die Trefferprotokolle zeigen nicht, welches Mitglied eine Frage gestellt hat. KI-Schreibwerkzeuge und KI-Kursgliederungen werden hier nicht protokolliert.

Aktuelle Fragen an den KI-Assistenten filtern

Grenze Aktuelle Fragen mit den Filtern über der Tabelle ein:

  • Quellbereich: KB, Community oder Hybrid.
  • Abrufmodus: Stichwort oder Semantisch.
  • Nachprüfung: zum Beispiel rejected_low_confidence, um Antworten zu finden, die zurückgehalten wurden, weil die Belege schwach waren.

Klicke auf Filter zurücksetzen, um die Filter zurückzusetzen, und auf Aktualisieren, um neue Fragen zu laden.

Details einer KI-Antwort prüfen

Klicke auf eine Frage, um Fragedetails zu öffnen. Dort siehst du die Werte für Konfidenz und Abdeckung und dann:

  • Antwort: die vollständige Antwort, die das Mitglied erhalten hat.
  • Quellennachweise: die unter der Antwort aufgeführten Quellen, jeweils mit einem Auszug.
  • Abgerufene Fragmente: alles, was der KI-Assistent bei der Suche gefunden hat, einschließlich Treffern, die er nicht zitiert hat. Jedes Fragment hat eine Punktzahl, die Fragmente nur untereinander einstuft; sie ist kein Prozentwert.

Wenn eine gute Quelle abgerufen, aber nicht zitiert wurde, oder der falsche Beitrag an erster Stelle steht, passe deine Einstellungen für Community-Inhalte an. Siehe Festlegen, welche Spaces der KI-Assistent durchsuchen kann.

Inhaltslücken mit Frage-Antwort-Einträgen schließen

Der Tab Inhaltslücken gruppiert Fragen, die der KI-Assistent mit niedriger Konfidenz beantwortet hat, damit du siehst, welche Themen deine Quellen nicht abdecken. Jede Zeile zeigt die Frage, wie oft sie gestellt wurde (Anzahl), die Ø Konfidenz, die Hauptquelle und wann sie Zuletzt gesehen wurde.

So fügst du eine Antwort hinzu:

  1. Klicke neben der Frage auf Zur Wissensbasis hinzufügen. Mateflow erstellt für dich eine Frage-Antwort-Wissensquelle, falls du noch keine hast.
  2. Prüfe in Frage zur Wissensbasis hinzufügen die Frage und schreibe die Antwort. Markdown funktioniert. Um mit einem Entwurf zu beginnen, klicke auf Mit KI entwerfen und prüfe ihn dann sorgfältig.
  3. Füge optional Alternative Formulierungen hinzu, eine pro Zeile.
  4. Klicke auf Zur Wissensbasis hinzufügen.

Der Eintrag wird sofort indiziert, und die Lücke wird als gelöst markiert und verschwindet aus der Liste. Um eine Lücke zu entfernen, die du nicht beantworten möchtest, klicke auf Verwerfen.

Weitere Wege, KI-Antworten zu verbessern

Frage-Antwort-Einträge geben exakte Antworten auf einzelne Fragen. Für größere Lücken:

Mitglieder können KI-Antworten nicht bewerten. Konfidenz, Nachprüfung und Inhaltslücken sind daher die wichtigsten Signale für die Qualität der Antworten. Nachdem du Inhalte hinzugefügt hast, prüfe Aktuelle Fragen erneut, um zu sehen, ob sich die Konfidenz verbessert.

Verwandte Artikel

War dieser Leitfaden hilfreich?

Zurück zu den Leitfäden

Sie finden nicht, was Sie brauchen?

Wenn Sie Mitglied einer Community sind, helfen Ihnen deren Admins weiter. Wenn Sie eine Community auf Mateflow aufbauen oder betreiben, hilft Ihnen unser Team.

Kostenlos testen