Analytik und Überwachung

Eines der wichtigsten Merkmale der Kognition ist die Fähigkeit, die Qualität Ihrer GenAI-Agenten zu analysieren. Es muss zuverlässig und vertrauenswürdig sein, um hilfreich genug zu sein, um tatsächlich von Nutzen zu sein. Wenn Kommentatoren den Agenten verwenden und über das Feedback-System Feedback geben, können Sie die Ergebnisse in Ihrem Dashboard einsehen. Dies ist z. B. hilfreich, um zu verstehen, ob und wie sich der Agent im Laufe der Zeit verbessert hat und wie sich das Feedback verändert hat.

Sie können es auch verwenden, um zu verstehen, wie Benutzer normalerweise mit dem System interagieren und wie lange es dauert, bis eine Nachricht generiert wird, sodass Sie die Erfahrung Ihrer Endbenutzer besser verstehen können.

Es gibt verschiedene Metriken, die die Überwachung auf unterschiedliche Weise unterstützen:

• Feedback-Übersicht: visuelle Darstellung von positivem, negativem oder neutralem Feedback der letzten X Tage
• Feedback-Details: Filtert Feedback von und bis zu diesem Datum und bietet die Möglichkeit, direkt zu der Konversation zu springen, in der das Feedback gegeben wurde. Abgesehen davon kann der Benutzer die Feedback-Nachricht, die gegeben wurde, und den Header der Konversation sehen
• Reaktionszeit: visuelle Darstellung der Antwortzeiten, gruppierter Nachrichten und gezählter Anzahl von Nachrichten alle 0,5 s
• Anzahl der Nachrichten: visuelle Darstellung der Anzahl der Nachrichten in Bar oder Donut, Anzeige der Konversationsverteilung nach Nachrichtenanzahl (jederzeit)

‍