Analysieren der autonomen Agent-Leistung

Die Seite Analysen in Copilot Studio bietet einen aggregierten Einblick in den Gesamtzustand Ihres Agents mit Ereignistriggern über mehrere Analysesitzungen. Auf der Seite werden außerdem folgende Bereiche angezeigt: Übersicht, der allgemeine KPI-Metriken (Key Performance Indicator) für Ihren Agent bereitstellt, Einsparungen, der Zeit- und Kosteneinsparungen analysiert, die auf Ihren Agent oder die Tools Ihres Agents zurückzuführen sind, sowie Zusammenfassung, der wichtige analytische Einblicke in die Leistung Ihres Agents bietet.

Weitere Informationen:

• Informationen zu den Bereichen Zusammenfassung und Übersicht finden Sie unter Übersicht über die Analyse
• Informationen zum Bereich Einsparungen finden Sie unter Analysieren der Zeit- und Kosteneinsparungen für Agents.

Es gibt vier Kernbereiche, auf die Sie sich bei der Überprüfung und Verbesserung der Leistung autonomer Agents konzentrieren sollten:

• Ausführungsergebnisse: Wenn Sie das Endergebnis einer Sitzung kennen, das bei einem Trigger begann, können Sie erkennen, wo Ihr Agent erfolgreich ist und wo er verbessert werden muss.
• Auslösernutzung: Wenn Sie sehen, welche Trigger wie oft verwendet werden, können Sie besser verstehen, was Ihr Agent tut und warum.
• Toolverwendung: Informationen dazu, wie oft Tools verwendet werden und wie oft sie erfolgreich sind, können Ihnen dabei helfen, zu verstehen, ob diese Tools für Benutzer nützlich sind.
• Wissensquellenverwendung: Erfahren Sie, wie oft einzelne Wissensquellen verwendet werden und wie oft der Agent Fehler zurückgegeben hat.

Um den Zeitraum zu ändern, wählen Sie das Dropdown-Menü für den Bereich oben auf der Seite Analysen aus. Sie können Analysen für Sitzungen anzeigen, die in den letzten 90 Tagen stattgefunden haben.

Ausführungsergebnisse

Im Abschnitt Ausführungsergebnisse wird ein Diagramm angezeigt, in dem die Art des Ergebnisses für jede Sitzung verfolgt wird.

Um Ausführungsergebnisdaten herunterzuladen (Daten im Diagramm visualisiert), wählen Sie das Menüsymbol und dann CSV herunterladen aus.

Sie können auch eine Aufschlüsselung der Sitzungsdauer anzeigen. Wählen Sie im Diagramm Details anzeigen unter Ausführungsergebnisse aus . Ein Seitenbereich wird mit der durchschnittlichen Dauer für erfolgreiche Ausführungen und fehlgeschlagenen Sitzungen geöffnet. Er gibt an, wie sich die Dauer der Sitzungen im Laufe der Zeit geändert hat.

Lange Sitzungen können zu Verzögerungen in Workflows führen, zu denen Ihr Agent gehört. Sie können die Geschwindigkeit Ihres Agents verbessern, indem Sie spezifischere Anweisungen auf Trigger- oder Agent-Ebene bereitstellen.

Trigger verwenden

Der Abschnitt Trigger-Verwendung zeigt ein Diagramm und Metriken an, die verfolgen, wie oft jeder Trigger eine Sitzung initiiert hat. Das Diagramm zeigt die Änderung der Triggerverwendung im Zeitverlauf.

Wählen Sie Details anzeigen aus , um eine Aufschlüsselung aller im ausgewählten Zeitraum verwendeten Trigger, der häufigsten Ereignisse, die eine Ausführung ausgelöst haben, und der Ereignisse, die zu den meisten fehlgeschlagenen Ausführungen geführt haben, anzuzeigen.

Sie können diese Informationen nutzen, um bestimmte Ausführungen für Verbesserungen anzugehen und zu verstehen, auf welche Art von Ereignissen Ihre Agents am meisten reagieren.

Toolverwendung

Der Abschnitt Toolnutzung zeigt ein Diagramm und Metriken an, mit denen nachverfolgt wird, wie oft Ihre Tools im Laufe der Zeit gestartet werden und wie oft Ihr Agent diese Tools erfolgreich verwendet hat. Außerdem werden Trendindikatoren für die Häufigkeit der Verwendung der einzelnen Tools durch den Agent und der Prozentsatz der aufgerufenen Tools angezeigt, die erfolgreich verwendet werden.

Die Grafik zeigt die fünf meistgenutzten Tools im oben auf der Seite Analysen definierten Zeitraum an.

Bewegen Sie in der Legende unterhalb des Diagramms den Mauszeiger über eines der Tools, um dieses Tool im Diagramm hervorzuheben.

Wenn Sie einen Seitenbereich mit einer Liste aller Tools öffnen möchten, die in dem angegebenen Zeitraum verwendet wurden, zusammen mit Trendindikatoren, wählen Sie im Diagramm Details anzeigen aus. Im Bereich Toolnutzung können Sie Berechnungen des Prozentsatzes der für jedes Tool verwendeten Fragen anzeigen. Wenn Ihr Agent über untergeordnete Agents verfügt, können Sie festlegen, dass Berechnungen sowohl für den Haupt-Agent als auch für untergeordnete Agents angezeigt werden sollen (Alle) oder nur für den Haupt-Agent oder nur für den Untergeordneten Agent.

Wissensquelle nutzen

Der Abschnitt Wissensquellenverwendung zeigt ein Diagramm und Metriken, in denen nachverfolgt wird, wie oft Ihre Wissensquellen von Ihrem Agent verwendet werden. Außerdem werden Trendindikatoren für die Häufigkeit der Verwendung der Quellen und die Anzahl der generierten Fehler angezeigt.

Das Diagramm zeigt die fünf wichtigsten Wissensquellen an, die in dem oben auf der Seite Analysen definierten Datumsbereich verwendet wurden.

Bewegen Sie in der Legende unterhalb des Diagramms den Mauszeiger über eine der Wissensquellen, um diese Wissensquelle im Diagramm hervorzuheben.

Wählen Sie Details anzeigen aus, um einen Seitenbereich mit der Nutzung von Wissensquellen und Fehlerraten für den ausgewählten Zeitraum zu öffnen. Anhand dieser Diagramme können Sie ermitteln, welche Wissensquellen gut geeignet sind, um Benutzern zu helfen, und welche für Verbesserungen in Betracht gezogen werden sollten.

Wählen Sie im Seitenbereich Alle aus, um Metriken für den Haupt-Agent und die untergeordneten Agents anzuzeigen, Haupt-Agent für Metriken nur für den Haupt-Agent oder Untergeordneter Agent für Metriken nur für untergeordnete Agents.

• Alle Quellen zeigt den Prozentsatz der Sitzungen an, in denen die einzelnen Wissensquellen verwendet werden, auf die der Agent Zugriff hat.
• Fehler zeigt den Prozentsatz der Sitzungen, bei denen die Verwendung der einzelnen Wissensquellentypen (z. B. SharePoint) zu einem Fehler geführt hat.

Wenn Sie unter Alle Quellen weitere Informationen auf der Ebene einer der aufgelisteten Wissensquellen anzeigen möchten, wählen Sie eine einzelne Quelle aus. Die QuickInfo enthält folgende Elemente:

• Die Gesamtzahl der Fragen, die auf diese Wissensquelle verwiesen haben, sowie die Anzahl der Reaktionen mit Daumen nach oben und Daumen nach unten.
• Ein gestapeltes Balkendiagramm mit der Aufschlüsselung der Qualität der relativen Antwortgewichtungen für Fragen, die auf diese Wissensquelle verweisen. Bewegen Sie den Mauszeiger über ein Segment im Balkendiagramm, um den Wert der relativen Gewichtung dieses Segments und die Anzahl der Fragen anzuzeigen, die zur Ermittlung dieses Wertes herangezogen wurden.