Partager via


Analyser les questions utilisateur par thème (aperçu)

[Cet article fait partie de la documentation en version préliminaire et peut faire l’objet de modifications.]

Les thèmes sont des regroupements de questions tirées du pool de questions utilisateur qui déclenchent des réponses génératives. Les thèmes regroupent les questions des utilisateurs en groupes intelligemment organisés, mais moins nombreux et plus faciles à gérer. Avec des thèmes, vous pouvez obtenir des analyses au niveau des catégories sur l'intention des clients, identifier des sujets fréquents et focaliser les efforts sur les zones nécessitant des améliorations. Vous pouvez ensuite explorer les questions individuelles d’un thème et surveiller les performances à ce niveau plus précis pour mieux comprendre les métriques au niveau du thème.

Important

Cet article contient la documentation sur Microsoft Copilot Studio en version préliminaire et peut faire l’objet de modifications.

Les fonctionnalités en préversion ne sont pas destinées à une utilisation en production et peuvent avoir des fonctionnalités restreintes. Ces fonctionnalités sont disponibles avant une publication officielle afin que vous puissiez y accéder en avant-première et fournir des commentaires.

Si vous créez un assistant prêt pour la production, consultez Vue d’ensemble de Microsoft Copilot Studio.

Proposition de valeur clé

La fonctionnalité Thèmes analyse automatiquement toutes les questions non classifiées qui ont déclenché des réponses d’IA générative au cours de la semaine dernière et suggère des thèmes basés sur cette analyse. Ce processus s’exécute chaque semaine. Entre les exécutions hebdomadaires de suggestion de thème , la fonctionnalité effectue une classification quotidienne de toutes les nouvelles questions qui déclenchent des réponses d’IA génératives, en ajoutant ces données aux métriques de thème. La liste thèmes suggérées est actualisée régulièrement afin que vos thèmes restent pertinents et reflètent les données utilisateur les plus récentes. Cette actualisation automatique vous permet de gagner du temps en procédant comme suit :

  • Évaluation continue de la pertinence du thème par rapport aux nouvelles données
  • Classification automatique des questions individuelles en thèmes
  • Automatisation de la récupération des données de métrique brutes pour chaque thème
  • Calcul des données de métrique agrégées pour chaque thème

Prerequisites

Pour optimiser la valeur de la fonctionnalité Thèmes, notamment en étant en mesure d’explorer les questions et réponses des composants de chaque thème :

Thèmes suggérés et questions classifiées

Copilot Studio suggère des thèmes basés sur des enregistrements de questions posées dans le passé récent. En personnalisant chaque thème suggéré en fonction de la structure de votre organisation et de la stratégie d’expérience client, vous pouvez obtenir un meilleur aperçu par le biais d’indicateurs de performance clés spécifiques au thème (KPI). Cette granularité plus approfondie facilite la localisation des agents qui sous-performent.

Les thèmes aident les décideurs à comprendre quelles questions les utilisateurs posent à l’agent et comment l’agent s’exécute. Lors de l’exécution initiale de l’analytique basée sur thème, Copilot Studio examine toutes les questions de la semaine dernière et suggère jusqu’à 10 thèmes qui regroupent les questions utilisateur basées sur des similitudes les unes avec les autres. Chaque thème inclut des métriques telles que le nombre total de questions, le taux de réponses et la réaction de l’utilisateur. Les données affichées dans la liste Thèmes sont ajustées en fonction de la période d’analytique sélectionnée.

Après la première exécution, Copilot Studio classifie les nouvelles questions sur les thèmes existants sur une base continue, quotidienne et génère une nouvelle liste de thèmes suggérés chaque semaine.

Note

  • Il doit y avoir au moins 50 questions avec des réponses génératives enregistrées au cours des sept derniers jours avant que Copilot Studio génère des thèmes suggérés.
  • Il est possible qu’une question qui déclenche une réponse d’IA générative soit classée dans plus d’un thème. Ce scénario peut devenir plus courant en mode d’orchestration générative , où la réponse d’un agent peut provenir de plusieurs sources différentes.
  • Toutes les questions qui restent non classifiées sont placées dans un thème non classé .
  • L’exécution des suggestions hebdomadaires peut prendre quelques minutes. Pendant ce temps, la section Thèmes n’est pas disponible pour une utilisation.

Liste thèmes

Par défaut, la liste Thèmes affiche les cinq (5) principaux thèmes, classés par nombre total de questions classées pour chaque thème. Sélectionnez Afficher tout pour développer la liste pour afficher tous les thèmes.

Avec les exécutions hebdomadaires automatiques de suggestions de thème et la classification quotidienne des questions, la fonctionnalité Thèmes évolue automatiquement et s’adapte aux changements de comportement de l’utilisateur.

Capture d’écran de la liste Thèmes sous l’onglet Analytique.

La liste Thèmes affiche les statistiques de chaque thème répertorié.

Colonne Descriptif
Nom Nom du thème.
Total des questions Nombre total de questions classées dans ce thème pour la période configurée.
Réponses aux questions Proportion des questions totales qui ont entraîné une réponse à la question de l’utilisateur.
Réactions Nombre brut de réactions positives (pouces vers le haut) et négatives (pouces vers le bas) aux questions classées sous chaque thème.

Note

Pourquoi y a-t-il des « questions sans réponse » dans mon thème lorsque toutes les questions classifiées déclenchent des réponses d’IA génératives ?

Par définition, seules les questions qui ont déclenché une réponse IA générative peuvent être classées dans un thème. Mais déclencher un appel aux réponses génératives n’est pas identique à avoir une réponse à une requête utilisateur.

Par exemple, il est courant qu’il y ait une rubrique d’amélioration conversationnelle connectée à une source de connaissances. Dans ce cas, si une intention n’est pas reconnue, cette rubrique peut être déclenchée, ce qui appelle la source de connaissances, même s’il n’y a pas de réponse à la question dans cette source de connaissances.

Approfondir un thème

Pour explorer les questions regroupées dans un thème, sélectionnez le thème dans la liste Thèmes . Lorsque vous approfondissez l'analyse, un panneau spécifique au thème sélectionné s’ouvre, affichant des métriques aux niveaux tant du thème que des questions individuelles.

Note

La liste des thèmes comprend :

  • Jusqu’aux 100 questions les plus récentes classées dans chaque thème.
  • Questions des 30 derniers jours, quelle que soit la période configurée. Si la période configurée est entièrement en dehors des 30 derniers jours, Copilot Studio affiche une notification indiquant que la liste n’est pas disponible.

Capture d’écran d’un volet d’exploration de thème.

Dans le volet d’exploration d’un thème, les métriques au niveau du thème sont affichées en premier.

Métrique au niveau du thème Descriptif
Total des questions Nombre total de questions (classées dans ce thème) qui ont déclenché des réponses d’IA génératives pour la période configurée.
Réponses aux questions Proportion des questions totales de ce thème qui ont entraîné une réponse à la question de l’utilisateur.
Questions sans réponse Proportion des questions totales de ce thème qui n’ont pas entraîné de réponse à la question de l’utilisateur.
Réactions Nombre brut de réactions positives (pouces vers le haut) et négatives (pouces vers le bas) issues des questions classées dans ce thème, telles qu’enregistrées par le mécanisme de commentaires.

Pour afficher une ventilation de la qualité de la réponse pour un échantillon de questions répondues et toutes les sources de connaissances référencées dans ce thème, sélectionnez Afficher plus.

Capture d’écran du graphique à barres empilées montrant les pondérations relatives de la qualité de réponse des questions échantillonnée pour un thème.

Dans le panneau Métriques de thème , pour afficher plus d’informations sur une valeur de qualité de réponse au niveau du thème, sous Qualité de la réponse, passez la souris sur un segment de barre individuel. L’info-bulle inclut la valeur de la pondération relative de ce segment et le nombre de questions échantillonné pour arriver à cette valeur.

Capture d’écran des pondérations relatives de la qualité de la réponse pour un thème donné, montrant l’info-bulle pour une valeur de qualité.

Pour afficher plus d’informations au niveau de l’une des sources de connaissances répertoriées, sous Utilisation de la source de connaissances, sélectionnez une source de connaissances individuelle. L’infobulle comprend :

  • Le nombre total de questions de ce thème qui faisaient référence à cette source de connaissances ainsi que le nombre de réactions de pouce levé et de pouce baissé .
  • Un graphique à barres empilées montrant la répartition de la qualité des pondérations relatives des réponses pour les questions faisant référence à cette source de connaissances dans le thème. Passez la souris sur n’importe quel segment du graphique à barres pour voir la valeur de la pondération relative de ce segment et le nombre de questions échantillonnées pour arriver à cette valeur.

Capture d’écran des pondérations relatives de la qualité de la réponse pour une source de connaissances donnée au sein d’un thème, montrant l’info-bulle pour une valeur de qualité.

Dans le panneau d’exploration d’un thème individuel, la section Questions de l’utilisateur répertorie toutes les questions qui ont déclenché des réponses d’IA générative au cours de la période configurée et qui ont été classées dans ce thème, et affiche les mesures par question . Les métriques au niveau des questions sont les suivantes :

Dimension ou métrique au niveau des questions Descriptif
Question (dimension) Question (qui a déclenché une réponse d’IA générative) classifiée sur ce thème.
Répondu? Réponse à la question de savoir si la requête de l’utilisateur a été répondue ou non. Les valeurs possibles sont Answered et Unanswered.
Qualité de réponse1 Réponse à la question de la qualité de la réponse à la requête utilisateur. Les valeurs possibles sont Poor et Good.
Réaction Deux paramètres, étant la métrique Pouces haut/Pouces bas booléen et un paramètre de commentaire textuel.
Source de connaissances Liste des sources de connaissances référencées par des virgules par cette question dans ce thème.

1 La qualité de la réponse n’est pas toujours disponible et s’affiche uniquement si la question a été échantillonnée dans le cadre d'une analyse de qualité.

Sélectionnez une question dans la liste pour afficher plus d’informations sur la question dans un panneau de détails de question . Ce panneau comprend les éléments suivants :

Paramètre détaillé au niveau de la question Descriptif
Horodatage Horodatage du dernier moment où la question a obtenu une réponse.
Requête de l’utilisateur La question posée.
Réponse Réponse de l’IA générative.
Pouces vers le haut/Pouces vers le bas Valeur de l’instance la plus récente de cette question pour le paramètre Pouce levé / Pouce baissé.
Commentaire Commentaire textuel supplémentaire facultatif, fourni par l’utilisateur, en plus de la réaction Pouce vers le haut / Pouce vers le bas .
Qualité de réponse1 Réponse à la question de la qualité de la réponse à la requête utilisateur. Les valeurs possibles sont Poor et Good.
Raison2 Dans le cas où la qualité de la réponse est Poor, ce paramètre explique pourquoi.

1 La qualité de la réponse n’est pas toujours disponible et s’affiche uniquement si la question a été échantillonnée dans le cadre d'une analyse de qualité.

2 Si la qualité de la réponse est Good ou si la question n’a pas été échantillonné, le paramètre Reason n’est affecté à aucune valeur.

Capture d’écran des détails des mesures au niveau de la question dans un thème.