Udostępnij przez


Analizowanie pytań użytkowników według motywu (wersja zapoznawcza)

[Ten artykuł stanowi wstępną wersję dokumentacji i może ulec zmianie.]

Motywy to grupy pytań pobranych z puli pytań użytkowników, które wyzwalają generowanie odpowiedzi. Tematy grupują powiązane pytania użytkowników w inteligentnie zorganizowane, ale mniej liczne i bardziej zarządzalne grupy. Motywy umożliwiają uzyskanie szczegółowych informacji na poziomie kategorii dotyczących intencji klientów, identyfikowanie częstych tematów i skupienie wysiłków na obszarach wymagających poprawy. Następnie możesz przejść do szczegółów poszczególnych pytań motywu i monitorować wydajność na tym bardziej szczegółowym poziomie, aby lepiej zrozumieć metryki na poziomie motywu.

Ważne

Ten artykuł zawiera dokumentację usługi Microsoft Copilot Studio w wersji zapoznawczej i może ulec zmianie.

Funkcje w wersji zapoznawczej nie są przeznaczone do użytku produkcyjnego i mogą mieć ograniczone funkcje. Te funkcje są udostępniane przed oficjalnym wydaniem, dzięki czemu można szybciej uzyskać do nich dostęp i przekazać opinie na ich temat.

Jeśli kompilowany jest agent gotowy do użycia w środowiskach produkcyjnych, zobacz temat Omówienie usługi Microsoft Copilot Studio (produkcja).

Propozycja kluczowej wartości

Funkcja Motywy automatycznie analizuje wszystkie niesklasyfikowane pytania, które wyzwalały generowanie odpowiedzi sztucznej inteligencji w ciągu ostatniego tygodnia i sugeruje motywy na podstawie tej analizy. Ten proces jest uruchamiany co tydzień. Między cotygodniowymi przebiegami sugestii motywu funkcja wykonuje codzienną klasyfikację wszelkich nowych pytań, które wyzwalają odpowiedzi generatywnej AI, dodając te dane do metryk motywu. Sugerowana lista motywów jest regularnie odświeżona, dzięki czemu motywy pozostają istotne i odzwierciedlają najnowsze dane użytkownika. To automatyczne odświeżanie pozwala zaoszczędzić czas, wykonując następujące działania:

  • Stale ocenianie istotności motywu względem nowych danych
  • Automatyczne klasyfikowanie poszczególnych pytań na motywy
  • Automatyzowanie pobierania danych metrycznych dla każdego motywu
  • Obliczanie zagregowanych danych metryk dla każdego motywu

Wymagania wstępne

Aby zoptymalizować wartość funkcji Motywy, w tym możliwość zgłębiania poziomu szczegółów poszczególnych pytań i odpowiedzi każdego motywu:

Sugerowane motywy i sklasyfikowane pytania

Copilot Studio sugeruje motywy oparte na zapisach pytań zadawanych w niedawnej przeszłości. Dostosowując każdy sugerowany motyw do struktury organizacji i strategii obsługi klienta, możesz uzyskać lepszy wgląd w kluczowe wskaźniki wydajności (KPI) specyficzne dla motywu. Ten bardziej szczegółowy poziom ułatwia znalezienie miejsc, w których agenci osiągają słabsze wyniki.

Motywy pomagają twórcom zrozumieć, jakie pytania użytkownicy zadają agentowi i jak działa agent. Na początkowym etapie analizy opartej na motywach, Copilot Studio analizuje wszystkie pytania z ostatniego tygodnia i sugeruje do 10 motywów, które grupować pytania użytkowników na podstawie podobieństw do siebie. Każdy motyw zawiera metryki, takie jak łączna liczba pytań, szybkość odpowiedzi i reakcja użytkownika. Wyświetlane dane na liście Motywy są dostosowywane na podstawie wybranego okresu analizy.

Po początkowym uruchomieniu Copilot Studio klasyfikuje nowe pytania do istniejących tematów na bieżąco, codziennie i generuje nową listę sugerowanych tematów co tydzień.

Uwaga / Notatka

  • Musi istnieć co najmniej 50 pytań z odpowiedziami generowanymi w ciągu ostatnich siedmiu dni, aby Copilot Studio mogło wygenerować sugerowane motywy.
  • Istnieje możliwość, że pytanie, które wyzwala odpowiedź generatywnej sztucznej inteligencji, zostanie sklasyfikowane w więcej niż jednym temacie. Ten scenariusz może stać się bardziej powszechny w trybie aranżacji generatywnej , w którym odpowiedź agenta może pochodzić z kilku różnych źródeł.
  • Wszelkie pytania, które pozostają niesklasyfikowane, są umieszczane w niesklasyfikowanym motywie.
  • Uruchomienie cotygodniowego procesu sugestii może potrwać kilka minut. W tym czasie sekcja Motywy jest niedostępna do użycia.

Lista Motywów

Domyślnie na liście Motywy wyświetlanych jest pięć (5) najpopularniejszych tematów, uszeregowanych według łącznej liczby pytań sklasyfikowanych dla każdego tematu. Wybierz pozycję Zobacz wszystko , aby rozwinąć listę, aby wyświetlić wszystkie motywy.

Dzięki automatycznym cotygodniowym przebiegom sugestii motywów i klasyfikacji codziennych pytań funkcja Motywy rozwija się automatycznie i dostosowuje się do zmian w zachowaniu użytkownika.

Zrzut ekranu przedstawiający listę Themes na karcie Analityka.

Na liście Motywy są wyświetlane metryki dla każdego wymienionego motywu.

Kolumna Description
Name Nazwa motywu.
Łączna liczba pytań Łączna liczba pytań sklasyfikowanych w tym motywie dla skonfigurowanego okresu.
Odpowiedzi na pytania Odsetek łącznych pytań , które spowodowały udzielenie odpowiedzi na pytanie użytkownika.
Reakcje Nieprzetworzona liczba pozytywnych (kciuków w górę) i negatywnych (kciuk w dół) reakcji z pytań sklasyfikowanych do każdego motywu.

Uwaga / Notatka

Dlaczego w moim temacie znajdują się pytania bez odpowiedzi, gdy wszystkie niejawne pytania wywołały generowanie odpowiedzi sztucznej inteligencji?

Z definicji można sklasyfikować do motywu tylko pytania, które wyzwoliły odpowiedź wygenerowaną przez sztuczną inteligencję. Wyzwalanie funkcji generowania odpowiedzi nie jest tym samym, co odpowiadanie na zapytanie użytkownika.

Na przykład często zdarza się, że istnieje temat zwiększający konwersację połączony ze źródłem wiedzy. W takim przypadku, jeśli intencja nie jest rozpoznawana, ten temat może zostać uruchomiony, co uruchamia źródło wiedzy, nawet jeśli to źródło wiedzy nie zawiera odpowiedzi na pytanie.

Zagłębienie się w analizę tematyki

Aby przejść do szczegółów pytań pogrupowanych w dowolny motyw, wybierz motyw z listy Motywy . Po przejściu do szczegółów, otwiera się panel dotyczący wybranego motywu, wyświetlając wskaźniki na poziomach motywu oraz poszczególnych pytań.

Uwaga / Notatka

Lista Motywy zawiera:

  • Aż do ostatnich 100 pytań sklasyfikowanych w każdym temacie.
  • Pytania z ostatnich 30 dni, niezależnie od skonfigurowanego okresu. Jeśli skonfigurowany okres wykracza całkowicie poza ostatnie 30 dni, Copilot Studio wyświetla powiadomienie, że lista jest niedostępna.

Zrzut ekranu panelu pogłębiania motywu.

W panelu przechodzenia do szczegółów motywu są wyświetlane najpierw metryki na poziomie motywu.

Metryka na poziomie tematu Description
Łączna liczba pytań Łączna liczba pytań (sklasyfikowanych w tym motywie), które wyzwalały generowanie odpowiedzi sztucznej inteligencji dla skonfigurowanego okresu.
Odpowiedzi na pytania Proporcja Łącznej liczby pytań tego motywu, które spowodowały udzielenie odpowiedzi na pytanie użytkownika.
Pytania bez odpowiedzi Proporcja łącznych pytań tego tematu, na które nie udzielono odpowiedzi na pytanie użytkownika.
Reakcje Nieprzetworzona liczba pozytywnych (kciuków w górę) i negatywnych (kciuk w dół) reakcji z pytań sklasyfikowanych do tego tematu, jak zarejestrowano w mechanizmie learn feedback.

Aby wyświetlić zestawienie jakości odpowiedzi dla próbki pytań, na które udzielono odpowiedzi, oraz wszystkich źródeł wiedzy, do których odwołuje się ten temat, wybierz pozycję Pokaż więcej.

Zrzut ekranu przedstawiający skumulowany wykres słupkowy przedstawiający względne wagi jakości odpowiedzi z przykładowymi pytaniami dotyczącymi motywu.

Aby wyświetlić więcej informacji na temat dowolnej wartości jakości odpowiedzi na poziomie motywu, w obszarze Jakość odpowiedzi najedź kursorem na pojedynczy segment paska. Etykietka narzędzia zawiera wartość względnej wagi tego segmentu oraz liczbę pytań próbkowanych do otrzymania tej wartości.

Zrzut ekranu przedstawiający względne wagi jakości odpowiedzi dla danego tematu, pokazujący podpowiedź dla jednej wartości jakości.

Aby wyświetlić więcej informacji na poziomie dowolnego z wymienionych źródeł wiedzy, w obszarze Użycie źródła wiedzy wybierz pojedyncze źródło wiedzy. Podpowiedź zawiera:

  • Całkowita liczba pytań w tym temacie, które odnosiły się do tego źródła wiedzy, a także liczba reakcji kciukiem w górę i kciukiem w dół .
  • Skumulowany wykres słupkowy przedstawiający podział względnych wag jakości odpowiedzi dla pytań odwołujących się do tego źródła wiedzy w temacie. Najedź kursorem na dowolny segment wykresu słupkowego, aby zobaczyć wartość względnej wagi tego segmentu oraz liczbę pytań pobranych w próbkę w celu uzyskania tej wartości.

Zrzut ekranu przedstawiający względne wagi jakości odpowiedzi dla danego źródła wiedzy w ramach tematu, pokazujący etykietkę narzędzia dla jednej wartości jakości.

W panelu przechodzenia do szczegółów poszczególnych motywów sekcja Pytania użytkownika zawiera listę wszystkich pytań, które wyzwoliły odpowiedzi generatywnej sztucznej inteligencji w skonfigurowanym okresie czasu i zostały sklasyfikowane w tym temacie, a także wyświetla metryki dla poszczególnych pytań . Metryki na poziomie pytania obejmują:

Wymiar lub metryka na poziomie pytania Description
Pytanie (wymiar) Pytanie (które wyzwoliło generowanie odpowiedzi sztucznej inteligencji) przypisane do tego tematu.
Odpowiedział? Odpowiedź na pytanie, czy na zapytanie użytkownika udzielono odpowiedzi, czy nie. Możliwe wartości to Answered i Unanswered.
Jakość odpowiedzi1 Odpowiedź na pytanie, jaka była jakość odpowiedzi na zapytanie użytkownika. Możliwe wartości to Poor i Good.
Reakcja Dwa parametry: jeden to wartość logiczna Kciuk w górę/Kciuk w dół, a drugi to parametr oparty na tekście Komentarz.
Źródło wiedzy Rozdzielona przecinkami lista źródeł wiedzy, do których odwołuje się to pytanie w tym temacie.

1 Jakość odpowiedzi nie jest zawsze dostępna i jest wyświetlana tylko wtedy, gdy pytanie zostało próbkowane na potrzeby analizy jakości.

Wybierz dowolne pytanie na liście, aby wyświetlić więcej informacji na temat pytania w panelu Szczegóły pytania . Ten panel obejmuje:

Szczegółowy parametr na poziomie pytania Description
Sygnatura czasowa Sygnatura czasowa ostatniego wystąpienia odpowiedzi na pytanie.
Zapytanie użytkownika Pytanie zadane.
Odpowiedź Generacyjna odpowiedź sztucznej inteligencji.
Wartość Kciuk w górę/Kciuk w dół Wartość ostatniego wystąpienia tego pytania dla parametru Thumbs up /Thumbs down .
Comment Opcjonalny dodatkowy komentarz tekstowy, dostarczony przez użytkownika, oprócz reakcji Kciuk w górę / Kciuk w dół .
Jakość odpowiedzi1 Odpowiedź na pytanie, jaka była jakość odpowiedzi na zapytanie użytkownika. Możliwe wartości to Poor i Good.
Przyczyna2 W przypadku, gdy jakość odpowiedzi to Poor, ten parametr wyjaśnia, dlaczego.

1 Jakość odpowiedzi nie jest zawsze dostępna i jest wyświetlana tylko wtedy, gdy pytanie zostało próbkowane na potrzeby analizy jakości.

2 Jeśli jakość odpowiedzi to Good lub jeśli pytanie nie zostało próbkowane, parametr Reason nie ma przypisanej żadnej wartości.

Zrzut ekranu przedstawiający szczegółowe dane na poziomie pytania w motywie.