共用方式為


依主題分析使用者問題 (預覽)

[本文章是發行前版本文件,且隨時可能變更。]

主題是由使用者問題集中挑選出的問題組合,用來觸發生成式回應。 主題將相關的用戶問題以智能方式組織成較少且更易於管理的群組。 透過主題,您可以獲得對客戶意圖的類別層級洞察、識別常見主題,並將精力集中在需要改進的領域。 然後,您可以向下切入到主題的各個問題,並在此更精細的層級監控效能,以更好地了解主題層級指標。

這很重要

本文包含 Microsoft Copilot Studio 預覽版文件,內容可能有所變更。

預覽功能不適用於生產環境,而且功能可能受到限制。 這些功能是在正式發行前先行推出,讓您能夠搶先體驗並提供意見反應

如果您要建置生產就緒 Agent,請參閱 Microsoft Copilot Studio 概觀

關鍵價值主張

主題功能會自動分析過去一周觸發生成式 AI 回應的所有未分類問題,並根據此分析建議主題。 此程序每週執行一次。 在每週 主題建議 執行之間,該功能會對觸發生成式 AI 回應的任何新問題執行每日分類,並將此資料新增至主題指標。 建議的 主題 清單會定期重新整理,讓您的主題保持相關性並反映最新的使用者資料。 此自動重新整理可透過下列方式節省您的時間:

  • 根據新資料持續評估主題相關性
  • 自動將個別問題分類為主題
  • 自動擷取每個主題的原始指標資料
  • 計算每個主題的彙總指標資料

先決條件

若要提升主題功能的效益,包括能夠深入了解每個主題的相關問題與答案:

建議主題和分類問題

Copilot Studio 會根據最近提出的問題記錄來建議主題。 透過自訂每個建議的主題以符合您組織的結構和客戶體驗策略,您可以透過特定主題的關鍵績效指標 (KPI) 獲得更好的見解。 這種更深層次的粒度使人們更容易找到客服專員表現不佳的地方。

主題可協助製作者了解使用者向客服專員詢問的問題以及客服專員的執行方式。 在以主題為基礎的分析的初始執行中,Copilot Studio 會查看過去一周的所有問題,並建議最多 10 個主題,根據彼此的相似性對使用者問題進行分組。 每個主題都包括問題總數、回答率和用戶反應等指標。 「 主題」 清單中顯示的資料會根據選取的分析期間進行調整。

在初始執行之後,Copilot Studio 會每天持續將新問題分類為現有主題,並每週產生新的建議主題清單。

備註

  • 在過去 7 天內,必須至少有 50 個問題記錄有生成式答案,然後 Copilot Studio 才會產生建議的主題。
  • 觸發生成式 AI 回應的問題可能會分類為多個主題。 這種情況在 生成式協調流程 模式中可能會變得更加常見,其中客服人員答案可能來自多個不同的來源。
  • 任何未分類的問題都會放入 未分類 主題中。
  • 每週的建議執行程序可能需要幾分鐘才能完成。 在此期間,「 主題」 區段無法使用。

佈景主題清單

依預設, 「主題」 清單會顯示前五 (5) 個主題,並依分類到每個主題的問題總數進行排名。 選取 [ 查看全部 ] 以展開清單以顯示所有主題。

通過自動每週 主題建議 運行和每日問題分類,主題功能會自動發展並適應用戶行為的變化。

分析標籤上主題清單的螢幕擷取畫面。

「主題」清單會顯示每個列出主題的指標。

資料行 Description
名稱 佈景主題的名稱。
問題總數 在設定的時間段內分類到此主題的問題總數。
已解答的問題 導致用戶問題得到答案的問題在 總問題 中所佔的比例。
回應 對每個主題分類的問題,統計正面 (讚許) 和負面 (反對) 反應的原始計數。

備註

當所有分類問題都已觸發生成式 AI 解答時,為什麼我的主題中還有「未解答的問題」?

根據定義,只有那些能夠觸發生成式 AI 回答的問題,才會被歸類到某個主題中。 無非就是,觸發對生成式解答的呼叫,與對使用者查詢提供解答並非同一回事。

例如,交談中出現與知識來源相關的促進主題是很常見的情況。 在這種情況下,如果無法辨識意圖,就可能會觸發此主題,即使知識來源中沒有問題的解答,也會呼叫該知識來源。

深入探討主題

若要向下切入至分組到任何一個主題的問題,請在 「主題」 清單中選取主題。 當您向下切入時,會開啟特定於所選主題的面板,顯示主題和個別問題層級的度量。

備註

主題清單包括:

  • 最近最多的 100 個問題按主題分類。
  • 過去 30 天內的問題,無論設定的時間範圍為何。 如果設定的期間完全超出過去 30 天,Copilot Studio 會顯示清單無法使用的通知。

主題深入分析面板的螢幕擷取畫面。

在主題的向下切入面板中,會先顯示主題層級的度量。

主題層級指標 Description
問題總數 在設定的時段內觸發生成式 AI 回應的問題總數 (分類為此主題)。
已解答的問題 此主題的總問題數中產生出使用者問題答案的比例。
未解答的問題 此主題中所有問題中未對使用者問題提供答案的問題比例。
回應 分類為此主題的問題的正面 (豎起大拇指) 和負面 (豎起大拇指向下) 反應的原始計數,記錄在學習意見反應機制中。

若要顯示已回答問題樣本的回應品質明細,以及此主題中所有參考的知識來源,請選取 [顯示更多]。

堆疊長條圖的螢幕擷取畫面,顯示主題取樣問題的回應品質相對權重。

「主題量度」 面板上,若要查看主題層級任何一個回應品質值的詳細資訊,請在 「回應品質」下,將滑鼠游標懸停在個別長條區段上。 工具提示包括該區段的相對權重值,以及為得出該值而取樣的問題數目。

指定主題回應品質相對權重的螢幕擷取畫面,顯示一個品質值的工具提示。

若要查看任何一個列出的知識來源層級的詳細資訊,請在 知識來源使用下,選取個別知識來源。 工具提示包括:

  • 此主題中引用此知識來源的問題總數,以及 豎起大拇指豎起大拇指的 反應數量。
  • 堆疊長條圖,顯示主題中引用此知識來源的問題的回應質量相對權重明細。 將滑鼠停留在長條圖的任何區段上,即可查看該區段的相對權重值,以及為得出該值而取樣的問題數目。

主題中指定知識來源的回應品質相對權重的螢幕擷取畫面,顯示一個品質值的工具提示。

在個別主題的向下切入面板中, 「使用者問題 」區段會列出在設定的時間段內觸發生成式 AI 回應並分類到此主題的所有問題,並根據 每個問題 顯示指標。 問題層級計量包括:

問題層級維度或指標 Description
問題(維度) 問題(引發生成式 AI 回應)被分類到此主題。
回答了嗎? 對使用者查詢是否已回答的問題的回應。 可能的值是 AnsweredUnanswered
回應品質1 回應使用者查詢的回應品質如何的問題。 可能的值是 PoorGood
回應 兩個參數,即布林 豎起大拇指/豎下大拇指 指標,以及以文字為基礎的 註解 參數。
知識來源 本主題中此問題引用的知識來源以逗號分隔的清單。

1 回應品質並非一律可用,只有在對問題進行品質分析抽樣時才會顯示。

選取清單中的任何問題,以在 「問題詳細資料」 面板中顯示有關該問題的詳細資訊。 此面板包括:

詳細的問題層級參數 Description
時間戳 回答問題的最近實例的時間戳記。
用戶查詢 問題已提出。
回應 生成式 AI 回應。
大拇指向上/大拇指向下的值 此問題最近一次提出時,其讚許/反對參數的值。
評論 選用的額外文字型註解,由使用者提供,以及「 豎起大拇指/豎起大拇指」 反應。
回應品質1 回應使用者查詢的回應品質如何的問題。 可能的值是 PoorGood
原因2 在回應品質為 Poor的情況下,此參數會說明原因。

1 回應品質並非一律可用,只有在對問題進行品質分析抽樣時才會顯示。

2 如果 [回應品質] 為 或 Good 問題未取樣,則不會指派 [原因] 參數任何值。

主題中問題層級量度詳細資料的螢幕擷取畫面。