共用方式為


監控您的生成式 AI 應用程式(預覽)

Note

本文件指的是 Microsoft Foundry(經典版) 入口網站。

🔍 請參閱 Microsoft Foundry(新)文件 以了解新入口網站。

Important

本文中標示為 (預覽) 的項目目前處於公開預覽狀態。 此預覽版本沒有服務等級協定,不建議將其用於生產工作負載。 可能不支援特定功能,或可能已經限制功能。 如需詳細資訊,請參閱 Microsoft Azure 預覽版增補使用條款

由於 AI 產業的複雜性和快速演進,監視您的生成式 AI 應用程式變得比以往更重要。 可觀察性整合於 Azure Monitor 應用洞察,讓您能持續監控已部署的 AI 應用,確保其效能良好、安全,並在生產環境中產生高品質成果。 除了持續監視功能之外,我們也為代理程式提供持續性評估功能,以進一步增強 Foundry 可檢視性儀表板,並了解其他關鍵品質和安全計量。

Note

此功能必須使用 Foundry 專案 。 不支援 中樞型專案 。 請參閱 如何知道我所擁有的項目類型?建立 Foundry 專案。 若要將您的中樞型專案遷移到 Foundry 專案,請參見 「從中樞型遷移到 Foundry 專案」。

如何啟用監視

要在 Microsoft Foundry 中使用監控功能,你需要將 Application Insights 資源連接到你的 Foundry 專案。

  1. 請在 Foundry 入口網站左側導航窗格中進入 監控
  2. 選取 [應用程式分析] 索引標籤
  3. 如果您還沒有 Application Insights 資源,請建立新的資源。
  4. 將資源與你的 Foundry 專案連結。

收集生產數據以進行監視

從這裡開始,您希望開始收集應用程式的遙測資料,您可以在我們的內建介面中監視這些遙測資料。 若要這樣做,我們建議:

  • 檢測追蹤可讓您從應用程式擷取詳細的遙測數據。 此數據可讓您深入瞭解生產環境中應用程式的效能、延遲和行為。

  • 持續評估 可藉由根據預先定義的計量和閾值來評估代理程式在生產環境中的質量和安全性。

檢視監視結果

在 Foundry 入口網站中, 應用程式分析 儀表板檢視會使用 Azure Monitor Application Insights 的訊號,透過 Azure Workbooks 查詢並建立視覺化。

這些檢視的設計目的是將關鍵計量 - 令牌耗用量、延遲、例外狀況、回應品質納入單一玻璃窗格,讓小組能夠追蹤作業健康情況和品質、瞭解趨勢,並持續評估以改善其應用程式。

請依照以下步驟存取並使用您在鑄造廠專案中內建的監控檢視:

  1. 請訪問 Foundry 門戶網站中的 Foundry 專案。
  2. 從左側瀏覽窗格中選取 [ 監視 ]。
  3. 在 [ 應用程式分析] 索引 標籤下,檢閱應用程式健康情況的概觀。
  4. 使用篩選來指定時間範圍、應用程式和/或模型來擷取詳細的深入解析。
  5. 如果您注意到問題,例如品質指標下降,請前往 追蹤 功能,以排除 應用程式中的問題
  6. 若要進一步自定義監視體驗並使用 Azure 監視器中的進階功能,請卷動至底部,然後選取 [在 Azure 監視器 Application Insights 中檢視]。

Note

當您與團隊成員共用此活頁簿時,他們必須至少具備已連線 Application Insights 資源的「讀取者」角色,才能檢視顯示的資訊。

自訂和共用儀表板

Application Insights 是應用程式效能監視 (APM) 的強大工具,可提供應用程式健康情況和效能的深入解析。

您可以在 Azure 監視器 Application Insights 活頁簿資源庫中開啟 [應用程式分析] 儀表板,方法是選取頁面結尾的 [在 Azure 監視器 Application Insights 中檢視] 連結。

此儀錶板會開啟為可編輯的活頁簿,您可以在其中自定義活頁簿,並根據您的需求儲存。

  1. 在命令行中選取 [編輯 ]。 監視下活頁簿索引標籤的螢幕擷取畫面,其中醒目提示 Azure 入口網站中的 [編輯] 按鈕。

  2. 根據您的使用案例視需要修改元素。 在項目上選取 ... ,以編輯、新增、移動/重設大小、複製或移除。 例如,您可以使用 KQL 新增圖格來追蹤您要收集的自定義屬性,而不會顯示在我們的內建檢視中。 監視下活頁簿索引標籤的螢幕擷取畫面,其中醒目提示 Azure 入口網站中的修改元素按鈕。

  3. 選取 [儲存],儲存最新的變更並視需要建立不同的檢視。 Azure 入口網站中監控下活頁簿標籤的螢幕截圖,突出顯示 [儲存] 按鈕和標籤。

  4. 選取命令列中的 [共用] 圖示,與您的小組共用。 監視下活頁簿索引標籤的螢幕擷取畫面,其中醒目提示 Azure 入口網站中的共用活頁簿按鈕和標籤。

使用 Kusto 查詢語言探索與分析 (KQL)

KQL (Kusto 查詢語言) 是 Azure 中用來探索、分析和可視化大量遙測和記錄數據的強大查詢語言。

在 [應用程式分析] 儀表板檢視中,您可以選取特定圖格或圖表右上方的圖示來開啟查詢連結

應用程式分析儀錶板檢視的螢幕快照,其中醒目提示 Azure 入口網站中的 [開啟查詢連結] 按鈕。

選取之後,您可以檢視並執行相同的 KQL 查詢,為您的監視檢視提供動力,並深入探討相關數據。

醒目提示 Azure 入口網站中 KQL 模式和結果的記錄螢幕擷取畫面。

設定 Azure 警示

您可以根據先前的 KQL 查詢定義 Azure 警示規則,以在未來主動偵測生產後作業的問題。 選取 ... 以檢視更多選項,例如 [新增警示規則]。

Azure 入口網站中醒目提示新警示規則按鈕的記錄螢幕快照。

選取 [新增警示規則] 按鈕會開啟精靈,在相關訊號上建立警示規則。

在 Azure 入口網站中建立警示規則精靈的螢幕快照。

若要深入瞭解如何設定和管理 Azure 警示以主動解決問題,請參閱 Azure 監視器中的警示