Copilot Studio의 분석 페이지는 분석 세션 전반에 걸친 이벤트 트리거를 통해 에이전트의 전반적인 상태에 대한 집계된 인사이트를 제공합니다. 또한 이 페이지에는 에이전트에 대한 높은 수준의 KPI(핵심 성과 지표) 메트릭을 제공하는 개요 영역, 에이전트 또는 에이전트의 도구에 귀속된 시간 및 비용 절감을 분석하는 절감 영역 및 에이전트의 성능에 대한 주요 분석 인사이트를 제공하는 요약 영역이 표시됩니다.
대한 자세한 내용:
- 요약 및 개요 영역은 분석 개요 참조
- 절감영역은 에이전트에 대한 시간 및 비용 절감 분석 참조
자율 에이전트 성능을 검토하고 개선할 때 집중해야 할 핵심 영역은 네 가지입니다.
- 실행 결과: 트리거로 시작된 세션의 최종 결과를 알면 에이전트가 성공한 부분과 개선이 필요한 부분을 파악하는 데 도움이 됩니다.
- 트리거 사용: 어떤 트리거가 얼마나 자주 사용되는지 확인하면 에이전트가 무엇을 하고 있는지, 왜 하는지 이해하는 데 도움이 됩니다.
- 도구 사용: 도구 사용 빈도 및 도구 성공 빈도를 학습하면 이러한 도구가 유용하고 성공적인지 이해하는 데 도움이 될 수 있습니다.
- 참조 자료 원본 사용: 개별 참조 자료 원본이 사용되는 빈도 및 에이전트가 오류를 반환하는 빈도를 알아봅니다.
시간 범위를 변경하려면 분석 페이지 상단의 범위 드롭다운을 선택하세요. 지난 90일 동안 발생한 세션에 대한 분석을 볼 수 있습니다.
결과 실행
실행 결과 섹션은 각 세션에 대한 결과 유형을 추적하는 차트를 보여줍니다.
실행 결과 데이터(그래프에서 시각화된 데이터)를 다운로드하려면 메뉴 아이콘 
을 선택하고 CSV 다운로드를 선택합니다.
세션 기간의 분석도 볼 수 있습니다. 실행 결과 차트에서 세부 정보 보기를 선택합니다. 성공한 실행 및 실패한 세션의 평균 기간과 시간에 따라 세션 길이가 변경된 방식과 함께 사이드 패널이 열립니다.
세션 기간이 길면 에이전트가 속한 워크플로에서 지연이 발생할 수 있습니다. 트리거 또는 에이전트 수준에서 보다 구체적인 지침을 제공하여 에이전트의 속도를 향상시킬 수 있습니다.
트리거 사용
트리거 사용 섹션에는 각 트리거가 세션을 시작한 빈도를 추적하는 차트와 메트릭이 표시됩니다. 차트에는 시간에 따른 트리거 사용의 변경 내용이 표시됩니다.
세부 정보 보기를 선택하여 선택한 기간 동안 사용된 모든 트리거의 분석, 실행을 트리거한 가장 일반적인 이벤트 및 가장 많은 실행 실패를 초래한 이벤트를 봅니다.
이 정보를 사용하여 개선을 위해 특정 실행을 대상으로 지정하고 에이전트가 가장 많이 응답하는 이벤트 종류를 이해할 수 있습니다.
도구 사용
도구 사용 섹션에는 시간이 지남에 따라 도구가 시작되는 빈도와 에이전트가 해당 도구를 성공적으로 사용한 빈도를 추적하는 차트 및 메트릭이 표시됩니다. 또한 에이전트가 각 도구를 사용하는 빈도와 성공적으로 사용된 호출된 도구의 비율에 대한 추세 지표를 보여줍니다.
차트는 분석 페이지의 맨 위에 정의된 날짜 기간 동안 사용된 상위 5개 도구를 표시합니다.
차트 아래의 범례에서 도구를 마우스로 가리켜 차트에서 해당 도구를 강조 표시합니다.
지정된 기간에 사용된 모든 도구 목록과 추세 표시기를 함께 사용하여 측면 패널을 열려면 차트의 세부 정보 보기를 선택합니다. 도구 사용 패널에서 각 도구에 사용되는 질문의 백분율 계산을 표시할 수 있습니다. 에이전트에 하위 에이전트가 있는 경우 주 에이전트와 하위 에이전트(모두), 주 에이전트만 또는 하위 에이전트에 대해서만 계산을 표시하도록 선택할 수 있습니다.
참조 자료 원본 사용
참조 자료 원본 사용 섹션에는 에이전트에서 참조 자료 원본이 사용되는 빈도를 추적하는 차트 및 메트릭이 표시됩니다. 또한 원본이 사용되는 빈도, 생성되는 오류 수 및 원본이 사용되는 횟수에 대한 추세 지표를 보여 줍니다.
차트는 분석 페이지 상단에 정의된 기간 동안 사용된 상위 5개의 참조 자료 원본을 표시합니다.
차트 아래의 범례에서 참조 자료 원본 위에 마우스를 올려 차트에서 해당 참조 자료 원본을 강조 표시합니다.
세부 정보 보기를 선택하여 선택한 기간 동안의 참조 자료 원본 사용량 및 오류율이 포함된 사이드 패널을 엽니다. 이러한 차트를 사용하여 사용자에게 도움이 되는 참조 자료 원본과 개선 대상을 식별할 수 있습니다.
측면 패널에서 모두를 선택하여 주 에이전트와 하위 에이전트 모두에 대한 메트릭을 표시하고, 주 에이전트에 대한 메트릭의 주 에이전트만 표시하거나, 하위 에이전트에 대한 메트릭의 하위 에이전트만 표시합니다.
- 모든 원본은 에이전트가 액세스할 수 있는 각 참조 자료 원본을 사용한 세션의 백분율을 보여줍니다.
- 오류는 각 참조 자료 원본 유형(예: SharePoint)을 사용한 세션 중 오류가 발생한 비율을 보여줍니다.
모든 원본에서 나열된 참조 자료 원본 중 하나의 수준에서 자세한 정보를 보려면 개별 원본을 선택합니다. 도구 설명에는 다음이 포함됩니다.
- 이 참조 자료 원본을 참조한 총 질문 수와 좋아요 및 싫어요 반응의 수입니다.
- 이 참조 자료 원본을 참조하는 질문에 대한 응답 상대 가중치의 품질 분석을 보여주는 누적 가로 막대형 차트입니다. 가로 막대형 차트의 세그먼트를 마우스로 가리키면 해당 세그먼트의 상대 가중치 값과 해당 값에 도달하기 위해 샘플링된 질문 수가 표시됩니다.
