Nota
O acesso a esta página requer autorização. Podes tentar iniciar sessão ou mudar de diretório.
O acesso a esta página requer autorização. Podes tentar mudar de diretório.
[Este artigo é uma documentação de pré-lançamento e está sujeito a alterações.]
Os temas são agrupamentos de perguntas retiradas do conjunto de perguntas do usuário que desencadeiam respostas generativas. Os temas agrupam perguntas de utilizadores relacionadas em grupos organizados de forma inteligente, mas menos numerosos e mais geríveis. Com os temas, você pode obter informações em nível de categoria sobre a intenção do cliente, identificar tópicos frequentes e concentrar esforços em áreas que precisam de melhorias. Em seguida, você pode detalhar as perguntas individuais de um tema e monitorar o desempenho nesse nível mais granular para entender melhor as métricas no nível do tema.
Importante
Este artigo contém a documentação de visualização do Microsoft Copilot Studio e está sujeito a alterações.
As funcionalidades de pré-visualização não se destinam a utilização em produção e podem ter funcionalidades restritas. Esses recursos estão disponíveis antes de um lançamento oficial para que você possa obter acesso antecipado e fornecer feedback.
Se você estiver criando um agente pronto para produção, consulte Visão geral do Microsoft Copilot Studio.
Proposta de valor chave
O recurso Temas analisa automaticamente todas as perguntas não classificadas que desencadearam respostas generativas de IA na semana passada e sugere temas com base nessa análise. Este processo decorre semanalmente. Entre as execuções semanais de sugestões de temas , o recurso realiza a classificação diária de quaisquer novas perguntas que desencadeiem respostas generativas de IA, adicionando esses dados às métricas do tema. A lista de Temas sugeridos é atualizada regularmente para que seus temas permaneçam relevantes e reflitam os dados mais recentes do usuário. Esta atualização automática poupa-lhe tempo ao:
- Avaliação contínua da relevância do tema em relação a novos dados
- Classificação automática de perguntas individuais em temas
- Automatizando a recuperação de dados métricos brutos para cada tema
- Calculando dados métricos agregados para cada tema
Pré-requisitos
Para otimizar o valor do recurso Temas, incluindo a capacidade de detalhar as perguntas e respostas de cada componente do tema:
Você precisa de uma função de segurança de Bot Transcript Viewer para visualizar a lista e as suas métricas. Somente os administradores podem conceder essa função atribuindo a função de segurança do Visualizador de Transcrição do Bot durante o compartilhamento do agente.
As configurações no nível do ambiente para armazenar transcrições de conversas no Dataverse estão ativadas.
Temas sugeridos e perguntas classificadas
O Copilot Studio sugere temas com base em registos de perguntas feitas no passado recente. Ao adaptar cada tema sugerido para se adequar à estrutura da sua organização e à estratégia de experiência do cliente, você pode obter uma melhor visão por meio de indicadores-chave de desempenho (KPIs) específicos do tema. Essa granularidade mais profunda torna mais fácil encontrar onde os agentes têm um desempenho inferior ao esperado.
Os temas ajudam os criadores a entender quais perguntas os usuários estão fazendo ao agente e como o agente atua. Na execução inicial da análise baseada em temas, o Copilot Studio analisa todas as perguntas da semana passada e sugere até 10 temas que agrupam as perguntas dos usuários com base em semelhanças entre si. Cada tema inclui métricas como o número total de perguntas, a taxa de resposta e a reação do usuário. Os dados exibidos na lista Temas são ajustados com base no período de análise selecionado.
Após a execução inicial, o Copilot Studio classifica novas perguntas para temas existentes em uma base contínua e diária, e gera uma nova lista de temas sugeridos semanalmente.
Observação
- Deve haver pelo menos 50 perguntas com respostas generativas registradas nos últimos sete dias antes que o Copilot Studio gere temas sugeridos.
- É possível que uma pergunta que desencadeia uma resposta generativa de IA seja classificada em mais de um tema. Esse cenário pode se tornar mais comum no modo Orquestração Generativa , onde uma resposta do agente pode vir de várias fontes diferentes.
- Quaisquer perguntas que permaneçam não classificadas são colocadas em um tema Não classificado .
- A execução das sugestões semanais pode levar alguns minutos a ser concluída. Durante esse período, a seção Temas não está disponível para uso.
A lista de temas
Por padrão, a lista Temas exibe os cinco (5) principais temas, classificados pelo número total de perguntas classificadas para cada tema. Selecione Ver tudo para expandir a lista e exibir todos os temas.
Com execuções automáticas semanais de sugestões de temas e classificação diária de perguntas, o recurso Temas evolui automaticamente e se adapta às mudanças no comportamento do usuário.
A lista Temas exibe métricas para cada tema listado.
| Coluna | Description |
|---|---|
| Nome | Nome do tema. |
| Total de perguntas | Número total de questões classificadas neste tema para o período de tempo configurado. |
| Perguntas respondidas | Proporção do total de perguntas que resultaram em uma resposta à pergunta do usuário. |
| Reações | Contagem bruta de reações positivas (polegar para cima) e negativas (polegar para baixo) das perguntas classificadas para cada tema. |
Observação
Por que há 'perguntas sem resposta' no meu tema quando todas as perguntas classificadas desencadearam respostas generativas de IA?
Por definição, apenas as perguntas que desencadearam uma resposta generativa de IA podem ser classificadas em um tema. Mas acionar uma chamada para respostas generativas não é o mesmo que ter uma resposta para uma consulta do usuário.
Por exemplo, é comum que haja um tópico de impulsionamento conversacional conectado a uma fonte de conhecimento. Nesse caso, se uma intenção não for reconhecida, este tópico pode ser acionado chamando a fonte de conhecimento, mesmo que não haja resposta para a pergunta nessa fonte de conhecimento.
Desagregar um tema
Para detalhar as perguntas agrupadas em qualquer tema, selecione o tema na lista Temas . Quando você faz uma busca detalhada, um painel específico para o tema selecionado é aberto, exibindo métricas nos níveis do tema e das perguntas individuais.
Observação
A lista de Temas inclui:
- Até as 100 questões mais recentes classificadas em cada tema.
- Perguntas dos últimos 30 dias, independentemente do período de tempo configurado. Se o período configurado estiver totalmente fora dos últimos 30 dias, o Copilot Studio exibirá uma notificação de que a lista não está disponível.
No painel detalhado de um tema, as métricas no nível do tema são exibidas primeiro.
| Métrica de nível de tema | Description |
|---|---|
| Total de perguntas | Número total de perguntas (classificadas neste tema) que desencadearam respostas generativas de IA para o período de tempo configurado. |
| Perguntas respondidas | Proporção do total de perguntas deste tema que resultaram numa resposta à pergunta do utilizador. |
| Perguntas sem resposta | Proporção do total de perguntas deste tema que não resultaram em uma resposta à pergunta do usuário. |
| Reações | Contagem bruta de reações positivas (polegares para cima) e negativas (polegares para baixo) das perguntas classificadas para este tema, conforme registado no mecanismo de comentários do Learn. |
Para exibir um detalhamento da qualidade da resposta para uma amostra de perguntas respondidas e todas as fontes de conhecimento referenciadas neste tema, selecione Mostrar mais.
No painel Métricas do tema , para ver mais informações sobre qualquer valor de qualidade de resposta no nível do tema, em Qualidade da resposta, passe o mouse sobre um segmento de barra individual. A dica de ferramenta inclui o valor da ponderação relativa desse segmento e o número de perguntas amostradas para chegar a esse valor.
Para ver mais informações no nível de qualquer uma das fontes de conhecimento listadas, em Uso da fonte de conhecimento, selecione uma fonte de conhecimento individual. A dica de ferramenta inclui:
- O número total de perguntas neste tema que referenciaram esta fonte de conhecimento, bem como o número de reações de polegar para cima e polegar para baixo .
- Um gráfico de barras empilhadas mostrando o detalhamento da qualidade das ponderações relativas de resposta para perguntas que fazem referência a essa fonte de conhecimento no tema. Passe o cursor sobre qualquer segmento do gráfico de barras para ver o valor da ponderação relativa desse segmento e o número de perguntas amostradas para chegar a esse valor.
No painel detalhado de um tema individual, a seção Perguntas do usuário lista todas as perguntas que desencadearam respostas generativas de IA no período de tempo configurado e foram classificadas nesse tema, e exibe métricas por pergunta . As métricas no nível da pergunta incluem:
| Dimensão ou métrica a nível de questão | Description |
|---|---|
| Pergunta (dimensão) | Pergunta (que desencadeou uma resposta generativa de IA) classificada para este tema. |
| Respondeu? | Resposta à pergunta se a consulta do usuário foi respondida ou não. Os valores possíveis são Answered e Unanswered. |
| Qualidade da resposta1 | Resposta à pergunta sobre qual foi a qualidade da resposta à consulta do utilizador. Os valores possíveis são Poor e Good. |
| Reação | Dois parâmetros, sendo a métrica Boolean Thumbs up/Thumbs down e um parâmetro Comment baseado em texto. |
| Fonte de Conhecimento | Lista separada por vírgulas das fontes de conhecimento referenciadas por esta pergunta neste tema. |
1 A qualidade da resposta nem sempre está disponível e só aparece se a pergunta tiver sido amostrada para análise de qualidade.
Selecione qualquer pergunta na lista para exibir mais informações sobre a pergunta em um painel Detalhes da pergunta . Este painel inclui:
| Parâmetro detalhado ao nível da pergunta | Description |
|---|---|
| Carimbo de data/hora | Carimbo de data/hora do caso mais recente em que a pergunta foi respondida. |
| Consulta do utilizador | A pergunta feita. |
| Resposta | A resposta generativa da IA. |
| Valor de Polegar para cima / Polegar para baixo | Valor para a instância mais recente desta pergunta para o parâmetro Polegar para cima / Polegar para baixo. |
| Comment | Comentário extra opcional baseado em texto, fornecido pelo usuário, além da reação Polegares para cima / Polegares para baixo . |
| Qualidade da resposta1 | Resposta à pergunta sobre qual foi a qualidade da resposta à consulta do utilizador. Os valores possíveis são Poor e Good. |
| Razão2 | No caso em que a qualidade da resposta é Poor, este parâmetro explica porquê. |
1 A qualidade da resposta nem sempre está disponível e só aparece se a pergunta tiver sido amostrada para análise de qualidade.
2 Se a qualidade da resposta for Good ou se a pergunta não tiver sido amostrada, o parâmetro Reason não receberá nenhum valor.
