Como Revisar a Análise do Agente do Copilot Studio
🔍 WiseChecker

Como Revisar a Análise do Agente do Copilot Studio

Você precisa entender como seu agente do Copilot Studio está se saindo após a implantação. O painel de análise mostra volume de sessões, satisfação do usuário e eficácia dos tópicos. Sem revisar esses dados, você não consegue identificar gargalos ou melhorar seu agente. Este artigo explica como acessar e interpretar os principais relatórios na análise do Copilot Studio.

Principais conclusões: Interpretando a análise do agente do Copilot Studio

  • Guia Análise no Copilot Studio: Local central para todos os dados de sessão, tópico e satisfação do usuário.
  • Métricas de sessão (Total de Sessões, CSAT, Taxa de Abandono): Medem o engajamento geral e a satisfação do usuário.
  • Relatórios por tópico (Taxa de Resolução, Taxa de Escalação): Identificam quais tópicos têm bom desempenho e quais precisam de retreinamento.

ADVERTISEMENT

Visão Geral dos Relatórios de Análise do Copilot Studio

O Copilot Studio fornece um painel de análise integrado que rastreia cada interação do usuário com seu agente. Os dados são atualizados a cada poucas horas e cobrem os últimos 30 dias por padrão. Você pode filtrar por período, canal ou tópico específico. O painel inclui quatro seções principais de relatório: Resumo, Sessões, Tópicos e Satisfação do Usuário. Cada relatório oferece uma visão diferente do desempenho do agente. Para usar a análise, você precisa de uma licença do Copilot Studio e, no mínimo, permissões de Analista ou Criador no agente. A guia de análise fica disponível imediatamente após o agente processar a primeira sessão.

Relatório de Resumo

O relatório de Resumo mostra KPIs de alto nível para seu agente. Você vê o total de sessões, pontuação CSAT média, duração média da sessão e taxa de abandono. A taxa de abandono é a porcentagem de sessões em que o usuário saiu sem uma resolução. Uma taxa de abandono alta geralmente indica que o agente não conseguiu responder à pergunta do usuário. O relatório de Resumo também inclui uma linha de tendência para que você possa ver se as métricas estão melhorando ou piorando ao longo do tempo.

Relatório de Sessões

O relatório de Sessões lista cada conversa individual que seu agente teve. Cada linha mostra o ID da sessão, hora de início, canal, tópico acionado e resultado final. Você pode clicar em uma sessão para ver a transcrição completa. Este relatório é útil para depurar problemas específicos de usuários. Por exemplo, você pode encontrar uma sessão em que o agente deu uma resposta errada e revisar a conversa exata.

Relatório de Tópicos

O relatório de Tópicos detalha o desempenho de cada tópico em seu agente. Para cada tópico, você vê o número de sessões, taxa de resolução, taxa de escalação e pontuação CSAT média. A taxa de resolução é a porcentagem de sessões em que o tópico foi resolvido sem escalar para um agente humano. A taxa de escalação mostra com que frequência o tópico transferiu o usuário para um humano. Tópicos com baixas taxas de resolução precisam de melhorias. Você pode editar as frases de gatilho ou o fluxo de conversa do tópico diretamente deste relatório.

Relatório de Satisfação do Usuário

O relatório de Satisfação do Usuário exibe as pontuações CSAT coletadas após cada sessão. Os usuários veem um prompt de polegar para cima ou polegar para baixo no final de uma conversa. O relatório mostra o número total de avaliações, a pontuação média e uma divisão entre avaliações positivas e negativas. Você pode filtrar por tópico para ver quais tópicos têm a menor satisfação. Pontuações CSAT baixas indicam que o usuário não obteve a resposta que esperava.

Passos para Acessar e Filtrar a Análise do Agente

Siga estes passos para abrir o painel de análise e aplicar filtros para dados específicos.

  1. Abra o aplicativo Copilot Studio
    Acesse copilotstudio.microsoft.com e faça login com sua conta corporativa ou de estudante. O aplicativo abre na página inicial por padrão.
  2. Selecione seu agente
    Na página inicial, clique no nome do agente que deseja revisar. A página de detalhes do agente é aberta.
  3. Clique na guia Análise
    No menu de navegação à esquerda, clique em Análise. O relatório de Resumo é carregado por padrão. Você vê o seletor de período no canto superior direito. O período padrão são os últimos 30 dias.
  4. Altere o período
    Clique no menu suspenso de período e selecione um período personalizado ou um predefinido como Últimos 7 Dias ou Últimos 90 Dias. Clique em Aplicar para atualizar os relatórios.
  5. Filtre por canal
    Clique no botão Filtrar ao lado do seletor de período. Selecione um canal no menu suspenso, como Microsoft Teams ou Web. Os relatórios são atualizados para mostrar apenas as sessões desse canal.
  6. Mude para o relatório de Sessões
    Clique em Sessões no painel esquerdo, em Análise. O relatório mostra uma tabela de sessões individuais. Use a caixa de pesquisa para encontrar uma sessão por ID ou nome de usuário.
  7. Abra a transcrição de uma sessão
    Clique em qualquer linha de sessão. Um painel lateral é aberto com a transcrição completa da conversa. Revise as mensagens para ver o que o usuário perguntou e como o agente respondeu.
  8. Mude para o relatório de Tópicos
    Clique em Tópicos no painel esquerdo. A tabela lista todos os tópicos. Clique no nome de um tópico para ver suas métricas detalhadas e exemplos de conversa.
  9. Exporte dados do relatório
    Clique no botão Exportar no topo de qualquer relatório. Escolha o formato CSV ou Excel. O arquivo é baixado com as configurações de filtro atuais aplicadas.

ADVERTISEMENT

Equívocos Comuns e Limitações

Os dados de análise não são em tempo real

O painel é atualizado a cada 2 a 4 horas. Se você acabou de implantar uma alteração, aguarde pelo menos 4 horas antes de verificar o impacto. Os dados do dia atual podem parecer incompletos até o próximo ciclo de atualização.

As pontuações CSAT são opcionais para os usuários

Os usuários podem pular o prompt de satisfação. Um número baixo de avaliações torna a pontuação CSAT média menos confiável. Verifique o número total de avaliações no relatório de Satisfação do Usuário antes de agir com base na pontuação. Se o tamanho da amostra for inferior a 50, considere a pontuação apenas como indicativa.

A taxa de abandono inclui sessões em que o usuário fechou o chat

A taxa de abandono conta qualquer sessão que terminou sem um evento de resolução. Isso inclui sessões em que o usuário simplesmente fechou a guia do navegador. Uma taxa de abandono alta nem sempre significa que o agente falhou. Cruze com as transcrições das sessões para ver se o agente realmente respondeu à pergunta antes de o usuário sair.

A taxa de resolução do tópico depende do design do tópico

Um tópico com baixa taxa de resolução pode precisar de melhores frases de gatilho ou um fluxo de conversa mais claro. Use o relatório de Tópicos para encontrar as sessões exatas em que o tópico falhou. Abra essas transcrições para ver onde a conversa quebrou. Em seguida, edite o tópico no Copilot Studio para melhorar suas respostas.

Item Relatório de Resumo Relatório de Sessões
Propósito KPIs de alto nível para a saúde geral do agente Lista detalhada de cada conversa individual
Métricas principais Total de sessões, CSAT, taxa de abandono, duração ID da sessão, canal, tópico, resultado, transcrição
Melhor caso de uso Revisão semanal de desempenho e análise de tendências Depuração de problemas específicos de usuários e revisão de transcrições
Formato de exportação CSV ou Excel com dados agregados CSV ou Excel com dados por linha de sessão

Agora você pode abrir a guia Análise no Copilot Studio e revisar o volume de sessões, as pontuações CSAT e o desempenho dos tópicos do seu agente. Comece com o relatório de Resumo para identificar tendências gerais e, em seguida, aprofunde-se no relatório de Tópicos para encontrar tópicos com baixo desempenho. Para investigações mais aprofundadas, abra as transcrições das sessões no relatório de Sessões. Para aproveitar ao máximo a análise, defina um lembrete semanal para verificar o painel e exportar um CSV para manter registros. Se precisar compartilhar relatórios com as partes interessadas, use o botão Exportar para gerar um arquivo Excel com os filtros atuais aplicados.

ADVERTISEMENT