O Rastreamento de execução ajuda você a entender como uma resposta gerada por IA foi produzida na Caixa de Entrada. Ele apresenta um detalhamento somente leitura da lógica por trás de uma mensagem histórica de IA, incluindo a intenção identificada, o conhecimento consultado e os resultados da execução do Playbook.
Isso ajuda você a analisar respostas anteriores da IA com mais clareza, especialmente quando uma resposta parecer incorreta, incompleta ou inesperada. Em vez de tentar descobrir o que aconteceu, você pode verificar como a IA interpretou a mensagem, quais informações utilizou e quais etapas do Playbook foram avaliadas.
Antes de começar
O Rastreamento de execução está disponível apenas para mensagens geradas por IA criadas depois que esse recurso for lançado na Caixa de Entrada. Essa é uma visualização somente leitura. Portanto, você pode analisar como a resposta foi gerada, mas não pode editar prompts nem a configuração do agente nessa tela.
Quando usar o Rastreamento de execução
O Rastreamento de execução pode ajudar você a:
- Entender por que a IA respondeu de determinada maneira.
- Verificar qual intenção o agente identificou na mensagem do cliente final.
- Ver quais conteúdos da Base de conhecimento foram consultados.
- Analisar quais etapas do Playbook foram executadas ou apresentaram falha.
- Ver quais ferramentas externas foram acionadas, como ações do Shopify ou APIs personalizadas.
- Entender melhor como a IA gerou uma resposta ao analisar os detalhes de execução disponíveis.
Observação: o Rastreamento de execução é uma visualização de diagnóstico somente leitura para mensagens geradas por IA após o lançamento do recurso. Os dados do Rastreamento de execução ficam disponíveis por apenas 90 dias. Nesta versão inicial, o recurso se concentra na visualização do rastreamento e não permite atualizar prompts nem a configuração do agente nessa tela.
Acessar o Rastreamento de execução
Siga as etapas abaixo para acessar o Rastreamento de execução:
Siga as etapas abaixo para acessar o Rastreamento de execução:
-
Clique no
ícone para acessar a Caixa de Entrada.
- Abra uma conversa que contenha uma mensagem histórica gerada por IA.
-
Clique em Rastreamento de execução abaixo do balão da mensagem de IA.
-
O painel do Rastreamento de execução será aberto no lado direito.
Analisar como a IA interpretou a mensagem
Na seção Compreender, você pode analisar como a IA interpretou a mensagem do cliente.
Essa seção mostra:
- A Intenção identificada.
- As informações de intenção coletadas para essa resposta.
Use essa seção para verificar se a IA classificou a mensagem corretamente antes de gerar uma resposta.
Analisar quais conhecimentos a IA consultou
Na seção Recuperar, você pode analisar o conhecimento utilizado para gerar a resposta.
Essa seção mostra:
- O título do artigo da Base de conhecimento consultado.
Use essa seção para verificar se a IA consultou a fonte de conteúdo correta para gerar a resposta.
Analisar como o Playbook foi avaliado
Na seção Agir, você pode analisar como a IA avaliou o Playbook para essa mensagem.
Essa seção mostra a lista de Execução do Playbook, permitindo visualizar quais etapas foram avaliadas para a resposta histórica.
Isso é útil para entender se uma etapa do Playbook foi concluída ou apresentou falha durante a execução.
Entender os status de execução
Para mensagens históricas geradas por IA, o Rastreamento de execução mostra apenas status estáticos já definidos.
Você poderá ver os seguintes status:
- Executado: exibido com uma marca de seleção verde.
- Falhou: exibido com um X vermelho.
Estados de carregamento e indicadores giratórios não são exibidos em rastreamentos históricos.