Quando um membro da equipe encontra uma mensagem gerada por IA que esteja incorreta, incompleta, confusa ou desalinhada com o comportamento esperado, ele pode reportá-la diretamente pela Caixa de Entrada. O relatório é enviado para o recurso Otimização, na página IA da SleekFlow, onde usuários com acesso à IA da SleekFlow podem revisar o problema, entender o que ocorreu, testar as alterações sugeridas e atualizar o Playbook relacionado.

A Otimização é útil para equipes que desejam aprimorar continuamente a qualidade dos agentes de IA, mantendo o processo de revisão e implantação sob controle.

Antes de começar

Antes de usar a Otimização, observe o seguinte:

• É necessário ter as permissões apropriadas para acessar o AgentFlow.
• Atualmente, somente mensagens geradas por IA podem ser reportadas pela Caixa de Entrada.
• As mensagens reportadas são enviadas para a Otimização para revisão.
• As sugestões da Otimização exigem revisão humana antes que qualquer alteração seja aplicada.
• As alterações sugeridas podem afetar o Playbook do agente, um artigo da Base de conhecimento ou ambos.
• As alterações implantadas pela Otimização são aplicadas imediatamente ao agente de IA em produção.
• Atualmente, não existe uma opção para desfazer uma atualização depois que ela é implantada.

Quando usar o recurso Otimização

A Otimização ajuda você a entender por que um agente de IA forneceu uma resposta incorreta, incompleta ou inesperada e a decidir se o problema deve ser corrigido no Playbook, na Base de conhecimento ou em ambos.

Casos de uso comuns incluem:

• O agente de IA deixa de seguir uma etapa importante do procedimento operacional padrão (SOP) definida no Playbook.
• O agente de IA responde quando deveria encaminhar o atendimento ou seguir outro fluxo de trabalho.

A Otimização ajuda sua equipe a:

• Reportar mensagens problemáticas geradas por IA diretamente pela Caixa de Entrada.
• Revisar todos os problemas reportados em um único local.
• Agrupar relatórios semelhantes ou repetidos em uma única sugestão.
• Analisar o contexto da conversa e o rastreamento de execução antes de decidir o que alterar.
• Testar as alterações sugeridas antes de aplicá-las.
• Aplicar atualizações no Playbook diretamente pela Otimização.

Sugerir um ajuste pela Caixa de Entrada

Quando você encontrar uma mensagem gerada por IA que precise ser aprimorada, poderá sugerir um ajuste diretamente na conversa da Caixa de Entrada.

Isso permite que os membros da equipe compartilhem o que acreditam que o agente de IA deve alterar, enquanto administradores ou gerentes de IA permanecem responsáveis por revisar e aplicar as atualizações na Otimização.

Sugerir um ajuste

You can follow the steps below to suggest an adjustment for an AI-generated message:

Siga as etapas abaixo para sugerir um ajuste em uma mensagem gerada por IA:

1. Clique no ícone na barra de navegação esquerda para acessar a Caixa de Entrada.
2. Abra a conversa que contém a mensagem gerada por IA.
3. Localize a mensagem gerada por IA que deseja ajustar.
4. Clique em Ajustar na mensagem.
   
    

Uma janela lateral será aberta. Ela exibe:

• A mensagem original gerada por IA.
• Um campo de comentário em texto livre.
• A ação para enviar a sugestão.
• A opção para visualizar o Rastreamento de execução da mensagem.

Use o campo de comentários para explicar o que deve ser melhorado. Você pode descrever o que estava incorreto, incompleto, pouco claro ou desalinhado com o comportamento esperado.

Depois que a sugestão for enviada, ela será encaminhada para Otimização para revisão. Um administrador ou gerente de IA poderá analisar a sugestão, verificar o contexto, testar a alteração proposta e decidir se ela deverá ser aplicada.

Dica: escreva sugestões claras. Ao sugerir um ajuste, inclua:

• O que deve ser melhorado na mensagem gerada por IA.
• Qual deveria ser a resposta ou o comportamento esperado, se souber.
• Qualquer contexto relevante sobre o cliente, produto, canal ou fluxo de trabalho.

Analisar o Rastreamento de execução antes de enviar um ajuste

Se você não tiver certeza do motivo pelo qual o agente de IA gerou determinada resposta, poderá analisar o Rastreamento de execução antes de enviar sua sugestão.

Na janela lateral de ajuste, clique em Avançado: Visualizar rastreamento de execução.

A janela lateral alternará da tela de ajuste para a visualização do Rastreamento de execução. Você poderá analisar como o agente de IA processou a mensagem do cliente e, em seguida, voltar ao formulário de ajuste para concluir seu feedback.

Dica: consulte o rastreamento se não souber exatamente o que deu errado. O Rastreamento de execução ajuda a entender quais informações o agente de IA utilizou antes que você envie sua sugestão. Para saber mais, consulte Visualizar o rastreamento de execução de mensagens de IA na Caixa de Entrada.

Enviar a sugestão

Depois de inserir seu feedback, envie a sugestão.

Após o envio:

• Uma mensagem de sucesso será exibida.
• O relatório será enviado para a seção Otimização na página do AgentFlow.
• Usuários com acesso à IA da SleekFlow poderão revisar o relatório na página Otimização.

Revisar problemas reportados na página Otimização

A Otimização é o espaço central para revisar mensagens geradas por IA reportadas, padrões de problemas agrupados e sugestões de melhoria.

Acessar a página Otimização

Siga as etapas abaixo para abrir a página Otimização:

1. Clique no ícone na barra de navegação esquerda para acessar a página IA da SleekFlow.
2. Clique na aba Otimização no menu superior.
   
    

Entender a página Otimização

A página está organizada em três áreas principais.

Problemas para revisar

O painel esquerdo exibe a lista de sugestões que aguardam revisão.

Cada item representa um problema que pode exigir uma atualização no Playbook do agente de IA. Problemas semelhantes podem ser agrupados em uma única sugestão para que sua equipe revise padrões recorrentes em vez de tratar cada relatório individualmente.

A lista mostra um breve título do problema, o agente de IA relacionado e a data de criação ou da última atualização.

Selecione um problema da lista para revisar seus detalhes.

Detalhes do problema

O painel central mostra o contexto do problema selecionado.

Essa seção ajuda você a entender o que foi reportado antes de decidir se a atualização sugerida deve ser aplicada. Ela pode incluir:

• Causa provável: resumo do motivo identificado pela Otimização para o problema.
• Ocorrências reportadas: um ou mais relatórios relacionados ao mesmo problema.
• Observação do agente: feedback enviado pelo membro da equipe na Caixa de Entrada.
• Exemplo de conversa: a conversa relacionada à mensagem gerada por IA reportada.
• Visualizações Conversa e Rastreamento da lógica: alternância entre a conversa com o cliente e o rastreamento da lógica do agente de IA.

Use essa seção para confirmar se a sugestão corresponde ao contexto real da conversa.

Correção sugerida

O painel direito mostra a atualização recomendada para o problema selecionado.

Dependendo do problema, essa seção pode incluir:

• Um resumo da atualização sugerida.
• A área do Playbook que poderá ser atualizada.
• Uma explicação de como a atualização resolve o problema reportado.
• Uma ação para revisar a atualização sugerida, como Revisar atualização do Playbook.
• Resultados dos testes, como o número de cenários aprovados ou que precisam de revisão.
• Ações como Revisar cenários com falha, Aplicar atualização ou Descartar sugestão.

Use essa seção para revisar, testar, aplicar ou descartar a atualização sugerida.

Observação: as sugestões exigem revisão humana. A Otimização pode sugerir atualizações com base nas sugestões enviadas, mas elas não são aplicadas automaticamente. Revise os detalhes do problema, verifique a correção sugerida e teste a alteração antes de aplicá-la ao agente de IA em produção.

Revisar a atualização sugerida

Se a correção sugerida exigir uma alteração no Playbook, clique em Revisar atualização do Playbook para abrir a visualização detalhada.

Essa tela permite analisar exatamente o que a Otimização está propondo antes de testar ou aplicar a alteração.

A página da atualização sugerida inclui:

• A seção do Playbook que será atualizada.
• Todo o conteúdo do Playbook ao redor da alteração para fornecer contexto.
• O número de linhas adicionadas e removidas.
• Alterações destacadas.
• Um painel Usar IA para editar sugestão.

O conteúdo adicionado é destacado em verde. O conteúdo removido aparece em vermelho com texto tachado.

Use essa visualização para comparar a instrução original do Playbook com a atualização sugerida. Isso ajuda a confirmar se a alteração resolve o problema reportado sem modificar instruções não relacionadas.

No painel Usar IA para editar sugestão, você pode solicitar que a IA refine a atualização sugerida antes de aplicá-la. Por exemplo, você pode pedir que a instrução fique mais clara, que a estrutura seja ajustada ou que seja sugerida outra versão da correção.

Quando terminar, clique em Fechar, no canto superior direito, para fechar esse painel.

Revisar e gerenciar o painel Correção sugerida

O painel Correção sugerida mostra a atualização recomendada para o problema selecionado. Ele explica o que a Otimização recomenda alterar e como essa atualização pode resolver o problema reportado.

Dependendo do resultado do teste e do status da sugestão, você poderá executar as seguintes ações.

Revisar cenários com falha

Se o teste de impacto indicar que um ou mais cenários precisam de revisão, clique em Revisar cenários com falha.

Use essa opção para revisar cenários que não foram aprovados ou que exigem análise humana antes de aplicar a atualização. Depois da revisão, você poderá ajustar a sugestão, executar um novo teste, aplicar a atualização ou descartá-la.

Lidar com sugestões desatualizadas

Se o Playbook ou o artigo da Base de conhecimento relacionado tiver sido alterado após a geração da sugestão, a Otimização marcará a sugestão como desatualizada.

Quando isso acontecer, a ação de aplicação ficará desabilitada. Você não poderá aplicar a sugestão existente porque ela poderá estar baseada em conteúdo desatualizado.

Clique em Regenerar com a versão mais recente para criar uma nova sugestão com base no conteúdo mais recente do Playbook ou da Base de conhecimento. Depois que ela for gerada, revise as alterações atualizadas antes de aplicá-las.

Isso significa que a sugestão pode estar baseada em conteúdo desatualizado. Regere a sugestão para analisar uma recomendação atualizada baseada na versão mais recente do Playbook ou da Base de conhecimento.

Aplicar a atualização sugerida

Clique em Aplicar alterações ou Aplicar mesmo assim para aplicar a atualização sugerida.

Use Aplicar mesmo assim somente quando você tiver revisado os cenários sinalizados e estiver confortável em implantar a atualização apesar do aviso.

Depois de aplicada, a atualização correspondente do Playbook será implantada imediatamente no agente de IA em produção.

Descartar a sugestão

Clique em Descartar quando não quiser aplicar a atualização sugerida.

Use essa opção quando a sugestão não for necessária, não corresponder ao problema ou não exigir uma alteração no Playbook.

Depois de descartada, a sugestão será removida da lista de revisões em aberto. Nenhuma alteração será aplicada ao agente de IA.

Lidar com sugestões sem correção sugerida

Algumas sugestões podem não incluir uma atualização sugerida para o Playbook.

Isso pode acontecer quando a Otimização precisa de mais contexto ou quando o problema exige avaliação humana antes que uma correção possa ser sugerida.

Se nenhuma correção sugerida for exibida, revise os detalhes do problema e o contexto da conversa. Em seguida, decida se deseja:

• Usar a IA para explorar uma possível correção.
• Atualizar manualmente o Playbook relacionado.
• Descartar a sugestão, caso nenhuma ação seja necessária.

Boas práticas

• Escreva sugestões de ajuste claras. Ao sugerir um ajuste pela Caixa de Entrada, explique o que deve ser melhorado e qual deve ser a resposta ou comportamento esperado. Inclua contexto sobre cliente, produto, canal ou fluxo de trabalho sempre que for relevante.
• Revise cuidadosamente as sugestões agrupadas. Relatórios semelhantes podem ser agrupados em uma única sugestão. Analise as ocorrências reportadas para confirmar que elas compartilham a mesma causa provável.
• Use o Rastreamento da lógica quando a causa não estiver clara. Se você não souber por que o agente de IA respondeu de determinada maneira, consulte o Rastreamento da lógica para entender a intenção, o conhecimento consultado, as ações executadas e as integrações utilizadas.
• Revise os cenários com falha antes de aplicar alterações. Se o resultado do teste indicar cenários que exigem revisão, analise-os antes de aplicar a atualização. Use Aplicar mesmo assim apenas quando compreender o impacto e estiver confortável em implantar a alteração.
• Revise cuidadosamente os detalhes da implantação. As atualizações são aplicadas imediatamente ao agente de IA em produção e atualmente não podem ser desfeitas. Revise o agente afetado, os resultados dos testes e o resumo das alterações antes da implantação.