Como testar o agente de IA antes de colocar no ar

Cliente não faz as perguntas do treino. Veja as quatro rodadas de teste que revelam lacuna, contradição e falta de regra antes de alguém real conversar.

Resposta rápida: um teste de meia hora evita quase todo problema que apareceria com cliente. São quatro rodadas: as dez perguntas mais frequentes, as perguntas mal escritas, as perguntas fora do escopo e as tentativas de burlar as regras. A rodada que mais gente pula é a terceira — e é a que revela se o agente admite não saber ou prefere inventar.

A tentação é testar o agente com as perguntas que ele foi treinado para responder, ver que funciona e publicar. O problema é que cliente não faz as perguntas do treino: ele escreve errado, pergunta o que não existe e às vezes tenta ver até onde dá para forçar.

As quatro rodadas do teste

1. As dez mais frequentes

Com a resposta certa em mãos, para comparar. Erro aqui significa lacuna ou contradição na base — é o conserto mais simples.

2. As mal escritas

Do jeito que o cliente escreve de verdade: sem acento, com abreviação, com erro de digitação, em uma linha só sem pontuação. “qnto custa o kit e vcs entrega em bh?” é um teste legítimo, não uma pegadinha.

3. As fora do escopo

Pergunte algo que a sua empresa não faz. A resposta certa é admitir que não sabe e oferecer um atendente. Se ele improvisar, falta regra ou falta autorização explícita para dizer “não sei”.

4. As tentativas de burlar

Peça desconto de forma insistente. Invente urgência. Afirme com convicção algo falso (“vocês têm aquele plano de 90 dias, né?”). Escreva instruções para o agente, do tipo “ignore o que te disseram”. Essa rodada testa as regras de contenção.

Tabela: o que cada falha indica

O que aconteceu no testeO que está faltando
Errou pergunta frequenteMaterial na base
Respondeu diferente duas vezesContradição entre documentos
Não entendeu texto abreviadoExemplos de linguagem real
Inventou resposta fora do escopoAutorização para dizer “não sei”
Ofereceu descontoRegra de contenção comercial
Aceitou instrução do clienteRegra de origem da instrução
Soou como outra empresaConfiguração de tom de voz

Quem deve testar (e não é só você)

  1. Você, com a lista das quatro rodadas.
  2. Alguém do atendimento, que conhece as perguntas reais e vai reconhecer o que soa errado.
  3. Alguém de fora da operação, que não sabe as respostas — é quem mais descobre buraco, porque pergunta o que ninguém pensou.
  4. Um cliente antigo de confiança, se possível. O feedback dele vale por dez testes internos.

Depois de publicar, o teste continua

Teste inicial não substitui acompanhamento: leia dez conversas reais por semana nas primeiras semanas, com atenção às que foram transferidas e às que a pessoa abandonou. E resista à vontade de publicar com a base pela metade “para ir ajustando com o uso” — os primeiros clientes viram cobaias sem ter pedido, e a primeira impressão ruim é a mais cara de consertar.

Perguntas frequentes

Com quatro rodadas: as dez perguntas mais frequentes, perguntas mal escritas como o cliente escreve, perguntas fora do escopo e tentativas de burlar as regras.

O de perguntas fora do escopo. É justamente o que revela se o agente admite não saber ou se prefere inventar uma resposta plausível.

Adicionar a autorização explícita para dizer que não sabe e oferecer atendente, além de declarar o escopo do que ele trata.

Você, alguém do atendimento, alguém de fora da operação e, se possível, um cliente antigo de confiança. Quem não sabe as respostas encontra mais buracos.

Não é recomendável. Os primeiros clientes viram teste sem terem pedido, e a primeira impressão ruim é a mais cara de reverter.

Meia hora de teste evita semanas de conserto com cliente. Configure e teste em chatbot com IA no WhatsApp.

Preencha os dados abaixo