Painel de automação costuma mostrar o número mais fácil: quantas mensagens a IA respondeu. Esse número sempre cresce e não significa quase nada. Cinco outros dizem a verdade.
1. Tempo até a primeira resposta
Medido por faixa de horário, não em média. O ganho da automação aparece justamente nas faixas em que não há gente trabalhando. Se o número da noite continua alto, a IA está desligada exatamente quando deveria estar cobrindo.
2. Conversas resolvidas sem humano
A proporção de conversas que começaram e terminaram na IA sem ninguém do time entrar. Cuidado com a leitura fácil: resolver não é a pessoa desistir. Só conta como resolvida se teve desfecho, como agendamento marcado, informação entregue ou pedido registrado.
3. Transferências para humano, e o motivo
Transferência não é fracasso. Transferência sem motivo registrado, sim. Quando você agrupa os motivos, aparece o mapa do que falta: preço fora da tabela, dúvida técnica, reclamação, pedido de gente.
Motivo que se repete muito é candidato a virar resposta da IA. Motivo raro e delicado deve continuar com pessoa.
4. Perguntas que a IA não soube responder
O indicador mais útil de todos e o mais ignorado. Toda semana deve existir uma lista do que chegou e não teve resposta boa. É dela que sai o ajuste da semana seguinte.
Se essa lista está vazia, desconfie: ou ninguém está olhando, ou a IA está inventando resposta em vez de admitir que não sabe. O segundo caso é pior.
5. Conversa que virou próximo passo
O próximo passo muda conforme o negócio: agendamento, visita, orçamento enviado, pedido feito. É o único número que liga o atendimento ao dinheiro.
Sem ele, você fica sabendo que a IA responde rápido, mas não se ela vende.
Como usar os cinco juntos
Isolados, cada um engana. Resolução alta com próximo passo baixo significa que a IA está encerrando conversa que deveria continuar. Transferência alta com tempo de resposta baixo significa que ela está passando adiante rápido demais.
Olhe os cinco na mesma tela, uma vez por semana, e ajuste uma coisa por vez. Automação boa não nasce pronta, ela é corrigida com o que a operação mostra.
Cleiton Sampaio
Fundador da Alva IA Tech
Constrói sistemas de IA conversacional, automação e dados para operações que vivem de mensagem. Escreve sobre o que dá certo e sobre o que quebrou no caminho.