Pular para o conteúdo

Soluções · IA aplicada e agentes

Resposta automática sem aviso de automação: o que medir

Como saber se o cliente percebe que a resposta é automática?

Resposta direta

Mede-se pelo reconhecimento declarado do cliente, não pela intenção de transparência da empresa. Três indicadores bastam: parcela de conversas em que o cliente identifica a automação antes de ser avisado; tempo até a primeira pergunta sobre isso; e taxa de conversas encerradas logo após a revelação. Os dados vêm de dois lugares: o registro do que o sistema declarou e a fala do cliente na conversa. Sem os dois lados, o número mede apenas o que a empresa diz, não o que o cliente entendeu.

Objetivo
Explicar medição
Formato indicado
Workshop executivo
Atualizado em

O que esta página acrescenta: Trata a identificação da automação como algo observável na fala do cliente e entrega o cálculo do índice; as outras páginas do tema tratam de escopo, risco, contratação ou avaliação de respostas.

O que conta como identificação

Identificação é o que o cliente demonstra ter percebido, não o que o sistema informa. Uma frase fixa no início da conversa pode existir e ainda assim passar sem leitura. O indício está na fala seguinte: o cliente pergunta se fala com um robô, pede uma pessoa, muda o tom ou abandona.

A contagem separa três casos. Cliente que percebeu antes de qualquer aviso. Cliente que só percebeu depois do aviso. Cliente que nunca mencionou e encerrou o assunto. Os três têm pesos diferentes e não devem ser somados em um único número.

Registro que não depende de interpretação

A apuração exige regra escrita antes da contagem: quais conversas entram, o que conta como pergunta sobre automação e quem classifica. Duas pessoas leem a mesma amostra e comparam o resultado. Divergência alta indica regra ambígua, não falha de quem leu.

O registro fica no histórico da conversa, com data, canal e trecho citado. A responsabilidade é de quem opera o atendimento, não de quem comprou a ferramenta. Revisão mensal acompanha tendência; revisão conversa a conversa não escala e vira auditoria sem uso.

O que o índice não mostra

O índice não mede qualidade da resposta. Uma automação bem identificada pode responder mal, e o cliente desiste mesmo sabendo com quem fala. Também não mede quem saiu em silêncio: conversa encerrada sem menção não prova que a automação passou despercebida.

Não serve como prova de conformidade nem substitui parecer jurídico sobre exigência de aviso. Amostra pequena por canal produz oscilação que parece tendência. E o número não diz se revelar a automação aumenta ou reduz abandono; para isso seria outro desenho de medição, com comparação entre grupos.

Recurso prático

Índice de reconhecimento da automação

IRA = (Cie / Cae) x 100, com Cie e Cae apurados no mesmo canal e na mesma janela de N dias

Cie
conversas
conversas em que o cliente menciona a automação antes de qualquer aviso do sistema
Cae
conversas
conversas conduzidas por resposta automática no mesmo canal e na mesma janela
N
dias
janela de apuração; Cie e Cae são contados no mesmo intervalo

O erro mais comum é contar a declaração do sistema como identificação. Isso mede o que a empresa escreveu na tela, não o que o cliente percebeu. A contagem precisa sair da fala do cliente e ser feita por quem lê a conversa, com regra escrita antes da apuração.

Sobre o que está escrito aqui

Conceitos relacionados: identificação de automação · reconhecimento do cliente · tempo até a pergunta · histórico de conversa · amostra por canal. Exemplos são ilustrativos. Não há cliente, resultado, preço, prazo ou certificação nesta página. Quando o formato indicado é Workshop executivo, ele descreve uma possibilidade de trabalho — a conversa inicial avalia contexto e aderência.

Para continuar

Páginas relacionadas

O mesmo problema em outro objetivo

Outras leituras em IA aplicada e agentes

Quer avaliar isso no seu contexto?

Esta página trata de resposta automática sem identificação de automação. Diagnóstico de Oportunidades e Riscos de IA é a frente que investiga o mecanismo por trás desse tipo de problema. O formato mais associado é Workshop executivo.