Resposta direta
Resposta longa não é resposta boa. São coisas diferentes: extensão mede esforço de escrita, qualidade mede se a resposta sustenta uma decisão. A comparação útil não é entre tamanhos, e sim entre três alternativas de avaliação: critério definido antes da pergunta, checagem do que a resposta afirma contra a fonte, e teste com alguém que não escreveu o pedido. Cada uma custa tempo diferente e cobre um risco diferente. Escolher a mais barata que cobre o risco real da decisão é o critério. Nenhuma das três resolve quando ninguém definiu o que seria uma resposta correta.
- Objetivo
- Comparar alternativas
- Formato indicado
- Workshop executivo
- Atualizado em
O que esta página acrescenta: Compara três formas de avaliar resposta de IA pelo risco que cada uma cobre, em vez de tratar o tema como um critério único.
Três formas de avaliar, com custos diferentes
Três alternativas cobrem riscos distintos. A primeira define o que seria uma resposta aceitável antes de fazer a pergunta, por escrito e em poucas linhas. A segunda confronta cada afirmação da resposta com a fonte citada, item por item. A terceira entrega a resposta a alguém que não participou do pedido e registra o que essa pessoa entendeu.
O custo cresce nessa ordem: minutos, dezenas de minutos, e uma interrupção na agenda de outra pessoa. O que define a escolha é o custo do erro, não a sofisticação do método. Resposta que alimenta decisão reversível raramente justifica a terceira via.
O que muda conforme a decisão
Em decisão reversível, o critério definido antes basta na maioria dos casos. Se a resposta erra, o desvio aparece na operação em pouco tempo e o retrabalho é interno. A checagem contra a fonte entra quando a resposta cita dado, norma ou contrato.
Em decisão irreversível ou com terceiro envolvido, a revisão por alguém de fora do pedido passa a valer o tempo que consome. Não por desconfiança da IA, mas porque quem escreveu o pedido tende a ler a resposta procurando confirmação. A responsabilidade de assinar continua sendo de quem decide, não de quem produziu o texto.
O que a comparação não resolve
Nenhuma das três vias funciona quando não existe fonte para checar ou quando ninguém sabe dizer o que seria uma resposta correta. Nesse caso o problema é anterior: falta definição do que a decisão exige. Avaliar texto não resolve critério ausente.
Também não se aplica quando o custo de revisar supera o custo de refazer. E não mede o que não é técnico: resposta que precisa de aval de área, de jurídico ou de sócio se decide por acerto político, não por qualidade de texto. A comparação orienta a triagem, não substitui quem responde pela decisão.
Recurso prático
O que comparar antes de escolher como avaliar a resposta
- Decisão que a resposta alimenta: reversível ou não
- Fonte disponível para checar cada afirmação citada
- Quem assina a decisão e se aceita revisar o texto
- Tempo de leitura e de checagem que a rotina comporta
- Custo de errar: retrabalho interno, retrabalho com terceiro, ou nenhum
- Se existe definição escrita do que seria uma resposta correta
O ponto mais ignorado é o tempo de quem revisa. Métodos que consomem agenda de outra área são abandonados em poucas semanas, mesmo quando funcionam.
Conceitos usados nesta página
- Critério de aceite — Critério de aceite é a condição objetiva que define quando uma entrega, tarefa ou automação é considerada concluída — verificável por quem recebe, não por quem produziu.
Sobre o que está escrito aqui
Conceitos relacionados: resposta longa · critério de aceite · checagem contra fonte · revisão por terceiro · decisão reversível. Exemplos são ilustrativos. Não há cliente, resultado, preço, prazo ou certificação nesta página. Quando o formato indicado é Workshop executivo, ele descreve uma possibilidade de trabalho — a conversa inicial avalia contexto e aderência.
Para continuar
- IA aplicada e agentes — Página central do tema
- Apoio comercial com IA: onde faz sentido e on… — não saber por onde começar
- Classificação automática: onde usar e onde não — triagem manual de textos
Páginas relacionadas
O mesmo problema em outro objetivo
- Resposta longa de IA: o que separa texto de decisão — Diagnosticar
- Resposta longa tratada como boa: onde entra o critério — Organizar um processo
- Resposta longa confundida com resposta boa: como medir — Explicar medição
- Resposta longa confundida com resposta boa: o que medir — Orientar implementação
- Resposta longa de IA: o que exigir antes de contratar — Orientar avaliação e contratação
Outras leituras em IA aplicada e agentes
- Automação sem revisão: onde o erro passa em silêncio — Roteiro para checar uma proposta de automação total e identificar quais decisões ficam sem revisão, sem dono e sem registro de divergência.
- Expectativa de resultado com IA sem medida: o que comparar — Descreve como comparar alternativas de IA quando a meta de resultado foi definida sem medição, e o que registrar antes de decidir.
- Sem caso extremo: como avaliar IA pelo que já acontece — Avaliação de IA a partir de casos comuns: amostra da rotina, classes por consequência do erro e critério de aceite definido antes de ver o resultado.
- Modelo escolhido por reputação: como medir na operação — Descreve como comparar o modelo escolhido por reputação com a própria operação, definindo critério de aceite, revisão humana e custo por saída aceita.
- Teste de IA sem gabarito: o que fica no contrato — Descreve como estruturar a avaliação de um sistema de IA sem respostas certas prontas, definindo amostra, critério de aceite e responsável pela decisão.