Resposta direta
Resposta longa é fácil de produzir e difícil de conferir. O que separa as duas coisas é a densidade verificável: quanto do texto se liga a uma fonte, a um dado ou a um passo de cálculo, e quanto é repetição do pedido. Na contratação, isso vira critério de aceitação por tarefa, não por volume entregue. A verificação pede a mesma pergunta feita com informação parcial, a lista das fontes usadas e o registro do que ficou fora do escopo. Texto que não admite conferência não se sustenta só porque é longo.
- Objetivo
- Orientar avaliação e contratação
- Formato indicado
- Workshop executivo
- Atualizado em
O que esta página acrescenta: Separa extensão de conteúdo conferível dentro da aceitação, sem depender de conjunto de teste nem de escolha de fornecedor.
Por que o texto longo convence antes de ser conferido
Uma resposta extensa cobre a falta de dado com texto. Quando o pedido é vago, produzir muitos parágrafos genéricos é mais fácil do que assumir o que não se sabe. Dois textos do mesmo tamanho podem ter valores muito diferentes de informação conferível.
A leitura rápida tende a avaliar fluência, não aderência ao caso. Frases bem construídas passam por revisão sem que ninguém volte à fonte, ao número ou ao passo de cálculo que sustenta a afirmação.
O que registrar na avaliação e na aceitação
A avaliação começa pela tarefa, não pelo texto: uma pergunta real, a informação disponível e o que conta como resposta aceita. Sem esse recorte, qualquer resposta parece razoável.
Na conferência, marca-se cada trecho ligado a uma fonte, a um dado ou a um cálculo, e o que sobra. Na aceitação, fica registrado o que foi verificado, com qual referência e por quem, para que o critério não dependa da memória de quem leu.
Onde esse critério não alcança
Conferir trechos não diz se a tarefa valia ser feita. Uma resposta rastreável pode estar correta e ainda assim ser irrelevante para a decisão em pauta. O critério mede aderência, não utilidade.
Ele também não substitui teste com dado de operação. Perguntas cuja referência não existe em lugar nenhum não têm como ser conferidas, e a extensão volta a ser o único sinal visível. Nesses casos, o limite está no acervo e na pergunta, não na resposta.
Recurso prático
Conferência da resposta antes da aceitação
- Fixe a tarefa antes de ler o texto: uma pergunta real, a informação disponível e o que conta como resposta aceita.
- Percorra o texto e marque cada trecho ligado a uma fonte, a um dado ou a um cálculo; o que sobra é comentário.
- Repita o pedido com uma informação faltante e observe se a resposta reconhece a lacuna ou preenche por conta própria.
- Registre o que foi conferido, com qual referência e por quem, antes de considerar a entrega aceita.
O erro mais comum é medir a proposta pelo tamanho do texto de demonstração. Texto longo costuma indicar que o pedido foi amplo, não que a resposta foi conferida.
Conceitos usados nesta página
- Critério de aceite — Critério de aceite é a condição objetiva que define quando uma entrega, tarefa ou automação é considerada concluída — verificável por quem recebe, não por quem produziu.
Sobre o que está escrito aqui
Conceitos relacionados: densidade verificável · critério de aceitação · rastreio de fonte · teste com informação parcial · escopo do pedido. Exemplos são ilustrativos. Não há cliente, resultado, preço, prazo ou certificação nesta página. Quando o formato indicado é Workshop executivo, ele descreve uma possibilidade de trabalho — a conversa inicial avalia contexto e aderência.
Para continuar
- IA aplicada e agentes — Página central do tema
- Avaliar resposta de IA antes de produção: um… — respostas incorretas
- Busca em documentos com IA: quando ajuda e qu… — ferramentas isoladas
Páginas relacionadas
O mesmo problema em outro objetivo
- Resposta longa de IA: o que separa texto de decisão — Diagnosticar
- Resposta longa tratada como boa: onde entra o critério — Organizar um processo
- Resposta longa: como separar tamanho de qualidade — Comparar alternativas
- Resposta longa confundida com resposta boa: como medir — Explicar medição
- Resposta longa confundida com resposta boa: o que medir — Orientar implementação
Outras leituras em IA aplicada e agentes
- Avaliação de IA: medir o erro comum, não o caso extremo — Medição de qualidade em IA pela frequência dos erros comuns, pelo custo de corrigir cada tipo de falha e pelo que a amostra da operação revela.
- Modelo escolhido por reputação: o que verificar na contratação — O que separar entre reputação e evidência ao contratar um modelo de IA: critérios de avaliação, responsabilidade e o que fica fora do contrato.
- Modelo escolhido por reputação: como testar antes de escalar — Descreve como separar reputação de ajuste ao processo e quais critérios observar antes de ampliar o uso de um modelo de IA.
- IA sem erro evidente: como saber se ela está sob controle — Avaliação de IA quando não há falha grave: o que observar nas decisões, no erro tolerável e na correção possível após o erro.
- Erro de IA tratado como falha da pessoa: o que separar — Processo para separar erro de IA de erro de pessoa: o que registrar, quem responde e onde o limite fica antes de virar cobrança.