Resposta direta
A revisão antes do envio se compara por três desenhos. Revisão integral: alguém lê toda resposta; cabe onde o erro custa caro e o volume é baixo. Amostragem: lê-se uma parte e o restante segue; cabe em volume alto e erro barato de corrigir. Limite por tipo: define-se o que sempre passa por revisão, como valor, prazo ou compromisso, e o que segue direto. O critério de escolha é o custo do erro contra o custo da leitura, não a confiança em quem escreveu. As três exigem registro de quem revisou e do que foi liberado. Sem esse registro, não há como saber se o filtro funciona.
- Objetivo
- Comparar alternativas
- Formato indicado
- Workshop executivo
- Atualizado em
O que esta página acrescenta: Compara os desenhos de revisão entre si e trata o registro da liberação como parte do filtro, não como burocracia posterior.
O que separa os três desenhos na prática
A diferença não está em quanta revisão existe, mas em onde ela é decidida. Na leitura integral, a decisão é do revisor, resposta por resposta. Na amostragem, a decisão é de quem define o tamanho da amostra e o que fazer com o que ela encontra. No limite por tipo, a decisão é de quem escreve a regra que separa o que passa direto do que para na fila.
Isso muda a responsabilidade. Se a regra está errada e uma resposta indevida saiu, o problema é de quem escreveu a regra, não de quem não revisou. Definir de antemão quem responde por isso evita que a discussão aconteça só depois do incidente.
Como escolher usando custo do erro e volume
Compare dois valores para cada grupo de resposta: o que custa um erro chegar ao destinatário e quanto tempo consome uma leitura. Onde o custo do erro é maior, a leitura integral se paga. Onde é menor e o volume é alto, a amostragem libera tempo.
O limite por tipo costuma cobrir o que a média esconde: mudança de valor, promessa de prazo, dado de outra pessoa. São poucos casos e, por isso, cabem em conferência obrigatória mesmo com o restante seguindo direto.
Como esses valores variam por operação, o que se mede é o custo do retrabalho de um erro que passou e o tempo de leitura por resposta. Sem essas duas medições, a escolha vira preferência.
O que nenhum dos três desenhos resolve
Nenhum deles corrige resposta errada por falta de dado. Se a IA não tem a informação, a revisão só evita o envio, não produz a resposta certa. O problema, nesse caso, é de acesso à informação, não de conferência.
A amostragem não protege contra o erro raro e grave, e a leitura integral não protege contra o revisor cansado ou apressado. O limite por tipo depende de a regra estar escrita e de alguém mantê-la atualizada.
Os três também não substituem a decisão sobre o que a operação aceita enviar sem conferência. Isso é escolha de risco, feita por quem responde pelo resultado, não pelo time que redige o texto.
Recurso prático
Roteiro para escolher o filtro de revisão antes do envio
- Liste as respostas que a operação envia com apoio de IA e agrupe pela consequência: o que só informa, o que assume prazo e o que assume valor.
- Para cada grupo, estime o custo de um erro chegar ao destinatário e o tempo de uma leitura completa. Compare os dois, não a impressão sobre a qualidade do texto.
- Escolha o desenho por grupo: leitura integral onde o custo do erro supera o tempo de leitura, amostragem onde não supera, e limite por tipo para o que sempre precisa de conferência.
- Defina o registro da liberação: quem conferiu, quando e o que foi liberado. É o que permite avaliar o filtro depois, com base no que passou.
- Marque a data de reavaliação e os sinais que fariam o desenho mudar, como aumento de volume ou mudança no tipo de resposta enviada.
O erro mais comum é adotar amostragem para reduzir trabalho e nunca medir o que a amostra deixou passar. Sem esse retorno, a amostragem vira ausência de revisão com aparência de controle.
Sobre o que está escrito aqui
Conceitos relacionados: revisão por amostragem · limite por tipo de resposta · registro de liberação · custo do erro · volume de atendimento. Exemplos são ilustrativos. Não há cliente, resultado, preço, prazo ou certificação nesta página. Quando o formato indicado é Workshop executivo, ele descreve uma possibilidade de trabalho — a conversa inicial avalia contexto e aderência.
Para continuar
- IA aplicada e agentes — Página central do tema
- Agente sem supervisão: riscos e onde colocar… — agentes sem supervisão
- Avaliar resposta de IA antes de produção: um… — respostas incorretas
Páginas relacionadas
O mesmo problema em outro objetivo
- Resposta de IA sem revisão: onde o envio escapa — Diagnosticar
- Resposta de IA sem revisão antes do envio: o que decidir — Organizar um processo
Outras leituras em IA aplicada e agentes
- Agente sem supervisão: comparar alternativas de controle — Compara arranjos de supervisão para agentes — aprovação antes da ação, limite por tipo de ação e revisão por amostragem — e o que medir em cada um.
- Agente que age sem registro: o que comparar — Compara quatro formas de deixar rastro na execução de agentes, o que cada uma registra, o custo operacional e onde costuma falhar.
- Classificação: como medir acerto sem esperar reclamação — Medição de classificação automática: o que comparar, quem responde pelo critério e o que a taxa de acerto não cobre.
- Equipe sem treinamento antes da ferramenta: o que comparar — Compara treinar a equipe antes da ferramenta, escolher a ferramenta primeiro e rodar um piloto, pelo critério do custo do erro em cada tarefa.
- Resposta longa tratada como boa: onde entra o critério — Descreve por que extensão é lida como qualidade em respostas de IA e como amarrar o critério de aceite ao uso declarado antes da aprovação.