Resposta direta
Antes de discutir resultado, é preciso reconstruir a decisão que o piloto deveria apoiar. Sem isso, qualquer número vira disputa de interpretação. O caminho prático é registrar, de forma retroativa, quatro itens: qual decisão estava em jogo, qual indicador atual seria usado como comparação, quem lê o resultado e qual condição encerra o piloto. O indicador precisa existir antes do piloto, não ser criado depois para justificá-lo. Se a decisão não muda com o resultado, o piloto não é piloto: é despesa de aprendizado sem consequência. O critério pode ser simples, desde que seja combinado antes da leitura dos dados.
- Objetivo
- Organizar um processo
- Formato indicado
- Workshop executivo
- Atualizado em
O que esta página acrescenta: É a única página do tema que trata o critério como registro de decisão, feito antes ou reconstruído depois, e nomeia a regra de encerramento do piloto.
A decisão vem antes do indicador
Um piloto de IA existe para apoiar uma decisão. Se essa decisão não está nomeada, o resultado será lido de várias formas e cada área vai encontrar nele o que já esperava. A pergunta útil não é se o piloto funcionou, mas qual escolha ficaria diferente conforme o resultado.
Na prática, isso exige definir a linha de base antes de começar. Indicador, unidade e forma de coleta precisam vir da operação atual, não de uma medição criada para o piloto. Comparar o piloto com ele mesmo não mostra ganho nem perda.
O que registrar quando o critério já faltou
Quando o piloto já está em curso sem critério, ainda é possível organizar a leitura. O caminho é reconstruir por escrito a decisão em jogo, o indicador que já existe na operação e a data em que o resultado será discutido. O registro é retroativo, mas explícito.
Se a reconstrução mostrar que nenhuma decisão depende do resultado, o piloto muda de natureza: passa a ser exploração, com custo assumido dessa forma. Chamar isso de piloto avaliado é o que gera a disputa depois.
O que o critério não resolve
Definir critério não prova que a IA é a resposta certa. Ele apenas torna a comparação possível e a decisão discutível. Um resultado favorável ainda pode esconder efeito de contexto, dado de origem ruim ou trabalho manual que alguém fez por fora para o piloto andar.
Há casos em que o critério chega tarde demais. Se o custo do piloto já está comprometido ou a equipe já mudou de rotina em torno dele, encerrar passa a ser decisão política, não técnica. Nessa situação, o limite não é medir melhor: é reconhecer que a avaliação perdeu o momento.
Recurso prático
Registro mínimo antes de ler o resultado
| Pergunta a responder | O que fica registrado |
|---|---|
| Qual decisão o piloto deveria apoiar | A escolha concreta entre seguir, mudar de escopo ou encerrar, com o nome de quem decide |
| Com o que o resultado será comparado | O indicador atual da operação, na mesma unidade e forma de coleta, medido antes do piloto |
| Quem lê o resultado e o que faz com ele | Nome do responsável e a data em que a leitura vira decisão registrada |
O erro mais comum é escolher o indicador depois de ver o resultado do piloto. Nesse ponto ele não compara nada, apenas confirma a decisão que já se queria tomar.
Sobre o que está escrito aqui
Conceitos relacionados: critério de encerramento · indicador de comparação · linha de base operacional · responsável pela decisão · escopo do piloto. Exemplos são ilustrativos. Não há cliente, resultado, preço, prazo ou certificação nesta página. Quando o formato indicado é Workshop executivo, ele descreve uma possibilidade de trabalho — a conversa inicial avalia contexto e aderência.
Para continuar
- IA aplicada e agentes — Página central do tema
- Por onde começar com IA: o que avaliar antes — não saber por onde começar com IA
- Análise de dados com IA: quando ajuda — análise de dados sem critério de ferramenta
Páginas relacionadas
O mesmo problema em outro objetivo
- Piloto de IA sem critério: como decidir se continua — Diagnosticar
- Piloto de IA sem critério de sucesso: como comparar as opções — Comparar alternativas
- Piloto de IA sem critério de sucesso: o que medir — Explicar medição
- Piloto de IA sem critério de sucesso: o que definir antes — Orientar implementação
- Piloto de IA sem critério: como reconstruir a avaliação — Orientar avaliação e contratação
Outras leituras em IA aplicada e agentes
- Piloto de IA parado: como registrar o motivo antes de retomar — Página sobre o que registrar em um piloto de IA interrompido, quais sinais indicam a parada e qual decisão toma quem retoma ou encerra.
- Piloto de IA parado: o que falta para virar rotina — O que precisa existir para um piloto de IA sair do projeto e entrar na operação: dono, frequência, tratamento de exceção e critério de encerramento.
- Piloto de IA abandonado sem registro: retomar ou encerrar — Reconstrução da causa provável de um piloto de IA interrompido, o que verificar antes de retomar e o que registrar para não repetir o mesmo fim.
- Resultado de IA sem origem: o que comparar antes de usar — Compara formas de lidar com resultado de IA sem registro de origem e mostra o custo de conferência, o risco e a responsabilidade que cada uma cria.
- Processo sem registro: como medir a IA que entra nele — Medição de IA aplicada a processo sem documentação: como reconstruir o fluxo real, definir amostra, comparar com quem executa e tratar exceções.