Pular para o conteúdo

Soluções · IA aplicada e agentes

Resposta de IA virou fonte única: o que precisa constar

Como contratar uma resposta de IA que vai ser usada como fonte única?

Resposta direta

Contratar uma resposta de IA usada como fonte única é contratar responsabilidade por erro, não uma resposta certa. O fornecedor precisa declarar de onde vem o dado, com que frequência é atualizado, quem revisa a saída e qual o caminho de correção quando alguém encontra informação errada. Sem esses quatro pontos, a resposta vira decisão sem dono. O critério prático: se a resposta muda uma decisão e não existe outra fonte para conferir, o contrato precisa prever registro do que foi respondido, prazo para corrigir e um responsável nomeado pela informação.

Objetivo
Orientar avaliação e contratação
Formato indicado
Workshop executivo
Atualizado em

O que esta página acrescenta: Trata a resposta como fonte primária e obriga a contratação a cobrir rastreabilidade, registro e responsabilidade, em vez de discutir apenas a qualidade da resposta.

O que muda quando não existe segunda fonte

Quando a resposta de IA é a única referência, o custo do erro troca de lugar. Ele deixa de aparecer na conferência e passa a aparecer na decisão. Sem segunda opinião para comparar, a discordância desaparece do processo e quem executa segue a resposta por padrão.

Isso altera a responsabilidade antes de alterar a tecnologia. Sem outra fonte, ninguém no fluxo tem insumo para afirmar que a resposta está errada. A correção depende de alguém perceber o erro no resultado, geralmente tarde e fora de qualquer registro. A contratação assume o papel de definir como esse erro volta para o fornecedor e para o dono da informação.

O que sustenta a contratação

Quatro pontos precisam estar resolvidos antes da assinatura: origem do dado, atualização, revisão e contestação. Origem significa qual base ou documento sustenta a resposta e se esse material é interno ou de terceiro. Atualização significa com que frequência o material muda e quem avisa quando muda. Revisão significa se existe alguém que lê a resposta antes de ela circular.

Contestação é o ponto que costuma ficar de fora. Precisa estar escrito onde a resposta fica registrada, em quanto tempo um erro relatado é corrigido e quem responde por ele. Sem registro, a discussão sobre qualidade vira opinião contra opinião, e o fornecedor não tem obrigação verificável.

O que esse arranjo não resolve

Contrato e registro não tornam a resposta correta. Eles tornam o erro visível e atribuível. Um dado de origem ruim continua ruim mesmo com rastreabilidade completa. Quando a base não contém a informação, nenhum acordo de nível de serviço cria o dado que falta.

O arranjo também não substitui o dono da informação. Se a organização não tem um responsável nomeado pelo dado, a cláusula de correção não encontra contraparte para agir. Nesse caso, a fonte única segue sendo única por ausência de responsabilidade, não por qualidade da resposta.

Recurso prático

Perda esperada em um ano com resposta sem conferência

Perda anual = (decisões por mês × taxa de erro na amostra × custo por erro × 12) + (horas de conferência por mês × custo da hora × 12)

decisoes_mes
decisões por mês
quantidade de decisões por mês que usam a resposta de IA sem outra fonte de conferência
taxa_erro
erros por decisão
proporção de respostas erradas encontradas na amostra conferida, medida sobre um período definido e não estimada de memória
custo_erro
R$ por erro
custo direto de uma decisão tomada com informação errada, levantado com o time que executa a correção
horas_conferencia
horas por mês
tempo gasto conferindo a resposta depois do fato, fora do fluxo, por quem já desconfia do resultado
custo_hora
R$ por hora
custo carregado da hora de quem faz essa conferência posterior

O ponto mais ignorado é a conferência que acontece fora do fluxo: quando alguém checa a resposta só depois do erro, o tempo gasto não entra no orçamento nem no registro, e o mesmo problema volta no mês seguinte sem aparecer na conta.

Sobre o que está escrito aqui

Conceitos relacionados: fonte primária de informação · rastreabilidade da resposta · acordo de nível de serviço · registro de consultas · responsável pela informação. Exemplos são ilustrativos. Não há cliente, resultado, preço, prazo ou certificação nesta página. Quando o formato indicado é Workshop executivo, ele descreve uma possibilidade de trabalho — a conversa inicial avalia contexto e aderência.

Para continuar

Páginas relacionadas

O mesmo problema em outro objetivo

Outras leituras em IA aplicada e agentes

Quer avaliar isso no seu contexto?

Esta página trata de resposta de IA usada como fonte única. Diagnóstico de Oportunidades e Riscos de IA é a frente que investiga o mecanismo por trás desse tipo de problema. O formato mais associado é Workshop executivo.