Pular para o conteúdo

Soluções · IA aplicada e agentes

Base desatualizada alimentando a IA: como medir

Como medir se a base de conhecimento que alimenta a IA está desatualizada?

Resposta direta

A medição começa por três sinais verificáveis: idade do último ajuste em cada trecho, quantas perguntas reais da operação não encontram resposta na base e quantos trechos contradizem outro documento vigente. Nenhum deles depende de opinião. Combinados, formam um indicador de defasagem que se acompanha por período, não por impressão. O que a medição não entrega é a correção: ela aponta onde a base falha, não decide qual versão é válida. Essa decisão é de quem responde pela área dona do conteúdo, e é isso que transforma o indicador em ação.

Objetivo
Explicar medição
Formato indicado
Workshop executivo
Atualizado em

O que esta página acrescenta: Trata a base como ativo com prazo de validade e mede defasagem por sinais verificáveis, não por percepção da qualidade das respostas.

Sinais que se conferem sem opinião

Idade, cobertura e conflito são os três sinais que não dependem de julgamento sobre a qualidade do texto. Cada trecho da base recebe uma data de referência e um responsável. A partir disso, mede-se há quanto tempo o trecho não é revisado e se ele ainda é usado nas respostas.

Cobertura se mede pelo lado da pergunta, não do documento. Registra-se o que a operação pergunta de fato e confere-se quantas dessas perguntas não têm resposta correspondente. Base grande com muitas lacunas reais mede pior que base pequena e completa sobre o que é perguntado.

Acompanhar por período, não por impressão

Defasagem só vira indicador quando tem série. Comparar o mesmo conjunto de sinais ao longo de meses mostra se a base envelhece mais rápido do que é revisada. Um valor isolado não sustenta decisão.

Quem responde pela área dona do conteúdo define a frequência de revisão e o que conta como trecho crítico. Sem essa definição, o indicador registra o atraso, mas não gera decisão sobre prioridade nem sobre responsabilidade.

O que a medição não resolve

Medir defasagem aponta onde a base falha, mas não decide qual versão é correta nem corrige o texto. Também não substitui o julgamento de quem responde pela área.

Quando a operação muda de regra com frequência, a base envelhece mais rápido do que qualquer rotina de revisão cobre. Nesse caso o problema é do processo de atualização, e o indicador apenas registra o atraso. Em operações com poucas perguntas repetidas, o esforço de medir pode não se pagar.

Recurso prático

Indicadores de defasagem por tipo de sinal

Sinal observadoO que medir
Idade do conteúdoTempo desde o último ajuste em cada trecho e se o trecho ainda é citado nas respostas
Lacuna de coberturaPerguntas reais da operação sem trecho correspondente na base
Conflito de versãoTrechos que contradizem outro documento vigente sobre o mesmo assunto

O erro mais comum é medir só a idade do conteúdo e tratar base antiga como base errada. Trecho antigo e ainda válido não é defeito, e trecho recente já contradito é.

Sobre o que está escrito aqui

Conceitos relacionados: base de conhecimento · defasagem de conteúdo · validade de versão · cobertura de perguntas · documento vigente. Exemplos são ilustrativos. Não há cliente, resultado, preço, prazo ou certificação nesta página. Quando o formato indicado é Workshop executivo, ele descreve uma possibilidade de trabalho — a conversa inicial avalia contexto e aderência.

Para continuar

Páginas relacionadas

O mesmo problema em outro objetivo

Outras leituras em IA aplicada e agentes

Quer avaliar isso no seu contexto?

Esta página trata de base de conhecimento desatualizada alimentando a IA. Diagnóstico de Oportunidades e Riscos de IA é a frente que investiga o mecanismo por trás desse tipo de problema. O formato mais associado é Workshop executivo.