Pular para o conteúdo

Soluções · Integrações, sistemas e qualidade de dados

Medição · Volume de dados sem política de retenção: o que medir

Quanto dado a operação acumula e como medir isso sem uma política de retenção definida?

Resposta direta

Medir volume sem política de retenção é medir acúmulo, não estoque útil. O caminho é contar registros por base e por tabela, medir idade do registro mais antigo e mais recente e observar a taxa de crescimento em janelas fixas. Sem política de retenção, o número que importa não é o total, e sim quanto do total nunca é lido, exportado ou consultado. Isso exige registro de acesso, que muitos sistemas não guardam. Onde esse registro não existe, resta estimar por amostragem e declarar a estimativa como estimativa.

Objetivo
Explicar medição
Formato indicado
Projeto de implementação
Atualizado em

O que esta página acrescenta: Trata medição de volume como medição de acúmulo e de uso ao mesmo tempo, não como inventário de tabelas.

Contagem por tabela, por período e por tamanho

Volume se mede em três unidades, e elas não contam a mesma história. Número de registros mostra o esforço de leitura e de cópia. Tamanho em disco mostra o custo de armazenamento e de backup. Idade do registro mais antigo mostra há quanto tempo a base cresce sem descarte. Medir só uma das três leva a decisão errada.

A contagem precisa de janela fixa e mesma hora de corte. Comparar o dia primeiro com o dia trinta, sempre no mesmo horário, evita confundir crescimento com a carga do dia. Em tabelas que recebem anexo ou texto longo, o número de registros cresce pouco e o tamanho em disco cresce muito. Os dois números são reais e medem coisas distintas.

Armazenado, lido e exportado

Armazenar não é usar. Uma base pode dobrar de tamanho e ter leitura concentrada em registros recentes. A distância entre o que está guardado e o que é lido é o que a medição precisa mostrar. Sem esse recorte, o volume total sugere que tudo é necessário.

Onde existe log de acesso, a medição é direta: contar leituras por faixa de idade do registro. Onde não existe, restam duas saídas. A primeira é amostragem declarada, com tamanho e critério da amostra registrados. A segunda é levantar com as áreas usuárias quais campos são consultados de fato. Nenhuma das duas substitui o log.

O que a medição não resolve

Medir volume não diz o que pode ser descartado. Volume alto pode ser obrigação legal, histórico de auditoria ou dado que sustenta cálculo em curso. A medição mostra tamanho e giro; a decisão sobre o que sai depende de prazo legal, contrato e responsável definido.

A medição também não alcança dado que está fora do banco. Arquivos, planilhas, anexos em pasta de rede e cópias locais ficam invisíveis para a contagem. Em muitos casos, essa parcela cresce mais rápido que a base oficial. Sem inventariar esses locais, o número medido é parcial e deve ser tratado como parcial.

Recurso prático

Crescimento líquido da base por janela

Entradas na janela = (registros_fim − registros_inicio) + registros_descartados

registros_inicio
registros
contagem na tabela ou base no primeiro dia da janela, sempre no mesmo horário de corte
registros_fim
registros
contagem na tabela ou base no último dia da janela, no mesmo horário de corte
registros_descartados
registros
quantidade removida por rotina de expurgo dentro da janela, zero quando não existe expurgo
janela
dias
intervalo fixo entre as duas contagens, igual em todas as medições comparadas

O erro comum é comparar contagens de dias diferentes sem registrar quantos registros foram apagados no intervalo. Sem esse dado, a diferença entre início e fim parece medida de entrada e esconde o volume real que passa pela base. Em base sem retenção, o total só cresce e nunca revela o giro.

Sobre o que está escrito aqui

Conceitos relacionados: contagem de registros · tamanho em disco · idade do dado · registro de acesso · taxa de crescimento. Exemplos são ilustrativos. Não há cliente, resultado, preço, prazo ou certificação nesta página. Quando o formato indicado é Projeto de implementação, ele descreve uma possibilidade de trabalho — a conversa inicial avalia contexto e aderência.

Para continuar

Páginas relacionadas

O mesmo problema em outro objetivo

Outras leituras em Integrações, sistemas e qualidade de dados

Quer avaliar isso no seu contexto?

Esta página trata de volume de dados sem política de retenção. Diagnóstico de integração é a frente que investiga o mecanismo por trás desse tipo de problema. O formato mais associado é Projeto de implementação.