Auditoria de dados (Bytaru Audit)

O lakehouse cresceu sem controle: tabelas e colunas ingeridas que ninguém usa, carga demorada e ninguém sabe de onde vem cada número. A auditoria mostra o que é usado e o que pode sair.

Para quem

Empresas que já têm um lakehouse em camadas. Sinais comuns: "a carga demora", "a conta da plataforma subiu", "queremos documentar a ingestão".

O que entregamos

• Inventário da ingestão: cada tabela, a origem, o tipo de carga e a finalidade.
• Mapa de uso: onde cada tabela e coluna é lida nas camadas seguintes e no BI.
• Planilha com os campos usados e os candidatos a remoção, e documento da ingestão.

Como fazemos

1. Leitura do repositório das cargas.
2. Inventário e rastreio de uso.
3. Revisão dos achados com o seu time.
4. Plano de redução em ondas, começando pelo que é seguro desligar.

Como medimos

Tabelas e colunas removidas, e redução do tempo e do custo da carga. Num caso real, 10 de 253 tabelas estavam sem uso.