Anatomia do lakehouse
Em engenharia de dados, é comum utilizarmos três camadas para refinar o dado. Entender o papel de cada uma é o mapa que organiza todo o resto do seu trabalho.
- Entender o papel de Bronze, Silver e Gold
- Saber o que colocar, e o que não colocar, em cada camada
- Reconhecer uma boa organização de camadas ao bater o olho
Pense num garimpo. O minério sai da terra sujo e misturado (Bronze), passa por uma primeira lavagem que separa o que presta (Silver), e só então vira a peça polida que vai pra vitrine (Gold). Seus dados percorrem exatamente esse caminho, e cada camada tem uma função clara. Essa é a arquitetura medallion, o padrão que a Nekt recomenda chamar de Bronze, Silver e Gold para organizar um lakehouse.
- Espelho fiel da origem
- Sem edição, imutável
- Tipos crus, muitas vezes texto
- Um conjunto por fonte
- Colunas renomeadas e claras
- Tipos corretos, sem duplicatas
- Uma tabela por entidade
- Agradável de ler
- Junta fontes, aplica regra de negócio
- Tabelas prontas pra análise
- É daqui que BI, MCP e API leem
- Uma fonte de verdade
Bronze, Silver e Gold é uma recomendação da Nekt, não uma obrigação. Cada empresa pode organizar as camadas do jeito que fizer mais sentido para ela. O que importa de verdade é o conceito: dado bruto, dado refinado e dado pronto para análise. Bronze, Silver e Gold é só o nome sugerido para esses três estágios.
Bronze: o dado como ele chegou
A camada que a Nekt sugere chamar de
Bronze é o retrato exato da
fonte. A Nekt traz o dado do HubSpot, do banco, do Meta Ads, e guarda
como veio, sem tocar. Aqui os tipos costumam vir crus de acordo com o
que cada fonte utiliza (um valor monetário chega como texto
"1234.50", uma data como string), há estruturas
aninhadas, e os nomes das colunas são os que a fonte usa, nem sempre
amigáveis. A regra de ouro: você não edita o Bronze.
Ele muda só quando a fonte muda.
Silver: o dado limpo e confiável
Na camada Silver o dado fica arrumado. Você tipa os campos (texto vira número e data de verdade), renomeia colunas para nomes claros, remove duplicatas e deixa uma tabela por entidade de negócio (clientes, pedidos, assinaturas). É o primeiro lugar onde o dado fica realmente agradável de consultar, mas ainda sem juntar fontes nem aplicar regra de negócio pesada.
Gold: o dado pronto pra consumo
A camada Gold é onde o dado vira decisão. Aqui você junta fontes (pedidos + clientes + canais), aplica a regra de negócio acordada e monta tabelas largas, prontas para análise. É desta camada que os dashboards, os agentes de IA (via MCP) e a Data API leem. Um número, uma tabela, uma fonte de verdade para todo mundo.
O MCP da Nekt cria queries e notebooks pra você a partir de linguagem natural. Peça "transforme a Bronze de pedidos numa Silver limpa e tipada" ou "monte uma Gold de faturamento por canal" e ele gera a transformação. Isso facilita MUITO o trabalho de estruturar Bronze, Silver e Gold: você descreve o que quer, revisa, e ajusta, em vez de escrever cada passo do zero.
A mesma linha, atravessando as três camadas
Veja um único pedido sendo refinado. Repare como ele sai de algo cru e difícil de usar para algo que qualquer pessoa (ou agente) entende na hora.
| pedido | valor | status | data | cliente | canal |
|---|---|---|---|---|---|
| a83f | R$ 1.234,50 | aprovado | 08/03/2026 | Loja Silva |
A camada Silver é onde a limpeza acontece uma vez e passa a ser reaproveitada por todas as tabelas Gold. Pular essa etapa espalha a mesma limpeza (e os mesmos erros) por todo lugar.
Resumo de bolso
| Camada | O que vive | Formato | Quem lê | Muda quando |
|---|---|---|---|---|
| Bronze | Dado cru da fonte | Como vem da fonte | Ninguém direto | A fonte muda |
| Silver | Entidades limpas | Tipado, 1 por entidade | Transformações Gold | Você melhora a limpeza |
| Gold | Tabelas de negócio | Largo, pronto pra análise | BI, MCP, Data API | A regra de negócio muda |
Uma agência com 12 clientes tinha Meta Ads, Google Ads e CRM de cada um em Bronze, 36 conjuntos crus. No Silver, padronizou cada fonte numa tabela limpa por tipo. No Gold, montou uma tabela com uma linha por cliente, canal e dia. Essa única tabela Gold alimenta o relatório do cliente, o painel interno e um agente que responde "qual campanha rendeu mais essa semana". Três consumos, uma fonte de verdade.