A ideia de arquitetura de dados é comumente ligada àquelas que são centralizadas e monolíticas, por exemplo, data warehouse (armazém de dados) e data lake (lago de dados). Buscando revolução dessa área e propagação da democratização dos dados, o Data Mesh chegou para mudar estes conceitos padrões.
O Data Mesh, ou malha de dados, desafia a suposição antiga quando propõe uma arquitetura muito descentralizada (ou seja, sem concentrar todas as informações em um único local) e uma abordagem vinda do design. É uma abordagem que usa como base a maneira de pensar e organizar os dados.
Os 4 princípios do Data Mesh
São eles: propriedade de domínio, disponibilização dos dados como produto, disponibilização de dados em plataforma e governança federada de dados. Entenda melhor cada um deles abaixo:
- Propriedade de domínio: a descentralização da propriedade dos dados a move para os times distribuídos nos domínios, fazendo com que o fluxo de trabalho melhore e aconteça uma redução de custos;
- Disponibilização dos dados como produto: a abordagem traz o surgimento de duas novas funções, Data Product Owner e Data Developer. Ambas propagam a definição e o desenvolvimento de produtos relacionados aos dados (o que traz uma melhor experiência aos clientes);
- Disponibilização de dados em plataforma: o Data Mesh traz funções responsáveis por focar mais na experiência do cliente e na criação de tecnologias por meio da redução da carga cognitiva dos times voltados para o domínio;
- Governança federada de dados: este princípio fala e garante a segurança e a precisão que envolvem os dados, evitando que, de alguma forma, eles sejam usados de forma equivocada.
No que essa nova abordagem pode ajudar?
A arquitetura de dados tradicional mostrou inúmeras limitações que dificultam o aproveitamento de todo o potencial das informações dadas a elas, ou seja, existem pequenos pontos que fazem com que a transformação de dados em conhecimento seja afetada.
O Data Mesh promete a potencialização e permissão da escabilidade da análise de dados, deixando as informações cruciais acessíveis e disponíveis. Além disso, a correção de lacunas que eram deixadas de lado pela estrutura vigente de gerenciamento de dados é outro ponto que a malha de dados traz consigo.
Essa maneira de arquitetar os dados que chegam até sua empresa dá destaque para uma maior agilidade e escalabilidade (ambos falando de redução de tempo nas análises e processos), e, claro, uma forte governança por proporcionar um controle maior sobre os dados.
A entrega de dados mais eficaz e rápida oriunda do fornecimento de uma infraestrutura governável e centralizada também é um forte ponto quando falamos de ferramentas de arquitetura de dados que vem com o Data Mesh.
Ele também proporciona uma solução onde os especialistas e proprietários de domínio estão no comando, ao contrário das abordagens tradicionais que promovem um isolamento das equipes.
É importante apontar que, caso a sua estrutura atual esteja atendendo aos seus requisitos e sendo suficiente para usa empresa, talvez não haja necessidade de realizar a mudança para o Data Mesh, visto que este propõe uma grande mudança de cultura em várias áreas.
Quer receber mais conteúdos como este? Nos acompanhe nas redes sociais e assine nossa Newsletter!
