As empresas têm à sua disposição mais recursos de dados do que nunca. Mesmo assim, muitas ainda lutam para superar a desconexão entre o valor potencial dos dados e a concretização desse valor na prática. Seja para apoiar a tomada de decisões estratégicas ou para habilitar a participação em ecossistemas emergentes, a capacidade de acessar e explorar rapidamente grandes volumes de dados relevantes e confiáveis é crucial – e requer reinvenção.
A desconexão dos dados
I. Data lakes em todos os lugares (mas sem uma gota de água potável)
Um viés legado rumo à centralização de dados na forma de data lakes ou warehouses está impedindo as organizações de desenvolver abordagens eficientes para explorar dados em escala e compartilhar informações importantes estrategicamente com os times que mais precisam. A consolidação também leva à criação de arquiteturas e estruturas organizacionais resistentes a mudanças, dificultando a capacidade da empresa de testar e responder às novidades do mercado.
“Precisamos desafiar essa suposição de que para extrair resultados significativos de uma iniciativa de experimentação orientada por dados, uma empresa ou unidade de negócio precisa necessariamente acessar dados centralizados."
Zhamak Dehghani
Director of Emerging Technologies, Thoughtworks North America
II. Caminhando em direção a um modelo de Data Mesh (ou malha de dados)
Para desbloquear o valor dos dados, as empresas precisam se afastar dos monólitos e disponibilizar os dados para os times que realmente os conhecem e sabem como usá-los. Baseando-se nos princípios da distribuição de dados orientada por domínio e tratando os dados como um produto que encanta clientes, a malha é uma nova abordagem para a arquitetura de dados, criada com o propósito de dar suporte a um negócio digital resiliente que responde rapidamente.
III. As estruturas de tecnologia
O mundo do armazenamento e da computação de dados mudou, e as empresas não estão mais necessariamente sujeitas às antigas restrições. A adoção de uma arquitetura de dados mais distribuída pode não ser uma proposta tão arriscada, cara ou demorada quanto as lideranças de negócios pensam. As empresas líderes de mercado se basearam nas tecnologias de nuvem existentes para desenvolver plataformas sofisticadas que contribuem diretamente para seus objetivos estratégicos.
Modelo de plataforma de dados
IV. Estratégia e pessoas
Como os times costumam ser estruturados em torno de recursos de dados legados, a mudança para Data Mesh inevitavelmente exige uma mudança organizacional, além de uma mentalidade cuidadosa com as conexões entre os dados e a estratégia de negócio. As lideranças podem encontrar resistência ao redesenhar as regras que definem como os dados são controlados e compartilhados e como o desempenho de alguns times é medido – mas é quase certo que o fim justifique os meios.
"A verdade é quando as pessoas olham para os dados e, particularmente, para a governança dos dados, sua reação geralmente é reclamar. Essas percepções precisam mudar, para que as pessoas se interessem, queiram usar e consumir os dados e fiquem entusiasmadas com as possibilidades."
Prasanna Pendse
Head of Technology, Thoughtworks India
V. Segurança e governança
Em qualquer iniciativa que envolva dados, as pesquisas mostram que o gerenciamento de segurança e risco quase certamente estará entre as principais preocupações das lideranças executivas. Ao contrário do que se acredita, retirar a responsabilidade das mãos de uma única fonte de controle centralizada e "federar" a propriedade dos dados entre times, por domínio, cria impactos positivos para a segurança e a governança. Dessa forma, o controle dos dados é atribuído a quem de fato os conhece melhor, promovendo assim um foco mais amplo na privacidade e na precisão dos dados.
Principais preocupações com segurança de dados de CIOs/líderes de TI
VI. Lidando com a escassez de talentos em dados
Embora se preocupem com o fato de que as competências em dados permanecem escassas, muitas empresas precisam reconhecer os recursos que já estão disponíveis. Plataformas e modelos estão evoluindo de uma forma que os torna mais amigáveis para usuários, o que abre a possibilidade de treinar profissionais que não são especialistas em noções básicas de áreas como engenharia e ciência de dados. A abordagem de Data Mesh apóia essa tendência, dando ênfase, por exemplo, à acessibilidade e à experiência de usuários – e, eventualmente, permitindo que as pessoas experimentem e quebrem coisas.
Escassez de competências em tecnologia nas empresas
VII. Prepare-se para novas abordagens corajosas
A aceleração das demandas de dados continuará apresentando desafios para as empresas, mas as evoluções na arquitetura são apenas um dos motivos para o otimismo em relação ao que vem pela frente. A computação e o hardware estão evoluindo em uma velocidade incrível, e há fontes de dados ricos em insights que permanecem praticamente inexploradas. Nessa corrida, mentalidades corajosas e disposição para construir parcerias ajudarão as empresas a obter recompensas.
“Precisamos parar de olhar para outras empresas como se fossem de outros planetas e começar a vê-las como parceiras em potencial, encontrando maneiras de evoluir umas às outras por meio dos dados. Reconhecer esses benefícios requer lideranças corajosas que estejam dispostas a investir em coisas desafiadoras e complexas."
Emily Gorcenski
Principal Data Scientist and Head of Data, Thoughtworks Germany
Perspectives na sua
caixa de entrada
Insights de tecnologia e negócios para líderes digitais.
Inscreva-se para receber artigos, podcasts, vídeos e convites para eventos e webinars com os pontos de vista de especialistas da Thoughtworks sobre temas relevantes.