Se você é um profissional de dados e análise em uma empresa de médio a grande porte, imaginamos que a governança de dados não seja um conceito novo para você. No entanto, estão surgindo novas ferramentas e novas áreas de foco, acrescentando camadas adicionais de dados e complexidades a serem tratadas na organização.
Reunimos alguns pontos focais para a governança de dados a serem observados em 2024, incluindo conformidade, relatórios de sustentabilidade, integração de IA, a crescente necessidade de automação e governança de dados mestres, produção de dados, computação em nuvem e o apelo por uma alfabetização de dados mais ampla.
Os princípios básicos da governança de dados são os mesmos de sempre – uma combinação de ferramentas, pessoas, processos e políticas:
-
Uma política de dados abrangente que conta com a adesão de C-levels e C-Levels -1
-
Pessoas que podem realizar limpeza, modelagem, validação e administração contínua de dados.
-
Propriedade clara dos dados, incluindo quem tem o direito de alterar ou utilizar os dados e para que finalidade.
-
Ferramentas que possuem recursos para apoiar sua política de dados e impor regras de governança.
1. Compliance e regulação
Em 2024, a conformidade e a regulamentação continuam a ser as principais áreas de foco para a governança de dados. De acordo com o Relatório Definitivo de Referência de Risco e Conformidade de 2023 da Navex Global, 83% dos profissionais de risco e conformidade disseram que manter sua organização em conformidade com as leis e regulamentos era uma consideração “muito importante” ou “absolutamente essencial”.
Os regulamentos para proteger a privacidade dos dados e garantir a transparência no processamento de dados estão a ser implementados a um ritmo ainda mais rápido, incluindo o GDPR, a lei federal dos EUA para proteger os dados pessoais das crianças (COPPA) e uma série de leis estaduais nos EUA.
Para cumprir os regulamentos de privacidade de dados, você precisaria de uma ferramenta que pudesse restringir o acesso às informações pessoais e armazenar informações de consentimento junto com elas. Os fabricantes de bens de consumo precisam estar cientes de regulamentações como a Lei de Modernização da Segurança Alimentar (FSMA) da FDA; e os restaurantes, bem como todo o setor hoteleiro, são obrigados a informar sobre alergênicos e nutrientes em seus cardápios de acordo com a legislação local.
Como estes regulamentos podem mudar rapidamente, os fabricantes e varejistas precisam ter sistemas implementados para facilitar a transparência necessária de forma ágil. A governança de dados é fundamental para garantir que as informações pessoais e de produtos sejam atualizadas com os atributos regulatórios corretos e usadas de forma adequada.
“O Reino Unido introduziu leis nutricionais que determinam que os restaurantes devem exibir todas as informações nutricionais de tudo o que vendem em relação a alimentos e álcool abaixo de 1,2%. Isso significa que em qualquer ponto digital – Delivery, pedido na mesa, clique e retire, etc. – os restaurantes precisam informar sobre os valores de calorias e alergênicos para que os hóspedes possam tomar decisões informadas. Todas essas informações agora são provenientes da plataforma de dados mestre, onde são mantidas e depois enviadas para todos os aplicativos voltados para o cliente, para que sejam distribuídas tanto para menus impressos quanto para qualquer ponto de pedido”. – Mark Jones, chefe de gerenciamento de dados da Mitchells & Butlers
A transparência empresarial e a transparência dos dados andam de mãos dadas. A conformidade é tão transparente quanto os dados usados para reportá-la e monitorá-la.
2. Relatórios de sustentabilidade
Os governos de todo o mundo tornaram-se ativos no estabelecimento de leis e regulamentos orientados para a sustentabilidade para as indústrias. Este avanço na regulamentação ajudou a elevar a barra para que os fabricantes e varejistas estejam mais comprometidos com os seus objetivos de sustentabilidade.
As regulamentações podem se estender profundamente às organizações, afetando vários aspectos, como uso de água, construção civil, reciclagem, fornecimento e consumo de energia, etc. Uma vasta gama de normas e certificações de relatórios de sustentabilidade torna um processo complexo gerir e governar a recolha e a comunicação de dados de sustentabilidade.
Esta complexidade levou a uma explosão de dados adicionais sobre produtos, fornecedores e a extensa cadeia de abastecimento, lojas, fábricas e processos. O volume de dados ESG adicionais a serem recolhidos e geridos através de múltiplos canais e relatórios foi significativamente subestimado pelos Diretores de Sustentabilidade, que devem urgentemente unir forças com o Diretor de Dados para implementar uma estratégia de gestão de dados que sustente a estratégia ESG.
Existem hoje mais de 600 padrões ESG, cada um com subcategorias e processos específicos do setor, incluindo:
- Sustainability Accounting Standards Board (SASB) com mais de 77 setores diferentes e mais de 30 declarações de divulgação em cada documento
- A Força-Tarefa sobre Divulgações Financeiras Relacionadas ao Clima (TCFD) propõe uma série de divulgações recomendadas sobre governança, estratégia, gestão de risco e métricas e metas
- A Global Reporting Initiative (GRI) operando em mais de 140 tópicos diferentes
- Os Objetivos de Desenvolvimento Sustentável da ONU abrangem 17 objetivos e 169 metas e indicadores
- O Passaporte Digital de Produto é o próximo requisito de sustentabilidade que necessita de uma governança de dados eficaz. Saiba mais sobre passaportes de produtos digitais.
Embora seja crucial impulsionar um negócio sustentável, fundamentar as alegações de sustentabilidade requer uma gestão robusta de dados.
A gestão eficaz dos dados de sustentabilidade exige o mesmo nível de rigor e disciplina que a gestão de outras iniciativas digitais. Governar e consolidar os dados da sua empresa pode ajudar a agilizar a gestão dos dados de sustentabilidade e facilitar a elaboração de relatórios.
3. Integração com IA
A Inteligência Artificial (IA) continua a evoluir como uma força poderosa na governança de dados, à medida que as ferramentas de data governance baseadas em IA se tornam mais sofisticadas, oferecendo melhor classificação de dados, detecção de anomalias e capacidades de análise preditiva.
A integração da IA nos seus sistemas de gestão de dados não só simplifica os processos de governança, mas também melhora a qualidade geral e a confiabilidade dos dados. O reconhecimento de imagem com tecnologia de IA pode ajudar a classificar produtos; e a IA generativa encontra o seu caminho na data governance, por exemplo, no processo de correspondência de entidades e desduplicação.
As empresas que possuem o mesmo cliente registrado em vários sistemas CRM precisam consolidar seu banco de dados de clientes, combinando e mesclando os registros dos clientes. Em muitos casos, um registo pode conter demasiados detalhes para estabelecer uma identificação firme, caso em que a IA generativa pode ser utilizada para melhorar o registo e subsequentemente alimentar o processo de governança com um conjunto de dados mais completo para uma correspondência de entidades alimentada por IA mais precisa e fiável.
A governança de dados garante que a IA tenha ética. Fazer com que qualquer processo digital automatizado seja executado corretamente requer um alto grau de confiabilidade nos dados subjacentes. Para tornar a automação inteligente, ela deve ser agregada de forma confiável com informações suficientes para tornar os padrões estatísticos não apenas capazes de serem analisados, mas também acionáveis.
É crucial que os dados baseados em IA sejam governados, as suas decisões sejam explicáveis e, pelo menos por enquanto, permitam a revisão e intervenção humana.
4. Automated Data Governance
Com o rápido aumento da quantidade e da complexidade dos dados, a governança manual de dados já não é uma opção viável. Então, livre-se das planilhas, estabeleça uma cultura colaborativa de dados e veja como você pode incorporar a automação nas práticas de governança de dados.Isto ajudará a sua organização a obter maior agilidade, reduzir a probabilidade de erro humano e garantir que os dados sejam gerenciados de forma consistente e alinhados com as políticas e padrões estabelecidos.
As ferramentas de automação podem monitorar e avaliar continuamente a qualidade dos dados, detectar e corrigir automaticamente erros, inconsistências e duplicações em conjuntos de dados, garantindo que os dados atendam aos padrões de qualidade predefinidos.
Um termo de tendência é observabilidade de dados, referindo-se a um conjunto de capacidades incorporadas à plataforma de governança de dados, tais como:
- Detecção de anomalias – que notifica quando os dados se comportam fora da norma.
- Resolução – que pode apontar a causa raiz e ajudar a resolver o problema upstream e downstream por meio da linhagem de dados.
- Prevenção – que fornece informações sobre áreas que requerem manutenção e atenção especial.
5. Master Data Governance
Numa era em que os dados são frequentemente voláteis e ambíguos, é aconselhável começar pela governança de dados mestres. Os dados mestre são dados de baixa volatilidade que descrevem seus ativos, ou os principais blocos de construção (domínios de dados), sobre os quais seu negócio é construído. Alguns referem-se aos dados mestres como dados corporativos.
São as pessoas, lugares e coisas que interagem para criar o processo de fazer negócios. Exemplos de domínios de dados mestre incluem clientes, produtos, fornecedores, lojas e locais físicos, funcionários e ativos importantes. A governança de dados mestres está se tornando mais importante em 2024 e além, porque garante uma visão única e confiável de seus ativos e, portanto, estabelece um contrapeso à volatilidade e disparidade geral de dados que muitas vezes estão armazenados em sistemas diferentes e extraídos de fontes com formatos variados.
À medida que as empresas crescem, os seus cenários de dados tornam-se mais complexos. A governança de dados mestre permite que um glossário de terminologia acordada seja criado juntamente com atributos de metadados que são usados para definir um ativo e fornecer uma definição padrão e consistente em toda a organização.
Regras de negócios, políticas, verificações de validade da qualidade dos dados e fluxos de trabalho aplicados fornecem as proteções necessárias para reduzir o escopo de má interpretação, uso indevido, confusão e erros no futuro.
6. Produtização de dados
A governança de dados desempenha um papel fundamental na criação de produtos de dados como resultado de uma arquitetura de malha de dados. A abordagem de malha de dados está ganhando força como alternativa à tradicional equipe de dados única que supervisiona um data warehouse e responde a solicitações, o que pode se tornar um gargalo.
Em vez disso, uma malha de dados permite agilidade, pois enfatiza a descentralização da propriedade e governança dos dados, onde equipes individuais criam produtos de dados para consumo em outras partes da empresa, por exemplo, painéis, modelos analíticos, sistemas de chatbot ou mecanismos de recomendação.
A criação de produtos de dados exige que as equipes sigam certos princípios de governança, como coleta de dados, modelagem, transformação, propriedade e métricas, a fim de projetar os produtos para atender às necessidades específicas dos consumidores.
7. Cloud computing
Em harmonia com as tendências de IA e automação, a computação em nuvem está desempenhando um papel cada vez maior no apoio às estratégias de governança de dados. As soluções de governança de dados baseadas na nuvem oferecem maior acessibilidade, colaboração e atualizações em tempo real, facilitando a governança perfeita entre equipes geograficamente dispersas.
Os recursos flexíveis da nuvem permitem que as organizações se adaptem rapidamente às mudanças nos requisitos de governança de dados e nas necessidades de negócios. As plataformas em nuvem geralmente vêm com ferramentas integradas ou de terceiros para governança automatizada de dados, incluindo gerenciamento de metadados e monitoramento da qualidade dos dados.
Em relação à segurança de dados, os provedores de nuvem oferecem soluções robustas de recuperação de desastres e backup, reduzindo o risco de perda de dados e garantindo a continuidade dos negócios em caso de eventos inesperados, recursos que contribuem para a governança de dados ao fornecer mecanismos para salvaguardar dados críticos e manter a disponibilidade dos dados.
8. Promover a alfabetização geral em dados
À medida que as empresas dependem cada vez mais da tomada de decisões baseada em dados, torna-se fundamental que cada funcionário compreenda a linguagem dos dados e a necessidade da governança de dados. Um entendimento comum de data governance tem a vantagem de tornar as novas iniciativas digitais mais palatáveis e o compartilhamento de dados (e, portanto, a colaboração) mais fácil.
Historicamente, na maioria das empresas, os dados foram armazenados, analisados e utilizados numa base departamental. Embora muitos acreditem que compartilham dados internamente, na realidade, cada departamento ou divisão mantém o controle e a visibilidade dos dados, muitas vezes levando a tomadas de decisão isoladas.
À medida que os dados continuam crescendo e fluindo a um ritmo rápido, os líderes de dados precisam de tomar decisões mais qualificadas com base nos dados de toda a empresa e das partes interessadas que compartilham uma compreensão coletiva desses dados. Processos de tratamento de dados desatualizados impõem limitações severas aos líderes empresariais que precisam tomar decisões com base em uma versão unificada e única da verdade em toda a empresa.
A democratização dos dados só é possível se os dados forem governados. Isso inclui a sua qualidade e fontes, a forma como são compartilhados e utilizados e quem é responsável pela qualidade dos dados, bem como pela interpretação dos dados. Para obter a adesão organizacional, é crucial estabelecer uma cultura de dados, onde todos investem na qualidade e na responsabilidade dos dados.
À medida que os funcionários começarem a reconhecer os benefícios da governança de dados, eles não a verão como um fardo, mas como um facilitador de negócios que ajuda a todos e a defenderão ainda mais.
