TDC2018SP | Trilha Arq Dados - A importância da Governança de dados, MDM e Qualidade de dados para a Corporação
1. Globalcode – Open4education
Trilha – Arquitetura de Dados
Caetano de A Silva
Importância da Governança ,Qualidade de Dados e MDM na Corporação
2. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Agenda
O que é Governança de Dados
Processo de Gestão de Dados Mestres (MDM)
Processo de Qualidade de dados
Casos reais de aplicação DG, MDM, DQ
Nosso trabalho...
3. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Quem sou eu...
Caetano de Andrade Silva
MBA Gestão Estratégica TI, Bel. Física
27 anos de experiência em TI
Consultor e Instrutor
Governança, Qualidade, MDM, DW/BI, AD, DB...
Diversos projetos Gestão de Dados
caetano@cstreina.com.br
4. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Breve histórico...
CS Technologies de 2002 até 2013: desenvolvimento de
sistemas, projetos de banco de dados, ferramentas de gestão
de modelos de dados, glossários de termos, modelagem de
dados, integrações de metadados, qualidade de dados, modelos
para Data Warehouse e soluções de Business Intelligence.
CS Treina de 2014 até 2018: Consultorias e Treinamentos em
Gestão de Dados e Informações, Governança de Dados, Gestão
de Dados Mestres, Gestão de Metadados, Curadoria de dados,
Arquitetura de dados, Qualidade de dados e informações,
Segurança de dados, Modelagem para DW e BI, Modelagem de
dados com métodos ágeis.
5. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Dados como ativos da empresa
6. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Governança de Dados
É a disciplina que trata dados e informações como
ativos da empresa.
Ativos devem ser
administrados, para
reduzir custos e aumentar
os ganhos.
7. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Governança
de Dados
Arquitetura
de Dados
Desenvolvi
mento de
Dados
Operações
de Dados
Segurança
de Dados
MDMBI e DW
Documentos
e Conteúdo
Metadados
Qualidade
de Dados
Escopo da Gestão
de Dados
Governança de Dados alinha
os objetivos estratégicos com
as áreas de conhecimento da
Gestão de dados.
8. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Governança de Dados
Governança de Dados e Informações
Definição
É a autoridade de planejamento e controle sobre o gerenciamento de ativos de
dados.
Objetivos
1. Definir, aprovar e comunicar estratégias de dados, políticas, arquitetura,
procedimentos e métricas.
2. Acompanhar e forçar o cumprimento de normas regulatórias e políticas de
conformidade, padrões, arquitetura e procedimentos.
3. Patrocinar, acompanhar e supervisionar as entregas de projetos e serviços
de gestão de dados.
4. Gerenciar e resolver problemas relacionados a dados.
5. Entender e promover o valor dos ativos de dados
9. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Processo de MDM
Gestão de dados mestres e dados referência
Definição
Planejar, implementar e controlar atividades para garantir a consistências de
dados mestres e referência.
Objetivos
1. Prover fonte de dados mestres e de referência com confiabilidade
2. Diminuir custos e risco por meio de reuso de dados e padrões
3. Suportar BI e integrações entre sistemas
“Golden Data”: O conjunto de registros que atendem os
requisitos de qualidade estipulados pela Governança de Dados e
necessários para empresa atingir seus objetivos estratégicos.
10. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
MDM Corporativo
Governançadedados
Curadoriadedados
Integraçãodedados
GestãodaQualidade
GestãodeMetadados
Melhoria Contínua
Programa de
Maturidade
11. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Qualidade de dados
Gestão da Qualidade de Dados
Definição
Planejar, implementar atividades de gestão da qualidade de dados para garantir
dados adequados para o uso.
Objetivos
1. Promover a melhoria contínua da qualidade dos dados
2. Definir e monitorar controles de qualidade de dados dentro do ciclo de
desenvolvimento de sistemas
3. Definir processos para medir, monitorar e reportar os níveis de qualidade de
dados aceitáveis.
• Identificar e eliminar dados duplicados
• Padronizar as informações
• Recuperar informações ausentes
• Validar as informações
• Higienizar os dados
12. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Impactos da Qualidade de dados
Fundamenta as análises preditivas e não-preditivas
Auxilia nas estratégias de marketing
Ajuda na tomada de decisões
Afeta a saúde financeira da empresa
Prejudica a produtividade e o desempenho da organização
Traz problemas de segurança
Afeta os consumidores da empresa
13. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Caso 1
Empresa de varejo com mais de 150 lojas, 50 mil produtos
por loja.
Deseja mudar a forma de reabastecimento das lojas
conforme o consumo.
Problema na qualidade dos dados sobre estoque nas lojas.
Identificação das causas dos problemas de qualidade,
correção, mudanças de processos para evitar as causas
raízes.
14. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Caso 2
Empresa de Marketplace na internet, com 2mil
fornecedores e 40 mil produtos.
Os clientes buscam por produtos cadastrados pelos
fornecedores.
Problema na qualidade dos dados pois a nomenclatura dos
produtos varia a cada fornecedor.
Identificação de um glossário de termos permitidos para a
nomenclatura de produtos, criação de dicionário de
sinônimos e categorias padronizadas.
15. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Caso 3
Industria multinacional com milhares de fornecedores e
centenas de milhares de materiais.
Desejam implantar a Governança de Dados Mestres para
mitigar riscos, evitar desperdícios e aumentar resultados.
Problemas no cadastro de fornecedores e matérias levaram
a multas da Receita Federal e Estadual.
Mapeamento do fluxo de dados mestres, origens, destinos,
curadores, regras de qualidade e mapeamento de riscos e
oportunidades.
16. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
Recentemente ...
Já treinamos mais de 720 profissionais dos setores de
serviços, varejo, financeiro, industrias e órgãos públicos.
Em 115 turmas em São Paulo, Rio de Janeiro, Brasília,
Curitiba, Porto Alegre, Belo Horizonte, Fortaleza, Goiânia e
Chapecó.
Projetos de Implantação de Governança de dados,
Qualidade de dados, Arquitetura de dados, MDM,
Modelagem Conceitual Corporativa, Gestão de Metadados,
etc. Em industrias, varejo, financeiras, seguradoras e
governo.
17. Globalcode – Open4educationImportância da Governança, MDM e Qualidade de Dados na Corporação – www.cstreina.com.brPor : Caetano de A Silva
www.cstreina.com.br
Alocação de Recursos especialistas:
• Arquiteto de dados
• Administradores de dados e DBAs
• Analistas para modelagem relacional e dimensional
• Especialistas em Qualidade de dados
• Especialistas em Governança de dados
Projetos de Consultoria de Gestão de Dados:
• Diagnóstico da Gestão e Governança de Dados
• Modelagem de dados Conceitual Corporativa
• Modelagem Dimensional para DW e BI
• Implantação de processos de Gestão de dados
• Apoio na implantação de MDM e Qualidade de dados