Globalcode – Open4education
Big Data / Analytics sem Governança
de Dados é apenas uma utopia
Bergson Lopes Rego
Vice-presidente da DAMA Brasil, Fundador da BLR DATA
Globalcode – Open4education
Motivação
Globalcode – Open4education
Reação das empresas
Inteligência
Artificial
Blockchain
Internet
das
Coisas
Analytics
e Big Data
Globalcode – Open4education
E a Gestão dos Dados?
Globalcode – Open4education
A qualidade dos dados segundo...
Os otimistas Os pessimistas
Globalcode – Open4education
E o resultado...
Retrabalho
Custos excessivos
Baixa qualidade
Iniciativa questionada
Indefinições em excesso
Globalcode – Open4education
O que poderia ter sido feito?
DAMA-DMBoK – Funções de Dados DAMA-DMBoK – Elementos ambientais
Business
Intelligence e
DW Gestão de
Dados
Mestres e
Referência
Gestão de
Documentos e
Conteúdo
Integração e
interoperabilidade
de dados
Segurança
dos Dados
Armazenament
o de Dados e
Operações
Modelagem e
Projeto de
Banco de
Dados
Arquitetura
de Dados
Gestão da
Qualidade
de Dados
Gestão dos
Metadados
Governança
de Dados
Objetivos e
Princípios
Atividades
Papéis e
Responsabilidade
s
Entregáveis
Técnicas
Organização
e Cultura
Ferramentas
PESSOAS
PESSOAS
Implantar um Programa de Governança de Dados
Globalcode – Open4education
Do Pântano de Dados ao Data Lake
Globalcode – Open4education
Empresa com Governança de Dados
Foca no
desenvolvimento e
aprimoramento das
Soluções
Fundamentais.
v
Inteligência
Artificial
Blockchain
Internet
das
Coisas
Analytics
e Big Data
Arquitetura
de Dados
Gestão dos
Metadados
Qualidade dos
Dados
Gestão dos
Dados
Mestres
Segurança e
Privacidade
Governança de Dados
(MDM)
Transformação Digital
Globalcode – Open4education
Governança de Dados na Prática
Alinhamento
Pessoas Processos Tecnologia
Atuação
Executiva
Estruturas de apoio
Processos
e
Arquitetura
(As is – To
be)
Projetos
Estruturantes
Questões
(5W2H)
Legislativa Judiciária
Comitês
Táticos
Conselho
Executivo
DADOS
Negócio TIEnvolvidos:
Ciclo da Inovação
Dado
Ativo
Estratégico
Equipes
Globalcode – Open4education
Governança de Dados na Prática
Comitê
Executivo
Gov. de Dados
Comitês Táticos de Gestão de
Dados
Equipes de Negócio Equipes de TI
Diretrizes Indicadores e
Necessidades
EstratégicoTáticoOperacional
Métricas,
Questões
Insumos
Diretrizes
Escritório de
Governança de
Dados
Orientações,
Regulatórios
Globalcode – Open4education
Evoluindo para Arquitetura de Dados
Mapa
Estratégico
Cadeia
de Valor
Metodologia de
Arq. de Dados
Comitê de
Arq.de Dados
Metamodelo da
Arq. de Dados
Alinhamento Estratégico Governança da Arquitetura de Dados
Modelo de Área de Interesse
Modelos Conceituais Corporativos
Modelos de Dados Corporativos
Arquiteturas de Referência (de acordo com as necessidades de cada
empresa)
Estratégi
co
TáticoOperacional
Arquitetura de Dados – EMPRESA XPTO
Modelos Lógicos Corporativos
Estratégia de
Dados
Visão As Is
Modelos Lógicos dos Repositórios
Modelos Físicos dos Repositórios
Visão To BePlano de Transição
Roadmap
Terminologia
Funcional Aplicações Tecnologia
Integração com demais domínios da Arquitetura
Curadoria
Termos de Negócio Gestores das Informações
Modelos dos Repositórios de Dados
BI / Analytics Self Service ERP
Data Quality Master Data Base Geográfica
Globalcode – Open4education
DW
ETL
+ Data Quality
ETL
+ Data Quality
ETL
ETL
Real Time + Data
Quality
DM
Exploratório &
Protótipo
Fontes de dados
complementaresODS
ETL
Ferramenta +
Data Quality
ERP
ETL
ERP
Analític
o
Data Lake Self-Service
BI
ETL
+ Data Quality Sandbox
ETL
ETL
Dashboards e relatórios
ValidaçãoVisualização
Fontes dados
externas
ETL Ferramenta +
Data Quality
Bases Transacionais Classicas
Com Δ de D-1 e M-1
BarramentoIIB
Requisições
Em tempo real
TempoReal
WebServices
Bases Transacionais com leitura
em tempo real
Base Geográfica
CRM
Painel
Painel
Painel
Painel
Exemplo de Arquitetura de Referência
Globalcode – Open4education
Dicas Fundamentais...
Globalcode – Open4education
Inove sempre!
Questões
Processos
Arquitetura
Projetos
Estruturantes
Dicas Fundamentais...
Globalcode – Open4education
Dicas Fundamentais...
Alinhamento com a
Estratégia Corporativa
Globalcode – Open4education
Dados Governados
Apoiam a Transformação
da Organização
Dados
Informação
Conhecimento
Sabedoria
Globalcode – Open4education
Mais informações
Globalcode – Open4education
Obrigado!
Bergson Lopes
bergson@blrdata.com.br
www.blrdata.com.br
vicepresidente@dama.org.br
www.dama.org.br
Globalcode – Open4education
Dúvidas &
Comentários
Big Data / Analytics sem Governança de Dados é apenas uma utopia

Big Data / Analytics sem Governança de Dados é apenas uma utopia

  • 1.
    Globalcode – Open4education BigData / Analytics sem Governança de Dados é apenas uma utopia Bergson Lopes Rego Vice-presidente da DAMA Brasil, Fundador da BLR DATA
  • 2.
  • 3.
    Globalcode – Open4education Reaçãodas empresas Inteligência Artificial Blockchain Internet das Coisas Analytics e Big Data
  • 4.
    Globalcode – Open4education Ea Gestão dos Dados?
  • 5.
    Globalcode – Open4education Aqualidade dos dados segundo... Os otimistas Os pessimistas
  • 6.
    Globalcode – Open4education Eo resultado... Retrabalho Custos excessivos Baixa qualidade Iniciativa questionada Indefinições em excesso
  • 7.
    Globalcode – Open4education Oque poderia ter sido feito? DAMA-DMBoK – Funções de Dados DAMA-DMBoK – Elementos ambientais Business Intelligence e DW Gestão de Dados Mestres e Referência Gestão de Documentos e Conteúdo Integração e interoperabilidade de dados Segurança dos Dados Armazenament o de Dados e Operações Modelagem e Projeto de Banco de Dados Arquitetura de Dados Gestão da Qualidade de Dados Gestão dos Metadados Governança de Dados Objetivos e Princípios Atividades Papéis e Responsabilidade s Entregáveis Técnicas Organização e Cultura Ferramentas PESSOAS PESSOAS Implantar um Programa de Governança de Dados
  • 8.
    Globalcode – Open4education DoPântano de Dados ao Data Lake
  • 9.
    Globalcode – Open4education Empresacom Governança de Dados Foca no desenvolvimento e aprimoramento das Soluções Fundamentais. v Inteligência Artificial Blockchain Internet das Coisas Analytics e Big Data Arquitetura de Dados Gestão dos Metadados Qualidade dos Dados Gestão dos Dados Mestres Segurança e Privacidade Governança de Dados (MDM) Transformação Digital
  • 10.
    Globalcode – Open4education Governançade Dados na Prática Alinhamento Pessoas Processos Tecnologia Atuação Executiva Estruturas de apoio Processos e Arquitetura (As is – To be) Projetos Estruturantes Questões (5W2H) Legislativa Judiciária Comitês Táticos Conselho Executivo DADOS Negócio TIEnvolvidos: Ciclo da Inovação Dado Ativo Estratégico Equipes
  • 11.
    Globalcode – Open4education Governançade Dados na Prática Comitê Executivo Gov. de Dados Comitês Táticos de Gestão de Dados Equipes de Negócio Equipes de TI Diretrizes Indicadores e Necessidades EstratégicoTáticoOperacional Métricas, Questões Insumos Diretrizes Escritório de Governança de Dados Orientações, Regulatórios
  • 12.
    Globalcode – Open4education Evoluindopara Arquitetura de Dados Mapa Estratégico Cadeia de Valor Metodologia de Arq. de Dados Comitê de Arq.de Dados Metamodelo da Arq. de Dados Alinhamento Estratégico Governança da Arquitetura de Dados Modelo de Área de Interesse Modelos Conceituais Corporativos Modelos de Dados Corporativos Arquiteturas de Referência (de acordo com as necessidades de cada empresa) Estratégi co TáticoOperacional Arquitetura de Dados – EMPRESA XPTO Modelos Lógicos Corporativos Estratégia de Dados Visão As Is Modelos Lógicos dos Repositórios Modelos Físicos dos Repositórios Visão To BePlano de Transição Roadmap Terminologia Funcional Aplicações Tecnologia Integração com demais domínios da Arquitetura Curadoria Termos de Negócio Gestores das Informações Modelos dos Repositórios de Dados BI / Analytics Self Service ERP Data Quality Master Data Base Geográfica
  • 13.
    Globalcode – Open4education DW ETL +Data Quality ETL + Data Quality ETL ETL Real Time + Data Quality DM Exploratório & Protótipo Fontes de dados complementaresODS ETL Ferramenta + Data Quality ERP ETL ERP Analític o Data Lake Self-Service BI ETL + Data Quality Sandbox ETL ETL Dashboards e relatórios ValidaçãoVisualização Fontes dados externas ETL Ferramenta + Data Quality Bases Transacionais Classicas Com Δ de D-1 e M-1 BarramentoIIB Requisições Em tempo real TempoReal WebServices Bases Transacionais com leitura em tempo real Base Geográfica CRM Painel Painel Painel Painel Exemplo de Arquitetura de Referência
  • 14.
  • 15.
    Globalcode – Open4education Inovesempre! Questões Processos Arquitetura Projetos Estruturantes Dicas Fundamentais...
  • 16.
    Globalcode – Open4education DicasFundamentais... Alinhamento com a Estratégia Corporativa
  • 17.
    Globalcode – Open4education DadosGovernados Apoiam a Transformação da Organização Dados Informação Conhecimento Sabedoria
  • 18.
  • 19.
    Globalcode – Open4education Obrigado! BergsonLopes bergson@blrdata.com.br www.blrdata.com.br vicepresidente@dama.org.br www.dama.org.br
  • 20.