SlideShare uma empresa Scribd logo
1 de 33
Baixar para ler offline
(c) 2014 UWS -- Não Distribuir 
1 
Palestra p/ SUCESU-RJ 
Dan Reznik 
23-09-2014
Empresas: Defina Big Data 
•65%: Arquivos enormes 
•60%: Análises avançadas 
•50%: Ferramentas de visualização de dados 
(c) 2014 UWS -- Não Distribuir 
2 
Forbes, 10-set-2014
Empresas: O que vc acha sobre “Big Data” 
•89%: revolucão nos negócios como a internet 
•85%: mudança dramática em como fazer negócios 
•79%: empresas que não abraçarem estão fadadas à extinção 
(c) 2014 UWS -- Não Distribuir 
3 
Forbes, 10-set-2014
(c) 2014 UWS -- Não Distribuir 
4 
Multi-structured
(c) 2014 UWS -- Não Distribuir 
5 
VALOR
Pirâmide de Maslow 
(c) 2014 UWS -- Não Distribuir 
6 
-Qualidade 
-Integração 
-Governança 
• Predictive • Optimiz • Anti-Fraud • NLP 
ESTRATÉGIA, ROI+
(c) 2014 UWS -- Não Distribuir 
7
Nível 1: Ad-Hoc 
Nível 2: Processos Engatinham 
Nível 3: Processos Implantados 
Nível 4: Processos Monitorados 
Nível 5: Otimização 
Curva de Maturidade
Nível 1: Ad-Hoc 
•Negócios 
–Diretores distantes, sem adesão da organização como um todo 
–Objetivos de negócio mal-definidos 
–Dados são artefatos; não valorizados ados como ativos. 
•Organização 
–Dependência em especialistas 
–Grupos separados e não-comunicantes 
–Responsabilidades mal-definidas 
–Conhecimento de boas práticas pouco difundido 
–Monitoramento reativo, "apagamento de incêndios" constante 
•Dados 
–Semântica mal-documentada 
–Bancos com arquiteturas variadas 
–Baixa qualidade de dados, pouca integração 
–Ferramentas genéricas utilizadas para soluções pontuais
Nível 2: Processos Engatinham 
•Negócios 
–Percepção crescente do valor dos dados 
–Alguns processos/benefícios são reconhecidos como comuns 
•Organização 
–Identificação de "responsáveis por dados“ 
–Papéis ainda mal definidos, iniciativa não é contínua 
–Esforço inicial em criar gerenciamento para toda a organização; interesses e perspectivas diferentes entre os departamentos. 
–Demanda por novas capacidades é reconhecida, parcialmente resolvida com treinamento 
•Dados 
–Projetos para a organização iniciam 
–Serviços de distribuição de dados são implantados
Nível 3: Processos Implantados 
•Negócios 
–Envolvimento ativo de um executivo com autoridade sobre toda a organização 
–Comprometimento ao desenvolvimento continuo de habilidades 
•Organização 
–Papéis dos responsáveis de dados bem definidos 
–Centralização do gerenciamento de dados 
–Processos, métricas de qualidade, e ferramentas usadas por toda a organização 
–Auditorias periódicas e monitoramento proativo 
•Dados 
–Arquitetura de dados comum guia todas as implementações 
–Gerenciamento central de dicionário de dados 
–Métricas de qualidade monitoradas regularmente
Nível 4: Processos Monitorados 
•Negócios 
–Interesse em predição do desempenho futuro 
•Organização 
–Metas estabelecidas para cada processo 
–Problemas são identificados e corrigidos pró- ativamente 
•Dados 
–Métricas são coletadas e analisadas continuamente 
–Primeiros passos na predição de desempenho futuro
Nível 5: Negócios Otimizados 
•Negócios 
–Identificação de oportunidades 
•Organização 
–Cultura de melhoria contínua dos processos 
–Processos evoluem junto as metas da organização. 
•Dados 
–???
(c) 2014 UWS -- Não Distribuir 
14 
Ambiente Heterogêneo Processos Informais Dados Caóticos 
Ambiente Integrado Processos Controlados Dados Coerentes 
Simplificação Tempos de Entrega Curtos Redução de Custos
Avaliação da Maturidade
Ecossistema de Dados
Governança 
(c) 2014 UWS -- Não Distribuir 
17
•Identificar e Priorizar Use Cases 
•Desenho de Soluções 
•Governança de Dados 
•Implantação 
(c) 2014 UWS -- Não Distribuir 
18
(c) 2014 UWS -- Não Distribuir 
19 
Motor de Recomendação 
Detecção de Fraude 
Integração de Dados do Cidadão 
Busca Semântica de Laudos 
Otimização de Marketing Digital
Busca Semântica (DeCS) 
(c) 2013 UWS -- Não Distribuir
(c) 2014 UWS -- Não Distribuir 
21
Dashboard do Paciente 
(c) 2013 UWS -- Não Distribuir
(c) 2014 UWS -- Não Distribuir 
23
Caixas Eletrônicos 
(c) 2014 UWS -- Não Distribuir 
24
Fraude - Anomalias 
(c) 2014 UWS -- Não Distribuir 
25
Logs 
Semi- Estruturado 
Estruturado 
Banco 
Paralelo 
Deteccao 
Anomalias 
alarmes 
ATM 
ATM 
ATM 
Solução Anti-Fraude 
(c) 2014 UWS -- Não Distribuir 
26
Projeto Base Integrada do Cidadão Secretaria de Planejamento e Gestão, Governo de Minas Gerais 
(c) 2014 UWS -- Não Distribuir 
27
Vinculação de Registros (inter tabelas) 
(c) 2014 UWS -- Não Distribuir 
28
Integração: Os Três Nãos 
•Não quero mais trabalho 
•Não quero que você tenha meus dados 
•Não quero que você veja os furos com meus dados 
(c) 2014 UWS -- Não Distribuir 
29
Arquitetura do Sistema 
(c) 2014 UWS -- Não Distribuir 
30
O problema é sempre PESSOAS 
(c) 2014 UWS -- Não Distribuir 
31
(c) 2014 UWS -- Não Distribuir 
32
Contato: 
Dan Reznik, Diretor 
(21) 85 74 73 82 
dan@upperwestsolucoes.com 
www.upperwestsolucoes.com 
(c) 2014 UWS -- Não Distribuir 
33

Mais conteúdo relacionado

Semelhante a Big Data Palestra 2014

Palestra sobre Métricas para Performance
Palestra sobre Métricas para PerformancePalestra sobre Métricas para Performance
Palestra sobre Métricas para PerformanceRicardo T. Dias
 
4a Web Aula - Gestão de Tecnologia da Informação.pdf
4a Web Aula - Gestão de Tecnologia da Informação.pdf4a Web Aula - Gestão de Tecnologia da Informação.pdf
4a Web Aula - Gestão de Tecnologia da Informação.pdfDimas Francisco
 
Métricas - Maratona Digital
Métricas - Maratona DigitalMétricas - Maratona Digital
Métricas - Maratona DigitalMaratona Digital
 
Workshop em Marketing Analytics 2.2 p/ o MBA Marketing FGV-RJ
Workshop em Marketing Analytics 2.2 p/ o MBA Marketing FGV-RJWorkshop em Marketing Analytics 2.2 p/ o MBA Marketing FGV-RJ
Workshop em Marketing Analytics 2.2 p/ o MBA Marketing FGV-RJDan S. Reznik, PhD
 
Wiseminer: Data Blending & Data Preparation
Wiseminer: Data Blending & Data PreparationWiseminer: Data Blending & Data Preparation
Wiseminer: Data Blending & Data PreparationLeonardo Couto
 
Aula 1 - Conceitos de TI e PDTI
Aula 1 - Conceitos de TI e PDTIAula 1 - Conceitos de TI e PDTI
Aula 1 - Conceitos de TI e PDTIFilipo Mór
 
Ciência de Dados: a revolução na tomada de decisões
Ciência de Dados: a revolução na tomada de decisõesCiência de Dados: a revolução na tomada de decisões
Ciência de Dados: a revolução na tomada de decisõesMarlesson Santana
 
Auditoria Eletrônica: Automatização de procedimentos de auditoria através do ...
Auditoria Eletrônica: Automatização de procedimentos de auditoria através do ...Auditoria Eletrônica: Automatização de procedimentos de auditoria através do ...
Auditoria Eletrônica: Automatização de procedimentos de auditoria através do ...TECSI FEA USP
 
TDC2018SP | Trilha Arq Dados - A importância da Governança de dados, MDM e Qu...
TDC2018SP | Trilha Arq Dados - A importância da Governança de dados, MDM e Qu...TDC2018SP | Trilha Arq Dados - A importância da Governança de dados, MDM e Qu...
TDC2018SP | Trilha Arq Dados - A importância da Governança de dados, MDM e Qu...tdc-globalcode
 
Cultura de Mensuração para Produtos Digitais - TDC SP 2018 - Huxley Dias
Cultura de Mensuração para Produtos Digitais - TDC SP 2018 - Huxley DiasCultura de Mensuração para Produtos Digitais - TDC SP 2018 - Huxley Dias
Cultura de Mensuração para Produtos Digitais - TDC SP 2018 - Huxley DiasHuxley Dias
 
DevOps... O caminho! - Monitoramento de aplicações com App Insights
DevOps... O caminho! - Monitoramento de aplicações com App InsightsDevOps... O caminho! - Monitoramento de aplicações com App Insights
DevOps... O caminho! - Monitoramento de aplicações com App InsightsAdriano Bertucci
 
Wiseminer Self-Service Data Analytics
Wiseminer Self-Service Data AnalyticsWiseminer Self-Service Data Analytics
Wiseminer Self-Service Data AnalyticsLeonardo Couto
 
2. FUNDAMENTOS DE SISTEMAS DE INFORMAÇÃO - 22.06.22.pdf
2. FUNDAMENTOS DE SISTEMAS DE INFORMAÇÃO - 22.06.22.pdf2. FUNDAMENTOS DE SISTEMAS DE INFORMAÇÃO - 22.06.22.pdf
2. FUNDAMENTOS DE SISTEMAS DE INFORMAÇÃO - 22.06.22.pdfPedro Alcantara
 
FIC 2015 - BIG DATA - Os desafios do GVwise ao entregar predição e promover p...
FIC 2015 - BIG DATA - Os desafios do GVwise ao entregar predição e promover p...FIC 2015 - BIG DATA - Os desafios do GVwise ao entregar predição e promover p...
FIC 2015 - BIG DATA - Os desafios do GVwise ao entregar predição e promover p...Wagner Luiz Cambruzzi
 
Wiseminer Data Blending, Data Preparation & Analytics
Wiseminer Data Blending, Data Preparation & AnalyticsWiseminer Data Blending, Data Preparation & Analytics
Wiseminer Data Blending, Data Preparation & AnalyticsLeonardo Couto
 
A utilização de datawarehouse em uma rede de concessionários de veículos como...
A utilização de datawarehouse em uma rede de concessionários de veículos como...A utilização de datawarehouse em uma rede de concessionários de veículos como...
A utilização de datawarehouse em uma rede de concessionários de veículos como...James Wright
 
Gerencia de Decisões
Gerencia de DecisõesGerencia de Decisões
Gerencia de Decisõesmarviowesley
 

Semelhante a Big Data Palestra 2014 (20)

Palestra sobre Métricas para Performance
Palestra sobre Métricas para PerformancePalestra sobre Métricas para Performance
Palestra sobre Métricas para Performance
 
4a Web Aula - Gestão de Tecnologia da Informação.pdf
4a Web Aula - Gestão de Tecnologia da Informação.pdf4a Web Aula - Gestão de Tecnologia da Informação.pdf
4a Web Aula - Gestão de Tecnologia da Informação.pdf
 
Métricas - Maratona Digital
Métricas - Maratona DigitalMétricas - Maratona Digital
Métricas - Maratona Digital
 
Workshop em Marketing Analytics 2.2 p/ o MBA Marketing FGV-RJ
Workshop em Marketing Analytics 2.2 p/ o MBA Marketing FGV-RJWorkshop em Marketing Analytics 2.2 p/ o MBA Marketing FGV-RJ
Workshop em Marketing Analytics 2.2 p/ o MBA Marketing FGV-RJ
 
Wiseminer: Data Blending & Data Preparation
Wiseminer: Data Blending & Data PreparationWiseminer: Data Blending & Data Preparation
Wiseminer: Data Blending & Data Preparation
 
MS Datazen.v.0.0.1 from 2015
MS Datazen.v.0.0.1 from 2015MS Datazen.v.0.0.1 from 2015
MS Datazen.v.0.0.1 from 2015
 
Aula 1 - Conceitos de TI e PDTI
Aula 1 - Conceitos de TI e PDTIAula 1 - Conceitos de TI e PDTI
Aula 1 - Conceitos de TI e PDTI
 
Ciência de Dados: a revolução na tomada de decisões
Ciência de Dados: a revolução na tomada de decisõesCiência de Dados: a revolução na tomada de decisões
Ciência de Dados: a revolução na tomada de decisões
 
Auditoria Eletrônica: Automatização de procedimentos de auditoria através do ...
Auditoria Eletrônica: Automatização de procedimentos de auditoria através do ...Auditoria Eletrônica: Automatização de procedimentos de auditoria através do ...
Auditoria Eletrônica: Automatização de procedimentos de auditoria através do ...
 
TDC2018SP | Trilha Arq Dados - A importância da Governança de dados, MDM e Qu...
TDC2018SP | Trilha Arq Dados - A importância da Governança de dados, MDM e Qu...TDC2018SP | Trilha Arq Dados - A importância da Governança de dados, MDM e Qu...
TDC2018SP | Trilha Arq Dados - A importância da Governança de dados, MDM e Qu...
 
Dutra (2)
Dutra (2)Dutra (2)
Dutra (2)
 
Cultura de Mensuração para Produtos Digitais - TDC SP 2018 - Huxley Dias
Cultura de Mensuração para Produtos Digitais - TDC SP 2018 - Huxley DiasCultura de Mensuração para Produtos Digitais - TDC SP 2018 - Huxley Dias
Cultura de Mensuração para Produtos Digitais - TDC SP 2018 - Huxley Dias
 
DevOps... O caminho! - Monitoramento de aplicações com App Insights
DevOps... O caminho! - Monitoramento de aplicações com App InsightsDevOps... O caminho! - Monitoramento de aplicações com App Insights
DevOps... O caminho! - Monitoramento de aplicações com App Insights
 
Wiseminer Self-Service Data Analytics
Wiseminer Self-Service Data AnalyticsWiseminer Self-Service Data Analytics
Wiseminer Self-Service Data Analytics
 
2. FUNDAMENTOS DE SISTEMAS DE INFORMAÇÃO - 22.06.22.pdf
2. FUNDAMENTOS DE SISTEMAS DE INFORMAÇÃO - 22.06.22.pdf2. FUNDAMENTOS DE SISTEMAS DE INFORMAÇÃO - 22.06.22.pdf
2. FUNDAMENTOS DE SISTEMAS DE INFORMAÇÃO - 22.06.22.pdf
 
FIC 2015 - BIG DATA - Os desafios do GVwise ao entregar predição e promover p...
FIC 2015 - BIG DATA - Os desafios do GVwise ao entregar predição e promover p...FIC 2015 - BIG DATA - Os desafios do GVwise ao entregar predição e promover p...
FIC 2015 - BIG DATA - Os desafios do GVwise ao entregar predição e promover p...
 
Wiseminer Data Blending, Data Preparation & Analytics
Wiseminer Data Blending, Data Preparation & AnalyticsWiseminer Data Blending, Data Preparation & Analytics
Wiseminer Data Blending, Data Preparation & Analytics
 
A utilização de datawarehouse em uma rede de concessionários de veículos como...
A utilização de datawarehouse em uma rede de concessionários de veículos como...A utilização de datawarehouse em uma rede de concessionários de veículos como...
A utilização de datawarehouse em uma rede de concessionários de veículos como...
 
Gerencia de Decisões
Gerencia de DecisõesGerencia de Decisões
Gerencia de Decisões
 
Data Product Management at Nubank
Data Product Management at NubankData Product Management at Nubank
Data Product Management at Nubank
 

Big Data Palestra 2014

  • 1. (c) 2014 UWS -- Não Distribuir 1 Palestra p/ SUCESU-RJ Dan Reznik 23-09-2014
  • 2. Empresas: Defina Big Data •65%: Arquivos enormes •60%: Análises avançadas •50%: Ferramentas de visualização de dados (c) 2014 UWS -- Não Distribuir 2 Forbes, 10-set-2014
  • 3. Empresas: O que vc acha sobre “Big Data” •89%: revolucão nos negócios como a internet •85%: mudança dramática em como fazer negócios •79%: empresas que não abraçarem estão fadadas à extinção (c) 2014 UWS -- Não Distribuir 3 Forbes, 10-set-2014
  • 4. (c) 2014 UWS -- Não Distribuir 4 Multi-structured
  • 5. (c) 2014 UWS -- Não Distribuir 5 VALOR
  • 6. Pirâmide de Maslow (c) 2014 UWS -- Não Distribuir 6 -Qualidade -Integração -Governança • Predictive • Optimiz • Anti-Fraud • NLP ESTRATÉGIA, ROI+
  • 7. (c) 2014 UWS -- Não Distribuir 7
  • 8. Nível 1: Ad-Hoc Nível 2: Processos Engatinham Nível 3: Processos Implantados Nível 4: Processos Monitorados Nível 5: Otimização Curva de Maturidade
  • 9. Nível 1: Ad-Hoc •Negócios –Diretores distantes, sem adesão da organização como um todo –Objetivos de negócio mal-definidos –Dados são artefatos; não valorizados ados como ativos. •Organização –Dependência em especialistas –Grupos separados e não-comunicantes –Responsabilidades mal-definidas –Conhecimento de boas práticas pouco difundido –Monitoramento reativo, "apagamento de incêndios" constante •Dados –Semântica mal-documentada –Bancos com arquiteturas variadas –Baixa qualidade de dados, pouca integração –Ferramentas genéricas utilizadas para soluções pontuais
  • 10. Nível 2: Processos Engatinham •Negócios –Percepção crescente do valor dos dados –Alguns processos/benefícios são reconhecidos como comuns •Organização –Identificação de "responsáveis por dados“ –Papéis ainda mal definidos, iniciativa não é contínua –Esforço inicial em criar gerenciamento para toda a organização; interesses e perspectivas diferentes entre os departamentos. –Demanda por novas capacidades é reconhecida, parcialmente resolvida com treinamento •Dados –Projetos para a organização iniciam –Serviços de distribuição de dados são implantados
  • 11. Nível 3: Processos Implantados •Negócios –Envolvimento ativo de um executivo com autoridade sobre toda a organização –Comprometimento ao desenvolvimento continuo de habilidades •Organização –Papéis dos responsáveis de dados bem definidos –Centralização do gerenciamento de dados –Processos, métricas de qualidade, e ferramentas usadas por toda a organização –Auditorias periódicas e monitoramento proativo •Dados –Arquitetura de dados comum guia todas as implementações –Gerenciamento central de dicionário de dados –Métricas de qualidade monitoradas regularmente
  • 12. Nível 4: Processos Monitorados •Negócios –Interesse em predição do desempenho futuro •Organização –Metas estabelecidas para cada processo –Problemas são identificados e corrigidos pró- ativamente •Dados –Métricas são coletadas e analisadas continuamente –Primeiros passos na predição de desempenho futuro
  • 13. Nível 5: Negócios Otimizados •Negócios –Identificação de oportunidades •Organização –Cultura de melhoria contínua dos processos –Processos evoluem junto as metas da organização. •Dados –???
  • 14. (c) 2014 UWS -- Não Distribuir 14 Ambiente Heterogêneo Processos Informais Dados Caóticos Ambiente Integrado Processos Controlados Dados Coerentes Simplificação Tempos de Entrega Curtos Redução de Custos
  • 17. Governança (c) 2014 UWS -- Não Distribuir 17
  • 18. •Identificar e Priorizar Use Cases •Desenho de Soluções •Governança de Dados •Implantação (c) 2014 UWS -- Não Distribuir 18
  • 19. (c) 2014 UWS -- Não Distribuir 19 Motor de Recomendação Detecção de Fraude Integração de Dados do Cidadão Busca Semântica de Laudos Otimização de Marketing Digital
  • 20. Busca Semântica (DeCS) (c) 2013 UWS -- Não Distribuir
  • 21. (c) 2014 UWS -- Não Distribuir 21
  • 22. Dashboard do Paciente (c) 2013 UWS -- Não Distribuir
  • 23. (c) 2014 UWS -- Não Distribuir 23
  • 24. Caixas Eletrônicos (c) 2014 UWS -- Não Distribuir 24
  • 25. Fraude - Anomalias (c) 2014 UWS -- Não Distribuir 25
  • 26. Logs Semi- Estruturado Estruturado Banco Paralelo Deteccao Anomalias alarmes ATM ATM ATM Solução Anti-Fraude (c) 2014 UWS -- Não Distribuir 26
  • 27. Projeto Base Integrada do Cidadão Secretaria de Planejamento e Gestão, Governo de Minas Gerais (c) 2014 UWS -- Não Distribuir 27
  • 28. Vinculação de Registros (inter tabelas) (c) 2014 UWS -- Não Distribuir 28
  • 29. Integração: Os Três Nãos •Não quero mais trabalho •Não quero que você tenha meus dados •Não quero que você veja os furos com meus dados (c) 2014 UWS -- Não Distribuir 29
  • 30. Arquitetura do Sistema (c) 2014 UWS -- Não Distribuir 30
  • 31. O problema é sempre PESSOAS (c) 2014 UWS -- Não Distribuir 31
  • 32. (c) 2014 UWS -- Não Distribuir 32
  • 33. Contato: Dan Reznik, Diretor (21) 85 74 73 82 dan@upperwestsolucoes.com www.upperwestsolucoes.com (c) 2014 UWS -- Não Distribuir 33