Logical Warehouse Positionierung und Technologie hinter der Virtualisierung

1. Business Vault - Strategien zur agilen Auswertung
Raus aus dem Vault

2. Themen
Logical Data Warehouse
Datenvirtualisierung
Agile Auswertung
Business Vault:
Als Alternative im Logical
Warehouse

3. Herausforderung
◻ Self-Service BI
◻ Operational BI
◻ Polyglot Storage
◻ Integration Big Data
◻ Machine Learning,
Predictive, Mining

4. Alte und neue Welt
◻ Sicherheit
◻ Metadata
◻ SQL
◻ Query planning
◻ Data Independence
◻ Skalierung
◻ Spätes Schema
◻ Frontendwahl
◻ Wahl der Engine
◻ Batch, Interactive,
Streaming, ML, graph

5. Gartner “Bimodal BI”
◻Historien bilden
◻Audit
◻Reproduzierbarkeit
◻Entkopplung
◻Langzeitspeicher
◻Neue Quellen
◻Schnelle
Veränderung
◻Self-Service
◻Operationale Daten
Mode 1: Zuverlässigkeit Mode 2: Agilität

6. Quadrant – 4QM
◻Ronald Damhof
◻Martijn Evers
◻Datenentropy
◻Data Deployment
◻Self-Service
◻Governance

7. Logical Data Warehouse
Logical Data Warehouse Architecture
DB DWH ESB externprivatAPP
DashboardMobileWebsiteReportingApp

8. Logical Data Warehouse
◻ Sichten für Projekte (Sampling)
◻ Wiederverwendung von Sichten
◻ Caching häufig genutzter Sets
◻ Agile Datenintegration
◻ Durchsetzung von
Datenschutzregeln
◻ Integrierte Metadaten, Glossary
“The logical data warehouse
architecture delivers data and
metadata to data consumers in
support of decision-making,
reporting, and data retrieval;
whereby data and metadata stores
are decoupled from data
consumers through a metadata-
driven layer to increase flexibility
and whereby data and metadata
are presented in a subject-
oriented, integrated, time-variant,
and reproducible style.“

9. Logical Data Warehouse
Quelle: r20.nl – Rick van der Lans - © 2016

10. Datenvirtualisierung
⬜ Modellgetrieben
■ Keine Datenbewirtschaftung
■ Modell-Definition anhand von SQL
⬜ SQL-Engine
■ View Definitionen
■ Bekannte Optimierung
⬜ Caching
■ Materialized Views
■ Ergebnis Caching
⬜ Hersteller
■ Cirro Data Hub, Denodo, Cisco , Delphix,
Informatica, SAS, Redhat JBoss DataVirt, Rocket,
Stone Bond Enterprise Enabler
Data Virtualization Server
Relationales
Modell
Quelltabellen
Views
Cache
Parser
Engine
Optimize
Quelle

11. Datenvirtualisierung
Quelle: r20.nl – Rick van der Lans - © 2016

12. Datenvirtualisierung
Virtualisierung
Quelle: Hortonworks.com – Julian Hyde - © 2016

13. Relational Algebra
Extension to
mathematical set
theory
E.F. Codd (IBM) 1970
Select,filter,join,sort,uni
on, …
Planning und
Optimierung
Quelle: Hortonworks.com – Julian Hyde - © 2016

14. Federation Engine - Calcite
Quelle: Hortonworks.com – Julian Hyde - © 2016

15. Quelle: Hortonworks.com – Julian Hyde - © 2016

16. Quelle: Hortonworks.com – Julian Hyde - © 2016

17. Raus aus dem Vault - Supernova
◻ Datenvirtualisierung kann die Persistierung nach
dem Data Vault ersetzen
◻ SuperNova ermöglicht eine automatisierte
Ableitung zum Übergang in die View-Schichten
◻ Regeln des Business Vault können in SQL
formuliert werden

18. Super Nova Überblick
⬜ Supernova
■ Alle Versionen von Hub und
Link (Eliminierung von
Satelliten)
⬜ Extended Supernova
■ Views mit Regeln
⬜ Delivery
■ Star Schema View
■ Denormalisierung
■ Anforderungsgetrieben
Source: Rick van der Lans sponsored by Cisco Centennium: http://www.cisco.com/c/dam/en_us/services/enterprise-it-services/data-virtualization/documents/whitepaper-cisco-datavaul.pdf

19. Supernova –Views
Source: Rick van der Lans sponsored by Cisco Centennium: http://www.cisco.com/c/dam/en_us/services/enterprise-it-services/data-virtualization/documents/whitepaper-cisco-datavaul.pdf

20. Supernova – Views
Source: Rick van der Lans sponsored by Cisco Centennium: http://www.cisco.com/c/dam/en_us/services/enterprise-it-services/data-virtualization/documents/whitepaper-cisco-datavaul.pdf

21. Supernova – Views
Source: Rick van der Lans sponsored by Cisco Centennium: http://www.cisco.com/c/dam/en_us/services/enterprise-it-services/data-virtualization/documents/whitepaper-cisco-datavaul.pdf

22. Supernova – Views
Source: Rick van der Lans sponsored by Cisco Centennium: http://www.cisco.com/c/dam/en_us/services/enterprise-it-services/data-virtualization/documents/whitepaper-cisco-datavaul.pdf

23. Supernova – Views
Source: Rick van der Lans sponsored by Cisco Centennium: http://www.cisco.com/c/dam/en_us/services/enterprise-it-services/data-virtualization/documents/whitepaper-cisco-datavaul.pdf

24. Data Vault vs. Supernova
Source: Rick van der Lans sponsored by Cisco Centennium: http://www.cisco.com/c/dam/en_us/services/enterprise-it-services/data-virtualization/documents/whitepaper-cisco-datavaul.pdf

25. Business Vault virtualisiert
◻ Flexibilität
◻ Optimierung
transparent
⬜Caching
⬜Indexing
◻ SQL als Metasprache
für Regeln
◻ Schnelles Prototyping
◻Autorisierung über
Virtualisierungs
Softare
◻Wegfall von PIT und
Bridge

26. Data Virtualization Server
Raus aus dem Vault
Rohdaten Regeln
RAW Business
Data Virtualization Server
Rohdaten
Regeln
RAW

27. Q4
Q2
Q3
Virtualisierung
SQL
Q1
Logical Data Warehouse - Datenvermittlung
Data
Vault
Hadoop
Stream
BI
Data Science
Real-Time
Business
Vault
Mart
Datenmodell + Metadaten