Die Oracle Datenbank und Apache Hadoop
DOAG -Big Data für Oracle Entwickler: Zweitagesveranstaltung mit Hands-On - 25.09.2014 in Köln
DOAG 2014 -Die größte Anwenderkonferenz rund um alle Oracle Themen, vom 18.11.2014 - 20.11.2014 in Nürnberg
Die Oracle Datenbank in die Welt von Hadoop und NoSQL integrieren
Wie lassen sich die beiden Welten, Oracle RDBMS und der NoSQL Ansatz sinnvoll für die Archivierung und das Datensammeln einsetzen?
Ziel des Vortrags ist es aufzuzeigen, wie die Kombinationen aus den Vorteilen der beiden Welten für die Analyse und Archivierung von Daten eingesetzt werden kann.
Hadoop, mit einer entsprechen Container Datenbank Lösung, eignet sich gut, um im ersten Schritt Daten zu sammeln und/oder im letzten Schritt Daten zu archivieren.
Die eigentliche Oracle RDBMS Datenbank kann dabei schnell und schlank gehalten werden, um Hardware und damit Lizenzkosten einzusparen.
Es werden Architekturansätze aufgezeigt, wie die Integration der Oracle RDBMS und NoSQL Datenbank in das Hadoop Ökosystem dabei erfolgen kann.
Mit den kostenpflichtigen Adaptern der Oracle RDBMS lässt sich zwar einfacher eine tiefe Integration mit Hadoop erreichen, aber auch mit den freien Lösungen kann bereits eine umfangreiche Lösung implementiert werden.
Wer gewinnt das SQL-Rennen auf der Hadoop-Strecke?inovex GmbH
Nachdem in den letzten Jahren NoSQL ein beherrschendes Thema im Kontext von Big Data war, gewinnt SQL als Anfragesprache wieder große Bedeutung im Hadoop-Umfeld. Dabei steht mit Hive ein SQL-Dialekt zur Verfügung, mit dem zwar leicht Batch-orientierte ETL-Strecken für Hadoop gebaut werden können, der aber bisher für interaktive Analysen nicht geeignet war Mit Impala, Presto, Spark SQL und dem Stinger-Projekt ändert sich das nun rapide. Schnelle verteilte Query Engines erlauben interaktive analytische Anfragen auf großen Datenmengen. Dazu kommen neue Speicherformate wie Parquet und ORC, die effizientere Repräsentation und schnelleren Zugriff versprechen. In dieser Session gebe ich einen Überblick über Stärken und Schwächen der verschiedenen Ansätze und Erfahrungen aus dem praktischen Einsatz.
Heterogene Daten(-strukturen) in der Oracle DatenbankUlrike Schwinn
Dies sind die Vortragsslides auf der Oracle Big Date Days 2017 zum Thema heterogene Daten(-strukturen) zugreifen und speichern. Hier findet man beispielsweise Informationen zu External Tables, Large Objects, XMLDB OracleText und JSON in 12.2.
Oracle no sql-doag-datenbank_konferenz_juni_2014Gunther Pippèrr
Oracle NoSQL DOAG Datenbank Konferenz 2014 - Düsseldorf, Dienstag, 03.Juni 2014
Oracle NoSQL - Eine Alternative für die traditionelle Datenbank?
Ein neues Mitglied in der Oracle Datenbank Familien
Nur ein Hype oder die Zukunft? Wird es ein miteinander geben?
Die Oracle NoSQL Datenbank bietet als klassischer Key-Value Store über verteilte Knoten Ausfallsicherheit und Performance für die Verarbeitungen von Massendaten. Im Gegensatz zum Schweizer Taschenmesser für viele Problem, dem Oracle DB RDBMS, ist die Oracle NoSQL mehr ein Präzisionswerkzeug für genau eine gezielte Aufgabe. Um die NoSQL Datenbank im Vergleich zum großen Oracle RDBMS System besser einschätzen zu können, wird der prinzipielle Aufbau der Oracle NoSQL dargestellt um die Vorteile dieser Architektur gegen den traditionellen RDBMS Ansatz aufzuzeigen.
Das NoSQL Konzept und wo kann hier die Oracle NoSQL eingeordnet
Begriff NoSQL kann inzwischen mehr als ein Denkansatz zur Datenverwaltung und Verarbeitung als eine spezielle Technologie definiert werden. Gemeinsam ist den verschiedenen Implementierungen auf dem Markt aber meist der Versuch eine hohe Skalierbarkeit durch massive Parallelisierung über viele Rechnerknoten zu erreichen. Die Oracle NoSQL Datenbank ist dabei ein Vertreter der Key-Value Store Datenbanken. Auf Basis der soliden Berkeley DB Java Edition hat Oracle die bestehenden Replikations- Mechanismen der Berkeley DB optimiert und damit eine neue Datenbank, die Oracle NoSQL entwickelt. Die Oracle NoSQL Datenbank folgt dem aktuellen Trend, moderne Datenbank mehr mit dem CAP / Base Ansatz umzusetzen, als das traditionelle ACID einer Relationale Datenbanken erneut zu implementieren.
Sven Schlarb of the Austrian National Library presented SCAPE (in German). Besides giving a general overview of SCAPE the presentation also includes descriptions of SCAPE solutions, including tools, software integration, planning, and more.
The presentation was given at the Austrian Library day on ‘National Initiatives on Digital Information. Repositories, Research data and long-term preservation in Austria’ (http://www.obvsg.at/voeb-obvsg-bibliothekstage-2013/programm-410/) on 4 October 2013 in Vienna.
Im Webinar Enterprise Readiness mit Hadoop - Infrastrukturen für Big Data wird unter anderem Hadoop als etablierte Basis-Technologie für Industrie 4.0 und Big Data-Anforderungen beleuchtet. Erfahren Sie, wie Ihre Infrastruktur für die Verarbeitung und Analyse großer und polystrukturierter Datenmengen aus unterschiedlichen Quellsystemen aufgebaut sein muss.
Diverse In-Memory-Technologien sind bereits seit langer Zeit verfügbar, wie z.B. Result Caches, verschiedene Buffer Caches, Pre-Loading von Objekten etc. Die aktuellste Oracle12c-Version geht jedoch einen großen Schritt weiter. Ohne Änderungen werden SQL-Abfragen um Faktoren beschleunigt; die Grundlage für Real-Time Analysen ist damit gelegt. Wie die einzelnen Techniken funktionieren und mit welchem geríngem Aufwand sie konfiguriert werden, wird erklärt.
Wer gewinnt das SQL-Rennen auf der Hadoop-Strecke?inovex GmbH
Nachdem in den letzten Jahren NoSQL ein beherrschendes Thema im Kontext von Big Data war, gewinnt SQL als Anfragesprache wieder große Bedeutung im Hadoop-Umfeld. Dabei steht mit Hive ein SQL-Dialekt zur Verfügung, mit dem zwar leicht Batch-orientierte ETL-Strecken für Hadoop gebaut werden können, der aber bisher für interaktive Analysen nicht geeignet war Mit Impala, Presto, Spark SQL und dem Stinger-Projekt ändert sich das nun rapide. Schnelle verteilte Query Engines erlauben interaktive analytische Anfragen auf großen Datenmengen. Dazu kommen neue Speicherformate wie Parquet und ORC, die effizientere Repräsentation und schnelleren Zugriff versprechen. In dieser Session gebe ich einen Überblick über Stärken und Schwächen der verschiedenen Ansätze und Erfahrungen aus dem praktischen Einsatz.
Heterogene Daten(-strukturen) in der Oracle DatenbankUlrike Schwinn
Dies sind die Vortragsslides auf der Oracle Big Date Days 2017 zum Thema heterogene Daten(-strukturen) zugreifen und speichern. Hier findet man beispielsweise Informationen zu External Tables, Large Objects, XMLDB OracleText und JSON in 12.2.
Oracle no sql-doag-datenbank_konferenz_juni_2014Gunther Pippèrr
Oracle NoSQL DOAG Datenbank Konferenz 2014 - Düsseldorf, Dienstag, 03.Juni 2014
Oracle NoSQL - Eine Alternative für die traditionelle Datenbank?
Ein neues Mitglied in der Oracle Datenbank Familien
Nur ein Hype oder die Zukunft? Wird es ein miteinander geben?
Die Oracle NoSQL Datenbank bietet als klassischer Key-Value Store über verteilte Knoten Ausfallsicherheit und Performance für die Verarbeitungen von Massendaten. Im Gegensatz zum Schweizer Taschenmesser für viele Problem, dem Oracle DB RDBMS, ist die Oracle NoSQL mehr ein Präzisionswerkzeug für genau eine gezielte Aufgabe. Um die NoSQL Datenbank im Vergleich zum großen Oracle RDBMS System besser einschätzen zu können, wird der prinzipielle Aufbau der Oracle NoSQL dargestellt um die Vorteile dieser Architektur gegen den traditionellen RDBMS Ansatz aufzuzeigen.
Das NoSQL Konzept und wo kann hier die Oracle NoSQL eingeordnet
Begriff NoSQL kann inzwischen mehr als ein Denkansatz zur Datenverwaltung und Verarbeitung als eine spezielle Technologie definiert werden. Gemeinsam ist den verschiedenen Implementierungen auf dem Markt aber meist der Versuch eine hohe Skalierbarkeit durch massive Parallelisierung über viele Rechnerknoten zu erreichen. Die Oracle NoSQL Datenbank ist dabei ein Vertreter der Key-Value Store Datenbanken. Auf Basis der soliden Berkeley DB Java Edition hat Oracle die bestehenden Replikations- Mechanismen der Berkeley DB optimiert und damit eine neue Datenbank, die Oracle NoSQL entwickelt. Die Oracle NoSQL Datenbank folgt dem aktuellen Trend, moderne Datenbank mehr mit dem CAP / Base Ansatz umzusetzen, als das traditionelle ACID einer Relationale Datenbanken erneut zu implementieren.
Sven Schlarb of the Austrian National Library presented SCAPE (in German). Besides giving a general overview of SCAPE the presentation also includes descriptions of SCAPE solutions, including tools, software integration, planning, and more.
The presentation was given at the Austrian Library day on ‘National Initiatives on Digital Information. Repositories, Research data and long-term preservation in Austria’ (http://www.obvsg.at/voeb-obvsg-bibliothekstage-2013/programm-410/) on 4 October 2013 in Vienna.
Im Webinar Enterprise Readiness mit Hadoop - Infrastrukturen für Big Data wird unter anderem Hadoop als etablierte Basis-Technologie für Industrie 4.0 und Big Data-Anforderungen beleuchtet. Erfahren Sie, wie Ihre Infrastruktur für die Verarbeitung und Analyse großer und polystrukturierter Datenmengen aus unterschiedlichen Quellsystemen aufgebaut sein muss.
Diverse In-Memory-Technologien sind bereits seit langer Zeit verfügbar, wie z.B. Result Caches, verschiedene Buffer Caches, Pre-Loading von Objekten etc. Die aktuellste Oracle12c-Version geht jedoch einen großen Schritt weiter. Ohne Änderungen werden SQL-Abfragen um Faktoren beschleunigt; die Grundlage für Real-Time Analysen ist damit gelegt. Wie die einzelnen Techniken funktionieren und mit welchem geríngem Aufwand sie konfiguriert werden, wird erklärt.
Big Data Community Webinar vom 16. Mai 2019: Oracle NoSQL DB im ÜberblickKarin Patenge
Ein Key-Value Store mit nativer Unterstützung für JSON, der auch Graphen und SQL “kann”. Der Foliensatz enthält detaillierte Informationen zur Nutzung der Oracle NoSQL DB aus Sicht der Anwendungsentwicklung als auch aus Sicht der Administration / des Betriebs.
http://www.opitz-consulting.com/go/3-2-11
SQL ist im Rahmen von Big Data die Basis, um Daten zu analysieren. Neben relationalen Datenbanken werden mit Big Data auch Daten aus Hadoop, NoSQL oder anderen Quellen im Data Warehouse integriert. Kann hier SQL verwendet werden?
Der Begriff des Logical Data Warehouse beschreibt die Architektur des Datawarehouses mit verschiedenartigen Quellen. Man beschränkt sich nicht mehr auf eine einzelne Datenbank, sondern integriert weitere Datenspeicher. Hadoop spielt in diesem Zusammenhang eine große Rolle.
Wie kann eine Kombination von Oracle Datenbank und Hadoop implementiert werden? Wie werden die Daten zwischen den Systemen ausgetauscht? Wie können alle Daten mit SQL analysiert werden?
In ihrem Vortrag bei der DOAG Business Intelligence Konferenz 2015 erklärten unser IT-Experte Ingo Reisky und Matthias Fuchs von ise Informatik, wie die einzelnen Komponenten von Hadoop mit SQL abgefragt werden können und welche Innovation Oracle an dieser Stelle bietet. Die Referenten stellten Hadoop Tools wie SQOOP, HIVE, Spark, Oozie und die Connectoren bzw. BigDataSQL von Oracle vor und zeigten wie SQL zur Analytik verwendet werden kann.
--
Über uns:
Als führender Projektspezialist für ganzheitliche IT-Lösungen tragen wir zur Wertsteigerung der Organisationen unserer Kunden bei und bringen IT und Business in Einklang. Mit OPITZ CONSULTING als zuverlässigem Partner können sich unsere Kunden auf ihr Kerngeschäft konzentrieren und ihre Wettbewerbsvorteile nachhaltig absichern und ausbauen.
Über unsere IT-Beratung: http://www.opitz-consulting.com/go/3-8-10
Unser Leistungsangebot: http://www.opitz-consulting.com/go/3-8-874
Karriere bei OPITZ CONSULTING: http://www.opitz-consulting.com/go/3-8-5
Big Data Paris - Air France: Stratégie BigData et Use CasesMongoDB
The document discusses Air France's big data strategy and use cases. It outlines Air France's goals of implementing a consistent big data technical landscape using open source solutions like MongoDB. Several big data projects are ongoing across domains like customer, operations, and maintenance. The document also discusses an operational customer experience platform project that aims to create a real-time 360 degree view of customers across touchpoints to improve customer service.
Extract business value by analyzing large volumes of multi-structured data from various sources such as databases, websites, blogs, social media, smart sensors...
El documento discute los aspectos positivos y negativos del uso de la tecnología en la educación. Señala que las nuevas tecnologías pueden mejorar la enseñanza al hacerla más dinámica y facilitar la transmisión de información, pero también requieren una gran inversión inicial y capacitación de profesores. Luego analiza las fortalezas, debilidades, oportunidades y amenazas del uso de la tecnología en la escuela a través de una matriz DAFO.
Este documento presenta las normas para la presentación de trabajos escritos, orales, audiovisuales y digitales. Establece lineamientos sobre el formato, configuración, disposición y preparación de presentaciones. Entre otros detalles, especifica el uso de tipos de letra estándar, márgenes y numeración de páginas, así como la inclusión de portada, índice, introducción, cuerpo del trabajo, citas, bibliografía y práctica previa a las presentaciones orales.
Big Data Community Webinar vom 16. Mai 2019: Oracle NoSQL DB im ÜberblickKarin Patenge
Ein Key-Value Store mit nativer Unterstützung für JSON, der auch Graphen und SQL “kann”. Der Foliensatz enthält detaillierte Informationen zur Nutzung der Oracle NoSQL DB aus Sicht der Anwendungsentwicklung als auch aus Sicht der Administration / des Betriebs.
http://www.opitz-consulting.com/go/3-2-11
SQL ist im Rahmen von Big Data die Basis, um Daten zu analysieren. Neben relationalen Datenbanken werden mit Big Data auch Daten aus Hadoop, NoSQL oder anderen Quellen im Data Warehouse integriert. Kann hier SQL verwendet werden?
Der Begriff des Logical Data Warehouse beschreibt die Architektur des Datawarehouses mit verschiedenartigen Quellen. Man beschränkt sich nicht mehr auf eine einzelne Datenbank, sondern integriert weitere Datenspeicher. Hadoop spielt in diesem Zusammenhang eine große Rolle.
Wie kann eine Kombination von Oracle Datenbank und Hadoop implementiert werden? Wie werden die Daten zwischen den Systemen ausgetauscht? Wie können alle Daten mit SQL analysiert werden?
In ihrem Vortrag bei der DOAG Business Intelligence Konferenz 2015 erklärten unser IT-Experte Ingo Reisky und Matthias Fuchs von ise Informatik, wie die einzelnen Komponenten von Hadoop mit SQL abgefragt werden können und welche Innovation Oracle an dieser Stelle bietet. Die Referenten stellten Hadoop Tools wie SQOOP, HIVE, Spark, Oozie und die Connectoren bzw. BigDataSQL von Oracle vor und zeigten wie SQL zur Analytik verwendet werden kann.
--
Über uns:
Als führender Projektspezialist für ganzheitliche IT-Lösungen tragen wir zur Wertsteigerung der Organisationen unserer Kunden bei und bringen IT und Business in Einklang. Mit OPITZ CONSULTING als zuverlässigem Partner können sich unsere Kunden auf ihr Kerngeschäft konzentrieren und ihre Wettbewerbsvorteile nachhaltig absichern und ausbauen.
Über unsere IT-Beratung: http://www.opitz-consulting.com/go/3-8-10
Unser Leistungsangebot: http://www.opitz-consulting.com/go/3-8-874
Karriere bei OPITZ CONSULTING: http://www.opitz-consulting.com/go/3-8-5
Big Data Paris - Air France: Stratégie BigData et Use CasesMongoDB
The document discusses Air France's big data strategy and use cases. It outlines Air France's goals of implementing a consistent big data technical landscape using open source solutions like MongoDB. Several big data projects are ongoing across domains like customer, operations, and maintenance. The document also discusses an operational customer experience platform project that aims to create a real-time 360 degree view of customers across touchpoints to improve customer service.
Extract business value by analyzing large volumes of multi-structured data from various sources such as databases, websites, blogs, social media, smart sensors...
El documento discute los aspectos positivos y negativos del uso de la tecnología en la educación. Señala que las nuevas tecnologías pueden mejorar la enseñanza al hacerla más dinámica y facilitar la transmisión de información, pero también requieren una gran inversión inicial y capacitación de profesores. Luego analiza las fortalezas, debilidades, oportunidades y amenazas del uso de la tecnología en la escuela a través de una matriz DAFO.
Este documento presenta las normas para la presentación de trabajos escritos, orales, audiovisuales y digitales. Establece lineamientos sobre el formato, configuración, disposición y preparación de presentaciones. Entre otros detalles, especifica el uso de tipos de letra estándar, márgenes y numeración de páginas, así como la inclusión de portada, índice, introducción, cuerpo del trabajo, citas, bibliografía y práctica previa a las presentaciones orales.
Vivimos en un mundo obsesionado con la belleza. Para nosotros la definición de la belleza es una mujer delgada. Veamos las dietas más extrañas de las historia al cual las personas se han sometido para alcanzar este ideal de belleza.
Este documento presenta diferentes estrategias y comandos avanzados para realizar búsquedas efectivas en Google. Algunas de las técnicas discutidas incluyen el uso de comillas para buscar frases exactas, el símbolo tilde para buscar términos similares, y el operador OR para incluir resultados alternativos. También se describen formas de excluir palabras específicas, buscar en rangos numéricos y formatos de archivo particulares como PDF y PowerPoint.
Ndicadores de los sistemas de producciónElisa Puche
Los indicadores de gestión son vitales para los sistemas de producción ya que permiten la mejora continua y la viabilidad de los procesos. La productividad mide la eficiencia del sistema como el cociente entre los resultados y los recursos utilizados. Dentro de un sistema productivo existen tantos índices de productividad como recursos. Los tiempos de carga como el tiempo de fabricación y distribución son también importantes indicadores para optimizar la producción.
Este documento describe la acción tutorial en un centro educativo, incluyendo las funciones del tutor, la legislación relevante, y las interacciones del tutor con los alumnos, padres, profesores y equipo directivo. La acción tutorial busca desarrollar competencias como la social, de aprendizaje autónomo, iniciativa personal y emocional a través de orientación, intercambio de información y organización de recursos.
Analyse von Applikationslogs und Querylogs: Datenbanken, Hadoop oder Splunk?KurtStockinger
Applikationen und Datenbanken generieren Logfiles, deren Inhalte wichtige Aussagen über Zugriffsmuster enthalten. So kann ermittelt werden, welche Produkte am häufigsten abgefragt werden oder welche Kundentrends sich abzeichnen. In diesem Vortrag beleuchten wir zunächst die Problematik anhand von praktischen Use Cases. Danach zeigen wir, wie sich die Probleme mit einem herkömmlichen Datenbankansatz, mit Hadoop und mit Splunk lösen lassen.
"Hybrid Architectures, Data Lakes + Data Warehouse"
The big data discussion continues and the practice shows that Data Lakes do not replace but complement Data Warehouse. Which new scenarios are possible? What are the strengths of hybrid architectures, ie the combination of Data Lakes and Data Warehouses?
Endeca Web Acquisition Toolkit - Integration verteilter Web-Anwendungen und a...Harald Erb
Das einzig Beständige ist der Wandel: Kritische Informationen, die Unternehmen täglich als Entscheidungsgrundlage benötigen, unterliegen der permanenten Veränderung und sind noch dazu über viele interne und externe Quellen verteilt. Sei es in Dokumenten, E-Mails, auf Portalen und Websites, etc. – überall finden sich relevante Daten, die wertvolle Erkenntnisse für fundierte Geschäftsentscheidungen liefern können.
Technisch betrachtet müssen die zum Teil sehr schwer zugänglichen Informationen zunächst einmal von den verteilten Anwendungen und Datenquellen beschafft werden bevor die eigentliche Weiterverarbeitung im Data Warehouse stattfindet. Als graphisches Entwicklungswerkzeug setzt das Endeca Web Acquisition Toolkit (Endeca WAT) genau an diesem Punkt an, indem es das Erstellen synthetischer Schnittstellen ermöglicht. Z.B. sollen von einer kommerziellen Website Preisdaten und/oder Kundenbewertungen akquiriert werden, für die der Website-Betreiber keine API bereitstellt. Der nachfolgende Artikel bzw. Vortrag skizziert, wie das Endeca Web Acquisition Toolkit Integrationsaufgaben zur Anbindung externer Datenquellen im Rahmen der aktuellen Oracle Information Management Reference Architecture übernehmen kann
Die Oracle Datenbank und Apache Hadoop
DOAG -Big Data für Oracle Entwickler: Zweitagesveranstaltung mit Hands-On - 25.09.2014 in Köln
DOAG 2014 -Die größte Anwenderkonferenz rund um alle Oracle Themen, vom 18.11.2014 - 20.11.2014 in Nürnberg
Die Oracle Datenbank in die Welt von Hadoop und NoSQL integrieren
Wie lassen sich die beiden Welten, Oracle RDBMS und der NoSQL Ansatz sinnvoll für die Archivierung und das Datensammeln einsetzen?
Ziel des Vortrags ist es aufzuzeigen, wie die Kombinationen aus den Vorteilen der beiden Welten für die Analyse und Archivierung von Daten eingesetzt werden kann.
Hadoop, mit einer entsprechen Container Datenbank Lösung, eignet sich gut, um im ersten Schritt Daten zu sammeln und/oder im letzten Schritt Daten zu archivieren.
Die eigentliche Oracle RDBMS Datenbank kann dabei schnell und schlank gehalten werden, um Hardware und damit Lizenzkosten einzusparen.
Es werden Architekturansätze aufgezeigt, wie die Integration der Oracle RDBMS und NoSQL Datenbank in das Hadoop Ökosystem dabei erfolgen kann.
Mit den kostenpflichtigen Adaptern der Oracle RDBMS lässt sich zwar einfacher eine tiefe Integration mit Hadoop erreichen, aber auch mit den freien Lösungen kann bereits eine umfangreiche Lösung implementiert werden.
Große Datenmengen und kleine gelbe Elefanten: eine vielzitierte Kombination. Aber wie sieht es in der Realität denn konkret damit aus? Dieser Praxisbericht will aufzeigen, wie man in modernen BI-Architekturen große Datenmengen mit dem Hadoop-Ökosystem erfolgreich beherrschen kann und welchen verschiedenen Herausforderungen man auf diesem Weg begegnet.
Uwe Ricken – IT-Tage 2015 – Workshop: MS SQL Server OptimierungInformatik Aktuell
Microsoft SQL Server bietet unendlich viele Stellschrauben für Performanceoptimierung. Es ist nicht immer nur ein Index, der gebraucht wird, sondern häufig ist es nur eine Kleinigkeit in der Konfiguration und plötzlich "fliegt" die Anwendung.
In diesem Webinar geben wir Ihnen eine Einführung, präsentieren die Möglichkeiten und Fallstricke und beantworten Ihre Fragen rund um das Thema Big Data.
SQL on Hadoop für praktikables BI auf Big Datainovex GmbH
Nachdem in den letzten Jahren NoSQL ein beherrschendes Thema im Kontext von Big Data war, gewinnt SQL als Anfragesprache wieder große Bedeutung im Hadoop-Umfeld. Dabei steht mit Hive ein SQL-Dialekt zur Verfügung, mit dem zwar leicht Batch-orientierte ETL-Strecken für Hadoop gebaut werden können, der aber bisher für interaktive Analysen nicht geeignet war Mit Impala, Presto, Spark SQL und dem Stinger-Projekt ändert sich das nun rapide. Schnelle verteilte Query Engines erlauben interaktive analytische Anfragen auf großen Datenmengen. Dazu kommen neue Speicherformate wie Parquet und ORC, die effizientere Repräsentation und schnelleren Zugriff versprechen. In dieser Session geben wir einen Überblick über Stärken und Schwächen der verschiedenen Ansätze und berichten praktische Erfahrungen aus Projekten zur Integration mit Open Source und kommerziellen BI-Lösungen.
Speaker: Hans-Peter Zorn und Dominik Benz, inovex GmbH, Karlsruhe
Mehr Vorträge: https://www.inovex.de/de/content-pool/vortraege/
Ähnlich wie Oracle hadoop doag-big-data_09_2014_gpi (20)
DBSAT – Die Oracle DATENBANK bzgl. PII Daten analysierenGunther Pippèrr
DBSAT ist ein Database Security Scanner für die Oracle Datenbanken ( ab der DB Version 10.2.0.5) und steht als Kommando Zeilen Werkzeug zur Verfügung.
Das Tool sammelt Security relevanten Informationen aus einer Datenbank Umgebung und prüft die Einstellungen der DB gegen über einem programmiert hinterlegten Regelwerk und bewertet im Anschluss die Ergebnisse der Tests.
Die Abfragen basieren auf Best Practise und Security Tips von Oracle, komplette Liste wie CIS werden aber nicht abgedeckt.
Mit Hilfe dieser Tests können dann Empfehlungen ausgesprochen werden mit denen Sicherheitsprobleme proaktiv behoben, bzw. erkannt/bewertet, werden können.
Neu in der Version 2 ist auch das Erkennen von sensitiven/sensiblen Daten, wie Daten, die unter die GDPR fallen, aus Datenstrukturen über das Data Dictionary (DD). Als Basis dient ein erweiterbares Patternfile auf Basis regulärer Ausdrücke, d.h. es werden nur Definitionen im DD angeschaut, Daten ansich werden nicht anaylsiert!
Die gesammelten Daten liegen im JSON Format vor und können dann in „hübschen“ Berichten Management tauglich aufgearbeitet werden.
Über Rechte/Rollen und den sicheren Betrieb der DatenbankGunther Pippèrr
Mit Rollen/Rechten und dem Proxy User ein persönliches User-Konzept auf der Datenbank umsetzen.
Gerade mit den gestiegenen Anforderungen der Datenschutz-Grundverordnung DSGVO wird es immer wichtiger, die Anwender und Entwickler auf einer Datenbank besser zu strukturieren und die Rechte aller Beteiligten so passend wie möglich einzurichten.
Besonders in einer Data Warehouse Umgebung lässt es sich oft nicht vermeiden, dass sich Endanwender mit MS Offices Tools, TOAD oder BI Werkzeugen wie Tableau direkt an der Datenbank anmelden um Ihre Abfragen adhoc durchzuführen.
Die Oracle DB stellt dabei schon seit Jahren sehr gute Funktionen zur Verfügung, die helfen die Zugriffe auf die Daten auf das Notwendigste einzuschränken.
Konzepte, wie die „Secure Application Role“ und der „Proxy User“, „Virtual private Database“ VPD, die normalen Rollen und Rechte und das Auditing, helfen uns dabei, diese Anforderungen umzusetzen und zu protokollieren.
Im Vortrag wird aufgezeigt, wie aus diesen Komponenten ein schlüssiges Konzept für den proaktiven Datenschutz in einer Datenbank Umgebung 12c zusammengestellt werden kann.
Oracle LDAP-Integration für SQL*Net
Ja, wo laufen Sie denn? LDAP-Integration für SQL*Net
Überblick SQL*Net
LDAP-Integration
Das `LDAP`-Prinzip
Oracle OID
Active Directory
OpenLDAP
Plug-In Development mit dem Oracle Cloud Control - Enterprise Manager 12c
DOAG 2014 -Die größte Anwenderkonferenz rund um alle Oracle Themen, vom 18.11.2014 - 20.11.2014 in Nürnberg
Plug-In Development mit dem Oracle Enterprise Manager 12c
Entwicklung einer eigenen Lösung für das Monitoring von Applikationen mit den Enterprise Manager 12c am Beispiel der Überwachung für die Oracle NoSQL Datenbank.
Im Vortrag wird das generelle Konzept der OEM Plug-Ins im OEM 12c vorgestellt und die eigenen Erfahrungen und Grenzen beim Entwurf von Plug-Ins für eine größere NoSQL Umgebung werden aufgezeigt.
Ziel ist es über die Fallstricke in der Anfangsphase eines eigenen Projektes zu informieren, um eine schnelle Umsetzung eigener Ideen ohne allzu große Hürden zu ermöglichen.
Oracle SQL*Plus
Übersicht über das Werkzeug für die Oracle Datenbank
Arbeiten mit SQL*Plus
Quickconnect mit SQL*Plus 10g
Die SQL*Plus-Editier-Befehle
Erweiterte Funktionalität von SQL*Plus
Secure Scripting SIG Security Köln Dienstag, 16. Oktober 2012
Wo hin nur mit den Passwörtern in Oracle Scripten?
Passwörter "verstecken"
Datenbank Skripte vor Manipulationen schützen
CMAN Reloaded - Der Oracle Connection Manager (CMAN) als Firewall für das Routing von Datenbank Verbindungen
DOAG Security Day - Mai 2015
Mit dem Oracle Connection Manager, dem CMAN, kann das SQL*Net Protokoll zwischen verschiedenen Netzwerken „geroutet“ werden.
Der CMAN ist bereits sehr lange Bestandteil der Oracle Installation und ursprünglich war einer der Haupteinsatzzwecke das Routen zwischen verschiedenen Netzwerk Protokollen, zum Beispiel in einer SPX/IPX Welt nach TCP/IP.
Heute ist der CMAN sehr praktisch um Proxy und Firewall Funktionalitäten zwischen verschiedenen Netzwerk Segmenten zu realisieren.
Mit diesem Konzept lässt sich sauber das administrative bzw., interne Netzwerk von der Produktion trennen. Trotzdem ist aber noch ein komfortables und sicheres Arbeiten für die Administratoren möglich.
Im Vortrag wird die Architektur und der Einsatz als Gateway in einem Unternehmensnetz vorgestellt.
Ziel in diesem Projekt war es die Zugriffe der Administratoren zentral zu bündeln und zu überwachen.
Auch wird die Installation und der Betrieb auf einem Linux System vorgestellt und in einer Demonstration die Funktion dargelegt.
This document provides an overview of Oracle NoSQL Database. It discusses Oracle NoSQL as a key-value store and how it distributes and replicates data across multiple nodes. It also covers the architecture of Oracle NoSQL, including how it uses Berkeley DB for storage and implements master-slave replication. The document aims to help understand how Oracle NoSQL can provide a scalable and highly available database alternative to the Oracle RDBMS.