SlideShare ist ein Scribd-Unternehmen logo
1 von 21
ELASTICSEARCH CLUSTER 
MANAGEMENT MIT MARVEL 
Webinar am 13. März 2014 
Technology 
Drives 
Business 
Apache Solr, Solr, Apache Lucene, Lucene and their logos are trademarks of the Apache Software Foundation. 
Elasticsearch, Kibana, Marvel, Logstash are trademarks of Elasticsearch BV, registered in the U.S. and in other countries.
MARKUS KLOSE 
Expertise in Elasticsearch, Solr, Lucene, 
Fast ESP 
Certified Apache Solr Trainer 
Speaker, Blogger 
Author “Einführung in Apache Solr” 
Contributor 
@markus_klose
UP-COMING EVENTS 
Webinar 03.04.2014 
Analytics in Online-Shops 
Webinar 10.04.2014 
Suche und Navigation in Online-Shops. 
Mit Elasticsearch und Solr 
Webinar 15.04.2014 
Innovationen in Recommendationsystemen 
für eCommerce 
1 
2 
3
AGENDA 
Kurzvorstellung SHI 
Einführung in Elasticsearch Marvel 
SetUp Elasticsearch Marvel 
Dashboards & Metriken 
Demo 
Q & A
Heute 
2013 
2011 
SEIT 1994 
Hersteller-unabhängiges Unternehmen. Lösungen rund um 
Suche, Navigation und Datenanalyse mit Fokus auf Open Source. 
Partnerschaft mit 
Partnerschaft mit 
2000 Erste Projekte mit Open Source 
1994 Unternehmensgründung und Entwicklung eines Produkts
UNSERE MISSION 
Seit 1994 hersteller-unabhängiges Unternehmen für IT Consulting und Software 
Engineering. 
Wir bieten Lösungen rund um Semantic Search, Analytics und Big Data auf Basis 
etablierter Open-Source Software. 
Wir stellen Werkzeuge bereit, die durch optimale Nutzung der Technologie und Daten 
unsere Kunden beim Erreichen Ihrer Geschäftsziele unterstützen.
WAS WIR TUN 
MIT SERVICES 
DURCH 
ANWENDUNG 
DES KNOW-HOWS 
REALISIEREN 
LÖSUNGEN, 
UM DATEN 
NUTZBAR ZU 
MACHEN! 
• Strategy Consulting 
• Technical Consulting 
• Architecture Review 
• Development Support 
• Team Enablement 
Through Workshops and 
Trainings 
• Technology Comparison 
• Tuning & Troubleshooting 
• Migration Services 
• Experts to Hire 
• Service Level Agreements 
• Software Architecture 
• Coding Services for Java, 
C++/C, .NET, PHP for 
multiple OSs. 
• Continuous Integration 
and Test Driven 
Development 
• Managing Software 
Project Lifecycle 
• Commerce Search 
• Intranet Portal Search 
• Website Search 
• Search Knowledge 
Management 
• Analytics 
• Social Media Monitoring 
UND 
ETABLIERTEN 
PRODUKTEN 
UND 
PARTNERN 
• Apache Solr/Lucene 
• Apache Mahout 
• Apache Hadoop, Pig, Hive 
• LucidWorks Search 
• LucidWorks Search Big Data
IHR DRAHT ZU UNS 
SHI GmbH & Co. KG 
Curt-Frenzel-Str. 12 
D - 86167 Augsburg 
info@shi-gmbh.com 
+49.821.74 82 633 - 0 
@SHIEngineers 
Michael Marheineke Markus Klose Daniel Wrigley
DAS IST MARVEL 
Cluster Management und Monitoring Tool 
Server/Index Statistiken 
Event Monitoring 
uvm. 
Basiert auf dem ELK Stack 
bringt zusätzliche Funktionalität mit 
Voraussetzung: min ES Version 0.90.9
MARVEL = ++KIBANA 
mavel.cluster – Cluster Status auf einen Blick 
marvel.stats_table – Metriken auf einen Blick
SETUP SIMPLE 
Marvel muss auf allen Nodes installiert werden 
ES Starten 
1 bin/elasticsearch 
Installation 
Restart ES 
Aufruf 
2 
3 
4 
bin/plugin -i elasticsearch/marvel/latest 
http://localhost:9200/_plugin/marvel
SETUP CLUSTER 
Marvel wird auf separaten Nodes installiert 
SetUp Monitoring Cluster 
Marvel Installation 
Konfiguration 
SetUp Search Cluster 
Marvel Installation 
Konfiguration 
2 
3 
4 
marvel.agent.enabled:false 
marvel.agent.exporter.es.hosts: [“HOST:9200“] 
1
DASHBOARD OVERVIEW 
Ideal für das Tagesgeschäft 
Cluster Status 
allg. Informationen 
Performance Overview 
Anzahl Dokumente, QPS 
Nodes Overview 
alle Nodes mit den wichtigsten Merkmalen 
Index Overview 
alle Indexe mit den wichtigsten Merkmalen
DASHBOARD NODES 
Ideal für System Monitoring 
Hardware & Betriebssystem relevante Informationen 
Disk, CPU, JVM, Netzwerk 
Index relevanter Überblick 
POST, GET, Memory, Indexverhalten 
Elasticsearch relevante Metriken 
Thread Pool
DASHBOARD INDEX 
Ideal für Performance Monitoring 
Request relevante Metriken 
Suche, Indexierung, Percolation 
Index relevante Metriken 
Anzahl Dokumente, Index Größe, Cache 
Management relevante Themen 
Refresh, Flush, Merge
DARÜBER HINAUS 
Cluster Pulse – Ideal für Cluster Monitoring 
Node Restart 
Index Status 
uvm. 
Sense - Ideal für Developing 
Prototyping Such-Requests 
AdHoc Anfragen
MARVEL ANPASSEN 
Ideal für Ihr Business 
Dashboards anpassen 
Panels löschen, verschieben & hinzufügen 
Look & Feel anpassen 
Eigene Dashboards erstellen 
Überblick über domainspezifische Themen 
Grenzen bei Metriken selbst definieren 
„Filtern“ durch Suche 
…
DEMO
Q & A
KONTAKT 
SHI GmbH & Co. KG 
Curt-Frenzel-Str. 12 
D - 86167 Augsburg 
info@shi-gmbh.com 
+49.821.74 82 633 - 0 
@SHIEngineers 
Michael Marheineke Markus Klose Daniel Wrigley
INFORMATIONEN 
SHI Blog: www.shi-gmbh.com/blog 
Elasticsearch Marvel: http://www.elasticsearch.com/marvel 
Elasticsearch Marvel Dokumentation http://www.elasticsearch.org/guide/en/marvel/current/ 
Download Elasticsearch: http://www.elasticsearch.org/overview/elkdownloads/ 
Einige Bilder wurden über iStockphoto.com bezogen.

Weitere ähnliche Inhalte

Andere mochten auch

Congreso Educativo INACAP 2014 - Sebastián Espinoza
Congreso Educativo INACAP 2014 - Sebastián EspinozaCongreso Educativo INACAP 2014 - Sebastián Espinoza
Congreso Educativo INACAP 2014 - Sebastián EspinozaINACAP
 
Congreso Educativo INACAP 2014 - Jorge Contreras, Mario Zapata
Congreso Educativo INACAP 2014 - Jorge Contreras, Mario ZapataCongreso Educativo INACAP 2014 - Jorge Contreras, Mario Zapata
Congreso Educativo INACAP 2014 - Jorge Contreras, Mario ZapataINACAP
 
UM HOMEM ENVIADO POR DEUS
UM HOMEM ENVIADO POR DEUSUM HOMEM ENVIADO POR DEUS
UM HOMEM ENVIADO POR DEUSAntonio Marcos
 
Neuheiten aus dem Naxos-Deutschland-Vertrieb am 11. Dezember 2015
Neuheiten aus dem Naxos-Deutschland-Vertrieb am 11. Dezember 2015Neuheiten aus dem Naxos-Deutschland-Vertrieb am 11. Dezember 2015
Neuheiten aus dem Naxos-Deutschland-Vertrieb am 11. Dezember 2015NAXOS Deutschland GmbH
 
Unidad deportiva belén
Unidad deportiva belénUnidad deportiva belén
Unidad deportiva belénablandon7
 
Interview Alexandre Jollien (deutsche Fassung)
Interview Alexandre Jollien (deutsche Fassung)Interview Alexandre Jollien (deutsche Fassung)
Interview Alexandre Jollien (deutsche Fassung)Sylvie Castagné
 
WS1112 EET AI Master
WS1112 EET AI MasterWS1112 EET AI Master
WS1112 EET AI MasterSimon Harrer
 
Das Unternehmen Torwegge
Das Unternehmen TorweggeDas Unternehmen Torwegge
Das Unternehmen Torweggetorwegge
 
Clatronic KB 3537
Clatronic KB 3537Clatronic KB 3537
Clatronic KB 3537degarden
 
Blu-ray, DVD- und CD-Neuheiten Februar 2014 Nr. 1 (Im Vertrieb der NAXOS Deut...
Blu-ray, DVD- und CD-Neuheiten Februar 2014 Nr. 1 (Im Vertrieb der NAXOS Deut...Blu-ray, DVD- und CD-Neuheiten Februar 2014 Nr. 1 (Im Vertrieb der NAXOS Deut...
Blu-ray, DVD- und CD-Neuheiten Februar 2014 Nr. 1 (Im Vertrieb der NAXOS Deut...NAXOS Deutschland GmbH
 
David Campbell: Writing Security
David Campbell: Writing SecurityDavid Campbell: Writing Security
David Campbell: Writing SecurityAaron Bauer
 
Aviso convocatoria licitacion vigilancia
Aviso convocatoria licitacion vigilanciaAviso convocatoria licitacion vigilancia
Aviso convocatoria licitacion vigilanciamcriverah
 
Centro commerciale-naturale-slide-
Centro commerciale-naturale-slide-Centro commerciale-naturale-slide-
Centro commerciale-naturale-slide-Salvo Maggiore
 

Andere mochten auch (18)

Congreso Educativo INACAP 2014 - Sebastián Espinoza
Congreso Educativo INACAP 2014 - Sebastián EspinozaCongreso Educativo INACAP 2014 - Sebastián Espinoza
Congreso Educativo INACAP 2014 - Sebastián Espinoza
 
3.64 como funcionan los monitores de plasma
3.64 como funcionan los monitores de plasma3.64 como funcionan los monitores de plasma
3.64 como funcionan los monitores de plasma
 
Congreso Educativo INACAP 2014 - Jorge Contreras, Mario Zapata
Congreso Educativo INACAP 2014 - Jorge Contreras, Mario ZapataCongreso Educativo INACAP 2014 - Jorge Contreras, Mario Zapata
Congreso Educativo INACAP 2014 - Jorge Contreras, Mario Zapata
 
UM HOMEM ENVIADO POR DEUS
UM HOMEM ENVIADO POR DEUSUM HOMEM ENVIADO POR DEUS
UM HOMEM ENVIADO POR DEUS
 
Neuheiten aus dem Naxos-Deutschland-Vertrieb am 11. Dezember 2015
Neuheiten aus dem Naxos-Deutschland-Vertrieb am 11. Dezember 2015Neuheiten aus dem Naxos-Deutschland-Vertrieb am 11. Dezember 2015
Neuheiten aus dem Naxos-Deutschland-Vertrieb am 11. Dezember 2015
 
Sexy Dessous und heiße Unterwäsche
Sexy Dessous und heiße UnterwäscheSexy Dessous und heiße Unterwäsche
Sexy Dessous und heiße Unterwäsche
 
Unidad deportiva belén
Unidad deportiva belénUnidad deportiva belén
Unidad deportiva belén
 
Interview Alexandre Jollien (deutsche Fassung)
Interview Alexandre Jollien (deutsche Fassung)Interview Alexandre Jollien (deutsche Fassung)
Interview Alexandre Jollien (deutsche Fassung)
 
Luiggi diaz
Luiggi diazLuiggi diaz
Luiggi diaz
 
WS1112 EET AI Master
WS1112 EET AI MasterWS1112 EET AI Master
WS1112 EET AI Master
 
Das Unternehmen Torwegge
Das Unternehmen TorweggeDas Unternehmen Torwegge
Das Unternehmen Torwegge
 
Clatronic KB 3537
Clatronic KB 3537Clatronic KB 3537
Clatronic KB 3537
 
Blu-ray, DVD- und CD-Neuheiten Februar 2014 Nr. 1 (Im Vertrieb der NAXOS Deut...
Blu-ray, DVD- und CD-Neuheiten Februar 2014 Nr. 1 (Im Vertrieb der NAXOS Deut...Blu-ray, DVD- und CD-Neuheiten Februar 2014 Nr. 1 (Im Vertrieb der NAXOS Deut...
Blu-ray, DVD- und CD-Neuheiten Februar 2014 Nr. 1 (Im Vertrieb der NAXOS Deut...
 
Calor y temperatura
Calor y temperaturaCalor y temperatura
Calor y temperatura
 
David Campbell: Writing Security
David Campbell: Writing SecurityDavid Campbell: Writing Security
David Campbell: Writing Security
 
Aviso convocatoria licitacion vigilancia
Aviso convocatoria licitacion vigilanciaAviso convocatoria licitacion vigilancia
Aviso convocatoria licitacion vigilancia
 
Oferta jovenes con futuro
Oferta jovenes con futuroOferta jovenes con futuro
Oferta jovenes con futuro
 
Centro commerciale-naturale-slide-
Centro commerciale-naturale-slide-Centro commerciale-naturale-slide-
Centro commerciale-naturale-slide-
 

Ähnlich wie Elasticsearch Cluster Management mit Marvel

Apache Solr vs. Elasticsearch - And The Winner Is...! Ein Vergleich der Shoot...
Apache Solr vs. Elasticsearch - And The Winner Is...! Ein Vergleich der Shoot...Apache Solr vs. Elasticsearch - And The Winner Is...! Ein Vergleich der Shoot...
Apache Solr vs. Elasticsearch - And The Winner Is...! Ein Vergleich der Shoot...SHI Search | Analytics | Big Data
 
Suche und Navigation in Online-Shops. Mit Apache Solr und Elasticsearch
Suche und Navigation in Online-Shops. Mit Apache Solr und ElasticsearchSuche und Navigation in Online-Shops. Mit Apache Solr und Elasticsearch
Suche und Navigation in Online-Shops. Mit Apache Solr und ElasticsearchSHI Search | Analytics | Big Data
 
Big Data Konnektivität
Big Data KonnektivitätBig Data Konnektivität
Big Data KonnektivitätTrivadis
 
Endeca Web Acquisition Toolkit - Integration verteilter Web-Anwendungen und a...
Endeca Web Acquisition Toolkit - Integration verteilter Web-Anwendungen und a...Endeca Web Acquisition Toolkit - Integration verteilter Web-Anwendungen und a...
Endeca Web Acquisition Toolkit - Integration verteilter Web-Anwendungen und a...Harald Erb
 
Basta 2016 - Test- und Releaseumgebungen in der Cloud
Basta 2016 - Test- und Releaseumgebungen in der CloudBasta 2016 - Test- und Releaseumgebungen in der Cloud
Basta 2016 - Test- und Releaseumgebungen in der CloudMarc Müller
 
Azure SQL Database vs. Azure SQL Data Warehouse
Azure SQL Database vs. Azure SQL Data WarehouseAzure SQL Database vs. Azure SQL Data Warehouse
Azure SQL Database vs. Azure SQL Data WarehousepmOne Analytics GmbH
 
Webinar - Sehr empfehlenswert: wie man aus Daten durch maschinelles Lernen We...
Webinar - Sehr empfehlenswert: wie man aus Daten durch maschinelles Lernen We...Webinar - Sehr empfehlenswert: wie man aus Daten durch maschinelles Lernen We...
Webinar - Sehr empfehlenswert: wie man aus Daten durch maschinelles Lernen We...Cloudera, Inc.
 
Die SOA Suite in der Amazon Cloud sicher betreiben
Die SOA Suite in der Amazon Cloud sicher betreiben Die SOA Suite in der Amazon Cloud sicher betreiben
Die SOA Suite in der Amazon Cloud sicher betreiben OPITZ CONSULTING Deutschland
 
OpenNebula - CeBIT 2013
OpenNebula - CeBIT 2013OpenNebula - CeBIT 2013
OpenNebula - CeBIT 2013NETWAYS
 
Agile Oracle database modeling and development - APEX Connect 2020
Agile Oracle database modeling and development - APEX Connect 2020Agile Oracle database modeling and development - APEX Connect 2020
Agile Oracle database modeling and development - APEX Connect 2020Torsten Kleiber
 
Hadoop Einführung @codecentric
Hadoop Einführung @codecentricHadoop Einführung @codecentric
Hadoop Einführung @codecentricimalik8088
 
A NoSQL Summer - The Year After
A NoSQL Summer - The Year AfterA NoSQL Summer - The Year After
A NoSQL Summer - The Year AfterMeMo News AG
 
Meet Magento - High performance magento
Meet Magento - High performance magentoMeet Magento - High performance magento
Meet Magento - High performance magentoAOE
 
Oracle Open World 2009 Review V1.6
Oracle Open World 2009 Review V1.6Oracle Open World 2009 Review V1.6
Oracle Open World 2009 Review V1.6Torsten Winterberg
 
skilllocation Foliensatz zu Microsoft Azure
skilllocation Foliensatz zu Microsoft Azureskilllocation Foliensatz zu Microsoft Azure
skilllocation Foliensatz zu Microsoft AzureCarola Pantenburg
 
Echtzeitanwendungen aus der Cloud - Partnervortrag vom AWS Summit
Echtzeitanwendungen aus der Cloud - Partnervortrag vom AWS SummitEchtzeitanwendungen aus der Cloud - Partnervortrag vom AWS Summit
Echtzeitanwendungen aus der Cloud - Partnervortrag vom AWS SummitAWS Germany
 
OpenNebula - LinuxTag 2013
OpenNebula - LinuxTag 2013OpenNebula - LinuxTag 2013
OpenNebula - LinuxTag 2013NETWAYS
 
Vorlesung - Cloud Infrastrukturen - Einleitung | anynines
Vorlesung - Cloud Infrastrukturen - Einleitung | anyninesVorlesung - Cloud Infrastrukturen - Einleitung | anynines
Vorlesung - Cloud Infrastrukturen - Einleitung | anyninesanynines GmbH
 
Neue Potentiale durch Recommendations erschliessen und Conversions steigern (...
Neue Potentiale durch Recommendations erschliessen und Conversions steigern (...Neue Potentiale durch Recommendations erschliessen und Conversions steigern (...
Neue Potentiale durch Recommendations erschliessen und Conversions steigern (...SHI Search | Analytics | Big Data
 

Ähnlich wie Elasticsearch Cluster Management mit Marvel (20)

Apache Solr vs. Elasticsearch - And The Winner Is...! Ein Vergleich der Shoot...
Apache Solr vs. Elasticsearch - And The Winner Is...! Ein Vergleich der Shoot...Apache Solr vs. Elasticsearch - And The Winner Is...! Ein Vergleich der Shoot...
Apache Solr vs. Elasticsearch - And The Winner Is...! Ein Vergleich der Shoot...
 
Suche und Navigation in Online-Shops. Mit Apache Solr und Elasticsearch
Suche und Navigation in Online-Shops. Mit Apache Solr und ElasticsearchSuche und Navigation in Online-Shops. Mit Apache Solr und Elasticsearch
Suche und Navigation in Online-Shops. Mit Apache Solr und Elasticsearch
 
Big Data Konnektivität
Big Data KonnektivitätBig Data Konnektivität
Big Data Konnektivität
 
Endeca Web Acquisition Toolkit - Integration verteilter Web-Anwendungen und a...
Endeca Web Acquisition Toolkit - Integration verteilter Web-Anwendungen und a...Endeca Web Acquisition Toolkit - Integration verteilter Web-Anwendungen und a...
Endeca Web Acquisition Toolkit - Integration verteilter Web-Anwendungen und a...
 
Basta 2016 - Test- und Releaseumgebungen in der Cloud
Basta 2016 - Test- und Releaseumgebungen in der CloudBasta 2016 - Test- und Releaseumgebungen in der Cloud
Basta 2016 - Test- und Releaseumgebungen in der Cloud
 
Warum sap hana sql data warehousing
Warum sap hana sql data warehousingWarum sap hana sql data warehousing
Warum sap hana sql data warehousing
 
Azure SQL Database vs. Azure SQL Data Warehouse
Azure SQL Database vs. Azure SQL Data WarehouseAzure SQL Database vs. Azure SQL Data Warehouse
Azure SQL Database vs. Azure SQL Data Warehouse
 
Webinar - Sehr empfehlenswert: wie man aus Daten durch maschinelles Lernen We...
Webinar - Sehr empfehlenswert: wie man aus Daten durch maschinelles Lernen We...Webinar - Sehr empfehlenswert: wie man aus Daten durch maschinelles Lernen We...
Webinar - Sehr empfehlenswert: wie man aus Daten durch maschinelles Lernen We...
 
Die SOA Suite in der Amazon Cloud sicher betreiben
Die SOA Suite in der Amazon Cloud sicher betreiben Die SOA Suite in der Amazon Cloud sicher betreiben
Die SOA Suite in der Amazon Cloud sicher betreiben
 
OpenNebula - CeBIT 2013
OpenNebula - CeBIT 2013OpenNebula - CeBIT 2013
OpenNebula - CeBIT 2013
 
Agile Oracle database modeling and development - APEX Connect 2020
Agile Oracle database modeling and development - APEX Connect 2020Agile Oracle database modeling and development - APEX Connect 2020
Agile Oracle database modeling and development - APEX Connect 2020
 
Hadoop Einführung @codecentric
Hadoop Einführung @codecentricHadoop Einführung @codecentric
Hadoop Einführung @codecentric
 
A NoSQL Summer - The Year After
A NoSQL Summer - The Year AfterA NoSQL Summer - The Year After
A NoSQL Summer - The Year After
 
Meet Magento - High performance magento
Meet Magento - High performance magentoMeet Magento - High performance magento
Meet Magento - High performance magento
 
Oracle Open World 2009 Review V1.6
Oracle Open World 2009 Review V1.6Oracle Open World 2009 Review V1.6
Oracle Open World 2009 Review V1.6
 
skilllocation Foliensatz zu Microsoft Azure
skilllocation Foliensatz zu Microsoft Azureskilllocation Foliensatz zu Microsoft Azure
skilllocation Foliensatz zu Microsoft Azure
 
Echtzeitanwendungen aus der Cloud - Partnervortrag vom AWS Summit
Echtzeitanwendungen aus der Cloud - Partnervortrag vom AWS SummitEchtzeitanwendungen aus der Cloud - Partnervortrag vom AWS Summit
Echtzeitanwendungen aus der Cloud - Partnervortrag vom AWS Summit
 
OpenNebula - LinuxTag 2013
OpenNebula - LinuxTag 2013OpenNebula - LinuxTag 2013
OpenNebula - LinuxTag 2013
 
Vorlesung - Cloud Infrastrukturen - Einleitung | anynines
Vorlesung - Cloud Infrastrukturen - Einleitung | anyninesVorlesung - Cloud Infrastrukturen - Einleitung | anynines
Vorlesung - Cloud Infrastrukturen - Einleitung | anynines
 
Neue Potentiale durch Recommendations erschliessen und Conversions steigern (...
Neue Potentiale durch Recommendations erschliessen und Conversions steigern (...Neue Potentiale durch Recommendations erschliessen und Conversions steigern (...
Neue Potentiale durch Recommendations erschliessen und Conversions steigern (...
 

Mehr von SHI Search | Analytics | Big Data

Mehr von SHI Search | Analytics | Big Data (10)

Buzzword Bingo E-Commerce
Buzzword Bingo E-CommerceBuzzword Bingo E-Commerce
Buzzword Bingo E-Commerce
 
E commerce-tag berlin-nichts_im_sortiment_gefunden
E commerce-tag berlin-nichts_im_sortiment_gefundenE commerce-tag berlin-nichts_im_sortiment_gefunden
E commerce-tag berlin-nichts_im_sortiment_gefunden
 
Mit Customer-Journey-Analytics und Recommendations neue Potenziale erschließen
Mit Customer-Journey-Analytics und Recommendations neue Potenziale erschließenMit Customer-Journey-Analytics und Recommendations neue Potenziale erschließen
Mit Customer-Journey-Analytics und Recommendations neue Potenziale erschließen
 
Apache Solr - die Moderne Open Source Technologie
Apache Solr - die Moderne Open Source TechnologieApache Solr - die Moderne Open Source Technologie
Apache Solr - die Moderne Open Source Technologie
 
Neue Kundenpotenziale durch Recommendations erschließen (Vortrag E-Commerce Tag)
Neue Kundenpotenziale durch Recommendations erschließen (Vortrag E-Commerce Tag)Neue Kundenpotenziale durch Recommendations erschließen (Vortrag E-Commerce Tag)
Neue Kundenpotenziale durch Recommendations erschließen (Vortrag E-Commerce Tag)
 
Custom Solr Tokenizer Flexible Tokenizer with JFlex
Custom Solr Tokenizer Flexible Tokenizer with JFlex Custom Solr Tokenizer Flexible Tokenizer with JFlex
Custom Solr Tokenizer Flexible Tokenizer with JFlex
 
Mehr Umsatz mit einer intelligenten Shop-Suche
Mehr Umsatz mit einer intelligenten Shop-SucheMehr Umsatz mit einer intelligenten Shop-Suche
Mehr Umsatz mit einer intelligenten Shop-Suche
 
Überblick über die Suchplattform LucidWorks Search 2.1
Überblick über die Suchplattform LucidWorks Search 2.1Überblick über die Suchplattform LucidWorks Search 2.1
Überblick über die Suchplattform LucidWorks Search 2.1
 
Relevantes schneller finden – mit-Lucene und Solr
Relevantes schneller finden – mit-Lucene und SolrRelevantes schneller finden – mit-Lucene und Solr
Relevantes schneller finden – mit-Lucene und Solr
 
Jax 2012 - Apache Solr as Enterprise Search Platform
Jax 2012 - Apache Solr as Enterprise Search PlatformJax 2012 - Apache Solr as Enterprise Search Platform
Jax 2012 - Apache Solr as Enterprise Search Platform
 

Elasticsearch Cluster Management mit Marvel

  • 1. ELASTICSEARCH CLUSTER MANAGEMENT MIT MARVEL Webinar am 13. März 2014 Technology Drives Business Apache Solr, Solr, Apache Lucene, Lucene and their logos are trademarks of the Apache Software Foundation. Elasticsearch, Kibana, Marvel, Logstash are trademarks of Elasticsearch BV, registered in the U.S. and in other countries.
  • 2. MARKUS KLOSE Expertise in Elasticsearch, Solr, Lucene, Fast ESP Certified Apache Solr Trainer Speaker, Blogger Author “Einführung in Apache Solr” Contributor @markus_klose
  • 3. UP-COMING EVENTS Webinar 03.04.2014 Analytics in Online-Shops Webinar 10.04.2014 Suche und Navigation in Online-Shops. Mit Elasticsearch und Solr Webinar 15.04.2014 Innovationen in Recommendationsystemen für eCommerce 1 2 3
  • 4. AGENDA Kurzvorstellung SHI Einführung in Elasticsearch Marvel SetUp Elasticsearch Marvel Dashboards & Metriken Demo Q & A
  • 5. Heute 2013 2011 SEIT 1994 Hersteller-unabhängiges Unternehmen. Lösungen rund um Suche, Navigation und Datenanalyse mit Fokus auf Open Source. Partnerschaft mit Partnerschaft mit 2000 Erste Projekte mit Open Source 1994 Unternehmensgründung und Entwicklung eines Produkts
  • 6. UNSERE MISSION Seit 1994 hersteller-unabhängiges Unternehmen für IT Consulting und Software Engineering. Wir bieten Lösungen rund um Semantic Search, Analytics und Big Data auf Basis etablierter Open-Source Software. Wir stellen Werkzeuge bereit, die durch optimale Nutzung der Technologie und Daten unsere Kunden beim Erreichen Ihrer Geschäftsziele unterstützen.
  • 7. WAS WIR TUN MIT SERVICES DURCH ANWENDUNG DES KNOW-HOWS REALISIEREN LÖSUNGEN, UM DATEN NUTZBAR ZU MACHEN! • Strategy Consulting • Technical Consulting • Architecture Review • Development Support • Team Enablement Through Workshops and Trainings • Technology Comparison • Tuning & Troubleshooting • Migration Services • Experts to Hire • Service Level Agreements • Software Architecture • Coding Services for Java, C++/C, .NET, PHP for multiple OSs. • Continuous Integration and Test Driven Development • Managing Software Project Lifecycle • Commerce Search • Intranet Portal Search • Website Search • Search Knowledge Management • Analytics • Social Media Monitoring UND ETABLIERTEN PRODUKTEN UND PARTNERN • Apache Solr/Lucene • Apache Mahout • Apache Hadoop, Pig, Hive • LucidWorks Search • LucidWorks Search Big Data
  • 8. IHR DRAHT ZU UNS SHI GmbH & Co. KG Curt-Frenzel-Str. 12 D - 86167 Augsburg info@shi-gmbh.com +49.821.74 82 633 - 0 @SHIEngineers Michael Marheineke Markus Klose Daniel Wrigley
  • 9. DAS IST MARVEL Cluster Management und Monitoring Tool Server/Index Statistiken Event Monitoring uvm. Basiert auf dem ELK Stack bringt zusätzliche Funktionalität mit Voraussetzung: min ES Version 0.90.9
  • 10. MARVEL = ++KIBANA mavel.cluster – Cluster Status auf einen Blick marvel.stats_table – Metriken auf einen Blick
  • 11. SETUP SIMPLE Marvel muss auf allen Nodes installiert werden ES Starten 1 bin/elasticsearch Installation Restart ES Aufruf 2 3 4 bin/plugin -i elasticsearch/marvel/latest http://localhost:9200/_plugin/marvel
  • 12. SETUP CLUSTER Marvel wird auf separaten Nodes installiert SetUp Monitoring Cluster Marvel Installation Konfiguration SetUp Search Cluster Marvel Installation Konfiguration 2 3 4 marvel.agent.enabled:false marvel.agent.exporter.es.hosts: [“HOST:9200“] 1
  • 13. DASHBOARD OVERVIEW Ideal für das Tagesgeschäft Cluster Status allg. Informationen Performance Overview Anzahl Dokumente, QPS Nodes Overview alle Nodes mit den wichtigsten Merkmalen Index Overview alle Indexe mit den wichtigsten Merkmalen
  • 14. DASHBOARD NODES Ideal für System Monitoring Hardware & Betriebssystem relevante Informationen Disk, CPU, JVM, Netzwerk Index relevanter Überblick POST, GET, Memory, Indexverhalten Elasticsearch relevante Metriken Thread Pool
  • 15. DASHBOARD INDEX Ideal für Performance Monitoring Request relevante Metriken Suche, Indexierung, Percolation Index relevante Metriken Anzahl Dokumente, Index Größe, Cache Management relevante Themen Refresh, Flush, Merge
  • 16. DARÜBER HINAUS Cluster Pulse – Ideal für Cluster Monitoring Node Restart Index Status uvm. Sense - Ideal für Developing Prototyping Such-Requests AdHoc Anfragen
  • 17. MARVEL ANPASSEN Ideal für Ihr Business Dashboards anpassen Panels löschen, verschieben & hinzufügen Look & Feel anpassen Eigene Dashboards erstellen Überblick über domainspezifische Themen Grenzen bei Metriken selbst definieren „Filtern“ durch Suche …
  • 18. DEMO
  • 19. Q & A
  • 20. KONTAKT SHI GmbH & Co. KG Curt-Frenzel-Str. 12 D - 86167 Augsburg info@shi-gmbh.com +49.821.74 82 633 - 0 @SHIEngineers Michael Marheineke Markus Klose Daniel Wrigley
  • 21. INFORMATIONEN SHI Blog: www.shi-gmbh.com/blog Elasticsearch Marvel: http://www.elasticsearch.com/marvel Elasticsearch Marvel Dokumentation http://www.elasticsearch.org/guide/en/marvel/current/ Download Elasticsearch: http://www.elasticsearch.org/overview/elkdownloads/ Einige Bilder wurden über iStockphoto.com bezogen.

Hinweis der Redaktion

  1. Fragen: Betreiben Sie aktives Monitoring Ihres Elasticsearch Clusters? (Ja/Nein) Welche Tools nutzen Sie dafür (Nagios/….)
  2. TODO
  3. Agenda erst so spät????
  4. Deutsche Folien?
  5. Wenn Interesse an Fortsetzungen bzw. bestimmten verwandten Themen besteht, können Sie uns gerne schreiben. Es ist durchaus möglich, dass es ein weiteres Webinar aus dieser Reihe gibt. Wir verfolgen Ideen von Zuhörern natürlich gerne weiter, denn dort wissen wir schon sicher von Interessenten. Wenn es Themen gibt, die eher technischer Natur sind und arg in die Tiefe gehen, kann es sein, dass "nur" ein Blog-Beitrag veröffentlicht wird.
  6. Das erste echte produkt Marvel speichert alles in einem eigenen INdex
  7. Ideal für daily business BILD – OUT of the BOX http://www.elasticsearch.org/webinars/elasticsearchmarvel/
  8. Ideal für hardware Monitoring BILD – OUT of the BOX http://www.elasticsearch.org/webinars/elasticsearchmarvel/
  9. 5:30 http://www.elasticsearch.org/webinars/elasticsearchmarvel/
  10. Ab minute 10 sense Ab min 15 cluster pulse http://www.elasticsearch.org/webinars/elasticsearchmarvel/ Ideal für prototyping BILD – OUT of the BOX Cluster pulse EVENTS
  11. TODO BILD Custom dashbord
  12. Wenn Interesse an Fortsetzungen bzw. bestimmten verwandten Themen besteht, können Sie uns gerne schreiben. Es ist durchaus möglich, dass es ein weiteres Webinar aus dieser Reihe gibt. Wir verfolgen Ideen von Zuhörern natürlich gerne weiter, denn dort wissen wir schon sicher von Interessenten. Wenn es Themen gibt, die eher technischer Natur sind und arg in die Tiefe gehen, kann es sein, dass "nur" ein Blog-Beitrag veröffentlicht wird.