Diese Präsentation wurde erfolgreich gemeldet.
Wir verwenden Ihre LinkedIn Profilangaben und Informationen zu Ihren Aktivitäten, um Anzeigen zu personalisieren und Ihnen relevantere Inhalte anzuzeigen. Sie können Ihre Anzeigeneinstellungen jederzeit ändern.

Realtime log analytics with elastic stack (source included)

617 Aufrufe

Veröffentlicht am

- install elastic stack on aws ec2 instance
- collect & preprocess log data with Beat, Logstash
- send data to Elasticsearch
- build Kibana dashboard

Veröffentlicht in: Daten & Analysen
  • Hello! Get Your Professional Job-Winning Resume Here - Check our website! https://vk.cc/818RFv
       Antworten 
    Sind Sie sicher, dass Sie …  Ja  Nein
    Ihre Nachricht erscheint hier

Realtime log analytics with elastic stack (source included)

  1. 1. Data Science (Big Data) 2017.08.17 Gee Yeol Nahm Realtime Log Analytics with Elastic Stack
  2. 2. Things not covered • AWS Elasticsearch Service • Elasticsearch architecture optimization • Elasticsearch as a search engine source : L//P source : (Donald) Trung Manh Nguyen
  3. 3. Things covered • Install Elastic Stack on AWS ec2 • Collect (+preprocess) log data using Filebeat & Logstash • Send log data to Elasticsearch • Build Kibana dashboard
  4. 4. System Architecture Elastic Stack
  5. 5. Basic Concepts (Notation) Elasticsearch RDBMS Cluster : a collection of nodes Node : a single server Index Database Type Table Document Row Field Column Mapping Schema
  6. 6. Let’s get started!
  7. 7. Please refer to the following link for step-by-step guide LIVE CODING !!! Step-by-Step https://goo.gl/jdhBf1
  8. 8. Exercise Covered during live coding session higee.io/221074551633 higee.io/221059817963 higee.io/221063081083
  9. 9. Kibana Sample Kibana Query https://goo.gl/JLJ3Vu (old version) https://goo.gl/PHX8Pf (new version)
  10. 10. Feedback & Questions? Source : cordlife gshock94@gmail.com

×