Diese Präsentation wurde erfolgreich gemeldet.
Wir verwenden Ihre LinkedIn Profilangaben und Informationen zu Ihren Aktivitäten, um Anzeigen zu personalisieren und Ihnen relevantere Inhalte anzuzeigen. Sie können Ihre Anzeigeneinstellungen jederzeit ändern.
OpenStoragePod
  “Big Data” mit
  kleinem Budget
Tim Lossen
http://tim.lossen.de
Herausforderung

• Daten, Daten ... immer mehr Daten!
• wie speichern ??
  • online
  • offline (= Archiv)
Lösung A

• “Enterprise” Storage
  • proprietäre Hardware (teuer)
  • Software-Lizenzen (teuer)
  • plus Wartung, Support,...
Lösung B

• Storage as a Service
  • Beispiel: Amazon S3
  • keine Hardware
  • Kosten proportional zu
    Datenvolumen
Lösung C


• Do It Yourself
  • “Commodity” Hardware
  • Open Source Software
Fallstudie

• Soundcloud ⎯ “Flickr für Musik”
  • Startup aus Berlin
• Januar 2010: 90 Terabyte (auf S3)
• Januar 2011: 90...
OpenStoragePod
Ziele

• möglichst geringe “Total Cost of
  Ownership” (TCO)
  • Joule per Gigabyte minimieren!
• auf mehrere Petabyte ska...
Design
Inspiration

• Backblaze Storage Pod
 • 4 U, 45 Festplatten (3.5 Zoll)
 • bis 90 Terabyte
 • optimiert für Backups
http://bit.ly/s0Emg
Festplatten-Formate

• 3.5 Zoll
  • Seagate “Barracuda LP”, 2 TB
• 2.5 Zoll
  • WD “Scorpio Blue”, 1 TB
3.5 Zoll       2.5 Zoll

   Preis        80 Euro

Read / Write    3.4 Watt

    Idle       2.8 Watt

  Gewicht      330 Gr...
3.5 Zoll       2.5 Zoll

   Preis        80 Euro        180 Euro

Read / Write    3.4 Watt

    Idle       2.8 Watt

  Gew...
3.5 Zoll       2.5 Zoll

   Preis        80 Euro        180 Euro

Read / Write    3.4 Watt       2.5 Watt

    Idle       ...
3.5 Zoll       2.5 Zoll

   Preis        80 Euro        180 Euro

Read / Write    3.4 Watt       2.5 Watt

    Idle       ...
3.5 Zoll       2.5 Zoll

   Preis        80 Euro        180 Euro

Read / Write    3.4 Watt       2.5 Watt

    Idle       ...
3.5 Zoll       2.5 Zoll

   Preis        80 Euro        180 Euro

Read / Write    3.4 Watt       2.5 Watt

    Idle       ...
Laptop-Festplatten

• Massenprodukt ⎯ relativ günstig
• hohe Speicherdichte
• geringer Energieverbrauch
• kleine “Failure ...
Model D
Storage Node D120

• Mini-ITX Mainboard
• 20 Festplatten (2.5 Zoll) ⎯ 20 TB
• 5000 cm ⎯ 5 Liter
• 100 Watt, 12 Volt Gleich...
Storage Pod D620
• 4 Rack Units ⎯ 18 cm hoch
• 6 Storage Nodes ⎯ 120 Terabyte
 • 2 redundante Gigabit Switches
• 600 Watt,...
Storage Rack D6020

• 10 Pods ⎯ 60 Nodes
• 1.2 Petabyte
• 6 Kilowatt
• 2 redundante Switches
Status

• Prototyp(en) existieren
• Custom 5-Port SATA Backplane
  • Hersteller: Chyang Fun, Taiwan
  • Angebot: 1000 Stüc...
B105 ⎯ “The Cube”

• 12 x 12 x 12 cm
• 5 Festplatten (2.5 Zoll)
• 1 Sheeva Mainboard
• 20 Watt, 5 Volt
Sheeva Plug
Diskussion
Links
Projekt
 http://openstoragepod.org
Slides
 http://slideshare.net/tim.lossen.de
OpenStoragePod -- "Big Data" mit kleinem Budget
OpenStoragePod -- "Big Data" mit kleinem Budget
OpenStoragePod -- "Big Data" mit kleinem Budget
Nächste SlideShare
Wird geladen in …5
×

OpenStoragePod -- "Big Data" mit kleinem Budget

1.401 Aufrufe

Veröffentlicht am

slides for my presentation at

Veröffentlicht in: Technologie
  • Als Erste(r) kommentieren

OpenStoragePod -- "Big Data" mit kleinem Budget

  1. 1. OpenStoragePod “Big Data” mit kleinem Budget
  2. 2. Tim Lossen http://tim.lossen.de
  3. 3. Herausforderung • Daten, Daten ... immer mehr Daten! • wie speichern ?? • online • offline (= Archiv)
  4. 4. Lösung A • “Enterprise” Storage • proprietäre Hardware (teuer) • Software-Lizenzen (teuer) • plus Wartung, Support, Upgrades ...
  5. 5. Lösung B • Storage as a Service • Beispiel: Amazon S3 • keine Hardware • Kosten proportional zu Datenvolumen
  6. 6. Lösung C • Do It Yourself • “Commodity” Hardware • Open Source Software
  7. 7. Fallstudie • Soundcloud ⎯ “Flickr für Musik” • Startup aus Berlin • Januar 2010: 90 Terabyte (auf S3) • Januar 2011: 900 Terabyte ??
  8. 8. OpenStoragePod
  9. 9. Ziele • möglichst geringe “Total Cost of Ownership” (TCO) • Joule per Gigabyte minimieren! • auf mehrere Petabyte skalierbar • 100% Open Source
  10. 10. Design
  11. 11. Inspiration • Backblaze Storage Pod • 4 U, 45 Festplatten (3.5 Zoll) • bis 90 Terabyte • optimiert für Backups
  12. 12. http://bit.ly/s0Emg
  13. 13. Festplatten-Formate • 3.5 Zoll • Seagate “Barracuda LP”, 2 TB • 2.5 Zoll • WD “Scorpio Blue”, 1 TB
  14. 14. 3.5 Zoll 2.5 Zoll Preis 80 Euro Read / Write 3.4 Watt Idle 2.8 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
  15. 15. 3.5 Zoll 2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt Idle 2.8 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
  16. 16. 3.5 Zoll 2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
  17. 17. 3.5 Zoll 2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt 0.85 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
  18. 18. 3.5 Zoll 2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt 0.85 Watt Gewicht 330 Gramm 117 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
  19. 19. 3.5 Zoll 2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt 0.85 Watt Gewicht 330 Gramm 117 Gramm Volumen 195 cm³ 88 cm³ (jeweils pro Terabyte)
  20. 20. Laptop-Festplatten • Massenprodukt ⎯ relativ günstig • hohe Speicherdichte • geringer Energieverbrauch • kleine “Failure Units”
  21. 21. Model D
  22. 22. Storage Node D120 • Mini-ITX Mainboard • 20 Festplatten (2.5 Zoll) ⎯ 20 TB • 5000 cm ⎯ 5 Liter • 100 Watt, 12 Volt Gleichstrom
  23. 23. Storage Pod D620 • 4 Rack Units ⎯ 18 cm hoch • 6 Storage Nodes ⎯ 120 Terabyte • 2 redundante Gigabit Switches • 600 Watt, 220 Volt Wechselstrom • 2 redundante Netzteile
  24. 24. Storage Rack D6020 • 10 Pods ⎯ 60 Nodes • 1.2 Petabyte • 6 Kilowatt • 2 redundante Switches
  25. 25. Status • Prototyp(en) existieren • Custom 5-Port SATA Backplane • Hersteller: Chyang Fun, Taiwan • Angebot: 1000 Stück für $50000
  26. 26. B105 ⎯ “The Cube” • 12 x 12 x 12 cm • 5 Festplatten (2.5 Zoll) • 1 Sheeva Mainboard • 20 Watt, 5 Volt
  27. 27. Sheeva Plug
  28. 28. Diskussion
  29. 29. Links Projekt http://openstoragepod.org Slides http://slideshare.net/tim.lossen.de

×