OpenStoragePod
  “Big Data” mit
  kleinem Budget
Tim Lossen
http://tim.lossen.de
Herausforderung

• Daten, Daten ... immer mehr Daten!
• wie speichern ??
  • online
  • offline (= Archiv)
Lösung A

• “Enterprise” Storage
  • proprietäre Hardware (teuer)
  • Software-Lizenzen (teuer)
  • plus Wartung, Support,...
Lösung B

• Storage as a Service
  • Beispiel: Amazon S3
  • keine Hardware
  • Kosten proportional zu
    Datenvolumen
Lösung C


• Do It Yourself
  • “Commodity” Hardware
  • Open Source Software
Fallstudie

• Soundcloud ⎯ “Flickr für Musik”
  • Startup aus Berlin
• Januar 2010: 90 Terabyte (auf S3)
• Januar 2011: 90...
OpenStoragePod
Ziele

• möglichst geringe “Total Cost of
  Ownership” (TCO)
  • Joule per Gigabyte minimieren!
• auf mehrere Petabyte ska...
Design
Inspiration

• Backblaze Storage Pod
 • 4 U, 45 Festplatten (3.5 Zoll)
 • bis 90 Terabyte
 • optimiert für Backups
http://bit.ly/s0Emg
Festplatten-Formate

• 3.5 Zoll
  • Seagate “Barracuda LP”, 2 TB
• 2.5 Zoll
  • WD “Scorpio Blue”, 1 TB
3.5 Zoll       2.5 Zoll

   Preis        80 Euro

Read / Write    3.4 Watt

    Idle       2.8 Watt

  Gewicht      330 Gr...
3.5 Zoll       2.5 Zoll

   Preis        80 Euro        180 Euro

Read / Write    3.4 Watt

    Idle       2.8 Watt

  Gew...
3.5 Zoll       2.5 Zoll

   Preis        80 Euro        180 Euro

Read / Write    3.4 Watt       2.5 Watt

    Idle       ...
3.5 Zoll       2.5 Zoll

   Preis        80 Euro        180 Euro

Read / Write    3.4 Watt       2.5 Watt

    Idle       ...
3.5 Zoll       2.5 Zoll

   Preis        80 Euro        180 Euro

Read / Write    3.4 Watt       2.5 Watt

    Idle       ...
3.5 Zoll       2.5 Zoll

   Preis        80 Euro        180 Euro

Read / Write    3.4 Watt       2.5 Watt

    Idle       ...
Laptop-Festplatten

• Massenprodukt ⎯ relativ günstig
• hohe Speicherdichte
• geringer Energieverbrauch
• kleine “Failure ...
Model D
Storage Node D120

• Mini-ITX Mainboard
• 20 Festplatten (2.5 Zoll) ⎯ 20 TB
• 5000 cm ⎯ 5 Liter
• 100 Watt, 12 Volt Gleich...
Storage Pod D620
• 4 Rack Units ⎯ 18 cm hoch
• 6 Storage Nodes ⎯ 120 Terabyte
 • 2 redundante Gigabit Switches
• 600 Watt,...
Storage Rack D6020

• 10 Pods ⎯ 60 Nodes
• 1.2 Petabyte
• 6 Kilowatt
• 2 redundante Switches
Status

• Prototyp(en) existieren
• Custom 5-Port SATA Backplane
  • Hersteller: Chyang Fun, Taiwan
  • Angebot: 1000 Stüc...
B105 ⎯ “The Cube”

• 12 x 12 x 12 cm
• 5 Festplatten (2.5 Zoll)
• 1 Sheeva Mainboard
• 20 Watt, 5 Volt
Sheeva Plug
Diskussion
Links
Projekt
 http://openstoragepod.org
Slides
 http://slideshare.net/tim.lossen.de
OpenStoragePod -- "Big Data" mit kleinem Budget
OpenStoragePod -- "Big Data" mit kleinem Budget
OpenStoragePod -- "Big Data" mit kleinem Budget
Nächste SlideShare
Wird geladen in …5
×

OpenStoragePod -- "Big Data" mit kleinem Budget

1.346 Aufrufe

Veröffentlicht am

slides for my presentation at

Veröffentlicht in: Technologie
0 Kommentare
1 Gefällt mir
Statistik
Notizen
  • Als Erste(r) kommentieren

Keine Downloads
Aufrufe
Aufrufe insgesamt
1.346
Auf SlideShare
0
Aus Einbettungen
0
Anzahl an Einbettungen
19
Aktionen
Geteilt
0
Downloads
8
Kommentare
0
Gefällt mir
1
Einbettungen 0
Keine Einbettungen

Keine Notizen für die Folie
































  • OpenStoragePod -- "Big Data" mit kleinem Budget

    1. 1. OpenStoragePod “Big Data” mit kleinem Budget
    2. 2. Tim Lossen http://tim.lossen.de
    3. 3. Herausforderung • Daten, Daten ... immer mehr Daten! • wie speichern ?? • online • offline (= Archiv)
    4. 4. Lösung A • “Enterprise” Storage • proprietäre Hardware (teuer) • Software-Lizenzen (teuer) • plus Wartung, Support, Upgrades ...
    5. 5. Lösung B • Storage as a Service • Beispiel: Amazon S3 • keine Hardware • Kosten proportional zu Datenvolumen
    6. 6. Lösung C • Do It Yourself • “Commodity” Hardware • Open Source Software
    7. 7. Fallstudie • Soundcloud ⎯ “Flickr für Musik” • Startup aus Berlin • Januar 2010: 90 Terabyte (auf S3) • Januar 2011: 900 Terabyte ??
    8. 8. OpenStoragePod
    9. 9. Ziele • möglichst geringe “Total Cost of Ownership” (TCO) • Joule per Gigabyte minimieren! • auf mehrere Petabyte skalierbar • 100% Open Source
    10. 10. Design
    11. 11. Inspiration • Backblaze Storage Pod • 4 U, 45 Festplatten (3.5 Zoll) • bis 90 Terabyte • optimiert für Backups
    12. 12. http://bit.ly/s0Emg
    13. 13. Festplatten-Formate • 3.5 Zoll • Seagate “Barracuda LP”, 2 TB • 2.5 Zoll • WD “Scorpio Blue”, 1 TB
    14. 14. 3.5 Zoll 2.5 Zoll Preis 80 Euro Read / Write 3.4 Watt Idle 2.8 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
    15. 15. 3.5 Zoll 2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt Idle 2.8 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
    16. 16. 3.5 Zoll 2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
    17. 17. 3.5 Zoll 2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt 0.85 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
    18. 18. 3.5 Zoll 2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt 0.85 Watt Gewicht 330 Gramm 117 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
    19. 19. 3.5 Zoll 2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt 0.85 Watt Gewicht 330 Gramm 117 Gramm Volumen 195 cm³ 88 cm³ (jeweils pro Terabyte)
    20. 20. Laptop-Festplatten • Massenprodukt ⎯ relativ günstig • hohe Speicherdichte • geringer Energieverbrauch • kleine “Failure Units”
    21. 21. Model D
    22. 22. Storage Node D120 • Mini-ITX Mainboard • 20 Festplatten (2.5 Zoll) ⎯ 20 TB • 5000 cm ⎯ 5 Liter • 100 Watt, 12 Volt Gleichstrom
    23. 23. Storage Pod D620 • 4 Rack Units ⎯ 18 cm hoch • 6 Storage Nodes ⎯ 120 Terabyte • 2 redundante Gigabit Switches • 600 Watt, 220 Volt Wechselstrom • 2 redundante Netzteile
    24. 24. Storage Rack D6020 • 10 Pods ⎯ 60 Nodes • 1.2 Petabyte • 6 Kilowatt • 2 redundante Switches
    25. 25. Status • Prototyp(en) existieren • Custom 5-Port SATA Backplane • Hersteller: Chyang Fun, Taiwan • Angebot: 1000 Stück für $50000
    26. 26. B105 ⎯ “The Cube” • 12 x 12 x 12 cm • 5 Festplatten (2.5 Zoll) • 1 Sheeva Mainboard • 20 Watt, 5 Volt
    27. 27. Sheeva Plug
    28. 28. Diskussion
    29. 29. Links Projekt http://openstoragepod.org Slides http://slideshare.net/tim.lossen.de

    ×