Soumettre la recherche
Mettre en ligne
OpenStoragePod -- "Big Data" mit kleinem Budget
•
Télécharger en tant que KEY, PDF
•
1 j'aime
•
730 vues
Tim Lossen
Suivre
slides for my presentation at
Lire moins
Lire la suite
Technologie
Signaler
Partager
Signaler
Partager
1 sur 32
Télécharger maintenant
Recommandé
Informationsweiterverwendungsgesetz - Usage of Public Sector Information
Informationsweiterverwendungsgesetz - Usage of Public Sector Information
Ellen Euler
Discover Arbonne 2017
Discover Arbonne 2017
Georgina Lloyd
Presentatie algemene ledenvergadering Houd Laren Mooi
Presentatie algemene ledenvergadering Houd Laren Mooi
Jonathan Bosch
Micro Communities
Micro Communities
Kupferwerk GmbH
museumsexposee_6_web
museumsexposee_6_web
Karin Hutter
wissensarbeit20_lindner_20100205
wissensarbeit20_lindner_20100205
Lindner Martin
Vorstellung cocktailberater.de
Vorstellung cocktailberater.de
Thomas Bachmann
DOM_OHJELMA
DOM_OHJELMA
Teija Aro (nee Jylhänkoski)
Recommandé
Informationsweiterverwendungsgesetz - Usage of Public Sector Information
Informationsweiterverwendungsgesetz - Usage of Public Sector Information
Ellen Euler
Discover Arbonne 2017
Discover Arbonne 2017
Georgina Lloyd
Presentatie algemene ledenvergadering Houd Laren Mooi
Presentatie algemene ledenvergadering Houd Laren Mooi
Jonathan Bosch
Micro Communities
Micro Communities
Kupferwerk GmbH
museumsexposee_6_web
museumsexposee_6_web
Karin Hutter
wissensarbeit20_lindner_20100205
wissensarbeit20_lindner_20100205
Lindner Martin
Vorstellung cocktailberater.de
Vorstellung cocktailberater.de
Thomas Bachmann
DOM_OHJELMA
DOM_OHJELMA
Teija Aro (nee Jylhänkoski)
SAP BASIS
SAP BASIS
Nonhlanhla Masikane
Winter
Winter
Ximenavc1
Maic Beher – IT-Tage 2015 – MS SQL Server – Security und Verschlüsselungsmech...
Maic Beher – IT-Tage 2015 – MS SQL Server – Security und Verschlüsselungsmech...
Informatik Aktuell
UrbanSeedsKitchen_Doc
UrbanSeedsKitchen_Doc
Justin Dickinson
eLearning2.0_01
eLearning2.0_01
7grad
mikroinformation: Überleben & Lernen im Digitalen Klimawandel
mikroinformation: Überleben & Lernen im Digitalen Klimawandel
Lindner Martin
Wissmuth hilfe blog1_final
Wissmuth hilfe blog1_final
Lindner Martin
Qualitätsbeauftragter (QMB)
Qualitätsbeauftragter (QMB)
Norbert Helmke
Trends für Schulen
Trends für Schulen
John van Dongen
Tamer C.V Attachements .
Tamer C.V Attachements .
Tamer Sheta
eksamensbevis kirstine schlawitz
eksamensbevis kirstine schlawitz
Kirstine Schlawitz
Allwin Vergütungssystem
Allwin Vergütungssystem
allwin Vergütungssysteme
Ferenc Mészáros CV_Lebenslauf
Ferenc Mészáros CV_Lebenslauf
Meszaros Ferenc
Doktorandenausbildung zwischen Selbstorganisation und Vernetzung: zur Bedeutu...
Doktorandenausbildung zwischen Selbstorganisation und Vernetzung: zur Bedeutu...
Mandy Rohs
TechTalkThursday 27.10.2016: upd89.org - Orchestrierung von Security-Updates ...
TechTalkThursday 27.10.2016: upd89.org - Orchestrierung von Security-Updates ...
nine
Apocalypse Later
Apocalypse Later
Tim Lossen
Embracing Failure
Embracing Failure
Tim Lossen
Embracing Failure
Embracing Failure
Tim Lossen
Enemy of the State?
Enemy of the State?
Tim Lossen
Beyond Devops
Beyond Devops
Tim Lossen
All Your Core Are Belong To Us
All Your Core Are Belong To Us
Tim Lossen
Podularity FTW!
Podularity FTW!
Tim Lossen
Contenu connexe
En vedette
SAP BASIS
SAP BASIS
Nonhlanhla Masikane
Winter
Winter
Ximenavc1
Maic Beher – IT-Tage 2015 – MS SQL Server – Security und Verschlüsselungsmech...
Maic Beher – IT-Tage 2015 – MS SQL Server – Security und Verschlüsselungsmech...
Informatik Aktuell
UrbanSeedsKitchen_Doc
UrbanSeedsKitchen_Doc
Justin Dickinson
eLearning2.0_01
eLearning2.0_01
7grad
mikroinformation: Überleben & Lernen im Digitalen Klimawandel
mikroinformation: Überleben & Lernen im Digitalen Klimawandel
Lindner Martin
Wissmuth hilfe blog1_final
Wissmuth hilfe blog1_final
Lindner Martin
Qualitätsbeauftragter (QMB)
Qualitätsbeauftragter (QMB)
Norbert Helmke
Trends für Schulen
Trends für Schulen
John van Dongen
Tamer C.V Attachements .
Tamer C.V Attachements .
Tamer Sheta
eksamensbevis kirstine schlawitz
eksamensbevis kirstine schlawitz
Kirstine Schlawitz
Allwin Vergütungssystem
Allwin Vergütungssystem
allwin Vergütungssysteme
Ferenc Mészáros CV_Lebenslauf
Ferenc Mészáros CV_Lebenslauf
Meszaros Ferenc
Doktorandenausbildung zwischen Selbstorganisation und Vernetzung: zur Bedeutu...
Doktorandenausbildung zwischen Selbstorganisation und Vernetzung: zur Bedeutu...
Mandy Rohs
TechTalkThursday 27.10.2016: upd89.org - Orchestrierung von Security-Updates ...
TechTalkThursday 27.10.2016: upd89.org - Orchestrierung von Security-Updates ...
nine
En vedette
(15)
SAP BASIS
SAP BASIS
Winter
Winter
Maic Beher – IT-Tage 2015 – MS SQL Server – Security und Verschlüsselungsmech...
Maic Beher – IT-Tage 2015 – MS SQL Server – Security und Verschlüsselungsmech...
UrbanSeedsKitchen_Doc
UrbanSeedsKitchen_Doc
eLearning2.0_01
eLearning2.0_01
mikroinformation: Überleben & Lernen im Digitalen Klimawandel
mikroinformation: Überleben & Lernen im Digitalen Klimawandel
Wissmuth hilfe blog1_final
Wissmuth hilfe blog1_final
Qualitätsbeauftragter (QMB)
Qualitätsbeauftragter (QMB)
Trends für Schulen
Trends für Schulen
Tamer C.V Attachements .
Tamer C.V Attachements .
eksamensbevis kirstine schlawitz
eksamensbevis kirstine schlawitz
Allwin Vergütungssystem
Allwin Vergütungssystem
Ferenc Mészáros CV_Lebenslauf
Ferenc Mészáros CV_Lebenslauf
Doktorandenausbildung zwischen Selbstorganisation und Vernetzung: zur Bedeutu...
Doktorandenausbildung zwischen Selbstorganisation und Vernetzung: zur Bedeutu...
TechTalkThursday 27.10.2016: upd89.org - Orchestrierung von Security-Updates ...
TechTalkThursday 27.10.2016: upd89.org - Orchestrierung von Security-Updates ...
Plus de Tim Lossen
Apocalypse Later
Apocalypse Later
Tim Lossen
Embracing Failure
Embracing Failure
Tim Lossen
Embracing Failure
Embracing Failure
Tim Lossen
Enemy of the State?
Enemy of the State?
Tim Lossen
Beyond Devops
Beyond Devops
Tim Lossen
All Your Core Are Belong To Us
All Your Core Are Belong To Us
Tim Lossen
Podularity FTW!
Podularity FTW!
Tim Lossen
Cubic Foot Gardening
Cubic Foot Gardening
Tim Lossen
Dashboard Mania
Dashboard Mania
Tim Lossen
Event-Stream Processing with Kafka
Event-Stream Processing with Kafka
Tim Lossen
Into the Void
Into the Void
Tim Lossen
Treasure Island -- Concurrency in JRuby
Treasure Island -- Concurrency in JRuby
Tim Lossen
Dashboard Mania
Dashboard Mania
Tim Lossen
JRuby vs. Rubinius
JRuby vs. Rubinius
Tim Lossen
Redis to the Rescue?
Redis to the Rescue?
Tim Lossen
Redis to the Rescue?
Redis to the Rescue?
Tim Lossen
The Smallest Cluster in the World
The Smallest Cluster in the World
Tim Lossen
Announcing Euruko 2011
Announcing Euruko 2011
Tim Lossen
Memory: The New Disk
Memory: The New Disk
Tim Lossen
Key-Value-Stores -- The Key to Scaling?
Key-Value-Stores -- The Key to Scaling?
Tim Lossen
Plus de Tim Lossen
(20)
Apocalypse Later
Apocalypse Later
Embracing Failure
Embracing Failure
Embracing Failure
Embracing Failure
Enemy of the State?
Enemy of the State?
Beyond Devops
Beyond Devops
All Your Core Are Belong To Us
All Your Core Are Belong To Us
Podularity FTW!
Podularity FTW!
Cubic Foot Gardening
Cubic Foot Gardening
Dashboard Mania
Dashboard Mania
Event-Stream Processing with Kafka
Event-Stream Processing with Kafka
Into the Void
Into the Void
Treasure Island -- Concurrency in JRuby
Treasure Island -- Concurrency in JRuby
Dashboard Mania
Dashboard Mania
JRuby vs. Rubinius
JRuby vs. Rubinius
Redis to the Rescue?
Redis to the Rescue?
Redis to the Rescue?
Redis to the Rescue?
The Smallest Cluster in the World
The Smallest Cluster in the World
Announcing Euruko 2011
Announcing Euruko 2011
Memory: The New Disk
Memory: The New Disk
Key-Value-Stores -- The Key to Scaling?
Key-Value-Stores -- The Key to Scaling?
OpenStoragePod -- "Big Data" mit kleinem Budget
1.
OpenStoragePod “Big
Data” mit kleinem Budget
2.
Tim Lossen http://tim.lossen.de
3.
Herausforderung • Daten, Daten
... immer mehr Daten! • wie speichern ?? • online • offline (= Archiv)
4.
Lösung A • “Enterprise”
Storage • proprietäre Hardware (teuer) • Software-Lizenzen (teuer) • plus Wartung, Support, Upgrades ...
5.
Lösung B • Storage
as a Service • Beispiel: Amazon S3 • keine Hardware • Kosten proportional zu Datenvolumen
6.
Lösung C • Do
It Yourself • “Commodity” Hardware • Open Source Software
7.
Fallstudie • Soundcloud ⎯
“Flickr für Musik” • Startup aus Berlin • Januar 2010: 90 Terabyte (auf S3) • Januar 2011: 900 Terabyte ??
8.
OpenStoragePod
9.
Ziele • möglichst geringe
“Total Cost of Ownership” (TCO) • Joule per Gigabyte minimieren! • auf mehrere Petabyte skalierbar • 100% Open Source
10.
Design
11.
Inspiration • Backblaze Storage
Pod • 4 U, 45 Festplatten (3.5 Zoll) • bis 90 Terabyte • optimiert für Backups
12.
http://bit.ly/s0Emg
13.
14.
Festplatten-Formate • 3.5 Zoll
• Seagate “Barracuda LP”, 2 TB • 2.5 Zoll • WD “Scorpio Blue”, 1 TB
15.
3.5 Zoll
2.5 Zoll Preis 80 Euro Read / Write 3.4 Watt Idle 2.8 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
16.
3.5 Zoll
2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt Idle 2.8 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
17.
3.5 Zoll
2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
18.
3.5 Zoll
2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt 0.85 Watt Gewicht 330 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
19.
3.5 Zoll
2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt 0.85 Watt Gewicht 330 Gramm 117 Gramm Volumen 195 cm³ (jeweils pro Terabyte)
20.
3.5 Zoll
2.5 Zoll Preis 80 Euro 180 Euro Read / Write 3.4 Watt 2.5 Watt Idle 2.8 Watt 0.85 Watt Gewicht 330 Gramm 117 Gramm Volumen 195 cm³ 88 cm³ (jeweils pro Terabyte)
21.
Laptop-Festplatten • Massenprodukt ⎯
relativ günstig • hohe Speicherdichte • geringer Energieverbrauch • kleine “Failure Units”
22.
Model D
23.
Storage Node D120 •
Mini-ITX Mainboard • 20 Festplatten (2.5 Zoll) ⎯ 20 TB • 5000 cm ⎯ 5 Liter • 100 Watt, 12 Volt Gleichstrom
24.
25.
Storage Pod D620 •
4 Rack Units ⎯ 18 cm hoch • 6 Storage Nodes ⎯ 120 Terabyte • 2 redundante Gigabit Switches • 600 Watt, 220 Volt Wechselstrom • 2 redundante Netzteile
26.
27.
Storage Rack D6020 •
10 Pods ⎯ 60 Nodes • 1.2 Petabyte • 6 Kilowatt • 2 redundante Switches
28.
Status • Prototyp(en) existieren •
Custom 5-Port SATA Backplane • Hersteller: Chyang Fun, Taiwan • Angebot: 1000 Stück für $50000
29.
B105 ⎯ “The
Cube” • 12 x 12 x 12 cm • 5 Festplatten (2.5 Zoll) • 1 Sheeva Mainboard • 20 Watt, 5 Volt
30.
Sheeva Plug
31.
Diskussion
32.
Links Projekt http://openstoragepod.org Slides http://slideshare.net/tim.lossen.de
Notes de l'éditeur
Télécharger maintenant