SUSE Enterprise Storage - Thomas
Transcription
SUSE Enterprise Storage - Thomas
Webcast vom 25.02.2016 Software Defined Storage für den Mittelstand – machen Sie es doch wie Google, Amazon und Co. Software Defined Storage für den Mittelstand - machen Sie es doch wie Google, Amazon und Co. Michael Stanscheck Storage Sales Executive Central Europe [email protected] Follow me: @michastan Agenda Einführung in Software Defined Storage Vorstellung SUSE Enterprise Storage Features und Roadmap Ökonomische Vorteile Technik 2 Agenda Einführung in Software Defined Storage Vorstellung SUSE Enterprise Storage Features und Roadmap Ökonomische Vorteile Technik 3 Warum günstiger Speicher für Ihr Unternehmen doppelt wichtig ist Alte Familienbilder sind oft erst interessant, wenn man selbst ein gewisses Alter erreicht... Source : IT Brand Pulse The Epic Migration to Software Defined Storage Quelle: http://www.wirtschaftswunder-museum.de 4 Warum günstiger Speicher für Ihr Unternehmen doppelt wichtig ist Bestimmte Firmendaten können auch erst nach einer gewissen Zeit interessant sein... Source : IT Brand Pulse The Epic Migration to Software Defined Storage 5 Datenwachstum durch Industrie 4.0 Predictive Planning: • Sensoren liefern Echtzeitinformationen an zentrale Systeme • Ziel: Wann in den nächsten Wochen (Tag, Stunde, Minute) fällt mein System aus Problem: Speichertechnologie war bisher oft teurer als der Mehrwert SUSE Kunde aus dem Mittelstand: Wir haben 400 Maschinen, 5 Sensoren pro Maschine, jeder Sensor liefert alle 2 Sekunden 5Kb Daten 400 x 5 x 5Kb = 9,7MB alle 2 Sekunden Pro Tag ca. 421 GB Pro Jahr über 150 TB Datenwachstum 6 Datenwachstum nach Storageklassen Worldwide Capacity-Optimized, Performace-Optimized, and I/O-Intensive Storage Systems Shipments, 2012–2016 Capacity shipped (PB) 75.000 60.000 45.000 30.000 15.000 0 2012 I/O intensive Source: IDC, 2013 7 2013 2014 Performance optimized 2015 2016 Capacity optimized Marktentwicklung Enterprise Storage Revenue and Milestones Enterprise SDS Traditional enterprise Storage Hyperscale SDS Wikibon and IT Brand Pulse 2012 Source : IT Brand Pulse The Epic Migration to Software Defined Storage 8 2027 Agenda Einführung in Software Defined Storage Vorstellung SUSE Enterprise Storage Features und Roadmap Ökonomische Vorteile Technik 9 SUSE Enterprise Storage Eine hochskalierbare, softwarebasierende Storagelösung, die Unternehmen den Aufbau einer kosteneffektiven Speicherplattform, basierend auf Standard Serverhardware ermöglicht und zugleich alle Enterprise Funktionen unterstützt, die Kunden von einer derartigen Lösung erwarten. SUSE Enterprise Storage basiert auf dem Open Source Projekt 10 SUSE Enterprise Storage Datacenter Tiering High End Workloads FC All other Workloads Ethernet All Flash Array SUSE Enterprise Storage 11 Storage – Wie wir es sehen Heute ist Storage wie ein Hotel mit 1000 Zimmern • Zimmerkarte an der Rezeption • 4 stellige Zimmernummer • Man bekommt immer wieder das gleiche Zimmer • Wenn es brennt, wird das komplette Hotel evakuiert Aktuelle Lösungen erfüllen die aktuellen Anforderungen... So wie ISDN Karten 1994 das Bedürfnis nach schnellem Internet... 12 Storage – Wie wir es sehen Morgen ist Storage wie ein Hotel mit 1 Milliarde Zimmern: • Hat keine Rezeption mehr, das nächste freie Zimmer ist Ihr Zimmer • Wenn Sie das Zimmer verlassen und zurückkommen, nehmen Sie das nächste freie Zimmer • Es ist immer etwas los, denn: • Irgendwo brennt es immer • Teile werden immer angebaut • Andere abgerissen 13 (R)evolution zum Software Defined Anything Eine Applikation pro Server ($$$$$) Alle Applikationen als VM + Zentraler Storage ($$$$) One App One App One App O S O S O S Keine Proprietäre Hardware mehr ($$) Hypervisor One App One App One App Software Defined Anything O S O S Alles physikalisch 14 O S Traditionelles Storage Virtualisierung Kostenersparniss im Compute Bereich Compute: Standard x86 Server Storage: Standard x86 Server Netzwerkswitches Infrastructure as a Service Ressourcenpool aus x86 Servern Was Analysten sagen Today, over 80% of new workloads in the enterprise are deployed on virtual machines, and the benefits of server virtualization have signalled IT organizations it’s time to consider a migration to software defined networking and storage. IT Brand Pulse 15 Anwendungsfälle Anwendungen Industrie 4.0 Unstrukturierte Daten Healthcare Foto/Video Dienste Betriebssysteme Hypervisor FS Protocols SUSE Enterprise Storage 16 Agenda Einführung in Software Defined Storage Vorstellung SUSE Enterprise Storage Features und Roadmap Ökonomische Vorteile Technik 17 Überblick Technik • Populärste OpenStack Distributed Storage Lösung • Hochskalierbar von TB bis Brontobyte • Enterprise Storage Funktionalitäten ‒ No Single Point of Failure ‒ Hochverfügbarkeit durch Spiegelung in multiple Rechenzentren ‒ “Erasure Coding” (effizientes RAID) ‒ Cache Tiering ‒ Unified Block, Object Interface ‒ Thin Provisioning • Aufgebaut auf Cluster-Servern 18 ‒ Self Healing Technology ‒ Self Managing Technology SUSE Enterprise Storage 2.1 Roadmap Advisory Board 19 CEPH Community Projekt CURRENT STATE OF COMMUNITY CEPH Service Features Legend: Included Object Storage Block Storage Partial Coming File System Industry Leading Storage Functionality Management Node Simple Install, Management and Monitoring Heterogeneous OS Access Highly Redundant Data Cluster Infrastructure Monitor Nodes Unlimited Scalability Policy-based Data Placement Stretch Cluster Replication Storage Nodes Security Data Encrypted in Flight Data Encrypted at Rest Remote Cluster Data Compression Data Deduplication Async Remote Data Replication 20 Features in SUSE Enterprise Storage vs. CEPH Projekt SUSE Enterprise Storage 2.1 Service Features Legend: Included Object Storage Block Storage Partial Coming File System Industry Leading Storage Functionality Management Node Simple Install, Management and Monitoring Heterogeneous OS Access Highly Redundant Data Cluster Infrastructure Monitor Nodes Unlimited Scalability Policy-based Data Placement Stretch Cluster Replication Storage Nodes Security Data Encrypted in Flight Data Encrypted at Rest Remote Cluster Data Compression Data Deduplication Async Remote Data Replication 21 Ausblick SUSE Enterprise Storage 3 SUSE Enterprise Storage 3 Service Features Legend: Included Object Storage Block Storage Partial Coming File System Industry Leading Storage Functionality Management Node Simple Install, Management and Monitoring Heterogeneous OS Access Highly Redundant Data Cluster Infrastructure Monitor Nodes Unlimited Scalability Policy-based Data Placement Stretch Cluster Replication Storage Nodes Security Data Encrypted in Flight Data Encrypted at Rest Remote Cluster Data Compression Data Deduplication Async Remote Data Replication 22 Agenda Einführung in Software Defined Storage Vorstellung SUSE Enterprise Storage Features und Roadmap Ökonomische Vorteile Technik 23 SUSE Enterprise Storage Trad. Storage vs. SUSE Enterprise Storage Kostenvergleich 400 Kapazitätsinvestition ab Tag 1 für in 3 Jahren 300 200 Pay as you grow 100 0 Jahr 1 Jahr 2 Jahr 3 Jahr 4 Jahr 5 Jahr 6 Datenwachstum 600 500 400 300 Disruptive Migration nach 3 Jahren Lebenszyklus nach Businessanforderung Unkalkulierbare Kosten bei Upgrades Investitionsschutz durch lineare Kosten Massive Wartungskosten ab Jahr 3 Performance on Demand 200 100 0 Jahr 1 Jahr 2 Jahr 3 Jahr 4 Jahr 5 Jahr 6 Suse 24 Trad. Storage Beispielkonfigurationen Basiskonfiguration: 4 Object Storage Devices (OSD) mit unlimitierter Kapazität 3 Monitoring Server Management Server Starterpack: SUSE Enterprise Storage Base Config, 4 OSD Nodes with 1-2 Sockets, Prio. Subscription Erweiterung pro OSD: SUSE Enterprise Storage Exp. Node, 1 OSD Node with 1-2 Sockets, Prio. Subscription 25 Agenda Einführung in Software Defined Storage Vorstellung SUSE Enterprise Storage Features und Roadmap Ökonomische Vorteile Technik 26 Heterogener Speicherzugriff Cluster Network OSD Monitoring Server Public Network Filebasierter Zugriff (*) (*) Filesystem Support geplant für Sommer 2016 27 “Nativer” Blockzugriff Legacy Blockzugriff Objektbasierter Zugriff 29 Corporate Headquarters +49 911 740 53 0 (Worldwide) Join us on: Maxfeldstrasse 5 90409 Nuremberg Germany www.suse.com www.opensuse.org Unpublished Work of SUSE LLC. All Rights Reserved. This work is an unpublished work and contains confidential, proprietary and trade secret information of SUSE LLC. Access to this work is restricted to SUSE employees who have a need to know to perform tasks within the scope of their assignments. No part of this work may be practiced, performed, copied, distributed, revised, modified, translated, abridged, condensed, expanded, collected, or adapted without the prior written consent of SUSE. Any use or exploitation of this work without authorization could subject the perpetrator to criminal and civil liability. General Disclaimer This document is not to be construed as a promise by any participating company to develop, deliver, or market a product. It is not a commitment to deliver any material, code, or functionality, and should not be relied upon in making purchasing decisions. SUSE makes no representations or warranties with respect to the contents of this document, and specifically disclaims any express or implied warranties of merchantability or fitness for any particular purpose. The development, release, and timing of features or functionality described for SUSE products remains at the sole discretion of SUSE. Further, SUSE reserves the right to revise this document and to make changes to its content, at any time, without obligation to notify any person or entity of such revisions or changes. All SUSE marks referenced in this presentation are trademarks or registered trademarks of Novell, Inc. in the United States and other countries. All thirdparty trademarks are the property of their respective owners. #WoIstDasGeeko1 Florian Hettenbach Enterprise Storage UnserWegzu So-ware Defined Storage 2 Unsere Reise 3 Linux basiert ZF Enterprise Speicher Windows basiert 4 Object-Speicher ZFS basiert Entry-level Lösungen 5 Der Wandel Spezialisiert Standardisiert 7 Die Zeit ist reif Warum? Was wir gebaut haben 11 64 GB 8TB HDD 1TB SSD 12 Die Infrastruktur Admin Host OSD2 MON OSD3 MON Host Netzwerk MON OSD4 10GBASE-T CLUSTER NETZWERK OSD1 14 Rados Object Host Netzwerk Rados Block iSCSI Gateway Rados GW S3/Swift 15 Suse Enterprise Storage Heute SES 2 RBD iSCSI Gateway Verschlüsselung Erasure Coding 17 Software Calamari Monitoring MON-D SES 2 SLES 12 18 Testing Pool 1: 16x HDD OSDs Pool 2: 8x SSD OSDs rados –p [poolname] bench 600 write 19 Ergebnisse - HDD 16x HDD OSDs 3xRep - MB/s 900 800 700 600 500 400 300 200 100 0 780 620 317 Seq. Lesen Zufällig Lesen Schreiben21 16x HDD OSDs EC(2+1) - MB/s 680 660 660 640 620 600 602 580 580 560 540 Seq. Lesen Zufällig Lesen Schreiben22 Ergebnisse - SSD 8x SSD OSDs 3xRep - MB/s 800 700 666 690 600 500 373 400 300 200 100 0 Seq. Lesen Zufällig Lesen Schreiben24 8x SSD OSDs EC(2+1) - MB/s 800 700 659 680 600 539 500 400 300 200 100 0 Seq. Lesen Zufällig Lesen Schreiben25 Zusammenfassung Durchsatz Vergleich Schreiben 700 580 600 539 500 400 300 373 317 200 100 0 HDD 3xRep HDD EC2 SSD EC2 27 SSD 3xRep Latenz 1,34 ms 4 MB Blocks Echt?! h5ps://so-ware.intel.com/en-us/blogs/2013/10/25/ measure-ceph-rbd-performance-in-a-quanGtaGve-way-part-i h5ps://indico.cern.ch/event/274555/session/16/contribuGon/10/a5achments/ 495765/685037/ceph_hepix_2014.pdf 29 Hohe Leistung – was gilt es zu beachten? Greifen Sie zu HBAs Jumbo Frames EIN > 64GB RAM 31 Erasure Coding ist einen Test wert Verschwenden Sie Ihre SSD Power nicht ans Betriebssystem! SSD Qualität zählt 32 33 Beschreibung Haltbarkeit Drive Writes Per Day 240GB Samsung 350 TB PM863 200GB Intel S3710 0.79 DWPD x10 3600 TB 9.68 DWPD 34 Optimierungspotential Switche Verkabelung Journaling 35 Wie geht‘s weiter? Mehr Performance Tests Mehr Optimierung Veröffentlichung Whitepaper 36 Was wir daraus gemacht haben 38 Allround Kapazität Geschwindigkeit 39 Gewonnene Erkenntnisse Vertrauen Sie nicht Ihrem Kalender KEIN Raid-Controller Machen Sie sich bereit zu lernen 41 Die Zukunft ist heute Wählen Sie den richtigen Partner, Partner. Stabil & Zuverlässig Offene Storage Software & Offene Hardware 43 Danke !