SUSE Enterprise Storage - Thomas

Webcast vom 25.02.2016
Software Defined Storage für den
Mittelstand – machen Sie es doch
wie Google, Amazon und Co.
Software Defined Storage für den
Mittelstand - machen Sie es doch wie
Google, Amazon und Co.
Michael Stanscheck
Storage Sales Executive Central Europe
michael.stanscheck@suse.com
Follow me: @michastan
Agenda
Einführung in Software Defined Storage
Vorstellung SUSE Enterprise Storage
Features und Roadmap
Ökonomische Vorteile
Technik
2
Agenda
Einführung in Software Defined Storage
Vorstellung SUSE Enterprise Storage
Features und Roadmap
Ökonomische Vorteile
Technik
3
Warum günstiger Speicher für Ihr
Unternehmen doppelt wichtig ist
Alte Familienbilder
sind oft erst interessant,
wenn man selbst ein
gewisses Alter erreicht...
Source : IT Brand Pulse
The Epic Migration to Software Defined Storage
Quelle: http://www.wirtschaftswunder-museum.de
4
Warum günstiger Speicher für Ihr
Unternehmen doppelt wichtig ist
Bestimmte Firmendaten können auch erst nach einer
gewissen Zeit interessant sein...
Source : IT Brand Pulse
The Epic Migration to Software Defined Storage
5
Datenwachstum durch Industrie 4.0
Predictive Planning:
• Sensoren liefern Echtzeitinformationen an zentrale Systeme
• Ziel: Wann in den nächsten Wochen (Tag, Stunde, Minute)
fällt mein System aus
Problem:
Speichertechnologie war bisher oft teurer als der Mehrwert
SUSE Kunde aus dem Mittelstand:
Wir haben 400 Maschinen, 5 Sensoren pro Maschine,
jeder Sensor liefert alle 2 Sekunden 5Kb Daten
400 x 5 x 5Kb = 9,7MB alle 2 Sekunden
Pro Tag ca. 421 GB
Pro Jahr über 150 TB Datenwachstum
6
Datenwachstum nach Storageklassen
Worldwide Capacity-Optimized, Performace-Optimized, and
I/O-Intensive Storage Systems Shipments, 2012–2016
Capacity shipped (PB)
75.000
60.000
45.000
30.000
15.000
0
2012
I/O intensive
Source: IDC, 2013
7
2013
2014
Performance optimized
2015
2016
Capacity optimized
Marktentwicklung
Enterprise Storage Revenue and Milestones
Enterprise SDS
Traditional enterprise Storage
Hyperscale SDS
Wikibon and IT Brand Pulse
2012
Source : IT Brand Pulse The Epic Migration to Software Defined Storage
8
2027
Agenda
Einführung in Software Defined Storage
Vorstellung SUSE Enterprise Storage
Features und Roadmap
Ökonomische Vorteile
Technik
9
SUSE Enterprise Storage
Eine hochskalierbare, softwarebasierende
Storagelösung, die Unternehmen den Aufbau
einer kosteneffektiven Speicherplattform,
basierend auf Standard Serverhardware
ermöglicht und zugleich alle Enterprise
Funktionen unterstützt, die Kunden von einer
derartigen Lösung erwarten.
SUSE Enterprise Storage basiert auf dem Open Source Projekt
10
SUSE Enterprise Storage
Datacenter Tiering
High End Workloads
FC
All other Workloads
Ethernet
All Flash Array
SUSE
Enterprise
Storage
11
Storage – Wie wir es sehen
Heute ist Storage wie ein Hotel mit 1000 Zimmern
• Zimmerkarte an der Rezeption
• 4 stellige Zimmernummer
• Man bekommt immer wieder das
gleiche Zimmer
• Wenn es brennt, wird das
komplette Hotel evakuiert
Aktuelle Lösungen erfüllen die
aktuellen Anforderungen...
So wie ISDN Karten 1994 das
Bedürfnis nach schnellem Internet...
12
Storage – Wie wir es sehen
Morgen ist Storage wie ein Hotel mit 1 Milliarde Zimmern:
• Hat keine Rezeption mehr, das
nächste freie Zimmer ist Ihr Zimmer
• Wenn Sie das Zimmer verlassen
und zurückkommen, nehmen Sie
das nächste freie Zimmer
• Es ist immer etwas los, denn:
• Irgendwo brennt es immer
• Teile werden immer angebaut
• Andere abgerissen
13
(R)evolution zum
Software Defined Anything
Eine Applikation pro
Server ($$$$$)
Alle Applikationen als VM +
Zentraler Storage ($$$$)
One App
One App
One App
O
S
O
S
O
S
Keine Proprietäre Hardware mehr ($$)
Hypervisor
One App
One App
One App
Software Defined Anything
O
S
O
S
Alles physikalisch
14
O
S
Traditionelles
Storage
Virtualisierung
Kostenersparniss im
Compute Bereich
Compute:
Standard
x86 Server
Storage:
Standard
x86 Server
Netzwerkswitches
Infrastructure as a Service
Ressourcenpool aus x86 Servern
Was Analysten sagen
Today, over 80% of new workloads in
the enterprise are deployed on virtual
machines, and the benefits of server
virtualization have signalled IT
organizations it’s time to consider a
migration to software defined
networking and storage.
IT Brand Pulse
15
Anwendungsfälle
Anwendungen
Industrie 4.0
Unstrukturierte Daten
Healthcare
Foto/Video
Dienste
Betriebssysteme
Hypervisor
FS
Protocols
SUSE
Enterprise
Storage
16
Agenda
Einführung in Software Defined Storage
Vorstellung SUSE Enterprise Storage
Features und Roadmap
Ökonomische Vorteile
Technik
17
Überblick Technik
• Populärste OpenStack Distributed Storage Lösung
• Hochskalierbar von TB bis Brontobyte
• Enterprise Storage Funktionalitäten
‒
No Single Point of Failure
‒
Hochverfügbarkeit durch Spiegelung in multiple Rechenzentren
‒
“Erasure Coding” (effizientes RAID)
‒
Cache Tiering
‒
Unified Block, Object Interface
‒
Thin Provisioning
• Aufgebaut auf Cluster-Servern
18
‒
Self Healing Technology
‒
Self Managing Technology
SUSE Enterprise
Storage 2.1
Roadmap
Advisory Board
19
CEPH Community Projekt
CURRENT STATE OF COMMUNITY CEPH
Service
Features Legend:
Included
Object Storage
Block Storage
Partial
Coming
File System
Industry Leading Storage Functionality
Management Node
Simple Install, Management and Monitoring
Heterogeneous OS Access
Highly Redundant Data Cluster
Infrastructure
Monitor Nodes
Unlimited Scalability
Policy-based Data Placement
Stretch Cluster Replication
Storage Nodes
Security
Data Encrypted in Flight
Data Encrypted at Rest
Remote Cluster
Data Compression
Data Deduplication
Async Remote Data Replication
20
Features in SUSE Enterprise Storage
vs. CEPH Projekt
SUSE Enterprise Storage 2.1
Service
Features Legend:
Included
Object Storage
Block Storage
Partial
Coming
File System
Industry Leading Storage Functionality
Management Node
Simple Install, Management and Monitoring
Heterogeneous OS Access
Highly Redundant Data Cluster
Infrastructure
Monitor Nodes
Unlimited Scalability
Policy-based Data Placement
Stretch Cluster Replication
Storage Nodes
Security
Data Encrypted in Flight
Data Encrypted at Rest
Remote Cluster
Data Compression
Data Deduplication
Async Remote Data Replication
21
Ausblick SUSE Enterprise Storage 3
SUSE Enterprise Storage 3
Service
Features Legend:
Included
Object Storage
Block Storage
Partial
Coming
File System
Industry Leading Storage Functionality
Management Node
Simple Install, Management and Monitoring
Heterogeneous OS Access
Highly Redundant Data Cluster
Infrastructure
Monitor Nodes
Unlimited Scalability
Policy-based Data Placement
Stretch Cluster Replication
Storage Nodes
Security
Data Encrypted in Flight
Data Encrypted at Rest
Remote Cluster
Data Compression
Data Deduplication
Async Remote Data Replication
22
Agenda
Einführung in Software Defined Storage
Vorstellung SUSE Enterprise Storage
Features und Roadmap
Ökonomische Vorteile
Technik
23
SUSE Enterprise Storage
Trad. Storage vs. SUSE Enterprise
Storage
Kostenvergleich
400
Kapazitätsinvestition ab Tag 1 für in
3 Jahren
300
200
Pay as you grow
100
0
Jahr 1 Jahr 2 Jahr 3 Jahr 4 Jahr 5 Jahr 6
Datenwachstum
600
500
400
300
Disruptive
Migration nach
3 Jahren
Lebenszyklus nach
Businessanforderung
Unkalkulierbare
Kosten bei
Upgrades
Investitionsschutz
durch lineare
Kosten
Massive
Wartungskosten
ab Jahr 3
Performance on
Demand
200
100
0
Jahr 1 Jahr 2 Jahr 3 Jahr 4 Jahr 5 Jahr 6
Suse
24
Trad. Storage
Beispielkonfigurationen
Basiskonfiguration:
4 Object Storage Devices (OSD) mit unlimitierter Kapazität
3 Monitoring Server
Management
Server
Starterpack:
SUSE Enterprise Storage Base Config, 4 OSD Nodes with 1-2 Sockets, Prio. Subscription
Erweiterung pro OSD:
SUSE Enterprise Storage Exp. Node, 1 OSD Node with 1-2 Sockets, Prio. Subscription
25
Agenda
Einführung in Software Defined Storage
Vorstellung SUSE Enterprise Storage
Features und Roadmap
Ökonomische Vorteile
Technik
26
Heterogener Speicherzugriff
Cluster Network
OSD
Monitoring Server
Public Network
Filebasierter
Zugriff (*)
(*) Filesystem Support geplant für Sommer 2016
27
“Nativer”
Blockzugriff
Legacy
Blockzugriff
Objektbasierter
Zugriff
29
Corporate Headquarters
+49 911 740 53 0 (Worldwide)
Join us on:
Maxfeldstrasse 5
90409 Nuremberg
Germany
www.suse.com
www.opensuse.org
Unpublished Work of SUSE LLC. All Rights Reserved.
This work is an unpublished work and contains confidential, proprietary and trade secret information of SUSE LLC.
Access to this work is restricted to SUSE employees who have a need to know to perform tasks within the scope of their
assignments. No part of this work may be practiced, performed, copied, distributed, revised, modified, translated,
abridged, condensed, expanded, collected, or adapted without the prior written consent of SUSE.
Any use or exploitation of this work without authorization could subject the perpetrator to criminal and civil liability.
General Disclaimer
This document is not to be construed as a promise by any participating company to develop, deliver, or market a
product. It is not a commitment to deliver any material, code, or functionality, and should not be relied upon in making
purchasing decisions. SUSE makes no representations or warranties with respect to the contents of this document, and
specifically disclaims any express or implied warranties of merchantability or fitness for any particular purpose. The
development, release, and timing of features or functionality described for SUSE products remains at the sole discretion
of SUSE. Further, SUSE reserves the right to revise this document and to make changes to its content, at any time,
without obligation to notify any person or entity of such revisions or changes. All SUSE marks referenced in this
presentation are trademarks or registered trademarks of Novell, Inc. in the United States and other countries. All thirdparty trademarks are the property of their respective owners.
#WoIstDasGeeko1
Florian Hettenbach
Enterprise Storage
UnserWegzu So-ware
Defined
Storage
2
Unsere Reise
3
Linux basiert
ZF
Enterprise Speicher
Windows basiert
4
Object-Speicher
ZFS basiert
Entry-level Lösungen
5
Der Wandel
Spezialisiert
Standardisiert
7
Die Zeit ist reif
Warum?
Was wir gebaut haben
11
64 GB
8TB HDD
1TB SSD
12
Die Infrastruktur
Admin Host
OSD2
MON
OSD3
MON
Host Netzwerk
MON
OSD4
10GBASE-T CLUSTER
NETZWERK
OSD1
14
Rados Object
Host Netzwerk
Rados Block
iSCSI Gateway
Rados GW S3/Swift
15
Suse Enterprise Storage Heute
SES 2
RBD iSCSI Gateway
Verschlüsselung
Erasure Coding
17
Software
Calamari
Monitoring
MON-D
SES 2
SLES 12
18
Testing
Pool 1: 16x HDD OSDs
Pool 2: 8x SSD OSDs
rados –p [poolname] bench 600 write
19
Ergebnisse - HDD
16x HDD OSDs 3xRep - MB/s
900
800
700
600
500
400
300
200
100
0
780
620
317
Seq. Lesen
Zufällig Lesen
Schreiben21
16x HDD OSDs EC(2+1) - MB/s
680
660
660
640
620
600
602
580
580
560
540
Seq. Lesen
Zufällig Lesen
Schreiben22
Ergebnisse - SSD
8x SSD OSDs 3xRep - MB/s
800
700
666
690
600
500
373
400
300
200
100
0
Seq. Lesen
Zufällig Lesen
Schreiben24
8x SSD OSDs EC(2+1) - MB/s
800
700
659
680
600
539
500
400
300
200
100
0
Seq. Lesen
Zufällig Lesen
Schreiben25
Zusammenfassung Durchsatz
Vergleich Schreiben
700
580
600
539
500
400
300
373
317
200
100
0
HDD 3xRep HDD EC2
SSD EC2
27
SSD 3xRep
Latenz
1,34 ms
4 MB Blocks
Echt?!
h5ps://so-ware.intel.com/en-us/blogs/2013/10/25/
measure-ceph-rbd-performance-in-a-quanGtaGve-way-part-i
h5ps://indico.cern.ch/event/274555/session/16/contribuGon/10/a5achments/
495765/685037/ceph_hepix_2014.pdf
29
Hohe Leistung – was
gilt es zu beachten?
Greifen Sie zu HBAs
Jumbo Frames EIN
> 64GB RAM
31
Erasure Coding ist
einen Test wert
Verschwenden Sie Ihre SSD Power nicht ans
Betriebssystem!
SSD Qualität zählt
32
33
Beschreibung
Haltbarkeit Drive Writes Per Day
240GB Samsung 350 TB
PM863
200GB Intel
S3710
0.79 DWPD
x10
3600 TB
9.68 DWPD
34
Optimierungspotential
Switche
Verkabelung
Journaling
35
Wie geht‘s weiter?
Mehr Performance
Tests
Mehr Optimierung
Veröffentlichung
Whitepaper
36
Was wir daraus
gemacht haben
38
Allround
Kapazität
Geschwindigkeit
39
Gewonnene
Erkenntnisse
Vertrauen Sie nicht
Ihrem Kalender
KEIN Raid-Controller
Machen Sie sich bereit
zu lernen
41
Die Zukunft ist heute
Wählen Sie den richtigen Partner,
Partner.
Stabil & Zuverlässig
Offene Storage Software
&
Offene Hardware
43
Danke
!