BVQ - Storage in Balance Monitoring, Accounting Service Level Management BVQ Vortrag BVQ...

BVQ - Storage in Balance

Monitoring, AccountingService Level Management

BVQ Vortrag

BVQ Kapazitätsanalyse

BVQ Performanceanalyse

BVQ Speicherstufen Analyse

[email protected] | +49 151 180 25 26 0 | ©SVA 15.05.2012

http://youtu.be/IMlMLg3KN4A

http://youtu.be/_xMyzgpAo1k

http://youtu.be/ycjgxcrXaTE

http://youtu.be/cXa-wXEcC7w

mailto:[email protected]

http://www.bvq-software.de/

Die Herausforderung Speicher … Speicherwachstum pro Jahr

40%, 50%, 70%?

Speicherkosten oft mehr als 20% der gesamten Hardwarekosten

„BVQ unterstützt uns bei strategischen Einkaufsentscheidungen! “ * ¹

* ¹ Reinhard Waas, Storagemanager LHS/Ericsson

Speichereffizienz verbessern Servicequalität steigern Abrechnung vereinfachen

Bekannte Methoden!Aber wo und wie einsetzen?

Speichereffizienz verbessern Servicequalität steigern Abrechnung vereinfachen

Effizienzverbessern

Daten günstigspeichern

Auslastung steigern

Lastverteilung optimieren

Servicequalitätsteigern

Abrechnungvereinfachen1 1 11/8 1/8

1/8 1/8

1/8 1/8 1/8 1/8

1/8 1/8 1/8 1/8

1/8 1/8

Langsame VolumesKapazität 100%Leistung 50%

Performante VolumesKapazität 50%Leistung 100%

Mischung Leistung / Kapazitätverhältnis ist optimal

1/8 1/8

1/8 1/8

1/8 1/8

Wie wird der optimale Mix erreicht?

Effizienzverbessern


Auslastung steigern


Ziel ist möglichst 100% der Ressourcen nutzen

Effizienzverbessern

Servicequalitätsteigern

Abrechnungvereinfachen

Leistunganalysieren

Proaktivmanagen

Organisationabbilden

Kostenzuweisen


Auslastung steigern

Service-Levelüberwachen

Leistungverrechnen


Die BVQ DarstellungsweiseAm Beispiel – was passiert in unseren Speicherpools?

BVQ Treemap „Komplexe Zusammenhänge übersichtlich dargestellt“

SVC Speichersystem

Storage Pools des SVC„Managed Disk Groups“

Kleiner Speicherpool

Großer Speicherpool


BVQ Treemap „Komplexe Zusammenhänge übersichtlich dargestellt“

SVC Speichersystem

Storage Pools des SVC„Managed Disk Groups

Virtuelle Volumes in denStorage Pools

Freie Kapazitäten und Virtuelle Volumes in den Storage Pools


Alle Informationen auf einem SchirmAbspeichern als Favorit und aktualisiert abrufen

Speicherpool .. freie Kapazität .. normale Auslastung (grün)

Volume .. mit großer Kapazität .. zu teuer gespeichert (blau) .. richtiger Speicherort (grün) .. überlastet Pool (rot) .. verschieben mit Drag & Drop

Speicherpool ist unausgelastet

Tiefgehende Performanceanalysemöglichkeiten• Auffälliges Objekt rechte Maustaste Analyse

Cache %

DR above Cache

DR below Cache(Controller)

Kumulierter Performancegraph der performanten Disks

Cacheverhalten und Leistung Backend Storage

Typische Einsatzgebiete• Monitoring, Überwachung und Reporting

Leistungsparameter im Blick haltenKapazität und Performance über Treemap, LeistungsanalyseResponse Time Monitoring, Speichereffizienz analysierenDokumentation über Kapazitäts und Performcereports

• Planung und Ausbau unterstützen, Kosten reduzierenKapazitäts / Performanceverteilung Analyse

Vergleich vorhandene Leistung / wirklich benötigte Leistung?Optimalen Speichermix finden

• Performanceprobleme finden und lösenSVC / V7000 Herz Kreislauf Check

Checkup auf typische BottlenecksProbleme finden und LösenSchwachstellen ermitteln und proaktiv handeln

• Reporting und Kosten verrechnenReportingmodul mit Accounting

Technische Inhalte, AccountingReporting über Excel

• Service Level ManagementSLM Modul als Erweiterung

Service Level Management

Monitoring mit BVQ

• Kapazitäten und Performancewerte auf einen Blick in der Treemap

• Füllgrad der Speicherpools

• Lastbewertung über IODensity

• Vielfältige Analysemöglichkeiten über Treemap

• Größe / Performance / Response Times aller Objekte wie: Volumes, Pools, SVC/V7Knoten, Hosts, Arrays, Controller

• Überwachung von Global / Metro Mirror(GM Modul geplant)

• Überwachungen über organisatorische Ebenen wie Cost Center, Applikationen(Accounting Modul)

• Überwachung von SLA (SLM Modul)

• Auffälligkeiten können mit einem Mausklick über den Performanceview analysiert werden

Performanceanalyse mit BVQ• Tiefgehende Analyse alle Komponenten

in SVC/V7• Performancewerte

• Belastungen (SAN, Cache)

• Interaktives Analysemodul• Große Auswahl von Indikatoren kombinierbar

• Gruppen oder Einzelobjekte

• 200 Tage im Detail analysierbar

• Erlaubt ad hoc Analysen

• Analysen als Favorit speicherbar

Performanceanalyse mit BVQ• Vergleichsmöglichkeiten

• Objektgruppen mit Aggregation oder Einzelnen ObjektenObjekte gleichen Typs untereinander vergleichen Ausreißer finden

• Analysierbaren Bereiche• SVC Knoten mit CPU und globalen Caches

• SVC Knoten Ports mit getrennten Durchsätzen und SAN Parametern

• Volumes mit Leistungswerten vor und nach Cache und Transferlatenz zu Host

• MDISK Group Cache Partitionen mit detailliertenR/W Cache Status und aktuellen Destaging Operationen

• MDisks / Speicherpools in aggregiert oder einzeln

• Metro / Global Mirror Strecken (GM Modul – geplant)

Reporting Funktionen• Typische Reports

• Kapazitätsentwicklung, Performanceentwicklung

• Accounting

• Offene Schnittstelle

• Spezielle Reports auf Anfrage

• Reports über dynamische Excel Tabellen

• Automatisierbar – Einbindung in Intranet

• Integrierbar in System Management Umgebungen wie z.B. Nagios

Speicherbelastung visualisieren IO DenistyErmittelt die Belastung (IOPS/GiB – „IO Dichte“) die ein Volume auf das zugrundeliegende Speichersystem ausübt. Wird für alle Speicherebenen wie z.B. Volume, Mdisk, MDG, Controller, Array ... berechnet.

Dieser Wert ermöglich die Aussage,wie stark ein Volume den technischenMöglichkeiten des Speichers nutzt.

Diese Bewertung wird über eine entsprechende Einfärbung der Volumes angezeigt.

Wieso ist das Wertvoll!

• Schnelle Einschätzung, ob ein Volume auf der richtigen Speicher-klasse platziert ist.

• Überlastungszustände im komplettenSVC/V7 schnell identifizieren.(Gilt auch für Unterlast)

Speicherbelastung Response Time Compliance

Vergleicht die gemessene Latenz einzelner Volumes oder Managed Disks gegen einen in den Managed Disk Groups definierten Maximalwert

Dieser Wert ermöglich die Aussage, ob ein Volume oder eine Managed Diskvon diesem Maximalwert abweicht.

Die überliegenden Objekte erben das Resultat. Ein Server wird z.B. gelb angezeigt, wenn ein Volume des Servers nahe beim Maximalwert liegt.


• Schnelle Übersicht, ob die Antwortzeiteinzelne Volumes oder Disks vom Erwartungswert abweicht

• Probleme werden schnell isoliert

Speichereffizienz optimieren• Überwacht, ob der Einsatz von Thin Provisioning und/oder Compression für einzelne

Volumes zum gewünschten Erfolg führt.

• Thin Provisioning

• Compression

• Alle Speicherebenen


• Speichereffizienz belastetSystemressourcen(CPU Leistung u. Write Cache)

• Compression ist limitiert auf 200Volumes pro node pair

schlechtkomprimiert

Ausschalten

Gut komprimiert

SAS 10k optimiert auf IOPS

BVQ Kapazitäts / Performance Analyse

Höchste Priorität Performance - keine Bottlenecks – reibungsfreier Betrieb

Vorhandene Leistung wird unterschätzt Benötigte Leistung wird überschätzt

Kein Messinstrument um eine richtige Einschätzung zu finden.

Speicher wird zur Sicherheit zu hochwertig (zu teuer) bemessen

BVQ Ansatz – Fehlinvestitionen vermeiden und in der nächsten Erweiterung korrigieren Über Analyse den richtige Speichermix finden Investition in günstigen Speicher forcieren

Nur ein Volume benötigt 2000 IOPS

Nur wenige Volumes benötigen 500 IOPS

Die meisten Volumes benötigen 100 IOPS und weniger

SATA 7k,5koptimiert auf

TB

Alle nicht orangen Bereiche sind zu teuer gespeichert

BVQ Kapazitäts / Performance Analyse über BVQ Heatmap

• Standard Live Anzeige von BVQ

• Alles was links Blau ist, ist mit hoher Sicherheit Kandidat für eine Migration

• Alles was links grün ist sollte auf Migrationuntersucht werden

• Motivation ist hohe Kosteneinsparung per TBteuren Speicher entlastenkeinen teuren Speicher mehr erweitern

Günstiger SpeicherSATA Kapazität

Wertvoller SpeicherSAS 15K Performance

Färbungsstrategie – IO Density HeatVersion 2.5

Ausgleichen statt NeuinvestitionVersion 2.5

PerformanceproblemeSchlechte Antwortzeiten des Speichers

• Applikationen reagieren träge und werden langsam.

• Ziele und SLA können nicht mehr erfüllt werden.

Generelle Überlastung: meist ein System aus der Kette Applikation Server SAN SVC Speicher

Latenzzeit Peaks: oft überraschend und scheinbar ohne nachvollziehbaren Grund

• Reaktionen: Erweiterung, Modernisierung(No Cost Maßnahmen) Verteilung von Arbeitslasten optimieren, Belastungsspitzen entzerren, Schädliche Überlastungssituationen durch IO Governing steuern und reduzieren.

Schnelle Analyse Schnelle Problembeseitigung

Tools (BVQ), Messwerte (SVC) und Methoden (Wissen)

Mehr technische Informationen zu diesem Thema im Anhang

Spezielles Angebot – Herz Kreislauf Check• Analyse Angebot für SVC und

Storwize V7000

• Klärt die wichtigsten Fragen

• Wie Ist das System ausgelastet?

• Wo sind die Belastungsgrenzen?

• Wie sieht die kostenoptimale Erweiterung aus?

• Gibt es aktuell Bottlenecks?

Kosten sind 3000€ fix wenn die Installation und die Analyse per Remote durchgeführt werden können. Im Preis ist die Ausarbeitung eines Dokuments mit Präsentation enthalten.

Accounting FunktionenErweiterung der SVC Objekte in RichtungUnternehmen mit Accounting

Neue Betrachtungsebenen:Cost Center, Applikationsgruppen, Applikationen, Volume Gruppen

Topologie, Speicherverbrauch und Performance auf den Ebenen Cost Center, Applikationsgruppen, Applikationen und Volume Gruppen.

Detaillierte Performanceanalyse auf allen Ebenen

Kostenbezogene Betrachtung und Abrechnung über allen Ebenen

Reporting, Kosten und Preisanalyse

Mehr Details im Anhang

Service Level Management Funktionen• Verwaltung und Speicherung von speicherbezogenen SLA‘s

• Überwachung der SLAs und weiterer Regeln• Data Placement Rating:

Entspricht der Speicherplatz der SLA VorgabeRot: SLA ist verletzt Gelb: suboptimaler Speicherplatz

• Disk Platzierung: „Disk Group Relations“Beispiel, Spiegel dürfen nicht auf dengleichen Systemen liegenÜberwachung auf Pools, Systeme, RäumeSites

• Kosten und Preisberechnung auf alle Speicher Objekte und Ebenen

SLA Verletzung

Speicherplatz laut SLA akzeptabel

Speicherplatz entspricht SLA

BVQ Komponenten

Speicher

BVQ Klienten

BVQ GUIBVQ GUIBVQ GUIBVQ GUI

BVQ Server Windows Server z.B. VMWare Gast System 4GB-6GB RAM

BVQ ApplikationBVQ ApplikationBVQ GUIBVQ GUI BVQ GUIBVQ GUI

IBMSVC

V7000

IBMSVC

V7000

BVQ SchedulerBVQ SchedulerBVQ ScannerBVQ Scanner

BVQ ReporterCognosSys Mgmt

BVQ ReporterCognosSys Mgmt

Komplettinstallation auf einem Server. Optional weitere Klienten auf anderen Systemen.Installationszeit wenige Stunden.

•Effizienz verbessern Daten günstiger speichern - Auslastung steigern - Lastverteilung optimieren

Intuitive, aufgabenorientierte GUI mit Drag&Drop Migration Kostenoptimierte Volume Platzierung / Verlagerung auf „lower Tiers“ Bessere Lastverteilung weniger kritische Hotspots

•Servicequalität steigernService-Level überwachen - Leistung analysieren - proaktiv managen

Leistungsüberwachung und Frühwarnung ermöglichen Proaktives Management Gemessene Anforderungen erlauben fundierte Leistungs-, Kapazitätsplanung Kenntnis der Kritikalität und darauf aufbauende Sensitivität

•Abrechnung vereinfachenLeistung verrechnen - Organisationen abbilden - Kosten zuweisen

Kapazitäts-, Performanceerfassung auf den organisatorischen Ebenen Kostenerfassung, Reporting, Trendanzeige und Unterstützung

der speicherklassenspezifischen Abrechnung

BVQ: Die Kernvorteile im Detail

BVQ Editionen

BVQ Erweiterungspakete

Stretched Cluster Lösung

Disk Mirror LVM

Metro / Global Mirror

FlashcopySnapshot

QoS

ThinProvisioning

Online Daten Migration

ISCSI

Flash DiskSupportApplikationsintegration

FlashCopy Manager

DR ManagementAutomatisierung

EASY TIER

VMWare VAAISupport

VMWare vCenterSupport

Performance-mangement

Kapazitäts-mangement

Performance Bottleneckanalyse

Accounting vonApplikationslevel

bis Unternehmenslevel

SLA Management

Performance Analyse

Vollständig balancierte Storage Tiers

Datenklasse / SpeicherortAnalyse

BVQ + SVC / Storwize V7000 ist vollständiger!

Reporting

SAN Port Analyse

Deutsche Webseiten

• BVQ Webseite mit Kundenreferenzen und Seite für BVQ Vertriebspartnerhttp://www.bvq-software.de/

• BVQ Videos auf dem YouTube SVA Kanalhttp://www.youtube.com/user/SVAGmbH

• BVQ Webseite von SVA GmbH http://www.sva.de/sva_prod_bvq.php

• SVC Kundenvortrag GAVI mit vielen BVQ InhaltenLink zum Vortrag

Internationale Webseiten

• Developer Works BVQ Community Bloghttps://www.ibm.com/developerworks/mydeveloperworks/...http://tinyurl.com/bvqblog

• Developer Works Documents and Presentationshttps://www.ibm.com/developerworks/mydeveloperworks/...

http://tinyurl.com/bvqdoc


http://www.youtube.com/user/SVAGmbH

http://www.sva.de/sva_prod_bvq.php

http://www-05.ibm.com/de/events/svc-usergroup/pdf/SVC-Kundenpraesentation_GaVI_SVC_AWTreff_Q42010-Michael-Graef.pdf

https://www.ibm.com/developerworks/mydeveloperworks/blogs/BVQ/?lang=en





https://www.ibm.com/developerworks/mydeveloperworks/





Weitere Informationen zu BVQ finden sie unter der Webseite

www.bvq-software.de

Bei Interesse an BVQ wenden Sie sich bitte an die folgende E-Mail Adresse

mailto:[email protected]

BVQ ist ein Produkt der SVA System Vertrieb Alexander GmbH


Analyse / Check

Probleme finden, lösen und proaktiv vermeiden

Viele Probleme scheinen unerklärlich! Ursache und Auswirkung liegen oft weit auseinander

SVC Knoten + Globaler Cache AnalyseSymptome: hoher Write Cache - Lastpeaks

Prozessor Grundlast OK

Globaler R/W Cache OK

Globaler Write Cache NICHT OK

Performanceproblem

SVC Knoten Ports + SAN AnalyseSymptom: SAN Protokollfehler oder hohe Buffer Credit Wait %

Port DatendurchsatzRead / Write

zum Host Zum Controller

Buffer Credit Wait % zu hochMögliches SAN Problem

Unerwartet hohe Latenzzeiten

Detaillierte Disk Pool Cache AnalyseSymptom: oft auf oder über 100% und 100% Phasen

• Gründe sind entweder Prozesse, die zu viele Daten in den Speicher schreiben oder Speicher, der zu langsam für Destaging ist. Hilfe – Änderungern im Ablauf Meistens Kombination – schnellerer Speicher ist oft nicht die Lösung sondern nur eine Problemlinderung. Weitere Analyse notwendig.

Fullness W

Destage Write

Mdisk Group Cache Full Mdisk Group Cache Full

Mdisk Group Cache Full

Problem in StoragepoolWrite Cache Full

Performanceproblem für alleVolumes in Storagepool

Typische Gründe für Performance Probleme

• SAN Probleme wie Slow Draining Devices oder zu wenig SAN Buffer Credits für Kabellängen oder Anforderungen

• Backend Speicher zu wenig Leistung oder Monsterprozesse überlasten Speicher Backup von internen Flashdisks – hohe Schreibraten

• Oft Kombination aus SAN und Überlastungsproblem

• Lösung sind Ausbau (kostenintensiv) oder einfach nur Entzerren oder Limitieren über IO Governing. Eventuellsinnvolle Anpassungen in der Arbeitsreihenfolge

Basis ist Analyse und Problemisolierung Alle Caches zu mir!

Ein Volume belegt den WritecacheAndere Volumes bekommen Performanceprobleme

Reporting Funktionen• Standard Reports

• Kapazität

• Accounting

• Offene Schnittstelle

• Spezielle Reports auf Anfrage

• Reports über dynamische Excel Tabellen

• Automatisierbar – Einbindung in Intranet

• Integrierbar in System Management Umgebungen wie z.B. Nagios

Performance Report (Customized Report)

Host HBA SAN Übersicht (Customized Report)

Accounting FunktionenErweiterung der SVC Objekte in RichtungUnternehmen mit Accounting

Neue Betrachtungsebenen:Cost Center, Applikationsgruppen, Applikationen, Volume Gruppen

Topologie, Speicherverbrauch und Performance auf den Ebenen Cost Center, Applikationsgruppen, Applikationen und Volume Gruppen.

Detaillierte Performanceanalyse auf allen Ebenen

Kostenbezogene Betrachtung und Abrechnung über allen Ebenen

Reporting, Kosten und Preisanalyse

Reporting über Excel

BVQ Datenbestände werden über ODBC in ein Excel Spreadsheetgeladen und weiterverarbeitet

BVQ - Storage in Balance Monitoring, Accounting Service Level Management BVQ Vortrag BVQ...

Documents

Transcript of BVQ - Storage in Balance Monitoring, Accounting Service Level Management BVQ Vortrag BVQ...