© 2014 IBM Corporation Storage Management mit IBM Tivoli Storage Productivity Center Version 5.2...

© 2014 IBM Corporation

Storage Management mitIBM Tivoli Storage Productivity Center Version 5.2

Markus Standau, IBM


Häufiges Problem: Einzelkomponenten Management

Element Manager je Komponente/-typ– der Einsatz ist komponenten- bzw. hersteller-spezifisch– in der Regel zwar komplette Administration bis zur “letzten Schraube”,– aber nur isolierte Sicht auf die Komponente– unterschiedliche Oberflächen bzgl. Aussehen und Arbeitsweise– je größer das Environment, desto schwieriger der Überblick– historische Auswertungen (Kapazitäten/Performance/Fehler)

rudimentär oder fehlen

Beispiele für Element Manager– IBM DS8000, XIV, SVC/V7000 Manager– Brocade Network Advisor oder Web-based Standard Administration– VMware vCenter– Storage 3rd party: z.B. HDS Device Manager, EMC Solutions Enabler, HP Command

View

2

Storage components

Network components

Servers


Tivoli Storage Productivity Center

Zentrales, übergreifendes Storage Management der gesamten Infrastruktur – ‘Single Point of Control’ für die tägl. Storage Administrations Aufgaben– Disk, NAS*), Fabric, Server und Replication Management Services– IBM und non-IBM Device Management

‘Single Data Repository’ der gesamten Storage Infrastruktur für Monitoring, Reporting, Analyse und Management

zentraler Management Server mit– Web Oberfläche– DB2 Datenbank– IBM Cognos BI Reporting

*) NAS ist eingeschränkt, die meisten Funktionen sind für IBM Storwize V7000 Unified oder IBM SONAS verfügbar, und nur teilweise für non-IBM Systeme

3

Powered byPowered by

© 2014 IBM Corporation4

Modernes intuitives Web-based GUI


ODBC/JDBC und CLI

Architektur - Übersicht

5

Active DirectoryLDAP

Tivoli Applications

Application Server

SAN Fabric

IBM Storage Generic Storage

TPC Web GUI

Cognos

DS8000 XIV

• SmartCloud Cost Manager• SmartCloud Storage Access• SmartCloud Orchestrator• Tivoli Application Dependency

Discovery Manager• Tivoli Monitoring• …

TPC Server

Powered byPowered by

Proxy CIM-Agent

SVC/Storwize


Services: Bereitstellung, Überwachung und Optimierung

“Single Point of Control” für die täglichen Storage Administrationsaufgaben Daten sammeln und anzeigen ➜ online Dokumentation

• Status, Asset, Capacity, Topology und Performance• Storage, Fabric, Server und VMware

IBM Cognos für Batch/Custom Reporting mit eMail Funktion Replication Management

TPC Select

Basis Dienste


Basis: Storage Management Bereiche mit TPC V5.2 abgedeckt

Asset/Kapazitäts Management– Storage Asset Datenerhebung: Disk, Fabric, Server, Hypervisor– Support für heterogene Disk-Systeme (IBM, EMC, HDS, HP, NetApp, …)– Heterogener Fabric Support (Brocade, Cisco, Qlogic)– Reporting, Überwachung von Regeln, automatisierte Aktionen

Fabric Management– SAN Topologie Discovery, Darstellung und Management– Event Reporting mit Weiterleitung an zentrale Konsole – Fabric/Switch Performance- und Error Counter Reporting– Switch-Zoning Management

Disk Management– Disk Subsystem Management incl. Einbindung Elementmanager– Provisionierung von Disk Volumes – IBM und heterogener Speicher– Performance Management – IBM und heterogener Speicher – erweiterte Performance Analyse – IBM DS8000/XIV/SVC/V7000– Schwellwert-Monitoring / Engpass-Analyse / Event Reporting

8

Storage components

Network components

Servers

TPC Select SmartCloud Virtual Storage Center


Management von Speicherkapazitäten

Kapazitäten werden für folgende Objekte angezeigt:

– Storage System– Servers– Hypervisors

Capacity Bars

Weitere details können in TPC Reporting betrachtet werden, z.B.

– Beliebige Zeiträume– Zusätzliche Metriken

Hier besteht zudem die Möglichkeit:– Custom Reports zu erstellen– Automatisierte Reports zu erstellen

9

SmartCloud Virtual Storage Center TPC Select

Charts

Capacity barsOverview: 30 days

Details: any time range


Basis: Storage Management Bereiche mit TPC V5.2 abgedeckt

Replication Management– Administration / Operating für

IBM Advanced Copy Services (DS8000, SVC, V7000 & XIV)

– Synchrone und Asynchrone Replication – Zentrale Kontrolle für Point-in-time und

Remote Volume Replication Services.– Automatische Quelle-Ziel Zuordnung– Device-übergreifende Consistency Groups– FlashCopy und Global/Metro Mirror Support– Disaster Recovery Mgmt. incl. Failback Funktion

11



Basis: Virtualization Support

TPC erkennt und zeigt die logischen Zusammenhänge in virtualisierten Umgebungen.

Server Virtualisierung– VMware ESX/vCenter (API)

• Informationen zu ESX-Servern und VMs• LUN to ESX/VM mapping (incl. Support für RDM)• vCenter TPC Plug-in• VASA Provider

– IBM AIX VIO Server (Toleration Mode)

12

External Disks

Backend Storage Systems

Storage Virtualisierung supported– IBM SAN Volume Controller– IBM Storwize V7000/V5000/V3700– auch non-IBM Systeme, z.B. Hitachi

USP/VSP

VMw

are

vCen

ter

SAN Storage




WeiterleitungE-Mail, SNMP,Skripte

Service Überwachung… know what‘s going on Schwellwerte zu Performance,

Fehlerraten und Kapazität Verfügbarkeit von Volumes, Pools,

Storage Systemen, Pfaden, …

Service Element Status Polling

&CIM Indications

(no SNMP Traps)

TPC Select

Alarmierung




TPC Select

Basis Dienste



Service KatalogService Bereitstellung

Standardisierung Service Klassen

• Eigenschaften• Storage Pools Tiers• Zugriffsreichte & Freigabesystem

Capacity PoolsGruppierungsmöglichkeit, z.B. Kunden, Projekte, Standorte, …

Service Katalog

SmartCloud Virtual Storage Center

WeiterleitungE-Mail, SNMP,Skripte

Service Überwachung… know what‘s going on Schwellwerte zu Performance,

Fehlerraten und Kapazität Verfügbarkeit von Volumes, Pools,

Storage Systemen, Pfaden, …

Service Element Status Polling

&CIM Indications

(no SNMP Traps)

TPC Select

Alarmierung




TPC Select

Basis Dienste


Service Bereitstellung - Definitionen

16



Service Bereitstellung - Verwendung

17



Service Bereitstellung - Resultat

18



Software Defined Cloud Storage mit TPC

20

OpenStack

VMware

Storage Cloud

TPC enables heterogeneous storage for Software Defined Storage Clouds

TPC


Smart Cloud Storage Access 1.2

IBM hat SmartCloud Storage Access (SCSA) um Block Speicher Funktionen erweitert, so dass jetzt auch dort self-service provisioning möglich ist ( Multi Tenancy)➜

SmartCloud Storage Access erhebt auch Daten bzgl. Speicherverbrauch für Chargeback und Capacity Management Zwecke.

SCSA bietet Independent Software Vendor (ISV) eine REST-API zum Einsatz von SCSA als Middelware in eigenen Produkten

21

IBM SAN Volume Controller Storwize V7000 Unified, SONAS, XIV

AuthenticationServer

End user

IBM SmartCloud Storage Access

Storage admin Department admin

Tivoli Storage

Productivity Center

or Virtual

Storage Center


Performance ManagementPerformance Reporting

TPC Select

Cognos… look what‘s going on1. Durch vordefinierten Reports in Web GUI oder Cognos 2. Interaktive reporting Funktionen:

• Mehrere Metriken• Tabellen oder Chart • Parallele Fenster zur komfortablen Analyse• Drill down zu verknüpften Komponenten

3. Custom Reporting (Cognos, SQL, Excel)


Auslastung in Bezug auf Performance

24


Spalte in jeder Tabelle verfügbar, die Informationen bzgl. StoragePoole enthält


Scenario: Server Performance

25




26


New in 5.2.1: Most Active Pools

For ESS/DS, SVC/Storwize, and XIV



27




28




29

Tabular View Sync Time Export to csv Open in new window




30




31


Tip: Browser Bookmarks


Performance Management

Proaktive Performance Überwachung TPC Select… notice something is not going as intended

Service Management auf Komponenten Ebene (Pools, Ports, …)• Performance Schwellwerte• Error Schwellwerte

Constraint violation reporting

Performance Reporting TPC Select





Proaktive Performance Überwachung

33




34




35



Performance Management


RecommendationCurrent measured workload

Proaktive Performance Überwachung TPC Select

New or additional workload

… notice something is not going as intended Service Management auf Komponenten Ebene (Pools, Ports, …)

• Performance Schwellwerte• Error Schwellwerte

Constraint violation reporting

… take some actions (or add more hardware) Storage Optimizer a kind of re-distribute storage volume➜ SAN Planner profile driven volume provisioning➜ Tiered Storage Optimizer increase efficiency by finding the right tier ➜

for workload of volumes

Performance Management Funktionen

Performance Reporting TPC Select




Old names


End-to-End Management mit IBM SAN Volume ControllerIBM SmartCloud Virtual Storage Center

Ideen zur Volume und Pool Optimierung– Tier Analyse: Den Besten Platz

für Volumes finden– Balance Pools: Die Resourcen (Pools) möglichst

gleichmäßig nutzen

Transformations– Einstelllungen ändern für mehrere Volumes

gleichzeitig– direkt aus dem Kontext (Server, Hypervisor,

Storage Panel) heraus, so ist sichergestellt die richtigen Volumes zu verwenden

– zur Kontrolle kann auch noch mal vorher die Performance betrachtet werden

– Mit Pause/Resume und Schedule Möglichkeiten

37

Storage Optimizer

Tier

ed S

tora

ge

Opt

imiz

er

Tier 2

Tier 1

Analyze Tiering

Balance Pools



Tiering Analysis Balancing TransformationAre Capacity Pools boundaries enforced

User can choose to enable enforcement

User can choose to enable enforcement

User manually selects destination pool

Are Service Classes observed

recommendations will never violate Service Class

recommendations will never violate Service Class

Violations will trigger a warning, but task continues

Handling of Co-location (groups of volumes from a server)

When enabled, recommendations based on the most active volume

When enabled, recommendations based on the most active volume, even if that may cause non-optimal balancing

User manually selects volumes for transformation

Capacity Reservations

• Analysis based on unreserved capacity

• Recommendations scheduled to be executed later will reserve capacity





Master Plan – Collaboration with Cloud Configuration



… identify servers based on LUN masking Topologie Discovery und Status Monitoring Datapath Viewer Event Weiterleitung an zentrale Konsole

• Tivoli Enterprise Console / OMNIbus und/oder SNMP Manager

Switch Performance und Errors• Aufzeichnung und Reporting

Switch-Zoning - Administration

Weitere Funktionen

39

Fabric Management TPC Select


Beispiel: Fabric Overview

40



Data Path View

41

End-to-end Sicht zur Analyse von

Auswirkungen unterschiedlicher

Probleme und betroffenen

Komponenten

Reduziert die Zeit bei der Analyse von

Ursachen



VMware Integration

43

Information available without Storage Resource Agent in VM Information über virtuelle Maschinen

• OS Type, Processor, RAM• Config files, virtual disk files (VMDK), Datastores

ESX Server Informationen• Disks, Datastores, HBAs• Cluster

• TPC Reporting

TPC SelectBasic VMware information in TPC


VMware Datastore Connection Walkthrough

44

Datastore




Datastore




Datastore

Similar capability to drill through to the switch and switch port



Storage Provisioning aus VMware heraus

49

Aufruf der TPC Funktionen zu Provisionierung im Vmware vCenter Web Client1. vSphere Web Client starten2. 'Hosts and Clusters‘ aus dem Inventar auswählen3. Hypervisor auswählen, der neuen Speicher erhalten soll4. 'Actions' Menü aufrufen. Der vCenter Client läd die TPC Erweiterung, und nach einem

kurzen Augenblick wird der Menüpunkt 'All TPC Actions‘ angezeigt

File Shares: all TPC EditionsBlock Volumes: VSC only



… identify servers based on LUN masking Alarme für Performance-, Error- und Kapazitäts-

Schwellwerte

Verfügbarkeit von Volumes, Pools, Storage Systems, Pfaden, …

TPC Service Classes werden als System Capabilities angezeigt, und können in VM Storage Profiles verwendet werden

VMware Integration

50

vSphere API for Storage Awareness (VASA) Provider

VMware vCenter Web Client ExtensionFunctions for VMware administrators Anzeige von Storage Informationen die TPC gesamelt hat

• Storage Mapping: End-to-End from storage volume to VM• Storage details like fabric connections, pools, volumes, …• Performance charts: Charts using data collected by TPC

Provisioning unter Verwendung des TPC Service Katalogs:• Block Volume• File Shares

Start der TPC Web-GUI direkt aus dem the vSphere Web Client

TPC Select

TPC Select

Deployment from TPC since 5.2.1

This is probably the most important use of VASA


Reports mit Information die aus TPC stammen

51

Context Entity Report location Source ESX Hosts FC HBA Manage → Storage → Storage

Adapters →<Adapter> →Fabric Connections

TPC Extension

ESX Hosts Volumes Monitor → Performance →Storage System Metrics

TPC Extension

Virtual Machines Virtual Disks Monitor → StorageMapping

TPC Extension

ESX Hosts• Datastores• SCSI Volumes• NAS Mounts

Monitor → Storage Reports →• Datastores• SCSI Volumes (LUNs)• NAS Mounts

TPC VASA Provider



… identify servers based on LUN masking Definition von Agentless Server

• Storage Systeme Host Connection• Fabric entities und discovered Servers• Manuell oder per File Import (z.B. aus anderen Asset Systemen)

Agentless Server sind wie Server mit Agents in TPC integriert,einzige Ausnahme: TPC hat keine Informationen von den Servern wieFilesysteme, freier/belegter Platz, HBA Firmware Stand

Verwendung z.B. beim Performance Troubleshouting, Topologie Darstellungen, Provisionierung, …

Neue Konzepte in TPC 5.2

53

Agentless Server TPC Select


Agentless Server

54


Define servers based on:– WWPNs only

Can be created from – Storage system host connections– Unknown fabric entities– Discovered servers– Manual– File import

Why it matters Think about what you would need do if someone

complains about a servers performance or capacity … see next pages


Agentless Server

55



Agentless Server

56



Agentless Server

57



Agentless Server

58



Agentless Server

59



Agentless Server

60


Without SRAs this kind of information is not available

Now you see, thatVasily also uses storage

from APM00064204976


TPC Reporting

61

TPC Reporting

61

Was bietet es? Erweiterte Reporting und Analysefunktionen

ohne zusätzliche Kosten TPC stellt das Datenmodell und vordefinierte Reports bereit.

• Data Abstraction (Datenmodell) ermöglicht Ad-Hoc Reporting • Anpassungen und Erstellung neuer Reports

Funktionen:• Scheduled Reports (eMail, PDF, Excel, …)• Drill up/down• Nach (optionaler) Installation keinerlei zusätzliche Software nötig

Positionierung: Für die Erstellung regelmäßiger immer gleichartiger Reports (Batch Reporting) Verwendung von ganz speziellen Reports, die nicht in der Web-based GUI enthalten sind.

Custom ReportingWas für Tools gibt es dabei? Query Studio

• Drag’N’drop Erstellung von Report• Gedacht für simple Ad-Hoc Reporting (z.B. max 1 Chart)

Report Studio• Drag’N’drop Erstellung von Report• SQL Support• Support für CSV input Dateien• Anpassungen an Pre-defined Reports (Logos, Farben, …)• Wesentlich mächtiger aber auch komplexer

Weitere Tools: Cognos Mobile, Event Studio, …

TPC Select

TPC Select


TPC Reporting

62

TPC Reporting

62

Was bietet es? Erweiterte Reporting und Analysefunktionen

ohne zusätzliche Kosten TPC stellt das Datenmodell und vordefinierte Reports bereit.

• Data Abstraction (Datenmodell) ermöglicht Ad-Hoc Reporting • Anpassungen und Erstellung neuer Reports

Funktionen:• Scheduled Reports (eMail, PDF, Excel, …)• Drill up/down• Nach (optionaler) Installation keinerlei zusätzliche Software nötig

Positionierung: Für die Erstellung regelmäßiger immer gleichartiger Reports (Batch Reporting) Verwendung von ganz speziellen Reports, die nicht in der Web-based GUI enthalten sind.

TPC Select


Mitgelieferte Reportsin TPC 5.2.0.0

64



Beispiele: Vergleich von Performance über zwei Zeiträume

65



Enhancements in TPC 5.2.1

What it is Why it matters

Performance & Troubleshooting

• New dashboard pods (Most active pools)

• New fabric alerts for slow draining devices

• New fabric metrics

Optimization & BalancingAlgorithm improvement: now based on a Activity Score and deviation, no configuration required

Optimization & Balancing Tighter integration into Cloud Provisioning concept of Service Classes

Provisioning

• vDisk Mirror support• Reservation support• Co-location of volumes• Pending tasks

TPC OpenStack Block Storage Driver

VMware vCenter Web Client Extention

Specific Cinder driver to use TPC for provisioning, lifecycle management and exposure for attachment

Automatic deployment of plugin, when adding the hypervisor to TPC, and multipath settings for provisioning

Perf

orm

ance

M

anag

emen

tSe

rvic

e M

anag

emen

tIn

tegr

atio

n4.2.12011-06

4.2.22011-11

5.x5.12012-06

4.22010-08

5.22013-10

5.2.12014-04

• Candidate Storage• Multiple Service

Classes


Further enhancements in TPC 5.2.1

68

What it is Why it matters

Add/manage devices in new web GUI

Now all devices are added using the Web-based GUI

Storage Resource Agent Deployment Necessity to use legacy GUI further reduced.

TPC System Management

Administration and monitoring of TPC as an application now in the Web-based GUI, Functions include: view component status, log download, tracing, database growth

TPC Settings

Necessity to use legacy GUI further reduced: Base Alert Notification setup

Simplification: History Retention settings

Usa

bilit

yM

anag

emen

t

IBM Knowledge Center: http://www-01.ibm.com/support/knowledgecenter/SSNE44_5.2.1/com.ibm.tpc_V521.doc/fqz0_r_whats_new_release_5.2.1.html

http://www-01.ibm.com/support/knowledgecenter/SSNE44_5.2.1/com.ibm.tpc_V521.doc/fqz0_r_whats_new_release_5.2.1.html

http://www-01.ibm.com/support/knowledgecenter/SSNE44_5.2.1/com.ibm.tpc_V521.doc/fqz0_r_whats_new_release_5.2.1.html


VSC for Storwize FamilyMust run on Storwize V7000 or V5000 virtualization engines (hardware).NOTE:

• This license does not replace the need to purchase the Storwize base virtualization license (5639-VM7) with every Storwize enclosure

• This license must be purchased for every (internal and external*) storage enclosure

Single per enclosure license for all internal and external* storage enclosures to include: Storwize V7.1 External Virtualization Storwize V7.1 FlashCopy (in base license) Storwize V7.1 Remote Mirroring TPC V5.2 FlashCopy Manager V4.1 Storage Analytics Engine

No limit to the number of enclosures this can be applied to.

VSC EntryMust run on SVC 2145 virtualization engines (hardware).

Single per TiB license to include: SVC V7.1 Virtualization SVC V7.1 FlashCopy SVC V7.1 Remote Mirroring TPC v5.2 FlashCopy Manager V4.1 Storage Analytics Engine

Limited to 250 TiB’s of managed capacity and 2 I/O groups (2 pairs of SVC nodes)

Neue Lizenzen seit 28. Februar 2014

71

Announcement Letter: http://www-01.ibm.com/common/ssi/cgi-bin/ssialias?infotype=an&subtype=ca&appname=gpateam&supplier=877&letternum=ENUSZP14-0092

http://www-01.ibm.com/common/ssi/cgi-bin/ssialias?infotype=an&subtype=ca&appname=gpateam&supplier=877&letternum=ENUSZP14-0092

http://www-01.ibm.com/common/ssi/cgi-bin/ssialias?infotype=an&subtype=ca&appname=gpateam&supplier=877&letternum=ENUSZP14-0092


Mehrwerte Tivoli Storage Productivity Center V5.2

Zentrales, übergreifendes Storage Management der gesamten Infrastruktur – ‘Single Point of Control’ für die tägl. Storage Administrations-Aufgaben– Support für Storagesysteme, Fabrics, Server, Server- und Storagevirtualisierung– einheitliche zusammenhängende Darstellung der Infrastruktur (end-to-end)– immer aktualisiertes Dokumentationssystem – Intuitives WebGUI für alle wesentlichen Aufgaben– historische Performance-Daten Sammlung/Kalkulation und Analyse– fortschrittliche Reporting-Technologie (Cognos) ; erweitertes TPC Datenmodel

-- eigene Reports, periodisch per Schedule

TPC-VSC FunktionenStorage Servicemanagement und Optimierung

• zielgerechtes Provisioning• Tiering Analyse + Plan-Ausführung• Pool Balancing (Analyse + Ausführung)• Einsparungen: Storage Systeme + Admin. Aufwände

72


IBM Confidential until Announcement

75

http://www.ibm.com/developerworks/servicemanagement/sm/tpc/development.html

Online technical community Bridges the gap between our

clients, partners and development teams

We are increasing our focus on transparent development

not




Request For Enhancement

Requests for Enhancement (RFE) Community is a website, where everyone can contribute with ideas how to enhance a product, or vote for ideas that others have already submitted

Direct communication between IBM product management, architects and developers is possible

You can submit, browse, vote and comment on other ideas Also you can group RFEs into watchlists so that you can easily keep track

http://www.ibm.com/developerworks/rfe/

Liste der Tivoli Storage Produkte in RFE:

IBM System Storage Archive Manager, Tivoli Advanced Audit for DFSMShsm, Tivoli Advanced Backup and Recovery for z/OS, Tivoli Advanced Catalog Management for z/OS, Tivoli Advanced Reporting for DFSMShsm, Tivoli FlashCopy Manager, Tivoli Storage Manager Family, Tivoli Storage Manager FastBack, Tivoli Storage Optimizer for z/OS, Tivoli Storage Productivity Center Family, IBM System Storage SAN Volume Controler und IBM Storwize V7000

https://www.ibm.com/developerworks/rfe/




IBM wants your inputParticipate in our Tivoli Storage Beta Programs

Influence designs and product direction Collaborate with experts and other customers Interact directly with product teams Access to early code Evaluate new capabilities Education from IBM experts Support directly from developers Opportunity to be an IBM reference customer

77

Get engaged, contact:Markus Standau [email protected]


IBM Deutschland GmbHMarkus StandauGottlieb-Daimler-Str. 1268165 Mannheim

Mobile: +49 7034 2742 088eMail: [email protected]

© 2014 IBM Corporation Storage Management mit IBM Tivoli Storage Productivity Center Version 5.2...

Documents

Transcript of © 2014 IBM Corporation Storage Management mit IBM Tivoli Storage Productivity Center Version 5.2...