Ruggero Luviè Tivoli Storage Client Technical Professional. La gestione del dato in ambienti Cloud

Transcript

1 Ruggero Luviè Tivoli Storage Client Technical Professional La gestione del dato in ambienti Cloud

2 Cloud Computing - NIST* Definition (*National Institute of Standards and Technology) Cloud computing is a model for enabling convenient, on-demand network access to a shared pool of configurable computing resources (e.g., networks, servers, storage, applications, and services) that can be rapidly provisioned and released with minimal management effort or service provider interaction

3 Cloud Storage Virtualizzato Standardizzato Risorse Storage sono virtualizzate da diversi arrays, vendors, datacenters consolidate ed accedute da qualsiasi luogo. Servizi Storage scelti da uno storage service catalog Migliore utilizzo degli investimenti Migliore produttività Automatizzato Sicuro Storage provisioning e selfservice L amministratore usa la automazione per allocare capacità dal catalogo. Flessibilità nel salvataggio e ripristino dei dati Supporto di piattaforme HW/SW eterogenee Data Reduction Maggiore velocità Maggiore disponibilità

4 Tivoli Storage Software Strategy Protezione dell Information Infrastructure TSM Suite for Unified Recovery & Retention File system, dati non strutturati, DB, , altre applicazioni Mobile, laptop, server, virtual server, cloud computing platform, etc Mobile office -> remote/small office -> data center Always on data protection Network Ottimizzazione, virtualizzazione e gestione dell infrastruttura SmartCloud Virtual Storage Center Server e virtual server Storage network Storage eterogeneo Always on storage infrastructure

5 Tivoli Storage Software Strategy Protezione dell Information Infrastructure TSM Suite for Unified Recovery & Retention File system, dati non strutturati, DB, , altre applicazioni Mobile, laptop, server, virtual server, cloud computing platform, etc Mobile office -> remote/small office -> data center Always on data protection Network Ottimizzazione, virtualizzazione e gestione dell infrastruttura SmartCloud Virtual Storage Center Server e virtual server Storage network Storage eterogeneo Always on storage infrastructure

6 Cosa è uno Storage hypervisor? Server hypervisor ha un connotato di valore condiviso Le risorse fisiche messe in pool sono accedute dalle macchine virtuali con un incremento dell utilizzo degli asset Le macchine virtuali sono mobili consentendo una maggiore flessibilità nella scelta hw Disponibilità di un set comune di funzionalità e di capacità di gestione centralizzata delle macchine virtuali indipendentemente dai server fisici che le ospitano riduzione dei costi e flessibilità! Sui sistemi Intel piattaforma di server virtualization (VMware vsphere) e gestione della virtualizzazione server (VMWare vcenter) Sui sistemi Power piattaforma di server virtualization (IBM PowerVM) e gestione della virtualizzazione server (IBM Director VMControl) Storage hypervisor è una modalità emergente di descrivere gli stessi elementi di valore in un contesto storage

7 Pool di risorse fisiche da vari array, vendor e datacenter Funzionalità comuni indipendentemente dalla classe di storage o vendor IBM SmartCloud Virtual Storage Center: caratteristiche generali Mobilità dei volumi di storage sulla base delle politiche di bilanciamento del carico senza interruzione del servizio IT Staff Storage Admins Mobile Users Users Gestione centralizzata per ottimizzare le attività dello staff nelle operazioni quotidiane Pay-per-use per le risorse storage gli utenti sono coscienti dell impatto dell utilizzo e delle scelte del livello di servizio SAN

8 IBM SmartCloud Virtual Storage Center SmartCloud Virtual Storage Center SAN SAN e Storage Resource Management Virtualizzazione esterna dello storage Gestione delle snapshot

9 IBM SmartCloud Virtual Storage Center: componenti SmartCloud Virtual Storage Center Abilita lo storage al cloud computing Facile da acquistare ed implementare Pricing Pay-as-you-go SAN Tivoli Storage Productivity Center Data, Disk, Fabric, Replication, Storage Analytics SAN Volume Controller Virtualization Metro/Global Mirror Flashcopy Tivoli Flashcopy Manager

10 IBM SmartCloud Virtual Storage Center Virtual Server Infrastructure Manage VMControl Smart Cloud Virtual Storage Center Midrange Storwize V7000 Storage Hypervisor Enterprise SAN Volume Controller Manage Tivoli Storage Productivity Center Piattaforma di virtualizzazione dello storage SAN Volume Controller Common device driver - iscsi o FC host attach Common capabilities I/O caching e cross site - cache coherency Thin provisioning Easy Tier automated tiering to Solid State - Disks Snapshot (FlashCopy) Mirroring (Sincrono ed Asincrono) Data mobility Migrazione dati trasparente tra array e tier diversi Snapshot e mirroring tra array e tier Piattaforma di gestione dello storage Tivoli Storage Productivity Center Manageability Gestione integrata - dell intera SAN Visibilità su status e relazioni nell infrastruttura storage Controllo di asset,,performance, utilizzo Replication Gestione dei servizi di replica e FlashCopy Provisioning Gestione semplificata del provisioning di risorse storage

11 IBM SmartCloud Virtual Storage Center: caratteristiche Ottimizza e migliora l utilizzo delle risorse storage Come? Consolidando le risorse storage di dischi diversi, di array diversi e con caratteristiche diverse (Tiers) Crea uno spazio storage cross-array che può essere espanso, ridotto, spostato senza le limitazioni imposte dal singolo box

12 IBM SmartCloud Virtual Storage Center: caratteristiche Standardizza e migliora le caratteristiche dello storage disponibile Come? Funzionalità a valore aggiunto fornite direttamente da VSC SLA (Service Level Agreement) incapsulato ai dati in un virtual volume Fornisce compressione, I/O caching, thin provisioning, automated tiering, application-integrated snapshot e mirroring Il servizio desiderato è fornito da VSC indipendentemente dalla piattaforma HW utilizzata

13 IBM SmartCloud Virtual Storage Center: caratteristiche Bilancia il carico di lavoro, gestisce la sostituzione dell Hw, migliora le performance del datacenter Come? I volumi sono spostati fra disk array senza interruzione di servizio: Spostamento, snapshot o mirror tra arrays All interno del datacenter o tra datacenters distanti fino a 300km Svincola da HW e da scelte organizzative. I volumi possono essere spostati per distribuire il carico di lavoro

14 IBM SmartCloud Virtual Storage Center: caratteristiche Fornisce lo strumento per semplificare le attività di gestione Come? Gestione centralizzata dell intera SAN e dei suoi dispositivi Visualizza performance della SAN status, capacità e di tutte le componenti Semplifica e guida nel provisioning delle risorse tramite: Wizard Workload profile

15 IBM SmartCloud Virtual Storage Center: caratteristiche Rende disponibile l infrastruttura storage ottimale per servizi Cloud ed ambienti server virtuali Come? Abilitando l infrastruttura storage al cloud: Storage service catalog Automated storage provisioning Pay-per-use Platform as a Service Infrastructure as a Service IBM SmartCloud Foundation Cloud providers

16 IBM SmartCloud Virtual Storage Center Ambienti storage Complessità di gestione Network components Storage components Servers Discovery Configuration Management Capacity Management Performance Management Reporting CMDB Automated Provisioning Chargeback Monitoring Datacenter Consolidation Risorse Budgets limitati Data Regulation Nuove Tecnologie

17 IBM SmartCloud Virtual Storage Center: funzionalità Discovery Nuovi dispositivi e status changes Raccolta informazioni di asset Capacity Raccolta informazioni di utilizzo Tipologia dati, maggiori utilizzatori, dati vecchi e/o duplicati etc SMI-S/CIM Native API SMI-S/CIM Inband Server: TPC Agent (SRA) VMware: Native API Performance Data Collection Raccolta performance data da storage systems Raccolta performance data da SAN switches Storage SAN Server

18 IBM SmartCloud Virtual Storage Center: funzionalità Configuration Management Raggruppa le risorse storage per applicazione, line of business o altro criterio Visibilità immediata della topologia con evidenza grafica delle modifiche Creazione semplicata dei volumi storage via wizard

19 IBM SmartCloud Virtual Storage Center: funzionalità Reporting I dati sono salvati su DB2 Utilizzo di Cognos per la creazione di report L astrazione dei dati (data model) abilita il reporting ad-hoc Out-of-the-box reporting Drill up/drill down per reporting e charting I report possono essere generati su base schedulata e distribuiti in vari formati

20 IBM SmartCloud Virtual Storage Center: funzionalità Scopre ed evidenzia le relazioni interne ad un ambiente virtualizzato Supporto alla virtualizzazione server: VMware ESX Basic information su VMs Mapping LUN - VM (incluso RDM) IBM AIX VIO Server Supporto alla virtualizzazione storage: IBM SAN Volume Controller IBM Storwize V7000 Anche su sistemi non IBM quali Hitachi USP External Disks Backend Storage Systems VMware vcenter Server SAN Storage

21 Piattaforma di gestione: Tivoli Storage Productivity Center Basata su GUI XIV Navigazione semplificata Velocità di accesso alle informazioni

22 Tivoli Storage Productivity Center views Storage Subsystem view

23 Tivoli Storage Productivity Center views Hypervisor view

24 Cloud Storage Virtualizzato Standardizzato Risorse Storage sono virtualizzate da diversi arrays, vendors, datacenters consolidate ed accedute da qualsiasi luogo. Servizi Storage scelti da uno storage service catalog Migliore utilizzo degli investimenti Migliore produttività Automatizzato Protezione dell Information Infrastructure Storage provisioning e selfservice Recovery L amministratore & Retention TSM Suite for Unified usa la automazione per File system, dati non strutturati, DB, , altre applicazioni allocare capacità dal catalogo. Sicuro Mobile, laptop, server, virtual server, cloud computing platform, etc Mobile office -> Flessibilità remote/small nel office salvataggio -> data center Always on data e protection ripristino dei dati Supporto di piattaforme HW/SW eterogenee Data Reduction Maggiore velocità Maggiore disponibilità

25 Tivoli Storage Software Strategy Protezione dell Information Infrastructure TSM Suite for Unified Recovery & Retention File system, dati non strutturati, DB, , altre applicazioni Mobile, laptop, server, virtual server, cloud computing platform, etc Mobile office -> remote/small office -> data center Always on data protection Network Ottimizzazione, virtualizzazione e gestione dell infrastruttura SmartCloud Virtual Storage Center Server e virtual server Storage network Storage eterogeneo Always on storage infrastructure

26 Obiettivi Salvare e proteggere le le applicazioni critiche ed i i file per consentire un recupero dei dati rapido ed automatico Stabilire politiche di diprotezione dei dati allineate con i i livelli di diservizio di didisponibilità delle applicazioni Inclusione di di analisi del recupero dei dati in in un piano completo di di disaster recovery Salvare copie di di backup in in una gerarchia di di storage più economico Gestire con semplicità backup e ripristino da disco e nastro da un unico punto di dicontrollo Protezione dei dati e gestione unificata del ripristino Assicurare la disponibilità dei dati e la continuità di business in modo efficiente Protezione delle applicazioni WAN LAN SAN Disaster Recovery IBM Tivoli Storage Manager Gestione gerarchica dello storage (HSM)

27 Tivoli Storage Manager: una soluzione consolidata e che guarda al futuro Tivoli Storage Manager aiuta, da quasi 20 anni, le aziende a proteggere, mantenere, archiviare ed assicurare la disponibilità dei propri asset più importanti: dati ed informazioni Soluzione comprensiva di Backup / Restore Archive / Retrieve Disaster Recovery HSM / ILM Application Protection Database Protection Virtual Server Protection Bare Machine Recovery Proof Points 1 soluzione di backup a disco 1 a fornire supporto per dischi e nastri 1 ad utilizzare hierarchical storage management per offline storage 1 ad offrire un approccio completamente incrementale per la riduzione delle finestre di backup Più di clienti Scalabilità, qualità del supporto* Focalizzato sulla riduzione dei dati dal 1993 * Source: 2012 Gartner MQ Enterprise Backup/Recovery sw

28 TSM for Unified Recovery & Retention TSM ha una soluzione per i vostri dati, quali che siano, quanti essi siano Database Filesystems Mail SAP Vmware Immagini Disk cache e poi nastro VTL parallel session Archiviazione per Long retention TSM deduplica Lan free a nastro Mail DB a nastro TSM Archive Tape VTL Disk Disk dedup Copia offsite Tape

29 Le VM hanno reso la gestione di dati e storage più complessa I dati continuano a crescere a ritmi inverosimili, in tutti i settori di industria La virtualizzazione dei server non riduce la quantità dei dati Quando un server è de-commissioned o spostato, cosa accade ai suoi dati e alla capacità storage che utilizzava? Come gestire i processi di gestione dei dati in ambienti virtuali? Backup / Restore Disaster Recovery Data Lifecycle Management

30 Il modello tradizionale di backup e restore inguest per gli ambienti virtuali Installazione di un agente di backup nel sistema operativo guest OS, come accade per i server fisici Realizzazione e gestione dei backup come nell ambiente fisico Svantaggio: installazione e gestione di un numero crescente di agenti di backup Svantaggio: impatto sulle risorse locali (processore, memoria, I/O) VMware ESX / ESXi Server Hypervisor Virtual Machines Ancora l approccio predominante Il client TSM fornisce il supporto di ambienti di virtualizzazione eterogenei Virtual Disk Volumes Server di backup Gerarchia di storage

31 Il nuovo modello di backup VMware con TSM for Virtual Environments Gestione Centralizzata Rimuove il requisito di un agente per singola VM guest Possibilità di dirottare il carico di lavoro del backup ad uno o piu vstorage backup server utilizzando VMware's vstorage APIs for Data Protection Discovery automatica e backup di nuove macchine virtuali Disponibilità di un plug-in TSM all interno del vcenter Incremental Block level backup sfruttando Changed Block Tracking di VMware Flessibilità nel ripristino da uno stesso image-level backup: Full VM Volume Granular file level recoveries B/A Client VMware ESX / ESXi Server hypervisor Virtual Machines vstorage API(VADP) DP for VMware Recovery Agent TSM API TSM Backup Server Virtual Disk Volumes Backup Server vstorage Backup Server può essere una guest machine

32 TSM for Virtual Environment Modello ottimizzato per il backup e restore degli ambienti virtuali

33 Tivoli Storage Manager for Virtual Environments v 6.4 Metodologia di backup Full iniziale + incremental forever (CBT) Schedulazione dei backup Una schedulazione per backup incremental forever Metodologia di restore Operazioni di restore Retention delle versioni dei file Recupero di spazio da blocchi salvati Entità gestite (domain.vmfull) Numero di processi di backup per istanza di data mover Skip backup di singoli vmdks Numero di istanze di data mover per fare il backup di una entità VMware Restore required blocks only once Full VM restore Volume instant restore File-level restore Applicata ad ogni versione di backup Il backup incrementale consente il consolidamento dei bloccati utilizzati e la rimozione di quelli non utilizzati Host cluster, host, vm folder, datastore, virtual machine (wildcard vm name) Processi multipli eseguiti in parallelo, è possibile un tuning per controllare I processi a livello di singolo hosto o operazione datastore Sì Approaching single instance Riduzione Riduzione del del tempo tempo di di backup backup Semplificazione della schedulazione delle operazioni di backup Semplificazione della schedulazione delle operazioni di backup Riduzione delle risorse relative a host/vstorage servers, network, storage pool Riduzione delle risorse relative a host/vstorage servers, network, storage pool

34 TSM for Virtual Environments: varie modalità operative Administrator launches BA Client to restore VM from vstorage backupserver and selects recovery point BA Client will coordinate the restore with ESX server TSM Server

35 TSM for Virtual Environments: varie modalità operative User lunches DP for VE Restore Agent to mount partition Enter TSM node name Select VM, recovery point and disk Select and mount a volume TSM Server TSM API Volume is presented to local system ( if off-host mount make volume available via CIFS or iscsi ) Only required data is restored, there is no need to recover the entire VMDK User copies files ( files restored from TSM storage pool )

36 TSM for Virtual Environments: varie modalità operative Recovery console must be deployed inside guest TSM Server TSM API User lunches DP for VE Authenticate with TSM server Select VM, recovery point and non-os volume Volume restore background process initiated Data restored on-demand based on access Volume is usable by application while background restore is processing

37 TSM for Virtual Environments: vcenter plug in

38 TSM for Virtual Environments: vcenter plug in Tree View Selection vcenter Server Hosts Datacenter Host Virtual Machine None Filter Name Type Last Ran New Delete Status Clear Information Pane Backup Details vsphere Client

39 Altre novità TSM v6.4 (disponibile dal 16 novembre!!!) Supporto avanzato di NetApp Supporto LDAP Monitoring e reporting FlashCopy Manager supporto Global/Metro Mirror TSM for ERP supporto SAP Hana

40 Supporto avanzato NetApp / IBM Nseries Backup più rapido di grandi volumi NetApp direttamente verso il media secondario grazie all integrazione con SnapMirror-to- Tape (NDMP) Supporto di NetApp SNAPDIFF vfiler in ONTAP NetApp SnapDiff miglioramenti Supporto Snapmirror i clienti possono dirottare il backup TSM sul filer NetApp di DR IBM System Storage N6000

41 Integrazione con LDAP/Directory aziendali Le password dei client TSM e di amministrazione non devono più essere salvate all interno del datatbase TSM. Possibilità di personalizzazione (flessibiltà e granularità). Le password dei client TSM e di amministrazione possono essere salvate in un repository esterno. Le regole per le password sono definite dal directory server esterno. TSM Nodes and Admins TSM Server Vantaggi: Le password e le utenze sono gestite da una piattaforma aziendale di gestione delle identità Conformità alle politiche di sicurezza aziendali e più facile amministrazione dell ambiente TSM

42 Monitoring e reporting integrato per la visibilità e controllo dell ambiente backup Nuovi report su status e trend dell ambiente di backup Incluso Incluso in in TSM TSM no no additional additional licensing licensing Dashboard Dashboard personalizzabile personalizzabile Client backup Activity Help project my future storage requirements Report Report personalizzabili personalizzabili Client Restore Activity Server Activity

43 FlashCopy Manager v3.2 integrazione con Global Mirror / Metro Mirror Supporto per sistemi UNIX/Linux di copie consistenti da target di remote mirror su SVC, Storwize V7000 e XIV Fornisce anche nel sito di DR funzionalità simili a quelle già disponibili nel sito primario Consente la gestione di FlashCopy / Snapshot nel sito remoto sfruttando remote mirror copy Production Server FCM Failover Server FCM Backup host FCM Vantaggi Dirottamento del carico dalla control unit dello storage di produzione Consolidamento di molteplici backup (singoli o da più siti) verso il sito di DR Il backup può essere usato: per restore in scenari di DR per dirottare il backup verso TSM al sito di DR TSM Server Storage Hierarchy

44 TSM for ERP supporto SAP HANA SAP HANA è un database in-memory (per consolidare i carichi di lavoro di tipo transazionale e analitico) Le funzionalità di TSM for ERP sono disponibili anche per SAP HANA: Backup online: full, incrementale (log), differenziale Gestione di tutti i file come una entità logica Opzioni di recovery a vario livello: Db, table space, data file Single step backup Single step recovery dell ultimo backup verso HANA home directory Sessioni parallele verso TSM Molteplici percorsi di rete

45 La strada verso un Cloud Storage Standardizzare ed automatizzare Consolidare Ridurre la complessità dell infrastruttura Riduzione dei requirement di staff e skill Gestire meglio minori risorse Abbassare i costi operativi Virtualizzare Rimuovere le limitazioni fisiche Ottimizzare l utilizzo dell hardware disponibile Ridurre i costi hardware Semplificare gestione e provisioning Standardizzare i servizi Ridurre i cicli di provisioning Aumentare la scalabilità Aumentare la flessibilità dell infrastruttura

46 Questions

47

48 Questions BACKUP SLIDES

49 IBM SmartCloud Virtual Storage Center: funzionalità Configuration Management VSC ha una visione globale della SAN, per cui può consolidare le operazioni di provisioning e verificarne la congruenza Operazioni di provisioning storage disponibili: Assegnazione di porte agli host Assegnazione di volumi alle porte dei sottosistemi Creazione/assegnazione a zone della SAN Definizione del livello di RAID Creazione/cancellazione di volumi L amministratore può allocare direttamente storage, fare zoning del fabric ed assignare le porte agli host

50 IBM SmartCloud Virtual Storage Center: funzionalità Performance Management Raccolti e storicizzati dati di performance per Array e Fabric Raccolta automatizzata e schedulabile Intervallo minimo di raccolta 5 minuti Aggregazione automatica in medie orarie e giornaliere Retention personalizzabile per media aggregata

51 IBM SmartCloud Virtual Storage Center: funzionalità Performance Management Controllo automatizzato tramite policy Alerting personalizzato: Trigger alerts su livelli critical/warning Soppressione degli alert in caso di condizioni ripetitive Soppressione degli alert in caso di ripetizioni insufficienti Trigger condition Esecuzione di scripts automatizzata dalla ricezione di alert

52 IBM SmartCloud Virtual Storage Center: funzionalità Performance Management Storage Optimizer Ridistribuzione ottimale del workload fra specifici storage pools, o ridistribuzione della capacità in caso di sostituzione dell Hardware Fra istemi diversi: si Tier aware: no Fra istemi diversi : no Tier aware: yes Easy Tier Identifica/muove cache unfriendly workload su SSDs Storage Tiering Reports / Tiered Storage Optimizer Verifica se un pool raggiunge la max capacità teorica e identifica il che puo essere spostato Fra istemi diversi : yes Tier aware: yes *)

53 Tivoli Storage Manager e la riduzione dei dati Funzionalità di riduzione dei dati: Backup Progressive incremental Compressione Deduplica integrata: Server side Client side

54 Funzionalità di riduzione dei dati Progressive incremental backup (dati non strutturati) Un solo full backup iniziale, da quel momento in poi solo incremental backup Il catalogo TSM registra gli oggetti salvati ed identifica in combinazione con il TSM client quali oggetti debbano essere ri-salvati

55 Compressione Il client TSM supporta nativamente la compressione dei dati che vengono ridotti prima della loro trasmissione Deduplica TSM supporta nativamente la deduplica a livello Server ed anche client La deduplica dei dati è disponibile per storage pool tipo file = disco Utilizzato hashing SHA-1 Funzionalità di riduzione dei dati La deduplica a livello client lavora in combinazione con la deduplica a licello server N.B. Progressive incremental backup elimina il problema alla radice

56 IBM Tivoli Monitoring for TSM TSM: monitoring e reporting Provides real-time monitoring and historical reports about TSM servers and clients Provides workspaces to monitor real-time information Monitors server status, database size, agent status, client node status, scheduled events, server IDs, and so on, using the monitoring workspaces The agent queries and formats data to be presented in the following ways: As workspaces using the Tivoli Enterprise Portal As reports using Tivoli Data Warehouse & the reporting portion of Tivoli Monitoring for TSM

57 TSM: monitoring e reporting IBM Tivoli Common Reporting for TSM: data collected by ITM warehouse server is made available to Tivoli Common Reporting components Status reports: Client activity status Client backup currency Client backup status Client schedule status Client storage pool usage summary Current client occupancy summary Current storage pool summary Highest storage space usage Server schedule status Yesterday's missed and failed client schedules Trending Reports: Client activity success rate Client schedule success rate Server database growth trends Server storage growth trends

58 Application System Solution Overview FlashCopy Manager Application Data Snapshot Backup Snapshot Restore Local Snapshot Versions For IBM Storage With Optional SVC XIV TSM Backup DS8000 Integration Storwize V7000 DS 3/4/5* NetApp Other * Online, Online, near near instant instant snapshot backups with with minimal performance impact impact High High performance, near near instant instant restore restore capability Integrated with with IBM IBM Storage Hardware Simplified deployment *VSS Integration 58