HP datová úložiště virtualizace konsolidace zálohování archivace Jindra Velík HP září 2007 2006 Hewlett-Packard Development Company, L.P. The information contained herein is subject to change without notice
pokud se věci vyvíjí příliš příznivě, pak jste pravděpodobně něco přehlédli 10/26/2007 2
Co řeší většina IT manažerů? mají heterogenní serverové / storage prostředí : uvědomují si potřebu konsolidovat servery / storage optimální ukládání dat, zálohování, archivace : úspora nákladů na storage nedostatek kvalifikovaných pracovníků : software pro management, support od dodavatelů nepřetržitý provoz aplikací : potřeba funkcí pro Business Continuity a Disaster Recovery ale především jsou nuceni šetřit náklady 10/26/2007 3
Jak to všechno lze řešit? výběr vhodné technologie volit datové úložiště podle významu dat volit reálnou dimenzi výkonnosti serverů / storage volit odpovídající úroveň podpory konsolidace storage servery + platformy aplikace virtualizace 10/26/2007 4
Technologie pro různé úrovně Business Continuity & Availability Data loss ( Recovery Point Objective ).RPO poslední tansakce minuty hodiny dny Increased availability Tape Mission critical support services Disk to Disk Virtual Tape Mission critical support services Mirrors/Snap/Clones Near Continuous Data Protection (Near CDP) Continuous Data Protection (CDP) dny hodiny minuty sekundy Recall / Recovery Time Objective... RTO Server Clusters + Storage Clusters Remote Mirrors Remote Snaps/Clones okamžitě náklady 10/26/2007 5 vysoké nízké
výběr vhodné technologie konsolidace virtualizace volit datové úložiště podle významu dat volit reálnou dimenzi výkonnosti serverů / storage volit odpovídající úroveň podpory 10/26/2007 6
Význam informace v čase význam provozní účetnictví vyhledání důkazů opětné použití pro historické účely čas po pořízení Zdroj: Jan Möller, Ministery of Transport, NL 10/26/2007 7
Data Lifecycle Management uložení aktuálních dat provozní data na kvalitní storage HSM automatická migrace dat na storage odpovídající jejich aktuálnímu významu zálohování ochrana dat proti ztrátě / porušení cíl je obnova dat po incidentu archivace dlouhodobé uložení dat pro legislativní / historické účely aktivní archivace = využití archivních dat pro současný business 10/26/2007 8
Portfólio produktů HP StorageWorks 10/26/2007 9
Pojmy vrstvená storage resp... víceúrovňové ukládání dat MSA 1500 EVA 4k,6k,8k XP 12k, XP 24k MSA, EVA SCSI SATA 250,-/GB 100,-/GB FC FATA 600,-/GB 300,-/GB FC FC FC 1.000,- /GB SCSI SATA 10/26/2007 10
Pojem Grid architektura :storage smart cells xxx GB xxx GB xxx GB xxx GB xxx GB xxx GB xxx GB xxx GB xxx GB xxx GB xxx GB xxx GB xxx GB xxx GB xxx GB stavební blok = smart cell procesor storage xxx GB indexování (obsah & atributy) xxx GB xxx GB xxx GB xxx GB xxx GB škálovatelnost až do miliard dokumentů xxx GB xxx GB xxx GB xxx GB xxx GB capture > index > store > search -> retrieve HP StorageWorks RISS : Reference Information Storage System 10/26/2007 11
RISS pro archivaci emailů RIM Exchange RIM Lotus RIM xyz Reference Information Manager integrace do aplikace infrastruktura zařízení RISS HP Proliant Server DL320 database, firewall, load balancer, SMPT & HTTP Portal Servers storage HP Proliant DL320 Backend (SmartCells) 14U DL320/G5 DL320/G5 DL320/G5 DL320/G5 DL320/G5 DL320/G5 DL320/G5 DL320/G5 DL320/G5 DL320/G5 KVM / Mon 2U Ctlr 1.4TB DL320s 2U Ctlr 1.4TB DL320s 2U 1x USC Upgrade 1x USC Upgrade Available for Upgrades Gateway Firewall Load Balancer Query Portal (HTTP) Store Portal (SMTP) Meta Server Router Database PCC Kick Start USC #1 (4U) Base System USC #2 (4U) Upgrade USC #3 (4U) Upgrade 5406 switch (4U) 10/26/2007 12
výběr vhodné technologie konsolidace virtualizace storage servery platformy aplikace 10/26/2007 13
Konsolidace diskových prostorů využití cca 50% funkcionalita..? dostupnost...? centrální storage enterprise storage využití cca 80% 1 administrátor = 1TB funkcionalita..!!! dostupnost...!!! 10/26/2007 14
výběr vhodné technologie konsolidace virtualizace na úrovni serverů na úrovni SAN na úrovni storage 10/26/2007 15
Virtuální diskové pole NT cluster HP-UX 10/26/2007 16
Virtuální diskové pole NT cluster HP-UX hranice virtualizace HP EVA HP XP HP EVA 10/26/2007 17
Virtualizace SAN NT cluster HP-UX hranice virtualizace disková pole XP 24000, XP 12000 XP 20000, XP 10000 + externí storage HP EVA HP XP HP EVA 10/26/2007 18
Online storage HP StorageWorks 10/26/2007 HP confidential 19
EVA 4100 6100 8100 10/26/2007 20
Architektura pole EVA8100 Heterogeneous Servers Management Server (Windows) Fabric 1 Fabric 2 4Gbps Front-End 2 HSV Controllers HSV210-B controller 1 HSV210-B controller 2 4 FC Loop Switches FC loop switch FC loop switch FC loop switch FC loop switch 2-18 Disk enclosures 12 in the first rack 6 in the utility cabinet 8 to 240 FC Disks Switched IO Modules 10/26/2007 21
Police na disky (M5314C) podporuje switchované propojení point-to-point z IO modulu řadiče ke každému jednotlivému disku blok dat je poslán pouze adresovanému disku toto uspořádání umožňuje rychle vysledovat vadnou cestu, disk a izolovat je 10/26/2007 22
Co charakterizuje disková pole EVA? virtualizace diskového prostoru data jsou rozložena na všechny disky -> vysoký výkon není fragmentace možnost online zvětšování kapacity LUN snapshot capacity free víceúrovňové uložení dat pod jedním řadičem s vysokou výkonností (disky FC) levné uložení (disky FATA) midrangová pole s některými vlastnostmi polí high-end řešení Cluster Extension 10/26/2007 23
Tradiční diskové pole RAID Controller LUN 0 LUN 1 LUN 2 10/26/2007 24
Virtuální diskové pole Virtual Array Controller mapovací tabulka bloků 8GB LUN 1 7GB LUN 2 10/26/2007 25
Rovnoměrné rozložení dat, bez fragmentace Virtual Array Controller 8GB 7GB 5GB LUN 1 LUN 2 LUN 3 10/26/2007 26
Online zvětšování kapacity LUN Virtual Array Controller 8GB 7GB +4GB +6GB LUN 1 LUN 2 10/26/2007 27
Zero Downtime Backup Jak to funguje? na základě funkce Business Copy pro vytváření lokálních kopií zálohování z kopie (S-vol) minimální dopad na produkční systém řízení HP Data Protectorem HP-UX Client network SAN Solaris NT W2k Data Protector Server Výhoda možnost full backup i incremental backup možnost zálohování i velkých souborů při malém zálohovacím okně P-Vol S-Vol 10/26/2007 28
Instant Recovery Jak to funguje? Výhoda obnoví data v řádu minut - nikoli hodin obnova bez přesunu dat; vymění se navzájem primární LUN a Business Copy LUN řízeno HP Data Protectorem jednoduchá, flexibilní replikace a obnova, řízení přes celé heterogenní prostředí v případech, kdy obnova z pásek je pro kritické aplikace příliš zdlouhavá v případech kritické aplikace, kdy přístup k datům je prioritou HP-UX BC1 Client network SAN Solaris P-Vol BC2 BC3 NT W2k Data Protector Server t 0 t -1 t -2 10/26/2007 29
Continuous Access EVA Jak to funguje? vytváří kopie LUNů (zrcadla) na vzdáleném diskovém poli připojeném přes Fibre Channel replikaci řídí diskové pole, replikace není zavislá na OS synchronní replikace na vzdálenost podporovanou FC asynchronní replikace na libovolnou vzdálenost Výhoda je to prostředek pro pokračování provozu IT i po katastrofické události P VOL S VOL S VOL P VOL 10/26/2007 30
Cluster Extension EVA App A App A App B Quorum Quorum Quorum App B App A App B Continuous Access EVA 10/26/2007 31
XP 24000 XP 12000 XP 20000 XP 10000 10/26/2007 32
Ustálené portfólio funkcí high-end diskových polí v 2004 možnost definovat vlastní velikost logických disků (LUN) povolit přístup k LUN jen vybraným serverům LUN masking možnost podržet vybraný LUN trvale v cache možnost zamknout LUN jako WORM multipathing přístup pomocí MP software na serveru lokální kopie typu klon, snapshot, Point-in-Time Copy vzdálené kopie pořizované synchronní a asynchronní metodou nástroj pro monitorování výkonnosti nástroj pro tunning metodou realokace dat nástroj pro řízení výkonnosti pole pro jednotlivé servery / aplikace podpora Data Integrity Check pro Oracle 10/26/2007 33
Nové funkce polí XP12k a XP24k 2004 : nové metody replikace dat (BC snap, CAj) externí diskové pole (ext pole, FlexCopy) vrstvené uložení dat (virtualizace) partitioning true online upgrade mikrokódu 2006 : 4 Gbit end-to-end Thin Provisioning 10/26/2007 34
Thin Provisioning XP (THP) THP Traditional OS visible 7.9TB 1.2TB 1.2TB 1.2TB 1.2TB 1.2TB 1.6TB OS visible 7.9TB LUNS: THP volumes (Virtual volumes) 1.2TB 1.1TB 1.5TB 1.2TB 1.3TB 1.6TB LUNS: Physically provisioned capacity 7.9TB 0.6TB of actually written data 0.1TB 0.1TB 0.15TB 0.04TB 0.06TB 0.15TB 2TB THP pool 1.4TB free 30% occupied No pool Provisioned Capacity 2TB 80x 25GB LDEVs LDEV LDEV LDEV LDEV LDEV LDEV LDEV LDEV LDEV LDEV LDEV LDEV LDEV LDEV LDEV LDEV Array groups/disk drives Provisioned Capacity 7.9TB 316x 25GB LDEVs 10/26/2007 35
XP 24000 - diskové pole s distribuovaným řadičem a s centrální cache CHIP CHIP CHIP CHIP CHIP CHIP cache crossbar 68 GB/s SM CHIP cache crossbar 68 GB/s SM CHIP ACP ACP ACP ACP ACP ACP ACP ACP 10/26/2007 36
Continuous Access na libovolné pole XP Continuous Access CHIP CHIP cache ACP ACP 10/26/2007 37
Externí storage, funkce FlexCopy FlexCopy CHIP CHIP CHIP cache ACP ACP 10/26/2007 38
Interní a Externí disky pod jedním řadičem CHIP CHIP E-LUN CHIP cache E-LUN CHIP CHIP ACP ACP 10/26/2007 39
XP 24000 = SAN virtualizační nástroj CHIP CHIP CHIP CHIP SAN cache CHIP CHIP CHIP ACP CHIP ACP 10/26/2007 40
Adaptér CHIP True online upgrade mikrokódu I servery připojené jen jedním FC mají trvalý přístup k datům FC FC FC FC 8 Port 4Gb/s FC 16 Port 4Gb/s FC 32 Port 4Gb/s FC Host Port Host Port Host Port Host Port 8-port iscsi 1.25 Gb/s Micro processor Micro processor 10/26/2007 41
Transition Slide XP 20000 10/26/2007 42
Architektura diskového pole XP20k 16 FC portů CHIP crossbar CHIP ACP 8,5 GB/s cache HP Patent pending dev Intelligent Data Tunnels June 01 10/26/2007 43
Virtualizace CHIP 10/26/2007 44
Bezdiskový virtualizační nástroj 10/26/2007 45
2 možnosti virtualizace na bázi XP10k XP10k diskless SVS200 stejný hardware stejný firmware (shodný s XP12k) stejná funkcionalita (SVS200 v počáteční fázi nepodporuje solutions jako CLX, ZDB, MetroCluster,...) dodává se s rackem 10/26/2007 46
Příklad využití virtualizace Společnost NN vlastní 2 midrangová disková pole, IBM FastT a EMC Clariion Společnost NN potřebuje řešit vysokou dostupnost a DR; hodlá si pořídit high-end diskové pole a nějak využít svoje midrangová pole XP10k SVS200 Continuous Access 10/26/2007 47
Virtualizace páskových zařízení 10/26/2007 48
Klasická metoda zálohování Klient Backup Server Pásková knihovna Backup Agent Backup software : Cell Manager : Media Agent robot LAN COMPAREX databáze rejstřík uložených souborů 10/26/2007 49
Roadmapa pásek HP Ultrium disk asistované backup technologie Generace 6 6.4 TB až 540 MB/s WORM kapacita cartridge a max. datový tok uvažují kompresi dat 2:1 Generace 1 200 GB až 40 MB/s Generace 2 400 GB až 80 MB/s Generace 3 800 GB až 160 MB/s WORM Generace 4 1.6 TB až 240 MB/s WORM Generace 5 3.2 TB Up to 360 MB/s WORM 2000 2002 2004 2006 10/26/2007 50
Disk ve funkci bufferu pro páskovou knihovnu Klient Backup Server Pásková knihovna robot LAN COMPAREX media agent stream disk, diskové pole 10/26/2007 51
Virtuální pásková knihovna Klient Backup Server Pásková knihovna robot LAN COMPAREX SAN media agent copy 10/26/2007 52
VLS = Virtual Library System VLS 6840 VLS 6870 VLS 6510 VLS 6105 VLS 6518 VLS 6109 24 disků 48 disků 96 disků Netto kapacita až 70 TB s 500 GB disky 10/26/2007 53
Způsob práce s VLS krok 1: Backup dat na HP Virtual Library System LAN SAN backup server Tape Library HP StorageWorks 6000 Virtual Library System 10/26/2007 54
Způsob práce s VLS krok 2: Transfer dat na fyzickou pásku LAN SAN backup server Tape Library HP StorageWorks 6000 Virtual Library System 10/26/2007 55
Při použití 500GB SATA disků VLS6109 VLS6518 VLS6870 Base capacity 4.4TB usable 9 TB usable 35 TB usable Max capacity 9 TB usable 18 TB usable 70 TB usable Procs/memory/FC 1/1GB/2 2/1GB/4 2/4GB/4 Base throughput* 100 MB/s 200 MB/s 400 MB/s Max throughput* 200 MB/s 400 MB/s 600 MB/s # of virtual drives Up to 64 Up to 64 Up to 64 # of virtual libraries Up to 16 Up to 16 Up to 16 # of media slots Up to 1024 Up to 1024 Up to 1024 * = no compression MB = 1,000,000 bytes 10/26/2007 56
10/26/2007 57