Návrh středně velkého DC pro různé typy aplikací

Transkript

1 Cisco Expo 2012 Návrh středně velkého DC pro různé typy aplikací Tomáš Michaeli - Consulting System Engeneer DCV Central tomichae@cisco.com 29-Mar Cisco and/or its affiliates. All rights reserved. Cisco Public 1

2 Cisco Expo 2012 Lokalita a fyzické prostředí Požadavky aplikací Plánování kapacity CPU Plánování kapacity RAM Doporučená topologie pro malé DC VM Propojení s datovým úložištěm (iscsi, FCoE and FC) Expo 2012 SMB DC Závěr 2012 Cisco and/or its affiliates. All rights reserved. Cisco Public 2

3 Obnova technologií (40%) 3Y nebo 5Y obnova podpory na server/úložiště Úplná výměna Navýšení stávající kapacity a výkonu Snadné uvedení nových technologií Fyzické do virtuálních brown field (40%) Energetická a prostorová limitace, IT nedokáže plnit požadavky businessu Težší pozice pro nové technologie UCS- NEXUS-MDS - interoperabilita Migrace a integrace se stávajícím prostředím je náročná Green field (20%) Ojedinělé Rozmístění, energie a plány chlazení Velmi snadné uvedení nových technologií DR je povinný - Celková kapacita Inovace Náklady 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 3

4 Ochrana perimetru, strategická poloha Ochrana vjezdu aut, biometrie, kontrola vstupu + ochranka Vnitřní a venkovní kamerový systém, rozmístění racků Výpočetní sál MDA Main Distribution Area EDA HDA Equipment Distribution Area Horizontal Distribution Area 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 4

5 Médium Kabel Vzdálenost In-rack X-rack Spotřeba Zpoždění Standars SFP+ CU* copper Twinax <14m ~ 0.1W ~ 0.1ms SFF 8431 X2 CX4 copper Twinax 15m 4W ~ 0.1ms IEEE 802.3ak SFP+ USR MMF, ultra short reach SFP+ SR MMF,short reach MM OM2 MM OM3 MM OM2 MM OM3 10m 100m 82m 300m 1W Across racks 1W ~ 0 ~ 0 ~50% power none savings with EEE IEEE 802.3ae RJ45 10GBASE-T copper Cat6 Cat6a/7 Cat6a/7 55m 100m 30m ~ 6W*** ~ 6W*** ~ 4W*** 2.5ms 2.5ms 1.5ms IEEE 802.3an 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 5

6 Napájení [kw] Redundatní elektrická přípojka Zelená energie solární panely, LED Rotační UPS systém, diesel agregát Nádrže na naftu (chráněné) Chlazení [BTU] Chlazení bez zvýšené podlahy Operační teplota ASHRAE 2008: 27 Strukturovaná kabeláž min. 10G 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 6

7 Tier I II III IV Komponenty Pouze N N + 1 N (N + 1) Aktivní Datové Cesty Jedna Jedna Aktivní / Pasivní Dvě Jeden Bod Selhání Ano Ano Ano Ne Nezávislí Management Ne Jenom komponenty Ano Ano Dostupnost / Roční výpadek % 28.8 hodin % 22.0 hodin % 1.6 hodin % 0.4 hodin Zdroj: The Uptime Institute 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 7

8 Application % Considering SQL Server 66% SharePoint 55% Exchange Server 53%.NET Framework 50% System Center 30% Visual Studio 27% Office 26% Storage Server 24% Hyper-V 22% Podniky plánují na Cisco UCS aplikace jako SQL Server, SharePoint, Exchange Server a/nebo.net Framework Průzkum pro Cisco provedli Penton Research, partner SQL Server Magazine a Windows IT Pro Průzkum v době od 27. Dubna do 30. Května Cisco and/or its affiliates. All rights reserved. Cisco Public 8

9 VMware vsphere dominantní v hypervizorech Nejčastěji virtualizujete SQL Server (73%) SharePoint (53%) a Exchange (46%). Jakou virtuální platformu jste u Vás nasadili? Které aplikace virtualizujete? VMWare vsphere 72% SQL Server 73% Microsoft Hyper-V 17% SharePoint 53% Critix XenServer 6% Exchange 46% Oracle 29% None 2% MySQL 15% Parallel's Virtuozzo 1% DB2 10% Other 1% Other 16% 0% 20% 40% 60% 80% 100% 0% 20% 40% 60% 80% 100% 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 9

10 Požadavky pro jednoho uživatele virtuálního desktopu s Windows 7 1.5GB RAM, 600MHz CPU, 12 IOPS, 50kB/s 200 živých uživatelů ~ 300GB, 120GHz, 2400IOPS ~ 2xC250/2.4/192G 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 10

11 Nástroje VMware/Capacity Planner, Novell/PlateSpin, Microsoft/MAP Toolkit 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 11

12 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 12

13 Nesprávné osazení DIMM může mít až 50% dopad na výkon CPU Vliv má osazení kanálů a taktovací frekvence DIMM kanálu 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 13

14 vsphere5 Licence Standard Enterprise Enterprise + Processor 1 CPU 1 CPU 1 CPU vram vcpu CPU 2 licence 4 CPU 4 licence Kapacita RAM serveru v (GB) Cisco and/or its affiliates. All rights reserved. Cisco Public 14

15 2CPU Intel X55xx, X56xx Kapacita DIMM (GB) DIMMy rychlost (MHz) Cena /GB 64 GB 8 x GB 8 x QR / 1333DR GB 12 x QR / 1333DR 62 2CPU Intel E7 192 GB 16 x 8 a 16 x CPU Intel X75xx, E7 128 GB 16 x GB 16 x QR / 1333DR 62 STD ENT+ ENT 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 15

16 O čem při návrhu mluvíme? Kritéria pro výběr návrhu Výpočetní vrstva a škálování Požadované vlastnosti a uplatnění Cisco výhod Konkurenční prostředí 1K Cisco Nexus x86 Návrhy podle > 128 CPUs CPUs 8 32 CPUs ( VM) < 6 CPUs VMDC, SP slouží pro velké 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 16

17 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 17

18 FC Storage LAN SAN MGMT LAN Switch SAN Switch Direct Attach FCoE Storage FC Storage 1,2,4,8 Link Gb per chassis Až 160 rack serverů Plná LAN a SAN konektivita 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 18

19 Fabric A FEX FEX Fabric B 10-40GE 10-40GE vhba 0 vnic0 vnic2 vnic4 vnic6 vnic1 vnic3 vnic5 vnic7 vhba 1 vswitch / vds / N1K MGMT VM DATA vmotion NFS FC Fabric A vmnic0 vmnic2 vmnic4 vmnic6 MP Fabric B vmnic1 vmnic3 vmnic5 vmnic7 MP Min BW 5% 25% 10% 30% 10% Class Gold CoS 4 Silver CoS 2 Best Effort Plat CoS 5 CoS 3 * Nastavení podle projektových požadavků 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 19

20 Management provoz Nízké zatížení, Relativně vysoká důležitost Ethernet Storage Vysoké zatížení, Vysoká důležitost VM datový provoz Střední zatížení, Vysoká důležitost vmotion Špičky v provozu Propustnost dostupná například při migraci Fault Tolerance Vysoká důležitost (synchronní) Střední zatížení (doporučení 10Gb) FCoE Dedikovaný CoS = 3 * Adjust based on environment Cisco and/or its affiliates. All rights reserved. Cisco Public 20

21 +Adapter FEX poskytne statické vnic pro vsphere s různou hodnotou CoS Podpora QoS s livovolným vswitchem Velmi časté při nasazení s UCS, 6x vnic +1000v vlastnosti 1000v s podporou hardware queueingu VIC V kombinaci s Adapter FEX Vlastnost Host Control Full a respektuje CoS from 1000v +VM FEX poskytne vnicky pro virtuální servery přímo z UCS +DRS cluster dostatek vnic i při zmigrování na jeden server +Fabric interconnect 61xx max 56, 62xx max Cisco and/or its affiliates. All rights reserved. Cisco Public 22

22 1 2 Traffic Platinum Type -> Mgmt CoS Console Value Bandwidth Weight% Silver NFS -> VM Traffic5 3Gbps 30% Bronze FT/Mgmt or Best Effort 4 -> vmotion 2Gbps 20% VM Gold TrafficA -> Available for 2 IP Stor2.5Gbps VM High Pri 25% VM TrafficB 1 0.5Gbps 5% vmotion 0 1Gbps 10% FCoE 3 1Gbps 10% 3 Copy UCS QoS policy to Nexus 5k s Connect nxos -> show running-config ipqos 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 23

23 VM VM VM VM VM VM VM VM Nexus 1000V VSM Nexus 1000V VEM VMware vsphere Nexus 1000V VSM Nexus 1000V VEM Windows 8 Hyper-V VMware vcenter Microsoft s Service Console Virtual Machine Manager 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 24

24 Redundatní VSM nebo duální Nexus 1010 Využívejte VPC kde to je možné (ip hash) jinak (mac pinning) Konfigurujte QoS na 1000v a upstream switchi Povinná system vlan pro kritické spojení Využijte weighted QoS dostupné od Cisco and/or its affiliates. All rights reserved. Cisco Public 25

25 QoS disabled NFS, VM, a FT provoz potlačený při vmotion QoS enabled NFS, VM, a FT provoz zachovaný při vmotion 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 26

26 Unified fabric dovoluje flexibilitu iscsi 1/10Gb NFS/CIFS 1/10Gb FC 2/4/8G FCoE 10Gb Saturace linek Oddělení ve frontách Uplinky ke storage Detekce poruchy Multi pathing Dvě fabriky 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 27

27 Priority Flow Control IEEE 802.1Qbb Enhanced Transmission Selection IEEE 802.1Qaz Transmit Queues One Ethernet Link Receive Buffers One Offered Traffic 3G/s 3G/s 2G/s 10 GE Link Realized Traffic Utilization 3G/s HPC Traffic 3G/s 2G/s Two Three Four Five Six STOP PAUSE Two Three Four Five Six Eight Virtual Lanes 3G/s 3G/s 3G/s 3G/s 4G/s 6G/s 3G/s 3G/s Storage Traffic 3G/s LAN Traffic 4G/s 3G/s 5G/s Seven Eight Seven Eight t1 t2 t3 t1 t2 t3 Enables lossless Fabrics for each class of service PAUSE sent per virtual lane when buffers limit exceeded 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 28

28 BW unavailable 2.5G to other FlexNICs BW unavailable 2.5G to other FlexNICs BW unavailable 2.5Gto other FlexNICs BW unavailable 2.5Gto other FlexNICs 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 29

29 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 30

30 FCoE management je identický s manegementem FC na úrovni initiatora, targetu a switche Jednoduché na pochopení Shodný operační model Identické technologie pro řízení provozu Identický management a bezpečnostní model Shodné s FC modelem Identické řízení přístupu přípojení do SAN Například in order delivery FSPF load balancing WWNs, FC-IDs, hard/soft zoning, DNS, RSCN 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 32

31 6 x 1Gb (4948) 4 x 1Gb / SAN (4948/9148) 2 x 10Gb (Nexus) 2 x FCoE (Nexus) Switch Ports $1,938 $2,167 $1,600 $2,400 Server Ports $299 $599 Cabling $60 $326 $420 $420 FC Optics $260 10Gb CNA $1,429 HBA $1,780 1 Server $2,297 $4,533 $2,619 $4,249 6 Servers $13,779 $27,196 $15,714 $25,494 Cost Per Gigabit $2,297 $2,266 $786 $1, Cisco and/or its affiliates. All rights reserved. Cisco Public 33

32 Konvergovaná fabrika sdílí jeden 10G kanál Pro SMB je FCoE ve čtvercové topologii vhodné na menší vzdálenost do 3km na Nexus 5k FCoE 3km FC FC oe FC FC oe NAS iscsi NAS iscsi VM #2 VM #3 VM #4 VM VM VM #2 #3 # Cisco and/or its affiliates. All rights reserved. Cisco Public 34

33 MDS 9148 Fibre Channel Ports Nexus 5000/5500 Fibre Channel Ports Speed (Gbps) Speed (Gbps) Distance (Km) Distance (Km) G +50% MDS 9500 Fibre Channel Ports Speed (Gbps) Distance (Km) Cisco and/or its affiliates. All rights reserved. Cisco Public 35

34 MGMT Expo SAN Switch 8G FC EMC VNX G NFS/CIFS 10G FCoE FI x B200 C Cisco and/or its affiliates. All rights reserved. Cisco Public 36

35 26 VM pro Expo, 150 VM Celkem 60GHz CPU (7% vzužitých) 95GB RAM (50% využitých) 15TB DISK block-nfs SSD Cache Automaticke tierování SSD, SAS, SATA 2010 Cisco and/or its affiliates. All rights reserved. Cisco Public 37

36 Cisco Expo 2012 Vyhraďte si čas pro výpočet požadavků Aplikací Bez profilování aplikací to nejde Efektivní výběr CPU a konfigurace RAM POD návrh a topologie s unified fabric Respektujte best practices pro virtuální networking Vždy myslete na DR, vzdálená lokalita 2012 Cisco and/or its affiliates. All rights reserved. Cisco Public 38

37 Cisco Expo 2012 Twitter Talk2Cisco SMS tbd Zveme Vás na Ptali jste se v sále tbd, 17:45 18: Cisco and/or its affiliates. All rights reserved. Cisco Public 39

38 Cisco Expo 2012 Kód přednášky Prosíme, ohodnoťte tuto přednášku Cisco and/or its affiliates. All rights reserved. Cisco Public 40

39 Thank you.