Přílha č. Zadávací dkumentace Technická dkumentace Technická dkumentace Ppis stávající úlžné infrastruktury v Plzni a pžadavky na předmět plnění Infrmace a údaje uvedené v jedntlivých částech tét technické dkumentace vymezují závazné pžadavky zadavatele na plnění veřejné zakázky. Tyt pžadavky je uchazeč pvinen plně respektvat při zpracvání nabídky. Pkud není uveden jinak, veškeré kapacity jsu uvedeny v dekadických násbcích, tj. TB = 0 2 B, PB = 0 5 B.. Ppis stávající úlžné infrastruktury v Plzni Stávající úlžná infrastruktura sdružení CESNET umístněná v prstrách Západčeské univerzity v Plzni byla ddána na sklnku rku 20. Jedná se HSM (Hierarchical strage management) systém celkvé kapacitě cca 3,8 PB. Lgicky se úlžiště skládá z vrstvy (tieru) rychlých FC disků hrubé kapacitě cca 76,8 TB, z vrstvy pmalejších SATA disků hrubé kapacitě 480 TB a páskvé knihvny stávající hrubé kapacitě 3300 TB. Data jsu na servery nahrávány skrze 6 frntend serverů zapjených v HA režimu. Migraci dat mezi jedntlivými tiery je zajištěna pmci sftwaru DMF, všechny frntendy využívají clustervý subrvý systém CXFS. Bližší ppis hardwaru a sftwarvéh nastavení následuje níže... Hardwarvá struktura úlžiště Hardwarvě se úlžiště skládá: Z dvjice diskvých plí InfiniteStrage 4600, kdy každé ple bsahuje: řadič s knektivitu 8xFC 4Gbit a 4x 0Gbit iscsi, 32GB cache 4x 6 diskvu plici s 600GB 5k rpm FC disky 60 diskvu plici s 2TB 7.2k rpm SATA disky Páskvé knihvny Spectralgic T-finity v knfiguraci x základní rack umístěný uprstřed s kapacitu LTO5 mechanika, 950 sltů na média (z th 50 naknfigurván pr imprt/exprt pásek) rzšiřující media nly rack, každý s kapacitu 300 LTO5 sltů krajvý servisní rack každý s kapacitu 500 sltů nezávislý redundantní rbt pr bsluhu knihvny x LTO5 mechanika 8Gbit FC 2200 kusů LTO5 pásek s čipem pr správu živtníh cyklu, 50 kusů čistících médií Ddávka rzšíření datvé kapacity HSM Plzeň (Prjekt eiger) Přílha - Technická dkumentace /8
licence na 3670 páskvých sltů Celkvě lze knihvnu ve stávající knfiguraci sadit až 4500 LTO páskami (přitm je nutn dplnit licence, nebť 830 sltů knihvny licenci nemá). servisní uzel pr zajištění služeb clustervéh subrvéh systému (CXFS) a migrace (DMF) Intel X5650 48GB RAM 500GB 7.2k rpm disk v RAID Gbit síťvé rzhraní 8Gbit FC rzhraní (jedna karta) SLES SP + HA rzšíření + SGI Fundatin Sftware 6x frntend serverů zajišťujících vnější knektivitu, každý v knfiguraci Intel X5650 48GB RAM 500GB 7.2k rpm disk v RAID 0Gbit a Gbit síťvé rzhraní 4x 8Gbit FC rzhraní (dvě karty p dvu prtech) SLES SP + HA rzšíření + SGI Fundatin Sftware virtualizační servery Intel X5650 48GB RAM 300GB 5k rpm disky v RAID 0Gbit a Gbit síťvé rzhraní 8Gbit FC rzhraní (jedna karta) VMWare ESXi 5.0 speciální aplikační servery SGI C308-TY Intel X5650 48GB RAM 500GB 7.2k rpm disky v RAID 0Gbit a Gbit síťvé rzhraní 8Gbit FC rzhraní (jedna karta) x centrální administrační strj x Intel E5620 2GB RAM TB 7.2k rpm disky v RAID 0Gbit a Gbit síťvé rzhraní Úlžiště dále bsahuje ptřebnu prpjvací infrastrukturu: 40 prtvý 8Gbit FC switch Brcade 50 Ddávka rzšíření datvé kapacity HSM Plzeň (Prjekt eiger) Přílha - Technická dkumentace 2/8
2 3 4 5 6 7 8 9 0 2 3 4 5 6 7 8 9 20 2 22 23 24 25 26 7X 5X 6X 8X 2 3 4 5 6 7 8 9 0 2 27 28 29 30 3 32 33 34 35 36 37 38 39 40 4 42 33X 3 3 34X 43 44 45 46 47 48 3 4 5 6 7 8 9 20 2 22 23 24 3X 4X 47X 48X 23X 24X 3 2 4 2 2 3 4 5 6 7 8 9 0 2 3 4 5 6 7 8 9 20 2 22 23 24 25 26 7X 5X 6X 8X 2 3 4 5 6 7 8 9 0 2 27 28 29 30 3 32 33 34 35 36 37 38 39 40 4 42 33X 3 3 34X 43 44 45 46 47 48 3 4 5 6 7 8 9 20 2 22 23 24 3X 4X 47X 48X 23X 24X 3 2 4 2 všechny prty sazeny SFP a licencemi nebsazen 8 prtů v každém switchi (6 celkem) 48 prtvý 0Gbit Cisc Nexus 5548, s vlastnstmi ke každému připjen mdul bsahující 24xGbit prty každý 30Gbit prtů zalicencván, 8 prtů s SFP typu 0GBASE-SR vlných (celkem 6) 5 respektive 2 Gbit prty vlné (celkem 7 prtů) x 24prtvý Gbit SMC 8824M vlný Gbit prt..2. Prpjení kmpnent Prpjení jedntlivých kmpnent pmcí 0Gbit Ethernetu a 8Gbit FC zbrazuje Obrázek. Na všech frntend serverech a speciálních aplikačních serverech jsu jejich 0Gbit rzhraní zapjeny d bu switchů, na strjích je knfigurván active-active bnding, na straně switchů pak vpc. Kvůli pdpře vpc jsu ba switche prpjeny pmcí (na brázku není znázrněn). Nx 8Gb FC x 0Gb ETH Nx 0Gb ETH FC netwtk ETH netwrk Hranice ddávky SGI technlgie 8Gb FC 8Gb FC 6x Diskvé ple 0x 0 GE 0x 0 GE 6x 7x 7x Páskvá knihvna /0 Gbit ETH switch /0Gbit ETH switch 2 40p 8Gbit FC switch 40p 8Gbit FC switch 2 DMF a MDS server DMF a MDS server 2 x x. x x VirtServer FrntEnd FrntEnd 2 FrntEnd 3 FrntEnd 4 FrntEnd 5 FrntEnd 6 VirtServer 2 Obrázek Prpjení jedntlivých částí úlžiště v sítích 0Gbit Ethernet a 8Gbit FC Všechna zařízení bsahující FC prty jsu pak prpjena d bu FC switchů minimálně jedním rzhraním, úlžiště se skládá ze dvu nezávislých fabric sítí. Výjimku tvří jen jedntlivé drivy páskvé knihvny, které jsu zapjené vždy jen d jednh switche. Gbit Ethernet síť služí k něklika účelům. Část sítě je vyhrazena pr primární a zálžní kruh CXFS clusteru služící pr výměnu metadat a heartbeat zpráv. P tét síti jsu také psílány heartbeat zprávy HA řešení jiných kmpnent. Jiná část Gbit sítě pak služí pr přístup na management rzhraní jedntlivých zařízení. Zapjení Gbit Ethernet sítě znázrňuje Obrázek 2. Ddávka rzšíření datvé kapacity HSM Plzeň (Prjekt eiger) Přílha - Technická dkumentace 3/8
2 3 4 5 6 7 8 9 0 2 3 4 5 6 7 8 9 20 2 22 23 24 25 26 7X 5X 6X 8X 2 3 4 5 6 7 8 9 0 2 27 28 29 30 3 32 33 34 35 36 37 38 39 40 4 42 33X 3 3 34X 43 44 45 46 47 48 3 4 5 6 7 8 9 20 2 22 23 24 3X 4X 47X 48X 23X 24X 3 2 4 2 2 3 4 5 6 7 8 9 0 2 3 4 5 6 7 8 9 20 2 22 23 24 2 3 4 5 6 7 8 9 0 2 3 4 5 6 7 8 9 20 2 22 23 24 S tack M aster P wr S tack ID M aster S elect 2 22 23 24 Cnsle T i ger S t a c k I I 0/00/000 8824M RP S Diag M dule S tack Link S tack M aster P wr S tack ID M aster S elect 2 22 23 24 Cnsle T i ger S t a c k I I 0/00/000 8824M RP S Diag M dule S tack Link MB MS MB MS XGE Link 4 MB MS XGE Link 4 MB MS 3 2 Stacking 3 2 SP L/A Stacking Stacking SP L/A Stacking 2 4 6 8 0 2 4 6 8 20 22 24 26 28 30 32 34 36 38 40 42 44 3 5 7 9 3 5 7 9 2 23 25 27 29 3 33 35 37 39 4 43 2 3 4 2 3 4 5 2 4 6 8 0 2 4 6 8 20 22 24 26 28 30 32 34 36 38 40 42 44 3 5 7 9 3 5 7 9 2 23 25 27 29 3 33 35 37 39 4 43 5 6 7 8 6 7 8 9 9 0 2 0 2 3 3 4 5 6 4 5 6 7 7 8 9 20 8 9 20 2 2 XGE XGE 46 45 46 45 2 3 4 5 6 7 8 9 0 22 23 24 45 46 47 48 22 23 24 00 45 46 47 48 00 2 3 4 5 6 7 8 9 20 2 22 23 24 25 26 7X 00 Reset Mgmt 00 Reset Mgmt 48 47 48 47 5X 6X XGE2 B A XGE2 B A 8X 2 3 4 5 6 7 8 9 0 2 27 28 29 30 3 32 33 34 35 36 37 38 39 40 4 42 33X 3 3 34X 43 44 45 46 47 48 3 4 5 6 7 8 9 20 2 22 23 24 3X 4X 47X 48X 23X 24X 3 2 4 2 x Gb privátní CXFS ETH x Gb ETH Nx Gb ETH FC netwtk ETH netwrk Hranice ddávky SGI technlgie Diskvé ple ADMIN Páskvá knihvna 3x 3x 4x /0 Gbit ETH switch privátní CXFS Eth switch /0Gbit ETH switch 2 40p 8Gbit FC switch 40p 8Gbit FC switch 2 DMF a MDS server DMF a MDS server 2 VirtServer FrntEnd FrntEnd 2 FrntEnd 3 FrntEnd 4 FrntEnd 5 FrntEnd 6 VirtServer 2 Obrázek 2 Prpjení jedntlivých částí úlžiště pmcí sítě Gbit Ethernet.3. Fyzické umístnění Sučasná technlgie je umístěna ve třech 9palcvých 80 cm širkých 42 U vyských racích. Páskvá knihvna se skládá z 5 racků, které tvří jeden funkční celek. Rzmístění jedntlivých kmpnent v racích znázrňuje Obrázek 3. Pzn.: Na místě pr subrvý řadičvý mdul diskvé ple je ve skutečnsti umístěn speciální aplikační server. privátní heartbeat CXFS Eth switch 40-prtvý 8Gbit FC SAN switch 40-prtvý 8Gbit FC SAN switch 39 38 37 36 35 39 38 37 36 35 24-prtvý Gbit Ethernet LAN switch 24-prtvý 0Gbit Ethernet LAN switch 24-prtvý Gbit Ethernet LAN switch 24-prtvý 0Gbit Ethernet LAN switch 34 34 33 33 32 32 3 3 subrvý řadičvý mdul diskvéh ple 30 29 30 29 Virtualizační server 2 28 28 DMF a CXFS MetaData server & 2 27 26 27 26 Virtualizační server blkvý řadičvý mdul diskvéh ple 25 24 23 25 24 23 centrální admin server 6-ti diskvá plice pr Tier 22 2 20 9 22 2 20 9 U slide-ut KVM knzle KVM switch 6-ti diskvá plice pr Tier 8 7 6 8 7 6 Frnt-End server 6 6-ti diskvá plice pr Tier 5 4 3 5 4 3 Frnt-End server 5 6-ti diskvá plice pr Tier 2 0 2 0 Frnt-End server 4 60-ti diskvá plice pr Tier2 60-ti diskvá plice pr Tier2 9 8 7 6 5 4 3 9 8 7 6 5 4 3 Frnt-End server 3 Frnt-End server 2 Frnt-End server 2 2 Rack R Rack R2 Rack R3 Obrázek 3 Rzmístění technlgií d jedntlivých racků Ddávka rzšíření datvé kapacity HSM Plzeň (Prjekt eiger) Přílha - Technická dkumentace 4/8
Celkvé rzmístění v servervně pak zbrazuje Obrázek 4. 2,20m 2,35m 0,75m Current racks (watter cled) SGI racks with atrage arrays, servers and ETH & FC switches R R3,2m min 0,6m min 0,6m 0,798m min 0,6m 2,40m Tape library T-Finity,05m min 0,6m 5,5m Obrázek 4 Schéma rzmístění zařízení v servervně.4. Sftwarvá struktura úlžiště CXFS metadata servery/dmf servery, všechny frntendy a administrační server jsu prvzvány na peračním systému SLES SP s HA rzšířeními. Na úlžišti je prvzván sftware SGI ISSP v2.5 skládající se z distribuvanéh subrvéh systému CXFS v 6.5.0.4 a DMF ve verzi 5.5.0. Sftwarvé knfigurace speciálních aplikačních serverů a virtualizvaných serverů nejsu pr účel tht výběrvéh řízení pdstatné..4.. Stávající sftwarvé licence Sučástí stávajícíh úlžiště jsu tyt licence: x SLES SP SGI DMF server + HA rzšíření, s kapacitu 6PB CXFS Server + CXFS client.4.2. Pskytvané úlžné služby Úlžiště je naknfigurván tak, že frntendy pr uživatele pskytují stejný jmenný prstr pmcí následujících prtklů: Ddávka rzšíření datvé kapacity HSM Plzeň (Prjekt eiger) Přílha - Technická dkumentace 5/8
NFSv4 s Kerbers autentizací, prvzujeme sgi-enhanced-nfs, které je sučásti ISSP v2.5. FTPS implementvaným pmcí vsftpd serveru SFTP/SCP pmcí penssh Rsync Pmcí všech prtklů lze přistupvat na stejná data..4.3. HA knfigurace úlžiště Všechny služby úlžiště jsu knfigurvány jak vysce dstupné. Th je dsahván pmcí sftwaru Pacemaker. Úlžiště je rzdělen na tři HA clustery: 3 frntendy tvří prdukční HA cluster zajišťující služby pr uživatele. Všechny prtkly jsu prvzvány v režimu active-active s výjimku NFSv4, které je prvzván v režimu activepassive. 3 frntendy tvří vývjvý HA cluster, který je naknfigurván velice pdbně jak prdukční HA cluster a služí k věřvání změn nastavení Oba MDS/DMF servery tvří HA cluster zajišťující funkci metadata serveru CXFS a DMF serveru. D th clusteru je přiřazen i uzel admin, který však služí jen jak tie breaker a neběží na něm žádné služby..4.4. Rzdělení úlžiště Úlžiště je mmentálně rzdělen na cca 20 subrvých systémů s velikstí d TB d 50 TB. Migrace většiny subrvých systémů je nastavená v dvutiervém režimu, kdy uživatelé pracují na SATA discích, ze kterých jsu data migrvaná na jednu neb více pásek. Jeden ze subrvéh systému je naknfigurván ve třítiervém režimu, kdy uživatelé pracují na FC discích, dkud jsu data paralelně migrvána na SATA disky a pásky. Ddávka rzšíření datvé kapacity HSM Plzeň (Prjekt eiger) Přílha - Technická dkumentace 6/8
2. Pžadavky na předmět plnění Předmětem plnění zakázky jsu následující kmpnenty: 2.. Sftware SGI DMF Parallel Data Mver ptin včetně příslušných licencí tak, aby byl mžné tent sftware prvzvat na strji SGI C308-TY (jeden ze speciálních aplikačních serverů) a začlenit h d celéh HSM ppsanéh v sekci. 2.2. 000 kusů LTO5 pásek s čipem pr správu živtníh cyklu, pásky musí být kmpatibilní a saditelné d knihvny uvedené v sekci. Sučástí je také instalace všech ddaných pásek d tét knihvny. 2.3. Diskvé ple typu MAID s následujícími vlastnstmi: 2.3.. Plem typu MAID rzumíme takvé ple, jehž disky lze vypnut a t vč. elektrniky. Samtné zastavení rtace disků nestačí. 2.3.2. Diskvé ple zaujímá nejvýše rack rzměrech maximálně (š x d x v) 85 x 35 x 240 cm. 2.3.3. Disky v pli jsu rganizvané v RAID 5 v knfiguraci s maximálně čtyřmi datvými disky (4+) neb v RAID 6 v knfiguraci s maximálně 2 datvými disky (2+2). 2.3.4. Na každých i zapčatých 60 disků ple pžadujeme alespň samstatný ht-spare disk (např. při pčtu 300 disků zapjených v RAID svazcích pžadujeme navíc 5 htspare disků, celkem tedy 305 disků). 2.3.5. Diskvé ple musí být plně redundantní, výpadek jakékliv jedné kmpnenty nesmí způsbit nedstupnst ple, může ale vést k dčasné degradaci výknu. 2.3.6. Diskvé ple musí mít autmatický systém hlášení pruch na bázi prtklu SNMP. Zprávy systému hlášení pruch musí být mžn zpracvat na strji s peračním systémem Linux, z těcht zpráv musí být rzpznatelná chybující kmpnenta v lidsky čitelné pdbě. 2.3.7. Čistá kapacita (tj. kapacita dstupná uživateli p režii RAIDu a htspare, před režií subrvéh systému) diskvéh ple je alespň 2,4 PB. 2.3.8. Diskvé ple je připjitelné ke stávající infrastruktuře alespň 8x 8Gbit FC d každéh z bu switchů uvedených v sekci, tj. celkem minimálně 6x. 2.3.9. Diskvé ple bude umístěn buď v servervně se zbytkem HSM viz brázek 4, neb v servervně ve stejné budvě, tat servervna je d servervny s HSM vzdálená naprti přes chdbu šířce přibližně 3,5 m (délka kabelů bude větší). 2.3.0. Veškerá nezbytná kabeláž (napájení, datvé kabely, management) je sučástí ddávky ple. Maximální délka FC kabelů je 40 metrů, přesnu délku kabeláže je nutné zjistit při instalaci. 2.3.. Maximální prvzní sptřeba diskvéh ple je 7 kw. Ddávka rzšíření datvé kapacity HSM Plzeň (Prjekt eiger) Přílha - Technická dkumentace 7/8
2.4. Rzšíření licencí SGI Data Migratin Facility. V sučasnsti zadavatel pužívá licenci na 6 PB kapacity. Předmětem ddávky je rzšíření licence tak, aby licence celkem pkryla,5násbek čisté kapacity celéh zařízení (tj. jak stávajícíh systému zadavatele, tak i zařízení ddanéh v rámci tht rzšíření). Čistu kapacitu rzumíme a. pr diskvá ple kapacitu dstupnu uživateli p režii RAIDu a htspare, před režií subrvéh systému, b. nminální nekmprimvanu kapacitu pr pásky. 2.5. Sučástí ddávky bude reknfigurace stávajícíh SGI DMF a suvisejících sftwarvých kmpnent pr začlenění všech kmpnent předmětu plnění d stávajícíh systému zadavatele. 2.6. Sučástí ddávky je rvněž reknfigurace HW (zejména SAN) pr začlenění všech kmpnent předmětu plnění d stávajícíh systému zadavatele. 2.7. Zatížení pdlahy systémem úlžiště p přidání nvých prvků přízených v rámci tht výběrvéh řízení nesmí překrčit 700 kg/m^2, bdvé zatížené pdlahy nesmí překrčit 300 kg. 2.8. Všechna ddaná zařízení a technlgie musí být mžné transprtvat stavebním tvrem s maximálními rzměry 45cm x 90cm, za kterým jsu ve vzdálensti 70cm tři schdy směrem vzhůru s celkvu výšku 56cm. 3. Suvisející pžadavky Uchazeč je pvinen pskytnut nezbytnu sučinnst s ddavateli dtčených zařízení. Rzšíření datvéh úlžiště nesmí vlivnit jeh funkci a dstupnst jeh služeb, s výjimku prací nutných k jeh rzšíření s maximální dbu trvání 24 hdin. Uchazeč garantuje ddávku jedntlivých kmpnent tak, aby byly certifikvány výrbcem danéh zařízení, aby nedšl ke ztrátě garance funkčnsti celéh zařízení. Ddávka rzšíření datvé kapacity HSM Plzeň (Prjekt eiger) Přílha - Technická dkumentace 8/8