Disková pole (RAID) 1



Podobné dokumenty
Disková pole (RAID) 1

Disková pole (RAID) 1

pole Princip 1. Zvýšení rychlosti. 2. Zvýšení bezpečnosti uložených dat (proti ztrátě).

Server je v informatice obecné označení pro počítač, který poskytuje nějaké služby nebo počítačový program, který tyto služby realizuje.

Přednáška. Úložiště dat: HDD, SDD, RAID, DAS, NAS, SAN. Katedra počítačových systémů FIT, České vysoké učení technické v Praze Jan Trdlička, 2012

Datová úložiště. Zdroj: IBM

Kapitola 10: Diskové a souborové struktury. Klasifikace fyzických médií. Fyzická média

Výukový materiál Hardware je zaměřený především na výuku principů práce hardwaru a dále uvádí konkrétní příklady použití.

PA152: Efektivní využívání DB 2. Datová úložiště. Vlastislav Dohnal

Pokročilé architektury počítačů

OZD. 2. ledna Logický (Objekty, atributy,...) objekty stejného typu.

VYSOKÁ ŠKOLA BÁŇSKÁ TECHNICKÁ UNIVERZITA OSTRAVA FAKULTA STROJNÍ

Organizace a zpracování dat I (NDBI007) RNDr. Michal Žemlička, Ph.D.

Diskové paměti nové pojmy a technologie

Architektura vnějších pamětí

Vrstvy periferních rozhraní

I/O systém Vnější paměti. PB 169 Počítačové sítě a operační systémy

VYSOKÉ UČENÍ TECHNICKÉ V BRNĚ OPTIMALIZACE DATOVÝCH ÚLOŽIŠŤ BAKALÁŘSKÁ PRÁCE FAKULTA PODNIKATELSKÁ ÚSTAV INFORMATIKY BRNO UNIVERSITY OF TECHNOLOGY

OPS Paralelní systémy, seznam pojmů, klasifikace

Sériové rozhraní IDE (ATA)

Seriové ATA, principy, vlastnosti

Administrace OS Unix. filesystém UFS mount snapshot RAID

Systém adresace paměti

Principy komunikace s adaptéry periferních zařízení (PZ)

AGP - Accelerated Graphics Port

Řadiče disků IDE SCSI

A6M33SSL: Statistika a spolehlivost v lékařství Teorie spolehlivosti

architektura mostů severní / jižní most (angl. north / south bridge) 1. Čipové sady s architekturou severního / jižního mostu

Hardware - komponenty počítačů Von Neumannova koncepce počítače. Von Neumannova koncepce počítače

Paralelní výpočty ve finančnictví

Rozhraní SCSI. Rozhraní SCSI. Architektura SCSI

Paměťový podsystém počítače

NAS 251 Seznámení s RAID

Pozice sběrnice v počítači

Profilová část maturitní zkoušky 2015/2016

Z čeho se sběrnice skládá?

VYSOKÁ ŠKOLA BÁŇSKÁ TECHNICKÁ UNIVERZITA OSTRAVA FAKULTA STROJNÍ DATABÁZOVÉ SYSTÉMY ARCHITEKTURA DATABÁZOVÝCH SYSTÉMŮ. Ing. Lukáš OTTE, Ph.D.

Systémy pro sběr a přenos dat

Organizace a zpracování dat I

Nimbus Data All Flash Systems

ODBORNÝ VÝCVIK VE 3. TISÍCILETÍ

Profilová část maturitní zkoušky 2014/2015

Kódováni dat. Kódy používané pro strojové operace

Základní principy konstrukce systémové sběrnice - shrnutí. Shrnout základní principy konstrukce a fungování systémových sběrnic.

Přerušovací systém s prioritním řetězem

CHARAKTERISTIKA VEŘEJNÉ ZAKÁZKY

Pohled do nitra mikroprocesoru Josef Horálek

Paměti. Paměť je zařízení, které slouží k ukládání programů a dat, s nimiž počítač pracuje

Sběrnice, připojování periferních zařízení a RAID. INP 2008 FIT VUT v Brně

Operační systémy 1. Přednáška číslo Struktura odkládacích zařízení

Operační systémy 2. Struktura odkládacích zařízení Přednáška číslo 10

Metody připojování periferií BI-MPP Přednáška 1

Architektura počítače

Semestrální práce z předmětu Speciální číslicové systémy X31SCS

KAPITOLA 1 - ZÁKLADNÍ POJMY INFORMAČNÍCH A KOMUNIKAČNÍCH TECHNOLOGIÍ

Přednáška. Vstup/Výstup. Katedra počítačových systémů FIT, České vysoké učení technické v Praze Jan Trdlička, 2012

Témata profilové maturitní zkoušky

Přenos signálů, výstupy snímačů

Souborové systémy. Architektura disku

Z{kladní struktura počítače

Inovace výuky prostřednictvím ICT v SPŠ Zlín, CZ.1.07/1.5.00/ Vzdělávání v informačních a komunikačních technologií

Kódy pro detekci a opravu chyb. INP 2008 FIT VUT v Brně

Endura 2.0 Nová generace CCTV IP systémů s Full-HD rozlišením Endura Optimalizace HD

Linux RAID, LVM. 27. listopadu Uvedené dílo podléhá licenci Creative Commons Uved te autora 3.0 Česko.

Řízení IO přenosů DMA řadičem

Počítač jako elektronické, Číslicové zařízení

Paměti cache. Cache může být realizována softwarově nebo hardwarově.

Mezipaměti počítače. L2 cache. L3 cache

Architektura procesorů PC shrnutí pojmů

Technológia riadenia tunelových stavieb. Ing. Petr Svoboda,Ph.D., SPEL, spol. s r.o. Ing. Jiří Bartoň, SPEL, spol. s r.o.

Real Time programování v LabView. Ing. Martin Bušek, Ph.D.

Grafické adaptéry a monitory

Informace, kódování a redundance

Gymnázium a Střední odborná škola, Rokycany, Mládežníků 1115

Bezpečn č os o t t dat

Provádění instrukcí. procesorem. Základní model

Paměti Rambus DRAM (RDRAM) Paměti Flash Paměti SGRAM

Externí paměti 1 Feromagnetické

Vstupně - výstupní moduly

Sběrnice. Parametry sběrnic: a. Přenosová rychlost - určuje max. počet bitů přenesených za 1 sekundu [b/s]

A6M33SSL: Statistika a spolehlivost v lékařství Teorie spolehlivosti

CHARAKTERISTIKY MODELŮ PC

Obecně se dá říct, že RAID se používá ke zvýšení výkonu a/nebo spolehlivosti pevných disků.

AS-Interface. AS-Interface = Jednoduché systémové řešení. Představení technologie AS-Interface

Základní deska (1) Označována také jako mainboard, motherboard. Deska plošného spoje tvořící základ celého počítače Zpravidla obsahuje:

Struktura a architektura počítačů (BI-SAP) 10

Metody připojování periferií

Integrovaná střední škola, Sokolnice 496

Kódování signálu. Problémy při návrhu linkové úrovně. Úvod do počítačových sítí. Linková úroveň

Paměti Rambus DRAM (RDRAM) Paměti Flash Paměti SGRAM

Registrový model HDD

Principy činnosti sběrnic

Architektury počítačů a procesorů

VZOROVÝ STIPENDIJNÍ TEST Z INFORMAČNÍCH TECHNOLOGIÍ

Přednášející: Zdeněk Kotásek. Ústav počítačových systémů, místnost č. 25

Využití ICT pro rozvoj klíčových kompetencí CZ.1.07/1.5.00/

Zobrazovací jednotky a monitory

Systémová sběrnice, souvislost architektury počítače a systémové

Evropský sociální fond Praha & EU: Investujeme do vaší budoucnosti

Datová centra a úložiště. Jaroslav G. Křemének g.j.kremenek@gmail.com

Transkript:

Disková pole (RAID) 1

Architektury RAID Důvod zavedení RAID: reakce na zvyšující se rychlost procesoru. Pozice diskové paměti v klasickém personálním počítači vyhovuje pro aplikace s jedním uživatelem. Další potřeba: snaha zrychlení diskových operací (zpracování dat paralelně). Řešení: data jsou distribuována na více disků, datová operace je realizována paralelně. Co to nabízí: kromě distribuování dat na více disků možnost zvýšení spolehlivosti využití redundance (zdvojování disků nebo vygenerování a záznam informace, která umožní opravu). Paralelní přístup a detekci poruchy diskové paměti a příp. opravu. Fyzická realizace diskových polí: disky SCSI. 2

Architektury RAID Význam zkratky: Redundant Array of Independent Disks. Jiné vysvětlení: Redundant Array of Inexpensive Disks. 7 úrovní. Neexistují hierarchické úrovně. Sada fyzických disků (každý fyzický disk má svůj řadič), operační systém je vidí jako jeden disk. Data jsou distribuována do všech fyzických disků. Možnost využití dodatečné kapacity pro uložení informace o paritě. První zásady o RAID definovány v r. 1988. Disky RAID a jejich vlastnosti jsou často konfrontovány s architekturami SLED Single Large Expensive Disk (samostatný velký nákladný disk). 3

Architektury RAID fyzická realizace V samostatném rámu mimo počítač nainstalována sada disků. V sestavě je dále server, řadič disků (RAID controller) a SCSI řadič (fyzické disky jsou připojeny přes SCSI řadič). Počet fyzických disků podle šířky rozhraní SCSI (adresace 1 z n). Operačnímu systému se RAID jeví jako SLED (jeden disk), má však větší výkon a vyšší spolehlivost. 4

RAID 0 Žádná redundance kvůli zabezpečení (všechny disky jsou využity pro uložení dat). Data jsou rozdělena na všechny disky. Zvýšení rychlosti z těchto důvodů: Požadovaná data jsou rozdělena na více disků. Operace vystavení (seek) je prováděna paralelně (současně na všech discích) dostaneme se současně k více datům jednou operací vystavení prováděnou paralelně. Důležité - všechny operace jsou prováděny paralelně. 5

RAID 0 Důležité: Dva různé V/V požadavky data jsou na různých discích. V datech není žádná redundance. 6

RAID 0 Data jsou rozdělena na více disků (striped). Všechna uživatelská i systémová data jsou z hlediska OS uložena jakoby na jednom systémovém disku. Každý disk je rozdělen na strips. Příklad: pole n disků, prvky strip sestávají z k sektorů. první strip na všech discích tvoří první stripe. sektory jsou číslovány takto: strip 0: 0 až k-1, strip 1: k až 2k-1 Pokud k=1, pak strip je tvořen dvěma sektory. Výhoda: současně je možné zpracovávat n prvků typu strip. Data se zapisují postupně na jednotlivé strip, tento proces se nazývá striping. Význam výrazů strip [strip] a stripe [strajp]: pruh, proužek. 7

RAID 0 Software je buď na úrovni počítače nebo je součástí subsystému disků. V čem spočívá urychlení: jedno vystavení, dostáváme se k více datům než v sestavě s jedním diskem. 8

RAID 0 RAID 0 není redundantní. Ztráta jednoho disku znamená ztrátu celého pole. Důvodem použití je výkon, tedy zvýšení přenosové rychlosti nebo propustnosti dat tam, kde na uchování dat nezáleží tak, jako na rychlosti. 9

RAID 0 Princip součinnosti operačního systému s disky RAID: operační systém vydá příkaz na čtení dat (předpokládá se, že data za sebou následují na jednotlivých strip), řadič RAID rozdělí tento příkaz na 4 samostatné příkazy, ty předá řadičům disků, disky tyto příkazy provedou paralelně. 10

RAID 0 podpora vysoké rychlosti přenosu Požadavek na vysokou rychlost diskové paměti (souvislost s technickou úrovní). Kvalitní spoj z diskové paměti (tvoří jeden celek s řadičem) do počítače. Rychlý řadič diskové paměti každý disk v diskovém poli má svůj řadič, který autonomně řídí periferní operace disk SCSI je takto vybaven. Rychlá systémová sběrnice. Rychlý procesor. Toto vše platí obecně pro architektury RAID. 11

RAID 0 charakter V/V požadavků V/V požadavky požadavky na data. Ideální organizace dat data, která spolu souvisejí (např. soubor) by měla být uložena v sousedních strip (v jednom stripe) pak přenos paralelně. Výsledek výrazně efektivnější operace související s diskem hlavně rychlost přenosu (možnost přenosu jednoho souboru paralelně jeho jednotlivé části). 12

RAID 0 využití v systému zaměřeném na řešení transakcí Podpora vysokého objemu V/V požadavků. Řešení těchto požadavků diskové pole umožňuje tyto požadavky vyváženě rozložit na více fyzických disků. Dvě situace větší počet nezávislých transakcí nebo samostatné transakce, které je možné rozdělit na jistý počet asynchronních činností (termín počet souvisí s počtem strip). Souvislost s velikostí strip měl by být takový, aby řešení transakce nevyžadovalo více přístupů na disk (pomalá operace vystavení). Představa: diskové pole v serverové stanici. 13

RAID 0 Architektura RAID 0 je vhodná pro situace, kdy se vyžadují přenosy velkých objemů dat. Problém, pokud je požadavek na data větší než počet disků vynásobený velikostí strip, pak musí být násobné požadavky na data (nestačí jedno vystavení) toto řeší řadič RAID. Pokud pouze požadavky na data velikosti jeden sektor nevyužité možnosti RAID (není paralelismus diskových operací není dosažen maximální výkon). Spolehlivost takových instalací je menší než spolehlivost sestav SLED. Vysvětlení: 4 disky RAID s parametrem střední doba mezi poruchami (MTBF Mean Time Between Failures) 20 000 hodin, pak každých 5 000 hodin má jeden z disků poruchu data z tohoto disku jsou ztracena) z hlediska spolehlivosti jde o sériový systém (porucha jediného disku, celý systém je nefunkční). Větší spolehlivost má jeden disk SLED (zůstane zachováno 20 000 hodin). 14

RAID 1 Architektura RAID 1 Má v sobě rysy pravé architektury RAID, disky jsou zdvojeny (redundance). Principy podobné těm, které jsou využívány u architektur duplex. Architektury duplex musí být rozlišitelné, která data (výstup) jsou správná. 15

RAID 1 Zrcadlené disky snaha o zvýšení spolehlivosti. Každý strip je uložen na dva fyzické disky. Poznámka: v dalších typech řešeno způsobem, který nepředstavuje řešení typu hrubá síla, k datům se počítá parita (nevýhodné při každé změně dat se musí znova počítat režie). RAID 1 - výrazná redundance. Jednoduché zotavení při chybě. Nákladné. 16

RAID 1 Čtení dat pouze z jednoho disku (z toho, kde to bude rychlejší doba vystavení + rotační zpoždění). Zápis dat provádí se paralelně na oba disky výkon při zápise bude ovlivněn tím diskem, na němž to bude trvat déle (delší doba vystavení + rotační zpoždění). Zotavení po poruše data se čtou z disku, který je funkční. Nevýhoda vysoké náklady. 17

RAID 1 - využití Z hlediska výkonu tam, kde podstatnou část transakcí tvoří transakce čtení (např. systémové disky systémové programové vybavení a data - zálohování). Transakčně orientovaná aplikace výhoda, pokud výrazným počtem transakcí jsou transakce typu čtení, horší stav v případě transakcí typu zápis. 18

RAID 2 Čtyři disky uložení dat, tři disky informace pro opravu chyb 19

RAID 2 Disky jsou synchronizovány, takže na všech discích jsou hlavy ve stejné pozici z hlediska otáčení disku a vystavení. Paralelní přístup na vyřízení každého V/V požadavku se podílejí všechny paralelně pracující disky. Informace potřebná pro opravu chyb se počítá z odpovídajících bitů na discích. Na paritní disky se ukládají bity vygenerované jako Hammingův kód z odpovídajících datových bitů. Hammingův kód (7,4): 4 datové bity jsou zakódovány do 7 bitů oprava 1 vadného bitu a detekce 2 vadných bitů. Velká redundance nevýhodné (RAID 2 se příliš nevyužívaly). 20

RAID 3 Čtyři disky uložení dat, jeden disk parita. 21

RAID 3 Organizováno podobně jako RAID 2. Pouze jeden redundantní disk bez ohledu na to, jak je rozsáhlé diskové pole. Jeden paritní bit pro každou sadu odpovídajících bitů. Data na discích, které mají poruchu, mohou být rekonstruována z existujících dat a parity. Vysoké rychlosti přenosu. 22

RAID 3 - využití redundance Pokud má disk poruchu, tak se přečte paritní bit a data se zrekonstruují ze zbývajících bitů, pro rekonstrukci se použije i bit paritní. Po výměně vadného disku je možné data ze zbývajících bitů zrekonstruovat. Rekonstrukce dat: Uvažujme diskové pole sestávající z pěti disků. X0 X3 obsahují data X4 paritní bit Schéma tvorby paritního bitu: X4(i) = X3(i) xor X2(i) xor X1(i) xor X0(i) 23

RAID 3 rekonstrukce dat (jeden z disků má poruchu) Předpokládejme, že disk X1 přestal fungovat, tzn. data z něj nejsou k dispozici. Výchozí vztah (předcházející stránka): X4(i) = X3(i) xor X2(i) xor X1(i) xor X0(i) K oběma stranám rovnice přidáme X4(i) xor X1(i) Pak dostaneme: X4(i) xor X4(i) xor X1(i) = X3(i) xor X2(i) xor X1(i) xor X0(i) xor X4(i) xor X1(i), X4(i) xor X4(i) je vždy 0, stejně tak X1(i) xor X1(i) X1(i) = X4(i) xor X3(i) xor X2(i) xor X0(i) Hodnota bitu z disku, který má poruchu, se vypočte ze zbývajících bitů. Závěr: bit z vadného disku se počítá ze zbývajících bitů, tento princip se používá pro RAID3 až RAID6 (tzv. redukovaný režim). 24

RAID 3 Zápis v situaci, kdy je disk vadný: Ze všech bitů se vytvoří paritní bit, vše se zaznamená (bez zápisu do vadného bitu disk je vadný), po výměně disku se patřičný bit zrekonstruuje. Výkon: Je vysoký, protože se čte z více disků současně, současně se však může vyřizovat pouze jeden požadavek. 25

RAID 4 Parita typu block-level. Data se ukládají do větších "proužků"s velikostí na úrovní bloků. 26

RAID 4 Každý disk je nezávislý. Vhodný pro aplikace s vysokým objemem V/V požadavků. Velké stripes. Parita se počítá bit po bitu přes celé stripes na každém disku. Parity se uloží na paritní disk. 27

RAID 4 - využití redundance Situace: potřebujeme zapisovat pouze na jeden disk jak vypočteme paritu? Pole sestává z 5 disků: X0 X3 data, X4 parita. X4(i) = X3(i) xor X2(i) xor X1(i) xor X0(i) Nová parita (změna v bitu X1(i) : X4 (i) = X3(i) xor X2(i) xor X1 (i) xor X0(i) xor = X3(i) xor X2(i) xor X1 (i) xor X0(i) xor X1(i) xor X1(i) = X3(i) xor X2(i) xor X1(i) xor X0(i) xor X1(i) xor X1 (i) = X4(i) xor X1(i) xor X1 (i) Má-li se vypočítat nová parita, tak se pro výpočet použije stará parita, původní hodnota bitu a nová hodnota bitu. Zápis: zapisuje se jak datový bit, tak i parita. 28

RAID 5 Parita typu block-level distributed 29

RAID 5 Podobné s RAID 4 Parita je uložena na všech discích. Všechny dosavadní mechanismy byly schopny napravovat problém, pokud nastal na jednom disku. Stav, kdy poruchu mělo více disků neřešitelný. RAID 5 zvýšení spolehlivosti. 30

RAID 6 31

RAID 6 Počítají se dvě parity. Parita se ukládá do samostatných bloků na různých discích. Je potřeba další dva disky navíc. Porucha dvou disků je možná náprava dat. Porucha tří disků neřešitelné. 32

RAID 0, 1, 2 33

RAID 3 & 4 34

RAID 5 & 6 35

RAID 7 Každý disk je řízen nezávisle s vlastními datovými cestami včetně cache. Přenosy do centrální cache jsou nezávislé. Na systém lze napojit 48 disků a 12 hostitelských počítačů. Vlastní řadič (počítač) řídí nezávisle na hostitelských počítačích. Systém pracuje v reálném čase a má jak SCSI sběrnici, tak i interní vysokovýkonnou sběrnici (320MB/s) a sběrnici pro řízení. 36

RAID 7 Řadič je zajištěna nezávislost jednotlivých cest a disků. Soustava obsahuje alespoň jeden paritní disk. Umožňuje ochranu dat i při poruše více disků. Umí detekovat i sudý počet chyb, který se u předešlých systémů tváří jako v pořádku. Má zdvojeny napájecí zdroje a 3 úrovňovou cache. 37

RAID 7 Diskové pole RAID 7 vlastně není typickým diskovým polem v porovnání s předchozími modely. Tento typ byl popsán a zároveň i patentován firmou Storage Computers. Díky patentovému chránění i technické náročnosti se tento typ používá jen velmi málo. Celkový výkon při zápisu je o 25 až 90% vyšší než při zápisu na jeden disk, a o 50 až 500% vyšší v porovnání s ostatními úrovněmi RAID. 38

RAID 10 Kombinace RAID 0 (stripe) a RAID 1 (zrcadlo). 39

RAID 10 Jedná se vlastně o zrcadlený stripe. Minimální počet disků 4, režie 100% diskové kapacity navíc. Poskytuje nejvyšší výkon v bezpečných typech polí, podstatně rychlejší než RAID 5 zejména při zápisu. Další výhodou je odolnost proti ztrátě až 50% disků (naproti tomu RAID 5 odolává ztrátě pouze jednoho disku). 40

Architektury RAID - závěr Cíl architektur RAID zvýšení rychlosti přístupu k datům a zvýšení spolehlivosti se u různých architektur RAID řeší s různým výsledkem. První typy architektur především zvýšení rychlosti přístupu k datům. U dalších typů architektur pak naplňování požadavku na zvýšení spolehlivosti. 41