RAID, LVM a souborové systémy

Podobné dokumenty
Přednáška. Systémy souborů. FAT, NTFS, UFS, ZFS. Katedra počítačových systémů FIT, České vysoké učení technické v Praze Jan Trdlička, 2012

Operační systémy 1. Přednáška číslo Struktura odkládacích zařízení

12. Správa souborů. ZOS 2006, L. Pešička

Operační systémy 2. Struktura odkládacích zařízení Přednáška číslo 10

Logická struktura pevného disku

a co je operační systém?

Operační systémy 1. Přednáška číslo Souborové systémy

Principy počítačů a operačních systémů

Souborový systém (File System FS) Souborové systémy. Souborová fragmentace. Disková fragmentace. Organizace dat na pevném disku

B4B35OSY: Operační systémy

Přednáška 2. Systémy souborů OS UNIX. Nástroje pro práci se souborovým systémem. Úvod do Operačních Systémů Přednáška 2

Informační a komunikační technologie

Principy operačních systémů. Lekce 7: Souborový systém

ÚVOD DO OPERAČNÍCH SYSTÉMŮ. Správa paměti. Přímý přístup k fyzické paměti, abstrakce: adresový prostor, virtualizace, segmentace

Systém souborů (file system, FS)

11. Správa I/O Správa souborů. ZOS 2006, L. Pešička

Správa počítačové sítě Novell NetWare

Bloková zařízení v LINUXu Jan Vrbata - GOPAS

Souborové systémy Mgr. Josef Horálek

Bezpečn č os o t t dat

Systém souborů Mgr. Josef Horálek

IPZ laboratoře Struktura pevného disku L305 Cvičení 1 Cvičící:

Administrace Unixu a sítí

B4B35OSY: Operační systémy

Organizace a zpracování dat I (NDBI007) RNDr. Michal Žemlička, Ph.D.

ODBORNÝ VÝCVIK VE 3. TISÍCILETÍ

Organizace a zpracování dat I

Když konvenční disky nestačí tempu vašich aplikací

2010/2011 ZS P i r i nc č py po ít č čů a SOUBOROVÝ SUBSYSTÉM

Efektivní využití SSD v produktech Dell: SSD za cenu HDD. Ondřej Bajer Storage Systems Engineer

Maturitní téma: Operační MS-DOS

Diskové paměti nové pojmy a technologie

Externí paměti 1 Feromagnetické

Linux RAID, LVM. 27. listopadu Uvedené dílo podléhá licenci Creative Commons Uved te autora 3.0 Česko.

Server je v informatice obecné označení pro počítač, který poskytuje nějaké služby nebo počítačový program, který tyto služby realizuje.

Linux Teorie operačních systémů a realita

Solid State Drive SSD polovodičový disk. J. Vrzal, verze 0.8

Disková pole (RAID) 1

Počítačová sestava paměti, operační paměť RAM

Administrace OS Unix. filesystém UFS mount snapshot RAID

MODERNÍ SOUBOROVÉ SYSTÉMY - ZFS. Richard Janča

Souborové systémy a logická struktura dat (principy, porovnání, příklady).

Petr Krajča. Katedra informatiky Univerzita Palackého v Olomouci. Petr Krajča (UP) KMI/YOS: Přednáška V. 12. prosinec, / 37

SSD vs. HDD / WAL, indexy a fsync

Paměťová média. Motto dne: Z Berkeley vzešly dvě důležité věci LSD a BSD. Nevěříme, že je to náhoda.

Datová úložiště. Zdroj: IBM

VISUAL BASIC. Práce se soubory

Paměti. Paměť je zařízení, které slouží k ukládání programů a dat, s nimiž počítač pracuje

Karel Johanovský Petr Jelínek. Aneb, co všechno je potřeba

Kapitola 10: Diskové a souborové struktury. Klasifikace fyzických médií. Fyzická média

Petr Krajča. Katedra informatiky Univerzita Palackého v Olomouci. Petr Krajča (UP) KMI/YOS: Přednáška V. 9. prosinec, / 40

Disková pole (RAID) 1

Storage... co je nového (SSD!)... a co se zatím nepovedlo rozbít:-)

HDD + SSD. Autor: Kulhánek Zdeněk

Operační systémy a sítě

Linux RAID, LVM. Ondřej Caletka

Souborové systémy. Architektura disku

Číslo projektu: CZ.1.07/1.5.00/ III/2 Inovace a zkvalitnění výuky prostřednictvím ICT. Zdeněk Dostál Ročník: 1. Hardware.

Přednáška. Úložiště dat: HDD, SDD, RAID, DAS, NAS, SAN. Katedra počítačových systémů FIT, České vysoké učení technické v Praze Jan Trdlička, 2012

I/O systém Vnější paměti. PB 169 Počítačové sítě a operační systémy

Nová éra diskových polí IBM Enterprise diskové pole s nízkým TCO! Simon Podepřel, Storage Sales

Růst datových potřeb Pojem velkokapacitní se mění v čase Dříve několik MB, dnes stovky GB až TB

Pokročilé architektury počítačů

Příloha č. 2A Zadávací dokumentace k Veřejné zakázce Dodávka technologického řešení pro Geoportál

Téma 2 Architektury OS a jejich služby

Západočeská univerzita v Plzni FAKULTA PEDAGOGICKÁ KATEDRA VÝPOČETNÍ A DIDAKTICKÉ TECHNIKY

MARIE PACS S PACSem hezky od podlahy když se data sypou!

Technické informace. PA152,Implementace databázových systémů 4 / 25. Projekty. pary/pa152/ Pavel Rychlý

Storage product guide Q2/2012

PA152: Efektivní využívání DB 2. Datová úložiště. Vlastislav Dohnal

Základní příkazy OS UNIX

Desktop systémy Microsoft Windows

Disková pole (RAID) 1

VÝZVA K PODÁNÍ NABÍDKY. Ukládání, zálohování a archivace dat

Instalace OS, nastavení systému

Příručka pro správu systému

Procesy a vlákna - synchronizace

SSD v serveru. Pavel Šnajdr InstallFest 2015

Pokročilé architektury počítačů

B Organizace databáze na fyzické úrovni u serveru Oracle

Desktop systémy Microsoft Windows

Systém souborů. Účel souborového systému. Organizace dat na disku

OZD. 2. ledna Logický (Objekty, atributy,...) objekty stejného typu.

Pár odpovědí jsem nenašla nikde, a tak jsem je logicky odvodila, a nebo jsem ponechala odpověď z pefky, proto je možné, že někde bude chyba.

Linux-příkazový řádek

Pevné disky. Pevné disky. Nárůst kapacity pevných disků

Souborový systém NTFS (New Technology File System) Jan Šváb

Operační systémy Tomáš Hudec. 11 Soubory a souborové systémy. Obsah: 11.1 Alokace prostoru na médiu,

LINUX SOUBORY. Zadejme příkaz ls l! V této lekci se odrazíme od dlouhého výpisu příkazu ls a uvidíme, kam nás to zanese. SPŠ Teplice - 3.

OS Správa souborů. Tomáš Hudec.

nutné smazat zároveň i všechna ostatní zainteresovaná paměťová místa přepisovaném

2.2 Acronis True Image 19

Desktop systémy Microsoft Windows

Operační systémy (OS)

Bezpečnostní mechanismy serverové infrastruktury

Příloha č.2 - Technická specifikace předmětu veřejné zakázky

Základní pojmy informačních technologií

Není cloud jako cloud, rozhodujte se podle bezpečnosti

Zálohování a rychlá obnova dat Konsolidace serverů a diskových polí Archivace elektronické pošty

Využití ICT pro rozvoj klíčových kompetencí CZ.1.07/1.5.00/

Transkript:

ÚVOD DO OPERAČNÍCH SYSTÉMŮ RAID, LVM a souborové systémy České vysoké učení technické Fakulta elektrotechnická Ver.1.00 2010

Pevný disk Ideální pevný disk: nekonečně velký, nekonečně rychlý, věčný, udržující data i bez napájení, nejlépe zadarmo. Data musí zůstat uchována po ukončení procesu, jenž je vytvořil nebo upravoval. WD 250,0 GB, 7200rpm, 16MB, SATA/300 Je žádoucí zajistit přístup více procesů ke stejným datům. Cena sice klesá, ale nároky na uložení dat rostou. Důležitý prostředek, s nímž se nesmí mrhat. (Každý disk se nakonec ukáže býti malý! Pokud dřív neodejde!) Spolehlivost RAID, S.M.A.R.T. Abstrakce fyzických disků LVM. ADATA SSD S596 256GB 2.5'' SATA MLC (čtení: 240MB/s; zápis: 180MB/s;cache 128MB) Organizace dat Souborový systém.

S.M.A.R.T. S.M.A.R.T - Self-Monitoring, Analysis, and Reporting Technology. Předvídatelné vs. nepředvídatelné poruchy: poškození povrchu disku poškození čtecí/zápisové hlavičky poškození vystavovacího mechanismu (ramínka) poškození motoru poškození elektroniky Zaznamenávají se parametry disku a někdy i informace o jednotlivých selháních. příkaz: smartctl

RAID RAID - Redundant Array of Inexpensive/Independent Disks Data se ukládají na více disků tak, aby je bylo možno obnovit (dopočítat) při výpadku libovolného disku. Hardwarové vs. softwarové řešení. Běžné RAID módy: 1 a 5 Méně časté módy: 0, 2, 3, 4, 6, 7, 0+1, 10, 50, 60 a 100 Rezervní disk. RAID nenahrazuje zálohování! příkaz: mdadm

LVM LVM - Logical Volume Management Fyzické zařízení (disk) se rozdělí na menší části (PE) PE se mapují (obvykle 1:1) na LE Z LE se vytvoří skupiny svazků VG A teprve s VG se zachází jako s diskem

Souborové systémy pohled uživatele soubor soubory a jejich struktura: skupina bytů skupina záznamů strom 1 záznam 1 byte T2 B3 B2 T4 A3 B1 Z4 B2 B2 A1 B4 A2

Souborové systémy pohled uživatele typy souborů

Souborové systémy pohled uživatele přístup k souborům sekvenční přístup čtení/zápis všech bytů/záznamů od začátku lze se vrátit na začátek typické pro práci s páskou náhodný přístup čtení/zápis bytů/záznamů v náhodném pořadí důležité pro databázové systémy

Souborové systémy pohled uživatele atributy souborů Atribut Význam Protection Kdo a jakým způsobem může k souboru přistupovat. Password K přístupu do souboru je potřeba heslo. Creator ID uživatele, který soubor vytvořil. Owner ID současného vlastníka. Read only flag 0 - read/write, 1 - read only Hidden flag 0 - obyčejný soubor, 1 - skrytý soubor. Nevypíše se při výpisu adresáře. System flag 0 - obyčejný soubor, 1 - sytémový soubor. Archive flag 0 - bylo zálohováno, 1 - je potřeba zálohovat. ASCII/binary flag 0 - ASCII, 1 - binary. Random access flag 0 - sekvenční přístup, 1 - náhodný přístup. Temporary flag 0 - běžný soubor, 1 - smazat při ukončení procesu. Lock flag 0 - nezamčeno, cokoliv jiného - zamčeno. Record length Počet bytů v záznamu. Key position Posuv klíče v záznamu. Key length Počet bytů v poli klíč. Creation time Datum a čas vytvoření. Time of last access Datum a čas posledního přístupu. Time of last change Datum a čas poslední změny. Current size Počet bytů v souboru. Maximux size Velikost v bytech, jíž může soubor maximálně dosáhnout.

Souborové systémy pohled uživatele operace se soubory UNIX Win32 Popis open CreatFile Otevři soubor nebo vytvoř nový. unlink DeleteFile Smaž existující soubor. close CloseHandle Zavři soubor. read ReadFile Čtení dat ze souboru. write WriteFile Zápis dat do souboru. lseek SetFilePointer Přejdi na zadanou pozici v souboru. stat GetFileAttributes Čtení atributů souboru. fcntl LockFile Uzamčení souboru nebo jeho části. fcntl UnlockFile Zrušení zámku.

Souborové systémy pohled uživatele adresáře Jednoúrovňový adresářový systém. Hierarchický adresářový systém.

Souborové systémy pohled uživatele operace s adresáři Win32 UNIX Význam CreateDirectory mkdir Vytvoření nového adresáře. RemoveDirectory rmdir Zrušení prázdného adresáře. FindFirstFile opendir Příprava pročtení položek v adresáři. FindNextFile readdir Čtení položky v adresáři. MoveFile rename Přesun souboru do jiného adresáře. SetCurrentDirectory chdir Změna pracovního adresáře.

Souborový systém - implementace - souborový systém a disk! - GPT GUID Partition table překonání 2 TiB limitu.

Souborový systém - implementace - soubor Spojitá alokace: Spojitá alokace po vymazání některých souborů: Spojový seznam:

Souborový systém - implementace - FAT (v paměti)

Souborový systém - implementace - i-node

Souborový systém - implementace - adresáře Jednoduchý adresář. Pevná velikost položek. Adresář v němž položky odkazují na i-node.

Souborový systém - implementace - adresáře Dlouhé názvy souborů.

Souborový systém - implementace - sdílení souborů

Souborový systém - zvýšení výkonu, odolnosti a zjednodušení log, lfs všechny zápisy se ukládají do vyrovnávací paměti periodicky se zapisují na konec záznamů při otevření se musí nejdříve dohledat příslušný i-node přes mapu i-nodů a poté přistoupit ke správnému bloku. žurnál virtualizace

Souborový systém - správa a optimalizace Velikost bloku, informace o volných blocích, quota, zálohy, konzistence, cache, defragmentace.

Souborový systém - správa a optimalizace

Příklady souborových systémů iso9660 fat unix v7 (předchůdce fs minix a ext) ext3, ext4, reiserfs, ntfs

MS DOS - FAT

UNIX V7

Literatura Tanenbaum, A.: Modern Operating System, Prentice Hall, New Jersey 2008