EU EGEE Presentace projektu

Transkript

1 EU EGEE Presentace projektu Ludek Matyska Masarykova univerzita CESNET, z.s.p.o.

2 Všeobecné informace Enabling Grids for E-sciencE EGEE Enabling Grids for E-sciencE (in Europe) Dvouletý projekt 6. rámcového programu EU Koordinátor: CERN Příspěvek EU: 35 M Duben 2004 až březen partnerů Především Evropa, ale i partneři z USA Cíl: Vybudovat celoevropskou Gridovou infrastrukturu širokého použití Podcíl: Zajistit Gridovou infrastrukturu pro čísticovou fyziku Přes 100 tisíc procesorů a jednotky PB úložného prostoru EGEE project is funded by European Commission (contract number IST ) 2

3 Cíle projektu Vybudovat a provozovat robustní bezpečný Grid (produkční kvalitu), který bude motivovat majitele zdrojů (výpočetních a datových) připojit se Dále vyvíjet, udržovat a stabilizovat middleware nezbytné pro naplnění prvního cíle Vytvořit prostředí, které bude atraktivní pro nové uživatelské komunity a aplikace EGEE project is funded by European Commission (contract number IST ) 3

4 Organizační struktura 70 partnerů rozdělených do federací EGEE project is funded by European Commission (contract number IST ) 4

5 CE Federace a řízení projektu ČR součástí středoevropské federace (CE) Další partneři: Polsko, Rakousko, Maďarsko, Slovensko, Slovinsko a Chorvatsko ČR zastoupena sdružením CESNET, z.s.p.o. Project Management Board Po jednom zástupci z každé federace (CE zastoupená ČR) Ředitel projektu: Bob Jones (Fabrizio Gagliardi do října 2005) Technický ředitel: Erwin Laure (Frederic Hemmerdo října 2005) Project Execution Board Vedoucí jednotlivých aktivit Task forces EGEE project is funded by European Commission (contract number IST ) 5

6 Obsahová struktura Vývoj Joint Research Activities, JRA Provoz Service Activities, SA Řízení, externí kontakty, Networking Activities, NA CESNET zapojen v JRA1: vývoj middleware SA1: Provoz EU Gridu NA3: Školení NA4: Podpora aplikací/uživatelů EGEE project is funded by European Commission (contract number IST ) 6

7 Infrastruktura Postaveno na clusterech počítačů s Intelovskými (nebo AMD) procesory Projekt neplatí hardware Poskytován partnery (majitelé zdrojů) Motivace: sdílení zdrojů s ostatními partnery ČR >300 procesorů (nejvíce z CE federace) Regional Operation Centers Připojování nových zdrojů Sledování stavu Podpora při řešení problémů Pro CE je ústředí ROCu v Krakově (Polsko) GGUS Global Grid User Support Propojení s lokálními systémy podpory uživatelů EGEE project is funded by European Commission (contract number IST ) 7

8 Middleware glite vlastní middleware projektu EGEE Komponenty User Interface Resource Broker Data management Logging and Bookkeeping Orientace na Data GRID a high throughput computing Desítky tisíc úloh od jediného uživatele EGEE project is funded by European Commission (contract number IST ) 8

9 Virtuální organizace Předpoklad: Každý skupina uživatelů vytvoří vlastní Virtuální organizaci VO je tvořena Zdroji (počítače, úložné prostory, data, ) Uživateli Službami, které je spojují dohromady glite komponenty EGEE poskytuje základní nástroje na vytvoření VO EGEE monitoruje stav služeb, tvořících VO Registrace VO EGEE project is funded by European Commission (contract number IST ) 9

10 VOCE Enabling Grids for E-sciencE Virtuální organizace střední Evropy Vytvořena zdola, tj. vlastníky zdrojů Určena pro nespecifické uživatele ze střední Evropy Seznámení se s EGEE Gridem Možnost spouštět produkční úlohy Uživatelé se nemusí starat o infrastrukturu V případě zvýšeného zájmu možno odštěpit vlastní VO (konkrétně tematicky zaměřenou) Rozsah Přes 540 procesorů, 6 TB diskové prostoru Zdroje zatím poskytuje ČR, Slovensko, Polsko, Maďarsko EGEE project is funded by European Commission (contract number IST ) 10

11 VOCE odkazy Registrace uživatelů Registrační stránka: Dostupné každému, kdo má certifikát uznané certifikační autority Dokumentace VOCE portal Uživatelská podpora a hlášení chyb a problémů ový alias voce@cesnet.cz Vlastní portál (P-GRADE) pro workflow Vlastní UI pro zadávání a správu úloh (CHARON) EGEE project is funded by European Commission (contract number IST ) 11

12 Možnosti připojení/použití Uživatelé Přes konkrétní existující VO Vyhledat vhodnou VO Domluvit se se správcem Přes VOCE Postačí certifikát (v ČR vydaný CA CESNETu) Založení vlastní VO Poskytovatelé zdrojů Nabídnout zdroje konkrétní VO (i více VO) Linuxové prostředí Instalace glitemiddleware Certifikační proces (registrace u ROCu) EGEE project is funded by European Commission (contract number IST ) 12

13 Aplikace Primární zaměření: high throughput výpočty Primárně velké množství jednoprocesorových úloh a hodně dat Podpora pro paralelní úlohy (MPI) na jednom clusteru Velké aplikace/skupiny uživatelů Částicová fyzika Různé experimenty (CMS, Atlas, ) Bioinformatika Vysoké nároky na bezpečnost Ostatní uživatelé Přes 40 registrovaných VO V CE zájem o výpočetní chemie EGEE project is funded by European Commission (contract number IST ) 13

14 EGEE II EGEE končí v březnu 2006 Od dubna 2006 pokračování: projekt EGEE II Identické cíle, ale posun důrazu: Zvýšení stability middleware (samostatná testovací aktivita) Podpora aplikací/skupin uživatelů Opět dva roky Příspěvek EU přes 38M Přes 80 organizací Struktura zachována (Federace) EGEE project is funded by European Commission (contract number IST ) 14

15 Shrnutí Projekt EGEE buduje celoevropskou produkční Gridovou infrastrukturu Součástí vlastní vývoj middleware (glite) Strategie pro přidávání zdrojů a získání nových uživatelů ČR má velmi dobrou pozici v rámci EGEE Možnost získat přístup k produkčnímu Gridu Možnost spolupráce s kolegy v zahraniční v rámci jednotného gridového prostředí Perspektiva do dubna 2008 Probíhají diskuse ohledně zajištění celoevropského Gridu v 7. rámcovém programu EGEE project is funded by European Commission (contract number IST ) 15