SlovakGrid infraštruktúra návrh projektu Ladislav Hluchý Ústav informatiky SAV slovakgrid.sk
description
Transcript of SlovakGrid infraštruktúra návrh projektu Ladislav Hluchý Ústav informatiky SAV slovakgrid.sk
SlovakGrid infraštruktúranávrh projektu
Ladislav HluchýÚstav informatiky SAV
www.slovakgrid.sk
Obsah
projekt EGEE (6RP, 7RP) projekt EGI - design study (7RP) návrh projektu SlovakGrid (SF)
Bob Jones - Frascati, 16-17 January 2008
3
EGEE
Main Objectives Operate a large-scale,
production quality grid infrastructure for e-Science
Attract new resources and users from industry as wellas sciences
Flagship grid infrastructure project co-funded by the European Commission Now in 2nd phase with 91 partners in 32 countries
Bob Jones - Frascati, 16-17 January 2008
4
EGEE – What do we deliver? Infrastructure operation
Sites distributed across many countries Large quantity of CPUs and storage Continuous monitoring of grid services & automated site
configuration/management Support multiple Virtual Organisations from diverse research
disciplines
Middleware Production quality middleware distributed under business friendly
open source licence Implements a service-oriented architecture that virtualises resources Adheres to recommendations on web service inter-operability and
evolving towards emerging standards
User Support - Managed process from first contact through to production usage
Training Expertise in grid-enabling applications Online helpdesk Networking events (User Forum, Conferences etc.)
ArcheologyAstronomyAstrophysicsCivil ProtectionComp. ChemistryEarth SciencesFinanceFusionGeophysicsHigh Energy PhysicsLife SciencesMultimediaMaterial Sciences…
249 sites48 countries50,000 CPUs>5 PetaBytes>10,000 users>150 VOs>150,000 jobs/day
Bob Jones – Frascati, 16-17 January 2007 5
Registered Collaborating Projects
Applicationsimproved services for academia,
industry and the public
Support Actionskey complementary functions
Infrastructuresgeographical or thematic coverage
Bob Jones – Frascati, 16-17 January 2007 6
Obsah
projekt EGEE (6RP, 7RP) projekt EGI - design study (7RP) návrh projektu SlovakGrid (SF)
Európska Gridová iniciatíva (EGI)
Potreba pripraviť stálu, spoločnú Gridovú infraštruktúru Zaistiť dlhodobú udržateľnosť Európskej e-infraštruktúry, bez
závislosti na krátkodobých cykloch financovania projektov Koordinovať integráciu a interakciu medzi národnými Gridovými
infraštruktúrami (NGI) Prevádzkovať produkčnú Gridovú infraštruktúru na úrovni
Európy pre široké spektrum vedeckých odborov
Testovacia fáza Počiatočná produkčná fáza Fáza rutinného používania
Trvalo udržateľná e-infraštruktúra
Grids in Europe
Examples of National Grid projects: Austrian Grid Initiative Belgium: BEgrid Cyprus: CYGrid France: Grid’5000 Germany: D-Grid; Unicore Greece: HellasGrid Grid Ireland Italy: INFNGrid; GRID.IT The Netherlands: DutchGrid Scandinavia: NDGF Portugal: Portuguese Grid Switzerland: Swiss Grid United Kingdom: National Grid Service; OMII; GridPP …
Slide courtesy of Kyriakos Baxevanidis, EC
Broad scale test-beds
Production quality
facilities
Sustainable
e-Infrastructures
(utility model)
Sustainable grid/data-based e-
Infrastructures (utility model)
Towards sustainable grid-empowered e-Infrastructures
e-IRG Delegates Meeting, London, 12/2005
Recommendation:
“The e-IRG recognises that the current project-based financing model of grids (e.g., EGEE, DEISA) presents continuity and interoperability problems, and that new financing and governance models need to be explored – taking into account the role of national grid initiatives as recommended in the Luxembourg e-IRG meeting.”
e-IRG Recommendations on Sustainable e-Infrastructures
I: governments and the Commission should develop policies and mechanisms to encourage increased investment in a more coherent and interoperable way across Europe
II: the existing e-Infrastructure projects must be superseded by integrated sustainable services at national and European levels
III: e-Infrastructures must be application-neutral and open to all user communities and resource providers. National funding agencies should be encouraged to fund multi-disciplinary and inclusive infrastructures rather than disciplinary-specific alternatives
e-IRG Recommendations on Sustainable e-Infrastructures
IV: e-Infrastructures must inter-operate and adopt international standard services and protocols in order to qualify for funding
V: the Commission should, within the seventh Framework Programme, develop a pan-European e-Infrastructure which explicitly encourages the further integration of national e-Infrastructure initiatives
e-IRG Task Force on Sustainable e-Infrastructures (SeI)
http://www.e-irg.org/publ/2006-Report_e-IRG_TF-SEI.pdf
Characteristics of NGIs
Each NGI … should be a recognized national body
with a single point-of-contact … should mobilise national funding and resources … should operate the national e-Infrastructure … should support user communities (application independent,
and open to new user communities and resource providers) … should contribute and adhere to international standards and
policies
Responsibilities between NGIs and EGI are split to be federated and complementary
38 European NGIs
+ Asia, US, Latin America
+ PRACE
+ OGF-Europe
+ …
Obsah
projekt EGEE (6RP, 7RP) projekt EGI - design study (7RP) návrh projektu SlovakGrid (SF)
Grid koordinované zdieľanie zdrojov
v dynamických virtuálnych organizáciách
Astronómia
Vedy o Zemi
Geofyzika
Výpočtováchémia
Medicína
Fyzikavysokých energií
Biofyzika
Astrofyzika
Multimédiá
Materiálovývýskum
Slovenská gridová infraštruktúra (SlovakGrid) – zabezpečenie výpočtovej a úložnej kapacity
pre náročné počítačové simulácie
Prínosy
Navrhovaná gridová infraštruktúra: podpora náročných vedeckých výpočtov prispeje k zefektívneniu zdieľania znalostí poskytne prostredie pre vytváranie dynamických
virtuálnych organizácií v ktorých budú môcť výskumné skupiny spolupracovať pri
riešení spoločných výskumných cieľov môže uľahčiť zapojenie výskumných skupín zo Slovenska
do medzinárodných kolaborácií a tým prispieť k ich integrácii do európskeho výskumného
spoločenstva
Čiastkové úlohy
Budovanie špecializovaných laboratórií s vysokovýkonnými výpočtovými prostriedkami Vytvorenie operačného centra pre dohľad nad
infraštruktúrou Bezpečnosť v Gride podpora infraštruktúry
Podpora aplikácií a virtuálnych organizácií Trénovanie používateľov a výuka Manažment a koordinácia budovania gridovej infraštruktúry
Európska Gridová infraštruktúra
Odhadované minimálne parametre: - výpočtová kapacita viac ako 5 000 CPU - úložná kapacita viac ako 400 TB - výkon viac než 50 TeraFlops
Slovenská Gridová infraštruktúra
Predpokladané rozdelenie nákladov
na jednotlivé aktivity projektubudovanieGridovejInfraštruktúry
koordinácia projektu
trénovanie používateľov
podpora aplikácií
podpora infraštruktúry
hw, sw, siete,úpray miestností
Budovanie Gridovej infraštruktúry
Vybudovanie špecializovaných laboratórií s vysokovýkonnými výpočtovými prostriedkami vybudovanie výpočtových centier s vysokovýkonnými
výpočtovými klastrami zaškolenie obslužného personálu začlenenie centier do národnej a európskej infraštruktúry
Vytvorenie operačného centra pre dohľad nad infraštruktúrou zabezpečenie plynulého behu infraštruktúry a zaistenie včasného
riešenia problémov (monitorovanie stavu gridovej infraštruktúry, podpora pri riešení problémov)
koordinácia aktivít v rámci infraštruktúry (koordinácia inštalácie SW, začlenenia nových výpočtových centier a podobne)
spolupráca s regionálnymi a európskymi operačnými centrami prevádzka centrálnych služieb Gridu
Bezpečnosť v Gride
Prevádzka akreditovanej gridovej certifikačnej autority bezpečnosť v gride je založená na certifikátoch X509 pre
používateľov a služby každá krajina má národnú certifikačnú autoritu a sieť
registračných autorít SlovakGrid CA na Ústave informatiky SAV je medzinárodne
akreditovaná CA pre Slovensko v súčasnej dobe fungujú registračné autority v Bratislave, Banskej
Bystrici a Košiciach. Kooperácia v rámci medzinárodného združenia gridových
certifikačných autorít EUGridPMA zaistenie včasnej výmeny informácií o možných bezpečnostných
problémoch
Podpora aplikácií a virtuálnych organizácií
Zabezpečenie podpory pre používateľov a vývojárov pri prenose aplikácií do Gridu pomoc pri analýze aplikácií a ich príprave pre spustenie v Gride
Podpora virtuálnych organizácií pre slovenských používateľov založenie virtuálnej organizácie pre slovenských používateľov pomoc pri začleňovaní používateľov do existujúcich svetových
virtuálnych organizácií Poskytovanie podpory pri riešení problémov (“help desk”)
priama pomoc používateľom pri riešení problémov komunikácia s ďalšími tímami (pre podporu infraštruktúry alebo
priamo s výpojármi gridového middleware) Táto aktivita bude úzko spolupracovať s aktivitami trénovania
a s operačným centrom pre dohľad nad infraštruktúrou
Trénovanie používateľov a výuka
Zabezpečovanie školení a kurzov pre rôzne skupiny používateľov s ohľadom na ich vedecké zameranie a vedomostnú úroveň od úvodných kurzov pre začiatočníkov, cez kurzy pre pokročilých
používateľov, až po špecializované kurzy pre vývojárov gridových aplikácií a nových trénerov
prednášky a semináre, praktické cvičenia, tutoriály a workshopy. Vytváranie tréningových materiálov vo forme prezentácií,
digitálnych knižníc, webových portálov a online služieb umožňujúcich rýchle a efektívne osvojenie si znalostí potrebných na vývoj gridových aplikácií
Vytvorenie podmienok na integráciu gridových technológií do výuky na fakultách zameraných na informačné technológie a aj na ostatné univerzity, ktoré budú mať záujem o využívanie gridovej infraštruktúry.
Manažment a koordinácia
stanovenie stratégie a postupov, ktorými sa bude riadiť budovanie a využívanie infraštruktúry počas trvania projektu aj po jeho skončení
riadiaci výbor bude mať vrcholnú pôsobnosť pri rozhodovaní v strategických otázkach - ekonomických a legislatívnych, priberanie nových členov do projektu, schvaľovanie plánov a procedúr na prideľovanie výpočtových a úložných zdrojov budú ho tvoriť po jednom zástupcovi z každej partnerskej
organizácie plus projektový manažér projektový výbor bude podporovať projektového manažéra
v každodennom riadiacom procese projektu bude pozostávať z vedúcich čiastkových úloh a ich zástupcov