MetaCentrum1 MetaCentrum a projekty FR CESNET Náročné výpočty a zpracování dat Jiří Sitera.

Prezentace na téma: "MetaCentrum1 MetaCentrum a projekty FR CESNET Náročné výpočty a zpracování dat Jiří Sitera."— Transkript prezentace:

1 MetaCentrum1 MetaCentrum a projekty FR CESNET Náročné výpočty a zpracování dat Jiří Sitera

2 MetaCentrum2 Hlavní cíle Zpřístupnit uživatelským skupinám nové služby MetaCentra Vytvořit nebo zásadně inovovat způsob přístupu uživatelů do výpočetní infrastruktury Podmínky –Přenositelnost zkušeností i nástrojů –Výstupem případová studie popisující přínos projektu a jeho využitelnost odpovídající aplikační komunitou –Projekty nemusí obsahovat náklady na hardwarové zdroje

3 Očekávané zaměření na nové služby MetaCloud –Využití cloudových služeb pro náročné výpočty včetně trvalých služeb typu brána pro specifickou aplikační oblast (scientific gateway) či pevná část dynamických infrastruktur pro zpracování dat (např. elasticsearch) Hadoop –Využití nové služby pro zpracování dat pomocí infrastruktury Apache Hadoop, např. formou aplikačně orientované nadstavby nad standardně poskytovanými službami (Hadoop, Hive, Pig, HBase) MetaCentrum3

4 Hardware? Získat z MetaCentra Pro přijaté projekty je MetaCentrum připraveno poskytnout zdroje; rozsah a další parametry předem konzultovat Virtuální cluster, cloud, datový prostor Vložit do MetaCentra Minimální rozsah (~10 uzlů), stejné stroje, vybavení pro vzdálený přístup, HW specifikace (konzultovat předem) Zázemí (housing, síť, IP adresy, místní správa) Po vložení je cluster spravován MetaCentrem, jsou na něm dostupné všechny služby, vlastník má prioritu MetaCentrum4

5 Další formy spolupráce Lze kombinovat získání a vložení hardware Získat ihned zdroje MetaCentra, následně integrovat vlastní HW Vlastní HW pro „jádro služby“, MetaCentrum pro „nafukování“ či pokrytí „špiček“ (výjimečný výpočet, deadline, školení, apod.) či pokrytí výpadků Data a jejich organizace Lze připojit vlastní datové úložiště (diskové pole) Nástroje pro přístup k datům, řízení workflow, propojení s DU Software MetaCentrum5

6 Shrnutí – MetaCentrum a projekty FR CESNET Preferujeme –Projekty, které přivedou nové uživatele, aplikace, či inovují současné prostředí či postupy, přenos inovací dál –Směrování na nové služby - HPC cloud, Hadoop, ElasticSearch, virtuální cluster Nabízíme spolupráci –Řešení nových potřeb VaV týmů, projektů a aplikačních oborů –Modernizace postupů, vzdělávání uživatelů, optimalizace využití zdrojů MetaCentrum6

7 Děkuji za pozornost a těším se na dotazy Kontakt: http://www.metacentrum.czhttp://www.metacentrum.cz e-mail meta@cesnet.czmeta@cesnet.cz MetaCentrum7