INFSO-RI-508833 Enabling Grids for E-sciencE www.eu-egee.org Použití farmy SKURUT v roce 2004 Jiří Chudoba, Lukáš Fiala, Miloš Lokajíček, Jiří Kosina,

Prezentace na téma: "INFSO-RI-508833 Enabling Grids for E-sciencE www.eu-egee.org Použití farmy SKURUT v roce 2004 Jiří Chudoba, Lukáš Fiala, Miloš Lokajíček, Jiří Kosina,"— Transkript prezentace:

1 INFSO-RI-508833 Enabling Grids for E-sciencE www.eu-egee.org Použití farmy SKURUT v roce 2004 Jiří Chudoba, Lukáš Fiala, Miloš Lokajíček, Jiří Kosina, Jan Švec

2 Enabling Grids for E-sciencE INFSO-RI-508833 2 Dostupný HW 16 uzlů (skurut17 – skurut32) k dispozici pro EGEE od dubna 2004 v říjnu 2004 instalován LCG2 mw i na uzly skurut1 – skurut16 vše jsou relativně pomalejší stroje (PIII 700 MHz, 1 GB RAM, 8 GB disk), ale hw je spolehlivý pro nově podporované služby (VOCE, GILDA,...) je zapotřebí vyhrazených strojů - postupně ubývá výpočetních uzlů současné rozvržení je v následující tabulce

3 Enabling Grids for E-sciencE INFSO-RI-508833 3 Použití uzlů skurut skurut1 CE for GILDA (submits jobs to skurut17) skurut2 RB for GILDA skurut3 RB for VOCE skurut4 CE and UI for VOCE skurut5 WN, with GILDA sw installed and GILDA property set skurut6-9 WNs, with GILDA sw installed, GILDA property not set skurut10-15 WNs skurut16 CE for ROC tests skurut17 CE, OpenPBS server, registered in TestZone and ATLAS BDII skurut18 SE skurut19-32 WNs viz http://www-hep2.fzu.cz/~chudoba/skurut/skurut.html

4 Enabling Grids for E-sciencE INFSO-RI-508833 4 GILDA Instalace proběhla v říjnu 2004 během našeho pobytu v Catanii (poděkování Robertu Barberovi a členům jeho týmu za pomoc) Pro lepší využití WNs jsme neinstalovali GILDA WNs na vyhrazené stroje. GILDA CE přeposílá úlohy na OpenPBS server instalovaný na LCG2 CE (skurut17) a ten je může přidělovat na LCG2 WNs. GILDA demo aplikace ale vyžadují specifický sw instalovaný na každém WN. Ten byl instalován na skurut3 – skurut9 a těmto uzlům byla přiřazena vlastnost gilda. Mimo GILDA výukové semináře je vytíženost WN malá, proto je změnou vlastnosti v pbs využíváme i pro jiné= fronty

5 Enabling Grids for E-sciencE INFSO-RI-508833 5 GILDA a LCG2 WN se sdílejí WN GILDA CE RB WN GILDA WN GILDA SKURUT FARM LCG2 CESEWN PBS, UI WN

6 Enabling Grids for E-sciencE INFSO-RI-508833 6 GILDA RB Na skurut2 je funkční GILDA RB – jediný RB pro GILDA mimo Catanii. Slouží jako záložní RB Zatím není příliš vytížen, musíme ho více propagovat. Na skurut se za 3 měsíce (říjen – prosinec) zpracovalo 355 úloh ve frontě gilda

7 Enabling Grids for E-sciencE INFSO-RI-508833 7 ATLAS DC ATLAS DC probíhala od července 2004 do prosince 2004 Stejný systém (s evolučními změnami) je nyní používán pro další produkci simulací ATLAS Pro připravovanou ATLAS konferenci v Římě v červnu 2005 je třeba nasimulovat přibližně stejný počet případů jako během DC2 úlohy se posílají do front long a infinite současný mw nedokáže odlišit oficiální produkční úlohy od „soukromých“ úloh atlas uživatelů (těch je ale zatím velmi málo)

8 Enabling Grids for E-sciencE INFSO-RI-508833 8 ATLAS DC Ve frontách long a infinite se spočítalo 1722 + 7724 úloh, ale jen 567 + 2861 úloh spotřebovalo více jak 100s CPU času. úlohy s malým spotřebovaným CPU časem byly buď testovací nebo měly problémy s replikací vstupních souborů ze vzdálených SE skurut má 2% podíl na všech úspěšných úlohách ATLAS DC2

9 Enabling Grids for E-sciencE INFSO-RI-508833 9 ATLAS DC2

10 Enabling Grids for E-sciencE INFSO-RI-508833 10 Shrnutí Skurut je vhodná farma pro hromadné spouštění dlouhých úloh, například v rámci DC, kde relativně menší výkonnost CPU a tím pozdější získání výsledků nehraje velkou roli. Stabilita HW je velkou předností této farmy. Chybí disková kapacita pro SE, je použito diskové pole z FZU. Uživatel s několika krátkými úlohami, který potřebuje výsledek co nejrychleji, by dnes asi dal přednost rychlému desktopu. Pro zvýšení motivace uživatelů využívat EGEE grid by bylo vhodné zapojit do VOCE několik rychlých strojů, ať již v rámci farmy skurut nebo na jiných farmách CE federace.