Аппаратно-программная конфигурация ЦИВК Аппаратные ресурсы. Программное обеспечение. Организация работы пользователей. Грид в ЦИВК, принципы работы.

Slides:



Advertisements
Podobné prezentace
Лекция №2 Устройство ПК. Операционная система Ахмедова Е.В. МОУ «СОШ №1» г.Осташков.
Advertisements

Открытое — программное обеспечение (исходные тексты которого можно свободно получить, изучать и модифицировать) o Разработчики открытого ПО обладают авторскими.
Графический интерфейс LINUX Составил учитель информатики МОУ «Светловская СОШ Завьяловского района» Тютерев Сергей Александрович.
Переход образовательных учреждений на СВОБОДНОЕПРОГРАММНОЕОБЕСПЕЧЕНИЕ.
Введение  Часто можно услышать, что установка Linux – очень сложная операция, требующая больших знаний.  Далее будет демонстрироваться установка Kubuntu.
Poskytování služeb s místem plnění v RF a osoba povinná k dani Anna Barboi, Milan Tomíček Предоставление услуг по месту назначения в РФ и налогоплательщик.
Nový Apple Mac Pro David Gamrát, 2.E. Základní verze  čtyřjádrový procesor Intel Xeon E Kč  šestijádrový procesor Intel Xeon E
Dostupné z Metodického portálu ISSN: , financovaného z ESF a státního rozpočtu ČR. Provozováno Výzkumným ústavem pedagogickým v Praze.
Status farmy Goliáš Jan Švec, Farma goliáš nyní ● LP1000r 2xPIII-1.13 GHz 512k 1GB RAM 18GB SCSI HDD (34 ks) ● 10TB (1 + 9) diskové kapacity.
Zpracování dat – superpočítačové výkony na běžných procesorech Fyzikální ústav AV ČR.
Servery HP ProLiant Prodejní akce a aktivity FQ
Hra milionář Procvičujeme si jednotky hmotnosti
Instalace ATLAS software 7.02 ● 5 – 10 minut ● 2 způsoby
B:POWER INVESTMENT, a.s. Представление технологии Wood Gas Power Plant Александр Верес.
Polycom® RealPresence® Desktop
Tento výukový materiál vznikl v rámci Operačního programu Vzdělávání pro konkurenceschopnost 1. KŠPA Kladno, s. r. o., Holandská 2531, Kladno,
Czech Technical University in Prague Faculty of Transportation Sciences Department of Control and Telematics Skládaní PC Ing. Roman Piekník.
Vzorce na umocnění.
DUM - Digitální Učební Materiál Název školy:Střední odborná škola obchodní s.r.o., Broumovská 839, Liberec 6 IČO: REDIZO: Vzdělávací.
Distribuční úlohy LP.
Užití Pythagorovy věty – 2. část
Název DUM: Počítač a periferní zařízení
HDD a zdroj mého PC Dano Vladislav 2ITb. HDD Spotřeba v idle - 3,6–4,8 W Cache – 16MB Kapacita plotny – 250GB Počet ploten – 2 Počet hlaviček – 4 Hlučnost.
Násobíme . 4 = = . 4 = = . 4 = = . 2 = 9 .
Výpočetní technika Břetislav Regner Centrum výpočetní techniky Lékařská fakulta Masarykova univerzita v Brně.
Москва – Транспорт Транспорт Наземный городской транспорт
Základní škola a Mateřská škola, Pavlice, okres Znojmo OP VK 1
Konektory napájecího zdroje
velikonočních perníčků
Архитектура и памятники Санкт- Петербурга ● Петропавловская крепость ● Главное адмиралтейство ● Медный всадник ● Невский проспект ● Исаакиевский собор.
Status farmy Goliáš Jan Švec, Farma goliáš nyní ● LP1000r 2xPIII-1.13 GHz 512k 1GB RAM 18GB SCSI HDD (34 ks) ● 10TB (1 + 9) diskové kapacity.
Počítačové vybavení Gymnázium Šlapanice. Školní síť Server s OS Linux Stanice s OS Win98, NT, XP Možnost bootování OS Linux ze serveru Rychlost sítě 100.
Procenta.
Tento výukový materiál vznikl v rámci Operačního programu Vzdělávání pro konkurenceschopnost 1. KŠPA Kladno, s. r. o., Holandská 2531, Kladno,
Adam Bečvář 2ITA SPS Prosek
Měřítko mapy, plánu Matematika – 7. ročník
Procvičování vzorce.
System Builder Windows Server 2008 R2 10: :00 Windows Server 2008 R2 - základní přehled 11: :20 Windows Server 2008 R2 - novinky v oblasti.
Násobení a dělení čísel (10,100, 1000)
Procesor (CPU – Central Processing Unit)
, 14 hod.,FZÚ m Diskuze o stavu a rozvoji výpočetních služeb sekce 1 –Změny v roce 1997 M.Lokajíček 5’ –Status služby HP J. Krásová 20’
Tento výukový materiál vznikl v rámci Operačního programu Vzdělávání pro konkurenceschopnost 1. KŠPA Kladno, s. r. o., Holandská 2531, Kladno,
David Klíma- 1 - Opáčko Celkové schéma základní desky Co je to čipová sada IRQ DMA Slot, patice Domácí úkol: zákl. deska pro P4.
Diskové systémy.
Návrh čistých prostorů Jiří Spáčil, Jiří Moninec 03/2001 Проект чистых зон.
Autorem materiálu a všech jeho částí, není-li uvedeno jinak, je Jiří Šperl. Dostupné z Metodického portálu ISSN: , financovaného z.
Zaokrouhlování 5. ročník Základní škola Jakuba Jana Ryby Rožmitál pod Třemšínem Efektivní výuka pro rozvoj potenciálu žáka projekt v rámci Operačního programu.
Семинар «Чешские словечки - 2» Ať, kéž, nikoli, nejspíš, třeba, teprve, pouze, přestože, poněvadž…
Pythia - cvičení Jiří Chudoba Pythia8 - dokončení z minulé přednášky v /usr/local verze root přeložená gcc4 použijte na linkování.
Přehled a vývoj mikroprocesorů
NAS NAS - Network Attached Storage NAS - Network Attached Storage Je to síťové datové úložiště, které bývá nejčastěji použito jako centrální úložiště dat.
Obvod, obsah – 1 Čtverec, obdélník, pravoúhlý trojúhelník
» NOVINKY PRO VIRTUALIZACE A CLOUD 2013 Jan Petrák
Tier2 centrum v Praze Jiří Chudoba Fyzikální ústav AV ČR, v.v.i.
INFSO-RI Enabling Grids for E-sciencE GENIUS/GILDA Tutorial, Zasílání a správa úloh pomocí příkazové řádky Lukáš Fiala.
Systém PBS na farmě goliáš Jan Švec Systém PBS (1) ● Portable batch system – e.pdf ●
Počítačové vybavení Gymnázium Šlapanice. Školní síť Server s OS Linux Stanice s OS Win XP Možnost bootování OS Linux ze serveru Rychlost sítě 100 Mb/s.
Jakub Veigert 3IT. 3x PC Core 2 Duo E6550 2,33GHz ATI Radeon X MB RAM DVD-RW > Kč 48x PC Core 2 Duo E6550 2,33GHz NVIDIA GeForce 7300GT.
Výpočetní Cluster “Mazlik” Nové Hrady FROV JU Jihočeská univerzita v Českých Budějovicích Bc. Martin Šafánek.
Hardware osobních počítačů
Внедрение системы G.O.L.D. Forecast в COOP JEDNOTA NOVÉ ZÁMKY Имя докладчика, дата, город U&SLUNO a.s. I Sadová 28 I Ostrava I Czech Republic I.
NÁZEV ŠKOLY: Základní škola, Uherský Ostroh, okres Uherské Hradiště, příspěvková organizace AUTOR: Mgr. Marcel Bednařík NÁZEV: VY_32_INOVACE_09_INF_09.
Název školy: Základní škola Městec Králové Autor: Mgr. Petr Novák Název: VY_32_INOVACE_01_F9 Číslo projektu: CZ.1.07/1.4.00/ Téma: Složení PC Anotace:
ŠKOLA: Gymnázium, Chomutov, Mostecká 3000, příspěvková organizace
Využití ICT pro rozvoj klíčových kompetencí CZ.1.07/1.5.00/
Operační systém GNU Linux
Windows Server 2008 Centrum pro virtuální a moderní metody a formy vzdělávání na Obchodní akademii T.G. Masaryka, Kostelec nad Orlicí Autor:
Linux Course Mohammad Ali Borhani.
Procvičování ruských slovíček na téma
Název školy: Základní škola Městec Králové Autor: Mgr. Petr Novák
Transkript prezentace:

Аппаратно-программная конфигурация ЦИВК Аппаратные ресурсы. Программное обеспечение. Организация работы пользователей. Грид в ЦИВК, принципы работы.

Структурная схема ЦИВК Сетевые соединения

Сетевое окружение 1Gbit Ethernet - опорная сеть. Маршрутизатор и коммутаторы 1GbE. Не более 3-х коммутаций между любыми 2-мя машинами ЦИВК. 4-8 линий между 1-ым и 2-ым уровнями (802.3ad – link aggregation). 10GbE до опорной сети ОИЯИ (план).

Вычислительные ресурсы - счетная ферма 60 машин: Xeon 5150, 8GB RAM, 64-х битная архитектура - x86_64. 2 x ЦПУ по 2 ядра = 4 ЦПУ на машину. 2 GB RAM на ядро (ЦПУ). 100 GB scratch на машину SI2000 на ядро. Всего: 240 ЦПУ; ~650 kSI2k.

Счетная ферма - расширение (март 2008) 20 машин: Xeon 5345, 16GB RAM, x86_64. 2 x ЦПУ по 4 ядра = 8 ЦПУ на машину = 160 ЦПУ. 2 GB RAM на ядро. 200 GB scratch на машину SI2000 на ядро = 432 kSI2k. Всего: 400 ЦПУ; > 1000kSI2k.

Дисковые ресурсы Общий (физический) объем: > 120TB. Аппаратный RAID5 (3ware/AMCC). Программный RAID1 (AFS и т.п.). Direct Attached SATA (счетные, интерактивные машины и т.п.). Доступный объем: 1.3TB - AFS; 82TB - dCache.

Остальные ресурсы 4 машины для интерактивной работы: 2 - Intel Core 2 Duo; 2 - AMD Athlon. Серверы AFS и NFS. Серверы dCache. Серверы общего назначения. Серверы WLCG сайта (грид).

Остальные ресурсы (продолжение) Архитектура серверов: от Intel Celeron и Pentium 3 до Atlon64 X2 и Core 2 Duo. Всего серверов 64. Архитектура и ЦПУ: uname -ip подробнее – cat /proc/cpuinfo. Объем RAM: free

Программное обеспечение Основная ОС - Scientific Linux SL 4.5 (SL4) – клон RHEL4, на всех счетных машинах (cat /etc/redhat-release). Основная архитектура – x86_64, 64-х битная (uname -i). Установлены все пакеты совместимости для выполнения 32-х битных программ. Система пакетной обработки (batch): Torque + Maui.

Программное обеспечение (продолжение) Рекомендуется для разработки ПО использовать SL4 x86_64 на lxpub01/02. Для совместимости: SL4 i386 на lxpub03; SL3 i386 на lxpub04. Разработка ПО для архитектуры i386 возможна, но не тривиальна. SL3 будет только до конца Предполагается полный переход на 64-х битную архитектуру.

Программное обеспечение Средства разработки ПО Компиляторы, компоновщик и отладчик из SL4 версии 3.4.6: gcc; g++; f77; ld; gdb(gcc -v). Дополнительно из SL4: gcc4; g++4; gfortran. Дополнительно от Intel: icc; icpc; ifort; idb (icc -V). Средства разработки Intel дают ~15% повышения производительности ПО.

Программное обеспечение Средства разработки ПО (продолжение) CERNlib 2006, архитектура x86_64 (gcc4). ROOT e, архитектура x86_64. OpenMPI 1.2.5, архитектура x86_64 (компиляторы Intel). JINRlib (g77, gfortran и ifort).

Программное обеспечение Средства разработки ПО (продолжение) Практически все -devel- RPM из SL4: glibc; libstd++ и т.д, архитектура x86_64 (некоторые - i386) (file /lib64/libc so; file /lib/libc so). Perl, Python, Tcl, Tk (только x86_64). Средства разработки для графических оболочек: xorg; kde; gnome.

Программное обеспечение Средства поддержки - графика Рекомендуется использовать kde. Графические оболочки: xorg; kde; gnone. Терминал: xterm; konsole. WWW/FTP: firefox; konqueror; gftp. Редакторы: gvim; emacs; nedit. Mail: kmail; thunderbird.

Программное обеспечение Средства поддержки – графика (прод) Документы: ooffice; acroread; ggv; kpdf; kghostview. Калькулятор: qalc; kcalc. Разработка: kdevelop; bluefish (www). Текст: Tex/LaTex. Изображения: gimp; xfig; kuickshow.

Программное обеспечение Средства поддержки - текст Рекомендуется использовать putty (ssh) для входа из Windows. WWW/FTP: links; lynx; wget; lftp; pftp. Редакторы: vim; pico. Mail: alpine (pine); mutt.

Структурная схема ЦИВК Потоки данных и задач

Организация работы пользователей Подробное описание – на сайте: Интерактивная работа: lxpub01 -:- lxpub04 – User Interface. Разработка и отладка ПО, не счет. Работа с графикой. Подготовка документации. Mail, WWW и т.п. Интерактивный вход на остальные машины запрещен.

Организация работы пользователей (продолжение) Все счетные задачи работают через batch систему (qsub, qstat, qpeek, qdel). Приоритеты и порядок запуска – планировщик Maui (“умный” алгоритм). Желательно указывать для batch: время CPU; RAM; размер scratch. Как правило: одна задача – 1 CPU.

Организация работы пользователей (продолжение) Максимальное количество задач пользователя = 170. Максимальные параметры задач: CPU=400 часов;RAM=2GB;scratch=25GB. Параллельные задачи – особый случай. Примеры задач для batch - на сайте LIT:

Регистрация и ресурсы пользователей Регистрируются в базе kerberos5. Домашние директории в AFS. Хранение данных в dCache. Возможно выделение дополнительного места в AFS под большое ПО для группы/пользователя. На UI есть scratch: /scr/u/... На счетных машинах задача должна работать в scratch: cd $TMPDIR

Структурная схема ЦИВК Потоки данных и задач

WLCG грид в ЦИВК ЦИВК имеет общие ресурсы с сайтом WLCG – JINR-LCG2: счетные машины и дисковые массивы в dCache. Единый сервер запуска задач в batch. Интерактивные машины работают как User Interface для WLCG. 16 машин обслуживают инфраструктуру сайта JINR-LCG2. Работают 9 Виртуальных Организаций - VO.

WLCG грид в ЦИВК пользователям грид Преимущества грид (потенциальные): неограниченные компьютерные ресурсы всего мира. Необходимо: получить сертификат и стать членом Виртуальной Организации. Задачи должны удовлетворять достаточно жестким требованиям: использовать стандартные для грид протоколы.

WLCG грид в ЦИВК использование WLCG работает c ПО промежуточного уровня gLite, версия 3.1. Запуск и проверка заданий:. /opt/ui/etc/profile.d/grid-env.sh (только на lxpub01/02) voms-proxy-init -voms dteam glite-wms-job-submit -a -o t1 t1.jdl glite-wms-job-status -i t1 glite-wms-job-output -i t1

Заключение Материалы с дополнениниями и примерами будут опубликованы на “Вычисл. & Инф. Ресурсы” -> “ЦИВК”. В 20-ых числах февраля все вычислительные и дисковые ресурсы будут не доступны в связи с модернизацией сетевой структуры ЦИВК.