SlideShare une entreprise Scribd logo
1  sur  25
Система керування
суперкомп'ютером з підтримкою
    роботи у гріді SCMS 4.0


Андрій Головинський, Андрій Маленко

Інститут кібернетики ім. В.М. Глушкова НАНУ



HPC-UA 2011, 14 жовтня, Київ
Основні проблеми використання HPC для науковців
   Недружній інтерфейс доступу.
   Необхідно знання непотрібних технічних деталей.
   Робота у командному рядку Unix.
   Додаткова складність при роботі з грід-технологіями.
   Складності адміністрування суперкомп’ютера.
Система керування суперкомп’ютером SCMS 4.0
Властивості
   Встановлення на майже будь-який кластер.
   Веб-додаток для доступу до суперкомп’ютера.
   Простий доступний багатомовний інтерфейс, розрахований на початківців та
    досвідчених користувачів.
   Підтримка ARC (NorduGrid).
   Прозора робота в гріді, аналогічна роботі на локальному кластері.
   Докладні звіти про використання суперкомп’ютера.
   Швидкий доступ до важливої інформації про роботу кластера.
   Термінові повідомлення про критичні помилки за допомогою SMS та електронної
    пошти.
Вхід до системи
Для доступу до SCMS 4.0 користувач повинен ввести своє SSH ім’я користувача та
пароля. Користувач також обирає бажану мову інтерфейсу.
Інтерфейс користувача
Інтерфейс призначений для виконання усіх звичайних операцій:
   роботи з файлами;
   запуску задач;
   відстеження виконання задач;
   зв’язку між користувачами та адміністраторами;
   роботи у гріді.
Налаштування
   Вікно Налаштування дозволяє користувачеві змінити власні дані та
    налаштування інтерфейсу.
   Після встановлення грід-сертифікату активуються відповідні грід-сервіси.
   Користувач з вимкненим сертифікатом або без такого працює як звичайни
    користувач кластера.
Вхід у грід
Підготовка до запуску задачі
   Менеджер файлів має звичайні функції.
   Редактор вихідних текстів програм з підсвічуванням синтаксису.
   Зручна форма запуску.
   Перегляд обчислювальних ресурсів та черг задач.
Менеджер файлів
Форма запуску задач для початківців
Форма запуску задач для досвідчених користувачів
Керування виконанням задач
Після запуску задачі відповідна віддалена директорія з’являється у менеджері файлів.




Перелік файлів під час виконання грід-задачі
Перегляд результатів виконання
Черга задач
Ресурси
Мапа гріда
Можливості адміністратора
   Керування користувачами.
   Діагностика та моніторинг стану обладнання кластера.
   Керування чергами задач.
   Аналіз статистики використання ресурсів.
   Повідомлення про небезпечні ситуації.
Керування користувачами
Моніторинг обладнання
Статистика використання ресурсів
Технічні деталі
   Операційна система кластера: Linux.
   Підтримка основних менеджерів ресурсів: Torque, SLURM.
   Підтримка грід-технологій: ARC (NorduGrid).
   Моніторинг температури та стану обладнання: IPMI.
   Веб сервер: Apache, PHP, MySQL.
   GSM/CDMA модем (додатково).
У процесі розробки
   Підтримка грід технологій gLite та Unicore.
   Підтримка інших менеджерів ресурсів: PBS-Pro.
   Нові можливості контролю та керування обладнанням.
   Розширення можливостей обліку ресурсів, облік грід задач.
   Полегшена версія для мобільних пристроїв.
Інсталяції
   Національний ресурсний центр грід
    Інститут кібернетики імені В.М. Глушкова НАНУ, Київ
   Північно-східний ресурсний центр грід
    Інститут сцинтиляційних матеріалів НАНУ, Харків
   Фізико-технічний інститут низьких температур ім. Б.І. Вєркіна НАНУ, Харків
   Інститут механіки суцільних середовищ РАН, Перм, Росія
Дякуємо за увагу!
Андрій Головинський
E-mail: golovinsky.andriy@gmail.com
Андрій Маленко
E-mail: malenko.andrii@gmail.com


Демонстраційна система
http://scms.melkon.com.ua/
login: demo
password: cluster

Contenu connexe

En vedette

Fórum 2016 - Painel com palestras – Gestão de pessoas no e-commerce: os desaf...
Fórum 2016 - Painel com palestras – Gestão de pessoas no e-commerce: os desaf...Fórum 2016 - Painel com palestras – Gestão de pessoas no e-commerce: os desaf...
Fórum 2016 - Painel com palestras – Gestão de pessoas no e-commerce: os desaf...E-Commerce Brasil
 
Forum 2016 - Advanced Customer Aquisition – How to generate visitors without ...
Forum 2016 - Advanced Customer Aquisition – How to generate visitors without ...Forum 2016 - Advanced Customer Aquisition – How to generate visitors without ...
Forum 2016 - Advanced Customer Aquisition – How to generate visitors without ...E-Commerce Brasil
 
Pedagogia Grupo 2
Pedagogia Grupo 2Pedagogia Grupo 2
Pedagogia Grupo 2Tania Auqui
 
Inexpensive bathroom remodeling ideas
Inexpensive bathroom remodeling ideasInexpensive bathroom remodeling ideas
Inexpensive bathroom remodeling ideasjkoonerrenovations
 
Types of digital computers
Types of digital computersTypes of digital computers
Types of digital computersAnsif Ek
 
Μικροί Λαογράφοι
Μικροί ΛαογράφοιΜικροί Λαογράφοι
Μικροί ΛαογράφοιDora Batsi
 

En vedette (10)

REDES SOCIALES
REDES SOCIALESREDES SOCIALES
REDES SOCIALES
 
Social Media Impact
Social Media ImpactSocial Media Impact
Social Media Impact
 
reflex membership
reflex membershipreflex membership
reflex membership
 
Fórum 2016 - Painel com palestras – Gestão de pessoas no e-commerce: os desaf...
Fórum 2016 - Painel com palestras – Gestão de pessoas no e-commerce: os desaf...Fórum 2016 - Painel com palestras – Gestão de pessoas no e-commerce: os desaf...
Fórum 2016 - Painel com palestras – Gestão de pessoas no e-commerce: os desaf...
 
Forum 2016 - Advanced Customer Aquisition – How to generate visitors without ...
Forum 2016 - Advanced Customer Aquisition – How to generate visitors without ...Forum 2016 - Advanced Customer Aquisition – How to generate visitors without ...
Forum 2016 - Advanced Customer Aquisition – How to generate visitors without ...
 
Presentazione joinmapreduce
Presentazione joinmapreducePresentazione joinmapreduce
Presentazione joinmapreduce
 
Pedagogia Grupo 2
Pedagogia Grupo 2Pedagogia Grupo 2
Pedagogia Grupo 2
 
Inexpensive bathroom remodeling ideas
Inexpensive bathroom remodeling ideasInexpensive bathroom remodeling ideas
Inexpensive bathroom remodeling ideas
 
Types of digital computers
Types of digital computersTypes of digital computers
Types of digital computers
 
Μικροί Λαογράφοι
Μικροί ΛαογράφοιΜικροί Λαογράφοι
Μικροί Λαογράφοι
 

Similaire à Golovinskiy hpc day 2011

Операційні системи і їх реалізація
Операційні системи і їх реалізаціяОпераційні системи і їх реалізація
Операційні системи і їх реалізаціяAlexandra Ilina
 
Изучение интерфейсов операционных систем с помощью Embedded System
Изучение интерфейсов операционных систем с помощью Embedded SystemИзучение интерфейсов операционных систем с помощью Embedded System
Изучение интерфейсов операционных систем с помощью Embedded Systemitconnect2016
 
OS_Lecture_01_2017.pdf
OS_Lecture_01_2017.pdfOS_Lecture_01_2017.pdf
OS_Lecture_01_2017.pdfdingo47
 
Л2-Архітектура та ресурси.pdf
Л2-Архітектура та ресурси.pdfЛ2-Архітектура та ресурси.pdf
Л2-Архітектура та ресурси.pdfdingo47
 
архітектура комп
архітектура компархітектура комп
архітектура компlily_zbar
 
Сучасні інформаційні технології. Лекція 2. Архітектура персонального комп’ютера
Сучасні інформаційні технології. Лекція 2. Архітектура персонального комп’ютераСучасні інформаційні технології. Лекція 2. Архітектура персонального комп’ютера
Сучасні інформаційні технології. Лекція 2. Архітектура персонального комп’ютераМаксим Павленко
 
Сетевые технологии для организации работы предприятия
Сетевые технологии для организации работы предприятияСетевые технологии для организации работы предприятия
Сетевые технологии для организации работы предприятияOlexander Kovalenko
 
будова пк
будова пкбудова пк
будова пкYura_Shilo
 
будова пк
будова пкбудова пк
будова пкYura_Shilo
 
Lec15 архiтектура та проектування компонентних систем
Lec15 архiтектура та проектування компонентних системLec15 архiтектура та проектування компонентних систем
Lec15 архiтектура та проектування компонентних системcit-cit
 

Similaire à Golovinskiy hpc day 2011 (20)

Операційні системи і їх реалізація
Операційні системи і їх реалізаціяОпераційні системи і їх реалізація
Операційні системи і їх реалізація
 
сп
спсп
сп
 
Изучение интерфейсов операционных систем с помощью Embedded System
Изучение интерфейсов операционных систем с помощью Embedded SystemИзучение интерфейсов операционных систем с помощью Embedded System
Изучение интерфейсов операционных систем с помощью Embedded System
 
OS_Lecture_01_2017.pdf
OS_Lecture_01_2017.pdfOS_Lecture_01_2017.pdf
OS_Lecture_01_2017.pdf
 
Л2-Архітектура та ресурси.pdf
Л2-Архітектура та ресурси.pdfЛ2-Архітектура та ресурси.pdf
Л2-Архітектура та ресурси.pdf
 
архітектура комп
архітектура компархітектура комп
архітектура комп
 
Сучасні інформаційні технології. Лекція 2. Архітектура персонального комп’ютера
Сучасні інформаційні технології. Лекція 2. Архітектура персонального комп’ютераСучасні інформаційні технології. Лекція 2. Архітектура персонального комп’ютера
Сучасні інформаційні технології. Лекція 2. Архітектура персонального комп’ютера
 
урок 6
урок 6урок 6
урок 6
 
Presentation IES 2012
Presentation IES 2012Presentation IES 2012
Presentation IES 2012
 
IIHE-Lecture-3_2
IIHE-Lecture-3_2IIHE-Lecture-3_2
IIHE-Lecture-3_2
 
IIHE-Lecture-3_1
IIHE-Lecture-3_1IIHE-Lecture-3_1
IIHE-Lecture-3_1
 
Сетевые технологии для организации работы предприятия
Сетевые технологии для организации работы предприятияСетевые технологии для организации работы предприятия
Сетевые технологии для организации работы предприятия
 
Лекція №2
Лекція №2Лекція №2
Лекція №2
 
Лекція №1
Лекція №1Лекція №1
Лекція №1
 
Лекція №1
Лекція №1Лекція №1
Лекція №1
 
будова пк
будова пкбудова пк
будова пк
 
будова пк
будова пкбудова пк
будова пк
 
кикт
кикткикт
кикт
 
Лекція №4
Лекція №4Лекція №4
Лекція №4
 
Lec15 архiтектура та проектування компонентних систем
Lec15 архiтектура та проектування компонентних системLec15 архiтектура та проектування компонентних систем
Lec15 архiтектура та проектування компонентних систем
 

Plus de Volodymyr Saviak

Fujifilm - where zettabytes lives @ hpc day 2012 kiev
Fujifilm - where zettabytes lives @ hpc day 2012 kievFujifilm - where zettabytes lives @ hpc day 2012 kiev
Fujifilm - where zettabytes lives @ hpc day 2012 kievVolodymyr Saviak
 
Technical supercomputers laboratory. & insitute of cybernetics of ukraine @ h...
Technical supercomputers laboratory. & insitute of cybernetics of ukraine @ h...Technical supercomputers laboratory. & insitute of cybernetics of ukraine @ h...
Technical supercomputers laboratory. & insitute of cybernetics of ukraine @ h...Volodymyr Saviak
 
Altair - compute manager your gateway to hpc cloud computing with pbs profess...
Altair - compute manager your gateway to hpc cloud computing with pbs profess...Altair - compute manager your gateway to hpc cloud computing with pbs profess...
Altair - compute manager your gateway to hpc cloud computing with pbs profess...Volodymyr Saviak
 
Extreme networks - network design principles for hpc @ hpcday 2012 kiev
Extreme networks - network design principles for hpc @ hpcday 2012 kievExtreme networks - network design principles for hpc @ hpcday 2012 kiev
Extreme networks - network design principles for hpc @ hpcday 2012 kievVolodymyr Saviak
 
Hp cmu – easy to use cluster management utility @ hpcday 2012 kiev
Hp cmu – easy to use cluster management utility @ hpcday 2012 kievHp cmu – easy to use cluster management utility @ hpcday 2012 kiev
Hp cmu – easy to use cluster management utility @ hpcday 2012 kievVolodymyr Saviak
 
Nvidia kepler architecture performance efficiency availability @ hpcday 2012 ...
Nvidia kepler architecture performance efficiency availability @ hpcday 2012 ...Nvidia kepler architecture performance efficiency availability @ hpcday 2012 ...
Nvidia kepler architecture performance efficiency availability @ hpcday 2012 ...Volodymyr Saviak
 
Mellanox hpc update @ hpcday 2012 kiev
Mellanox hpc update @ hpcday 2012 kievMellanox hpc update @ hpcday 2012 kiev
Mellanox hpc update @ hpcday 2012 kievVolodymyr Saviak
 
Alekseev hpc day 2011 Kiev
Alekseev hpc day 2011 KievAlekseev hpc day 2011 Kiev
Alekseev hpc day 2011 KievVolodymyr Saviak
 
Kindratenko hpc day 2011 Kiev
Kindratenko hpc day 2011 KievKindratenko hpc day 2011 Kiev
Kindratenko hpc day 2011 KievVolodymyr Saviak
 
Mellanox hpc day 2011 kiev
Mellanox hpc day 2011 kievMellanox hpc day 2011 kiev
Mellanox hpc day 2011 kievVolodymyr Saviak
 
Massive solutions hpc day 2011 kiev
Massive solutions hpc day 2011 kievMassive solutions hpc day 2011 kiev
Massive solutions hpc day 2011 kievVolodymyr Saviak
 

Plus de Volodymyr Saviak (15)

Fujifilm - where zettabytes lives @ hpc day 2012 kiev
Fujifilm - where zettabytes lives @ hpc day 2012 kievFujifilm - where zettabytes lives @ hpc day 2012 kiev
Fujifilm - where zettabytes lives @ hpc day 2012 kiev
 
Technical supercomputers laboratory. & insitute of cybernetics of ukraine @ h...
Technical supercomputers laboratory. & insitute of cybernetics of ukraine @ h...Technical supercomputers laboratory. & insitute of cybernetics of ukraine @ h...
Technical supercomputers laboratory. & insitute of cybernetics of ukraine @ h...
 
Altair - compute manager your gateway to hpc cloud computing with pbs profess...
Altair - compute manager your gateway to hpc cloud computing with pbs profess...Altair - compute manager your gateway to hpc cloud computing with pbs profess...
Altair - compute manager your gateway to hpc cloud computing with pbs profess...
 
Extreme networks - network design principles for hpc @ hpcday 2012 kiev
Extreme networks - network design principles for hpc @ hpcday 2012 kievExtreme networks - network design principles for hpc @ hpcday 2012 kiev
Extreme networks - network design principles for hpc @ hpcday 2012 kiev
 
Hp cmu – easy to use cluster management utility @ hpcday 2012 kiev
Hp cmu – easy to use cluster management utility @ hpcday 2012 kievHp cmu – easy to use cluster management utility @ hpcday 2012 kiev
Hp cmu – easy to use cluster management utility @ hpcday 2012 kiev
 
Nvidia kepler architecture performance efficiency availability @ hpcday 2012 ...
Nvidia kepler architecture performance efficiency availability @ hpcday 2012 ...Nvidia kepler architecture performance efficiency availability @ hpcday 2012 ...
Nvidia kepler architecture performance efficiency availability @ hpcday 2012 ...
 
Mellanox hpc update @ hpcday 2012 kiev
Mellanox hpc update @ hpcday 2012 kievMellanox hpc update @ hpcday 2012 kiev
Mellanox hpc update @ hpcday 2012 kiev
 
Hp kiev hpcday_20121012
Hp kiev hpcday_20121012Hp kiev hpcday_20121012
Hp kiev hpcday_20121012
 
Apc hpc day 2011 kiev
Apc hpc day 2011 kievApc hpc day 2011 kiev
Apc hpc day 2011 kiev
 
SGI HPC DAY 2011 Kiev
SGI HPC DAY 2011 KievSGI HPC DAY 2011 Kiev
SGI HPC DAY 2011 Kiev
 
Alekseev hpc day 2011 Kiev
Alekseev hpc day 2011 KievAlekseev hpc day 2011 Kiev
Alekseev hpc day 2011 Kiev
 
Kindratenko hpc day 2011 Kiev
Kindratenko hpc day 2011 KievKindratenko hpc day 2011 Kiev
Kindratenko hpc day 2011 Kiev
 
Mellanox hpc day 2011 kiev
Mellanox hpc day 2011 kievMellanox hpc day 2011 kiev
Mellanox hpc day 2011 kiev
 
Massive solutions hpc day 2011 kiev
Massive solutions hpc day 2011 kievMassive solutions hpc day 2011 kiev
Massive solutions hpc day 2011 kiev
 
Nvidia hpc day 2011 kiev
Nvidia hpc day 2011 kievNvidia hpc day 2011 kiev
Nvidia hpc day 2011 kiev
 

Golovinskiy hpc day 2011

  • 1. Система керування суперкомп'ютером з підтримкою роботи у гріді SCMS 4.0 Андрій Головинський, Андрій Маленко Інститут кібернетики ім. В.М. Глушкова НАНУ HPC-UA 2011, 14 жовтня, Київ
  • 2. Основні проблеми використання HPC для науковців  Недружній інтерфейс доступу.  Необхідно знання непотрібних технічних деталей.  Робота у командному рядку Unix.  Додаткова складність при роботі з грід-технологіями.  Складності адміністрування суперкомп’ютера.
  • 4. Властивості  Встановлення на майже будь-який кластер.  Веб-додаток для доступу до суперкомп’ютера.  Простий доступний багатомовний інтерфейс, розрахований на початківців та досвідчених користувачів.  Підтримка ARC (NorduGrid).  Прозора робота в гріді, аналогічна роботі на локальному кластері.  Докладні звіти про використання суперкомп’ютера.  Швидкий доступ до важливої інформації про роботу кластера.  Термінові повідомлення про критичні помилки за допомогою SMS та електронної пошти.
  • 5. Вхід до системи Для доступу до SCMS 4.0 користувач повинен ввести своє SSH ім’я користувача та пароля. Користувач також обирає бажану мову інтерфейсу.
  • 6. Інтерфейс користувача Інтерфейс призначений для виконання усіх звичайних операцій:  роботи з файлами;  запуску задач;  відстеження виконання задач;  зв’язку між користувачами та адміністраторами;  роботи у гріді.
  • 7. Налаштування  Вікно Налаштування дозволяє користувачеві змінити власні дані та налаштування інтерфейсу.  Після встановлення грід-сертифікату активуються відповідні грід-сервіси.  Користувач з вимкненим сертифікатом або без такого працює як звичайни користувач кластера.
  • 9. Підготовка до запуску задачі  Менеджер файлів має звичайні функції.  Редактор вихідних текстів програм з підсвічуванням синтаксису.  Зручна форма запуску.  Перегляд обчислювальних ресурсів та черг задач.
  • 11. Форма запуску задач для початківців
  • 12. Форма запуску задач для досвідчених користувачів
  • 13. Керування виконанням задач Після запуску задачі відповідна віддалена директорія з’являється у менеджері файлів. Перелік файлів під час виконання грід-задачі
  • 18. Можливості адміністратора  Керування користувачами.  Діагностика та моніторинг стану обладнання кластера.  Керування чергами задач.  Аналіз статистики використання ресурсів.  Повідомлення про небезпечні ситуації.
  • 22. Технічні деталі  Операційна система кластера: Linux.  Підтримка основних менеджерів ресурсів: Torque, SLURM.  Підтримка грід-технологій: ARC (NorduGrid).  Моніторинг температури та стану обладнання: IPMI.  Веб сервер: Apache, PHP, MySQL.  GSM/CDMA модем (додатково).
  • 23. У процесі розробки  Підтримка грід технологій gLite та Unicore.  Підтримка інших менеджерів ресурсів: PBS-Pro.  Нові можливості контролю та керування обладнанням.  Розширення можливостей обліку ресурсів, облік грід задач.  Полегшена версія для мобільних пристроїв.
  • 24. Інсталяції  Національний ресурсний центр грід Інститут кібернетики імені В.М. Глушкова НАНУ, Київ  Північно-східний ресурсний центр грід Інститут сцинтиляційних матеріалів НАНУ, Харків  Фізико-технічний інститут низьких температур ім. Б.І. Вєркіна НАНУ, Харків  Інститут механіки суцільних середовищ РАН, Перм, Росія
  • 25. Дякуємо за увагу! Андрій Головинський E-mail: golovinsky.andriy@gmail.com Андрій Маленко E-mail: malenko.andrii@gmail.com Демонстраційна система http://scms.melkon.com.ua/ login: demo password: cluster