Octoshell: Large Supercomputer Complex Administration System

Authors

  • Dmitriy A. Nikitenko Research Computing Center, Moscow State University
  • Vladimir V. Voevodin Research Computing Center, Moscow State University
  • Sergey A. Zhumatiy Research Computing Center, Moscow State University

DOI:

https://doi.org/10.14529/cmse160306

Keywords:

supercomputer, monitoring, managing HPC center, administering supercomputers, user support

Abstract

Managing and administering of modern supercomputer centers and HPC systems as a part is a complicated and complex task. The usage of numerous traditional stand-alone tools for administering and management of supercomputers becomes a bottleneck for efficient resource utilization in conditions of growing systems scale. The developed “Octoshell” system for support of running supercomputer centers is aimed at solving this problem. It implements essential tools for administering in a single interface and allows significant automatization of typical management tasks ensuring higher efficiency of large supercomputer complex output as a whole.

Author Biographies

Dmitriy A. Nikitenko, Research Computing Center, Moscow State University

НИВЦ МГУ, н.с.

к.ф.-м.н.

Vladimir V. Voevodin, Research Computing Center, Moscow State University

НИВЦ МГУ, зам. директора

д.ф.-м.н.

чл.-корр. РАН

Sergey A. Zhumatiy, Research Computing Center, Moscow State University

НИВЦ МГУ, вед.н.с., к.ф.-м.н.

References

Топ50 Суперкомпьютеры URL: http://top50.supercomputers.ru (дата обращения: 02.08.2015).

Top500 Supercomputer sites URL: http://top500.org (дата обращения: 02.08.2015).

Воеводин, Вл.В. Практика суперкомпьютера «Ломоносов» / Воеводин Вл.В., Жума-тий С.А., Соболев С.И., Антонов А.С., Брызгалов П.А., Никитенко Д.А., Стефанов К.С., Воеводин Вад.В.// Открытые системы. — 2012. — № 7. — С. 36–39.

Никитенко, Д.А. Подход к гибкому управлению суперкомпьютерами / Жуматий С.А., Никитенко Д.А. // Научный сервис в сети Интернет: все грани параллелизма: Труды Международной суперкомпьютерной конференции (Новороссийск, 23–28 сентября 2013г.) — г.Москва, Изд-во МГУ, — 2013, — С. 296-300.

Жуматий, С.А. Администрирование суперкомпьютеров и кластерных систем / Жу-матий С.А., Дацюк О.В. // — Москва, Изд-во МГУ, 2014. — С. 400.

Torgue batch system URL: http://www.adaptivecomputing.com/products/open-source/torque/ (дата обращения: 02.08.2015).

SLURM workload manager URL: http://slurm.schedmd.com/ (дата обращения: 02.08.2015).

OpenPBS URL: http://www.mcs.anl.gov/research/projects/openpbs/ (дата обращения: 02.08.2015).

Ganglia Monitoring System URL: http://ganglia.sourceforge.net/ (дата обращения: 02.08.2015).

Zabbix monitoring URL: http://www.zabbix.com/ru/ (дата обращения: 02.08.2015).

Nagios monitoring URL: https://www.nagios.org/ (дата обращения: 02.08.2015).

Open-source Ticket Request System URL: http://www.otrs.org/ (дата обращения: 02.08.2015).

Леоненков, С.Н. Расширение функциональности менеджера ресурсов суперкомпьютера SLURM / Леоненков С.Н. // Научный сервис в сети Интернет: многообразие суперкомпьютерных миров: Труды Международной суперкомпьютерной конферен-ции (Новороссийск, 22–27 сентября 2014г.), — Москва, Изд-во МГУ, — 2014, — С. 472-476.

Никитенко, Д.А. Комплексный анализ производительности суперкомпьютерных систем, основанный на данных системного мониторинга / Никитенко Д.А. // Вычис-лительные методы и программирование: Новые вычислительные технологии (Электронный научный журнал). — 2014. — Том 15. — C. 85–97.

Никитенко, Д.А. Исследование динамических характеристик потока задач супер-компьютерной системы / Антонов А.С., Жуматий С.А., Никитенко Д.А., Стефанов К.С., Теплов А.М., Швец П.А. // Вычислительные методы и программирование: Но-вые вычислительные технологии (Электронный научный журнал). — 2013. Том 14(2), — С. 104-108.

Стефанов, К.С. Система мониторинга производительности суперкомпьютеров / Стефанов К.С. // Вестник Пермского Национального исследовательского политех-нического университета. Аэрокосмическая техника. — 2014. — № 39. — С. 17–34.

Воеводин, Вл.В. Ситуационный экран суперкомпьютера / Воеводин Вл.В. // Откры-тые системы, — 2014. — № 3, — С. 36-39.

Никитенко, Д.А. Обеспечение оперативного контроля и эффективной автономной работы Суперкомпьютерного комплекса МГУ / Антонов А.С., Воеводин Вад В., Дау-гель-Дауге А.А., Жуматий С.А., Никитенко Д.А., Соболев С.И., Стефанов К.С., Швец П.А. // Вестник Южно-Уральского государственного университета. Серия Вычисли-тельная математика и информатика. — 2015. — Том 4(2), — С. 33–43.

Published

2015-12-26

Issue

Section

Informatics, Computers and Control