Миграция сервисов вычислительных узлов грид-сайта AZ-IFAN на ОС Scientific Linux 7

Аннотация

В данной статье ставится задача рассмотреть наиболее важные детали установки и конфигурирования метапакета worker node (wn), который разворачивает на вычислительном узле необходимый набор сервисов отвечающих за выполнение задач, поступающих на грид-сайт, а также провести ряд тестов после установки и конфигурирования метапакета wn на соответствие требованиям для программного обеспечения ATLAS (CERN). Для решения поставленной задачи был сформирован испытательный полигон и протестирована работоспособность сервисов wn. В качестве полигона использовался облачный сегмент дата-центра института Физики НАН Азербайджана, который в свою очередь является частью облачной инфраструктуры ЛИТ ОИЯИ. Полигон для тестирования вычислительных узлов представляет собой группу виртуальных машин под управлением ОС Scientific Linux 7, на которые был установлен и сконфигурирован метапакет wn, а также программное обеспечение эксперимента ATLAS необходимое для оценки производительности тестируемых узлов. Оценка производительности тестируемых узлов проводилась посредством системы мониторинга дата-центра института Физики НАН Азербайджана на базе платформы ZABBIX, а также средствами мониторинга эксперимента ATLAS (CERN) после непосредственного включения данных узлов в структуру грид-сайта "AZ-IFAN". Показаны наиболее важные детали установки и конфигурирования метапакета wn. Полученные результаты демонстрируют эффективную работоспособность данного метапакета на вычислительных узлах грид-сайта "AZ-IFAN". Кроме того, в данной статье продемонстрированы возможности облачного сегмента, в котором создавался полигон для тестирования метапакета wn на вычислительных узлах, а также система мониторинга дата-центра института Физики НАН Азербайджана.

Сведения об авторах

Aleksey Sergeevich Bondyakov, Объединенный институт ядерных исследований

инженер-программист, кандидат технических наук

Nazim Ali-ogly Huseynov, Объединенный институт ядерных исследований; Институт Физики НАН Азербайджана

старший научный сотрудник, кандидат физико-математических наук

Jeyhun Akif-ogly Guliyev, Институт Физики НАН Азербайджана

инженер

Andrey Olegovich Kondratyev, Объединенный институт ядерных исследований

инженер-программист

Литература

[1] The Grid: Blueprint for a New Computing Infrastructure. In: Foster I., Kesselman C. (eds.) Morgan Kaufmann Publishers Inc., San Francisco, CA, USA, 1998. (In Eng.)
[2] Korenkov V.V., Nechaevskiy A.V., Ososkov G.A., Pryakhina D.I., Trofimov V.V., Uzhinskiy A.V. Grid And Cloud Services Simulation As An Important Step Of Their Development. Systems and Means of Informatics. 2015; 25(1):4-19. (In Russ., abstract in Eng.) DOI: 10.14357/08696527150101
[3] Dolbilov A., Korenkov V., Mitsyn V., Palichik V., Shmatov S., Strizh T., Tikhonenko E., Trofimov V., Voytishin N. A. Grid technologies for large-scale projects. In: 2015 Conference Grid, Cloud & High Performance Computing in Science (ROLCG), Cluj-Napoca, 2015, pp. 1-3. (In Eng.) DOI: 10.1109/ROLCG.2015.7367422
[4] Korenkov V.V., Nechaevskiy A.V., Ososkov G.A., Pryahina D.I., Trofimov V.V., Uzhinskiy A.V. Synthesis of the simulation and monitoring processes for the development of big data storage and processing facilities in physical experiments. Computer Research and Modeling. 2015; 7(3):691-698. (In Russ., abstract in Eng.) DOI: 10.20537/2076-7633-2015-7-3-691-698
[5] Charpentier P. LHC Computing: past, present and future. EPJ Web of Conferences. 2019; 214:09009. (In Eng.) DOI: 10.1051/epjconf/201921409009
[6] Bondyakov A. Infrastructure and main tasks of the data-center of the institute of physics of the National Academy of Sciences of Azerbaijan. CEUR Workshop Proceedings. 2016; 1787:150-155. Available at: http://ceur-ws.org/Vol-1787/150-155-paper-25.pdf (accessed 19.06.2019). (In Russ., abstract in Eng.)
[7] Bondyakov A. The Basic Modes of the Intrusion Prevention System (IDS/IPS Suricata) for the Computing Clusterabstractthis. Sovremennye informacionnye tehnologii i IT-obrazovanie = Modern Information Technologies and IT-Education. 2017; 13(3):31-37. (In Russ., abstract in Eng.) DOI: 10.25559/SITITO.2017.3.629
[8] Korenkov V., Kutovskiy N.A., Bondyakov A.S. Grid site for CERN. Open Systems. DBMS. 2018; 03. Available at: https://www.osp.ru/os/2018/03/13054506/ (accessed 19.06.2019). (In Russ.)
[9] Berezhnaya A., Dolbilov A., Ilyin V., Korenkov V., Lazin Y., Lyalin I., Mitsyn V., Ryabinkin E., Shmatov S., Strizh T., Tikhonenko E., Tkachenko I., Trofimov V., Velikhov V., Zhiltsov V. LHC Grid computing in Russia: present and future. Journal of Physics: Conference Series. 2014; 513(Track 6):062041. (In Eng.) DOI: 10.1088/1742-6596/513/6/062041
[10] Astakhov N.S., Belov S.D., Gorbunov I.N., Dmitrienko P.V., Dolbilov A.G., Zhiltsov V.E., Korenkov V.V., Mitsyn V.V., Strizh T.A., Tikhonenko E.A., Trofimov V.V., Shmatov S.V. The Tier-1-level computing system of data processing for the CMS experiment at the large hadron collider. Informacionnye tekhnologii I I vichslitel’nye sistemy”= Journal of Information Technologies and Computing Systems. 2013; (4):27-36. Available at: https://elibrary.ru/item.asp?id=21016914 (accessed 19.06.2019). (In Russ., abstract in Eng.)
[11] Filozova I.A., Bashashin M.V., Korenkov V.V., Kuniaev S.V., Musulmanbekov G., Semenov R.N., Shestakova G.V., Strizh T.A., Ustenko P.V., Zaikina T.N. Concept of JINR Corporate Information System. Physics of Particles and Nuclei Letters. 2016; 13(5):625-628. (In Eng.) DOI: 10.1134/S1547477116050204
[12] De K., Klimentov A., Maeno T., Nilsson P., Oleynik D., Panitkin S., Petrosyan A., Schovancova J., Vaniachine A., Wenaus T. on behalf of the ATLAS Collaboration. The future of PanDA in ATLAS distributed computing. Journal of Physics: Conference Series. 2015; 664(6):062035. (In Eng.) DOI: 10.1088/1742-6596/664/6/062035
[13] Aiftimiei D. C., Fattibene E., Gargana R., Panella M., Salomoni D. Abstracting application deployment on Cloud infrastructures. Journal of Physics: Conference Series. 2017; 898:082053. (In Eng.) DOI: 10.1088/1742-6596/898/8/082053
[14] Taylor R.P., Berghaus F., Brasolin F., Cordiero C.J.D., Desmarais R., Field L., Gable I., Giordano D., Girolamo A.Di, Hover J., LeBlanc M., Love P., Paterson M., Sobie R., Zaytsev A. on behalf of the ATLAS Collaboration. The Evolution of Cloud Computing in ATLAS. Journal of Physics: Conference Series. 2015; 664(2):022038. (In Eng.) DOI: 10.1088/1742-6596/664/2/022038
[15] Bagnasco S., Bernazo D., Lusso S., Masera M., Vallero S. Managing competing elastic Grid and scientific computing applications using OpenNebula. Journal of Physics: Conference series. 2015; 664(2);022004. (In Eng.) DOI: 10.1088/1742-6596/664/2/022004
[16] Bagnasco S., Vallero S., Zaccolo V. A FairShare Scheduling Service for OpenNebula. Journal of Physics: Conference series. 2017; 898:092037. (In Eng.) DOI: 10.1088/1742-6596/898/9/092037
[17] Kutovskiy N.A., Nechaevskiy A.V., Ososkov G.A., Pryahina D.I., Trofimov V.V. Simulation of interprocessor interactions for MPI-applications in the cloud infrastructure. Computer Research and Modeling. 2017; 9(6):955-963. (In Russ., abstract in Eng.) DOI: 10.20537/2076-7633-2017-9-6-955-963
[18] Baranov A.V., Balashov N.A., Kutovskiy N.A., Semenov R.N. JINR cloud infrastructure evolution. Physics of Particles and Nuclei Letters. 2016; 13(5):672-675. (In Eng.) DOI: 10.1134/S1547477116050071
[19] Baranov A.V., Korenkov V.V., Yurchenko V.V., Balashov N.A., Kutovskiy N.A., Semenov R.N., Svistunov S.Y. Approaches to cloud infrastructures integration. Computer Research and Modeling. 2016; 8(3):583-590. (In Russ., abstract in Eng.) DOI: 10.20537/2076-7633-2016-8-3-583-590
[20] Korenkov V.V., Kutovskiy N.A., Balashov N.A., Baranov A.V., Semenov R.N. JINR cloud infrastructure. Procedia Computer Science.2015; 66:574-583. (In Eng.) DOI: 10.1016/j.procs.2015.11.065
[21] Baranov A.V., Balashov N.A., Kutovskiy N.A., Semenov R N. Cloud Infrastructure at JINR. Computer Research and Modeling. 2015; 7(3):463-467. (In Eng.) DOI: 10.20537/2076-7633-2015-7-3-463-467
[22] Balashov N.A., Baranov A.V., Kutovskiy N.A., Semenov R.N. Use of cloud technologies at LIT JINR. In: Information and telecommunication technologies and mathematical modeling of high-tech systems. Proceedings of the All-Russian Conference with international participation, Moscow, RUDN, 2014, pp. 168-170. URL: https://elibrary.ru/item.asp?id=24635187 (accessed 19.06.2019). (In Russ.)
[23] Balashov N.A., Baranov A.V., Kutovskiy N.A., Semenov R.N. Cloud Infrastructure LIT JINR. In: Proceedings of the Conference of the XVIII Scientific Conference of Young Scientists and Specialists (OMUS-2014) on the 105th anniversary of N. N. Bogolyubov, Dubna, JINR, 2014, pp. 190-193. Available at: http://omus.jinr.ru/conference2014/conference_proceedings_2014.pdf (accessed 19.06.2019). (In Russ.)
[24] Balashov N., Baranov A., Kutovskiy N., Semenov R. Cloud Technologies Application at JINR. In: Information Systems & Grid Technologies. Eighth International Conference ISGT’2014 (Sofia, Bulgaria, 30-31 May, 2014). Proceedings. Sofia, Bulgaria, 2014, pp. 32-37. Available at: https://isgt.fmi.uni-sofia.bg/proceedings/ISGT_2014_body.pdf (accessed 19.06.2019). (In Eng.)
[25] Balashov N., Baranov A., Kadochnikov I., Korenkov V., Kutovskiy N., Nechaevskiy A., Pelevanyuk I. Software Complex For Intelligent Scheduling And Adaptive Self-organization Of Virtual Computing Resources Based In Lit Jinr Cloud Center. Izvestiya SFedU. Engineering sciences. 2016; 12(185):92-103. (In Russ., abstract in Eng.) DOI: 10.18522/2311-3103-2016-12-92103
[26] Aiftimiei C. YAIM - EMI Trainings at EGI TF 2012. Zenodo, 2013. (In Eng.) DOI: 10.5281/zenodo.6891
[27] Heap M. Ansible: From Beginner to Pro. Apress, 2016. (In Eng.) DOI: 10.1007/978-1-4842-1659-0
Опубликована
2019-09-30
Как цитировать
BONDYAKOV, Aleksey Sergeevich et al. Миграция сервисов вычислительных узлов грид-сайта AZ-IFAN на ОС Scientific Linux 7. Международный научный журнал «Современные информационные технологии и ИТ-образование», [S.l.], v. 15, n. 3, p. 611-618, sep. 2019. ISSN 2411-1473. Доступно на: <http://sitito.cs.msu.ru/index.php/SITITO/article/view/564>. Дата доступа: 20 jan. 2022 doi: https://doi.org/10.25559/SITITO.15.201903.611-618.
Раздел
Параллельное и распределенное программирование, грид-технологии