З.Жанабаев атындағы “Data Science in Astrophysics” ғылыми-зерттеу орталығы
Орталық ҚазҰУ Ғылыми кеңесінің 2023 жылдың 20 желтоқсандағы №4 отырысының шешіміне негізделген Ректордың 2024 жылдың «10» қаңтардағы № 10 бұйрығына сай ашылды.
Агишев Алдияр Талгатович, "Data Science in Astrophysics" Орталығының директоры, "Физика және Астрономия" бойынша PhD, доцент м.а.
Қысқаша сипаттама
әл-Фараби атындағы ҚазҰУ-дың астрономия және астрофизика саласындағы қажеттіліктеріне арналған есептеу кластері.
Кластер физикалық серверлерден тұрады. Қашықтағы бұлтты инфрақұрылыммен толықтырылған жүйе жоғары қолжетімділік пен ақауларға төзімділік принципіне негізделіп салынған.
Бұл архитектура техникалық қажеттіліктерді қанағаттандырады және тік әрі көлденең бағытта масштабталуға мүмкіндік береді.
Кластер құрылымының икемділігі мен модульдігі бірыңғай басқару жүйесі арқылы таратылған қуат көздері мен қолжетімділік жүйелері арқылы қамтамасыз етіледі. Осылайша, есептеу тораптарының толық функционалдығы тәулік бойы (24/7) қолжетімді болады, сонымен қатар резервтік көшіру, деректерді тасымалдау, сақтау және "ыстық" ауыстыру мүмкіндігімен жүйелерді немесе толық тораптарды орналастыру мүмкіндігі бар.
Қолжетімділік жүйесі қауіпсіз SSL VPN топологиясын қолданатын негізгі 1 Гбит/с арна арқылы құрылған. 50 Мбит/с жылдамдықпен жұмыс істейтін резервтік 4G радио арнасы сыртқы қоғамдық IP мекенжайы арқылы Firewall арқылы іске қосылады. Бұлтты бөлік деректерді тарату мен қолжетімділікті қамтамасыз ету үшін жалға алынған виртуалдық хостингте (Microsoft OneDrive) орналастырылған.
Есептеу торабы – ортақ гипервизор платформасындағы (әсіресе HYPER-V, кейбір жағдайларда ESXi) виртуалды машиналардың жиынтығы. Бұл платформа ортақ ресурстарға негізделіп, физикалық серверлер арасында (Xeon процессорлары, жедел жады және RAID массивіндегі қатқыл дискілер) таратылған.
Энергия тәуелсіз қуат көздері мен резервтік жүйе арқылы беріледі. Қуатты басқару жүйесі қашықтықтан қолжетімділікті қолдайды. Домейн ішіндегі машиналар арасындағы байланыс 10 Гбит/с интерфейстер арқылы жүзеге асырылады. Желілік инфрақұрылым байланыс агрегациясы мен қосылуды резервтеу арқылы салынған. VLAN желілік домендері қуатты басқару жүйесін, мониторинг сенсорларын, басқару қосалқы желісін және қолжетімділік қосалқы желісін ажыратады.
Есептеулерді параллельдеу үшін біз Linux-қабықша негізінде жасалған өз скриптімізді қолданамыз..
Астрономия және астрофизика үшін есептеу кластерінің сипаттамалары:
Есептеу ресурстары
Кластер келесі ресурстарды ұсынады:
– 464 жіп, 2.6 ГГц жиілігімен (10 физикалық процессорда, Xeon Gold 62xx/63xx сериялы процессорлар)
– 1 GPU (Nvidia A2)
– 576 ГБ жады (DDR4, 2666 МГц)
– 23 ТБ сақтау (SSD/SAS дискілері аппараттық RAID арқылы)
Кластер жабдықтары 4 HP Enterprise DL380 Gen10 / Gen10 Plus блоктарынан тұрады.
Қолжетімділік мүмкіндіктері
– Қоғамдық IP-мекенжайы арқылы SSH және RDP (сұраныс бойынша VNC).
– "Пайдаланушы деректеріне" қолжетімділік Microsoft Cloud арқылы (1 ТБ, файлдық хостинг қызметінің түрі) ортақ сілтемелер арқылы қамтамасыз етіледі.
Бағдарламалық және аппараттық топология
– Хост OS Linux негізінде (Ubuntu 18.04 LTS).
– Виртуализация Hyper-V Server 2019.
– Интернет байланысы (негізгі uplink, Access LAN): 1 Гигабиттік Ethernet интерфейсі (1 GE, ең жақсы пинг 2-5 мс, жылдамдық – speedtest.net бойынша 750 Мб/с).
– Резервтік 4G ұялы желісі (50 Мбит/с, сондай-ақ қоғамдық IP-ге қол жеткізу үшін қолданылады).
– Негізгі қуат көзі 6.5 кВт (резервтік қуат: 2.2 кВт).
– Кластер ішіндегі байланыс 10GBASE (SFP+, DAC).
– VLAN басқару желісі 1 GE интерфейстеріне негізделген, FortiGate SSL – – VPN арқылы қашықтықтан қол жеткізу мүмкіндігімен.
– Қауіпсіздік қабырғалары (NGFW), жүйені мониторингтеу құралдары, маршруттау және қосқыш мүмкіндіктері, мысалы, байланыс агрегациясы және қосылуды резервтеу мүмкіндіктері жүзеге асырылған.
Масштабтау тік және көлденең бағытта мүмкін.
Пайдалану және техникалық қызмет көрсету ерекшеліктері
– OS жүктеме бақылау нүктелері.
– OS үшін резервтік көшіру және көшіру мүмкіндігі.
– Қазіргі конфигурациялары және кіріктірілген қолданбаларымен бірге көшіру және бейнелеу.
– OS және есептеу тораптарын жылдам енгізу мүмкіндігі.
Кластер серверлерінің ыстық алмастырылатын аппараттық компоненттері.