Сибирский синхротрон «СКИФ» получил НРС-кластер РСК с производительностью 390 Тфлопс SLUG: sibirskiy-sinhrotron-skif-poluchil-nrs-klaster-rsk-s-proizvoditelnostyu-390-tflops

Дата-центр Центра коллективного пользования «Сибирский кольцевой источник фотонов» (ЦКП «СКИФ») завершил монтаж и испытания вычислительного комплекса, спроектированного специально под пиковые нагрузки генерации и первичной обработки массивов экспериментальных данных. По информации ServerNews, оборудование поставила группа компаний РСК.

Архитектура решения гибридная и разделена по типу вычислительных задач. Основу массива составляют 24 сервера «РСК Торнадо», оснащённых системой жидкостного охлаждения. Их суммарное быстродействие зафиксировано на уровне 182 Тфлопс. Дополнительно в кластер интегрированы два специализированных GPU-сервера, которые добавляют ещё 208 Тфлопс вычислительной мощности. Математика поставки прозрачна. Сложение 182 и 208 даёт заявленные 390 Тфлопс. Расчёт редакции показывает среднюю отдачу около 7,6 Тфлопс на один CPU-узел и 104 Тфлопс на каждый GPU-сервер, что указывает на применение высокоплотных графических ускорителей в составе системы. Сетевые узлы и системы хранения данных (СХД) также вошли в состав НРС-комплекса, однако их точная конфигурация и пропускная способность в переданных материалах не уточняются.

Подобный периметр мощностей продиктован спецификой научных задач. Новый вычислительный центр будет хранить и обрабатывать массивы информации, поступающей с семи исследовательских станций первой очереди синхротрона:

• «Микрофокус»;
• «Структурная диагностика»;
• «Быстропротекающие процессы»;
• «XAFS-спектроскопия и магнитный дихроизм»;
• «Диагностика в высокоэнергетическом рентгеновском диапазоне»;
• «Электронная структура»;
• «Базовые методы синхротронной диагностики для образовательной, исследовательской и инновационной деятельности студентов».

Критическим узлом нагрузки выступает станция «Быстропротекающие процессы». Здесь всё иначе. Оборудование этого модуля способно вести рентгеновскую съёмку со скоростью до 1 млрд кадров в секунду. Возникающий непрерывный поток сырых данных требует мгновенной буферизации в оперативной памяти или сверхбыстрой подсистеме хранения с последующей сложной математической реконструкцией трёхмерных моделей без потери временных меток. Без выделенных GPU-узлов и оптимизированной сетевой шины такой объём информации неизбежно создал бы очередь на запись, что недопустимо для экспериментов с высокой временной разрешающей способностью.

Применение жидкостного охлаждения для 24 серверов «РСК Торнадо» — не просто дань моде на энергоэффективность. Это необходимость. В условиях высокой плотности вычислений, необходимой для обработки миллиарда кадров в секунду, традиционные воздушные системы столкнулись бы с тепловым троттлингом, что снизило бы реальную производительность ниже заявленных 182 Тфлопс.

В пересчёте на кадровый ресурс мощности дата-центра рассчитаны на обеспечение полного цикла научных работ для 2–2,5 тыс. исследователей ежегодно. Масштаб впечатляет. В этом кольцевом ускорителе периметром 158 м пучки электронов, вращаясь со скоростью, предельно близкой к скорости света, достигают энергии 3 ГэВ, генерируя интенсивное синхротронное излучение для проведения экспериментов.

Монтаж и испытания вычислительного комплекса завершены. Система передана для обработки данных первых экспериментов на станциях первой очереди.

Никита Карпов

Главный редактор

Пишу о гаджетах, нейросетях и том, как технологии меняют нашу жизнь. Проверяю всё на себе, чтобы вы не тратили деньги зря.