Российские силовики закупили необычные отечественные суперкомпьютеры

Российские силовики закупили необычные отечественные суперкомпьютеры

10.12.2018      23399

Более сотни суперкомпьютеров российского производства закупили силовые ведомства. Особенность устройств – система жидкостного охлаждения в прозрачном корпусе с неоновой подсветкой. Разбираемся, что это за техника, и что она может.

Супер, но мини

История мини-суперкомпьютеров «Сторус» началась шесть лет назад. В 2012 году стало известно о первой кооперации «Сторуса» с Институтом программных систем им. А. К. Айламазяна РАН (ИПС). Суперкомпьютеры в комплектации «мини» разработали специалисты ИПС по заказу «Сторуса». Устройства из первой линейки имели погружное жидкостное охлаждение, за что их называли «аквариумами». Прозвище закрепилось.

Не только для силовиков

Объемы производства для гражданских нужд не афишируют, но компания хотела активно продвигать «аквариумные устройства» в финансовой и нефтегазовой отраслях. В «Сторусе» рассказали, что первую сотню устройств выпустили ещё в 2017 году. Поставляли «аквариумы» в исследовательский ядерный университет МИФИ и Таганрогский авиационный научно-технический комплекс имени Г. М. Бериева (ТАНТК). До конца декабря должна завершится установка кластера в московском Объединенном институте высоких температур РАН (ОИВТ).

Эксперты полагают, что в ОИВТ поставили кластер за 16 млн рублей. Это система на 48-ми 16-ядерных чипах AMD под управлением ОС SUSE Linux Enterprise Server (SLES) 12 SP3. Она поддерживает первый российский интерконнект «Ангара», созданный в НИЦЭВТ. Пиковая производительность кластера – не менее 13,5 ТФлопс.

 

Фото Cnews.ru

 

Что внутри

Российские компьютеры построены не на «Байкалах» и «Эльбрусах», а на комплектующих топовых мировых производителей. В основе – процессоры Intel и AMD, а также графические ускорители Nvidia и других брендов, сопроцессоры и сопутствующие элементы. Сама Intel, к слову, также показывала суперкомпьютеры с погружным охлаждением. Каждый из кластеров, которые поставили силовикам, содержит более тысячи вычислительных ядер. Но конфигурация хранится в секрете – ее не определить даже через прозрачный корпус.

Впрочем, на «Эльбрусах» производитель также создал «аквариумные» кластеры. Но они зависли на стадии прототипов – реальных заказчиков на такие решения пока не нашли.

Перспективность жидкостного охлаждения

Погружное жидкостное (иммерсионное) охлаждение считалось бесперспективным решением. Специалисты полагали, что для создания мощных кластеров необходимы легко масштабируемые системы, а иммерсионные охладители масштабировались плохо. Но время доказало, что жидкостное охлаждение – выбор будущего.

В топ-500 самых производительных кластеров мира входит ряд компактных систем с погружным охлаждением, которые являются крайне экономичными. В ИПС своевременно поняли, что охлаждать кластеры с помощью плат, которые прилегают к греющейся электронике, неэффективно. Воздушный вариант также не обеспечил должного эффекта, поэтому выбор пал на иммерсионные системы.

 

 

Будущее охлаждения кластеров

По мнению директора ИПС Сергея Абрамова, погружные системы в будущем смогут заменить решения с поливным охлаждением. В них процессоры опрыскивают каплями и струями. ИПС совместно со «Сторусом» уже создали такую систему. Ею заинтересовались компании, которые занимаются майнингом криптовалют.

Но когда курс биткоина (а за ним – и весь рынок) пошел вниз, от дальнейших планов по развитию поливного охлаждения пришлось отказаться. Еще один подход – охлаждение кипением. Для этого нужно использовать хладагент, у которого фазовый переход из жидкого в парообразное состояние происходит при 55-60 градусах Цельсия – это оптимальная температура для электроники.

Если непрерывно опрыскивать платы выкипающим хладагентом, можно достигнуть равномерного охлаждения всех размещенных в корпусе суперкомпьютера чипов. В погружных «аквариумах» с этим есть проблема: нижние и верхние слои жидкости имеют разную температуру из-за конвекционной циркуляции. Но пока разработчики не отработают вложения в системы погружного охлаждения, технологии вряд ли пойдут вперед. На их разработку просто нет средств.



Источник: https://infostart.ru/journal/news/tekhnologii/rossiyskie-siloviki-zakupili-neobychnye-otechestvennye-superkompyutery_960354/
Автор:
Обозреватель


Имеете ли вы опыт работы с компьютерами, где используется погружное жидкостное охлаждение?


Да, такие компьютеры продуктивнее обычных устройств (2.94%, 1 голосов)
2.94%
Да, абсолютно бесполезная задумка (11.76%, 4 голосов)
11.76%
Нет, никогда с такими не сталкивался (85.29%, 29 голосов)
85.29%
Свой вариант (в комментариях) (0%, 0 голосов)
0%

Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. starik-2005 2803 10.12.18 10:32 Сейчас в теме
Заголовок плохо отражает суть, а она вот тут:
Это система на 48-ми 16-ядерных чипах AMD под управлением ОС SUSE Linux Enterprise Server (SLES) 12 SP3
Т.е. не только железо импортное, но даже ось не могли взять местную, коих не мало.
evn-zorin; shard; A_Max; Йожкин Кот; ilialin; awk; +6 Ответить
2. user774630 10.12.18 10:35 Сейчас в теме
(1) зато подсветка неоновая!
shard; chebser; +2 Ответить
3. starik-2005 2803 10.12.18 10:37 Сейчас в теме
(2)
зато подсветка неоновая
Ну это в каждом домашнем компе, собранном на коленке, есть. Так что тут каждый российский продвинутый пользователь является производителем отечественных компьютеров с неоновой подсветкой.
7. feva 484 10.12.18 10:50 Сейчас в теме
(3)
суперкомпьютеров российского производства закупили силовые ведомства.

Вот это предложение раскрывает суть статьи.
"Обычный ПК" - 1000$
РОССИЙСКОГО ПРОИЗВОДСТВА "Обычный ПК" - 2500$
СПЕЦ РАЗРАБОТКА ДЛЯ СИЛОВЫХ ВЕДОМСТВ "Обычный ПК"- 10 000$
как то так.
Serega-artem; evn-zorin; abadonna83; shard; Йожкин Кот; pavlov_dv; ilialin; user764477; KEV8383; Kaspirovsky; Kochergov; +11 Ответить
8. Darklight 29 10.12.18 10:52 Сейчас в теме
(7)Ну, думаю, в США высокопроизводительные спецкомпьютеры для силовиков тоже не дёшевые будут! С домашними их уж точн не стоит сравнивать! Да и домашние, если говорить о системах энтузиастов с экстремальной производительностью (и экстремальным охлаждением) + с экслюзивным моддингом - тоже не будут дешёвыми! Совсем не будут дешёвыми!
10. feva 484 10.12.18 11:59 Сейчас в теме
(8)
"НЕ Обычный супир мощный кампуктир" - 10 000$
РОССИЙСКОГО ПРОИЗВОДСТВА "НЕ Обычный супир мощный кампуктир" - 25 000$
СПЕЦ РАЗРАБОТКА ДЛЯ СИЛОВЫХ ВЕДОМСТВ "НЕ Обычный супир мощный кампуктир"- 100 000$
Так лучше и понятнее суть месседжа?
12. Darklight 29 10.12.18 12:46 Сейчас в теме
(10)Ваш посыл понятен и, скорее всего, Вы правы (раз данные компьютер не поступили в розницу ни в каком виде - говорить о их фактической себестоимости, и эффективности применения на каждый потраченный рубль, не приходится), но всё-таки, давайте посчитаем и определим на сколько всё плохо:
Один 16 ядерный процессор amd epyc стоит около 100 тыс руб (к сожалению в новости почти ничего не сказано о тех. характеристиках кластера - но будем считать, что они высокие (но, конечно можно перевести указанные в новости терафлопсы в имеющееся на рынке железо - хотя, надо заметить, 13.5 Тфлопс в пике - это, по нынешним меркам, не много, как мне кажется - но я не знаю, сколько флопсов выдают современные 16 ядерные процессоры ) - раз применяют погруженное охлаждение - значит цель - максимальная производительность; чипы intel - ещё дороже). В кластере их 48 штук - т.е. одни только процессоры это около 5млн руб. Про видеоускорители почти ничего не написано - но надо полагать - там профессиональные ускорители от NVidia, например Tesla P100 - для дата центров - такой стоит более 300 тыс рублей за штуку - вот сколько их там - ну, допустим 4 (наиболее оптимально) на каждую материнскую плату. Сколько же материнских плат в таком кластере - ну, думаю, для 48 процессоров не менее 6 - итого 4*16 = 24 ускорителя - скажем по 300 тысяч (а числодробилки v100 стоили бы по 600 тыс) это уже 7 млн. Это уже 13 млн. А мы ещё не посчитали стоимости 6 специальных серверных мат плат - как минимум по 300 тыщ за штуку - это ещё более миллиона. А ведь там ещё и материнские платы, и память и СХД + БП + система жидконсного охлаждения (она одна на пару лямов может потянуть - весь специально разработанный комплект если посчитать) + сборка + разработка + тестирование + налоги + продвижение + ещё и прибыль надо получить! А ещё ПО - там наверняка не freeware edition без поддержки!

Так что, цена в 16 млн за кластер мне не кажется уж как-то сильно завышенной и попиленной на откаты!

Конечно, там, наверняка, железо всё-таки немного по проще - ну даже если сократить себестоимость раза в 2 и выкинуть все легальные накрути - всё равно это не выйдет рамки разумного! Там же не селероны или атомы поставляются - там всё-таки очень мощное железо с системой ултраэкстремального охлаждения - для получения очень высокой производительности в расчётах!

А в долларах 16 млн сейчас это 242тыс$ - много ли это для оборонного компьютера - прикидывайте сами - думаю в США это было бы на порядок дороже!
rintik; Perfolenta; +2 Ответить
9. Kaspirovsky 182 10.12.18 11:02 Сейчас в теме
(7)
СПЕЦ РАЗРАБОТКА ДЛЯ СИЛОВЫХ ВЕДОМСТВ "Обычный ПК"- 10 000$

Главное сделать умный вид и сказать что распилили 10 тон зеленых и собрали из сделанных в Китае американских составляющих, студенты-практиканты на коленке!!! но зато какая подсветка!!!! :))
rintik; Perfolenta; user774630; +3 Ответить
19. Ziggurat 50 10.12.18 17:20 Сейчас в теме
(2) Тоже, поди, импортная, с Китая заказывали.
6. Darklight 29 10.12.18 10:47 Сейчас в теме
(1)Видать местные ОСи с жидкостью не совместимы - ржавеют и далее работают "со скрипом" ;-)
23. user1111922 16.12.18 12:54 Сейчас в теме
(1)
даже ось не могли взять местную

Где ты российские оси увидел?
4. vano-ekt 850 10.12.18 10:46 Сейчас в теме
20. Healer 1 10.12.18 17:33 Сейчас в теме
(4) Спасибо, повеселили! "Я изучил Интернет за два дня. И скачал его на флешку. Вот она!" - больше не мем. Феерический писец.
21. Perfolenta 10.12.18 22:46 Сейчас в теме
(4) да уж... к сожалению, невежество журналистов помноженное на невежество "будущих светил науки" выдают вот такие шедевры... сами "будущие светила науки" виноваты в этом меньше всего... а вот родители и педагоги очень виноваты... а главные виновники это либеральные идеологи, которые навязывают идиотские практики обучения...
5. Darklight 29 10.12.18 10:46 Сейчас в теме
Забавно. Интересно, как это сделано? Интересовался погружным охлаждение лет так 10 назад. По этой теме были прочитаны разные статьи. Но тогда всё свелось к тому, что погружение даже в деионизированную воду - не обеспечивает долговечной надёжности - типа от самих погружённых в такую жидкость компонентов выделяются ионы - которые со временем накапливаются в достаточном числе, так что, в воде легко распределяются по всему объёму и в конечном итоге создают проводимость - и система начинает глючить - в конечном итоге выключается.

Другой вариант - это использование специальных масел (ну растительное или машинное тоже годится - но менее) - так компьютер работает дольше (масло более вязкое - ионы от компонент компьютера просто дольше в нём распространяются) - но со временем компьютер тоже начинал глючить (хоть и значительно позже чем с деонизированной водой).

Вот, что за жидкостный диэлектрик, да ещё и с очень высокой теплопроводностью, использовали в этих проектах - в новости ни слова.

Да и странные фото - там в жидкость помещены компоненты с воздушными куллерами (пропеллерными вентиляторами) - они вообще не будут работать в жидкости -вернее некоторое время проработают - мутя и загрязняя жидкость маслом из подшипников - и вырубятся.

Пока это больше похоже на первоапрельскую шутку - но вроде до 1-го апреля ещё очень далеко....

Да и странно, что такие решения заказали силовики и компания в первую очередь поставляет именно им - на мой взгляд - таке компьютеры больше смотрелись бы как эксклюзивные розничные решения - там где стиль, важнее стоимости! Не думаю, что эффективность охлаждения и, как следствие, производительность таких систем так уж принципиально выше, чем классические системы экстремального охлаждения - например азотом! Уж не говоря уже о моддинге - стеклянный корпус и подсветка - такая эффектность для иммиджевых рабочих станций только требуется - а для ЦОД - все эти украшения не имеют значения.
SKravchenko; +1 Ответить
11. for_sale 933 10.12.18 12:45 Сейчас в теме
Безотказный генератор мемов:
<Наименование государственного органа> закупили отечественные <нано, супер, инновационные> <наименование какого-нибудь устройства>
13. genayo 10.12.18 12:54 Сейчас в теме
А вроде как на Эльбрусах компы силовики закупить должны были...
14. Darklight 29 10.12.18 12:58 Сейчас в теме
(13)под разные задачи - мелким чиновникам эльбрусы - кто покрупнее - тому вот такие кластеры - чтобы CS-ка не тормозила! Ну а крупным шышкам - пока ещё не спроектировали - такие шкафы мейнфреймов даже в их гигантские кабинеты не помещаются! А на менее производительных - у них косынка поддтормаживает....
15. starik-2005 2803 10.12.18 14:01 Сейчас в теме
(14)
поддтормаживает
Вот зря Шахиджанян свою программу так дешево продает )))
16. A_Max 19 10.12.18 14:42 Сейчас в теме
Тут два варианта:
* красивый сферичиский демо стенд для прессы
* мощный пропил денег

Если первое, то настучать по головам демонстраторам, потому как тогда нужно сразу говорить, что это просто для демонстрации "принципа" и НИЧЕГО общего с реальной установкой не имеет.
Если второе, то тогда "настучать по башке" расширяется и в количественном состве участников и в мощности удара вплоть до "с конфискацией".
17. TABEZI1234 10.12.18 14:54 Сейчас в теме
следить за нами, бузотерами))
18. Darklight 29 10.12.18 15:17 Сейчас в теме
Кстати, распил распилом. А у таких компьютеров с погружной жидкостной системой охлаждения для использования в силовых структурах есть определённое специфическое преимущество - такая организация корпуса (и наполнения) делает его высокоизолированным от внешнего воздействия - любая попытка несанкционированно проникнуть внутрь - приведёт к расгеремитизации корпуса - падению уровню жидкости и аварийному отключению компьютера (с оповещением).

Хотя.... любая ли..... вон шарики иголками прокалывают и ничего - не лопаются - тут, думаю тоже можно обойти разгермитизацию. И прозрачный корпус даже наоборот - может эффективно проникнуть внутрь.
22. My_ 13.12.18 06:44 Сейчас в теме
Неоновая подсветка - очень важная часть? Без нее уже не та производительность? Как и прозрачность корпуса )
Оставьте свое сообщение

См. также

«Сбер» начнет использовать российские TLS-сертификаты для платежного шлюза

Новость Безопасность ИТ-новость Минцифры

Банк запланировал переход на сертификаты, выпущенные Национальным удостоверяющим центром (НУЦ) Минцифры, на 30 января 2023 года. Клиентам необходимо добавить на свои серверы корневой сертификат ведомства.

30.01.2023    1778    VKuser24342747    1       

Минцифры подготовило правила отказа от передачи биометрических данных

Новость ИТ-новость Минцифры

Гражданин имеет право отказаться от сбора и распространения своих биометрических данных. Отказ можно оформить в МФЦ только при личном присутствии.

24.01.2023    1285    VKuser24342747    0       

Банки смогут получить право на передоверие полномочий по электронной подписи

Новость ИТ-новость Цифровая подпись Цифровая экономика

Комитет Госдумы рекомендует принять соответствующий законопроект. Документ позволит компаниям финансового сектора использовать электронную подпись наравне с другими организациями.

20.01.2023    1061    VKuser24342747    0       

«ВКонтакте» начал поддерживать получение уведомлений от Госуслуг

Новость Госуслуги ИТ-новость Мессенджеры Налоги

Оповещения с Единого портала госуслуг будут отображаться в Вконтакте и приложении «VK Мессенджер». Кроме того, стала доступна оплата штрафов ГИБДД прямо в VK.

19.01.2023    1211    VKuser24342747    0       

Минцифры подготовило правила аккредитации госорганов на владение информсистемами для биометрии

Новость Законодательство ИТ-новость Минцифры

Проект постановления содержит требования к Цетробанку и госорганам, а также к сторонним организациям, которые будут привлекаться ведомствами в качестве операторов. Требования согласованы с ФСБ.

19.01.2023    1160    VKuser24342747    0       

Утвержден профстандарт специалиста по информационной безопасности

Новость Безопасность ИТ-новость

Новый профстандарт вступит в силу 1 сентября 2023 года. А пока у работодателей в кредитно-финансовой сфере есть время проанализировать трудовой функционал специалистов по ИБ и при необходимости уточнить его.

17.01.2023    1893    user1816563    0       

Национальная система пространственных данных начала работу в России

Новость ИТ-новость Цифровая экономика

Пилотный проект по запуску цифровой платформы стартовал в четырех регионах РФ. При помощи системы можно получать актуальные данные о земле и недвижимости, пользоваться электронными сервисами.

12.01.2023    2028    VKuser24342747    0       

Госдума рассмотрит законопроект о цифровом рубле

Новость Законодательство ИТ-новость Цифровая экономика

Документ определяет выпуск и обращение цифрового рубля на территории России, назначает оператора нового платежного средства и его полномочия и обязанности по сохранности денег пользователей.

11.01.2023    3950    VKuser24342747    2       

Оператором Единой биометрической системы стал «Центр Биометрических Технологий»

Новость ИТ-новость

Ранее за работу платформы отвечал «Ростелеком». На «Центр Биометрических Технологий» возложены задачи по развитию в России цифровых технологий идентификации и аутентификации, в том числе на основе биометрических персональных данных.

22.12.2022    2589    VKuser24342747    2       

GitHub бесплатно проверит репозитории на наличие секретных токенов

Новость GitHub Безопасность ИТ-новость

ИТ-хостинг запустил систему сканирования общедоступных репозиториев, чтобы предотвратить случайное раскрытие конфиденциальной информации, такой как учетные данные и токены аутентификации.

22.12.2022    1993    VKuser24342747    1       

GitHub к концу 2023 года введет обязательную двухфакторную аутентификацию

Новость GitHub Безопасность ИТ-новость

Веб-хостинг потребует от всех пользователей, загружающих код, включить двухфакторную аутентификацию (2FA) для дополнительной защиты своих аккаунтов.

21.12.2022    2237    VKuser24342747    0       

Госдума рассмотрит законопроект о провайдере для госсайтов

Новость Государственные, бюджетные структуры Законодательство ИТ-новость

Документ предусматривает запрет на размещение государственных информационных ресурсов на хостингах, не включенных в специальный реестр. Сейчас около 20% ресурсов госорганов размещены на иностранных площадках.

20.12.2022    1864    VKuser24342747    1       

«Яндекс» открыл доступ к фреймворку Yatagan для сборки Android-приложений

Новость ИТ-новость Яндекс Разработка

Инструмент свободно распространяется через GitHub. Перед публикацией в открытом доступе фреймворк долгое время применялся во внутренних проектах компании. Решение основано на API Dagger.

16.12.2022    2719    VKuser24342747    1       

В России появится национальная издательская система вместо иностранных аналогов

Новость Импортозамещение ИТ-новость

Программный комплекс будет создан на базе существующего отечественного решения Axiocat. Сейчас это приложение не внесено в Единый реестр российского ПО, хотя применяется некоторыми компаниями.

15.12.2022    1960    VKuser24342747    0       

Google рассказала о проблемах и преимуществах поддержки разработки на Rust в Android 13

Новость Google ИТ-новость Языки программирования

По итогам внедрения поддержки разработки на Rust снизилось число уязвимостей, связанных с управлением памятью. Инженеры считают, что основное внимание нужно уделить написанию нового кода, а не переписыванию старого.

14.12.2022    1941    VKuser24342747    0       

Банки обяжут принимать оплату по картам «Мир» с QR-кодом в смартфоне

Новость Банки ИТ-новость

Оператор платежной системы «Мир» разослал российским банкам документ с требованием обеспечить прием платежей по новой технологии. Первый этап внедрения завершится в апреле 2023 года.

14.12.2022    2206    VKuser24342747    1       

Госдума рассмотрит законопроект о создании Национального удостоверяющего центра

Новость Законодательство Интернет ИТ-новость

Информационная система позволит российским сайтам получать сертификаты безопасности без участия иностранных организаций. Для их выдачи будет применяться отечественная криптография.

09.12.2022    2002    VKuser24342747    0       

Госдума планирует отложить срок обязательного перехода на машиночитаемые доверенности

Новость Законодательство ИТ-новость

Госдума в первом чтении одобрила законопроект, который продлевает переходный период для машиночитаемых доверенностей. Еще полгода организации смогут не применять МЧД при использовании электронных подписей.

08.12.2022    2145    VKuser24342747    0       

GitHub опубликовал статистику по языкам и проектам за 2022 год

Новость ИТ-новость Языки программирования Разработка

В статистическом отчете репозитория названы самые популярные языки программирования среди пользователей платформы, а также данные об активности аудитории сервиса.

01.12.2022    2636    VKuser24342747    11       

Инспекторы смогут проводить дистанционные проверки через смартфон

Новость ИТ-новость Мобильные приложения

Минэкономразвития представило мобильное приложение, которое позволит осуществлять надзорные мероприятия бизнеса без посещения офиса. Программа работает через Госуслуги.

28.11.2022    2468    VKuser24342747    0       

«Яндекс» представил бесплатный сервис для быстрого поиска в облаке

Новость ИТ-новость Облачные технологии

Сервис Managed Service for OpenSearch от платформы Yandex Cloud предназначен для оптимизации поисковых систем и проверки стабильности и безопасности работы приложений. Услуга доступа в режиме Public Preview.

24.11.2022    3312    VKuser24342747    1       

В декабре начнут действовать новые правила регистрации доменов .RU и .РФ

Новость ИТ-новость Роскомнадзор

С 12 декабря Роскомнадзор получит право прекращать делегирование домена, если он оформлен нелегально, или на сайте содержится запрещенная в России информация.

23.11.2022    2382    VKuser24342747    1       

Stack Overflow запустил проект для оффлайн-доступа к форуму

Новость ИТ-новость Разработка

Проект под названием Overflow Offline позволяет скачать актуальную версию архива вопросов и ответов по разработке ПО. По объему данных база форума уступает только «Википедии».

02.11.2022    2383    VKuser24342747    1       

Минцифры запустило магазин российского ПО из реестра ИТ-решений

Новость Импортозамещение ИТ-новость

Маркетплейс «Руссофт» стал доступен для всех пользователей. С его помощью можно подобрать программы от отечественных разработчиков для решения корпоративных задач бизнеса.

21.10.2022    2665    VKuser24342747    4       

В ноябре начнется создание российского государственного аналога GitHub

Новость ИТ-новость

Правительство озвучило дату запуска эксперимента по разработке отечественного репозитория ПО. Исходники программ, в том числе разработанных для госорганов, будут публиковаться в нем под открытой лицензией.

19.10.2022    3573    VKuser24342747    14