Кристофари (суперкомпьютер)
«Кристофари» — суперкомпьютер, созданный Сбербанком России на основе оборудования корпорации Nvidia. Основное предназначение — обучение нейросетей, также применяется для научно-исследовательских и коммерческих расчётов[1]. По состоянию на ноябрь 2020 года по данным суперкомпьютерного рейтинга Top500 производительность суперкомпьютера составляет 6,669 петафлопса, а пиковая — 8,790 петафлопса.[2]


Используется Сбербанком для внутренних задач (для работы колл-центра — распознавания речи и генерации голоса[3]), для сервиса по распознаванию снимков компьютерной томографии лёгких[4], также предоставляется в аренду другим организациям (в составе продуктовой линейки SberCloud AI Cloud; стоимость аренды — 5750 рублей в минуту[5]).
В основе — узлы Nvidia DGX-2, оснащённые графическими ускорителями Tesla V100[6][7], для межсоединения используется сеть Infiniband на базе оборудования Mellanox. Эффективная производительность — порядка 6,7 петафлопса, что сделало систему (на момент пуска в эксплуатацию 8 ноября 2019 года) 40-й в мире, седьмой в Европе и первой в России по мощности[8] (показатели предыдущего российского лидера — системы «Ломоносов-2» — превзойдены более, чем вдвое). Отмечается как первый в мире суперкомпьютер финансовой организации, доступный для использования сторонними пользователями. Также является первым суперкомпьютером, аттестованным в России для работы с персональными данными[9].
Назван в честь Николая Кристофари — первого клиента Сбербанка, открывшего в нём сберегательную книжку[10].
Устройство
Характеристики отдельного узла DGX-2[11]:
- энергопотребление пиковое — 10 кВт;
- ЦПУ — 2× Intel Xeon Platinum 8168, 2,7 ГГц, 24 ядра;
- графические ускорители — 16× Nvidia Tesla v100 32 Гбайт;
- память графических ускорителей — 512 Гбайт
- ядра CUDA — 81920
- тензорные ядра — 10240
- ОЗУ — 1,5 Тбайт
Для межсоединения использованы 36-портовые коммутаторы Mellanox, поддерживающие до четырёх соединений InfiniBand EDR со скоростью 100 Гбит/с.
Почти весь используемый стек машинного обучения ориентируется на операционную систему Ubuntu как на базовую платформу, в связи с чем применена специализированная серверная версия Ubuntu 18.04 LTS, поддерживаемая Nvidia, включая драйверы для графических ускорителей, стек сетевого программного обеспечения, необходимые инструменты для обслуживания и диагностики машины. Также в комплекте идёт проприетарное программное обеспечение от Nvidia CUDA Toolkit, cuDNN, NCCL, а также Docker Engine Utility для GPU Nvidia (весь основной стек для машинного обучения запускается в контейнерах).
Расположен в центре обработки данных Сбербанка в инновационном центре «Сколково». Занимает один машинный зал[12], был построен менее чем за год[13].
Позиции в рейтингах
Позиции в рейтинге Top500 самых мощных суперкомпьютеров мира:
- ноябрь 2020 — 40 место (99,6 тыс. ядер),[2]
- июнь 2021 — 61 место (99,6 тыс. ядер).[14]
- ноябрь 2021 — 72 место (99,6 тыс. ядер).[14][15].
По данным рейтинга Top500 по состоянию на ноябрь 2021 года занимал 5 место в России и 72 в мире.[14][15] В рейтинге Топ-50 суперкомпьютеров СНГ от 21 сентября 2020 года занимал первое место.[16]
Примечания
- Несколько десятков компаний начали работу на запущенном Сбербанком суперкомпьютере . ТАСС (16 декабря 2019). Дата обращения: 16 декабря 2019.
- TOP500 List - November 2020 | TOP500
- Давид Рафаловский: «Весь мир уже в облаке, и Россия там будет» : . РБК Тренды. Дата обращения: 8 апреля 2020.
- СберЗдоровье и SberCloud запускают бесплатный сервис искусственного интеллекта по распознаванию снимков КТ (рус.) ? (14.07.2020).
- SberCloud. Я — новый суперкомпьютер от Сбербанка . SberCloud.ru (8 ноября 2019).
- Сбербанк создал самый мощный в России суперкомпьютер
- SberCloud | TOP500 Supercomputer Sites . www.top500.org. Дата обращения: 18 марта 2020.
- TOP500 List - November 2019 | TOP500 Supercomputer Sites . www.top500.org. Дата обращения: 18 марта 2020.
- Суперкомпьютер «Кристофари» первым в РФ аттестовали для работы с персональными данными . ТАСС. Дата обращения: 8 апреля 2020.
- Сбербанк представил самый мощный в России суперкомпьютер «Кристофари»
- Nvidia. Nvidia DGX-2 . Nvidia.com.
- 808. Это самый мощный компьютер в России .
- Forbes. Давид Рафаловский: мощности суперкомпьютера Cristofari доступны всем . Forbes.ru (15 ноября 2019).
- SUBLIST GENERATOR
- November 2021 | TOP500
- Текущий рейтинг (Редакция № 33 от 21.09.2020) // Страница проекта «Топ-50» на сайте журнала «Суперкомпьютеры»