Фото: andrey-che.livejournal.com
Гибридный вычислительный кластер — это группа вычислительных узлов различной архитектуры, объединенных высокоскоростными каналами связи. С точки зрения пользователя гибридный вычислительный кластер представляет собой единую вычислительную систему. Основное назначение вычислительного кластера — выполнение научных расчетов.
Все серверы в составе вычислительного кластер КФУ работают под управлением ОС Debian 11. Для хранения пользовательских данных используется распределенная система хранения Ceph 14.2 Nautilus. Распределение ресурсов кластера между пользователями осуществляется при помощи планировщика заданий Slurm.
Вычислительный кластер состоит из следующих групп серверов:
Группа moldyn-x48 -- многопроцессорные, многоядерные сервера общего назначения
| Количество вычислительных узлов | 6 |
| Центральные процессоры | 2x Intel Xeon E5-2670 v3 |
| Ядер/потоков ЦП на узле | 24C/48T |
| Ядер/потоков ЦП всего | 144C/288T |
| Оперативной памяти на узле | 96GB |
| Оперативной памяти всего | 576GB |
Группа bigdata-x16 -- многопроцессорные, многоядерные сервера с увеличенным локальным пространством для обработки больших данных
| Количество вычислительных узлов | 2 |
| Центральные процессоры | 2x Intel Xeon E5-2637 v3 |
| Ядер/потоков ЦП на узле | 8C/16T |
| Ядер/потоков ЦП всего | 16C/32T |
| Оперативной памяти на узле | 96GB |
| Оперативной памяти всего | 192GB |
Группа bigdata-x8
| Количество вычислительных узлов | 6 |
| Центральные процессоры | 1x Intel Xeon E5-2637 v3 |
| Ядер/потоков ЦП на узле | 4C/8T |
| Ядер/потоков ЦП всего | 24C/48T |
| Оперативной памяти на узле | 96GB |
| Оперативной памяти всего | 576GB |
Группа tesla-k80-x4 – сервера с графическими ускорителями
| Количество вычислительных узлов | 2 |
| Центральные процессоры | 2x Intel Xeon E5-2640 v3 |
| Ядер/потоков ЦП на узле | 16C/32T |
| Ядер/потоков ЦП всего | 32C/64T |
| Оперативной памяти на узле | 192GB |
| Оперативной памяти всего | 384GB |
| Графические ускорители | 2x NVIDIA Tesla K80 |
| Ядер CUDA на узле | 9984 |
| Ядер CUDA всего | 19968 |
Группа tesla-k80-x8
| Количество вычислительных узлов | 2 |
| Центральные процессоры | 2x Intel Xeon E5-2640 v3 |
| Ядер/потоков ЦП на узле | 16C/32T |
| Ядер/потоков ЦП всего | 32C/64T |
| Оперативной памяти на узле | 192GB |
| Оперативной памяти всего | 384GB |
| Графические ускорители | 4x NVIDIA Tesla K80 |
| Ядер CUDA на узле | 19968 |
| Ядер CUDA всего | 39936 |
Также в состав кластера входят:
- Управляющая нода
- Система хранения данных
- Основная сеть InfiniBand
- Управляющая сеть Gigabit Ethernet