Коммутатор Melanox MSB7890-ES2F

Mellanox MSB7890-ES2F — это высокопроизводительный, внешне управляемый (externally-managed) коммутатор InfiniBand EDR (Enhanced Data Rate), разработанный специально для построения вычислительных фабрик в суперкомпьютерах и корпоративных центрах обработки данных.

Это устройство относится к поколению Switch-IB 2 и работает на физической скорости 100 Гбит/с (EDR) на каждый порт.

Расшифровка индекса модели

• MSB: Mellanox Switch Blade/Board (серия коммутаторов).
• 7890: Индекс чипсета Switch-IB 2.
• E: Externally Managed. У устройства нет встроенного управляющего процессора (CPU) или операционной системы внутри самого корпуса. Управление осуществляется через отдельный Out-of-Band интерфейс (Ethernet port) с помощью внешнего контроллера управления сетью (например, UFM — Unified Fabric Manage).
• S2: Standard Depth (стандартная глубина корпуса для установки в серверные стойки).
• F: Airflow P2C (Power-to-Connector). Поток воздуха проходит от блоков питания к стороне портов, что является стандартом для интеграции со стороны холодного коридора дата-центра.

Технические характеристики

Особенности архитектуры и применения В отличие от «умных» коммутаторов серии Spectrum (CSN/MSN), модель SB7890 не занимается маршрутизацией L3 самостоятельно и не имеет сложной таблицы IP-адресов. Её задача — обеспечивать максимально быструю пересылку пакетов InfiniBand между узлами кластера.

1. Сверхнизкая задержка: Показатель в 90 нс делает этот коммутатор идеальным выбором для MPI-приложений (Message Passing Interface), которые используются в научных расчетах, моделировании климата, финансовом анализе и обучении нейросетей. Любая лишняя микросекунда задержки при передаче сообщений между CPU/GPU снижает эффективность всего кластера.
2. Роль Leaf-коммутатора: В классической топологии Fat-Tree (дерево с избыточностью) эти устройства устанавливаются на уровне доступа (Leaf/TOR). Они подключаются напрямую к серверам или ускорителям по шине PCIe через Host Channel Adapters (HCA).
3. Масштабируемость: Благодаря архитектуре InfiniBand, 36 портов позволяют строить крупные фабрики без потерь производительности. Коммутаторы объединяются в многоуровневые структуры (Spine/Leaf), обеспечивая связь всех узлов как единого целого.
4. Простота и надежность: Отсутствие внутренней ОС упрощает эксплуатацию — устройству не нужны обновления безопасности ядра Linux, оно практически невозможно вывести из строя программно. Вся логика работы сети выносится на центральный контроллер UFM.

Типичные сценарии использования

• Высокопроизводительные вычисления (HPC): Кластеры университетов, научно-исследовательских институтов и государственных корпораций.
• ИИ-кластеры: Объединение сотен графических процессоров (GPU) для обучения больших языковых моделей.
• Системы хранения данных (SAN): Использование протокола SRP (SCSI RDMA Protocol) для сверхбыстрого доступа к дисковым массивам.