NVIDIA Mellanox MQM9790-NS2F InfiniBand Switch Техническое решение
October 14, 2026
NVIDIA Mellanox MQM9790-NS2F InfiniBand Switch Техническое решение для оптимизации межсоединений с низкой задержкой для кластеров RDMA, HPC и AI
Анализ контекста и требований проекта
Современные центры обработки данных, поддерживающие обучение крупных моделей ИИ, моделирование HPC и распределенное хранилище, быстро переходят с 200 Гбит/с HDR на 400 Гбит/с NDR.Основное напряжение для сетевых архитекторов заключается в том, что плотность узлов GPU продолжает расти, в то время как задержка связи между узлами и джиттер становятся ограничивающим фактором эффективности кластера.Один перегруженный прыжок или неправильно настроенный уровень ткани может уменьшить эффективное использование GPU на сотни узлов.
Типичные требования к такому проекту включают детерминированную низкую задержку для коллективных операций, беспроцентную транспортировку RDMA и NVMe через ткани, высокий радикс для поддержания плоской ткани,и четкий путь модернизации, который защищает существующие инвестицииNVIDIA Mellanox MQM9790-NS2F может соответствовать этим требованиям в качестве коммутатора NDR InfiniBand 400Gb/s в семействе Quantum-2.
Общий проект сетевой и системной архитектуры
Рекомендуемая архитектура представляет собой двухуровневую структуру InfiniBand, построенную полностью на NDR-ссылках.в то время как спинные переключатели обеспечивают межлистную связь и разнообразие путиЭта конструкция позволяет сократить количество скачков и обеспечивает не блокирующую пропускную способность для трафика с востока на запад, который доминирует над нагрузками на ИИ и HPC.
На уровне конечной точки адаптеры хост-каналов работают в режиме RDMA, позволяя передавать память в память без вмешательства ЦП.и коллективное ускорениеУправление и телеметрический трафик имеют одну и ту же физическую инфраструктуру, но изолированы посредством политики QoS, поэтому мониторинг не мешает производственной нагрузке.
Ключевые принципы проектирования включают:
- Плоская топология для минимизации задержки и упрощения troubleshooting
- Неблокирующие или с низким уровнем переподписки связи между уровнями
- Последовательное использование NDR от конца к концу для предотвращения узких мест в смешанной генерации
- Избыточные пути для высокой доступности и балансировки нагрузки
- Стандартное управление InfiniBand для обеспечения операционной согласованности
Роль и основные характеристики NVIDIA Mellanox MQM9790-NS2F
NVIDIA Mellanox MQM9790-NS2F служит строительным блоком этой ткани.позволяет архитекторам проектировать более плоскую сеть с меньшим количеством уровнейКаждый порт OSFP может работать на скорости NDR, а конфигурация 64-порта поддерживает высокорадиксовые листья и спинные роли.
Для команд, рассматривающих спецификации MQM9790-NS2F, платформа поддерживает NVIDIA SHARPv3 для коллективного ускорения, продвинутого управления перегрузкой и адаптивного маршрутизации.Эти функции напрямую нацелены на проблемы с задержкой задержки и инкаста, распространенные в обучении ИИ и нагрузках MPIMQM9790-NS2F InfiniBand switch также интегрируется со стандартными инструментами управления InfiniBand, что уменьшает кривую обучения.
При планировании решения коммутатора MQM9790-NS2F InfiniBand архитекторы должны подтвердить совместимые компоненты MQM9790-NS2F, включая кабели OSFP, адаптеры каналов хоста и версии прошивки.Просмотр таблицы данных MQM9790-NS2F на ранней стадии проектирования помогает подтвердить мощность, охлаждения и требований к помещениям на стеллажах до закупки.
Рекомендации по развертыванию и масштабированию
Типичное развертывание начинается с пилотного модуля из 32-64 узлов GPU, подключенных к паре листовных коммутаторов MQM9790-NS2F.использование дополнительных блоков MQM9790-NS2F для поддержания не блокирующей полосы пропусканияЭтот инкрементальный подход позволяет проверять задержку и пропускную способность до полномасштабного внедрения.
Для масштабирования рекомендуется поддерживать симметричность ткани: добавлять емкость листья и позвоночника в соответствующих ступенях, чтобы соотношение переподписки оставалось предсказуемым.Управление кабелями и маркировка портов должны быть стандартизированы с самого начала, поскольку развертывание OSFP с высокой плотностью может быть трудно поддерживать, если физическая компоновка несовместима.
Нижеприведенная таблица содержит представление о двух уровнях проектирования:
| Склад | Роль | Типичная конфигурация |
|---|---|---|
| Листья | Подключение узлов GPU и хранилища | MQM9790-NS2F, 400Gb/s NDR нисходящие связи |
| Позвоночник | Соединение между листьями | MQM9790-NS2F, не блокирующие подключения |
| Управление | Телеметрия и оркестрация | Вне полосы или изолированная QoS внутри полосы |
Операции, мониторинг, устранение неполадок и оптимизация
Операционный успех зависит от видимости. Ткани InfiniBand обеспечивают счетчики ошибок ссылок, перегрузок и использования буфера.Они должны собираться непрерывно и соотноситься с данными планировщика работ., так что регрессии производительности могут быть прослежены к конкретным сегментам ткани, а не догадываться.
Общие сценарии устранения неполадок включают кредитные стойки, неправильно настроенный QoS и несоответствие прошивки между коммутаторами и адаптерами.Подтвердить политику маршрутизации, проверять телеметрию перегрузки, может сократить среднее время до разрешения.поскольку нагрузки на ИИ и HPC чувствительны к худшему поведению.
Для закупок и планирования жизненного цикла команды часто сравнивают цену MQM9790-NS2F и варианты продажи MQM9790-NS2F по уполномоченным каналам.и регион, поэтому рекомендуется раннее взаимодействие с дистрибьюторами и представителями предприятий NVIDIA.
NVIDIA Mellanox MQM9790-NS2F обеспечивает NDR-основу высокого радикса 400Gb / s для RDMA, HPC и AI кластерных взаимосвязей.и обеспечивает беспроцентный транспорт с низкой задержкой;Для сетевых архитекторов и инженеров допросаЭто практичный и масштабируемый строительный блок для следующего поколения InfiniBand тканей..