Серверный адаптер NVIDIA Mellanox MCX623106AN-CDAT в действии
June 10, 2026
Недавно средний облачный провайдер столкнулся с знакомой проблемой: их традиционные 25GbE NIC не могли идти в ногу с взрывным ростом объемов хранения NVMe-oF и распределенных нагрузок обучения ИИ.Использование процессора часто превышает 70% на узлах хранения из-за традиционных накладных TCP/IPВ то время как задержка задержки в часы пик влияет на производительность приложения.NVIDIA Mellanox MCX623106AN-CDATпреобразовали свою инфраструктуру через RDMA и RoCE.
Кластер хранения провайдера состоял из 50 узлов Ceph, каждый из которых обрабатывал как клиентский трафик ввода/вывода, так и внутренний трафик репликации.высокие прерывания процессора от сетевой обработкиВ предыдущих адаптерах не было аппаратных загрузок для RoCE, что заставляло каждый пакет проходить через стек ядра.После оценкиСпецификации MCX623106AN-CDATиФайл данных MCX623106AN-CDAT, команда выбралаMCX623106AN-CDAT ConnectX адаптер PCIe сетевая картадля пилотного размещения.
Новая архитектура заменила устаревшие адаптерыNVIDIA Mellanox MCX623106AN-CDATв восьми узлов хранения и четырех вычислительных узлов.Карта адаптера Ethernet MCX623106AN-CDATимеет двойной порт 100 Гбит/с, PCIe 4.0/5.0Ключевые этапы развертывания включали:
- Включение DCQCN (Квантизированное уведомление о перегрузке центра обработки данных) для управления перегрузкой RoCE
- Разделение доменов PFC (Priority Flow Control) для изоляции трафика хранения и обучения ИИ
- Обновление ткани на топологию беспотери Ethernet spine-leaf (25 ms buffer threshold)
- Развертывание NVMe-oF с RDMA для доступа к блочному хранилищу
Мотор ASAP2 адаптера обрабатывал более 90 миллионов пакетов в секунду на узлах хранения, полностью обходя хост-CPU для перемещения данных.MCX623106AN-CDAT Ethernet решение для карты адаптераКроме того, он позволил встроенное шифрование без штрафов за производительность, что является требованием для арендаторов финансовых услуг поставщика.
После трех месяцев использования в производстве поставщик задокументировал значительное улучшение:
| Метрический | Legacy 25GbE (TCP) | MCX623106AN-CDAT(RoCE) | Улучшение |
|---|---|---|---|
| Средняя задержка (4KB случайного чтения) | 42 мс | 8 μs | -81% |
| Использование процессора (узло хранилища) | 71% | 19% | - 73% |
| Максимальная пропускная способность на узел | 21 Гбит/с | 98 Гбит/с | +367% |
| Стойкость задержки (99,9 процентиля) | 218 мс | 34 μs | -84% |
ВКарта адаптера Ethernet MCX623106AN-CDATТакже полностью доказаноСовместимость MCX623106AN-CDATНикаких конфликтов драйверов или прошивки не возникло во время поэтапного развертывания.
Это развертывание подтверждает, чтоNVIDIA Mellanox MCX623106AN-CDATЭто не просто обновление пропускной способности, это кардинально меняет эффективность сервера с помощью RDMA/RoCE.адаптер уменьшил задержку хранения в 5 раз, освободив ядра процессора для нагрузки приложенийДля ИТ-менеджеров, оценивающихMCX623106AN-CDAT ценаи рентабельности инвестиций, провайдер достиг окупаемости оборудования в течение семи месяцев за счет сокращения количества серверов и снижения лицензионных сборов.
Поскольку все больше организаций используют NVMe-oF, GPU direct RDMA и микросервисы,MCX623106AN-CDAT ConnectX адаптер PCIe сетевая картаОн предлагает проверенный путь к низкой задержке, высокой пропускной способности дата-центров.MCX623106AN-CDAT для продажиВы можете связаться с авторизованными дистрибьюторами NVIDIA Mellanox.Спецификации MCX623106AN-CDATи руководства по развертыванию доступны в официальномФайл данных MCX623106AN-CDAT.