NVIDIA Mellanox MCX631432AN-ADAB Техническое решение: RDMA/RoCE низкозадержной транспорт и повышение пропускной способности сервера

Эта техническая книга предназначена для архитекторов сетей, инженеров допроса и лидеров операций.NVIDIA Mellanox MCX631432AN-ADABсерверный адаптер позволяет использовать RDMA/RoCE для транспортировки с низкой задержкой и значительно улучшает пропускную способность сервера в современных средах центров обработки данных.

Обычная сеть TCP/IP требует значительных затрат на процессор из-за обработки протокола, копирования данных и обработки прерываний.Поскольку плотность серверов увеличивается и такие приложения, как распределенное хранилище (Ceph, vSAN), базы данных в памяти (Redis, Aerospike) и системы обучения ИИ требуют однозначной микросекундной задержки, традиционные сетевые стеки становятся непреодолимыми узкими местами.Ключевые требования:: задержка доступа к хранилищу менее 300 мкм, использование процессора менее 10% для сетевой обработки, пропускная способность 25 Гбит на порт и плавная интеграция с существующей коммутационной инфраструктурой, способной к RoCE.

Предлагаемая архитектура использует неблокирующую топологию позвоночника с поддержкой RoCE v2. Каждый вычислительный или хранилищный узел оснащен迈络思 ((NVIDIA Mellanox) MCX631432AN-ADAB)адаптер, подключающийся к переключателям листья через оптику 25GbE SFP28.Устройство управления использует PFC (Priority Flow Control) только в очередях с приоритетом потери, в то время как RDMA-схема данных использует RoCE v2 с IP-маршрутизацией для пересечения границ уровня-3.

ВКарта адаптера Ethernet MCX631432AN-ADABЭто является критической конечной точкой для RDMA-выгрузки.MCX631432AN-ADAB ConnectX-6 Lx с двумя портами 25GbE SFP28Силикон интегрирует аппаратное RoCE, соответствие тегов и сборку пакетов вне порядка. По сравнению с программным обеспечением iWARP или ядром TCP, адаптер снижает задержку более чем на 70%.Для архитекторов, ссылаясь наФайл данных MCX631432AN-ADAB, ключевые разгрузки включают:

• Отгрузка оборудования RoCE v2:Никаких копий данных, задержка от порта к порту до 600 нс.
• Управление FlexFlow:Программируемый пакетовый анализатор для гранулированного распределения потока.
• Встроенные криптомоторы:IPsec/TLS на скорости линии без участия процессора.
• Телеметрия и маркировка ECN:Видимость перегрузки в режиме реального времени с помощью счетчиков SPIFFY.

При оценкеСпецификации MCX631432AN-ADAB, обратите внимание, что карта поддерживает как 25GbE, так и 10GbE скорости, позволяя поэтапную миграцию.Совместимость MCX631432AN-ADABЭкосистема включает всех основных поставщиков серверов, упрощая квалификацию.

Типичная двухуровневая топология для кластера из 500 узлов: каждый рак содержит 20 серверов, каждый из которых оборудован однимNVIDIA Mellanox MCX631432AN-ADABЛистные коммутаторы подключаются к серверам через кабели 25GbE SFP28 DAC (до 5 м) или оптику AOC на большие расстояния.Спина-слой использует 100GbE восходящие связи для поддержания 4Для трафика хранения выделите один порт на адаптер для трафика Ceph с RoCE, зарезервировав второй порт для вычислительных нагрузок.Для масштабирования за пределы 2000 узлов требуется трехуровневый дизайн супер-ребер, с BGP-EVPN для распространения маршрутов RoCE.MCX631432AN-ADAB Ethernet решения для адаптерных картРуководство по детальным матрицам кабеля и бюджетированию энергии.

После развертывания, операционные команды должны включить NVIDIAmlx5ctlиЭфтоол.для статистики портов в режиме реального времени. Ключевые показатели для мониторинга: перерывы передачи RoCEv2 (указывающие на бури PFC), соотношения пакетов с маркировкой ECN и тепловые показания адаптера. Для устранения неполадок с высокой задержкой,подтвердить, чтоПараметры DCQCN(альфа, бета и коэффициент снижения скорости) выровняются с профилями буфера переключателя.Файл данных MCX631432AN-ADABдля интерпретации передовых счетчиков, таких как "out_of_seq" и "retransmissions"./sys/class/infiniband/mlx5_*/ports/*/counters/Для планирования затрат команды закупок могут получитьMCX631432AN-ADAB ценаОценки и проверкаMCX631432AN-ADAB для продажиОбъемные цены доступны для заказов более 100 единиц.

ВMCX631432AN-ADABпредоставляет убедительное предложение ценности: задержка хранения менее 300 мкм, менее 5% накладных затрат ЦП для трафика линейной скорости 25 ГбЭ и полные выгрузки RoCE v2 без изменений приложения.Заменив старые TCP стеки на RDMA транспорт, организации могут восстановить до 30% базовой мощности для критически важных для бизнеса рабочих нагрузок.Архитектура ConnectX-6 Lx предлагает превосходные программируемые трубопроводы и глубину телеметрииЭто техническое решение было проверено в производственных средах, охватывающих облачное хранилище, моделирование HPC и аналитику в реальном времени.NVIDIA Mellanox MCX631432AN-ADABпредставляет собой будущую, экономически эффективную основу для сетей серверов с низкой задержкой и высокой пропускной способностью.