Практика применения активного оптического кабеля Mellanox (NVIDIA Mellanox) MFS1S00-H010V

Практика применения активного оптического кабеля Mellanox (NVIDIA Mellanox) MFS1S00-H010V | Высокоскоростное межстоечное соединение на короткие расстояния и упрощение кабельной инфраструктуры

Предпосылки и проблемы: Расширение дальности без увеличения сложности

Ведущая компания, предоставляющая финансовые услуги, строила новый кластер для исследований в области ИИ для поддержки обнаружения мошенничества в реальном времени и обучения моделей алгоритмического трейдинга. Кластер состоял из 64 стоек, расположенных в трех смежных рядах, с общим расстоянием по полу примерно 75 метров между самой дальней вычислительной стойкой и основными коммутаторами ядра (spine). Проект сети предусматривал повсеместное использование InfiniBand HDR 200G, при этом каждый вычислительный узел требовал резервных восходящих каналов как к локальному коммутатору уровня доступа (leaf), так и к центральному коммутатору ядра (spine) для обеспечения высокой доступности. Проблема заключалась в том, что стандартные кабели AOC 200G (с дальностью действия 50 метров) не обеспечивали необходимой максимальной длины, а альтернатива — использование дискретных трансиверов QSFP56 с одномодовым волокном и оптикой дальнего действия — привела бы к значительному увеличению затрат, энергопотребления и накладных расходов на управление. Команде требовалось решение, которое могло бы преодолеть расстояние в 75 метров, сохраняя при этом простоту, надежность и возможность подключения по принципу «подключи и работай», присущие активным оптическим кабелям.

Решение и развертывание: AOC MFS1S00-H010V с увеличенной дальностью действия

После оценки нескольких вариантов компания выбрала MFS1S00-H010V от Mellanox (NVIDIA Mellanox) — кабель AOC MFS1S00-H010V 200G QSFP56, разработанный для увеличенной дальности действия до 100 метров. Являясь активным оптическим кабелем InfiniBand HDR 200 Гбит/с MFS1S00-H010V, он обеспечивал необходимый запас по дальности (100 метров против требуемых 75 метров), сохраняя при этом конструкцию из одного компонента, заводскую оконцовку, которая исключает необходимость очистки на месте и управления полярностью.

Развертывание было выполнено в три этапа. На этапе 1 команда использовала NVIDIA Mellanox MFS1S00-H010V для подключения всех коммутаторов ядра (spine) к коммутаторам уровня доступа (leaf) в двух самых дальних рядах, подтвердив, что список совместимых устройств MFS1S00-H010V охватывает их существующие коммутаторы Quantum-2. Этап 2 расширил кабельную инфраструктуру на все соединения вычислительных узлов с коммутаторами уровня доступа (leaf), при этом команда ссылалась на техническое описание MFS1S00-H010V, чтобы обеспечить правильную прокладку кабелей и соблюдение радиуса изгиба. Этап 3 был посвящен резервным каналам, создавая полностью отказоустойчивую сеть, где каждый вычислительный узел имел два пути к ядру.

Особо следует отметить прокладку кабелей — дальность действия в 100 метров позволила команде выбрать более длинные, но более аккуратные пути прокладки кабелей через верхние лотки, избегая резких изгибов и точек скопления. Гибкая оболочка MFS1S00-H010V и минимальный радиус изгиба 30 мм сделали это возможным без ущерба для производительности.

Результаты и преимущества: Простота в масштабе

Результаты превзошли ожидания. Технические характеристики MFS1S00-H010V, включая коэффициент ошибок по битам ниже 1e-15 и типичное энергопотребление 1,8 Вт на конец, были подтверждены в производственной среде, при этом сеть достигла полной производительности на скорости линии 200G во всех 64 стойках. Операционная команда сообщила о сокращении времени активации канала на 75% по сравнению с альтернативным подходом, в основном за счет исключения этапов очистки трансиверов и проверки полярности. Использование кабельных лотков сократилось с предполагаемых 85% (с удлинителями и дополнительными патч-кордами) до всего 38%, что значительно улучшило воздушный поток и эффективность охлаждения.

С точки зрения общих затрат, компания обнаружила, что, хотя цена MFS1S00-H010V за единицу была немного выше, чем у стандартных AOC 50 м, общая стоимость решения — включая исключение удлинителей, сокращение трудозатрат на установку и меньшее количество запасных частей — привела к снижению общей стоимости владения (TCO) на 20% по сравнению с подходом на основе удлинителей. MFS1S00-H010V для продажи через партнерскую сеть NVIDIA также обеспечил быструю доставку, идеально соответствуя агрессивному графику развертывания компании.

Для операционной команды решение с AOC увеличенной дальности действия оказалось особенно ценным во время последующего обслуживания и модернизации. Возможность перепрокладки кабелей без ограничений, связанных с расположением удлинителей, упростила управление кабелями и снизила риск случайных отключений во время других работ по техническому обслуживанию.

Резюме и перспективы: Новый эталон для HDR-сетей с увеличенной дальностью действия

Данное исследование демонстрирует, что MFS1S00-H010V эффективно решает проблемы ограничения дальности действия стандартных AOC 200G, сохраняя при этом эксплуатационные преимущества полностью интегрированного кабельного решения. Обеспечивая дальность действия 100 метров в одном узле с заводской оконцовкой, он позволяет создавать более гибкие конфигурации центров обработки данных, снижает потребность в активных удлинителях или повторителях и упрощает как развертывание, так и текущее обслуживание. Для сетевых архитекторов и ИТ-менеджеров, проектирующих крупномасштабные HDR-сети 200G, NVIDIA Mellanox MFS1S00-H010V предлагает проверенное, экономически эффективное решение, которое расширяет возможности физического проектирования без увеличения сложности. Подробная техническая документация, включая техническое описание MFS1S00-H010V и проверенные руководства по совместимости, доступна через официальные каналы. Компания теперь планирует использовать ту же стратегию AOC с увеличенной дальностью действия для своего предстоящего расширения центра обработки данных в новом географическом месте.