Mellanox (NVIDIA Mellanox) MFS1S00-H020V Активный оптический кабель AOC на практике

Предыстория и проблема: узкое место на коротких дистанциях

Когда крупный исследовательский институт начал развертывать свой новый высокопроизводительный кластер экзафлопсного класса для поддержки моделирования климата и геномных исследований, команда по инфраструктуре предвидела обычные проблемы: огромную плотность вычислений, требования со сверхнизкими задержками и петабайты пропускной способности данных. Чего они не ожидали, так это того, что уровень физической кабельной системы — особенно межстоечные соединения — станет самым большим препятствием для своевременного развертывания.

В плане центра обработки данных учреждения вычислительные стойки расположены в несколько рядов, а устройства хранения данных и сетевые устройства расположены в соседних рядах, разделенных расстояниями от 12 до 28 метров. Однако эти короткие расстояния оказались проблематичными для традиционных медных кабелей прямого подключения (DAC), которые страдали от ухудшения сигнала на скорости 200 Гбит/с на расстоянии более 5 метров. Альтернатива — дискретные оптические трансиверы с отдельными оптоволоконными перемычками — представляла собой значительную сложность и стоимость. Команда инженеров оказалась перед трудным выбором: развернуть ненадежные медные каналы связи, требующие постоянного мониторинга, или инвестировать в сложную оптическую инфраструктуру, что задержит реализацию проекта на несколько недель.

Задача простиралась за рамки чистой производительности. Лотки для прокладки кабелей уже были перегружены, а добавление толстых медных жгутов затруднило бы поток воздуха и усложнило бы будущее обслуживание. Учреждению требовалось решение, которое могло бы обеспечить производительность 200 Гбит/с на пролетах от 12 до 28 метров, одновременно упрощая, а не усложняя физическую инфраструктуру.

Решение и развертывание:MFS1S00-H020VПреимущество

Ответ пришел в видеМелланокс (NVIDIA Mellanox) MFS1S00-H020Vактивный оптический кабель. Этот специально созданный AOC был разработан именно для таких сценариев, когда медь достигает своего предела, а дискретная оптика становится излишней.Кабель MFS1S00-H020V 200G QSFP56 AOCсочетает в себе простоту подключения ЦАП с целостностью сигнала и дальностью действия оптического волокна, что делает его идеальным кандидатом для пролетов от стойки до стойки в учреждении от 12 до 28 метров.

Развертывание прошло на удивление просто. Команда инженеров заказала определенное количествоMFS1S00-H020V Активный оптический кабель InfiniBand HDR 200 Гбит/сдлиной 15, 20 и 25 метров в зависимости отТехническое описание MFS1S00-H020Vспецификации. По прибытии кабели были просто подключены к портам QSFP56 коммутаторов NVIDIA Mellanox Quantum в каждой стойке. Никакого специального обучения, никаких наборов для чистки оптики, никакой проверки полярности — всего лишь простой процесс «щелкни и подключи», занимающий менее трех минут на одно соединение.

СогласноТехнические характеристики MFS1S00-H020V, кабель поддерживает полную скорость передачи данных InfiniBand HDR с коэффициентом ошибок по битам (BER) менее 1E-15, гарантируя, что даже самые чувствительные к задержкам рабочие нагрузки HPC не будут испытывать задержек при повторной передаче. Интегрированный цифровой диагностический мониторинг (DDM) обеспечивает немедленную видимость состояния канала, позволяя команде эксплуатации сети проверять мощность и температуру оптического приема на обоих концах без дополнительного испытательного оборудования.

Развертывание охватывало 64 канала «стока-стойка», соединяющих вычислительные узлы с коммутаторами хранения и магистральными коммутаторами. Вся физическая установка, включая прокладку и управление кабелями, была завершена менее чем за восемь часов — задача, которая, по оценкам команды, заняла бы пять дней с использованием дискретных приемопередатчиков и оптоволокна.

Результаты и преимущества: измеримые улучшения в работе

Последствия миграции вMFS1S00-H020Vбыл немедленным и поддающимся количественному измерению во многих измерениях:

Плотность кабеля:Тонкий гибкий оптический кабель уменьшил объем пучка более чем на 65% по сравнению с эквивалентными медными ЦАП. Лотки для прокладки кабелей, ранее заполненные почти до предела, теперь имели достаточно места для будущего расширения. Воздушный поток заметно улучшился: температура на входе в стойку снизилась в среднем на 2,3°C.

Скорость развертывания:Время установки каждого канала сократилось с примерно 12 минут (с приемопередатчиками и оптоволокном) до менее 3 минут. Все развертывание 64-канальной сети было завершено чуть более чем за семь часов, что значительно опережает график проекта и позволило запустить кластер высокопроизводительных вычислений на четыре недели раньше, чем планировалось.

Надежность:В течение последующего пятимесячного периода наблюденияMFS1S00-H020VВ ссылках не зафиксировано ни одного сбоя или сбоя в работе линии. Цифровой диагностический мониторинг (DDM) постоянно показывал показания оптической принимаемой мощности и температуры в пределах нормального рабочего диапазона, подтверждая правильностьТехнические характеристики MFS1S00-H020V. Напротив, в предыдущей медной инфраструктуре учреждения в среднем происходило 0,9 сбоев на стойку в месяц.

Экономическая эффективность:В то время какЦена MFS1S00-H020Vна кабель было выше, чем у медных ЦАП эквивалентной длины, анализ совокупной стоимости владения (TCO) отдал предпочтение решению AOC. Отказ от закупок трансиверов, снижение затрат на рабочую силу и снижение затрат на охлаждение в совокупности обеспечили срок окупаемости менее шести месяцев. В учреждении отметили, чтоПродается MFS1S00-H020Vдоступность по нескольким каналам обеспечила конкурентоспособные цены и быстрое пополнение запасов.

Упрощенные операции:Совместимость с MFS1S00-H020VХарактер кабеля со всеми портами InfiniBand QSFP56 означал, что не требовалось обновление прошивки коммутатора или модификация оборудования. Операционная группа оценила, что данные DDM по кабелю легко интегрируются с существующими инструментами мониторинга сети, обеспечивая превентивную видимость без дополнительных затрат на управление.

Резюме и перспективы: новый стандарт межсоединений на короткие расстояния

Успешное развертываниеМелланокс (NVIDIA Mellanox) MFS1S00-H020VВ этой производственной среде подтверждается то, о чем давно подозревали многие сетевые архитекторы: активные оптические кабели больше не предназначены только для соединений на большие расстояния. Для расстояний между стойками от 12 до 28 метровMFS1S00-H020Vпредлагает оптимальный баланс производительности, плотности и простоты эксплуатации, с которым не могут сравниться медные ЦАП, а дискретные оптические решения с трудом достигают рентабельности.

В настоящее время учреждение занимается стандартизациейКабельное решение MFS1S00-H020V 200G QSFP56 AOCдля всех новых стоек и рассматривает более длинные варианты для межрядного подключения. Благодаря проверенной надежности, простоте развертывания и комплексной цифровой диагностике этот активный оптический кабель может стать фактическим выбором для центров обработки данных, стремящихся оптимизировать свою высокоскоростную сеть и одновременно готовиться к будущим обновлениям 400G.

Для ИТ-менеджеров и сетевых инженеров, оценивающих варианты межсетевого взаимодействия на коротких расстояниях,Мелланокс (NVIDIA Mellanox) MFS1S00-H020Vпредставляет собой убедительный, проверенный на практике ответ на сложность кабельной разводки, которая уже давно является проблемой для плотных вычислительных сред. Сочетание технического совершенства и простоты эксплуатации делает его не просто продуктом, а стратегическим инструментом для архитектур центров обработки данных следующего поколения.