Технический документ NVIDIA Mellanox MMAIB00-B150D: Оптический трансивер для центров обработки данных

NVIDIA Mellanox MMAIB00-B150D Техническая книга о оптическом приеме данных в центре обработки данных: балансирование пропускной способности и расстояния для внутриреактивных и межсооружений

Эта техническая книга предназначена для сетевых архитекторов, инженеров допроса и операционных менеджеров.NVIDIA Mellanox MMAIB00-B150D400G многомодный оптический приемопередатчик,подробное описание комплексной архитектуры решения, которая решает постоянную проблему балансирования высокой пропускной способности с расширенным охватом через внутриреактивные и межсооружительные связи центров обработки данныхДокумент охватывает принципы проектирования, ключевые технологии, стратегии развертывания и оперативные передовые практики, полученные из реальных крупномасштабных внедрений.

1. Анализ контекста и потребностей проекта

Современные кластеры обучения ИИ и высокопроизводительные вычислительные среды (HPC) характеризуются двумя различными моделями трафика: трафик с востока на запад в пределах одного стойки или соседних стойков,который требует сверхнизкой задержки и массивной пропускной способности; и транспорт с севера на юг или с позвоночника на сверхпозвоночник, который часто пересекает более длинные волоконные пути между зданиями или этажами.эти два случая использования требовали отдельных семейств оптических приемопередатчиков – кратковременного мультимода для первых и длительного одномода для последних – что привело к увеличению сложности запасов, более высокие затраты и эксплуатационные трения.

Ключевые требования, выявленные архитекторами сети, включают:

• Единая оптическая SKU:Один тип передатчика, который может покрывать расстояния от 2 до 150 метров по существующему мультимодовому волокну, исключая необходимость в нескольких номерах деталей.
• Энергоэффективность:Под-9 Вт на порт для поддержки высокоплотных коммутаторов 400G без превышения тепловых бюджетов.
• Целостность сигнала:Устойчивое уравнение на основе DSP для компенсации рассеяния модалов и потери ввода на старых кабелях OM3/OM4.
• Совместимость:Бесшовная совместимость с платформами NVIDIA Spectrum, Quantum и сторонними 400G.
• Прогнозируемость затрат:Конкурентоспособная экономика в порту с прозрачными моделями общей стоимости владения (TCO).

ВMMAIB00-B150Dбыл выбран в качестве единственного решения для оптических приемопередатчиков после тщательной оценки по этим критериям, с его предварительнымДополнительная информацияподтверждает поддержку 100-метрового диапазона по OM4 и 150-метрового диапазона по OM5 ≈ достаточной для более 95% связей в масштабе кампуса без использования одномодной оптики или активных кабелей.

2. Общий дизайн сетевой / системной архитектуры

Предлагаемая архитектура использует двухуровневую топологию лепесткового позвоночника для вычислительных кластеров с дополнительным слоем супер-позвоночника для взаимосвязи между зданиями.NVIDIA Mellanox MMAIB00-B150Dоптический приемопередатчик, создающий однородный оптический слой по всему кампусу центра обработки данных.

Эта унифицированная архитектура уменьшает количество оптических SKU с шести до одного, упрощает документацию кабельного завода и позволяет любому запасномуMMAIB00-B150D для продажив инвентарь, который будет развернут на любой стойке или здании без проверки совместимости.

3. Роль и основные особенности NVIDIA Mellanox MMAIB00-B150D

ВNVIDIA Mellanox MMAIB00-B150Dслужит основным строительным блоком для всего оптического слоя.

• Форм-фактор QSFP-DD:Позволяет использовать 36 портов на 1U переключатель, максимизируя плотность передней панели при сохранении адекватного воздушного потока.
• Модуляция PAM4 8x50G:Предоставляет совокупную пропускную способность 400 Гбит/с с использованием зрелых электрических интерфейсов 50G, балансируя производительность с целостностью сигнала.
• Интегрированный двигатель DSP:Обеспечивает адаптивное выравнивание и восстановление данных часов (CDR), которые активно компенсируют нарушения канала,включая хроматическую дисперсию и рефлексии соединителей, критически важные для расширения охвата устаревших мультимодных волоконных заводов.
• Дигитальное диагностическое наблюдение (DDM):Отчитывается о параметрах в режиме реального времени, таких как температура, напряжение питания, мощность TX/RX и предвзятый ток через интерфейс I2C, что позволяет проактивно контролировать состояние связи.
• Широкая совместимость:ВСовместимость MMAIB00-B150Dоптики были подтверждены против NVIDIA Spectrum-4, Quantum-2 и основных сторонних коммутаторов (Cisco, Arista, Juniper) с использованием стандартных 400G-SR8 спецификаций оптического интерфейса.

По словам чиновникаСпецификации MMAIB00-B150D, модуль работает в диапазоне температуры от 0 до 70 °C и потребляет типичные 8,5 Вт при полной нагрузке,значительно ниже порога 9 Вт, который в противном случае потребовал бы активного охлаждения или понижения температуры в плотном шасси.

4. Рекомендации по развертыванию и расширению (с типичной топологией)

Для новых развертываний в зеленых условиях рекомендуется следующая топология:

• Уровень стойки:Каждый вычислительный рак оснащен парой коммутаторов 400G ToR. Каждый сервер подключается через NIC 400G OSFP / QSFP-DD, и подключения ToR к использованию слоя листовMMAIB00-B150Dпередатчики по патч-кабелям OM5 (2 ‰ 5 м).
• Уровень ряда / зала:Листовые коммутаторы развертываются по ряду или по холлу, совокупность 32 ¢ 64 ToR подъемных ссылок.MMAIB00-B150D оптический приемопередатчик, пользуясь приравнением DSP для преодоления модальной дисперсии в устаревших волокнах.
• Уровень кампуса / здания:Переменчики позвоночника соединяются через слой сверхпозвоночника с помощью OM5 на расстоянии до 150 метров.OM4 ссылки до 100 метров полностью поддерживаются, это охватывает более 90% сценариев между зданиями без необходимости одномодных приемопередатчиков или оборудования для мультиплексирования с разделением длины волны (WDM).

Для расширения операторы могут просто добавить новые стойки и подключить их к существующим переключателям листья/позвоночника с использованием того же оптического SKU.MMAIB00-B150D решение оптического приемопередатчикаподдерживает горячее обмен, что позволяет модернизировать мощности без перебоев в обслуживании. При планировании будущей миграции 800G существующая инфраструктура МФМ остается многоразовой,поскольку двойные 400G-ссылки могут быть связаны с помощью агрегации ссылок (LAG) или протоколов балансировки нагрузки.

При оценкеЦена MMAIB00-B150Dпротив альтернативных решений, считать, что единый подход SKU сокращает запасы запасных частей на 80−90%, снижает накладные расходы на обучение,и устраняет риск использования неправильного типа оптики на заданном расстоянии. Факторы, которые значительно повышают общую стоимость владения в течение 5-летнего жизненного цикла.

5Мониторинг операций, устранение неполадок и оптимизация

Эффективное управлениеMMAIB00-B150D Mellanox оптическая сеть центра обработки данныхДля того, чтобы обеспечить безопасность и безопасность окружающей среды, необходимо сочетание активного мониторинга и систематических процедур устранения неполадок.

Контроль за лучшей практикой:

• Включает опрос DDM через SNMP или потоковую телеметрию (например, gNMI) для отслеживания тенденций оптической мощности, температуры и напряжения..
• Мониторинг коррекции ошибок вперед (FEC) корректированное количество бит - внезапное увеличение может указывать на деградацию волокон, грязные разъемы или чрезмерную потерю изгиба.
• Использовать встроенную в модуль возможность обратной связи (если она поддерживается платформой коммутатора) для проверки связи по требованию во время обслуживания.

Устранение распространенных проблем:

• Снижение ссылки или высокий BER на длинных ходах:Проверить, что тип волокна соответствует ожидаемому диапазону охватывания; OM4 ограничивается 100 м; OM5 распространяется на 150 м. Очистить все соединители LC с целью осмотра конечных сторон;Даже микроскопическое загрязнение может вызвать значительную потерю сигнала на 400G.
• Ухудшение производительности, связанное с температурой:Обеспечить адекватный воздушный поток спереди-назад и не устанавливать модуль рядом с высокомощной оптикой (например, модулями ZR) без достаточного расстояния.
• Вопросы взаимодействия:Подтвердить, что прошивка переключателя поддерживает последнее обновлениеСовместимость MMAIB00-B150DNVIDIA поддерживает сертифицированную матрицу совместимости, которая обновляется ежеквартально.

Советы по оптимизации:

• Для соединений, приближающихся к максимальной протяженности (100 м на OM4), следует рассмотреть возможность использования более высококачественных волокон OM5 во время планируемых модернизаций для восстановления маржи соединения.
• Корректировать настройки FEC (например, RS ((544,514) против RS ((272,258)) на основе рекомендаций поставщика коммутатора для сбалансирования задержки и возможности коррекции ошибок.
• Проводить периодическую сертификацию кабельных установок с использованием OTDR или оптического счетчика мощности для выявления микросгибаний или потерь сцепления до их воздействия на производственный трафик.

См. подробнуюДополнительная информациядля полной карты реестра, определения диагностических порогов и рекомендуемые условия эксплуатации.

6. Резюме и оценка стоимости

ВNVIDIA Mellanox MMAIB00-B150Dпредоставляет убедительное предложение ценности для операторов центров обработки данных, стремящихся рационализировать свою оптическую инфраструктуру, одновременно удовлетворяя пропускную способность и достигая требований современных нагрузок ИИ / HPC.Объединив коротко- и среднемагистральные связи в единую систему, высокопроизводительный QSFP-DD-передатчик, организации могут достичь:

• Простота работы:Одно SKU для всех 400G-ссылок, от внутрихранилищных патчевых кабелей до корпусов между зданиями кампуса, сокращая затраты на запасы и уменьшая человеческую ошибку.
• Защита инвестиций:Предыдущие заводы по производству волоконного волокна OM4 полностью многоразовые, в то время как OM5 обеспечивает четкий путь модернизации для будущего расширения охвата.
• МасштабируемостьОдно и то же оптическое решение поддерживает как текущие развертывания 400G, так и будущие конфигурации 800G, избегая запущенных активов.
• Доказана совместимость:Обширная проверка на ведущих платформах переключателей, обеспечивающая беспрепятственную интеграцию в окружающую среду.

Для сетевых архитекторов и ИТ-менеджеров, оценивающих общую стоимость владения,MMAIB00-B150D решение оптического приемопередатчикаВ качестве сбалансированного, готового к будущему выбора, который устраняет традиционный компромисс между пропускной способностью и расстоянием.и объемных скидок можно получить через авторизованные каналы распространения NVIDIAMMAIB00-B150D для продажинайти регионального партнера или проконсультироваться с официальнымДополнительная информациядля окончательных производственных спецификаций и сертификаций соответствия.