NVIDIA Mellanox MMA2P00-AS Техническое решение оптического приемопередатчика для центра обработки данных

Техническое решение оптического трансивера NVIDIA Mellanox MMA2P00-AS для центров обработки данных | Балансировка пропускной способности и расстояния между стойками и между объектами

1. Предыстория проекта и анализ требований

Поскольку 25G Ethernet укрепляет свои позиции в качестве скорости уровня доступа по умолчанию для корпоративных и гипермасштабируемых центров обработки данных, сетевые архитекторы сталкиваются с постоянной проблемой проектирования физического уровня: как обеспечить подключение 25G на разных расстояниях — от соседних стоек в одном ряду (5–15 метров) до межпроходных каналов (30–60 метров) и даже соединений между зданиями кампуса (до 100 метров) — без увеличения количества типов трансиверов, увеличения стоимости инвентаря или нарушение целостности сигнала. Традиционный подход к выбору отдельных оптических модулей для каждого уровня расстояния (например, SR для ближнего радиуса действия, LR для дальнего радиуса действия) усложняет эксплуатацию и увеличивает риск неправильного обеспечения, когда модуль ближнего радиуса действия случайно развертывается на более длинном канале, что приводит к непредсказуемому коэффициенту битовых ошибок (BER).

Эта проблема усугубляется тремя параллельными отраслевыми тенденциями. Во-первых, широкое внедрение форм-факторов 25G SFP28 как в коммутаторах, так и в серверных сетевых картах привело к созданию большой установленной базы, но не все трансиверы SFP28 обеспечивают стабильную производительность по многомодовому оптоволоконному кабелю (MMF). Во-вторых, требования к устойчивому развитию способствуют снижению энергопотребления на каждый порт, поскольку коммутаторы высокой плотности с 48 или 64 портами могут потреблять значительную мощность, если трансиверы не оптимизированы. В-третьих, оперативным группам необходимы единые диагностические возможности для всех оптических каналов, чтобы упростить мониторинг и сократить среднее время ремонта (MTTR). Требуется структурированное техническое решение, стандартизирующее одиночный, хорошо охарактеризованный приемопередатчик 25G SR, предоставляющее при этом четкие рекомендации по дистанционному планированию, проверке бюджета канала и упреждающему управлению состоянием здоровья.

2. Общий проект архитектуры сети/системы.

Предлагаемая архитектура использует многоуровневую топологию SFP28 с портами 25G SFP28, служащими уровнем доступа для всех вычислительных узлов и узлов хранения. Каждый листовой коммутатор ToR (Top-of-Rack), обычно оснащенный 48 портами SFP28, подключается к своим серверам через каналы 25G, а несколько восходящих каналов 100G или 400G соединяют конечный уровень с уровнем позвоночника для трафика между модулями и соединениями центров обработки данных (DCI). Ключевым архитектурным принципом является поддержание единообразного SKU оптического трансивера на всех каналах доступа 25G, независимо от расстояния между коммутатором и конечной точкой, при условии, что это расстояние остается в пределах досягаемости выбранного модуля.

Для этой архитектурыNVIDIA Мелланокс MMA2P00-ASвыбран в качестве единственного оптического трансивера 25G для всех каналов доступа на расстояние до 100 метров. ЭтотMMA2P00-AS 25GBASE-SR ММФ 850 нмТрансивер работает по дуплексному многомодовому оптоволоконному кабелю (OM3 или OM4) с дальностью действия 70 метров на OM3 и 100 метров на OM4, охватывая подавляющее большинство каналов внутри центра обработки данных — от патч-кордов внутри стойки до структурированных кабелей с поперечными проходами и даже коротких соединений между зданиями внутри кампуса. Использование одного SKU трансивера упрощает документацию по архитектуре, посколькуNVIDIA Мелланокс MMA2P00-ASявляетсяСовместимость с MMA2P00-ASсо всеми коммутаторами NVIDIA Spectrum, адаптерами ConnectX и DPU BlueField, а также сторонними хостами SFP28, соответствующими спецификациям SFF-8431 и SFF-8472.

Архитектура также включает в себя стандартизированную конструкцию установки по производству волокон. Все каналы доступа 25G используют OM4 MMF с дуплексными разъемами LC, заканчивающимися структурированными кабельными панелями на обоих концах. Такая конструкция гарантирует, что любой порт сервера может быть перекрестно подключен к любому порту коммутатора в пределах досягаемости 100 метров, обеспечивая максимальную гибкость для перебалансировки мощности и циклов обновления оборудования. В руководстве по проектированию упоминаетсяТехнические характеристики ММА2П00-АСдля радиуса изгиба (динамический минимум 30 мм), чистоты разъема (согласно IEC 61300-3-35) и бюджета вносимых потерь (максимум 2,5 дБ всего для всей линии связи, включая разъемы и соединения).

3. Роль и ключевые особенности NVIDIA Mellanox MMA2P00-AS в решении

В рамках этой архитектурыОптический трансивер MMA2P00-AS 25G SFP28Функционирует как стандартизированный оптический интерфейс, который соединяет электрическую область коммутатора/адаптера с волоконно-оптической инфраструктурой. Его ключевые технические характеристики имеют решающее значение для успеха стратегии использования одного SKU:

• Соответствие IEEE 802.3by 25GBASE-SR:Обеспечивает совместимость с любым стандартным портом Ethernet 25G, устраняя циклы квалификации, специфичные для конкретного поставщика.
• Передатчик VCSEL 850 нм:Обеспечивает надежную выходную оптическую мощность (от -4 до +4 дБм) с шумом низкой относительной интенсивности (RIN), поддерживая чистые глазковые диаграммы по многомодовому оптоволокну.
• Высокочувствительный PIN-приемник:Типичная чувствительность -8,5 дБм при скорости 25,78 Гбит/с, что обеспечивает запас по линии связи не менее 3,0 дБ на OM4 на расстоянии 100 метров с учетом потерь и старения разъема.
• Энергоэффективность:Типичное потребление ниже 1,5 Вт, что позволяет создавать плотные конфигурации портов без превышения теплового баланса.
• Интегрированный цифровой диагностический мониторинг (DDM):Отчеты о мощности передачи, мощности приема, температуре, напряжении и токе смещения в режиме реального времени через стандартный интерфейс I²C, что позволяет упреждающее обнаружение неисправностей.
• Широкий диапазон рабочих температур:Температура корпуса от 0°C до 70°C, что обеспечивает надежную работу в стойках с высокой плотностью размещения и повышенной температурой окружающей среды.

Эти функции подробно описаны вТехническое описание MMA2P00-AS, который включает маски глазковых диаграмм, кривые допуска джиттера и механические чертежи для интеграции в инструменты компоновки шкафа. В техническом описании также представлены подробные таблицы бюджета канала, которые используются на этапе архитектурного планирования для проверки того, что общие вносимые потери каждого канала (включая затухание в волокне, потери в разъемах и потери на сращивании) остаются в пределах оптического бюджета модуля.

4. Рекомендации по развертыванию и масштабированию (с типичным описанием топологии)

Для первоначального развертывания мы рекомендуем структурированный подход к зонированию, который сопоставляет уровни расстояния со стандартизированными типами кабелей и обеспечивает согласованный запас каналов для всех соединений. Для листового коммутатора с 48 портами, обслуживающего 48 серверов в шести шкафах (по 8 серверов в каждом шкафу), используется следующая типичная топология с расстоянием между шкафами от 5 до 25 метров:

• Зона А (внутристойки, 2–5 метров):Прямое подключение патч-кордов OM4 от листового коммутатора (в том же шкафу) к серверам. Запас связи превышает 6 дБ, что обеспечивает надежную работу даже при умеренном ухудшении качества разъема.
• Зона Б (Смежные шкафы, 8–15 метров):Структурированная кабельная система через оптоволоконные лотки с промежуточными патч-панелями. Общее количество разъемов: 2 сопряженные пары на канал. Запас канала: 4–5 дБ, что вполне соответствует минимальному значению модуля в 3,0 дБ.
• Зона С (Поперечная/межрядная, 20–50 метров):Предварительно заделанные магистрали OM4 с полированными на заводе разъемами, проложенные под фальшполом. Запас линии связи: 3,0–4,0 дБ, все еще комфортен, даже с учетом старения до 0,5 дБ за 5 лет.
• Зона D (кампус между зданиями, 70–100 метров):Используется только для соединений с коротким кампусом, где существует инфраструктура OM4. Запас линии связи на расстоянии 100 метров составляет примерно 3,0 дБ, что требует тщательной очистки разъема и соблюдения радиуса изгиба, указанного вТехнические характеристики ММА2П00-АС.

Масштабирование за пределы одного модуля соответствует тем же принципам зонирования с добавлением промежуточных коммутаторов агрегации, которые завершают каналы доступа 25G от нескольких модулей. Потому чтоРешение для оптического приемопередатчика MMA2P00-AS 25G SFP28использует один SKU, расширение не требует прогнозирования типов трансиверов на расстоянии — все каналы предоставляются одинаково. Это упрощает логистику и позволяет оперативной группе поддерживать небольшой резерв запасных трансиверов (обычно 5% от развернутых устройств) для быстрой замены во время технического обслуживания.

Для планирования расстояния в следующей таблице приведены рекомендации по максимальному радиусу действия в зависимости от типа волокна и бюджета канала:

При развертывании на расстояниях, приближающихся к максимальному радиусу действия, мы советуем выполнить измерение оптической мощности во время ввода в эксплуатацию с использованием источника света и измерителя мощности, сравнивая измеренные потери с бюджетом, рассчитанным поТехническое описание MMA2P00-AS. Этот этап проверки гарантирует, что любые дефекты или загрязнения кабеля будут обнаружены до того, как линия будет введена в эксплуатацию.

5. Эксплуатация и обслуживание: мониторинг, устранение неполадок и оптимизация.

Жизненный цикл эксплуатации оптической инфраструктуры на базе MMA2P00-AS требует систематического подхода к мониторингу и устранению неисправностей с использованием возможностей DDM модуля. Мы рекомендуем интегрировать интерфейс управления I²C в центральную систему управления сетью (NMS) с помощью стандартного MIB SFF-8472 или расширений, зависящих от поставщика. Ключевые пороговые значения для настройки упреждающих оповещений включают в себя:

• Снижение мощности передачи:Предупреждайте, если выходная мощность упадет более чем на 2,0 дБ от номинальной, что указывает на потенциальное старение лазера или загрязнение разъема на передающей стороне.
• Запас мощности приема:Предупреждение, если принимаемая мощность приближается к -8,0 дБм (с чувствительностью -8,5 дБм), что указывает на чрезмерную потерю связи или повреждение кабеля.
• Температурные отклонения:Предупреждайте, если температура корпуса превышает 65°C, что указывает на затруднение потока воздуха, отказ вентилятора или повышение температуры окружающей среды.
• Дрейф тока смещения:Мониторинг изменений тока смещения лазера с течением времени; устойчивое увеличение сверх 30% от номинального может указывать на деградацию лазера.

В случае ухудшения качества или сбоя канала следует следовать структурированному протоколу устранения неполадок:

1. Проверьте показания DDM, чтобы исключить аномалии оптической мощности; сравнить значения Tx и Rx с ожидаемыми диапазонами отТехнические характеристики ММА2П00-АС.
2. Осмотрите разъемы QSFP/SFP28 на обоих концах с помощью торцевого микроскопа; очистите, если обнаружено загрязнение, в соответствии со стандартами IEC 61300-3-35.
3. Проверьте соединение с заведомо исправным трансивером MMA2P00-AS, чтобы убедиться, что неисправность связана с модулем или оптоволоконной системой.
4. Если проблема не устранена, выполните проверку оптическим рефлектометром во временной области (OTDR), чтобы определить наличие разрывов волокна, чрезмерных изгибов или сбоев соединения.

Возможности оптимизации включают периодические проверки прокладки кабелей, чтобы гарантировать соблюдение минимального радиуса изгиба и проверять, что пучки кабелей не сжимаются и не подвергаются чрезмерному натяжению. Кроме того, посколькуЦена ММА2П00-АСконкурирует с другими сертифицированными модулями 25G SR, мы рекомендуем поддерживать небольшой запас запасных трансиверов (приблизительно 5% от общего количества развернутых модулей), чтобы обеспечить быструю замену и минимизировать среднее время восстановления. Для крупномасштабных развертываний рассмотрите возможность внедрения автоматизированных панелей мониторинга состояния оптических систем, которые объединяют данные DDM по всем каналам, обеспечивая возможность профилактического обслуживания и планирования мощности.

6. Резюме и оценка стоимости

NVIDIA Мелланокс MMA2P00-ASЭто техническое решение обеспечивает прагматичную, проверенную на практике методологию балансировки пропускной способности и расстояния в сетях доступа центров обработки данных 25G. Путем стандартизации одного приемопередатчика SFP28 SR, совместимого с IEEE, —Оптический трансивер MMA2P00-AS 25G SFP28— архитектура устраняет сложность управления несколькими SKU для разных уровней удаленности, сокращает запасы запасных частей и упрощает планирование развертывания. Технология VCSEL 850 нм модуля в сочетании с высокочувствительным PIN-приемником обеспечивает надежную работу по каналам OM3 и OM4 MMF на расстоянии до 100 метров, охватывая подавляющее большинство каналов внутри центра обработки данных и кампуса.

Ключевые показатели ценности сопоставимых развертываний включают в себя:

• Сокращение запасов:Один артикул трансивера заменяет два или три номера деталей для конкретного расстояния, сокращая логистические накладные расходы на 40–50%.
• Энергоэффективность:При мощности < 1,5 Вт на модуль MMA2P00-AS способствует снижению затрат на охлаждение и повышению PUE.
• Эксплуатационная надежность:Проактивный мониторинг с поддержкой DDM сокращает MTTR до 60 % при сбоях на оптическом уровне.
• Оптимизация затрат:Цена ММА2П00-АСконкурентоспособен с другими сертифицированными модулями 25G SR, а его широкая совместимость исключает дополнительные затраты на квалификацию.

Для сетевых архитекторов и технических специалистов MMA2P00-AS предлагает оптический интерфейс «установил и забыл», который обеспечивает стабильную производительность при колебаниях температуры и механических нагрузках. Решение особенно рекомендуется для новых центров обработки данных, планирующих стандартизированные сети доступа 25G, а также для существующих сред, модернизирующихся с 10G до 25G при повторном использовании существующей многомодовой оптоволоконной инфраструктуры. Поскольку Ethernet 25G продолжает набирать обороты в средах искусственного интеллекта, высокопроизводительных вычислений и корпоративных хранилищах, кабельная архитектура на базе MMA2P00-AS обеспечивает надежную масштабируемую основу, которая соответствует как текущим эксплуатационным ограничениям, так и долгосрочным планам пропускной способности.

Подробные рекомендации по интеграции, данные теплового моделирования и пакеты сертификации соответствия можно найти в официальной документации продукта.