Совместимость QSFP28: MSA, EEPROM, FEC и поддержка

На бумаге выбор трансивера QSFP28 выглядит как контрольный список: сопоставьте скорость, длину волны, разъем, радиус действия и тип волокна, а затем вставьте модуль в порт 100G. В лаборатории этого часто бывает достаточно. В производственной ткани этого нет.

Модуль QSFP28 может быть полностью совместим с MSA-, иметь правильный оптический охват, использовать правильный разъем и при этом быть отклонен коммутатором в тот момент, когда вы его вставите. Другой модуль обеспечивает чистое соединение, но не сообщает об отсутствии оптической мощности, выдает периодические сигналы тревоги, накапливает ошибки FEC или незаметно меняет поведение после обновления прошивки. Ни одна из этих ошибок не проявляется при сравнении с техническими данными.

В этом руководстве объясняется, как на самом деле работает совместимость 100G QSFP28, что нужно проверить перед покупкой и как снизить риск развертывания в средах Cisco, Arista, Juniper, Dell, NVIDIA/Mellanox и в средах «белого»-box/SONiC.

Что определяет совместимость QSFP28

Совместимость QSFP28 не является единственным условием "да-или-нет". Модуль работает в вашей сети только тогда, когда все уровни пройдены:форм-факторподходит для клетки QSFP28,Кодирование EEPROMсоответствует тому, что ожидает коммутатор,переключить прошивкураспознает и активирует модуль,Режим FEC и конфигурация коммутационного узласогласен с обеих сторон,Данные DOM/DDMдоступен для чтения вашими инструментами мониторинга, иполитика поддержки поставщиковпозволяет использовать модуль в вашем рабочем процессе. Пропустите любой из них, и модуль, который «соответствует спецификации», все равно может выйти из строя в полевых условиях. Остальная часть этого руководства рассматривает каждый уровень и показывает, как его протестировать.

Что на самом деле означает совместимость QSFP28

Это помогает рассматривать совместимость как четыре сложенных слоя. Модуль может очистить первый и по-прежнему вывести из строя один из остальных, и именно поэтому один только статус «MSA-совместимый» мало что говорит о рабочем поведении.

• Соответствие MSA- Модуль соответствует общему форм-фактору, электрическим требованиям и интерфейсу управления-.
• Совместимость переключателей- хост-устройство распознает, включает и контролирует модуль.
• Совместимость ссылок- оба конца согласовывают стабильное соединение 100G с соответствующими настройками скорости, FEC и полосы движения.
• Операционная совместимость- модуль ведет себя предсказуемо с вашей прошивкой, стеком мониторинга, процессом поддержки и запасным-планом инвентаризации.

Физическая подготовка и соответствие MSA

На самом нижнем уровне модуль должен механически и электрически соединяться с клеткой QSFP28 и использовать ожидаемый низкоскоростной интерфейс управления. Это то, что охватывает соответствие MSA. Форм-фактор QSFP28 определяется SFF/SNIA.Спецификация SFF-8665, который стандартизирует механический корпус, защелку, хост-разъем и интерфейс управления, поэтому модули и отсеки от разных производителей могут взаимодействовать.

Что дает соответствие требованиям MSAнетгарантия заключается в том, что каждый поставщик коммутаторов полностью примет этот модуль. Соответствие механических свойств и интерфейса позволяет вставить модуль в порт; он не решает, будет ли операционная система рассматривать его как первоклассную, полностью контролируемую оптику. QSFP28 имеет ту же механическую основу, что и более поздние варианты QSFP, такие как QSFP-DD, поэтому установка клетки сама по себе является слабым сигналом поддержки - см. этоТехнический обзор QSFP-DDо том, как связаны форм-факторы.

Распознавание хоста и кодирование EEPROM

Каждый модуль QSFP28 содержит идентификационные и диагностические данные в небольшом EEPROM, который коммутатор считывает при вставке: имя поставщика, номер детали, серийный номер, класс мощности, поддерживаемые возможности, длину волны, радиус действия, поля DOM/DDM и контрольные суммы. Многие коммутаторы используют эти данные, чтобы решить, как обращаться с оптикой.

Оптически совершенный модуль все еще может выглядеть какнеподдерживаемый, неизвестный, или контролируется только частично, если его профиль EEPROM не соответствует тому, что ищет коммутатор. Вот почему сторонние-поставщики продают Cisco-совместимые, Arista-совместимые, Juniper-совместимые и Dell-совместимые версии одного и того же типа оптического типа: оптический механизм может быть идентичным, но кодировка EEPROM написана так, чтобы соответствовать определенному семейству платформ. На практике кодирование поставщика является единственной наиболее распространенной причиной, по которой правильный в остальном модуль QSFP28 принимается или отклоняется.

Совместимость каналов, FEC и мониторинг

Признание – это не финиш. После того, как коммутатор примет модуль, связь все равно должна появиться и оставаться активной. Это зависит от конфигурации скорости, режима FEC, режима прорыва, типа волокна, полярности, расстояния, уровней оптической мощности, а также от того, использует ли противоположный конец соответствующие настройки. В частности, прямое исправление ошибок регулируется соответствующимиСтандарты Ethernet IEEE 802.3, а разные типы оптических устройств 100G ожидают разного поведения FEC -, к этому мы вернемся ниже.

По этой причине проверка соединения-сам по себе не является проверкой совместимости. Настоящая приемочная проверка проверяет обнаружение запасов, показания DOM/DDM, стабильность трафика и счетчики ошибок вместе, а не только то, горит ли линия интерфейса зеленым цветом.

Оптические типы 100G QSFP28 и их различия

«QSFP28» описывает форм-фактор, а не оптику. Внутренний оптический тип 100G управляет разъемом, волокном, структурой полос, ожиданиями FEC и поведением прорыва - и, следовательно, значительной частью истории совместимости. Считать SR4 и DR1 взаимозаменяемыми, поскольку оба являются «100G QSFP28», является частой ошибкой.

Из этой таблицы следуют два практических вывода. Во-первых,Семейство 4x25G (SR4, PSM4, CWDM4, LR4)является зрелым и широко поддерживается, но только параллельные типы (SR4, PSM4) являются реальными кандидатами на прорыв 4x25G, а прорыв по-прежнему зависит от платформы. Многомодовый охват SR4 зависит от класса кабеля, поэтому убедитесь, что ваша установка соответствует требованиямПределы расстояний OM1–OM5; для одномодовых-типов также имеет значение класс волокна, о котором рассказывается в этом документе.Сравнение OS1 и OS2. CWDM4 и LR4 объединяют четыре длины волны в одну дуплексную пару. Принцип описан в этом руководстве.WDM-мультиплексирование.

Во-вторых,одно-семейство лямбда (DR1, FR1, LR1)помещает весь 100G на одну длину волны и более чувствителен к настройкам FEC и поддержке встроенного ПО, чем старые конструкции 4x25G. Платформе, на которой успешно работает LR4, может потребоваться более новая версия программного обеспечения или другое значение по умолчанию FEC, прежде чем она будет активировать ссылку FR1 или LR1. Если вы развертываете одинарную-лямбда-оптику, рассматривайте поддержку прошивки как жесткое требование, а не второстепенную мысль.

Почему модуль QSFP28 выходит из строя в «совместимом» порту

Когда канал 100G работает неправильно, в первую очередь виноват трансивер. Чаще настоящей причиной является несоответствие модуля, прошивки коммутатора, конфигурации порта или кабельной разводки. Четыре режима отказа охватывают подавляющее большинство случаев.

Коммутатор отклоняет идентификатор модуля

Некоторые платформы проверяют подлинность оптики перед включением порта. Если данные EEPROM не соответствуют ожидаемому профилю, симптомы очевидны:неподдерживаемый трансиверзапись в журнале, интерфейс зависвниз, или порт, введённый вошибка-отключенасостояние. Правильное кодирование поставщика устраняет большую часть этого, но само по себе кодирование не позволяет пропустить тестирование точной модели коммутатора и версии программного обеспечения, поскольку таблицы проверки различаются в зависимости от платформы и выпуска.

Настройки ссылки не совпадают

Модуль может быть распознан, но при этом отказаться от компоновки. Обычными виновниками являются несоответствие скорости, неправильный или несовпадающий режим FEC, неподдерживаемая конфигурация коммутационного узла, неправильный режим порта, тип трансивера, который не поддерживает конкретная линейная карта или группа портов, или несовместимый модуль на дальнем конце. Несовпадения FEC особенно распространены в одиночных каналах-лямбда DR1/FR1/LR1, где одна сторона по умолчанию использует RS-FEC, а другая нет, поэтому канал либо никогда не появляется, либо имеет увеличивающийся счетчик исправлений FEC-.

DOM/DDM неполный или неправильный

Цифровой оптический мониторинг (DOM/DDM) позволяет выявить мощность оптической передачи и приема, температуру, напряжение питания и ток смещения лазера. В производстве именно это делает деградирующую ссылку видимой до того, как она упадет. Сторонний модуль QSFP28-стороннего производителя может передавать трафик, плохо сообщая о DOM, и проблема выглядит конкретной: получение показаний мощностиN/A, значение температуры фиксируется на фиксированном значении, поля присутствуют в интерфейсе командной строки, но ваш SNMP или программа опроса телеметрии не могут их прочитать, или пороговые значения никогда не срабатывают, поскольку флаги сигналов тревоги не заполняются. Это терпимо на стенде и при наличии реального эксплуатационного пробела в контролируемой сети. Если DOM имеет значение для вашей операционной команды, он должен быть включен в приемочное тестирование, а не в список пожеланий.

Прошивка меняет поведение проверки

Прошивка коммутатора определяет, как оптика обнаруживается, анализируется и проверяется, и эта логика меняется между выпусками. Модуль, который отлично работает в одной версии, может вести себя по-разному после обновления - изменение может коснуться проверки EEPROM, анализа DOM, настроек FEC по умолчанию, поддержки секционирования или самой поддерживаемой-таблицы приемопередатчиков. Перед любым крупным обновлением встроенного ПО проверьте хотя бы один образец каждого развернутого типа QSFP28 в целевой версии, а не предполагайте непрерывность.

Совместимость QSFP28 от поставщика коммутатора

Эти примечания являются рекомендациями по планированию, а не гарантиями. Совместимость зависит от модели-, линейной-карты- и выпуска-, поэтому подтвердите точную комбинацию перед покупкой в ​​большом масштабе. Если поставщик публикует официальный инструмент совместимости, используйте его в качестве первой ссылки.

Циско

Платформы Cisco, как правило, строже относятся к оптике сторонних производителей, чем многие корпоративные коммутаторы, и Cisco прямо заявляет, что не поддерживает оптику сторонних-лиц в рамках своей политики предоставления прав. Модуль, не написанный на -Cisco-, может быть указан как неподдерживаемый или требующий обработки,-специфичной для платформы, в зависимости от модели Nexus или Catalyst, а также версии NX-OS или IOS-XE. Начни с официальногоТаблица совместимости группы модулей приемопередатчиков Cisco (TMG)чтобы подтвердить, какая оптика указана для вашего конкретного устройства.

Не покупайте модули QSFP28 с привязкой к Cisco-только по оптическому типу - 100G LR4, который работает на одной платформе Nexus, может вести себя по-другому на другой. Перед массовой закупкой подтвердите точную модель, версию NX-OS/IOS-XE, необходимое кодирование, совместимое с Cisco-, поведение DOM/DDM, поддержку прорыва и FEC, а также свою позицию по поддержке оптики сторонних-производителей. На коробке показано подробное описание интерфейса трансивера — это самый быстрый способ подтвердить распознавание и прочитать DOM. Относитесь к Cisco-совместимым модулям как к чему-то, что вы тестируете на целевом программном обеспечении, а не как к чему-то, что вы предполагаете, потому что оптические характеристики совпадают.

Ость

Коммутаторы Arista, как правило, более терпимы к использованию хорошо -созданной сторонней-оптики, чем самые строгие платформы, и во многих средах EOS правильно закодированные модули QSFP28 работают без блокировки. Это тенденция, а не свободный проход. Версия EOS, семейство коммутаторов, тип оптического кабеля, поведение DOM, класс мощности и конфигурация порта по-прежнему влияют на результат, а мощная-оптика с большим-дальностью действия, прорывные приложения и новые одиночные-лямбда-модули по-прежнему требуют тестирования. Проверьте распознавание и DOM с помощью приемопередатчика интерфейса дисплея, а также подтвердите FEC, поведение при прорыве, а также диапазон температур и мощности для деталей с большой-дальностью действия.

Можжевельник

Поведение Juniper во многом зависит от конкретной платформы, версии Junos, типа порта и идентификатора трансивера - модуль, принятый и полностью отслеживаемый на одном QFX, MX или PTX, может отсутствовать на другом. Проверьте официальноеИнструмент совместимости оборудования Juniperдля вашей целевой платформы; он также указывает, поддерживает ли данная оптика мониторинг. Обратите внимание, что JTAC не обеспечивает поддержку оптических модулей-сторонних производителей, поэтому учтите это в своем плане поддержки. На устройстве оптика show интерфейсы диагностики возвращает показания DOM. Проверьте платформу, версию Junos, профиль PID или совместимый EEPROM, поддержку DOM, поддержку коммутационного оборудования, а также поддерживаются ли новые типы DR1/FR1/LR1 на этом оборудовании.

Делл ПауэрСвитч

Платформы Dell PowerSwitch могут быть чувствительны к полям EEPROM, анализу DOM и поведению программного обеспечения, а некоторые сторонние модули-пропускают трафик, отображая предупреждения, неполные данные DOM или несоответствия инвентаря. Подтвердите версию OS10 или SONiC, кодировку, совместимую с Dell-, показания DOM/DDM, список поддерживаемых платформой-оптических устройств, требования к FEC и коммутационным решениям, а также поведение при обновлении встроенного ПО. Если коммутаторы Dell используются в производственной сети, проверьте модуль на той же сборке программного обеспечения, прежде чем размещать крупный заказ.

NVIDIA / Мелланокс

Среды NVIDIA/Mellanox относятся к числу наиболее ограничительных, особенно в системах искусственного интеллекта, высокопроизводительных вычислений, Ethernet и InfiniBand, где проверенные межсоединения являются нормой. Здесь стабильность канала зависит не только от оптической дальности, но и от целостности сигнала, поддержки прошивки, поведения FEC и проверки платформы; модуль может быть обнаружен, но по-прежнему не сможет открыть ссылку, если платформа его не принимает или настройки не поддерживаются. NVIDIA документирует свои сертифицированные межсоединения наКабели и трансиверы LinkXстраницы и отмечает, что неквалифицированные устройства-сторонних производителей могут работать, но не дают никаких гарантий производительности. Подтвердите точную модель коммутатора и адаптера, режим Ethernet или InfiniBand, версию встроенного ПО, проверенный список кабелей/модулей, требования FEC, радиус действия и тип, а также проверку поставщика на той же платформе. Для критически важных фабрик искусственного интеллекта или высокопроизводительных вычислений отдавайте предпочтение проверенной оптике или тщательно протестированным совместимым альтернативам.

SONiC и белые-переключатели

Коммутаторы SONiC и «белый ящик»- обычно более открыты, чем традиционные OEM-платформы, но «открытость» не означает «универсальность». Результаты зависят от ASIC коммутатора, драйвера платформы, сборки NOS, анализатора EEPROM, службы управления трансивером-, режима коммутации и конфигурации порта. Модуль может подключиться, но сообщать о неполных данных инвентаризации или DOM, - приемлемых в некоторых чувствительных к затратам- или лабораторных условиях, но не в производственных системах, где требуется точный мониторинг и отслеживание активов. Протестируйте точную модель коммутатора и сборку NOS, а не предполагайте, что все модули, совместимые с MSA-, ведут себя одинаково.

Модули QSFP28, кодированные поставщиком,-совместимые с MSA и программируемые

Правильный класс модуля зависит от вашей среды, устойчивости к риску и стратегии инвентаризации.

Модули QSFP28 с кодом-поставщика

Модули с кодом поставщика- содержат данные EEPROM, записанные в соответствии с конкретным поставщиком коммутатора или семейством платформ. Обычно они являются самым безопасным выбором для производства: более предсказуемое распознавание, лучшее поведение DOM/DDM и меньшее количество сложностей при поддержке. Используйте их при масштабном развертывании, если сеть критически важна для производства-, вы используете платформы Cisco/Juniper/Dell/NVIDIA, точность мониторинга имеет значение или вы хотите избежать сюрпризов, связанных с неподдерживаемыми-модулями. Компромисс- состоит в том, чтобы поддерживать отдельный инвентарь для каждого поставщика коммутатора.

Общие модули QSFP28, соответствующие требованиям MSA-

Универсальные модули MSA подходят для открытых сред, лабораторий, тестовых сетей и развертываний «белого ящика», где не требуется строгое признание поставщика. Они сокращают первоначальные затраты и упрощают стандартную инвентаризацию оптических устройств, но несут больший риск в средах с ограниченными возможностями коммутации.Когда их не следует использовать:в производственной инфраструктуре Cisco/Juniper/NVIDIA везде, где точность DOM/DDM является требованием мониторинга, на одиночных-лямбда-каналах с жесткой зависимостью FEC/прошивки или там, где в процессе поддержки вам будет предложено воспроизвести неисправности на сертифицированной оптике. Не предполагайте, что один универсальный модуль MSA может использоваться на платформах Cisco, Juniper, Dell и NVIDIA без проверки.

Программируемые модули QSFP28

Программируемые модули можно перекодировать для профилей различных поставщиков с помощью совместимого инструмента, что действительно полезно для сетей-поставщиков, служб аварийного запаса и бригад-полевого обслуживания. Они уменьшают потребность в хранении модулей с фиксированным-кодом для каждой платформы, но требуют контроля процесса: обученного персонала, точной смены маркировки после программирования и четкого этапа проверки. Основной риск заключается в том, что модуль перекодирован или маркирован для неправильного целевого переключателя.

Как выбрать правильный модуль QSFP28

Сопоставьте решение со своим сценарием, а не с самой дешевой позицией. Матрица ниже представляет собой сокращенную версию.

Как проверить совместимость QSFP28 перед развертыванием

Самый безопасный путь — провести квалификацию образцов перед оптовой закупкой. Пять шагов делают тест повторяемым.

Шаг 1 - Закажите образцы для каждого поставщика и типа.

Для каждого производителя коммутатора и типа модуля, который вы собираетесь развернуть, закажите небольшой образец. Если сеть охватывает Cisco, Arista и Juniper, претендуйте на все три; не тестируйте одну платформу и не предполагайте, что результат обобщается.

Шаг 2 - Проверка обнаружения

Вставьте модуль и убедитесь, что коммутатор правильно его идентифицирует: распознавание номера поставщика/детали,-правильная скорость, правильный тип трансивера, доступность DOM/DDM, отсутствие сигналов тревоги о неподдерживаемых модулях-и ошибок,-отключенных состояний. Если он отображается как неизвестный или неподдерживаемый, прежде чем двигаться дальше, определите, является ли причина кодировкой EEPROM, поддержкой встроенного ПО или политикой платформы.

Шаг 3 - Создайте настоящую ссылку

Подключитесь к предполагаемому устройству на дальнем-конце или обратитесь к представителю-и проверьте состояние соединения-, правильную скорость, правильный режим FEC, передачу и получение мощности в пределах диапазона, очистку счетчиков ошибок и стабильность после перезагрузки интерфейса и физической перезагрузки. Модуль, который обнаружен, но не может удержать ссылку, не-готов к работе.

Шаг 4 - Проанализируйте трафик

Пропускайте трафик в течение значимого окна - минимум несколько часов, дольше для критических фабрик - и наблюдайте за ошибками CRC, счетчиками исправлений FEC-, нестабильностью канала, сигналами тревоги о температуре и потере пакетов. В критических условиях тестируйте при реальной нагрузке и при температурах, которые фактически воспринимает оптика.

Шаг 5 - Задокументируйте утвержденную конфигурацию.

Для каждого утвержденного модуля запишите номер детали поставщика, цель кодирования EEPROM, модель коммутатора, версию встроенного ПО, тип порта, режим FEC, режим коммутации, результат теста и состояние DOM/DDM. Эта запись станет вашей внутренней матрицей совместимости и избавит следующего человека от повторного-проделывания всего упражнения.

Критерии приемки

Используйте явную шкалу «прошел/не прошел», чтобы «все выглядело хорошо» никогда не принимало решение о покупке.

Полевая заметка: где эти тесты приносят пользу

Репрезентативный пример, наблюдаемый в смешанных структурах: партия универсальных модулей 100G SR4 проходит быстрое тестирование соединения-и переходит в уровень листового-хребта. Родные порты 100G в порядке. Несколько недель спустя попытка перенастроить некоторые из этих портов для коммутации 4x25G не удалась в одной группе портов -, модули исправны, но поддержка этой линейной карты и настройки FEC по умолчанию никогда не проверялись для этого режима. Отдельно после планового обновления прошивки начинают возвращаться показания DOM на тех же модулях.N/Aпотому что новая версия по-другому анализирует их EEPROM. Ни одна из проблем не является оптическим дефектом; оба были бы обнаружены проверкой узла и проверкой DOM после-обновления, как описано выше. Цена пропуска квалификации проявляется позже в виде сбоя-окна изменений и слепой зоны мониторинга, а не при покупке.

Заключение

Совместимость QSFP28 определяется не только скоростью и радиусом действия. Платформа коммутатора, версия прошивки, кодировка EEPROM, настройки FEC, поддержка прорыва, поведение DOM/DDM и ваш план оперативной поддержки — все это находится между соответствием спецификации и стабильным каналом 100G. Оптический тип внутри модуля - 4x25G по сравнению с одиночным-лямбда - снова меняет эти требования.

Для большинства производственных сетей модули QSFP28,-кодированные поставщиком или-проверенные платформой, представляют собой выбор с наименьшим-риском; для смешанных-компаний поставщиков программируемые модули могут обеспечить управляемость запасных запасов, когда процесс перекодирования контролируется. Рабочее правило короткое: проверьте точную модель и прошивку перед покупкой, оцените образцы по явному критерию «прошел/не прошел» перед развертыванием и запишите каждую одобренную комбинацию модуля-и-платформы, чтобы следующее развертывание начиналось с фактических данных, а не с предположений.