Вибір правильного оптичного модуля вагою 400 г

 

Питання форм-фактора, яке не помре

 

QSFP-DD або OSFP. Кожен має свої думки. Дебати на конференціях OFC стають такими гарячими, що дивують новачків у галузі.

Ось практична реальність: QSFP-DD виграв гру за обсягом. Зворотна сумісність із існуючою інфраструктурою QSFP28 виявилася непереборною для команд із закупівель, які вже вклали значні кошти в кабелі 100G і шасі комутаторів. Ви можете буквально вставити модуль QSFP28 у порт QSFP-DD, і він працює. Ця історія міграції продала багато обладнання.

Прихильники OSFP скажуть вам-правильно-, що їхній форм-фактор краще справляється з температурою. Додатковий фізичний об’єм (приблизно на 50% більше, ніж у QSFP-DD) дозволяє використовувати бюджети потужності 15-20 Вт замість жорсткішої межі 12-14 Вт, з якою борються модулі QSFP-DD. Коли ви просуваєте когерентну оптику ZR для додатків DCI для метро, ​​цей запас має величезне значення.

Але ось про що ніхто не згадує в маркетингових матеріалах: більшість корпоративних розгортань не потребують ZR. Їм потрібен DR4 для 500-метрових листів-хребта, можливо, FR4 для 2-кілометрових зв’язків--будівля. На цих рівнях потужності QSFP-DD працює нормально. Теплові переваги OSFP стають академічними.

 

Варіанти охоплення та проблема алфавітного супу

 

SR4, DR4, FR4, LR4, ER4, ZR-конвенція про найменування технічно має сенс, якщо ви її запам’ятаєте, але спостерігати, як молодший інженер намагається вперше сформулювати специфікацію матеріалів, боляче.

SR4 забезпечує вам 100 метрів у багаторежимному режимі. Використовує 850-нм VCSEL, роз’єм MPO-12, працює з волокном OM3/OM4, яке вже є у вашому фальшпідлозі. Безперечно найдешевший варіант. Це те, що ви розгортаєте в одній будівлі центру обробки даних, коли відстань між стійками-не перевищує 100 метрів.

DR4 поширюється на 500 метрів в одному-режимі за допомогою паралельної оптики-чотирьох окремих волокон на 1310 нм, кожне з яких передає 100 Гбіт/с. Досі використовується MPO-12, але тепер вам потрібна однорежимна-станція. Найкраще місце для підключення-ліття до хребта у великих приміщеннях.

FR4 і LR4 використовують мультиплексування довжини хвилі, щоб стиснути всі чотири канали в одну пару волокон. FR4 досягає 2 км, LR4 – до 10 км. Дуплексні роз'єми LC. Вони коштують дорожче, оскільки оптика CWDM4 і мультиплексування/демультиплексування додають складності.

Плутанина, яку я бачу найчастіше? Хтось вказує DR4, коли їм насправді потрібен FR4, оскільки вони неправильно підрахували волокна. Для DR4 потрібно 8 волокон (4 TX, 4 RX). Для FR4 потрібні 2 волокна (1 TX, 1 RX). Якщо ваш між-канал має лише 12-жильну магістраль і ви плануєте кілька каналів 400G, математика не працює з DR4.

А потім питання прориву.

 

Режими прориву: корисні, поки вони не стануть

 

Модуль 400G-DR4 може роз’єднатися до 4x100G-DR з’єднань. Теоретично це забезпечує гнучкість міграції-купіть інфраструктуру 400G зараз і використовуйте її в режимі 4x100G, доки потреби в трафіку не виправдають повну роботу 400G.

Маркетинговий виступ звучить чудово. Реальність стає безладнішою.

Прорив вимагає певної конфігурації волокна. Для роз’єднання DR4-to-4x100G-DR потрібно 8 волокон на стороні 400G, які розходяться в чотири дуплексні пари на стороні 100G. Це не патч-корд, який лежить у ящику для кабелів. Це спеціальна збірка, часто з роз’ємом від MPO-12 до 4xLC, і вам краще замовити правильну полярність, інакше ви проведете вечір із трасувальником волокна та багато розчарувань.

 

 

PAM4 змінив усе (не завжди на краще)

 

Оптика до 400G використовувала модуляцію NRZ. Два рівня сигналу. просто. Надійний. Лазер увімкнений або вимкнений, високий або низький. Очні діаграми виглядали чистими.

400G приніс PAM4: чотири рівні сигналу, що кодують два біти на символ. Ви отримуєте подвійну швидкість передачі даних без подвоєння символьної швидкості. Чудове рішення проблеми з фізики.

Крім того, PAM4 принципово змінив характеристики помилок оптичних каналів.

З NRZ ви мали приблизно 9,5 дБ запасу шуму між рівнями сигналу. З PAM4 це падає приблизно до 4,8 дБ. Теоретичний штраф SNR становить приблизно 10 дБ-обчислений як 20×log₁₀(1/3), якщо вам потрібна точна математика. Це не тонка різниця. Це різке зниження завадостійкості.

Ось чому пряма корекція помилок стала обов’язковою для 400G. Не обов'язково. Не «рекомендовано для великих відстаней». Обов'язковий.

Накладні витрати на FEC додають затримку-, націлену на близько 100 наносекунд у специфікаціях 802.3-і споживають додаткову пропускну здатність, що підвищує фактичну швидкість лінії до 425 Гбіт/с замість чистих 400. Що ще важливіше, це означає, що ваше з’єднання 400G завжди працює з не-нульовою попередньою-частотою бітових помилок FEC, яка отримує виправлено на фактично нульовий пост-FEC.

Pre-FEC BER приблизно 2,4×10⁻⁴ вважається прийнятним для DR4. Це було б катастрофою для зв’язку 100G. Для 400G із Reed-Solomon FEC це нормально. Швидкість втрати кадрів після-FEC все ще досягає цільового значення 10⁻¹².

Але ось що чіпляє людей: коли FEC не встигає-коли попередні-помилки FEC перевищують те, що може впоратися алгоритм виправлення-збій не є витонченим. Посилання не руйнується повільно. Він падає зі скелі. Одного разу на інформаційній панелі моніторингу все виглядає добре, а наступного моменту ви бачите помилки кадрів, які не можна виправити, і втрату пакетів.

Брудні роз’єми, які 100G канал міг би терпіти? Вони вб’ють канал 400G. Крайове волокно з дещо підвищеним затуханням? Та сама історія. Виправлення помилок маскує проблеми, поки раптом це не зникає.

 

Теплові кошмари

 

32-портовий комутатор 400G, повністю заповнений модулями FR4, генерує 320-384 Вт тепла лише від трансиверів. Це без урахування ASIC комутатора, блоків живлення, вентиляторів. Загальна потужність системи може досягати 1500-2000 Вт у шасі 1RU.

Розрахунки щільності стійки, які працювали для розгортання 100G, потребують повного перегляду.

Самі модулі мають діапазони робочих температур-зазвичай від 0 градусів до 70 градусів для комерційного класу. Звучить розумно, поки ви не зрозумієте, що «температура модуля» вимірюється на корпусі, і корпус знаходиться в будь-якому потоці повітря, який забезпечує ваш комутатор. У повністю заповненому шасі з портами зверху та знизу, зайнятими такими ж гарячими модулями, цей потік повітря не є чудовим.

Я бачив розгортання, коли модулі в центрі передньої панелі нагріваються на 8-10 градусів вище, ніж модулі по краях. Те саме навколишнє середовище, однакове транспортне навантаження, суттєво різні температурні умови залежно від фізичного положення.

Тут допомагає ребристий радіатор OSFP. Ребра збільшують площу поверхні для конвективного охолодження, а OSFP MSA визначає вимоги до повітряного потоку, яким повинні відповідати розробники комутаторів. QSFP-DD більше покладається на теплову конструкцію постачальника комутатора, якість якої значно відрізняється.

Деякі розгортання кластерів AI/ML перейшли на рідинне охолодження саме з цієї причини. Контури охолодження безпосередньо-до-чіпа або установки повного занурення повністю усувають обмеження потоку повітря. Але це фундаментальне інфраструктурне рішення, а не те, що ви вирішуєте шляхом вибору іншої оптики.

 

 

Питання щодо трансивера-третіх сторін

 

Трансивери OEM від Cisco або Juniper коштують у три-п’ять разів більше, ніж еквівалентні модулі сторонніх-розробників. Іноді більше. Цінова різниця є достатньо значною, щоб вона виявлялася під час обговорення закупівель навіть в організаціях, які зазвичай стандартизують лише одного постачальника.

Третя-сторона працює нормально здебільшого. Специфікації MSA створені саме для того, щоб забезпечити взаємодію з кількома-постачальниками. Сумісний модуль QSFP-DD є сумісним модулем QSFP-DD незалежно від того, чий логотип відображається на етикетці.

Більшу частину часу.

Крайові корпуси змусять вас сумніватися в цій впевненості. Перемикайте оновлення мікропрограми, які раптово позначають-працюючу оптику сторонніх-розробників як непідтримувану. Дані DOM/DDM заповнюються неправильно, оскільки відображення EEPROM не зовсім відповідає очікуванням комутатора. Періодичні перепади зв’язку, які трапляються лише з певними комбінаціями постачальників за певних моделей трафіку.

Ситуація з підтримкою посилює технічну невизначеність. Зателефонуйте в Cisco TAC із проблемою зв’язку, і вони запитають про вашу оптику. Якщо ви використовуєте сторонні-модулі, розмова часто закінчується на цьому. «Замініть на підтримувані трансивери та передзвоніть, якщо проблема не зникне», — це неприємна, але цілком передбачувана відповідь.

Моя рекомендація, незважаючи на те, що вона варта: використовуйте третю-сторону в лабораторії, будьте дуже обережні під час виробництва. Економія на 70-80% менш переконлива, коли ви вирішуєте несправність о 2:00 і не можете виключити оптику як змінну.

 

Що насправді важливо у виборі

 

Після всіх технічних деталей вибір модуля зазвичай зводиться до кількох практичних питань:

Яку відстань вам насправді потрібно подолати? Будьте конкретними. Виміряйте протяжність волокна. Додайте поле для латок і зрощень. Потім оберіть найдешевший тип модуля, який відповідає цій відстані та має вільний простір.

Який волоконний завод існує? Багатомодовий у будівлі, один-режим між будівлями є загальною схемою. Не боріться зі своєю існуючою інфраструктурою, якщо у вас немає вагомих причин.

Яка ваша комутаційна платформа? Тип порту, мабуть, уже визначено. QSFP-DD для більшості корпоративних розгортань, OSFP для деяких гіпермасштабувальників і телекомунікаційних програм.

Наскільки ви довіряєте своїм кабелям? 400G менш пробачливий, ніж 100G. Якщо ваш структурований кабель викликає сумніви-старе оптоволокно, підозрілі завершення, патчі, які повторно підключалися десятки разів-очікуйте проблеми. Почистіть все. Тестуйте все. Вимірювач оптичної потужності та оглядовий приціл більше не є необов’язковими.

 

 

Вам потрібна гнучкість прориву? Якщо так, з самого початку врахуйте це при виборі модуля та конструкції кабелю. Переобладнання можливості відключення є дорогим і руйнівним.

Створення AI/ML вже досягає 800G. Деякі організації сумніваються, чи має сенс 400G як ціль розгортання, чи їм варто почекати. Немає універсальної відповіді. Якщо зростання вашого трафіку виправдовує інвестиції зараз і період окупності є фінансовим, розгорніть 400G. Якщо ви зможете розширити свою інфраструктуру 100G на ще один цикл оновлення, можливо, екосистема 800G буде готова, коли вам це знадобиться.

Нудна порада зазвичай є правильною: пристосуйте технологію до фактичних вимог, купуйте у постачальників, яким ви довіряєте, щоб підтримати вас у разі поломки, і пам’ятайте, що найдешевший варіант часто недешевий, якщо враховувати час на усунення несправностей.

Нікого ніколи не звільняли за вказівку трансиверів, які просто працюють.