По мере того, как системы NVIDIA GB300 NVL72 развертываются для крупномасштабного-обучения и вывода ИИ, в дискуссиях по инженерным-центрам обработки данных продолжает всплывать один вопрос: как обеспечить охлаждение оптических соединений? Графические процессоры, центральные процессоры и микросхемы коммутаторов в стойке GB300 уже имеют жидкостное-охлаждение, но подключаемые оптические трансиверы, передающие трафик между коммутаторами и сетевыми картами, работают в другом тепловом режиме. По мере того как скорость модулей приближается к 1,6Т и 3,2Т, их тепло становится все труднее игнорировать.
Недавно распространились слухи о том, что оптические модули 3,2 Тл с иммерсионным жидкостным-охлаждением поступили в массовое производство и применяются во многих странах мира.всеКластеры GB300. Эта формулировка преувеличивает, где на самом деле находится технология. В этой статье отделяется то, что публично подтверждено, от того, что остается заявлениями или прогнозами поставщиков, объясняется, что такое оптический модуль с жидкостным-охлаждением, и показано, как он соответствует раскрытой дорожной карте NVIDIA по совместной-оптической оптике и кремниевой фотонике.
Что такое оптический модуль-с жидкостным охлаждением?
Подключаемый оптический трансивер преобразует электрические сигналы от коммутатора или сетевого адаптера в свет для передачи по оптоволокну и обратно. Большая часть тепла исходит от электрической стороны - DSP, драйвера лазера и трансимпедансного усилителя (TIA). Традиционно эти модули в форм-факторах OSFP или QSFP-DD используют воздушное охлаждение: радиатор на поверхности модуля, вентиляторы и воздушный поток корпуса отводят тепло.
Оптический модуль-с жидкостным охлаждением заменяет или дополняет воздушный поток жидкостным каналом. На практике большинство обсуждаемых сегодня проектов включают в себяхолодная пластина или микроканальная структурав стандартный корпус класса OSFP-, поэтому охлаждающая жидкость отводит тепло непосредственно от модуля, а не зависит от потока воздуха в стойке. Этонетто же самое, что охлаждение полным погружением, при котором компоненты погружены в диэлектрическую жидкость. Оба подхода существуют на более широком рынке, но различие имеет большое значение, когда вы оцениваете какое-либо конкретное утверждение о продукте. Если вы сравниваете семейства модулей, полезно начать с основвысокоскоростные-модули приемопередатчиков и их оптические компоненты.
Почему кластеры искусственного интеллекта вытесняют оптику за пределы воздушного охлаждения
Две тенденции сталкиваются. Скорость модулей растет, и вместе с ними растет мощность на-модуль. По отраслевым оценкам, модули 800G имеют мощность примерно 14–20 Вт, а клиентская оптика 1,6 Тл — около 20–25 Вт, причем когерентные варианты и варианты DCI выше. Форм-фактор OSFP был выбран отчасти потому, что он может вместить встроенный радиатор для этого конверта -, но с появлением оптики 200G-на-канал и модулей 3,2T этот тепловой бюджет только становится меньше.
В то же время мощность стойки растет. Стойка GB300 NVL72 потребляет порядка 120–140 кВт и охлаждается преимущественно жидкостью. Когда большая часть стойки работает с чрезвычайной плотностью размещения, а окружающие объекты спроектированы на основе жидкостных контуров, компоненты с воздушным-охлаждением могут стать неудобной частью конструкции, а не вычислительной машины. Это реальная мотивация интереса к оптике с жидкостным-охлаждением: не то, чтобы оптика внезапно стала крупнейшим источником тепла, а то, чтовоздушное охлаждение становится все труднее оправдать в среде с полностью жидкостным-охлаждением и сверхплотной-плотностью.. Командам, планирующим такую плотность, стоит подумать об оптике как об одном из элементов общей системы.стратегия подключения центров обработки данныха не в изоляции.
Оптические трансиверы с воздушным-охлаждением и жидкостным-охлаждением
Эти два подхода решают разные проблемы и имеют разные-компромиссы. В таблице ниже суммированы практические различия в их нынешнем виде.
| Атрибут | Воздушное-охлаждение (сегодняшняя норма) | Жидкостное-охлаждение (возникающее) |
|---|---|---|
| Путь охлаждения | Поверхностный радиатор плюс воздушный поток корпуса | Холодная пластина или микроканал, несущий теплоноситель (или отдельно погружной) |
| Зрелость | Стандарт для развертываний OSFP и QSFP-DD, включая текущие эталонные конструкции GB300. | Рано; ограниченное развертывание; в основном под руководством-поставщиков, а не стандартизированных |
| Сильные стороны | Усовершенствованная система,-горячая замена, широкая совместимость, отсутствие необходимости использования жидкостей | Более высокий отвод тепла, поддержка более плотных стоек, более низкие температуры модулей, потенциальная экономия энергии |
| Компромиссы-компромиссы | Ограничено при очень высокой-мощности модуля; ограничен потоком воздуха в стойке | Герметизация и совместимость жидкости, загрязнение разъемов, повышенная сложность обслуживания, незрелые стандарты |
| Удобство обслуживания | Простое подключение и отключение | Требуется управление быстрыми-отключениями или плавностью; недоказанный в больших масштабах |
Правильный выбор зависит от удельной мощности стойки, форм-фактора и того, какая часть объекта уже имеет жидкостное-охлаждение. В большинстве поставляемых в настоящее время развертываний подключаемые модули с воздушным-охлаждением -, включая модули OSFP 800G и 1,6T -, остаются по умолчанию. Более пристальный взгляд наФорм-фактор 800G OSFP и его тепловая конструкцияпоказывает, сколько инженерных усилий уже затрачено на сохранение обычных модулей внутри оболочки с воздушным-охлаждением.
Как это связано с GB300 NVL72 и дорожной картой NVIDIA по оптике
Прежде чем соглашаться с утверждением о том, что «оптика с жидкостным охлаждением повсюду», стоит обратить внимание на два публично задокументированных факта.
Во-первых,GB300 NVL72 — это стоечная-весовая система с жидкостным охлаждением.-, но жидкий цикл предназначен для графических процессоров, процессоров Grace, лотков NVSwitch и сетевых адаптеров ConnectX-8. Вопубликованные эталонные конструкции OEM, оптические модули OSFP, компоненты хранения и распределения-питанияс воздушным-охлаждением, при этом примерно 90% тепла стойки улавливается жидкостью, а остальная часть — воздухом. Другими словами, в эталонной архитектуре поставки сама сменная оптика не имеет жидкостного-охлаждения.
Во-вторых, раскрытая стратегия NVIDIA по сокращению оптической мощности в больших масштабахсов-компактная оптика (CPO), а не подключаемые модули с погружным-охлаждением. На GTC 2025 компанияанонсированы коммутаторы Spectrum-X и Quantum-X Photonicsкоторые интегрируют кремниевую фотонику непосредственно с ASIC переключателя, что обеспечивает примерно в 3,5 раза большую энергоэффективность и в 4 раза меньше лазеров, чем традиционные подключаемые трансиверы. Сам коммутатор Quantum-X Photonics использует жидкостное охлаждение для встроенной кремниевой фотоники-корпуса. Подключаемая оптика не исчезает в этой дорожной карте -, поставщики, включая Innolight, Coherent, Eoptolink и Fabrinet, продолжают поддерживать их -, но основная экономия энергии, которую добивается NVIDIA, исходит от CPO. Дополнительную информацию о том, почему отрасль переносит оптику на упаковку, можно найти здесь.технический пояснения по совместной-оптической оптике– это полезный учебник, который хорошо сочетается с более широким представлением оКремниевая фотоника и кабели, от которых она зависит.
Таким образом, точная картина складывается в несколько слоев: жидкостное охлаждение в GB300 является реальным и занимает центральное место в стойке; CPO и кремниевая фотоника — заявленная стратегия NVIDIA в области оптической мощности; и «подключаемые модули 3,2T с иммерсионным жидкостным-охлаждением, используемые во всех кластерах GB300» — этонетто, что в настоящее время поддерживается общедоступными данными. Межсоединения высокой-плотности по-прежнему в значительной степени зависят от традиционных структурированных волокон, таких какКабели MPO для центров обработки данных AI.
Какие смелые утверждения оправдываются?
Не все в концепции «прорыва» ошибочно. Проблема в том, что подтвержденные тенденции смешиваются с непроверенной спецификой. Вот практическое разделение.
Достаточно хорошо поддерживается:
- Кластеры искусственного интеллекта обеспечивают более высокую пропускную способность межсоединений, мощность и тепловую плотность.
- GB300 NVL72 — это стоечная-весовая система с жидкостным охлаждением.
- Со-компактная оптика и кремниевая фотоника – это основные направления NVIDIA в области сетей искусственного интеллекта.
- Сменная оптика с жидкостным-охлаждением (конструкции с холодными-пластинами или микроканалами) — это новое направление исследований и разработок, а также раннее-направление разработки продуктов.
Утверждения, которым необходим именованный и поддающийся проверке источник, прежде чем вы сможете на них полагаться:
- Эта оптика является «самым большим узким местом» в стойках GB300, опережая графические процессоры.
- Конкретные цифры, такие как температура корпуса модуля 85 градусов, 38 Вт на модуль, «30% места в стойке» или «20% мощности кластера».
- Конкретные поставщики массово -производят подключаемые модули с иммерсионным жидкостным-охлаждением 3,2 Т, принятые во всех кластерах Q3 2026 GB300.
- Названы результаты развертывания клиентов и цифры, такие как увеличение пропускной способности обучения-на 22 % или увеличение плотности графических процессоров на 20 %.
- Прогнозируется, что к 2027 году 80 % новых оптических модулей кластеров искусственного интеллекта-будут иметь жидкостное-охлаждение.
Если вы взвешиваете их для закупок или планирования мощности, запросите основной источник: эталонный проект OEM, документ MSA или стандарты, техническое описание поставщика с указанными условиями или измерение с определенной испытательной установкой (тип модуля, мощность, температура воздушного потока или охлаждающей жидкости, плотность портов). Полезной рамкой для такого рода сортировки является разделениечто выйдет сегодня из того, что еще включено в план оптических-модулей.
Перспективы на будущее: 1,6T, 3,2T, CPO и кремниевая фотоника
Направление движения ясно даже там, где точные даты не известны.. 1.6Оптика T - в основном использует форм-фактор OSFP-XD - растет, 3.2T запланирован на конец этого десятилетия, а скорость на-полосу движения приближается к 200G и выше. Каждый шаг увеличивает мощность на-модуль, поэтому отрасль идет сразу по нескольким направлениям: более низкие-цифровые процессоры обработки сигналов на узлах 3 и 2 нм, линейный-привод и линейная сменная оптика, совмещенная оптика и улучшенные тепловые конструкции, включая жидкостное охлаждение.
Эти пути скорее дополняют друг друга, чем исключают друг друга. Какой из них будет доминировать в конкретном развертывании, будет зависеть от охвата, плотности, удобства обслуживания и стоимости -, а не от одного «прорыва». Оптика с жидкостным-охлаждением вполне может занять место в самых плотных стойках, но в качестве одного из нескольких инструментов, применяемых там, где этого действительно требуют расчеты температуры и плотности.
Часто задаваемые вопросы
Доступны ли в продаже оптические-модули с жидкостным охлаждением?
Сменная оптика с жидкостным{0}}охлаждением -, как правило, имеет конструкции с холодными-пластинами или микроканалами в форм-факторе класса OSFP-- и уже демонстрируется, но это ранний вариант, а не основной выбор. В большинстве поставляемых фабрик AI по-прежнему используются подключаемые модули 800G и 1,6T с воздушным-охлаждением.
Требуется ли для кластеров GB300 оптика с жидкостным-охлаждением?
Нет. Стойка GB300 NVL72 в целом имеет жидкостное-охлаждение, но опубликованные эталонные конструкции охлаждают оптические модули OSFP воздухом, а не жидкостью. Графические процессоры, центральные процессоры, NVSwitch и сетевые карты — это компоненты с жидкостным-охлаждением.
В чем разница между сменной оптикой и CPO?
Подключаемый трансивер – это отдельный модуль-с возможностью горячей замены, который вставляется в коммутатор или порт сетевой карты. Совместно-оптическая система интегрирует оптический механизм в тот же корпус, что и микросхема переключателя, сокращая электрический путь для снижения мощности и задержки - за счет удобства обслуживания и с другим (часто жидкостным-) охлаждением.
Почему оптические модули в AI-кластерах перегреваются?
Более высокие скорости передачи данных требуют большей обработки сигнала в DSP, драйверах и TIA, что увеличивает мощность на-модуль. Упакуйте много-модулей высокой мощности в плотную стойку с высокой-мощностью, и локальная тепловая нагрузка может превысить ту, с которой комфортно справляется воздушное охлаждение.
Является ли иммерсионное охлаждение тем же, что и оптический модуль с жидкостным-охлаждением?
Не обязательно. При погружении компоненты погружаются в диэлектрическую жидкость, тогда как в большинстве обсуждаемых сегодня конструкций «оптических модулей с жидкостным-охлаждением» используются холодные пластины или микроканалы, несущие охлаждающую жидкость. Это разные подходы с разными соображениями надежности, герметичности и удобства обслуживания.
Ключевые выводы
- Управление температурным режимом оптических межсоединений становится реальным ограничением при проектировании плотных стоек AI с жидкостным-охлаждением.
- Сменная оптика с жидкостным-охлаждением — это новый вариант -, в основном с холодной-пластинкой или микроканалом, а не с иммерсионным -, который еще не получил широкого распространения.
- GB300 NVL72 имеет жидкостное-охлаждение, но его оптические модули OSFP в эталонных конструкциях имеют воздушное-охлаждение.
- Раскрытая стратегия NVIDIA в области оптики заключается в совместной-кремниевой фотонике.
- Относитесь с осторожностью к конкретным цифрам и заявлениям о том, что «уже развернуто повсюду», пока первоисточник не подтвердит их.