Прямое охлаждение чипа или иммерсионное охлаждение: что лучше для вашего центра обработки данных с искусственным интеллектом?

Быстрая интеграция искусственного интеллекта (ИИ), машинного обучения (МО) и высокопроизводительных вычислений (ВВП) коренным образом изменила современные центры обработки данных. По мере внедрения графических процессоров следующего поколения и аппаратных ускорителей, удельная потребляемая мощность стоек резко возросла с традиционных 5-10 кВт до поразительных 40-100+ кВт на стойку.

При такой беспрецедентной плотности традиционные воздушное охлаждение Это больше не является физически и экономически целесообразным. Отрасль быстро переориентируется на жидкостное охлаждение. Однако перед руководителями объектов и ИТ-директорами встает важнейший архитектурный вопрос: Охлаждение непосредственно к чипу (D2C) или иммерсионное охлаждение?

В этом руководстве представлено всестороннее техническое сравнение технологий прямого охлаждения чипа и иммерсионного охлаждения, которое поможет вам определить оптимальную стратегию управления тепловым режимом для вашего центра обработки данных, использующего искусственный интеллект.

Проблема перегрева: почему воздушное охлаждение устарело для ИИ.

Воздух обладает низкой теплоемкостью. Когда мощность серверных стоек превышает 20-30 кВт, продувка охлажденным воздухом плотных конфигураций графических процессоров становится крайне неэффективной, что приводит к тепловому дросселированию, локальным перегреву и чрезмерному потреблению энергии вентиляторами. Жидкость, в частности вода или специально разработанные диэлектрические жидкости, может передавать тепло в 3000 раз эффективнее воздуха. Переход на жидкостное охлаждение — это не просто модернизация; это необходимое условие для работы оборудования искусственного интеллекта.

Что такое прямое охлаждение чипа (D2C)?

Система охлаждения Direct-to-Chip (также известная как система охлаждения с холодной пластиной) подает охлаждающую жидкость непосредственно к самым горячим компонентам сервера — как правило, к процессорам и видеокартам.

Как работает модель D2C

В системе D2C (прямой контакт с потребителем) специализированный металлический радиатор (холодная пластина) устанавливается непосредственно на обрабатывающий чип. Система с замкнутым контуром прокачивает жидкий хладагент (обычно смесь воды и гликоля) через микроканалы внутри холодной пластины. Жидкость поглощает тепло, выделяемое чипом, и отводит его в блок распределения тепла (БР), где оно рассеивается за пределы предприятия.

Преимущества прямого охлаждения чипа

• Целенаправленное отведение тепла: Улавливает от 701 до 801 тонны общего тепла сервера непосредственно у источника.
• Упрощенная модернизация: Системы D2C часто можно интегрировать в существующие центры обработки данных с воздушным охлаждением и стандартными серверными шасси, что делает их очень доступным вариантом модернизации.
• Доступность компонентов: ИТ-специалисты могут обслуживать серверы, заменять диски или кабели точно так же, как и в традиционном помещении с воздушным охлаждением.

Недостатки модели D2C

• Требования к гибридной системе охлаждения: Поскольку технология D2C охлаждает только основные процессоры, для охлаждения оставшихся 20-30% тепла (выделяемого памятью, накопителями и блоками питания) по-прежнему требуются традиционные механизмы воздушного охлаждения (блоки CRAC/CRAH).
• Риски утечек: Несмотря на высокую надежность современных быстроразъемных соединений, предотвращающих протечки, откачка воды вблизи чувствительной электроники всегда сопряжена с определенным риском.

Что такое иммерсионное охлаждение?

Погружное охлаждение В данном случае используется принципиально иной подход, заключающийся в погружении всего серверного оборудования в теплопроводящую, но непроводящую электричество (диэлектрическую) жидкость.

Как работает погружное охлаждение

Существует два основных типа иммерсионного охлаждения:

1. Однофазное погружение: Оборудование погружено в диэлектрическую жидкость, которая остается в жидком состоянии. Теплая жидкость откачивается из резервуара, охлаждается с помощью теплообменника и возвращается обратно.
2. Двухфазное погружение: Оборудование погружено в специальную фторсодержащую жидкость с низкой температурой кипения. По мере нагревания микросхем жидкость закипает и превращается в пар. Пар поднимается, попадает на конденсаторную катушку в верхней части резервуара, снова превращается в жидкость и оседает.

Преимущества погружного охлаждения

• Улавливание тепла в объеме около 1001 ТТ3Т: Поскольку весь сервер погружен в воду, каждый компонент — от графического процессора до блока питания — охлаждается равномерно.
• Исключительная энергоэффективность: Иммерсионное охлаждение полностью исключает необходимость в серверных вентиляторах и традиционных системах кондиционирования воздуха в компьютерных залах (CRAC), снижая коэффициент энергоэффективности (PUE) до практически идеального уровня (1,02–1,05).
• Долговечность оборудования: Погружение серверов в воду защищает их от пыли, влаги и кислорода, значительно снижая износ оборудования и окисление.

Недостатки погружного охлаждения

• Комплексное техническое обслуживание: Для замены вышедшего из строя компонента необходимо извлечь сервер из резервуара с жидкостью, дать ему высохнуть и работать с масляными или специальными жидкостями.
• Модернизация объектов: Для погружных емкостей требуются усиленные полы (из-за огромного веса) и совершенно иная планировка помещений по сравнению с традиционными вертикальными стеллажами.

Прямое сравнение: прямые продажи потребителям (D2C) против иммерсивного подхода.

Для принятия обоснованного решения операторам центров обработки данных необходимо оценить эти технологии по нескольким важнейшим операционным показателям:

1. Эффективность охлаждения (PUE)

• D2C: Отлично. Снижает показатель PUE примерно до 1,15–1,20.
• Погружение: Превосходный результат. Достигает сверхнизких показателей PUE от 1,02 до 1,05 за счет исключения всей инфраструктуры воздушного охлаждения.
• Победитель: Погружающее охлаждение.

2. Реализация и капитальные затраты

• D2C: Снижение начального порога входа. Можно использовать существующие вертикальные стойки и стандартные серверные форм-факторы при условии умеренной модернизации водопроводной системы здания.
• Погружение: Высокие первоначальные капитальные затраты. Требуются специализированные горизонтальные резервуары, закупка диэлектрической жидкости в больших объемах и существенные структурные изменения пола центра обработки данных.
• Победитель: Охлаждение непосредственно к чипу.

3. Эксплуатация и техническое обслуживание ИТ-систем

• D2C: Для ИТ-специалистов это уже знакомая территория. Замена дисков в режиме «горячего» подключения и плановое техническое обслуживание остаются стандартными процедурами.
• Погружение: Требуются новые операционные протоколы, системы управления потоками жидкости и специализированное подъемное оборудование (например, мостовые краны) для тяжелых серверов.
• Победитель: Охлаждение непосредственно к чипу.

4. Максимальная плотность размещения

• D2C: С легкостью справляется с мощностью до 80-100 кВт на стойку, что покрывает подавляющее большинство современного оборудования для искусственного интеллекта.
• Погружение: Теоретически, каждый резервуар способен выдерживать мощность от 100 до 250 кВт и более, что обеспечивает перспективность установки для квантовых вычислений следующего поколения и создания сверхплотных кластеров искусственного интеллекта.
• Победитель: Погружающее охлаждение.

Какая стратегия охлаждения подходит именно для вашего предприятия?

Универсального “лучшего” варианта не существует; идеальный выбор во многом зависит от вашей текущей инфраструктуры, бюджета и долгосрочной стратегии развития ИИ.

Выберите систему охлаждения Direct-to-Chip (D2C), если:

• Вы проводите модернизацию существующего центра обработки данных с воздушным охлаждением.
• Вы хотите сохранить стандартную вертикальную стоечную архитектуру.
• Вашей ИТ-команде необходим быстрый и привычный доступ к серверным компонентам для частого технического обслуживания.
• Целевая плотность размещения оборудования в стойках составляет от 30 до 80 кВт.

Выберите погружное охлаждение, если:

• Вы проектируете совершенно новый центр обработки данных, построенный специально для искусственного интеллекта.
• Вы стремитесь к достижению максимально низкого показателя PUE и максимальных показателей экологической устойчивости.
• Вы развертываете сверхплотные вычислительные кластеры, мощность которых превышает 100 кВт на единицу занимаемой площади.
• Приоритетными задачами являются долговечность оборудования и защита от суровых условий окружающей среды.

Заключение

Поскольку задачи искусственного интеллекта продолжают расширять границы производительности кремниевых чипов, жидкостное охлаждение Технология Direct-to-Chip переходит из разряда нишевой роскоши в операционную необходимость. Она предлагает прагматичный и эффективный мост между существующей инфраструктурой и высокопроизводительными вычислительными системами. В то же время, иммерсионное охлаждение представляет собой высшее достижение в области теплоизоляции, предлагая непревзойденную эффективность для тех, кто готов инвестировать в новую архитектуру производственных площадок.

Тщательно оценив ограничения по капитальным затратам, планировку объекта и целевую плотность мощности, вы сможете выбрать систему терморегулирования, которая обеспечит эффективную работу вашего центра обработки данных для ИИ в долгосрочной перспективе.