Быстрый рост рабочих нагрузок по обучению искусственного интеллекта и выводам вывел управление температурным режимом в центрах обработки данных далеко за пределы традиционного воздушного охлаждения. Современные чипы-ускорители искусственного интеллекта обычно потребляют несколько сотен ватт каждый, а плотные серверные стойки, заполненные этими ускорителями, могут генерировать тепловые нагрузки, с которыми инфраструктура воздушного охлаждения никогда не была рассчитана эффективно. Это среда, в которой высокоточные детали жидкостного охлаждения сервера AI стали необходимыми, а не дополнительными — охлаждающие пластины, коллекторы, быстроразъемные фитинги и насосы разработаны для отвода тепла непосредственно от самых горячих компонентов с жесткими допусками и исключительной надежностью. В этой статье рассматривается, что это за компоненты, почему прецизионное проектирование так важно в этом приложении и что следует понимать операторам центров обработки данных и системным интеграторам при выборе оборудования жидкостного охлаждения для инфраструктуры искусственного интеллекта.
Традиционное охлаждение центров обработки данных основано на нагнетании охлажденного воздуха через компоненты сервера, отводя тепло посредством конвекции. Этот подход хорошо работал на протяжении десятилетий в вычислениях общего назначения, где отдельные процессоры обычно рассеивали мощность менее 150 Вт. Однако ускорители искусственного интеллекта, используемые для крупномасштабного обучения моделей и вывода, часто рассеивают от 400 до 700 Вт и более на один чип, а один сервер может содержать восемь или более таких ускорителей наряду с поддержкой процессоров, памяти и сетевого оборудования.
При такой плотности мощности воздух просто не может отводить тепло достаточно быстро, не требуя огромных объемов воздушного потока, негабаритных радиаторов и, соответственно, высокого энергопотребления вентиляторов, что само по себе является значительным и растущим фактором общего энергопотребления центра обработки данных. Жидкостное охлаждение принципиально решает эту проблему, поскольку жидкий хладагент может поглощать и переносить гораздо больше тепла на единицу объема, чем воздух, что позволяет гораздо меньшим и более целенаправленным охлаждающим компонентам справляться с той же тепловой нагрузкой.
Вместо охлаждения всего серверного шкафа жидкостью в большинстве современных архитектур жидкостного охлаждения искусственного интеллекта используется подход непосредственно к кристаллу, при котором охлаждающая пластина монтируется непосредственно на наиболее нагревающиеся компоненты — обычно на графический процессор или блок ускорителя искусственного интеллекта, а иногда и на процессор — в то время как охлаждающая жидкость циркулирует по внутренним каналам внутри этой холодной пластины, поглощая тепло у источника, прежде чем оно сможет распространиться по остальной части серверного корпуса.
В отличие от общепромышленного охлаждающего оборудования, детали жидкостного охлаждения серверов AI работают в чрезвычайно жестких физических, тепловых ограничениях и ограничениях по надежности, поэтому «высокоточная» инженерия — это не маркетинговая фраза, а настоящее техническое требование.
Основание охлаждающей пластины должно находиться в почти идеальном плоском контакте с корпусом микросхемы, чтобы минимизировать тепловое сопротивление на интерфейсе. Даже микроскопические неровности поверхности могут создавать воздушные зазоры, которые значительно снижают эффективность теплопередачи, поэтому базовые поверхности холоднокатаных пластин обычно изготавливаются с очень жесткими допусками на плоскостность и качество поверхности, часто измеряемыми однозначными микрометрами.
Внутри современной охлаждающей пластины тепло часто отводится через множество чрезвычайно тонких внутренних микроканалов или реберных структур, которые максимизируют площадь контакта поверхности между охлаждающей жидкостью и металлическим основанием. Эти конструкции должны быть изготовлены с высокой точностью размеров, чтобы достичь расчетных характеристик потока и коэффициентов теплопередачи — несоответствующие размеры каналов могут привести к неравномерному распределению потока, локализованным горячим точкам и снижению общей эффективности охлаждения.
Серверы искусственного интеллекта, использующие жидкостное охлаждение, работают непрерывно, часто годами, под постоянным внутренним давлением жидкости. Любой отказ уплотнения или фитинга может привести не только к снижению эффективности охлаждения, но и к потенциальной утечке охлаждающей жидкости на чувствительное и дорогое электронное оборудование. Это делает проектирование уплотнений, выбор материала прокладок и допуски на изготовление фитингов критически важными вопросами точного проектирования на протяжении всего контура жидкостного охлаждения.
Гипермасштабируемые центры обработки данных с искусственным интеллектом одновременно развертывают компоненты жидкостного охлаждения на тысячах серверов. Стабильность производства — гарантия того, что тысячная холодная пластина работает идентично первой — важна для предсказуемых и равномерных тепловых характеристик во всем парке, и любые различия между деталями могут создать тепловой дисбаланс, который влияет на производительность, надежность или срок службы чипа.
Холодные пластины — это компонент, находящийся в прямом тепловом контакте с тепловыделяющим чипом, обычно изготовленный из меди или алюминия из-за их превосходной теплопроводности. Внутри охлаждающие пластины имеют специально разработанную структуру каналов или ребер, предназначенную для максимального контакта охлаждающей жидкости с нагретой поверхностью при минимизации перепада давления на пластине, что обеспечивает баланс между эффективностью охлаждения и мощностью перекачки, необходимой для циркуляции охлаждающей жидкости по системе.
Коллекторы distribute coolant from a central supply line to multiple individual servers or components within a rack, and collect returning heated coolant back into the main loop. Rack-level manifolds must be precisely engineered to balance flow evenly across all connected servers, since uneven flow distribution can leave some servers under-cooled relative to others, even within the same rack.
Поскольку серверы в среде с жидкостным охлаждением должны быть исправными — снимать, ремонтировать или заменять без слива всего контура охлаждения, — быстроразъемные фитинги (QD) являются критически важным компонентом. Высокоточные муфты QD разработаны для надежного и стабильного уплотнения в течение тысяч циклов соединения-разъединения с минимальной утечкой охлаждающей жидкости (часто описываемой как «бескапельная» или «малокапельная» конструкция) во время технического обслуживания.
Насосы circulate coolant through the cooling loop at controlled flow rates and pressures. In AI server applications, pump reliability is especially critical since pump failure can quickly lead to thermal throttling or shutdown of high-value compute hardware; many systems incorporate redundant pump configurations to maintain cooling continuity even if a single pump unit fails.
CDU действует как интерфейс между основной инфраструктурой охлаждения объекта и контуром жидкостного охлаждения на уровне сервера, часто изолируя два контура жидкости для защиты чувствительных компонентов на стороне сервера от проблем с качеством воды на объекте, а также обеспечивая мониторинг потока, фильтрацию и возможность обнаружения утечек в централизованной точке.
Датчики температуры, расхода и давления, встроенные в контур жидкостного охлаждения, предоставляют данные в режиме реального времени, необходимые для обнаружения развивающихся проблем, таких как частично заблокированная охлаждающая пластина или медленная утечка, прежде чем они перерастут в повреждение оборудования или незапланированный простой.
| Компонент | Основная функция | Ключевые требования к точности |
|---|---|---|
| Холодная тарелка | Прямой отвод тепла на уровне чипа | Плоскостность основания, точность микроканалов |
| Коллектор | Распределение охлаждающей жидкости по серверам | Сбалансированный поток во всех соединениях |
| Быстроразъемная муфта | Исправные, герметичные соединения | Надежное уплотнение в повторяющихся циклах |
| Насос | Циркуляция охлаждающей жидкости | Постоянный расход и давление, надежность |
| CDU | Шлейфовый интерфейс между объектом и сервером | Фильтрация, изоляция, точность контроля |
| Датчики | Мониторинг состояния в режиме реального времени | Точность измерения и время отклика |
Медь remains the preferred material for cold plate construction due to its excellent thermal conductivity, allowing efficient heat transfer from the chip surface into the circulating coolant. Copper cold plates are often manufactured using precision machining, skiving, or additive manufacturing techniques to produce the fine internal channel structures needed for optimal performance.
Алюминий offers a lighter-weight, generally lower-cost alternative to copper, with somewhat lower thermal conductivity. Aluminum components are sometimes used in manifolds or larger structural cooling parts where weight and cost considerations outweigh the marginal thermal conductivity advantage copper would provide in those specific locations.
Фитинги, быстроразъемные корпуса и корпуса коллекторов часто изготавливаются из нержавеющей стали или высокоэффективных технических полимеров, выбранных с учетом коррозионной стойкости, стабильности размеров и совместимости с конкретным химическим составом охлаждающей жидкости, используемой в системе.
Выбор материала уплотнения имеет решающее значение для долгосрочного предотвращения утечек: материалы выбираются с учетом совместимости с химическим составом охлаждающей жидкости, устойчивости к деградации в течение многих лет непрерывной эксплуатации и стабильных характеристик уплотнения во всем диапазоне температур, в котором работает система.
Обработка с числовым программным управлением позволяет точно удалять материал для формирования внутренних канальных структур и достижения строго контролируемой плоскостности основания, обеспечивая высокую точность конструкции холодных пластин с четко определенным геометрическим рисунком каналов.
Зачистка is a specialized manufacturing process that shaves extremely thin fins directly from a solid block of copper or aluminum, creating dense, high-surface-area fin structures within a cold plate while maintaining strong thermal continuity between the fins and the base material.
Многие конструкции холодных пластин собираются из нескольких обработанных или штампованных слоев, соединенных вместе с использованием методов пайки — часто вакуумной пайки для обеспечения максимальной целостности соединения — для создания герметичной, герметичной внутренней структуры каналов без создания термического сопротивления в соединении.
Аддитивное производство металлов все чаще используется для производства холодных пластин с очень сложной внутренней геометрией, которую было бы трудно или невозможно получить с помощью традиционной обработки, что позволяет инженерам оптимизировать структуру каналов специально для схемы распределения тепла конкретного чипа.
Холодные пластины и более широкие компоненты системы охлаждения должны иметь размеры и проектироваться так, чтобы соответствовать конкретной тепловой расчетной мощности целевого чипа, поскольку недостаточная мощность охлаждения может привести к тепловому дросселированию, которое напрямую снижает производительность вычислений ИИ, в то время как слишком большая мощность может привести к ненужным затратам и сложности системы.
В разных системах жидкостного охлаждения используются разные составы охлаждающих жидкостей: от обработанных водно-гликолевых смесей до специализированных диэлектрических жидкостей. Все соприкасающиеся с рабочей средой компоненты — охлаждающие пластины, коллекторы, уплотнения и фитинги — должны быть проверены на химическую совместимость с конкретной охлаждающей жидкостью, чтобы предотвратить коррозию, разрушение уплотнений или загрязнение охлаждающей жидкости с течением времени.
Каждая холодная пластина и коллектор создают определенное падение давления в общем контуре охлаждения. Проектировщики системы должны сбалансировать скорость потока, необходимую для адекватной эффективности охлаждения, с совокупным падением давления во всем контуре, что напрямую влияет на размер насоса и общее энергопотребление системы.
Учитывая масштабы развертывания центров обработки данных с искусственным интеллектом, компоненты охлаждения должны поддерживать эффективные процедуры обслуживания с низким уровнем риска, включая надежные быстроразъемные фитинги, которые позволяют снимать и переустанавливать отдельные серверы, не требуя слива и повторного заполнения всего контура охлаждения стойки.
Учитывая высокую ценность защищаемого вычислительного оборудования, надежные системы обнаружения утечек и резервные конфигурации насосов или протоков все чаще считаются стандартными требованиями, а не дополнительными дополнениями при развертывании критически важной инфраструктуры искусственного интеллекта.
Ожидается, что центры обработки данных искусственного интеллекта будут работать непрерывно в течение многих лет, поэтому долгосрочная надежность компонентов жидкостного охлаждения так же важна, как и их первоначальные тепловые характеристики. Усталость компонентов, ухудшение химического состава охлаждающей жидкости с течением времени и постепенный износ уплотнений и фитингов в результате повторяющихся термоциклов — все это факторы, которые авторитетные производители учитывают при проверочных испытаниях конструкции, часто включая ускоренные испытания на срок службы, чтобы имитировать годы эксплуатационного стресса в сжатые сроки испытаний, прежде чем продукт будет выпущен на рынок.
Даже с обработанной охлаждающей жидкостью длительная эксплуатация может привести к постепенной коррозии или минеральному отложению внутри микроканалов охлаждающей пластины, если не поддерживать химический состав воды должным образом, что со временем может привести к снижению эффективности охлаждения. Высокоточные компоненты, изготовленные из коррозионностойких материалов, в сочетании с надлежащей очисткой и фильтрацией воды на предприятии, помогают минимизировать этот риск.
Регулярный мониторинг скорости потока, перепада давления и химического состава охлаждающей жидкости в сочетании с плановой заменой фильтров и периодической проверкой фитингов и уплотнений поддерживает долгосрочную надежность системы и помогает операторам выявлять возникающие проблемы до того, как они повлияют на бесперебойную работу сервера.
Поскольку энергопотребление ускорителей искусственного интеллекта продолжает расти из поколения в поколение, конструкции охлаждающих пластин и контуров охлаждения должны постоянно развиваться, чтобы выдерживать большие тепловые нагрузки при аналогичных или даже меньших физических размерах, стимулируя постоянные инновации в проектировании микроканалов и технологии материалов.
По мере того как внедрение жидкостного охлаждения распространяется по всей отрасли центров обработки данных, растет интерес к стандартизации определенных размеров интерфейса и типов соединений для компонентов охлаждения с целью улучшения совместимости между различными производителями серверов и поставщиками инфраструктуры охлаждения.
Помимо традиционного однофазного жидкостного охлаждения, некоторые производители разрабатывают компоненты двухфазного охлаждения, в которых охлаждающая жидкость частично испаряется по мере поглощения тепла, что дает возможность еще более высокой мощности отвода тепла на единицу потока охлаждающей жидкости, хотя этот подход вносит дополнительную инженерную сложность в управление фазами и контроль давления в системе.
Расширение интеграции датчиков и средств анализа данных непосредственно в компоненты системы охлаждения позволяет применять более сложные подходы к профилактическому техническому обслуживанию, позволяя операторам центров обработки данных предвидеть износ компонентов или возникновение проблем до того, как они приведут к незапланированному простою.
Высокоточные детали жидкостного охлаждения серверов искусственного интеллекта стали основой инфраструктуры современных центров обработки данных искусственного интеллекта, позволяя надежно и эффективно управлять экстремальной плотностью мощности, необходимой для современных ускорителей искусственного интеллекта. От холодных пластин с жесткими допусками и сбалансированных коллекторов до надежных быстроразъемных фитингов и резервных насосов — каждый компонент контура жидкостного охлаждения должен соответствовать строгим стандартам точности и надежности, чтобы защитить ценное вычислительное оборудование и обеспечить непрерывную работу в больших масштабах. Поскольку рабочие нагрузки искусственного интеллекта продолжают увеличивать энергопотребление чипов, разработка этих компонентов останется критически важной, быстро развивающейся областью инфраструктуры центров обработки данных, напрямую определяющей, насколько эффективно и надежно может быть реализовано следующее поколение вычислений искусственного интеллекта.
Быстрый рост рабочих нагрузок по обучению искусственного интеллекта и выводам вывел управление температурным режимом в центрах обработки данных далеко за пределы традиционного воздушного охлажде...
Быстрый рост рабочих нагрузок искусственного интеллекта предъявляет беспрецедентные требования к инфраструктуре центров обработки данных, особенно в области управления температурным режимом. Пос...
В производстве станков с ЧПУ повышение эффективности не только расширяет производственные мощности, но также эффективно сокращает производственные затраты и сокращает циклы поставок, что является к...
Качество изделий, изготовленных на станках с ЧПУ, в основном определяется правильным выбором и соответствием материалов. Различия в обрабатываемости и механических свойствах различных материалов на...
Высокая точность является основным конкурентным преимуществом обработки с ЧПУ. Даже в аэрокосмической отрасли, производстве медицинского оборудования, точных приборов и других областях ошибки даже ...
Благодаря быстрому развитию интеллектуальных производственных технологий обработка с ЧПУ переходит от цифрового управления к интеллектуальному управлению, что способствует обновлению режима произво...