Охлаждение центров обработки данных с использованием ИИ: планирование с учетом планов развития графических процессоров NVIDIA
По мере роста энергопотребления стоек с ускорителями ИИ с нынешних примерно 100 кВт на стойку до 600 кВт и выше, архитектура охлаждения быстро становится определяющим фактором при проектировании центров обработки данных. Воздушное охлаждение остается эффективным для центров обработки данных с высокой плотностью размещения ИИ в диапазоне низкой и средней плотности, но по мере дальнейшего роста энергопотребления стоек жидкостное охлаждение непосредственно на чип становится критически важным способом поглощения значительно более высоких удельных мощностей. Двухфазное жидкостное охлаждение непосредственно на чип, использующее фазовый переход внутри холодной пластины, еще больше расширяет кривую плотности, обеспечивая масштабируемость, необходимую для уровней энергопотребления стоек от 200 кВт до 1 МВт и выше. В этом контексте перспективный подход система жидкостного охлаждения центра обработки данныхЭто уже не обновление на будущее, а стратегическое условие для развертывания инфраструктуры искусственного интеллекта следующего поколения.
В планах NVIDIA по развитию графических процессоров темпы повышения удельной мощности стоек беспрецедентны. От современных стоек класса Blackwell мощностью от 100 до 130 кВт до будущей платформы Rubin Ultra, приближающейся к 600 кВт на стойку, и последующих платформ, мощность которых будет еще выше, тепловые характеристики центров обработки данных для ИИ сжимаются по всем направлениям. Поэтому архитектура охлаждения должна эволюционировать от адаптации к одному поколению платформ к планированию на несколько поколений. Жидкостное охлаждение центров обработки данных с использованием ИИПринятые сегодня решения определят, сможет ли тепловая мощность соответствовать темпам внедрения следующих нескольких поколений графических процессоров или же станет узким местом, которое их замедлит.
Этот сдвиг лучше всего понимать как кривую плотности мощности, в которой каждая технология охлаждения занимает отдельную зону применимости. Воздушное охлаждение и улучшенное воздушное охлаждение остаются эффективными при низкой и средней плотности. Однофазное жидкостное охлаждение непосредственно на чип охватывает средний и высокий диапазон и служит важным мостом от воздушного охлаждения к жидкостному охлаждению с более высокой плотностью. Двухфазное жидкостное охлаждение непосредственно на чип поглощает очень большой тепловой поток за счет теплопередачи с фазовым переходом, расширяя масштабируемость охлаждения непосредственно на чип в еще более плотную область. Иммерсионное охлаждение представляет собой самостоятельную архитектуру системного уровня, не линейное расширение воздушного или прямого охлаждения на чип, а полную трансформацию интерфейса теплопередачи и модели работы путем погружения ИТ-оборудования в диэлектрическую жидкость. высокоплотное охлаждение центров обработки данныхНаиболее критической зоной для развертывания в ближайшем будущем является не крайний нижний или крайний верхний предел, а переходная полоса между ними, где воздушное охлаждение приближается к своим пределам, однофазное жидкостное охлаждение непосредственно на чип переходит из разряда опциональных решений в базовые, а двухфазные решения обеспечивают дополнительный запас прочности.
В этом переходном диапазоне воздушное охлаждение остается надежным вариантом при низкой и средней плотности размещения оборудования в стойках, при условии надлежащей организации воздушного потока, изоляции горячих/холодных коридоров, планировки помещения и управления объемом воздуха. Теплообменники с задней дверцей (RDHx) расширяют возможности традиционного воздушного охлаждения, обычно доводя его до диапазона от 40 до 80 кВт на стойку в зависимости от условий помещения, и могут служить промежуточным этапом на пути от воздушного охлаждения к жидкостным архитектурам. Однако за пределами этого диапазона воздушное охлаждение становится все более ограниченным из-за растущей потребности в воздушном потоке, увеличения энергопотребления вентиляторов, ограничений по пространству, ограничений по уровню шума и сложности интеграции. Традиционные системы воздушного охлаждения становятся неэффективными после примерно 30–40 кВт, и даже с RDHx практический предел обычно заканчивается на 40–80 кВт. Именно поэтому поставщики систем охлаждения стоекВ своих планах по созданию систем высокой плотности размещения компании отдают приоритет жидкостным решениям, поскольку они превосходят воздушное охлаждение по эффективности, предсказуемости и адаптивности к условиям эксплуатации при высокой плотности размещения.
Жидкостное иммерсионное охлаждение бывает двух основных типов. Однофазное иммерсионное охлаждение использует жидкость для поглощения тепла и его циркуляции в теплообменник без изменения фазы, в то время как двухфазное иммерсионное охлаждение основано на кипении жидкости на поверхности устройства и повторной конденсации на поверхности конденсатора, используя изменение фазы для повышения эффективности теплопередачи. Иммерсионное охлаждение поддерживает среднюю и высокую плотность мощности в стоечном эквиваленте и подходит для новых или высокотехнологичных объектов, но сопряжено с проблемами совместимости оборудования, обслуживания резервуаров, управления жидкостью, структурных нагрузок и модернизации. Прямое охлаждение чипа (DTC), напротив, воздействует на источник тепла. Холодильные пластины отводят тепло вблизи чипа или корпуса, снижая тепловое сопротивление и создавая контролируемый тепловой путь от чипа через жидкостный контур стойки к воде объекта. Типичная схема DTC включает в себя холодные пластины, трубки, быстроразъемные соединения, коллекторы для стоек и т. д. центр обработки данных воздухожидкостный CDU(блок распределения охлаждающей жидкости) и интерфейс теплообмена с системой охлажденной воды здания.

В рамках DTC для охлаждения ускорителей ИИ могут использоваться как однофазные, так и двухфазные охлаждающие пластины; правильный выбор зависит от целевой плотности размещения в стойках, теплового потока чипа, температуры воды в помещении, пределов перепада давления, требований к техническому обслуживанию и будущих потребностей в расширении. Причина, по которой DTC становится основополагающей возможностью, очевидна. Локальный тепловой поток на современных чипах ускорителей часто превышает 100 Вт/см², что смещает основную инженерную проблему с отвода тепла на уровне помещения на отвод тепла на уровне чипа. Если охлаждающая пластина не может эффективно отводить тепло на уровне чипа, никакая организация воздушного потока, охлаждение задней двери или мощность кондиционера в помещении не смогут удержать температуру перехода под контролем. Именно здесь возникает проблема... производитель холодных пластин для установок первичной переработки нефтиИнженерные решения становятся решающими. Эффективный пакет DTC должен учитывать тепловой поток чипа, скорость потока охлаждающей жидкости и равномерность ее распределения, падение давления, создаваемое микроканальными структурами, температуру подаваемой воды и пределы температуры приближения, а также запас по температуре перехода при динамических нагрузках.
Однофазные охлаждающие пластины отличаются зрелостью, предсказуемой производительностью и простой интеграцией с существующими системами на основе воды или гликоля, что делает их хорошо подходящими для многих современных развертываний класса Blackwell и части развертываний Rubin в ближайшем будущем. Двухфазные охлаждающие пластины используют фазовый переход рабочей жидкости внутри пластины для поглощения очень высокого теплового потока при более низких скоростях потока, расширяя возможности прямого охлаждения чипов на стойки с более высокой плотностью размещения. Эта возможность становится все более актуальной по мере того, как дорожная карта развития графических процессоров движется в сторону диапазона стоек мощностью от 200 кВт до 1 МВт и более. Поэтому выбор между однофазным и двухфазным охлаждением никогда не должен основываться только на производительности точечной теплопередачи; необходимо учитывать мощность стойки, условия эксплуатации, эксплуатационные возможности и будущую дорожную карту платформы. По мере того, как отрасль разрабатывает следующее поколение... Корпус графического процессора, система жидкостного охлаждения, блок распределения воздуха и воздуха (CDU)В решениях цель состоит не в усложнении ради самого усложнения, а в создании архитектуры охлаждения, которая будет эффективно поглощать растущую удельную мощность современных и последующих платформ графических процессоров.
Тепловая инфраструктура центров обработки данных обычно имеет длительный жизненный цикл, в то время как платформы GPU быстро совершенствуются. Если архитектура охлаждения разработана для одного поколения GPU, узкие места могут возникнуть в течение одного-двух циклов платформы. Согласование тепловой архитектуры с планом развития GPU на несколько поколений снижает риск модернизации, простоя инфраструктуры, избыточного проектирования и ненужных капитальных затрат, а также сокращает задержки развертывания, вызванные тепловыми ограничениями. Это означает, что планирование тепловых процессов должно рассматриваться как перспективная дисциплина проектирования. На ранних этапах проектирования следует учитывать ожидаемое значение TDP чипа, плотность мощности стойки, температуру подаваемой воды, пропускную способность блока распределения питания (CDU), распределение потока и точки переключения технологий охлаждения. Внутренняя часть здания также должна соответствовать этим требованиям, охватывая температуру подаваемой воды, пропускную способность CDU, распределение потока на уровне стойки, возможности системы охлажденной воды и возможности расширения. В противном случае, даже самые мощные серверные охлаждающие платформы обнаружат, что внутренняя часть здания, начиная с... блок жидкостного охлаждения серверной стойкиНовое ограничение заключается в том, что система охлаждения, подключенная к водопроводной системе, становится еще более важной. Учитывая устойчивый рост удельной мощности NVIDIA, из-за которого архитектура охлаждения становится ключевым фактором при развертывании центров обработки данных для ИИ, разумнее всего планировать охлаждение не для одного поколения, а для тенденции к увеличению удельной мощности в течение нескольких поколений.
На фоне стремительного развития аппаратного обеспечения для искусственного интеллекта масштабируемое, комплексное оборудование для жидкостного охлаждения имеет решающее значение для воплощения в жизнь перспективных планов по тепловому режиму. По мере развития ИИ возрастает и сложность его охлаждения. Именно здесь на помощь приходит EXTRCOOL — компания предлагает готовое решение для жидкостного охлаждения, объединяющее блоки распределения тепла, охлаждающие пластины, коллекторы и трубопроводы под одной крышей. Вы можете выбрать готовые блоки или сотрудничать с нами для создания индивидуальной конфигурации. Наши разработки обеспечивают максимальный отвод тепла, минимизируют энергопотребление и снижают воздействие на окружающую среду — и это подтверждается безупречной работой на гигаваттных объектах по всему миру. Для критически важных задач, где каждая минута на счету, EXTRCOOL — это надежный выбор. Ознакомьтесь с полной линейкой продукции или запросите индивидуальное предложение здесь: https://www.extrcool.com

