冷板式，浸沒式，噴淋式三種液冷對比

作者：蘭洋科技????瀏覽量：12066????時間：2023年10月09日????標簽: 冷板式液冷浸沒式液冷噴淋式液冷

引言

數(shù)據(jù)中心在信息社會和數(shù)字經(jīng)濟發(fā)展中扮演著重要的角色，提供計算、存儲、網(wǎng)絡能力，支撐社交、視頻、網(wǎng)購等應用的正常進行。隨著云計算、大數(shù)據(jù)、人工智能等技術的發(fā)展和應用，數(shù)據(jù)中心規(guī)模不斷擴大，數(shù)據(jù)中心總體耗能總量不斷增加。2020 年，中國數(shù)據(jù)中心年耗電量超過 2500 億 kW · h，占全部用電量比例的 3%，預計仍將以 15%~20% 的速率持續(xù)增長。如圖1 所示，數(shù)據(jù)中心能耗結構中冷卻系統(tǒng)能耗占據(jù)高達 40%，成為數(shù)據(jù)中心進行能效優(yōu)化的重要因素。

隨著國家對新基建的重視，數(shù)據(jù)中心迎來新的發(fā)展浪潮，伴隨著數(shù)字化社會的發(fā)展，數(shù)據(jù)中心也將會承擔越來越重要的角色，推動數(shù)據(jù)處理、存儲、傳輸?shù)认嚓P設備的建設與發(fā)展。

圖1 數(shù)據(jù)中心能耗結構圖

作為各類數(shù)據(jù)信息的關鍵基礎設施，數(shù)據(jù)中心的規(guī)模不斷提升，規(guī)模的年增長率保持在 30% 左右，截止到 2020 年底，數(shù)據(jù)中心機架總量已經(jīng)超過400 萬架。數(shù)據(jù)中心利用率是數(shù)據(jù)中心算力的主要表現(xiàn)形式。2019 年底，我國大型、超大型、中小型的數(shù)據(jù)中心利用率均達到 45% 以上。當前，數(shù)據(jù)中心能效水平不斷攀升，加快了可再生能源的利用效率。當前，我國數(shù)據(jù)中心的電源利用效率（Power Usage Effectiveness，PUE）水平較低，大型、超大型數(shù)據(jù)中心平均 PUE 均達到 1.5 以下，在綠色低碳數(shù)中心建設方面取得了突出的成果。同時，我國可再生能源利用率不斷攀升，到 2020 年底，可再生能源發(fā)電量超過 22000 億 kW，增長率達 8.4%。螞蟻集團、阿里巴巴等領先數(shù)據(jù)中心企業(yè)設計實施了可再生能源利用、綠色技術研發(fā)等綠色低碳數(shù)據(jù)中心策略。

數(shù)據(jù)中心一方面作為各類數(shù)據(jù)信息的核心基礎設施，另一方面又與傳統(tǒng)行業(yè)融合發(fā)展、緊密相連，特別是與電力系統(tǒng)領域更加密不可分。數(shù)據(jù)中心機房作為現(xiàn)代信息建設的基礎工程，能夠提供穩(wěn)定的運行環(huán)境。而電力系統(tǒng)作為數(shù)據(jù)中心的重要組成部分，占據(jù)整個數(shù)據(jù)中心資產的 50% 以上，是數(shù)據(jù)中心的主要支撐。近年來，隨著我國電力行業(yè)信息化程度逐步提高，能源互聯(lián)網(wǎng)建設進程不斷增加，電力行業(yè)先后提出“云大物移”、智慧能源等建設目標，深入應用大數(shù)據(jù)、人工智能、區(qū)塊鏈等技術，加速推進能源革命與數(shù)字革命融合發(fā)展。當前，智能電網(wǎng)和互聯(lián)網(wǎng)技術不斷創(chuàng)新，以數(shù)據(jù)賦能電力系統(tǒng)，用價格信號引導電力用戶改變自身的用電行為，從需求側增加電力系統(tǒng)運行的敏捷性，豐富電網(wǎng)的運行調節(jié)手段，有效促進我國電能量市場的高速發(fā)展。同時，國家電網(wǎng)有限公司結合供配電資源優(yōu)勢，提出將變電站、數(shù)據(jù)中心站等多站進行融合的建設目標，利用現(xiàn)有資源，實現(xiàn)數(shù)量多、分布廣的部署特點，為社會提供多種類型的服務。我國電力行業(yè)大型數(shù)據(jù)中心以支撐自身業(yè)務為主，并不斷以綠色化、智能化、定制化為方式，推動數(shù)據(jù)中心建設。

數(shù)據(jù)中心作為集中放置電子信息設備，提供運行環(huán)境的建筑場所，是電力系統(tǒng)領域中的重要基礎設施。數(shù)據(jù)中心大多建立在環(huán)境周邊清潔、水源充足、遠離自然災害隱患、環(huán)境溫度利于節(jié)約能源的地區(qū)，不但能夠確保數(shù)據(jù)中心建設的安全性，而且對降低數(shù)據(jù)中心在建設過程中的能源消耗、節(jié)省數(shù)據(jù)中心的建設成本有一定的優(yōu)勢，如張北云聯(lián)數(shù)據(jù)中心通過全自動化樓宇設備自控（Building Automation System-RTU，BA）系統(tǒng)，利用周邊環(huán)境溫度低的優(yōu)勢，實現(xiàn)自然冷源利用率的最大化，使年均 PUE 達1.23。另外，電力對于數(shù)據(jù)中心基礎建設是數(shù)據(jù)中心運營的重要保障，電價成本的高低對數(shù)據(jù)中心的建設和運營均具有較大的影響。數(shù)據(jù)中心全天處于運行狀態(tài)，不但需要充足的電力供給保障服務器、IT設備的正常運行，而且還需要長期運行機房的散熱設備對機房進行降溫處理。因此，電費支出成為數(shù)據(jù)中心運營支出的主要部分，使華為、阿里巴巴、騰訊、今日頭條、百度等科技巨頭對數(shù)據(jù)中心的布局逐漸向河北、內蒙古、貴州等一線周邊城市擴散。如位于烏蘭察布市察哈爾經(jīng)濟技術開發(fā)區(qū)的烏蘭察布華為云數(shù)據(jù)中心，利用電力氣候等獨特優(yōu)勢采取多種措施實現(xiàn)綠色、高質量、低成本的運營模式，達到全年 PUE 小于 1.15，成為業(yè)界最佳水平。阿里巴巴公司利用貴州水電充足、電價成本偏低的優(yōu)勢，將數(shù)據(jù)中心設立在貴州，實現(xiàn)了建設高等級、低成本的數(shù)據(jù)中心。

隨著新基建戰(zhàn)略的不斷推進，數(shù)據(jù)中心逐漸成為各行各業(yè)不可或缺的紐帶，同時，其自身的能耗問題也備受關注。由于冷卻系統(tǒng)耗能占比高、可優(yōu)化空間大，當前通過改善數(shù)據(jù)中心的制冷方式，進而降低數(shù)據(jù)中心能耗，已經(jīng)成為推進我國數(shù)據(jù)中心高質量發(fā)展的必要措施之一。液冷技術是數(shù)據(jù)中心制冷革新的關鍵技術之一，可以較好地提高數(shù)據(jù)中心的能效水平。

在發(fā)展方面，液冷技術在航天等領域內具有很長的應用歷史，而在數(shù)據(jù)中心行業(yè)中發(fā)展較為緩慢。文獻[9]提出了液冷結合風冷技術的雙通道系統(tǒng)，且測試實驗 PUE 結果達 1.1 到 1.2 之間；文獻基于多個城市的液冷散熱樣本數(shù)據(jù)進行分析，構建了不同城市數(shù)據(jù)中心制冷散熱系統(tǒng)的能耗計算模型，有效降低了數(shù)據(jù)中心系統(tǒng)的能耗值。文獻結合數(shù)據(jù)中心節(jié)能分析基礎上，采用熱回收技術，在降低數(shù)據(jù)中心能耗的同時，提升熱回收效益。在國外，也有大量的研究人員對降低數(shù)據(jù)中心的損耗進行大量的研究，產生了較多的應用案例，如 IBM 公司的SuperMUC 充分應用液冷技術的制冷優(yōu)勢，大幅度降低了數(shù)據(jù)中心的損耗率。

針對數(shù)據(jù)中心液冷技術在不同行業(yè)的技術應用發(fā)展，本文主要從浸沒式、冷板式、噴淋式 3 種液冷技術的發(fā)展進行分析，并將 3 種液冷技術的特點進行系統(tǒng)的對比，總結出液冷技術的不同特點以及適用應用場景類型，為數(shù)據(jù)中心液冷技術的場景應用及技術發(fā)展提供參考。

1.液冷技術分析

液冷技術是電子設備進行散熱的技術，主要區(qū)別于目前常用的風冷技術。當前液冷技術包括浸沒式、冷板式、噴淋式等類型，本節(jié)主要介紹上述 3 種液冷技術的系統(tǒng)組成和運行過程，并對 3 種液冷技術進行對比。

1.1浸沒式液冷技術

浸沒式液冷技術通過浸沒發(fā)熱器件，使得器件與液體直接接觸，進而進行熱交換。根據(jù)介質是否存在相變化分為單相浸沒和相變浸沒 2 種類型。本文主要以相變浸沒液冷技術為研究對象，分析其降低數(shù)據(jù)中心能耗工作原理。

浸沒式液冷技術主要由冷卻液、腔體結構、換熱模塊及相關的連接管道等設施構成。其中，冷卻液為數(shù)據(jù)中心的換熱介質，具有高絕緣、低黏度以及超強的兼容特性，是浸沒式液冷技術的主要媒介。主板芯片等發(fā)熱器件表面的散熱性能在很大程度上影響介質沸騰的換熱強度，若芯片表面光滑，則液體在換熱面上的傳熱系數(shù)較高，從而提高熱量的散發(fā)速率。市場上常采用安裝散熱罩的方式，增大芯片的散熱面積，從而提高數(shù)據(jù)中心的散熱性能，降低損耗率。冷卻模塊是浸沒式液冷技術的主要散熱模塊，包含液氣換熱器、循環(huán)泵等多個配件設施。冷卻模塊的部署方式可以影響冷卻液的冷凝換熱效率，改變浸沒式系統(tǒng)的冷卻極限，從而降低數(shù)據(jù)中心的散熱效率，其模塊大多適用于高性能、高熱流的計算場景，如中科曙光 E 級超算設備，完全擺脫風冷散熱的制約，去除風冷式散熱器，配置 512 個計算節(jié)點，系統(tǒng)峰值功耗為 249 kW，PUE 達 1.04，有效解決高密度計算產生的制冷散熱問題。網(wǎng)速科技是最早布局液冷數(shù)據(jù)中心產品線的企業(yè)，通過浸沒式液冷的散熱方式，將散熱能耗降低 90%~95%、設備能耗降低10%~20%，有效降低數(shù)據(jù)中心的總體能耗占比。

1.2冷板式液冷分析

冷板式液冷系統(tǒng)主要由換熱冷板、熱交換單元和循環(huán)管路、冷源等部件構成。冷板式液冷將熱量傳遞給循環(huán)管道中的冷卻液體，通過液體本身的制冷特性將服務器產生的熱量帶走，提高冷板的冷卻效率，大幅度降低數(shù)據(jù)中心的能耗。

換熱冷板通過空氣、水或其他冷卻介質在通道中的強迫對流，帶走服務器中的耗熱能量，可有效降低數(shù)據(jù)中心的 PUE 值。冷板材質一般由高導熱系數(shù)的材料構成，使得冷板表面接近等溫，帶走大量的集中熱量。并且冷板的應用減少冷卻介質對電子元器件的污染，提高數(shù)據(jù)中心設施的使用壽命。冷量分配單元主要為豎直和水平 2 種形式，通過豎直和水平分液單元將低溫冷卻液均勻的分配給每一個分液單元，防止芯片熱量無法有效散出，減少因節(jié)點溫度升高而發(fā)生的隱患，提高系統(tǒng)的計算能力。循環(huán)管路是連接換熱冷板、熱交換單元以及其他相關器件的重要部件，一般分為直連式和環(huán)路式 2 種類型，大多根據(jù)數(shù)據(jù)中心建設的不同需求，選擇合適的管路進行連接。冷源作為帶走數(shù)據(jù)中心產生熱量的最終出口，是冷卻系統(tǒng)的主要組成部分。大多采用室外冷卻設備提供的低溫冷卻水在熱交換單元中充當冷源。冷源與升溫后的冷卻液進行間接接觸，通過帶走冷卻液的熱量進行降溫，使冷卻液以低溫狀態(tài)進入芯片模塊，進而進入散熱循環(huán)。因此，冷源的選擇合理與否，將會直接影響整個系統(tǒng)的使用效率及運行的經(jīng)濟性問題，如阿里巴巴千島湖數(shù)據(jù)中心利用周邊環(huán)境的自然資源，采用湖水自然冷卻系統(tǒng)等技術，使 PUE 達 1.28，有效節(jié)省數(shù)據(jù)中心的建設成本。

1.3.噴淋式液冷分析

噴淋式液冷一般不需要對數(shù)據(jù)中心的基礎設施進行大幅度地改動，只需在噴淋模塊調整噴淋頭，實現(xiàn)噴淋設備與服務器的精準對應。與傳統(tǒng)風冷服務器相比，其可以有效降低器件所產生的熱量，從而控制數(shù)據(jù)中心運行的溫度。噴淋式液冷服務器是整個噴淋系統(tǒng)的主要內部器件，憑借其高性能、低能耗、高可靠運行的特點，可以有效降低數(shù)據(jù)中心能耗。當前，先進的噴淋式液冷服務器大多采用芯片級噴淋液冷技術，通過冷卻液帶走部件產生的熱量，冷卻液的溫度提升后，隨即進入冷卻系統(tǒng)的換熱裝置進行換熱。

2 .液冷技術對比

對冷板式、浸沒式、噴淋式液冷技術進行比對，具體情況如表 1 所示。由表 1 可以看出，冷板式液冷技術在可維護性、空間利用率、兼容性方面具有較強的應用優(yōu)勢；但在成本方面，由于其單獨定制冷板裝置的原因，導致技術應用的成本相對較高。而噴淋式液冷技術則通過改造舊式的服務器和機柜的形式，大幅度減少了數(shù)據(jù)中心基礎設施的建設成本。浸沒式技術與其他 2 種技術相比，雖然器件的可維護性和兼容性較差，但空間利用率與可循環(huán)方面具有較好的表現(xiàn)，降低數(shù)據(jù)中心的能耗。

表1 冷板式、浸沒式、噴淋式液冷技術比較