Chłodzenie cieczą a gęstość szaf AI
Śledź ciepło wychodzące z gęstej szafy i zobacz, gdzie kończą się możliwości powietrza, co zastępuje ciecz, a czego nie.
Efekty nauki
- Wyjaśnij, dlaczego powietrze ma praktyczny sufit gęstości
- Porównaj drogi ciepła w RDHx, direct-to-chip i chłodzeniu immersyjnym
- Uwzględnij resztkowe obciążenie powietrzne, które zostawia instalacja cieczowa
UDZIAŁ PRZECHWYCONEGO CIEPŁA
CAPTURE = HEAT REMOVED BY LIQUID ÷ TOTAL CABINET HEAT
Reszta wciąż trafia do powietrza w sali. Projekt, który nie podaje tego udziału, nie zaplanował tej części, której nie przechwytuje.
Powietrze nie zawodzi; po prostu kończy mu się miejsce
Powietrze niesie ciepło proporcjonalnie do tego, ile go przepływa i o ile rośnie jego temperatura. Gdy szafa pobiera więcej mocy, jedna z tych dwóch wielkości musi wzrosnąć. Większy przyrost temperatury ogranicza to, co sprzęt toleruje na wlocie, więc musi rosnąć ilość powietrza – a dostarczenie, utrzymanie w zabudowie i odprowadzenie takiej ilości przez salę IT staje się coraz trudniejsze.
Ta granica jest praktyczna, a nie wyrażona twardą liczbą. Objawia się płytami podłogowymi, które nie przepuszczą dość powietrza, zabudową, której nie da się wystarczająco uszczelnić, energią wentylatorów rosnącą szybciej niż obciążenie i szafami, których własne wentylatory pracują tak intensywnie, że stają się znaczącą częścią poboru mocy. Sala nie przestaje działać po przekroczeniu progu; staje się po prostu coraz mniej rozsądna.
Trzy sposoby na zbliżenie cieczy do ciepła
Wymiennik ciepła na tylnych drzwiach (RDHx) zostawia szafę chłodzoną powietrzem i przechwytuje powietrze wylotowe, zanim trafi do sali. To najmniej inwazyjny krok: kierunek przepływu powietrza i sprzęt się nie zmieniają, a wdrażać go można szafa po szafie. Wersje pasywne polegają na wentylatorach urządzeń, które muszą pokonać opór wymiennika; wersje aktywne mają własne wentylatory, a więc i własny pobór mocy, i własne tryby awarii.
Direct-to-chip przykłada płyty chłodzące do procesorów i akceleratorów, więc większość ciepła odchodzi w cieczy, a nie w powietrzu. Chłodzenie immersyjne idzie dalej i zanurza sprzęt w cieczy dielektrycznej, niemal całkowicie usuwając drogę powietrza. Każdy krok skraca drogę ciepła i każdy zmienia serwisowalność, masę, kwalifikację sprzętu i to, co musi zapewnić obiekt.
Obciążenie resztkowe – to ono zaskakuje
Pamięci, dyski, przetwornice zasilania i podzespoły sieciowe zwykle nie są chłodzone cieczą, więc znacząca część ciepła szafy wciąż trafia do powietrza, nawet przy direct-to-chip. Projekty, które podają udział przechwytywanego ciepła i wymiarują stronę powietrzną na resztę, zachowują się zgodnie z oczekiwaniami. Projekty zakładające, że ciecz załatwi wszystko, odkrywają gorącą salę z instalacją powietrzną zmniejszoną pod obciążenie, które wcale nie zniknęło.
Ta sama logika dotyczy sali wokół poda chłodzonego cieczą. Zmniejszenie obciążenia powietrznego w jednej strefie zmienia bilans powietrza w całej sali, a system chłodzenia zwymiarowany pod stary rozkład może nie dostarczać powietrza sensownie przy nowym. Mieszane instalacje wymagają ponownego przemyślenia projektu powietrznego, a nie jego zwykłego zmniejszenia.
Obieg cieczy to nowa zależność, a nie usunięta
Ciecz na poziomie szafy jest zwykle oddzielona od obiegu obiektowego jednostką dystrybucji chłodziwa (CDU), która steruje temperaturą zasilania i przepływem docierającym do sprzętu. Ta jednostka ma własne zasilanie, sterowanie i zachowanie przy awarii, a wszystko za nią je dzieli – co czyni ją dokładnie tym rodzajem wspólnej zależności, której lekcja o łańcuchu zasilania uczy operatorów szukać.
Wokół niej pojawia się praca, której instalacja chłodzona powietrzem nigdy nie musiała wykonywać: typy złączy i to, czy można je bezpiecznie łączyć i rozłączać, detekcja wycieków i to, co uruchamia, chemia i filtracja cieczy oraz procedura serwisowa dla węzła z podłączoną cieczą. Nic z tego nie jest egzotyczne, a wszystko jest nowe.
Gęstość zmienia budynek, nie tylko szafę
Gęsta instalacja rodzi pytania daleko wykraczające poza projekt cieplny. Obciążenie stropu – bo wypełniony zbiornik immersyjny lub szafa chłodzona cieczą może być znacznym obciążeniem konstrukcyjnym. Rozdział zasilania – bo ta sama powierzchnia potrzebuje teraz kilka razy więcej mocy. Rozruch i odbiory – bo testy odbiorcze instalacji cieczowej to nie te same testy, których używała sala chłodzona powietrzem.
Dlatego duża gęstość to decyzja na poziomie obiektu, a nie modernizacja szafy. Rozsądna kolejność to najpierw droga ciepła, potem tor zasilania, potem skutki konstrukcyjne i serwisowe, a na końcu sprzęt – zamiast zaczynać od produktu i dopiero potem odkrywać budynek.
Jak to wygląda w Data Center Fan
Data Center Fan przedstawia zaawansowane chłodzenie jako wpływ na efektywność i pojemność obiektu. Gra nie modeluje obiegów cieczy, udziałów przechwytywanego ciepła ani dystrybucji chłodziwa; laboratorium Akademii i pod chłodzony cieczą w Design Pro traktują je osobno i opisują swoje granice.
Częste nieporozumienie
„Chłodzenie cieczą eliminuje potrzebę chłodzenia powietrzem”. Podzespoły, które nie są chłodzone cieczą, nadal oddają ciepło do sali. Resztkowe obciążenie powietrzne trzeba zaplanować jawnie, a instalacja, która zakłada coś innego, kończy się gorącą salą.
Test wiedzy
Instalacja direct-to-chip przechwytuje do cieczy 75% ciepła szafy. Co dzieje się z resztą?
- Znika
- Nadal trafia do powietrza w sali
- Pochłania ją jednostka dystrybucji chłodziwa
Podzespoły bez płyt chłodzących oddają ciepło do powietrza tak jak wcześniej. Instalacja powietrzna nadal musi obsłużyć ten udział, dlatego projekty podają udział przechwytywanego ciepła, zamiast zakładać pełne przechwycenie.
Najczęściej zadawane pytania
Przy jakiej gęstości chłodzenie powietrzem przestaje działać?
Nie ma jednego progu. Powietrze staje się coraz mniej rozsądnym wyborem w miarę wzrostu potrzebnej ilości – objawia się to płytami, które nie dostarczą dość powietrza, zabudową, której nie da się wystarczająco uszczelnić, i energią wentylatorów rosnącą szybciej niż obciążenie. To, gdzie dana sala przestaje mieć sens, zależy od jej rozdziału powietrza, zabudowy i temperatury nawiewu.
Czym różni się chłodzenie direct-to-chip od immersyjnego?
Direct-to-chip przykłada płyty chłodzące do głównych podzespołów, a resztę szafy zostawia chłodzoną powietrzem. Chłodzenie immersyjne zanurza sprzęt w cieczy dielektrycznej, niemal całkowicie usuwając drogę powietrza. Immersja odbiera więcej ciepła, ale znacznie mocniej zmienia serwisowalność, masę, obsługę cieczy i kwalifikację sprzętu.
Czy serwery AI potrzebują chłodzenia cieczą?
Nie zawsze, ale konfiguracje gęsto wypełnione akceleratorami często przekraczają to, co rozsądnie da się szafie dostarczyć w powietrzu. To, czy konkretna instalacja tego wymaga, zależy od mocy na szafę, rozdziału powietrza i zabudowy w sali oraz od tego, co dopuszcza producent sprzętu.
Co to jest CDU w chłodzeniu cieczą?
Jednostka dystrybucji chłodziwa (coolant distribution unit), która oddziela obieg cieczy na poziomie szafy od obiegu obiektowego i steruje temperaturą zasilania i przepływem docierającym do sprzętu. Jest wspólną zależnością dla wszystkiego, co za nią, i ma własne zasilanie, sterowanie i zachowanie przy awarii.
Czy chłodzenie cieczą jest bardziej efektywne?
Może być, bo krótsza droga ciepła pozwala na wyższe temperatury chłodziwa i mniejszą energię wentylatorów, co może poszerzyć okno, w którym chłodzenie mechaniczne jest ograniczone. Zysk zależy od udziału przechwytywanego ciepła, temperatur w obiegach i tego, co dzieje się z resztkowym obciążeniem powietrznym – nie jest automatyczny.
Co się dzieje, gdy obieg chłodzenia cieczą przecieka?
To zależy od cieczy, miejsca i zainstalowanej detekcji, dlatego detekcja wycieków i zdefiniowana reakcja są częścią projektu, a nie dodatkiem na koniec. Pytania eksploatacyjne – kto dostaje powiadomienie, co się odcina, jak serwisuje się węzeł – wymagają odpowiedzi, zanim stanie pierwsza szafa.