V HPC serverech se začíná šířit chlazení ponořením v kapalině

Ponorné chlazení počítačů potopením celé sestavy hardwaru do akvária s minerálním olejem nadšenci do PC znají už hodně dlouho. Ovšem jako kuriozitu, kterou asi skutečně dennodenně provozuje jen minimum lidí. Ovšem chlazení hardwaru zcela ponořeného do kapaliny by se teď mohlo prosadit v servrovnách a superpočítačích. Roste o něj zájem, protože by mohlo dovolit prostorově hodně zahustit výpočetní výkon.

Jak podle webu ServeTheHome, tak podle AnandTechu bylo ponorné chlazení silně zastoupené a prezentované na výstavě SC19 (Supercomputing 2019). V serverové oblasti mají totiž růst či již rostou TDP procesorů (Xeony 9200 jsou nyní až na 400W, příští generace socketových Xeonů má být 270W až 300W, Epycy jsou 225W s 280W možností). U akcelerátorů se dokonce hovoří ještě o vyšších spotřebách, do budoucna dokonce snad až 700 W.

Tato řešení předváděla například firma Submer, jejíž technologii pak také provozovali někteří výrobci serverů. Ponorné chlazení spočívá v tom, že kompletní elektronika serveru – tedy deska, procesor, paměti, karty i disky – se ponoří do speciální chladící kapaliny v nádrži, místo aby kapalina cirkulovala potrubím mezi vodními bloky. Ty jsou v HPC serverech často hodně komplikované, protože okruh chladí CPU, paměťové moduly, čipsety, GPU a pak ještě komponenty konektivity/switche a tak podobně. Při ponorném chlazení všechny bloky a trubky odpadají a hardware je naopak ponechán úplně naholo, bez i pasivních chladičů.

Demonstrace tanku na ponorné chlazení Submer na SC19. Lze vidět bubliny vařícího média stoupající ze serveru (Zdroj: ServeTheHome)

Dvoufázové ponorné kapalinové chlazení (Two Phase Immersion Liquid Cooling) se liší od normálního ponorného chlazení v tom, že ještě zapojuje do chlazení proces změny stavu. Využívá varu média při přímém kontaktu s hřejícím procesorem nebo třeba GPU. Na demonstracích je pak krásně vidět, jak teplý heaspreader generuje bubliny. Toto je umožněno tím, že je místo vody či oleje použitá speciální kapalina, typicky organického vzorce, inertní a nevodivá (a minimálně některé jsou i zcela zdravotně nezávadné). Tato média jako 3M Novec nebo Fluorienert mají nízkou teplotu varu (okolo 59 stupňů), takže běžící čip je dokáže uvařit, aniž by se sám přehříval. Odpařování kapaliny absorbuje kromě tepla potřebného k ohřátí na danou teplotu ještě skupenské teplo varu, takže tento přechod z jednoho stavu do druhého je velice efektivní pro chlazení.

Schéma systému používajícího dvoufázové ponorné kapalinové chlazení

Navíc bubliny páry stoupají samy na hladinu kapaliny v nádrži, což samo o sobě zajišťuje „cirkulaci“ pomyslného okruhu. Odpařená kapalina se zase zchladí kondenzací a vrací se do tanku, kde je server – respektive zde celý rack – ponořen. Výhoda tohoto stylu chlazení je ve vysoké efektivitě a také v tom, že celkové ponoření hardwaru víceméně zajišťuje, že se nepřehřeje žádná z komponent. Nicméně vyžadováno je napojení na rozvod vody, která odvádí teplo z kondenzujícího se média. Obecně bude tento typ chlazení poměrně drahý, minimálně na pořízení (poté již asi efektivita i může šetřit nějaké náklady na energii).

Dvoufázové ponorné kapalinové chlazení, zde testovací elektronika generující teplo (Zdroj: AnandTech)

Atraktivita těchto řešení je v tom, že by měla umožnit zachovat hustotu GPU či CPU v serverech, i když jejich TDP stoupnou, nebo ji dokonce ještě vylepšit. Submer nabízí tank „SmartPodXL“, jenž dovoluje chladit serverový rack o celkem 23U (jednotlivé servery jsou v něm ovšem zasunuté svrchu na výšku, ne horizontálně jako obvykle) a zvládne uchladit celkovou spotřebu až 50 kW. Firma má i silnější verze SmartPod XL+, ty pak zvládají až 100kW spotřeby/tepla. Oba tanky podporují jak klasické 19″ skříně, tak i šasi formátu OpenCompute Project.

Toto je ale jen technologie s běžným jednofázovým ponorným chlazením. Řešení na bází dvoufázového principu by měla být ještě efektivnější v tom smyslu, že na daný objem tepla potřebují méně energie navíc na jeho odvedení pryč.

Demonstrace tanku na ponorné chlazení Submer na SC19, hardware od firmy 2CRSI (Zdroj: ServeTheHome). Submer ale používá běžné jednofázové chlazení

Ponorné chlazení je ovšem asi něco, co zrovna neuvidíme přenesené ze serverů do PC, neboť zatímco princip fungování je velmi jednoduchý, samotná použitá zařízení jsou příliš nákladná a komplikovaná pro levné počítače, které se dají účinně ochladit mnohem konvenčnějšími metodami. I v serverech asi půjde o speciální dražší řešení, které se uplatní tam, kde jsou vysoké požadavky na výkon (a tím chlazení) a zároveň na velké zahuštění komponent. Ale asi nebude normou ve středním proudu serverů.

Contents

Problémy s ovladači GeForce: Rozbité chlazení, pak horší výkon

Zdá se, že pokud používáte grafickou kartu Nvidia, může vás po poslední aktualizaci ovladačů čekat nepříjemné překvapení. Vypadá to totiž, že některé změny, které v kódu Nvidia provedla se dotknuly řízení napájení a snížily výkon karet GeForce aktuální generace RTX 5000. Podle uživatelů ovladač zřejmě zavedl snížený strop napájecího napětí, které GPU dostává. A současně s tím se snížily také frekvence GPU ve hrách. Celý článok „Problémy s ovladači GeForce: Rozbité chlazení, pak horší výkon“ »

Po pamětech a SSD nás prý čeká i zdražování chladičů a zdrojů

Poté, co nám hype kolem umělé inteligence obrazně řečeno „vzal“ paměti a SSD, protože kvůli němu jejich ceny strmě stoupají, se teď patrně AI vrací pro další kořist. Podle informací z čínského průmyslu by dopady na trh mohly zdražit i další komponenty, tentokrát chladiče a zdroje. Jejich výrobcům se totiž prodražují základní suroviny a to se teď promítne i do ceny různých výrobků. Jde například o měď, jejíž cena stoupla na rekordní úroveň. Celý článok „Po pamětech a SSD nás prý čeká i zdražování chladičů a zdrojů“ »

Tavení konektoru? Část GeForce RTX 5090 ho řeší termální vložkou

Od generace GeForce RTX 4000 visí nad grafikami Nvidia (naštěstí by to mělo hrozit hlavně u nejvýkonnějších) problém s přehříváním a tavením 12+4pinových napájecích konektorů. U novějších je použitá verze konektoru 12V-2×6, která má chránit před špatným zasunutím, a nedávno jsme tu probírali i další opatření od Zotacu. Zdá se, že na teď vycházejících grafikách se objevila ještě jedna ochrana, která řeší samotnou příčinu, tedy teplotu. Celý článok „Tavení konektoru? Část GeForce RTX 5090 ho řeší termální vložkou“ »

Komentáre (6) Pridať komentár

  1. Tak ono ani nie je taký problém dosiahnuť chladiaci výkon v kvapaline ale problém bude s konektormi a rozšíreniami. Ťažko sa predstavuje že len kôly navýšeniu ram či pripojenia nového ethernetu alebo len blbej KVM bude treba server odpojiť celkom, vytiahnuť, vysušiť dôkladne vyčistiť požadovaný port nejakou tou chémiou, to máte tak pol hodinku roboty a samozrejme to na stole odskúšať nepôjde takže šup naspäť a nedaj bože niečo nebude fungovať tak znovu.
    Takže možno nejaké superpočítače, výpočty vesmíru na univerzitách atď ale „štandardné“ enterprise riešenie alebo datacentrá určite nie.

    1. ale ak máš niekde mechanický kontakt tlakom, ako je napríklad v drvivej väčšine konektorov, tak tam by predsa kvapalina nemala vadiť, pritlačením komponentu sa kvapalina z bezprostredného okolia kontaktu tlakom vypudí a kontakt funguje, ni?

      1. Pri kvapaline ktoré nie je vodivá čiže je izolantom a ešte môže zanechávať „film“ si nie som veľmi istý či toto bude stačiť na to aby Ti kontakt o ploche 0,x mm2 bezproblémovo fungoval. Bežné kontakty nemajú veľkú prítlačnú silu a spoliehať sa na to pri serverových riešeniach…. no neviem

        1. Věřím, že to nebude příliš velký problém. Konstrukci lze uzpůsobit tak, aby často měněné součásti stály mimo nádobu, přitom lze využít výhradně standardních komponent. Jestli provozní náklady vyváží vysoké pořizovací, což dnes ještě asi nelze s jistotou říci, bude spíše otázkou jiných aspektů věci.

        2. vzduch je takisto izolant a tekutina a voilááá, funguje to bez problémov! naozaj nevidím dôvod, prečo by to v kvapaline nemalo fungovať podobne. samozrejme, má iné mechanické vlastnosti ako vzduch, ale princíp spojenia el. okruhu je rovnaký.

  2. Kdybych mě TDP tlačilo k vodníku, uhnu k tanku s minerálním olejem, hlavně ze zvědavosti a kvůli bezúdržbovosti.

Pridaj komentár

Vaša e-mailová adresa nebude zverejnená. Vyžadované polia sú označené *