Erityisraportti nestejäähdytyksestä datakeskusteollisuudessa
Sep 23, 2024
Jätä viesti
--Singularity on saapunut AI-aallon keskellä, kotimaiset ja kansainväliset johtajat purkautuvat
I Nouseva sirun virrankulutus: Nestejäähdytys on välttämätöntä
1. Nestejäähdytys varmistaa, että suuritehoiset komponentit toimivat normaalisti
Yli puolet elektroniikkakomponenttien vioista johtuu liiallisista lämpötiloista, ja lämpötilan osuus vioista on 55 %. "10-astesäännön" mukaan jokainen 10 asteen lämpötilan nousu huoneenlämpötilasta kaksinkertaistaa epäonnistumisasteen ja lyhentää käyttöikää. GPU-virheiden määrä kasvaa, mikä vaikuttaa palvelimen käyttöikään. Yksittäisten hakkeiden tehonkulutus kasvaa nopeasti, mikä lisää lämmöntuotantoa. Valtavirran prosessorisirujen, kuten prosessorien, teho on noin 200 wattia, uusimpien suoritinten teho on yli 350 wattia ja GPU:t yli 1000 wattia. Ilmajäähdytys ei enää riitä korkealämpötiheyksisten elektronisten komponenttien jäähdyttämiseen, kun taas nestejäähdytys tarjoaa paljon paremman lämmönvaihtotehokkuuden. Nesteiden tilavuuslämpökapasiteetti on 1000-3500 kertaa suurempi kuin ilman ja niiden lämmönjohtavuus on 20-30 kertaa suurempi, mikä antaa nestejäähdytyksellä paljon paremman jäähdytyskyvyn samassa tilassa.
Nestejäähdytys imee tehokkaasti komponenttien tuottaman lämmön, mikä tarjoaa tarkan jäähdytyksen lämpöä tuottaville elementeille ja pitää CPU:n ydinlämpötilat alle 65 asteessa (noin 25 astetta alhaisempi kuin ilmajäähdytys). Se myös estää merkittävät lämpötilan vaihtelut äkillisten suurtaajuustoimintojen aikana ja varmistaa järjestelmän turvallisuuden ja luotettavuuden. Nestejäähdytys mahdollistaa jopa sirujen ylikellotuksen, mikä parantaa sirun suorituskykyä noin 10 %-30%.

▲ Elektronisten komponenttien viat
2. Kotimaiset ja kansainväliset sirujäähdytystekniikat ovat vähitellen siirtymässä nestejäähdyttämiseen
Nestejäähdytys voi maksimoida lastupotentiaalin. Esimerkiksi saman suorituskyvyn palvelimissa nestejäähdytteinen versio ylittää ilmajäähdytteisen version noin 10 %. GB200 ottaa käyttöön uuden, tehokkaan nestejäähdytteisen kotelo-arkkitehtuurin, ja NVIDIA:n tulevat tuotteet voivat siirtyä täysin ilmajäähdytyksestä nestejäähdyttämiseen. NVIDIA:n lisäksi myös kotimaisten sirujen, kuten Huawei Ascendin, nestejäähdytyksen käyttö on lisääntynyt huomattavasti.
NVIDIA GB200 NVL72 on monisolmuinen nestejäähdytteinen telinetason laajennusjärjestelmä, joka yhdistää 36 Grace Blackwell -supersirua, mukaan lukien 72 Blackwell GPU:ta ja 36 Grace CPU:ta, jotka on yhdistetty viidennen sukupolven NVLinkin kautta. GB200 NVL72:ssa käytetty nestejäähdytystekniikka ei ainoastaan paranna laskentatiheyttä ja pienentää jalanjälkeä, vaan myös vähentää merkittävästi hiilidioksidipäästöjä ja energiankulutusta suuren kaistanleveyden ja matalan latenssin GPU-viestinnän ansiosta. Verrattuna perinteisiin ilmajäähdytteisiin NVIDIA H100 -infrastruktuureihin GB200 tarjoaa 25 kertaa tehokkaamman suorituskyvyn samalla virrankulutuksella ja vähentää vedenkulutusta. TrendForcen mukaan alkuperäisessä GB200 NVL36 -arkkitehtuurissa voi olla sekä ilma- että nestejäähdytysratkaisuja, mutta korkeampien jäähdytysvaatimusten vuoksi NVL72 priorisoi nestejäähdytyksen. GB200-kaappijärjestelmän nestejäähdytyksen toimitusketju on jaettu viiteen pääkomponenttiin: kylmälevyt, jäähdytysnesteen jakeluyksiköt (CDU), jakoputket, pikakatkaisimet (QD) ja takaoven lämmönvaihtimet (RDHx). CDU, avainjärjestelmä, säätelee jäähdytysnesteen virtausta koko järjestelmässä varmistaakseen, että kaapin lämpötilaa säädetään esiasetetun TDP-alueen sisällä. Vertiv on NVIDIA AI -ratkaisujen tärkein CDU-toimittaja, kun taas Chicony, Auras, Delta ja CoolIT jatkavat testaus- ja validointityötään.

▲ Nestejäähdytys
3. Valmistajat kilpailevat nestejäähdytteisissä palvelimissa; Toimitusmäärät kasvavat nopeasti
IDC:n mukaan Kiinan nestejäähdytysteollisuus on vielä alkuvaiheessa, mutta maa on jo kuronut umpeen teknologisen kuilun ulkomaisiin kollegoihinsa. Itse asiassa Kiinan asiaankuuluvalla teollisella ketjulla on johtava asema suurissa kaupallisissa sovelluksissa. Vuonna 2023 Kiinan nestejäähdytteisten palvelinmarkkinoiden arvo oli 1,42 miljardia dollaria, kasvua 48 % edellisvuodesta. Toimitukset nousivat 161 000 yksikköön, mikä merkitsee 57,3 % kasvua. IDC ennustaa Kiinan nestejäähdytteisten palvelinmarkkinoiden yhdistetyn vuotuisen kasvuvauhdin (CAGR) olevan 45,8 % vuosina 2023–2028, ja markkinoiden odotetaan nousevan 10,2 miljardiin dollariin vuoteen 2028 mennessä.
Valtavirran palvelinvalmistajat laajentavat aggressiivisesti nestejäähdytysmarkkinoilla. Markkinaosuudella mitattuna Inspur, HyperFusion ja NingChang sijoittuivat kolmen parhaan toimittajan joukkoon vuonna 2023, ja niillä on yhteensä yli 70 % markkinoista.
Vaikka markkinat ovat suhteellisen keskittyneet, nopea kasvu ja monipuolinen teollisuuden kysyntä kaventavat vähitellen valtavirran toimittajien markkinaosuuseroja. Inspur jatkaa "All in Liquid Cooling" -strategiaansa, jonka tavoitteena on saavuttaa hintapariteetti ilma- ja nestejäähdytyksen välillä. Sen nestejäähdytteiset palvelimet palvelevat asiakkaita sellaisilla aloilla kuin Internet, rahoitus, palvelut, valmistus ja julkiset palvelut. Yritys on onnistuneesti ottanut käyttöön nestejäähdytteisiä palvelimia laajassa mittakaavassa johtavissa Internet-yrityksissä sekä rahoitus-, koulutus- ja tutkimussektoreilla, mikä on luonut uuden maailmanlaajuisen vertailukohdan ensimmäisellä tuulettimella, täysin kylmälevypalvelimella.

▲ Nestejäähdytteisten palvelinvalmistajien markkinaosuus
IDC:n mukaan vuonna 2023 Internet-teollisuus oli edelleen suurin nestejäähdytteisten palvelimien ostaja Kiinassa, sen osuus markkinoista oli 46,3 %, ja kysynnän odotetaan jatkuvan vahvana. Lisäksi teleoperaattorit ja julkishallinnon käyttäjät kokevat nopeaa kasvua nestejäähdytteisten datakeskusten kysynnässä. Muut teollisuudenalat, kuten rahoitus, palvelut, valmistus ja julkiset palvelut, etsivät aktiivisesti sopivia nestejäähdytysratkaisuja.
II Nestejäähdytys lisää lämpötilan säätelyn arvoa, teollisuuden käännekohta näköpiirissä
1. Nestejäähdytyksen penetraatio lisääntyy palvelimen tehon ja hiilineutraaliustavoitteiden kasvaessa
Palvelinkeskukset ovat suuria sähkönkuluttajia, ja niiden osuus kansallisesta sähkönkäytöstä on noin 2 %-3 %. Politiikat ovat yhä tiukempia datakeskusten energiankulutuksen suhteen. Vuonna 2021 Kiinan konesalin sähkönkulutus oli 216,6 miljardia kWh, mikä vastaa 2,6 % kansallisesta sähkön kokonaiskulutuksesta, ja hiilidioksidipäästöt olivat 135 miljoonaa tonnia eli 1,14 % kansallisista kokonaispäästöistä. Kaksoishiilitavoitteen ansiosta datakeskukset kohtaavat ennennäkemättömän energiankulutuksen ja jäähdytyksen haasteet. Rakentamisen jälkeen sähkökustannusten osuus on 60 %-70 % perinteisten ilmajäähdytteisten datakeskusten käyttö- ja ylläpitokustannuksista.
PUE (Power Usage Effectiveness) on mittari, jota käytetään arvioimaan datakeskusten energiatehokkuutta. Se on palvelinkeskuksen kokonaisenergian suhde sen IT-laitteiden kuluttamaan energiaan. Ennen vuotta 2013 Kiinan suurten palvelinkeskusten keskimääräinen PUE ylitti 1,7:n, mutta vuoden 2019 loppuun mennessä se oli pudonnut 1,46:een. "Kolmivuotinen toimintasuunnitelma uusien palvelinkeskusten kehittämiseksi (2021-2023)" pyrkii laskemaan uusien suurten palvelinkeskusten PUE:n alle 1,3:n vuoden 2023 loppuun mennessä, ja tavoitteet ovat alle 1,25 kylmissä ja ankarissa olosuhteissa. kylmät alueet. "Eastern Data, Western Computing" -käytäntö edellyttää, että solmut Sisä-Mongoliassa, Gansussa, Ningxiassa ja Guizhoussa laskevat PUE:n alle 1,2:n.
Palvelinkeskusten ilmastointijärjestelmien energiankulutus on avainasemassa PUE:n vähentämisessä kohtuulliselle tasolle. Arvioiden mukaan kun ilmastointijärjestelmän energiankulutus on 38 %, 26 % ja 17,5 % kokonaisenergiasta, vastaavat PUE-arvot ovat 1,92, 1,5 ja 1,3.
Älykkäiden laskentapalvelimien tehotiheys on kasvanut merkittävästi ja saavuttanut tasot, joita ilmanjäähdytysjärjestelmät eivät pysty tukemaan. Aikaisemmin ilmajäähdytysjärjestelmät mukautuivat korkeampiin lämpötiheyksiin tuomalla jäähdytyslähde lähemmäksi lämmönlähdettä tai sulkemalla kylmät ja kuumat käytävät, mikä toimi alle 12 kW:n jäähdytystä vaativissa kaapeissa. Kuitenkin, kun telineen tiheys ylittää 20 kW, nämä menetelmät heikkenevät. Vertiv uskoo, että erittäin tiheiden telineiden (30 kW tai enemmän) käyttöönotto ei jätä muuta vaihtoehtoa kuin käyttää nestejäähdytystä. Riippumatta siitä, miten järjestelmä on konfiguroitu tai optimoitu, ilmajäähdytys ei pysty tarjoamaan IT-järjestelmien luotettavuuden ylläpitämiseen tarvittavaa jäähdytystehoa.
Siksi jäähdytysteknologiat ovat kehittyneet seuraavalla tavalla datakeskuksen PUE:n vähentämiseksi ja suuritehoisten kaappien jäähdytystarpeiden täyttämiseksi:
- Vaihe 1 (1998-2004):Käytetään pääasiassa ilmajäähdytteisiä suoria paisuntajärjestelmiä, mukaan lukien kompressorit, höyrystimet, paisuntaventtiilit ja lauhduttimet, joissa kylmäaineet ovat yleensä freonia.
- Vaihe 2 (2005-2009):Pääasiassa käytetyt vesijäähdytteiset järjestelmät, mukaan lukien jäähdyttimet, jäähdytystornit, vesipumput ja jäähdytetyn veden päätelaitteet.
- Vaihe 3 (2010-2023):Hyväksytty haihdutusjäähdytystekniikka, joka tuottaa viileää ilmaa tai vettä kuivalla ilmalla. Tämä tekniikka voi tarjota jäähdytysilmaa tai vettä tarpeiden mukaan. Koska se ei vaadi perinteisiä kompressoreja, se kuluttaa vähemmän energiaa ja sitä käytetään palvelinkeskuksissa, jotka vaativat ympärivuotista jäähdytystä. Epäsuora haihdutusjäähdytys, tehokkain ratkaisu luonnollisten jäähdytyslähteiden hyödyntämiseen, voi vähentää jäähdytysenergian kulutusta 30 % perinteisiin jäähdytysvesijärjestelmiin verrattuna.
- Vaihe 4 (2024-nykyinen):Nestejäähdytystekniikka parantaa olennaisesti tapaa, jolla päälaitteet hajottavat lämpöä. Se vastaa paremmin suuritiheyksisten telineiden ja sirujen tarkat jäähdytystarpeet ja tarjoaa etuja, kuten alhaisemman energiankulutuksen, suuremman lämmönhajoamisen, alhaisemman melun ja alhaisemmat kokonaiskustannukset (TCO). Nestejäähdytyksellä tarkoitetaan nesteen käyttämistä jäähdytysväliaineena lämmön vaihtamiseksi palvelimessa olevien lämpöä tuottavien komponenttien kanssa, mikä kuljettaa lämmön pois varmistaakseen, että palvelin toimii turvallisella lämpötila-alueella. Se soveltuu skenaarioihin, joissa tarvitaan lisää laskentatehoa, energiatehokkuutta ja käyttöönottotiheyttä.
2. Kylmälevyn nestejäähdytys on erittäin kypsä ja laajalti käytetty
Sen mukaan, kuinka jäähdytysväliaine koskettaa palvelinta, nestejäähdytys voidaan luokitella epäsuoraan jäähdytykseen ja suorajäähdytykseen. Epäsuoraan jäähdytykseen kuuluu ensisijaisesti kylmälevynestejäähdytys, joka jaetaan edelleen yksivaiheiseen ja kaksivaiheiseen kylmälevyjäähdytykseen sen mukaan, tapahtuuko jäähdytysväliaine faasimuutosta. Suorajäähdytys sisältää upotus- ja ruiskujäähdytyksen, jossa neste tulee suoraan kosketukseen lastun tai telineen kanssa, ja se jaetaan yksivaiheiseen ja kaksivaiheiseen uppojäähdytykseen sen mukaan, tapahtuuko jäähdytysväliaine vaihemuutosta.
Kylmälevynestejäähdytys on tällä hetkellä laajimmin käytetty konesaliteollisuudessa, ja sen ensisijainen sovellus nestejäähdytysteollisuudessa on korkean tiheyden laskentaskenaarioissa. Kylmälevynestejäähdytyksellä tarkoitetaan kylmälevyn asentamista suoraan sirulle lämmönvaihtoa varten, jolloin pumppukäyttöinen neste kiertää lämmön poistamiseksi lämmönvaihtimen kautta. Kylmälevynestejäähdytyksen toimintaperiaatteena on upottaa mikrokanavaiset jäähdytyselementit lämmönlähteen päälle, haihduttaa lämpöä näiden mikrokanavien läpi virtaavan nesteen kautta ja sitten siirtää se lämmönvaihtimeen, joka edelleen ohjaa lämpöä ympäristöön.
Kylmälevynestejäähdytys kypsällä teknologiallaan, kustannusetuilla ja toiminnan vakaudella on tällä hetkellä yleisin ratkaisu korkean suorituskyvyn laskemiseen ja tekoälylaskentaan palvelinkeskuksissa. Kylmälevyn nestejäähdytys johtaa tyypillisesti PUE-arvoon 1,2 tai alle, jopa 1,05:een joissakin tapauksissa. Suorat nestejäähdytystekniikat, kuten upotusjäähdytys, tarjoavat yleensä paremman suorituskyvyn, mutta niitä käytetään harvemmin korkeampien teknisten riskien ja kustannusten vuoksi. Kylmälevyjäähdytyksellä on useita etuja muihin nestejäähdytystekniikoihin verrattuna, mukaan lukien yksinkertainen asennus, alhaiset kustannukset, skaalautuvuus, helppo ylläpito ja lyhyet rakennusajat. Esimerkiksi Meixin ehdottaa, että kylmälevynestejäähdytys voisi vähentää laskentatehon energiankulutusta jopa 30 %.
Käytännössä 75 % globaaleista konesalien nestejäähdytysjärjestelmistä käyttää kylmälevynestejäähdytystekniikkaa, ja kylmälevynestejäähdytyksestä on tullut myös Kiinan tekoälyn laskentakeskusten valtavirtaratkaisu. Kylmälevynestejäähdytyksen odotetaan jatkavan voimakasta kasvuaan. Kiinan nestejäähdytteisten palvelimien kasvuvauhti ylittää 50 % seuraavan viiden vuoden aikana, ja kylmälevy nestejäähdytysjärjestelmät hallitsevat markkinoita.
3. Nestejäähdytys on tehokkaampaa ja operaattorit edistävät sitä laajasti
Tällä hetkellä tekoälylaskentaa varten rakennettavien palvelinkeskusten aiheuttama kaapin lämmön tiheyden nopea kasvu on lisännyt nestejäähdytteisten ratkaisujen kysyntää. Nestejäähdytteisten palvelimien markkinaosuus jatkaa kasvuaan, kun taas perinteisten ilmajäähdytteisten palvelimien osuus laskee nopeasti.

▲ Nestejäähdytyksen vuositulo verrattuna ilmajäähdytykseen
Vuonna 2022 viisi Kiinan tieto- ja viestintäteknologian akatemian johtamaa nestejäähdytysalan standardia otettiin virallisesti käyttöön. Kolme suurta teleoperaattoria suunnittelevat pilotoivansa nestejäähdytysteknologiaa 10 prosentissa uusista konesaliprojekteista vuonna 2024 ja yli 50 prosentissa konesaliprojekteista nestejäähdytystekniikkaa vuoteen 2025 mennessä. China Telecom on jo suunnitellut ja rakentanut älykkään laskentakeskusklusterin vuonna 2024. Shanghai, joka pystyy tukemaan laajamittaista mallikoulutusta biljoonien parametrien avulla. Kotimaisilla laskentaominaisuuksilla toimivassa klusterissa on 10,000 korttia yhdessä poolissa, joten se on ensimmäinen kotimaassa valmistettu laajamittainen nestejäähdytteinen laskentaklusteri, joka tukee yhtä 10,{{11} } korttia.
Operaattoreiden vauhti nestejäähdytyksen edistämisessä ylittää markkinoiden odotukset, mikä edistää kustannusten optimointia ja standardien parantamista. Konesalikaappien kilpailukyvyn parantamiseksi ja virrankulutuksen vähentämiseksi lämpötilan säätelyssä kolmannen osapuolen datakeskustoimittajat voivat nopeuttaa nestejäähdytyksen käyttöä, mikä johtaa nestejäähdytteisten datakeskusten laajempaan alueelliseen jakeluun Kiinassa. Kun nestejäähdytyksen datakeskusteknologia kehittyy ja käyttöönottokustannukset laskevat, yhä useammat IDC-palveluntarjoajat (Internet Data Center) tutkivat nestejäähdytyksen käyttöönottoa. Idässä käyttäjät, jotka ovat jo ottaneet käyttöön nestejäähdytyspalvelinkeskuksia, näkevät lisääntynyttä nestejäähdytysratkaisujen kysyntää tiukempien energiankulutusvaatimusten täyttämiseksi, mikä laajentaa edelleen nestejäähdytteisten datakeskusten kehitystä Keski- ja Länsi-alueilla.
4. Nopea kasvu nestejäähdytysmarkkinoilla
Nestejäähdytysalan ketjuun kuuluu tuotantoketjun alkupään tuotekomponenttien toimittajat, keskivirran nestejäähdytyspalvelinten ja -infrastruktuurin toimittajat sekä loppupään laskentatehon käyttäjät. Ylävirtaan kuuluvat pääasiassa tuotekomponenttien ja nestejäähdytyslaitteiden, kuten kylmälevyjen, CDU:iden (Coolant Distribution Units), pikakatkaisijoiden, solenoidiventtiilien, upotusnestejäähdytyssäiliöiden, jakoputkien ja jäähdytysnestetuotteiden toimittajat. Keskivirtaan kuuluvat nestejäähdytyspalvelinten valmistajat, sirujen valmistajat sekä nestejäähdytyksen integrointitilat, moduulit ja kaapit. Loppupäässä ovat teleoperaattorit, Internet-yritykset ja asiakkaat sellaisilla aloilla kuin televiestintä, Internet, hallitus, rahoitus, liikenne ja energia.
Teollisuusketjun ylävirran osassa kylmälevynestejäähdytysjärjestelmien lämmönvaihto on jaettu kahteen osaan: ensisijaiseen lämmönvaihtojärjestelmään ja toissijaiseen lämmönvaihtojärjestelmään. Toissijainen järjestelmä hankkii lämmön lämmönlähteistä, kuten palvelimista, suoran/epäsuoran lämmönvaihdon kautta ja siirtää sen ensisijaiseen järjestelmään. Ensisijainen lämmönvaihtojärjestelmä käyttää ulkojäähdytyslaitteistoa lämmön hajauttamiseen ulos, mikä täydentää kokonaisjäähdytysprosessin. Molemmat järjestelmät vaihtavat lämpöä jäähdytysnesteen jakeluyksikön (CDU) kautta.
Tietyt komponenttien viat: Pikakatkaisu on plug and socket -komponentti, jossa on nesteen katkaisutoiminto sekä pistokkeessa että pistorasiassa, mikä mahdollistaa nestejäähdytysjärjestelmien nopean plug and play -huollon. Kun pistoke ja pistorasia on kytketty, neste virtaa läpi syöttääkseen nestettä kylmälevylle; kun irrotetaan, neste pysähtyy, mikä estää vuodon järjestelmän ulkopuolelle. Jakotukki on laite, joka yhdistää CDU:n kylmälevyyn nestejäähdytyspalvelimissa, tyypillisesti asennettuna kaappiin. Sen tehtävänä on jakaa jäähdytysneste tasaisesti jokaiselle kylmälevylle ja kerätä lämmitetty jäähdytysneste ja lähettää se takaisin CDU:hun yhdistettyjen putkien kautta.
Jäähdytysnesteen jakeluyksikkö (CDU) on moduuli, jota käytetään lämmön vaihtamiseen toisiojärjestelmän korkean lämpötilan jäähdytysnesteen ja ensisijaisen jäähdytyslähteen välillä. Se tarjoaa jäähdytysnesteen jakelun ja hallitsee lämpötilan, paineen ja virtauksen valvontaa nestejäähdytteisille IT-laitteille. CDU koostuu pääasiassa lämmönvaihtimista/lauhduttimista, kiertovesipumpuista, suodattimista, jäähdytysnesteen varastosäiliöistä ja tarvikkeista (venttiilit, putkistot, liittimet, anturit jne.), ja siinä on toimintoja, kuten lämmönvaihto, kierto, jäähdytysnesteen puhdistus ja varastointi.
Vuosina 2020–2022 nestejäähdytystekniikka kehittyi nopeasti, ja sovellusmallien validointi saavutti merkittävää menestystä, mikä johti yksikkökohtaisten jäähdytyskustannusten alenemiseen. CCID Consultingin tietojen mukaan kylmälevylähestymistapa säilytti yli 90 %:n markkinaosuuden, kun taas upotus- ja ruiskujäähdytyksen osuus oli yhteensä noin 10 %. Kolmen menetelmän painotetun keskiarvon jälkeen 1 kW:n jäähdytyskustannukset nestejäähdytteisissä palvelinkeskuksissa olivat noin 6 500 RMB vuonna 2022, ja sen odotetaan laskevan 5,000 RMB:iin per 1 kW vuoteen 2023 mennessä.
Äskettäin Supermicron toimitusjohtaja Charles Liang ennusti, että seuraavien 12 kuukauden aikana 15 % uusista globaaleista datakeskusten käyttöönotoista käyttää sen suoraa nestejäähdytystekniikkaa, ja tämä osuus nousee 30 prosenttiin seuraavana vuonna, mikä on huomattava kasvu vain 1 %:sta. viimeisen 30 vuoden aikana, mikä loi toisen merkittävän jääkiekkomailojen kasvukäyrän. Perinteiseen ilmajäähdytykseen verrattuna suora nestejäähdytys on taloudellisempaa ja ympäristöystävällisempää. Jos oletetaan, että nestejäähdytyksen levinneisyysaste Kiinan uusissa datakeskuksissa saavuttaa 22 % vuoteen 2026 mennessä, nestejäähdytyksen markkinatila on 11,1 miljardia RMB.
