Klimatyzacja precyzyjna w serwerowniach – jak zapewnić odpowiednie warunki pracy urządzeń?

Odpowiednie warunki w serwerowni zapewnia system, który jednocześnie odbiera ciepło generowane przez sprzęt IT, kieruje schłodzone powietrze do wlotów urządzeń, kontroluje wilgotność i pracuje bez przerw również podczas awarii pojedynczego elementu. Sama deklarowana moc chłodnicza nie wystarcza. O skuteczności instalacji decydują także przepływ powietrza, rozmieszczenie szaf, sposób sterowania, redundancja, monitoring oraz możliwość serwisowania bez wyłączania chłodzenia. Warunki należy oceniać przede wszystkim przy wlotach powietrza do serwerów, a nie na podstawie jednego czujnika umieszczonego na ścianie. Średnia temperatura pomieszczenia może wyglądać prawidłowo, mimo że w górnej części jednej z szaf powstaje lokalny punkt przegrzania. Dlatego projekt klimatyzacji precyzyjnej powinien łączyć obliczenie obciążenia cieplnego z analizą rzeczywistej drogi powietrza przez serwerownię.

Czym klimatyzacja precyzyjna różni się od klimatyzacji komfortu?

Klimatyzacja komfortu jest projektowana głównie z myślą o ludziach i pomieszczeniach użytkowanych okresowo. Serwerownia ma inny profil obciążenia: urządzenia elektroniczne oddają ciepło przez całą dobę, a duża część energii pobieranej przez sprzęt IT ostatecznie trafia do pomieszczenia w postaci ciepła. System musi więc pracować stabilnie przy długotrwałym obciążeniu jawnym, czyli takim, które podnosi temperaturę powietrza.

Klimatyzacja precyzyjna jest przeznaczona do ciągłego utrzymywania kontrolowanych warunków w pomieszczeniach technicznych. Jej zadaniem jest nie tylko chłodzenie, lecz także precyzyjna regulacja, wymuszanie odpowiedniego przepływu powietrza, sygnalizowanie nieprawidłowości oraz współpraca kilku jednostek. Opis rozwiązań stosowanych w tym obszarze jest dostępny pod adresem https://dcserwis.eu/klimatyzacja-precyzyjna.

Zwykły klimatyzator typu split może obniżyć temperaturę w niewielkim pomieszczeniu technicznym, ale nie powinien być automatycznie traktowany jako równoważnik systemu precyzyjnego. Ograniczeniem może być praca przy niskiej temperaturze zewnętrznej, sposób regulacji, brak kontroli wilgotności, niedostosowanie do pracy ciągłej lub brak możliwości skoordynowania kilku urządzeń. Ocena musi obejmować cały tryb pracy, a nie tylko nominalną moc chłodniczą.

Warunki trzeba kontrolować przy wlotach do urządzeń IT

Serwer zasysa powietrze z przodu obudowy, odbiera nim ciepło z podzespołów i wyrzuca ogrzane powietrze z tyłu. Z punktu widzenia bezpieczeństwa sprzętu istotne są więc parametry powietrza docierającego do jego wlotu. Pomiar wykonany w przypadkowym miejscu może nie wykryć recyrkulacji, czyli ponownego zasysania gorącego powietrza wyrzucanego przez urządzenia.

Czujniki temperatury warto rozmieszczać na różnych wysokościach szaf, szczególnie przy ich wlotach. Pomiar w górnej części jest potrzebny, ponieważ gorące powietrze może przedostawać się nad szafą lub przez wolne przestrzenie i trafiać do najwyżej zamontowanych serwerów. Dodatkowe czujniki w gorącej strefie pomagają ocenić sprawność odbioru ciepła, ale nie zastępują pomiaru po stronie zasilania urządzeń.

Docelowe zakresy temperatury i wilgotności należy przyjąć na podstawie wymagań zainstalowanego sprzętu, założeń projektowych oraz warunków gwarancji. Nastawy robocze powinny pozostawiać margines przed granicami alarmowymi. Ustawienie systemu blisko dopuszczalnego maksimum zmniejsza czas dostępny na reakcję po awarii chłodzenia, natomiast nadmierne chłodzenie podnosi zużycie energii i może utrudniać kontrolę wilgotności.

Jak obliczyć rzeczywiste obciążenie cieplne serwerowni?

Podstawą doboru jest bilans ciepła, a nie powierzchnia pomieszczenia. Dwie serwerownie o identycznym metrażu mogą wymagać zupełnie innej instalacji, jeżeli różnią się liczbą szaf, poborem mocy urządzeń i zagęszczeniem sprzętu. Najważniejszą składową obciążenia jest zwykle sprzęt IT, ale trzeba uwzględnić również zasilacze awaryjne znajdujące się w pomieszczeniu, urządzenia sieciowe, oświetlenie, ludzi, przenikanie ciepła przez przegrody oraz dopływ powietrza z zewnątrz.

Informacje z tabliczek znamionowych mogą opisywać maksymalny pobór, który nie zawsze odpowiada typowej pracy. Z kolei dobór wyłącznie na podstawie chwilowego pomiaru może nie uwzględnić późniejszego wzrostu obciążenia. Rozsądne podejście polega na porównaniu danych znamionowych, pomiarów zasilania oraz planu rozbudowy, a następnie przyjęciu jawnego marginesu projektowego. Margines nie powinien jednak maskować błędów w dystrybucji powietrza.

Nawet jednostka o wystarczającej mocy nie schłodzi poprawnie szafy, do której nie dociera odpowiedni strumień zimnego powietrza. Dlatego obok bilansu mocy trzeba sprawdzić zapotrzebowanie na przepływ, opory instalacji, wydajność wentylatorów oraz rozmieszczenie urządzeń o największej gęstości cieplnej. Problemem może być pojedyncza mocno obciążona szafa, mimo że łączna moc chłodnicza całego pomieszczenia pozostaje wystarczająca.

Organizacja przepływu powietrza ogranicza lokalne przegrzewanie

Typowy układ wykorzystuje naprzemienne korytarze zimne i gorące. Fronty szaf są skierowane do korytarza zimnego, z którego serwery pobierają powietrze, a tyły do korytarza gorącego, gdzie trafia ogrzany strumień. Taki układ nie tworzy jednak automatycznie separacji. Nieszczelności, otwarte przestrzenie w szafach i niewłaściwe ustawienie urządzeń mogą doprowadzić do mieszania obu strumieni.

Wolne miejsca w szafach powinny być zamknięte panelami zaślepiającymi. Trzeba także uszczelnić zbędne przepusty kablowe i otwory w podłodze technicznej, jeżeli służy ona do doprowadzania powietrza. W przeciwnym razie chłodne powietrze wybierze drogę o najmniejszym oporze i ominie szafy, które najbardziej go potrzebują. Uszczelnienie bywa tańszym i skuteczniejszym działaniem niż natychmiastowe zwiększenie mocy chłodniczej.

Separację można rozszerzyć przez zabudowę korytarza zimnego albo gorącego. Ogranicza ona mieszanie powietrza, ale wymaga skoordynowania z ochroną przeciwpożarową, czujnikami, instalacją gaszenia, oświetleniem i drogami dostępu. Zabudowa nie naprawi również błędnego kierunku przepływu przez urządzenia zamontowane w szafach. Każdy element powinien pobierać powietrze z właściwej strony i oddawać je do strefy gorącej.

Jednostki obwodowe czy chłodzenie blisko szaf?

Jednostki obwodowe obsługują całe pomieszczenie i kierują powietrze bezpośrednio do przestrzeni technicznej albo przez podłogę podniesioną. Rozwiązanie ułatwia centralną organizację chłodzenia, lecz wymaga dobrze zaprojektowanej drogi przepływu. W rozległym pomieszczeniu lub przy nierównomiernym obciążeniu odległe szafy mogą otrzymywać za mało chłodnego powietrza.

Jednostki umieszczone pomiędzy rzędami szaf odbierają ciepło bliżej źródła. Skrócenie drogi przepływu ułatwia obsługę stref o dużej gęstości mocy i ogranicza wpływ geometrii całego pomieszczenia. Ceną jest zajęcie miejsca w rzędzie, większa liczba punktów przyłączeniowych oraz konieczność zaplanowania dostępu serwisowego bez blokowania pracy sąsiednich szaf.

Wybór nie powinien wynikać wyłącznie z mocy pojedynczej jednostki. Znaczenie mają także układ szaf, lokalizacja źródeł ciepła, dostępna przestrzeń, możliwość prowadzenia przewodów, plan rozbudowy i sposób odprowadzania ciepła poza budynek. W istniejącej serwerowni ograniczenia budowlane mogą przesądzić o architekturze bardziej niż teoretyczna sprawność wybranego wariantu.

Kontrola wilgotności i ryzyko kondensacji

Zbyt suche powietrze sprzyja gromadzeniu ładunków elektrostatycznych, natomiast nadmierna wilgotność zwiększa ryzyko kondensacji i problemów z elementami elektronicznymi. Sama wilgotność względna nie opisuje jednak całej sytuacji, ponieważ zmienia się wraz z temperaturą. Przy ocenie zagrożenia wykraplaniem trzeba uwzględniać również punkt rosy, czyli temperaturę, poniżej której para wodna zacznie się skraplać.

Nawilżanie i osuszanie powinny być sterowane na podstawie spójnych pomiarów. Jeżeli kilka jednostek ma różne nastawy lub rozkalibrowane czujniki, jedna może nawilżać, a druga w tym samym czasie osuszać. Taka „walka” urządzeń zwiększa zużycie energii i przyspiesza zużycie podzespołów, choć średni odczyt w pomieszczeniu może pozostawać pozornie prawidłowy.

Szczególnej ostrożności wymagają uruchomienia po pracach budowlanych, dopływ wilgotnego powietrza z zewnątrz oraz zimne powierzchnie instalacji. Przewody i elementy o temperaturze niższej od punktu rosy muszą być zabezpieczone przed kondensacją. Czujniki zalania powinny obejmować miejsca, w których znajdują się odpływy skroplin, nawilżacze, zawory i połączenia instalacji wodnej.

Redundancja musi obejmować cały tor chłodzenia

Redundancja oznacza zdolność do utrzymania wymaganych warunków po wyłączeniu lub awarii jednego elementu. Dodatkowa jednostka w pomieszczeniu nie zapewnia tej zdolności, jeżeli wszystkie urządzenia zależą od jednego obwodu elektrycznego, wspólnego sterownika albo pojedynczego elementu odprowadzającego ciepło. Analiza powinna objąć zasilanie, automatykę, wentylatory, pompy, zawory, przewody, odpływ skroplin i zewnętrzną część instalacji.

Rezerwa musi odpowiadać rzeczywistemu obciążeniu po utracie jednego urządzenia. Jeżeli wszystkie jednostki podczas normalnej pracy są obciążone blisko swoich możliwości, wyłączenie jednej z nich może pozostawić za małą wydajność. System rotacji urządzeń pozwala równomiernie rozłożyć czas pracy, a automatyczne uruchomienie rezerwy skraca reakcję na awarię.

Istotna jest również bezwładność cieplna pomieszczenia. Po zaniku chłodzenia temperatura może wzrastać szybko, zwłaszcza przy dużej mocy sprzętu i małej kubaturze. Zasilanie awaryjne podtrzymujące serwery, ale niepodtrzymujące niezbędnych elementów chłodzenia, może więc jedynie przesunąć problem. Scenariusz zaniku zasilania trzeba analizować łącznie dla infrastruktury IT i systemu odbioru ciepła.

Automatyka i monitoring powinny wykrywać przyczynę, nie tylko skutek

Alarm wysokiej temperatury jest potrzebny, ale pojawia się dopiero wtedy, gdy warunki zaczynają się pogarszać. Wcześniejsze ostrzeżenie mogą dać informacje o zatrzymaniu wentylatora, utracie zasilania, wzroście ciśnienia, braku przepływu czynnika, zablokowanym odpływie skroplin lub utracie komunikacji ze sterownikiem. Monitoring powinien przekazywać alarm do osób odpowiedzialnych również poza godzinami pracy.

Progi alarmowe należy rozdzielić na ostrzegawcze i krytyczne. Pierwszy poziom daje czas na sprawdzenie narastającego odchylenia, drugi uruchamia procedurę pilnej reakcji. Zbyt szerokie progi opóźniają interwencję, natomiast nadmiernie czułe ustawienia generują wiele nieistotnych komunikatów. Skutkiem może być ignorowanie alarmów również wtedy, gdy dotyczą rzeczywistego zagrożenia.

Rejestrowanie trendów pomaga odróżnić jednorazowe zdarzenie od problemu rozwijającego się przez tygodnie. Stopniowy wzrost temperatury przy tym samym obciążeniu może wskazywać na zabrudzenie wymiennika, pogorszenie przepływu lub spadek wydajności urządzenia. Nagła zmiana temperatury tylko przy jednej szafie częściej prowadzi do sprawdzenia przepływu powietrza, zaślepek albo pracy wentylatorów sprzętu IT.

Uruchomienie systemu powinno obejmować testy awaryjne

Odbiór instalacji nie powinien kończyć się na sprawdzeniu, czy jednostki się uruchamiają. Trzeba potwierdzić warunki przy wlotach do szaf, działanie czujników, kierunek przepływu, przełączanie urządzeń rezerwowych, sygnalizację alarmów oraz odprowadzanie skroplin. Test należy wykonać przy obciążeniu możliwie zbliżonym do przewidywanej pracy, ponieważ puste pomieszczenie nie ujawnia problemów powstających po uruchomieniu sprzętu.

Próba utraty pojedynczej jednostki pokazuje, czy pozostała część instalacji rzeczywiście przejmuje obciążenie. Warto również sprawdzić zachowanie po zaniku i powrocie zasilania: kolejność rozruchu, czas uruchomienia chłodzenia, zachowanie nastaw oraz przekazanie alarmów. Test kontrolowany jest bezpieczniejszy niż odkrycie błędu automatyki podczas rzeczywistej awarii.

Po zmianie układu szaf, zwiększeniu poboru mocy lub dołożeniu urządzeń pomiary trzeba powtórzyć. Projektowe założenia opisują określoną konfigurację, a nie pomieszczenie raz na zawsze. Rozbudowa może przenieść punkt największego obciążenia, zmienić opory przepływu i sprawić, że wcześniejsze ustawienia przestaną być właściwe.

Konserwacja decyduje o utrzymaniu projektowej wydajności

Filtry, wymienniki, wentylatory i odpływy skroplin stopniowo tracą sprawność wskutek zabrudzenia lub zużycia. Zatkany filtr zwiększa opór przepływu, przez co do szaf dociera mniej powietrza nawet wtedy, gdy układ chłodniczy działa. Niedrożny odpływ może natomiast prowadzić do wycieku wody w pomieszczeniu z urządzeniami elektrycznymi.

Zakres obsługi powinien obejmować kontrolę stanu filtrów, czystości wymienników, działania wentylatorów, szczelności instalacji, odpływu kondensatu, nawilżania, czujników i automatyki. Potrzebna jest także okresowa weryfikacja alarmów oraz urządzeń rezerwowych. Jednostka pozostająca długo w gotowości może nie uruchomić się poprawnie, jeżeli jej sprawność nie jest regularnie testowana.

Harmonogram prac należy dostosować do warunków panujących w obiekcie. Pomieszczenie narażone na pył lub częste prace instalacyjne może wymagać częstszej kontroli filtrów niż zamknięta, czysta serwerownia. Częstotliwości nie powinno się ustalać wyłącznie kalendarzowo; pomocne są również różnice ciśnień, alarmy, historia usterek i trendy parametrów pracy.

Najczęstsze błędy i ich konsekwencje

• Dobór według powierzchni pomieszczenia. Pomija rzeczywisty pobór mocy sprzętu i zagęszczenie obciążenia, przez co instalacja może być niewystarczająca mimo poprawnego przelicznika powierzchniowego.
• Ocena warunków na podstawie jednego czujnika. Nie wykrywa gorących punktów w szafach ani recyrkulacji przy ich górnych częściach.
• Zwiększanie mocy bez poprawy przepływu. Większa jednostka nie rozwiąże problemu, jeżeli chłodne powietrze omija przeciążoną szafę.
• Brak zaślepek i niekontrolowane otwory. Powodują mieszanie zimnego i gorącego powietrza oraz obniżają wykorzystanie dostępnej wydajności.
• Redundancja tylko na poziomie jednostek wewnętrznych. Pozostawia pojedyncze punkty awarii w zasilaniu, sterowaniu lub odprowadzaniu ciepła.
• Brak aktualizacji bilansu po rozbudowie. Nowe serwery mogą zmienić zarówno całkowite obciążenie, jak i jego rozkład pomiędzy szafami.
• Pomijanie dostępu serwisowego. Utrudnia naprawę i może wymuszać wyłączenie większej części systemu niż zakładano w projekcie.

Procedura przygotowania skutecznego systemu chłodzenia

1. Zinwentaryzować urządzenia IT, ich pobór mocy, rozmieszczenie oraz przewidywaną rozbudowę.
2. Obliczyć bilans cieplny obejmujący sprzęt, infrastrukturę zasilającą i pozostałe źródła ciepła.
3. Określić wymagane warunki pracy na podstawie dokumentacji zainstalowanych urządzeń.
4. Zaprojektować oddzielne drogi dla chłodnego i ogrzanego powietrza oraz usunąć miejsca niekontrolowanego mieszania.
5. Dobrać architekturę chłodzenia do rozkładu obciążenia, geometrii pomieszczenia i możliwości odprowadzenia ciepła.
6. Przeanalizować awarię każdego istotnego elementu i zapewnić wymaganą rezerwę całego toru chłodzenia.
7. Rozmieścić czujniki przy wlotach do szaf, ustawić progi alarmowe i skonfigurować zdalne powiadamianie.
8. Przeprowadzić testy pod obciążeniem, w tym próbę utraty jednostki oraz zaniku i powrotu zasilania.
9. Wprowadzić harmonogram konserwacji, testowania rezerwy i okresowej aktualizacji bilansu cieplnego.

Najczęściej zadawane pytania

Czy podłoga podniesiona jest konieczna w serwerowni?

Nie. Podłoga podniesiona może służyć do doprowadzania chłodnego powietrza i prowadzenia instalacji, ale wymaga kontroli szczelności, oporów oraz rozmieszczenia otworów nawiewnych. W wielu układach powietrze można skutecznie rozprowadzać bez niej, na przykład przez jednostki nawiewające bezpośrednio do pomieszczenia lub umieszczone między rzędami.

Czy wolne miejsce w szafie rack pogarsza chłodzenie?

Tak, jeżeli nie jest zamknięte panelami zaślepiającymi. Otwarta przestrzeń umożliwia przepływ gorącego powietrza z tyłu szafy do jej przedniej części, skąd może zostać ponownie zassane przez serwery. Skutkiem bywa podwyższona temperatura wlotowa mimo wystarczającej mocy instalacji.

Co sprawdzić przed dołożeniem kolejnych serwerów?

Trzeba zweryfikować dostępny zapas mocy chłodniczej, wydajność przepływu w konkretnej szafie, obciążenie zasilania oraz zachowanie systemu po awarii jednej jednostki. Liczy się nie tylko łączna moc nowych urządzeń, lecz także miejsce ich montażu. Skupienie sprzętu w jednej szafie może utworzyć lokalny punkt cieplny bez przeciążenia całej serwerowni.

Czy agregat prądotwórczy rozwiązuje problem chłodzenia podczas awarii zasilania?

Tylko wtedy, gdy zasila elementy niezbędne do działania całego toru chłodzenia i uruchamia je w wymaganym czasie. Trzeba uwzględnić jednostki wewnętrzne, automatykę, pompy oraz urządzenia odprowadzające ciepło na zewnątrz. Należy również sprawdzić kolejność rozruchu, ponieważ równoczesne uruchamianie wielu odbiorników może być niepożądane.

Jak rozpoznać, że problemem jest przepływ powietrza, a nie brak mocy?

Wskazówką jest duża różnica warunków pomiędzy szafami lub wysokościami tej samej szafy przy prawidłowej pracy jednostek chłodzących. Należy wtedy sprawdzić kierunek nawiewu, zaślepki, przepusty, przeszkody pod podłogą, recyrkulację oraz pracę wentylatorów urządzeń IT. Ostateczną ocenę powinny potwierdzić pomiary temperatury i przepływu w kilku punktach.