Czy pomijasz szafę między serwerami?

Wydaje się, że istnieje wiele nieporozumień w zakresie sposobu myślenia o instalacji serwerów typu rack. Pojawiły się wątki na temat ramion kablowych i innych akcesoriów do montażu w stojaku, ale jestem ciekawy:

Czy zostawiasz pustą szafę między serwerami podczas ich instalowania? Dlaczego lub dlaczego nie? Czy masz jakieś dowody empiryczne na poparcie swoich pomysłów? Czy ktoś jest świadomy badań, które jednoznacznie dowodzą, czy ktoś jest lepszy czy nie?

Jeśli twoje serwery wykorzystują chłodzenie przepływowe od przodu do tyłu, tak jak większość serwerów montowanych w szafach, pozostawienie przerw może w rzeczywistości zaszkodzić chłodzeniu. Nie chcesz, aby zimne powietrze mogło dostać się do gorącego przejścia tylko przez sam serwer. Jeśli musisz zostawić luki (problemy z zasilaniem, problemy z wagą podłogi itp.), Powinieneś użyć zaślepek, aby powietrze nie mogło przepływać między serwerami.

Nigdy nie pomijałem jednostek szafy między urządzeniami do montażu w szafie. Gdyby producent polecił mi pomijać U między urządzeniami, zrobiłbym to, ale nigdy nie widziałem takiej rekomendacji.

Spodziewałbym się, że każde urządzenie zaprojektowane do montażu w stojaku zużyje ciepło przez panel przedni lub tylny. Część ciepła będzie przewodzona przez szyny oraz górną i dolną część podwozia, ale spodziewałbym się, że będzie to bardzo małe w porównaniu z promieniowaniem z przodu iz tyłu.

W naszym centrum danych nie pozostawiamy luk. Mamy chłodne powietrze wydobywające się z podłogi, a szczeliny powodują problemy z przepływem powietrza. Jeśli z jakiegoś powodu mamy szczelinę, zakrywamy ją pustą płytką. Dodanie pustych płyt natychmiast sprawiło, że szczyty naszych zimnych przejść stały się zimniejsze, a nasze gorące przejścia - cieplejsze.

Nie sądzę, że mam już dane lub wykresy, ale różnica była bardzo wyraźna, gdy tylko zaczęliśmy wprowadzać zmiany. Serwery na szczycie stojaków przestały się przegrzewać. Przestaliśmy gotować zasilacze (co robiliśmy w tempie około 1 / tydzień). Wiem, że zmiany zostały rozpoczęte po powrocie naszego menedżera centrum danych z targów Sun Green Data Center, gdzie uczestniczył w seminariach na temat chłodzenia i tym podobnych. Wcześniej używaliśmy szczelin i częściowo wypełnionych regałów i perforowanych płytek w podłodze z przodu i za regałami.

Nawet przy założonym ramieniu kierowniczym eliminowanie luk działało lepiej. Wszystkie wewnętrzne temperatury serwerów w całym pomieszczeniu mieszczą się w zakresie specyfikacji. Tak się nie stało, zanim znormalizowaliśmy zarządzanie kablami, wyeliminowaliśmy luki i poprawiliśmy układanie płytek podłogowych. Chcielibyśmy zrobić więcej, aby skierować gorące powietrze z powrotem do jednostek CRAC, ale nie możemy jeszcze uzyskać funduszy.

Nie opuszczam nas. Wynajmujemy, a my kosztuje.

W dzisiejszych czasach nie ma powodu do ogrzewania. Całe chłodne powietrze dostaje się z przodu i z tyłu. W blatach nie ma już otworów wentylacyjnych.

Google nie pozostawia U między serwerami i myślę, że dotyczy ich zarządzanie ciepłem. Zawsze interesujące jest obserwowanie, jak duzi gracze wykonują swoją pracę. Oto wideo jednego z ich centrum danych: http://www.youtube.com/watch?v=zRwPSFpLX8I&feature=player_embedded

Przejdź bezpośrednio do 4:21, aby zobaczyć ich serwery.

Nie zostawiaj miejsca, jeśli masz chłodne powietrze wydobywające się z podłogi, a także użyj pustych miejsc w niewykorzystanej przestrzeni u. Jeśli masz tylko zaawansowany technologicznie układ chłodzenia wykorzystujący standardowe urządzenie klimatyzacyjne, najlepiej pozostawić luki w celu zminimalizowania gorących punktów, gdy masz gorące serwery zlepione.

Mamy węzły klastra o wartości 3 1/2 szafy i ich przechowywanie w obiekcie kolokacji. Jedyne miejsca, w których pominęliśmy U, to miejsce, w którym musimy poprowadzić okablowanie sieciowe do centralnej szafy, w której znajduje się przełącznik klastra rdzeniowego. Możemy sobie na to pozwolić, jeśli chodzi o przestrzeń, ponieważ stojaki są już maksymalne pod względem mocy, więc nie byłoby możliwe wbicie do nich więcej węzłów :)

Te maszyny pracują 24 godziny na dobę, 7 dni w tygodniu przy 100% mocy procesora, a niektóre z nich mają do 16 rdzeni w pudełku 1U (4x czterordzeniowe Xeony) i jeszcze nie widziałem żadnych negatywnych efektów, nie pozostawiając spacji między większością z nich.

Tak długo, jak twój sprzęt ma dobrze zaprojektowaną ścieżkę powietrzną, nie rozumiem, dlaczego miałoby to mieć znaczenie.

Mam duże luki powyżej mojego UPS (do zainstalowania drugiej baterii w przyszłości) i powyżej mojej biblioteki taśm (jeśli potrzebuję innej). Poza tym nie mam przerw i używam paneli do wypełniania pustych przestrzeni, aby zachować przepływ powietrza.

Co trzecia, ale wynika to z ramiona zarządzania i potrzeby obejścia ich, a nie ciepła. Fakt, że każdy z tych serwerów ma do dyspozycji 6 kabli Cat5, nie pomaga. W dużym stopniu wykorzystujemy panele zaślepiające i zapory powietrzne nad regałami, aby zapobiec recyrkulacji z gorącego przejścia.

Ponadto w naszym centrum danych nie brakuje nam miejsca. Został zaprojektowany do rozbudowy, gdy serwery 7-10U były standardowe. Teraz, gdy przeszliśmy z gęstymi klastrami ESX, jest to miasto duchów.

Nie zostawiłbym przerw między serwerami, ale zrobię to dla przełączników LAN - pozwala mi to umieścić kilka pasków zarządzania kablami 1U powyżej i poniżej ... ale zdecydowanie nie jest to zrobione dla chłodzenia.

Żadnych luk, z wyjątkiem sytuacji, w których zabraliśmy serwer lub coś innego i nie zadaliśmy sobie trudu, aby go zmienić. Myślę, że jesteśmy nieco mniejsi niż wielu ludzi tutaj, z 2 szafami, które mają tylko około 15 serwerów oraz kilka napędów taśm, przełączników i zasilaczy UPS.

Żadnych luk poza planowaniem rozbudowy systemów san i tym podobnych. Wolimy umieszczać nowe szafki blisko rzeczywistych sterowników.

Jeśli masz odpowiednie chłodzenie, pozostawienie luk nie będzie korzystne, chyba że serwer jest źle zbudowany.

Mam wrażenie (być może niesłusznie), że jest to bardziej popularna praktyka w niektórych środowiskach telekomunikacyjnych, w których korytarze ciepłe / zimne nie są tak szeroko stosowane.

Nie jest to jednak odpowiednie dla dobrze zarządzanego centrum danych o wysokiej gęstości.

Zwykle zostawiam puste RU po około 5RU serwerów (tj. 5x1ru lub 1x2ru + 1x3ru), a to zależy od konfiguracji chłodzenia w centrum danych, w którym jesteś. Jeśli masz chłodzenie przed szafą (tj. Ruszt w front szafy) chodzi o to, że chłodne powietrze jest wypychane z podłogi, a twoje serwery zasysają przez nie chłodne powietrze. w takich okolicznościach zazwyczaj można uzyskać lepsze chłodzenie, nie pozostawiając pustych gniazd (tj. użyj pustej pokrywy RU. Ale jeśli masz chłodzenie wykonane przez panel podłogowy w szafie z mojego doświadczenia, uzyskujesz bardziej wydajne chłodzenie poprzez zerwanie serwerów ze stosu jeden na drugim dla całego regału

W sytuacji, gdy mieliśmy własne centrum danych, a miejsce nie stanowiło problemu, pomijałem U (z odstępem do blokowania przepływu powietrza) między obszarami logicznymi: serwery WWW mają jedną sekcję, bazę danych, kontroler domeny, e-mail, a serwer plików miał inny, a zapory ogniowe i routery miały inny. Przełączniki i panele krosowe dla komputerów stacjonarnych były we własnym stelażu.

Pamiętam dokładnie jeden raz, kiedy pominąłem U z powodów chłodzenia. Było to rozwiązanie do zapętlania telewizji kablowej A / V w liceum, gdzie były trzy jednostki, z których każda była odpowiedzialna za obsługę systemu telewizji kablowej w jednej części budynku. Po tym, jak górna jednostka musiała zostać wymieniona po raz trzeci w ciągu dwóch lat z powodu przegrzania, wykonałem trochę „operacji” na stojaku, aby wykonać otwory montażowe, dzięki czemu mogłem zostawić 1 / 2U przestrzeni między każdą z trzech jednostek (na łącznie 1 U całkowitej przestrzeni).

To rozwiązało problem. Nie trzeba dodawać, że zostało to dokładnie udokumentowane, a dla dodatkowego dobrego przyklejenia prześcieradła do jednego z nich, wyjaśniając, dlaczego wszystko poszło po ich myśli.

Są tutaj dwie lekcje:

1. Pozostawienie przerwy na chłodzenie odbywa się tylko w wyjątkowych okolicznościach.
2. Skorzystaj z renomowanego dostawcy skrzynek lub serwerów. Ostrożnie kupuj sprzęt, który próbuje upakować ciepło o wartości 2U w przestrzeni o wartości 1U. Będzie to kuszące, ponieważ system 1U może wydawać się znacznie tańszy. Zachowaj ostrożność przy zakupie obudowy innej marki, która nie uwzględnia odpowiednio przepływu powietrza.

Mam je ułożone w stos w jednym stojaku. Nigdy nie miałem z tym żadnych problemów, więc nigdy nie miałem powodu, aby je rozstawiać. Wyobrażam sobie, że największym powodem, dla którego ludzie je rozmieszczają, jest upał.

Pozostawienie przerw między serwerami może mieć wpływ na chłodzenie. Wiele centrów danych obsługuje zestawy na zasadzie „zimnego korytarza”.

Jeśli pozostawisz luki między serwerami, możesz wpłynąć na efektywny przepływ powietrza i chłodzenie.

Ten artykuł może być interesujący:

Naprzemienne przejścia zimne i gorące zapewniają bardziej niezawodne chłodzenie dla farm serwerów

Zostawiłem 1/3 RU między dwoma przełącznikami wcześniej, głównie dlatego, że były one o 1 1/3 RU wysokie.

Gdybym położył je mocno razem, wyższy bieg byłby poza pozycją o 1/3 U.

Poza tym nigdy nie zostawiłem miejsca wyłącznie na chłodzenie, tylko na przyszły rozwój.