Strata mocy w firmie

18

Zarządzanie nieruchomościami w mojej organizacji poinformowało mnie, że jutro nasz budynek straci moc. Muszę się przygotować na to wydarzenie (jesteśmy małą organizacją, jestem młody, dlatego jestem IT). O jakich rzeczach muszę wiedzieć.

Planuję wchodzić i wyłączać wszystkie maszyny i drukarki. Czy to mnie obejmie? Mamy zarządzany przełącznik. Czy trzeba go zamknąć? Czy muszę odłączyć wtyczki w przypadku przepięcia?

Wygląda na to, że będę objęty ochroną, jeśli wszystko po prostu odłączę od zasilania. Dzięki za wgląd.


źródło

Odpowiedzi:

32

Przed awarią:

  • Wyłącz wszystko - stacje robocze, serwery, drukarki, przełączniki, prace.
  • Wyłącz UPS, aby nie wpadały w panikę po utracie zasilania.

Po awarii w tej kolejności:

  • Włącz UPS
  • Włącz sieć (router, przełączniki itp.)
  • Włącz serwery
  • Włącz stacje robocze
  • Włącz wszystko inne

Przygotuj plan testów, aby przetestować, czy ważna funkcjonalność działa

  • Łączność z Internetem
  • E-mail, drukowanie itp

Jeśli to możliwe, miej pod ręką laptopa z osobnym połączeniem sieciowym (np .: możesz uzyskać dostęp do Internetu bez pracy routera roboczego). W ten sposób możesz poprosić o pomoc, jeśli coś pójdzie nie tak z siecią, gdy wróci. :)

Powinieneś być w porządku - fakt, że poświęciłeś trochę czasu, aby zapytać tutaj, pokazuje, że masz już niezbędną „wskazówkę” wymaganą do wsparcia IT!

Neobajt
źródło
Thansk za szczegóły.
2
+1 dla laptopa z własnym dostępem do Internetu. Oprócz wezwania pomocy można użyć tego do sprawdzenia, czy elementy zewnętrzne są dostępne poza siecią, a zasoby wewnętrzne nie. To była część twojego planu testów, prawda? Riiight?
Rob Allen
4
+1. Kilka rzeczy: jeśli masz login do zarządzanego przełącznika, zaloguj się i zapisz konfigurację. Sprawdź także, czy masz kable wymagane do podłączenia do portu konsoli routera i przełącznika. Wiele z nich wymaga połączeń szeregowych (DB-9), więc jeśli masz najnowszego laptopa, może być potrzebny adapter USB-> szeregowy. Powodzenia.
Murali Suriar
2
+1, a także pomyślałem, że powtórzę to, co niektórzy z plakatów już powiedzieli poniżej o odłączeniu twojego cennego sprzętu od ŚCIANY, jeśli nie wiesz dokładnie, co ludzie będą robić na liniach energetycznych. Lepiej dmuchać na zimne!
KPWINC
Tak, zdecydowanie izoluj jak najwięcej od zasobów. Nie należy jednak uruchamiać niczego na zasilaczu UPS, gdy jest on izolowany, ponieważ POTRZEBUJESZ połączenia z uziemieniem, jeśli coś jest w trybie online.
Chris Thorpe,
12

Właśnie to zrobiłem w ostatnim tygodniu po zamknięciu centrum danych;). Tak, należy zamknąć wszystko. Niektóre rzeczy mogą tolerować wyciąganie spod nich mocy i zazwyczaj można je zidentyfikować, nie mając włącznika zasilania. W zależności od tego, co ludzie robią, możesz fizycznie odłączyć zasoby o wyższej wartości od ściany.

Czasami możesz uzyskać znaczne wzrosty mocy, gdy moc powróci, a to może zabić sprzęt. Należy również pamiętać o obciążeniu początkowym. WSZYSTKO, gdy włączy się od razu, może wystarczyć, aby przełamać wyłączniki i wszystko sprowadzić ponownie. To jest do bani. Postaraj się o stopniowe włączanie zasilania, aby obejść to.

EDYCJA: Mieliśmy przypadek, w którym przełącznik transferu do generatora nie zadziałał, a UPSowi zabrakło baterii. Kiedy narzędzie wróciło, wszystko włączało się na raz. 20 sekund później UPS uderzył w Przeciążenie i ponownie zrzucił ładunek z pokoju. Do tego czasu na miejscu przybyło wystarczającej liczby techników (miało się to zdarzyć w weekend), że udało im się wyłączyć wystarczającą liczbę rzeczy przy przełącznikach zębatkowych, aby po powrocie narzędzia pokój nie spadł ponownie . To jo-jo kosztowało nas dużo sprzętu, a powrót do zdrowia po części szkód był tydzień.

sysadmin1138
źródło
3
Wielkie do tego zainscenizowanego włączenia
Andy
1
Zdecydowanie się zgadzaj - upewnij się, że włączasz serwery pojedynczo i pozwól im w pełni się obracać, zanim uruchomisz następny. W przeciwnym razie możesz łatwo wyłamać wyłącznik - sam to zrobiłem.
Tim Howland,
5

Jedyne, co chciałbym dodać, to upewnić się, że wszystkie umowy wsparcia i części zamienne są łatwo dostępne. Jestem pewien, że tak, ale sprawdź to podwójnie i potrójnie. Jeśli masz serwery, które nie wyłączały się przez długi czas, od czasu do czasu znajdziesz problemy ze wszystkimi ruchomymi częściami (łożyska / silniki dysków twardych, silniki wentylatorów i łożyska oraz niektóre naprawdę głupie rzeczy, o których zwykle nie myślimy o).
Jeśli możesz tam być przez cały czas, przygotuj listę ważnych serwerów, w tym ich znacznik serwisowy, konfiguracje, gdzie znajdują się kopie zapasowe oraz osoby, które mogą być odpowiedzialne za aplikacje na każdym komputerze. Przyklej taśmą z boku danego serwera lub umieść go w segregatorze w centrum danych, gdy zaczniesz próbować przywracać ustawienia. Nie chcesz nadal działać w całym biurze, jeśli coś jest zepsute.

DF
źródło
3

Przede wszystkim masz dobre kopie zapasowe, prawda? :) Zawsze dobrym pomysłem jest upewnienie się, że masz kopię zapasową, na wypadek, gdyby dysk zdecydował się nie uruchamiać itp., Gdy wszystko przywrócisz do trybu online. Nie ma nic lepszego niż oddychanie po przerwie w zasilaniu, niż uświadomienie sobie, że jeden krytyczny serwer SQL nigdy nie wrócił. :)

Po drugie, masz rację, z wdziękiem zamknij i wyłącz wszystkie serwery itp.

Jeśli nie jest to nowoczesny budynek i / lub nie masz zasilacza UPS z ochroną przeciwprzepięciową (tak to brzmi) lub coś w tym rodzaju, zawsze lepiej jest być bezpiecznym niż żałować, i sugerowałbym odłączenie sprzętu. Ponowne włączenie zasilania może spowodować skok mocy.

Również trochę FYI; wyłącz serwery podstawowe na końcu (np. DNS itp.) Nie chcesz wyłączać serwerów DNS i nie będziesz w stanie rozwiązać pozostałych serwerów, jeśli zdalnie je wyłączysz :)

Po przywróceniu wszystkiego do trybu online, najpierw uruchom sprzęt sieciowy, następnie najważniejsze serwery krytyczne, a następnie serwery aplikacji / plików.

Powodzenia!

Greg Meehan
źródło
2

Zamknij wszystko, w tym przełączniki i routery, a następnie odłącz wtyczkę lub wyłącz w gnieździe ściennym.

Jeśli martwisz się gwałtownymi wzrostami, czy istnieje budżet na kilka małych zasilaczy UPS na najbardziej krytyczny sprzęt?

EDYCJA: Podoba mi się sugestia neobajta, aby mieć „plan testowy” na wypadek, gdy przywracasz rzeczy. Nawet jeśli masz tylko jeden w głowie i zdecydowane polecenie, aby szybko przywrócić usługi, wszystko będzie dobrze. Upewnij się, że ludzie wiedzą, że pracujesz według planu, i mam nadzieję, że zrozumieją, dlaczego włączenie ich stacji roboczej, zanim spojrzysz na serwery i zmiana, nie pomoże!

Rob Moir
źródło
Mamy mały UPS pokrywający najważniejsze rzeczy. Myślę, że zrobię to, co zasugerowałem, i odłączę również wszystko od ścian.
2

Zależności między serwerami / kolejność uruchamiania serwera również najlepiej będzie ustalić z wyprzedzeniem. Na przykład, jeśli jest to sieć systemu Windows, najpierw włącz zasilanie DC, a następnie serwery baz danych, a następnie wymień itp. W każdym razie jest to świetna lista dla twojej dokumentacji.

Minimalizuje ponowne uruchomienie i spam w pliku dziennika.

Kara Marfia
źródło
1

Za późno na przećwiczony scenariusz wyłączania. Sugeruję, abyś zrobił wszystko, co opisałeś, a potem byłeś przy powrocie zasilania.

nie zapomnij opublikować notatki wyjaśniającej kolegom, co się stało. większość z nich „zapomni” o wyłączeniu komputera i może chcieć wiedzieć, dlaczego system należy uruchomić ...

Lexu
źródło
Świetna sugestia, aby zostawić wyjaśnienie kolegom. Dzięki.