Porady na temat przeniesienia maszynowni do nowej lokalizacji?

Nasza firma przenosi się do nowych biur za kilka miesięcy, a ja jestem odpowiedzialny za przeniesienie serwerów programistycznych w firmie. większość urządzeń deweloperskich znajduje się w szafach 5, 42U + stelaż do przełączania / routingu. Jak większość ludzi robi takie rzeczy? Przenieś kabinę lub wyjmij poszczególne elementy i opróżnij stojaki.

wszelkie porady dotyczące przygotowania i zamknięcia przed przeprowadzką byłyby mile widziane

Wykonaliśmy kilka ruchów za pomocą stojaków. Oto, co zabrałem z tego doświadczenia:

Przed:

• oznacz wszystko Oba zakończenia. I gniazdo stelaża, do którego jest również podłączone.
• narysuj wszystko.
• jeśli masz ważne dane, zaplanuj wykonanie pełnej kopii zapasowej na 6-12 godzin przed przeprowadzką. Sprawdź przynajmniej ostatnią pełną kopię zapasową, którą posiadasz.
• planuj wyjąć wszystko ze stojaka podczas przenoszenia. Co najmniej wyjmij połowę masy, od góry do dołu - oznacza to, że góra jest pusta Nie oczekuj, że poruszający się ruszą górną półkę. W szafie z zasilaczem UPS u podstawy, co oznacza, że ​​wyjmujesz prawdopodobnie 2/3 serwerów. Wszystko, co pozostanie w regale MUSI mieć szyny i być zabezpieczone w szynach (ruch mniejszy niż 0,5 mm, a tolerancja dla dowolnej orientacji - w tym do góry nogami i twarzą w dół - była naszym marginesem). Przesunęliśmy pełne półki i pół pełne półki, a półki zawsze trzeba przechylać / obracać, a strasznie jest patrzeć, jak twoje życie jest zawieszone na betonowym doku załadunkowym.
• z naszego doświadczenia wynika, że ​​przednie i tylne drzwi są bardziej ozdobne niż nośne, a ich pozostawienie może sprawić, że przesuwanie półek będzie bardzo niewygodne, ponieważ wszystkie dobre punkty trzymania za ręce są niedostępne. Zaplanuj usunięcie drzwi podczas faktycznego ruchu. Zmusza to operatorów do podnoszenia, ciągnięcia, pchania i ciągnięcia zębatki za najmocniejsze części. Zwykle panele boczne mogą pozostać włączone, ale przygotuj się na ich usunięcie, jeśli osoby przemieszczające się sądzą, że ich nie ma.
• wynająć kogoś z ubezpieczoną ciężarówką do transportu. NIE rób tego sam. Możesz myśleć, że jesteś ubezpieczony, ale Twoja firma ubezpieczeniowa prawdopodobnie pomyśli inaczej. Drugą ostatnią rzeczą, jakiej chcesz, jest udział w potrójnej burzy między firmą ubezpieczeniową pracodawcy a firmą ubezpieczeniową.
• zatrudnić osobę ubezpieczoną, która fizycznie odbierze, przeniesie, odłoży i (w razie wypadku) zrzuci dla ciebie sprzęt. NIE rób tego sam. Ostatnią rzeczą, którą chcesz zrobić, to zranić się lub wziąć udział w urazie współpracownika.
• upewnij się, że twoja ubezpieczona osoba specjalizuje się w ruchach z wykorzystaniem zaawansowanych technologii i może dostarczyć koce, antystatyczną folię bąbelkową i, jeśli to konieczne, skrzynie.

Podczas przeprowadzki:

• kopie zapasowe są dobre, prawda?
• zrób to sam. Pociągnij WSZYSTKIE przewody, które można odłączyć. Każdy drut powinien być oznakowany i umieszczony w pudełku, które samo jest dobrze oznakowane.
• niech silni, dobrze ubezpieczeni faceci wyodrębnią serwer z szafy. Osobiście nadzoruj owijanie.
• trzymaj się z daleka od silnych, dobrze ubezpieczonych facetów podczas załadunku i rozładunku.
• nadzoruj rozpakowywanie i ponowne wkładanie do stojaków. Jeśli istnieje JAKIEKOLWIEK pytanie dotyczące stanu serwera, wspomnij o nim i zauważ, że zostało wspomniane.
• Jeśli praca trwa chwilę, przygotuj kawę i / lub pączki dla facetów. W razie potrzeby (i jeśli wykonali dobrą robotę), zimne piwo po pracy również idzie dobrze.

Wychowanie fizyczne:

• podwoj swój szacunkowy czas na przywrócenie rzeczy na właściwe tory.
• mieć plan gromadzenia. Dobry plan gromadzenia obejmuje listę kontrolną wszystkich usług, serwerów i plan testów.
• sprawdź, sprawdź, sprawdź.
• sprawdź wszystkie serwery, które mogły zostać uszkodzone podczas transportu, jak wspomniano powyżej.
• nie pozwól, aby zarządzanie taniej, jeśli chodzi o jedzenie, jeśli pracujesz w godzinach posiłków. Głodni technicy popełniają błędy. Jeśli rozmowa będzie długa i skomplikowana, zaplanuj czas na wyjście z pokoju na 90 minut, aby dostać prawdziwy posiłek.

Po:

• zimne piwo też może być odpowiednie.

Jestem z Kevinem przy rozpakowywaniu i rozłączaniu. Regały, z którymi pracowałem, które są zbudowane do załadunku, zwykle mają dodatkowe stężenia i muszą być przymocowane do stałej podstawy (np. Palety) podczas transportu. Zazwyczaj serwery mają również pewien rodzaj mechanizmu blokującego. Jeśli nie przenosisz czegoś, co nie jest zbudowane do przeniesienia, załaduj nie .

Dodałbym to do odpowiedzi Kevina:

Częścią dokumentacji jest wiedza, dlaczego istnieją różne połączenia i kable. Możesz robić wszystkie notatki, robić wszystkie zdjęcia itp., Ale jeśli ostatecznie nie rozumiesz, dlaczego coś tam jest, ryzykujesz, że nie będziesz wiedział, co przetestować, aby ustalić , po przeprowadzce, że „masz wszystko”.

To świetna okazja, aby podczas dokumentowania „tego, co jest podłączone do” ruchu, zadać sobie pytanie „dlaczego to jest podłączone do tego”?

Miałem zbyt wiele przypadków „Po prostu załatam to tutaj i tymczasowo zmienię przypisanie VLAN”, które zamienia się w konfigurację półtrwałą, której nikt nie udokumentował, by gryźć mnie podczas przenoszenia sprzętu lata później.

Zanim jakikolwiek ekwipunek trafi do pojazdu osobistego, dowiedz się, w jaki sposób firma ubezpieczeniowa zajmuje się roszczeniami w przypadku szkód podczas transportu.

Cofnij wszystko, zanim zaczniesz się ruszać. Załóżmy, że cały sprzęt zostanie zniszczony podczas ruchu, ponieważ (przynajmniej jeśli jeździsz po drogach publicznych) może to być. Mówi się, że nośnik kopii zapasowej nie powinien poruszać się wraz ze sprzętem infrastruktury!

Wyodrębnij poszczególne elementy i przenieś stojaki puste. Ma to również tę zaletę, że pozwala na ponowne łączenie elementów w optymalnej konfiguracji i uzyskanie okablowania dokładnie tak, jak chcesz. Pamiętaj, aby udokumentować wszystko przed, w trakcie i po. Rób zdjęcia cyfrowe, aby pomóc.

Przenieśliśmy dwa stelaże serwerów w około 60% pełne około 3 lata temu.

To była najbardziej przerażająca rzecz, której byłem świadkiem od dłuższego czasu.

W końcu wszystko było w porządku, ale przeprowadzcy musieli przechylić regał, aby wyciągnąć go z drzwi w naszej starej lokalizacji. Były bardzo duże i bardzo silne, i na szczęście dla mnie stojak nie spadł - ale mogę powiedzieć, że stresowałem się, oglądając go.

Jeśli musisz przesunąć regały do ​​pełna, upewnij się, że możesz przetoczyć regały przez drzwi, bez konieczności przechylania ich przy każdych drzwiach, które napotkasz podczas ruchu. jeśli musisz przechylić, zapomnij i zacznij rozładowywać serwery :-)

Osobiście doradzałbym najpierw opróżnienie stojaków lub, jak sugerował Kevin, zdobycie nowych stojaków w nowej lokalizacji. Być może pozwoliłoby to również na elastyczność w przenoszeniu systemów etapami, a nie wszystkimi naraz. Oczywiście może to nie działać w danym środowisku.

Kup niesamowitą drukarkę etykiet i oznacz wszystko, jakbyś oszalał. Następnie rozłóż go na części i przesuń kawałek po kawałku.

To wszystko.

Możesz również rozważyć ruch częściowy. Na przykład możesz najpierw przenieść sprzęt do tworzenia kopii zapasowych - jeśli jest to kopia zapasowa na żywo, możesz nawet przekierowywać użytkowników do systemów tworzenia kopii zapasowych podczas przenoszenia systemów podstawowych.

Możesz także rozpocząć przeprowadzkę od systemów jednego zespołu lub części systemu kilku zespołów w pierwszej kolejności. Napraw problemy, z którymi borykają się te systemy, podczas gdy zespół nadal może pracować ze swoimi maszynami w starym pokoju.

przed przeniesieniem sprzętu przygotuj z wyprzedzeniem to, co możesz. jeśli chcesz porządnego stelaża, zaplanuj, gdzie pójdzie każdy serwer, i przyciąć nowe kable sieciowe na odpowiednią długość i opatrzyć je etykietą. zainstaluj dodatkowe przełączniki i pdu. w ten sposób podczas przeprowadzki wystarczy zabrać ze sobą kable zasilające i serwery.

podczas przeprowadzki, jeśli przenosisz sprzęt produkcyjny, kontrolery domeny, serwery poczty e-mail, serwery terminali lub cokolwiek, co użytkownicy zazwyczaj oczekują 24 godziny na dobę, 7 dni w tygodniu, 365 dni w tygodniu, włącz te ostatnie jako ostatnie i uruchom najpierw. Przenieś sprzęt później w nocy, a jeśli masz dużo do zrobienia, zdobądź kilka dodatkowych rąk (znajomi będą pracować na pizzę) i pożycz / wynajmij van. Jeśli twój szef ma obsesję na punkcie bezpieczeństwa, skontaktuj się z lokalnym szeryfem w sprawie eskorty policyjnej.

przygotuj i przetestuj swój krytyczny sprzęt. urządzenia pomocnicze, takie jak serwery zapasowe lub zapasowe pliki dc, mogą trochę poczekać. wykonywanie pracy w ciągu nocy daje czas na przedstawienie i przetestowanie bez ingerencji w sieć

oto kilka rzeczy, których nauczyłem się, przenosząc serwery o wartości 2 szaf w ciągu jednej nocy.

Przenieś go pustym (lub najpierw zainstaluj nowe i podłącz kablami w nowej lokalizacji). Serwery są niesamowicie ciężkie. Nawet jeśli chciałbyś wątpić, byłbyś w stanie przenieść 42U gęsto upakowanej elektroniki za jednym razem.

Jestem za istniejącymi odpowiedziami na temat etykietowania i rozpakowywania. Inną rzeczą, którą chciałbym dodać, jest to, że jest to możliwe, nie przesuwaj wszystkich 5 stojaków na jeden dzień. W ten sposób musisz mieć kłopoty z wystrzeleniem jednego sprzętu o wartości jednej szafy w ciągu jednego dnia.

Właśnie to zrobiłem kilka miesięcy temu. Oto moje wskazówki:

1. Prześpij się dużo. Skończyłem pracę 32 z 36 godzin, zaczynając o 8 rano w piątek i kończąc o 22:00 w sobotę.
2. Mieliśmy szczęście, że większość wszystkiego było skonfigurowanych w klastrze HA, więc mogliśmy w wolnym czasie przenieść połowę sprzętu do nowego DC, zmienić DNS na nowy DC, a następnie przenieść resztę sprzętu, ponieważ DNS się propaguje .
3. Jeśli zamierzasz zmienić adresy IP, zmniejsz TTL w swojej domenie przed czasem, aby propagacja odbywała się szybciej.
4. Zrób bardzo szczegółową listę kontrolną kroków ułożonych w porządku chronologicznym. Będziesz fizycznie i psychicznie wyczerpany, a lista kontrolna pozostawia niewiele miejsca na błędy.
5. Najważniejsza część: mieć kopie zapasowe i plany serwisowe na wszystko. Podczas naszego ruchu nie mieliśmy żadnych nierówności ani poślizgnięć, ale straciliśmy 2 dyski twarde, jeden kij RAM i jedną kartę DRAC w ruchu. Prawdopodobnie wibracja spowodowana ruchem, ale mogła to być po prostu zmiana mocy.

Przez dwa tygodnie wcześniej nie robiłem nic, tylko przygotowywałem pracę i to się opłaciło.

Wcześniej miałem do czynienia z wyłączeniem centrum danych z ponad 200 systemami, ale bez części ruchomej. (Aby zainstalować przełącznik przenoszenia obciążenia i wymienić wszystkie baterie w pomieszczeniu UPS) Będę musiał poradzić sobie z przemieszczaniem się między budynkami w przyszłym roku, ale to tylko 7 stojaków.

Oprócz tego, co już powiedzieli inni:

• Oczywiście są kopie zapasowe i testowanie kopii zapasowych. Jeśli możesz, zdobądź dodatkowy sprzęt lub zmień przeznaczenie dowolnego sprzętu testowego, aby móc wstępnie pozycjonować krytyczne usługi. (DNS, NTP, syslog, wszystko inne, które inne systemy mogą potrzebować wrócić). Możesz również rozważyć zapakowanie wszelkich posiadanych części zamiennych (kabli, napędów, zasilaczy itp.), Aby były gotowe do wysyłki.

• Przetestuj całą moc, zanim będziesz gotowy do ruchu - i upewnij się, że nie jest to tylko „tak, gorąco jest gorąco”, ponieważ Twoje UPSy będą walczyć z otwartym punktem neutralnym, a następnie musisz spróbować wyśledzić elektryk awaryjny.

• Jeśli masz wiele połączeń sieciowych między stelażami (np. Do pojedynczego „stelaża sieciowego”, zastanów się, czy wszystkie zrzuty sieciowe są już przygotowane dla stelaży ... uderz w dół (i przetestuj!) Panele krosowe, które możesz uderzyć w szafie i kablu do, i unikaj radzenia sobie z długimi biegami sieci na szczycie wszystkiego innego.

• Poszukaj pojedynczych punktów awarii i upewnij się, że masz zapasowy lub możesz go ominąć - mieliśmy nasz serwer terminali, co oznaczało, że musieliśmy wziąć kilka terminali Wyse, musieliśmy zbudować dwa wózki awaryjne, które moglibyśmy przeciągnąć z serwera do serwera, aby sprawdzić, które nie były czyste.

• Upewnij się, że masz wszystkie numery pomocy technicznej swojego dostawcy. Jeśli masz umowę wsparcia na wysokim poziomie, możesz sprawdzić, czy wyślą inżyniera z częściami zamiennymi na wypadek, gdyby coś poszło nie tak. Niektórzy mogą nawet wymagać, aby ich personel był tam, aby nadzorować sprawy, lub unieważnią twoją umowę wsparcia.

• Zrekrutuj menedżera (kogoś, kto ma duże interesy z wystarczającą siłą w firmie, ale nie jest bezpośrednio potrzebny do przywrócenia wszystkiego), aby był odpowiedzialny za powstrzymywanie innych członków kierownictwa przed zepsuciem twojego zespołu. Wydaje się, że nie rozumieją tego, kiedy próbujesz poradzić sobie z rzeczami, które poszły źle, za każdym razem, gdy pytają cię, ile to zajmie, zaburzają twoją koncentrację. Menedżer może być również odpowiedzialny za upewnienie się, że ludzie mają jedzenie i preferowane źródło kofeiny, i być w stanie wyciągnąć ludzi, gdy są martwi na nogach i potrzebują wyrządzić więcej szkody niż pożytku (chociaż z dala od odbudowy systemu pocztowego, a niektórzy z nas pracują 12-16 godzin przez 16 dni z rzędu)

• Jeśli Twoi administratorzy mają długie dojazdy, poproś firmę, aby wynajęła im pobliskie pokoje hotelowe, aby nie tracić 2-3 godzin dziennie na dojazdy. (ponownie, po przebudowie systemu pocztowego).

• Jeśli jesteś naprawdę paranoikiem, poprosiłbym o dwie poruszające się ciężarówki lub odbył dwie podróże i nie transportowałem podstawowych systemów z ich kopiami zapasowymi. Lub, jeśli czas stanowi problem, najpierw zniszcz najbardziej krytyczne stojaki i wyślij je w pierwszej podróży, podczas gdy ktoś inny zakończy niszczenie mniej krytycznych stojaków na drugą podróż.

• W przypadku wózków, firma przeprowadzkowa powinna być przygotowana (jak powiedzieli inni, skorzystaj z firmy przeprowadzkowej ), ale możesz również wynająć te do transportu lodówek od firmy wynajmującej, jeśli są one używane tylko do transportu ubezpieczonego, a nie przygotowany do przeniesienia półpełnego stojaka.

• Jeśli masz wystarczającą liczbę osób do pracy w systemie zmianowym, aby załatwić sprawę, upewnij się, że się pokrywają, aby ludzie wiedzieli, co się naprawdę dzieje, a nie tylko ślepo postępować zgodnie z listą kontrolną.

• Jeśli masz szafki, a nie dwa regały na słupki, a drzwi zamykają się bez zgniatania kabli, prawdopodobnie postaram się zostawić tyle kabli, ile tylko mogę, oprócz tego, co trzeba było pociągnąć, aby rozjaśnić górę regału. (okej, za jednym razem nie zgadzam się z tym, co już powiedziano)

• ... a następnie zaplanuj trochę czasu na regenerację. Dzięki długim dniom przygotowań do tego, jako że zarząd poinformował nas o dwutygodniowym powiadomieniu (o którym wiedzieli od miesięcy, po prostu nie zawracał sobie głowy informowaniem sysadminów), nasz Xyplex wychodził i spędzał godziny w maszynowni, krzycząc fani dwóch szaf EMC, zachorowałem i nie było mnie przez tydzień. Prawdopodobnie warto również wstrzymać sysadmin lub dwa w niedzielę, więc będą świeżo pracować w poniedziałek, zajmując się wszelkimi problemami, jakie napotkają użytkownicy.

dodanie:

Więc po wykonaniu kolejnego ruchu, kilka rzeczy do rozważenia:

• Jeśli zamierzasz się przeprowadzać w chłodnych porach roku, nalegaj, aby firma przeprowadzkowa przyniosła ogrzewaną ciężarówkę i nie pozostawiła rzeczy w zimnym doku załadunkowym, gdzie wystąpią nagłe zmiany termiczne, które mogą pęknąć lut stawy (przenieśliśmy głównie pełne regały i owinęliśmy je folią bąbelkową i przesuwaliśmy koce, aby je izolować)

• sprawdź rozmiar ciężarówki, z której będzie korzystać firma przeprowadzkowa, aby nie przyniosła czegoś zbyt dużego, niż może łatwo dostać się do doku załadunkowego.

• umieść szyszki lub inne przedmioty poprzedniej nocy, aby upewnić się, że nikt nie zdecyduje się zaparkować w miejscu, w którym wpłynie na zdolność pojazdu, który przyniosła firma transportowa z możliwości dotarcia do doku załadunkowego.

• jeśli jeden ze sprzedawców sprzętu nalega na przyniesienie własnej ruchomej ciężarówki i dostarczenie skrzyni do pakowania w celu przesunięcia regału z wyprzedzeniem, zapytaj go, czy ich firma przeprowadzkowa planuje przynieść ciężarówkę, która może obsługiwać przedmioty o wysokości takiej jak skrzynia . (na szczęście poruszaliśmy się tylko w obrębie naszego kampusu, więc nie chcieli pozwolić, by regał poruszał się bez oceny)

• jeśli masz dziwne wymagania (np. rampa na podniesioną podłogę rozciąga się przez drzwi, a niektóre stojaki są zbyt wysokie, aby przejść przez drzwi, jeśli rampa jest na miejscu), upewnij się, że dostaną się prawdziwi ludzie, którzy będą robić pakowanie stojaków, aby przyjść i zbadać sytuację, nie tylko kierownika. (nam się poszczęściło, ponieważ przenieśli maszynownię na podłogę ponad tydzień przed nami ... więc okazało się, że sposób, w jaki planowali podnieść regały z podłogi podniesionej, nie zadziałał, więc dwóch z nas wyrwało część podłogi podniesionej przed dniem przeprowadzki)

Jeśli zamierzasz przenieść cały stojak, zastanów się nad tym: http://powermate.info . Kupiliśmy taki, który może wytrzymać do 1500 funtów, i jest ratownikiem dla tych krótkich drzwi!

Wydrukuj swoje dokumenty przenoszenia (i zdjęcia cyfrowe) i wypal je na płycie CD ze względu na paranoję. Umieść dodatkową kopię w bezpiecznym miejscu. Twój laptop może zawieść.

Zrób także główną listę kontrolną wielkości plakatu dla każdego końca ruchu i umieść je na ścianie w odpowiednim miejscu. Następnie, gdy ktoś prosi o status, wystarczy wskazać.

Jeśli to możliwe, używaj kodowania kolorami i ikon na wszystkich etykietach / dokumentach. Pomyśl Garanimals .

Nie zapomnij nakleić etykiet na same stojaki, w których coś usunąłeś.