Советы по перемещению машинного помещения на новое место?

Наша компания переезжает в новые офисы через пару месяцев, и я отвечаю за то, чтобы следить за перемещением серверов разработки в компании. Большая часть оборудования dev находится в шкафах 5, 42U + стойка для коммутационного / маршрутизирующего оборудования. Как большинство людей делают такие вещи? Переместите весь салон или извлеките отдельные компоненты и освободите стойки.

любые рекомендации по подготовке и закрытию до переезда приветствуются

Мы сделали пару ходов со стойками. Вот что я забрал из опыта:

Перед:

• маркируйте все. Оба конца. И слот для стойки, к которому он подключен.
• диаграмма все.
• если у вас есть важные данные, запланируйте полное резервное копирование за 6-12 часов до переезда. Как минимум, проверьте последнюю полную резервную копию, которая у вас есть.
• планирую вынимать все из стойки во время переезда. Как минимум выньте половину массы сверху вниз - это означает, что верхняя часть пуста. Не ждите, что грузчики передвинут стойку с тяжелым верхом. В стойке с ИБП на базе это означает, что вы убираете, вероятно, 2/3 серверов. Все, что оставлено в стойке, ДОЛЖНО иметь рельсы и быть надежно закреплено в рельсах (наше движение было меньше 0,5 мм и терпимо к любой ориентации - в том числе вверх ногами и лицевой стороной вниз). Мы переместили полные стеллажи и наполовину полные стеллажи, и стеллажи всегда нужно наклонять / поворачивать, и совершенно страшно наблюдать за тем, как ваши средства к существованию висят над бетонным погрузочным доком.
• По нашему опыту, передние и задние двери более декоративны, чем несущие, и их оставление может сделать перемещение стоек очень неудобным, поскольку все хорошие точки для удержания рук недоступны. Планируйте убирать двери во время фактического переезда. Это заставляет грузчиков поднимать, тянуть, толкать и дергать стойку за ее самые прочные части. Обычно боковые панели могут оставаться на месте, но будьте готовы убрать их, если грузчики думают, что их устранение поможет.
• нанять кого-нибудь с застрахованным грузовиком для перевозки. НЕ делай это сам. Вы можете думать, что вы застрахованы, но ваша страховая компания, вероятно, будет думать иначе. Второе, что вы хотите, - это участвовать в трехстороннем поединке между страховой компанией вашего работодателя и вашей страховой компанией.
• нанять кого-нибудь застрахованного, чтобы он поднял, передвинул, опустил и (во время аварии) бросил свое снаряжение для вас НЕ делай это сам. Последнее, что вы хотите сделать, это навредить себе или быть вовлеченным в травму сотрудника.
• убедитесь, что ваши застрахованные лица специализируются на высокотехнологичных действиях и могут предоставить одеяла, антистатическую пленку и, при необходимости, ящики.

Во время переезда:

• резервные копии хороши, верно?
• провод отсоединяй сам. Потяните ВСЕ провода, которые отключены. Каждый провод должен быть помечен и помещен в коробку, которая сама хорошо помечена.
• пусть сильные, хорошо застрахованные парни делают извлечение сервера из стойки. Контролируйте упаковку лично.
• держитесь подальше от сильных, хорошо застрахованных парней, когда они выполняют погрузку и разгрузку.
• контролируйте распаковку и повторную вставку в стойки. Если есть ЛЮБОЙ вопрос о состоянии сервера, упомяните его и отметьте, что он был упомянут.
• Если работа занимает много времени, попросите парней выпить кофе и / или пончики. Если уместно (и если они хорошо поработали), холодное пиво после работы тоже идет хорошо.

Физическое воспитание:

• удвойте свою оценку времени, чтобы вернуть вещи на ходу.
• иметь план застройки. Хороший план сборки включает в себя контрольный список всех служб, серверов и план тестирования.
• подтвердить, подтвердить, подтвердить.
• проверьте все серверы, которые могли быть повреждены при транспортировке, как указано выше.
• не позволяйте руководству удешевить, когда дело доходит до еды, если вы работаете во время еды Голодные техники делают ошибки. Если подготовка будет долгой и сложной, запланируйте время, чтобы выйти из комнаты на 90 минут, чтобы получить настоящую еду.

После:

• Вам также может подойти холодное пиво.

Я с Кевином на разблокировке и отключении. Стеллажи, с которыми я работал, предназначены для погрузки с грузом, обычно имеют дополнительное крепление и должны быть прикреплены к неподвижной основе (например, к поддону) во время транспортировки. Обычно на серверах также есть какой-то механизм блокировки. Если вы не перемещаете что-то, что не создано, чтобы быть загруженным , не делайте .

Я бы добавил это к ответу Кевина:

Частью документирования является знание, почему существуют различные соединения и кабели. Вы можете делать все заметки, делать все снимки и т. Д., Которые хотите, но в конце дня, если вы не понимаете, почему что-то происходит, вы рискуете не знать, что тестировать, чтобы установить после переезда, что ты "все получил".

Это прекрасная возможность, поскольку, когда вы документируете «что подключено к чему» в этом движении, спросите себя «почему это подключено к этому»?

У меня было слишком много случаев «я просто исправлю это здесь и временно изменю назначение VLAN», которое превращается в полупостоянную конфигурацию, которую никто не задокументировал, чтобы вернуться, чтобы укусить меня при перемещении оборудования спустя годы.

Прежде чем какое-либо оборудование отправится в личный автомобиль, узнайте, как страховка компании обрабатывает претензии в случае повреждения во время транспортировки.

Сделайте резервную копию, прежде чем начать движение. Предположим, что все оборудование будет уничтожено во время движения, потому что (если вы едете по дорогам общего пользования, по крайней мере) это может быть. Само собой разумеется, что носитель резервного копирования не должен двигаться вместе с инфраструктурой!

Извлеките отдельные компоненты и переместите стойки пустыми. Это также имеет то преимущество, что вы можете восстановить соединение в оптимальной конфигурации и получить проводку именно так, как вы этого хотите. Просто обязательно документируйте все до, во время и после. Делайте цифровые фотографии, чтобы помочь.

Мы переместили две стойки серверов примерно на 60%, около 3 лет назад.

Это было самое страшное, что я видел за долгое время.

В конце концов все было в порядке, но грузчики должны были наклонить стойку, чтобы вытащить ее за дверь в старом месте. Они были очень большими и очень сильными, и, к счастью для меня, стойка не упала - но я могу вам сказать, я просто подчеркивал, что смотрю ее.

Если вам необходимо полностью сдвинуть стойки, убедитесь, что вы можете катить стойки через двери, не наклоняя их в каждой двери, с которой вы столкнетесь во время движения. если придется наклоняться, то забудь об этом и начни разгрузку серверов :-)

Я бы лично посоветовал либо сначала опорожнить стойки, либо, как предложил Кевин, получить новые стойки в новом месте. Возможно, это также позволит вам гибко перемещать системы поэтапно, а не все сразу. Конечно, это может не сработать в вашей конкретной среде.

Купите отличного производителя этикеток и маркируйте все так, как будто вы сходите с ума. Затем разберите его и передвиньте по частям.

Это все.

Вы также можете рассмотреть частичный ход. Например, вы можете сначала переместить оборудование для резервного копирования - если это оперативное резервное копирование, вы можете даже перенаправить пользователей в системы резервного копирования во время перемещения основных систем.

Вы также можете начать движение с системами одной команды или сначала с частью систем нескольких команд. Исправьте проблемы, с которыми сталкиваются эти системы, пока команда может работать со своими машинами в старой комнате.

прежде чем перемещать оборудование, подготовьте все, что можете, заранее. если вам нужна аккуратная стойка, спланируйте, куда пойдет каждый сервер, обрежьте новые сетевые кабели по длине и пометьте их. установите любые дополнительные переключатели и pdu. Таким образом, при движении вам нужно только взять шнуры питания и серверы.

при перемещении, если вы перемещаете производственное оборудование, контроллеры домена, серверы электронной почты, серверы терминалов или что-либо, на что пользователи обычно указывают время безотказной работы 24x7x365, выполняйте это отключение последним и загружайте первым. Перемещайте снаряжение поздним вечером, и если вам нужно много двигаться, возьмите пару дополнительных рук (друзья будут работать за пиццу) и одолжите / арендуйте фургон. Если ваш босс недоволен безопасностью, свяжитесь с местным шерифом по поводу полицейского сопровождения.

сначала поставьте критически важное оборудование для своего бизнеса и испытайте его. вспомогательное оборудование, такое как резервные серверы или резервные DC, может немного подождать. выполнение работы в одночасье дает время для подведения итогов и тестирования, не мешая

Вот несколько вещей, которые я узнал, перенося серверы на 2 стойки за одну ночь.

Переместите его пустым (или установите новые и подключите их сначала в новом месте). Серверы потрясающе тяжелые. Даже если вы хотите, я сомневаюсь, что вы сможете переместить 42U плотно упакованной электроники за один раз.

Я за уже существующие ответы о маркировке и разблокировке. Еще одна вещь, которую я хотел бы добавить, если это возможно, не двигать все 5 стоек за один день. Таким образом, вам нужно всего лишь за один день стрелять в одну стойку.

Я только что сделал это несколько месяцев назад. Вот мои советы:

1. Получи тонну сна. Я закончил работать 32 из 36 часов, начиная с 8 утра в пятницу и заканчивая в 10 вечера в субботу.
2. Нам повезло, что в кластере высокой доступности было настроено почти все, поэтому мы могли переместить половину оборудования на новый DC в свободное время в течение дня, переключить DNS на новый DC, а затем перенести оставшуюся часть оборудования, поскольку DNS продвигается вперед. ,
3. Если вы собираетесь сменить IP-адрес, заранее проверьте TTL на вашем домене, чтобы распространение происходило быстрее.
4. Составьте очень подробный контрольный список шагов, изложенных в хронологическом порядке. Вы будете физически и умственно истощены, контрольный список оставляет вам мало места для ошибок.
5. Самая важная часть: иметь резервные копии и планы обслуживания на все. У нас не было никаких ударов или проскальзываний во время нашего перемещения, но мы потеряли 2 жестких диска, одну флеш-память и одну карту DRAC в движении. Вероятно, вибрация от перемещения, но это могла быть просто энергетическая цикличность всего этого.

Я делал только подготовительную работу за две недели до этого, и это принесло большие дивиденды.

Раньше мне приходилось сталкиваться с отключением питания центра обработки данных с более чем 200 системами, но без переезда. (Чтобы установить переключатель передачи нагрузки и заменить все батареи в комнате ИБП), мне придется иметь дело с перемещением между зданиями где-то в следующем году, но это всего 7 стоек.

Итак, в дополнение к тому, что уже сказали другие:

• Конечно, есть резервные копии, и тестирование резервных копий. Если вы можете, приобретите дополнительное оборудование или перенастройте любое тестовое оборудование, чтобы вы могли предварительно установить критически важные службы. (DNS, NTP, системный журнал, все, что может понадобиться другим системам для восстановления.) Вы можете также подумать о том, чтобы собрать все имеющиеся у вас запчасти (кабели, диски, блоки питания и т. Д.), Чтобы они также были готовы к отправке.

• Проверьте всю мощность до того, как вы будете готовы к работе - и убедитесь, что это не просто «да, горячо горячо», поскольку ваши ИБП будут блокироваться при открытой нейтрали, а затем вы должны попытаться отследить аварийный электрик.

• Если у вас много сетевых подключений между стойками (например, к одной «сетевой стойке»), подумайте о том, чтобы подготовить все отвалы сети к стойкам ... пробить (и протестировать!) Патч-панели, которые вы можете шлепнуть в стойку и кабель до, и избегать иметь дело с длинными сетями работает поверх всего остального.

• Ищите отдельные точки отказа и убедитесь, что у вас есть запасная часть или вы можете ее обойти - у нас был умирает наш сервер терминалов, а это означало, что нам пришлось взять несколько терминалов Wyse, которые мы должны были построить для двух аварийных тележек, которые мы могли перетащить с сервера на сервер, чтобы проверить те, которые не были чистыми.

• Убедитесь, что у вас есть все номера поддержки вашего поставщика. Если у вас есть контракт на поддержку высокого уровня, вы можете посмотреть, отправят ли они инженера с запасными частями на случай, если что-то пойдет не так. Некоторые могут даже потребовать, чтобы их персонал присутствовал там, чтобы наблюдать за ситуацией, или они расторгнут ваш контракт на поддержку.

• Наймите менеджера (кого-то, у кого есть заинтересованность с достаточным влиянием в компании, но он не нужен для того, чтобы все восстановить), чтобы он отвечал за то, чтобы другие менеджеры не мешали вашей команде. Кажется, они этого не понимают, когда вы пытаетесь разобраться с вещами, которые пошли не так, каждый раз, когда они спрашивают вас, сколько времени это займет, они нарушают вашу концентрацию. Менеджер также может нести ответственность за то, чтобы у людей была еда и их предпочтительный источник кофеина, и он был в состоянии вытащить людей, когда они мертвы на ногах и нуждаются в том, что они приносят больше вреда, чем пользы (хотя, это от перестроения почтовой системы, некоторые из нас работают по 12-16 часов в течение 16 дней подряд)

• Если у ваших системных администраторов длительные поездки, попросите компанию арендовать для них несколько близлежащих гостиничных номеров, чтобы вы не теряли 2-3 часа в день на поездки. (опять же из почтовой системы перестроить).

• Если вы действительно параноик, я бы попросил двух движущихся грузовиков или совершил две поездки, и не перевозил бы основные системы с их резервными копиями. Или, если время является проблемой, сначала разбейте наиболее критичные стойки и отправьте их в первую поездку, пока кто-то еще заканчивает ломать менее критичные стойки для второй поездки.

• Для тележек должна быть подготовлена ​​транспортная компания (как уже говорили другие, используйте транспортную компанию ), но вы также можете арендовать те для перевозки холодильников у компании по прокату, если они просто используются для застрахованного транспорта, а не готовы переместить наполовину полную стойку.

• Если у вас достаточно людей, чтобы работать в шахматном порядке, чтобы добиться своей цели, убедитесь, что есть некоторые совпадения, чтобы люди знали, что на самом деле происходит, а не просто слепо следовали контрольному списку.

• Если у вас есть шкафы, а не две стойки для стоек, и двери закрываются чисто, не раздавливая кабели, я, вероятно, постараюсь оставить как можно больше кабелей, кроме того, что нужно было потянуть, чтобы осветить верхнюю часть стойки. (хорошо, один раз я не согласен с тем, что уже было сказано)

• ... а затем запланируйте некоторое время для восстановления сил. Благодаря долгим дням, готовящимся к этому, поскольку руководство дало нам уведомление только за две недели (о чем они знали в течение многих месяцев, просто не удосужились рассказать сисадминам), наш Xyplex вышел и провел часы в машинном отделении, вынужденные кричать фанаты двух кабинетов EMC, я заболел и отсутствовал в течение недели. Возможно, также стоит сдержать сисадмина или двух в воскресенье, так что в понедельник они снова будут работать, чтобы разобраться с любыми проблемами, поступающими от пользователей.

дополнение:

Итак, после выполнения другого шага, несколько вещей, чтобы рассмотреть:

• Если вы собираетесь переезжать в холодное время года, настаивайте на том, чтобы транспортная компания привезла с собой нагретый грузовик, и не оставляла вещи в доке с холодной загрузкой, где вы можете внезапно перегреться, что может привести к растрескиванию припоя. суставы. (мы переместили в основном полные стойки и завернули их в пузырчатую пленку и перемещали одеяла, чтобы изолировать их)

• проверьте размер грузовика, который будет использовать транспортная компания, чтобы они не принесли что-то слишком большое, чем может легко добраться до вашего погрузочного дока.

• поместите шишки или другие предметы накануне вечером, чтобы убедиться, что никто не решит припарковаться там, где они повлияют на способность к полуфабрикату, полученному движущейся компанией от возможности добраться до погрузочного дока.

• если один из поставщиков оборудования настаивает на том, чтобы привезти свой движущийся грузовик и получить упаковочный ящик, чтобы заранее сдвинуть стойку, спросите их, планирует ли их транспортная компания ввести грузовик, который может обрабатывать предметы такого же роста, как и их ящик. , (К счастью, мы двигались только в пределах нашего кампуса, поэтому они уступили позволять стойке двигаться без ящиков)

• если у вас есть странные требования (например, пандус для фальшпола проходит через дверной проем, а некоторые стеллажи слишком высоки, чтобы пройти через дверной проем, если пандус на месте), убедитесь, что на самом деле есть люди, которые собираются это сделать Упаковка стеллажей, чтобы прийти и изучить ситуацию, а не только менеджер. (нам повезло, когда они двигали машинное отделение на полу выше недели до нас ... поэтому мы случайно обнаружили, что способ, которым они планировали поднять стойки с фальшпола, не сработал, поэтому двое из нас вырвали часть фальшпола до дня переезда)

Если вы собираетесь переместить всю стойку, подумайте над этим: http://powermate.info . Мы купили тот, который может выдержать до 1500 фунтов, и это спасатель для тех коротких дверей !.

Напечатайте свои документы о переезде (и цифровые фотографии) и запишите их на компакт-диск из-за паранойи. Положите дополнительную копию в безопасное место. Ваш ноутбук может выйти из строя.

Кроме того, сделайте основной контрольный список размером с плакат для каждого конца движения и прикрепите их к стене на соответствующем участке. Затем, когда кто-то запрашивает статус, все, что вам нужно сделать, это указать.

Используйте цветовое кодирование и значки везде, где это возможно, на всех ваших ярлыках / документах. Подумайте, Garanimals .

Не забудьте нанести ярлыки на те стойки, где вы что-то удалили.