Стойки для структурированных кабельных серверов

8

У нас есть возможность на следующей неделе перепрограммировать пять серверных стоек, которые в настоящее время находятся в полном беспорядке. Каждая стойка в настоящее время имеет переключатель, установленный сверху, с большим количеством кабелей, висящих вокруг.

Мы думаем об установке коммутационных панелей в каждой стойке, подключенных обратно к первой стойке к другой панели, оттуда патч-провода, которые идут в коммутаторы, а на других стойках патч-провода идут в серверы.

введите описание изображения здесь

Таким образом, сервер в стойке 5, например, будет подключен примерно так:

[сервер] -> [соединительный кабель] -> [соединительная панель в стойке 5] -> -> -> -> -> -> [соединительная панель в стойке 1] -> [соединительный кабель] -> [переключатель]

Будет ли что-то подобное работать?

Любые пункты, предложения приветствуются.

Заранее спасибо!

PeterG
источник
+1, хорошо для организации / разделения ... Наш NOC нашего colo размещает патч-панели сервера в нижней части стоек, так как они имеют фальшпол и прокладывают кабели под ним.
Джскотт
1
Хорошее усилие на чертеже mspaint. :)
user78940

Ответы:

4

Это будет работать, но в чем преимущество перед чисткой существующих кабелей и хранением коммутаторов в локальных стойках (есть ли много перекрестных соединений между стойками, которые можно устранить?).
Помните, что патч-панели волшебным образом не делают вашу проводку аккуратнее: дисциплина, обслуживание и множество липучек делают это.

Как правило, разделение ваших стоек может быть полезным, особенно потому, что патч-панели обычно поставляются с хорошими сплошными стволами от панели к панели (меньше мусора под полом или в кабельных лотках).
Большим недостатком является то, что если вы потеряете связь на коммутаторе, у вас теперь будет гораздо больше проблем для устранения неполадок (это кабель от сервера к локальной коммутационной панели, магистраль от панели к панели, кабель от коммутационной панели к коммутатор, сам коммутатор, сам сервер и т. д.).
Меньшим недостатком является необходимость открыть две стойки для подключения сервера к коммутатору. Это может быть рассмотрено как повышение безопасности (кто-то, у кого есть ключи от стойки коммутатора, должен быть рядом, чтобы подключить новое оборудование).


Небольшой совет, независимо от того, что вы решите сделать: Документируйте чертовски свои кабели - ОСОБЕННО, если используете патч-панели. Позже вы поблагодарите себя, когда вам нужно выяснить, какой путь сервер использует для подключения к порту коммутатора. (Здесь есть несколько вопросов о схемах маркировки кабелей - один из них /server/64259/what-is-the-most-effective-solution-you-used-to-label-cables )

voretaq7
источник
1
+1 Только для галстуков velco ... Я хочу принести дайки любому, кто носит связку на молнии.
Джскотт
Спасибо за ваш комментарий, и я согласен, наличие панели исправлений несколько добавляет дополнительные точки отказа, которые необходимо будет изучить, если, например, сервер потерял связь. В настоящее время у нас довольно много перекрестных соединений, и мы будем развертывать два блока SAN с многолучевым распространением ... это основная причина, по которой мы рассматриваем возможность перехода по маршруту коммутационной панели.
PeterG
ИМХО консолидация перекрестных соединений абсолютно стоит каких-либо дополнительных затрат - чем меньше дерьма на полу / подносе, тем лучше для вас. Обратите внимание, что существуют также оптоволоконные коммутационные панели (на случай, если вы рассматриваете волоконно-оптическую сеть хранения данных), на которые, возможно, стоит обратить внимание, но они ОГРОМНО дороги, как и все оптоволокно :)
voretaq7
4

Я лично участвовал в подключении дата-центров к обоим описанным вами методам, и должен сказать, что наличие коммутатора в стойке оказалось гораздо лучшим решением. Как установка, так и обслуживание проще с коммутатором в стойке, и если вы не планируете, чтобы количество серверов было значительно ниже плотности портов коммутатора в стойке, коммутатор в стойке, скорее всего, будет дешевле.

Вот несколько преимуществ, которые я получил за решение для коммутатора в стойке

  • Требуется меньше межстоечных кабелей - 1 (+ резервное копирование / соединение) восходящий канал для каждого основного коммутатора вместо 1 на хост. Это ОГРОМНО.
    • Меньше времени на реализацию
    • Меньше кабелей для тестирования
    • Более низкая стоимость (при условии, что вы можете правильно подобрать коммутаторы в стойке)
  • Требуется 1 соединительный кабель вместо 2 - каждый провод, который проходит, является другим местом, которое требует тестирования
  • Меньше документации - как минимум, каждый кабель должен быть маркирован, и 1 легче, чем 2
  • Полностью прослеживаемые соединительные кабели - случаются упущения и пропускается документация, в одной стойке намного легче отследить кабель (но все равно неинтересно)
  • Более легкое удаление / перемещение сервера. Панели исправлений требуют большого доверия к вашей документации. Переключатель в стойке. Я вытаскиваю кабель от сервера, отрезаю конец, подаю его обратно к коммутатору и вынимаю. Нет доверия / догадок на патч-панели
  • Меньшее количество ошибок в данных - панель обмоток имеет 6 точек для перфорации / обжима до достижения коммутатора, у коммутатора в стойке - 2. Каждая точка обжима / перфорации - это место, где теряется сигнал. Это меньше проблем с 100Mb, чем 1Gb +. Я также обнаружил, что легче сертифицировать обжим RJ45, чем пробивать панель.
  • Ускорение инвентаризации коммутаторов - распечатать конфигурацию для одного коммутатора и проверить стойку намного проще, чем распечатать все конфиги для всех коммутаторов и проверить
  • Меньше беспорядка - решение с коммутационной панелью требует большого количества кабелей в небольшом пространстве, и если вы видите беспорядок с 1 стойкой серверов (~ 40 кабелей), представьте, что у вас более 160 устройств в одном месте

Это не значит, что я полностью против патч-панелей, но я стараюсь ограничить их использование в местах, где я не могу вынести переключатели на оборудование. Кабинеты офисной электропроводки приходят на ум как идеальное место для использования патч-панелей, но в центре обработки данных я рекомендую вам установить как можно ближе к 0 патч-панелей.

Издание
источник
3

В настоящее время мы делаем именно это, где я работаю. И я ненавижу это .

  1. Множество дополнительных точек отказа
  2. У нас всегда короткие ссылки в кабинете.
  3. Когда нам нужны новые ссылки, кто-то проводит проводку в шкафу по лестнице, рискуя всеми другими ссылками.
  4. У нас есть направляющие для очистки проводов под каждой патч-панелью, а затем направляющие для проводов на стороне переключателя, что приводит к потере места.
  5. утроить количество кабелей. Ура. Мне нужно больше таких!
  6. А соединительные кабели bajillion работают без всякой рифмы или причины и без возможности легко их отследить .

Этот последний пункт является худшим. Когда вы спешите, несколько уровней трассировки являются адом, и ваш коммутатор находится далеко-далеко, когда все, что вам нужно сделать, это одновременно проверить индикаторы на сервере и коммутаторе.

Если вы сделаете это таким образом, я бы порекомендовал вам чередовать 1 мк коммутаторов с 2 микросхемами, чтобы у вас не было мега-кирпича проводов, проходящих по каждой стороне от блока восходящих линий к блоку коммутаторов. , Вы должны привязать провод, чтобы держать его под контролем, когда у вас более 200 проводов в одном канале, и тогда вы НИЧЕГО не сможете отследить.

Если у вас есть SAN-матрица, которая является вторым коммутатором, то я бы поставил ее снизу, чтобы ваша проводка шла по-другому.

ОБНОВЛЕНИЕ с Советом

Мы использовали всплывающие патч-панели Panduit и аппаратные оба, и все в порядке, если ваш электрик в порядке. Много снятия стресса имеет решающее значение с долгосрочной проводкой, согните их, связать их и связать их. И, честно говоря, вы должны прививать культуру правильного ведения дел ... поэтому приобретайте вертикальные проволочные направляющие и используйте их религиозно. (Липучка к раме стойки в порядке!) Драпированные кабели разрушают гравитацию.

С точки зрения @ voretaq7: хорошая предварительная разводка всего блока из 24-х - это хорошая идея, которую вы найдете позже для них (мы закончили тянуть KVM, используя их в качестве соединений между шкафами и т. Д.).

Работайте усердно, чтобы все было согласованно. 1-24 следует подключить, чтобы 1-24 на другом конце. Если у вас есть порты коммутатора, предварительно подключите все (или половину) по порядку. Если вы используете больше, чем данные в Ethernet, выделите цветом каждый кабель для этой ссылки. Вы хотите быть в состоянии обнаружить странные из них в спешке. Рассмотрите назначение портов по номеру стойки µ, а не загрузку слева направо. Все, что поможет вам избежать гигантской электронной таблицы, заполненной цепочками адресов, которые люди не могут прочитать в спешке.

После того, как все станет живым, никто не захочет позволить вам вернуться и привести вещи в соответствие, поэтому наличие простых, естественных стандартов, которым люди могут следовать в чрезвычайные ситуации без бумажной работы, означает, что вы не будете падать с дисциплины каждый раз, когда сервер умирает.

отметка
источник
1
Я могу согласиться с вами относительно № 1 и № 4 в зависимости от типа проводных направляющих, которые вы используете, но все остальное похоже на проблемы локального процесса - особенно № 3: если вы делаете это, вы делаете неправильно (тм) - - Ваши патч-панели должны быть предварительно смонтированы и не требовать дополнительной работы после установки в стойку. проводка от патч-панели к устройству точно такая же, как от коммутатора к устройству ...
voretaq7
По вашему опыту, какие сбои являются наиболее распространенными в такой настройке? Последнее, что мы хотим сделать, это ввести проблемы в среду, которая была твердой, но грязной до чертиков. Я имею в виду, что никакие кабели не подключены, они просто висят там от коммутаторов к серверам, но, как большинство согласится, это катастрофа, ожидающая того, что произойдет. Мы думаем о вставке примерно 2 48-портовых коммутационных панелей в стойки 2 - 5, что будет более чем достаточно для нашего использования сейчас и в обозримом будущем.
PeterG
Просто чтобы перепроверить, я никогда не делал этого раньше, так мало сомнительно - возможно ли прокладка кабеля от задней части одной патч-панели к другой задней части следующей патч-панели? Есть что-то, на что стоит обратить внимание, проявить особую осторожность?
PeterG
+1 к voretaq7. Тем не менее, «проблемы локального процесса» - это проблемы, которые есть почти у всех в мире. @PeterG в настоящее время имеет драпированные кабели, поэтому вещи, которые работают с человеческими недостатками, лучше, чем драконовские правила, которым люди не следуют. Чем больше компания, тем больше вы правы. ;-)
Марк
2

Это сработает, и я считаю, что это хорошая идея. Таким образом, вы разделяете серверные стойки и стойки телекоммуникационных ...

Alex
источник
1
Я бы от всей души одобрил это, за одним исключением - если у вас есть устройства SAN, то они должны предпочтительно находиться в той же стойке, что и сервер (ы), которые они обслуживают, и подключаться через кабели внутри этой стойки.
Майк Инш
Мы больше думали о том, чтобы иметь модули SAN в первой стойке, поэтому можно выполнить всю проводку для каждого и многолучевого распространения, а затем просто подключить каждый сервер. Если я подумаю об этом, похоже, что это будет очень аккуратное решение, но опять же, как некоторые ответили, оно добавляет точки сбоя и т.д ... Спасибо за комментарии и предложения. Это действительно помогает! :)
PeterG
1

Я сделал оба. Звучит так, будто вы хотите перейти от переключения между верхом стойки к переключению в конце ряда.

Я думаю, что я пропущу патч-панели, переработаю и уберу то, что у вас есть.

Патч-панели не обязательно очистят ваши стойки.

Я переместил бы переключатели в середину и запускал волокно / другое между коммутаторами, чтобы составить структуру для TOR. Затем вы можете разделить физическую сеть на части и проложить кабель соответствующим образом, чтобы получить «структурированный кабель» без слишком большой жесткой структуры. Просто установите переключатель в нужное положение и подключите кабели так же, как и на коммутационной панели.

Я бы использовал EOR, как у вас выше, но без каких-либо патч-панелей. В зависимости от плотности и общей топологии коммутатора вы можете использовать уровень агрегации коммутации.

Можете ли вы пометить некоторые из этих устройств с помощью make / model / port count?

dmourati
источник
Мы действительно рассматривали возможность оставить или, скорее, переместить коммутаторы вниз к середине стойки, но, как я уже упоминал в предыдущем ответе, основной причиной перехода на коммутационные панели является то, что мы будем устанавливать два блока SAN с многолучевым распространением и Я не хочу представлять кабельную неразбериху, которая создаст более пяти стоек.
PeterG
До сих пор не узнал о SAN. Что такое ткань SAN?
Дмурати
@PeterG - я не фанат коммутаторов или PDU "посередине" стойки - это кажется хорошей идеей, потому что это более короткие отрезки кабеля, и половина ваших кабелей будет идти "вверх", а другая половина " вниз ", но я никогда не видел, чтобы получалось красиво на практике.
voretaq7
SAN будет iSCSI (Equallogic)
PeterG
0

Это будет демонстративно работать, я сделал то же самое в нашем дата-центре, просто не забывайте держать его аккуратно и аккуратно с помощью некоторых кабелей управления кабелями и прокладывать любые кабели по бокам стойки, а не перед оборудованием.

Одна из проблем, с которыми я столкнулся, заключается в том, что наши кабели проложены под полом, и я решил установить патч-панель на верхнюю часть стоек, чтобы у меня было более 48 кабелей, идущих вдоль боковой стороны стойки к патч-панели, занимающей ценное пространство.

Если бы я сделал это снова, я бы сказал, если ваши кабели будут проложены под полом, тогда патч-панель внизу, если кабель проложен над стойками, то патч-панель вверху.

Я решил пойти по этому пути, чтобы мое ядро ​​Cisco было вместе, и я мог бы иметь хороший стек, а не соединять их по оптоволокну. Также это облегчает подключение к коммутатору DMZ.

Очевидно, что вы потеряете несколько U стоечного пространства, документируете все и оставите немного провисшего кабеля на случай, если вам когда-нибудь понадобится немного передвинуть свои стойки

Фил Эдди
источник
Отлично, спасибо за совет. Наш провайдер Colo решил проложить кабели над стойками, поэтому я определенно буду держать панели там ... на своем очень примитивном эскизе я не добавлял планки управления кабелями, но мы планируем и их туда вставить.
PeterG