Идеальный серверный зал?

Что мне нужно учитывать, когда я планирую новый серверный зал для маленькой компании (30 ПК, 5 серверов, пара коммутаторов, маршрутизаторов, ИБП…)?

Каковы самые важные аспекты для защиты оборудования?
Что не должно находиться в серверном шкафу?

Редактировать: Вам также может быть интересен этот вопрос: Пакет выживания для серверной комнаты.

• Достаточно места для расширения
• Много сетевых портов
• Достаточная пропускная способность сети
• Много розеток для питания
• Не должно быть на первом этаже (риск затопления + меньше безопасности)
• Оборудование для подавления пожара + дымовые датчики
• IP KVM для удаленного доступа
• Телефон (чтобы оператор мог позвонить на горячую линию, глядя на оборудование)
• Ручки + бумага
• Принтер этикеток – подписывайте все!
• Простой принтер (приятно иметь)
• Запасные сетевые и силовые кабели
• Кондиционер (также осушает)
• Хороший ИБП (с функцией автоматического/контролируемого отключения)
• Достаточно питания для всего (и достаточно для расширения)
• Безопасность на входе (желательно с учетом журнала)
• Физическая безопасность (защита на окнах, входе и т.д.)
• Маркеры (приятно иметь)
• Огнеупорный сейф (для хранения резервных лент, паролей и установочных медиа)
• Хорошие серверные стойки – хорошо обслуживаемые (кабели)
• Достаточно места для комфортной работы за серверами
• Стол достаточно большой, чтобы собрать/разобрать сервер (плюс монитор, клавиатура и мышь)
• По крайней мере 1 стул
• Упорядоченная патч-панель (особенно если вы соединяете ПК и телефоны в офисе)
• Хорошее освещение

Вы можете разместить небольшую полку рядом со входом, чтобы положить пару из этого

_{(Источник: a-chainsaw.com)}

На основании моего опыта, идеальный серверный зал будет иметь следующее:

• Достаточно большой для размещения вашего шкафа или стойки. Вы должны иметь как минимум 4 фута пространства для прохода спереди и сзади, желательно вокруг. Если у вас есть возможность, планируйте возможность установки второй стойки в будущем.
• Защищенность. Вам не обязательно нужен охранник с оружием, но хотя бы хороший замок. Биометрический или картридер всегда хороши. В Home Depot есть замки, которые используют тактильные панели, так что вы можете назначать коды для открытия двери.
• Обычно, серверный зал также является точкой входа телекоммуникационной компании (демаркация), поэтому у вас будут ваши T1 smartjack, ваша АТС или телефонная система и т.д. Мы обычно выделяем одну стену и ставим фанеру, чтобы телекоммуникационные компании и поставщики могли устанавливать свое оборудование.
• Кондиционирование воздуха – это данность. Необходимо поддерживать комнату при температуре около 65 – 75 градусов. Предпочтительно иметь отдельный термостат, так как вы не хотите, чтобы кондиционер отключался в серверном зале на выходных или по ночам.
• Электричество крайне важно. Поскольку ваша стойка, скорее всего, расположена в центре комнаты, вам придется прокладывать кабели по полу, чтобы добраться до розеток, если они крепятся к стене. Если вы можете установить розетки на полу, это будет лучше. Если нет, используйте покрытия для кабелей, чтобы избежать спотыкания о провода. Установите отдельные цепи для чистого электричества. Убедитесь, что у вас есть дополнительные розетки на всех стенах, в критической ситуации доступ к розетке может быть критичным, особенно если вам нужно подключить ноутбук или другое устройство.
• Держите небольшой шкаф или полки для хранения руководств, кабелей, запасных карт, дисков и т.д. Вам нужно, чтобы это было легко доступно во время установки и устранения неполадок. Держите это в сторонке в комнате, но доступным.
• Управление кабелями также критично, как в стойке, так и от фанерной стены. Со временем становится очень просто просто включить кабели. Если управление кабелями организовано, будет легче поддерживать порядок и подписывать/маркировать оба конца всех проводов, последнее, что вам нужно сделать, это проследить провода, когда ваша сеть не работает.
• Что касается самого шкафа, убедитесь, что у вас есть достаточные ИБП, управление кабелями шкафа, хороший KVM, выдвижная клавиатура/мышь/LCD 1U, чтобы сэкономить место в стойке, и достаточно вентиляции. Дизайн шкафа – это целая диссертация сама по себе!
• Если комната закрыта, убедитесь, что у вас есть правильная вентиляция для потока воздуха. Вам потребуется какой-то вводный вентиль, чтобы горячий воздух мог выходить. При необходимости используйте вентилятор для вытяжки воздуха. Для свежего воздуха вы можете установить вентиль на двери.
• Определенно телефон рядом со шкафом со списком номеров поддержки, контактами “911” и т.д.
• Если могу, я стараюсь иметь место для подключения ноутбука поблизости, чтобы вы могли обращаться к инструментам, тестировать на другой работающей системе, тестировать клиентское программное обеспечение и т.д.
• И ничего плохого в том, чтобы иметь стул, когда вы ждете, когда техподдержка вернется на связь 🙂

Многое можно вложить в серверный зал; если вам удастся избежать многих из этих вещей, ваша жизнь как администратора станет намного лучше. Чем проще добраться до оборудования, проследить за настройкой и решить ваши проблемы, тем более эффективным вы можете быть. Удачи!

Я только что смотрел фильм “Орлиный глаз” – похоже, идеальный серверный зал включает в себя покрытие стен странно окрашенными аквариумами, которые общаются через инфракрасные лучи (???), с вашим основным ‘ЦП’, который сам перемещается на роботизированной руке с сияющим ‘глазом’ посередине. О, и постройте все это над большим телом воды, это, видимо, как-то поможет 😉

Посмотрите на все с точки зрения управления рисками, и все встанет на свои места.

• Физическая безопасность: Что находится под угрозой, если злоумышленник (или неосведомленный человек) получит доступ к серверу и сетевому оборудованию? Кто будет иметь разрешение на вход? Требуется ли аппаратная защита сервера? (отключите загрузку с переносных дисков, пароль BIOS, отключите USB и т.д.)
• Контроль климата: 5 серверов и 30 ПК не создадут невероятного тепла в комнате 20×20, но это слишком много, если вы запихнете их в шкаф для пальто. Работа при высоких температурах и/или влажности сократит срок службы вашего оборудования и приведет к потере данных и дорогой замене. Рассмотрите простую вентиляцию с осушителем или, возможно, систему кондиционирования, соответствующую вашим потребностям.
• Непрерывность бизнеса: Резервное питание? Резервирование данных? Отказоустойчивые LAN/WAN соединения? Есть ли какие-либо единственные точки отказа в вашей инфраструктуре? У вас достаточно запасного питания для работы вашей инфраструктуры и чтобы не перегореть предохранитель, если кто-то включит пылесос?
• Рост: Иметь план непредвиденных обстоятельств на случай, если руководство потребует удвоить, а то и утроить вашу инфраструктуру. Как все критически зависимые элементы будут масштабироваться?

Судя по тому, что я читаю здесь, большинство людей стремятся к массовому чрезмерному обеспечению. У вас есть 5 серверов и 30 рабочих мест, так что, поскольку это маленькая компания, как мне кажется, я очень сомневаюсь, что босс/владелец решится на биометрический сканер, считыватель карт и видеосистему в качестве примеров, если только у вас уже нет этого и это было бы дешевым дополнением для серверного зала.

Так что я сделал что-то почти такое же, как у вас, 20 рабочих мест и 8 серверов.

Вот что, по моему мнению, было хорошо и при этом недорого, учитывая типичный ограниченный бюджет маленькой компании.

• Телефон или хотя бы телефонный разъем, куда можно переместить телефон, если нужно позвонить в службу технической поддержки, находясь перед физическим сервером
• Кондиционер, даже с 8 серверами, температура в комнате была около 31 градуса Цельсия. Для этого, поскольку комната находилась в центре здания и установка новых воздуховодов была исключена, мы получили один из портативных кондиционеров и выдыхали его в офис со стороны стены, ближайшей к холодному воздуху для системы кондиционирования здания. Это неплохо сработало и снизило температуру до примерно 23 градусов, но занимает много места и очень эффективен.
• Не тратьте время на монитор/KVM для установки в стойку, я могу придумать лучшее применение для $1000.
  • Получите монитор и 10-футовый VGA-кабель. Убедитесь, что у вас есть стол или настенная полка рядом с серверами, любой современный сервер в стойке имеет установочный VGA-порт
  • Получите беспроводную клавиатуру/мышь, которые используют один и тот же донгл. Просто переместите VGA-кабель и беспроводной донгл на компьютер, к которому вам нужно получить доступ. Поскольку вы будете получать доступ ко всему удаленно 90% времени, это не такая уж большая проблема
  • Если вы можете получить стойку и использовать серверы в стойках, НО убедитесь, что вы получаете рельсы, которые позволяют вытаскивать сервер, если вам нужно получить доступ к оборудованию, а не рельсы, которые необходимо откручивать
  • Если вы не можете получить стойку, сходите в Home Depot и купите прочные свободностоящие утилитарные полки, это подойдет также для настольных блоков
  • Замок, ключевой или кодовый – подойдет, вам все равно придется отдать ключ и комбинацию вашему боссу или владельцу, убедитесь, что серверы фиксируют, кто заходит в них, и это не так важно, кто находится в комнате.
  • Если телефонное оборудование там, используйте идею с фанерой на стене
  • Поместите телефоны на их собственное устройство ИБП
  • Получите ИБП, который можно расширять для серверов
  • Получите ИБП, который имеет элементы нагрузки, которые вы можете дистанционно отключать, если вам нужно убить сервер удаленно (у Tripplight есть такие, несколько раз спасали меня, когда у меня был проблемный сервер, который зависал, и необходимо было отключить питание) Убедитесь, что вы установили BIOS на включение после отключения электроэнергии для всех серверов. ИБП будет иметь лишь несколько розеток, поэтому вам придется подключить к нему ваши критические серверы, для меня это был DC/GC и электронная почта, это позволило мне перезагрузить их, если они зависали
  • Некоторые полки для запчастей и других “вещей”, которые, как вы должны помнить, вам придется хранить там по требованию босса (лол, если вы не босс)
  • Отдельное питание для кондиционера
  • Отдельное питание для телефонов
  • Отдельное питание для серверов. У меня было всего 6 цепей по 15 ампер, плюс свет
  • Сделайте все патч-кабели индивидуальными и как можно короче, это поможет держать все организованным, чтобы провода не свисали везде.
  • Если вы не можете разместить это на втором этаже, поставьте все серверы на верхнюю стойку и двигайтесь вниз. У меня это было на втором этаже, поэтому для меня вопросов не возникало.

Вот что было в моей комнате, сетевое wiring и т.д. также было все подписано и хорошо организовано, в зависимости от того, откуда оно берется.

Главные вещи – держите все организованным и убедитесь, что у вас есть место для расширения в будущем.

В дополнение к отличному списку Techboy:

• Инструментальный ящик, включающий тестер кабелей, отвертки, плоскогубцы, шестигранные ключи и все, что необходимо для установки в стойке, включая поворотные ключи и подобные вещи.
• Беспроводной телефон – с громкой связью, если такой зверь существует
• Тележка для перемещения серверов
• Лестницы/ступеньки/приставные лестницы для работы на верхней части стоек и на потолочных кабельных трассах
• Рассмотрите возможность использования тележки с подъемником для установки серверов в верхней части стоек, особенно если у вас строгие нормы охраны труда и здоровья или вы просто заботитесь о ваших работниках.
• Средства защиты слуха – у нас требуется их носить в нашем дата-центре, и они предоставляют одноразовые беруши.
• Электрические розетки за пределами стоек, чтобы вы могли легко подключать ноутбуки и т.д., не беспокоя электричество внутри стойки.
• SNMP или другие дистанционно управляемые силовые рейки
• Электрические рейки с каждой стороны стойки должны идти к разным распределительным щитам, чтобы можно было работать, не теряя питание обоих источников питания на ваших серверах
• Видеокамеры для дополнительной безопасности
• Ряд крючков в безопасном месте внутри или рядом с дата-центром, чтобы люди, которые там работают регулярно, могли оставить куртку
• Хранение запасных частей, заглушек, кабелей и подобного
• Возможно, запчасти – особенно если ваш поставщик(и) смогут убедить вас предоставить общие запчасти заранее перед гарантийными исками/отказами (некоторые поставщики/перепродавцы в некоторых случаях могут предоставить вам, скажем, несколько жестких дисков и блоков питания. Они принадлежат поставщику, но вы можете использовать их, если у вас будет отказ и позаботиться об бумажной работе позже.)

Стерильная среда необходима, у вас должен быть приемлемый пол, даже не приближайтесь к коврам, так как они собирают пыль. Обычно я предпочитаю поднятые полы, это хороший вариант, так как легко прокладывать кабели.

Не экономьте на дешевых стойках для данных, с хорошей системой управления кабелями, прокладывайте с одной стороны данные, а с другой – питание, так как в некоторых странах законы не допускают смешивания данных и питания.

NOC

Слева вверху: Подводные двигатели, используемые для резервного питания. Справа вверху: Другой вид на электрическое оборудование.

Сверху: Эта карта показывает планировка дата-центра.

Ссылка на оригинальную статью

Думайте о планировании восстановления сразу. Если бы у меня была возможность сделать все заново, я бы разделил сетевое оборудование (коммутаторы и маршрутизаторы) от серверов и использовал бы более короткую (30U отлично) стойку, чтобы в тот раз я мог просто выкатить стойку за дверь и на грузовик, когда Verizon не мог заменить поврежденную линию T1 целых ЧЕТЫРЕ ДНЯ, и нам пришлось переместить серверы на наше место восстановления. (Не то чтобы я все еще был недоволен.) Также, в зависимости от местоположения, хорошая идея иметь хотя бы одну цепь 208 или 240 В и место для установки охладителя, когда ураган вырубает ваше кондиционирование в августе в Техасе.

из статьи CNET News “Google раскрыл односекретные серверы” о Центрах Данных Google. 🙂

Мы небольшая компания с 6/7 серверами и 6/7 рабочими станциями для разработки; когда мы переехали в офис, мы получили хорошую прочную полку и поместили ее посередине комнаты, чтобы разместить наши серверы/принтеры.

Это была хорошая идея, так как нам пришлось несколько раз пройти вокруг, и так как серверы не установлены в стойке, было бы очень сложно и потенциально опасно их перемещать.

Хороший кондиционер – это необходимость.

Достаточная и обильная электроэнергия.

Толстые стеклянные окна, чтобы вы могли видеть, когда кто-то находится в серверном зале, и что они делают.

Ищите водяные пятна на полу и потолке. Не размещайте ваше самое критическое оборудование под этими водяными пятнами. Я на самом деле видел это больше одного раза.

Убедитесь, что после завершения комнаты нет места для стола. В противном случае, бизнес, испытывающий нехватку пространства, превратит ваш красивый серверный зал в чей-то не очень функциональный офис.

Закрепите ваши стойки. Нет ничего хуже, чем добавить 1U сервер и вся стойка упадет.

Не используйте сетевой кабель длиной 50 футов, чтобы подключить сервер к коммутатору на расстоянии 2 фута.

Договор аренды, который предусматривает, что арендодатель не будет отключать кондиционирование на выходных только чтобы сэкономить деньги. Представьте, что вы приходите в серверную, где температура 150 градусов в понедельник утром.

Как и другие люди говорили, подписывайте все. Принтеры для этикеток отлично подходят для постоянных меток; малярный скотч и маркеры тоже сойдут.

Вам понадобится:

• хороший кондиционер, чтобы температура и влажность оставались стабильными
• хороший источник питания, возможно, резервный и безопасный, если ваш внешний источник питания будет отключен
• безопасность на входе, чтобы не каждый мог войти

Возможно, стоит взглянуть на лучшие практики Google:

Они выпустили видео о своем “контейнерном подходе”, который, даже если только очень немногие компании могут позволить себе это сделать, содержит хорошую идею для малого бизнеса (например, сосредоточение на очень эффективных источниках питания и так далее).

Джеффу нравится этот тема тоже (о энергии)!

Также Google выпустил некоторые сведения о своих серверах, которые довольно интересны, например, о встроенном ИБП в каждый сервер.

Добавьте к существующим спискам:

Инструментальные наборы – один большой (электрические отвертки всегда полезны) для работы в серверном зале, один портативный для переноски к ПК. Никогда не смешивайте их, и вы всегда будете иметь под рукой нужный инструмент

Картотека – хорошо подходит для руководств, распечаток квитанций, соглашений о лицензировании и т.д.

Управление кабелями и патч-панели обязательны – начните с того, чтобы все подключалось к патч-панелям, и вам будет легче в долгосрочной перспективе, когда вы добавляете в систему.

И наконец, уделите время, чтобы правильно настроить все с первого раза – то, что упоминали другие, о размещении стойкок, столов, полок, управления кабелями и т.д. Если вы начнете с полного беспорядка в комнате, скорее всего, со временем только ухудшится.

Согласно моему опыту, компьютерный зал – это единственное место на работе, где вы можете найти немного спокойствия, и никто не будет вас беспокоить, так что я бы предложил вам получить какие-то удобства для этого места на случай, если вы захотите уединиться.

Необходимыми вещами являются уютный стул и наушники 🙂

Мой список:

• Физическое пространство
• Физическая безопасность
• Достаточное охлаждение
• Достаточная мощность для всего оборудования
• Достаточная пропускная способность сети

Это самые сложные вещи, которые трудно изменить позже, и поэтому вам нужно правильно устроить их с самого начала.

Не хочу добавлять много к отличным ответам выше, но, если возможно, добавьте вторую серверную комнату для резервного/избыточного использования.

При условии, что она достаточно удалена или защищена от другой серверной комнаты, вы получите большую степень защиты от менее серьезных бедствий, которые могут произойти – например, пожар в сервере, который приводит к поломке всего стойки.

Естественно, это не заменяет полноценный план восстановления после бедствий или адекватные резервные копии – но обеспечивает дешевый второй уровень защиты, если это необходимо.