Организация серверной комнаты

Общие требования к серверной

При планировании серверной комнаты необходимо в первую очередь учесть все требования к помещению: площадь, высоту потолков и характеристики несущих конструкций. Согласно СП 31-110-2003, минимальная площадь на одно стойко-место не должна быть меньше 2 м², а высота чистого помещения — от 2,5 м. При этом для расположения важно предусмотреть достаточный запас пространства спереди и сзади стоек — минимум по 1 м спереди и 0,5м сзади, что упрощает доступ и обслуживание. Архитектурно серверные помещения размещают отдельно от зон общего пользования, обеспечивая отдельный вход в серверную.

Наряду с этим в серверном помещении следует продумать устойчивость к вибрациям и сейсмическим нагрузкам. Полы должны выдерживать нагрузку не менее 800 кг/м², а покрытие — быть негорючим, антистатическим. Во избежание перепадов температуры и сквозняков важна герметизация стыков и монтаж фальшпола с опорами: пространство под ним используется для прокладки кабелей и подачи холодного воздуха.

Дополнительно к машинному залу проектируют технические помещения. Такие помещения обеспечивают достаточное пространство, позволяя безопасно выполнять работы по расширению и модернизации без остановки оборудования. Важной частью планировки является выделенная зона для монтажного оборудования и складирования ЗИП, это позволяет снизить риски повреждений при доставке и разгрузке дорогостоящего оборудования.

Пожарная безопасность серверных помещений

Ни одно серверное помещение не может быть введено в эксплуатацию без системы противопожарной защиты. Класс пожаростойкости стен и перегородок должен быть не ниже EI 60, а двери — EI 45 с самозакрывающимся механизмом и уплотнителями. Все стыки герметизируют огнезащитным герметиком, исключающим распространение пламени в смежные комнаты.

Система газового пожаротушения (IG541, FM-200 или Novec 1230) монтируется согласно ГОСТ 12.1.004-91. Количество газового состава рассчитывается из объема серверной комнаты, чтобы создать концентрацию, достаточную для подавления возгорания за 10–20 секунд. При этом важно предусмотреть резервную систему подачи газа и автоматический контроль состояния баллонов.

В техническом отсеке и коридоре устанавливают датчики дымового и теплового типа, которые должны быть связаны с локальным щитом управления и СОУЭ. При срабатывании пожарной сигнализации блокируется вход в серверную и запускается процедура аварийного отключения электроснабжения: подается сигнал на отключение системы бесперебойного питания,  а также на отключение вводных автоматов в главном распределительном щите (ГРЩ).

Климат-контроль и кондиционирование в серверной

Оптимальные параметры микроклимата— залог бесперебойной работы IT-оборудования. В помещениях серверной комнаты устанавливают прецизионные системы кондиционирования, рассчитанные на точное поддержание температуры 18–27 °C и относительной влажности 40–60 %. Отклонения даже на 5 °C могут привести к перегреву процессоров и отказу накопителей, а избыточная влажность провоцирует коррозию контактов и образование конденсата.

В типовом дизайн-проекте серверной прецизионные кондиционеры размещают так, чтобы холодный воздух подавался в фальшпол, а теплый отработанный собирался в потолочном пространстве. Для крупных помещений с высокой плотностью стоек применяют чиллеры с внешними конденсаторами — они способны обеспечить необходимый объем хладагента при нагрузках свыше 20 кВт на стойку.

Система климат-контроля включает:

• Датчики температуры и влажности на входе и выходе ряда стоек.

• Автоматическую регулировку скорости вентиляторов и работу в режиме «ECO» при низкой нагрузке.

• Резервирование кондиционеров по схеме N+1, (2N), чтобы выход одного из блоков не приводил к перегреву всей серверной комнаты.

Дополнительно к охлаждению устанавливают осушители воздуха — они удаляют избыточную влагу при пуске системы после консервации и предотвращают скачки влажности при включении отопления в периоды межсезонья.

Полы и двери в серверной комнате

Одно из ключевых требований к серверному помещению — прочные и безопасные покрытия. В большинстве проектов Компании «Промышленные инженерные решения ПИР» (ПИР) монтируют фальшпол высотой 300–800 мм. Такое решение обеспечивает:

• Организованную прокладку кабель-менеджмента (силовых, сетевых и УПС-кабелей) 

• Подвод холодного воздуха по каналам, минимизируя локальные перегревы рядом со стойками.

• Быстрый доступ к коммуникациям при техническом обслуживании или модернизации.

Поверх фальшпола — антистатическая плитка или прочный ламинат класса не ниже 33. Это сохраняет поверхность целостной при перемещении тяжелого оборудования (до 1500 кг/м²) и защищает монтажников от статики.

Дверные конструкции серверной комнаты проектируются с учетом требований пожарной безопасности и климатического режима. Входная дверь — металлическая, самозакрывающаяся, с минеральным утеплителем и уплотнителями по периметру. Порог у двери исключает утечку холодного воздуха из-под полотна, а электромагнитный замок и система контроля доступа позволяют ограничить вход в серверную неавторизованному персоналу.

При больших габаритах комнаты может предусматриваться сдвоенная распашная дверь и технологические ворота для ввоза/вывоза крупногабаритных стоек и других  шкафов.

Обеспечение электропитания серверной

Одно из базовых требований к серверному помещению — надежное и бесперебойное питание. В проектах компании «Промышленные инженерные решения ПИР» (ПИР) применяются промышленные ИБП онлайн-типа с двойным преобразованием: они обеспечивают стабильное выходное напряжение без задержек при переходах питания между основной сетью и аккумуляторами.

Силовые вводы проектируют по принципу независимых групп это позволяет в случае аварии или планового ремонта отключить одну вводную группу без полного обесточивания серверной комнаты. Система бесперебойного питания резервируются по схеме не хуже N+1, чтобы выход одного силового модуля ИБП или группы АКБ не приводила к отказу питания. Наиболее дорогостоящая и надежная схема резервирования 2N. 

В конфигурации 2N вся электропитательная цепочка дублируется в полном объёме: параллельно основному каналу монтируется полностью идентичный резервный канал, способный в одиночку обеспечить полную нагрузку. Практически это означает установку двух независимых систем одинаковой мощности (например, две линии по 1 МВт для нагрузки 1 МВт) с разделением по вводам, щитам и трассам. Преимущества 2N — полная изолированность отказов и возможность выполнять плановое обслуживание любой части системы без перебоев в питании; недостаток — существенно более высокая капитальная и эксплуатационная стоимость по сравнению с N+1.

Выбор схемы (N+1, N+X, 2N) определяется классом надёжности объекта, экономической моделью заказчика и требованиями к времени восстановления; для объектов с нулевым терпением к простоям (критичные ЦОДы, медучреждения, финтех-платформы) целесообразно применять 2N или его варианты с географическим дублированием.

Аккумуляторные батареи желательно размещать в отдельном помещении в батарейных шкафах или на стеллаже. Для помещения серверной важен быстрый доступ к АКБ при проведении ПНР и обслуживании: обычно используют фронтальный монтаж/демонтаж батарейных блоков. Между батарейными стеллажами/шкафами рекомендуем организацию прохода не менее 1,2м.

Питание серверного оборудования, при необходимости, дополняют устройствами автоматического ввода резерва (АВР): при сбое сети генератор дизель-электростанции запускается за 10–15 секунд, а ИБП обеспечивает нагрузку в переходный период без разрыва по синусоиде. ДГУ позволяют поддерживать работу ЦОДа на время отсутствия питания на основном сетевом вводе.

Для контроля состояния питания серверного оборудования внутри шкафа используют интеллектуальные PDU с возможностью удаленного управления розетками, мониторинга их состояния, а также измерение температуры внутри шкафа.  

Планировка и размещение оборудования

При планировке и размещении оборудования в серверной комнате первостепенное значение имеют эргономика доступа и безопасность подключения. Ряды стоек располагают параллельно основным теплонаправляющим каналам, оставляя между ними коридоры шириной не менее 1,2 м. Это позволяет персоналу беспрепятственно проводить замены модулей, проверять состояние кабелей, ИБП и шинных систем.

Все стойки и шкафы должны быть заземлены и подключены к главной шине заземления. Шины заземления монтируют в помещении серверной или технических помещениях с учетом свободного пространства не менее 0,8 м вокруг, чтобы обеспечить простой демонтаж и монтаж при модернизации. Равномерное распределение нагрузки по фазам снижает пиковые токи(перекос фаз) и продлевает срок службы оборудования.

Для расположения стоек часто используют метод hot aisle/cold aisle: холодный коридор формируется перед фронтальными панелями, где установлены приточные вентиляционные решетки фальшпола, а горячий — за стойками, где теплый воздух забирается в потолочный канал. Такая схема позволяет оптимизировать работу системы кондиционирования и снизить энергопотребление на 15–25 %.

При размещении серверной комнаты в составе модульного ЦОДа блок-контейнеры собирают в единую цепочку, учитывая равномерное распределение потребляемой мощности. Для каждого модуля рассчитывают отдельную линию ввода и учитывают возможность подключения ДГУ для обеспечения автономности.

Кроме серверных шкафов, серверная комната предусматривает установку модульных (желательно) батарейных шкафов и распределительных щитов внутри помещения, но вне основных  холодного и горячего коридора. Такое размещение снижает вероятность случайного повреждения при перемещении тележек и монтажных платформ. Обращаем внимание, что важно соблюдать требования к серверной по минимальному расстоянию до стен — не менее 0,5 м сзади  для вентиляции и обслуживания шкафов. Мы рекомендуем не менее 700 мм в зоне горячего коридора.  

Риски и ошибки при эксплуатации серверной комнаты

Даже идеально спроектированная серверная комната может столкнуться с проблемами, если нарушаются требования или пренебрегают регулярным техобслуживанием.

1. Перегрев оборудования.
Перераспределение холодного воздуха вследствие засоров в фальшполе или нештатной работы прецизионных кондиционеров может привести к локальному перегреву. Из-за этого компоненты серверов выходят из строя, а гарантийные сроки на них аннулируются.

2. Нестабильное питание.
Если не выполняется регулярное тестирование аккумуляторных батарей и модулей ИБП, при перебоях сети система аварийного питания не сможет обеспечить бесперебойное питание серверной комнаты. Ошибка при замене АКБ или несоблюдение рекомендаций по резервированию N+1 снижает уровень надежности ЦОД..

3. Повреждение кабелей и шин.
Некачественное монтажное исполнение фальшпола без соблюдения норм по прокладке силовых линий может привести к заломам и механическим повреждениям. Излом кабеля — частая причина короткого замыкания и пожара.

4. Ошибки при планировке.
Неправильное размещение серверной комнаты в общем плане здания, когда вводные кабели проходят рядом с источниками вибрации, приводит к частым отказам и неудобствам при эксплуатации.

5. Нарушения пожарной безопасности.
Засорение или неисправность систем газового пожаротушения и дымоудаления делает защиту неэффективной. Элементы системы пожаротушения должны проверяться не реже одного раза в год.

Чтобы минимизировать возможные риски, следует проводить планово-предупредительные работы не реже 1 раза в квартал:

• Диагностика ИБП, тестирование батарей и проверка работы АВР.

• Инспекция климат-контроля, чистка фильтров и проверка тепловых сенсоров.

• Аудит распределительных шкафов, проверка затяжки клемм и состояния шин.

• Тестирование системы противопожарной защиты и герметичности дверных уплотнений.

Соблюдение требований к помещению серверной и регулярная эксплуатационная практика являются залогом бесперебойной работы ЦОДа и сохранности данных.

Компания «Промышленные инженерные решения ПИР» (ПИР) обладает уникальным опытом в строительстве и обслуживании серверных помещений любой сложности: от проектирования фальшпола и прокладки силовых вводов до установки прецизионных кондиционеров и систем газового пожаротушения. Мы поставляем промышленные ИБП, монтируем модульные ЦОД «под ключ» и выполняем полный цикл ПНР и сервисного обслуживания, гарантируя, что ваша серверная комната будет соответствовать всем требованиям, обеспечивать надежное электропитание и оптимальный микроклимат.