Какие подсистемы требуют регулярного обслуживания, с какой периодичностью, как организовать сервис — своими силами или на аутсорсинге — и чем грозит экономия на профилактике.
Почему обслуживание ЦОД — это не «починить, когда сломается»
Инженерная инфраструктура дата-центра работает в режиме 24/7/365. Каждый час каждого дня система электроснабжения, охлаждения, пожаротушения, контроля доступа и мониторинга поддерживает условия, без которых серверы перестают работать. Эта непрерывность создаёт иллюзию: раз всё работает, значит, обслуживать не нужно. Иллюзия рассеивается, когда ЦОД теряет охлаждение в августовскую жару или ИБП не переключается на батареи при провале напряжения — потому что батареи деградировали без замены, а загрязнённый конденсатор чиллера не заметили вовремя.
По данным отчёта Uptime Institute за 2025 год, более половины респондентов оценили стоимость последнего значительного сбоя ЦОД свыше 100 тысяч долларов, а каждый пятый — свыше миллиона. Причём основная причина критических отказов — проблемы с электропитанием и охлаждением, то есть с теми подсистемами, которые напрямую зависят от качества обслуживания.
Техническое обслуживание ЦОД — это не ремонт по факту поломки, а комплекс плановых профилактических мероприятий, предотвращающих отказы, продлевающих ресурс оборудования и поддерживающих проектные параметры работы всех инженерных систем.
Что входит в инженерную инфраструктуру ЦОД: полный перечень подсистем
Обслуживание ЦОД охватывает все инженерные подсистемы объекта. Каждая из них имеет собственный регламент, периодичность работ и квалификационные требования к персоналу.
1. Система электроснабжения
- Трансформаторная подстанция и вводно-распределительные устройства (ВРУ)
- Главный распределительный щит (ГРЩ), щиты этажные и секционные
- Автоматические вводы резерва (АВР)
- Источники бесперебойного питания (ИБП) и аккумуляторные батареи
- Дизель-генераторные установки (ДГУ) и системы топливоснабжения
- Шинопроводы и кабельные линии
- Блоки распределения питания в стойках (PDU)
- Системы заземления и молниезащиты
2. Система охлаждения и кондиционирования
- Чиллеры и чиллерные станции
- Прецизионные кондиционеры (шкафные, межрядные, потолочные)
- Драйкулеры и градирни
- Насосные станции и трубопроводная обвязка
- Системы фрикулинга
- Фальшпол и организация воздушных потоков
- Системы жидкостного охлаждения (RDHx, CDU, контуры D2C)
3. Система пожарной безопасности
- Автоматическая пожарная сигнализация (АПС): извещатели, приёмно-контрольные приборы, линии связи
- Система газового пожаротушения (модули, трубопроводы, насадки, баллоны с ГОТВ)
- Система раннего обнаружения дыма (VESDA или аналоги)
- Система оповещения и управления эвакуацией (СОУЭ)
4. Система контроля и управления доступом (СКУД) и видеонаблюдение
- Контроллеры доступа, считыватели, замки
- Камеры видеонаблюдения и серверы хранения записей
- Системы биометрической идентификации
5. Структурированная кабельная система (СКС)
- Медные и оптические патч-панели, коммутационные шнуры
- Кабельные лотки и организаторы
- Маркировка и документация
6. Система мониторинга и управления (DCIM/BMS)
- Датчики температуры, влажности, протечки, задымления
- Контроллеры сбора данных
- Программная платформа мониторинга
- Интеграция с инженерными системами
Регламент обслуживания по подсистемам
Электроснабжение
ИБП — ежемесячно:
- Визуальный осмотр: индикация на панели, отсутствие посторонних звуков, запаха горелой изоляции.
- Проверка показаний: входное/выходное напряжение, ток нагрузки, процент загрузки, состояние батарей (остаточная ёмкость, температура).
- Контроль журнала событий контроллера ИБП: аварийные сигналы, переходы на батарейное питание, переключения на байпас.
- Проверка вентиляторов охлаждения силового модуля.
ИБП — ежеквартально:
- Все ежемесячные работы.
- Проверка состояния аккумуляторных батарей: замер напряжения каждой банки (для VRLA) или контроль BMS (для Li-ion); замер внутреннего сопротивления — рост на 30 процентов и более от начального значения указывает на деградацию.
- Визуальный осмотр батарей: вздутие корпуса, подтёки электролита, коррозия клемм.
- Очистка воздушных фильтров ИБП.
- Подтяжка силовых контактных соединений (на обесточенном оборудовании, при наличии резервного пути питания).
- Тест переключения на батарейное питание и обратно (при наличии нагрузки на резервном плече).
ИБП — ежегодно:
- Полное нагрузочное испытание (тест автономии) с замером реального времени работы от батарей при номинальной нагрузке.
- Термографическое обследование силовых контактов инфракрасным тепловизором — выявление перегревающихся соединений.
- Калибровка датчиков контроллера.
- Обновление прошивки (при наличии обновлений от производителя).
ДГУ — ежемесячно:
- Тестовый запуск под нагрузкой (не менее 30 минут при нагрузке не менее 30 процентов от номинала). Запуск без нагрузки (на холостом ходу) недопустим при регулярных тестах — приводит к образованию нагара («мокрая укладка», wet stacking).
- Проверка уровня топлива, масла, охлаждающей жидкости.
- Проверка заряда стартерных аккумуляторов.
- Проверка работы подогревателя блока двигателя (jacket water heater).
- Визуальный осмотр: утечки, коррозия, состояние шлангов и ремней.
ДГУ — ежеквартально:
- Все ежемесячные работы.
- Замена масляного фильтра и топливного фильтра (при наработке более 250 моточасов или по регламенту производителя).
- Проверка состояния воздушного фильтра.
- Проверка натяжения приводных ремней.
- Тест АВР: имитация потери внешнего питания → автоматический запуск ДГУ → приём нагрузки → восстановление внешнего питания → обратный переход → штатная остановка.
ДГУ — ежегодно:
- Полное нагрузочное испытание при 100 процентах мощности (4 часа непрерывной работы).
- Замена масла, всех фильтров (масляный, топливный, воздушный), охлаждающей жидкости (по регламенту производителя).
- Анализ качества топлива в баке (при длительном хранении дизтопливо окисляется и накапливает воду).
- Проверка форсунок, регулировка клапанов (для двигателей с наработкой более 1 000 моточасов).
- Термографическое обследование электрических соединений генератора.
- Проверка состояния выхлопной системы и глушителя.
Щиты, АВР, шинопроводы — ежегодно:
- Термографическое обследование всех силовых соединений.
- Подтяжка контактов (на обесточенном оборудовании).
- Функциональный тест АВР с имитацией аварии.
- Визуальный осмотр шинопроводов: состояние изоляции, отсутствие перегрева, коррозии.
- Проверка уставок и работоспособности автоматических выключателей.
Охлаждение
Детальные регламенты обслуживания чиллеров и прецизионных кондиционеров подробно описаны в отдельных статьях. Здесь — краткая сводка.
Прецизионные кондиционеры — ежемесячно: замена/очистка фильтров, проверка показаний контроллера, контроль увлажнителя. Квартально: очистка наружного конденсатора, проверка давления хладагента, контроль герметичности, проверка дренажа. Ежегодно: промывка теплообменников, замена фильтра-осушителя, калибровка датчиков, проверка электрических параметров.
Чиллеры — ежемесячно: контроль давления хладагента, уровня масла, индикатора влажности, токов компрессора. Квартально: очистка конденсатора, проверка герметичности, анализ масла на кислотность, контроль перегрева. Ежегодно: промывка теплообменников, калибровка датчиков и реле, проверка виброопор, обновление прошивки контроллера.
Насосные станции — ежеквартально: проверка расхода, давления, токов двигателей, состояния уплотнений. Ежегодно: замена уплотнений при необходимости, проверка подшипников, балансировка крыльчатки.
Трубопроводы и арматура — ежегодно: визуальный осмотр на предмет коррозии и протечек, проверка работы запорной и регулирующей арматуры, контроль теплоизоляции (каучуковая изоляция на холодных трубопроводах разрушается от УФ-излучения и механических повреждений).
Фальшпол — ежегодно: проверка целостности и уровня плиток, замена повреждённых, уборка пространства под фальшполом (пыль, мусор от кабельных работ), проверка уплотнений кабельных проходов, контроль расположения перфорированных плиток (должны находиться строго в холодном коридоре).
Пожарная безопасность
Ежемесячно:
- Проверка работоспособности АПС: тестовое срабатывание извещателей (по графику — каждый извещатель не реже одного раза в полгода).
- Визуальный осмотр модулей газового пожаротушения: давление в баллонах (манометр), целостность пломб, отсутствие коррозии.
- Проверка индикации приёмно-контрольного прибора.
Ежеквартально:
- Проверка работоспособности системы VESDA (при наличии): тестовый прогон аспирационных трубок, проверка чувствительности.
- Функциональный тест СОУЭ (без активации пожаротушения).
Ежегодно:
- Полная проверка системы газового пожаротушения: контроль массы ГОТВ (взвешивание баллонов), проверка герметичности трубопроводов, функциональный тест пневмопуска и электропуска (без выпуска газа).
- Перезарядка или замена баллонов (по регламенту — обычно раз в 5 лет или при потере массы ГОТВ более 5 процентов).
- Техническое освидетельствование баллонов высокого давления (по требованиям Ростехнадзора).
СКУД и видеонаблюдение
Ежеквартально:
- Проверка работоспособности считывателей, замков, контроллеров.
- Проверка качества записи камер видеонаблюдения, корректности хранения архива.
- Чистка объективов камер.
- Обновление базы доступа (удаление уволенных сотрудников, добавление новых).
Ежегодно:
- Замена аккумуляторов в контроллерах (при наличии).
- Проверка ИК-подсветки, поворотных механизмов PTZ-камер.
- Обновление прошивки контроллеров и камер.
СКС
Ежегодно:
- Визуальный осмотр патч-панелей: целостность портов, маркировка, радиусы изгиба патчкордов.
- Проверка документации СКС на соответствие фактическому состоянию (порты, маршруты, маркировка).
- Очистка оптических разъёмов.
- Тестирование оптических линий (при наличии ошибок или после работ в кабельных лотках).
DCIM и мониторинг
Ежеквартально:
- Проверка работоспособности всех датчиков (температура, влажность, протечка, задымление, вскрытие дверей): сравнение показаний с эталонным прибором.
- Проверка доставки уведомлений (SMS, email, Telegram) при тестовом срабатывании.
- Проверка актуальности пороговых значений (уставки аварий и предупреждений).
Ежегодно:
- Калибровка датчиков температуры и влажности.
- Обновление программного обеспечения DCIM/BMS.
- Актуализация модели ЦОД в DCIM (при изменении конфигурации стоек, кондиционеров, электрических цепей).
Как организовать обслуживание: три модели
Модель 1: собственная служба эксплуатации
Штатные инженеры, работающие посменно (при необходимости — 24/7). Подходит для крупных корпоративных ЦОД и коммерческих операторов с количеством стоек от 100 и выше.
Преимущества: инженеры знают объект «изнутри»; минимальное время реакции (инженер на месте); полный контроль над процессами.
Ограничения: высокие постоянные затраты (ФОТ, обучение, сертификация); сложно обеспечить все компетенции внутри одной команды (электрика, холодоснабжение, слаботочные системы, пожарная безопасность); риск «замыливания глаза» — штатный инженер может перестать замечать постепенные изменения.
Модель 2: аутсорсинг (сервисный договор)
Внешняя сервисная организация выполняет все регламентные работы, аварийный ремонт и мониторинг на основании договора с SLA. Подходит для корпоративных серверных и ЦОД с количеством стоек до 100, а также для объектов, где содержание штатной смены экономически нецелесообразно.
Преимущества: предсказуемый бюджет (фиксированная стоимость договора); доступ к специалистам разного профиля; независимый взгляд на состояние объекта; ЗИП включён в договор (при соответствующем уровне SLA).
Ограничения: время реакции определяется SLA (от 2 до 24 часов в зависимости от уровня); зависимость от подрядчика; необходимость контроля качества работ.
Модель 3: гибридная
Штатный дежурный инженер (первая линия — мониторинг, первичная диагностика, простые операции) плюс сервисный договор с внешней организацией (вторая линия — квалифицированное обслуживание, сложный ремонт, специализированные работы). Наиболее распространённая модель для средних ЦОД (30–100 стоек).
Уровни SLA: как выбрать и что включить в договор
Сервисные договоры на обслуживание ЦОД принято структурировать по уровням:
Базовый уровень. Плановые регламентные работы по графику (ежемесячные, квартальные, годовые). Аварийный выезд — в рабочие дни, время реакции — до 24 часов. ЗИП — за отдельную оплату. Подходит для некритичных объектов с внутренним резервированием (2N).
Стандартный уровень. Плановые работы плюс аварийное реагирование 24/7. Время прибытия — до 4 часов. Базовый ЗИП (фильтры, ремни, предохранители) включён в договор. Подходит для большинства корпоративных серверных.
Критичный уровень. Плановые работы плюс аварийное реагирование 24/7. Время прибытия — до 2 часов. Расширенный ЗИП (компрессоры, силовые модули ИБП, батареи) хранится на объекте или на складе подрядчика с гарантией доставки. Регулярный мониторинг параметров удалённо (инженер сервисной организации контролирует DCIM). Подходит для коммерческих ЦОД и критичных корпоративных объектов.
Что обязательно должно быть в договоре
- Перечень обслуживаемого оборудования с серийными номерами.
- Периодичность и состав регламентных работ (по каждой подсистеме).
- Время реакции (от момента обращения до ответа диспетчера) и время прибытия (от обращения до приезда инженера на объект).
- Целевое время восстановления (SLO — Service Level Objective) для каждого типа оборудования.
- Перечень ЗИП, включённого в договор, и процедура согласования дополнительных запчастей.
- Порядок эскалации: первая линия → вторая линия → привлечение вендора.
- Отчётность: ежемесячные отчёты о выполненных работах, выявленных отклонениях, рекомендациях.
- Ответственность за результат: штрафные санкции за превышение времени реакции / времени восстановления.
Аудит инженерной инфраструктуры: когда и зачем
Аудит — это комплексная независимая проверка состояния всех инженерных систем ЦОД, которая выходит за рамки регулярного ТО. Аудит рекомендуется проводить:
- При вступлении в эксплуатацию нового объекта (входной аудит).
- При смене сервисной организации.
- Перед планируемой модернизацией (для определения текущего состояния и объёма работ).
- После крупной аварии (для выявления корневых причин и предотвращения повторения).
- Ежегодно — как плановая мера для объектов уровня Tier III и выше.
Что входит в аудит
Аудит электроснабжения: термографическое обследование всех силовых соединений; нагрузочное тестирование ИБП и ДГУ; проверка селективности защит; проверка схемы заземления; замер качества электроэнергии (гармоники, провалы, перенапряжения).
Аудит охлаждения: замер температурного профиля серверного зала (тепловая карта); проверка организации воздушных потоков (дымовой тест или анемометрическое обследование); оценка фактического PUE; проверка работоспособности фрикулинга; диагностика чиллеров и кондиционеров.
Аудит пожарной безопасности: проверка соответствия проектной документации фактическому состоянию; контроль сроков поверки и перезарядки; тестирование автоматики.
Аудит эксплуатационной документации: наличие и актуальность исполнительной документации (as-built), регламентов ТО, журналов обслуживания, инструкций по действиям в аварийных ситуациях.
Аудит квалификации персонала: наличие допусков (электробезопасность, работа с сосудами под давлением, работа с хладагентами), прохождение обучения у производителей оборудования.
По результатам аудита составляется отчёт с оценкой состояния каждой подсистемы, перечнем выявленных несоответствий, рисков и рекомендаций — с приоритезацией по критичности.
Мониторинг: глаза и уши службы эксплуатации
Без системы мониторинга служба эксплуатации работает вслепую. Мониторинг позволяет обнаруживать отклонения на ранней стадии — до того, как они приведут к аварии — и документировать историю работы оборудования для прогнозирования ресурса.
Минимальный набор параметров мониторинга
Температура: на входе в каждую стойку (обязательно); на выходе из каждой стойки (рекомендуется); в зоне наружных блоков / чиллерной станции; в аккумуляторном помещении.
Влажность: в серверном зале (не менее 2 датчиков); в аккумуляторном помещении.
Электрика: напряжение и ток на каждом вводе; состояние ИБП (режим работы, нагрузка, остаточная ёмкость батарей); состояние ДГУ (готовность, наработка, уровень топлива); токи на PDU в каждой стойке.
Охлаждение: температура подачи и обратки хладоносителя; состояние чиллеров и кондиционеров (режим, аварии); расход хладоносителя.
Безопасность: состояние пожарной сигнализации; протечки (датчики под фальшполом); вскрытие дверей серверного зала.
Пороги оповещения
Трёхуровневая система: информационное оповещение (параметр приближается к границе допуска) → предупреждение (параметр вышел за рекомендуемые границы) → авария (параметр достиг критического значения, требуется немедленное вмешательство).
Пример для температуры на входе в стойку: информационное — выше 25 °C; предупреждение — выше 27 °C; авария — выше 32 °C.
Каналы доставки: SMS, email, push-уведомления в мобильном приложении, оповещение в Telegram-бот. Для критичных объектов — дублирование по двум каналам (SMS + звонок дежурному).
Экономика обслуживания: что стоит и что экономит
Стоимость планового ТО
Ориентировочные затраты на комплексное обслуживание инженерной инфраструктуры ЦОД (все подсистемы, ежемесячные + квартальные + годовые работы):
- Серверная на 10–20 стоек: 100 000–250 000 рублей в месяц.
- ЦОД на 50–100 стоек: 300 000–800 000 рублей в месяц.
- ЦОД на 200+ стоек: 1 000 000–3 000 000 рублей в месяц.
Цифры зависят от количества и сложности оборудования, уровня SLA, региона и конкретного подрядчика.
Стоимость аварийного ремонта
Внеплановый ремонт (диагностика + выезд + работа + запчасти) обходится в 3–5 раз дороже, чем эквивалентный объём плановых работ. Причины: срочность (наценка за аварийный выезд), необходимость экстренной закупки запчастей (наценка за срочную поставку), больший объём работ (одна незамеченная проблема часто тянет за собой каскад повреждений).
Стоимость простоя
Один час незапланированного простоя ЦОД уровня Tier III обходится в 300 000–3 000 000 рублей (в зависимости от размера и типа размещённых сервисов). Для коммерческого ЦОД с SLA-обязательствами добавляются штрафные санкции и репутационные потери.
Годовой бюджет на качественное ТО составляет, как правило, 2–5 процентов от стоимости оборудования. Один предотвращённый инцидент окупает ТО за несколько лет.
Чек-лист: 10 признаков того, что обслуживание ЦОД организовано плохо
- Фильтры в кондиционерах не менялись более 3 месяцев — видимые загрязнения, снижение расхода воздуха.
- ДГУ не запускалась под нагрузкой более 2 месяцев.
- Термография силовых соединений не проводилась более года.
- Нет журнала обслуживания или записи в нём нерегулярны.
- Дежурный персонал не знает порядок действий при аварии (нет инструкций или персонал не обучен).
- Датчики мониторинга показывают «–» или неправдоподобные значения (вышли из строя, никто не заметил).
- Конденсатор наружного блока чиллера / кондиционера покрыт пухом и пылью.
- В пространстве под фальшполом — строительный мусор, неуложенные кабели, отсутствие заглушек в проходах.
- Батареи ИБП старше 4 лет (для VRLA), и замер внутреннего сопротивления не проводился.
- Отсутствует актуальная исполнительная документация (as-built): схема электроснабжения не соответствует фактическому состоянию.
Если три и более пунктов из десяти — «да», объект находится в зоне риска, и аудит инженерной инфраструктуры является первоочередной мерой.
РУСИНТЕЛКОМ — комплексное обслуживание инженерной инфраструктуры ЦОД и серверных помещений. Плановое ТО, аварийный ремонт, аудит, мониторинг. Берём на обслуживание оборудование, установленное другими подрядчиками. 8 800 505-63-82.