СБГЭ для ЦОД: Tier, резервирование 2N и N+1, что меняется против банковского отделения

Требование «объект уровня Tier III» появляется в задании обычно раньше, чем первая однолинейная схема, и читается заказчиком как норматив состава: столько-то источников бесперебойного питания, столько-то дизель-генераторных установок. Uptime Institute описывает уровни по другому признаку - по тому, что происходит с ИТ-нагрузкой, когда элемент системы выводят в ремонт или когда он отказывает сам. Состав оборудования из этого поведения выводится, но обратный вывод не работает: по перечню шкафов уровень не определяется.

Ниже разбор того, что стоит за уровнями и за записями вида N+1 и 2N, чем система бесперебойного гарантированного электроснабжения машинного зала отличается от такой же системы в отделении банка и какие пункты из-за этого меняют формулировку в техническом задании. Отдельно - о том, что обязательная российская нормативка уровнями Uptime не оперирует, поэтому в проекте параллельно живут две системы координат.

Уровень описывает поведение системы, а не её состав

Коротко: Tier Standard: Topology классифицирует площадку по двум событиям - плановый вывод элемента в обслуживание и единичный незапланированный отказ.

Уровень	Что обеспечено	Что происходит при выводе элемента в ремонт
Tier I	Базовая ёмкость под расчётную нагрузку, единственный тракт распределения	ИТ-нагрузка снимается: обслуживать элемент без остановки нечем
Tier II	Резервные ёмкостные компоненты сверх расчётной потребности, тракт распределения по-прежнему один	Ёмкостный компонент вывести можно, элемент тракта - нет
Tier III	Одновременно обслуживаемая площадка: резерв по ёмкости плюс дублированный тракт распределения	Любой ёмкостный компонент и любой элемент тракта выводится без влияния на ИТ-нагрузку
Tier IV	Отказоустойчивая площадка: два одновременно активных тракта, физическое разделение систем, непрерывное холодоснабжение	Плановый вывод не влияет на нагрузку, единичный отказ любого элемента - тоже

Ключевое различие проходит по границе Tier II и Tier III и касается тракта распределения. Резервный источник, подключённый через ту же шину, тот же вводной аппарат и тот же кабель, повышает доступность мощности и никак не помогает вывести в ремонт саму шину. Именно эта деталь чаще всего теряется при переводе требования из задания в схему.

Отдельно стоит понимать статус документа. Uptime Institute - частная организация, а Tier Standard - её методика с собственной процедурой сертификации: отдельно документации проекта, отдельно построенного объекта, отдельно эксплуатационной устойчивости. Запись «Tier III» в задании без указания, требуется ли сертификат или достаточно соответствия критериям, гарантированно даёт спор на приёмке - предметы проверки у этих двух вариантов разные.

N, N+1, 2N: что стоит за записями

Коротко: N - мощность, покрывающая расчётную нагрузку; всё остальное в записи говорит, сколько единиц допустимо потерять и сколько существует независимых трактов до нагрузки.

Запись	Что означает	Что происходит при отказе одной единицы
N	Ёмкость ровно под расчётную нагрузку	Часть нагрузки теряется или переходит на байпас
N+1	Одна резервная единица сверх расчётной потребности	Оставшиеся держат нагрузку, резерв израсходован
N+2	Две резервные единицы	Резерв сохраняется после первого отказа, что позволяет ремонтировать без потери резервирования
2N	Две независимые системы, каждая покрывает нагрузку целиком	Вторая система принимает нагрузку полностью
2(N+1)	Две независимые системы, в каждой есть свой резерв	Отказ внутри системы не заставляет переключаться на вторую

Первая типовая ошибка касается того, от чего считается N. Если проектная величина взята по фактической загрузке на момент ввода, то по мере заселения стоек запись N+1 постепенно превращается в N, причём документально объект остаётся резервированным. Расчётная нагрузка должна фиксироваться на проектный горизонт заполнения, а фактический запас - контролироваться телеметрией на всём сроке эксплуатации.

Вторая относится к разнице между мощностью и трактом. Формула резервирования описывает ёмкостные компоненты - источники бесперебойного питания, генераторы, холодильные машины. Она ничего не говорит о том, сколько существует путей от источника до стойки. Площадка с записью 2N по источникам и единственным главным щитом резервирована по мощности вдвое и имеет единственный элемент, вывод которого в ремонт требует погашения зала.

Третья возникает при подсчёте резерва внутри модульного шасси. Аппарат, укомплектованный силовыми модулями ровно под расчётную нагрузку, резерва внутри корпуса не имеет; логика подбора разобрана в материале про модульный ИБП и моноблок.

Одновременная обслуживаемость - требование к эксплуатации, записанное в проекте

Коротко: возможность вывести любой элемент в ремонт без погашения нагрузки закладывается на стадии схемы и в эксплуатации уже не появляется.

Что для этого требуется по каждому узлу:

• Источники бесперебойного питания. Резерв по мощности на шине, плюс путь, по которому нагрузка снимается с конкретного аппарата. Типы обходных цепей и их проектные ограничения разобраны отдельно в статье про байпас ИБП.
• Батарейный массив. Возможность вывести цепочку на обслуживание и разрядное испытание при сохранении расчётной автономии оставшихся; порядок расчёта - в материале про автономию ИБП.
• Дизель-генераторные установки. Резерв по мощности и схема, позволяющая вывести агрегат в регламентное обслуживание и на нагрузочные испытания, не оставляя площадку без гарантированного источника.
• Щиты и распределение. Секционирование с ремонтными перемычками, раздельные вводы на секции, доступность аппаратов для обслуживания без снятия напряжения с соседней секции.
• Автоматика ввода резерва. Возможность обслуживать сам шкаф автоматики; узел, который переключает нагрузку, сам по себе часто оказывается неотключаемым - типовые ошибки схемы собраны в статье про проект АВР.

Проверяется всё это одним вопросом по каждому элементу однолинейной схемы: как он выводится в ремонт и что в этот момент держит нагрузку. Элементы, для которых ответ отсутствует, и определяют фактический уровень площадки независимо от того, что написано в задании.

Что меняется против отделения банка

Коротко: отличается режим нагрузки, роль холодоснабжения, характер потребителей для генератора и наличие окна обслуживания.

Признак	Отделение банка	Машинный зал
Режим нагрузки	Привязан к рабочим часам, ночью минимум	Круглосуточный, близкий к постоянному
Рост нагрузки	Медленный, привязан к ремонтам и переоснащению	Ступенчатый, по мере заселения стоек
Роль ИБП	Пережить провал и запуск генератора	То же плюс удержание нагрузки на время восстановления холодоснабжения
Холодоснабжение	Некритично на интервале аварии	Критично, тепловая инерция зала мала
Характер нагрузки	Смешанная: освещение, климат, оборудование зала обслуживания	Нелинейная, блоки питания серверов с корректорами коэффициента мощности
Окно обслуживания	Нерабочие часы, согласуемый простой	Отсутствует, работы идут под нагрузкой
Режим работы генератора	Резерв редких часов	Продолжительная работа под нагрузкой, близкой к расчётной

Последняя строка меняет спецификацию сильнее остальных. Режимы мощности генераторной установки по ГОСТ Р 53987-2010 различаются допустимой годовой наработкой и допустимой средней нагрузкой; агрегат, подобранный по резервному режиму, для площадки с длительными отключениями подходит хуже, чем это выглядит на бумаге. Как считается сама величина мощности - в материале про расчёт мощности ДГУ, выбор режима и класса применения - в статье про спецификацию на ДГУ.

Отсутствие окна обслуживания меняет другое - объём работ, который можно выполнить вообще. В отделении банка часть операций переносится в ночь и выполняется на снятом напряжении. В машинном зале такой возможности нет, поэтому все регламентные работы должны выполняться на схеме, которая держит нагрузку без обслуживаемого элемента. Требование это проектное, а платится по нему эксплуатация - каждый месяц на протяжении срока службы.

Холодоснабжение попадает в тот же контур критичности

Коротко: при высокой плотности тепловыделения перерыв в холодоснабжении ограничивает допустимую паузу так же жёстко, как перерыв питания, поэтому холодильный контур входит в СБГЭ, а не соседствует с ней.

В критериях Tier IV непрерывность холодоснабжения выделена явно: отказоустойчивая площадка обязана сохранять отвод тепла при единичном отказе, включая интервал запуска резервного источника. Практическое следствие для проекта - разделение холодильного контура по видам питания. Насосы циркуляции и автоматика холодильного центра обычно попадают на бесперебойное питание, компрессорная часть - на гарантированное, с приёмом нагрузки после выхода генератора на режим. Буферные ёмкости холодоносителя закрывают интервал между потерей ввода и восстановлением работы холодильных машин.

Отсюда же требование к порядку приёма нагрузки. Генератор принимает потребителей ступенями, и место холодильного оборудования в этой последовательности задаётся алгоритмом автоматики, а не порядком подключения в щите. Ступенчатый приём согласуется с допустимым набросом нагрузки на агрегат по ГОСТ Р 53987-2010 - иначе одновременный пуск компрессоров даёт просадку частоты и отключение генератора в момент, когда он нужен.

Организационная часть работ по холодильному контуру на действующей площадке разобрана в материале про замену чиллера без потери холодоснабжения - логика поочерёдного вывода там та же, что и для источников питания.

Две системы координат: Tier и ПУЭ

Коротко: уровень Uptime описывает доступность площадки, категория надёжности по ПУЭ - требования к электроприёмникам; одно из другого не выводится, и в задании остаются оба.

Правила устройства электроустановок делят электроприёмники на три категории, и для особой группы первой категории требуют третий независимый источник питания, которым на практике становится дизель-генераторная установка. Категория присваивается приёмникам, фиксируется в технических условиях и проектной документации и проверяется совсем иначе, чем критерии Uptime. Разбор механики - в статье про категорию надёжности электроснабжения.

Расхождение между системами существенно в двух местах. Первое: ПУЭ оперирует независимостью источников и допустимым перерывом питания, ничего не говоря о возможности вывода элемента в ремонт. Площадка первой категории с особой группой может при этом требовать погашения для обслуживания шины, оставаясь полностью соответствующей правилам. Второе: критерии Uptime не заменяют обязательных требований - обоснование категории, условия подключения, требования пожарной безопасности к размещению генератора и топливного хозяйства действуют независимо от заявленного уровня.

Практический вывод для задания: уровень и категория записываются как два отдельных требования, с разными способами подтверждения. Смешение их в одну строку - источник расхождений, которые вскрываются на экспертизе или на приёмке, когда менять схему уже дорого.

Что заложить в ТЗ

Коротко: уровень в задании имеет смысл вместе с расшифровкой поведения, которое требуется получить, и с указанием способа проверки.

• Расчётная нагрузка с горизонтом заполнения, от которой считается N, и порядок контроля фактического запаса в эксплуатации.
• Формула резервирования отдельно по источникам бесперебойного питания, генераторам и холодильному оборудованию.
• Требование к числу независимых трактов распределения от источника до конечного щита, с указанием точек, где тракты допустимо объединять.
• Перечень элементов, которые обязаны выводиться в ремонт без снятия ИТ-нагрузки, с описанием схемы вывода по каждому.
• Разделение потребителей холодильного контура по видам питания и место холодильного оборудования в последовательности приёма нагрузки генератором.
• Режим мощности генераторной установки по ГОСТ Р 53987-2010 и допустимая длительность работы под расчётной нагрузкой.
• Категория надёжности электроприёмников по ПУЭ - отдельным пунктом, независимо от заявленного уровня площадки.
• Форма подтверждения уровня: сертификация Uptime Institute либо соответствие критериям, подтверждаемое программой испытаний заказчика.
• Состав режимных испытаний, доказывающих одновременную обслуживаемость: поочерёдный вывод элементов под нагрузкой с фиксацией параметров.

Собрать эти требования до объявления закупки помогает услуга Помощь с ТЗ - предложения от разных поставщиков становятся сопоставимыми только после того, как заказчик задал условия одинаковыми для всех.

Частые вопросы

Можно ли получить Tier III, поставив два ИБП вместо одного? Нет. Два источника дают резерв по ёмкости, что соответствует уровню Tier II. Одновременная обслуживаемость требует ещё и дублированного тракта распределения: щитов, кабельных линий, аппаратов защиты вплоть до точки, где нагрузка получает питание с двух сторон.

Обязательна ли сертификация Uptime Institute, если заказчик просто хочет надёжности? Нет, это решение о форме подтверждения. Соответствие критериям можно проектировать и проверять программой испытаний без сертификата. Разница в том, что при сертификации критерии трактует внешняя сторона, а без неё - заказчик, поэтому способ подтверждения нужно зафиксировать в задании заранее.

Чем 2N лучше N+2, если резервных единиц столько же? Число единиц совпадает, а топология различается. При 2N существуют две независимые системы целиком, включая тракты распределения; при N+2 резерв добавлен в одну систему, и общие для неё элементы остаются едиными точками отказа.

Как проверить, что заявленный уровень реально достигнут? Пройти по однолинейной схеме поэлементно и по каждому элементу ответить, как он выводится в ремонт и что держит нагрузку в этот момент. Затем подтвердить ответы испытаниями под нагрузкой - состав программы разобран в материале про пусконаладку СБГЭ.

Почему для ЦОД нельзя взять типовое решение банковского отделения и масштабировать его? Меняется режим работы генератора, роль холодоснабжения и возможность останова. Решение отделения строится вокруг ночного окна обслуживания, которого в машинном зале нет, поэтому масштабирование даёт схему, обслуживаемую только с погашением.

Что делать, если объект уже построен и уровень требуется поднять? Начинать с ревизии трактов распределения. Ёмкость обычно добавляется относительно просто, а второй независимый путь до нагрузки требует работ в действующих щитах и кабельном хозяйстве; объём таких работ определяется обследованием, а не расчётом по мощности.

Источники

• Uptime Institute, Tier Standard: Topology - четыре уровня по поведению площадки при плановом выводе элемента и единичном отказе; Tier Standard: Operational Sustainability - эксплуатационная часть методики.
• ПУЭ, глава 1.2 - категории надёжности электроприёмников и требования к особой группе первой категории.
• ГОСТ Р 53987-2010 - режимы мощности генераторных установок переменного тока и условия набора нагрузки.
• ГОСТ Р МЭК 62040-3-2013 - объявление характеристик источников бесперебойного питания и методы их проверки.
• Замена парка ИБП в здании банка в Екатеринбурге - поочерёдный вывод аппаратов под нагрузкой на действующем объекте, иллюстрация того, как выглядит одновременная обслуживаемость на практике.
• Проектирование СБГЭ и Проектирование ИБП - состав проектных работ по системе бесперебойного гарантированного электроснабжения.

Уровень площадки - характеристика схемы и организации эксплуатации, поэтому решается он на стадии проекта и почти не поддаётся исправлению после ввода. Задание, в котором рядом с записью уровня перечислены элементы, обязанные выводиться в ремонт под нагрузкой, снимает большую часть будущих разногласий. Запросить КП - проработка схемы СБГЭ под заданный уровень резервирования и состав нагрузки площадки; Помощь с ТЗ - формулировка требований к резервированию, обслуживаемости и подтверждающим испытаниям до объявления закупки.