====== Модульные подходы в проектировании ======
===== Контекст и цели =====
Модульный подход формирует архитектуру ЦОД как набор стандартизированных блоков («модулей») ИТ-пространства, питания и охлаждения, которые можно поэтапно вводить, перестраивать и выводить из эксплуатации без остановки сервиса. Цель — обеспечить:
* согласование темпов ввода мощностей с реальным спросом;
* высокую энергоэффективность при неполной загрузке;
* управляемую надёжность и ремонтопригодность;
* сокращение сроков проектирования/ввода (design-to-commission).
* Модульность — это не только контейнеры. Это принцип построения **white space**, **power blocks** и **cooling blocks** с унифицированными интерфейсами (электро, гидравлика, автоматика).
===== Классы модульных решений =====
==== Контейнерные (prefab/plug-and-play) ====
* Заводская готовность, быстрый монтаж, предсказуемое качество.
* Типовые кейсы: быстрый прирост мощности, периферийные площадки, временные кластеры для пиковых нагрузок.
==== Индустриализированные (гибридные) ====
* Традиционное здание + модульные **MEP-skid** (UPS/БЩП, чиллерные модули, насосные группы, CDU).
* Баланс капитальности и гибкости; поэтапное наращивание без остановки ИТ.
==== Традиционные сооружения с модульной разбивкой ====
* Здание спроектировано под «очереди» строительства: **зал-1 → зал-2 → зал-3**.
* Инфраструктура подводится по мере роста, исключается избыточная начальная мощность.
^ Тип решения ^ Время ввода ^ Масштабируемость ^ Энергоэффективность при 25–50% загрузки ^ Ограничения ^
| Контейнерный | Минимальное | Высокая | Выше, за счёт включения модулей «по требованию» | Ограничения по площади/шуму/городским регламентам |
| Индустриализированный (гибридный) | Среднее | Очень высокая | Выше, за счёт модульных UPS/чиллеров | Требует продуманной стыковки инженерных интерфейсов |
| Традиционный с модульной разбивкой | Среднее | Средне-высокая | Средняя/выше (зависит от дисциплины поэтапного ввода) | Риск «застрявшей» избыточной мощности при отклонении спроса |
===== Энергетическая логика модульности =====
==== Потери при неполной загрузке (качественно) ====
* **UPS/распределение:** КПД растёт с загрузкой; крупные монолитные системы на 25–40% загрузки теряют больше.
* **Охлаждение:** чиллеры/насосы/вентиляторы эффективнее в модульной схеме (включение меньших блоков, VSD, ступенчатая работа).
* **White space:** секции с изоляцией горячих/холодных коридоров позволяют держать высокую уставку и выключать неиспользуемые ряды.
$$
P_{\text{инфр}}(L)\;\approx\;\sum_m P_{m}^{\text{min}}\cdot I(L\!>\!L_m)\;+\;\sum_m f_m(L)\,,
$$
где \(L\) — текущая доля ИТ-нагрузки, \(P_{m}^{\text{min}}\) — базовая мощность включённого модуля \(m\), \(f_m(L)\) — переменная часть потребления. Цель модульной стратегии — минимизировать сумму базовых мощностей, держать систему в зоне высоких КПД и включать только нужные модули.
==== Триггер расширения мощности ====
$$
t_{k+1}=\min\{\,t:\; D(t)\ge S_k\cdot \alpha\,\}\,,
$$
где \(D(t)\) — прогноз спроса, \(S_k\) — установленная мощность очереди \(k\), \(\alpha\) — порог расширения (напр., 0.75–0.85). Такой триггер удерживает инфраструктуру в «эффективной зоне» без рисков дефицита.
===== Архитектурные паттерны модульности =====
==== Power-pods (электроснабжение) ====
* **UPS-pod** с собственными ББП/АКБ/распределением; независимое обслуживание, схемы N+1/2N.
* **Шинопроводы/busway** с секционированием для гибкого переназначения линий.
* **Правило загрузки:** стремиться к 60–80% для максимального КПД, перераспределять стоечные группы между подами.
==== Cooling-pods (охлаждение) ====
* Чиллерные/адъабатические/сухие градирни модульно, с VSD и поэтапным наращиванием.
* **Экономайзеры** (air-/water-side) как базовый режим в благоприятном климате; испарительное охлаждение — для «сухих» регионов.
* **CDU/TCS** для жидкостного охлаждения высокоплотных ИИ-кластеров; параллельная эксплуатация с воздушным контуром.
==== White-space pods (ИТ-залы) ====
* По 1–2 «крыла» с полной изоляцией горячих/холодных коридоров.
* Локальные датчики (температура/влажность/ΔP), автоматика уставок на уровне ряда/зоны.
* Возможность временной консервации (отключение вентиляторов/ПДУ в пустых рядах).
* Критичные ошибки: ранний «перевыпуск» мощности, отсутствие секционирования, общий крупный UPS/чиллер без модулей, жёсткие уставки по «старым» стандартам, неучтённая плотность ИИ-кластеров.
===== Проектирование и ввод по очередям (staged build) =====
==== План-график влияния на энергоэффективность (качественно) ====
* **ИТ-стратегия** и **стратегия ЦОД** (ранняя стадия): максимальное влияние — выбор модульной архитектуры, целевых PUE/COP, классов ASHRAE, границ влажности.
* **Подбор ИТ-оборудования, охлаждение, электрика:** выбор VSD, экономайзеров, схем резервирования.
* **Внедрение/пусконаладка/комиссионирование:** правило «меряй и настраивай» — верификация под нагрузкой очередей 25/50/75/100%.
* **Эксплуатация:** поддержание модульного режима, регулярный ребаланс.
==== Check-list ввода очереди ====
* Подтверждённый прогноз и триггер расширения \(\alpha\).
* Баланс мощностей ИТ:инфраструктура ≈ требуемый для целевого PUE.
* VSD на вентиляторах/насосах; кривые КПД UPS при планируемых загрузках.
* Наличие изоляции коридоров, готовность к повышенным уставкам (по ASHRAE 2015/2025).
* Тесты экономайзеров и сценарии отказа (fail-over между модулями).
* Схемы N+1/N+N/2N описаны на уровне **подов**, а не одного «общего» блока.
===== Экономика и риски =====
^ Аспект ^ Модульный подход ^ Монолитный подход ^
| CAPEX | Поэтапный, «плати по мере роста» | Высокий upfront, риск избыточности |
| OPEX при неполной загрузке | Ниже (модули в зоне лучшего КПД) | Выше (базовые потери крупной системы) |
| Надёжность/ремонт | Секционирование, локальная изоляция отказов | Общие точки отказа |
| Скорость расширения | Высокая (готовые модули/под-подключение) | Средняя/низкая |
| Инженерная сложность | Требует продуманной стыковки интерфейсов и автоматики | Ниже, но менее гибко |
===== Управление режимами (операционный уровень) =====
==== Воздух/вентиляция ====
* Полная изоляция коридоров; таргетирование ΔT по верхним уставкам ASHRAE.
* Оптимизация расхода по законам подобия вентиляторов:
$$P_{\text{fan}}\propto Q^3,\qquad P_{\text{pump}}\propto \dot V^3$$
* Практика: снижение расхода на 10% даёт экономию мощности вентиляторов/насосов порядка 25–30%.
==== Охлаждение ====
* **Set-point strategy:** целевая уставка подачи ≥ 24–27 °C (при соблюдении классов ASHRAE), приоритет free-cooling.
* **Экономайзеры:** air-side — для умеренного/холодного климата; water-side — там, где доступна низкотемпературная вода.
* **Жидкостное охлаждение для высоких плотностей:** CDU/rach-CDU, горячая петля > 30–45 °C для утилизации тепла.
==== Электропитание ====
* Держать загрузку модульных UPS в зоне макс. КПД (обычно 60–80%).
* Гибкий роуминг линий питания между подами; использование шинопровода вместо кабельных магистралей.
* Наибольшая часть выигрышей достигается **на этапе стратегии и дизайна**; в эксплуатации важно дисциплинированно отключать лишние модули и поднимать уставки, опираясь на мониторинг.
===== Карта выбора охлаждения по климату (ориентир) =====
^ Климат/ресурсы ^ Режим по умолчанию ^ Добавки/акценты ^
| Холодный/умеренный | Air-side economizer + изоляция коридоров | Увлажнение по расширенным конвертам ASHRAE; контроль ESD |
| Сухой жаркий | Испарительное/адъабатическое + water-side | Повышенные уставки подачи; усиленный контроль воды |
| Влажный жаркий | Water-side economizer + чиллеры с VSD | Осушение, агрессивная изоляция коридоров |
| Высокая плотность (ИИ) | Жидкостные контуры (CDU/TCS) | Тёплые петли для утилизации тепла; резерв по мощности |
===== Ключевые метрики и контроль =====
* **PUE по модулям** и общий PUE.
* **КПД UPS** на фактической загрузке каждого пода.
* **COP/кВт/тонна** для каждого холодильного модуля; доля работы в free-cooling.
* **Уставки/диапазоны ASHRAE** (температура/влажность) и доля времени в «зелёной зоне».
* **Плотность стоек** и доля высокоплотных кластеров с жидкостным охлаждением.
* **Степень задействования мощностей** (installed vs. utilized) по каждому поду.
===== Ключевые идеи =====
* Модульность — стратегический принцип: проектируй **под-уровень** для ИТ, питания и охлаждения, вводи по очередям по триггеру загрузки.
* Энергоэффективность достигается снижением базовых потерь и удержанием модулей в зоне оптимального КПД (UPS/чиллеры/VSD).
* Комбинируй изоляцию коридоров, экономайзеры и повышенные уставки по ASHRAE; для ИИ-кластеров — сразу закладывай жидкостные контуры.
* Монолит оправдан только при гарантированной высокой загрузке и предсказуемом росте; во всех прочих сценариях выигрывает модульный/гибридный подход.
* Дисциплина измерений (PUE по подам, COP, загрузка UPS, время в free-cooling) — основа устойчивой экономии OPEX.