+7 (495) 134-33-56

Реперные точки при построении ЦОД: от разработки Т3 до ввода в эксплуатацию

Реперные точки при построении ЦОД: от разработки ТЗ до ввода в эксплуатацию

В марте 2021 года российское правительство заявило о том, что собирается оказать поддержку рынку дата-центров и будет содействовать строительству новых частных ЦОД. Но даже без этих мер рынок находится на подъеме: мы наблюдаем рост интереса к строительству новых ЦОД. Рассказываем, через какие обязательные этапы пройдет бизнес, принявший решение построить дата-центр под свои задачи или для продажи мощностей на сторону.

1

Составление технического задания

Какие функции будет выполнять дата-центр? Каким технико-экономическим требованиям он должен соответствовать? В какие сроки построен? На эти и другие вопросы ответит техническое задание (ТЗ), в соответствии с которым будет разрабатываться проект ЦОД. В ТЗ указывают требования к зданию и оборудованию, порядок выполнения работ, предполагаемые сроки ввода в эксплуатацию.

Ключевые технологические принципы, которым соответствует современный ЦОД:

масштабирование

виртуализация

кластеризация

резервирование

В разработке ТЗ участвуют несколько специалистов:

  • руководитель компании,
  • технический директор,
  • IT-инженеры,
  • проектировщики,
  • представители генподрядчика,
  • архитектор решения

Чем точнее составлено ТЗ, тем меньше ошибок будет допущено на этапе проектирования, тем меньше времени займет согласование различными службами и тем больше шансов вписаться в предполагаемый бюджет на строительство.

С учетом стремительного роста объемов данных важно еще на этапе составления ТЗ заложить возможность масштабирования ЦОД под изменяющиеся запросы. Необходимо предусмотреть рост вычислительной нагрузки, повышение энергоемкости и теплоотдачи.

Конструктивные особенности помещения должны учитывать увеличение количества и веса стоек, установку дополнительных кондиционеров и другого вспомогательного оборудования.

2

Разработка проекта

На этом этапе составляют эскизный проект дата-центра, прорабатывают его архитектурные и конструктивные особенности. В эскизном проекте отмечают места расположения стоек, перечисляют требования к параметрам серверных и вспомогательных помещений, принципы работы всех инженерных систем, резервирования систем электроснабжения и кондиционирования — все то, что упростит поиск конкретных решений под запросы заказчика.

При проектировании дата-центра проводят детальный анализ потребностей в электропитании и охлаждении, чтобы правильно рассчитать рабочие нагрузки и подобрать оптимальное по мощности оборудование.

Специалисты с опытом проектирования ЦОД разрабатывают планы помещений, подбирают IT-оборудование и элементы физической инфраструктуры. Если проект максимально детализирован, повышаются шансы на бесперебойную работу объекта после ввода его в эксплуатацию. В дальнейшем проектную документацию, оформленную в виде текстовой и графической частей, используют для разработки рабочих документов.

Основной документ, которым руководствуются при проектировании ЦОД, — Постановление Правительства РФ от 16.02.2008 г. № 87 «О составе разделов проектной документации и требованиях к их содержанию».

Также учитываются другие строительные нормы и требования, среди которых TIA-942, TIA/EIA-568A, TIA/EIA-569, ГОСТ Р ИСО/МЭК 17799-2005, ППБ 01-93, РД 45.120-2000, СНиП II-12-77.

3

Составление сметы

$187 млрд.

Было потрачено в течение 2020 года во всем мире на строительство и модернизацию дата-центров

250 тыс. руб.

Минимальная стоимость строительства 1 м2 ЦОД в России

Еще до составления сметы необходимо определиться с уровнем надежности дата-центра — этот параметр сильно влияет на итоговую сумму строительства.

Желаемый уровень надежности зависит от:

  • требований к зданию,
  • количества активных систем поддержки ИТ,
  • резервных каналов коммуникаций,
  • особенностей системы кондиционирования,
  • пожарной безопасности и других.

Даже если принято решение строить дата-центр уровня Tier III с возможностью модернизации, определенные требования, относящиеся к Tier IV, реализовать нужно на начальном этапе строительства. В противном случае дата-центр нельзя будет масштабировать.

В смету на ЦОД закладывают:

строительство здания,

покупку ИТ-оборудования, включая системы хранения данных и сетевые устройства,

объекты физической инфраструктуры, например электросетевое оборудование,

в зависимости от региона крупная сумма может потребоваться для покупки земли под ЦОД,

также в смете учитывают затраты на строительно-монтажные и пусконаладочные работы.

4

Поиск подрядчиков

При строительстве крупного ЦОД оптимально найти генподрядчика, который будет координировать работу остальных подрядных организаций. Он займется решением организационных вопросов, составит график строительства, закупит материалы, выполнит пусконаладочные работы, проконтролирует результаты на всех этапах строительства и подготовит объект к сдаче.

Обойтись без генподрядчика можно, но в этом случае заказчику самому придется согласовывать и контролировать действия всех подрядчиков по ходу строительства.

5

Возведение здания

Для современного ЦОД нужно несколько помещений с разными функциями. Например, в серверной размещается IT-оборудование, во вспомогательных помещениях находятся системы вентиляции, телекоммуникации и кондиционирования, технический персонал, склад.

Имеет значение то, как помещения расположены внутри здания: если комната для сотрудников может быть где угодно, то серверная должна быть со всех сторон окружена другими помещениями. Подобных нюансов очень много, например, ширина и высота дверных проемов должна соответствовать габаритам оборудования, для систем жизнеобеспечения дата-центра нужно обеспечить достаточно места, в том числе и для ИБП, правильно рассчитать высоту фальшпола.

Здание, в котором будет размещаться ЦОД, необходимо защитить от электромагнитного излучения, а в его отделке использовать пылезащитные материалы.

6

Поставка оборудования

Нам необходимо обеспечить центр обработки данных:

  • сетевым оборудованием;
  • оборудованием для организации работы вычислительного комплекса;
  • оборудованием инженерной инфраструктуры.

Работу вычислительного комплекса обеспечивают многопроцессорные серверы, СХД и системы резервного копирования, и именно их принято считать центральными элементами ЦОД.

В то же время их работа невозможна без инженерной инфраструктуры:

систем гарантированного и бесперебойного питания,

системы кондиционирования,

видеонаблюдения,

контроля и управления доступом.

Надежность ЦОД напрямую зависит от системы электроснабжения, которая включает в себя:

источники бесперебойного питания

ДГУ

электрощитовое оборудование

В начале 2021 года компания Delta Electronics представила новые ИБП Ultron серии DPS на 300-1200 кВА, которые обеспечивают лучшую в отрасли надежность и плотность размещения в мегаваттных ЦОД. Эти моноблочные ИБП помогают оптимизировать совокупную стоимость владения, имеют высокую энергоэффективность и сокращают риски простоя и тем самым защищают инвестиции.

7

Ввод в эксплуатацию

Профильные специалисты собирают серверные стойки, соединяют друг с другом отдельные блоки инженерной инфраструктуры, выполняют коммутацию и настройку системы, отслеживают критичные показатели: скорость подключения, общую работоспособность, защиту от кибератак.

Перед финальной приемкой объекта проводят тестирование. Оно помогает убедиться, что оборудование и инженерные системы работают в соответствии с утвержденной спецификацией, а ЦОД в целом демонстрирует заявленную производительность и уровень надежности.

8

Организация работы персонала

К этому моменту у заказчика строительства обычно уже есть команда специалистов, которые будут обслуживать ЦОД. Некоторые из них, скорее всего, принимали участие в реализации более ранних этапов, другие присоединятся в процессе тестирования и проверки работоспособности всех систем.

Важно:

заранее обозначить круг обязанностей каждого сотрудника и выделить сферу ответственности, зафиксировав ее документально в должностных обязанностях.