Проект

«Росатом» начал оказывать облачные услуги на базе собственного мега-ЦОДа

Заказчики: Росэнергоатом, ФГУП концерн

Москва; Энергетика

Продукт: ЦОД Проекты создания и модернизации

Дата проекта: 2014/03  - 2018/09
Бюджет проекта: 6 422 223 030 руб.
Технология: ЦОД
подрядчики - 158
проекты - 401
системы - 164
вендоры - 119
Технология: Центры обработки данных - технологии для ЦОД
подрядчики - 271
проекты - 667
системы - 577
вендоры - 192

Содержание

СМ. ТАКЖЕ (3)

Центр обработки данных «Росэнергоатома», оператора АЭС, входящего в состав «Росатома», является одним из крупнейших в Европе . Его общая площадь – 33 800 кв. м Запроектировано 8 000 стойкомест (5 зданий ЦОД). Потребляемая мощность - 80 МВт.

ЦОД находится примерно в 200 км к северо-западу от Москвы, вблизи Калининской АЭС (филиал «Росэнергоатома» в г. Удомля Тверской обл.).

Первая очередь ЦОДа, включающая 3 здания, была презентована в сентябре 2018 года. Площадку планируется использовать не только для нужд «Росэнергоатома», но и для предоставления коммерческих услуг сторонним заказчикам.

Проект реализуется в партнерстве с «Ростелекомом».

2018

Начало предоставления облачных услуг

В январе 2019 года госкомпания «Автодор» сообщила, что совместно с «Росэнергоатомом» начато пилотное тестирование использования облачных технологий и сервисов нового ЦОДа для развертывания работы геоинформационной системы (ГИС) «Автодора».

Пилот запущен в рамках меморандума о сотрудничестве в целях развития цифровой экономики РФ, подписанного «Росатомом» и «Автодором» в сентябре 2018 года.

«Росэнергоатом» планирует оказывать коммерческие услуги на базе нового дата-центра <i>(фото - rosenergoatom.ru)</i>
«Росэнергоатом» планирует оказывать коммерческие услуги на базе нового дата-центра (фото - rosenergoatom.ru)

В «Автодоре» рассчитывают, что размещение ЦОДа вблизи атомной станции, а также наличие собственной системы электропитания, должно гарантировать высокую степень защищенности данных и качественное энергоснабжение, что является наиболее важным для бесперебойной работы всей ГИС «Автодор».

«
Использование облачных сервисов ЦОД «Калининский» также позволит организовать доступ к единому информационному пространству ГИС «Автодор» со стороны всех пользователей информационной системы, включая филиалы государственной компании, своевременно актуализировать и хранить большие объемы данных, объединить их на единой платформе, - отмечают в «Автодоре».
»

В компании также рассчитывают, что применение единого облачного сервиса ЦОД позволит предоставить единую цифровую платформу для инфраструктуры тестирования технологий беспилотного транспорта на новой скоростной автомобильной дороге М-11 «Москва - Санкт-Петербург». Эта инфраструктура создается на обходе Вышнего Волочка в Тверской области в рамках развития дорожной карты НТИ «Автонет», принятой правительством РФ и в рамках выполнения поручения премьер-министра Дмитрия Медведева.

2015

Снижение мощности

15 декабря 2015 года совет директоров «Ростелекома» одобрил условия соглашения с «Росэнергоатомом» по поводу крупнейшего в России дата-центра, который будет построен в Тверской области. Названы примерные доходы и расходы оператора в этом проекте, а также стало известно, что мощности площадки будут вдвое меньше планируемых.

Как пишут «Ведомости» 15 декабря 2015 года, в соответствии с условиями предварительного договора проектирование и строительство зданий, коммуникаций и энергосистемы дата-центра выполнит «Росэнергоатом».[1]

«Ростелеком» заработает 100 млрд рублей на крупнейшем ЦОДе в России
«Ростелеком» заработает 100 млрд рублей на крупнейшем ЦОДе в России

В свою очередь «Ростелеком» займется разработкой и созданием инженерной инфраструктуры объекта. В 2016 году компания собирается инвестировать в проект 4,2 млрд рублей, в 2017 году — 2,8 млрд рублей, заявил представитель госоператора Валерий Костарев.

Суммарная мощность центра обработки данных, возводимого рядом с Калининской АЭС, составит 4,8 тыс. серверных стоек. 4 тыс. из них арендует «Ростелеком», а оставшиеся 800 стоек будут использованы «Росэнергоатом» для нужд «Росатома». Ранее сообщалось, что в дата-центре разместят в общей сложности до 8–10 тыс. стоек. Костарев подтвердил снижение показателей, но не объяснил причины.

Предварительный договор «Ростелекома» и «Росэнергоатома» рассчитан на 30 лет, за это время оператор заплатит за аренду здания и сооружения для организации своего ЦОДа около 34,1 млрд рублей. При этом сумма расходов может измениться в зависимости от стоимости электроэнергии и других потребляемых ресурсов.

Как сообщает «Интерфакс» со ссылкой на источник, близкий к совету директоров «Ростелекома», за 30 лет «Ростелеком» может получить около 100 млрд рублей дополнительных доходов от продаж услуг дата-центра, который будет построен на инфраструктуре «Росэнергоатома».[2]

Начало строительства

23 ноября 2015 года «Росэнергоатом» объявил о запуске строительства центра обработки данных в Удомле (Тверская область). На этом ЦОДе, который считают крупнейшим в России, свои данные могут разместить Google и Facebook.

О начале строительных работ дата-центра на площадке, расположенной рядом с Калининской АЭС, сообщил директор этой атомной станции Михаил Канышев. По его словам, график выполнения мероприятий по возведению ЦОДа утвержден, и, согласно ему, генподрядчик ООО «ЦХД Инжиниринг» приступает к подготовке территории в 2015 году.

Калининская АЭС, вблизи которой строится самый большой дата-центр в России
Калининская АЭС, вблизи которой строится самый большой дата-центр в России
«Генподрядчику предстоит провести комплекс строительно-монтажных работ, включая системы электроснабжения, водоснабжения, отопления, вентиляции и кондиционирования, дорог и других объектов. Ввод в эксплуатацию первой очереди центра запланирован на март 2017 года, второй — на март 2018 года», — заявил Канышев.

Ранее сообщалось, что в этом коммерческом дата-центре разместят до 8 тыс. стоек. По словам Михаила Канышева, предполагается запуск до 10 тыс. стоек. Это позволяет называть данный ЦОД самым большим на территории РФ.

Кроме того, предприятие должно стать достаточно энергоемким: потребляемая им мощность при реализации всего проекта составит около 80 МВт. Именно по причине необходимости обеспечения надежным источником электроснабжения дата-центр размещается вблизи к АЭС, отметили в «Росэнергоатоме».

К ноябрю 2015 года неизвестны имена клиентов, которые будут пользоваться возможностями ЦОДа в Тверской области. В июле 2015 года «Росатом» (владеет «Росэнергоатомом») предложил Google и Facebook воспользоваться этой площадкой для переноса в Россию персональных данных российских пользователей, что требует вступивший в силу 1 сентября 2015 года закон.

По планам «Росатома», не более 10% мощностей центра обработки данных в Удомле будет использоваться под нужны «Росэнергоатома», а все остальное предложат коммерческим клиентам.[3]

Задачи проекта

Строительство оценили в 6,4 млрд. рублей, эта сумма без учёта дополнительной ИТ-инфраструктуры. В коммерческом ЦОДе предполагается постепенно разместить до 8 тыс. стоек.

В закупке 150406/0513/655 заказчик — ОАО "Концерн Росэнергоатом" значится сумма - начальная (максимальная) цена договора 6 422 223 030,00 (Шесть миллиардов четыреста двадцать два миллиона двести двадцать три тысячи тридцать) рублей, с учетом НДС. Место выполнение работ: филиал ОАО "Концерн Росэнергоатом" "Калининская атомная станция" (город Удомля, Тверская область). Сроки выполнения работ: с момента подписания договора до 31 декабря 2018 года, с правом досрочного выполнения.

Калининская АЭС, 2013

Более 6 млрд рублей заплатят за "комплекс работ от подготовки территории строительства и поставки оборудования до монтажа и наладки оборудования для обеспечения ввода объекта в эксплуатацию". Строительство "Опорного центра обработки и хранения данных" ОАО "Концерн Росэнергоатом" будет вестись за счёт собственных средств заказчика, в договоре генподряда предусмотрено выплата аванса: не более 80% от стоимости оборудования и не более 30% на выполнение строительно-монтажных работ.

В документации сказано, что "Опорный центр обработки и хранения данных ОАО "Концерн Росэнергоатом"" создается для информационного обеспечения Калининской АЭС, Концерна "Росэнергоатом", Госкорпорации "Росатом", то есть для собственных нужд.

Техническое задание создано на основе проектной документации, разработанной ООО "ЦХД Инжиниринг", ООО "ЭТС-Проект", ЗАО "Инжиниринговая компания СЭМ". Компания "ЭТС-Проект" разработала документацию, необходимую для строительства ПС 330/10 кВ, питающих кабельных линий 330 кВ. Поясняется, что "ПС 330/10 кВ ЦОД предназначена для бесперебойного электроснабжения потребителей опорного центра обработки и хранения данных ОАО "Концерн Росэнергоатом", расположенного по адресу: Тверская область, Удомельский район, с/п Рядское". Вероятно, ЦОД будет располагаться на расстоянии, как минимум, 2 км от Калининской АЭС, в проекте договора есть информация о том, что для ЦОДа будут построены пять зданий, два из них - двухэтажные.

ООО "ЦХД Инжиниринг" предстоит выполнить комплекс строительно-монтажных работ, поставку и монтаж оборудования, пусконаладочные работы по сооружению объекта "Опорный центр обработки и хранения данных" ОАО "Концерн Росэнергоатом" (далее ЦОД) и сетей внешнего энергоснабжения ЦОД, включая системы электроснабжения, водоснабжения, водоотведения, отопления, вентиляции и кондиционирования, сетей связи, канализации, дорог, автостоянок, подземных хранилищ топлива и остальных объектов в соответствии с проектной документацией, перечнями оборудования или аналогов по строительству "Опорного центра обработки данных ОАО "Концерн Росэнергоатом".

Для организации контроля предполагается использование календарно-сетевых графиков, подготовленных с помощью ПО Primavera. Для выполнения работ необходимо наличие у подрядчика программы обеспечения качества (ПОКАС). Заказчик требует от подрядчика непрерывное выполнение работ, работать предстоит в "1-но, 2-х и 3-сменном режиме".

Строительство разбито на пять этапов, в течение каждого из трёх последних будут добавлять по одному зданию ЦОДа. Здания ЦОДа будут иметь железобетонный каркас с навесными сэндвич-панелями, с негорючим наполнителем.

Евгений Романов, генеральный директор, поведал в 2013 году, как этот проект выглядел на уровне идеи:

«
Конкретно по КАЭС мы сейчас решаем крайне важную задачу – рассматриваем инвестиционный проект, который будет включать возведение нескольких корпусов возле станции, которые будут сориентированы под Дата-центр. Это центр по обработке данных.

Во-первых, мы собираемся здесь сосредоточить стойки, серверы, которые будут обслуживать всю информацию концерна, дальше будем предлагать, чтобы здесь были собраны все ЦОДы, связанные с ГК Росатом, в-третьих, это позволит нам на коммерческих условиях привлекать такие серьезные организации, как Гугл, Yandex, которые работают на территории России. Здесь получается несколько составляющих: первая – мы имеем в минимальном наборе (т.е. мы, плюс коммерческая структура) — это 100 МВТ, если мы, ГК и коммерческие структуры – это уже 200 МВТ стабильного потребления электроэнергии. Очевидная вещь, что вся электроника, которая будет здесь сосредоточена, требует зимой подогрева, летом охлаждения, а это стабильное потребление большого количества электроэнергии.

Это хорошо, но для нас это уже это не главное. Мы переходим для себя не к торговле электроэнергией, а к торговле битами, т.е. с очень высокой добавленной стоимостью. И уже задумываемся, а почему бы нам вообще в комплекс ВВЭР ТОИ не вшить еще и этот Дата-центр как обязательное условие? Тогда, занимаясь поставками наших энергоблоков за рубеж, мы начинаем заниматься не только поставкой в эти страны электроэнергии, но еще поставляем носители и источники информации.

Напомню, в современном мире войны выигрываются не пушками и танками, а выигрываются в информационном пространстве. Владеешь информацией – владеешь миром. И в этом смысле вы опять будете находиться на передовой, на острие атаки. А вам не привыкать решать уникальные задачи. Вы умеете это делать. Коллектив у вас блестящий. Надеюсь, что нам удастся обосновать это решение. Уже было промежуточное совещание. Дана команда на подготовку окончательной презентации, в течение 2 недель мы выходим на руководство ГК для того, чтобы получить решение, что мы эти инвестиции будем начинать. У нас эти инвестиции оцениваются в пару миллиардов рублей".

»

В проекте договора генподряда сказано о строительстве ЦОДа 1-го уровня и ЦОДа 3-го уровня. Какая-либо информация, позволяющая узнать планируемые параметры, отсутствует. В техническом задании (приложение к договору генподряда) сообщается о некоторых системах, требуемых Заказчику:

"Система дизель-динамических источников бесперебойного питания" (ДДИБП). Она должна обеспечить электропитание в аварийных ситуациях, при прерывании внешнего энергоснабжения. От системы ДДИБП требуется бесперебойное и продолжительное питание подключенной критически важной нагрузки чистым переменным током. Система ДДИБП должна включать все механические и электрические устройства, необходимые для бесперебойного питания нагрузки в автоматическом режиме.

  • Холодоснабжение и кондиционирование. Необходимые параметры микроклимата в технологических помещениях ЦОД будет поддерживать система кондиционирования на основе шкафных прецизионных кондиционеров с нижней подачей воздуха. Воздухораспределение будет организовано по принципу горячих и холодных коридоров, при этом холодный воздух нужно подавать через перфорированный фальшпол в холодный коридор. Кондиционеры должны будут установлены в торцах коридоров.

  • В спецификации упоминается "прецизионный кондиционер 100,3 кВт без пароувлажнителя со встроенным комбинированным балансировочным клапаном (регулятором расхода с электроприводом) ASD1550CW" и "Прецизионный кондиционер STULZ ASD1550CW".

  • Вентиляция. В помещении установки динамических источников бесперебойного питания и ДГУ в нормальном режиме работы выполнить рециркуляционную систему вентиляции без подогрева с ограничением минимальной температуры подаваемого воздуха +10°С.

  • Пожаротушение. В системе пожаротушения предусмотрено использование "Хладон 227еа" (С2F7H), то есть будет смонтирована газовая система пожаротушения.

  • ИТ-оборудование. Несколько компьютеров для развёртывания различных АРМ, для размещения сетевого оборудования — 19" шкаф напольный 42U, напольный 22U и настенный 12U, оптические кроссы и медиаконвертеры (для внутренней сети планируется использовать как UTP кат 5e, так и одномодовое волокно).

В списке в основном зарубежное оборудование, включая два 48-портовых коммутаторов Cisco Catalyst WS-C3560-48PS-S и два Cisco Catalyst WS-C3750G-12S-E, есть ещё Cisco CISCO881-PCI-K9 и Cisco Catalyst WS-C3560-24PS-Е. Программное обеспечение для компьютеров Microsoft Windows 7 Pro, Windows Server 2012 R2 Standart, планируется развернуть SQL Server Business Intelligence Edition 2014 на отдельном "железе". Для первой очереди ЦОДа, видимо, будут смонтированы шкафы "Miracel" 46U 600x1000d ASP "Server Rack" (128 шт.).

2013

Старт проекта

До конца 2013 г. для концерна «Росэнергоатом», выполняющего функции эксплуатирующей организации (оператора) атомных станций, должна быть разработана проектная документация по созданию опорного центра обработки и хранения данных. В частности, к этому сроку планируется подготовить дизайн-проект объекта, техническое задание на проектирование ЦОД и проектно-сметную документацию на его строительство.

Дата-центр планируется разместить в городе Удомля на земельном участке, принадлежащем Калининской АЭС. Данная станция вырабатывает 70 % от всего объема электроэнергии, производимой в Тверской области, и выдает мощность на Тверь, Москву, Санкт-Петербург, Владимир и Череповец.

Ранее в 2013 г., во время визита на Калининскую АЭС, гендиректор «Росэнергоатома» Евгений Романов рассказывал о планируемом инвестиционном проекте, предполагающем возведение нескольких корпусов возле электростанции, которые должны быть сориентированы под ЦОД.

«
Во-первых, мы собираемся здесь сосредоточить стойки, серверы, которые будут обслуживать все информацию концерна, дальше будем предлагать, чтобы здесь были собраны все ЦОДы, связанные с ГК «Росатом», - отметил он.
»

Как следует из опубликованной документации по проекту, объект, который необходимо спроектировать, должен представлять собой единый инженерно-технический комплекс, включающий в себя общий офисный центр с аппаратными помещениями системы связи, аппаратные комнаты, обслуживающие пространство вне дата-центра, и непосредственно строения дата-центра.

Последнее включает машинные залы, каждый из которых должен обеспечивать установку не менее 80 серверных шкафов, комнаты для телекоммуникаций, обслуживающих помещения дата-центра, операционный центр, комнаты вводов, комнаты для электрического и механического оборудования ЦОДа, складские помещения и погрузочные платформы, а также офисы вспомогательного персонала.

Для обеспечения работы дата-центра также должны быть предусмотрены энергоцентры с трансформаторными подстанциями, резервными источниками электроснабжения и холодоснабжения. Электрическая мощность шкафов, которые планируется разместить в ЦОДе, принимается по 10 кВА на каждый.

При проектировании дата-центра должно приниматься во внимание соответствие его основных параметров требованиям международного стандарта Tier-III, говорится в опубликованной документации по проекту.

Примечания