POST-DC – Telegram
POST-DC
378 subscribers
213 photos
4 videos
60 files
131 links
Частные наблюдения о рынке ЦОД от Игоря Дорофеева, президента Ассоциации отрасли ЦОД, гендиректора ООО "АйКорд".

Краткие оперативные заметки и наблюдения без особой редактуры.

Личное мнение автора не всегда совпадает с официальной позицией Ассоциации.
Download Telegram
Справка про GDS

GDS - 9 место в мире вообще, 5 по колокации, в Азии наверно второе, после NTT (но NTT - глобальная компания, а GDS азиатская) поэтому не уверен, надо доли считать.

103 ЦОДа в Азии.

Странно, в мощности электроэнергии не считают, считают в площади квадратными метрами, коих 715+ тысяч.
Вот смотрите, котятки.

Распоряжением Правительства #1911-р была предусмотрена разработка национального стандарта по классификации ЦОД. Национального стандарта, по русски ГОСТ Р.
Такой стандарт был разработан и утвержден, называется ГОСТ Р 70139-2022, и там как и было предписано было деление и по типу владельца, и по типу обрабатываемой информации.
И вот какой-то нерадивый чиновник Минцифры, вводит в заблуждение Росстандарт, заявляет, что "я не знаю что было до МИШ, а сейчас наша позиция такая", и национальный стандарт приостанавливается. А взамен пытаются сделать какую то левую манипуляцию, которая не отвечает на поставленные вопросы и не решает поставленные задачи.

А что так можно было? Чиновник не обязан выполнять распоряжение премьер-министра?

Ну чё, круто.
2
P.S. Ой, извините, речь конечно идёт о решении Правительства #1911-р от 28.08.2019 года.

Символично, что за тем же номером 1911-р, но от 18.07.2023 года было распоряжение об освобождении с должности товарища Паршина М.В.
😁6
ИТ-нагрузка для ЦОДов.

Продолжаю частями рассказывать про GDS.

Кампус, где мы были - CS (см. на карте выше) содержит 8 зданий, по два зеркальных модуля, каждый по 24 МВт общей мощности и 14,1 МВт ИТ.

Итого 16*24=384 МВт. В одном кампусе - половина всего рынка коммерческих ЦОД РФ.

Очевидно, что как и у нас, по Парето, 80% нагрузки дают 20% клиентов.
Крупные облачные операторы, агрегатов услуг, производители смартфонов с их встроенными сервисами, соцсети (ByteDance = TikTok).

По поводу смартфонов, если пропустили новость. Хуавей представил пару недель назад свою полностью независимую мобильную операционную систему. Не клон Андроида, а третью независимую в мире.

Если вы формируете данные и трафик, то никаких проблем с нагрузкой на ЦОДы у вас нет, вот такое правило...
👍4
В режиме рассказа по частям, расскажу, что удалось увидеть в кампусе CS.

Как я и говорил ранее, территория кампуса находится в каком то промышленном парке и вдоль него даже идёт высоковольтная ЛЭП (но местные говорят что электроснабжение не от нее, и даже с другой стороны приходит). Территория до АБК открытая, можно подойти свободно. Небольшой заборчик и шлагбаум. Вход на территорию зданий ЦОД через АБК.

Помимо АБК, как я писал ранее, 8 двойных зданий, есть какие то наружные объекты с чиллерами, дизелями, но не подходили и что это какое не совсем понятно.

Здания типовые, 5 этажей. Первый этаж технический, дальше 4 этажа с машинными залами, по 2 на этаж.

Местные китайцы давали противоречивые цифры по удельным показателям, которые в итоге пришлось гармонизировать. В стойках они не считают, на один модуль (напомню что в здании их два зеркально) 24 МВт общей мощности, 14,1 МВт ИТ.

Исходя из примерно посчитанного количества место под стойки в МЗ (228), выходит 1800+ стойкомест на модуль, 7,7 кВт на стойкоместо. Местные говорили про расчетные 8 кВт, совпадает. Штатно, по электричеству могут запитать до 13 кВт.

На картинке, площадка кампуса в начале строительства в 2019 году, то есть все это они перманентно отгрохали менее чем за 5 лет
👍5🔥2
Пример типового здания ЦОД у меня за спиной.

Прикольно, что вообще китайцы Uptime любят и смотрят на него, при принятии решений, при выборе локаций.
Поймал себя на мысли, что здесь ни разу никто не сказал и не упомянул.
👍9
"Напугал - полдела сделал"
(военно-морская мудрость)

Я надеюсь все впечатлились 384 МВт и половиной российского рынка коммЦОД. А теперь, по Воланду, начинаем разоблачения.
Не только наши любят приукрашивать.

Возьмём относительно свежий спутниковый снимок. Во-первых, модулей не 16, а 14. Во-вторых, в работе CS1-2-3-4, два здания по два модуля. Здание CS5-6, там где мы были ещё в стадии запуска. Остальные здания - пока пустые коробки. Но, перспективный объем все равно впечатляет.

Заодно стало понятно что за этажерки мы видели, в углу распределительный энергоцентр с этажеркой для своих чиллеров и ДГУ.

Да, и судя по фото, решения по очередям чуть-чуть корректируются.
👍6
Каша из топора. Холодоснабжение.

Представители GDS шифровались, и лишнего не рассказывали. Но это как у шпиёнов, фото винта АПЛ даёт все характеристики субмарины.

Для холодоснабжения на первом этаже стоят 4+1 чиллера Carrier AquaEdge 19XR (высокоэффективный, полугерметичный охладитель центробежного действия) мощность плюс/минус 3,5 МВт, обвязка, наружные баки с захоложенной водой, их можно видеть на фото. Также на фото на кровле видна ответная часть - нехилые по размерам двухвентиляторные градирни.
Хороший расход воды, конечно, присутствует. Но не в пустыне же, в 2-х км от ЦОДа "Длинная река" Янзцы.

Трубопроводы на этажах приходят на внутренние блоки Envicool (коллектора не показали). Энвикулы стоят в двух технических коридорах по краям машзалов. Схема воздушного обмена: безфальшпольная, с изолированным горячим коридором. Для этого из техкоридоров в машзал сделаны проемы для холодного воздуха, а горячий возвращается через запотолочный пленум. Решение понятное, в последнее время и у нас используемое.

Из неувязок. Энвикулы с исполнением выдува под фальшпол. Поэтому подняты на рамы. Логичнее смотрелись бы с радиаторами вперёд, ну или холодные стены.
👍6
Каша из топора. Электроснабжение.

Система более сложная и реализована интересно. И однолинейку, никто к сожалению не показал ((

Для начала, все электрические шкафы поставлены на металлопрокат (так и в МЗ собирается шкафной коридор), зачем не совсем понятно, фальшполов нет, может быть от затопления.

На первом этаже расположено РУ-10 кВ и тут же в одном общем помещении сегмент 0,4 кВ с двумя трансами 2500 для ближних механических сервисных нагрузок. У них нет в нормативке необходимости разделения высокой и низкой в нашей терминологии.
А вот дальше мы впали в лёгкий ступор, но решили задачку. Кабели с РУ-10 идут прямо на этажи, и там собирается выделенный энергоблок: трансы, щитовуха, ИБП. Как то они умеют вытаскивать трансы, сильно большого лифта мы не заметили, но в конце коридоров есть заделанные проемы фасада. Трансы наверно и под кровлей или на кровле стоят для градирен.

Дальше просто, от выделенного этажного энергоблока кабели на машзал, и в конце каждого двухрядья пара распредщитов по лучам. И вот здесь ещё один сюрприз - отводящие автоматы 1ф 63А. Почему так и как они будут бороться с перекосами и как раздавать внутри шкафов - загадка.

Энергоблоки подперты ДГУ, которые также располагаются на 1 этаже, 9 машинок MTU по 2,25 МВт. Расходные баки отдельно на стене напротив машинок, внешнее топливохранилище закопано на улице. С учётом того, что там рядом водные каналы, расстояния от здания небольшие, что-то мне говорит что нормы на топливохранилища там попроще чём у нас.

Производители: десятка - Сименс, распредка основная - R, ИБП - Хуавей, распредка у шкафов - АББ. В основном используются кабели, но есть и шинопроводы.

Update: R это местный завод в Чаншу, про него отдельно напишу

Как-то так. Повторюсь, из удивительного: трансы наверху и однофазная распредка 63А.
👍3
Каша из топора. Разное.

Машинный зал, как я и говорил ранее, это 12 парных рядов примерно на 24 шкафа., то есть потенциально 288 шкафов. Почему примерно и потенциально - шкафов до запуска физически нет, но из металлопрофиля сварена скелетная конструкция изолированного горячего коридора, включая металлические балки на полу, т.е. шкафы стоят на поднятых балках.

По стенам минимум, из активного - смонтирована аспирация.

Связность обеспечивается через два независимых ввода, в два разнесенных MMR, с мит-ми-рум сблокировано некое networks-помещение. Как и зачем физически разделяется и соединяется активная и пассивная часть не спрашивайте, как то и зачем то сделано.

В общем виде по ЦОДу, наверно, всё.
В очередной раз, уже который за год, активизировался фейковый аккаунт под мой и даже профиль скопирован, со ссылками на мои каналы. Мошенники растут и даже пошли по дальним связям.


Не поддавайтесь и не доверяйте.
Вот после достаточно продолжительного отпуска, о котором вы возможно догадались по отсутствию публикаций, постепенно возвращаюсь к делам нашим грешным.

Давно хотел попасть на экскурсию на новую площадку ЦОД DataHouse, до старта которой уже не так далеко, да и на фотках видна высокая степень готовности.

Располагается ЦОД на 1-й Магистральной, 12 и его яркий фасад неплохо виден с эстакады Звенигородского шоссе.

ЦОД DataHouse - это новый формат бизнес-взаимодействия старых цодовцев и нового ресурсного игрока-девелопера.

По факту запускается только первое стартовое здание (первая очередь) на 7,7 МВт ИТ, более 1100 стоек в 7 МЗ, но рядом стоит в ожидании большой ух.
Всего на комплекс подведена мощность 60 МВт с ТЭЦ-16 двумя физически разными маршрутами.

Про решения и вендоров говорить не буду, но интересно будет понаблюдать за будущими кейсами эксплуатации.
Инфраструктура ЦОД сертифицируется на Tier III.

Интересно, что в силу дефицита кадров, на стройке работники со всего мира, включая Африку и Кубу. Вот так теперь живём.
👍10
Казахстан для меня, это всегда повод выступить перед необычной аудиторией, будь то зампред правления нацбанка или топы рынка ЦОД РК. Да и рынок ЦОД РК для меня очень даже понятен, недавно целый год работал над значимым проектом там.

Давно с коллегами вынашиваем планы двинуть наш Евразийский диалог в Алматы. Думаю, что своеобразный и уже в чем то культовый linkmeetup - хороший шажочек в этом направлении. Представляется, что братья-казахи заслуживают системного представления по вопросам ЦОД, без рекламной шелухи и промывания мозгов.

Всех буду рад видеть в Алмате, если есть идеи - пишите.

https://linkmeetup.ru/
👍12