В Норвегии получил «зелёный свет» проект строительства местной компанией Green Mountain кампуса ЦОД для платформы TikTok. Как сообщает DataCenter Dynamics, такое решение уже вызывает вопросы норвежских политиков не только с точки зрения безопасности данных — ставится под вопрос целесообразность выделения электроэнергии социальной сети в условиях её нехватки для других приоритетных проектов, в том числе оборонного характера.

Новость о намерении Green Mountain построить три блока ЦОД общей мощностью 90 МВт для TikTok появилась в марте. Ожидается, что уже к ноябрю 2023 года строительство будет закончено в норвежской коммуне Хамар, а в дальнейшем ожидается увеличение ёмкости до 150 МВт. Тем не менее, перспективы дальнейшего расширения под вопросом, поскольку против этого выступают политики, а сейчас ещё и готовится ужесточение правил строительства и эксплуатации ЦОД в стране. Но Green Mountain преисполнена оптимизма и утверждает, что проверка властями безопасности проекта прошла успешно.

Источник изображения: Green Mountain

Green Mountain даже нашла преимущества в том, что новый кампус подпадает под действие местного Закона о безопасности (Security Act) — он будет подвергаться усиленному регулированию и контролю с точки зрения безопасности и будет классифицирован как один из элементов ключевой инфраструктуры страны. Правда, теперь ЦОД станет объектом пристального внимания в рамках реализации Закона о безопасности. Так, Green Mountain будет получать советы в сфере обеспечения безопасности, доступ к засекреченной информации об угрозах и уязвимостях, а также профильную экспертную поддержку.

Впрочем, политики раскритиковали строительство ЦОД для TikTok из-за уже существующих в стране проблем с энергетикой, поскольку требуется развитие реального производства параллельно со снижением выбросов — вместо этого ресурсы тратятся на «видео с котами». Более того, в Норвегии заявляют, что местный производитель боеприпасов ещё в марте заявил, что не смог расширить производство из-за строительства ЦОД TikTok, «оттянувших» на себя всю доступную энергию.

В самой TikTok принимают отчаянные меры для того, чтобы сохранить присутствие в США и Европе. Так, все данные европейских пользователей уже в этом году начнут хранить в двух дата-центрах в Дублине, а в Соединённых Штатах на базе мощностей американской Oracle реализуется инициатива Project Texas — здесь намерены хранить данные американцев.

Японский многопрофильный концерн Mitsubishi Heavy Industries (MHI) приобрёл американскую Concentric, занимающуюся разработкой и производством промышленного энергетического оборудования. По данным DataCenter Dynamics, соглашение о продаже всех принадлежащих ей активов и интересов было подписано с OnPoint Group, владеющей Concentric.

Техасская Concentric с 2000 года предлагает системы энергоснабжения для критически важных объектов, в частности, передлагая системы бсеперебойного питания для ЦОД. До сделки Concentric сама активно покупала компании и технологии, постепенно захватывая рынок. В OnPoint Group заявляют, что продажа компании позволит сосредоточиться на ключевом бизнесе — обслуживании объектов критической инфраструктуры.

Источник изображения: Concentric

В MHI выразили удовлетворение покупкой — объединение технологических возможностей Mitsubishi с разветвлённой клиентской сетью Concentric на территории Северной Америки не только благоприятно скажется на местной энергетической инфраструктуре различных объектов, от заводов до ЦОД, но и откроет пути для глобальной экспансии.

В самой Concentric подчеркнули, что два десятка лет занимаются созданием сервисов для бесперебойного питания в критически важных сферах по всей Северной Америке, а влившись в MHI, компания расширила возможности обслуживания лидеров инфраструктурных проектов.

Компания Microsoft выходит на новый уровень обеспечения своих ЦОД «зелёной» электроэнергией. Как сообщает DataCenter Dynamics, дата-центр IT-гиганта в Бойдтоне (Вирджиния, США), будет получать до 100 % безуглеродной энергии в круглосуточном режиме — это нехарактерное условие современных соглашений о покупке энергии (PPA). Кампус в Бойдтоне обошёлся примерно в $500 млн и неоднократно расширялся. Этот проект иногда называют крупнейшей инвестицией в Южной Вирджинии.

Известно, что современная «безуглеродная» энергия далеко не всегда по-настоящему является таковой. Многие компании, приобретающие PPA, на деле питают свои ЦОД из самых разных источников. Фактически оговаривается только объём вырабатываемой безуглеродной энергии, но не место или время и иногда даже год её выработки. Так, Microsoft уже приобрела немало сертификатов PPA, чтобы компенсировать использование энергию, получаемую в том числе за счёт ископаемого топлива.

Источник изображения: Lee Lawson/unsplash.com

Теперь АЭС Constellation будут включены в «энергопакет» дата-центра в Бойдтоне, куда уже входят поставки энергии от ветрогенераторов и солнечных электростанций. АЭС позволит круглосуточно поставлять безуглеродную энергию в том объёме, который нужен. Нюанс в том, что у Constellation нет ни одной АЭС поблизости от ЦОД, так что фактически он будет получить энергию из локальных источников, а АЭС будет отдавать такой же объём своим клиентам. Для взаимозачёта используется специальная платформа, размещённая в облаке Microsoft Azure.

Впрочем, в США уже есть проекты ЦОД с питанием непосредственно от АЭС, а в России такой дата-центр работает уже несколько лет. Есть и планы по использованию малых ядерных реакторов, которые позволят размещать дата-центры где угодно, а не только в непосредственной близости от атомных электростанций.

Немецкая компания Intilion получила крупнейший в своей истории заказ от Power & Air Condition Solution Management GmbH (PASM), «дочки» немецкой телекоммуникационной компании Deutsche Telekom, на поставку систем хранения энергии (ESS) общей мощностью около 60 МВт·ч. Заказ должен быть выполнен до конца года, сообщил ресурс Datacenter Dynamics. В планах оператора — постройка энергохранилищ общей ёмкостью 300 МВт·ч.

По словам главы Intilion AG, компания не только получила самый крупный заказ на ESS от известного заказчика, но и успешно вышла на важный для неё рынок систем хранения энергии для телекоммуникационной отрасли и дата-центров. Intilion поставляет масштабируемые и интегрированные решения для хранения энергии, ориентированные на использование в системных и критически важных инфраструктурах, таких как коммерческие, промышленные и сетевые объекты. Ёмкость хранилищ Intilion Scalecube на основе Li-Ion аккумуляторов составляет от 70 кВт·ч до 100 МВт·ч.

Источник изображения: Intilion

В рамках контракта Intilion построит три крупномасштабных энергохранилища Scalecube для ЦОД Deutsche Telekom. Две из них ёмкостью около 26 МВт·ч будут установлены в Ганновере и Бамберге, а ещё одна (6 МВт·ч) — в Мюнстере. Компания планирует начать пробную эксплуатацию систем в III квартале 2023 года с переходом к работе в обычном режиме к концу года. Кроме того, PASM договорилась о сотрудничестве с норвежским поставщиком модульных решений для хранения энергии Pixii PowerShaper.

Рынок ЦОД Северной Вирджинии продолжают преследовать неприятности. Помимо того, что местные жители активно выступают против старых и новых дата-центров, в местной округе наметилась масштабная нехватка электроэнергии. Как сообщает The Register, в регионе буквально не хватает линий электропередач для снабжения всех ЦОД энергией.

По данным Digital Realty, владеющей и обслуживающей более 290 ЦОД, местная энергоснабжающая компания Dominion Energy разослала оповещение ключевым местным потребителям, сообщив, что проблемы с электроснабжением в регионе закончатся не раньше 2026 года. При этом проблема заключается не в нехватке генерирующих мощностей, а именно в дефиците линий электропередач для достаточного энергообеспечения ЦОД. Текущая ёмкость дата-центров в штате составляет порядка 1,7 ГВт.

Источник изображения: Matthew Henry/unsplash.com

Округ Лаудон (Loudoun County) фактически является крупнейшим в мире хабом для дата-центров с общей полезной площадью ЦОД в миллионы квадратных метров. Округ нередко называют «ключевым игроком» в мировой цифровой экономике. Одни только налоги на недвижимость от сектора ЦОД должны составить в фискальном 2023 году почти $600 млн — этого достаточно, чтобы покрыть все расходы властей округа.

Проблемы с энергоснабжением могут означать, что многие планируемые проекты переедут в соседние округа Принс-Уильям (Prince William) и Фокир (Fauquier), а то и вовсе в соседний штат Мэриленд. Dominion Energy как минимум частично обслуживает и Принс-Улильям, а вот округ Фредерик в Мэриленде подключен к другой энергосети.

Источник изображения: Álvaro Serrano/unsplash.com

Известно, что беспрецедентный рост нагрузки на сеть Dominion начался в 2018 году на фоне стремительного развития дата-центров и всё ещё не остановился, поэтому в существующие планы развития энергосетей придётся вносить корректировки. На днях Dominion Energy признала, что не сможет обслуживать потребности города Эшберна (Ashburn) в округе Лаудон, где расположена т.н. «Аллея дата-центров». Это будет означать не только остановку уже стартовавших многомиллиардных проектов строительства ЦОД, но и снижение налоговых поступлений.

Как сообщает портал DataCenter Dynamics, по прогнозам Wells Fargo, компания может остановить поставки энергии новым ЦОД до 2025 или 2026 года — если проектам, до завершения строительства которых осталось не более полугода, энергии может хватить, то совсем новые объекты, возможно, электричества не получат, несмотря на ранее полученные от Dominion гарантии. А строительство ЦОД, запланированных на 2023-2024 годы, может быть значительно отложено. Впрочем, в Wells Fargo считают, что с нехваткой электричества могут в скором времени столкнуться и уже существующие в регионе кампусы ЦОД.

Дизель-генератор — неотъемлемая часть подсистемы резервного питания любого серьёзного ЦОД, но по природе своей он не может похвастаться нейтральностью выхлопа. Многие ищут традиционным генераторам замену, и в их числе Microsoft. На днях компания сообщила, что ей удалось достичь важной вехи в освоении водородных топливных элементов, которые, по замыслу Microsoft, и должны заменить традиционные дизель-генераторы в принадлежащих ей центрах обработки данных.

Компания начала тестирование новой генераторной станции мощностью 3 МВт, построенной на базе топливных ячеек с протонообменной мембраной (PEM). Она способна обеспечивать питание 10 тыс. серверов. С топливными элементами компания экспериментирует давно, ещё с 2013 года, но более ранние разработки использовали природный газ и не по факту не являлись такими уж экологичными.

Тестовая станция мощностью 3 мВт. Источник: Microsoft/John Brecher

Разработать водородные PEM-ячейки компании удалось в сотрудничестве с Plug Power. В течение нескольких недель июня компании совместно протестировали прототип генератора нового поколения. Новая система, выбрасывающая в атмосферу лишь нагретый водяной пар, сработала успешно, так что Plug Power уже работает над созданием коммерческой версии системы.

Протонообменная мембрана: конструкция и принцип действия. Источник: Encyclopedia Britannica

Первый же экземпляр будет установлен научно-исследовательском центре Microsoft, но пока конкретных сроков пока озвучено не было. У IT-гиганта большие надежды на подобные технологии: к 2030 году компания планирует обновить системы резервного питания во всех своих ЦОД.

В работе система выделяет только горячий водяной пар. Источник: Microsoft/John Brecher

Правда, в полной экологичности водородных топливных элементов есть сомнения: работают они без вредных выбросов, но само их производство может оказаться далеко не таким чистым, как эксплуатация. Тем не менее, администрация США одобрила план стоимостью $8 млрд по развитию производства водорода в рамках программы альтернатив ископаемому топливу. В Европе есть аналогичные инициативы — как совсем скромные (€2,5 млн), так и весьма крупные (€1 млрд).

Исследование, проведённое аналитической компаний Omdia, показало, что в следующие четыре года операторы ЦОД начнут использовать на своих площадках источники бесперебойного питания (ИБП), способные не только поддерживать энергообеспечение дата-центров, но и в случае необходимости отдавать избытки электроэнергии в общую сеть.

Интеграция разнообразных источников возобновляемой энергии в «динамические» энергосети постепенно становится трендом, а в некоторых регионах в ближайшей перспективе и техническим требованием к сетям электроснабжения. ЦОД находятся в уникальном положении — будучи крупными потребителями энергии, они способны повысить надёжность электросетей, позволяя последним получить доступ к запасённой ИБП энергии.

«Умные» энергосети способны динамически отслеживать потребность в энергии и быстро подключать резервные хранилища, что помогает компенсировать непредсказуемость поставок энергии от возобновляемых источников, обеспечить баланс и сократить инвестиции в электрическую инфраструктуру. Eaton, Schneider Electric и Vertiv уже предлагают клиентам «умные» ИБП, способные интегрироваться в такие энергосети.

Источник изображения: Omdia

Omdia опросила почти 380 представителей операторов дата-центров, технических специалистов, консалтинговых компаний и поставщиков энергии в Северной Америке, Европе и Австралии. Результат опроса показал, что главным стимулом для внедрения совместимых с «умными» энергосетями ИБП стала возможность реализовать инициативы по энергосбережению. Другими стимулами стали стремление к инновациям, репутационные выгоды, а также получение конкурентных преимуществ.

Примечательно, что большинство опрошенных уверены, что использование интеграция ЦОД с «умными» энергосетями не поставит под угрозу выполнение критически важных рабочих нагрузок. Почти половина респондентов ответила, что главными, хотя и далеко не единственными, выгодоприобретателями подобных решений станут облачные. В числе регионов, где наиболее развито внедрение «умных» ИБП названы Скандинавия, Великобритания и Ирландия.

Около 80 % опрошенных считают, что от 10 до 50 % ёмкости аккумуляторов в современных ИБП дата-центров уже сегодня может использоваться для поддержки работы публичных энергосетей без угрозы собственным системам ЦОД. Такой подход поможет эффективно интегрировать в энергосети возобновляемые источники энергии вроде солнечных и ветряных электростанций с нерегулярной генерацией — в периоды избыточной поставки энергии её можно запасать в ИБП, а потом отдавать в час пик.

Государственный ирландский оператор электрической инфраструктуры EirGrid заявил, что больше не будет принимать заявки на энергоснабжение новых ЦОД на территории Дублина и его пригородов. Компания сообщила, что не будет подключать дата-центры «в обозримом будущем», возможно — до 2028 года. Оператор не только ограничит приём заявок в столичном регионе, но и будет рассматривать возможности подключения в других частях страны на индивидуальной основе.

При этом указано, что уже поданные в столице заявки будут выполняться по мере возможности. Новые заявки будут рассматриваться в соответствии с критериями, выработанными Комиссией по регулированию коммунальных услуг (CRU) и с учётом доступных энергетических мощностей. Кроме того, CRU может ввести ограничения на размещение ЦОД в отдельных районах, а также принять ряд мер по предотвращению отключений во время пиковых нагрузок.

Источник: rolandmey/pixabay.com

В последние месяцы ЦОД привлекли пристальное внимание политиков и защитников окружающей среды в Ирландии — предстоит оценить, насколько их энергопотребление соответствует заявленным страной целям защиты экологии. В минувшие несколько месяцев EirGrid уже выпустила несколько предупреждений в связи с проблемами с энергообеспечением.

Источник: tstokes/pixabay.com

Активисты и политики призывают ввести мораторий на строительство новых ЦОД, поскольку по данным EirGrid уже существующие потребляют более 10 % всей электроэнергии, используемой в стране, а к 2030 году этот показатель может вырасти до 30 % и потенциально станет причиной систематических блэкаутов. Кроме того, страна не сможет выполнить цели по декарбонизации — ранее предполагалось, что к 2030 году 80 % электроэнергии страны должно поступать из возобновляемых источников.

Формально мораторий объявлен не был, но де-факто для Дублина и окрестностей он уже введён, согласно комментарию CRU для DataCenter Dynamics. При этом ряд государственных ведомств в обращении к EirGrid акцентировал внимание на том, что дата-центры приносят в страну инвестиции, новые возможности для экспорта и другие преимущества, а Агентство по промышленному развитию и вовсе заявило, что ЦОД просто делают «козлами отпущения» за уже существующий в Ирландии энергетический кризис.

Microsoft объединила усилия с Caterpillar и Ballard Power Systems для тестирования резервных генераторов на водородных топливных элементах в своём дата-центре в Куинси (штат Вашингтон). Проект рассчитан на три года и нацелен на изучение возможности использования водородных топливных элементов в масштабе ЦОД. Проект частично финансируется Министерством энергетики США (DOE) в рамках инициативы H2@Scale.

Caterpillar станет генеральным подрядчиком, обеспечивающим общую интеграцию всех систем, работу силовой электроники и средств управления. Ballard предоставит водородный электрогенератор на топливных элементах ClearGen-II мощностью 1,5 МВт, а Национальная лаборатория возобновляемых источников энергии (NREL) выполнит анализ его безопасности, экологичности и технико-экономических аспектов эксплуатации.

Источник изображения: Microsoft

Для успешной реализации проекта необходимо решить ряд проблем. Чтобы топливные элементы обеспечивали мощность 3 МВт в течение 48 часов, требуется около 68 м³ жидкого водорода, для хранения которого требуется намного больше места, чем для дизельного топлива. Для избегания утечек требуются специальные трубопроводы, а сам водород надо хранить при температуре ниже -253 °C. Ранее Microsoft успешно испытала водородные топливные ячейки мощностью 250 кВт от Power Innovations.

К моменту ввода в эксплуатацию в 2023 году суперкомпьютер El Capitan на базе AMD EPYC Zen4 и Radeon Instinct, как ожидается, будет иметь самую высокую в мире производительность — более 2 Эфлопс. А это означает, что ему потребуются гигантские мощности для питания и охлаждения. Ливерморская национальная лаборатория (LLNL), в которой и будет работать El Capitan, поделилась подробностями о масштабном проекте, призванном обеспечить HPC-центр необходимой инфраструктурой.

В основе плана модернизации лежит проект Exascale Computing Facility Modernization (ECFM) стоимостью около $100 млн. В его рамках будет обновлена уже существующая в LLNL инфраструктура. Для реализации проекта необходимо получить очень много разрешений от местных регуляторов и очень тесно взаимодействовать с местными поставщиками электроэнергии. Тем не менее, LLNL заявляет, что проект «почти готов», по некоторым оценкам — на 93%. Функционировать новая инфраструктура должна с мая 2022 года (с опережением графика).

Сам проект стартовал ещё в 2019 году и, согласно планам, должен быть полностью завершён в июле 2022 года. В его рамках модернизируют территорию центра, введённого в эксплуатацию в 2004 году, общей площадью около 1,4 га. Если раньше центр, в котором работали системы вроде лучшего для 2012 года суперкомпьютера Sequoia (ныне выведенного из эксплуатации), обеспечивал подачу до 45 МВт, то теперь инфраструктура рассчитана уже на 85 МВт.

Конечно, даже для El Capitan такие мощности будут избыточны — ожидается, что суперкомпьютер будет потреблять порядка 30-35 МВт. Однако LLNL заранее думает о «жизнеобеспечении» преемника El Capitan. Следующий суперкомпьютер планируется ввести в эксплуатацию до того, как его предшественник будет отключён в 2029 году. Кроме того, для новой системы потребуется установка нескольких 3000-тонных охладителей. Если раньше общая ёмкость системы охлаждения составляла 10 000 т воды, то теперь она вырастет до 28 000 т.