Компания Nebius, образовавшаяся из Yandex N.V., занимающаяся разработкой ИИ-решений, объявила об увеличении мощности дата-центра в финской общине Мянтсяля (Mäntsälä). По данным Datacenter Dynamics, ёмкость ЦОД вырастет втрое.

Nebius увеличит ёмкость дата-центра с 25 до 75 МВт, на объекте разместятся более 60 тыс. ускорителей. Ещё в июле компания сообщала об увеличении площади ЦОД — две секции уже построены, позже будут возведены ещё две, как и планировалось ранее.

К середине 2025 года компания намерена инвестировать более $1 млрд в ИИ-инфраструктуру Европы, в том числе «кастомных» ЦОД по индивидуальным заказам, и запустит первый ИИ-кластер во Франции на базе ускорителей NVIDIA H200. Кроме того, на прошлой неделе компания намекнула на строительство ЦОД в США, а в Европе Nebius уже подписала два соглашения о намерениях строительства двух новых ЦОД.

Источник изображения: Miikka Luotio/unsplash.com

Объект в Финляндии будет использовать ускорители NVIDIA H200, доступ к которым клиенты NVIDIA должны получить с ноября 2024 года. В этом случае Nebius станет одним из первых операторов в Европе, представивших решения на базе этой платформы на рынке.

ЦОД в Финляндии использует фрикулинг и отдаёт тепло для отопления местных жилых помещений. Сегодня речь идёт о ежегодной «рекуперации» около 20 ГВт∙ч. После расширения возможности компании только увеличатся. Конструкция ЦОД позволяет работать при температурах до +40 °C, благодаря этому экономится ещё 15 % энергии. По словам представителя Nebius Андрея Короленко, утроение мощности стало важным этапом на пути построения лучшей в своём классе инфраструктуры ИИ в Европе, демонстрирующим возможности Nebius.

Базирующая в Амстердаме Nebius, оставшаяся в Европе после раскола «Яндекса», сохранила финский ЦОД компании и подразделение Nebius AI, а также подразделение Toloka AI для обработки данных, поставщика образовательных технологий TripleTen и компанию Avdrive, занимающуюся системами автономного вождения. ЦОД в Мянтсяля был одним из пяти дата-центров «Яндекса» и сегодня является крупнейшим налогоплательщиком местного муниципалитета.

Нидерландская Yandex N. V. (бренд Nebius), бывшая материнская компания «Яндекса», планирует расширить дата-центр в Мянтсяля (Финляндия) в два раза, пишет ТАСС со ссылкой на финское агентство STT.

«Мы можем сообщить вам, что изначально этот участок планировался как четырёхсекционный, два из которых уже построены. Сейчас мы завершаем работу над планами и увеличим его до четырёх секций, чтобы разместить больше GPU для нашего облака на основе искусственного интеллекта», — сообщили агентству STT в Nebius, не назвав сумму инвестиций в расширение объекта.

Источник изображения: «Яндекс»

Построенный в 2014 году дата-центр в Мянтсяля в регионе Уусимаа был одним из пяти ЦОД «Яндекса». Выделяемое его оборудованием тепло используется для обогрева домов. Здесь применяется технология естественного охлаждения, когда серверы остужают воздухом с улицы. Как сообщает ТАСС, дата-центр является крупнейшим налогоплательщиком муниципалитета Мянтсяля.

В декабре 2019 года стало известно о договоре «Яндекса» со строительной компанией Lehto Tilat Oy на строительство дополнительного корпуса дата-центра площадью 10 тыс. м². В июле 2024 года российский «Яндекс» объявил о завершении реструктуризации и закрытии сделки с нидерландской компанией Yandex N.V. по продаже ряда активов, включая дата-центр в Финляндии.

AMD сообщила о приобретении за $665 млн крупнейшей в Европе частной ИИ-лаборатории — Silo AI. Silo AI включает более 300 «специалистов мирового уровня» с опытом создания специализированных ИИ-моделей, платформ и решений для ведущих корпоративных клиентов, применяющих их в облачных, встраиваемых и клиентских IT-проектах. Сооснователь Silo AI и её глава Питер Сарлин (Peter Sarlin) сохранит руководящую должность в команде, которая войдёт в AMD Artificial Intelligence Group. Завершение сделки планируется на II половину 2024 года.

Как отмечает AMD, предприятия каждой отрасли ищут эффективные способы разработки и внедрения ИИ-решений, а команда Silo AI уже имеет экспертов и опыт в разработке передовых ИИ-моделей и решений, включая создание больших языковых моделей (LLM) на платформах AMD. Теперь команда поможет ускорить реализацию ИИ-стратегии AMD, создание и внедрение ИИ-решений по заказу клиентов со всего мира.

Источник изображения: Silo AI

Базирующаяся в Финляндии компания действует как в Европе, так и в Северной Америке, специализируясь на комплексных решениях, которые позволяют клиентом быстро внедрять ИИ в свои продукты, сервисы и рабочие процессы. В числе клиентов — Allianz, Philips, Rolls-Royce и Unilever. Также Silo AI создаёт мультиязычные LLM, например, Poro и Viking, и предлагает платформу кастомизации LLM SiloGen. В Silo рассматривают продажу компании как очередной этап развития, который позволит масштабировать бизнес.

Это последнее из серии поглощений и инвестиций AMD в области ИИ. За последние 12 месяцев компания уже инвестировала $125 млн в дюжину ИИ-компаний и приобрела стартапы Mipsology и Nod.ai для расширения своей ИИ-экосистемы. По имеющимся данным, Silo AI стала пионером в масштабировании процесса обучения LLM на суперкомпьютере LUMI — самом быстром в Европе и включающем 12 тыс. ускорителей AMD Instinct MI250X. Совместно с учёными из разных университетов специалисты Silo создали передовые модели для разных языков Евросоюза.

По данным Bloomberg, Google намерена потратить на расширение основного дата-центра в Финляндии €1 млрд ($1,1 млрд) — преимуществом ЦОД является его лёгкий доступ к «зелёной» энергии. Расширение позволит на четверть увеличить штат, наняв ещё 500 человек в этом и следующем годах.

ЦОД расположен в городе Хамина на южном побережье Финляндии. В регионе хорошо налажены поставки возобновляемой энергии, что вполне соответствует цели компании по полному переходу офисов и дата-центров на «зелёную» энергетику до конца текущего десятилетия.

IT-гигант развивает и сотрудничество с местной коммунальной компанией — тепло от работы ЦОД будет передаваться в местную систему отопления. Технология районного центрального отопления весьма популярна в этой части севера Европы. Если проект успешно реализуют, это будет способствовать и будущим инвестициям. По словам представителя Google, со временем новые площадки, возможно, будут строиться в местах, где легче использовать «мусорное» тепло дата-центров. В ходе пилотного проекта тепло коммунальной компании Haminan Energia Oy будет поставляться бесплатно.

Источник изображения: rivage/unsplash.com

Google — не первая технологическая компания, предлагающая тепло своих ЦОД местным поставщикам тепла в северных широтах. Например, Microsoft намерена обогреть теплом ЦОД в Дании до 6 тыс. домов. С той же целью тепло нескольких ЦОД применяется и в Стокгольме. При этом финский дата-центр Yandex почти восемь лет назад начал отапливать дома жителей Мянтсяля.

Действующий на севере Европы оператор ЦОД atNorth анонсировал создание в Финляндии дата-центра гиперскейл-уровня ёмкостью от 60 МВт. Как сообщает Datacenter Dynamics, дата-центр будет передавать «мусорное» тепло в коммунальную систему отопления.

Площадка FIN04 в финском городе Коувола, расположенная в 140 км к северо-востоку от Хельсинки, на начальном этапе будет иметь мощность 60 МВт. Как утверждают в atNorth, к моменту полного завершения строительства мощность увеличится на сотни мегаватт. Кампус рассчитан на колокейшн-клиентов, а также проекты, построенные под конкретных заказчиков-гиперскейлеров. Это уже десятый ЦОД atNorth, отделившейся от Advania в 2017 году. Теперь она приобретает и строит дата-центры при поддержке швейцарских инвесторов из Partners Group, купивших её в 2021 году.

Источник изображения: Joonas T/unsplash.com

Коувола считается ключевой площадкой для следующего проекта компании, намеренной расширяться на фоне растущего спроса на ЦОД такого класса. Сообщается, что уже ведутся переговоры с некоторыми ИИ-компаниями, гиперскейлерами и международными организациями, которым необходимы вычислительные мощности гиперскейл-уровня и которые предпочтут «релокацию» на север, чтобы способствовать декарбонизации своей работы.

Местные власти похвалили инициативу atNortn за вклад в местную циркулярную экономику, подчеркнув, что город приветствует инвестиции со стороны компаний, ответственно проводящих цифровизацию. Системой отопления города управляет компания KSS Energia, которая рада сотрудничеству с atNorth для использования в своей инфраструктуре выделяемого ЦОД тепла. Ожидается, что это послужит примером и для других компаний, намеренных добиться экоустойчивости.

Компания активно осваивает рынок Скандинавии. Не так давно atNorth приобрела два финских ЦОД FIN01 и FIN03 у своего бывшего владельца Advania в Валлиле и Эспооо. Также она анонсировала строительство в Эспоо третьего объекта на 15 МВт. Строится и ЦОД ёмкостью 30 МВт в Дании, открытие которого намечено на конец 2024 года. В июле было подписано соглашение о покупке экобезопасной энергии для строящегося «зелёного» ЦОД в Исландии, а в августе куплен шведский HPC-провайдер Gompute, владеющий мощностями на 10 МВт.

Исландский оператор дата-центров Verne Global объявил о развёртывании СЖО в подземном кампусе ЦОД The Rock, который находится в Финляндии. Внедрение системы поможет повысить эффективность при решении сложных и ресурсоёмких задач, связанных с ИИ и машинным обучением.

Verne Global отмечает, что рост популярности ИИ и НРС усиливает потребность в надёжных решениях для охлаждения дата-центров. Среднестатистический ЦОД расходует на отвод тепла от своей инфраструктуры до 40 % от общего энергопотребления. Поэтому внедрение передовых решений в области охлаждения позволяет снизить общую стоимость владения.

Verne Global также подчёркивает, что по мере роста популярности моделей ИИ увеличиваются требования к плотности размещения оборудования в ЦОД. Это создаёт дополнительную нагрузку на традиционные средства воздушного охлаждения. В результате, жидкостное охлаждение становится всё более востребованным среди операторов дата-центров.

Источник изображения: Verne Global

Сообщается, что проект по оснащению площадки The Rock жидкостным охлаждением реализован Verne Global в сотрудничестве с Dell и Intel. В частности, задействованы системы Dell DLC3000 с процессорами Intel Xeon Sapphire Rapids, обеспечивающие мощность до 80 кВт на стойку. Это первый случай использования данного решения Dell в Финляндии.

Площадка Rock, созданная финским провайдером Ficolo на базе бывших военных туннелей в скале в Пори, расположена примерно в 200 км от Хельсинки. Инвестиционный фонд Digital 9 Infrastructure (D9) из Великобритании приобрёл компанию Ficolo в 2022 году, а затем объединил её ЦОД с другими активами Verne Global. Недавно D9 объявил о продаже своей доли в Verne Global частной инвестиционной компании Ardian из Франции. Сумма сделки не раскрывается.

На основе долгосрочного соглашения «ХОСТКЕЙ» разместил оборудование в дата-центре Digita, который располагается рядом с интернет-хабом в Radiokatu. Это обеспечивает прямое подключение к ведущим операторам связи и поставщикам сетевых услуг.

Дата-центр Digita соответствуют самым строгим критериям безопасности и надежности Tier III. Все арендованные «ХОСТКЕЙ» стойки подключены к двум независимым защищенным вводам по 16 А на стойку. Система охлаждения ЦОД интегрирована с системой центрального отопления Хельсинки, и вырабатываемое тепло используется для обогрева помещений. Контроль температурного режима в машинных залах осуществляется непрерывно. Гарантированное энергоснабжение достигается за счет использования связки ИБП + дизельные генераторы + топливохранилище.

Изображение: «ХОСТКЕЙ»

Дата-центр Digita расположен рядом с крупнейшим в Финляндии центром передачи данных и обеспечивает отличную связанность со всем миром. ЦОД находится недалеко от точки обмена трафиком FICIX Internet Exchange Point (IXP), к которой подключены все основные местные и международные операторы связи.

Андрей Шевченко, генеральный директор «ХОСТКЕЙ»: «Мы рады предложить новые возможности нашим клиентам для развития их бизнеса в Европе. В новом дата-центре в Хельсинки установлено оборудование «ХОСТКЕЙ», которое предоставляет весь спектр наших услуг — от простой аренды серверов до реализации частных кластеров и облачных решений. Мы глубоко признательны нашим клиентам и партнерам за участие в опросе и выбор новой площадки в Финляндии. Мы ценим каждый голос и всегда учитываем мнение наших клиентов, так как открытый диалог является важным фактором продуктивного сотрудничества».

На этапе запуска в новом дата-центре «ХОСТКЕЙ» предлагает:

• широкий ассортимент выделенных серверов с быстрой сдачей: от начального уровня до высокопроизводительных решений на базе новейших процессоров Intel Xeon, AMD Ryzen и AMD EPYC;
• высокопроизводительные VPS-серверы и хранилища данных.

Услуги можно оплатить с помощью российских банковских карт, в том числе карт системы МИР, а также посредством других платежных систем, доступных на территории РФ.

«ХОСТКЕЙ» планирует развивать площадку в Финляндии и расширять свое присутствие не только в Европе, но и в других регионах.

Хотя генеративный ИИ активно осваивается миром, и новости о нём поступают со всех концов света, почти ничего не рассказывается об аппаратных мощностях, стоящих за обучением больших языковых моделей (LLM). Как сообщает HPC Wire, ситуацию попытался изменить IT-центр CSC, рассказав о роли европейского суперкомпьютера LUMI в создании LLM для финского языка. Без LUMI обучение модели удалось бы завершить только в 2025 году.

Суперкомпьютер LUMI является самым быстрым в Европе и занимает третье место в рейтинге TOP500. LUMI помог в обучении модели TurkuNLP, создававшейся под патронажем учёных из Университета Турку, сумевших сформировать «крупнейшую языковую модель для финского языка за всю историю». Новая ИИ-модель на базе GPT-3 включает 13 млрд параметров — известно, что до TurkuNLP в рамках пилотного проекта создавались и более скромные варианты. Финскому научили и многоязыковую модель BLOOM со 176 млрд параметров.

Дата-центр LUMI (Фото: Fade Creative)

Делить машинное время пришлось со многими другими проектами, по некоторым данным, исследователи временами регистрировали производительность на уровне 75–80 % от расчётной, хотя даже такие показатели признаны неплохими. Поскольку LUMI использует ускорители AMD Instinct MI250X, на их оптимизацию кода под новое «железо» ушло немало времени. Впрочем, группа учёных получила поддержку от команды LUMI User Support Team, AMD и Hugging Face.

Источник изображения: LUMI

Ещё одной нетривиальной задачей стал поиск материалов на финском языке для тренировки модели. Финны — довольно немногочисленный народ, поэтому исходного «сырья» для обучения в мире оцифровано относительно немного. Тексты в электронном виде добывались из всех возможных источников, при этом перед учёными стояла задача отфильтровать контент с ругательствами или материалами, разжигающими ненависть.

По данным учёных, им удалось вдвое сократить число спонтанной ругани в сравнении с предыдущими моделями благодаря качественным материалам, использовавшимся для обучения. Перед обучением также пришлось вычистить все персональные данные. Модель опубликована в Сети, но команда уже получила грант на 2 млн GPU-часов в рамках проекта LUMI Extreme Scale, поэтому исследования продолжатся.

Финский оператор мобильной связи и телекоммуникационных сервисов Elisa получит от государства €3,9 млн на создание распределённого энергохранилища (Distributed Energy Storage, DES) в своей сети. Как сообщает DataCenter Dynamics, в случае необходимости энергия будет передаваться и местным электросетям. Выделенный финскими властями грант позволит создать крупнейшую в Европе «виртуальную электростанцию», позволяющую рационально расходовать энергию и управлять энергохранилищами. По данным оператора, это крупнейший проект такого рода в Европе.

Финансирование осуществляется в рамках финской программы продвижения проектов, связанных с «зелёной» энергетикой — Recovery and Resilience Plan. Elisa уже протестировала новое решение на 200 базовых станциях. По данным компании, использование DES поможет снизить расходы на электричество. Система уже получила предварительное одобрение финского оператора электросетей Fingrid. Грант позволит создать виртуальное энергохранилище ёмкостью до 150 МВт·ч, что является крупнейшим европейским проектом в области систем хранения энергии, даже в сравнении с проектами централизованных хранилищ.

Фото: Jonathan Borba / Pexels

DES использует ИИ и машинное обучение, позволяющие оптимизировать использование электроэнергии базовыми станциями и эффективно управлять циклами заряда/разрядки аккумуляторов таким образом, что это позволит превратить резервные источники питания сети базовых станций в «виртуальную электростанцию», способную делиться энергией с операторами местных сетей электропередач в случае непредвиденного повышения нагрузки.

Новое решение обеспечит в некоторых случаях альтернативу ископаемому топливу и поможет электросетям, нуждающимся в дополнительных источниках возобновляемой энергии. Считается, что система не только повысит устойчивость сетей связи, но и поможет сэкономить на электричестве, а также будет способствовать достижению нулевых выбросов парниковых газов, поощряя наполнение энергохранилищ из возобновляемых источников.

HPE и EuroHPC официально ввели в эксплуатацию вычислительную систему LUMI, установленную в ЦОД центре IT Center for Science (CSC) в Каяани (Финляндия), которая на данный момент считается самым мощным суперкомпьютером в Европе. LUMI — это первая система предэкзафлопсного класса, созданная в рамках совместного европейского проекта EuroHPC.

LUMI будет в основном использоваться для решения важных для общества задач, включая исследования в области изменения климата, медицины, наук о жизни и т.д. Система будет применяться для приложений, связанных с высокопроизводительными вычислениями (HPC), искусственным интеллектом и аналитикой данных, а также в областях их пересечения. Для отдельных пользователей суперкомпьютер будет доступен в рамках второй пилотной фазы в августе, а полностью укомплектованная система станет общедоступной в конце сентября.

Суперкомпьютер LUMI (Фото: Pekka Agarth)

Суперкомпьютер стоимостью €202 млн принадлежит EuroHPC (JU). Половина из этой суммы была предоставлена Евросоюзом, четверть — Финляндией, а остальная часть средств поступила от остальных членов консорциума, включающего 10 стран. По состоянию на 30 мая LUMI занимал третье место в списке TOP500 самых быстрых суперкомпьютеров мира. Сейчас его производительность составляет 151,9 Пфлопс при энергопотреблении 2,9 МВт.

LUMI (снег в переводе с финского) базируется на системе HPE Cray EX. Система состоит из двух комплексов. Блок с ускорителями включает 2560 узлов, каждый из которых состоит из одного 64-ядерного кастомного процессора AMD EPYC Trento и четырёх AMD Instinct MI250X. Второй блок под названием LUMI-C содержит только 64-ядерные CPU AMD EPYC Milan в 1536 двухсокетных узлах, имеющих от 256 Гбайт до 1 Тбайт RAM.

Дата-центр LUMI (Фото: Fade Creative)

LUMI также имеет 64 GPU NVIDIA A40, используемых для рабочих нагрузок визуализации, и узлы с увеличенным объёмом памяти (до 32 Тбайт на кластер). Основной интерконнект — Slingshot 11. Хранилище LUMI построено на базе СХД Cray ClusterStor E1000 c ФС Lustre: 8 Пбайт SSD + 80 Пбайт HDD. Также есть объектное Ceph-хранилище ёмкостью 30 Пбайт. Агрегированная пропускная способность СХД составит 2 Тбайт/с. В ближайшее время суперкомпьютер получит дополнительные узлы.

После завершения всех работ производительность суперкомпьютера, как ожидается, вырастет примерно до 375 Пфлопс, а пиковая производительность потенциально превысит 550 Пфлопс. Общая площадь комплекса составит порядка 300 м², а энергопотребление вырастет до 8,5 МВт. Впрочем, запас у площадки солидный — от ГЭС она может получить до 200 МВт. «Мусорное» тепло идёт на обогрев местных домов.