Ранее в этом месяце Google Cloud по ошибке удалила учётную запись австралийского пенсионного фонда UniSuper. После восстановления работоспособности систем UniSuper и завершения внутренней проверки компания опубликовала информацию, призванную прояснить характер инцидента.

В соответствии с отчётом, инцидент затронул только и исключительно одного клиента, только один его сервис Google Cloud VMware Engine (GCVE) и только в одном облачном регионе из двух, используемых компанией UniSuper. Резервные копии данных клиента, хранящиеся в Google Cloud Storage (GCS) в том же регионе не пострадали.

По данным Google, во время первоначального развертывания частного облака для клиента в 2023 году операторы Google Cloud случайно неправильно настроили сервис GCVE, оставив поле неназванного параметра пустым. Это привело к непреднамеренному и непредсказуемому результату: частное облако UniSuper было автоматически удалено по истечении одного года (срок жизни по умолчанию), причём без уведомления о событии кого бы то ни было.

Источник изображения: Google

Восстановление GCVE, конфигурации сети, систем безопасности, приложений и данных потребовало от команды UniSuper и Google нескольких дней работы в режиме 24×7. Google Cloud предприняла ряд мер для исключения подобных инцидентов в будущем, в том числе проверку вручную всех GCVE-развёртываний других клиентов. Кроме того, теперь процесс создания GCVE полностью автоматизирован и не требует участия живых операторов даже при формировании нестандартных конфигураций.

Однако необычно долгое восстановление сервиса и произошедший спустя неделю после инцидента с UniSuper похожий, а возможно и связанный с описанной историей, сбой в работе Google Cloud ставит под сомнение надёжность облачной платформы в целом, а также в очередной раз показывает, насколько хрупка и уязвима ИТ-инфраструктура и насколько велико значение человеческого фактора.

Amazon намерена вложить в своё испанское подразделение €15,7 млрд ($16,9 млрд), передаёт The Register. IT-гигант не сообщил, на что именно и в течение какого срока потратят столь значительную сумму, но объявил, что такие финансовые вливания обеспечат поддержку 17,5 тыс. рабочих мест. Amazon существенно поменяла свои планы, поскольку в 2021 году она хотела инвестировать здесь всего €2,5 млрд и сформировать 1,3 тыс. рабочих мест.

Новые инвестиции сформируют рабочие места в строительстве, сфере эксплуатации объектов, в телекоммуникационном секторе и др. В Amazon обещают, что действия компании приведут к росту ВВП Испании на €21,6 млрд к 2033 году. Сейчас ВВП страны составляет более €1,4 трлн. Значительная доля инвестиций придётся на гористый регион Арагон, на который придётся 40 % новых рабочих мест. Как утверждают муниципальные власти самого Арагона, AWS превратит регион в центр инноваций и облачной экономики Европы.

Источник изображения: Des Mc Carthy/unsplash.com

Заодно компания похвасталась, что её дата-центры в Арагоне уже на 100 % питаются «зелёной» энергией. Amazon рассчитывает добиться и водно-положительного баланса к 2030 году благодаря программам восстановления водных ресурсов. То есть AWS будет возвращать миру больше чистой воды, чем забирает, и в числе прочего компания займётся устранением утечек в местных водопроводах.

Впрочем, Испания — не единственная страна в Евросоюзе, куда Amazon планирует масштабные инвестиции. На прошлой неделе СМИ сообщали, что облачный провайдер выделил €7,8 млрд для суверенного облака AWS European Sovereign Cloud в Германии. Кроме того, во Франции Amazon потратит ещё €1,2 млрд. А вот Ирландии AWS страдает от дефицита электроэнергии.

Компания CoreWeave, специализирующаяся на облачных услугах для решения ИИ-задач, объявила о подписании окончательного соглашения, предусматривающего долговое финансирование на сумму $7,5 млрд. Средства пойдут на расширение сети дата-центров и закупку высокопроизводительных ускорителей.

Напомним, стартап CoreWeave основан в 2017 году. Сначала компания занималась майнингом криптовалют, а затем переориентировалась на вычисления общего назначения и хостинг проектов генеративного ИИ. В настоящее время CoreWeave предоставляет специализированные облачные ИИ-решения.

Источник изображения: CoreWeave

В апреле 2023-го CoreWeave получила $221 млн в ходе раунда финансирования Series B, а позднее привлекла на развитие ещё на $200 млн. В августе 2023-го компания объявила о долговом финансировании в размере $2,3 млрд под залог имеющихся у неё ускорителей NVIDIA. В декабре прошлого года CoreWeave провела ещё один раунд финансирования — на $642 млн. В мае 2024-го компания получила дополнительно $1,1 млрд. И вот теперь говорится о привлечении $7,5 млрд.

Долговое финансирование осуществляется фондами, управляемыми Blackstone, со стратегическим участием Magnetar и Coatue. В программе также участвуют Carlyle, CDPQ, DigitalBridge Credit, BlackRock, Eldridge Industries и Great Elm Capital Corp. Отмечается, что на сегодняшний день это один из крупнейших в истории частных долговых проектов.

Основная часть денег будет направлена на развитие инфраструктуры ЦОД: ожидается, что к концу текущего года количество объектов удвоится, достигнув 28. Сейчас инфраструктура CoreWeave включает 14 площадок на территории США. Кроме того, CoreWeave продолжит закупать ИИ-ускорители и оборудование, необходимое для их работы: серверы, сетевые компоненты и пр.

Компания Huawei объявила об открытии облачного региона в Египте. В рамках данного проекта китайская корпорация сообщила о намерении в течение пяти лет инвестировать $300 млн в развитие сервисов и услуг, а также в обучение местных разработчиков и подготовку IT-специалистов.

О том, что Huawei планирует скорый запуск облачной площадки в Египте, стало известно в феврале нынешнего года. Отмечается, что новый Каирский регион послужит центром доступа для стран Северной Африки. Таким образом, Huawei стала первым облачным провайдером, развернувшим публичную облачную инфраструктуру на территории Египта.

Источник изображения: Huawei

Планируемые инвестиции будут направлены на создание более чем 200 облачных сервисов, включая системы ИИ, платформы больших данных и средства разработки. Huawei намерена поддерживать примерно 200 местных партнёров в области ПО, а также развивать сеть из 1,3 тыс. торговых партнёров. Конечная цель заключается в формировании развитой экосистемы софта и приложений в регионе. Кроме того, в течение следующих пяти лет Huawei обучит 10 тыс. местных разработчиков и 100 тыс. IT-специалистов, что поможет обеспечить цифровую трансформацию.

Huawei также сообщила о расширении своей программы поддержки стартапов. Инициатива Huawei Cloud Startup Program предусматривает формирование специальных команд для оказания помощи молодым компаниям при внедрении облачных технологий. Проект предполагает в том числе субсидирование: один стартап может подать заявку на облачные кредиты на сумму до $150 тыс.

Наконец, платформа Huawei Cloud представила новую большую языковую модель (LLM) для арабского рынка. Система автоматического распознавания речи (ASR) охватывает более 20 арабоязычных стран. При этом точность работы достигает 96%.

Отмечается, что на сегодняшний день инфраструктура Huawei Cloud состоит из 33 регионов и 93 зон доступности по всему миру. У компании есть облачные объекты в материковом Китае и Гонконге, Ирландии, Нидерландах, Франции, Таиланде, Сингапуре, Индонезии, Саудовской Аравии, Турции, Южной Африке, Бразилии, Аргентине, Перу, Чили и пр.

Системы виртуализации — практически неотъемлемая часть современного IT-ландшафта. Это относится и к локальной инфраструктуре, и к арендуемой облачной. Виртуализация помогает существенно сэкономить на аппаратной составляющей, а современные облака позволяют формировать инфраструктуру любой сложности и решать практически любые задачи. Однако времена меняются — использование западных решений зачастую осложняется рядом проблем, спектр которых может варьироваться от утечки ценных данных до санкционного давления, доходящего порой до полного отказа в обслуживании российских клиентов.

Выход из этой ситуации очевиден — миграция на отечественные платформы. Именно на это нацелено недавно заключённое соглашение между российскими компаниями MIND Software и ООО «ДАКОМ М» (бренд Space). «ДАКОМ М» располагает собственным исследовательским центром, активно ведущим прикладные исследования в области виртуализации и облачных технологий. Эти исследования легли в основу платформы SpaceVM, полнофункционального аналога решений VMware и Microsoft, который к тому же имеет гораздо более гибкую и выгодную для заказчика политику лицензирования.

Она позволяет реализовать как привычные сценарии с переносом в облако веб-порталов, бизнес-приложений и рабочих станций сотрудников, в том числе развёртывание полноценной инфраструктуры рабочих мест Space VDI, так и создавать в облачной среде сетевые и телекоммуникационные системы, например, виртуальные маршрутизаторы, межсетевые экраны и почтовые серверы. Более того, в SpaceVM уже реализована интеграция с многочисленными продуктами отечественных и зарубежных разработчиков. Наконец, доступна и фирменная технология FreeGRID, позволяющая использовать возможности NVIDIA GRID для аппаратного ускорения 3D-приложений в виртуальных средах без лицензионных ограничений.

Платформа SpaceVM использует гипервизор первого типа, поддерживает работу в режиме высокой доступности (high availability) и виртуальные GPU. Она совместима с широким спектром гостевых ОС и может запускаться на любых серверных платформах с архитектурой x86-64, включая, конечно же, российские решения из реестра Минпромторга. На сайте разработчика имеется вся необходимая документация и цикл видеоуроков, помогающих быстрее освоить SpaceVM новым пользователям. Платформа уже используется рядом крупных российских компаний, включая «Газпром» и «РусГидро».

Но как быть компаниям, уже имеющим развитую виртуализированную инфраструктуру, развёрнутую в западных облаках или использующих западные системы виртуализации, вроде ESXi, XEN, bhyve или Hyper-V? На этот вопрос и отвечает альянс «ДАКОМ М» и MIND Software. Последняя давно работает в области создания инструментария для безболезненной миграции целых виртуальных ИТ-комплексов.

Разработанная MIND Software система MIND Migrate, входящая в состав комплекса MIND Suite, обеспечивает такую миграцию практически в любых сочетаниях, с публичных либо приватных облаков и любых платформ виртуализации, в том числе, для VDI-систем, правда, пока только для архитектуры x86-64. Естественно, теперь она поддерживает миграцию и на SpaceVM.

MIND Migrate имеет развитый инструментарий, включая интеграцию через API и скриптовый язык, поддержку современных стандартов шифрования и обмена ключами, развитую систему аутентификации пользователей, а также удобный и лаконичный графический интерфейс, отображающий ход процесса миграции с обработкой возможных ошибок в процессе. Начать процесс миграции можно буквально в несколько кликов.

При переносе гарантируется сохранность данных, поскольку усилиями обеих компаний-разработчиков было проведено тщательное тестирование на совместимость SpaceVM с MIND Migrate во всех возможных режимах. При этом MIND Migrate не требует какого-то отдельного индивидуального инструментария для различных платформ, поскольку по своей природе не привязана к какому-либо вендору ПО или аппаратного обеспечения.

Сам процесс миграции проходит практически в онлайн-режиме, предполагается лишь краткий перерыв при переключении нагрузок с исходной инфраструктуры на целевую. Следует, впрочем, отметить, что речь идёт о переносе инфраструктуры виртуальных машин и рабочих мест. Скорее всего, поддержка более сложных сценариев, например, с сетями хранения данных vSAN или виртуальными коммутаторами VMware NSX будет добавлена позднее.

Сотрудничество MIND Software и «ДАКОМ М» окажет серьёзную помощь российским предприятиям и государственным структурам в деле снижения зависимости от иностранных технологий, а в ближайшей перспективе — и полного отказа от них. Сочетание отечественной облачной платформы с удобными инструментами миграции позволит добиться более высокого уровня информационной безопасности и обеспечить непрерывность бизнес-процессов. Это серьёзный шаг в сторону ИТ-суверенитета.

Отметим, что дальнейшие шаги в этом направлении потребуют развития и российской микроэлектронной промышленности. Российские производители серверного оборудования уже доказали, что могут выпускать решения, не уступающие западным, но отсутствие собственных процессоров пока не позволяет говорить о полном суверенитете.

Французский облачный провайдер Scaleway, по сообщению ресурса Datacenter Dynamics, значительно расширил зону охвата. Компания теперь предоставляет свой сервис Dedibox Virtual Private Server (VPS) в 65 городах на территории 52 стран.

По заявлениям Scaleway, Dedibox VPS даёт компаниям гибкость в развёртывании виртуальной инфраструктуры. Доступны различные конфигурации, а стоимость начинается примерно с €5/мес. Услуга охватывает Северную Америку, Южную Америку, Европу, Ближний Восток, Африку, Азию и Океанию.

Источник изображения: Scaleway

Кроме того, провайдер объявил о приобретении более 1000 дополнительных ускорителей NVIDIA H100, которые будут использованы для расширения вычислительных мощностей в дата-центре Iliad DC5 в Большом Париже. Scaleway использует Ethernet-платформу Spectrum-X, разработанную для облачных провайдеров.

Scaleway также запустила новую услугу под названием GPU Cluster On Demand. Она позволяет клиентам зарезервировать необходимое количество вычислительных кластеров на базе GPU — от нескольких штук до нескольких тысяч. Таким образом, можно гибко масштабировать ресурсы при реализации различных проектов в области ИИ и НРС.

Наконец, Scaleway объявила о подписании соглашения о предоставлении ускорителей H100 компании H из Парижа. Этот стартап сформирован командой бывших руководителей Google DeepMind. Компания занимается разработкой мультиагентных моделей и фундаментальных моделей поведения.

Microsoft на фоне стремительного развития ИИ активно расширяет свой вычислительный потенциал: каждый месяц корпорация развёртывает эквивалент пяти суперкомпьютеров Eagle. Об этом, как сообщает ресурс Datacenter Dynamics, заявил технический директор облачной платформы Azure Марк Руссинович (Mark Russinovich).

Комплекс Microsoft Azure Eagle в нынешнем рейтинге TOP500 занимает третье место с FP64-производительностью 561,2 Пфлопс — это самый мощный в мире облачный суперкомпьютер. В системе задействованы 14 400 ускорителей NVIDIA H100, а также интерконнект NVIDIA InfiniBand NDR. «Сегодня мы развёртываем эквивалент пяти таких суперкомпьютеров каждый месяц. Наша экосистема ИИ теперь на несколько порядков больше и меняется каждый день и каждый час», — сказал Руссинович на конференции Microsoft Build.

Таким образом, ежемесячно Microsoft вводит в эксплуатацию вычислительные мощности, сопоставимые с теми, которые могут обеспечить 72 000 ускорителей Н100. В общей сложности это 2,8 Эфлопс ресурсов, которые распределены по расширяющейся сети дата-центров корпорации. Руссинович отметил, что общая протяжённость соединений InfiniBand в этих ЦОД такова, что ими можно было бы как минимум пять раз опоясать Землю. То есть, это не менее 200 тыс. км.

Источник изображения: Microsoft

О стремительном расширении вычислительных мощностей также говорит технический директор Microsoft Кевин Скотт (Kevin Scott). Он не стал приводить конкретные цифры, но дал наглядное представление. Так, ИИ-суперкомпьютер, который корпорация в 2020 году создала для OpenAI GPT-3, Скотт сравнил с акулой. Система следующего поколения, разработанная в 2022-м для обучения GPT-4, — это косатка, которая в два раза длиннее и в три раза тяжелее больших белых акул. Нынешняя система Microsoft сравнивается с синим китом: он более чем в два раза длиннее и примерно в 25 раз тяжелее косатки.

В настоящее время Microsoft и OpenAI обсуждают проект строительства масштабного кампуса ЦОД для решения самых сложных и ресурсоёмких задач в области ИИ. Проект под названием Stargate стоимостью около $100 млрд предполагает создание ряда объектов, суммарная мощность которых может достигать 5 ГВт. Компания действительно стремительно наращивает ёмкость своих ЦОД, добавляя порядка 200 МВт ежемесячно.

IBM представила платформу POWER Virtual Server Private Cloud для локального развёртывания частного облака, за обслуживание и корректное функционирование которого отвечает сама IBM. Это решение, по словам компании, позволяет сохранить «ИТ-суверенитет» и избежать существенных финансовых затрат благодаря гибкой ценовой политике.

Базовая конфигурация (Small Pod) начинается с 2–4 серверов с 8 Тбайт оперативной памяти, до 340 ядер и до 438 Тбайт пространства для хранения данных. Занимают такие комплекты одну стандартную стойку. Среднего размера «капсула» (Medium Pod) может насчитывать до 40 серверов, в том числе в варианте с 32 Тбайт памяти. Максимальная конфигурация насчитывает 1615 ядер и примерно 3,5 Пбайт дискового пространства.

Источник изображения: IBM

В основе платформы лежат серверы IBM POWER S1022 и E1050/1080, использующие процессоры POWER10. Первая система может иметь один или два 20-ядерных процессора с поддержкой SMT8, дополненных 2-4 Тбайт памяти. POWER E1050/1080 поддерживают до четырёх процессоров. Объём памяти в этом случае варьируется в пределах 4–32 Тбайт на сервер.

В состав локального облака также могут входить СХД IBM FlashSystem ёмкостью 460 или 920 Тбайт. Сетевые коммутаторы и управляющие серверы входят в стоимость услуги. В качестве базовых ОС доступны Red Hat Enterprise Linux и классические решения IBM — IBM i и AIX. Доступна и сертификация SAP HANA и SAP NetWeaver.

Сама услуга предлагается сроком на один год с возможностью возобновления, также доступны трёх- и пятилетние контракты. При этом само оборудование и лицензии приобретать не придётся, платить надо только за их фактическое использование, а сама платформа управляется из IBM Cloud.

В рамках конференции «Цифровая индустрия промышленной России» (ЦИПР) разработчик программного обеспечения «Сбербанк Технологии» («СберТех») и компания «Марвел-Дистрибуция» подписали соглашение о сотрудничестве.

Согласно условиям партнёрского соглашения, «Марвел-Дистрибуция» будет продвигать на российском рынке разработанную «СберТехом» облачную платформу Platform V, предназначенную для создания бизнес-решений и промышленных приложений любого масштаба и сложности.

Платформа Platform V включает более 70 продуктов, которые закрывают потребности разработки на всех уровнях архитектуры предприятия (бэкенд и фронтенд, интеграция, хранение и аналитика данных, виртуализация и контейнеризация), а также предоставляют полный набор инструментов для управления производственными процессами и реализации ИИ-моделей, говорит компания. Продукты зарегистрированы в реестре отечественного ПО Минцифры и соответствуют стандартам корпоративного уровня в области безопасности, производительности и надёжности.

Источник фото: пресс-служба «СберТеха»

«Продукты нашей платформы помогают организациям не только провести цифровую трансформацию, но и снизить расходы на IT-инфраструктуру. Сотрудничество с компанией «Марвел-Дистрибуция» отвечает нашим долгосрочным интересам: вместе мы поможем российскому бизнесу достичь технологической независимости на уровне ПО», — прокомментировал соглашение о сотрудничестве генеральный директор «СберТеха».

В прошлом месяце компания Google анонсировала долгожданный серверный CPU на архитектуре Arm. Впрочем, как сообщает The Register, она уже оказалась третьей на рынке процессоров для ЦОД (сюда входят не только CPU, но и GPU, TPU и иные ускорители). Согласно отчёту TechInsights, компания теперь уступает только NVIDIA и Intel и давно обогнала AMD.

Источник изображения: Google

Как и другие крупные облачные операторы, IT-гигант выпускает собственные чипы TPU, шестое поколение которых было представлено на прошлой неделе. Хотя на сторону их не продают, компания заказывает огромные партии TPU для оснащения собственных ЦОД — только в прошлом году речь шла о 2 млн штук. Ключевым партнёром Google в создании кастомного «кремния» является Broadcom.

Поставки TPU нарастают с каждым поколением, следуя за ростом самой компании. После премьеры TPU v4 в 2021 году в связи с развитием больших языковых моделей (LLM) объём полупроводникового бизнеса Google значительно вырос. TPU применяются компанией для внутренних задач, а ускорители NVIDIA — для облака. В TechInsights считают, что на сегодняшний день у Google имеется крупнейшая в отрасли база установленных ИИ-ускорителей и самая масштабная ИИ-инфраструктура.

Источник изображения: TechInsights

В прошлом году на серверным рынке произошла «масштабная коррекция запасов» — гиперскейлеры увеличили срок службы оборудования, отложив замену серверов общего назначения и повысив капитальные затраты на ИИ-серверы и ускорители NVIDIA. Аналитики Omdia говорят о таких тенденциях на рынке что в прошлом, что в начале этого года. В TechInsights считают, что по итогам I квартала 2024 года Google сможет догнать или даже перегнать Intel по доле на этом рынке.

Конечно, Google — не единственная облачная компания, разрабатывающая собственные чипы. Microsoft работает над серверным CPU Azure Cobalt и ИИ-ускорителями Maia 100. AWS и вовсе годами использует собственные Arm-процессоры Graviton и ИИ-ускорители серий Trainium и Inferentia. В прошлогоднем докладе Bernstein Research сообщалось, что архитектуру Arm используют уже около 10 % серверов по всему миру, а более 50 % из них внедряется AWS. Softbank в начале 2023 года говорила о том, что Arm захватила 5 % облачного рынка.

Источник изображения: TechInsights

Впрочем, с появлением процессоров TPU V5e и TPU V5p решения Google будут использоваться всё шире из-за «взрывного роста» больших языковых моделей вроде Gemini. В 2024 году у Google появится Arm-процессор Axion. И его внедрение, по мнению TechInsights, будет происходить намного быстрее, чем Graviton, поскольку у Google уже имеется программная инфраструктура для такого чипа. Всё это необходимо компании, чтобы идти в ногу с AWS, Microsoft и, в меньшей степени, Alibaba. При этом в докладе упоминается, что рынок полупроводников для ЦОД быстро меняется — раньше на нём доминировала Intel с архитектурой x86. Теперь его структура определяется потребностями ИИ-систем.