Маск обещает представить «самый мощный в мире ИИ» к концу этого года
Генеральный директор Tesla и владелец Twitter/X Илон Маск объявил в понедельник, что его стартап в области искусственного интеллекта xAI официально начал обучение своего суперкомпьютера в Мемфисе, который он называет «самым мощным кластером обучения искусственному интеллекту в мире».
После полной эксплуатации Маск планирует использовать его для создания «самого мощного в мире ИИ по всем показателям к декабрю этого года», которым предположительно станет Grok 3 .
Отличная работа команды @xAI , команды @X , @Nvidia & поддержка компаний, проходящих обучение по Мемфисскому суперкластеру, началась примерно в 4:20 утра по местному времени.
Со 100 тысячами H100 с жидкостным охлаждением на одной фабрике RDMA это самый мощный кластер для обучения искусственному интеллекту в мире!
— Илон Маск (@elonmusk) 22 июля 2024 г.
«Gigafactory of Compute» компании xAI, где расположен суперкомпьютер, расположена на территории бывшего производственного предприятия Electrolux в Мемфисе, штат Теннесси, и о ней было объявлено только в прошлом месяце. По словам Маска, в учебном кластере будет использоваться 100 000 графических процессоров Nvidia H100. Они основаны на микроархитектуре Hopper и имеют сеть примерно в четыре раза большую, чем современные современные кластеры . В их число входят 60-тысячный графический процессор Intel Aurora в Аргоннской национальной лаборатории, примерно 38-тысячный графический процессор AMD Frontier в Ок-Ридже и Microsoft Eagle , который использует 14 400 графических процессоров NVIDIA H100.
По словам президента и генерального директора Greater Memphis Chamber Теда Таунсенда , открытие этого учебного центра представляет собой крупнейшую инвестицию капитала со стороны новой компании в истории Мемфиса. Суперкомпьютер будет использоваться «в первую очередь для подпитки и финансирования сферы искусственного интеллекта для всех его компаний [Маска], очевидно, с Tesla и SpaceX», — сказал он. «Если вы можете себе представить вычислительную мощность, необходимую для размещения людей на поверхности Марса, то это произойдет здесь, в Мемфисе».
Однако, несмотря на многомиллиардные инвестиции xAI, ожидается, что этот объект создаст всего несколько сотен местных рабочих мест. Более того, согласно отчету WREG, «[Управление долины Теннесси] не имеет действующего контракта с xAI».
Они «работают с xAI и нашими партнерами из [Memphis Light, Gas and Water] над деталями предложения и потребностями в электроэнергии». TVA также отметило, что любой проект мощностью более 100 мегаватт (МВт) требует одобрения для подключения к электросети штата. По оценкам президента MLGW Дуга Макгоуэна, установка Маска может потреблять до 150 МВт в период пиковой нагрузки.