xAI Илона Маска строит суперкомпьютер «Гигафабрика вычислений» для Grok AI

Gábor Bíró 5 мая 2024 г.
2 мин. чтения

Стартап Илона Маска в области искусственного интеллекта, xAI, строит масштабный суперкомпьютер, получивший название «Гигафабрика вычислений». Задача этого суперкомпьютера – вывести их разговорный ИИ, Grok, на новый уровень.

xAI Илона Маска строит суперкомпьютер «Гигафабрика вычислений» для Grok AI
Источник: Авторская работа

Стартап Илона Маска в области искусственного интеллекта, xAI, работает над амбициозным проектом: созданием гигантского суперкомпьютера под названием «Гигафабрика вычислений». Его цель – значительно расширить возможности их разговорного ИИ, Grok. Планируется, что эта машина будет использовать 100 000 специализированных полупроводниковых чипов (а именно, GPU NVIDIA H100), чтобы вывести xAI в лидеры в сфере технологий искусственного интеллекта.

Видение Маска простирается далеко за пределы текущего технологического уровня; он прогнозирует, что ИИ превзойдет когнитивные способности человека к концу 2025 года. На недавней встрече с инвесторами Маск заявил, что xAI стремится догнать лидеров отрасли, таких как OpenAI и DeepMind, к концу 2024 года. Более того, Маск считает, что развитие ИИ может достичь точки, когда он заменит все человеческие профессии, поднимая новые вопросы о роли человеческой жизни. Маск предполагает, что в будущем задачей человечества может стать «придание смысла ИИ».

Ожидается, что суперкомпьютер «Гигафабрика вычислений» будет завершен к осени 2025 года и будет использовать десятки тысяч GPU NVIDIA H100, при стоимости, потенциально достигающей миллиардов долларов. Эта массивная вычислительная мощность будет использована для разработки и эксплуатации третьей версии Grok, для которой потребуется не менее 100 000 этих чипов – в пять раз больше, чем использовалось для Grok 2.0. Grok в настоящее время находится на версии 1.5, выпущенной в апреле, которая уже обладает впечатляющими возможностями, такими как обработка изображений и диаграмм, а также предоставление новостных сводок на основе ИИ для премиум-пользователей X.

Основными компонентами суперкомпьютера xAI «Гигафабрика вычислений» станут передовые графические процессоры (GPU) Nvidia H100. По словам Маска, размер этого нового GPU кластера будет как минимум в четыре раза больше, чем текущие GPU кластеры, используемые конкурентами xAI. Суперкомпьютеру потребуются десятки тысяч этих высокопроизводительных GPU H100, и только для обучения третьей версии Grok потребуется не менее 100 000 чипов – значительное увеличение по сравнению с 20 000 GPU, которые, как сообщается, использовались для Grok 2.0.

xAI сотрудничает с Oracle для создания инфраструктуры для суперкомпьютера «Гигафабрика вычислений», что подчеркивает масштаб и серьезность проекта. Для финансирования этого масштабного предприятия Маск первоначально стремился привлечь 4 миллиарда долларов при оценке xAI в 15 миллиардов долларов. Из-за высокого интереса инвесторов целевой показатель был позже увеличен до 6 миллиардов долларов, и, как сообщается, сделка была закрыта при оценке в 18 миллиардов долларов до привлечения средств. Эти значительные финансовые инвестиции, оцениваемые в миллиарды долларов, направлены на сборку десятков тысяч GPU NVIDIA H100, необходимых для питания системы Grok AI следующего поколения.

Gábor Bíró 5 мая 2024 г.