Илон Маск раскрывает: высокие затраты на обучение модели xAI Grok-3, запуск ожидается до конца года.

Недавно стартап ИИ Илон Маска, xAI, привлек значительное внимание после того, как CEO анонсировал выход нового поколения языковой модели Grok-3 до конца года. Обладая беспрецедентным масштабом обучения, Grok-3 использует впечатляющие 100,000 чипов NVIDIA H100, что подчеркивает мощные возможности и инновационный подход xAI в сфере ИИ.

Маск отметил, что масштаб обучения Grok-3 отражает прорывные достижения в обработке данных и методах обучения моделей в xAI, указывая на то, что модель достигнет крайне высоких уровней интеллекта. Он также упомянул, что очистка данных для существующих больших языковых моделей (LLM) требует огромных затрат труда, но благодаря современному оборудованию и алгоритмам xAI успешно справилась с этой задачей, заложив прочный фундамент для выдающихся результатов Grok-3.

Чипы NVIDIA H100, специально разработанные для работы с большими языковыми моделями, являются критически важными для обучения Grok-3 благодаря своим мощным вычислительным и обработческим возможностям. Каждый чип H100 стоит около 30,000-40,000 долларов, что приводит к общей инвестиции в 3-4 миллиарда долларов за 100,000 чипов, приобретенных xAI, подчеркивая уверенность компании и долгосрочное видение в технологии ИИ.

Кроме того, Маск сообщил, что закупки Tesla у NVIDIA в этом году ожидаются в диапазоне от 3 до 4 миллиардов долларов, что вызвало спекуляции о том, использует ли xAI чипы, приобретенные Tesla, для обучения своих моделей. Хотя это еще не подтверждено официально, это открывает возможности для обсуждений о стоимости обучения и доступности ресурсов xAI.

Грядущий запуск Grok-3 становится важной вехой для xAI в сфере ИИ, обещая вдохнуть новую жизнь в мировое развитие технологий ИИ. Маск заявил, что Grok-3 будет «особенным», обладая мощными возможностями понимания и генерации языка, что, вероятно, обеспечит пользователям умные и персонализированные взаимодействия. Ожидается, что релиз модели еще больше расширит области применения в обработке естественного языка, включая интеллектуальных помощников, машинный перевод и клиентское обслуживание.

С приближением даты запуска Grok-3 интерес как в индустрии, так и среди потребителей продолжает расти. Остается только наблюдать, сможет ли xAI задать новые тренды в технологии ИИ с помощью Grok-3 — развитие, определенно заслуживающее внимания.