xAI Илона Маска завершила обучение новой мощной модели Grok

Илон Маск (Elon Musk) объявил, что обучение фундаментальной модели Grok V9-Medium с 1,5 триллиона параметров успешно завершено. По его словам, результаты предварительных оценок (evals) выглядят многообещающе.

В ходе дополнительного обучения в модель было добавлено большое количество данных из Cursor (популярный текстовый редактор со встроенным ИИ), и этот процесс продолжится. В настоящее время идёт этап тонкой настройки, а через несколько дней начнётся обучение с подкреплением (reinforcement learning). Выход модели для широкой публики ожидается через 2–3 недели.

Изображение Grok

Новая версия станет значительным шагом вперёд по сравнению с текущей Grok V8-Small (0,5 триллиона параметров), которая сейчас обслуживает весь производственный трафик Grok. Особый прирост производительности ожидается в сложных задачах программирования и кодинга.

Релиз V9-Medium должен укрепить позиции Grok в конкурентной борьбе с ведущими ИИ-моделями. Увеличение параметров в три раза и улучшенное качество данных должны существенно повысить возможности модели в рассуждениях, генерации кода и решении комплексных задач.

Ранее Илон Маск заявил, что Grok Build улучшается каждый день, команда работает 7 дней в неделю. В новой версии Grok Build 0.1.219 инженеры сосредоточились на исправлении багов, связанных с работой в терминале.

©  iXBT