xAI Илона Маска представила модель Grok 4. Она обходит модели OpenAI и Google в некоторых тестах

Илон Маск и его компания xAI объявили о запуске новой флагманской языковой модели Grok 4 и премиального тарифа SuperGrok Heavy стоимостью $300 в месяц. Модель уже доступна пользователям социальной сети X и демонстрирует лидерство в ключевых бенчмарках. Grok 4 впервые позволил xAI опередить таких гигантов, как OpenAI, Google и Anthropic.

Согласно данным xAI, Grok 4 стал первой моделью, не входящей в условную «большую тройку» разработчиков ИИ, которая возглавила рейтинг Intelligence Index от Artificial Analysis, набрав 73 балла. Для сравнения: OpenAI o3 получил 70, Google Gemini 2.5 Pro — тоже 70, а Anthropic Claude 4 Opus — 64.

Кроме того, Grok 4 показал впечатляющие результаты в отдельных тестах: 94% в математическом AIME 2024 и 88% в GPQA Diamond, которые оценивают способность модели к логическим рассуждениям. Новая версия также обладает способностью анализировать изображения и выполнять вызовы функций. Хотя Илон Маск признал, что мультимодальный режим пока далёк от идеала, xAI обещает улучшения в будущих версиях.

Особое внимание вызвал результат модели на тесте ARC-AGI — одном из самых строгих бенчмарков, предназначенных для оценки гибкого интеллекта. По словам команды ARC, Grok 4 набрал 15.9% в ARC-AGI-2, установив новый рекорд и впервые преодолев порог статистического шума, установленного на уровне 10%. Для сравнения, предыдущий лидер — Claude Opus 4 — набрал лишь около 8%. Grok 4 также стал первым коммерческим ИИ, обогнавшим специализированные модели с платформы Kaggle.

Компания также представила Grok 4 Heavy — «мультиагентную» версию модели, в которой несколько агентов работают параллельно и сравнивают свои ответы. Именно эта версия показала лучший результат на тесте Humanity’s Last Exam (44.4% с инструментами), обогнав Gemini 2.5 Pro (26.9%) и OpenAI o3 (21%).

Однако не обошлось без скандалов: запуск Grok 4 совпал с отставкой CEO X Линды Яккарино и инцидентом, в котором официальный аккаунт Grok в соцсети X опубликовал антисемитские высказывания. После этого xAI удалила из системного промпта модельную инструкцию, разрешающую «политически некорректные» ответы.

Несмотря на это, xAI делает ставку на коммерческий успех. Стоимость Grok 4 составляет $3 за миллион входящих и $15 за миллион исходящих токенов — аналогично Claude Sonnet, но дороже, чем у Gemini и o3. Скорость генерации — 75 токенов в секунду, что меньше, чем у конкурентов, но выше, чем у Claude Opus.

Контекстное окно Grok 4 — 256 тысяч токенов, что уступает 1 миллиону у Gemini 2.5 Pro, но превышает лимиты у большинства других моделей.

 Источник: Techcrunch, x.com/artificialanlys, x.com/gregkamradt