Як продуктивність Grok 3 порівнюється з GPT-4O та Близнюками

grok 3 проти GPT-4o:
* Бевтики: Grok 3 продемонстрував чудову продуктивність на декількох орієнтирах порівняно з GPT-4O [1] [4]. До них відносяться математика (AIMEâ 24), наука (GPQA) та кодування (LCB Oct-Feb) [1]. Грок 3 набрав 52 в математиці, 75 в науці та 57 в кодуванні, перевершивши GPT-4O в цих областях [1] [4].
* Розуміння мови: Грок 3 досяг 94,2% точності в тестах на розуміння мови, трохи перевершивши 92,8% Чатгпта [2].
* Кодування: Grok 3, як повідомляється, на 1,2x швидше, ніж чатгпт у швидкості генерації коду, із середнім часом відгуку 0,8 секунди [2].
* Оцінка арени: рання версія Grok 3, яку називають "шоколадом", була першою AI, яка перевищила оцінку 1400 на арені LMSYS Chatbot, перевершивши GPT-4O [4].
* Дані міркувань та в режимі реального часу: Grok 3 показує силу в математичних міркуваннях, завданнях кодування, аналізу даних у режимі реального часу та поточних дискусіях подій [2].
* Тренінг: Grok 3 навчається за допомогою даних у режимі реального часу з X (раніше Twitter), надаючи йому актуальну інформацію [2]. Він був навчений на SuperCluster Xai's Colossus, оснащений 100 000 GPU [2].

grok 3 проти Gemini:

* Бевтики: Grok 3 перевершив Google Deepmindâ Gemini-2 Pro на різних орієнтирах [1].
* Chatbot Arena (LMSYS): Рання версія Grok 3 перевищувала основні моделі, такі як The Gemini-2.0 Flash Thinking на арені Чатбот [1].
* Математика (Aimeâ 24): На математиці (Aimeâ 24) еталон, Грок 3 набрав 52, а Gemini-2 Pro набрав 39 [4].
* Наука (GPQA): У науці (GPQA), Grok 3 набрав 75, перевершивши Gemini-2 Pro, який набрав 65 [4].