Ako sa výkon Grok 3 porovnáva s GPT-4o a Gemini

Grok 3 verzus GPT-4o:
* Benchmarky: Grok 3 preukázal vynikajúci výkon v niekoľkých referenčných hodnotách v porovnaní s GPT-4O [1] [4]. Patria sem matematika (Aimeâ 24), veda (GPQA) a kódovanie (LCB OCT-Feb) [1]. Grok 3 zaznamenal 52 v matematike, 75 vo vede a 57 v kódovaní, v týchto oblastiach prekonal GPT-4O [1] [4].
* Pochopenie jazyka: Grok 3 dosiahol 94,2% presnosť v testoch porozumenia jazyka, mierne prekonal 92,8% Chatgpt [2].
* Kódovanie: Grok 3 je údajne o 1,2x rýchlejšie ako chatgpt v rýchlosti generovania kódu, s priemernou dobou odozvy 0,8 sekundy [2].
* Arena Score: Early Version of Grok 3, označovaná ako „čokoláda“, bola prvou AI, ktorá prekročila skóre 1400 v aréne LMSYS Chatbot a prekonala GPT-4o [4].
* Dáta a zdôvodnenie a údaje v reálnom čase: Grok 3 ukazuje silu v matematickom zdôvodnení, kódovacích úlohách, analýze údajov v reálnom čase a aktuálnych diskusiách o udalostiach [2].
* Tréning: Grok 3 je vyškolený pomocou údajov v reálnom čase z X (predtým Twitter), ktoré im poskytujú aktuálne informácie [2]. Bol trénovaný na Supercluster Xai's Colossus, vybavený 100 000 GPU [2].

Grok 3 verzus Gemini:

* Benchmarky: Grok 3 prekonal Gemini-2 Pro Google DeepMind v rôznych referenčných hodnotách [1].
* Chatbot Arena (LMSYS): Skorá verzia Grok 3 prekonala hlavné modely, ako je napríklad Gemini-2,0 Flash myslenie na chatbot aréne [1].
* MATH (AIMEâ 24): Na referenčnej hodnote matematiky (AIMEâ 24), Grok 3 skóroval 52, zatiaľ čo Gemini-2 Pro strelil 39 [4].
* Science (GPQA): V Science (GPQA), Grok 3 zaznamenal 75, prekonal Gemini-2 Pro, ktorý získal 65 [4].