Hvordan sammenligner GROK 3s ytelse med GPT-4O og Gemini

Grok 3 kontra GPT-4O:
* Benchmarks: GROK 3 har vist overlegen ytelse på flere benchmarks sammenlignet med GPT-4O [1] [4]. Disse inkluderer matematikk (AIMEâ 24), Science (GPQA) og koding (LCB OCT-feb) [1]. GROK 3 scoret 52 i matematikk, 75 i vitenskap og 57 i koding, og overgikk GPT-4O i disse områdene [1] [4].
* Språkforståelse: GROK 3 oppnådde 94,2% nøyaktighet i språkforståelsesprøver, og overgikk litt chatgpts 92,8% [2].
* Koding: GROK 3 er angivelig 1,2x raskere enn chatGPT i kodegenereringshastighet, med en gjennomsnittlig responstid på 0,8 sekunder [2].
* Arena-poengsum: En tidlig versjon av GROK 3, referert til som "Chocolate", var den første AI som oversteg en poengsum på 1400 i LMSYS Chatbot Arena, og overgikk GPT-4O [4].
* Resonnement og sanntidsdata: GROK 3 viser styrke i matematisk resonnement, kodingsoppgaver, dataanalyse i sanntid og aktuelle hendelsesdiskusjoner [2].
* Trening: GROK 3 er opplært ved hjelp av sanntidsdata fra X (tidligere Twitter), og gir dem oppdatert informasjon [2]. Den ble trent på Xais Colossus Supercluster, utstyrt med 100 000 GPUer [2].

Grok 3 kontra Gemini:

* Benchmarks: GROK 3 har overgått Google DeepMinds Gemini-2 Pro på forskjellige målestokker [1].
* Chatbot Arena (LMSYS): Den tidlige versjonen av GROK 3 overgikk hovedmodeller som Gemini-2.0 Flash Thinking on the Chatbot Arena [1].
* Matematikk (AIMEâ 24): På matematikk (AIMEâ 24) scoret GROK 3 52, mens Gemini-2 Pro scoret 39 [4].
* Science (GPQA): I Science (GPQA) scoret GROK 3 75, og overgikk Gemini-2 Pro, som scoret 65 [4].