อะไรคือความแตกต่างที่สำคัญในข้อมูลการเตรียมการที่ใช้สำหรับ Grok 3 และ GPT-4O

1. โครงสร้างพื้นฐานการฝึกอบรมและกำลังคำนวณ: Grok 3 ได้รับการฝึกฝนเกี่ยวกับ Colossus Supercluster ของ Xai ซึ่งเป็นหนึ่งในกลุ่มการฝึกอบรม AI ที่ใหญ่ที่สุดในโลกโดยใช้ Nvidia H100 GPU กว่า 100,000 ตัว สิ่งนี้ให้พลังงานคำนวณมากขึ้นอย่างมีนัยสำคัญเมื่อเทียบกับรุ่นก่อนหน้านี้ทำให้สามารถฝึกอบรมได้อย่างกว้างขวางในระดับสูง [1] [3] ในทางตรงกันข้ามรายละเอียดเฉพาะเกี่ยวกับโครงสร้างพื้นฐานการฝึกอบรมของ GPT-4O นั้นไม่ได้มีรายละเอียดสาธารณะ แต่เป็นที่ทราบกันดีว่า OpenAI ยังใช้ทรัพยากรการคำนวณขนาดใหญ่

2. ข้อมูลการฝึกอบรม: Grok 3 ได้รับการฝึกฝนเกี่ยวกับการผสมผสานของข้อมูลอินเทอร์เน็ตที่เปิดเผยต่อสาธารณะและชุดข้อมูลที่เป็นกรรมสิทธิ์จาก X (เดิมคือ Twitter) ให้การเข้าถึงข้อมูลเรียลไทม์และเหตุการณ์ปัจจุบัน [1] [7] GPT-4O เช่นเดียวกับรุ่น GPT อื่น ๆ ได้รับการฝึกฝนในชุดข้อมูลอินเทอร์เน็ตมากมาย แต่ขาดการรวมข้อมูลแบบเรียลไทม์ที่ Grok 3 ได้รับประโยชน์จาก

3. บริบทหน้าต่างและการประมวลผลข้อมูล: Grok 3 มีหน้าต่างบริบทสูงถึง 1 ล้านโทเค็นทำให้สามารถประมวลผลเอกสารที่กว้างขวางและมีความซับซ้อนได้อย่างมีประสิทธิภาพ [1] ในขณะที่ GPT-4O ยังมีหน้าต่างบริบทขนาดใหญ่ Grok 3 ได้รับการเน้นเฉพาะสำหรับความสามารถในการจัดการลำดับที่ยาวอย่างมีประสิทธิภาพ

4. การเข้าถึงข้อมูลแบบเรียลไทม์: Grok 3 ประโยชน์จากการเข้าถึงข้อมูลแบบเรียลไทม์ผ่านการรวมกับ X ซึ่งช่วยเพิ่มความสามารถในการหารือเกี่ยวกับเหตุการณ์ปัจจุบันและวิเคราะห์ข้อมูลใหม่ [5] GPT-4O ไม่มีการเข้าถึงแบบเรียลไทม์เนื่องจากข้อมูลการฝึกอบรมมักจะถูกตัดออกในเวลาที่กำหนด