Anpropic's Claude 3.5 Sonnet-это новая и мощная генеративная модель искусственного интеллекта, которая превосходит конкурентов, таких как Chatgpt-4o в нескольких областях [1]. Во внутренней оценке кодирования агента, Claude 3,5 Sonnet решил 64% проблем, в то время как Claude 3 Opus решил 38% [1]. По рассуждениям на уровне выпускников он набрал 59% по сравнению с 53% CHATGPT-4O [1]. В рассуждениях о тексте Claude 3,5 Sonnet набрал 87%, опередив Chatgpt-4O (83%), Google Gemini (74%) и Meta's Llama (83%) [1]. Тем не менее, CHATGPT-4O был на 5% точнее, чем Claude 3,5 в решении проблем математики [1].
Данные Anpropic показывают, что через MMLU, GPQA, GSM8K, Math, MGSM, Humaneval, Drop, Big-Bench, Arc-Schallenge и Hellaswag (2]. Эти тесты охватывают широкий спектр знаний, от фактов и математики до рассуждения и генерации кода [2].
Модели Claude 3 от Anpropic, особенно Opus, обычно превосходят модели GPT-4 Openai и Google по различным задачам [3]. Claude 3 показал превосходную производительность в задачах кодирования, набрав 84,9%по критериям, таким как Humaneval, опередив GPT-4 (67%) и Gemini 1.0 Pro (67,7%) [3]. Claude 3 Sonnet также преуспел в сложных задачах количественного анализа, где GPT-4 и Gemini иногда боролись [3].
Anpropic расширился за пределы текста в визуальном вводе для обучения данных с семейством Claude 3 [7]. Модели Claude 3 также позволяют пользователям анализировать данные, включая изображения, диаграммы и документы, с помощью новой мультимодальной функции поддержки [4].
При выборе модели ИИ предприятия должны учитывать точность, скорость, конфиденциальность, простоту развертывания или обслуживания, а также стоимость [4].
Цитаты:
[1] https://www.euronews.com/next/2024/06/20/antpric-launches-its-latest- Mostful-Generative-Model
[2] https://synthedia.substack.com/p/anthropic-says-it-just-dethroned
[3] https://www.voiceflow.com/articles/anthropic-ai
[4] https://www.pymnts.com/news/artififial-intelligence/2024/how-anthropics-new-claude-3-ai-model-stacks-up-against-the-competition/
[5] https://cloud.google.com/solutions/anthropic
[6] https://www.promptituide.io/post/navigating-the-ai-landscape-openai-vs-anpropic-vs-google-ai-in-2024
[7] https://www.nextplatform.com/2024/03/05/anthropic-fires-off-performance-and-price-salvos-in-ai-war/
[8] https://big-agi.com/blog/ai-api-comparison-2024-anpropic-s-google-vs-openai