Sonnet Clude 3,5 Antropic-це нова і потужна генеративна модель AI, яка перевершує конкурентів, таких як Chatgpt-4o в декількох областях [1]. У внутрішній оцінці кодування агента Claude 3,5 сонет вирішив 64% проблем, тоді як Claude 3 Opus вирішив 38% [1]. За міркуваннями на рівні випускників він набрав 59% порівняно з 53% Chatgpt-4o [1]. У міркуванні над текстом, Claude 3,5 Sonnet набрав 87%, перевершивши чатгпт-4о (83%), Gemini Google (74%) та Llama Meta (83%) [1]. Однак Chatgpt-4o був на 5% точнішим, ніж Клод 3,5 у вирішенні проблем з математикою [1].
По всьому MMLU, GPQA, GSM8K, Math, MGSM, Humaneval, Drop, Big-Bench-Hard, Arc-Challenge та Hellaswag inchmarks, дані антропіки дозволяють припустити, що це перевершує GPT-4 [2]. Ці тести охоплюють широкий спектр знань, від фактів та математики до міркувань та генерування коду [2].
Моделі Anthropic's Claude 3, особливо OPUS, як правило, перевершують моделі GPT-4 та Gemini OpenAI та моделі GEMINI на різних завданнях [3]. Claude 3 показав чудову продуктивність у кодуванні завдань, набравши 84,9%на орієнтири, такі як Humaneval, перевершуючи GPT-4 (67%) та Gemini 1,0 Pro (67,7%) [3]. Claude 3 Sonnet також відзначився складними завданнями кількісного аналізу, де іноді боролися GPT-4 та Gemini [3].
Антропік розширився поза текстом на візуальний внесок для даних про навчання з родиною Claude 3 [7]. Моделі Claude 3 також дозволяють користувачам аналізувати дані, включаючи зображення, діаграми та документи, через свою нову функцію багатомодальної підтримки [4].
Вибираючи модель AI, підприємства повинні враховувати точність, швидкість, конфіденційність, простоту розгортання або обслуговування та вартість [4].
Цитати:
[1] https://www.euronews.com/next/2024/06/20/antropic-launches-its-latest-most-power-generative-ai-model
[2] https://synthedia.substack.com/p/antropic-says-it-just-dethroned
[3] https://www.voiceflow.com/articles/antropic-ai
[4] https://www.pymnts.com/news/artificial-intelligence/2024/how-anthropics-new-claude-3-ai-model-stacks-acgainst-thecompetition/
[5] https://cloud.google.com/solutions/antropic
[6] https://www.promptitude.io/post/navitating-the-ai-landscape-openai-vs-antropic-vs-google-ai-In-2024
[7] https://www.nextplatform.com/2024/03/05/antphic-fires-fter-performance-and-price-salvos-in-ai-war/
[8] https://big-agi.com/blog/ai-api-comparison-2024-antropic-vs-google-vs-openai