У результатах пошуку недостатньо інформації, щоб безпосередньо відповісти на запит про обчислювальні компроміси використання гібридної моделі Anthropic. Однак результати пошуку дають певну інформацію про моделі антропіки та обчислювальні стратегії.
Анропічний використовує конституційний ШІ (CAI) у своїх моделях Claude, що включає синтетичні дані [2]. Вони вважаються лідером у використанні синтетичних даних [2]. Додавання більшої кількості контексту в процесі робить необхідні можливості моделі значно вищими для синтетичних даних критики, а системи важче інженер [2]. Анропічним висновком висувається, що багато їхніх методів насправді не працюють без їх моделі нагородження / RLHF з параметрами 50B та вгору [2].
Запуск найсучасніших моделей є дорогим з точки зору інфраструктури та обчислення, а антропічні потреби в інвестиціях та потоках доходів для роботи над поточними та майбутніми моделями [5].
Цитати:[1] https://www.reddit.com/r/singularity/comments/1dyhjwc/the_problem_with_antphic/
[2] https://www.interconnects.ai/p/llm-synthetic-data
[3] https://ailabwatch.org/companies/antropic/
[4] https://www.techrepublic.com/article/antropic-claude-large-language-model-research/
[5] https://www.lesswrong.com/posts/mnpbctmzmqd7yk4q8/my-erstanding-of-antropic-strategy
[6] https://www.inc.com/ben-sherry/antropic-just-announced-its-most-advanced-ai-model-yet-the-are-its-top-use-cases.html
[7] https://research.contrary.com/company/antropic
[8] https://cloud.google.com/blog/products/ai-machine-learning/anthropic-claude-3-opus-and-tool-use-are-generally-avable-on-vertex-ai