Сравнение производительности и стоимости Opus 5.5 и Astra
F@FuturisAI-инженер
1 месАнализ эффективности новой модели Opus 5.5 от Anthropic в сравнении с Astra на основе метрики GDPval-AA и стоимости выполнения задач.
Новая модель от Anthropic предлагает более высокую производительность при значительно меньших затратах, что меняет экономику использования ИИ в бизнесе.
- Opus 5.5 показывает более высокие результаты в профессиональных задачах по сравнению с Astra.
- Стоимость выполнения задач на Opus 5.5 снижена на 81% относительно конкурента.
- Высокое потребление выходных токенов может влиять на итоговую стоимость при работе с большими объемами данных.
первые тесты, ну какого-то монстра создали Антропики, ждём чем ответят OpenAI.
На графике GDPval-AA, который оценивает выполнение профессиональных рабочих задач, Opus получает примерно 1575 Elo за $0,85 на задачу, а лучшая показанная конфигурация Astra около 1542 Elo за $4,50. То есть оценка чуть выше, а расчётная стоимость примерно на 81% ниже. Но также обращают внимание, что на max Opus 5.5 расходует больше выходных токенов среди всех моделей.
Кратко (AI)
В сети появились первые тесты модели Opus 5.5 от компании Anthropic, демонстрирующие её превосходство над конфигурацией Astra в профессиональных задачах. Модель показывает более высокий рейтинг Elo при значительно меньшей стоимости выполнения запроса, однако потребляет больше выходных токенов.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖