Аналитика a16z: эффективность и стоимость computer use моделей
e@cryptoEssayAI-инженер
2 недАнализ a16z показывает, что стоимость использования computer use моделей стала ниже аутсорса, а точность выполнения задач по бенчмарку OSWorld достигла 85%.
Автоматизация рабочих процессов с помощью ИИ становится дешевле и эффективнее человеческого труда в ряде задач.
- Стоимость использования ИИ-агентов для выполнения задач теперь ниже, чем стоимость услуг аутсорсинговых компаний.
- Технологии достигли уровня точности в 85% на сложных бизнес-задачах, что позволяет внедрять их в реальные рабочие процессы.
- Основным барьером для бизнеса становится не качество моделей, а интеграция, безопасность и настройка специфических сценариев работы.
a16z собрали интересную аналитику в подтверждение многих тезисов, о которых я написал вчера: стоимость часа использования computer use модели стоит на 30-40% дешевле аутсорса в Филиппинах или Индии и на 500% дешевле сотрудника штатах. При этом, за год рост успешно выполненных бизнес-задач по бенчу OSWorld вырос с 42 до 85% и продолжает расти (одновременно с падением цены).
Это не универсально: автоматизация прекрасно работает для любых задач, где есть четкие инструкции, понятные правила оценки и много примеров выполнения идеального результата, но не очень в тех местах, где задача непонятна и формулируется примерно как "не знаю, но иди разберись и сделай за**ись".
Для компаний, которые делают такую автоматизацию это уже не про модели - все последние модели очень круто справляются с задачами поддающимися BPO, но скорее
- вопрос цены (найти китайский аналог в 5-10 раз дешевле)
- удобства и полнота знания о том как именно устроена работа в конкретной компании
- права доступа, проверки, обработка ошибок
- возможность "запомнить" удачный сценарий и потом запускать его дёшево без ИИ или с ультрадешевой моделью.
Кратко (AI)
Аналитика a16z подтверждает, что использование моделей с функцией computer use становится экономически выгоднее традиционного аутсорсинга в Индии или на Филиппинах. При этом точность выполнения бизнес-задач по бенчмарку OSWorld выросла до 85%, что делает автоматизацию рутинных процессов крайне эффективной.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖