Компания Keenable вышла из режима стелс-разработки, представив собственный агентский поисковый движок. Разработчики заявляют, что их решение превосходит конкурентов, включая Exai, по соотношению цены и качества.
Одновременно с запуском компания представила Needlei — динамический бенчмарк для оценки поисковых систем, который ежедневно обновляется, чтобы исключить возможность «зазубривания» ответов моделями.
5источников данных в бенчмарке
- Бенчмарк Needle использует пять источников данных: новости, научные статьи, финансовую отчетность компаний, американские судебные дела и логи агентов с платформы HuggingFace.
- Разработчики Keenable критикуют существующие бенчмарки (BrowseComp, DeepSearchQA, SimpleQA) за статичность и утечку данных в обучающие выборки моделей.
- Помимо основного поиска, компания анонсировала скорый релиз инструмента Web Query Languagei.
- В ходе тестирования Needle разработчики Keenable отметили, что, помимо их собственного решения, адекватные результаты показывает только поисковик Exa.
- Команда Keenable утверждает, что многие конкуренты на рынке поисковых движков копируют результаты друг у друга.
В ближайшее время компания планирует выпустить инструмент Web Query Language, расширяющий возможности взаимодействия с поисковым движком.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖