← к ленте

Beat the Robot: проверка чувства вкуса у людей и AI

С@startupofthedayавтор про «startups»
1 мес

Обзор проекта Beat the Robot, который сравнивает способность людей и LLM предсказывать популярность твитов в формате игры.

Эксперимент показывает, что AI уже способен конкурировать с людьми в оценке контента и понимании трендов.

  • Результаты теста демонстрируют отсутствие значительного преимущества человека перед AI в предсказании виральности.
  • Проект наглядно иллюстрирует текущие возможности LLM в задачах, требующих «чувства вкуса» или интуиции.
  • Для SMM-специалистов это сигнал о том, что AI-инструменты становятся эффективными помощниками в аналитике контента.
Сравниться с AI Говорят, у людей есть чувство вкуса, а у LLM его нет, и это, дескать, наше преимущество, не заменят нас роботы. Если вы пропустили – вполне серьезная позиция, полтора года обсуждений и статьи в New York Times, а он фигню писать не будет. #стартапдня Beat the Robot дает возможность объективно проверить остроту своих чувств – и заодно сравнить её с AI, да ещё и в форме игры. Вам показывают два твита из одного аккаунта с одинаковой ссылкой. Задача – угадать, какой из них чаще репостили, то самое чувство вкуса для SMM-щика. На другой стороне барьера – искусственный интеллект, он получает те же твиты и решает ту же задачу. Результат немного предсказуем. Я набрал 11 баллов из 20 возможных – трактую это как строгие 50% на угадывание плюс чуть-чуть везения в конкретной партии. 6 разных LLM получили от 9 до 13 очков, в сумме 66/120. Этот суммарный перевес над монеткой тоже можно объяснить случайностью, но вероятность истинно положительного вкуса все же выше моей, раз попыток было больше. Если же не думать о доверительных интервалах, то мы строго вничью сыграли. Монетизации у Beat the Robot, разумеется, нет никакой. Основатель им для души и научных изысканий занимается. Вайбкодинг интересные вещи позволяет сделать без больших усилий. https://beat-the-robot.peacetech.vc/ #насвои #россия #израиль #ai

Кратко (AI)

Автор анализирует проект Beat the Robot, предлагающий пользователям угадать, какой из двух твитов набрал больше репостов. Результаты эксперимента показывают, что люди и современные LLM справляются с этой задачей примерно на одном уровне, что ставит под сомнение тезис об уникальном «чувстве вкуса» человека.

Обсуждение

0
В

Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖