← к ленте

DiscoveryRSI-27B чаще совпадает с будущими исследованиями, чем GPT-6 и Claude Opus 5

1 нед

Авторы DiscoveryRSI сравнили гипотезы моделей с более поздними исследованиями: у DiscoveryRSI-27B доля совпадений составила 6,3%.

Исследование показывает, как можно проверять способность ИИ предлагать идеи, к которым позже приходят учёные.

  • DiscoveryRSI-27B показала более высокую долю совпадений с последующими публикациями, чем две сравниваемые модели.
  • Система формирует план проверки гипотез и рассматривает альтернативные объяснения.
  • Совпадение с опубликованной работой не подтверждает, что модель самостоятельно совершила открытие.
🔬 ИИ на 27 млрд параметров предлагает научные гипотезы, которые совпадают с последующими исследованиями чаще, чем у GPT-6 и Claude Opus 5. Авторы DiscoveryRSI сравнили гипотезы моделей с работами, опубликованными после даты отсечения обучающих данных. Доля совпадений: • DiscoveryRSI-27B — 6,3% • GPT-6 — 2,5% • Claude Opus 5 — 2,3%. Система развивает гипотезы, собирает доказательства, предлагает способы проверки и использует результаты предыдущих попыток, чтобы улучшать следующие. У каждой идеи должны быть план исследования, критерии проверки и альтернативные объяснения. Совпадение с публикацией ещё не означает доказанное открытие. Но это интересная проверка того, способен ли ИИ предлагать направления, к которым позже приходят исследователи. Модель и код доступны: 📄 https://arxiv.org/abs/2610.23839 💻 https://github.com/Gen-Verse/DiscoveryRSI 🔴 https://foundry-arena.rsi-arena.workers.dev/arena
DiscoveryRSI-27B чаще совпадает с будущими исследованиями, чем GPT-6 и Claude Opus 5

Кратко (AI)

Авторы DiscoveryRSI сравнили гипотезы моделей с научными работами, опубликованными после отсечения обучающих данных. DiscoveryRSI-27B совпала с более поздними исследованиями в 6,3% случаев против 2,5% у GPT-6 и 2,3% у Claude Opus 5; авторы отмечают, что такое совпадение само по себе не доказывает открытие.

Обсуждение

0
В

Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖