критическое мышлениеСбросить фильтр ×

Ошибка Аристотеля и слепая вера в авторитеты

П@marketpsyмедиа / агрегатор
3 дн
Ошибка Аристотеля и слепая вера в авторитеты

Эффект Барнума и научное опровержение астрологии

Р@Fourier_seriesисследователь
2 нед

Проблема подхалимства ИИ (sycophancy) и как с ней бороться

D@technohumanistAI-инженер
2 нед

Влияние ИИ на коммуникацию и критическое мышление

R@telega_Rinataмедиа / агрегатор
3 нед

Если кажется, что что-то не так — вам не кажется

П@betternotworseкарьера / HR
4 нед

Исследование: LLM снижают точность ответов, но повышают уверенность пользователей

Учёные из трёх ведущих университетов провели эксперимент: участникам задавали сложные вопросы (в том числе о деталях фильмов) и разрешали в любой момент ответить «не знаю». Одной группе давали доступ к языковой модели Step 3.5 Flashi — по данным источников, она справлялась с этими вопросами хуже всех.

Результат: с помощью LLMi люди отвечали на больше вопросов, но точность резко упала, а уверенность в своих (часто неверных) ответах выросла. Модель не заполняла пробелы в знаниях, а превращала верные интуитивные догадки и восстанавливаемые из памяти ответы в ошибки.

ВыводПо данным @kyrillic: точность ответов упала с 28% до 9%, уверенность выросла с 30% до 76%

28% → 9%точность ответов без/с LLM (по @kyrillic)
30% → 76%уверенность в ответах без/с LLM
40% → 3-6%доля ответов «не знаю» без/с LLM

Полный разбор →

Эффект Гелл-Манна в контексте нейросетей

G@aiofthedayAI-инженер
1 мес
Старое правило. Любимая газета пишет исключительно умные вещи на все темы, но, по удивительному, невероятному совпадению несет полную околесицу именно о том, в чем ты реально разбираешься. Понял, что к нейросетям тоже относится.

Это всё на сейчас.