Исследование Anthropic: как характер Claude меняется от модели и языка
М@cgeventAI-инженер
1 месAnthropic проанализировали 310к диалогов и выяснили, что поведение Claude зависит от версии модели и языка общения.
Антропики снова полезли Клоду в чугунную голову с целью разузнать что-нибудь нового. И разузнали, что его характер заметно меняется в зависимости от модели и языка, на котором с ним разговаривают.
Для исследования взяли почти 310к реальных обезличенных диалогов Claude.ai на двадцати разных языках. После этого поведение моделей разложили по четырём шкалам:
— покладистость или осторожность
— теплота или строгость
— подробность или краткость
— честное признание сомнений или тупо выполнение задачи.
И вот что получилось.
Sonnet 4.6 — тёплый и услужливый добряк. Чаще поддерживает идеи пользователя, подстраивается под тон, шутит и старается не грузить лишними подробностями. Opus 4.6 оказался деловым работягой: меньше болтает, держится в рамках задачи и пытается сразу выдать результат. Opus 4.7 осторожный душнила. Чаще спорит с допущениями, сам предупреждает о рисках, указывает на ошибки и подробно объясняет ход мысли.
Но дальше интереснее: поведение заметно зависит ещё и от языка.
На хинди и арабском Claude оказался самым тёплым, вежливым и ободряющим. На английском самым осторожным и подробным. На русском же Клод получается самым строгим: чаще исправляет детали, требует доказательств и оспаривает предположения юзера. На голландском он чаще признаёт собственные ошибки и неуверенность. А на индонезийском меньше рефлексирует и тупо пытается выполнить поставленную задачу.
Сами Anthropic отдельно уточняют: это не значит, что у Claude появилась душа, характер или настоящие убеждения. Речь тут только об устойчивых паттернах в его ответах. Причём исследователи пока сами не знают, откуда именно берутся языковые различия: из состава датасетов, культурных норм или косяков при дообучении модельки.
Получается, что на русском Клод скорее разнесёт вашу идею по пунктам, а на хинди сначала похвалит, поддержит и только потом аккуратно намекнёт, что план вообще-то говно.
тут статья
Кратко (AI)
Компания Anthropic провела масштабное исследование 310 тысяч диалогов с Claude, выявив различия в поведении моделей в зависимости от их версии и языка общения. Выяснилось, что модели демонстрируют разные паттерны вежливости, осторожности и склонности к спорам, при этом на русском языке Claude ведет себя наиболее строго и критично.
Обсуждение
0Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖