Китайские ученые протестировали ChatGPT-4o, Gemini 2.0 Flash, DeepSeek-V3, Ernie 3.5 и Le Chat с помощью психологического опросника Big Five Inventory-2 (BFI-2), предназначенного для оценки пяти основных черт личности. Каждая модель 30 раз отвечала на 60 утверждений на английском и китайском языках. Исследование выявило заметные различия в ответах нейросетей в зависимости от языка.
- ChatGPT-4o: показатель открытости опыту снизился с 4,74 до 4,03 при переходе с английского на китайский язык.
- DeepSeek-V3: напротив, показатель открытости вырос с 4,38 до 4,81.
- Gemini 2.0 Flash: продемонстрировала более высокую дисциплинированность и крайне низкие показатели эмоциональной нестабильности.
- Le Chat: показала максимальную дружелюбность при взаимодействии на английском языке.
Ученые связывают обнаруженные различия с культурными особенностями обучающих данных и настройками безопасности моделей. Главный вывод исследования заключается в том, что язык взаимодействия способен влиять на поведение искусственного интеллекта. Поэтому использование нейросетей в качестве замены реальных респондентов в психологических и социологических опросах пока остается ненадежным подходом.