Исследователи представили arXiv-препринт о том, как меняются черты Big Five у LLM-агентов с заданной личностью (PC-Agents) после 11 крупных жизненных событий. Работа вводит бенчмарк BFI-Adapt для оценки направленности сдвигов и ранжирует 14 моделей. В сообществе работу обсуждают в контексте долгоживущих агентов: насколько психологически достоверна симуляция личности для ролевых и поддерживающих сценариев.
Суть
Авторы проверили, сдвигаются ли черты личности агентов при событийных сценариях (потеря работы, переезд, свадьба и подобное) в направлениях, известных из лонгитюдной психологии человека. Агенты дают измеримые сдвиги одинаково часто и для пар «событие-черта» с подтверждённым человеческим направлением, и для пар без него. Величина сдвигов обычно ниже человеческих эффектов, а разброс между персональными вариантами сжат в 3–4 раза.
Ключевые цифры
| Punkt | Detail |
|---|---|
| Событий | 11 |
| Черты | Big Five |
| Моделей | 14 |
| Сдвиги | измеримы, но слабее человеческих |
| Модераторы | пол и регион почти не влияют |
| Новый бенчмарк | BFI-Adapt |
Что неясно
Открытым остаётся вопрос, отражают ли сдвиги реальную динамику личности или стилистическую реакцию на формулировки сценария. Конвергенция с поведенческими выборами ограничена и зависит от модели. Проверки показывают устойчивость к retest-шуму и переформулировкам, но психометрическая валидность требует дальнейших исследований.
Вывод
Авторы резюмируют: текущие PC-Agents воспроизводят среднюю траекторию человеческой динамики личности, но не её форму. Практикам стоит учитывать это при проектировании долгоживущих ролевых и поддерживающих агентов.