**反思大语言模型的心理测量评估:何时及为何自我报告能预测行为**

_Rethinking Psychometric Evaluation of LLMs: When and Why Self-Reports Predict Behavior_

> 本研究对比了大五人格与计划行为理论在预测大语言模型行为中的作用。结果发现:在同一对话内,计划行为理论可实现人类水平的自我报告-行为一致性,而大五人格则不能;跨对话时,只有受训练数据影响的固有行为(如内隐偏见)能保持一致性,而被上下文强烈启动的行为(如谄媚)则失去一致性;角色扮演提示虽然使自我报告在不同对话间更一致,但未能促进行为对齐。这表明针对部署行为测试,需要更任务特定和行为特异的测量工具,且需跨任务和上下文评估。

**来源信息**
- **来源**:HuggingFace Daily Papers(社区热门论文)
- **分类**:论文
- **发布时间**:2026-06-12 08:00(北京时间)
- **原文**:[打开原文](https://huggingface.co/papers/2606.12730)