回到最新动态
论文更新 / THE SIGNAL

ALMANAC:带行动级心智模型标注的人类协作数据集

Humans' ALMANAC: A Human Collaboration Dataset of Action-Level Mental Model Annotations for Agent Collaboration

重要性 4.5 AI 辅助整理

论文发布带行动级心智模型标注的人类协作数据集 ALMANAC。

资讯摘要

论文提出 ALMANAC,一个基于社会科学经典双人路径任务 Map Task 构建的协作数据集,包含 2,987 个协作行动,每个行动配有理论驱动的心智模型标注,记录参与者自身推理、对伙伴意图的感知和对团队目标的感知。作者在六个 LLM 上评测预测人类下一轮行为与心智模型的能力,报告该数据集可用于评估模型模拟人类协作行为及推断其心智模型的能力。

要点速读

  1. ALMANAC 含 2,987 个协作行动,每个行动附有自我推理、伙伴意图感知、团队目标感知三类心智模型标注。
  2. 数据源自社会科学经典双人路径任务 Map Task。
  3. 作者在六个 LLM 上基准测试下一轮行为与心智模型预测,称结果体现该数据集的评估价值。

中文摘要由 AI 根据公开来源生成,可能存在理解偏差;具体能力、数字、开放时间等信息请以原文为准。
采集于 2026/11/4 08:00:28(北京时间)。 arXiv 日期为本次公告时间,论文初次投稿日期请查看原文版本记录。

阅读 arXiv · cs.CL 原文arxiv.org · 在新窗口打开