论文T2
CogArena:评测多模态智能体在交互行为实验中的表现
CogArena: Benchmarking Multimodal Agents on Interactive Behavioral Experiments
arXiv cs.HC · 发布于 2026-10-28 12:00 · 收录于 2026-10-28
摘要
研究者提出 CogArena 基准,包含十个社会科学与行为科学实验范式,智能体需通过标准网页浏览器完成与在线参与者相同的视觉刺激和响应界面。三级评分分别检查智能体是否完成任务、完成得有多准确、其数据是否呈现该范式在人类身上稳定出现的行为特征。四个多模态模型每个任务各运行十次,结果显示完成实验与复现行为特征并不等同,多场会话未能完成,完成者对一些特征稳定复现、对另一些则完全没有。研究者公开了任务、评分代码与接受新提交的公开排行榜。
为什么值得看:基准把行为实验搬进浏览器,并用三级评分区分能否完成与能否复现人类行为特征,可用来对照评估智能体产出的数据。
论文/研究Agent多模态行为数据
真知浩见出品