真知浩见出品论文T2
Annotrace：智能体轨迹的步骤级标注工作台
Annotrace: A Workbench for Step-Level Annotation of Agent Traces
arXiv cs.HC · 发布于 2026-10-28 12:00 · 收录于 2026-10-28
摘要
Annotrace 工作台把智能体轨迹转成有序嵌套步骤列表，用于步骤级人工-AI 联合标注。它支持 OpenTelemetry GenAI、LangSmith、Langfuse 等六种格式，前沿模型从轨迹样本提出初始标签集。多智能体问答语料上，它精确复现此前人工的 235 个标注单元，两个模型标注一致率为 91%（κ=0.82）。
论文/研究转写/编码Agent