Agent 策略-价值审计：分离金融 LLM Agent 的迁移组合与事件选择

arXiv:2610.04040v1 公告类型：新发布 摘要：金融 LLM Agent 的评估通常是将端到端收益与基线进行比较，并对配对差值进行零假设检验。这衡量的是部署 Agent 是否改变了实际表现，但无法单独识别事件选择能力。一个频繁将仓位从空仓转为做多的 Agent，即使完全随机选择事件，也能在整体上行的事件池中获得正的配对收益。我们提出 Agent Policy-Value Audit（Agent 策略价值审计）方法：固定观测到的每种有序动作变化类型的次数，并将其在符合条件的事件间随机重新分配。这些重新分配的平均收益即为组合基准（composition benchmark）；观测到的部署价值与该基准之差即为选择价值（selection value）。在基于真实财报事件收益的半合成基准测试中，以零为中心的配对检验在 11.6% 的无能力重复实验中错误地将被动敞口归因于选择能力，而经过转换匹配的审计方法将该比例降至 5.3%。对 44 家美国面向消费者公司的 723 次财报事件进行回溯分析，审计将该 Agent 的部署总价值 +15.2 bps/事件 分解为 +25.8 的组合基准和 -10.6 的选择价值。该 Agent 的表现未显著优于经匹配的随机分配。对金融 Agent 的评估应将部署价值与事件选择价值分开报告。