科研 agent 在「看起来像科学」：清华 Jie Tang RIDAR，F1 85.2%、干预 −36.8%

查看PDF HTML（实验性）

摘要：自主研究代理越来越多地用于自动化大量科学研究，但它们容易违反研究诚信（RIV）：这些行为会损害研究过程的有效性、可重复性或忠实性。我们提出了RIDAR，一个用于自动检测和运行时干预RIV的框架。首先，我们介绍了RIVT，一个涵盖整个研究生命周期14种RIV类型的全面分类法。基于RIVT，我们提出了RIDAR-post-hoc，一个用于检测代理轨迹中RIV的框架。RIDAR-post-hoc在RIV-Gold基准测试中实现了85.2%的F1性能，该基准测试是一个RIV检测基准，包含60条专家标注的轨迹。将RIDAR-post-hoc应用于RIV-Wild数据集，该数据集包含50个不同研究任务的300条代理轨迹，我们在99.7%的轨迹中检测到3,964个RIV实例，揭示了当前代理中RIV的普遍性。最后，我们提出了RIDAR-runtime，一个用于在代理运行时动态检测和纠正RIV的框架。RIDAR-runtime有效地将任务完成时剩余的代理RIV减少了36.8%。我们将发布我们的代码和数据，以促进未来的研究。

投稿历史

从：Jiening Siow [查看电子邮件]
[v1] 周四，22 Oct 2026 14:43:36 UTC（857 KB)