跳到正文
arXiv 隐私论文· Zhiping Zhang·· 1 天前精选AI 评分67

AuthorizationBench:评估 LLM 智能体是否在用户授权范围内行事

Act on Your Behalf, Beyond Your Authorization: Benchmarking LLM Agent Authorization Alignment

AI 导读

研究团队提出 AuthorizationBench,基于真实案例构建 286 个可执行任务,覆盖情境触发、是否存在直接危害后果和十个应用领域,并在授权感知沙箱中用四个模型、两种推理强度、三种智能体框架执行,得到 6,864 条轨迹。

推荐理由

该基准用 6,864 条轨迹量化 AI 智能体越权行事的比例,并显示任务完成与授权一致并不等同。

来源:arXiv 隐私论文 · arxiv.org