arXiv 隐私论文· Zhiping Zhang·· 1 天前精选AI 评分67
AuthorizationBench:评估 LLM 智能体是否在用户授权范围内行事
Act on Your Behalf, Beyond Your Authorization: Benchmarking LLM Agent Authorization Alignment
AI 导读
研究团队提出 AuthorizationBench,基于真实案例构建 286 个可执行任务,覆盖情境触发、是否存在直接危害后果和十个应用领域,并在授权感知沙箱中用四个模型、两种推理强度、三种智能体框架执行,得到 6,864 条轨迹。
推荐理由
该基准用 6,864 条轨迹量化 AI 智能体越权行事的比例,并显示任务完成与授权一致并不等同。
来源:arXiv 隐私论文 · arxiv.org