研究称 MoE 路由遥测泄露成员信息
热点事件历史事件
研究称 MoE 路由遥测泄露成员信息
1 篇报道1 个报道来源4 天前更新
先了解这件事
AI 综述
一项 arXiv 隐私论文提出路由增强的成员推断攻击:把常规输出信号与聚合路由特征结合,用独立微调的影子模型训练成员分类器,再迁移到目标模型。作者 Yixin Tan 称,在三种 MoE 架构、三个数据域共九种设置中,路由遥测使 1% 假阳性率下的真阳性率比强输出信号集成提升 2.7 至 9.4 个百分点。 该效果在完整微调、冻结路由器训练、LoRA 和指令微调下均持续存在,说明 MoE 的路由遥测可能成为成员推断的新泄露面。
AI 根据报道生成 · 2 天前更新
最新进展10月7日 15:26
研究:MoE 路由遥测泄露成员信息,成员推断攻击效果提升报道时间线
沿着报道,了解事件的不同侧面。
10月7日
- arXiv 隐私论文精选研究:MoE 路由遥测泄露成员信息,成员推断攻击效果提升
研究提出一种路由增强的成员推断攻击,将常规输出信号与聚合路由特征结合,用独立微调的影子模型训练成员分类器并迁移到目标模型。在三种 MoE 架构和三个数据域共九种设置中,路由遥测使 1% FPR 下的 TPR 相比强输出信号集成提升 2.7 至 9.4 个百分点,且在完整微调、冻结路由器训练、LoRA 和指令微调下均持续存在。