跳到正文
arXiv 隐私论文· Shilin Zhang·· 1 天前AI 评分29

频谱还不够:无数据预条件在差分隐私学习中的随机矩阵解释

Spectrum Is Not Enough: A Random-Matrix Account of Data-Free Preconditioning for Differentially Private Learning

AI 导读

针对无数据预条件方法 DP-KFC 用合成探针替代私有数据构建 KFAC 的 Kronecker 因子,研究者用随机矩阵理论刻画探针能重建什么:在 A⊗G 分解中,误差信号因子 G 与激活因子 A 中由架构决定的体相可无数据重建,仅 A 的数据诱导尖峰不可。

来源:arXiv 隐私论文 · arxiv.org