偏见感知最小化:理解和降低私有 SGD 中的估计器偏差
💡
原文中文,约300字,阅读约需1分钟。
📝
内容提要
本研究探讨了样本梯度范数与DP-SGD中梯度估计偏差的关系,并提出了Bias-Aware Minimization(BAM)方法,用于降低私有梯度估计器的偏差。实证证据支持了在CIFAR-10、CIFAR-100和ImageNet-32数据集上的隐私-效用权衡。
🎯
关键要点
- 本研究探讨样本梯度范数与DP-SGD中梯度估计偏差的关系。
- 提出了Bias-Aware Minimization(BAM)方法以降低私有梯度估计器的偏差。
- 提供了在CIFAR-10、CIFAR-100和ImageNet-32数据集上的隐私-效用权衡的实证证据。
➡️