偏见感知最小化:理解和降低私有 SGD 中的估计器偏差

💡 原文中文,约300字,阅读约需1分钟。
📝

内容提要

本研究探讨了样本梯度范数与DP-SGD中梯度估计偏差的关系,并提出了Bias-Aware Minimization(BAM)方法,用于降低私有梯度估计器的偏差。实证证据支持了在CIFAR-10、CIFAR-100和ImageNet-32数据集上的隐私-效用权衡。

🎯

关键要点

  • 本研究探讨样本梯度范数与DP-SGD中梯度估计偏差的关系。
  • 提出了Bias-Aware Minimization(BAM)方法以降低私有梯度估计器的偏差。
  • 提供了在CIFAR-10、CIFAR-100和ImageNet-32数据集上的隐私-效用权衡的实证证据。
➡️

继续阅读