Incremental Performance Monitoring with Uncertainty Awareness and Active Labeling Interventions

💡 原文英文,约100词,阅读约需1分钟。
📝

内容提要

本研究提出了一种增量不确定性意识性能监控(IUPM)方法,旨在解决机器学习模型在渐进分布漂移下的监控问题。实验结果表明,IUPM在多种场景中优于现有方法,能够更有效地指导标注获取。

🎯

关键要点

  • 本研究提出了一种增量不确定性意识性能监控(IUPM)方法。
  • IUPM旨在解决机器学习模型在渐进分布漂移下的监控问题。
  • 渐进分布漂移会导致模型准确性显著下降,但难以察觉。
  • IUPM通过最优传输建模渐进漂移,量化性能预测的不确定性。
  • 引入主动标注程序以在有限的标注预算下恢复可靠估计。
  • 实验结果表明,IUPM在多种渐进漂移场景中的性能优于现有基线。
  • IUPM对不确定性的考量能更有效地指导标注获取。
➡️

继续阅读