Incremental Performance Monitoring with Uncertainty Awareness and Active Labeling Interventions
💡
原文英文,约100词,阅读约需1分钟。
📝
内容提要
本研究提出了一种增量不确定性意识性能监控(IUPM)方法,旨在解决机器学习模型在渐进分布漂移下的监控问题。实验结果表明,IUPM在多种场景中优于现有方法,能够更有效地指导标注获取。
🎯
关键要点
- 本研究提出了一种增量不确定性意识性能监控(IUPM)方法。
- IUPM旨在解决机器学习模型在渐进分布漂移下的监控问题。
- 渐进分布漂移会导致模型准确性显著下降,但难以察觉。
- IUPM通过最优传输建模渐进漂移,量化性能预测的不确定性。
- 引入主动标注程序以在有限的标注预算下恢复可靠估计。
- 实验结果表明,IUPM在多种渐进漂移场景中的性能优于现有基线。
- IUPM对不确定性的考量能更有效地指导标注获取。
➡️