A Conformal Risk Control Framework for Granular Word Assessment and Uncertainty Calibration of CLIPScore Quality Estimates
💡
原文英文,约100词,阅读约需1分钟。
📝
内容提要
本研究提出了一种保形风险控制框架,旨在解决图像标题评估指标的局限性,特别是对单个词错误的细粒度评估和不确定性校准,从而显著提升了CLIPScore的可靠性。
🎯
关键要点
-
本研究探讨了当前图像标题评估指标的局限性,特别是对单个词错误的细粒度评估不足。
-
现有的评估方法依赖于单点质量估计,未考虑不确定性。
-
提出了一种保形风险控制框架,用于生成和校准CLIPScore分布。
-
该框架显著提升了标题评估指标的可靠性。
➡️