本研究首次探讨文本到图像生成模型与人类偏好对齐的问题，提出Diff-Instruct++方法，显示出其快速收敛和无数据对齐的潜力，实验结果表明其在美学评分及多个指标上优于其他模型。