RHanDS: 用解耦的结构和风格指导来改善生成图像中的畸形手部

💡 原文中文,约400字,阅读约需1分钟。
📝

内容提要

本文介绍了一种新颖的姿势条件的人体图像生成方法,通过训练手生成器产生手图像及其分割掩模,并使用改进的ControlNet模型绘制生成的手周围的身体,最终得到优于现有技术的姿势准确性和图像质量。该方法提高了生成手部的质量,并改进了对手势的控制能力。

🎯

关键要点

  • 提出了一种新颖的姿势条件的人体图像生成方法。
  • 生成过程分为两个阶段:手的生成和在手周围绘制身体。
  • 手生成器在多任务设置中训练,以产生手图像及其分割掩模。
  • 使用改进的ControlNet模型在第二阶段绘制身体,产生最终结果。
  • 引入混合技术,在第二阶段中保留手部细节,结合两个阶段的结果。
  • 实验评估显示该方法在姿势准确性和图像质量上优于现有技术。
  • 在HaGRID数据集上验证了方法的有效性。
  • 该方法提高了生成手部的质量,并改进了对手势的控制能力。
➡️

继续阅读