💡
原文中文，约3100字，阅读约需8分钟。
📝
内容提要
本文提出了一种新型动画上色模型ColorAnime，基于视频扩散模型，能够根据参考图像自动将草图序列转化为高质量彩色动画。该模型通过高低层次颜色提取器实现颜色一致性和细粒度控制，克服了现有方法在大幅运动场景中的不足，实验结果表明其在颜色准确性和视频质量方面表现优异。
🎯
关键要点
- 提出了一种新型动画上色模型ColorAnime，基于视频扩散模型。
- ColorAnime能够根据参考图像自动将草图序列转化为高质量彩色动画。
- 模型通过高低层次颜色提取器实现颜色一致性和细粒度控制。
- 克服了现有方法在大幅运动场景中的不足，表现出色。
- 动画上色是动画制作中的关键环节，现有模型在颜色一致性和稳定性方面存在挑战。
- 自动化处理动画着色过程可以降低劳动成本，加速创作。
- 现有方法通常单独处理每一帧，导致闪烁和不一致。
- ColorAnime通过合并草图潜在表示与噪声，进行视频生成。
- 设计了High-Level Color Extractor和Low-Level Color Guider来提取颜色信息。
- 采用多阶段训练策略以确保各模块有效性，保证时域一致性。
- 实验结果表明ColorAnime在颜色准确度、视频质量和草图对齐程度方面表现优异。
➡️
