量子位
·
ControlNet作者新项目爆火：仅一张图生成25秒绘画全过程！不到一天GitHub揽星600+
💡
原文中文，约1500字，阅读约需4分钟。
📝
内容提要
ControlNet作者张吕敏发布了新项目Paints-Undo，能将图像拆解成绘画过程视频。项目在GitHub上获得了600+星，受到网友好评。Paints-Undo包含多个模型，展示了绘画行为。发布了两个型号，可生成单帧或多帧视频。项目代码库提供本地部署方式。
🎯
关键要点
- ControlNet作者张吕敏发布新项目Paints-Undo，能将图像拆解成绘画过程视频。
- 项目在GitHub上发布不到24小时，获得600+星，受到网友好评。
- Paints-Undo包含多个模型，展示了各种人类绘画行为，包括素描、勾线、上色等。
- 发布了两个型号：paints_undo_single_frame和paints_undo_multi_frame。
- 单帧模型基于SD1.5架构，输入一张图和一个操作步骤，输出一张图。
- 多帧模型基于VideoCrafter，输入两张图片，输出16帧中间帧，结果更一致但处理速度较慢。
- 代码库默认方法是结合使用单帧和多帧模型生成视频。
- 项目测试需要24GB显存的Nvidia 4090或3090TI，处理一张图需5-10分钟。
- 生成视频时长为25秒，帧率为4FPS，分辨率为320×512、512×320等。
- 除了生成完整视频，还可以生成线稿绘制过程或不同精细程度的线稿。
❓
延伸问答
Paints-Undo项目的主要功能是什么？
Paints-Undo项目能够将图像拆解成绘画过程视频，展示从线稿到上色的全过程。
Paints-Undo在GitHub上发布后获得了多少星？
Paints-Undo在GitHub上发布不到24小时，获得了600+星。
Paints-Undo包含哪些模型？
Paints-Undo包含单帧模型和多帧模型，分别为paints_undo_single_frame和paints_undo_multi_frame。
使用Paints-Undo生成视频需要什么样的硬件配置？
生成视频需要24GB显存的Nvidia 4090或3090TI，理论上16GB显存也够用。
Paints-Undo的多帧模型与单帧模型有什么区别？
多帧模型输入两张图片，输出16帧中间帧，结果更一致但处理速度较慢；单帧模型则基于一张图和一个操作步骤输出一张图。
如何在本地部署Paints-Undo项目？
可以通过项目的GitHub代码库进行本地部署，具体步骤在代码库中有说明。
🏷️
标签
➡️
