量子位
·
ControlNet作者新项目爆火：仅一张图生成25秒绘画全过程！不到一天GitHub揽星600+
内容提要
ControlNet作者张吕敏发布了新项目Paints-Undo，能将图像拆解成绘画过程视频。项目在GitHub上获得了600+星，受到网友好评。Paints-Undo包含多个模型，展示了绘画行为。发布了两个型号，可生成单帧或多帧视频。项目代码库提供本地部署方式。
关键要点
-
ControlNet作者张吕敏发布新项目Paints-Undo，能将图像拆解成绘画过程视频。
-
项目在GitHub上发布不到24小时，获得600+星，受到网友好评。
-
Paints-Undo包含多个模型，展示了各种人类绘画行为，包括素描、勾线、上色等。
-
发布了两个型号：paints_undo_single_frame和paints_undo_multi_frame。
-
单帧模型基于SD1.5架构，输入一张图和一个操作步骤，输出一张图。
-
多帧模型基于VideoCrafter，输入两张图片，输出16帧中间帧，结果更一致但处理速度较慢。
-
代码库默认方法是结合使用单帧和多帧模型生成视频。
-
项目测试需要24GB显存的Nvidia 4090或3090TI，处理一张图需5-10分钟。
-
生成视频时长为25秒，帧率为4FPS，分辨率为320×512、512×320等。
-
除了生成完整视频，还可以生成线稿绘制过程或不同精细程度的线稿。
延伸问答
Paints-Undo项目的主要功能是什么？
Paints-Undo项目能够将图像拆解成绘画过程视频，展示从线稿到上色的全过程。
Paints-Undo在GitHub上发布后获得了多少星？
Paints-Undo在GitHub上发布不到24小时，获得了600+星。
Paints-Undo包含哪些模型？
Paints-Undo包含单帧模型和多帧模型，分别为paints_undo_single_frame和paints_undo_multi_frame。
使用Paints-Undo生成视频需要什么样的硬件配置？
生成视频需要24GB显存的Nvidia 4090或3090TI，理论上16GB显存也够用。
Paints-Undo的多帧模型与单帧模型有什么区别？
多帧模型输入两张图片，输出16帧中间帧，结果更一致但处理速度较慢；单帧模型则基于一张图和一个操作步骤输出一张图。
如何在本地部署Paints-Undo项目？
可以通过项目的GitHub代码库进行本地部署，具体步骤在代码库中有说明。
