内容提要
爱诗科技旗下PixVerse与OpenAI达成深度合作,完成产品集成并推出“从提示词到成片”教育计划。PixVerse视频生成能力已封装为Agent可直接调用的接口,创作者可在Codex中通过自然语言完成从脚本、分镜到成片的全流程。双方还分享了保持画面一致性等实操经验,未来将继续深化合作,推动AI创意工作流标准化普及。
延伸解读
从网页工具到Agent接口的转变
文章强调PixVerse的视频生成能力已被封装为Agent可直接调用的接口,这意味着创作者不再需要打开平台界面操作,而是让智能体自主完成理解任务、生成创意简报、拆解分镜到调用插件生成视频的整条链路。这一变化将视频生成从“用户访问的网站平台”转变为“Agent调用的能力”,对工作流的自动化程度和衔接效率有实质影响。
实操经验:参考图与制作顺序
针对画面一致性这一普遍痛点,文章给出了具体做法:把角色和场景参考图放入项目文件夹,并要求Codex生成前先查看;参考图应少而准,正面、背面、侧面各一张加一张脸部特写即可。创作者Aldo还强调先做参考图、再做分镜、最后出视频的顺序,这样能在分镜阶段发现问题并修改,成本远低于重做视频。这些经验对使用类似工作流的读者有直接参考价值。
AI能力边界与专业模型的角色
OpenAI工程师Tyler Ryu在分享中提出“AI能把事情做到80%到90%,最后一步仍需要专业视频模型来完成”。在其动画案例中,PixVerse插件负责生成角色走路的参考视频,Codex负责技术处理并将动作套用到游戏角色上,最后用自然语言反复微调。这说明当前集成方案并非完全替代专业制作,而是将依赖专业设备和软件的角色动画流程压缩到Codex内完成,读者应关注各环节的分工与局限。
Q&A
PixVerse和OpenAI合作推出了什么教育计划?
双方首次共同推出“从提示词到成片”(Prompt to Production)教育计划,通过线上研讨会和系列视频,帮助海外个人创作者和团队将创意构想更高效地转化为可落地的内容。
PixVerse的视频生成能力如何被Agent调用?
通过PixVerse插件、PixVerse CLI和Codex集成,PixVerse的视频生成能力被封装成Agent可直接调用的接口。Agent无需打开平台界面即可自主完成理解任务背景、生成创意简报、拆解分镜脚本、调用PixVerse插件生成视频这一整条链路。
在Codex中如何用自然语言完成角色动画制作?
OpenAI工程师Tyler Ryu演示:先调用PixVerse插件,根据角色图片生成角色走路的参考视频;再让Codex做技术处理,把动作套用到游戏角色上;最后用自然语言反复微调直至成片。整个过程无需动捕工作室或动画软件,也无需离开Codex。
如何保持AI生成视频的画面一致性?
Tyler建议把角色和场景的参考图都放进项目文件夹,并明确要求Codex生成前先查看。创作者Hidayat认为参考图要少而准:正面、背面、侧面各一张加一张脸部特写即可。创作者Aldo强调制作顺序:先做参考图,再做分镜,最后出视频,这样每个镜头里的脸和造型都保持一致。
PixVerse与OpenAI未来还有哪些合作计划?
未来双方将继续围绕创作全流程深化合作,共同推动AI创意工作流的标准化与普及,让更多创作者以更低的门槛、更高的效率把创意变成作品。研讨会内容也将剪辑成系列视频课程陆续上线。
爱诗科技是一家什么样的公司?
爱诗科技成立于2023年,是全球领先的AI视频大模型公司,专注于多模态视频大模型与实时世界模型的研发与应用。自研PixVerse系列视频大模型涵盖V系列通用视频模型、C系列影视垂直模型和R系列通用实时世界模型。旗下PixVerse与“拍我AI”APP及开放平台已覆盖全球177个国家和地区,累计注册用户超1.7亿。今年7月完成C轮融资,累计金额近30亿元人民币。