PaddleMIX推出Fast-Diffusers工具箱,通过模型蒸馏和推理优化,将推理速度提升超过2倍。FLUX-Lightning模型实现4步快速生成,效果超越现有模型,结合CINN技术,推理时间缩短至1.66秒。未来将继续优化推理效率,推动扩散模型的应用。
飞桨PaddlePaddle推出扩散模型推理加速插件,利用模型蒸馏和推理缓存等技术,将推理速度提升超过2倍,同时保持生成质量。主要方法包括SortBlock、TeaBlockCache和FirstBlock-Taylor,开发者可灵活应用这些插件以优化实时应用。
开源日报介绍了多个开源项目,包括用于生成图像和音频的diffusers扩散模型库、支持多种语言的fish-speech TTS解决方案,以及基于大语言模型的知识库问答系统MaxKB。这些项目功能丰富,文档齐全,便于开发者使用和集成。
本文介绍了使用Hugging Face的diffusers库进行图像修复和扩展的方法,包括使用SAM模型生成图像掩码和使用Stable Diffusion模型进行修复。同时还介绍了将扩展图像转换为修复问题的方法。
本文介绍了使用Diffusers Python库生成高质量图像的方法,通过构建Diffusers Pipeline、加载LoRA权重和使用ControlNet OpenPose生成图像。使用Google Colab的免费GPU笔记本进行实验。
Diffusers庆祝一周年,感谢社区和开源贡献者的支持。去年的进展令人自豪,我们的使命是推动开放和道德的AI未来。Diffusers库是一个模块化的工具箱,让每个人都可以尝试、研究或者玩转文本到图像模型。我们与社区合作添加了一些显著功能。
本文介绍了如何通过修改StableDiffusionPipeline类的safety_checker函数,去除Huggingface的diffusers在生成图片时的NSFW内容限制,从而实现自由生成涩涩图片。
本文介绍如何在Google Colab上使用Diffusers运行IF文本到图像生成模型,优化模型以在内存受限的硬件上运行,并演示使用IF进行文本到图像生成和图像变化。不建议在生产环境中使用此设置,建议使用高端GPU。IF在32位浮点精度下使用40GB的权重。
完成下面两步后,将自动完成登录并继续当前操作。