AI视频生成技术StableVideoDiffusion引领行业热潮
Stable Diffusion

AI视频生成技术StableVideoDiffusion引领行业热潮

Stable Video Diffusion是Stability AI公司的新一代视频生成模型,基于Stable Diffusion框架,可以基于 existing static images generate videos with high quality. It is currently open to the public for registration, and the company plans to expand its range of models. The model can be used for various tasks and has overcome the limitations of...
图像转换的艺术:StableDiffusion和Controlnet预处理器的应用
Stable Diffusion

图像转换的艺术:StableDiffusion和Controlnet预处理器的应用

StableDiffusion的Controlnet预处理器集合拥有图生图的涂鸦功能和自定义关键词的功能,用户可以输入关键词,将自己的绘画或图片输入其中,得到具有相同线条的照片。该功能中,预处理器选择了不同的模型,如Scribble、女孩、花、可爱兔子、Magic Forest、树屋、城市景观等,以标记参考图像中的对象类型。此外,还介绍了三种预处理器的特点:ofade20k适合室内精细小物体,ofcoco适合室外大物体,而ufade20k正逐渐被ofcoco替代。Shuffle预处理器随机且受种子值影响,可随随机播放控制模型使用,也可单独使用或与随机播放预处理器一起使用。最后,介绍了一种通过指令式提示词来直接对图片进行指令控制的Method。