服务商
RunwayML
GEN1:视频转视频
GEN2:文字生成视频,由输入图片生成后续视频
可免费体验,免费GEN2一次时长2s,有水印。收费版一次4s
结合runway的其他功能,可以做一些质量较高的小视频
Fulljourney
在discord使用,功能和GEN2相同,效果不如GEN2
pika labs
内测,目前看起来效果和GEN2不相上下
kaiber
收费的deforum服务,自定义程度低,没有价值
开源AI模型
Modelscope
国内魔塔社区开发,基于此模型的同类模型还有
Zeroscope/ potat1等
最大可以生成1024*576视频
可以在A1111中通过SD webui text to video插件使用
生成近距离动态物体效果很好
AnimateDiff
通过SD动态模组控制SD图片模型生成连贯图片以达到生成视频效果
可以在A1111中通过AnimateDiff插件使用
开源脚本
Deforum
通过指定关键帧提示词来控制SD模型生成抽象过渡动画
可以在A1111中通过Deforum插件使用
后期工具
Ebsynth(免费)
输入带艺术风格的关键帧,并用视频来驱动关键帧以达到让关键帧动起来的目的
要想画面不崩,需要更多的关键帧,而人工是无法完成的
因此除独立软件外还有A1111中的插件可以使用
适合用图生图把视频风格化,再剔除不必要的帧,用Ebsynth把不连贯但内容近似的帧连接起来。
Flowframes(免费)
通过插值方法自动生成过渡帧,让视频整体更加流畅
生成的过渡帧类似原图加上残影,如果原视频过于接近PPT,那么使用意义不大,但例如把20FPS视频提升到30FPS或60FPS的处理,可以看到显著效果。
Leiapix(免费)
也是用插值生成过渡帧,胜在是免费的网页端,一键即可为图片加入类3D的效果,
Davinci
视频剪辑工具,其中的Deflicker可以降低跳帧