我们视频号发过一系列下面这样的魔幻跳舞视频。不论是希腊诸神雕像,画中的人物还是马斯克这样的名人,都能化身舞林高手,激情斗舞。
它们背后的人工智能工具就是Warp Diffusion。
Warp Diffusion是基于目前最火热的文本生成图像的AI模型—Stable Diffusion。在Stable Diffusion的基础上,Warp Diffusion延伸了动画功能。
Warp Diffusion还没有面向大众消费者的产品,所以使用门槛比较高,需要复制它的程序代码,然后在本地设备或者云端上运行程序。
它的使用需要比较深入的学习,我们这里先分享基本步骤和学习资源:
1. 获取Warpfusion程序代码:
目前你必须到Patreon网站上给开发者10美元以解锁这个程序:https://www.patreon.com/posts/stable-v0-14-and-83714524
2. 在本地设备或云端运行程序,比如Google Colab Notebook。
3. 准备视频素材:选择一个你想要转化为AI动画的视频素材。确保你有该视频的原始文件,最好是高质量的。
4. 设置Warpfusion:打开Warpfusion程序,调整一些关键设置,以便获得最佳的转化结果。你可以参考Warpfusion官方文档或其他教程来了解这些设置。
https://github.com/Sxela/WarpFusion/blob/main/README.md
5. 运行Warpfusion:将视频素材导入Warpfusion,并选择一个适合的定制(Fine-tuned) 模型来转化视频的视觉风格。你可以根据需要尝试不同的模型,以找到最适合你视频的效果。
领取专属 10元无门槛券
私享最新 技术干货