最近文生图领域各家都开始“提速”,纷纷支持“实时”生成。
Stability AI 也不甘落后!近日推出了 Stable Diffusion XL Turbo(SDXL Turbo)。
最新的模型采用了“对抗性扩散蒸馏技术(Adversarial Diffusion Distillation)”,据称可以把以前的50步减少为1步,从而达到实时生成的效果!
但是目前只能在非商业下发布许可证,只允许个人,非商业用途。
说了这么多了,可以看一下官方给的效果!
官方也提供了性能指标,对比了多个不同的AI模型!
包括:StyleGAN-T++、OpenMUSE、IF-XL、SDXL 和 LCM-XL。
下图是对比结果。
如何实现“实时生图”?
最新的模型采用了“对抗性扩散蒸馏技术(Adversarial Diffusion Distillation)”,把生图过程缩减为1步,这样就大大降低了所需时间,从而达到了实时的效果。
对抗扩散蒸馏(Adversarial Diffusion Distillation,ADD)。这种方法的创新点是,它利用了扩散模型的特性,即可以从高维的数据空间逐步降维到低维的噪声空间,从而实现了一种从粗到细的知识蒸馏过程。
具体来说,它首先在高维空间中生成对抗样本,并将其作为教师网络的输入,然后在不同的降维层次上,将教师网络的输出作为软标签,来指导学生网络的学习,从而使学生网络能够在低维空间中保持对抗鲁棒性。
这种方法的优势是,它可以有效地减少对抗样本的梯度信息,从而降低对抗攻击的成功率,同时也可以提高学生网络的生成质量和多样性。
如何使用模型或者深入了解技术?
官网地址:
https://stability.ai/news/stability-ai-sdxl-turbo
模型地址:
https://huggingface.co/stabilityai/sdxl-turbo
论文地址:
https://static1.squarespace.com/static/6213c340453c3f502425776e/t/65663480a92fba51d0e1023f/1701197769659/adversarial_diffusion_distillation.pdf
领取专属 10元无门槛券
私享最新 技术干货