Google近日推出一种名为“Lumiere”的全新人工智能影片模型,该模型拥有创造出连贯、流畅且真实动作的能力,并能在完整影片片段中展现出来。这种创新技术与现有的AI影片模型有显著不同,Lumiere不是将各个单独的画面组合在一起,而是通过同时处理物体的位置和其动作,一次性地创建整部影片。
这项技术以时空架构为基础,考量了所有的动作和位置相关方面。在生成过程中,Lumiere会检视物体该被放置在何处,以及何时以及如何进行动作,确保影片的“空间”和“时间”元素都能得到妥善处理。这种一次性处理两个方面的方式,使得Lumiere能创造出更连贯的动作。
Lumiere的功能不仅止于此,它还能跨越文字到影片和图像到影片,从参考图像提供有风格的生成,以确实调整影片中元素的外观。Google研究团队表示,Lumiere实现了“最先进的文字到影片生成结果”,“有助于广泛的内容创建工作和影片编辑应用。”
此外,Lumiere也具备动画化图像特定区域的能力,并能提供如改变衣物风格或影像中特定动物种类的插画(inpainting)能力。然而,这仅仅是一项研究计划,目前并无法亲自体验。
Google过去也推出过其他AI影片工具,例如Imagen版本的影像模式,该模式在Google云端中提供AI图像生成,并且VideoPoet是一个用于零拍摄影片生成的大型语言模型。Video Poet还能在不需要文字指导的情况下,从影片片段创建音频。
这款新工具的实现,毫无疑问,是对传统传媒行业的又一次强烈的冲击,同时,对于影片剪辑以及插画师而言,抢饭碗的AI对手,又增加了一个。
领取专属 10元无门槛券
私享最新 技术干货