阿里、港大推出新模型 LivePhoto,可将静态图片转为动态视频

据 AIGC 开放社区 12 月 13 日报道,阿里巴巴、香港大学、蚂蚁集团的研究人员提出了一种全新图片生成动态视频模型——LivePhoto。用户通过 LivePhoto,可将一张静态图片快速生成高精准的动态视频。
与传统方法不同的是,LivePhoto 在开源文生图模型 Stable Diffusion 基础之上,增加了运动强度和文本加权两大创新模块,可精准掌控动态视频生成过程中的运动强度、文本描述。据悉,LivePhoto 的效果与主流模型 Gen-2、Pikalabs 等相当。