Animate Anyone

Animate Anyone旨在通过驱动信号从静态图像生成角色视频。我们利用扩散模型的力量，提出了一个专为角色动画量身定制的新框架。为了保持参考图像中复杂外观特征的一致性，我们设计了ReferenceNet来通过空间注意力合并详细特征。为了确保可控性和连续性，我们引入了一个高效的姿势指导器来指导角色的动作，并采用了一种有效的时间建模方法，以确保视频帧之间的平滑跨帧过渡。通过扩展训练数据，我们的方法可以为任意角色制作动画，与其他图像到视频方法相比，在角色动画方面取得了出色的结果。此外，我们在时尚视频和人类舞蹈合成的基准上评估了我们的方法，取得了最先进的结果。

需求人群：

用于将静态图像转换为角色视频，特别适用于时尚视频合成和人类舞蹈生成

使用场景示例：

使用Animate Anyone将时尚照片转换为逼真的动画视频
使用Animate Anyone在TikTok数据集上进行人类舞蹈生成
利用Animate Anyone为动漫/卡通角色制作动画视频

产品特色：

通过驱动信号从静态图像生成角色视频
利用扩散模型的力量
设计ReferenceNet来通过空间注意力合并详细特征
引入高效的姿势指导器来指导角色的动作
采用有效的时间建模方法，以确保视频帧之间的平滑跨帧过渡
扩展训练数据，使方法可以为任意角色制作动画
在时尚视频和人类舞蹈合成的基准上取得最先进的结果