Animate Anyone - 阿里开源的图像到视频角色动画合成的框架

Animate Anyone是由阿里巴巴智能计算研究院推出的一款将静态图像中的角色或人物进行动态化的开源框架,已在GitHub上斩获了近1.3万个星标,并在国内外引起了热烈的讨论。该框架在扩散模型的基础之上,引入了ReferenceNet、Pose Guider姿态引导器和时序生成模块等技术,以实现照片动起来时保持一致性、可控性和稳定性,输出高质量的动态化视频。阿里旗下的AI聊天助手通义千问里面的「通义舞王」功能便是基于该技术,可让照片中的人物/角色跳起科目三、抖肩舞、鬼步舞等。

Animate Anyone的应用场景

  • 角色动态化:无论是真人、动漫角色还是卡通形象或人形物体,Animate Anyone都能让它们动起来,为各种创意项目增添乐趣。
  • 时尚视频合成:在时尚领域,Animate Anyone能够将静态模特转化为动态展示,实现不同角度和着装效果的动态展示,为服装展示提供新的视觉体验。
  • 人类舞蹈生成:Animate Anyone 通过结合参考图像和姿态骨架动画,能够生成逼真的舞蹈视频,可以让一本真经的人物也跳起舞来。

如何使用Animate Anyone

Animate Anyone的项目主页为https://humanaigc.github.io/animate-anyone/,GitHub代码库地址为https://github.com/HumanAIGC/AnimateAnyone,可以通过通义千问APP或Hugging Face进行在线快速体验:

  1. Hugging Face社区Demo:访问https://huggingface.co/spaces/xunsong/Moore-AnimateAnyone,上传或拖放图像、添加动态姿态图并调节参数后点击Animate即可让图片中的角色动起来
  2. 通义千问:手机上安装通义千问APP,然后在指令中心中选择「一张照片来跳舞」或直接输入通义舞王,选择你感兴趣的舞蹈模版、上传静态照片然后即可生成动态视频
© 版权声明

相关文章

暂无评论

none
暂无评论...