Make-It-Animatable – 中科大联合腾讯推出的自动生成即时动画准备资产

Make-It-Animatable是什么？

Make-It-Animatable是中国科技大学和Tencententable 无论形状和姿势如何，PCG推出的数据驱动框架都可以让任何3D人形模型在不到一秒钟的时间内准备角色动画状态。该框架基于生成高质量的混合重量、骨骼和姿势转换，支持各种3D表示，包括网格和3D高斯点。基于从粗到细的表示和结构感知建模策略，确保准确性和鲁棒，甚至适用于具有非标准骨架结构的角色。与现有方法相比，Make-It-Animatable在质量和速度上都有了显著的提高。

Make-It-Animatable的主要功能

• 即时动画准备：无论其形状和姿势如何，都可以快速将任何3D人形模型转化为动画状态。
• 动画资产自动生成：为动画制作提供必要的数据，自动生成高质量的骨骼、混合权重和姿势变换。
• 支持多种3D数据格式：支持各种3D数据表示，包括3D网格和3D高斯斑点。
• 细到粗糙的多层次表示细到粗糙的多层次：采用从精细到粗糙的多层次表达方法，提高模型关键区域的细节捕捉能力。
• 结构感知建模：识别和适应非标准骨架结构，提高模型的适应性和准确性。

Make-It-Animatable的技术原理

• 自编码器基于粒子的形状：自编码器技术编码和解码3D形状基于粒子，可支持多种3D表示。
• 表达策略从粗到细：先预测粗略的形状和关节位置，再细化预测，提高精度。
• 骨骼建模的结构感知：在考虑骨骼拓扑结构的基础上，特别是在复杂的骨结构中，提高骨骼预测的准确性。
• 混合重量和骨位预测：用深度学习技术预测每个顶点的混合重量和骨骼位置，实现准确的蒙皮。
• 预测姿势变化：为了应用各种动画，预测模型从当前姿势到标准休息姿势的变化。

Make-It-Animatable项目地址

• 项目官网：jasongzy.github.io/Make-It-Animatable
• GitHub仓库：https://github.com/jasongzy/Make-It-Animatable
• arxiv技术论文：https://arxiv.org/pdf/2411.18197
• 在线体验Demo：https://make-it-animatable.jasongzy.com/

Make-It-Animatable应用场景

• 视频游戏开发：动画快速生成游戏角色，减少骨骼和蒙皮的手动调整，提高游戏开发效率。
• 电影和电视制作：CG角色动画制作用于电影和电视剧，提高动画的逼真性和制作速度。
• 虚拟现实（VR）和增强现实（AR）：在VR和AR应用中，快速生成逼真的3D角色，提升用户体验。
• 动画片和系列：动画制作公司快速制作高质量的动画序列，节省时间和成本。
• 模拟和训练软件：用于军事或医疗模拟软件，快速生成逼真的角色动作，用于模拟训练。