0
点赞
收藏
分享

微信扫一扫

Make-It-Animatable:中科大联合腾讯推出的自动生成即时动画准备资产

❤️ 如果你也关注 AI 的发展现状,且对 AI 应用开发非常感兴趣,我会每日跟你分享最新的 AI 资讯和开源应用,也会不定期分享自己的想法和开源实例,欢迎关注我哦!

🥦 微信公众号|搜一搜:蚝油菜花 🥦

🚀 快速阅读

  1. 即时动画准备:快速将任何3D人形模型转变为可用于动画的状态。
  2. 自动生成动画资产:自动生成高质量的骨骼、混合权重和姿势变换。
  3. 支持多种3D数据格式:支持包括3D网格和3D高斯斑点在内的多种3D数据表示。

正文

Make-It-Animatable 是什么

Make-It-Animatable:中科大联合腾讯推出的自动生成即时动画准备资产_自动生成

Make-It-Animatable是由中国科学技术大学和腾讯PCG共同开发的数据驱动框架。该框架能够在不到一秒的时间内,将任何3D人形模型准备好进行角色动画状态,无论其形状和姿势如何。它基于生成高质量的混合权重、骨骼和姿势变换,支持多种3D表示,包括网格和3D高斯斑点。

Make-It-Animatable采用了从粗到细的表示和结构感知建模策略,确保了模型的准确性和鲁棒性,甚至适用于具有非标准骨架结构的角色。与现有方法相比,Make-It-Animatable在质量和速度上都有显著提升。

Make-It-Animatable 的主要功能

  • 即时动画准备:快速将任何3D人形模型转变为可用于动画的状态,无论其形状和姿势。
  • 自动生成动画资产:自动生成高质量的骨骼、混合权重和姿势变换,为动画制作提供必要的数据。
  • 支持多种3D数据格式:支持包括3D网格和3D高斯斑点在内的多种3D数据表示。
  • 精细到粗糙的多级表示:采用从精细到粗糙的多级表示方法,提高模型关键区域的细节捕捉能力。
  • 结构感知建模:识别并适应非标准骨架结构,提高模型的适应性和准确性。

Make-It-Animatable 的技术原理

  • 基于粒子的形状自编码器:基于粒子的自编码器技术编码和解码3D形状,支持多种3D表示。
  • 从粗到细的表示策略:先进行粗略的形状和关节位置预测,然后细化预测提高精确度。
  • 结构感知的骨骼建模:基于考虑骨骼的拓扑结构,提高骨骼预测的准确性,尤其是在复杂的骨骼结构中。
  • 混合权重和骨骼位置预测:用深度学习技术预测每个顶点的混合权重和骨骼位置,实现精确的蒙皮。
  • 姿势变换的预测:预测模型从当前姿势到标准休息姿势的变换,以便应用各种动画。

资源

  • 项目官网:<https://jasongzy.github.io/Make-It-Animatable>
  • GitHub 仓库:<https://github.com/jasongzy/Make-It-Animatable>
  • arXiv 技术论文:<https://arxiv.org/pdf/2411.18197>
  • 在线体验Demo:<https://make-it-animatable.jasongzy.com/>

❤️ 如果你也关注 AI 的发展现状,且对 AI 应用开发非常感兴趣,我会每日跟你分享最新的 AI 资讯和开源应用,也会不定期分享自己的想法和开源实例,欢迎关注我哦!

🥦 微信公众号|搜一搜:蚝油菜花 🥦

举报

相关推荐

0 条评论