3d模型面部自动绑定插件及算法相关研究

这篇具有很好参考价值的文章主要介绍了3d模型面部自动绑定插件及算法相关研究。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

本文站在程序的角度介绍了目前对市面上的一些面部骨骼自动绑定方案及算法的一些心得

1.基础知识相关:蒙皮算法

1) 线性混合蒙皮
线性蒙皮公式:3d模型面部自动绑定插件及算法相关研究 其中Cji代表骨骼变换矩阵(rotation, position,和scale矩阵)。Wi代表第i个顶点的权重,V代表对应的顶点。V`由各个骨骼的累加计算得出。但是线性混合蒙皮会有糖果包装问题,如下图:3d模型面部自动绑定插件及算法相关研究
2) 四元数蒙皮(会有一些严重的断裂问题,目前unity3d不支持)
四元数蒙皮算法会将位置矩阵和缩放矩阵拆出来计算,而对旋转则采用四元数旋转插值算法来解决(线性插值(向量没有标准化),标准化线性插值(卡顿),球形线性插值(计算量大))。
3) 对偶四元数蒙皮(目前unity3d不支持)
四元数蒙皮算法的升级版,解决了四元数蒙皮的断裂问题。

2.市面的一些面部骨骼绑定插件介绍

tips:一般来说,骨骼越多,对应的骨骼融合插值算法会越复杂,同样出来的效果也会更好。如果由特别好的骨骼融合插值算法另当别论。
1)BonyFace : 3dmax上面的插件,大概由80根骨骼组成
2) ADV:maya上面的插件,看了下应该骨骼数和BonyFace应该没有太大的差别
3)Rig Logic: maya上面的插件,现在unreal的metahuman正是使用的这一套,大概由600多跟骨骼(美术同学说的,没看,可能跟真实有一些差距)。

3.metaHuman的骨骼自动绑定取巧机制(虚幻的超写实数字人插件)

此处不理解的可以跳到下面的BoneFace源码流程解析先了解基础的自动绑定流程
metaHuman的骨骼自动绑定,其实是事先已经由一套完全手工绑定好的骨骼,当生成新的数字人模型时,使用事先的骨骼绑定关系直接映射到现有的新模型上。由于metaHuman的模型都是写实类的模型,所以重定向后对整个面部骨骼的影响很小,可以继续复用原骨骼。这种做法和我现在项目所采用的blendshape重定向方案原理上是一致的。

4.metaHuman 模型技术分析

1 捏脸相关:
目前metahuman提供了三种捏脸方式。1,脸型混合插值;2,五官移动修改; 3,雕刻模式(基因库匹配值,做五官位置匹配)

2 表情驱动维度: 骨骼(大的变形),blendshape(细微的肌肉变化), 面部表情纹理(做表情时皮肤的褶皱)

3 身体:使用了18套预设身体(没有基因库)

4 毛发和皮肤系统

5 Rig Logic 面部绑定求解系统

5.BonyFace源码流程简单分析

市面上的面部自动绑定插件流程基本是统一的,区别是骨骼布局和骨骼之间的分配和约束关系。

3d模型面部自动绑定插件及算法相关研究文章来源地址https://www.toymoban.com/news/detail-474977.html

到了这里,关于3d模型面部自动绑定插件及算法相关研究的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • OpenGL ES相关库加载3D 车辆模型

    需求类似奇瑞的这个效果,就是能全方位旋转拖拽看车,以及点击开关车门车窗后备箱等 瑞虎9全景看车 (chery.cn) 最开始收到这个需求的时候还有点无所适从,因为以前没有做过类似的效果,后面一经搜索后发现实现的方式五花八门,但始终绕不过opengl,于是通过opengl 逐步展

    2024年02月06日
    浏览(36)
  • 面部表情识别(Pytorch):人脸检测模型+面部表情识别分类模型

    面部表情识别2:Pytorch实现表情识别(含表情识别数据集和训练代码):https://blog.csdn.net/guyuealian/article/details/129505205 b站视频:https://www.bilibili.com/video/BV1xm4y1p7H3 项目源码:https://github.com/Whiffe/PyTorch-Facial-Expression-Recognition 面部表情识别由两部分组成:人脸检测与表情识别分类 人

    2024年02月13日
    浏览(62)
  • 【论文解读】FFHQ-UV:用于3D面部重建的归一化面部UV纹理数据集

    论文地址:https://arxiv.org/pdf/2211.13874.pdf         我们提出了一个大规模的面部UV纹理数据集,其中包含超过50,000张高质量的纹理UV贴图,这些贴图具有均匀的照明、中性的表情和清洁的面部区域,这些都是在不同光照条件下渲染逼真的3D面部模型所需的特征。该数据集源自

    2024年02月05日
    浏览(64)
  • 三维(3D)压缩传感算法的深入研究:专注于实时体积成像的新颖视角

    随着计算能力的增强和数据处理技术的进步,三维(3D)成像技术越来越多地被用于各种各样的应用,从医疗成像到虚拟和增强现实。然而,随之而来的问题是,随着数据量的增长,压缩和传输这些数据成为了一个重大挑战。因此,需要一种高效的算法来处理这个问题。这就

    2024年02月15日
    浏览(33)
  • gl-opendrive插件(车俩3D仿真模拟自动驾驶)

    本插件基于免费opendrive开源插件、Threejs和Webgl三维技术、vue前端框架,blender开源建模工具等进行二次开发。该插件由本人独立开发以及负责,目前处于demo阶段,功能还需待完善,由于开发仓促代码还需优化。 两个版本: 1.vue版本pc端可视化展示 2.非vue版本支持内嵌到安卓,

    2023年04月27日
    浏览(42)
  • gl-opendrive插件(车俩3D仿真模拟自动驾驶)

    本插件基于免费opendrive开源插件、Threejs和Webgl三维技术、vue前端框架,blender开源建模工具等进行二次开发。该插件由本人独立开发以及负责,目前处于demo阶段,功能还需待完善,由于开发仓促代码还需优化。 两个版本: 1.vue版本pc端可视化展示 2.非vue版本支持内嵌到安卓,

    2024年02月08日
    浏览(113)
  • 【计算机视觉|人脸建模】学习从图像中回归3D面部形状和表情而无需3D监督

    本系列博文为深度学习/计算机视觉论文笔记,转载请注明出处 标题: Learning to Regress 3D Face Shape and Expression from an Image without 3D Supervision 链接:[1905.06817] Learning to Regress 3D Face Shape and Expression from an Image without 3D Supervision (arxiv.org) 从单张图像估计3D面部形状必须对光照、头部姿势

    2024年02月07日
    浏览(60)
  • 【UI自动化测试技术】自动化测试研究:Python+Selenium+Pytest+Allure,详解UI自动化测试,学习模拟鼠标+模拟键盘进行相关操作(精)(四)

    1、了解元素交互的常用方法 2、学习如何对多选元素进行操作 3、 学习模拟鼠标进行相关操作 ( 本节目标 ) 4、 学习模拟键盘进行相关操作 ( 本节目标 ) 用于向 Web 浏览器提供虚拟化设备输入操作的低级接口.除了刚刚讲过的Web元素交互之外, Actions 接口 还提供了对指定输

    2024年03月24日
    浏览(89)
  • NavMesh 导航网格神级插件发布!高效实现 3D 自动寻路

    寻路是游戏开发中不可忽视的功能之一,NavMesh 导航网格寻路则被广泛用于在复杂的 3D 游戏世界中实现动态物体自动寻路。 开发者 iwae 创作了插件 Easy NavMesh,在 Cocos Creator 3.x 中实现了完善的 3D 自动寻路功能。 导航网格(Navigation Mesh,简称 NavMesh) 能够存储可行走区域的网

    2024年02月04日
    浏览(57)
  • Video Copilot Element 3D Mac:E3D三维模型AE插件

    Video Copilot Element 3D for Mac 是一款运行在macOS上的AE三维模型插件,简称e3d,Video Copilot Element 3D主要用于制作动作设计和视觉FX。  阴影和环境闭塞改善 动态反射贴图 3d噪声并使其变形工具:弯曲,扭曲和锥度 动画助手控制AE中的动画

    2024年02月14日
    浏览(47)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包