SentiMask 3D人脸建模算法

SentiMask旨在开发增强现实应用程序,该应用程序使用实时3D面部跟踪技术进行运动捕捉和控制3D数字角色的面部表情或将动画化身映射到用户面部。该技术适用于普通相机和普通PC或智能手机。

可作为软件开发套件提供,用于开发适用于Microsoft Windows、Android、iOS、macOS和Linux的3D人脸跟踪系统。

 

特性和功能

      
  • 实时人脸检测和跟踪。
  •   
  • 面部姿势、标志、形状和表情估计。
  •   
  • 3D面部网格生成。
  •   
  • 性别和年龄估计。
  •   
  • 眼镜、胡子、胡子和帽子检测。
  •   
  • 适用于普通网络摄像头和智能手机摄像头。
  •   
  • 与3D建模软件或游戏引擎等其他软件集成。
  •   
  • 合理的价格、灵活的许可和免费的客户支持。
  • SentiMask使用普通网络摄像头或智能手机摄像头的视频提供实时3D人脸跟踪和面部表情估计。SentiMask技术可能的应用包括:

      
  • 用于娱乐应用程序(如电脑游戏、通讯应用程序等)中3D人物面部动画的运动捕捉。;
  •   
  • 增强现实应用程序,如虚拟化妆、外观变化评估等。
  •   
  • 交互式应用程序的面部特征分析,提供基于个人性别、年龄和/或面部表情的用户体验。
  • SentiMask 2.0技术具有以下3D人脸跟踪应用功能:

      
  • 实时性能。SentiMask技术可以实时检测和跟踪实时视频中的面部特征。该技术在普通PC或智能手机上提供快速性能。
  •   
  • 面部特征估计。SentiMask算法能够从视频中识别面部姿势、地标、形状和表情。高级面部表情分析执行23种不同的估计,如检查左眼或右眼是否闭合,左眉毛或右眉毛是否向上或向下,下巴是否向左或向右移动,等等。
  •   
  • 3D面部网格生成。该算法从面部图像重建3D面部网格(线框模型)。可以将自定义纹理应用于网格,也可以将网格点用作更改动画角色外观的参考。有关使用图形编辑器创建自定义遮罩的信息,请参见视频教程。
  •   
  • 性别和年龄信息。SentiMask 2.0算法可以从人脸图像中估计出人的年龄或性别。
  •   
  • 面部属性检测。SentiMask 2.0算法可以检测一个人是否有胡子、小胡子、眼镜或帽子。
  •   
  • 需要普通摄像头。3D人脸模型重建的视频可以用现成的相机或智能手机拍摄。不需要深度传感器或其他高级硬件。建议和规范包含有关摄像头设置的更详细信息。
  •   
  • 与其他软件集成。SentiMask生成3D点云、面部旋转角度(滚动、俯仰、偏航)和面部表情估计。这些数据可以在自定义应用程序中使用,也可以传递给Blender等3D建模软件以及游戏引擎。请参阅将SentiMask与Blender 3D配合使用的视频教程。

 

返回上页

 

 

 

 

 

 

 

 

 

 

点击查看上述产品详细信息。

以上全部软件及算法产品,均可以两种方式提供:一是算法SDK及其授权,二是算法源代码。

请联系我们,了解获取更多商务信息:

联系人:李先生
电话:139 2772 8984
邮箱:li.xin@neurotechnology.com