万博·全站(ManBetX)股份有限公司|官网

基于神经网络的动作捕捉解算系统DeepMocap

DeepMocap

万博全站ManBetX经过三年的深度研发，开发出一套从marker标记点使用神经网络直接解算骨骼数据的深度学习算法以及对应的应用工具，相对于传统流程，本系统对于marker标记点丢失或者标记错误的容错率更高，并能不断迭代优化，提升最终解算效果。
此外，后处理解算模块利用前后帧数据信息，能够进一步提升解算结果的准确性，大幅减少动捕拍摄人员逐帧修复marker标记点数据以生成合理的骨骼动画数据的工作量，解放大量生产时间和人力成本。

无标记点双目单图传面捕DeepFace2.0

DeepFace 2.0

万博全站ManBetX自主研发的基于自研双目头盔的无标记点面部捕捉解决方案，将DeepFace 内部算法从单图像输入改为双图像输入，并在原有的网络结构基础上改进了结构，加深网络层数并加入残差模块，使得网络能够更准确的学习到角色动画和演员表演的对应关系。
双目面捕在精细动作的捕捉（如眼睛是否闭死及嘴部的细微开合）方面，效果明显优于单目面捕解算网络，大幅提升了动画生产制作流程的生产力。

DeepShape形变自动生成系统

DeepShape

万博全站ManBetX自主研发的DeepShape形变自动生成系统，利用深度学习技术学习过往积累的大量高质量的变形模型数据以及与对应的中立脸模型之间的对应关系，经神经网络训练后，可以对于任意输入的中立脸模型快速生成上百个面部变形模型。
根据项目需要，绑定制作人员可以选择直接生成的结果，也可以在生成的模型上进一步微调。该系统大幅提升了绑定环节以及整个动画制作流程的制作效率。

AIGC-超写实千人扫描数据包

AIGC - Hyper-Realistic Scanned Data Pack with a Capacity of 1000 People.

万博全站ManBetX自研扫描的基于真实人物的3D&4D高精度模型的材质数据集，包含了不同性别、年龄及人脸风格的1000位中国模特的高精度3D&4D扫描数据，在精度上能达到微米级别（也可自行根据需求控制精度），还在发音上囊括了朗读和口型，确保虚拟人在动态及表情上更为真实。
作为数据供给方，万博全站ManBetX将面向需要进行数字人物建模和表现的专业人士和团队，提供针对虚拟人AIGC用于机器学习的已完成拆分和标注的数据及相关服务，包括超写实3D&4D扫描数据、面部表情数据、身体及手部的POSE数据。

重光照数字扫描
建模技术

RELIGHTING SYSTEM FOR DIGITAL MODEL SCANNING

可捕捉并采集特定对象的各种光照信息和微米级别的表面信息，相较于普通扫描技术可更大幅度还原被扫描物体的物理几何精度，提高数字模型的构建速度。

基于深度学习的
数字人面部动画解决方案

FACE CAPTURE AND AUTOMATIC FACE ANIMATION SYSTEM

在三维角色面部动画制作领域，准确的捕捉演员表演并将动画迁移到高精度数字角色上一直是一项充满挑战性的工作。 面部动画捕捉流程通常包括价值不菲且步骤复杂的硬件设置，以及琐碎繁杂的校准流程。表演者需要坐在由大量专业摄像机布置的摄影空间接受头部扫描，然后在固定空间内进行面部表演。艺术家则需要对拍摄好的数据做大量的精修处理，用于生成高精度的面部表情数据。 万博全站ManBetX官网依托在动画制作领域长期积累的深厚技术经验，自主研发出一套基于深度学习的数字人面部动画解决方案，实现了从智能计算到动画生产制作的应用落地。这套数字人面部动画解决方案分别从面部动作采集，面部动画绑定以及声音驱动三个角度全方位提升超写实数字人面部动画制作效能。

DeepRigFace
绑定加速技术

DEEPRIG BINDING ACCELERATION TECHNOLOGY

万博全站ManBetX自主研发的DeepRigFace绑定加速技术，通过对大量面部网格形变数据进行深度神经网络学习，将原本复杂、大量的面部绑定控制节点替换为简单、高效的神经网络定制节点。
在制作人员调节该神经网络定制节点参数时，DeepRigFace绑定加速技术通过其精简的运算结构将逼真的面部肌肉运动实时呈现，使制作人员可以实时观察3D角色面部上对应的变形效果，大幅提高了3D角色面部绑定的速度与精确度。

音频自动生成
嘴型动画

AUDIO AUTOMATICALLY GENERATES LIP ANIMATIONS

实现了从演员音频直接生成面部控制器数值的神经网络，训练好的神经网络接收音频数据特征作为输入，解算输出数字人对应的面部动画控制器参数，从而自动生成自然流畅的数字人面部动画。语音数据以及数字人角色都具有泛化功能，实现了根据语音在任意角色面部生成动画。

万博全站ManBetX通用场景描述系统

YUANLI GENERAL SCENE DESCRIPTION SYSTEM

早在2018年，万博全站ManBetX就引进了世界顶尖动画制作公司毕克斯Pixar的USD(Universal Scene Description)库并在此开源库基础上进行了二次开发，定制出一套适用于本公司制作流程的软件工具集。 USD全称是 “通用场景描述”，它是一个开源式的非破坏性流水线场景描述文件格式以及对这种文件格式支持的相关底层库。USD的运用对于大型制作公司的生产流水线至关重要，它也是毕克斯能够高效制作超大规模场景动画电影的重要因素。USD库的设计非常灵活，扩展性强，这也导致了它不能即插即用，需要有足够的研发能力才能开发出基于本公司生产流程的扩展工具。万博全站ManBetX数字研发中心根据多年积累的流程经验和过硬的研发能力，开发出一套适用于本公司制作流程，并灵活适应各个不同项目的USD工具，使得USD这一技术得到最大限度的发挥， 生产流程效能得到全面提升。