今天想给大家介绍一款实时面部动画/跟踪平台Faceware Studio。

无标记3D面部动作捕捉解决方案的领先开发商Faceware Technologies最近发布了一种用于创建高质量面部动画的新平台Faceware Studio，其利用创建即时面部动画的方式重新定义了实时工作流程，通过机器学习和神经网络技术实时跟踪人脸并创建面部动画。

作为一个新产品，Faceware Studio替代了以前的Faceware Live Server产品。FacewareStudio通过利用机器学习和卷积神经网络技术可以快速校准、跟踪和显示任何人的脸部实时动画，且这些数据可以流式传输到Faceware支持的虚幻引擎（UE4）、Unity、MotionBuilder和Autodesk Maya插件中。这个工具也可以让艺术家根据演员的独特表现来调整和定制动画，并通过Motion Effects建立附加逻辑与运动效果。

Faceware Studio目前与构建在Faceware Analyzer和ReTargeter上的非实时Faceware流程并驾齐驱，可直接用于实时应用程序，将来这项技术会得到扩展，与传统流程工具结合到一起使用。

Faceware支持使用网络摄像头或头戴式摄像头

//主要功能

Tracking Any Face（面部跟踪）

Faceware Studio只需单击校准就可以跟踪面部，并为面部表情设置动画，其中用到的神经网络技术可以通过实时摄像头或预先录制好的视频轻松识别角色面部。Faceware Studio可实现交互、虚拟制作和大规模的内容创建。

Advanced Tuning（强大的调整功能）

Studio的界面，右侧有调整变量

艺术家可利用“Animation Tuning”（动画调整）功能对角色特定配置文件进行可视化调整，还能提供所需的反馈和工具，根据演员的独特表演定制动画。

Motion Effects（动态效果）

Motion Effects是一个功能强大的系统，可在实时数据流中构建其他逻辑，效果可用于处理数据，使过程完全按照用户的想法执行，从而尽可能地直接控制最终动画。

Animate Any Character（为角色制作动画）

Faceware Studio可以自由设置任何角色绑定的动画，将Studio标准控件映射到定制角色上，就可以将面部动画数据流导入到虚拟引擎、Unity和MotionBuilder受Faceware支持的插件中，这一功能不久之后在Maya中也可以实现。

 //工作流程 

Realtime Setup（实时设置）

使用“实时设置”面板来选择要跟踪的摄像机、图像序列或预先录制的视频。然后使用面板中的控件调整各种选项，例如帧速率、分辨率和旋转。根据输入内容选择Stationary或Professional Headcam模型，Pathfinder功能会提醒用户实时设置是否为设置。

Calibration&Tracking（校准&跟踪）

左边是Faceware Studio，右边是输出到UE4的输出

完成实时设置后，Tracking视窗开始显示画面。为了校准跟踪，角色需要在合适的构图位置，对焦且保持中立姿势。如果使用的是预先录制的媒体，需要找到合适位置的图像，然后使用“ Calibrate Neutral Pose”按钮开始跟踪。

Tune Your Animation（调整动画）

Animation Tuning面板包括面部跟踪时的每个表情及其对应值的列表，用户可通过彩色条获取有关每种表情的即时反馈，单击并拖动滑块以增加或减少每种表情的效果。还可以在“ Motion Effects”面板中使用随带的效果来增强数据，或使用Python在每个空间基础上创建自己的自定义效果。

Stream to Engine（导入到引擎中）

“Streaming”面板为用户提供了众多选项来启用和自定义数据流，要从Faceware Studio传输动画数据，需要在引擎中配置受Faceware 支持的插件，单击“Stream to Client”以查看角色动画。

Faceware官方表示，他们的愿景是使创建面部动画的过程快速而又有趣，而Studio仅仅是个开始。如果感兴趣的话，可以详细了解一下！