AccuFACE彻底改变了实时和录制视频的面部跟踪

2023-11-10 17:08:33 来源: 超视界-快速动画网 编辑者: 超视界

0 580

内容来自于“https://magazine.reallusion.com/”

对面部动作捕捉制作依赖昂贵的硬件感到沮丧?为什么不选择预先录制的视频进行面部跟踪呢?也许这项技术在过去并不完全存在,或者大多数人都无法使用。但现在,是时候将专业演员和视频内容放在首位了!了解一项全新的技术如何提供顶级的面部动作捕捉,并使协作制作成为现实。

Reallusion 很高兴推出 iClone AccuFACE,这是一款由 AI 驱动的面部追踪器,可实时准确地提供高质量的面部动画。AccuFACE可以从网络摄像头、GoPro或现有视频文件中无缝捕捉面部表情。通过集成 Nvidia RTX GPU 加速的 AI 技术,AccuFACE 消除了对昂贵硬件或订阅费用的需求,彻底改变了面部跟踪,使所有级别的设计师都可以使用它。借助 iClone 和 Character Creator 的协同作用,为专业面部动画制作新的 IP 角色现在触手可及。

从任何视频源捕捉表演

AccuFACE能够从网络摄像头和传统视频文件中捕捉面部表情。

实时网络摄像头:AccuFACE 与独立的 USB 网络摄像头或配备集成网络摄像头的笔记本电脑兼容,以每秒 720 帧的速度提供 30p 的最佳跟踪分辨率。

录制的视频:旋转视频以录制移动视频或安装的头盔摄像头的素材。

远程协作:AccuFACE使制作工作室能够与全球专业演员或配音人才无缝协作,将动画生产力从设备依赖和时间或地点的限制中解放出来。

校准准确性和个性化

优化表现范围

校准个性化的微妙表情和精确的眉毛运动。

实时模式校准:通过易于遵循的指导过程定制角色的面部设置,以匹配现场表演者,并立即接收动画反馈以进行彻底的改进。

视频模式校准:当从单个视频源获得理想的校准姿势被证明具有挑战性时,AccuFACE提供了在多个视频文件中搜索校准帧的灵活性。

全光谱动作捕捉细化

AccuFACE提供了一个全面的工具包来解决常见的面部动作捕捉挑战,使艺术家更接近实现完美的动画,实时滤镜以提高跟踪质量。

力量平衡:根据演员的个性调整区域力量,平衡表达强度。

平滑滤镜:消除由于跟踪角度过大、毛发覆盖过多或照明和阴影不均匀而导致的跟踪数据中不希望的痉挛。

降噪:AccuFACE提供了一个全面的工具包来应对这些常见的挑战,使艺术家离实现完美的动画更近了一步。

抗干扰:跨区域干扰和交叉触发会导致表达混乱。AccuFACE干扰消除可以减少不必要的头部、眉毛和嘴巴运动。

单通道音频同步

AccuFACE捕获同步的音频数据和面部动画,从而能够使用来自网络摄像头和麦克风的数据快速生成语音同步动画。

用于无损录制的时间码同步

基于时间码的全帧动画录制,不受计算机性能影响。捕获高达 60 fps 的干净面部动画数据,而不会掉帧。

唇舌关节 (AccuLIPS)

通过集成的 AccuLIPS 技术整合微妙的嘴唇和舌头动画。能够微调视素和嘴唇形状,以获得完美的说话或唱歌动画。

多语言支持

通过巧妙地绕过语音到文本的识别,AccuLIPS 可以将其功能扩展到英语以外的其他语言。使用额外的文本脚本可以进一步提高唇形检测和准确性,同时可以使用免费工具将非英语音频文件转换为罗马化音频文件。