化身面部表情和/或语音驱动的动画化

摘要

本文公开了与动画化和渲染化身相关联的设备、方法和存储介质。在实施例中，一种设备可以包括面部表情和语音跟踪器，用于分别接收用户的多个图像帧和音频，并且分析所述图像帧和所述音频从而确定并跟踪所述用户的面部表情和语音。所述跟踪器还可以基于所述用户的所跟踪的面部表情或语音来选择用于对所述化身进行动画化的多个混合形状，包括分配所述混合形状的权重。当用于跟踪所述用户的面部表情的视觉条件被确定为低于质量阈值时，所述跟踪器可以基于所述用户的所述所跟踪的语音来选择所述多个混合形状，包括分配所述混合形状的权重。可公开和/或要求保护其他实施例。