一种基于自适应语义时空图卷积网络的唇读方法

摘要

本发明提供了一种基于自适应语义时空图卷积网络的唇读方法，所述方法包括提取包含唇部轮廓、局部微小运动和语义信息的局部语义视觉特征和提取包含唇部全局运动信息的全局视觉特征，并将所述局部语义视觉特征和全局视觉特征相融合后的融合视觉特征用于唇读识别，由于融合视觉特征中不仅包含了唇部的全局运动信息还包含了唇部局部运动和细微运动信息以及语义信息，使得依据本发明提供的唇读方法具有更高的准确度。