一种基于多音素选择的唇型伪造视频检测方法及系统

摘要

本发明涉及一种基于多音素选择的唇型伪造视频检测方法及系统，其方法包括：步骤S1：建立音素和唇形的映射，得到音素类别集；步骤S2：根据不同唇型篡改方法，从音素类别中，选择对应的多音素类别子集，并根据预设唇形帧个数，构建至少一个音素唇形数据集作为训练样本集合；步骤S3：根据至少一个音素唇形数据集，构建对应的至少一个唇型伪造视频检测子模型，分别训练，得到对应的至少一个唇型检测结果；步骤S4：将至少一个唇型检测结果进行融合，得到融合唇型检测结果。本发明方法建立了音素‑唇形映射关系，并选择音素‑唇形子集训练子模型并融合结果。本发明方法可以区分不同篡改方法，并建立了一个新数据集，有利于后续唇形篡改检测工作发展。