一种基于视频流的面部表情识别方法及系统

摘要

本发明公开一种基于视频流的面部表情识别方法及系统，包括：确定视频流中每帧图像的人脸定位区域；提取人脸定位区域的人脸关键点，计算人脸关键点间的距离特征；根据距离特征与训练后的表情分类模型，得到每帧图像的各类表情概率值；根据每帧图像的各类表情概率值中最大值与预设阈值的比较结果，对每帧图像进行筛选，得到所有有效帧并确定对应的表情分类结果，利用滑动时间窗口对有效帧表情分类结果在时间维度上进行融合处理，得到以滑动步长为间隔的表情识别结果。利用人脸敏感部位关键点信息弱化视频会话中说话人不重要部位对情绪产生的影响；提取面部几何特征值作为模型的输入，而不是直接将原始图片输入到模型中，在部署应用时可以减少计算量，达到较好的实时性。