双通道特征融合下长视频表情区间连续表情变化识别方法

摘要

本发明公开双通道特征融合下长视频表情区间连续表情变化识别方法，包括以下步骤：步骤s1：通过有限差分法及关键帧提取法对一段视频进行表情区间划分，获得由若干表情区间所组成的表情区间集合；步骤s2：提取获得每个表情区间的空域序列和时域序列，时域序列为空域序列中的每个表情区间的连续3个图像序列的光流，所述图像大小为256*256且每个表情区间的空域序列和时域序列均包括3张图像；步骤s3：将每个表情区间的空域序列和时域序列分别送入双通道特征融合网络，并通过softmax得到每个表情区间的表情识别结果，最终获得该段视频的连续表情变化的识别结果。本发明能够对1s至30min的视频中的表情变化进行连续性识别且准确率高。