一种基于人脸表情与脑电信号的跨媒体数据情感识别方法

摘要

本发明公开一种基于人脸表情与脑电信号的跨媒体数据情感识别方法，包括：获取原始人脸表情视频数据与原始脑电数据，基于所述原始人脸表情视频数据与原始脑电数据构建数据集；构建多模态神经网络结构；基于所述数据集与所述多模态神经网络结构，获取情感识别结果，完成跨媒体数据情感识别。本发明将人脸表情和脑电信号两者的特征信息进行有效融合，并将其应用于多模态情感识别，两种模态的数据相互支持互补，能够有效提高情感识别的客观性和准确性。