一种基于双深度网络的多模式情感信息融合与识别方法

摘要

本发明提供一种基于双深度网络的多模式情感信息融合与识别方法，涉及情感识别技术领域。本发明方法首先用深度信念网络从预处理后的语音情感信号中自动地提取出新的语音情感特征，用深度卷积神经网络从预处理后的面部表情信号中自动地提取出新的面部表情特征，然后将提取的新的语音情感特征和面部表情特征参数进行组合获得组合特征向量，再利用AdaBoost算法和类可靠度来获得最终识别结果，实现对人类基本情感进行识别。该方法充分发挥了深度学习算法和集成学习算法的优点，使整个情感信息的识别过程更加接近人类情感识别，从而提高了情感识别的准确性。