基于多元模式分析的情绪脑电识别

摘要

受诸多因素的影响，情绪目前在心理学上还很难给出一个确切的定义，但是情感计算是实现高级人机交互(Human Computer Interaction，HCI)的关键技术之一。一些较早关于情绪识别的研究所用的信号都是非生理信号，一些计算机视觉技术有能力识别到非生理情感特征，如面部表情、手势和语音信息等，但这些外部特征容易被伪装而且不稳定，这很容易导致不可靠的结果。相反，从生理反应获得的各种生理指标，如脑电(EEG)、皮肤电反应、血液循环、呼吸活动等不能被伪装且稳定。目前情绪识别技术广泛应用于商业、测谎、安检等领域，如何有效识别情绪一直是一个十分值得研究的问题。本论文的主要工作如下：
　　1．网络的方法被广泛应用于疾病识别、测谎、磁共振等模式识别领域，在已有的功率谱研究的基础上我们首先提出网络分析的情绪识别方法。多模态特征的方法在模式识别中也得到广泛地应用，其次我们提出将功率谱特征和网络特征相结合的方法以提高分类的准确率。我们用五个频段（theta，slow alpha,alpha,beta,gamma）下的功率谱作为特征进行三种情绪（正性，中性，负性）分类，结果发现在beta和gamma频段有较高的分类准确率，分别为62.8％和64.2%。然后提取五个频段下的网络属性作为特征进行情绪分类，结果也发现在beta和gamma频段有较高的分类准确率分别为56%和67%，这说明我们可以用网络的分析方法来研究情绪识别。最后我们结合功率谱特征和网络特征进行分类，在beta和gamma频段的准确率分别为63.3%和68.2%，比功率谱和网络特征的分类准确率都要高，这说明结合不同类型的特征可以提高分类准确率。
　　2．随着人工智能的快速发展，机器学习成为了热门的研究，作为机器学习的一个重要分支，深度学习在其中扮演了十分重要的角色，深度学习能够构建学习网络并表现出来优越的分类性能。卷积神经网络（Convolutional Neural Network,CNN）是一个比较成熟的深度学习模型，目前CNN被广泛应用于图像识别，语音识别等领域，已有相关研究将CNN用在脑电上。本文通过CNN模型去研究脑电信号中的情绪识别，可以得到75.2%的准确率，大部分被试的分类准确率高于功率谱和网络属性以及融合特征的分类准确率，平均分类准确率较功率谱高11%，比网络特征高8.2%，比融合特征高7%，跨被试也能得到比较好的分类效果，结果为68.4%，这说明CNN能够用于情绪识别并可以得到较好的分类效果。

目录

声明

第一章 绪 论

1.1 研究背景、意义

1.2 国内外研究现状和趋势

1.3论文主要研究内容

1.4论文结构安排

第二章 基于功率谱和网络分析的情绪识别研究

2.1 引言

2.2 实验数据和方法

2.3 结果

2.4 讨论

2.5 本章小结

第三章 基于卷积神经网络的情绪识别研究

3.1 引言

3.2 实验数据和方法

3.3 结果

3.4 讨论

3.5 本章小结

第四章 总结与展望

4.1 工作总结

4.2 工作展望

致谢

参考文献

攻读硕士学位期间取得的成果