基于EEG的普通话听觉注意解码方法及装置

摘要

本发明公开了一种基于EEG的普通话听觉注意解码方法及装置，方法包括：通过深度学习架构建立EEG和语音包络之间的非线性模型，将提取得到的语音包络和采集的EEG信号作为非线性模型的输入；基于所述非线性模型，借助长短时记忆人工神经网络和基于自注意力机制的深度学习模型构建基于脑电信号的语音包络重构模型；计算重构语音包络和候选语音包络之间的Pearson’s相关系数，将候选语音与重构语音包络的相关系数最大的语音流作为被试的听觉注意对象；对语音内容进行在线或者离线的解码，输出重构的语音包络。装置包括：脑电帽、放大器和处理器。本发明解决目前没有特定的声调语言的听觉注意解码模型，对于非声调语言的听觉注意力解码效果也有提升。