自适应权重的双模态情感识别

摘要

情感识别是人机交互领域的重要问题之一。语音和脸部肌肉动作信息是用于情感识别的两个最重要的模态。本文认为，在双模态情感识别中，给不同的特征赋予不同的权值有利于充分利用双模态信息，并且提出了一种基于Boosting的双模态信息融合方法，它能够自适应的调整语音和人脸动作特征参数的权重，从而达到更好的识别效果。实验表明，该方法能够更好的区分易混淆的情感状态，得到更高的情感识别率。