NAO机器人的双模态情感计算系统

摘要

本文基于NAO机器人设计了一种双模态(文本和表情)融合的情感计算系统,以提高机器人对情感识别的准确率,赋予人形机器人NAO“情感”。利用OpenCV开源库和VGG神经网络识别出表情;利用百度语音识别API和BERT神经网络识别出话语内容的情感,并利用判决层融合技术得到最终的情感。经测试,该系统达到了较为和谐的人机交互效果。