基于多角度子区域自适应的全景图情感识别方法及系统

摘要

本发明公开了基于多角度子区域自适应的全景图情感识别方法及系统，包括用于预测沉浸式虚拟环境下的用户情感识别，包括多角度旋转模块、特征提取模块、子区域自适应模块、多尺度融合模块及情感分类模块。利用球面多角度旋转算法产生一系列等距柱状投影全景图，输入卷积神经网络获取不同层次的特征优势。通过全局特征指导局部特征，自适应地建立当前尺度上下文特征之间的关联性，捕获不同层次特征图全局与局部的上下文依赖。对不同层次的特征图上采样，在通道维度拼接实现特征融合，获取用户的情感分类标签。本发明可正确预测用户在多种场景下的情感偏好及分布，提升VR下的用户体验。