一种基于交叉模态融合的电影推荐系统

摘要

一种基于交叉模态融合的电影推荐系统，包括：输入模块，输入信息包括用户集合中每一个用户的特征信息、电影集合中每一个电影的特征信息、用户集合中每一个用户对电影集合中每一个电影的交互信息、以及电影集合中每一个电影的海报图片；预处理模块、单模态编码模块、交叉模态融合模块以及输出模块。基于深度神经网络的模型提取电影海报图片的视觉信息，丰富了推荐过程中可以使用的有用信息；另一方面，本发明基于交叉模态融合算法实现文本和视觉信息的交互和融合更好地对用户进行电影推荐，相比传统仅使用单一模态信息、没有对两个模态特征信息进行交互、以及没有区别单模态和多模态交互方式实现的推荐算法有更好的推荐效果。