一种基于上下文序列记忆网络的个性化图像字幕生成方法

摘要

本发明中提出的一种基于上下文序列记忆网络的个性化图像字幕生成方法，其主要内容包括：数据库构建、上下文记忆网络、基于状态的序列生成、网络训练，其过程为，首先使用社交媒体内部应用接口及爬虫装置构建图像数据库并过滤冗余信息，使用图像记忆矢量、上下文记忆矢量和文字输出矢量进行标签与字幕的预测，从关键词字典中找寻高频词，从而生成具有最高匹配度的针对该用户的个性化新词语。本发明可以处理标签与字幕的同步预测，提供一个上下文记忆网络的框架来解决文字匹配问题，同时提高了生成对应图像字幕的预测精度。