一种面向事件关系编码的视频中多事件自然语言描述方法

摘要

本发明公开了一种面向事件关系编码的视频中多事件自然语言描述算法，包括以下步骤：S1、采用一三维卷积神经网络，对给定的视频序列提取深度特征，得到若干个深度特征向量，构成一深度特征序列；S2、基于所述深度特征序列，采用循环神经网络作为时序分析方法计算所述视频序列中事件的提议起止区间；S3、选定所述视频序列中需要进行描述的待描述事件，并根据所述事件的提议起止区间，对所述待描述事件在所述深度特征序列中对应的子序列进行再编码，得到所述待描述事件的描述子；S4、采用基于注意力模型的LSTM自适应解码器对所述描述子进行解码，得到用于描述所述待描述事件的自然语言。