一种基于语义分解的短视频事件检测方法

摘要

本发明公开了一种基于语义分解的短视频事件检测方法，其特征在于，所述方法包括：将短视频多模态的原始特征向量与其对应的标签词向量相结合，得到语义分解后的多模态特征向量；将语义分解后的多模态特征向量按模态输入到不同的自动编码器中，并将自动编码器的中间层作为输出，最小化不同自动编码器输出的差距，得到多模态融合后的特征向量；将多模态融合后的特征向量作为节点初值输入到图神经网络中进行迭代更新，得到节点隐藏信息；将图神经网络迭代完成后的节点隐藏信息输出到分类器中，得到最终的事件检测结果。本发明能够找出不同标签之间的相关性，进而提高了短视频事件检测的准确率。