基于GRU网络的视频摘要生成方法与系统

摘要

本发明提供的一种基于GRU网络的视频摘要生成方法，包括：对输入的原始视频下采样并进行特征提取，生成视频帧序列；基于GRU网络的Seq2Seq模型对视频帧序列进行分析并捕捉视频序列的上下文信息，生成每一帧的重要性得分；根据重要性得分结果，使用非极大值抑制算法提取关键帧并去除冗余帧，获取静态视频摘要和动态视频摘要。本发明还提供的一种基于GRU网络的视频摘要生成系统，通过在Seq2Seq模型中引入GRU网络单元，使模型在处理视频帧序列时能最大程度保留帧与帧之间的长距离影响因素，同时减少模型的参数，有效减少了模型的计算量；使用非极大值抑制算法可以有效处理冗余帧，从而获取更具代表性的视频摘要。