一种基于稀疏自编码器的多视频摘要方法

摘要

一种基于稀疏自编码器的多视频摘要方法，包括：提取视频帧的视觉特征；将视频帧的视觉特征输入到稀疏自编码器，通过稀疏自编码器分别学习得到：视频帧的压缩表示即隐层的神经元的表征，输入层和隐层之间的连接权重，以及隐层和输出层的连接权重；利用获得的输入层和隐层之间的连接权重生成权重曲线；选择权重曲线的各局部最大值作为关键帧集合；对关键帧进行排序，实现摘要。本发明针对现有的多视频摘要数据集的特点，设计适用于该特点的基于带权重的原型分析方法的多视频摘要技术，使之在有效的先验信息的辅助下，充分地利用数据的特有信息。