基于内容的视频摘要生成关键技术研究

摘要

随着计算机网络，互联网行业的不断发展进步，视频数据也呈现迅速增长趋势，如何对大量的视频数据进行有效的管理组织成为了当今视频检索领域的热点问题。为解决这一问题基于内容的视频检索技术不断发展，使人们可以通过对图像序列或标签的浏览即可得到关键信息，提高浏览或管理效率。而从视频数据到图像序列的建立是一个对视频多级分层的过程，将视频进行分割，划分为片段，从片段中提取关键帧将成为视频摘要生成的重要步骤，并且也是基于内容的视频研究中的关键技术。本文主要工作就是进行视频片段分割和关键帧提取，将视频数据进行了多层次的划分，从而产生摘要信息。
　　在进行了典型算法的分析与总结之后提出了一种新的视频片段分割方法，通过多特征融合思想将LBP特征与GIST特征分别进行前融合与后融合，兼顾全局与局部特征来描述图像，并提出了一种中间描述子来描述视频图像在时间上的变化特性，并且第一次将随机森林的方法应用到了视频片段的分割当中，将视频片段分割问题变成一种分类问题，并且分别与基于动态阈值和静态阈值的分割方法做比较，实验证明取得了很好的效果。通过本文提出的方法将视频分割成为片段之后，针对每个片段进行关键帧提取。本文采用了一种结合了互信息与信息熵的关键帧提取方法，通过将片段划分为子片段，并且从子片段中选出候选类，提取关键帧，并通过信息熵理论去除冗余帧，自适应的提取合适数目的关键帧，很好的代表了片段的所表达的内容。实验证明提取的关键帧具有很好的代表性，将得到的关键帧相连则构成了视频的摘要信息。

目录

封面

声明

中文摘要

英文摘要

目录

第1章 绪论

1.1 选题背景和意义

1.2 国内外研究现状

1.3 本文的研究工作及内容安排

第2章 基础理论与经典算法

2.1 视频数据多层结构与分割

2.2 视频图像特征与相似性

2.3 分割中的边界检测方法

2.4 本章小结

第3章 基于RF的视频片段分割方法

3.1 算法整体思想与实验框架

3.2 多特征的融合

3.3 RF与特征融合的视频片段分割

3.4 基于阈值的视频片段分割

3.5 数据描述与评价标准

3.6 本章小结

第4章 关键帧提取及摘要生成

4.1 关键帧提取及摘要生成的意义

4.2 典型的关键帧提取方法

4.3 基于互信息的关键帧提取方法

4.4 实验分析

4.5 摘要生成

4.6 本章小结

结论

参考文献

攻读硕士学位期间发表的论文和取得的科研成果

致谢