基于主题字幕提取的新闻视频检索研究

摘要

近年来，基于内容的多媒体信息检索已经成为了一个热门的研究领域，新闻视频检索作为其中一部分也得到了广泛的研究。新闻视频是人们获取信息的主要媒体，但如何快速、准确地从海量的新闻视频数据中，找到所需的内容成为一个迫切需要解决的问题。本文以新闻视频为研究对象，完成了以下几个部分：镜头分段、关键帧提取、主题字幕提取、新闻故事分段和新闻视频检索，具体工作如下： (1)镜头分段是后续视频处理分析的前提，本文改进了基于双重比较的镜头分段算法，将自适应阈值运用于双重比较法，完成了对新闻视频的突变和渐变镜头检测，具有更高的准确性。由于主题字幕最大限度地反映了新闻的主要内容，本文提出了基于主题字幕帧的关键帧提取算法，提取的关键帧基本上可以代表镜头内容。 (2)主题字幕提取包含三部分内容。首先根据新闻主题字幕的特点，设计了基于3/10时空切片的字幕帧检测算法，取得了较好的检测效果；然后采用基于小波变换和支持向量机的字幕区提取算法，实现了主题字幕的准确定位；最后对主题字幕进行插值放大、二值化、字符分割及OCR文字识别，识别效果较好。 (3)针对新闻结构的特点，设计了基于主题字幕提取的新闻故事分段算法，在主题字幕提取的基础上，通过静音检测、主持人镜头检测，把连续的新闻视频分割成一个个的新闻故事，能够达到令人满意的效果；根据新闻分段结果，以及主题字幕的标注，实现了基于关键字的新闻视频检索。

目录

文摘

英文文摘

声明

1绪论

1.1课题的研究背景及意义

1.2基于内容的视频检索国内外研究现状

1.3基于内容的视频检索所面临的问题

1.4视频中的字幕分析

1.5本文的主要工作和论文组织

1.5.1研究的主要内容

1.5.2论文组织

2字幕提取技术

2.1字幕提取系统

2.2字幕帧检测技术

2.3字幕区提取技术

2.4字幕增强技术

2.5字幕分割技术

2.6本章小结

3新闻视频的结构化分析

3.1视频结构化分析的概述

3.2镜头分段

3.2.1镜头分段的概念

3.2.2常用的镜头分段方法

3.2.3一种改进的双重比较镜头分段算法

3.2.4实验结果

3.3关键帧提取

3.3.1常用的关键帧提取方法

3.3.2基于主题字幕的关键帧提取

3.3.3实验结果

3.4本章小结

4新闻视频中的主题字幕提取

4.1新闻视频中的字幕分类

4.2新闻主题字幕帧的检测

4.2.1时空切片的字幕纹理分析

4.2.2纹理预处理

4.2.3能量模型

4.2.4主题字幕帧的检测

4.2.5实验结果

4.3主题字幕区提取

4.3.1基于小波变换的特征提取

4.3.2基于支持向量机的字幕区提取

4.3.3主题字幕区提取流程图

4.3.4实验结果

4.4.主题字幕的二值化及识别

4.4.1字幕的插值

4.4.2字幕的二值化

4.4.3字幕的分割

4.4.3字幕的识别

4.5本章小结

5基于主题字幕提取的新闻故事分段和视频检索

5.1基于主题字幕提取的新闻故事分段

5.1.1音频检测

5.1.2主持人镜头检测

5.1.3新闻故事分段

5.1.4实验结果

5.2基于主题字幕提取的新闻视频检索

5.2.1新闻视频检索系统简介

5.2.2数据库设计

5.2.3新闻视频检索

5.3本章小结

6结论与展望

6.1本文的主要工作

6.2进一步工作的方向

致 谢

参考文献