新闻视频自动分条装置及新闻视频自动分条的方法

摘要

一种新闻视频自动分条装置，包括：提取模块、存储模块、特征识别模块、判断模块以及拆分模块。其中，提取模块自动提取新闻视频中所有的静音帧；存储模块预先存储播报员的声音以及头像，并存储静音帧及其时间点；特征识别模块提取新闻视频中含有播报员声音的帧以及含有播报员头像的帧；判断模块判断新闻视频中的静音帧是否为包含播报员头像的帧，以及在静音帧为包含播报员头像的帧时判断静音帧之后的帧是否包含播报员的头像与声音；拆分模块在静音帧之后的帧包含播报员头像与声音时将静音帧设为起始帧，并从起始帧对应的时间点对新闻视频进行拆分。利用本发明对新闻视频分条时，效率高，速度快，且节省人力成本。

说明书

技术领域

本发明涉及视频处理，尤其涉及一种新闻视频自动分条装置及新闻 视频自动分条的方法。

背景技术

目前新闻拆分要么是纯手工拆分，要么是根据新的主题新闻开始 时，刚开始的几帧一般都静音，来进行拆分。

手工拆分一个长度为N分钟的新闻视频，往往需要数倍于N分钟的 时间，人工成本太高，拆分速度太慢。

根据“新的主题新闻开始时，刚开始的几帧一般都静音”来拆分， 往往把同一个主题新闻中镜头的切换切分为了不同的主题新闻，因为只 要是镜头切换，都可能导致“刚开始的几帧一般都静音”，所以这种技 术虽然比纯手工拆分好，但在用这种技术进行初次切分后，还是需要人 工进行大量的纠错工作。

发明内容

有鉴于此，有必要提供一种对新闻视频自动分条、节省人工成本的 方法。

本发明提供的新闻视频自动分条装置，包括提取模块、特征识别模 块、判断模块以及拆分模块。其中，提取模块，用于自动提取新闻视频 中所有的静音帧；存储模块，用于预先存储播报员的声音以及头像，并 存储静音帧及其时间点；特征识别模块，用于根据所述播报员的声音特 征提取新闻视频中含有播报员声音的帧以及根据所述播报员头像提取 新闻视频中含有播报员头像的帧；判断模块，用于判断新闻视频中的所 述静音帧是否为包含播报员头像的帧，其中，所述判断模块还用在所述 静音帧为包含播报员头像的帧时判断所述静音帧之后的帧是否包含播 报员的头像与声音；拆分模块，用于在所述静音帧之后的帧包含播报员 头像与声音时将所述静音帧设为起始帧，并从所述起始帧对应的时间点 对新闻视频进行拆分。

本发明还提供一种新闻视频自动分条的方法，包括以下步骤：提取 所述新闻视频中的静音帧；读取新闻视频的播报员的声音特征；根据所 述播报员的声音特征提取新闻视频中含有播报员声音的帧；读取新闻视 频中含有播报员头像的帧；根据所述播报员头像提取新闻视频中含有播 报员头像的帧；判断所述静音帧中是否为包含所述播报员头像的帧；若 是，则判断所述静音帧之后的帧中是否包含播报员声音与头像；若是将 所述静音帧设为起始帧，并从所述起始帧对应的时间点对新闻视频进行 拆分。

本发明提供的新闻视频自动分条装置及新闻视频自动分条的方法 通过对静音帧、包含播报员头像帧以及包含播报员声音帧综合判断来得 到起始帧及其对应的时间点，以便对新闻视频进行拆分，有效的提高了 新闻视频的拆分效率，减低了人工的工作量。

附图说明

图1为本发明一实施方式中新闻视频自动分条装置的模块图；

图2为本发明一实施方式中新闻视频自动分条方法的流程图。

具体实施方式

下面详细描述本发明的实施例，所述实施例的示例在附图中示出， 其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或 类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于 解释本发明，而不能理解为对本发明的限制。

在本发明的描述中，术语“内”、“外”、“纵向”、“横向”、“上”、“下”、 “顶”、“底”等指示的方位或位置关系为基于附图所示的方位或位置关 系，仅是为了便于描述本发明而不是要求本发明必须以特定的方位构造 和操作，因此不能理解为对本发明的限制。

请参阅图1，图1所示为本发明一实施方式中新闻视频自动分条装 置10的模块图。

在本实施方式中，新闻视频自动分条装置10包括：获取模块102、 特征识别模块104、判断模块106、拆分模块108、处理器110以及存储 模块112，获取模块102、特征识别模块104、判断模块106以及拆分模 块108存储在存储模块112中，处理器110用于执行存储模块112中的 各个模块。

在本实施方式中，提取模块102用于自动提取新闻视频中所有的静 音帧。

存储模块112用于预先存储播报员的声音以及头像，并存储静音帧 及其时间点。

特征识别模块104用于根据所述播报员的声音特征提取新闻视频中 含有播报员声音的帧以及根据所述播报员头像提取新闻视频中含有播 报员头像的帧。

在本实施方式中，所述存储模块112将含有静音帧的时间点存储为 静音集合B＝{B1，B2，...，Bn}，将播报员的声音的帧的时间点存储为 声音集合C＝{C1，C2，...，Cm}以及含有播报员的头像的帧的时间点为 头像集合D＝{D1，D2，...，Dk}。

在本实施方式中，所述播报员与所述播报员的声音是一一对应。

判断模块106用于判断新闻视频中的所述静音帧是否为包含播报员 头像的帧。在本实施方式中，所述判断模块106还用在所述静音帧为包 含播报员头像的帧时判断所述静音帧之后的帧是否包含播报员的头像 与声音。

在本实施方式中，判断模块106还用于在所述静音帧不是包含播报 员头像的帧时判断所述静音帧为是否为最后一个静音帧，若不是，则读 取下一个静音帧并继续判断所述静音帧是否为包含播报员头像的帧。

在本实施方式中，判断模块106还用于在所述静音帧之后的帧不包 含播报员头像与声音时，则表示所述静音帧之后的帧仍为静音帧，继续 判断所述静音帧是否为包含播报员头像的帧。

在本实施方式中，判断模块106将所述静音集合B与所述声音集合 C进行交集运算得到第一交集E＝{E1，E2，...，Ej}，还用于将所述声 音集合C与所述头像集合D进行交集运算得到第二交集F＝{F1，F2，...， Fi}，其中，所述判断模块106还用于将所述第二交集F中所有元素减 一得到延迟集合G＝{F1，F2，...，Fi-1}，并将所述延迟集合G与所述 第一交集E求交集得到第三交集H＝{H1，H2，...，Hp}，其中第三交 集H中时间点所对应的帧为“同时出现播报员的头像和声音的帧之前的 且静音帧出现播报员的头像的那一帧”。

在本实施方式中，判断模块106还将将第一交集E＝{E1，E2，...， Ej}中连续时间点放入同一个子集，则集合E’＝{S1，S2，...，Sq}，其中 S1，S2，...，Sq为含有连续时间点的子集，各子集中的时间点按照时间 从小到大的顺序排列。

在本实施方式中，判断模块106再针对E’中的每一个子集进行分析， 例如，对子集Si进行分析，如果判断模块106发现子集Si中含有第三 交集H中的任意一个元素，则判断模块106确定子集Si中的第一个时 间点即为一个新的主题新闻开始帧的时间点。

拆分模块108用于在所述静音帧之后的帧包含播报员头像与声音时 将所述静音帧设为起始帧，并从所述起始帧对应的时间点对新闻视频进 行拆分。

请参阅图2，图2所示为本发明一实施方式中新闻视频自动分条的 流程图。

在本实施方式中，新闻视频自动分条的方法包括以下步骤：

在步骤S200中，提取模块102提取所述新闻视频中的静音帧。在 本实施方式中，存储模块112预先存储播报员的声音以及头像，并存储 静音帧及其时间点。

在本实施方式中，所述存储模块112将含有静音帧的时间点存储为 静音集合B＝{B1，B2，...，Bn}。

在步骤S202中，特征识别模块104读取新闻视频的播报员的声音 特征。

在步骤S204中，特征识别模块104根据所述播报员的声音特征提 取新闻视频中含有播报员声音的帧。在本实施方式中，所述存储模块112 将播报员的声音的帧的时间点存储为声音集合C＝{C1，C2，...，Cm}。

在步骤S206中，特征识别模块104读取新闻视频中含有播报员头 像的帧。

在步骤S208中，特征识别模块104根据所述播报员头像提取新闻 视频中含有播报员头像的帧。在本实施方式中，所述存储模块112含有 播报员的头像的帧的时间点为头像集合D＝{D1，D2，...，Dk}

在步骤S210，判断模块106判断所述静音帧中是否为包含所述播报 员头像的帧。在本实施方式中，判断模块106将所述静音集合B与所述 声音集合C进行交集运算得到第一交集E＝{E1，E2，...，Ej}，第一交 集E中的时间点对应的帧为“静音且出现新闻播报员头像的帧”。

若静音帧中为包含所述播报员头像的帧，则在步骤S212，判断模块 106判断所述静音帧之后的帧中是否包含播报员声音与头像。在本实施 方式中，判断模块106将所述声音集合C与所述头像集合D进行交集运 算得到第二交集F＝{F1，F2，...，Fi}，其中，所述判断模块106还用 于将所述第二交集F中所有元素减一得到延迟集合G＝{F1，F2，...， Fi-1}，并将所述延迟集合G与所述第一交集E求交集得到第三交集 H＝{H1，H2，...，Hp}，其中第三交集H中时间点所对应的帧为“同 时出现播报员的头像和声音的帧之前的且静音帧出现播报员的头像的 那一帧”。

在本实施方式中，判断模块106还将将第一交集E＝{E1，E2，...， Ej}中连续时间点放入同一个子集，则集合E’＝{S1，S2，...，Sq}，其中 S1，S2，...，Sq为含有连续时间点的子集，各子集中的时间点按照时间 从小到大的顺序排列。

在本实施方式中，判断模块106再针对E’中的每一个子集进行分析， 例如，对子集Si进行分析，如果判断模块106发现子集Si中含有第三 交集H中的任意一个元素，则判断模块106确定子集Si中的第一个时 间点即为一个新的主题新闻开始帧的时间点。

若静音帧之后的帧中包含播报员声音与头像，则在步骤S214，拆分 模块108将静音帧设为起始帧。

在步骤S216，拆分模块108从所述起始帧对应的时间点对新闻视频 进行拆分。

在本实施方式中，若静音帧的之后的帧中不包含播报员声音与头像 时，则表示所述静音帧之后的帧仍为静音帧，需回到步骤S210，判断模 块106继续判断静音帧中是否为包含所述播报员头像的帧。

若所述静音帧不是包含所述播报员头像的帧，则在步骤S218，判断 模块106判断静音帧是否为最后一个静音帧。

若静音帧不是最后一个静音帧，则在步骤S220，判断模块206读取 下一个静音帧。

在步骤S210，判断模块206进行判断所述静音帧是否为包含所述播 报员头像的帧。

本发明实施方式中的新闻视频自动分条装置10及新闻视频自动分 条的方法通过对静音帧、包含播报员头像帧以及包含播报员声音帧综合 判断来得到起始帧及其对应的时间点，以便对新闻视频进行拆分，有效 的提高了新闻视频的拆分效率，减低了人工的工作量。

虽然本发明参照当前的较佳实施方式进行了描述，但本领域的技术 人员应能理解，上述较佳实施方式仅用来说明本发明，并非用来限定本 发明的保护范围，任何在本发明的精神和原则范围之内，所做的任何修 饰、等效替换、改进等，均应包含在本发明的权利保护范围之内。