法律状态公告日
法律状态信息
法律状态
2019-05-28
授权
授权
2019-05-14
专利申请权的转移 IPC(主分类):H04N21/4402 登记生效日:20190424 变更前: 变更后: 申请日:20180807
专利申请权、专利权的转移
2019-03-05
实质审查的生效 IPC(主分类):H04N21/4402 申请日:20180807
实质审查的生效
2019-02-05
公开
公开
技术领域
本发明涉及计算机检测领域,尤其涉及一种关键帧动作幅度检测系统。
背景技术
电影放映机有各种不同类型,通常可分为固定式和移动式两大类。按放映影片的宽度,则可分为70毫米、35毫米、16毫米、8.75毫米和8毫米等不同的放映机。为一些特殊形式的电影还装备了立体、全景、环幕、穹幕、巨幕等放映机。
在放映机后安置有平盘式循环大片盘,可以容纳整部长度的影片,映完后不必倒片即可在下一场放映。为了简化操作,某些移动式窄影片放映机,在输片通道设计有自动穿片装置,也有的采用影片插盒装置。为了放映无声影片,有些窄影片放映机有16格/秒的速度装置。
发明内容
为了解决当前缺乏行之有效的高效率图像内容分析机制的技术问题,本发明提供了一种关键帧动作幅度检测系统。
其中,本发明至少具有以下两个重要发明点:
(1)分析以获得当前放映内容的关键帧,对关键帧中景深最浅的人物目标的动作幅度进行检测,以确定当前放映内容的动作等级,还采用出现更新动作等级的方式以保证当前放映内容类型判断的精度;
(2)基于图像的信噪比对图像进行栅格化处理,以获得多个形状相同的栅格区域,针对每一个栅格区域内的脉冲干扰的数量选择对应的分化去噪模式,避免图像去噪过于简单粗糙。
根据本发明的一方面,提供了一种关键帧动作幅度检测系统,所述系统包括:
时间读取设备,设置在室内放映机的附近,与室内放映机连接,用于接收所述室内放映机发送的各个视频帧的各个时间戳;关键帧判断设备,与所述时间读取设备连接,用于接收所述各个视频帧的各个时间戳,从所述各个视频帧的各个时间戳中提取出各个关键视频帧的各个时间戳,并在当前时刻距离室内放映机起始放映时间的时间差与某一个关键视频帧的时间戳符合时,发出关键帧判断信号,否则,发出非关键字判断信号;即时摄像设备,设置在室内放映机的附近,与所述关键帧判断设备连接,用于在接收到所述关键帧判断信号时,启动对室内放映机对面放映区域的即时摄像动作,以获得对应的室内放映图像,并输出所述室内放映图像。
更具体地,在所述关键帧动作幅度检测系统中,还包括:
第一处理设备,与所述即时摄像设备连接,用于接收所述室内放映图像,基于所述室内放映图像的信噪比对所述室内放映图像进行栅格化处理,以获得多个形状相同的栅格区域,其中,所述室内放映图像的信噪比越小,对所述室内放映图像进行栅格化处理获得的栅格区域的面积越小;第二处理设备,与所述第一处理设备连接,用于确定每一个栅格区域中脉冲干扰的数量,并在所述室内放映图像中任何栅格区域都不存在脉冲干扰时,发出无脉冲干扰信息。
更具体地,在所述关键帧动作幅度检测系统中,还包括:
第三处理设备,与所述第二处理设备连接,用于接收每一个栅格区域中脉冲干扰的数量,并基于每一个栅格区域中脉冲干扰的数量确定每一个栅格区域对应的参考像素点的数量;第四处理设备,分别与所述第一处理设备和所述第三处理设备连接,用于对每一个栅格区域进行不同的去噪处理,所述对每一个栅格区域进行不同的去噪处理包括:从所述栅格区域内待处理像素点的邻域中获取与栅格区域对应的参考像素点的数量符合的多个邻域像素点,将所述多个邻域像素点的多个R颜色分量值的加权平均值作为所述待处理像素点的去噪R颜色分量值,将所述多个邻域像素点的多个G颜色分量值的加权平均值作为所述待处理像素点的去噪G颜色分量值,将所述多个邻域像素点的多个B颜色分量值的加权平均值作为所述待处理像素点的去噪B颜色分量值;第五处理设备,与所述第四处理设备连接,用于接收每一个栅格区域的各个像素点的去噪R颜色分量值、去噪G颜色分量值和去噪B颜色分量值,并基于每一个栅格区域的各个像素点的去噪R颜色分量值、去噪G颜色分量值和去噪B颜色分量值获取每一个栅格区域对应的去噪区域,还将各个去噪区域进行边缘融合以获得与所述室内放映图像对应的栅格化处理图像,并输出所述栅格化处理图像;体形提取设备,设置在所述即时摄像设备的一侧,与所述第五处理设备连接,用于接收所述栅格化处理图像,对所述栅格化处理图像中的各个演员体形进行检测,以获得多个演员子图像,并输出所述多个演员子图像;景深分析设备,与所述体形分析设备连接,用于检测每一个演员子图像在所述栅格化处理图像中的景深,将所述多个演员子图像中景深最浅的演员子图像作为待分析子图像;体形识别设备,与所述景深分析设备连接,用于接收所述待分析子图像,基于所述待分析子图像的轮廓判断对应演员的动作类型,以基于所述对应演员的动作类型确定对应的室内放映机当前放映内容的动作等级;其中,所述体形识别设备在每一次获得新的动作等级时,将新的动作等级与当前动作等级进行比较,当所述新的动作等级大于等于所述当前动作等级时,基于所述新的动作等级更新当前动作等级,并存储更新后的当前动作等级。
更具体地,在所述关键帧动作幅度检测系统中:所述体形识别设备还用于当所述新的动作等级小于所述当前动作等级时,保持当前动作等级不变。
更具体地,在所述关键帧动作幅度检测系统中:所述体形识别设备还内置有存储单元,用于存储更新后的当前动作等级。
更具体地,在所述关键帧动作幅度检测系统中:所述第二处理设备还用于在所述室内放映图像中任一栅格区域存在脉冲干扰时,发出存在脉冲干扰信息。
更具体地,在所述关键帧动作幅度检测系统中:在所述第四处理设备中,邻域像素点距离待处理像素点越近,邻域像素点参与加权平均值运算的权重值越大。
更具体地,在所述关键帧动作幅度检测系统中:所述即时摄像设备还用于在接收到所述非关键帧判断信号时,停止对室内放映机对面放映区域的即时摄像动作。
更具体地,在所述关键帧动作幅度检测系统中,还包括:
室内计时设备,与所述关键帧判断设备连接,用于为所述关键帧判断设备提供当前时刻。
附图说明
以下将结合附图对本发明的实施方案进行描述,其中:
图1为根据本发明实施方案示出的关键帧动作幅度检测系统所应用的室内放映机的外形结构图。
具体实施方式
下面将参照附图对本发明的关键帧动作幅度检测系统的实施方案进行详细说明。
一般固定式放映机,由传动、输片、光学、还音、机体和电器等部分组成。移动式放映机上不附有扩音机、扬声器等。电影放映机各部分的作用如下:
传动部分:由电动机供给动能,经齿轮、链轮、齿皮带、涡轮涡杆等传递给输片部分。在固定式上多用三相同步电机;在移动式上一般用单相电机;特殊型号的往往需要用联锁电机,以保证设备之间同步。
输片部分:将成卷的影片由供片盘送到片窗照射以映出画面,并经还音部分使光学声带信号转换为声频电流。然后把放映过的影片再收卷起来。它由供、收片盒(或片臂)及供片、间歇、收片等输片齿轮,间歇运动机构、各种滑轮、片门和画幅调节装置等组成。窄胶片移动式放映机多用间歇抓片机构代替间歇输片齿轮。电影放映机的核心部分是间歇运动机构,他将连续转动变为间歇转动,并和遮光板相配合,使影片在光线通过时稳定地停留在片窗处,清晰成像在银幕上;光线被遮住时快速拉下,以免露出影片移动时的痕迹。标准电影移动速度是24格/秒,为了减少闪烁效应,遮光板每格遮光两次,将闪烁频率提高到每秒48次。使用最广泛的间歇运动机构是马尔蒂十字车
连续转动的凸轮1上有一个导钉2,它每与十字车3径向开槽啮合一次,十字车就旋转1/4周,因此传动轴每转一圈(由a~e),间歇输片齿轮4就转动90度,而将影片拉动一格。凸轮在e→a→b的过程中,十字车是静止的。某些窄影片放映机采用光学间歇补偿而不用机械间歇机构,有利于保护胶片,但画面亮度有损。收片机构随片卷直径加大而速度减慢,以减小张力。
光学部分:由光源、反光或聚光镜、放映镜头、灯箱、通风散热机构等组成。当影片在片窗间歇停留时,光学部分把片格窗内的画格照亮,并由放映镜头放大,投射在银幕上。不同银幕尺寸和放映距离,采用不同焦距的放映镜头;放映变形宽银幕影片时,另加宽银幕镜头。光源也因放映机用途不同而不同,如白炽灯、溴钨灯、氙灯等。银幕大时光源功率高。
还音部分:把影片上光学或磁性声带记录的声音信息还原成音频电流,经扩音机或扬声器转换成声音。这部分由激励灯泡、激励镜头、光刃、光电管、减振装置或磁头组成。有些窄影片放映机,为了便于自行配音,在这一部分还加装抹音和录音磁头。
机体部分:是支撑和连接各部件的框架。机架内一般用以装设电器设备、导线等。外部面板或表面装有仪表、指示灯和操作开关等。
为了克服上述不足,本发明搭建了一种关键帧动作幅度检测系统,能够有效解决相应的技术问题。
图1为根据本发明实施方案示出的关键帧动作幅度检测系统所应用的室内放映机的外形结构图。
根据本发明实施方案示出的关键帧动作幅度检测系统包括:
时间读取设备,设置在室内放映机的附近,与室内放映机连接,用于接收所述室内放映机发送的各个视频帧的各个时间戳;
关键帧判断设备,与所述时间读取设备连接,用于接收所述各个视频帧的各个时间戳,从所述各个视频帧的各个时间戳中提取出各个关键视频帧的各个时间戳,并在当前时刻距离室内放映机起始放映时间的时间差与某一个关键视频帧的时间戳符合时,发出关键帧判断信号,否则,发出非关键字判断信号;
即时摄像设备,设置在室内放映机的附近,与所述关键帧判断设备连接,用于在接收到所述关键帧判断信号时,启动对室内放映机对面放映区域的即时摄像动作,以获得对应的室内放映图像,并输出所述室内放映图像。
接着,继续对本发明的关键帧动作幅度检测系统的具体结构进行进一步的说明。
在所述关键帧动作幅度检测系统中,还包括:
第一处理设备,与所述即时摄像设备连接,用于接收所述室内放映图像,基于所述室内放映图像的信噪比对所述室内放映图像进行栅格化处理,以获得多个形状相同的栅格区域,其中,所述室内放映图像的信噪比越小,对所述室内放映图像进行栅格化处理获得的栅格区域的面积越小;
第二处理设备,与所述第一处理设备连接,用于确定每一个栅格区域中脉冲干扰的数量,并在所述室内放映图像中任何栅格区域都不存在脉冲干扰时,发出无脉冲干扰信息。
在所述关键帧动作幅度检测系统中,还包括:
第三处理设备,与所述第二处理设备连接,用于接收每一个栅格区域中脉冲干扰的数量,并基于每一个栅格区域中脉冲干扰的数量确定每一个栅格区域对应的参考像素点的数量;
第四处理设备,分别与所述第一处理设备和所述第三处理设备连接,用于对每一个栅格区域进行不同的去噪处理,所述对每一个栅格区域进行不同的去噪处理包括:从所述栅格区域内待处理像素点的邻域中获取与栅格区域对应的参考像素点的数量符合的多个邻域像素点,将所述多个邻域像素点的多个R颜色分量值的加权平均值作为所述待处理像素点的去噪R颜色分量值,将所述多个邻域像素点的多个G颜色分量值的加权平均值作为所述待处理像素点的去噪G颜色分量值,将所述多个邻域像素点的多个B颜色分量值的加权平均值作为所述待处理像素点的去噪B颜色分量值;
第五处理设备,与所述第四处理设备连接,用于接收每一个栅格区域的各个像素点的去噪R颜色分量值、去噪G颜色分量值和去噪B颜色分量值,并基于每一个栅格区域的各个像素点的去噪R颜色分量值、去噪G颜色分量值和去噪B颜色分量值获取每一个栅格区域对应的去噪区域,还将各个去噪区域进行边缘融合以获得与所述室内放映图像对应的栅格化处理图像,并输出所述栅格化处理图像;
体形提取设备,设置在所述即时摄像设备的一侧,与所述第五处理设备连接,用于接收所述栅格化处理图像,对所述栅格化处理图像中的各个演员体形进行检测,以获得多个演员子图像,并输出所述多个演员子图像;
景深分析设备,与所述体形分析设备连接,用于检测每一个演员子图像在所述栅格化处理图像中的景深,将所述多个演员子图像中景深最浅的演员子图像作为待分析子图像;
体形识别设备,与所述景深分析设备连接,用于接收所述待分析子图像,基于所述待分析子图像的轮廓判断对应演员的动作类型,以基于所述对应演员的动作类型确定对应的室内放映机当前放映内容的动作等级;
其中,所述体形识别设备在每一次获得新的动作等级时,将新的动作等级与当前动作等级进行比较,当所述新的动作等级大于等于所述当前动作等级时,基于所述新的动作等级更新当前动作等级,并存储更新后的当前动作等级。
在所述关键帧动作幅度检测系统中:所述体形识别设备还用于当所述新的动作等级小于所述当前动作等级时,保持当前动作等级不变。
在所述关键帧动作幅度检测系统中:所述体形识别设备还内置有存储单元,用于存储更新后的当前动作等级。
在所述关键帧动作幅度检测系统中:所述第二处理设备还用于在所述室内放映图像中任一栅格区域存在脉冲干扰时,发出存在脉冲干扰信息。
在所述关键帧动作幅度检测系统中:在所述第四处理设备中,邻域像素点距离待处理像素点越近,邻域像素点参与加权平均值运算的权重值越大。
在所述关键帧动作幅度检测系统中:所述即时摄像设备还用于在接收到所述非关键帧判断信号时,停止对室内放映机对面放映区域的即时摄像动作。
在所述关键帧动作幅度检测系统中,还包括:
室内计时设备,与所述关键帧判断设备连接,用于为所述关键帧判断设备提供当前时刻。
另外,所述存储单元为FLASH闪存。其中,FLASH闪存是属于内存器件的一种。闪存则是一种非易失性(Non-Volatile)内存,在没有电流供应的条件下也能够长久地保持数据,其存储特性相当于硬盘,这项特性正是闪存得以成为各类便携型数字设备的存储介质的基础。
NAND闪存的存储单元则采用串行结构,存储单元的读写是以页和块为单位来进行(一页包含若干字节,若干页则组成储存块,NAND的存储块大小为8到32KB),这种结构最大的优点在于容量可以做得很大,超过512MB容量的NAND产品相当普遍,NAND闪存的成本较低,有利于大规模普及。
采用本发明的关键帧动作幅度检测系统,针对现有技术中内容检测机制落后的技术问题,通过分析以获得当前放映内容的关键帧,对关键帧中景深最浅的人物目标的动作幅度进行检测,以确定当前放映内容的动作等级,还采用出现更新动作等级的方式以保证当前放映内容类型判断的精度;其中,基于图像的信噪比对图像进行栅格化处理,以获得多个形状相同的栅格区域,针对每一个栅格区域内的脉冲干扰的数量选择对应的分化去噪模式,避免图像去噪过于简单粗糙,从而解决了上述技术问题。
可以理解的是,虽然本发明已以较佳实施例披露如上,然而上述实施例并非用以限定本发明。对于任何熟悉本领域的技术人员而言,在不脱离本发明技术方案范围情况下,都可利用上述揭示的技术内容对本发明技术方案做出许多可能的变动和修饰,或修改为等同变化的等效实施例。因此,凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所做的任何简单修改、等同变化及修饰,均仍属于本发明技术方案保护的范围内。
机译: 关键帧提取器,关键帧提取程序,关键帧提取方法,成像设备和服务器设备
机译: 3D视频转换系统和方法,关键帧选择方法,关键帧选择方法和设备
机译: 使用关键帧列表文件对关键帧进行对齐的代码转换