法律状态公告日
法律状态信息
法律状态
2022-07-29
公开
发明专利申请公布
技术领域
本发明涉及体育赛事制作领域,更为具体的,涉及一种基于帧间检测的多机位体育赛事精彩集锦制作方法及设备。
背景技术
在以往体育赛事(如马拉松赛事)的精彩集锦制作中,往往需要后期编辑人员在非编机房通过剪辑工具,对前端多路摄像机收录下来的素材进行挑选,剪辑,合成等繁琐操作,这样耗费了大量的人力和时间。
发明内容
本发明的目的在于克服现有技术的不足,提供一种基于帧间检测的多机位体育赛事精彩集锦制作方法及设备,可以快速精准地剪辑出体育运动精彩集锦,且有效大幅降低神经网络运算量,极大的降低了人工,节约了大量的人力和机器算力等。
本发明的目的是通过以下方案实现的:
一种基于帧间检测的多机位体育赛事精彩集锦制作方法,包括步骤:
在智能剪辑系统中进行预处理后,利用视频服务器存储体育赛事现场摄像机收录的体育赛事现场视频;
对体育赛事现场视频采用定采样和动态步长结合的方式进行帧间判断,根据判断结果选择只处理帧间差值大于设定值的画面;
对帧间差值大于设定值的画面,将体育赛事视频分为不同机位,根据不同机位进行条带画面分割后,打上精彩瞬间标签;
利用图像识别将精彩瞬间标签匹配运动员身份,利用打上精彩瞬间标签的视频片段剪辑出精彩集锦。
进一步地,所述预处理,包括子步骤:
S1,在智能剪辑系统中创建体育赛事事项,并导入体育赛事的场景图,在该场景图中确定出摄像机摆设的位置,对摄像机按照顺序进行标号,并进行记录;
S2,在智能剪辑系统中输入参加赛事的所有运动员的个人身份证明信息,并上传所有运动员的人脸图像,将每个运动员各自的个人身份证明信息与各自的人脸图像进行匹配关联。
进一步地,所述对体育赛事现场视频采用定采样和动态步长结合的方式进行帧间判断,根据判断结果选择只处理帧间差值大于设定值的画面,包括子步骤:
对已上传的视频进行帧间判断处理,对每一帧画面计算差值,最终只保存差值大于设定值的视频帧,且在选择检测帧间插值的画面时,根据实际情况固定间隔X帧进行计算,或根据画面变化规律自适应调整间隔1-n帧进行计算,或结合两种计算方式,n为正整数。
进一步地,所述根据将体育赛事视频分为不同机位,根据不同机位进行条带画面分割后,打上精彩瞬间标签,包括子步骤:
通过预处理标注的摄像机标号,将体育赛事视频分为正面跟拍机位、侧面固定机位、上方俯瞰机位,并根据各机位进行条带画面分割进行运动员超越瞬间、运动员停留、运动员过线判断,然后打上对应精彩瞬间标签。
进一步地,所述根据不同机位进行条带画面分割后,打上精彩瞬间标签,包括子步骤:
将体育赛事拍摄摄像机分为:①选手侧方固定机位、②选手前方跟拍机位、③选手上方俯瞰机位共三种情况;
针对①②情况,采用条带画面分割将画面纵向分解特定像素大小的条带,通过判断当画面人物出现在同一条带中,则判断此帧画面存在激烈竞争画面,标记为精彩瞬间;
针对③情况,采用条带画面分割将画面横向分解特定像素大小的条带,判断当画面人物出现在同一条带中,则判断此帧画面存在激烈竞争画面,标记为精彩瞬间。
进一步地,所述利用图像识别将精彩瞬间标签匹配运动员身份,包括子步骤:
在视频中找出与运动员对应的个人身份证明信息或者人脸图像的视频片段,匹配运动员身份,根据这些视频片段剪辑出精彩集锦。
进一步地,包括步骤:将智能手机上的APP与智能剪辑系统对接,用户通过APP查询体育赛事中某个运动员信息,利用APP向用户展示该运动员的个人集锦。
进一步地,APP具有付费下载功能,用户通过付费的方式下载运动员的个人集锦。
进一步地,包括步骤:利用直播平台进行云直播申请,云直播的推流地址配置到摄像机的推流设备上,云直播的观看地址配置到视频服务器的信源位置。
一种计算机设备,包括存储器、处理器及存储在存储器上并能在处理器上运行的计算机程序,处理器执行所述程序时实现如上任一所述的方法。
本发明的有益效果包括:
本发明实施例方法根据体育赛事(如马拉松)的具体场景,由多路摄像机进行现场视频收录,同时构建运动员的个人身份证明信息库,对收录的视频进行实时智能分析,运用帧间检测、人脸采集、号牌采集等手段进行融合推理,从帧间画面差值的方式减小神经网络智能剪辑模型对超高清视频的计算量,通过条带画面分割技术、特定运动员人脸以及号牌识别技术,对运动精彩画面进行判定标注,推导出体育赛事的精彩片段;进而生成体育运动精彩集锦。本发明实施例方法可以快速精准地剪辑出体育运动精彩集锦,且有效大幅降低神经网络运算量,极大的降低了人工,节约了大量的人力和机器算力。
本发明实施例起到对超高清视频文件压缩,减小精彩节点识别计算量的作用,可精准定位画面变化较大瞬间。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例方法的步骤流程图;
图2为本发明实施例方法针对①②情况时,标记为精彩瞬间的示意图;
图3为本发明实施例方法针对③情况时,标记为精彩瞬间的示意图。
具体实施方式
本说明书中所有实施例公开的所有特征,或隐含公开的所有方法或过程中的步骤,除了互相排斥的特征和/或步骤以外,均可以以任何方式组合和/或扩展、替换。
实施例1
如图1所示,一种基于帧间检测的多机位体育赛事精彩集锦制作方法,包括步骤:
在智能剪辑系统中进行预处理后,利用视频服务器存储体育赛事现场摄像机收录的体育赛事现场视频;
对体育赛事现场视频采用定采样和动态步长结合的方式进行帧间判断,根据判断结果选择只处理帧间差值大于设定值的画面;
对帧间差值大于设定值的画面,将体育赛事视频分为不同机位,根据不同机位进行条带画面分割后,打上精彩瞬间标签;
利用图像识别将精彩瞬间标签匹配运动员身份,利用打上精彩瞬间标签的视频片段剪辑出精彩集锦。
实施例2
在实施例1的基础上,所述预处理,包括子步骤:
S1,在智能剪辑系统中创建体育赛事事项,并导入体育赛事的场景图,在该场景图中确定出摄像机摆设的位置,对摄像机按照顺序进行标号,并进行记录;
S2,在智能剪辑系统中输入参加赛事的所有运动员的个人身份证明信息,并上传所有运动员的人脸图像,将每个运动员各自的个人身份证明信息与各自的人脸图像进行匹配关联。
在本实施例中,以马拉松赛事为例,采用以下两种方式上传运动员个人身份证明信息以及人脸图像,其中,个人身份证明信息是指能够证实运动员身份的相关信息,具体包括运动员的姓名和参数号码。
方式一:直接在智能剪辑系统的显示前端输入运动员的姓名和参赛号码,并将对应运动员的人脸图片上传到智能剪辑系统中,进行匹配关联,确保运动员与其人脸能够对应。
方式二:首先,将所有参赛运动员的个人身份证明信息制成Excel表格,然后将Excel表格导入到系统中,然后将每个参赛运动员的人脸图片单独做成一个文件夹,并以“名字+参赛号码”的形式对文件进行命名,随后上传,智能剪辑系统自动根据运动员的名字和参赛号码的信息将与之对应的人脸图片进行匹配关联。
将运动员的个人身份证明信息与其人脸图像关联后,可确保在智能剪辑系统中,运动员的信息是统一的,避免出现运动员本人与人脸图像对应不上的问题。
在本实施例中,摄像机对接有收录通道,收录通道与收录服务器对接,摄像机通过收录通道将体育赛事现场视频上传到收录服务器。
在对体育赛事现场视频的收录过程中,需采集体育赛事现场视频的参数,参数包括:视频的长度、音频通道、扫描方式、视音频参数和存储路径。并且在收录过程中,可以修改采集的参数,根据实际需求对视频进行采集,避免了后期对视频的二次处理。
在本实施例中,收录服务器将摄像机上传的体育赛事现场视频以文件夹的方式进行存储,文件夹的名字按照摄像机的标号命名,以便于后期寻找现场视频。
实施例3
在实施例1的基础上,所述对体育赛事现场视频采用定采样和动态步长结合的方式进行帧间判断,根据判断结果选择只处理帧间差值大于设定值的画面,包括子步骤:
对已上传的视频进行帧间判断处理,对每一帧画面计算差值,最终只保存差值大于设定值的视频帧,且在选择检测帧间插值的画面时,根据实际情况固定间隔X帧进行计算,或根据画面变化规律自适应调整间隔1-n帧进行计算,或结合两种计算方式,n为正整数。
实施例4
在实施例1的基础上,所述根据将体育赛事视频分为不同机位,根据不同机位进行条带画面分割后,打上精彩瞬间标签,包括子步骤:
通过预处理标注的摄像机标号,将体育赛事视频分为正面跟拍机位、侧面固定机位、上方俯瞰机位,并根据各机位进行条带画面分割进行运动员超越瞬间、运动员停留、运动员过线判断,然后打上对应精彩瞬间标签。
实施例5
在实施例1的基础上,所述根据不同机位进行条带画面分割后,打上精彩瞬间标签,包括子步骤:
将体育赛事拍摄摄像机分为:①选手侧方固定机位、②选手前方跟拍机位、③选手上方俯瞰机位共三种情况;
针对①②情况,采用条带画面分割将画面纵向分解特定像素大小的条带,通过判断当画面人物出现在同一条带中,则判断此帧画面存在激烈竞争画面,标记为精彩瞬间,如图2所示;
针对③情况,采用条带画面分割将画面横向分解特定像素大小的条带,判断当画面人物出现在同一条带中,则判断此帧画面存在激烈竞争画面,标记为精彩瞬间,如图3所示。
实施例6
在实施例2的基础上,所述利用图像识别将精彩瞬间标签匹配运动员身份,包括子步骤:
在视频中找出与运动员对应的个人身份证明信息或者人脸图像的视频片段,匹配运动员身份,根据这些视频片段剪辑出精彩集锦。
实施例7
在实施例1的基础上,包括步骤:将智能手机上的APP与智能剪辑系统对接,用户通过APP查询体育赛事中某个运动员信息,利用APP向用户展示该运动员的个人集锦。
实施例8
在实施例7基础上,APP具有付费下载功能,用户通过付费的方式下载运动员的个人集锦。
实施例9
在实施例1的基础上,包括步骤:利用直播平台进行云直播申请,云直播的推流地址配置到摄像机的推流设备上,云直播的观看地址配置到视频服务器的信源位置。
实施例10
一种计算机设备,包括存储器、处理器及存储在存储器上并能在处理器上运行的计算机程序,处理器执行所述程序时实现如实施例1~实施例9任一所述的方法。
描述于本发明实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现,所描述的单元也可以设置在处理器中。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定。
根据本申请的一个方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述各种可选实现方式中提供的方法。
作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该电子设备执行时,使得该电子设备实现上述实施例中所述的方法。
本发明未涉及部分均与现有技术相同或可采用现有技术加以实现。
上述技术方案只是本发明的一种实施方式,对于本领域内的技术人员而言,在本发明公开了应用方法和原理的基础上,很容易做出各种类型的改进或变形,而不仅限于本发明上述具体实施方式所描述的方法,因此前面描述的方式只是优选的,而并不具有限制性的意义。
除以上实例以外,本领域技术人员根据上述公开内容获得启示或利用相关领域的知识或技术进行改动获得其他实施例,各个实施例的特征可以互换或替换,本领域人员所进行的改动和变化不脱离本发明的精神和范围,则都应在本发明所附权利要求的保护范围内。
机译: 自动嵌入并通过电子邮件发送用户生成的精彩集锦的方法和设备
机译: 基于网络拥塞的具有帧间/帧间模式决策的自适应视频
机译: 使用帧间/场间预测编码和帧内/场内编码检测压缩视频数据中的镜头边界的方案