基于FPV的影视拍摄方法及影视拍摄装置

摘要

本发明实施例公开了一种基于FPV的影视拍摄方法及影视拍摄装置，涉及视频处理技术领域，所述方法包括：获取基于FPV的第一拍摄视频，以及获取基于FPV的第二拍摄视频，所述第一拍摄视频和所述第二拍摄视频为拍摄主体上不同位置的拍摄视频；确定所述第一拍摄视频和所述第二拍摄视频中的主视频和次视频；对所述主视频进行第一视角分析，获得对应的主第一视角视频段；对所述次视频进行第一视角分析，获得对应的次第一视角视频段；基于所述次第一视角视频段对所述主第一视角视频段进行融合处理，生成对应的影视作品。通过从拍摄主体上不同位置获取多个基于FPV的拍摄视频，并进行视频融合处理，从而有效过滤无效视频段，实现更好的影视作品生成效果。

说明书

技术领域

本发明涉及视频处理技术领域，具体地涉及一种基于FPV的影视拍摄方法及一种基于FPV的影视拍摄装置。

背景技术

随着科技的不断发展，摄像头的缩小化和高清化，使得其应用场景被大大拓宽，人们通过将摄像头佩戴在身上或设置在终端设备上以满足更丰富的需求。

在传统的摄影领域，人们往往事先设定好一定的剧本，然后由专人进行演绎，在演绎过程中有专业人员通过摄像机对演员进行拍摄，从而实现对该剧本的影视创作。然而随着信息技术的不断发展，人们日常生活中所能接收到的影视作品越来越多，对人们造成了一定的审美疲劳，人们不再满足于简单的通过摄像机拍摄的影视，而更期望获得更有代入感更真实的视觉体验。

为了解决上述技术问题，人们考虑通过将摄像头配置在人身上或终端上，从而以第一视觉的方式进行拍摄，并为人们提供更有代入感的影视作品。然而在实际应用过程中，一方面，人在拍摄过程中，由于需要行走和移动，因此不可避免地会出现与影视创造不相符合的拍摄内容，比如查看脚下状况、环视障碍物等；通过终端拍摄时也可能随时发生拍摄画面的随机晃动，从而大大降低了视觉体验，降低了影视作品的创作效果。

发明内容

为了克服现有技术中存在的上述技术问题，本发明实施例提供一种基于FPV的影视拍摄方法及影视拍摄装置，通过从拍摄主体上不同位置获取多个基于FPV的拍摄视频，并进行视频融合处理，从而有效过滤无效视频段，实现更好的影视作品生成效果。

为了实现上述目的，本发明实施例提供一种基于FPV的影视拍摄方法，所述方法包括：获取基于FPV的第一拍摄视频，以及获取基于FPV的第二拍摄视频，所述第一拍摄视频和所述第二拍摄视频为拍摄主体上不同位置的拍摄视频；确定所述第一拍摄视频和所述第二拍摄视频中的主视频和次视频；对所述主视频进行第一视角分析，获得对应的主第一视角视频段；对所述次视频进行第一视角分析，获得对应的次第一视角视频段；基于所述次第一视角视频段对所述主第一视角视频段进行融合处理，生成对应的影视作品。

优选地，所述确定所述第一拍摄视频和所述第二拍摄视频中的主视频和次视频，包括：对所述第一拍摄视频和所述第二拍摄视频进行视线分析，获得对应的第一视线和第二视线；确定与当前影视创作对应的有效视线区域；分别获取所述第一视线在所述有效视线区域内的第一占空比，以及所述第二视线在所述有效视线区域内的第二占空比；基于所述第一占空比和所述第二占空比分析确定所述第一拍摄视频和所述第二拍摄视频中的主视频和次视频。

优选地，所述方法还包括：在对所述主视频进行第一视角分析之前，获取预设神经网络模型；确定与当前影视创作对应的影视训练数据集；基于所述影视训练数据集对所述预设神经网络模型进行训练，生成影视分析模型；基于所述影视分析模型分别对所述主视频和所述次视频进行第一视角分析。

优选地，所述基于所述主第一视角视频段对所述次第一视角视频段进行融合处理，生成对应的影视作品，包括：基于所述主第一视角视频段确定中断视频段；从所述次第一视角视频段中提取与所述中断视频段对应的替换视频段；对所述替换视频段的衔接帧执行过渡优化处理，获得优化后视频段；对所述主第一视角视频段和所述优化后视频段执行融合处理，生成对应的影视作品。

优选地，所述衔接帧包括开始衔接帧和结束衔接帧，所述对所述替换视频段的衔接帧执行过渡优化处理，获得优化后视频段，包括：从所述主第一视角视频段中获取与所述替换视频段对应的前置衔接帧和后置衔接帧；对所述前置衔接帧进行视线分析，生成前置视线，以及对所述后置衔接帧进行视线分析，生成后置视线；基于所述前置视线对所述替换视频段的预设数量的开始衔接帧进行图像畸变处理，获得前置处理后视频段；基于所述后置视线对所述前置处理后视频段的预设数量的结束衔接帧进行图像畸变处理，获得优化后视频段。

相应的，本发明还提供一种基于FPV的影视拍摄装置，所述装置包括：视频获取单元，用于获取基于FPV的第一拍摄视频，以及获取基于FPV的第二拍摄视频，所述第一拍摄视频和所述第二拍摄视频为拍摄主体上不同位置的拍摄视频；主次确定单元，用于确定所述第一拍摄视频和所述第二拍摄视频中的主视频和次视频；第一分析单元，用于对所述主视频进行第一视角分析，获得对应的主第一视角视频段；第二分析单元，用于对所述次视频进行第一视角分析，获得对应的次第一视角视频段；作品生成单元，用于基于所述次第一视角视频段对所述主第一视角视频段进行融合处理，生成对应的影视作品。

优选地，所述主次确定单元包括：视线分析模块，用于对所述第一拍摄视频和所述第二拍摄视频进行视线分析，获得对应的第一视线和第二视线；有效区域确定模块，用于确定与当前影视创作对应的有效视线区域；占空比获取模块，用于分别获取所述第一视线在所述有效视线区域内的第一占空比，以及所述第二视线在所述有效视线区域内的第二占空比；主次确定模块，用于基于所述第一占空比和所述第二占空比分析确定所述第一拍摄视频和所述第二拍摄视频中的主视频和次视频。

优选地，所述装置还包括模型训练单元，所述模型训练单元具体用于：在对所述主视频进行第一视角分析之前，获取预设神经网络模型；确定与当前影视创作对应的影视训练数据集；基于所述影视训练数据集对所述预设神经网络模型进行训练，生成影视分析模型；基于所述影视分析模型分别对所述主视频和所述次视频进行第一视角分析。

优选地，所述作品生成单元包括：中断视频段确定模块，用于基于所述主第一视角视频段确定中断视频段；替换视频段确定模块，用于从所述次第一视角视频段中提取与所述中断视频段对应的替换视频段；优化模块，用于对所述替换视频段的衔接帧执行过渡优化处理，获得优化后视频段；融合模块，用于对所述主第一视角视频段和所述优化后视频段执行融合处理，生成对应的影视作品。

优选地，所述衔接帧包括开始衔接帧和结束衔接帧，所述优化模块具体用于：从所述主第一视角视频段中获取与所述替换视频段对应的前置衔接帧和后置衔接帧；对所述前置衔接帧进行视线分析，生成前置视线，以及对所述后置衔接帧进行视线分析，生成后置视线；基于所述前置视线对所述替换视频段的预设数量的开始衔接帧进行图像畸变处理，获得前置处理后视频段；基于所述后置视线对所述前置处理后视频段的预设数量的结束衔接帧进行图像畸变处理，获得优化后视频段。

通过本发明提供的技术方案，本发明至少具有如下技术效果：

通过从拍摄主体的不同位置获取基于FPV的拍摄视频，并对所获得的多个拍摄视频中提取有效的第一视角视频段，并根据不同拍摄视频的主次关系进行视频的融合，从而获得具有最佳拍摄效果的FPV影视作品，大大提高了FPV影视作品的视觉效果，提高了用户体验。

本发明实施例的其它特征和优点将在随后的具体实施方式部分予以详细说明。

附图说明

附图是用来提供对本发明实施例的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本发明实施例，但并不构成对本发明实施例的限制。在附图中：

图1是本发明实施例提供的基于FPV的影视拍摄方法的具体实现流程图；

图2是本发明实施例提供的确定主视频和次视频的具体实现流程图；

图3是本发明实施例提供的生成影视作品的具体实现流程图；

图4是本发明实施例提供的基于FPV的影视拍摄装置的结构示意图。

具体实施方式

以下结合附图对本发明实施例的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本发明实施例，并不用于限制本发明实施例。

本发明实施例中的术语“系统”和“网络”可被互换使用。“多个”是指两个或两个以上，鉴于此，本发明实施例中也可以将“多个”理解为“至少两个”。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，字符“/”，如无特殊说明，一般表示前后关联对象是一种“或”的关系。另外，需要理解的是，在本发明实施例的描述中，“第一”、“第二”等词汇，仅用于区分描述的目的，而不能理解为指示或暗示相对重要性，也不能理解为指示或暗示顺序。

请参见图1，本发明实施例提供一种基于FPV的影视拍摄方法，所述方法包括：

S10)获取基于FPV的第一拍摄视频，以及获取基于FPV的第二拍摄视频，所述第一拍摄视频和所述第二拍摄视频为拍摄主体上不同位置的拍摄视频；

S20)确定所述第一拍摄视频和所述第二拍摄视频中的主视频和次视频；

S30)对所述主视频进行第一视角分析，获得对应的主第一视角视频段；

S40)对所述次视频进行第一视角分析，获得对应的次第一视角视频段；

S50)基于所述次第一视角视频段对所述主第一视角视频段进行融合处理，生成对应的影视作品。

在一种可能的实施方式中，首先获取基于FPV(First Person View，第一人称视角)的第一拍摄视频，以及获取基于FPV的第二拍摄视频，其中，该第一拍摄视频和第二拍摄视频为拍摄主体上不同位置的拍摄视频，该不同位置可以是拍摄主体上具有不同运动特征的位置，具体的，在本实施例中，通过人体进行PFV视频的拍摄，在拍摄过程中，可以在人体上设置多个视频拍摄装置，比如第一个拍摄装置设置于人体头部，并跟随头部动作而动作，从而获得具有第一视角视觉效果的视频；第二个拍摄装置设置于人体胸口，其朝向与人体朝向一致。

在获得上述第一拍摄视频和第二拍摄视频后，需要首先确定其中的主视频和次视频，以确定在后续视频融合过程中的基准视频，提高后续视频融合的准确性。请参见图2，在本发明实施例中，所述确定所述第一拍摄视频和所述第二拍摄视频中的主视频和次视频，包括：

S21)对所述第一拍摄视频和所述第二拍摄视频进行视线分析，获得对应的第一视线和第二视线；

S22)确定与当前影视创作对应的有效视线区域；

S23)分别获取所述第一视线在所述有效视线区域内的第一占空比，以及所述第二视线在所述有效视线区域内的第二占空比；

S24)基于所述第一占空比和所述第二占空比分析确定所述第一拍摄视频和所述第二拍摄视频中的主视频和次视频。

在一种可能的实施方式中，首先分别对第一拍摄视频和第二拍摄视频进行视线分析，以获得对应的第一视线和第二视线，具体的，可以对上述拍摄视频中每帧的中心点进行提取，同时分析每帧的图像透视方向，从而综合确定每帧图像的视线，即确定对应拍摄视频的视线。另一方面，确定与当前影视创作对应的有效视线区域，具体的，可以根据当前影视创作在不同场景下所需要拍摄的主要场景内容，确定每个场景在FPV下的有效视线区域，例如当在第一场景进行FPV视频创作时，由于该场景拍摄主题和拍摄方向较为明确，因此该场景内的有效视频区域可以为拍摄主体前方的较小视野范围所对应的区域；在第二场景进行FPV视频创作时，由于该场景存在较多障碍物和干扰物，因此该场景内的有效视野区域可以为拍摄主体周围较大视野范围所对应的区域。

此时分别获取第一视线在该有效视线区域内的第一占空比，以及第二视线在该有效视线区域内的第二占空比，并根据该第一占空比和第二占空比分析确定上述第一拍摄视频和第二拍摄视频中的主视频和次视频，例如在第一实施例中，需要拍摄镜头较为稳定的FPV影视作品，因此通过将上述有效视线区域设置为一个较小的区域，从而对不同视线在有效视线区域内的占空比进行调节，提高对视线变化幅度的敏感度，同时将主次规则确定为将占空比较大的拍摄视频确定为主视频，将占空比较小的拍摄视频确定为次视频；在第二实施例中，需要拍摄镜头较为活动的FPV影视作品，因此通过扩大有效视线区域的区域范围，从而降低对视线变化的敏感度，同时将主次规则确定为将占空比较小的拍摄视频确定为主视频，将占空比较大的拍摄视频确定为次视频。

在本发明实施例中，通过对基于不同视角拍摄的拍摄视频进行主次区分，具体的，根据实际的镜头拍摄稳定要求等对拍摄视频进行主次的区分，从而在后续的视频融合过程中，能够最大限度保留符合拍摄要求的视频内容，从而提高最终生成的影视作品的视觉效果，提高了用户体验。

在确定主视频和次视频后，分别对主视频和次视频进行第一视角分析，以确定每个视频中的第一视角视频段，从而过滤出每个视频中不符合实际拍摄需求的视频段，以保证最终融合后的影视作品中的每个片段均为实际需要的有效片段。

在现有技术中，该视频片段的筛选方法主要通过人工进行，然而该方式需要极大的人力成本，导致拍摄成本的升高，降低了影视作品的成片效率，因此为了解决该技术问题，通过训练机器模型对所拍摄视频进行识别的方式，来获取符合要求的第一视角视频段。

在本发明实施例中，所述方法还包括：获取预设神经网络模型；在对所述主视频进行第一视角分析之前，确定与当前影视创作对应的影视训练数据集；基于所述影视训练数据集对所述预设神经网络模型进行训练，生成影视分析模型；基于所述影视分析模型分别对所述第一拍摄视频和所述第二拍摄视频进行第一视角分析。

在一种可能的实施方式中，在对拍摄视频进行第一视角分析之前，可以根据影视创作的实际拍摄需求训练对应的神经网络模型，从而辅助对后续的拍摄视频的智能化第一视角分析。具体的，首先获取预设神经网络模型，例如该预设神经网络模型为常用的神经网络模型，然后确定与当前影视创作对应的影视训练数据集，例如该影视训练数据集可以为针对当前影视创作所需要拍摄的场景以及拍摄内容的预先采集图像，这些预先采集图像均为基于FPV拍摄的现场图像，将上述预先采集图像作为影视训练数据集，然后通过该影视训练数据集对预设神经网络进行训练，从而生成影视分析模型，在生成影视分析模型后，在后续获得拍摄视频后，通过该影视分析模型对拍摄视频进行第一视角分析，从而获得对应的第一视角视频段。

例如在一种实施例中，获得5min时长的主视频和次视频，对主视频进行第一视角分析后，发现在第0-50s、75-120s、130-270s以及280-300s的视频段为正常视频段，其余视频段存在视线不正常或抖动剧烈的情况，因此将上述视频段作为主第一视角视频段，基于同样的原理，获得对应的次第一视角视频段。

此时创作完整的影视作品，具体的，基于次第一视角视频段对主第一视角视频段进行融合处理，从而生成完整的影视作品。

请参见图3，在本发明实施例中，所述基于所述次第一视角视频段对所述主第一视角视频段进行融合处理，生成对应的影视作品，包括：

S51)基于所述主第一视角视频段确定中断视频段；

S52)从所述次第一视角视频段中提取与所述中断视频段对应的替换视频段；

S53)对所述替换视频段的衔接帧执行过渡优化处理，获得优化后视频段；

S54)对所述主第一视角视频段和所述优化后视频段执行融合处理，生成对应的影视作品。

在一种可能的实施方式中，首先基于上述主第一视角视频段确定其中的中断视频段，然后从次第一视角视频段中提取与该中断视频段对应的替换视频段，具体的，将中断视频段所对应的时间段映射至次第一视角视频段中，从而提取出与该时间对应的替换视频段。在实际应用过程中，若此时直接将该替换视频段替换至中断视频段，则由于第一拍摄视频和第二拍摄视频是从拍摄主体的不同位置拍摄的，即其视角是不同的，因此在视频衔接处必然存在视频画面的巨变，从而对用户造成极大的视觉影响，降低用户体验。为了解决该技术问题，需要在将替换视频段替换至中断视频段时，对替换视频段进行过渡优化处理，以将画面快速、平稳过渡至另一视角的拍摄画面，降低对用户的视觉影响。

在本发明实施例中，所述衔接帧包括开始衔接帧和结束衔接帧，所述对所述替换视频段的衔接帧执行过渡优化处理，获得优化后视频段，包括：从所述主第一视角视频段中获取与所述替换视频段对应的前置衔接帧和后置衔接帧；对所述前置衔接帧进行视线分析，生成前置视线，以及对所述后置衔接帧进行视线分析，生成后置视线；基于所述前置视线对所述替换视频段的预设数量的开始衔接帧进行图像畸变处理，获得前置处理后视频段；基于所述后置视线对所述前置处理后视频段的预设数量的结束衔接帧进行图像畸变处理，获得优化后视频段。

在一种可能的实施方式中，在进行视频段的替换时，首先从主第一视角视频段中获取与替换视频段对应的前置衔接帧和后置衔接帧，例如当需要在主第一视频段的45-60s视频段进行视频替换时，将第44s(即前置衔接帧)和第61s(即后置衔接帧)提取出来，当然，需要说明的是，为了更好的确定实现变化情况，还可以提取多张连续帧作为前置衔接帧或后置衔接帧，在此不做过多赘述。

在获得上述前置衔接帧和后置衔接帧后，分别对其进行视线分析，从而生成对应的前置视线和后置视线，然后根据该前置视线对要插入的替换视频段的前预设数量(例如10帧)的画面帧进行图像畸变处理，比如其畸变效果可以为从前置视线逐步变化至替换视频段所在视线的效果，从而实现对替换视频段的前置处理；然后进一步根据后置视线对该前置处理后视频段的预设数量的结束衔接帧进行图像畸变处理，从而获得最终的优化后视频段。

此时将上述优化后视频段插入主第一视角视频段中的对应位置，从而实现了主第一视角视频段和优化后视频段的融合处理，并生成了最终的影视作品。

需要说明的是，在本发明实施例中，还可以采用多个(大于2个)拍摄装置在拍摄主体上拍摄多个位置处的FPV拍摄视频，以提供更可靠的拍摄视频源，进一步优化最终生成的影视作品的视觉效果，应该属于本领域技术人员在本发明实施例的基础上容易想到的，也应该属于本发明的保护范围，在此不做过多赘述。

在本发明实施例中，通过采用从拍摄主体的多个位置获取的具有多个视角的拍摄视频，来进行FPV视频的自动融合生成，从而有效过滤和优化了采用单一拍摄源或单一拍摄视角所存在的画面抖动剧烈、画面切换频繁、存在无效画面等问题，使得拍摄出的影视作品能够更加符合用户的实际视觉需求，提高了用户体验。

下面结合附图对本发明实施例所提供的基于FPV的影视拍摄装置进行说明。

请参见图4，基于同一发明构思，本发明实施例提供一种基于FPV的影视拍摄装置，所述装置包括：视频获取单元，用于获取基于FPV的第一拍摄视频，以及获取基于FPV的第二拍摄视频，所述第一拍摄视频和所述第二拍摄视频为拍摄主体上不同位置的拍摄视频；主次确定单元，用于确定所述第一拍摄视频和所述第二拍摄视频中的主视频和次视频；第一分析单元，用于对所述主视频进行第一视角分析，获得对应的主第一视角视频段；第二分析单元，用于对所述次视频进行第一视角分析，获得对应的次第一视角视频段；作品生成单元，用于基于所述次第一视角视频段对所述主第一视角视频段进行融合处理，生成对应的影视作品。

在本发明实施例中，所述主次确定单元包括：视线分析模块，用于对所述第一拍摄视频和所述第二拍摄视频进行视线分析，获得对应的第一视线和第二视线；有效区域确定模块，用于确定与当前影视创作对应的有效视线区域；占空比获取模块，用于分别获取所述第一视线在所述有效视线区域内的第一占空比，以及所述第二视线在所述有效视线区域内的第二占空比；主次确定模块，用于基于所述第一占空比和所述第二占空比分析确定所述第一拍摄视频和所述第二拍摄视频中的主视频和次视频。

在本发明实施例中，所述装置还包括模型训练单元，所述模型训练单元具体用于：在对所述主视频进行第一视角分析之前，获取预设神经网络模型；确定与当前影视创作对应的影视训练数据集；基于所述影视训练数据集对所述预设神经网络模型进行训练，生成影视分析模型；基于所述影视分析模型分别对所述主视频和所述次视频进行第一视角分析。

在本发明实施例中，所述作品生成单元包括：中断视频段确定模块，用于基于所述主第一视角视频段确定中断视频段；替换视频段确定模块，用于从所述次第一视角视频段中提取与所述中断视频段对应的替换视频段；优化模块，用于对所述替换视频段的衔接帧执行过渡优化处理，获得优化后视频段；融合模块，用于对所述主第一视角视频段和所述优化后视频段执行融合处理，生成对应的影视作品。

在本发明实施例中，所述衔接帧包括开始衔接帧和结束衔接帧，所述优化模块具体用于：从所述主第一视角视频段中获取与所述替换视频段对应的前置衔接帧和后置衔接帧；对所述前置衔接帧进行视线分析，生成前置视线，以及对所述后置衔接帧进行视线分析，生成后置视线；基于所述前置视线对所述替换视频段的预设数量的开始衔接帧进行图像畸变处理，获得前置处理后视频段；基于所述后置视线对所述前置处理后视频段的预设数量的结束衔接帧进行图像畸变处理，获得优化后视频段。

以上结合附图详细描述了本发明实施例的可选实施方式，但是，本发明实施例并不限于上述实施方式中的具体细节，在本发明实施例的技术构思范围内，可以对本发明实施例的技术方案进行多种简单变型，这些简单变型均属于本发明实施例的保护范围。

另外需要说明的是，在上述具体实施方式中所描述的各个具体技术特征，在不矛盾的情况下，可以通过任何合适的方式进行组合。为了避免不必要的重复，本发明实施例对各种可能的组合方式不再另行说明。

本领域技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序存储在一个存储介质中，包括若干指令用以使得单片机、芯片或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

此外，本发明实施例的各种不同的实施方式之间也可以进行任意组合，只要其不违背本发明实施例的思想，其同样应当视为本发明实施例所公开的内容。