CN113473011B - 一种拍摄方法、系统及存储介质 - Google Patents

Abstract

本发明公开了一种拍摄方法、系统及存储介质，方法包括：获取至少两个摄像头采集的拍摄画面；基于预设的显示目标识别所述拍摄画面，将囊括显示目标的拍摄画面提取为预选画面；从所述预选画面中确定待显示画面。本发明能够从至少两个摄像头中选定囊括显示目标的拍摄画面作为待显示画面，从而省去了用户手动切换摄像头的操作，有效改善了用户体验。同时，由于能够根据用户的所在位置自动切换显示画面，从而消除了拍摄的盲区，以达到自动选择最佳视频源的效果。

Description

一种拍摄方法、系统及存储介质

技术领域

本发明涉及图像处理技术领域，尤其涉及一种拍摄方法、系统及存储介质。

背景技术

在电子设备不断发展的今天，智能设备的拍摄功能越来越强大，人们能够借助智能设备进行视频通话、视频会议及视频直播，既丰富了人们的娱乐生活，也为人们提供了便捷的工作方式。

在使用智能设备的拍摄功能时，通常选定设备上的其中一个摄像头，在需要时用户可手动对摄像头进行切换，例如智能手机的前置及后置摄像头的切换，若使用多个智能设备进行拍摄，也需要手动进行不同智能设备的更换。这样的更换方式操作繁琐，导致用户体验较差。

发明内容

针对现有技术的不足，本发明提供一种拍摄方法、系统及存储介质，解决现有技术需要手动进行不同摄像头的更换，更换方式操作繁琐，导致用户体验较差的问题。

为实现上述目的，本发明提供以下的技术方案：

一种拍摄方法，包括：

获取至少两个摄像头采集的拍摄画面；

基于预设的显示目标识别所述拍摄画面，将囊括显示目标的拍摄画面确定为待显示画面。

可选地，当预选画面的数量大于或等于二时，所述基于预设的显示目标识别所述拍摄画面，将囊括显示目标的拍摄画面，包括：

将囊括显示目标的拍摄画面提取为预选画面，从所述预选画面中确定待显示画面；

所述从所述预选画面中确定待显示画面，包括：

计算各所述预选画面的有效画面指数；

比较各所述有效画面指数，将数值最大的有效画面指数对应的预选画面确定为待显示画面。

可选地，当显示目标为至少两个时，所述从所述预选画面中确定待显示画面，包括：

判断所述待显示画面是否囊括所有显示目标；

若是，保持所述待显示画面不变；

若否，按照所述有效画面指数从大到小的顺序，依次识别对应的所述预选画面是否囊括所有的显示目标，直至识别出囊括所有显示目标的预选画面时，将所述囊括所有显示目标的预选画面确定为待显示画面。

可选地，所述识别出囊括所有显示目标的预选画面时，未识别出囊括所有显示目标的预选画面时，所述拍摄方法还包括：

将所述待显示画面中未显示的显示目标作为附加显示对象；

按照所述有效画面指数从大到小的顺序，依次基于所述附加显示对象识别所述预选画面，直至识别出囊括所述附加显示对象的预选画面时，将囊括所述附加显示对象的预选画面确定为附加画面；

将所述附加画面添加至所述待显示画面中的背景区域。

可选地，所述计算各所述拍摄画面的有效画面指数，包括：

当显示目标为一个时，所述有效画面指数为所述显示目标的单位显示指数；

当显示目标为至少两个时，所述有效画面指数为所有的所述显示目标的单位显示指数之和。

可选地，当显示目标为至少两个时，所述计算各所述拍摄画面的有效画面指数，包括：

在所有的显示目标中选定至少一个作为主要目标，其余的作为次要目标；

分别计算所述主要目标和所述次要目标的单位显示指数，对所述主要目标和所述次要目标的单位显示指数分别赋权重系数后，计算加权求和值。

可选地，所述单位显示指数包括一个参数的显示指数，或

两个以上参数的显示指数中，对各所述参数的显示指数分别赋权重系数后的加权求和值；

所述参数的显示指数包括显示目标占拍摄画面的比例参数、显示目标相对于摄像头的倾斜参数，和显示目标与摄像头间的距离参数中的一种或多种。

可选地，所述显示目标相对于摄像头的倾斜参数，包括：

所述拍摄画面中所述显示目标的脸部特征数的当前值，与所述显示目标的脸部特征总数的比值；

所述显示目标的脸部特征总数为预设值；或

各所述摄像头所采集的历史拍摄画面中，所述显示目标的脸部特征数的最大值。

本发明还提供了一种拍摄系统，用于实现如上任一项所述的拍摄方法，包括：

获取模块，用于获取至少两个摄像头采集的拍摄画面；

处理模块，用于基于预设的显示目标识别所述拍摄画面，将囊括显示目标的拍摄画面提取为预选画面；

确定模块，用于从所述预选画面中确定待显示画面。

本发明还提供了一种存储介质，包括计算机可读指令，当计算机读取并执行所述计算机可读指令时，使得计算机执行如上任一项所述的拍摄方法。

与现有技术相比，本发明具有以下有益效果：

本发明提供了一种拍摄方法、系统及存储介质，能够从至少两个摄像头中选定囊括显示目标的拍摄画面作为待显示画面，从而省去了用户手动切换摄像头的操作，有效改善了用户体验。同时，由于能够根据用户的所在位置自动切换显示画面，从而消除了拍摄的盲区，以达到自动选择最佳视频源的效果。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。

图1为本发明提供的一种拍摄方法的应用场景示意图；

图2为本发明提供的一种拍摄方法的流程图；

图3为本发明提供的一种拍摄方法中步骤S2的流程图；

图4为本发明提供的一种拍摄方法中步骤S2的又一流程图；

图5为本发明提供的一种拍摄方法的又一步骤的流程图；

图6为本发明提供的一种拍摄方法的原理图；

图7为本发明提供的一种拍摄方法的又一应用场景示意图；

图8为本发明提供的一种拍摄方法的最终显示画面示意图；

图9为本发明提供的一种拍摄系统的结构示意图。

上述图中：10、获取模块；20、处理模块；30、确定模块。

具体实施方式

为使得本发明的目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本发明一部分实施例，而非全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

为便于理解本发明的技术方案，在此先对本发明的应用场景作简要介绍：

由于智能家居的普及，各种电子产品上都有可能搭载摄像头，如手机、笔记本、监控、智能手表以及其他智能穿戴设备等等。而实际上用户往往并不能对这些摄像头实现资源最大利用化，多是使用手持的单一设备使用，导致摄像头资源浪费。

如图1所示，假设房间中设置有笔记本、电视、手机及监控，其中笔记本、电视和监控各包含一个摄像头，手机包含前置以及后置共两个摄像头，即房间内共计五个摄像头。当人坐在沙发上，并使用放置于桌子上的手机进行视频通话，在不手持手机且不手动调整到后置摄像头的情况下，想要保持出镜，则只能停留在区域A中，为用户的活动带来不便。

另外，即使在进行视频会议或视频直播时利用将多个摄像头进行不同角度的拍摄，如果多人同时视频会议的场景，仍有可能因拍摄盲区导致出现一两人未能出镜的情形。

本发明旨在于提供一种拍摄方案，用于基于两个或以上个摄像头的采集画面，实现最终显示画面的切换，既能够实现单人视频通话过程中在所有摄像头覆盖区域内的随意活动，也能够尽可能地实现多人视频会议时所有关注对象的完整显示。

下面结合附图并通过具体实施方式来进一步说明本发明的技术方案。

实施例一

请结合参考图1和图2，本发明实施例提供了一种拍摄方法，包括：

S1、获取至少两个摄像头采集的拍摄画面；

S2、基于预设的显示目标识别拍摄画面，将囊括显示目标的拍摄画面提取为预选画面；

S3、从预选画面中确定待显示画面。

假设房间中设置有笔记本、电视、手机及监控，其中笔记本、电视和监控各包含一个摄像头，手机包含前置以及后置共两个摄像头，即房间内共计五个摄像头。

基于步骤S1-S3，首先将所有摄像头采集的拍摄画面上传至云端，基于预设的显示目标分析识别所上传的拍摄画面，判断各拍摄画面中是否囊括了显示目标，并将囊括了显示目标的拍摄画面提取为预选画面。最后，从预选画面中确定待显示画面，并使用该待显示画面回传使用以进行最终显示。

可以理解的是，显示目标可以为一个，也可以为至少两个；当显示目标为一个时，只需要选择囊括了该显示目标的拍摄画面作为预选画面即可。

如图3所示，步骤S2中，当多个摄像头所采集的拍摄画面中，囊括了显示目标的数量至少有两个时，通过如下步骤实现待显示画面的确定：

S21、计算各预选画面的有效画面指数；

S22、比较各有效画面指数，将数值最大的有效画面指数对应的预选画面确定为待显示画面。

当显示目标为一个时，有效画面指数为显示目标的单位显示指数；当显示目标为至少两个时，有效画面指数为所有的显示目标的单位显示指数之和。可以理解的是，显示目标可以是拍摄画面中的人，也可以是动物、植物或其他陈设物。此外，以显示目标是人为例，拍摄画面中可能会出现多人，但显示目标可以是其中特定的一个，也可以是多个。

在本实施例的其中一个可选的实施方式中，单位显示指数是一个参数的显示指数，如显示目标占拍摄画面的比例参数、显示目标相对于摄像头的倾斜参数，或显示目标与摄像头间的距离参数。

在本实施例的另一个可选的实施方式中，单位显示指数是两个以上参数的显示指数中，对各参数的显示指数分别赋权重系数后的加权求和值；例如，对显示目标占拍摄画面的比例参数、显示目标相对于摄像头的倾斜参数，和显示目标与摄像头间的距离参数分别赋权重系数，然后再通过加权求和以得到单位显示指数。

可以理解的是，参数的显示指数还可以根据显示效果的关注点进行增加或删减。

假设显示目标为人，下面以显示目标占拍摄画面的比例参数和显示目标相对于摄像头的倾斜参数为例，对单位显示指数的计算作简要介绍：

本实施例中，将显示目标占拍摄画面的比例参数进行数据化计算。例如摄像头目前是百万像素S1，那么在拍摄画面中，显示目标占了三十万像素S2，那么显示目标占拍摄画面的比例参数P1＝S2/S1＝30％。

显示目标相对于摄像头的倾斜参数也可以理解为人脸相对于摄像头的倾斜度。显示目标相对于摄像头的倾斜参数可以利用如下方式计算：计算拍摄画面中显示目标的脸部特征数的当前值，与显示目标的脸部特征总数的比值。

具体地，可以辅助人脸识别技术实现显示目标相对于摄像头的倾斜参数的计算。例如，人脸识别系统采集了显示目标的脸部特征总数N1为20个，而图像中，只拍到了13个显示目标的脸部特征数的当前值N2，则显示目标相对于摄像头的倾斜参数P2＝N2/N1＝65％。

如图7所示，当显示目标A位于区域4时，电视摄像头以及监控摄像头所采集的拍摄画面均够囊括该显示目标。当显示目标A位于图示位置，且朝向箭头所指方向时，显示目标占拍摄画面的比例参数约为20％，而显示目标的脸部特征数的当前值为5个；因此，对于电视摄像头的有效显示指数R_电视具体为：

R_电视＝20％*0.5+5/20*0.5＝22.5％。

对于监控画面来说，显示目标占拍摄画面的比例参数约为20％，而显示目标的脸部特征数的当前值为15个；因此，对于监控画面的有效显示指数R_监控具体为：

R_监控＝20％*0.5+15/20*0.5＝47.5％。

由于47.5％＞此时22.5％，此时监控的显示效果优于电视摄像头的显示效果，因此，将监控采集的拍摄画面作为待显示画面。

本实施例中，显示目标的脸部特征总数为预设值，可以预先采用人脸识别系统对不同的用户进行识别并进行预存。此外，显示目标的脸部特征总数也可以是各摄像头所采集的历史拍摄画面中，显示目标的脸部特征数的最大值，当显示目标为未实现录入信息的新用户时，能够在各摄像头的拍摄过程中不断补充完善该显示目标的脸部特征，从而在未预存信息的情况下也能够进行该新用户相对于摄像头的倾斜参数的计算。

然后，对显示目标占拍摄画面的比例参数赋予权重系数W1，对显示目标相对于摄像头的倾斜参数赋予权重系数W2；可以理解的是，可以根据实际情况调整W1、W2的数值，例如，若比较关注人占画面的比例，则可以使W1大于W2。本实施例以W1、W2均设0.5为例，对有效画面指数进行计算如下：有效画面指数R＝P1*W1+P2*W2＝47.5％。

基于前述步骤，本实施例提供拍摄方法，通过计算动态的有效画面指数，从而能够灵活地从多个预选画面中选取显示效果更符合实际需求的作为待显示画面，能够确保显示对象能以预期的显示距离、角度及占比等效果于画面中显示，从而能够适应各种应用场景，如视频会议、视频直播及舞台直拍运镜等。

进一步地，在前述的视频会议、视频直播及舞台直拍运镜等中，显示目标可能为至少两个；此时，计算各拍摄画面的有效画面指数时，则对所有显示目标的单位显示指数R进行求和。

具体地，可以在所有的显示目标中选定至少一个作为主要目标，其余的作为次要目标；分别计算主要目标和次要目标的单位显示指数，对主要目标和次要目标的单位显示指数分别赋权重系数后，计算加权求和值。通过对显示目标按重要程度进行权重系数的分配，以达到优先显示主要目标的目的。

可以理解的是，在各拍摄画面中均有可能出现遗漏至少一个显示目标的情形，但此时会因另外的显示目标的参数具有较高的显示指数，使得该拍摄画面仍具有较高的有效画面指数。此时，若单纯根据有效画面指数以确定待显示画面，会导致最终的显示画面缺失一些显示目标。

请结合参考图4至图6，更进一步地，为了确保所有显示目标均能够于最终的显示画面中进行显示，步骤S2还包括如下步骤：

S23、判断待显示画面是否囊括所有显示目标，若是，执行步骤S24；若否，执行步骤S25；

S24、保持待显示画面不变；

S25、按照有效画面指数从大到小的顺序，依次识别对应的预选画面是否囊括所有的显示目标，直至识别出囊括所有显示目标的预选画面时，将囊括所有显示目标的预选画面确定为待显示画面。

基于步骤S23-S25，能够避免在最终的显示画面中遗漏显示目标。

基于前述步骤，在确定待显示画面后并进行回传显示之前，检测该待显示画面中是否遗漏显示目标，具体可以通过各显示目标的单位显示指数值以实现检测，若存在某一个单位显示指数的数值为0时，则可以判定该待显示画面存在遗漏的显示目标。

这种情况下，可以基于各个显示目标的单位显示指数，按照从大到小的顺序依次判断各预选画面是否有遗漏的显示目标，直到找到一个预选画面中，各显示目标的单位显示指数均不为零为止，将囊括所有显示目标的预选画面确定为待显示画面。

可以理解的是，当拍摄画面均未囊括所有的显示目标时，可以将囊括的显示目标数量最多的拍摄画面确定为待显示画面，以尽量地显示更多的显示目标。

目标数量最多的拍摄画面可以是一个，也可以是并列的多个。例如，假设显示目标为六个，五个摄像头所采集的五个拍摄画面中的其中两个囊括了三个显示目标，其余拍摄画面均囊括五个显示目标，该步骤中选择囊括了五个显示目标的三个拍摄画面作为预选画面。

此外，当步骤S25中，未识别出囊括所有显示目标的预选画面时，为了尽可能地实现全体显示目标的完整显示，拍摄方法还包括如下步骤：

S41、保持待显示画面不变；

S42、将待显示画面中未显示的显示目标作为附加显示对象；

S43、按照有效画面指数从大到小的顺序，依次基于附加显示对象识别预选画面，直至识别出囊括附加显示对象的预选画面时，将囊括附加显示对象的预选画面确定为附加画面；

S44、将附加画面添加至待显示画面中的背景区域。

基于步骤S41-S44，能够将原本未显示于待显示画面中的显示目标进行补充显示。可以理解的是，步骤S44中的背景区域为画面中的无人处，以避免对其他显示目标的遮挡。

如图7所示，若显示目标为图中的三人，其中有两人分别仅位于电视摄像头和监控摄像头的拍摄区域中，另一人能同时被电视摄像头和监控摄像头拍到，但没有一个摄像头的拍摄画面能够同时将三人囊括于其中。

本实施例中，可以首先选取囊括显示目标对象最多的拍摄画面作为预选画面，在本示例中为电视摄像头和监控摄像头分别采集的拍摄画面；然后，分别计算该两个拍摄画面的有效显示指数，根据结果提取电视摄像头采集的拍摄画面作为待显示画面。也可以直接沿用之前已确定的有效指数最高的待显示画面。

进一步地，如图8所示，将待显示画面中并未显示的显示目标作为附加显示对象，将囊括该附加显示对象的监控摄像头采集的拍摄画面提取为附加画面，并将该附加画面添加至待显示画面中的背景区域，形成最终的显示画面。

本实施例中，实时根据各个摄像头所采集的拍摄画面以进行有效显示指数的计算，根据结果在每一时刻选择数值最高的有效显示指数对应的拍摄画面以进行显示，能够灵活并实时地选取显示效果最佳的摄像头作为视频源，从而确保显示效果。

基于前述各个实施例所提供的拍摄方法，能够合理应用两个或以上个摄像头，避免出现摄像头资源空置的情形；同时，能够选取显示效果最佳的摄像头作为视频源，同时无需手动切换摄像头，能够高效便捷地实现高质量的画面显示，有效改善了用户体验，并丰富了视频的拍摄功能。

如图9所示，本发明还提供了一种拍摄系统，用于实现如上任一项的拍摄方法，包括：

获取模块10，用于获取至少两个摄像头采集的拍摄画面；

处理模块20，用于基于预设的显示目标识别拍摄画面，将囊括显示目标的拍摄画面提取为预选画面；

确定模块30，用于从预选画面中确定待显示画面。

本实施例中，当多个摄像头所采集的拍摄画面中，囊括了显示目标的数量至少有两个时，处理模块20还用于：

计算各预选画面的有效画面指数；比较各有效画面指数，将数值最大的有效画面指数对应的预选画面确定为待显示画面。

更进一步地，为了确保所有显示目标均能够于最终的显示画面中进行显示，处理模块20还用于：

判断是否存在囊括所有显示目标的拍摄画面；将囊括所有显示目标的拍摄画面提取为预选画面；将囊括的显示目标数量最多的拍摄画面提取为预选画面。基于此，能够避免在最终的显示画面中遗漏显示目标。当拍摄画面均未囊括所有的显示目标时，将囊括的显示目标数量最多的拍摄画面提取为预选画面，以尽量地显示更多的显示目标。

其中，目标数量最多的拍摄画面可以是一个，也可以是并列的多个。例如，假设显示目标为六个，五个摄像头所采集的五个拍摄画面中的其中两个囊括了三个显示目标，其余拍摄画面均囊括五个显示目标，该步骤中选择囊括了五个显示目标的三个拍摄画面作为预选画面。

此外，当未能识别出囊括所有显示目标的拍摄画面时，为了尽可能地实现全体显示目标的完整显示，处理模块20还用于：

保持待显示画面不变；

将待显示画面中未显示的显示目标作为附加显示对象；

按照有效画面指数从大到小的顺序，依次基于附加显示对象识别预选画面，直至识别出囊括附加显示对象的预选画面时，将囊括附加显示对象的预选画面确定为附加画面；

将附加画面添加至待显示画面中的背景区域。

本发明还提供了一种存储介质，包括计算机可读指令，当计算机读取并执行计算机可读指令时，使得计算机执行如上任一项的拍摄方法。

以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (8)

1.一种拍摄方法，其特征在于，包括：

获取至少两个摄像头采集的拍摄画面；

基于预设的显示目标识别所述拍摄画面，将囊括显示目标的拍摄画面确定为待显示画面；当预选画面的数量大于或等于二时，基于预设的显示目标识别所述拍摄画面，将囊括显示目标的拍摄画面确定为待显示画面，包括：

将囊括显示目标的拍摄画面提取为预选画面；

计算各所述预选画面的有效画面指数；

比较各所述有效画面指数，将数值最大的有效画面指数对应的预选画面确定为待显示画面；

当显示目标为至少两个时，所述拍摄方法还包括：

判断所述待显示画面是否囊括所有显示目标；

若是，保持所述待显示画面不变；

若否，按照所述有效画面指数从大到小的顺序，依次识别对应的所述预选画面是否囊括所有的显示目标，直至识别出囊括所有显示目标的预选画面时，将所述囊括所有显示目标的预选画面确定为待显示画面。

2.根据权利要求1所述的拍摄方法，其特征在于，当未识别出囊括所有显示目标的预选画面时，所述拍摄方法还包括：

保持所述待显示画面不变；

将所述待显示画面中未囊括的显示目标作为附加显示对象；

按照所述有效画面指数从大到小的顺序，依次基于所述附加显示对象识别所述预选画面，直至识别出囊括所述附加显示对象的预选画面时，将囊括所述附加显示对象的预选画面确定为附加画面；

将所述附加画面添加至所述待显示画面中的背景区域。

3.根据权利要求1所述的拍摄方法，其特征在于，所述计算各所述拍摄画面的有效画面指数，包括：

当显示目标为一个时，所述有效画面指数为所述显示目标的单位显示指数；

当显示目标为至少两个时，所述有效画面指数为所有的所述显示目标的单位显示指数之和。

4.根据权利要求3所述的拍摄方法，其特征在于，当显示目标为至少两个时，所述计算各所述拍摄画面的有效画面指数，包括：

在所有的显示目标中选定至少一个作为主要目标，其余的作为次要目标；

分别计算所述主要目标和所述次要目标的单位显示指数，对所述主要目标和所述次要目标的单位显示指数分别赋权重系数后，计算加权求和值。

5.根据权利要求3所述的拍摄方法，其特征在于，所述单位显示指数包括一个参数的显示指数，或

两个以上参数的显示指数中，对各所述参数的显示指数分别赋权重系数后的加权求和值；

所述参数的显示指数包括显示目标占拍摄画面的比例参数、显示目标相对于摄像头的倾斜参数，和显示目标与摄像头间的距离参数中的一种或多种。

6.根据权利要求5所述的拍摄方法，其特征在于，所述显示目标相对于摄像头的倾斜参数，包括：

所述拍摄画面中所述显示目标的脸部特征数的当前值，与所述显示目标的脸部特征总数的比值；

所述显示目标的脸部特征总数为预设值；或

各所述摄像头所采集的历史拍摄画面中，所述显示目标的脸部特征数的最大值。

7.一种拍摄系统，其特征在于，用于实现如权利要求1至6任一项所述的拍摄方法，包括：

获取模块，用于获取至少两个摄像头采集的拍摄画面；

处理模块，用于基于预设的显示目标识别所述拍摄画面；

确定模块，用于将囊括显示目标的拍摄画面确定为待显示画面。

8.一种存储介质，其特征在于，包括计算机可读指令，当计算机读取并执行所述计算机可读指令时，使得计算机执行如权利要求1至6任一项所述的拍摄方法。

Images