CN114785957A - 拍摄方法及其装置 - Google Patents

Abstract

本申请公开了一种拍摄方法及其装置，属于摄像技术领域。该方法包括：在多帧合成拍摄模式下，获取多帧图像中每帧图像的姿态数据；从所述多帧图像中选取参考帧图像，并根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，对所述多帧图像进行对齐和合成处理，得到合成帧图像；根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像。

Description

拍摄方法及其装置

技术领域

本申请属于摄像技术领域，具体涉及一种拍摄方法及其装置。

背景技术

目前，在拍摄街景例如拍摄建筑物时，相机的仰拍或是向下倾斜都会造成建筑物的透视变形，只有当相机与建筑物完全平行时，成片中的建筑物才能达到绝对的垂直。然而，对于缺少三脚架和水平仪的拍摄场景，完全的平行并不好把握，通常采用后期处理的方式进行透视矫正。

对于终端设备例如智能手机，由于其配备惯性传感器，现有可以采用惯性传感器进行透视矫正处理，然而，其仅对单帧图像进行透视矫正处理，无法实现在多帧图像合成的同时对合成帧图像进行透视矫正处理。

发明内容

本申请实施例的目的是提供一种拍摄方法及其装置，以解决无法实现在多帧图像合成的同时对合成帧图像进行透视矫正处理的问题。

第一方面，本申请实施例提供了一种拍摄方法，所述方法包括：

在多帧合成拍摄模式下，获取多帧图像中每帧图像的姿态数据；

从所述多帧图像中选取参考帧图像，并根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，对所述多帧图像进行对齐和合成处理，得到合成帧图像；其中，所述剩余帧图像为所述多帧图像中除所述参考帧图像外的帧图像；

根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像。

第二方面，本申请实施例提供了一种拍摄装置，所述装置包括：

获取模块，用于在多帧合成拍摄模式下，获取多帧图像中每帧图像的姿态数据；

第一处理模块，用于从所述多帧图像中选取参考帧图像，并根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，对所述多帧图像进行对齐和合成处理，得到合成帧图像；其中，所述剩余帧图像为所述多帧图像中除所述参考帧图像外的帧图像；

第二处理模块，用于根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像。

第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。

第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。

第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法。

第六方面，本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如第一方面所述的方法。

在本申请实施例中，对于多帧合成拍摄场景，电子设备会先获取多帧图像中每帧图像的姿态数据，然后从多帧图像中选取参考帧图像，以根据参考帧图像的姿态数据，对多帧图像进行对齐和合成处理得到合成帧图像，并根据参考帧图像的姿态数据，对合成帧图像进行透视矫正处理，生成第一图像，即，基于所记录的多帧图像中每帧图像的姿态数据，能够实现多帧图像合成的同时对合成帧图像进行透视矫正处理，最终呈现高画质且低形变的图像。

附图说明

图1是本申请实施例提供的拍摄方法的流程图；

图2是本申请实施例的合成帧图像、第一图像的示意图；

图3是本申请实施例提供的拍摄装置的结构示意图；

图4是本申请实施例提供的电子设备的结构示意图；

图5是本申请另一实施例提供的电子设备的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。

下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的拍摄方法进行详细地说明。

请参看图1，其是本申请实施例提供的一种拍摄方法的流程图。该方法可以应用于电子设备中。该电子设备可以为手机、平板电脑、笔记本电脑等。在多帧合成拍摄场景中，例如基于多帧合成拍摄的方式拍摄建筑物时，由于相机的仰拍或是向下倾斜都会造成建筑物的透视变形，因此，需要在对所拍摄的多帧建筑物图像进行合成的基础上，对合成帧图像进行透视矫正，使得最终呈现高画质且低形变的建筑物图像。其中，透视矫正是指对图像进行编辑，以得到符合用户对于透视失真理解的结果的过程，也可以理解为使得现实中的竖直线在图像中都显示为竖直线。

如图1所示，该方法可以包括步骤1100～步骤1300，以下予以详细说明。

步骤1100，在多帧合成拍摄模式下，获取多帧图像中每帧图像的姿态数据。

在本实施例中，具有拍摄功能的电子设备可以为用户提供多种拍摄模式，例如，全景模式、美颜模式、人像模式、多帧合成拍摄模式等。类似的，在本实施例中，电子设备的相机应用程序包括多帧合成拍摄模式。在电子设备处于多帧合成拍摄模式的情况下，相机应用程序可以拍摄多帧图像。多帧合成拍摄模式可以是HDR拍摄模式，具体是指采用高动态范围成像技术拍摄高动态范围图像。高动态范围图像相比普通的图像，可以提供更多的动态范围和图像细节，往往比低动态范围的图像更能反映真实世界的亮度对比，更贴近人眼所看到的图像效果。其中，HDR拍摄模式包括多帧HDR模式和Stagger HDR模式。

在本申请的一些实施例中，本步骤1100在多帧合成拍摄模式下，获取多帧图像中每帧图像的姿态数据可以进一步包括如下步骤：比较多帧图像中每帧图像的第一时间戳与惯性传感器的第二时间戳；在所述第一时间戳和所述第二时间戳相同的情况下，获取所述第二时间戳所对应的所述惯性传感器的姿态数据，作为所述第一时间戳所对应的帧图像的姿态数据。

其中，惯性传感器用于测量电子设备的姿态数据，该姿态数据可以包括三轴姿态角及加速度，该姿态数据可以用向量v表示。惯性传感器的第二时间戳指的是惯性传感器测量电子设备的姿态数据的时间戳。

其中，帧图像的第一时间戳指的是帧图像的拍摄时间戳。

在本实施例中，在多帧合成拍摄模式下，电子设备可以拍摄同一场景的多帧图像，并在第一时间戳和第二时间戳相同的情况下，将该第二时间戳所对应的惯性传感器的姿态数据，作为第一时间戳所对应的帧图像的姿态数据，这样，便可得到多帧图像中每帧图像的姿态数据。

在执行步骤1100在多帧合成拍摄模式下，获取多帧图像中每帧图像的姿态数据之后，进入：

步骤1200，从所述多帧图像中选取参考帧图像，并根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，对所述多帧图像进行对齐和合成处理，得到合成帧图像。

其中，参考帧图像为多帧图像中的其中一帧图像，其可以作为多帧图像中剩余帧图像的对齐标准。本实施例中，根据帧图像合成算法的不同，可以选择与该帧图像合成算法匹配的方式从多帧图像中选取参考帧图像。示例性地，以运动场景为例，可以从多帧图像中选取前后位姿数据变化最小的帧图像，作为参考帧图像。

其中，剩余帧图像为所述多帧图像中除参考帧图像外的帧图像。

在本申请的一些实施例中，本步骤1200中根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，对所述多帧图像进行对齐和合成处理，得到合成帧图像可以进一步包括如下步骤1210～步骤1240：

步骤1210，根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，确定所述剩余帧图像向所述参考帧图像对齐的第一旋转向量。

本步骤1210中，可以基于如下公式(1)计算任一剩余帧图像向参考帧图像对齐的第一旋转向量r：

r＝v_j·v_i (1)

其中，v_j表示剩余帧图像的位姿数据，v_i表示参考帧图像的位姿数据。

步骤1220，根据相机内参矩阵和所述第一旋转向量，确定所述剩余帧图像向所述参考帧图像对齐的第一旋转矩阵。

其中，相机内参矩阵K中涉及相机的焦距f。

本步骤1220中，可以基于如下公式(2)计算任一剩余帧图像向参考帧图像对齐的第一旋转矩阵：

K·R·K_inv (2)

其中，K表示相机内参矩阵，K_inv表示相机内参矩阵K的逆矩阵，R表示姿态数据旋转矩阵，其中，R可以由剩余帧图像向参考帧图像对齐的第一旋转向量r和Rodrigues旋转公式计算得到，即

其中，nr＝norm(r)。

步骤1230，根据所述第一旋转矩阵，将所述剩余帧图像向所述参考帧图像进行对齐处理。

本步骤1230中，在得到任一剩余帧图像向参考帧图像对齐的第一旋转矩阵之后，便可根据第一旋转矩阵，将该剩余帧图像向参考帧图像进行对齐处理，也就是说，通过步骤1210～步骤1230，可以将所有剩余帧图像向参考帧图像进行对齐处理。

步骤1240，将所述参考帧图像和进行对齐处理后的剩余帧图像进行合成处理，得到合成帧图像。

本步骤1240中，可以根据现有的多帧合成算法，将参考帧图像和进行对齐处理后的剩余帧图像进行合成处理，进而得到合成帧图像，该合成帧图像可以参照图2所示的合成帧图像201。

在执行以上步骤1200从所述多帧图像中选取参考帧图像，并根据所述参考帧图像的姿态数据，对所述多帧图像进行对齐和合成处理，得到合成帧图像之后，进入：

步骤1300，根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像。

其中，透视矫正是指对图像进行编辑，以得到符合用户对于透视失真理解的结果的过程，也可以理解为使得现实中的竖直线在图像中都显示为竖直线。

在本申请的一些实施例中，本步骤1300中根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像可以进一步包括如下步骤1310～步骤1340：

步骤1310，根据所述参考帧图像的姿态数据，确定所述合成帧图像的姿态数据。

本步骤1310中，可以将参考帧图像的姿态数据v_i，作为合成帧图像的姿态数据。

步骤1320，根据所述合成帧图像的姿态数据和重力向量，确定对所述合成帧图像进行透视矫正处理的第二旋转向量。

本步骤1320中，可以基于如下公式(3)计算对合成帧图像进行透视矫正处理的第二旋转向量：

r_g＝v_i·g (3)

其中，g表示重力向量，v_i表示表示合成帧图像的姿态数据。

步骤1330，根据相机内参矩阵和所述第二旋转向量，确定对所述合成帧图像进行透视矫正处理的第二旋转矩阵。

本步骤1330中，可以基于如下公式(4)计算合成帧图像进行透视矫正处理的第一旋转矩阵：

K*R_g*K_inv (4)

其中，K表示相机内参矩阵，K_inv表示相机内参矩阵K的逆矩阵，R_g表示姿态数据旋转矩阵，其中，R_g可以由对合成帧图像进行透视矫正处理的第二旋转向量r_g和Rodrigues旋转公式计算得到，即

其中，nr_g＝norm(r_g)。

步骤1340，根据所述第二旋转矩阵，对所述合成帧图像进行透视矫正处理，生成第一图像。

本步骤1340中，在得到第二旋转矩阵之后，便可根据该第二旋转矩阵对合成帧图像进行透视矫正处理生成第一图像，该第一图像可以参照图2所示的第一图像202。

根据本申请实施例，对于多帧合成拍摄场景，电子设备会先获取多帧图像中每帧图像的姿态数据，然后从多帧图像中选取参考帧图像，以根据参考帧图像的姿态数据，对多帧图像进行对齐和合成处理得到合成帧图像，并根据参考帧图像的姿态数据，对合成帧图像进行透视矫正处理，生成第一图像，能够实现多帧图像合成的同时对合成帧图像进行透视矫正处理，最终呈现高画质且低形变的图像。

在本申请的一些实施例中，参照图2，由于透视矫正后得到的第一图像202通常为不规则四边形，而最终保存至相册中的图像应该和合成帧图像201具有相同形状和大小，因此，需要对进行透视矫正后得到的第一图像进行处理。一方面，可以对第一图像填充无效黑色像素。一方面，可以对第一图像进行裁剪和缩放，在此，在执行以上步骤1300根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像之后，本公开的拍摄方法还可以包括：在所述第一图像中裁剪出满足设定条件的第二图像；对所述第二图像进行缩放处理，得到第三图像。

其中，所述设定条件包括：所述第二图像与所述第一图像等比例，且所述第二图像的其中一个角点位于所述第一图像的边界上。

示例性地，参照图2，边框1为合成帧图像201的边界，边框2为对合成帧图像201进行透视矫正处理后的第一图像202的边界，也就是说，在边框2中裁剪出与合成帧图像201等比例的最大边框3，然后将边框3指示的图像203缩放至合成帧图像201的尺寸即可得到第二图像。具体的，记合成帧图像201的长宽分别为w和h，以合成帧图像201的左上点为原点，则其中心点坐标为P(w/2,h/2,0)。因此P在透视矫正处理后对应的坐标为K*R_g*K_inv*P。最后以K*R_g*K_inv*P为中心，横向步长为s，纵向步长为s*w/h，逐步扩大内接矩形使其一个角点刚好落在边框2上即为最大边框3。将该最大边框3对应的图像203缩放至合成帧图像201的尺寸即可得到第二图像。

需要说明的是，本申请实施例提供的拍摄装置能够实现图1的方法实施例实现的各个过程，为避免重复，这里不再赘述。

需要说明的是，本申请实施例提供的拍摄方法，执行主体可以为拍摄装置。本申请实施例中以拍摄装置执行拍摄方法为例，说明本申请实施例提供的拍摄装置。

参见图3，本申请实施例还提供一种拍摄装置300，拍摄装置300包括获取模块301、第一处理模块302、第二处理模块303。

获取模块301，用于在多帧合成拍摄模式下，获取多帧图像中每帧图像的姿态数据。

第一处理模块302，用于从所述多帧图像中选取参考帧图像，根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，对所述多帧图像进行对齐和合成处理，得到合成帧图像；其中，所述剩余帧图像为所述多帧图像中除所述参考帧图像外的帧图像。

第二处理模块303，用于根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像。

在一个实施例中，所述获取模块301，具体用于：比较多帧图像中每帧图像的第一时间戳与惯性传感器的第二时间戳；在所述第一时间戳和所述第二时间戳相同的情况下，获取所述第二时间戳所对应的所述惯性传感器的姿态数据，作为所述第一时间戳所对应的帧图像的姿态数据。

在一个实施例中，所述第一处理模块302，具体用于：根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，确定所述剩余帧图像向所述参考帧图像对齐的第一旋转向量；根据相机内参矩阵和所述第一旋转向量，确定所述剩余帧图像向所述参考帧图像对齐的第一旋转矩阵；根据所述第一旋转矩阵，将所述剩余帧图像向所述参考帧图像进行对齐处理；将所述参考帧图像和进行对齐处理后的剩余帧图像进行合成处理，得到合成帧图像。

在一个实施例中，所述第二处理模块303，具体用于：根据所述参考帧图像的姿态数据，确定所述合成帧图像的姿态数据；根据所述合成帧图像的姿态数据和重力向量，确定对所述合成帧图像进行透视矫正处理的第二旋转向量；根据相机内参矩阵和所述第二旋转向量，确定对所述合成帧图像进行透视矫正处理的第二旋转矩阵；根据所述第二旋转矩阵，对所述合成帧图像进行透视矫正处理，生成第一图像。

在一个实施例中，所述装置300还包括第三处理模块(图中未示出)，用于：在所述第一图像中裁剪出满足设定条件的第二图像；对所述第二图像进行缩放处理，得到第三图像；其中，所述设定条件包括：所述第二图像与所述第一图像等比例，且所述第二图像的其中一个角点位于所述第一图像的边界上。

在本申请实施例中，对于多帧合成拍摄场景，电子设备会先获取多帧图像中每帧图像的姿态数据，然后从多帧图像中选取参考帧图像，以根据参考帧图像的姿态数据，对多帧图像进行对齐和合成处理得到合成帧图像，并根据参考帧图像的姿态数据，对合成帧图像进行透视矫正处理，生成第一图像，即，能够实现多帧图像合成的同时对合成帧图像进行透视矫正处理，最终呈现高画质且低形变的图像。

本申请实施例中的拍摄装置可以是电子设备，也可以是电子设备中的部件，例如集成电路或芯片。该电子设备可以是终端，也可以为除终端之外的其他设备。示例性的，电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device，MID)、增强现实(augmented reality，AR)/虚拟现实(virtualreality，VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobile personalcomputer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，还可以为服务器、网络附属存储器(Network Attached Storage，NAS)、个人计算机(personalcomputer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。

本申请实施例中的拍摄方法装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为ios操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。

本申请实施例提供的拍摄装置能够实现图1的方法实施例实现的各个过程，为避免重复，这里不再赘述。

可选地，如图4所示，本申请实施例还提供一种电子设备400，包括处理器401和存储器402，存储器402上存储有可在所述处理器401上运行的程序或指令，该程序或指令被处理器401执行时实现上述拍摄方法实施例的各个步骤，且能达到相同的技术效果，为避免重复，这里不再赘述。

需要说明的是，本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。

图5为实现本申请实施例的一种电子设备的硬件结构示意图。

该电子设备500包括但不限于：射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509、处理器510和图像处理芯片等部件。

本领域技术人员可以理解，电子设备500还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器510逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图5中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。

其中，处理器510，用于在多帧合成拍摄模式下，获取多帧图像中每帧图像的姿态数据；从所述多帧图像中选取参考帧图像，根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，对所述多帧图像进行对齐和合成处理，得到合成帧图像；根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像。

在本申请实施例中，对于多帧合成拍摄场景，电子设备会先获取多帧图像中每帧图像的姿态数据，然后从多帧图像中选取参考帧图像，以根据参考帧图像的姿态数据，对多帧图像进行对齐和合成处理得到合成帧图像，并根据参考帧图像的姿态数据，对合成帧图像进行透视矫正处理，生成第一图像，即，能够实现多帧图像合成的同时对合成帧图像进行透视矫正处理，最终呈现高画质且低形变的图像。

在一个实施例中，处理器510，具体用于比较多帧图像中每帧图像的第一时间戳与惯性传感器的第二时间戳；在所述第一时间戳和所述第二时间戳相同的情况下，获取所述第二时间戳所对应的所述惯性传感器的姿态数据，作为所述第一时间戳所对应的帧图像的姿态数据。

在一个实施例中，处理器510，具体用于根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，确定所述剩余帧图像向所述参考帧图像对齐的第一旋转向量；根据相机内参矩阵和所述第一旋转向量，确定所述剩余帧图像向所述参考帧图像对齐的第一旋转矩阵；根据所述第一旋转矩阵，将所述剩余帧图像向所述参考帧图像进行对齐处理；将所述参考帧图像和进行对齐处理后的剩余帧图像进行合成处理，得到合成帧图像。

在一个实施例中，处理器510，具体用于根据所述参考帧图像的姿态数据，确定所述合成帧图像的姿态数据；根据所述合成帧图像的姿态数据和重力向量，确定对所述合成帧图像进行透视矫正处理的第二旋转向量；根据相机内参矩阵和所述第二旋转向量，确定对所述合成帧图像进行透视矫正处理的第二旋转矩阵；根据所述第二旋转矩阵，对所述合成帧图像进行透视矫正处理，生成第一图像。

在一个实施例中，处理器510，具体用于在所述第一图像中裁剪出满足设定条件的第二图像；对所述第二图像进行缩放处理，得到第三图像；其中，所述设定条件包括：所述第二图像与所述第一图像等比例，且所述第二图像的其中一个角点位于所述第一图像的边界上。

应理解的是，本申请实施例中，输入单元504可以包括图形处理器(GraphicsProcessing Unit，GPU)5041和麦克风5042，图形处理器5041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元506可包括显示面板5061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板5061。用户输入单元507包括触控面板5071以及其他输入设备5072中的至少一种。触控面板5071，也称为触摸屏。触控面板5071可包括触摸检测装置和触摸控制器两个部分。其他输入设备5072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

存储器509可用于存储软件程序以及各种数据。存储器509可主要包括存储程序或指令的第一存储区和存储数据的第二存储区，其中，第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外，存储器509可以包括易失性存储器或非易失性存储器，或者，存储器509可以包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM，SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM，DRRAM)。本申请实施例中的存储器509包括但不限于这些和任意其它适合类型的存储器。

处理器510可包括一个或多个处理单元；可选的，处理器510集成应用处理器和调制解调处理器，其中，应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作，调制解调处理器主要处理无线通信信号，如基带处理器。可以理解的是，上述调制解调处理器也可以不集成到处理器510中。

本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述拍摄方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。

本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述拍摄方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。

本申请实施例提供一种计算机程序产品，该程序产品被存储在存储介质中，该程序产品被至少一个处理器执行以实现如上述拍摄方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。

上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。

Claims (10)

1.一种拍摄方法，其特征在于，所述方法包括：

在多帧合成拍摄模式下，获取多帧图像中每帧图像的姿态数据；

从所述多帧图像中选取参考帧图像，并根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，对所述多帧图像进行对齐和合成处理，得到合成帧图像；其中，所述剩余帧图像为所述多帧图像中除所述参考帧图像外的帧图像；

根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像。

2.根据权利要求1所述的方法，其特征在于，所述获取多帧图像中每帧图像的姿态数据，包括：

比较多帧图像中每帧图像的第一时间戳与惯性传感器的第二时间戳；

在所述第一时间戳和所述第二时间戳相同的情况下，获取所述第二时间戳所对应的所述惯性传感器的姿态数据，作为所述第一时间戳所对应的帧图像的姿态数据。

3.根据权利要求1所述的方法，其特征在于，所述根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，对所述多帧图像进行对齐和合成处理，得到合成帧图像，包括：

根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，确定所述剩余帧图像向所述参考帧图像对齐的第一旋转向量；

根据相机内参矩阵和所述第一旋转向量，确定所述剩余帧图像向所述参考帧图像对齐的第一旋转矩阵；

根据所述第一旋转矩阵，将所述剩余帧图像向所述参考帧图像进行对齐处理；

将所述参考帧图像和进行对齐处理后的剩余帧图像进行合成处理，得到合成帧图像。

4.根据权利要求1所述的方法，其特征在于，所述根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像，包括：

根据所述参考帧图像的姿态数据，确定所述合成帧图像的姿态数据；

根据所述合成帧图像的姿态数据和重力向量，确定对所述合成帧图像进行透视矫正处理的第二旋转向量；

根据相机内参矩阵和所述第二旋转向量，确定对所述合成帧图像进行透视矫正处理的第二旋转矩阵；

根据所述第二旋转矩阵，对所述合成帧图像进行透视矫正处理，生成第一图像。

5.根据权利要求1所述的方法，其特征在于，在所述根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像之后，还包括：

在所述第一图像中裁剪出满足设定条件的第二图像；

对所述第二图像进行缩放处理，得到第三图像；

其中，所述设定条件包括：所述第二图像与所述第一图像等比例，且所述第二图像的其中一个角点位于所述第一图像的边界上。

6.一种拍摄装置，其特征在于，所述装置包括：

获取模块，用于在多帧合成拍摄模式下，获取多帧图像中每帧图像的姿态数据；

第一处理模块，用于从所述多帧图像中选取参考帧图像，并根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，对所述多帧图像进行对齐和合成处理，得到合成帧图像；其中，所述剩余帧图像为所述多帧图像中除所述参考帧图像外的帧图像；

第二处理模块，用于根据所述参考帧图像的姿态数据，对所述合成帧图像进行透视矫正处理，生成第一图像。

7.根据权利要求6所述的装置，其特征在于，所述获取模块，具体用于：

比较多帧图像中每帧图像的第一时间戳与惯性传感器的第二时间戳；

在所述第一时间戳和所述第二时间戳相同的情况下，获取所述第二时间戳所对应的所述惯性传感器的姿态数据，作为所述第一时间戳所对应的帧图像的姿态数据。

8.根据权利要求6所述的装置，其特征在于，所述第一处理模块，具体用于：

根据所述参考帧图像的姿态数据和剩余帧图像的姿态数据，确定所述剩余帧图像向所述参考帧图像对齐的第一旋转向量；

根据相机内参矩阵和所述第一旋转向量，确定所述剩余帧图像向所述参考帧图像对齐的第一旋转矩阵；

根据所述第一旋转矩阵，将所述剩余帧图像向所述参考帧图像进行对齐处理；

将所述参考帧图像和进行对齐处理后的剩余帧图像进行合成处理，得到合成帧图像。

9.根据权利要求6所述的装置，其特征在于，所述第二处理模块，具体用于：

根据所述参考帧图像的姿态数据，确定所述合成帧图像的姿态数据；

根据所述合成帧图像的姿态数据和重力向量，确定对所述合成帧图像进行透视矫正处理的第二旋转向量；

根据相机内参矩阵和所述第二旋转向量，确定对所述合成帧图像进行透视矫正处理的第二旋转矩阵；

根据所述第二旋转矩阵，对所述合成帧图像进行透视矫正处理，生成第一图像。

10.根据权利要求6所述的装置，其特征在于，所述装置还包括第三处理模块，用于：

在所述第一图像中裁剪出满足设定条件的第二图像；

对所述第二图像进行缩放处理，得到第三图像；

其中，所述设定条件包括：所述第二图像与所述第一图像等比例，且所述第二图像的其中一个角点位于所述第一图像的边界上。

Images