CN107087114B

CN107087114B - 一种拍摄的方法及装置

Info

Publication number: CN107087114B
Application number: CN201710515842.4A
Authority: CN
Inventors: 聂洪浩
Original assignee: Jiangxi Yufeng Intelligent Agricultural Technology Co ltd
Current assignee: Jiangxi Yufeng Intelligent Agricultural Technology Co ltd
Priority date: 2017-06-29
Filing date: 2017-06-29
Publication date: 2020-08-18
Anticipated expiration: 2037-06-29
Also published as: CN107087114A

Abstract

本发明实施例提供了一种拍摄的方法及装置，涉及通信技术领域。该方法包括：首先，获取终端当前显示图像的各个像素点坐标以及基准图像的各个像素点坐标；然后，将当前显示图像各个像素点坐标带入到指定空间变换模型中进行空间变换；从而，将变化后的图像与基准图像进行比较，以确定变化后的图像与基准图像的像素点坐标相同的像素点个数；其次，基于空间变化模型的寻优算法，确定所述坐标相同的像素点个数最多的空间变化模型对应的参数；进而，根据所述参数对所述当前显示图像进行配准。本发明实施例提供的技术方案能够在一定程度上解决现有技术在实现全景拍摄的过程中，由于终端抖动造成拍摄的全景照片出现不同程度的断层的问题。

Description

一种拍摄的方法及装置

【技术领域】

本发明涉及通信技术领域，尤其涉及一种拍摄的方法及装置。

【背景技术】

现在的科技水平的发展，人们对拍摄技术不再陌生，并且为了方便用户使用，越来越多的终端中也集成了拍摄的功能。其中，为了满足用户的需求，让用户可以获取到拍摄环境的全景照片，人们提出了全景拍摄技术。

全景拍摄通常被定义为一种延长视野捕捉图像的摄影技术。现有终端的拍摄功能也都支持自动全景拍摄功能，当终端的全景拍摄功能开启后，用户手持终端进行水平移动，在移动过程中通过终端中的摄像头连续拍摄摄像头捕捉到的画面，然后终端自动合成全景照片。

在实现本发明的过程中，发明人发现现有技术中存在以下技术问题：

目前终端中支持的全景拍摄功能，在终端进行全景拍摄时对终端的在空间上的稳定性要求比较高。用户手持终端移动进行全景拍摄时，用户很难保证终端在各个拍摄拍摄过程中一直处于同一水平位置，因此当在移动过程中用户手部抖动时，将导致拍摄的画面位置发生改变，从而使得最终拍摄得到的全景照片出现不同程度的断层。

【发明内容】

有鉴于此，本发明实施例提供了一种拍摄的方法及装置，能够在一定程度上解决现有技术在实现全景拍摄的过程中，由于终端抖动造成拍摄的全景照片出现不同程度的断层的问题。

一方面，本发明实施例提供了一种拍摄的方法，适用于终端中，所述方法包括：

获取终端当前显示图像的各个像素点坐标以及基准图像的各个像素点坐标；

将当前显示图像各个像素点坐标带入到指定空间变换模型中进行空间变换；

将变化后的图像与基准图像进行比较，以确定变化后的图像与基准图像的像素点坐标相同的像素点个数；

基于空间变化模型的寻优算法，确定所述坐标相同的像素点个数最多的空间变化模型对应的参数；

根据所述参数对所述当前显示图像进行配准。

如上所述的方面和任一可能的实现方法，进一步提供一种实现方式，在所述根据参数对所述当前显示图像进行配准之后，所述方法还包括：

基于双线性内插算法，对配准后的图像进行调整；

将调整后的图像保存到指定位置。

如上所述的方面和任一可能的实现方法，进一步提供一种实现方式，在所述根据所述参数对所述当前显示图像进行配准之前，所述方法还包括：

选取所述当前显示图像与所述基准图像特征相同的若干特征点，并得到所述若干特征点的坐标；

所述根据所述参数对所述当前显示图像进行配准包括：根据所述参数，对所述若干特征点的坐标进行配准。

如上所述的方面和任一可能的实现方法，进一步提供一种实现方式，所述根据所述参数，对所述若干特征点的坐标进行配准包括：

根据所述参数，确定所述参数的特征矩阵；

根据所述参数的特征矩阵，对所述若干特征点的坐标进行配准。

如上所述的方面和任一可能的实现方法，进一步提供一种实现方式，所述空间变化模型为刚体变换模型。

如上所述的方面和任一可能的实现方法，进一步提供一种实现方式，当终端停止拍摄后，所述方法还包括：

输出拍摄的全景图片。

另一方面，本发明实施例还提供了一种拍摄的装置，设置于终端中，所述装置包括：

获取单元，用于获取终端当前显示图像的各个像素点坐标以及基准图像的各个像素点坐标；

变化单元，用于将当前显示图像各个像素点坐标带入到指定空间变换模型中进行空间变换；

比较单元，用于将变化后的图像与基准图像进行比较，以确定变化后的图像与基准图像的像素点坐标相同的像素点个数；

确定单元，用于基于空间变化模型的寻优算法，确定所述坐标相同的像素点个数最多的空间变化模型对应的参数；

配准单元，用于根据所述参数对所述当前显示图像进行配准。

如上所述的方面和任一可能的实现方法，进一步提供一种实现方式，所述装置还包括：

调整单元，用于基于双线性内插算法，对配准后的图像进行调整；

保存单元，用于将调整后的图像保存到指定位置。

选择单元，用于选取所述当前显示图像与所述基准图像特征相同的若干特征点，并得到所述若干特征点的坐标；

所述根据配准单元包括：配准模块，用于根据所述参数，对所述若干特征点的坐标进行配准。

如上所述的方面和任一可能的实现方法，进一步提供一种实现方式，所述配准模块具体用于：

根据所述参数，确定所述参数的特征矩阵；

如上所述的方面和任一可能的实现方法，进一步提供一种实现方式，当终端停止拍摄后，所述装置还包括：

输出单元，用于输出拍摄的全景图片。

本发明实施例提供的技术方案，通过将当前显示图像素点进行空间变化，然后比较变化后的图像与基准图像像素点坐标相同的像素点个数，从而寻找出坐标相同的像素点个数最多时对应的空间变换某型的参数，从而根据该参数对当前显示图像的像素点进行调整，从而在一定程度上解决现有技术在实现全景拍摄的过程中，由于终端抖动造成拍摄的全景照片出现不同程度的断层的问题，提高拍摄的全景图像的流程性。

【附图说明】

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1是本发明实施例提供的一种拍摄的方法流程图；

图2是本发明实施例提供的另一种拍摄的方法流程图；

图3是本发明实施例提供的另一种拍摄的方法流程图；

图4是本发明实施例提供的另一种拍摄的方法流程图；

图5是本发明实施例提供的一种拍摄装置的组成框图；

图6是本发明实施例提供的另一种拍摄装置的组成框图；

图7是本发明实施例提供的另一种拍摄装置的组成框图；

图8是本发明实施例提供的另一种拍摄装置的组成框图。

【具体实施方式】

为了更好的理解本发明的技术方案，下面结合附图对本发明实施例进行详细描述。

应当明确，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有付出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。

取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地，取决于语境，短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。

应当理解，本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。

本发明实施例提供了一种拍摄的方法，适用于终端实现全景拍摄的过程中，如图1所示，所述方法包括：

101、获取终端当前显示图像的各个像素点坐标以及基准图像的各个像素点坐标。

其中，当前显示图像是指终端空间位置发生变化后，终端摄像头采集到的画面，经过处理后，显示在显示界面中的图像。

其中，基准图像是对在当前时刻之前，终端摄像头已拍摄的图像完成图像配准后的图像。例如，基准图像是终端拍摄的第三帧图像，因此，该基准图像为终端拍摄的前两帧图像进行配准后的图像。其中，上述仅为方便本领域的技术人员理解而提供一种举例，基准图像是随着终端进行全景拍摄的过程而变化的。

102、将当前显示图像各个像素点坐标带入到指定空间变换模型中进行空间变换。

其中，空间变换模型是一种反映两幅图像相对应的各个像素点的映射模型。空间变换模型分为刚体变换模型、仿射变换模型、非线性变换模型等。刚体变换模型可以实现图像的旋转，位移操作，而仿射变换模型或非线性变换模型用于反映图像的缩放操作。而在全景拍摄的过程中，图像变化主要涉及位移、旋转变化，因此，对于全景拍摄过程中推荐采用刚体变换模型对图像进行处理。

103、将变化后的图像与基准图像进行比较，以确定变化后的图像与基准图像的像素点坐标相同的像素点个数。

需要说明的是，在全景拍摄的过程中，终端当前显示图像与该图像前一帧图像存在部分相同的图像内容，当这两幅图像精准拼接时，这两幅图像的相同图像内容的像素点的坐标相同，即相同图像内容的像素点重合，因此，两幅图像的像素点坐标相同的像素点个数越多，两幅图像在拼接时就越准确

104、基于空间变化模型的寻优算法，确定所述坐标相同的像素点个数最多的空间变化模型对应的参数。

其中，上述寻优算法包括但不限于：遗传算法、粒子群优化算法、变量算法等。其该算法实质的原理是试验至少两种可能的空间变换模型，确定试验的每一种空间变化模型处理后图像的像素点坐标与对应的基准图像的像素点坐标相同的像素点个数，然后，选择出坐标相同的像素点个数最大时对应的空间变化模型，确定该空间变化模型的参数。

105、根据所述参数对所述当前显示图像进行配准。

终端对该参数进行相应的处理后，能够明确终端对当前显示图像进行变化的方式，从而对当前显示图像基于对应的基准图像进行配准。

进一步的，为了保证终端最终展示给用户的全景图像具有更高的流畅性，本发明实施例提供了另一种实现方式，如图2所述，在执行完步骤105根据参数对所述当前显示图像进行配准之后，所述方法还包括：

106、基于双线性内插算法，对配准后的图像进行调整。

当前显示图像在经过步骤105的变化后，变化的图像的像素点坐标可能为浮点坐标，为了避免由于该原因造成图像像素点出现不连续的情况，终端采用双线性内插算法，将浮点坐标转化成整数坐标的形式。

107、将调整后的图像保存到指定位置。

需要说明的是，终端为调整后的图像分配了临时存储空间，当终端对显示屏当前显示的图像进行调整后，依据现有技术中的处理方式，将当前显示图像，以及终端在获取到当前显示前已进行调整的基准图像，在底层生成调整后的图像，同时保存在指定位置，在终端拍摄下一画面时，作为基准图像以实现对拍摄到图像的调整。

进一步的，为了提高图像配准的速度，本发明实施例提供了另一种实现方式，如图3所示，在执行步骤104根据所述参数对所述当前显示图像进行配准之前，所述方法还包括：

108、选取所述当前显示图像与所述基准图像的特征相同的若干特征点，并得到所述若干特征点的坐标。

终端利用图像像素色彩以及根据色域空间坐标，通过比较当前显示图像的像素色彩和色域空间坐标以及基准图像的像素色彩和色域空间坐标，选择像素点色彩以及色域空间坐标相同的对应的像素作为特征点，并得到选择的特征点在当前显示图像中对应的坐标。

所述步骤104根据所述参数对所述当前显示图像进行配准具体用于：根据所述参数，对所述若干特征点的坐标进行配准。

终端根据得到的空间变化模型的参数，构建图像变换方式的信息方程组，通过对该信息方程组的处理得到特征矩阵H，然后，将选取的特征点的坐标经过特征矩阵H，将当前显示图像的像素点坐标P变化到P，，从而实现图像的配准。其中，P与P，的关系为P*H＝P，。

进一步的，结合前述流程，为了让用户能够查看终端拍摄到的全景图像，本发明实施例提供了另一种实现方式，如图4所示，当终端停止拍摄后，所述方法还包括：

109、输出拍摄的全景图片。

需要说明的是，本发明实施例中的执行主体可以包括但不限于个人计算机(Personal Computer，PC)、个人数字助理(Personal Digital Assistant，PDA)、无线手持设备、平板电脑(Tablet Computer)、手机等。

基于上述提供的方法实施例，本发明实施例还提供了一种拍摄的装置，设置于终端中，该装置的组成图如图5所示，所述装置包括：

获取单元21，用于获取终端当前显示图像的各个像素点坐标以及基准图像的各个像素点坐标。

变化单元22，用于将当前显示图像各个像素点坐标带入到指定空间变换模型中进行空间变换。

比较单元23，用于将变化后的图像与基准图像进行比较，以确定变化后的图像与基准图像的像素点坐标相同的像素点个数。

确定单元24，用于基于空间变化模型的寻优算法，确定所述坐标相同的像素点个数最多的空间变化模型对应的参数。

配准单元25，用于根据所述参数对所述当前显示图像进行配准。

可选的是，如图6所示，所述装置还包括：

调整单元26，用于基于双线性内插算法，对配准后的图像进行调整。

保存单元27，用于将调整后的图像保存到指定位置。

可选的是，如图7所示，所述装置还包括：

选择单元28，用于选取所述当前显示图像与所述基准图像特征相同的若干特征点，并得到所述若干特征点的坐标。

所述根据配准单元25包括：配准模块251，用于根据所述参数，对所述若干特征点的坐标进行配准。

可选的是，所述配准模块251具体用于：

根据所述参数，确定所述参数的特征矩阵。

可选的是，所述空间变化模型为刚体变换模型。

可选的是，如图8所示，当终端停止拍摄后，所述装置还包括：

输出单元29，用于输出拍摄的全景图片。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本发明所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机装置(可以是个人计算机，服务器，或者网络装置等)或处理器(Processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。

Claims

1.一种拍摄的方法，其特征在于，适用于终端中，所述方法包括：获取终端当前显示图像的各个像素点坐标以及基准图像的各个像素点坐标；

将变换后的图像与基准图像进行比较，以确定变换后的图像与基准图像的像素点坐标相同的像素点个数；

基于空间变换模型的寻优算法，确定所述坐标相同的像素点个数最多的空间变换模型对应的参数；

根据所述参数对所述当前显示图像进行配准。

2.根据权利要求1所述的方法，其特征在于，在所述根据参数对所述当前显示图像进行配准之后，所述方法还包括：基于双线性内插算法，对配准后的图像进行调整；

将调整后的图像保存到指定位置。

3.根据权利要求2所述的方法，其特征在于，在所述根据所述参数对所述当前显示图像进行配准之前，所述方法还包括：选取所述当前显示图像与所述基准图像特征相同的若干特征点，并得到所述若干特征点的坐标；

4.根据权利要求3所述的方法，其特征在于，所述根据所述参数，对所述若干特征点的坐标进行配准包括：根据所述参数，确定所述参数的特征矩阵；

5.根据权利要求4所述的方法，其特征在于，所述空间变换模型为刚体变换模型。

6.根据权利要求5所述的方法，其特征在于，当终端停止拍摄后，所述方法还包括：输出拍摄的全景图片。

7.一种拍摄的装置，其特征在于，设置于终端中，所述装置包括：获取单元，用于获取终端当前显示图像的各个像素点坐标以及基准图像的各个像素点坐标；

变换单元，用于将当前显示图像各个像素点坐标带入到指定空间变换模型中进行空间变换；

比较单元，用于将变换后的图像与基准图像进行比较，以确定变换后的图像与基准图像的像素点坐标相同的像素点个数；

确定单元，用于基于空间变换模型的寻优算法，确定所述坐标相同的像素点个数最多的空间变换模型对应的参数；

8.根据权利要求7所述的装置，其特征在于，所述装置还包括：调整单元，用于基于双线性内插算法，对配准后的图像进行调整；

保存单元，用于将调整后的图像保存到指定位置。