CN109951641A - 图像拍摄方法和装置、电子设备、计算机可读存储介质 - Google Patents

图像拍摄方法和装置、电子设备、计算机可读存储介质 Download PDF

Info

Publication number
CN109951641A
CN109951641A CN201910233052.6A CN201910233052A CN109951641A CN 109951641 A CN109951641 A CN 109951641A CN 201910233052 A CN201910233052 A CN 201910233052A CN 109951641 A CN109951641 A CN 109951641A
Authority
CN
China
Prior art keywords
camera
image
alignment parameters
original image
alignment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910233052.6A
Other languages
English (en)
Other versions
CN109951641B (zh
Inventor
周彦汝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201910233052.6A priority Critical patent/CN109951641B/zh
Publication of CN109951641A publication Critical patent/CN109951641A/zh
Application granted granted Critical
Publication of CN109951641B publication Critical patent/CN109951641B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Studio Devices (AREA)

Abstract

本申请涉及一种图像拍摄方法、装置、电子设备、计算机可读存储介质,获取对齐参数,其中,所述对齐参数用于表示不同图像之间位置关系;根据所述对齐参数获取对应的第一状态参数,通过第一马达根据所述第一状态参数控制第一摄像头移动;控制所述第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像;根据所述对齐参数将所述第一原始图像和第二原始图像进行对齐处理。上述图像拍摄方法、装置、电子设备、计算机可读存储介质,可以提高图像拍摄的效率。

Description

图像拍摄方法和装置、电子设备、计算机可读存储介质
技术领域
本申请涉及计算机技术领域,特别是涉及一种图像拍摄方法、装置、电子设备、计算机可读存储介质。
背景技术
通过多个摄像头同时拍摄图像时,能够提高图像的分辨率、亮度等,这样可以获得更多的图像信息。但是在安装摄像头的过程中可能会存在安装误差,导致安装的多个摄像头存在像面不对齐的情况,通过多个摄像头采集多张图像之后,往往需要将多张图像进行配准,寻找多张图像中相应的特征点,然后根据查找到的特征点将采集的多张图像进行对齐。
发明内容
本申请实施例提供一种图像拍摄方法、装置、电子设备、计算机可读存储介质,可以提高图像拍摄的效率。
一种图像拍摄方法,包括:
获取对齐参数,其中,所述对齐参数用于表示不同图像之间位置关系;
根据所述对齐参数获取对应的第一状态参数,通过第一马达根据所述第一状态参数控制第一摄像头移动;
控制所述第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像;
根据所述对齐参数将所述第一原始图像和第二原始图像进行对齐处理。
一种图像拍摄装置,包括:
参数获取模块,用于获取对齐参数,其中,所述对齐参数用于表示不同图像之间位置关系;
摄像头移动模块,用于根据所述对齐参数获取对应的第一状态参数,通过第一马达根据所述第一状态参数控制第一摄像头移动;
图像采集模块,用于控制所述第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像;
图像对齐模块,用于根据所述对齐参数将所述第一原始图像和第二原始图像进行对齐处理。
一种电子设备,包括存储器及处理器,所述存储器中储存有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如下步骤:
获取对齐参数,其中,所述对齐参数用于表示不同图像之间位置关系;
根据所述对齐参数获取对应的第一状态参数,通过第一马达根据所述第一状态参数控制第一摄像头移动;
控制所述第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像;
根据所述对齐参数将所述第一原始图像和第二原始图像进行对齐处理。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如下步骤:
获取对齐参数,其中,所述对齐参数用于表示不同图像之间位置关系;
根据所述对齐参数获取对应的第一状态参数,通过第一马达根据所述第一状态参数控制第一摄像头移动;
控制所述第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像;
根据所述对齐参数将所述第一原始图像和第二原始图像进行对齐处理。
上述图像拍摄方法、装置、电子设备、计算机可读存储介质,首先获取对齐参数,然后根据对齐参数获取对应的第一状态参数。然后根据第一状态参数控制第一摄像头移动,并通过第一摄像头和第二摄像头分别采集第一原始图像和第二原始图像,然后根据对齐参数将第一原始图像和第二原始图像对齐。这样可以首先确定图像的位置关系,再根据图像的位置关系控制摄像头移动,在摄像头采集图像之后就无需再查找不同图像之间的特征点,根据匹配的特征点来对齐图像。可以直接根据对齐参数将采集的图像对齐,从而提高了图像拍摄的效率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一个实施例中图像处理方法的应用场景图;
图2为一个实施例中图像拍摄方法的流程示意图;
图3为一个实施例中将第一原始图像和第二原始图像对齐的示意图;
图4为另一个实施例中图像拍摄方法的流程示意图;
图5为又一个实施例中图像拍摄方法的流程示意图;
图6为又一个实施例中图像拍摄方法的流程示意图;
图7为又一个实施例中图像拍摄方法的流程示意图;
图8为一个实施例中图像拍摄装置的结构示意图;
图9为另一个实施例中图像拍摄装置的结构示意图;
图10为一个实施例中图像处理电路的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
可以理解,本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件,但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说,在不脱离本申请的范围的情况下,可以将第一摄像头称为第二摄像头,且类似地,可将第二摄像头称为第一摄像头。第一摄像头和第二摄像头两者都是摄像头,但其不是同一摄像头。
图1为一个实施例中图像处理方法的应用场景图。如图1所示,该应用场景中包括电子设备10,电子设备10上可以安装第一摄像头102和第二摄像头104。具体的,可以获取对齐参数,其中,对齐参数用于表示不同图像之间位置关系;根据对齐参数获取对应的第一状态参数,通过第一马达根据第一状态参数控制第一摄像头102移动;控制第一摄像头102采集第一原始图像,并控制第二摄像头104采集第二原始图像;根据对齐参数将第一原始图像和第二原始图像进行对齐处理。其中,电子设备10可以但不限于是手机、电脑、可穿戴设备、个人数字助理等。
图2为一个实施例中图像拍摄方法的流程示意图。如图2所示,该图像拍摄方法包括步骤202至步骤208。其中:
步骤202,获取对齐参数,其中,对齐参数用于表示不同图像之间位置关系。
在一个实施例中,对齐参数用于表示不同图像之间的位置关系,从而确定不同图像中的像素点的对应关系,以使不同的图像进行对齐。具体的,可以以其中一种图像为基准建立坐标系,通过横向和纵向坐标来表示其他图像与该基准图像的位置关系,也可以通过其他方式来表示该位置关系,不限于此。
例如,对齐参数可以表示图像A和图像B的位置关系,如以图像A为基准,图像B向上移动100个像素点,向左移动50个像素点后,图像A和图像B的像素点对齐。可以理解的是,上述对齐参数不限于表示两张图像之间的位置关系,还可以是三张、四张或其他数量的图像之间的位置关系,在此不做限定。
对齐参数可以是电子设备自动选取的,也可以是用户输入的,不限于此。例如,电子设备可以预设一个对齐参数的取值范围,用户可以根据需要采集的图像的重叠范围的大小,从上述对齐参数的取值范围中输入一个对齐参数。
步骤204,根据对齐参数获取对应的第一状态参数,通过第一马达根据第一状态参数控制第一摄像头移动。
在本申请提供的实施例中,电子设备上可以安装第一摄像头和第二摄像头,第一摄像头对应设置第一马达,通过第一马达来控制第一摄像头的移动。具体的,第一摄像头和第二摄像头的类型、数量不限定。例如,第一摄像头模组中可以包括2个、3个、5个摄像头,第一摄像头的类型可以是激光摄像头、红外摄像头、可见光摄像头等,不限于此。
具体的,摄像头可以包括镜头、图像传感器等器件,镜头可以收集拍摄场景中的光线,图像传感器可以将镜头收集的光线转换成电信号,从而生成图像。可以理解的是,镜头在不同位置时收集到的光线不同,生成的图像也是不同的。马达可以控制摄像头移动,即可以理解为通过马达控制摄像头中的镜头移动,也可以理解为控制摄像头中的镜头和图像传感器同时产生移动。摄像头移动到不同位置时所采集的图像是不同的。
需要说明的是,镜头的偏移可以是在平面上平行移动,也可以是绕一点或一条线转动,在此不做限定。第一状态参数用于表示马达运动状态的相关参数,第一马达处于不同运动状态时,控制第一摄像头移动的方向和距离不同。
例如,马达的状态参数可以表示为(Lx,Ly,Lz,Rx,Ry),其中Lx、Ly、Lz分别用于控制第一摄像头在x、y、z方向上的平动距离,Rx、Ry分别用于控制第一摄像头在x、y方向上的转动距离。
步骤206,控制第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像。
在本申请提供的实施例中,第一马达根据第一状态参数控制第一摄像头产生移动,从而改变第一摄像头和第二摄像头的位置关系,以改变第一摄像头和第二摄像头采集的图像的重叠范围。第二摄像头可以是固定的不能移动的,也可以是能产生移动的,在此不做限定。
通过第一摄像头的移动,可以调节第一摄像头与第二摄像头采集的图像的重叠范围。在第一马达控制第一摄像头移动之后,可以控制移动之后的第一摄像头采集第一原始图像,并控制第二摄像头采集的第二原始图像。
步骤208,根据对齐参数将第一原始图像和第二原始图像进行对齐处理。
对齐参数可以表示不同图像之间的位置关系,根据对齐参数获取第一状态参数,通过第一状态参数控制第一摄像头移动之后,第一摄像头采集的第一原始图像和第二摄像头采集的第二原始图像之间的位置关系就可以通过对齐参数来表示。例如,根据对齐参数将第一原始图像进行平移,使得第一原始图像与第二原始图像对齐。
对齐之后的第一原始图像和第二原始图像,重叠的部分可以进行融合,不重叠的部分可以保留,从而形成一张目标图像。融合而成的目标图像集合了第一原始图像和第二原始图像中的图像信息,能够得到更丰富的图像信息。
图3为一个实施例中将第一原始图像和第二原始图像对齐的示意图。如图3所示,第一摄像头采集得到第一原始图像302,第二摄像头采集得到第二原始图像304,第一原始图像302可以向左平移与第二原始图像304对齐。对齐之后的第一原始图像302和第二原始图像304可以融合生成一张目标图像306。
上述实施例提供的图像拍摄方法,首先获取对齐参数,然后根据对齐参数获取对应的第一状态参数。然后根据第一状态参数控制第一摄像头移动,并通过第一摄像头和第二摄像头分别采集第一原始图像和第二原始图像,然后根据对齐参数将第一原始图像和第二原始图像对齐。这样可以首先确定图像的位置关系,再根据图像的位置关系控制摄像头移动,在摄像头采集图像之后就无需再查找不同图像之间的特征点,根据匹配的特征点来对齐图像。可以直接根据对齐参数将采集的图像对齐,从而提高了图像拍摄的效率。
图4为另一个实施例中图像拍摄方法的流程示意图。如图4所示,该图像拍摄方法包括步骤402至步骤412。其中:
步骤402,通过第一马达根据至少两个标定状态参数控制第一摄像头产生移动。
可以理解的是,摄像头在拍摄图像之前,需要进行标定,以确定拍摄得到图像之后的转换关系。因此在通过第一摄像头和第二摄像头拍摄图像之前,也需要对第一摄像头和第二摄像头进行标定。
具体的,第一摄像头对应安装第一马达,通过第一马达控制第一摄像头的移动。标定状态参数是预先设置的第一马达的状态参数,第一马达可以通过至少两个标定状态参数控制第一摄像头产生移动,这样可以控制第一摄像头移动到至少两个不同的位置,并在不同的位置上采集第一原始图像。
步骤404,在第一摄像头根据每一个标定状态参数产生移动之后控制第一摄像头采集对应的第一标定图像,以及控制第二摄像头采集对应的第二标定图像。
在第一摄像头根据每一个标定状态参数产生移动之后,第一摄像头会移动到不同的位置,然后可以分别控制第一摄像头采集一张对应的第一标定图像,并控制第二摄像头采集一张对应的第二标定图像。可以理解的是,第一马达的状态参数所控制的是第一摄像头相对于原点所移动的距离。
例如,预先设置3个标定状态参数,第一马达可以分别通过这3个标定状态参数来控制第一摄像头移动到3个不同的位置。然后当第一摄像头移动到这3个不同的位置时,通过第一摄像头和第二摄像头分别采集对应于这3个不同位置的第一原始图像和第二原始图像。
步骤406,根据标定状态参数、第一标定图像和第二标定图像生成对齐拟合模型。
根据每一个标定状态参数控制第一摄像头产生移动之后,第一摄像头会移动到不同的位置,即第一摄像头和第二摄像头的位置关系也会发生改变。第一摄像头每次产生移动之后,采集的第一标定图像和第二标定图像的位置关系也会发生改变。
具体的,可以将第一标定图像和第二标定图像进行匹配,确定第一标定图像和第二标定图像之间的位置关系,从而确定将第一标定图像和第二标定图像对齐的标定对齐参数,即确定每一个标定状态参数所对应的标定对齐参数。然后根据标定状态参数以及标定对齐参数,来确定标定状态参数和标定对齐参数之间的对应关系。
上述对齐拟合模型即为表示标定状态参数和标定对齐参数之间的对应关系的模型,可以是表示标定状态参数和标定对齐参数的离散关系的模型,也可以是表示标定状态参数和标定对齐参数的连续关系的模型,在此不做限定。
例如,可以去5个标定状态参数,然后计算每个标定状态参数对应的标定对齐参数,从而得到5个标定状态参数和5个标定对齐参数的对应关系,那么该对齐拟合模型所表示的就是标定状态参数和标定对齐参数的离散关系的模型;还可以通过5个标定状态参数和5个标定对齐参数来拟合生成一个函数模型,那么该对齐拟合模型所表示的就是标定状态参数和标定对齐参数的连续关系的模型。
步骤408,将对齐参数输入至对齐拟合模型,输出得到对齐参数对应的第一状态参数,通过第一马达根据第一状态参数控制第一摄像头移动。
得到对齐拟合模型之后,就可以把对齐参数作为该对齐拟合模型的输入,然后输出得到对齐参数对应的第一状态参数。第一马达根据第一状态参数控制第一摄像头移动之后,采集得到的第一原始图像和第二原始图像就可以直接根据该对齐参数进行对齐,无需再计算对齐参数,提高了图像处理的效率。
步骤410,控制第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像。
步骤412,根据对齐参数将第一原始图像和第二原始图像进行对齐处理。
第一摄像头移动之后,可以控制第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像。对齐参数可以表示第一原始图像和第二原始图像的位置关系,从而可以根据对齐参数将第一原始图像和第二原始图像进行对齐处理。
上述实施例提供的图像拍摄方法,首先可以对第一摄像头和第二摄像头进行标定得到对齐拟合参数,然后获取对齐参数,根据对齐参数获取对应的第一状态参数。根据第一状态参数控制第一摄像头移动,并通过第一摄像头和第二摄像头分别采集第一原始图像和第二原始图像,根据对齐参数将第一原始图像和第二原始图像对齐。这样可以首先确定图像的位置关系,再根据图像的位置关系控制摄像头移动,在摄像头采集图像之后就无需再查找不同图像之间的特征点,根据匹配的特征点来对齐图像。可以直接根据对齐参数将采集的图像对齐,从而提高了图像拍摄的效率。
在一个实施例中,如图5所示,上述图像拍摄方法还包括:
步骤502,根据采集的第一标定图像和第二标定图像确定每一个标定状态参数对应的标定对齐参数。
第一摄像头和第二摄像头由于摆放的位置不同,所以采集的图像是具有一定视差的,需要通过平移、旋转等处理将第一摄像头和第二摄像头采集的图像进行对齐。在标定过程中,采集到第一标定图像和第二标定图像之后,可以将第一标定图像和第二标定图像进行匹配,确定第一标定图像和第二标定图像的位置关系。
具体的,可以将第一标定图像和第二标定图像进行特征点匹配,根据第一标定图像和第二标定图像中相匹配的特征点确定位置关系,从而根据确定的位置关系得到标定对齐参数。可以理解的是,不同的标定状态参数下移动的第一摄像头的位置不同,因此第一标定图像和第二标定图像的位置关系也不一样,所以每一个标定状态参数会对应一个标定状态参数。
步骤504,获取预先设置的参考拟合模型。
预先设置的参考拟合模型可以是一个可以模拟状态参数和对齐参数之间的对应关系的函数模型,例如可以是一元一次函数、一元二次函数、二元二次函数等,不限于此。
步骤506,根据标定状态参数和标定对齐参数计算参考拟合模型的拟合参数,将拟合参数带入参考拟合模型得到对齐拟合模型。
在本申请提供的实施例中,参考拟合模型中包括变量和常量,变量即为对齐参数,参考拟合模型的常量是未知的,可以通过标定状态参数和标定对齐参数进行求解。将上述标定状态参数和标定对齐参数带入到参考拟合模型,从而计算得到拟合参数。拟合参数是只对参考拟合模型中的常量的求解,得到拟合参数之后,将拟合参数带入到参考拟合模型得到对齐拟合模型。
在本申请提供的实施例中,如图6所示,电子设备安装的摄像头模组中可以包含至少两个摄像头,然后从至少两个摄像头中确定一个第二摄像头,除第二摄像头之外的其他摄像头作为第一摄像头,将第一摄像头采集的图像都向第二摄像头对齐。具体的:
步骤602,从摄像头模组中包含的至少两个摄像头中确定第二摄像头,并将摄像头模组中包含的除第二摄像头之外的其他摄像头作为第一摄像头。
电子设备可以安装包含至少两个摄像头的摄像头模组,然后从摄像头模组中确定第二摄像头,将摄像头模组中除第二摄像头之外的其他摄像头作为第一摄像头。例如,可以将采集的图像的分辨率最高的摄像头作为第二摄像头,或者是将采集的图像的对比度最高的摄像头作为第二摄像头,还可以是根据获取图像的应用程序来确定摄像头,不限于此。
具体的,确定第二摄像头的步骤具体可以包括:当检测到图像拍摄指令时,获取发起图像拍摄指令的目标应用程序对应的目标应用标识;根据目标应用标识从摄像头模组中包含的至少两个摄像头中确定第二摄像头。当检测到图像拍摄指令时,获取发起图像拍摄指令的目标应用程序,并获取上述目标应用程序对应的目标应用标识。应用标识用于唯一标示一个应用程序,该目标应用标识即为目标应用程序对应的应用标识。
可以理解的是,每个应用程序所实现的应用操作不一样,对拍摄的图像的要求也不一样。例如,有些应用程序是实现支付验证的操作,有些应用程序是实现视频通话的操作。支付验证操作由于对安全性要求较高,因此可以采用高分辨率的图像,这样支付验证过程的安全性会更高,从而可以确定一个高分辨率的摄像头作为第二摄像头;视频通话操作对实时性要求较高,因此可以采用低分辨率图像,来满足通话过程中的实时性,从而可以确定一个低分辨率的摄像头作为第二摄像头。
步骤604,获取每一个第一摄像头对应的对齐参数。
在确定第一摄像头和第二摄像头之后,可以获取每一个第一摄像头对应的对齐参数,即为每一个第一摄像头采集的第一原始图像与第二摄像头采集的第二原始图像的对应关系。然后根据获取的对齐参数对每一个第一原始图像向第二原始图像做对齐处理。
在本申请提供的实施例中,上述第一摄像头对应设置第一马达,即第一摄像头可以通过第一马达来控制移动。第二摄像头可以是固定不动的,也可以是移动的,在此不做限定。具体的,在第二摄像头可移动的情况下,第二摄像头对应设置第二马达。
具体的,可以根据对齐参数获取对应的第一状态参数和第二状态参数;通过第一马达根据第一状态参数控制第一摄像头移动,通过第二马达根据第二状态参数控制第二摄像头移动。在对摄像头标定的时候,需要分别标定对齐参数与第一状态参数的对应关系,以及对齐参数与第二状态参数的对应关系。根据对齐参数得到第一状态参数和第二状态参数之后,分别根据第一状态参数控制第一摄像头移动,根据第二状态参数控制第二摄像头移动。
在本申请提供的实施例中,上述对齐参数中包括缩放参数和平移参数,具体的上述对齐处理包括:
步骤702,根据缩放参数将第二原始图像进行缩放处理,并根据平移参数将缩放处理后的第二原始图像进行平移处理。
在一个实施例中,根据缩放参数将第二原始图像进行缩放处理,是指将第二原始图像按照比例进行一定程度的缩小和放大的处理。例如,将分辨率为320*640的图像按照原尺寸比例缩小为分辨率为160*320的图像。将图像缩放之后,可以使不同焦距的摄像头所采集的图像实现对齐。
根据平移参数将第二原始图像进行平移处理,是指将第二原始图像在空间中实现位置上的平移的处理。例如,在一个二维直角坐标系中,第一原始图像中某一点的坐标为(20,100),第二原始图像中对应点的坐标为(40,60),那么第二原始图像需要向x轴负方向移动20,并向y轴正方向移动40,从而使得第一原始图像和第二原始图像对齐。
步骤704,将第一原始图像和平移处理后的第二原始图像进行融合,得到目标图像。
将缩放和平移后的第二原始图像第一原始图像进行融合,得到最终的目标图像。该目标图像可以做例如白平衡、美颜、提高亮度等进一步的处理,在此不做限定。
应该理解的是,虽然上述流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,上述流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,上述图像拍摄方法具体包括:
(1)获取至少两个标定状态参数,其中,标定状态参数包括第一标定状态参数和第二标定状态参数;
(2)通过第一马达根据每一个标定状态参数中的第一标定状态参数控制第一摄像头产生移动,并通过第二马达根据每一个标定状态参数中的第二标定状态参数控制第二摄像头产生移动;
(3)在第一摄像头根据每一个第一标定状态参数产生移动之后控制第一摄像头采集对应的第一标定图像,以及在第二摄像头根据每一个第二标定状态参数产生移动之后控制第二摄像头采集对应的第二标定图像;
(4)根据采集的第一标定图像和第二标定图像确定每一个标定状态参数对应的标定对齐参数;
(5)获取预先设置的参考拟合模型;
(6)根据标定状态参数和标定对齐参数计算参考拟合模型的拟合参数,将拟合参数带入参考拟合模型得到对齐拟合模型;
(7)获取对齐参数,其中,对齐参数用于表示不同图像之间位置关系,对齐参数包括缩放参数和平移参数;
(8)将对齐参数输入至对齐拟合模型,输出得到对齐参数对应的第一状态参数和第二状态参数,通过第一马达根据第一状态参数控制第一摄像头移动,通过第二马达根据第二状态参数控制第二摄像头移动;
(9)控制第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像;
(10)根据缩放参数将第二原始图像进行缩放处理,并根据平移参数将缩放处理后的第二原始图像进行平移处理;
(11)将第一原始图像和平移处理后的第二原始图像进行融合,得到目标图像。
图8为一个实施例中图像拍摄装置的结构示意图。如图8所示,该图像拍摄装置800包括参数获取模块802、摄像头移动模块804、图像采集模块806和图像对齐模块808。其中:
参数获取模块802,用于获取对齐参数,其中,对齐参数用于表示不同图像之间位置关系;
摄像头移动模块804,用于根据对齐参数获取对应的第一状态参数,通过第一马达根据第一状态参数控制第一摄像头移动;
图像采集模块806,用于控制第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像;
图像对齐模块808,用于根据对齐参数将第一原始图像和第二原始图像进行对齐处理。
上述实施例提供的图像拍摄装置,首先获取对齐参数,然后根据对齐参数获取对应的第一状态参数。然后根据第一状态参数控制第一摄像头移动,并通过第一摄像头和第二摄像头分别采集第一原始图像和第二原始图像,然后根据对齐参数将第一原始图像和第二原始图像对齐。这样可以首先确定图像的位置关系,再根据图像的位置关系控制摄像头移动,在摄像头采集图像之后就无需再查找不同图像之间的特征点,根据匹配的特征点来对齐图像。可以直接根据对齐参数将采集的图像对齐,从而提高了图像拍摄的效率。
图9为另一个实施例中图像拍摄装置的结构示意图。如图9所示,该图像拍摄装置900包括参数标定模块902、参数获取模块904、摄像头移动模块906、图像采集模块908和图像对齐模块910。其中:
参数标定模块902,用于通过第一马达根据至少两个标定状态参数控制第一摄像头产生移动;在第一摄像头根据每一个标定状态参数产生移动之后控制第一摄像头采集对应的第一标定图像,以及控制第二摄像头采集对应的第二标定图像;根据标定状态参数、第一标定图像和第二标定图像生成对齐拟合模型;
参数获取模块904,用于获取对齐参数,其中,对齐参数用于表示不同图像之间位置关系;
摄像头移动模块906,用于将对齐参数输入至对齐拟合模型,输出得到对齐参数对应的第一状态参数,通过第一马达根据第一状态参数控制第一摄像头移动;
图像采集模块908,用于控制第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像;
图像对齐模块910,用于根据对齐参数将第一原始图像和第二原始图像进行对齐处理。
上述实施例提供的图像拍摄装置,首先可以对第一摄像头和第二摄像头进行标定得到对齐拟合参数,然后获取对齐参数,根据对齐参数获取对应的第一状态参数。根据第一状态参数控制第一摄像头移动,并通过第一摄像头和第二摄像头分别采集第一原始图像和第二原始图像,根据对齐参数将第一原始图像和第二原始图像对齐。这样可以首先确定图像的位置关系,再根据图像的位置关系控制摄像头移动,在摄像头采集图像之后就无需再查找不同图像之间的特征点,根据匹配的特征点来对齐图像。可以直接根据对齐参数将采集的图像对齐,从而提高了图像拍摄的效率。
在一个实施例中,上述参数标定模块902还用于根据采集的第一标定图像和第二标定图像确定每一个标定状态参数对应的标定对齐参数;获取预先设置的参考拟合模型;根据标定状态参数和标定对齐参数计算参考拟合模型的拟合参数,将拟合参数带入参考拟合模型得到对齐拟合模型。
在一个实施例中,上述参数获取模块904还用于从摄像头模组中包含的至少两个摄像头中确定第二摄像头,并将摄像头模组中包含的除第二摄像头之外的其他摄像头作为第一摄像头;获取每一个第一摄像头对应的对齐参数。
在一个实施例中,上述参数获取模块904还用于当检测到图像拍摄指令时,获取发起图像拍摄指令的目标应用程序对应的目标应用标识;根据目标应用标识从摄像头模组中包含的至少两个摄像头中确定第二摄像头。
在一个实施例中,第二摄像头对应设置第二马达;上述摄像头移动模块906还用于根据对齐参数获取对应的第一状态参数和第二状态参数;通过第一马达根据第一状态参数控制第一摄像头移动,通过第二马达根据第二状态参数控制第二摄像头移动。
在一个实施例中,对齐参数包括缩放参数和平移参数;上述图像对齐模块910还用于根据缩放参数将第二原始图像进行缩放处理,并根据平移参数将缩放处理后的第二原始图像进行平移处理;将第一原始图像和平移处理后的第二原始图像进行融合,得到目标图像。
上述图像拍摄装置中各个模块的划分仅用于举例说明,在其他实施例中,可将图像拍摄装置按照需要划分为不同的模块,以完成上述图像拍摄装置的全部或部分功能。
本申请实施例中提供的图像拍摄装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时,实现本申请实施例中所描述方法的步骤。
本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。图10为一个实施例中图像处理电路的示意图。如图10所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图10所示,图像处理电路包括第一ISP处理器1030、第二ISP处理器1040和控制逻辑器1050。第一摄像头1010包括一个或多个第一透镜1012和第一图像传感器1014。第一图像传感器1014可包括色彩滤镜阵列(如Bayer滤镜),第一图像传感器1014可获取用第一图像传感器1014的每个成像像素捕捉的光强度和波长信息,并提供可由第一ISP处理器1030处理的一组图像数据。第二摄像头1020包括一个或多个第二透镜1022和第二图像传感器1024。第二图像传感器1024可包括色彩滤镜阵列(如Bayer滤镜),第二图像传感器1024可获取用第二图像传感器1024的每个成像像素捕捉的光强度和波长信息,并提供可由第二ISP处理器1040处理的一组图像数据。
第一摄像头1010采集的第一图像传输给第一ISP处理器1030进行处理,第一ISP处理器1030处理第一图像后,可将第一图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器1050,控制逻辑器1050可根据统计数据确定第一摄像头1010的控制参数,从而第一摄像头1010可根据控制参数进行自动对焦、自动曝光等操作。第一图像经过第一ISP处理器1030进行处理后可存储至图像存储器1060中,第一ISP处理器1030也可以读取图像存储器1060中存储的图像以对进行处理。另外,第一图像经过ISP处理器1030进行处理后可直接发送至显示器1070进行显示,显示器1070也可以读取图像存储器1060中的图像以进行显示。
其中,第一ISP处理器1030按多种格式逐个像素地处理图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,第一ISP处理器1030可对图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
图像存储器1060可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自第一图像传感器1014接口时,第一ISP处理器1030可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器1060,以便在被显示之前进行另外的处理。第一ISP处理器1030从图像存储器1060接收处理数据,并对所述处理数据进行RGB和YCbCr颜色空间中的图像数据处理。第一ISP处理器1030处理后的图像数据可输出给显示器1070,以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,第一ISP处理器1030的输出还可发送给图像存储器1060,且显示器1070可从图像存储器1060读取图像数据。在一个实施例中,图像存储器1060可被配置为实现一个或多个帧缓冲器。
第一ISP处理器1030确定的统计数据可发送给控制逻辑器1050。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、第一透镜1012阴影校正等第一图像传感器1014统计信息。控制逻辑器1050可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定第一摄像头1010的控制参数及第一ISP处理器1030的控制参数。例如,第一摄像头1010的控制参数可包括增益、曝光控制的积分时间、防抖参数、闪光控制参数、第一透镜1012控制参数(例如聚焦或变焦用焦距)、或这些参数的组合等。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及第一透镜1012阴影校正参数。
同样地,第二摄像头1020采集的第二图像传输给第二ISP处理器1040进行处理,第二ISP处理器1040处理第一图像后,可将第二图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器1050,控制逻辑器1050可根据统计数据确定第二摄像头1020的控制参数,从而第二摄像头1020可根据控制参数进行自动对焦、自动曝光等操作。第二图像经过第二ISP处理器1040进行处理后可存储至图像存储器1060中,第二ISP处理器1040也可以读取图像存储器1060中存储的图像以对进行处理。另外,第二图像经过ISP处理器1040进行处理后可直接发送至显示器1070进行显示,显示器1070也可以读取图像存储器1060中的图像以进行显示。第二摄像头1020和第二ISP处理器1040也可以实现如第一摄像头1010和第一ISP处理器1030所描述的处理过程。
以下为运用图10中图像处理技术实现上述实施例提供的图像拍摄方法的步骤:
本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行上述实施例提供的图像拍摄方法的步骤。
一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例提供的图像拍摄方法。
本申请实施例所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM),它用作外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种图像拍摄方法,其特征在于,包括:
获取对齐参数,其中,所述对齐参数用于表示不同图像之间位置关系;
根据所述对齐参数获取对应的第一状态参数,通过第一马达根据所述第一状态参数控制第一摄像头移动;
控制所述第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像;
根据所述对齐参数将所述第一原始图像和第二原始图像进行对齐处理。
2.根据权利要求1所述的方法,其特征在于,所述获取对齐参数之前,还包括:
通过所述第一马达根据至少两个标定状态参数控制所述第一摄像头产生移动;
在所述第一摄像头根据每一个标定状态参数产生移动之后控制所述第一摄像头采集对应的第一标定图像,以及控制所述第二摄像头采集对应的第二标定图像;
根据所述标定状态参数、所述第一标定图像和所述第二标定图像生成对齐拟合模型;
所述根据所述对齐参数获取对应的第一状态参数,包括:
将所述对齐参数输入至所述对齐拟合模型,输出得到所述对齐参数对应的第一状态参数。
3.根据权利要求2所述的方法,其特征在于,所述根据所述标定状态参数、所述第一标定图像和所述第二标定图像生成对齐拟合模型,包括:
根据采集的所述第一标定图像和第二标定图像确定每一个标定状态参数对应的标定对齐参数;
获取预先设置的参考拟合模型;
根据所述标定状态参数和标定对齐参数计算所述参考拟合模型的拟合参数,将所述拟合参数带入所述参考拟合模型得到对齐拟合模型。
4.根据权利要求1所述的方法,其特征在于,所述获取对齐参数包括:
从摄像头模组中包含的至少两个摄像头中确定第二摄像头,并将所述摄像头模组中包含的除所述第二摄像头之外的其他摄像头作为第一摄像头;
获取每一个所述第一摄像头对应的对齐参数。
5.根据权利要求4所述的方法,其特征在于,所述从摄像头模组中包含的至少两个摄像头中确定第二摄像头,包括:
当检测到图像拍摄指令时,获取发起所述图像拍摄指令的目标应用程序对应的目标应用标识;
根据所述目标应用标识从摄像头模组中包含的至少两个摄像头中确定第二摄像头。
6.根据权利要求1所述的方法,其特征在于,所述第二摄像头对应设置第二马达;
所述根据所述对齐参数获取对应的第一状态参数,通过第一马达根据所述第一状态参数控制第一摄像头移动,包括:
根据所述对齐参数获取对应的第一状态参数和第二状态参数;
通过第一马达根据所述第一状态参数控制第一摄像头移动,通过第二马达根据所述第二状态参数控制第二摄像头移动。
7.根据权利要求1所述的方法,其特征在于,所述对齐参数包括缩放参数和平移参数;
所述根据所述对齐参数将所述第一原始图像和第二原始图像进行对齐处理,包括:
根据所述缩放参数将所述第二原始图像进行缩放处理,并根据所述平移参数将缩放处理后的第二原始图像进行平移处理;
将第一原始图像和平移处理后的第二原始图像进行融合,得到目标图像。
8.一种图像拍摄装置,其特征在于,包括:
参数获取模块,用于获取对齐参数,其中,所述对齐参数用于表示不同图像之间位置关系;
摄像头移动模块,用于根据所述对齐参数获取对应的第一状态参数,通过第一马达根据所述第一状态参数控制第一摄像头移动;
图像采集模块,用于控制所述第一摄像头采集第一原始图像,并控制第二摄像头采集第二原始图像;
图像对齐模块,用于根据所述对齐参数将所述第一原始图像和第二原始图像进行对齐处理。
9.一种电子设备,包括存储器及处理器,所述存储器中储存有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。
CN201910233052.6A 2019-03-26 2019-03-26 图像拍摄方法和装置、电子设备、计算机可读存储介质 Active CN109951641B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910233052.6A CN109951641B (zh) 2019-03-26 2019-03-26 图像拍摄方法和装置、电子设备、计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910233052.6A CN109951641B (zh) 2019-03-26 2019-03-26 图像拍摄方法和装置、电子设备、计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN109951641A true CN109951641A (zh) 2019-06-28
CN109951641B CN109951641B (zh) 2021-02-26

Family

ID=67010790

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910233052.6A Active CN109951641B (zh) 2019-03-26 2019-03-26 图像拍摄方法和装置、电子设备、计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN109951641B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110636276A (zh) * 2019-08-06 2019-12-31 RealMe重庆移动通信有限公司 视频拍摄方法、装置、存储介质及电子设备
CN113163130A (zh) * 2021-03-25 2021-07-23 维沃移动通信有限公司 拍摄辅助设备、图像对采集的标定方法及电子设备
CN115081467A (zh) * 2022-07-22 2022-09-20 深圳市成为信息股份有限公司 一种手持机采集原始图像的方法、手持机及存储介质
CN117201949A (zh) * 2023-11-08 2023-12-08 荣耀终端有限公司 图像处理方法、电子设备、分光设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150271421A1 (en) * 2014-03-20 2015-09-24 Gopro, Inc. Auto-Alignment Of Image Sensors In A Multi-Camera System
CN105933602A (zh) * 2016-05-16 2016-09-07 中科创达软件科技(深圳)有限公司 一种摄像头拍摄方法及装置
CN106210548A (zh) * 2016-09-05 2016-12-07 信利光电股份有限公司 一种快速对焦的方法及装置
CN106357968A (zh) * 2015-07-13 2017-01-25 奥林巴斯株式会社 摄像装置、图像处理方法
CN107432116A (zh) * 2015-03-10 2017-12-01 富士机械制造株式会社 安装装置、拍摄处理方法以及拍摄单元
CN107820001A (zh) * 2016-09-14 2018-03-20 豪威科技股份有限公司 使用基于特征的重影去除的阵列照相机图像组合
CN109040596A (zh) * 2018-08-27 2018-12-18 Oppo广东移动通信有限公司 一种调整摄像头的方法、移动终端及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150271421A1 (en) * 2014-03-20 2015-09-24 Gopro, Inc. Auto-Alignment Of Image Sensors In A Multi-Camera System
CN107432116A (zh) * 2015-03-10 2017-12-01 富士机械制造株式会社 安装装置、拍摄处理方法以及拍摄单元
CN106357968A (zh) * 2015-07-13 2017-01-25 奥林巴斯株式会社 摄像装置、图像处理方法
CN105933602A (zh) * 2016-05-16 2016-09-07 中科创达软件科技(深圳)有限公司 一种摄像头拍摄方法及装置
CN106210548A (zh) * 2016-09-05 2016-12-07 信利光电股份有限公司 一种快速对焦的方法及装置
CN107820001A (zh) * 2016-09-14 2018-03-20 豪威科技股份有限公司 使用基于特征的重影去除的阵列照相机图像组合
CN109040596A (zh) * 2018-08-27 2018-12-18 Oppo广东移动通信有限公司 一种调整摄像头的方法、移动终端及存储介质

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110636276A (zh) * 2019-08-06 2019-12-31 RealMe重庆移动通信有限公司 视频拍摄方法、装置、存储介质及电子设备
CN110636276B (zh) * 2019-08-06 2021-12-28 RealMe重庆移动通信有限公司 视频拍摄方法、装置、存储介质及电子设备
CN113163130A (zh) * 2021-03-25 2021-07-23 维沃移动通信有限公司 拍摄辅助设备、图像对采集的标定方法及电子设备
CN115081467A (zh) * 2022-07-22 2022-09-20 深圳市成为信息股份有限公司 一种手持机采集原始图像的方法、手持机及存储介质
CN117201949A (zh) * 2023-11-08 2023-12-08 荣耀终端有限公司 图像处理方法、电子设备、分光设备及存储介质

Also Published As

Publication number Publication date
CN109951641B (zh) 2021-02-26

Similar Documents

Publication Publication Date Title
CN111147741B (zh) 基于对焦处理的防抖方法和装置、电子设备、存储介质
CN109951641A (zh) 图像拍摄方法和装置、电子设备、计算机可读存储介质
CN110149482A (zh) 对焦方法、装置、电子设备和计算机可读存储介质
CN110166695A (zh) 摄像头防抖方法、装置、电子设备和计算机可读存储介质
CN110012224A (zh) 摄像头防抖系统、方法、电子设备和计算机可读存储介质
CN110536057A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN108769528A (zh) 图像补偿方法和装置、计算机可读存储介质和电子设备
CN109600548A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN111246089A (zh) 抖动补偿方法和装置、电子设备、计算机可读存储介质
CN109598764A (zh) 摄像头标定方法和装置、电子设备、计算机可读存储介质
CN110035206A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN110278360A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN110248097A (zh) 追焦方法、装置、终端设备、计算机可读存储介质
CN109963080B (zh) 图像采集方法、装置、电子设备和计算机存储介质
CN109685853A (zh) 图像处理方法、装置、电子设备和计算机可读存储介质
CN112004029B (zh) 曝光处理方法、装置、电子设备、计算机可读存储介质
CN111246100B (zh) 防抖参数的标定方法、装置和电子设备
CN110233970A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN107911683B (zh) 图像白平衡处理方法、装置、存储介质和电子设备
CN109660718A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN113875219B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN109559352B (zh) 摄像头标定方法、装置、电子设备和计算机可读存储介质
CN110177212A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN110049237A (zh) 摄像头防抖方法、装置、电子设备和计算机存储介质
CN112087571A (zh) 图像采集方法和装置、电子设备、计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant