CN118118798A - 图像拍摄方法、装置、电子设备和存储介质 - Google Patents
图像拍摄方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN118118798A CN118118798A CN202211509782.2A CN202211509782A CN118118798A CN 118118798 A CN118118798 A CN 118118798A CN 202211509782 A CN202211509782 A CN 202211509782A CN 118118798 A CN118118798 A CN 118118798A
- Authority
- CN
- China
- Prior art keywords
- information
- image
- determining
- compensation
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 92
- 238000012545 processing Methods 0.000 claims abstract description 55
- 230000008569 process Effects 0.000 claims abstract description 45
- 230000009466 transformation Effects 0.000 claims abstract description 23
- 230000004044 response Effects 0.000 claims abstract description 19
- 230000000087 stabilizing effect Effects 0.000 claims abstract description 16
- 238000009966 trimming Methods 0.000 claims description 38
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 claims description 17
- 239000011159 matrix material Substances 0.000 claims description 15
- 230000008859 change Effects 0.000 claims description 11
- 206010034719 Personality change Diseases 0.000 claims description 9
- 238000004891 communication Methods 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 8
- 238000005096 rolling process Methods 0.000 description 8
- 230000006641 stabilisation Effects 0.000 description 8
- 238000011105 stabilization Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 238000013519 translation Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Landscapes
- Studio Devices (AREA)
Abstract
本公开实施例公开了一种图像拍摄的方法、装置、处理设备和存储介质。所述方法包括：响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息；基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域；基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息；基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域；基于所述第二裁切区域，确定第二图像。如此，可以融合SAT和EIS的信息对图像进行联合处理，可以减少拍摄时图像的抖动和焦距的跳变情况，使得拍摄的图像更加稳定和平滑，提升了用户体验。
Description
技术领域
本公开涉及图像处理技术领域但不限于图像处理技术领域，尤其涉及一种图像拍摄方法、装置、处理设备和存储介质。
背景技术
随着图像处理技术的快速发展，终端(例如，手机)可以设置有多颗摄像头，各个摄像头具有不同的焦距，在这些摄像头之间切换，可以实现变焦的功能。但是，摄像头之间的切换会导致焦距的跳变，从而导致图像的内容的剧烈变化。另外，摄像头在获取图像的过程中可能存在抖动的情况，抖动会使得摄像头获取的画面不稳定，影响摄像效果。上述情况均会导致用户体验不好，因此，如何对摄像过程中可能出现的跳变和抖动情况进行处理，是需要考虑的问题。
发明内容
本公开实施例公开了一种图像拍摄方法、装置、处理设备和存储介质。
根据本公开实施例的第一方面，提供一种图像拍摄方法，应用于电子设备，所述方法包括：
响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息；
基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域；
基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息；
基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域；
基于所述第二裁切区域，确定第二图像。
在一个实施例中，所述基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域，包括：
基于所述第一裁切区域、所述第二补偿信息和所述EIS处理的要求参数，确定所述第二裁切区域；所述EIS处理的要求参数为执行所述EIS处理需要用到的参数。
在一个实施例中，所述EIS处理的要求参数包括以下至少之一：
图像帧的时间戳信息；
曝光时间信息；
缩放比例信息；
增益信息；
水平裁切的信息；
竖直裁切的信息；
SAT信息；以及
要求的EIS处理的误差信息。
在一个实施例中，所述参数信息包括用于图像缩放的缩放参数和用于图像变换的仿射矩阵；所述基于所述参数信息确定第一裁切区域，包括：
基于所述缩放参数和所述仿射矩阵确定所述第一裁切区域的位置信息，所述位置信息指示所述第一图像经SAT裁切获得的第一裁切区域中的参考点在所述第一图像中的位置。
在一个实施例中，所述第一补偿信息基于姿态变化参数确定；所述姿态变化参数包括以下至少之一：
陀螺仪传感器的信息；
霍尔传感器的信息；以及
获取到的与镜头畸变关联的信息。
根据本公开实施例的第二方面，提供一种图像拍摄装置，所述装置包括：
获取模块，用于响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息；
确定模块，用于基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域；基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息；基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域；基于所述第二裁切区域，确定第二图像。
在一个实施例中，所述确定模块还用于：
基于所述第一裁切区域、所述第二补偿信息和所述EIS处理的要求参数，确定所述第二裁切区域。
在一个实施例中，所述确定模块还被配置为所述EIS处理的要求参数包括以下至少之一：
图像帧的时间戳信息；
曝光时间信息；
缩放比例信息；
增益信息；
水平裁切的信息；
竖直裁切的信息；以及
SAT信息。
在一个实施例中，所述参数信息包括用于图像缩放的缩放参数和用于图像变换的仿射矩阵；所述确定模块还用于：
基于所述缩放参数和所述仿射矩阵确定所述第一裁切区域的位置信息，所述位置信息指示所述第一图像经SAT裁切获得的第一裁切区域中的参考点在所述第一图像中的位置。
在一个实施例中，所述确定模块还被配置为所述第一补偿信息基于姿态变化参数确定；所述姿态变化参数包括以下至少之一：
陀螺仪传感器的信息；
霍尔传感器的信息；以及
获取到的与镜头畸变关联的信息。
根据本公开实施例的第三方面，提供一种电子设备，所述电子设备，包括：
处理器；
用于存储所述处理器可执行指令的存储器；
其中，所述处理器被配置为：用于运行所述可执行指令时，实现本公开任意实施例所述的方法。
根据本公开实施例的第四方面，提供一种计算机存储介质，所述计算机存储介质存储有计算机可执行程序，所述可执行程序被处理器执行时实现本公开任意实施例所述的方法。
本公开的实施例提供的技术方案可以包括以下有益效果：
在本公开实施例中，响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息；基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域；基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息；基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域；基于所述第二裁切区域，确定第二图像。这里，由于所述第二补偿信息是根据基于空间对齐变换SAT处理第一图像的参数信息确定的第一裁切区域以及所述参数信息更新后确定的，且会基于所述第一裁切区域和所述第二补偿信息，确定第二图像的第二裁切区域，如此，可以融合SAT和EIS的信息对图像进行联合处理，可以减少拍摄时图像的抖动和焦距的跳变情况，使得拍摄的图像更加稳定和平滑，提升了用户体验。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种防抖的示意图。
图2是根据一示例性实施例示出的一种图像拍摄方法的流程示意图。
图3是根据一示例性实施例示出的一种图像拍摄方法的流程示意图。
图4是根据一示例性实施例示出的一种图像拍摄方法的流程示意图。
图5是根据一示例性实施例示出的一种图像拍摄方法的流程示意图。
图6是根据一示例性实施例示出的一种图像拍摄的图像区域的示意图。
图7是根据一示例性实施例示出的一种图像拍摄装置的示意图。
图8是根据一示例性实施例示出的一种终端的示意图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
为了便于本领域内技术人员理解，本公开实施例列举了多个实施方式以对本公开实施例的技术方案进行清晰地说明。当然，本领域内技术人员可以理解，本公开实施例提供的多个实施例，可以被单独执行，也可以与本公开实施例中其他实施例的方法结合后一起被执行，还可以单独或结合后与其他相关技术中的一些方法一起被执行；本公开实施例并不对此作出限定。
为了更好地理解本公开实施例，以下对图像获取过程中的相关应用场景进行说明：
空间对齐变换(SAT，Spatial Alignment Transform)在手机摄影中被称为多摄平滑切换。手机可以拥有多颗摄像头，各个摄像头间具有不同的焦距。当在这些摄像头之间切换时，自然也就能实现变焦的功能。但由于每颗摄像头的角度都为固定值，如果仅仅是生硬地在摄像头之间直接切换，势必会导致焦距的跳变，从而使得图像内容的剧烈变化。SAT则是在一系列计算摄影算法支撑下的极力模仿传统相机的平滑变焦过程。
电子图像稳定(EIS，Electric Image Stabilization)是一种电子防抖技术，是一种通过软件算法实现的防抖能力，EIS电子防抖技术的原理是利用手机陀螺仪模块和加速度传感器和来实时计算手机的姿态信息，通过动态调节整显示画幅的位置来保持显示画幅内容的不变。电子防抖实际上是一种通过降低图像视场角来补偿抖动的技术。
请参见图1，为防抖前(a)与防抖后(b)的对比示意图。EIS电子防抖模式下的视频拍摄，只有取景框中心的显示画幅才是有效内容，边缘部分的画面则被剪裁掉。裁切的画面在显示画幅外，显示画幅的位置是根据陀螺仪等传感器记录的手机姿态数据对摄像头的抖动进行反向补偿获得的。
如图2所示，本实施例中提供一种图像拍摄方法，应用于电子设备中，所述方法包括：
步骤21、响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息；
步骤22、基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域；
步骤23、基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息；
步骤24、基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域；
步骤25、基于所述第二裁切区域，确定第二图像。
需要说明的是，本公开实施例可以应用于具有拍摄功能的电子设备中，电子设备可以是相机、带摄像功能的手机或者摄像机等。电子设备具有对拍摄对象进行成像以获得感知图像以及对成像后的感知图像进行处理的功能。这里，所述感知图像可以对应本公开中的所述第一图像，所述第一图像可以是电子设备的图像传感器采集到的图像。所述第一图像可以是CMOS图像，所述第一图像可以是通过CMOS传感器获取到的图像。
在一个实施例中，响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息。基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域。基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息。基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域。基于所述第二裁切区域，确定第二图像。显示所述第二图像。需要说明的是，在显示所述第二图像之前可以对所述第二图像进行卷帘门效应矫正。
在一个实施例中，响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息。基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域。基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息。基于所述第一裁切区域、所述第二补偿信息和所述EIS处理的要求参数，确定所述第二裁切区域；其中，所述EIS处理的要求参数为执行所述EIS处理需要用到的参数；其中，所述EIS处理的要求参数包括以下至少之一：图像帧的时间戳信息；曝光时间信息；缩放比例信息；增益信息；水平裁切的信息；竖直裁切的信息；SAT信息；以及要求的EIS处理的误差信息。基于所述第二裁切区域，确定第二图像。显示所述第二图像。
在一个实施例中，响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息。基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域。基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息。基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域。基于所述第二裁切区域，确定第二图像。对所述第二图像进行卷帘门效应矫正和/或放大处理；显示所述第二图像。
在一个实施例中，开启电子设备，开始拍摄视频。响应于在拍摄视频的过程中获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息。基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域。基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息。基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域。基于所述第二裁切区域，确定第二图像。需要说明的是，所述第一图像可以是所述视频的任一图像帧。如此，即使拍摄视频的过程中出现了焦距跳变和/或抖动，也可以基于上述方法减小或者消除焦距跳变和/或抖动给视频的每一帧图像带来的影响。
在一个实施例中，响应于在拍摄视频的过程中获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息，所述参数信息包括以下至少之一：用于图像变换的仿射矩阵的信息、用于图像缩放的缩放参数和帧元数据。基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域。基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息。基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域。基于所述第二裁切区域，确定第二图像。
在一个实施例中，响应于在拍摄视频的过程中获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息，所述参数信息包括用于图像变换的仿射矩阵的信息和用于图像缩放的缩放参数。基于所述缩放参数和所述仿射矩阵确定所述第一裁切区域的位置信息，所述位置信息指示所述第一图像经SAT裁切获得的第一裁切区域中的参考点在所述第一图像中的位置。基于所述位置信息和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息。基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域。基于所述第二裁切区域，确定第二图像。
在一个实施例中，所述参数信息包括用于图像缩放的缩放参数zoom和用于图像变换的仿射矩阵affineMatrix的信息。基于SAT对第一图像进行裁剪，获得所述第一裁剪区域，所述第一裁剪区域的大小可以表示为：
hc＝h/zoom；
wc＝w/zoom；
基于上式可以获得第一裁剪区域的参考点坐标(x，y)，其中，affineMatrix的信息包含Tx和Ty，
x＝(h-h/zoom)/2+Tx；
y＝(w-w/zoom)/2+Ty。
在一个实施例中，响应于在拍摄视频的过程中获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息。基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域。基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息，其中，所述第一补偿信息是基于姿态变化参数确定的。基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域。基于所述第二裁切区域，确定第二图像。需要说明的是，所述姿态变化参数可以是电子设备因平移和/或倾斜确定的参数。
在一个实施例中，响应于在拍摄视频的过程中获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息。基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域。基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息，其中，所述第一补偿信息是基于姿态变化参数确定的；所述姿态变化参数包括以下至少之一：陀螺仪传感器的信息；霍尔传感器的信息；以及获取到的与镜头畸变关联的信息。基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域。基于所述第二裁切区域，确定第二图像。
在一个实施例中，所述第一裁切区域对应的陀螺仪传感器和/或霍尔传感器可以使用的时间范围为TimeDuation：
TimeDuation＝SensorDuration/zoom；
其中，Sensor Duration为整个第一图像(例如，CMOS画幅)所对应的时间长度，Time Duration为第一图像基于zoom缩放后图像的范围对应的时间长度。
CropTime＝FrameTime-ExporeTime/2
-(shutterDuration-TimeDuration)/2+TransYTime；
其中，FrameTime为第一图像对应的时间，CropTime为第一裁切区对应的时间，Exposure Time为整个图像采集传感器sensor的曝光时间，shutter Duration为卷帘快门的时间，TansYTime是affineMatrix处理的图像在Y方向的平移量对应的时间。
在本公开实施例中，响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息；基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域；基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息；基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域；基于所述第二裁切区域，确定第二图像。这里，由于所述第二补偿信息是根据基于空间对齐变换SAT处理第一图像的参数信息确定的第一裁切区域以及所述参数信息更新后确定的，且会基于所述第一裁切区域和所述第二补偿信息，确定第二图像的第二裁切区域，如此，可以融合SAT和EIS的信息对图像进行联合处理，可以减少拍摄时图像的抖动和焦距的跳变情况，使得拍摄的图像更加稳定和平滑，提升了用户体验。
需要说明的是，本领域内技术人员可以理解，本公开实施例提供的方法，可以被单独执行，也可以与本公开实施例中一些方法或相关技术中的一些方法一起被执行。
如图3所示，本实施例中提供一种图像拍摄方法，所述方法包括：
步骤31、响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息，其中，所述第一图像为CMOS图像；
步骤32、基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域；
步骤33、基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息；
步骤34、基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域；
步骤35、基于所述第二裁切区域，确定第二图像；
步骤36、对所述第二图像进行CMOS的卷帘门效应矫正，获得矫正后的第二图像；
步骤37、显示矫正后的所述第二图像。
在一个实施例中，响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息，其中，所述第一图像为CMOS图像。基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域。基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息，其中，所述第一补偿信息是基于姿态变化参数确定的，所述姿态变化参数包括以下至少之一：陀螺仪传感器的信息；霍尔传感器的信息；以及获取到的与镜头畸变关联的信息。基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域。基于所述第二裁切区域，确定第二图像。对所述第二图像进行CMOS的卷帘门效应矫正，获得矫正后的第二图像。显示矫正后的所述第二图像。
在一个实施例中，响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息，其中，所述第一图像为CMOS图像，所述参数信息包括用于图像变换的仿射矩阵的信息和用于图像缩放的缩放参数。基于所述缩放参数和所述仿射矩阵确定所述第一裁切区域的位置信息，所述位置信息指示所述第一图像经SAT裁切获得的第一裁切区域中的参考点在所述第一图像中的位置。基于所述位置信息和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息。基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域。基于所述第二裁切区域，确定第二图像。对所述第二图像进行CMOS的卷帘门效应矫正，获得矫正后的第二图像。显示矫正后的所述第二图像。
在一个实施例中，响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息，其中，所述第一图像为CMOS图像。基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域。基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息。基于所述第一裁切区域、所述第二补偿信息和所述EIS处理的要求参数，确定所述第二裁切区域；其中，所述EIS处理的要求参数为执行所述EIS处理需要用到的参数；其中，所述EIS处理的要求参数包括以下至少之一：图像帧的时间戳信息；曝光时间信息；缩放比例信息；增益信息；水平裁切的信息；竖直裁切的信息；SAT信息；以及要求的EIS处理的误差信息。基于所述第二裁切区域，确定第二图像。对所述第二图像进行CMOS的卷帘门效应矫正，获得矫正后的第二图像。显示矫正后的所述第二图像。
需要说明的是，本领域内技术人员可以理解，本公开实施例提供的方法，可以被单独执行，也可以与本公开实施例中一些方法或相关技术中的一些方法一起被执行。
为了更好地理解本公开实施例，以下通过一个示例性实施例对本公开技术方案进行进一步说明：
示例1、
请参见图4，以电子设备为手机为例，图像的处理过程包括：
步骤41、获取CMOS图像(对应本公开中的获取第一图像)；其中，CMOS图像为电子设备的CMOS传感器获取到的图像；
步骤42、通过SAT裁切处理获得第一裁切区域；
步骤43、获取SAT信息和第一裁切区域的信息，基于SAT信息和第一裁切区域的信息执行EIS防抖处理；
步骤44、执行第二次裁切，获得第二裁切区域；
步骤45、基于所述第二裁切区域，确定第二图像，输出所述第二图像。
请参见图5，本实施例中提供一种图像拍摄方法，所述方法包括：
步骤51、响应于通过CMOS图像传感器获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息；
步骤52、基于所述参数信息确定位置信息，所述位置信息指示所述第一图像经SAT裁切后获得的第一裁切区域的左上角点在所述第一图像中的位置。需要说明的是，基于该位置和尺寸信息就可以确定任一像素点的坐标位置。请参见图6，第一裁切区域对应图6中的SAT裁切区域。示例性地，
所述参数信息包括用于图像缩放的缩放参数zoom和用于图像变换的仿射矩阵affineMatrix的信息。基于SAT对第一图像进行裁剪，获得第一裁剪区域，第一裁剪区域的大小可以表示为：
hc＝h/zoom；
wc＝w/zoom；
基于上式可以获得第一裁剪区域的左上角的参考点坐标(x，y)，其中，affineMatrix包含Tx和Ty，
x＝(h-h/zoom)/2+Tx；
y＝(w-w/zoom)/2+Ty；
步骤53、基于所述位置信息和所述参数信息更新用于电子图像稳定EIS处理的第一补偿信息，获得第二补偿信息；其中，所述第一补偿信息是基于姿态变化参数确定的；所述姿态变化参数包括以下至少之一：陀螺仪传感器的信息；霍尔传感器的信息；以及获取到的与镜头畸变关联的信息。示例性地，
第一裁切区域对应的陀螺仪传感器和/或霍尔传感器可以使用的时间范围为TimeDuation：
TimeDuation＝SensorDuration/zoom；
其中，Sensor Duration为整个第一图像(例如，CMOS画幅)的所对应的时间长度，Time Duration为图像基于zoom缩放后图像的范围对应的时间长度。
CropTime＝FrameTime-ExporeTime/2
-(shutterDuration-TimeDuration)/2+TransYTime；
其中，FrameTime为第一图像对应的时间，CropTime为裁切区对应的时间，Exposure Time为整个图像采集传感器sensor的曝光时间，shutter Duration为卷帘快门的时间，TansYTime是affineMatrix处理的图像在Y方向的平移量对应的时间。
步骤54、基于所述位置信息、所述第二补偿信息和所述EIS处理的要求参数，确定从所述第一裁切区域变换至基于所述EIS处理确定的第二裁切区域(如图6中的防抖显示区)的四元数姿态信息qtstab。
步骤55、基于所述四元数姿态信息确定第二裁切区域；
步骤56、基于所述第二裁切区域确定第二图像；
步骤57、针对所述第二图像执行卷帘门效应的校正处理，获得校正后的所述第二图像；
步骤58、输出所述第二图像，这里，输出所述第二图像可以是显示所述第二图像。
请参见图7，本实施例中提供一种图像拍摄装置，所述装置包括：
获取模块71，用于响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息；
确定模块72，用于基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域；基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息；基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域；基于所述第二裁切区域，确定第二图像。
在一个实施例中，所述确定模块72还用于：
基于所述第一裁切区域、所述第二补偿信息和所述EIS处理的要求参数，确定所述第二裁切区域。
在一个实施例中，所述确定模块72还被配置为所述EIS处理的要求参数包括以下至少之一：
图像帧的时间戳信息；
曝光时间信息；
缩放比例信息；
增益信息；
水平裁切的信息；
竖直裁切的信息；以及
SAT信息。
在一个实施例中，所述参数信息包括用于图像缩放的缩放参数和用于图像变换的仿射矩阵；所述确定模块72还用于：
基于所述缩放参数和所述仿射矩阵确定所述第一裁切区域的位置信息，所述位置信息指示所述第一图像经SAT裁切获得的第一裁切区域中的参考点在所述第一图像中的位置。
在一个实施例中，所述确定模块72还被配置为所述第一补偿信息基于姿态变化参数确定；所述姿态变化参数包括以下至少之一：
陀螺仪传感器的信息；
霍尔传感器的信息；以及
获取到的与镜头畸变关联的信息。
本公开实施例还提供一种终端(或者通信设备)，包括：
天线；
存储器；
处理器，分别与天线及存储器连接，用于通过执行存储在存储器上的可执行程序，控制天线收发无线信号，并能够执行前述任意实施例提供的无线网络接入方法的步骤。
本实施例提供的通信设备可为前述的终端或基站。该终端可为各种人载终端或车载终端。基站可为各种类型的基站，例如，4G基站或5G基站等。
天线可为各种类型的天线、例如，3G天线、4G天线或5G天线等移动天线；天线还可包括：WiFi天线或无线充电天线等。
存储器可包括各种类型的存储介质，该存储介质为非临时性计算机存储介质，在通信设备掉电之后能够继续记忆存储其上的信息。
处理器可以通过总线等与天线和存储器连接，用于读取存储器上存储的可执行程序，例如，本公开任一个实施例所示方法的至少其中之一。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
图8是根据一示例性实施例示出的一种用于终端600的框图。例如，终端600可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。
参照图8，终端600可以包括以下一个或多个组件：处理组件602，存储器604，电源组件606，多媒体组件608，音频组件610，输入/输出(I/O)的接口612，传感器组件614，以及通信组件616。
处理组件602通常控制终端600的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件602可以包括一个或多个处理器820来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件602可以包括一个或多个模块，便于处理组件602和其他组件之间的交互。例如，处理组件602可以包括多媒体模块，以方便多媒体组件608和处理组件602之间的交互。
存储器604被配置为存储各种类型的数据以支持在设备600的操作。这些数据的示例包括用于在终端600上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器604可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电源组件606为终端600的各种组件提供电力。电源组件606可以包括电源管理系统，一个或多个电源，及其他与为终端600生成、管理和分配电力相关联的组件。
多媒体组件608包括在所述终端600和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件608包括一个前置摄像头和/或后置摄像头。当设备600处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件610被配置为输出和/或输入音频信号。例如，音频组件610包括一个麦克风(MIC)，当终端600处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器604或经由通信组件616发送。在一些实施例中，音频组件610还包括一个扬声器，用于输出音频信号。
I/O接口612为处理组件602和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件614包括一个或多个传感器，用于为终端600提供各个方面的状态评估。例如，传感器组件614可以检测到设备600的打开/关闭状态，组件的相对定位，例如所述组件为终端600的显示器和小键盘，传感器组件614还可以检测终端600或终端600一个组件的位置改变，用户与终端600接触的存在或不存在，终端600方位或加速/减速和终端600的温度变化。传感器组件614可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件614还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件614还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件616被配置为便于终端600和其他设备之间有线或无线方式的通信。终端600可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件616经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件616还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，终端600可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器604，上述指令可由终端600的处理器820执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。
应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。
Claims (12)
1.一种图像拍摄方法，应用于电子设备，其特征在于，所述方法包括：
响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息；
基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域；
基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息；
基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域；
基于所述第二裁切区域，确定第二图像。
2.根据权利要求1所述的方法，其特征在于，所述基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域，包括：
基于所述第一裁切区域、所述第二补偿信息和所述EIS处理的要求参数，确定所述第二裁切区域；所述EIS处理的要求参数为执行所述EIS处理需要用到的参数。
3.根据权利要求2所述的方法，其特征在于，所述EIS处理的要求参数包括以下至少之一：
图像帧的时间戳信息；
曝光时间信息；
缩放比例信息；
增益信息；
水平裁切的信息；
竖直裁切的信息；
SAT信息；以及
要求的EIS处理的误差信息。
4.根据权利要求1所述的方法，其特征在于，所述参数信息包括用于图像缩放的缩放参数和用于图像变换的仿射矩阵；所述基于所述参数信息确定第一裁切区域，包括：
基于所述缩放参数和所述仿射矩阵确定所述第一裁切区域的位置信息，所述位置信息指示所述第一图像经SAT裁切获得的第一裁切区域中的参考点在所述第一图像中的位置。
5.根据权利要求1所述的方法，其特征在于，所述第一补偿信息基于姿态变化参数确定；所述姿态变化参数包括以下至少之一：
陀螺仪传感器的信息；
霍尔传感器的信息；以及
获取到的与镜头畸变关联的信息。
6.一种图像拍摄装置，其特征在于，所述装置包括：
获取模块，用于响应于获取到第一图像，获取基于空间对齐变换SAT处理所述第一图像的参数信息；
确定模块，用于基于所述参数信息确定第一裁切区域，所述第一裁切区域为所述第一图像经SAT裁切后获得的区域；基于所述第一裁切区域和所述参数信息更新用于在电子图像稳定EIS过程中进行姿态补偿的第一补偿信息，获得第二补偿信息；基于所述第一裁切区域和所述第二补偿信息，确定第二裁切区域；基于所述第二裁切区域，确定第二图像。
7.根据权利要求6所述的装置，其特征在于，所述确定模块还用于：
基于所述第一裁切区域、所述第二补偿信息和所述EIS处理的要求参数，确定所述第二裁切区域。
8.根据权利要求7所述的装置，其特征在于，所述确定模块还被配置为所述EIS处理的要求参数包括以下至少之一：
图像帧的时间戳信息；
曝光时间信息；
缩放比例信息；
增益信息；
水平裁切的信息；
竖直裁切的信息；以及
SAT信息。
9.根据权利要求6所述的装置，其特征在于，所述参数信息包括用于图像缩放的缩放参数和用于图像变换的仿射矩阵；所述确定模块还用于：
基于所述缩放参数和所述仿射矩阵确定所述第一裁切区域的位置信息，所述位置信息指示所述第一图像经SAT裁切获得的第一裁切区域中的参考点在所述第一图像中的位置。
10.根据权利要求6所述的装置，其特征在于，所述确定模块还被配置为所述第一补偿信息基于姿态变化参数确定；所述姿态变化参数包括以下至少之一：
陀螺仪传感器的信息；
霍尔传感器的信息；以及
获取到的与镜头畸变关联的信息。
11.一种电子设备，其特征在于，所述电子设备包括：处理器和用于存储能够在所述处理器上运行计算机服务的存储器，其中，所述处理器用于运行所述计算机服务时，实现权利要求1至5任一项所述的方法。
12.一种存储介质，其特征在于，所述存储介质中有计算机可执行指令，所述计算机可执行指令被处理器执行实现权利要求1至5任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211509782.2A CN118118798A (zh) | 2022-11-29 | 2022-11-29 | 图像拍摄方法、装置、电子设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211509782.2A CN118118798A (zh) | 2022-11-29 | 2022-11-29 | 图像拍摄方法、装置、电子设备和存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN118118798A true CN118118798A (zh) | 2024-05-31 |
Family
ID=91219763
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211509782.2A Pending CN118118798A (zh) | 2022-11-29 | 2022-11-29 | 图像拍摄方法、装置、电子设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN118118798A (zh) |
-
2022
- 2022-11-29 CN CN202211509782.2A patent/CN118118798A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107888984B (zh) | 短视频播放方法及装置 | |
| CN110769147B (zh) | 拍摄方法及电子设备 | |
| CN111741187B (zh) | 图像处理方法、装置及存储介质 | |
| CN110876014B (zh) | 图像处理方法及装置、电子设备及存储介质 | |
| CN115134505B (zh) | 预览画面生成方法及装置、电子设备、存储介质 | |
| CN110620871A (zh) | 视频拍摄方法及电子设备 | |
| US11252341B2 (en) | Method and device for shooting image, and storage medium | |
| CN113315903B (zh) | 图像获取方法和装置、电子设备、存储介质 | |
| CN118118798A (zh) | 图像拍摄方法、装置、电子设备和存储介质 | |
| CN111081143B (zh) | 显示控制方法、装置、电子设备和计算机可读存储介质 | |
| CN111986097B (zh) | 图像处理方法及装置 | |
| CN116419069A (zh) | 图像预览方法、装置、终端设备及可读存储介质 | |
| CN110876013B (zh) | 确定图像分辨率的方法及装置、电子设备及存储介质 | |
| CN117876275A (zh) | 一种图像处理方法、装置、终端及存储介质 | |
| CN115134507A (zh) | 拍摄方法及装置 | |
| CN118052721A (zh) | 图像融合方法及装置、电子设备、存储介质 | |
| CN117956268A (zh) | 预览帧率控制方法及其装置 | |
| CN117676316A (zh) | 图像处理方法及装置、终端设备、存储介质 | |
| CN118233639A (zh) | 图像对齐处理方法、装置及存储介质 | |
| CN118014888A (zh) | 一种图像去模糊的方法、装置及存储介质 | |
| CN118138696A (zh) | 防抖方法、装置、电子设备及介质 | |
| CN115731296A (zh) | 图像处理方法、装置、终端及存储介质 | |
| CN118154678A (zh) | 图像处理方法、装置、介质、设备和芯片 | |
| CN118248055A (zh) | 屏幕控制方法、装置及存储介质 | |
| CN117499794A (zh) | 拍照方法、拍照装置以及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination |