CN113438421B - 图像处理方法、装置、终端和可读存储介质 - Google Patents

图像处理方法、装置、终端和可读存储介质 Download PDF

Info

Publication number
CN113438421B
CN113438421B CN202110733569.9A CN202110733569A CN113438421B CN 113438421 B CN113438421 B CN 113438421B CN 202110733569 A CN202110733569 A CN 202110733569A CN 113438421 B CN113438421 B CN 113438421B
Authority
CN
China
Prior art keywords
image
region
data
target area
interest
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110733569.9A
Other languages
English (en)
Other versions
CN113438421A (zh
Inventor
胡攀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202110733569.9A priority Critical patent/CN113438421B/zh
Publication of CN113438421A publication Critical patent/CN113438421A/zh
Application granted granted Critical
Publication of CN113438421B publication Critical patent/CN113438421B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681Motion detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

本申请提供了一种图像处理方法。图像处理方法包括获取姿态数据;根据所述姿态数据确定图像传感器的目标区域;及输出所述目标区域内的图像数据,以生成裁剪图像。本申请实施方式的图像处理方法、图像处理装置、终端和非易失性计算机可读存储介质,通过获取姿态数据,来确定图像传感器中的目标区域,裁减掉因抖动导致的可能模糊的图像数据,从而只输出目标区域内清晰的图像数据,不仅成像效果较好,而且相较于常规图像处理流程中,图像传感器输出所有图像数据,然后经过一系列图像处理而言,后续需要处理的图像数据较少,可节省处理资源,降低功耗。

Description

图像处理方法、装置、终端和可读存储介质
技术领域
本申请涉及图像技术领域,特别涉及一种图像处理方法、图像处理装置、终端和非易失性计算机可读存储介质。
背景技术
随着电子设备的技术发展,移动端(如手机)的相机做的越来越小,而手机一般是有用户手持使用的,而不管用户如何控制手臂,在拍照手机始终是存在抖动的,而相机的小型化导致轻微的抖动也会导致成像模糊,成像效果较差。
发明内容
本申请的实施方式提供了一种图像处理方法、图像处理装置、终端和非易失性计算机可读存储介质。
本申请实施方式的图像处理方法包括获取姿态数据;根据所述姿态数据确定图像传感器的目标区域;及输出所述目标区域内的图像数据,以生成裁剪图像。
本申请实施方式的图像处理装置包括获取模块、确定模块和输出模块。所述获取模块用于获取姿态数据;所述确定模块用于根据所述姿态数据确定图像传感器的目标区域;及所述输出模块用于输出所述目标区域内的图像数据,以生成裁剪图像。
本申请实施方式的终端包括姿态传感器和图像传感器。所述姿态传感器,用于检测终端和/或镜头的姿态数据;所述图像传感器用于获取目标区域内的图像数据,以生成裁剪图像,所述目标区域根据所述姿态数据确定。
本申请的一种包含计算机程序的非易失性计算机可读存储介质,当所述计算机程序被一个或多个处理器执行时,使得所述处理器执行图像处理方法。所述图像处理方法包括获取姿态数据;根据所述姿态数据确定图像传感器的目标区域;及输出所述目标区域内的图像数据,以生成裁剪图像。
本申请实施方式的图像处理方法、图像处理装置、终端和非易失性计算机可读存储介质,通过获取姿态数据,来确定图像传感器中的目标区域,裁减掉因抖动导致的可能模糊的图像数据,从而只输出目标区域内清晰的图像数据,不仅成像效果较好,而且相较于常规图像处理流程中,图像传感器输出所有图像数据,然后经过一系列图像处理而言,本申请实施例提出的图像处理方法在后续需要处理的图像数据较少,可节省处理资源,降低功耗。
本申请的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实践了解到。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请某些实施方式的图像处理方法的流程示意图;
图2是本申请某些实施方式的图像处理装置的模块示意图;
图3和图4是本申请某些实施方式的终端平面示意图;
图5至图7是本申请某些实施方式的图像传感器的平面示意图;
图8和图9是本申请某些实施方式的图像处理方法的流程示意图;
图10是本申请某些实施方式的图像传感器的平面示意图;
图11和图12是本申请某些实施方式的图像处理方法的流程示意图;
图13本申请某些实施方式的处理器和计算机可读存储介质的连接示意图。
具体实施方式
以下结合附图对本申请的实施方式作进一步说明。附图中相同或类似的标号自始至终表示相同或类似的元件或具有相同或类似功能的元件。另外,下面结合附图描述的本申请的实施方式是示例性的,仅用于解释本申请的实施方式,而不能理解为对本申请的限制。
防抖处理算法中,可在图像传感器将所有行的图像数据均输出后,对该图像数据进行处理,而在图像裁剪前,需要对图像数据其他预处理,如黑电平处理等,这些预处理操作都是针对所有行的图像数据进行的,而后续进行防抖裁剪掉的部分,是不需要的,故对于本该裁减掉的部分的预处理,增加了处理量,占用了更多的系统资源,加大了功耗和温升(温度升高)。
请参阅图1至图3,本申请实施方式的图像处理方法包括以下步骤:
011:获取姿态数据;
012:根据姿态数据确定图像传感器22的目标区域;及
013:输出目标区域内的图像数据,以生成裁剪图像。
本申请实施方式的图像处理装置10包括获取模块11、确定模块12和输出模块13。获取模块11、确定模块12和输出模块13分别用于执行步骤011、步骤012和步骤013。即,获取模块11用于获取姿态数据;确定模块12用于根据姿态数据确定图像传感器22的目标区域;输出模块13用于输出目标区域内的图像数据,以生成裁剪图像。
本申请实施方式的终端100包括姿态传感器30和图像传感器22。姿态传感器30用于获取终端100和/或相机20的姿态数据。图像传感器22用于输出目标区域内的图像数据,以生成裁剪图像,目标区域根据姿态数据确定。也即是说,步骤011可以由姿态传感器30实现,步骤013可以由图像传感器22实现。请参阅图3,图像传感器22可从姿态传感器30接收姿态数据,并根据姿态数据确定目标区域;或者,请参阅图4,终端100还设置有处理芯片40,与姿态传感器30及图像传感器22均连接,处理芯片40可从姿态传感器30接收姿态数据,并根据姿态数据确定目标区域;或者,处理芯片40可从姿态传感器30接收姿态数据,然后发送给图像传感器22,图像传感器22根据姿态数据确定目标区域。也即是说,步骤012可以由图像传感器22和/或处理芯片40实现。本实施方式中,以图像传感器22实现步骤012为例进行说明。
具体地,终端100还包括壳体60、相机20和处理器50。终端100可以是手机、平板电脑、显示设备、笔记本电脑、柜员机、闸机、智能手表、头显设备、游戏机等。如图3所示,本申请实施方式以终端100是手机为例进行说明,可以理解,终端100的具体形式并不限于手机。壳体60还可用于安装终端100的显示装置、成像装置、供电装置、通信装置等功能模块,以使壳体60为功能模块提供防尘、防摔、防水等保护。
相机20包括镜头24和图像传感器22,拍摄场景反射的光线经过镜头24后进入图像传感器22,图像传感器22输出图像数据以成像。
姿态传感器30包括陀螺仪、加速度计及霍尔传感器中至少一种。在终端100中一般均设置有陀螺仪、加速度计及霍尔传感器。例如,姿态数据可根据陀螺仪数据计算得到;或者,姿态数据可根据加速度计数据计算得到;或者,姿态数据可根据霍尔传感器数据计算得到;或者,姿态数据可根据陀螺仪数据和加速度计数据计算得到;或者,姿态数据可根据陀螺仪数据和霍尔传感器数据计算得到;或者,姿态数据可根据加速度计数据和霍尔传感器数据计算得到;或者,姿态数据可根据陀螺仪数据、加速度计数据和霍尔传感器数据计算得到。
其中,陀螺仪数据包括的三轴角速度、加速度计数据包括的三轴加速度可用于计算终端100的姿态,霍尔传感器数据则用于计算相机20的运动情况。如此,图像传感器22可根据姿态数据来计算终端100和/或相机20的姿态,从而根据终端100和/或相机20的姿态确定图像传感器22的目标区域。
请参阅图5,在一个实施方式中,处理芯片40和/或图像传感器22可根据姿态数据首先计算相机20的姿态角,姿态角可包括俯仰角、横滚角和偏航角。然后图像传感器22根据姿态角确定目标区域。
在根据姿态角确定目标区域时,可首先根据姿态角确定感兴趣区域。以俯仰角为例,当相机20俯时,则图像传感器22顶部的行的部分可能因抖动模糊,因此需要裁减顶部的行的部分(如裁减顶部的2行),确定除顶部2行之外的部分为感兴趣区域R;请参阅图6,若相机20仰时,则图像底部的行的部分可能因抖动模糊,因此需要裁减低部的行的部分(如裁减底部的2行),确定除底部2行之外的部分为感兴趣区域R,可以理解,俯仰的角度越大(即,姿态角越大)则需要裁剪的部分越多,感兴趣区域R就越小。在相机20发生俯仰时,可能同时发生横滚和偏航,从而根据俯仰角确定的感兴趣区域R1、横滚角确定的感兴趣区域R2及偏航角确定的感兴趣区域R3的交集,确定最终的感兴趣区域R。请参阅图7,再例如,当相机20顺时针横滚时(即图像传感器22顺时针旋转,如图7所示虚线框为图像传感器22未横滚前的位置),此时图像传感器22的边缘的一圈(包含顶部和底部各一行及左右两侧各一列)的像素的部分可能因抖动模糊,因此需要裁减掉,确定边缘的一圈之外的部分为感兴趣区域R,可以理解,横滚角越大时,裁剪的部分也就越大,感兴趣区域R就越小。
然后图像传感器22根据感兴趣区域R进一步确定目标区域P,感兴趣区域R位于目标区域P内。在一个实施方式中,图像传感器22确定感兴趣区域R覆盖的所有像素所在的区域为目标区域P,输出目标区域P内的图像数据,从而根据目标区域P内所有像素的像素值生成裁剪图像。
在另一个实施方式中,由于抖动可能导致相机20俯仰角、横滚角和偏航角同时发生变化,感兴趣区域R的形状可能是不规则的,图像传感器22确定感兴趣区域R的外接矩形覆盖的所有像素所在的区域为目标区域。图像传感器22输出目标区域P内的图像数据时,图像传感器22可通过随机读取,直接将目标区域P内的图像数据逐个输出;或者,通过设定目标区域P的行起点和行终点,逐行输出目标区域P内的图像数据,从而根据目标区域P内所有像素的像素值生成裁剪图像。
在一个实施方式中,在相机20姿态角过大时,此时的目标区域P可能过小,因此仅输出目标区域P的图像数据会使得图像失真较多,故在姿态角过大(如图大于预设姿态角时),则不进行裁剪甚至不输出该图像数据。
本申请实施方式的图像处理方法、图像处理装置10和终端100,通过获取姿态数据,来确定图像传感器22中的目标区域P,裁减掉因抖动导致的可能模糊的图像数据,从而只输出目标区域P内清晰的图像数据,不仅成像效果较好,而且相较于常规图像处理流程中,图像传感器22输出所有图像数据,然后经过一系列图像处理而言,后续需要处理的图像数据较少,可节省处理资源,提升整个系统的性能,减少内存开销,并降低功耗和温升。
请参阅图2、图3和图8,在某些实施方式中,图像处理方法还包括:
014:同步姿态数据和图像传感器22的图像数据;
步骤012包括以下步骤:
0121:根据与当前帧图像同步的姿态数据,确定目标区域。
在某些实施方式中,图像处理装置10还包括同步模块14。同步模块14用于步骤014,确定模块12还用于执行步骤0121。即,同步模块14用于同步姿态数据和图像传感器22的图像数据;确定模块12还用于根据与当前帧图像同步的姿态数据,确定目标区域。
在某些实施方式中,图像传感器22还用于同步姿态数据和图像传感器22的图像数据;根据与当前帧图像同步的姿态数据,确定目标区域。也即是说,步骤014和步骤0121可以由图像传感器22实现。可以理解,步骤014和步骤0121还可以由处理芯片40实现。
具体地,为了保证目标区域的准确性,需要将姿态数据和图像数据同步,以保证目标区域内的图像数据和确定目标区域的姿态数据的获取时间基本一致。在同步时,可首先获取每帧图像的采集时间(如t1至t2),然后获取t1至t2之间得到的姿态数据,从而为每一帧图像关联对应姿态数据,以实现姿态数据和图像数据的同步,保证目标区域的确定准确性。
每一帧图像可对应一个或多个姿态数据,每一帧图像对应多个姿态数据时,可将多个姿态数据的均值作为与该帧图像同步的姿态数据。
然后图像传感器22根据与当前帧图像同步的姿态数据,即可准确地确定当前帧图像对应的目标区域。
在其他实施方式中,可根据多个姿态数据的采集时间进行插值,使得每一行图像数据均存在对应的姿态数据。例如,姿态数据为10个,先根据采集时间进行排序,然后在相邻两个姿态数据之间进行插值,以使得每一行图像数据均插值得到对应姿态数据,如相邻两个姿态数据对应三行图像数据,则可取两个姿态数据的中间值作为三行图像数据中第二行图像数据对应的姿态数据,而第一行图像数据和第三行图像数据则分别对应相邻的两个姿态数据。
在确定每一行图像数据对应的姿态数据后,在任意相邻两行图像数据对应的姿态数据的差值大于预设差值时,可确定抖动过大,以将该两行图像数据裁剪掉,剩余未被裁剪的部分即为目标区域。
在某些实施方式中,对当前姿态数据进行平滑滤波,从而校正当前姿态数据,防止当前姿态数据和前N帧图像的姿态数据差异过大。
可以理解,连续的多帧图像之间的时间差很小,故姿态数据差异一般不会过大,为了保证当前帧图像对应的姿态数据(下称当前姿态数据)的准确性,图像传感器22可首先计算当前姿态数据和参考姿态数据的差值。参考姿态数据可以是前N帧图像对应的姿态数据,例如N为1、2、3等。图像传感器22可计算当前姿态数据和前N帧图像对应的姿态数据的差值,并取其中的最大差值作为当前姿态数据和参考姿态数据的差值。
在进行平滑滤波时,图像传感器22会给当前姿态数据和参考姿态数据不同的权重,从而根据当前姿态数据和其对应的权重、及参考姿态数据和其对应的权重来调整当前姿态数据。如,当前姿态数据对应的权重为0.7,参考姿态数据对应的权重为0.3,则调整后的当前姿态数据=调整前的当前姿态数据*0.7+参考姿态数据*0.3。
然后图像传感器22可根据差值(由于角速度有方向,具体可以是差值的绝对值)来调整当前姿态数据对应的权重及参考姿态数据对应的权重,例如,差值的绝对值越大,则进行平滑滤波时,当前姿态数据对应的权重越小,防止当前姿态数据和前N帧图像对应的姿态数据的偏差过大,减少姿态数据图片带来的状态突变,减少闪噪情况,从而提高当前姿态数据的准确性。
请参阅图2、图3和图9,在某些实施方式中,步骤013包括以下步骤:
0131:根据感兴趣区域内的像素值,计算目标区域中位于感兴趣区域之外的区域的像素值;及
0132:根据目标区域内的所有像素的像素值生成裁剪图像。
在某些实施方式中,输出模块13还用于执行步骤0131和步骤0132。即,输出模块13还用于根据感兴趣区域内的像素值,计算目标区域中位于感兴趣区域之外的区域的像素值;及根据目标区域内的所有像素的像素值生成裁剪图像。
在某些实施方式中,处理器50还用于根据感兴趣区域内的像素值,计算目标区域中位于感兴趣区域之外的区域的像素值;及根据目标区域内的所有像素的像素值生成裁剪图像。也即是说,步骤0131和步骤0132可以由处理器50实现。
具体地,请参阅图10,图像传感器22可输出目标区域P的图像数据(目标区域P内的所有像素的像素值)。目标区域P可以是感兴趣区域R覆盖的所有像素所在的区域;或者,目标区域P为感兴趣区域R的外接矩形M覆盖的所有像素所在的区域。由于外接矩形M内位于感兴趣区域R之外的部分(下称非感兴趣区域部分)为可能模糊的部分,处理器50需要再次进行裁剪,将非感兴趣区域部分的像素值裁剪掉;另外,处理器50为了保证图像为矩形,可根据感兴趣区域R内的像素值,重新计算非感兴趣区域部分的像素值。或者,处理器50,可不对非感兴趣区域部分进行裁剪,而是根据感兴趣区域R计算得到的像素值,直接替换非感兴趣区域部分的像素值。在计算非感兴趣区域部分的像素值时,可使用感兴趣区域R内的像素值进行插值,如以感兴趣区域R内靠近非感兴趣区域部分的区域的像素值的均值,作为非感兴趣区域部分的像素值。如此,可计算得到外接矩形M内所有像素值。
在目标区域P是感兴趣区域R覆盖的所有像素所在的区域时,处理器50根据感兴趣区域R内的所有像素的像素值,即可生成裁剪图像。在目标区域P为感兴趣区域R的外接矩形M覆盖的所有像素所在的区域时,处理器50根据外接矩形M内的所有像素的像素值,即可生成裁剪图像。
其中,感兴趣区域R为不规则区域时,感兴趣区域R的边界可能穿过像素,使得一个像素的部分位于感兴趣区域R内,感兴趣区域R覆盖的像素为至少部分位于感兴趣区域R内的像素;或者,感兴趣区域R内的像素为完全位于目标区域P内的像素。图10的实施方式中,感兴趣区域R内的像素为至少部分位于感兴趣区域R内的像素。
请再次参阅图2、图3和图11,在某些实施方式中,图像处理方法还包括:
015:对裁剪图像进行裁剪和/或拉伸处理,以生成预定分辨率的预览图像。
在某些实施方式中,图像处理装置还包括处理模块15,处理模块15用于执行步骤015。即处理模块用于对裁剪图像进行裁剪和/或拉伸处理,以生成预定分辨率的预览图像。
在某些实施方式中,处理器50还用于对裁剪图像进行裁剪和/或拉伸处理,以生成预定分辨率的预览图像。即,步骤15可以由处理器50实现。
具体地,在得到裁剪图像后,裁剪图像尺寸可直接为目标区域的尺寸,或者目标区域的外接矩形的尺寸,裁剪图像的尺寸可能并不符合预览图像的尺寸要求(如预览图像要求预定分辨率),因此,需要对裁剪图像进行处理,以使得裁剪图像达到预定分辨率。如裁剪图像较大(大于预定分辨率)时,需要对裁剪图像再次进行裁剪,如裁剪掉超过预定分辨率的部分,以生成预定分辨率的预览图像;或者对裁剪图像进行拉伸,以将裁剪图像缩小为预定分辨率的预览图像;而在裁剪图像较小(小于预定分辨率)时,则可对裁剪图像进行拉伸,以使得裁剪图像放大到预定分辨率的预览图像。如此,保证生成的图像可作为预览图像显示,且裁剪、拉伸、以及后续对图像的处理均是基于裁剪图像的图像数据进行的,相较于处理整个图像传感器22输出的图像数据而言,处理量较小。
请参阅图2、图3和图12,在某些实施方式中,步骤012包括以下步骤:
0122:根据前N帧图像对应的姿态数据计算当前帧图像对应的姿态数据,N为整数;
0123:根据当前帧图像对应的姿态数据,确定目标区域;
图像处理方法还包括:
016:控制目标区域内的像素曝光,以获取目标区域内的图像数据。
在某些实施方式中,图像处理装置10还包括曝光模块16。确定模块12还用于执行步骤0122和步骤0123,曝光模块16用于执行步骤016。即,确定模块12还用于根据前N帧图像对应的姿态数据计算当前帧图像对应的姿态数据,N为整数;根据当前帧图像对应的姿态数据,确定目标区域;曝光模块16用于控制目标区域内的像素曝光,以获取目标区域内的图像数据。
在某些实施方式中,图像传感器22还用于根据前N帧图像对应的姿态数据计算当前帧图像对应的姿态数据,N为整数;根据当前帧图像对应的姿态数据,确定目标区域;控制目标区域内的像素曝光,以获取目标区域内的图像数据。也即是说,步骤0122、步骤0123和步骤016可以由图像传感器22实现。在其他实施方式中,处理芯片40也能够实现步骤0122、步骤0123和步骤016。
具体地,图像传感器22还可以在曝光前就计算得到目标区域,然后仅曝光目标区域内的像素,从而在曝光时就将抖动带来的影响消除。
由于图像传感器22还未曝光,也即当前帧图像并无对应的姿态数据,因此图像传感器22需要先获取前N帧图像(如前3帧图像)对应的姿态数据,然后根据前3帧图像对应的姿态数据计算当前帧图像的姿态数据。可以理解,连续的多帧图像之间的时间差很小,故姿态数据差异一般不会过大,因此,可将前3帧图像对应的姿态数据的均值作为当前帧图像的姿态数据;或者,根据前3帧图像对应的姿态数据的变化趋势,如逐渐减小,从而根据前3帧图像对应的姿态数据之间的差值来确定当前帧图像对应的姿态数据。
然后图像传感器22根据得到的当前帧图像对应的姿态数据,确定目标区域。如此,根据前N帧图像对应的姿态数据计算当前帧图像对应的姿态数据,无需采集与当前帧图像同步的姿态数据即可实现目标区域的确定。
图像传感器22根据当前帧图像对应的姿态数据,即可控制目标区域内的像素进行曝光,以得到目标区域内的图像数据。处理器50根据目标区域内的图像数据,即可得到裁剪图像。如此,通过提前计算目标区域,在曝光时仅曝光目标区域内的像素,可减少像素曝光带来的功耗。
在得到目标区域内的图像数据后,图像传感器22也能够得到与该图像数据同步的姿态数据,即当前帧图像对应的姿态数据,图像传感器22可重新确定目标区域,然后仅输出位于重新确定的目标区域内的图像数据,从而保证输出的图像数据为清晰的图像数据,提升成像效果。
请参阅图13,本申请实施方式的一种存储有计算机程序302的非易失性计算机可读存储介质300,当计算机程序302被一个或多个处理器50执行时,使得处理器50可执行上述任一实施方式的图像处理方法。
例如,请结合图1,当计算机程序302被一个或多个处理器50执行时,使得处理器50执行以下步骤:
011:获取姿态数据;
012:根据姿态数据确定图像传感器22的目标区域;及
013:输出目标区域内的图像数据,以生成裁剪图像。
再例如,请结合图9,当计算机程序302被一个或多个处理器50执行时,处理器50还可以执行以下步骤:
0131:根据感兴趣区域内的像素值,计算目标区域中位于感兴趣区域之外的区域的像素值;及
0132:根据目标区域内的所有像素的像素值生成裁剪图像。
在本说明书的描述中,参考术语“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”或“一些示例”等的描述意指结合实施方式或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施方式或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的程序的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
尽管上面已经示出和描述了本申请的实施方式,可以理解的是,上述实施方式是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施方式进行变化、修改、替换和变型。

Claims (11)

1.一种图像处理方法,其特征在于,包括:
获取终端和/或相机的姿态数据;
根据所述姿态数据确定图像传感器的目标区域;及
输出所述目标区域内的图像数据,以生成裁剪图像:
所述根据所述姿态数据确定图像传感器的目标区域,还包括:
根据所述姿态数据确定所述图像传感器的感兴趣区域;
确定所述感兴趣区域的外接矩形覆盖的所有像素所在的区域为所述目标区域,所述感兴趣区域位于所述目标区域内;
所述生成裁剪图像,包括:
根据所述感兴趣区域内的像素值,计算所述目标区域中位于所述感兴趣区域之外的区域的像素值;及
根据所述目标区域内的所有像素的像素值生成所述裁剪图像。
2.根据权利要求1所述的图像处理方法,其特征在于,还包括:
同步所述姿态数据和所述图像传感器的图像数据;
所述根据所述姿态数据确定所述图像传感器的目标区域,包括:
根据与当前帧图像同步的所述姿态数据,确定所述目标区域。
3.根据权利要求2所述的图像处理方法,其特征在于,所述同步所述姿态数据和所述图像传感器的图像数据,包括:
获取每帧所述图像传感器的图像数据对应的采集时间;及
确定与所述采集时间对应的所述姿态数据。
4.根据权利要求1所述的图像处理方法,其特征在于,所述根据所述姿态数据确定图像传感器的目标区域,包括:
根据所述姿态数据计算终端和/或相机的姿态角;及
根据所述姿态角,确定所述目标区域。
5.根据权利要求1所述的图像处理方法,其特征在于,所述图像处理方法还包括:
对所述裁剪图像进行裁剪和/或拉伸处理,以生成预定分辨率的预览图像。
6.根据权利要求1所述的图像处理方法,其特征在于,所述根据所述姿态数据确定图像传感器的目标区域,包括:
根据前N帧图像对应的姿态数据计算当前帧图像对应的姿态数据,所述N为整数;
根据所述当前帧图像对应的姿态数据,确定所述目标区域。
7.根据权利要求1所述的图像处理方法,其特征在于,所述图像处理方法还包括:
控制所述目标区域内的像素曝光,以获取所述目标区域内的图像数据。
8.一种图像处理装置,其特征在于,包括:
获取模块,用于获取终端和/或相机的姿态数据;
确定模块,用于根据所述姿态数据确定图像传感器的目标区域;及
输出模块,用于输出所述目标区域内的图像数据,以生成裁剪图像;
所述确定模块还用于根据所述姿态数据确定所述图像传感器的感兴趣区域;
确定所述感兴趣区域的外接矩形覆盖的所有像素所在的区域为所述目标区域,所述感兴趣区域位于所述目标区域内;
所述输出模块还用于根据所述感兴趣区域内的像素值,计算所述目标区域中位于所述感兴趣区域之外的区域的像素值;及
根据所述目标区域内的所有像素的像素值生成所述裁剪图像。
9.一种终端,其特征在于,包括:
姿态传感器,用于获取终端和/或相机的姿态数据;
图像传感器,用于输出目标区域内的图像数据,以生成裁剪图像,所述目标区域根据所述姿态数据确定;
所述图像传感器的感兴趣区域根据所述姿态数据确定;所述目标区域确定为所述感兴趣区域的外接矩形覆盖的所有像素所在的区域,所述感兴趣区域位于所述目标区域内;所述目标区域中位于所述感兴趣区域之外的区域的像素值根据所述感兴趣区域内的像素值计算得到;所述裁剪图像根据所述目标区域内的所有像素的像素值生成。
10.根据权利要求9所述的终端,其特征在于,所述终端还包括处理芯片,所述处理芯片与所述姿态传感器、所述图像传感器均连接,所述处理芯片和/或所述图像传感器用于根据所述姿态数据计算所述目标区域。
11.一种包含计算机程序的非易失性计算机可读存储介质,所述计算机程序被处理器执行时,使得所述处理器执行权利要求1-7任意一项所述的图像处理方法。
CN202110733569.9A 2021-06-30 2021-06-30 图像处理方法、装置、终端和可读存储介质 Active CN113438421B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110733569.9A CN113438421B (zh) 2021-06-30 2021-06-30 图像处理方法、装置、终端和可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110733569.9A CN113438421B (zh) 2021-06-30 2021-06-30 图像处理方法、装置、终端和可读存储介质

Publications (2)

Publication Number Publication Date
CN113438421A CN113438421A (zh) 2021-09-24
CN113438421B true CN113438421B (zh) 2023-02-17

Family

ID=77758008

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110733569.9A Active CN113438421B (zh) 2021-06-30 2021-06-30 图像处理方法、装置、终端和可读存储介质

Country Status (1)

Country Link
CN (1) CN113438421B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115134527B (zh) * 2022-06-29 2024-03-12 上海传英信息技术有限公司 处理方法、智能终端及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110674665A (zh) * 2018-07-03 2020-01-10 杭州海康威视系统技术有限公司 图像处理方法、装置、森林防火系统及电子设备
CN111212222A (zh) * 2020-01-09 2020-05-29 Oppo广东移动通信有限公司 图像处理方法、装置、电子装置及存储介质
CN111479059A (zh) * 2020-04-15 2020-07-31 Oppo广东移动通信有限公司 拍照处理方法、装置、电子设备及存储介质
CN111949114A (zh) * 2019-05-15 2020-11-17 中国移动通信有限公司研究院 图像处理方法、装置及终端

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9258485B2 (en) * 2014-03-24 2016-02-09 Omnivision Technologies, Inc. Image sensor cropping images in response to cropping coordinate feedback
CN107124542B (zh) * 2016-02-25 2020-03-27 珠海格力电器股份有限公司 图像的防抖处理方法和装置
KR20180117597A (ko) * 2016-03-03 2018-10-29 소니 주식회사 화상 처리 장치, 화상 처리 방법, 컴퓨터 프로그램 및 전자 기기

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110674665A (zh) * 2018-07-03 2020-01-10 杭州海康威视系统技术有限公司 图像处理方法、装置、森林防火系统及电子设备
CN111949114A (zh) * 2019-05-15 2020-11-17 中国移动通信有限公司研究院 图像处理方法、装置及终端
CN111212222A (zh) * 2020-01-09 2020-05-29 Oppo广东移动通信有限公司 图像处理方法、装置、电子装置及存储介质
CN111479059A (zh) * 2020-04-15 2020-07-31 Oppo广东移动通信有限公司 拍照处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN113438421A (zh) 2021-09-24

Similar Documents

Publication Publication Date Title
JP7371081B2 (ja) 夜景撮影方法、装置、電子機器および記憶媒体
CN108335279B (zh) 图像融合和hdr成像
JP6263623B2 (ja) 画像生成方法及びデュアルレンズ装置
CN109068058B (zh) 超级夜景模式下的拍摄控制方法、装置和电子设备
CN111246089B (zh) 抖动补偿方法和装置、电子设备、计算机可读存储介质
US20200045219A1 (en) Control method, control apparatus, imaging device, and electronic device
CN113436113B (zh) 防抖动的图像处理方法、装置、电子设备和存储介质
CN110475067B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN110278360B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN111062881A (zh) 图像处理方法及装置、存储介质、电子设备
CN113824876B (zh) 数字变焦下画面稳定性处理方法、装置、移动终端及介质
CN110177212B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
WO2020029679A1 (zh) 控制方法、装置、成像设备、电子设备及可读存储介质
CN113438421B (zh) 图像处理方法、装置、终端和可读存储介质
CN115701125B (zh) 图像防抖方法与电子设备
CN111212222A (zh) 图像处理方法、装置、电子装置及存储介质
EP4050881A1 (en) High-dynamic range image synthesis method and electronic device
CN113298735A (zh) 图像处理方法、装置、电子设备及存储介质
CN114390186A (zh) 视频拍摄方法及电子设备
TW202044819A (zh) 嚴格同步光學影像穩定化中之滾動補償及模糊減少
CN115767262A (zh) 拍照方法及电子设备
JPWO2011129036A1 (ja) 撮像装置および集積回路
CN114071009B (zh) 一种拍摄方法及设备
CN114125298A (zh) 视频生成方法及装置、电子设备及计算机可读存储介质
CN113538269A (zh) 图像处理方法及装置、计算机可读存储介质和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant