CN117441344A - 一种图像处理方法、装置、终端及存储介质 - Google Patents
一种图像处理方法、装置、终端及存储介质 Download PDFInfo
- Publication number
- CN117441344A CN117441344A CN202280004401.7A CN202280004401A CN117441344A CN 117441344 A CN117441344 A CN 117441344A CN 202280004401 A CN202280004401 A CN 202280004401A CN 117441344 A CN117441344 A CN 117441344A
- Authority
- CN
- China
- Prior art keywords
- multiplying power
- image
- current
- mapping information
- camera unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 29
- 238000013507 mapping Methods 0.000 claims abstract description 262
- 238000000034 method Methods 0.000 claims abstract description 81
- 230000008569 process Effects 0.000 claims abstract description 58
- 238000012545 processing Methods 0.000 claims description 49
- 230000008859 change Effects 0.000 claims description 6
- 238000009825 accumulation Methods 0.000 claims description 4
- 230000007704 transition Effects 0.000 abstract description 12
- 230000000007 visual effect Effects 0.000 abstract description 5
- 238000004891 communication Methods 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 235000003255 Carthamus tinctorius Nutrition 0.000 description 3
- 244000020518 Carthamus tinctorius Species 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000001186 cumulative effect Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- HOWHQWFXSLOJEF-MGZLOUMQSA-N systemin Chemical compound NCCCC[C@H](N)C(=O)N[C@@H](CCSC)C(=O)N[C@@H](CCC(N)=O)C(=O)N[C@@H]([C@@H](C)O)C(=O)N[C@@H](CC(O)=O)C(=O)OC(=O)[C@@H]1CCCN1C(=O)[C@H]1N(C(=O)[C@H](CC(O)=O)NC(=O)[C@H](CCCN=C(N)N)NC(=O)[C@H](CCCCN)NC(=O)[C@H](CO)NC(=O)[C@H]2N(CCC2)C(=O)[C@H]2N(CCC2)C(=O)[C@H](CCCCN)NC(=O)[C@H](CO)NC(=O)[C@H](CCC(N)=O)NC(=O)[C@@H](NC(=O)[C@H](C)N)C(C)C)CCC1 HOWHQWFXSLOJEF-MGZLOUMQSA-N 0.000 description 1
- 108010050014 systemin Proteins 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
本公开提供一种图像处理方法、装置、终端及存储介质,其中,终端的相机系统包括第一相机单元和第二相机单元,在相机系统的变焦过程处于由第一相机单元向第二相机单元的变化过程中,图像处理方法包括:获取相机系统在当前倍率下的第一拍摄图像和第二拍摄图像;根据当前倍率、当前倍率下的第一拍摄图像和第二拍摄图像,以及第一相机单元与第二相机单元的切换倍率,确定当前倍率对应的第一映射信息;根据当前倍率对应的第一映射信息,对当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定当前倍率下的目标显示图像。本公开可以在变焦过程中,实现目标显示图像的画质的平滑过渡,提升变焦过程中的视觉体验,提升用户的使用体验。
Description
本公开涉及终端领域,尤其涉及一种图像处理方法、装置、终端及存储介质。
相关技术中,随着智能手机等终端领域的发展,一般手机往往配置了多个相机单元。例如,常见的设置有三个相机单元的手机。针对多相机单元,计算摄影领域开启了很多新型算法,例如虚化、融合、变焦等。其中,变焦算法利用多个相机单元,模拟单反相机中的变焦过程,可以给用户带来不同倍率的图像成像效果。
在变焦过程中会涉及到不同相机单元之间的切换。然而,由于多相机单元中各相机单元具有不同的传感器以及独立的图像信息处理(Image signal processing,简称为ISP)系统,针对同一场景拍摄的图像,不同相机单元拍摄得到图像在画质特征(例如亮度、色彩等)上具有显著的差异。由于这种差异,不同相机单元的切换瞬间,用户可明显感知到相机切换导致图像画质的变化,影响用户使用体验。
一些相关技术中,基于相机内外参、畸变系数、图像宽度等空间几何信息以及变焦过程中的插值方法,可以实现变焦过程中的空间对齐与平滑过渡,但是,并不能实现变焦过程中的画质对齐,变焦体验较差。
发明内容
为克服相关技术中存在的问题,本公开提供一种图像处理方法、装置、终端及存储介质。
根据本公开实施例的第一方面,提供一种图像处理方法,应用于终端,所述终端的相机系统包括第一相机单元和第二相机单元,在所述相机系统的变焦过程处于由所述第一相机单元向所述第二相机单元的变化过程中,所述图像处理方法包括:
获取所述相机系统在当前倍率下的第一拍摄图像和第二拍摄图像;其中,所述第一拍摄图像由所述第一相机单元拍摄得到,所述第二拍摄图像由所述第二相机单元拍摄得到;
根据所述当前倍率、所述当前倍率下的第一拍摄图像和第二拍摄图像,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息;其中,所述当前倍率对应的第一映射信息,用于表征,所述当前倍率对应的目标显示图像的画质特征 与第一拍摄图像的画质特征之间的映射关系;
根据所述当前倍率对应的第一映射信息,对所述当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定所述当前倍率下的目标显示图像。
可选地,所述根据所述当前倍率、所述当前倍率下的第一拍摄图像和第二拍摄图像,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息,包括
根据所述当前倍率下的第一拍摄图像和第二拍摄图像,确定所述当前倍率对应的第二映射信息;其中,所述当前倍率对应的第二映射信息,用于表征,所述当前倍率下,所述第一相机单元拍摄的图像与所述第二相机单元拍摄的图像之间的画质特征的映射关系;
根据所述当前倍率、所述当前倍率对应的第二映射信息,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息。
可选地,所述根据所述当前倍率下的第一拍摄图像和第二拍摄图像,确定所述当前倍率对应的第二映射信息,包括:
根据设定标定信息,对所述第一拍摄图像和所述第二拍摄图像进行对齐处理,确定第一对齐图像和第二对齐图像;其中,所述第一对齐图像与所述第一拍摄图像对应,所述第二对齐图像与所述第二拍摄图像对应;
根据所述第一对齐图像,确定第一累计信息;其中,所述第一累计信息包括多个画质特征值以及每个画质特征值对应的第一数量,第一数量指所述第一对齐图像中与相应画质特征值对应的单位图像的数量;
根据所述第二对齐图像,确定第二累计信息;其中,所述第二累计信息包括多个画质特征以及每个画质特征对应的第二数量,第二数量指所述第二对齐图像中与相应画质特征对应的单位图像的数量;
根据所述第一累计信息和所述第二累计信息,确定所述当前倍率对应的第二映射信息。
可选地,所述根据所述第一累计信息和所述第二累计信息,确定所述当前倍率对应的第二映射信息,包括:
根据所述第一累计信息和所述第二累计信息,确定所述当前倍率对应的第三映射信息;其中,所述第三映射信息,用于表征,所述当前倍率下的第一拍摄图像与第二拍摄图像之间的画质特征的映射关系;
对所述第三映射信息进行模糊处理,确定所述当前倍率对应的第二映射信息。
可选地,所述根据所述当前倍率、所述当前倍率对应的第二映射信息,以及所述第一相 机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息,包括:
确定所述当前倍率对应的参考倍率以及参考映射信息;
根据所述当前倍率对应的第二映射信息、参考倍率以及参考映射信息,以及所述当前倍率和所述切换倍率,确定所述当前倍率对应的第一映射信息。
可选地,所述确定所述当前倍率对应的参考倍率以及参考映射信息,包括:
若所述当前倍率存在对应的上一倍率,则将所述上一倍率确定为所述当前倍率对应的参考倍率,并将所述上一倍率对应的第一映射信息确定为所述当前倍率对应的参考映射信息;
若所述当前倍率不存在对应的上一倍率,则将设定倍率确定为所述当前倍率对应的参考倍率,并将设定映射信息确定为所述当前倍率对应的参考映射信息。
可选地,所述画质特征包括以下中的至少一种:
亮度特征、色彩特征、饱和度特征、图像噪声类型、图像解析力。
根据本公开实施例的第二方面,提供一种图像处理装置,应用于终端,所述终端的相机系统包括第一相机单元和第二相机单元,在所述相机系统的变焦过程处于由所述第一相机单元向所述第二相机单元的变化过程中,所述图像处理装置包括:
获取模块,被配置为获取所述相机系统在当前倍率下的第一拍摄图像和第二拍摄图像;其中,所述第一拍摄图像由所述第一相机单元拍摄得到,所述第二拍摄图像由所述第二相机单元拍摄得到;
确定模块,被配置为根据所述当前倍率、所述当前倍率下的第一拍摄图像和第二拍摄图像,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息;其中,所述当前倍率对应的第一映射信息,用于表征,所述当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系;
还被配置为根据所述当前倍率对应的第一映射信息,对所述当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定所述当前倍率下的目标显示图像。
可选地,所述确定模块,被配置为:
根据所述当前倍率下的第一拍摄图像和第二拍摄图像,确定所述当前倍率对应的第二映射信息;其中,所述当前倍率对应的第二映射信息,用于表征,所述当前倍率下,所述第一相机单元拍摄的图像与所述第二相机单元拍摄的图像之间的画质特征的映射关系;
根据所述当前倍率、所述当前倍率对应的第二映射信息,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息。
可选地,所述确定模块,被配置为:
根据设定标定信息,对所述第一拍摄图像和所述第二拍摄图像进行对齐处理,确定第一对齐图像和第二对齐图像;其中,所述第一对齐图像与所述第一拍摄图像对应,所述第二对齐图像与所述第二拍摄图像对应;
根据所述第一对齐图像,确定第一累计信息;其中,所述第一累计信息包括多个画质特征值以及每个画质特征值对应的第一数量,第一数量指所述第一对齐图像中与相应画质特征值对应的单位图像的数量;
根据所述第二对齐图像,确定第二累计信息;其中,所述第二累计信息包括多个画质特征以及每个画质特征对应的第二数量,第二数量指所述第二对齐图像中与相应画质特征对应的单位图像的数量;
根据所述第一累计信息和所述第二累计信息,确定所述当前倍率对应的第二映射信息。
可选地,所述确定模块,被配置为:
根据所述第一累计信息和所述第二累计信息,确定所述当前倍率对应的第三映射信息;其中,所述第三映射信息,用于表征,所述当前倍率下的第一拍摄图像与第二拍摄图像之间的画质特征的映射关系;
对所述第三映射信息进行模糊处理,确定所述当前倍率对应的第二映射信息。
可选地,所述确定模块,被配置为:
确定所述当前倍率对应的参考倍率以及参考映射信息;
根据所述当前倍率对应的第二映射信息、参考倍率以及参考映射信息,以及所述当前倍率和所述切换倍率,确定所述当前倍率对应的第一映射信息。
可选地,所述确定模块,被配置为:
若所述当前倍率存在对应的上一倍率,则将所述上一倍率确定为所述当前倍率对应的参考倍率,并将所述上一倍率对应的第一映射信息确定为所述当前倍率对应的参考映射信息;
若所述当前倍率不存在对应的上一倍率,则将设定倍率确定为所述当前倍率对应的参考倍率,并将设定映射信息确定为所述当前倍率对应的参考映射信息。
可选地,所述画质特征包括以下中的至少一种:
亮度特征、色彩特征、饱和度特征、图像噪声类型、图像解析力。
根据本公开实施例的第三方面,提供一种终端,包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述终端的相机系统包括第一相机单元和第二相机单元,在所述相机系统的变焦 过程处于由所述第一相机单元向所述第二相机单元的变化过程中,所述处理器被配置为:
获取所述相机系统在当前倍率下的第一拍摄图像和第二拍摄图像;其中,所述第一拍摄图像由所述第一相机单元拍摄得到,所述第二拍摄图像由所述第二相机单元拍摄得到;
根据所述当前倍率、所述当前倍率下的第一拍摄图像和第二拍摄图像,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息;其中,所述当前倍率对应的第一映射信息,用于表征,所述当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系;
根据所述当前倍率对应的第一映射信息,对所述当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定所述当前倍率下的目标显示图像。
根据本公开实施例的第四方面,提供一种非临时性计算机可读存储介质,当所述存储介质中的指令由终端的处理器执行时,使得终端能够执行一种图像处理方法,其中,所述终端的相机系统包括第一相机单元和第二相机单元,在所述相机系统的变焦过程处于由所述第一相机单元向所述第二相机单元的变化过程中,所述图像处理方法包括:
获取所述相机系统在当前倍率下的第一拍摄图像和第二拍摄图像;其中,所述第一拍摄图像由所述第一相机单元拍摄得到,所述第二拍摄图像由所述第二相机单元拍摄得到;
根据所述当前倍率、所述当前倍率下的第一拍摄图像和第二拍摄图像,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息;其中,所述当前倍率对应的第一映射信息,用于表征,所述当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系;
根据所述当前倍率对应的第一映射信息,对所述当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定所述当前倍率下的目标显示图像。
本公开的实施例提供的技术方案可以包括以下有益效果:在相机系统的变焦过程处于由第一相机单元向第二相机单元的变化过程中,不再直接以第一相机单元拍摄的图像的画质进行显示,而是先根据当前倍率下,第一相机单元拍摄的第一拍摄图像和第二相机单元拍摄的第二拍摄图像,确定当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系,然后基于上述映射关系对第一拍摄图像进行处理,从而得到最终的目标显示图像,以使得在变焦过程中,实现目标显示图像的画质的平滑过渡,提升变焦过程中的视觉体验,提升用户的使用体验。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种图像处理方法的流程图。
图2是根据一示例性实施例示出的一种图像处理装置的框图。
图3是根据一示例性实施例示出的一种终端的框图。
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
图1是根据一示例性实施例示出的一种图像处理方法的流程图。图像处理方法用于终端中,终端的相机系统包括第一相机单元和第二相机单元,第一相机单元的变焦范围记为第一变焦范围,第二相机单元的变焦范围记为第二变焦范围。
每个镜头一般都会支持一定范围的数码变焦。在一个完整的多摄系统中,不同镜头的变焦范围一般会相互覆盖到,从而让整个多摄系统支持从一个近焦段到远焦段的连续变焦过程。为了实现连续变焦,就需要在某些焦段附近进行摄像头的切换。
一般情况下,第一变焦范围与第二变焦范围会相互覆盖到,从而让整个相机系统支持从一个倍率到另一个倍率的连续变焦过程。为了实现连续变焦,就需要设置切换倍率。当倍率变焦至切换倍率后,便可切换用于确定目标显示图像的相机单元。
其中,相机系统处于变焦过程中,若先使用第一相机单元确定目标显示图像,当倍率达到切换倍率后,后续则使用第二相机单元确定目标显示图像,这种情况便可认为,相机系统的变焦过程处于由第一相机单元向第二相机单元的变化过程中。
参考图1所示,在相机系统的变焦过程处于由第一相机单元向第二相机单元的变化过程中,该图像处理方法可包括以下步骤。
在步骤S110中,获取所述相机系统在当前倍率下的第一拍摄图像和第二拍摄图像;其中,第一拍摄图像由第一相机单元拍摄得到,第二拍摄图像由第二相机单元拍摄得到;
在步骤S120中,根据当前倍率、当前倍率下的第一拍摄图像和第二拍摄图像,以及第一 相机单元与第二相机单元的切换倍率,确定当前倍率对应的第一映射信息;其中,当前倍率对应的第一映射信息,用于表征,当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系;
在步骤S130中,根据当前倍率对应的第一映射信息,对当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定当前倍率下的目标显示图像。
其中,在步骤S110中,在相机系统的变焦过程中,当终端的处理器控制相机系统的倍率调整为当前倍率后,处理器便可控制第一相机单元和第二相机单元拍摄图像。第一相机单元拍摄得到第一拍摄图像,便可将其传输至处理器,处理器便可获取第一拍摄图像。第二相机单元拍摄得到第二拍摄图像后,便可将其传输至处理器,处理器便可获取第二拍摄图像。
其中,在步骤S120中,处理器中可预设第一相机单元与第二相机单元的切换倍率。切换倍率可以是终端出厂前设置的,也可以是终端出厂后设置的,对此不作限定。并且,切换倍率设置完成后,后续也可对其进行修改,以更好地满足用户的不同需求。
处理器确定当前倍率,且得到第一拍摄图像和第二拍摄图像后,便可根据切换倍率、当前倍率,以及当前倍率下的第一拍摄图像和第二拍摄图像,确定当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系,以得到当前倍率对应的第一映射信息。第一映射信息包括第一拍摄图像的画质特征与目标显示图像的画质特征之间的对应关系。
其中,画质特征可包括以下中的至少一种:亮度特征、色彩特征、饱和度特征、图像噪声类型、图像解析力等等,对此不作限定。
其中,在步骤S130中,可先确定当前倍率下的第一拍摄图像中每个像素画质特征,然后根据第一映射信息对上述每个像素的画质特征进行处理,得到目标画质特征。然后,使用目标画质特征替换第一拍摄图像中相应像素的画质特征,从而得到目标显示图像。
在一些实施方式中,画质特征包括色彩(U)特征和饱和度(V)特征。目标显示图像的画质特征记为(U
OUT,V
OUT),当前倍率下的第一拍摄图像的画质特征记为(U
in,V
in),(U
OUT,V
OUT)与(U
in,V
in)对应。第一映射信息以映射表的形式存储于终端,第一映射信息记为impl_lut_uv。该实施方式中,(U
OUT,V
OUT)=impl_lut_uv(U
in,V
in),即在映射表中,(U
OUT,V
OUT)与(U
in,V
in)对应。
需要说明的是,第一映射信息可以以映射表的形式存储于终端,也可以以映射关系式的形式存储于终端,对此不作限定。
该方法中,在相机系统的变焦过程处于由第一相机单元向第二相机单元的变化过程中, 不再直接以第一相机单元拍摄的图像的画质进行显示,而是先根据当前倍率下,第一相机单元拍摄的第一拍摄图像和第二相机单元拍摄的第二拍摄图像,确定当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系,然后基于上述映射关系对第一拍摄图像进行处理,从而得到最终的目标显示图像,以使得在变焦过程中,实现目标显示图像的画质的平滑过渡,提升变焦过程中的视觉体验,提升用户的使用体验。
在一个示例性实施例中,提供了一种图像处理方法,应用于终端。该方法中,根据当前倍率、当前倍率下的第一拍摄图像和第二拍摄图像,以及第一相机单元与第二相机单元的切换倍率,确定当前倍率对应的第一映射信息,可包括以下步骤。
在步骤S210中,根据当前倍率下的第一拍摄图像和第二拍摄图像,确定当前倍率对应的第二映射信息;其中,当前倍率对应的第二映射信息,用于表征,当前倍率下,第一相机单元拍摄的图像与第二相机单元拍摄的图像之间的画质特征的映射关系;
在步骤S220中,根据当前倍率、当前倍率对应的第二映射信息,以及第一相机单元与第二相机单元的切换倍率,确定当前倍率对应的第一映射信息。
其中,在步骤S210中,在得到当前倍率下的第一拍摄图像和第二拍摄图像后,便可根据第一拍摄图像和第二拍摄图像,确定第一相机单元和第二相机单元在同一倍率下,第一相机单元拍摄的图像与第二相机单元拍摄的图像之间的画质特征的映射关系,以得到第二映射信息。
其中,可以直接将第一拍摄图像的画质特征与第二拍摄图像的画质特征的映射关系,确定为上述第一相机单元拍摄的图像与第二相机单元拍摄的图像之间的画质特征的映射关系。也可对第一拍摄图像的画质特征与第二拍摄图像的画质特征的映射关系再次进行处理,从而得到上述第一相机单元拍摄的图像与第二相机单元拍摄的图像之间的画质特征的映射关系,以使得第二映射信息更具有普适性。对此不作限定。
需要说明的是,直接根据第一拍摄图像的画质特征与第二拍摄图像的画质特征的映射关系得到映射信息中,可能存在画质特征的断层,从而影响变焦过程中画质特征的平滑过渡。因此,可将根据第一拍摄图像的画质特征与第二拍摄图像的画质特征的映射关系得到映射信息,记为第三映射信息。然后对第三映射信息进行高斯滤波处理和/或双线性差值处理等,以实现对第三映射信息的模糊处理,得到最终的第二映射信息。第二映射信息与第三映射信息相比,可以更好地改善画质特征的断层问题,使得变焦过程中目标显示图像的画质过渡更加平滑自然。
其中,在步骤S220中,在得到当前倍率对应的第二映射信息后,便可根据第一相机单元 与第二相机单元的切换倍率以及当前倍率,对第二映射信息进行处理,从而确定当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系,以得到第一映射信息。
该方法中,可先确定当前倍率下,第一相机单元拍摄的图像与第二相机单元拍摄的图像之间的画质特征的映射关系,以得到第二映射信息。然后根据第二映射信息以及当前倍率和切换倍率,确定当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系,以得到第一映射信息,然后根据第一映射信息对第一拍摄图像进行处理,得到目标显示图像,可以更好地保证在变焦过程中目标显示图像的画质的平滑过渡,提升变焦过程中的视觉体验,提升用户的使用体验。
在一个示例性实施例中,提供了一种图像处理方法,应用于终端。该方法中,根据当前倍率下的第一拍摄图像和第二拍摄图像,确定当前倍率对应的第二映射信息,可包括以下步骤。
在步骤S310中,根据设定标定信息,对第一拍摄图像和第二拍摄图像进行对齐处理,确定第一对齐图像和第二对齐图像;其中,第一对齐图像与第一拍摄图像对应,第二对齐图像与第二拍摄图像对应;
在步骤S320中,根据第一对齐图像,确定第一累计信息;其中,第一累计信息包括多个画质特征以及每个画质特征对应的第一数量,第一数量指第一对齐图像中与相应画质特征对应的单位图像的数量;
在步骤S330中,根据第二对齐图像,确定第二累计信息;其中,第二累计信息包括多个画质特征以及每个画质特征对应的第二数量,第二数量指第二对齐图像中与相应画质特征对应的单位图像的数量;
在步骤S340中,根据第一累计信息和第二累计信息,确定当前倍率对应的第二映射信息。
其中,在步骤S310中,终端预设有设定标定信息,设定标定信息可以是第一相机单元与第二相机单元的离线标定信息,此离线标定信息可采用张正友标定法确定,也可采用其他方式确定,对此不作限定。设定标定信息可用于确定第一相机单元拍摄的图像中各像素与第二相机单元拍摄的图像中各像素之间的对应关系,以实现第一相机拍摄的图像和第二相机拍摄的图像的对齐处理。
设定标定信息可以是终端出厂前设置的,也可以是终端出厂后设置的,对此不作限定。并且,设定标定信息设置完成后,后续也可对其进行修改,以更好地满足用户的需求,提升用户的使用体验。
该步骤中,在得到第一拍摄图像和第二拍摄图像后,可根据设定标定信息对第一拍摄图像和第二拍摄图像进行对齐处理,从而得到第一对齐图像和第二对齐图像。第一对齐图像与第二对齐图像中的图像内容相同。例如,第一拍摄图像中有绿树的图像,但是没有红花的图像,而第二拍摄图像中有绿树的图像和红花的图像,则根据设定标定信息对第一拍摄图像和第二拍摄图像进行处理后,第一对齐图像和第二对齐图像中均有绿树的图像,且均无红花的图像。由此,便可更好地根据第一对齐图像和第二对齐图像,确定第二映射信息。
需要说明的是,第一对齐图像与第二对齐图像可以不需要严格的像素对齐,只要第一对齐图像对应的视场角与第二对齐图像对应的视场角相近即可。其中,第一对齐图像对应的视场角记为第一视场角,第二对齐图像对应的视场角即可第二视场角,第一视场角与第二视场角的比值可以大于或等于90%且小于或等于110%。。
其中,在步骤S320中,画质特征值指画质特征的具体特征值,画质特征值可以是单个画质特征的特征值,也可以是由多个画质特征的特征值构成的特征值组。例如,画质特征包括亮度(Y)特征时,画质特征值可以是亮度值。再例如,画质特征包括色彩(U)特征和饱和度(V)特征时,画质特征值可以是色彩值与饱和度值构成的特征值组。
其中,单位图像指最小单位的图像,单位图像例如为像素点。
其中,该步骤可基于直方图统计的方式确定第一累计信息,也可基于其他方式确定第一累计信息,对此不作限定。第一累计信息包括多个画质特征值以及每个画质特征值对应的第一数量。
需要说明的是,第一数量包括,相应画质特征值在第一对齐图像中的单位图像的数量,以及小于该画质特征值的画质特征值在第一对齐图像中的单位图像的数量。
其中,当画质特征值为多个数值构成的数值组时,画质特征值A小于画质特征值B,说明画质特征值A中的任意一个特征值均小于画质特征值B中的相应的特征值。
例如,画质特征包括色彩特征和饱和度特征。画质特征值A记为(U
A,V
A),画质特征值B记为(U
B,V
B),若U
A小于U
B,且V
A小于V
B,则可认为画质特征值A小于画质特征值B。
在一些实施方式中,
画质特征包括色彩特征和饱和度特征。终端的处理器确定第一对齐图像后,便可基于直方图统计的方式,统计每个画质特征值(即每组色彩值和饱和度值)在第一对齐图像中的像素点的数量,确定直方图I,直方图I中包括多个画质特征值以及相应画质特征值在第一对齐图像中的像素点的数量。
在确定直方图I后,便可采用图像积分图的方式确定累计直方图C。其中,画质特征值(U
i,V
i)在累计直方图C中对应的第一数量等于,U小于或等于U
i且V小于或等于V
i的全部画质特征值在直方图I中对应的数量之和。
其中,步骤S330可参考步骤S320,对此不作赘述。
其中,在步骤S340中,终端确定了第一累计信息和第二累计信息,便可对第一累计信息和第二累计信息进行处理,从而得到第二映射信息。
示例地,可先根据第一累计信息和第二累计信息确定当前倍率下的第一拍摄图像与第二拍摄图像之间的画质特征的映射关系,以得到第三映射信息。第三映射信息可表征,当前倍率下的第一拍摄图像与第二拍摄图像之间的画质特征的映射关系。然后再对第三映射关系进行模糊处理,从而确定当前倍率对应的第二映射信息。模糊处理包括高斯滤波处理,也可包括双线性插值处理,对此不作限定。
在一些实施方式中,
画质特征包括色彩特征和饱和度特征。可将第一累计信息记为C
1,将第二累计信息记为C
2。在确定第三映射信息时,可遍历第一累计信息C
1中每个画质特征值(U
i,V
i),若画质特征值(U
x-1,V
y)在第二累计信息C
2中对应的第二数量小于或等于画质特征值(U
i,V
i)在第一累计信息C
1中对应的第一数量,且画质特征值(U
x+1,V
y)在第二累计信息C
2中对应的第二数量大于或等于画质特征值(U
i,V
i)在第一累计信息C
1中对应的第一数量,且画质特征值(U
x,V
y-1)在第二累计信息C
2中对应的第二数量小于或等于画质特征值(U
i,V
i)在第一累计信息C
1中对应的第一数量,且画质特征值(U
x,V
y+1)在第二累计信息C
2中对应的第二数量大于或等于画质特征值(U
i,V
i)在第一累计信息C
1中对应的第一数量,则确定第一拍摄图像中的画质特征值(U
i,V
i)与第二拍摄图像中的画质特征值(U
x,V
y)存在映射关系。基于此,便可确定第三映射信息L
UV。在第三映射信息L
UV中,画质特征值(U
i,V
i)与画质特征值(U
x,V
y)存在对应关系,即L
UV(U
i,V
i)=(U
x,V
y)。
在确定第三映射信息L
UV后,为了避免画质特征存在断层缺陷,可对第三映射信息L
UV进行高斯滤波处理,以得到画质特征值连续性更好地第二映射信息L′
UV。
该方法中,第三映射信息可以更好地反应第一拍摄图像与第二拍摄图像之间画质特征的对应关系,由第三映射信息确定的第二映射信息,可以很好地反应第一相机单元拍摄的图像与第二相机单元拍摄的图像之间的画质特征的映射关系,从而便于实现变焦过程中目标显示图像的画质的平滑过渡,提升用户的使用体验。
在一个示例性实施例中,提供了一种图像处理方法,应用于终端。该方法中,根据当前 倍率、当前倍率对应的第二映射信息,以及第一相机单元与第二相机单元的切换倍率,确定当前倍率对应的第一映射信息,可包括以下步骤。
在步骤S410中,确定所述当前倍率对应的参考倍率以及参考映射信息;
在步骤S420中,根据当前倍率对应的第二映射信息、参考倍率以及参考映射信息,以及当前倍率和切换倍率,确定当前倍率对应的第一映射信息。
其中,在步骤S410中,若当前倍率存在对应的上一倍率,则将上一倍率确定为当前倍率对应的参考倍率,并将上一倍率对应的第一映射信息确定为当前倍率对应的参考映射信息。
若当前倍率不存在对应的上一倍率,则将设定倍率确定为当前倍率对应的参考倍率,并将设定映射信息确定为当前倍率对应的参考映射信息。
即,将设定倍率确定为第一次的当前倍率对应的参考倍率,将设定映射信息确定为第一次的当前倍率对应的参考倍率。然后,在确定第二次的当前倍率后,将第一次当前倍率确定为第二次当前倍率的参考倍率,将第一次当前倍率对应的第一映射信息确定为第二次当前倍率对应的参考映射信息,依次类推。
需要说明的是,变焦过程处于由第一相机单元向第二相机单元的变化过程中,需要保证第一相机拍摄得到的图像的画质逐渐向第二相机拍摄得到的图像的画质转变,如此才能保证画质的平滑过渡,因此,需要在初始倍率时需保持画质不变。也就是,可将设定倍率设置为初始倍率,并且设定映射信息可以是表征画质特征不变的画质特征恒等映射关系。也就是,设定映射信息中画质特征值A在设定映射信息中对应的画质特征值仍然为A。需要说明的是,设定映射信息也可根据实际需求设置为可表征其他映射关系的信息,对此不作限定。
其中,若相机系统的变焦过程处于由第一相机单元向第二相机单元的变化过程中,相机系统的倍率逐渐变大,则设定倍率为上述变化过程中的最小倍率,该最小倍率一般为第一相机单元对应变焦范围的最小值,也就是第一相机单元的最小倍率。若相机系统的变焦过程处于由第一相机单元向第二相机单元的变化过程中,相机系统的倍率逐渐变小,则设定倍率为上述变化过程中的最大倍率,该最大倍率一般为第一相机单元对应的变焦范围的最大值,也就是第一相机单元的最大倍率。
需要说明的是,如果相机系统在变焦过程中,先由第三相机单元向第一相机单元变化,再由第一相机单元向第二相机单元变化,则,该方法中的设定倍率可以是第三相机单元与第一相机单元之间的切换倍率。
在一些实施方式中,
相机系统包括第一相机单元和第二相机单元,相机系统的变焦过程处于由第一相机单元 向第二相机单元的变化过程中,且相机系统的倍率逐渐变大。第一相机单元的最小倍率即为相机系统的最小倍率,最小倍率记为R
0。
该实施方式中,设定倍率设置为最小倍率,也就是,设定倍率为R
0,设定映射信息可设置为iden_lut。
相机系统在变焦过程中,初始时,相机系统第一次的当前倍率为即为相机系统的初始倍率,也就是,当前倍率为R
0,当前倍率与设定倍率相同。此当前倍率对应的参考倍率即为上述设定倍率,即,此当前倍率对应的参考倍率也是R
0。此当前倍率对应的参考映射信息即为上述设定映射信息,也就是,此当前倍率对应的参考映射信息为iden_lut。假设,最终确定的初始时的当前倍率对应的第一映射信息为impl_lut
0。
随便变焦过程的继续,第二次的当前倍率记为R
1,此第二次当前倍率的上一倍率即为第一次的当前倍率,也就是,此第二次当前倍率对应的参考倍率为第一次的当前倍率,即,第二次当前倍率对应的参考倍率为R
0。第二次的当前倍率对应的参考映射信息为上一倍率对应的第一映射信息,也就是,第二次的当前倍率对应的参考映射信息为第一次的当前倍率对应的第一映射信息,即,第二次的当前倍率对应的参考映射信息为impl_lut
0。假设,根据上述信息最终确定第二次的当前倍率对应的第一映射信息为impl_lut
1。
在继续变焦过程中,第三次的当前倍率记为R
2,此第三次的当前倍率的上一倍率即为第二次的当前倍率。第三次的当前倍率对应的参考倍率则为第二次的当前倍率,也就是,第三次的当前倍率对应的参考倍率为R
1。第三次的当前倍率对应的参考映射信息为第二次的当前倍率对应的第一映射信息,也就是,第三次的当前倍率对应的参考映射信息为impl_lut
1。
如此类推,实现第一映射信息随当前倍率的不断更新,从而实现目标显示图像的画质特征的平滑过渡。
其中,在步骤S420中,终端确定了当前倍率对应的第二映射信息、参考倍率以及参考映射信息后,便可基于当前倍率和切换倍率进行信息处理,以得到第一映射信息。
其中,当前倍率可记为curr_ratio,切换倍率可记为last_ratio,当前倍率对应的参考倍率可记为base_ratio,当前倍率对应的第二映射信息可记为curr_lut,当前倍率对应的参考映射信息可记为base_lut。
该步骤中,可通过以下公式确定当前倍率对应的第一映射信息:
impl_lut=((curr_ratio-base_ratio)×curr_lut+(last_ratio-curr_ratio)×base_lut)/(last_ratio-base_ratio)。
该方法中,在确定当前倍率对应的第一映射信息的过程中,引入了上一倍率和上一倍率 对应的第一映射信息,可以更好地实现目标显示图像的画质特征的平滑过渡,进一步提升用户的使用体验。
图2是根据一示例性实施例示出的一种图像处理装置框图。图像处理装置,应用于终端。该装置用于实施上述图像处理方法。终端的相机系统包括第一相机单元和第二相机单元。参考图2所示,该装置可包括获取模块101和确定模块102。
获取模块101,被配置为获取相机系统在当前倍率下的第一拍摄图像和第二拍摄图像;其中,第一拍摄图像由第一相机单元拍摄得到,第二拍摄图像由第二相机单元拍摄得到;
确定模块102,被配置为根据当前倍率、当前倍率下的第一拍摄图像和第二拍摄图像,以及第一相机单元与第二相机单元的切换倍率,确定当前倍率对应的第一映射信息;其中,当前倍率对应的第一映射信息,用于表征,当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系;
还被配置为根据当前倍率对应的第一映射信息,对当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定当前倍率下的目标显示图像。
在一个示例性实施例中,提供了一种图像处理装置。参考图2所示,该装置中,确定模块102,被配置为:
根据当前倍率下的第一拍摄图像和第二拍摄图像,确定当前倍率对应的第二映射信息;其中,当前倍率对应的第二映射信息,用于表征,当前倍率下,第一相机单元拍摄的图像与第二相机单元拍摄的图像之间的画质特征的映射关系;
根据当前倍率、当前倍率对应的第二映射信息,以及第一相机单元与第二相机单元的切换倍率,确定当前倍率对应的第一映射信息。
在一个示例性实施例中,提供了一种图像处理装置。参考图2所示,该装置中,确定模块102,被配置为:
根据设定标定信息,对第一拍摄图像和第二拍摄图像进行对齐处理,确定第一对齐图像和第二对齐图像;其中,第一对齐图像与第一拍摄图像对应,第二对齐图像与第二拍摄图像对应;
根据第一对齐图像,确定第一累计信息;其中,第一累计信息包括多个画质特征值以及每个画质特征值对应的第一数量,第一数量指第一对齐图像中与相应画质特征值对应的单位图像的数量;
根据第二对齐图像,确定第二累计信息;其中,第二累计信息包括多个画质特征以及每个画质特征对应的第二数量,第二数量指第二对齐图像中与相应画质特征对应的单位图像的 数量;
根据第一累计信息和第二累计信息,确定当前倍率对应的第二映射信息。
在一个示例性实施例中,提供了一种图像处理装置。参考图2所示,该装置中,确定模块102,被配置为:
根据第一累计信息和第二累计信息,确定当前倍率对应的第三映射信息;其中,第三映射信息,用于表征,当前倍率下的第一拍摄图像与第二拍摄图像之间的画质特征的映射关系;
对第三映射信息进行模糊处理,确定当前倍率对应的第二映射信息。
在一个示例性实施例中,提供了一种图像处理装置。参考图2所示,该装置中,确定模块102,被配置为:
确定当前倍率对应的参考倍率以及参考映射信息;
根据当前倍率对应的第二映射信息、参考倍率以及参考映射信息,以及当前倍率和切换倍率,确定当前倍率对应的第一映射信息。
在一个示例性实施例中,提供了一种图像处理装置。参考图2所示,该装置中,确定模块102,被配置为:
若当前倍率存在对应的上一倍率,则将上一倍率确定为当前倍率对应的参考倍率,并将上一倍率对应的第一映射信息确定为当前倍率对应的参考映射信息;
若当前倍率不存在对应的上一倍率,则将设定倍率确定为当前倍率对应的参考倍率,并将设定映射信息确定为当前倍率对应的参考映射信息。
在一个示例性实施例中,提供了一种图像处理装置。参考图2所示,该装置中,画质特征包括以下中的至少一种:
亮度特征、色彩特征、饱和度特征、图像噪声类型、图像解析力。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图3是根据一示例性实施例示出的一种用于图像处理的终端框图。例如,终端800可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图3,终端800可以包括以下一个或多个组件:处理组件802,存储器804,电力组件806,多媒体组件808,音频组件810,输入/输出(I/O)的接口812,传感器组件814,以及通信组件816。
处理组件802通常控制终端800的整体操作,诸如与显示,电话呼叫,数据通信,相机 操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在设备800的操作。这些数据的示例包括用于在终端800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件806为终端800的各种组件提供电力。电源组件806可以包括电源管理系统,一个或多个电源,及其他与为终端800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述终端800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当设备800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当终端800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。
I/O接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器,用于为终端800提供各个方面的状态评估。例如,传感器组件814可以检测到设备800的打开/关闭状态,组件的相对定位,例如所述组件为终端800的显示器和小键盘,传感器组件814还可以检测终端800或终端800一个组件的 位置改变,用户与终端800接触的存在或不存在,终端800方位或加速/减速和终端800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件816被配置为便于终端800和其他设备之间有线或无线方式的通信。终端800可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,终端800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器804,上述指令可由终端800的处理器820执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在一个示例性实施例中,提供了一种非临时性计算机可读存储介质,当所述存储介质中的指令由终端的处理器执行时,使得终端能够执行一种图像处理方法。其中,在终端的相机系统的变焦过程处于由第一相机单元向第二相机单元的变化过程中,所述方法包括:
获取所述相机系统在当前倍率下的第一拍摄图像和第二拍摄图像,其中,第一拍摄图像由第一相机单元拍摄得到,第二拍摄图像由第二相机单元拍摄得到;
根据当前倍率、当前倍率下的第一拍摄图像和第二拍摄图像,以及第一相机单元与第二相机单元的切换倍率,确定当前倍率对应的第一映射信息,当前倍率对应的第一映射信息表征,当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系;
根据当前倍率对应的第一映射信息,对当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定当前倍率下的目标显示图像。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应 性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。
本文中在相机系统的变焦过程处于由第一相机单元向第二相机单元的变化过程中,不再直接以第一相机单元拍摄的图像的画质进行显示,而是先根据当前倍率下,第一相机单元拍摄的第一拍摄图像和第二相机单元拍摄的第二拍摄图像,确定当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系,然后基于上述映射关系对第一拍摄图像进行处理,从而得到最终的目标显示图像,以使得在变焦过程中,实现目标显示图像的画质的平滑过渡,提升变焦过程中的视觉体验,提升用户的使用体验。
Claims (16)
- 一种图像处理方法,应用于终端,其特征在于,所述终端的相机系统包括第一相机单元和第二相机单元,在所述相机系统的变焦过程处于由所述第一相机单元向所述第二相机单元的变化过程中,所述图像处理方法包括:获取所述相机系统在当前倍率下的第一拍摄图像和第二拍摄图像;其中,所述第一拍摄图像由所述第一相机单元拍摄得到,所述第二拍摄图像由所述第二相机单元拍摄得到;根据所述当前倍率、所述当前倍率下的第一拍摄图像和第二拍摄图像,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息;其中,,所述当前倍率对应的第一映射信息,用于表征,所述当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系;根据所述当前倍率对应的第一映射信息,对所述当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定所述当前倍率下的目标显示图像。
- 根据权利要求1所述的图像处理方法,其特征在于,所述根据所述当前倍率、所述当前倍率下的第一拍摄图像和第二拍摄图像,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息,包括根据所述当前倍率下的第一拍摄图像和第二拍摄图像,确定所述当前倍率对应的第二映射信息;其中,所述当前倍率对应的第二映射信息,用于表征,所述当前倍率下,所述第一相机单元拍摄的图像与所述第二相机单元拍摄的图像之间的画质特征的映射关系;根据所述当前倍率、所述当前倍率对应的第二映射信息,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息。
- 根据权利要求2所述的图像处理方法,其特征在于,所述根据所述当前倍率下的第一拍摄图像和第二拍摄图像,确定所述当前倍率对应的第二映射信息,包括:根据设定标定信息,对所述第一拍摄图像和所述第二拍摄图像进行对齐处理,确定第一对齐图像和第二对齐图像;其中,所述第一对齐图像与所述第一拍摄图像对应,所述第二对齐图像与所述第二拍摄图像对应;根据所述第一对齐图像,确定第一累计信息;其中,所述第一累计信息包括多个画质特征值以及每个画质特征值对应的第一数量,第一数量指所述第一对齐图像中与相应画质特征值对应的单位图像的数量;根据所述第二对齐图像,确定第二累计信息;其中,所述第二累计信息包括多个画质特征以及每个画质特征对应的第二数量,第二数量指所述第二对齐图像中与相应画质特征对应 的单位图像的数量;根据所述第一累计信息和所述第二累计信息,确定所述当前倍率对应的第二映射信息。
- 根据权利要求3所述的图像处理方法,其特征在于,所述根据所述第一累计信息和所述第二累计信息,确定所述当前倍率对应的第二映射信息,包括:根据所述第一累计信息和所述第二累计信息,确定所述当前倍率对应的第三映射信息;其中,所述第三映射信息,用于表征,所述当前倍率下的第一拍摄图像与第二拍摄图像之间的画质特征的映射关系;对所述第三映射信息进行模糊处理,确定所述当前倍率对应的第二映射信息。
- 根据权利要求2所述的图像处理方法,其特征在于,所述根据所述当前倍率、所述当前倍率对应的第二映射信息,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息,包括:确定所述当前倍率对应的参考倍率以及参考映射信息;根据所述当前倍率对应的第二映射信息、参考倍率以及参考映射信息,以及所述当前倍率和所述切换倍率,确定所述当前倍率对应的第一映射信息。
- 根据权利要求5所述的图像处理方法,其特征在于,所述确定所述当前倍率对应的参考倍率以及参考映射信息,包括:若所述当前倍率存在对应的上一倍率,则将所述上一倍率确定为所述当前倍率对应的参考倍率,并将所述上一倍率对应的第一映射信息确定为所述当前倍率对应的参考映射信息;若所述当前倍率不存在对应的上一倍率,则将设定倍率确定为所述当前倍率对应的参考倍率,并将设定映射信息确定为所述当前倍率对应的参考映射信息。
- 根据权利要求1-6任一项所述的图像处理方法,其特征在于,所述画质特征包括以下中的至少一种:亮度特征、色彩特征、饱和度特征、图像噪声类型、图像解析力。
- 一种图像处理装置,应用于终端,其特征在于,所述终端的相机系统包括第一相机单元和第二相机单元,在所述相机系统的变焦过程处于由所述第一相机单元向所述第二相机单元的变化过程中,所述图像处理装置包括:获取模块,被配置为获取所述相机系统在当前倍率下的第一拍摄图像和第二拍摄图像;其中,所述第一拍摄图像由所述第一相机单元拍摄得到,所述第二拍摄图像由所述第二相机单元拍摄得到;确定模块,被配置为根据所述当前倍率、所述当前倍率下的第一拍摄图像和第二拍摄图 像,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息;其中,所述当前倍率对应的第一映射信息,用于表征,所述当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系;还被配置为根据所述当前倍率对应的第一映射信息,对所述当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定所述当前倍率下的目标显示图像。
- 根据权利要求8所述的图像处理装置,其特征在于,所述确定模块,被配置为:根据所述当前倍率下的第一拍摄图像和第二拍摄图像,确定所述当前倍率对应的第二映射信息;其中,所述当前倍率对应的第二映射信息,用于表征,所述当前倍率下,所述第一相机单元拍摄的图像与所述第二相机单元拍摄的图像之间的画质特征的映射关系;根据所述当前倍率、所述当前倍率对应的第二映射信息,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息。
- 根据权利要求9所述的图像处理装置,其特征在于,所述确定模块,被配置为:根据设定标定信息,对所述第一拍摄图像和所述第二拍摄图像进行对齐处理,确定第一对齐图像和第二对齐图像;其中,所述第一对齐图像与所述第一拍摄图像对应,所述第二对齐图像与所述第二拍摄图像对应;根据所述第一对齐图像,确定第一累计信息;其中,所述第一累计信息包括多个画质特征值以及每个画质特征值对应的第一数量,第一数量指所述第一对齐图像中与相应画质特征值对应的单位图像的数量;根据所述第二对齐图像,确定第二累计信息;其中,所述第二累计信息包括多个画质特征以及每个画质特征对应的第二数量,第二数量指所述第二对齐图像中与相应画质特征对应的单位图像的数量;根据所述第一累计信息和所述第二累计信息,确定所述当前倍率对应的第二映射信息。
- 根据权利要求10所述的图像处理装置,其特征在于,所述确定模块,被配置为:根据所述第一累计信息和所述第二累计信息,确定所述当前倍率对应的第三映射信息;其中,所述第三映射信息,用于表征,所述当前倍率下的第一拍摄图像与第二拍摄图像之间的画质特征的映射关系;对所述第三映射信息进行模糊处理,确定所述当前倍率对应的第二映射信息。
- 根据权利要求9所述的图像处理装置,其特征在于,所述确定模块,被配置为:确定所述当前倍率对应的参考倍率以及参考映射信息;根据所述当前倍率对应的第二映射信息、参考倍率以及参考映射信息,以及所述当前倍 率和所述切换倍率,确定所述当前倍率对应的第一映射信息。
- 根据权利要求12所述的图像处理装置,其特征在于,所述确定模块,被配置为:若所述当前倍率存在对应的上一倍率,则将所述上一倍率确定为所述当前倍率对应的参考倍率,并将所述上一倍率对应的第一映射信息确定为所述当前倍率对应的参考映射信息;若所述当前倍率不存在对应的上一倍率,则将设定倍率确定为所述当前倍率对应的参考倍率,并将设定映射信息确定为所述当前倍率对应的参考映射信息。
- 根据权利要求8-13任一项所述的图像处理装置,其特征在于,所述画质特征包括以下中的至少一种:亮度特征、色彩特征、饱和度特征、图像噪声类型、图像解析力。
- 一种终端,其特征在于,包括:处理器;用于存储所述处理器可执行指令的存储器;其中,所述终端的相机系统包括第一相机单元和第二相机单元,在所述相机系统的变焦过程处于由所述第一相机单元向所述第二相机单元的变化过程中,所述处理器被配置为:获取所述相机系统在当前倍率下的第一拍摄图像和第二拍摄图像;其中,所述第一拍摄图像由所述第一相机单元拍摄得到,所述第二拍摄图像由所述第二相机单元拍摄得到;根据所述当前倍率、所述当前倍率下的第一拍摄图像和第二拍摄图像,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息;其中,所述当前倍率对应的第一映射信息,用于表征,所述当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系;根据所述当前倍率对应的第一映射信息,对所述当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定所述当前倍率下的目标显示图像。
- 一种非临时性计算机可读存储介质,其特征在于,当所述存储介质中的指令由终端的处理器执行时,使得终端能够执行一种图像处理方法,其中,所述终端的相机系统包括第一相机单元和第二相机单元,在所述相机系统的变焦过程处于由所述第一相机单元向所述第二相机单元的变化过程中,所述图像处理方法包括:获取所述相机系统在当前倍率下的第一拍摄图像和第二拍摄图像;其中,所述第一拍摄图像由所述第一相机单元拍摄得到,所述第二拍摄图像由所述第二相机单元拍摄得到;根据所述当前倍率、所述当前倍率下的第一拍摄图像和第二拍摄图像,以及所述第一相机单元与所述第二相机单元的切换倍率,确定所述当前倍率对应的第一映射信息;其中,所 述当前倍率对应的第一映射信息,用于表征,所述当前倍率对应的目标显示图像的画质特征与第一拍摄图像的画质特征之间的映射关系;根据所述当前倍率对应的第一映射信息,对所述当前倍率下的第一拍摄图像中每个像素的画质特征进行转换处理,确定所述当前倍率下的目标显示图像。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2022/093090 WO2023220868A1 (zh) | 2022-05-16 | 2022-05-16 | 一种图像处理方法、装置、终端及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117441344A true CN117441344A (zh) | 2024-01-23 |
Family
ID=88834348
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280004401.7A Pending CN117441344A (zh) | 2022-05-16 | 2022-05-16 | 一种图像处理方法、装置、终端及存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN117441344A (zh) |
WO (1) | WO2023220868A1 (zh) |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004334269A (ja) * | 2003-04-30 | 2004-11-25 | Sony Corp | 画像処理装置および方法、記録媒体、並びにプログラム |
CN111510618B (zh) * | 2019-01-30 | 2022-04-05 | 虹软科技股份有限公司 | 变焦方法及应用其的电子设备 |
CN110493525B (zh) * | 2019-09-04 | 2021-01-22 | 展讯通信(上海)有限公司 | 变焦图像确定方法及装置、存储介质、终端 |
CN111641775B (zh) * | 2020-04-14 | 2021-10-01 | 北京迈格威科技有限公司 | 多摄变焦控制方法、装置及电子系统 |
CN113747085B (zh) * | 2020-05-30 | 2023-01-06 | 华为技术有限公司 | 拍摄视频的方法和装置 |
CN111726528B (zh) * | 2020-06-24 | 2022-04-08 | Oppo广东移动通信有限公司 | 摄像头切换方法、装置、终端以及计算机存储介质 |
CN112995511B (zh) * | 2021-03-02 | 2022-11-15 | Oppo广东移动通信有限公司 | 摄像头切换方法、装置、电子设备和存储介质 |
-
2022
- 2022-05-16 WO PCT/CN2022/093090 patent/WO2023220868A1/zh active Application Filing
- 2022-05-16 CN CN202280004401.7A patent/CN117441344A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
WO2023220868A1 (zh) | 2023-11-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109345485B (zh) | 一种图像增强方法、装置、电子设备及存储介质 | |
CN110958401B (zh) | 一种超级夜景图像颜色校正方法、装置和电子设备 | |
CN106408603B (zh) | 拍摄方法及装置 | |
CN106131441B (zh) | 拍照方法及装置、电子设备 | |
CN107015648B (zh) | 图片处理方法及装置 | |
US11310443B2 (en) | Video processing method, apparatus and storage medium | |
US11222235B2 (en) | Method and apparatus for training image processing model, and storage medium | |
CN111953903A (zh) | 拍摄方法、装置、电子设备及存储介质 | |
CN115134505B (zh) | 预览画面生成方法及装置、电子设备、存储介质 | |
CN110876014B (zh) | 图像处理方法及装置、电子设备及存储介质 | |
CN111461950B (zh) | 图像处理方法及装置 | |
CN117441344A (zh) | 一种图像处理方法、装置、终端及存储介质 | |
CN110874829B (zh) | 图像处理方法及装置、电子设备及存储介质 | |
CN110876000B (zh) | 摄像头模组及图像修正方法、装置、电子设备、存储介质 | |
CN107707819B (zh) | 图像拍摄方法、装置及存储介质 | |
CN114339187B (zh) | 图像处理方法、图像处理装置及存储介质 | |
CN114339017B (zh) | 远景对焦方法、装置及存储介质 | |
CN114339018B (zh) | 镜头切换的方法、装置及存储介质 | |
CN118354198A (zh) | 相机启动方法、装置、介质及电子设备 | |
CN117252769A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN118200720A (zh) | 变焦控制方法、装置及存储介质 | |
CN118175420A (zh) | 图像获取方法、装置、设备及存储介质 | |
CN117354413A (zh) | 显示控制方法、装置、电子设备及可读储存介质 | |
CN118741017A (zh) | 图像显示方法、装置、电子设备及存储介质 | |
CN118485593A (zh) | 一种图像处理方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |