CN117241131B - 图像处理方法和装置 - Google Patents
图像处理方法和装置 Download PDFInfo
- Publication number
- CN117241131B CN117241131B CN202311525972.8A CN202311525972A CN117241131B CN 117241131 B CN117241131 B CN 117241131B CN 202311525972 A CN202311525972 A CN 202311525972A CN 117241131 B CN117241131 B CN 117241131B
- Authority
- CN
- China
- Prior art keywords
- image
- electronic device
- electronic equipment
- shooting
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 17
- 230000000694 effects Effects 0.000 claims abstract description 41
- 238000012545 processing Methods 0.000 claims description 86
- 238000000034 method Methods 0.000 claims description 37
- 230000015654 memory Effects 0.000 claims description 32
- 230000006870 function Effects 0.000 claims description 19
- 230000004044 response Effects 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 11
- 238000004891 communication Methods 0.000 description 23
- 238000001514 detection method Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 11
- 230000011514 reflex Effects 0.000 description 8
- 239000011159 matrix material Substances 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 6
- 238000007726 management method Methods 0.000 description 5
- 238000012546 transfer Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 239000000872 buffer Substances 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 239000000835 fiber Substances 0.000 description 3
- 238000007499 fusion processing Methods 0.000 description 3
- 238000012805 post-processing Methods 0.000 description 3
- 238000007781 pre-processing Methods 0.000 description 3
- 230000035945 sensitivity Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000012216 screening Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000003973 paint Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Landscapes
- Studio Devices (AREA)
Abstract
本申请实施例提供一种图像处理方法和装置,涉及终端技术领域,电子设备可以获取到拍摄图像的光斑效果满足预设光斑要求时的拍摄参数,并基于拍摄参数拍摄得到更多非过曝的光斑,改善拍摄效果。
Description
技术领域
本申请涉及终端技术领域,尤其涉及一种图像处理方法和装置。
背景技术
随着互联网的普及和发展,人们对于终端设备的功能需求也越发多样化。例如,响应于用户利用相机应用拍摄图像的操作,电子设备可以对基于摄像头采集到的拍照图像进行虚化处理,以得到较好的拍摄效果。
通常情况下,响应于用户拍照的操作,电子设备对拍摄图像进虚化处理得到虚化图像,当拍摄画面中包括高亮的拍摄对象时,虚化图像中存在可以较多过曝的光斑,影响拍摄效果。
发明内容
本申请实施例提供一种图像处理方法和装置,电子设备可以获取到,拍摄图像的光斑效果满足预设光斑要求时的拍摄参数,并基于拍摄参数拍摄得到更多非过曝的光斑,改善拍摄效果。
第一方面,本申请实施例提供一种图像处理方法,所述方法包括:响应于第一拍照操作,电子设备获取第一图像和第二图像;所述第一图像是在第一拍摄参数下拍摄得到的,所述第二图像是在第二拍摄参数下拍摄得到的,所述第二拍摄参数是预先标定的,所述第二拍摄参数包括在所述拍照操作发生时电子设备所处的第一环境亮度下,所述电子设备所拍摄图像的光斑效果满足预设光斑要求时所述电子设备的拍摄参数;所述电子设备对所述第二图像进行虚化处理,得到第三图像;所述电子设备将所述第三图像中的光斑以及所述第一图像中的除所述光斑以外的区域进行融合,得到目标图像。
电子设备可以在响应于拍摄操作后获取不同拍摄下得到的图像,由于其中一个拍摄参数是在拍照操作发生时电子设备所处的第一环境亮度下,电子设备所拍摄图像的光斑效果满足预设光斑要求时获取的,因此融合两个图像后的图像可以拥有具有较好的光斑效果。
在一种可能的实现方式中,所述第二拍摄参数为拍到光斑数量与第一值相同时电子设备的拍摄参数,所述第一值为第四图像中检测到的光斑数量,所述第四图像为采用高于所述电子设备的RAW位数的设备拍摄得到的图像。
第四图像可以为图4中描述的第一单反图像。
由于RAW位数的设备拍摄得到更多不过曝的光斑,电子设备可以利用高于电子设备的RAW位数的设备拍摄得到光斑效果较好的图像,并在本设备生成的图像中的光斑数量与该光斑效果较好的图像中的光斑数量一致时采集本设备生成的图像中的第二拍摄参数。当电子设备利用第二拍摄参数拍摄图像后,就可以获取更多光斑,提高拍摄效果。
在一种可能的实现方式中,所述第二拍摄参数为拍到光斑数量与所述第一值相同且最亮的光斑不过曝时电子设备的拍摄参数。
电子设备可以通过第一值以及光斑不过曝的条件,筛选出光斑效果更好的图像,得到光斑效果更好的图像对应的第二拍摄参数。当电子设备利用第二拍摄参数拍摄图像后,就可以获取更多不过曝的光斑,提高拍摄效果。
在一种可能的实现方式中,所述第二拍摄参数为所述电子设备基于所述拍照操作发生时所述电子设备所处的第一环境亮度,从预设的第一对应关系中获取的,所述第一对应关系中包括:拍摄参数与环境亮度之间的对应关系,所述第二拍摄参数包括:第二曝光值以及第二ISO值。
电子设备可以将预先获取的拍摄参数通过对应关系的方式设置在电子设备,这样电子设备就可以根据当前的环境亮度匹配到不同的拍摄参数,实现不同亮度下均可以获得光斑效果较好的图像的效果。
在一种可能的实现方式中,所述第二拍摄参数中还可以包括:第一亮度阈值,所述方法还包括:所述电子设备利用所述第一亮度阈值从所述第三图像中获取光斑。
第一亮度阈值可以为本申请实施例中描述的第一光斑检测阈值。
在电子设备通过第一值筛选出光斑数量更多的图像,得到第二拍摄参数。后续电子设备就可以利用第二拍摄参数中的第一亮度阈值,对当前环境亮度下的光斑进行精准识别。
在一种可能的实现方式中,所述第二拍摄参数为所述电子设备基于所述拍照操作发生时所述电子设备所处的第一环境亮度,从预设的第一对应关系中获取的,包括:所述第二拍摄参数为所述电子设备基于所述第一环境亮度以及第一F值,从预设的第一对应关系中获取的,所述第一对应关系中包括:拍摄参数、环境亮度、以及F值之间的对应关系。
电子设备也可以设置不同F值下的拍摄参数,这样当用户在相机的大光圈功能中选择不同的F值时,电子设备就可以匹配不同环境亮度以及F值下的拍摄参数,以适配不同的虚化效果,提高拍摄功能的灵活性。
在一种可能的实现方式中,在所述响应于拍照的第一操作之前,所述方法还包括:响应于在相机应用中打开大光圈功能的操作,所述电子设备显示第一界面,所述第一界面中包括:拍摄按钮、以及用于调节F值的第一按钮;响应于针对所述第一按钮的操作,所述电子设备在所述第一界面中显示至少一个所述电子设备允许调节的F值;响应于将F值设置为第一F值的操作,所述电子设备获取所述第一F值。
用户可以实现在相机应用的大光圈功能中选择不同的F值,电子设备可以在后续响应于拍照操作生成图像时,获取不同F值下的拍摄参数,以达到更为适配的光圈虚化效果。
在一种可能的实现方式中,所述获取第一图像和第二图像,包括:
在所述电子设备获取所述第一图像后,若检测到所述电子设备的视场角未发生变化,所述电子设备获取所述第二图像。
电子设备可以通过视场角的检测,保障获取两个图像时电子设备保持不变,提高后续两个图像进行融合时对应光斑位置的准确性。
在一种可能的实现方式中,在所述响应于第一拍照操作之前,所述方法还包括:响应于第二拍照操作,所述电子设备获取第五图像和第一图像序列,所述第五图像时在所述第一拍摄参数下拍摄得到的,所述第一图像序列中包括至少两个图像,所述至少两个图像采用的拍摄参数不同;所述电子设备利用第六图像从所述第一图像序列中获取第七图像,所述第六图像为采用高于所述电子设备的RAW位数的设备拍摄得到的图像,所述第七图像中拍摄到的光斑数量与所述第七图像中拍摄得到的光斑数量相同;所述电子设备获取所述第七图像对应的所述第二拍摄参数。
第五图像可以为本申请实施例中描述的待虚化图像,第六图像可以为图8对应的实施例中描述的第二单反图像,第七图像可以为图8对应的实施例中描述的第二图像序列中的任一图像。
电子设备可以通过第五图像以及第一图像序列之间的比对,从第一图像序列中筛选出光斑效果满足条件的图像,该图像对应的拍摄参数可以为能够拍摄得到较好的光斑效果的拍摄参数。
在一种可能的实现方式中,所述电子设备利用第六图像从所述第一图像序列中获取第七图像,包括:所述电子设备标记所述第六图像中的光斑位置;所述电子设备对所述第一图像序列中任一图像进行虚化处理,得到虚化后的第一图像序列;所述电子设备按照所述第六图像中的光斑位置,标记所述虚化后的第一图像序列中的任一图像中的光斑;所述电子设备从所述虚化后的第一图像序列中,获取光斑数量与所述第六图像中光斑数量相同、且最亮光斑不过爆时的任一图像,得到虚化处理前的所述第七图像。
电子设备可以实现从第一图像序列中筛选出光斑数量与第六图像中的光斑数量一致、且不过爆的图像,该图像对应的拍摄参数可以用于生成与第六图像中的光斑效果类似的图像,提高拍摄效果。
第二方面,本申请实施例提供一种图像处理装置,图像处理装置包括显示单元以及处理单元,显示单元用于处理图像处理装置中数据显示的步骤,处理单元用于处理图像处理装置中数据处理的步骤。
在一种可能的实现方式中,图像处理装置还可以包括存储单元,存储单元可以包括一个或者多个存储器,存储器可以是一个或者多个设备、电路中用于存储程序或者数据的器件。
第三方面,本申请实施例提供一种电子设备,包括处理器和存储器,存储器用于存储代码指令;处理器用于运行代码指令,使得电子设备执行如第一方面或第一方面的任一种实现方式中描述的方法。
第四方面,本申请实施例提供一种计算机可读存储介质,计算机可读存储介质存储有指令,当指令被执行时,使得计算机执行如第一方面或第一方面的任一种实现方式中描述的方法。
第五方面,一种计算机程序产品,包括计算机程序,当计算机程序被运行时,使得计算机执行如第一方面或第一方面的任一种实现方式中描述的方法。
应当理解的是,本申请的第二方面至第五方面与本申请的第一方面的技术方案相对应,各方面及对应的可行实施方式所取得的有益效果相似,不再赘述。
附图说明
图1为本申请实施例提供的一种场景示意图;
图2为本申请实施例提供的一种终端设备的硬件结构示意图;
图3为本申请实施例提供的一种电子设备的软件结构示意图;
图4为本申请实施例提供的一种图像处理方法的流程示意图;
图5为本申请实施例提供的一种图像融合处理的示意图;
图6为本申请实施例提供的一种效果示意图;
图7为本申请实施例提供的另一种效果示意图;
图8为本申请实施例提供的一种获取第一对应关系的流程示意图;
图9为本申请实施例提供的一种切换F值的界面示意图;
图10为本申请实施例提供的一种图像处理装置的结构示意图;
图11为本申请实施例提供的另一种电子设备的硬件结构示意图。
具体实施方式
1、相机光圈与F值
相机光圈是一种用于控制光线进入相机的装置,它是由一组可调节的圆形片所组成,可以控制光线进入相机的大小和数量。实际上简单来说,相机光圈是一种光学装置,用来控制相机的曝光。
光圈的大小由一个称为“F值”的数字表示。F值可以为镜头焦距同光圈口径既比例(focal ratio)的简称。F值越小,光圈就越大,光线也就越多。一般来说,使用较小的F值可以拍摄出更亮的照片,而使用较大的F值可以拍摄出更暗的照片。
2、相机景深
景深可以理解为在摄像机镜头或者其他成像器中,能够取得清晰图像的成像范围,或可以理解为对焦点之前以及对焦点之后所形成的清晰范围。其中,对焦点可以包括光线通过镜头聚焦在感光元件上时,获取到的一个最清晰的点。前景深可以包括在对焦点之前的清晰范围,后景深可以包括在对焦点之后的清晰范围。
影响景深的重要因素可包括光圈、镜头以及距离拍摄物体的距离等。当光圈越大(光圈值F越小)时,景深越浅,当光圈越小(光圈值F越大)时,景深越深;当镜头焦距越长时,景深越浅,当镜头焦距越短时,景深越深。
3、视场角(field of view,FOV)
视场角也可以称为视角,视场角的大小决定了光学仪器的视野范围。例如,视场角越大,视野就越大。超过视场角的物体就不会被收在镜头里。
通常情况下,标准镜头的视场角可以为45度左右,远摄镜头的视场角可以为40度左右,广角镜头的视场角可以为60度以上,广角镜头观察范围较大。
4、感光度(或称ISO值)
ISO值可以为用于衡量底片对于光的灵敏程度。ISO数值越大,代表相机的感光能力越强。
在快门速度、光圈大小不变时,感光度ISO的大小决定了相片的明暗。ISO太大,曝光会过度,照片就会白茫茫一片,噪点过多;ISO太小,曝光会不足,照片就会是黑漆漆的,照片细腻。
5、曝光时间
曝光时间可以为将光投射到照相感光材料的感光面上,快门所要打开的时间,或也可以理解为快门打开到关闭的时间间隔。
曝光时间是指底片的感光时间,曝光时间越长底片上生成的相片越亮,相反越暗。在外界光线比较暗的情况下一般要求延长曝光时间,以拍摄得到较亮的图像。
6、电子设备
电子设备也可以称为终端,(terminal)、用户设备(user equipment,UE)、移动台(mobile station,MS)、移动终端(mobile terminal,MT)等。电子设备可以为拥有触摸屏的手机(mobile phone)、智能电视、穿戴式设备、平板电脑(Pad)、带无线收发功能的电脑、虚拟现实(virtual reality,VR)终端设备、增强现实(augmented reality,AR)终端设备、工业控制(industrial control)中的无线终端、无人驾驶(self-driving)中的无线终端、远程手术(remote medical surgery)中的无线终端、智能电网(smart grid)中的无线终端、运输安全(transportation safety)中的无线终端、智慧城市(smart city)中的无线终端、智慧家庭(smart home)中的无线终端等等。本申请的实施例对终端设备所采用的具体技术和具体设备形态不做限定。
7、其他名词
为了便于清楚描述本申请实施例的技术方案,在本申请的实施例中,采用了“第一”、“第二”等字样对功能和作用基本相同的相同项或相似项进行区分。例如,第一值和第二值仅仅是为了区分不同的值,并不对其先后顺序进行限定。本领域技术人员可以理解“第一”、“第二”等字样并不对数量和执行次序进行限定,并且“第一”、“第二”等字样也并不限定一定不同。
需要说明的是,本申请中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其他实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
本申请中,“至少一个”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B的情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指的这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b,或c中的至少一项(个),可以表示:a,b,c,a和b,a和c,b和c,或a、b和c,其中a,b,c可以是单个,也可以是多个。
示例性的,图1为本申请实施例提供的一种场景示意图。在图1对应的实施例中,以终端设备为手机为例进行示例说明,该示例并不构成对本申请实施例的限定。
响应于用户打开相机应用中的大光圈功能的操作,电子设备可以显示如图1中的a所示的界面,该界面可以称为拍摄界面,该界面中可以包括:预览画面,预览画面中可以显示基于大光圈功能进行虚化处理后的画面。例如,预览画面中可以包括:人物101、以及至少一个高亮对象102。高亮对象102可以理解为亮度大于预设的亮度阈值的对象,例如高亮对象102可以为由高亮像素点构成的光斑等。
该界面中还可以包括:用于拍照的按钮、对焦点框103、以及F值标识104。对焦点框103可以为电子设备基于预览画面中显示的内容自动生成的,或者也可以为响应于用户针对拍摄界面的触发操作生成的;该F值标识104可以显示为F4。
响应于用户针对用于拍照的按钮的操作,电子可以基于摄像头获取拍摄图像,通过对拍摄图像的虚化处理等图像处理步骤,得到如图1中的b所示的虚化处理后的图像。如图1中的b所示的图像,该图像中可以包括:至少一个光斑,光斑可以呈现出本身的颜色和亮度,或者光斑也可以呈现出白色,本申请实施例中以圆形为例对光斑进行示意说明。
可以理解的是,在生成虚化处理后的图像的过程中,由于手机或相机等的传感器存储的RAW图位数有限,导致画面过曝时高亮部分的亮度一致,光斑颜色丢失变成白色,影响拍摄效果。
有鉴于此,本申请实施例提供一种图像处理方法,所述电子设备可以获取到拍摄图像的光斑效果满足预设光斑要求时的拍摄参数,并基于拍摄参数拍摄得到更多非过曝的光斑,改善拍摄效果。
因此,为了能够更好地理解本申请实施例,下面对本申请实施例的终端设备的结构进行介绍。示例性的,图2为本申请实施例提供的一种终端设备的结构示意图。
终端设备可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,指示器192,摄像头193,以及显示屏194等。
传感器模块180可以包括:压力传感器180A以及陀螺仪传感器180B以及环境光传感器180C。
压力传感器180A可以设置在显示屏194,当压力传感器180A检测到用户的触摸操作时,电子设备可以根据压力传感器180A的检测信号计算触摸的位置,例如检测用户针对拍摄按钮的触发操作。
陀螺仪传感器180B用于确定电子设备围绕三个轴,x轴,y轴以及z轴的角速度,例如陀螺仪传感器180B可以用于检测电子设备在拍摄过程中的抖动情况。
环境光传感器180C用于感知的电子设备所处的环境亮度。例如,电子设备可以基于环境光传感器180C中指示的环境亮度,确定基于摄像头获取图像时是否处于同一环境。
可能的实现方式中,传感器模块180还可以包括下述一种或多种:气压传感器,磁传感器,加速度传感器,距离传感器,接近光传感器,指纹传感器,温度传感器,触摸传感器,或骨传导传感器(图2中未示出)等,本申请实施例中对此不做具体限定。
可以理解的是,本申请实施例示意的结构并不构成对终端设备的具体限定。在本申请另一些实施例中,终端设备可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。处理器110中还可以设置存储器,用于存储指令和数据。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。电源管理模块141用于连接充电管理模块140与处理器110。
终端设备的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
终端设备通过GPU,显示屏194,以及应用处理器等实现显示功能。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。例如,显示屏194用于显示本申请实施例中描述的拍摄界面。
终端设备可以通过图像信号处理(image signal processing,ISP),摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
摄像头193用于捕获静态图像或视频,例如摄像头193用于获取含有光斑的拍摄画面。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展终端设备的存储能力。内部存储器121可以用于存储计算机可执行程序代码,可执行程序代码包括指令。例如,外部存储卡可以用于存储基于相机应用获取的拍摄图像,内部存储器121用于存储图像处理方法对应的可执行代码。
终端设备可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
按键190包括开机键,音量键等。按键190可以是机械按键。
终端设备的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构等,在此不再赘述。
示例性的,图3为本申请实施例提供的一种电子设备的软件结构示意图。
如图3所示,分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将android系统分为多层,从上至下分别为应用程序(application,APP)层、应用程序框架(framework,FWK)层、硬件抽象层(hardwareabstraction layer,HAL)、以及驱动层等,本申请实施例中对此不做限定。
应用程序层可以包括一系列应用程序包。应用程序层可以包括下述一种或多种应用,例如:指相机应用以及相册应用等,本申请实施例中对此不做限定。
相机应用用于实现对于拍摄图像的获取,相册应用用于实现对于拍摄图像的存储。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的接口。应用程序框架层中可以包括下述一种或多种:sensor FWK。
sensor FWK为一种在应用程序框架层处理sensor数据的模块,sensor FWK用于实现对于传感器数据的传递,例如将由底层传输的图像数据返回至相机应用中。
可能的实现方式中,应用程序框架层还可以包括下述一种或多种:显示合成系统、窗口管理器、内容提供器、资源管理器、视图系统、或通知管理器等(图3中未示出)。其中,显示合成器的主要功能为接收多个来源的图形数据缓冲区,并对它们进行图层合成,然后发送给对图层进行处理的其他模块。
硬件抽象层的目的在于将硬件抽象化,可以为上层的应用提供一个统一的查询硬件设备的接口,或也可以为上层应用提供数据存储服务。硬件抽象层中可以包括:平台图像处理模块以及虚化处理模块等。
平台图像处理模块用于对相机驱动发送的原始图像数据进行图像前处理以及图像后处理,并将处理后的图像数据发送至虚化处理模块。
虚化处理模块用于实现本申请实施例中提供的图像处理方法中利用第二图像以及第一图像得到目标图像的步骤。
可能的实现方式中,HAL中还可以包括硬件编辑器(图3中未示出),硬件编辑器主要是对显示合成器提供硬件支持,例如支持图层处理等功能。
驱动层是硬件和软件之间的层。驱动层用于驱动硬件使得硬件工作。驱动层中可以包括下述一种或多种:相机驱动等。
相机驱动用于实现对于原始图像数据的获取,并将原始图像数据传递到HAL中。
可能的实现方式中,电子设备中也可以包括硬件层(图3中未示出),硬件层可以包括下述一种或多种:摄像头、液晶显示器(liquid crystal display,LCD)、等硬件。
本申请实施例中对软件架构中涉及的软件层、层中包含的模块、以及模块的作用不做具体限定。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以独立实现,也可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。
本申请实施例中,以高于电子设备中RAW位数的设备为单反设备,基于单反设备获取的图像为单反图像为例进行示例说明,本申请实施例中对此不做限定。
可以理解的是,高于电子设备中RAW位数的设备,也可以为除了单反设备以外的其他拍照设备,本申请实施例中对此不做限定。
示例性的,图4为本申请实施例提供的一种图像处理方法的流程示意图。在图4对应的实施例,电子设备中可以包括:相机、sensor FWK、虚化处理模块、平台图像处理模块以及相机驱动。如图4所示,图像处理方法可以包括如下步骤:
S401、电子设备基于摄像头获取第一图像。
第一图像可以为电子设备在第一环境亮度以及第一FOV下获取的。第一环境亮度可以为电子设备采集第一图像时所处的环境亮度,第一环境亮度可以为基于环境光传感器检测到的;第一FOV可以为固定电子设备的拍摄角度时确定的。
第一图像的曝光时间可以为第一曝光时间,第一图像的ISO值可以为第一ISO值,第一图像可以为RAW域图像,RAW位数可以为第一位数,如第一位数可以为14位、12位或10位。其中,第一曝光时间、第一ISO值可以为相机ISP预先设定的。
如图4所示,响应于用户在大光圈功能或其他拍照功能中的拍照操作,相机驱动可以基于ISP中预设的第一拍摄参数采集第一图像,将第一图像传递到HAL的平台图像处理模块中,平台图像处理模块可以实现将第一图像传递到虚化处理模块中。
可能的实现方式中,平台图像处理模块可以实现对第一图像的图像前处理以及图像后处理等图像处理步骤,并将处理后的第一图像发送至虚化处理模块,在此场景中S402-S405中描述的第一图像可以为经过图像处理的第一图像。
可以理解的是,第一图像可以为未经过虚化处理的图像,该第一图像较为清晰。
S402、电子设备基于第一对应关系获取第一光斑拍摄参数,利用第一光斑拍摄参数中的第二曝光时间以及第二ISO值获取第二图像。
第二图像可以为电子设备在第一环境亮度以及第一FOV下获取的。第一光斑拍摄参数也可以称为第二拍摄参数。
例如,当电子设备检测到第一视场角未发生变化且第一环境亮度未发生变化时,电子设备获取第二图像。或者,当电子设备检测到第一视场角发生变化和/或第一环境亮度发生变化时,电子设备则可以中断获取第二图像的步骤,在此场景中电子设备可以通过对第一图像的虚化处理得到目标图像。
第一对应关系中可以包括:环境亮度、F值、与光斑拍摄参数之间的对应关系。光斑拍摄参数可以包括下述一种或多种:曝光时间、ISO值、或者光斑检测阈值等。
电子设备可以利用第一环境亮度以及第一F值,从第一对应关系中获取第一光斑拍摄参数。该第一光斑拍摄参数中可以包括下述一种或多种:第二曝光时间、第二ISO值、或者第一光斑检测阈值。第一光斑检测阈值也可以称为第一亮度阈值。其中,第一F值可以ISP预设的,或者用户在拍摄界面中选择。
第二图像的曝光时间可以为第二曝光时间,第二图像的ISO值可以为第二ISO值,第二图像的F值可以为第一F值,第二图像可以为RAW域图像。其中,第二曝光时间与第一曝光时间不同,和/或,第二ISO值与第一ISO值不同。
可能的实现方式中,第一对应关系中也可以包括:环境亮度、与光斑拍摄参数之间的对应关系。使得电子设备可以通过第一环境亮度匹配得到合适的光斑拍摄参数,并利用光斑拍摄参数得到第二图像,本申请实施例中对此不做限定。
可以理解的是,电子设备可以通过光斑拍摄参数中的曝光时间以及ISO值,模拟出相同FOV以及相同环境亮度下利用单反相机拍摄时,第一单反图像中光斑的颜色和亮度。由于单反相机中存储RAW图的位数较高,因此第一单反图像中不仅可以获取更多的光斑,也可以保留非过曝光斑更多的色彩和亮度。例如,单反相机中存储RAW图的位数可以为第二位数,第二位数大于第一位数,如第二位数可以为16位。
可能的实现方式中,在电子设备获取到第二图像后,电子设备计算第二图像与第一图像之间的单应矩阵,基于单应矩阵将第二图像变换(warp)到第一图像上,得到对齐后的第二图像,进而基于对齐后的第二图像执行S403-S404所示的步骤,以提高后续两个图像的相似度。
其中,单应矩阵描述的是共面的点从一个视角的拍摄图像转化为另一个视角所拍摄图像的变换关系。例如,电子设备可以通过尺度不变特征转换(scale-invariantfeature transform,SIFT)或加速稳健特征(speeded up robust features,SURF)等方法获取两个图像之间的匹配点,通过至少四组匹配点计算单应矩阵。本申请实施例中对图像对齐的方法不做限定。
如图4所示,相机驱动利用第一环境亮度以及第一F值,从第一对应关系中获取第一光斑拍摄参数,基于第一光斑拍摄参数中的第二曝光时间以及第二ISO值采集第二图像,将第二图像传递到HAL的平台图像处理模块中,平台图像处理模块可以实现将第二图像传递到虚化处理模块中。
可能的实现方式中,平台图像处理模块可以实现对第二图像的图像前处理以及图像后处理等图像处理步骤,并将处理后的第二图像发送至虚化处理模块,在此场景中S403-S405中描述的第二图像可以为经过图像处理的第二图像。
S403、电子设备利用第一光斑拍摄参数中的第一光斑检测阈值标定第二图像中的光斑位置,得到第二图像对应的光斑图像。
示例性的,电子设备可以在第二图像中,将亮度大于第一光斑检测阈值的区域标记为光斑位置,得到标记有光斑位置的光斑图像。
可以理解的是,电子设备通过第一光斑检测阈值检测出的光斑,可以与第一单反图像中检测出的光斑相同,保留第一单反图像中的光斑亮度和色彩。
如图4所示,虚化处理模块可以用于实现S403所示的步骤。
S404、电子设备利用对焦点以及第一图像的深度图确定景深图像,基于景深图像、第一图像以及光斑图像得到目标图像。
对焦点可以为响应于用户的拍照操作之前,用户针对拍摄界面的触发操作确定的,或者对焦点也可以为电子设备响应于用户的拍照操作时基于画面中显示的内容确定的,或者基于预设的对焦点确定的,本申请实施例中对此不做限定。
深度图中可以包括任一像素点的深度信息,深度信息可以表示场景中各点到相机平面的距离,能够反应场景中可见表面的几何形状。
电子设备可以基于对焦点以及深度图,确定景深的范围,得到景深图像。例如,对焦点处的深度可以为第一深度,在景深图像中该对焦点处的景深可以为0,景深图像中的其他位置处的景深可以为该其他位置处的深度与第一深度的差值,得到景深图像。前景深可以包括在对焦点之前的清晰范围,后景深可以包括在对焦点之后的清晰范围。一般情况下,电子设备可以对后景深进行虚化处理。
由于景深图像可以体现出图像的虚化范围、光斑图像中可以保留带有颜色和亮度的光斑,因此电子设备可以基于景深图像、第一图像以及光斑图像得到目标图像。
可能的实现方式中,电子设备可以基于景深图像对光斑图像进行图像虚化处理,进而将虚化处理后的光斑图像中的光斑与第一图像中除光斑以外的其他区域进行图像融合得到目标图像,本申请实施例中对虚化处理以及图像融合处理的步骤不做具体限定。
可能的实现方式中,图5为本申请实施例提供的一种图像融合处理的示意图。如图5所示,电子设备可以也通过神经网络方法等实现将景深图像、第一图像以及光斑图像融合为目标图像的步骤,本申请实施例中对图像融合方法不做限定。
如图4所示,虚化处理模块可以执行S404所示的步骤。在S404之后,虚化处理模块可以将目标图像通过sensor FWK返回到相机应用中。
基于此,电子设备可以通过第一对应关系中的曝光参数以及ISO值,使得第二图像中的光斑的颜色和亮度与第一单反图像中的类似,并通过第一对应关系中的光斑检测阈值,实现对于光斑的精准识别,进而通过对光斑图中的光斑与第一图像中的其他区域的图像融合处理,获取到光斑效果更好的目标图像。
结合图6以及图6对应的实施例,对图像处理方法的效果进行示意说明。
图6为本申请实施例提供的一种效果示意图。图6中a可以为第一图像,第一图像中的光斑颜色过曝,看上去为白色。图6中的b可以为基于图4中描述的图像处理方法进行处理后得到的目标图像,目标图像中的光斑颜色得到了修正,恢复了光斑应有的亮度和颜色。
图7为本申请实施例提供的另一种效果示意图。图7中a可以为第一图像,第一图像中的光斑颜色过曝,光斑之间缺乏层次。图7中的b可以为基于图4中描述的图像处理方法进行处理后得到的目标图像,目标图像中的光斑数量较多,更能体现出光板的层次,呈现出深浅不一的效果。
在图4对应的实施例的基础上,电子设备可以基于图8对应的实施例确定第一对应关系。示例性的,图8为本申请实施例提供的一种获取第一对应关系的流程示意图。如图8所示,获取第一对应关系的方法可以包括如下步骤:
S801、电子设备基于摄像头获取待虚化图像。
待虚化图像可以为电子设备在第一环境亮度以及第一FOV下获取的。
待虚化图像的曝光时间可以为第一曝光时间,待虚化照片的ISO值可以为第一ISO值,待虚化图像的F值可以为第一F值,该待虚化图像可以为RAW域的图像,RAW位数可以为第一位数。
其中,第一环境亮度可以为电子设备采集待虚化照片时所处的环境亮度;第一FOV可以为固定电子设备的拍摄角度时确定的;第一曝光时间、第一ISO值、以及第一F值可以为相机ISP预先设定的。
S802、电子设备基于摄像头获取第一图像序列。
第一图像序列可以为电子设备在第一环境亮度以及第一FOV下获取的。
第一图像序列中包括与所述待虚化图像中拍摄的对象相同的N张图像。
第一图像序列中的任一图像的曝光时间与所述第一曝光时间不同,和/或,第一图像序列中的任一图像的ISO值与第一ISO值不同。第一图像序列中的任一图像的F值均可以为第一F值,第一图像序列中的任一图像可以为RAW域的图像,RAW位数可以为第一位数。
可以理解的是,电子设备可以通过第一图像序列中,不同的曝光时间和/或不同的ISO值,模拟出不同亮度下的待虚化图像。不同亮度下图像的光斑效果不一致,如某些亮度的图像中大部分光斑均处于过曝状态,某些亮度的图像中小部分光斑均处于过曝状态,或者某些亮度的图像中所有光斑均不过曝等。电子设备希望可以找到包含更多不过曝光斑的图像,并用不过曝的光斑替换待虚化图像中过曝的光斑。
其中,由于电子设备的RAW位数有限,无法实现对于光斑的精准识别,由于第二单反图像中的RAW位数更高的可以采集到更多的光斑,因此电子设备可以通过标定第二单反图像中的光斑位置,再从第一图像序列中的每个图像中确定是否在相同位置处存在不过曝光斑的方式,从第一图像序列中获取光斑效果较好时的光斑拍摄参数。
可能的实现方式中,在电子设备获取到第一图像序列后,电子设备可以获取待虚化图像与该第一图像序列中的任一图像之间的单应矩阵,基于单应矩阵将第一图像序列中的任一图像对齐到待虚化图像中,得到对齐后的第一图像序列,进而基于对齐后的第二图像执行S803-S806所示的步骤。其中,获取单应矩阵的方法可以参见S402所示的步骤,在此不再赘述。
S803、电子设备获取第二单反图像,标记第二单反图像中的光斑位置。
第二单反图像可以为单发相机在第一环境亮度以及第一FOV下获取的,第二单反图像的F值可以为第一F值。
S804、电子设备基于第二单反图像中的光斑位置,标定第一图像序列中任一图像的光斑,得到N张光斑图像以及该N张光斑图像分别对应的光斑检测阈值。
由于第二单反图像中的RAW位数较高,因此第二单反图像中光斑的数量,大于第一图像序列中的任一图像光斑的数量。
电子设备可以对第一图像序列进行虚化处理,得到虚化处理后的第一图像序列,以获取虚化处理后的第一图像序列中的一个图像(或称为待检测图像)的光斑为例进行示例说明。例如,电子设备可以按照第二单反图像中的光斑位置,在待检测图像中的相应位置处标定光斑位置。电子设备确定待检测图像中所有光斑的亮度,获取该所有光斑的亮度中亮度最低的数值,该亮度最低的数值可以为第一光斑检测阈值。
可以理解的是,由于通常情况下光斑的亮度大于其他区域的亮度,因此在待检测图像中,大于或等于第一光斑检测阈值的对象可以为光斑,小于第一光斑检测阈值的对象可以为一般场景,该第一光斑检测阈值的设定可以使得第二单反图像中的光斑尽可能的体现在待检测图像中。
S805、电子设备利用N张光斑图像,从第一图像序列中筛选出第二图像序列。
示例性的,电子设备可以从N张光斑图像中,筛选出光斑数量与第二单反图像中的光斑数量相同以及亮度最高光斑的亮度值小于第二亮度阈值的P张光斑图像,该P张光斑图像对应的RAW图可以为第二图像序列。P小于或等于N。
其中,亮度最高光斑的亮度值小于第二亮度阈值可以理解为最亮光斑不过曝。该第二亮度阈值可以为基于电子设备能够处理的RAW位数确定的,例如当RAW位数为14位时,第二亮度阈值可以为16384,当RAW位数为12位时,第二亮度阈值可以为4096等。
可以理解的是,电子设备可以通过第二单反图像中的光斑数量以及第二亮度阈值对第一图像序列进行筛选,使得第二图像序列中的任一图像都可以捕捉到所有非过曝的光斑。
可能的实现方式中,电子设备也可以在对第一图像序列进行筛选前,按照N张光斑图像的曝光量进行排序,按照曝光量最高到低的顺序进行第二图像序列的筛选,可以实现较为快速的筛选。
S806、电子设备从第二图像序列中获取任一图像作为第一环境亮度下的参考图像,生成第一环境亮度与第一光斑拍摄参数之间的对应关系。
参考图像可以为第二图像序列中的任一图像,参考图像的拍摄参数可以为第二曝光时间以及第二ISO值,参考图像中的光斑检测阈值可以为第一光斑检测阈值。
第一光斑拍摄参数可以包括下述一种或多种:第二曝光时间、第二ISO值、或者第一光斑检测阈值。第一光斑检测阈值的获取方式可以参见S804所示的步骤,在此不再赘述。
类似的,电子设备可以基于S801-S806所示的步骤,获取任一亮度下对应的光斑拍摄参数,得到第一对应关系,并存储第一对应关系。
可能的实现方式中,由于单反相机可以获取到不同F值下的第二单反图像,因此电子设备也可以基于图8对应的实施例,获取不同F值以及不用环境亮度下的光斑拍摄参数。使得电子设备可以基于用户针对大光圈功能中的光圈数值的选择,确定不同的光斑拍摄参数,以实现在不同光圈下均得到较好的光斑拍摄效果。
示例性的,图9为本申请实施例提供的一种切换F值的界面示意图。响应于用户针对图1中的a所示的标识104的触发操作,电子设备显示如图9所示的界面。该界面中包括转盘901,用户可以通过左右滑动转盘901,选择不同的F值以得到不同光圈对应的拍摄图像。例如,在S401之前响应于用户在901中选择F2.4的操作,电子设备可以确定第一F值为F2.4,进而响应于用户拍照的操作,电子设备可以在S402中,从第一对应关系中获取与F2.4以及电子设备所处环境亮度相关的光斑拍摄参数,进而执行S402-S405所示的步骤。
基于此,电子设备可以获取不同亮度下与单反图像的光斑效果最相似的图像,并保存该最相似的图像对应的光斑拍摄参数。使得电子设备可以利用不同亮度下的光斑拍摄参数,模拟出利用单反相机拍摄的效果,保留更多光斑的颜色和亮度。
可以理解的是,在图8对应的实施例中,获取第一对应关系的设备可以为电子设备也可以为其他设备,该其他设备可以为服务器等。例如,服务器可以将生成的第一对应关系发送至电子设备,电子设备存储第一对应关系,并基于第一对应关系执行图4对应方案,本申请实施例中对获取第一对应关系的执行主体不做限定。
上面结合图4-图9,对本申请实施例提供的方法进行了说明,下面对本申请实施例提供的执行上述方法的装置进行描述。如图10所示,图10为本申请实施例提供的一种图像处理装置的结构示意图,该图像处理装置可以是本申请实施例中的电子设备,也可以是电子设备内的芯片或芯片系统。
如图10所示,图像处理装置1000可以用于通信设备、电路、硬件组件或者芯片中,该图像处理装置1000包括:显示单元1001、处理单元1002。其中,显示单元1001用于支持图像处理方法执行的显示的步骤;处理单元1002用于支持图像处理装置1000执行信息处理的步骤。
在一种可能的实现方式中,该图像处理装置1000还可以包括通信单元1003,通信单元1003用于支持图像处理装置1000执行消息的接收或者发送等步骤。
本申请实施例中描述的图像处理装置均可以包括图10对应的实施例中描述的单元。
具体的,处理单元1002可以和显示单元1001可以集成在一起,处理单元1002和显示单元1001可能会发生通信。
在一种可能的实现方式中,该图像处理装置1000还可以包括:存储单元1004。其中,存储单元1004可以包括一个或者多个存储器,存储器可以是一个或者多个设备、电路中用于存储程序或者数据的器件。
存储单元1004可以独立存在,通过通信总线与处理单元1002相连。存储单元1004也可以和处理单元1002集成在一起。
以图像处理装置1000可以是本申请实施例中的电子设备的芯片或芯片系统为例,存储单元1004可以存储电子设备的方法的计算机执行指令,以使处理单元1002执行上述实施例中电子设备的方法。存储单元1004可以是寄存器、缓存或者随机存取存储器(randomaccess memory,RAM)等,存储单元1004可以和处理单元1002集成在一起。存储单元1004可以是只读存储器(read-only memory,ROM)或者可存储静态信息和指令的其他类型的静态存储设备,存储单元1004可以与处理单元1002相独立。
在一种可能的实现方式中,图像处理装置1000还可以包括:通信单元1003。其中,通信单元1003用于支持图像处理装置1000与其它设备交互。示例性的,当该图像处理装置1000是电子设备时,该通信单元1003可以是通信接口或接口电路。当该图像处理装置1000是电子设备内的芯片或芯片系统时,该通信单元1003可以是通信接口。例如通信接口可以为输入/输出接口、管脚或电路等。
本实施例的装置对应地可用于执行上述方法实施例中执行的步骤,其实现原理和技术效果类似,此处不再赘述。
图11为本申请实施例提供的另一种电子设备的硬件结构示意图。
电子设备包括处理器1101,通信线路1104以及至少一个通信接口(图11中示例性的以通信接口1103为例进行说明)。
处理器1101可以是一个通用中央处理器(central processing unit,CPU),微处理器,特定应用集成电路(application-specific integrated circuit,ASIC),或一个或多个用于控制本申请方案程序执行的集成电路。
通信线路1104可包括在上述组件之间传送信息的电路。
通信接口1103,使用任何收发器一类的装置,用于与其他设备或通信网络通信,如以太网,无线局域网(wireless local area networks,WLAN)等。
可能的,该电子设备还可以包括存储器1102。
存储器1102可以是只读存储器(read-only memory,ROM)或可存储静态信息和指令的其他类型的静态存储设备,随机存取存储器(random access memory,RAM)或者可存储信息和指令的其他类型的动态存储设备,也可以是电可擦可编程只读存储器(electrically erasable programmable read-only memory,EEPROM)、只读光盘(compactdisc read-only memory,CD-ROM)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。存储器可以是独立存在,通过通信线路1104与处理器相连接。存储器也可以和处理器集成在一起。
其中,存储器1102用于存储执行本申请方案的计算机执行指令,并由处理器1101来控制执行。处理器1101用于执行存储器1102中存储的计算机执行指令,从而实现本申请实施例所提供的方法。
可能的,本申请实施例中的计算机执行指令也可以称之为应用程序代码,本申请实施例对此不作具体限定。
在具体实现中,作为一种实施例,处理器1101可以包括一个或多个CPU,例如图11中的CPU0和CPU1。
在具体实现中,作为一种实施例,电子设备可以包括多个处理器,例如图11中的处理器1101和处理器1105。这些处理器中的每一个可以是一个单核(single-CPU)处理器,也可以是一个多核(multi-CPU)处理器。这里的处理器可以指一个或多个设备、电路、和/或用于处理数据(例如计算机程序指令)的处理核。
在上述实施例中,存储器存储的供处理器执行的指令可以以计算机程序产品的形式实现。其中,计算机程序产品可以是事先写入在存储器中,也可以是以软件形式下载并安装在存储器中。
计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本申请实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一计算机可读存储介质传输,例如,计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriber line,DSL)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存储的任何可用介质或者是包括一个或多个可用介质集成的服务器、数据中心等数据存储设备。例如,可用介质可以包括磁性介质(例如,软盘、硬盘或磁带)、光介质(例如,数字通用光盘(digital versatile disc,DVD))、或者半导体介质(例如,固态硬盘(solid state disk,SSD))等。
本申请实施例还提供了一种计算机可读存储介质。上述实施例中描述的方法可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。计算机可读介质可以包括计算机存储介质和通信介质,还可以包括任何可以将计算机程序从一个地方传送到另一个地方的介质。存储介质可以是可由计算机访问的任何目标介质。
作为一种可能的设计,计算机可读介质可以包括紧凑型光盘只读储存器(compactdisc read-only memory,CD-ROM)、RAM、ROM、EEPROM或其它光盘存储器;计算机可读介质可以包括磁盘存储器或其它磁盘存储设备。而且,任何连接线也可以被适当地称为计算机可读介质。例如,如果使用同轴电缆,光纤电缆,双绞线,DSL或无线技术(如红外,无线电和微波)从网站,服务器或其它远程源传输软件,则同轴电缆,光纤电缆,双绞线,DSL或诸如红外,无线电和微波之类的无线技术包括在介质的定义中。如本文所使用的磁盘和光盘包括光盘(CD),激光盘,光盘,数字通用光盘(digital versatile disc,DVD),软盘和蓝光盘,其中磁盘通常以磁性方式再现数据,而光盘利用激光光学地再现数据。
上述的组合也应包括在计算机可读介质的范围内。以上,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。
需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据,并且相关数据的收集、使用和处理需要遵守相关法律法规和标准,并提供有相应的操作入口,供用户选择授权或者拒绝。
Claims (9)
1.一种图像处理方法,其特征在于,所述方法包括:
响应于第一拍照操作,电子设备获取第一图像和第二图像;所述第一图像是在第一拍摄参数下拍摄得到的,所述第二图像是在第二拍摄参数下拍摄得到的,所述第二拍摄参数是预先标定的,所述第二拍摄参数包括在所述拍照操作发生时电子设备所处的第一环境亮度下,所述电子设备所拍摄图像的光斑效果满足预设光斑要求时所述电子设备的拍摄参数;
所述电子设备对所述第二图像进行虚化处理,得到第三图像;
所述电子设备将所述第三图像中的光斑以及所述第一图像中的除所述光斑以外的区域进行融合,得到目标图像;
其中,所述第二拍摄参数为拍到光斑数量与第一值相同且最亮的光斑不过曝时电子设备的拍摄参数,所述第一值为第四图像中检测到的光斑数量,所述第四图像为采用高于所述电子设备的RAW位数的设备拍摄得到的图像。
2.根据权利要求1所述的方法,其特征在于,所述第二拍摄参数为所述电子设备基于所述拍照操作发生时所述电子设备所处的第一环境亮度,从预设的第一对应关系中获取的,所述第一对应关系中包括:拍摄参数与环境亮度之间的对应关系,所述第二拍摄参数包括:第二曝光值以及第二ISO值。
3.根据权利要求2所述的方法,其特征在于,所述第二拍摄参数中还包括:第一亮度阈值,所述方法还包括:
所述电子设备利用所述第一亮度阈值从所述第三图像中获取光斑。
4.根据权利要求2所述的方法,其特征在于,所述第二拍摄参数为所述电子设备基于所述拍照操作发生时所述电子设备所处的第一环境亮度,从预设的第一对应关系中获取的,包括:所述第二拍摄参数为所述电子设备基于所述第一环境亮度以及第一F值,从预设的第一对应关系中获取的,所述第一对应关系中包括:拍摄参数、环境亮度、以及F值之间的对应关系。
5.根据权利要求4所述的方法,其特征在于,在所述响应于第一拍照操作之前,所述方法还包括:
响应于在相机应用中打开大光圈功能的操作,所述电子设备显示第一界面,所述第一界面中包括:拍摄按钮、以及用于调节F值的第一按钮;
响应于针对所述第一按钮的操作,所述电子设备在所述第一界面中显示至少一个所述电子设备允许调节的F值;
响应于将F值设置为第一F值的操作,所述电子设备获取所述第一F值。
6.根据权利要求1-5任一项所述的方法,其特征在于,在所述响应于第一拍照操作之前,所述方法还包括:
响应于第二拍照操作,所述电子设备获取第五图像和第一图像序列,所述第五图像是在所述第一拍摄参数下拍摄得到的,所述第一图像序列中包括至少两个图像,所述至少两个图像采用的拍摄参数不同;
所述电子设备利用第六图像从所述第一图像序列中获取第七图像,所述第六图像为采用高于所述电子设备的RAW位数的设备拍摄得到的图像,所述第七图像对应的虚化图像中拍摄到的光斑数量与所述第七图像中拍摄得到的光斑数量相同、且所述第七图像中的最亮光斑不过曝;
所述电子设备获取所述第七图像对应的所述第二拍摄参数。
7.根据权利要求6所述的方法,其特征在于,所述电子设备利用第六图像从所述第一图像序列中获取第七图像,包括:
所述电子设备标记所述第六图像中的光斑位置;
所述电子设备对所述第一图像序列中任一图像进行虚化处理,得到虚化后的第一图像序列;
所述电子设备按照所述第六图像中的光斑位置,标记所述虚化后的第一图像序列中的任一图像中的光斑;
所述电子设备从所述虚化后的第一图像序列中,获取光斑数量与所述第六图像中光斑数量相同、且最亮光斑不过曝时的任一图像,得到虚化处理前的所述第七图像。
8.一种电子设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时,使得所述电子设备执行如权利要求1-7任一项所述的方法。
9.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时,使得计算机执行如权利要求1-7任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311525972.8A CN117241131B (zh) | 2023-11-16 | 2023-11-16 | 图像处理方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311525972.8A CN117241131B (zh) | 2023-11-16 | 2023-11-16 | 图像处理方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117241131A CN117241131A (zh) | 2023-12-15 |
CN117241131B true CN117241131B (zh) | 2024-04-19 |
Family
ID=89084861
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311525972.8A Active CN117241131B (zh) | 2023-11-16 | 2023-11-16 | 图像处理方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117241131B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102015109038A1 (de) * | 2015-06-09 | 2016-12-15 | Connaught Electronics Ltd. | Verfahren zum Bestimmen einer Blendenfleckanordnung, Computerprogrammprodukt, Kamerasystem und Kraftfahrzeug |
CN107197146A (zh) * | 2017-05-31 | 2017-09-22 | 广东欧珀移动通信有限公司 | 图像处理方法及相关产品 |
CN111246092A (zh) * | 2020-01-16 | 2020-06-05 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN112561777A (zh) * | 2019-09-25 | 2021-03-26 | 北京迈格威科技有限公司 | 图像添加光斑的方法及装置 |
CN116128707A (zh) * | 2021-11-11 | 2023-05-16 | Oppo广东移动通信有限公司 | 图像处理方法及装置、电子设备、计算可读存储介质 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104376545B (zh) * | 2013-08-16 | 2018-12-14 | 联想(北京)有限公司 | 一种信息处理的方法及一种电子设备 |
WO2015081563A1 (zh) * | 2013-12-06 | 2015-06-11 | 华为终端有限公司 | 一种生成图片的方法及一种双镜头设备 |
-
2023
- 2023-11-16 CN CN202311525972.8A patent/CN117241131B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102015109038A1 (de) * | 2015-06-09 | 2016-12-15 | Connaught Electronics Ltd. | Verfahren zum Bestimmen einer Blendenfleckanordnung, Computerprogrammprodukt, Kamerasystem und Kraftfahrzeug |
CN107197146A (zh) * | 2017-05-31 | 2017-09-22 | 广东欧珀移动通信有限公司 | 图像处理方法及相关产品 |
CN112561777A (zh) * | 2019-09-25 | 2021-03-26 | 北京迈格威科技有限公司 | 图像添加光斑的方法及装置 |
CN111246092A (zh) * | 2020-01-16 | 2020-06-05 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN116128707A (zh) * | 2021-11-11 | 2023-05-16 | Oppo广东移动通信有限公司 | 图像处理方法及装置、电子设备、计算可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN117241131A (zh) | 2023-12-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102278776B1 (ko) | 이미지 처리 방법, 기기, 및 장치 | |
CN111052727B (zh) | 电子装置及其控制方法 | |
CN108900782B (zh) | 曝光控制方法、装置以及电子设备 | |
CN110072052B (zh) | 基于多帧图像的图像处理方法、装置、电子设备 | |
JP6263623B2 (ja) | 画像生成方法及びデュアルレンズ装置 | |
CN109040597B (zh) | 一种基于多摄像头的图像处理方法、移动终端及存储介质 | |
AU2019326496A1 (en) | Method for capturing images at night, apparatus, electronic device, and storage medium | |
WO2020038087A1 (zh) | 超级夜景模式下的拍摄控制方法、装置和电子设备 | |
US9357127B2 (en) | System for auto-HDR capture decision making | |
CN109194882A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN109348088B (zh) | 图像降噪方法、装置、电子设备及计算机可读存储介质 | |
KR102314594B1 (ko) | 이미지 디스플레이 방법 및 전자 장치 | |
CN106657805A (zh) | 运动中的拍摄方法及移动终端 | |
CN109218627A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN110677621B (zh) | 摄像头调用方法、装置、存储介质及电子设备 | |
CN107704798B (zh) | 图像虚化方法、装置、计算机可读存储介质和计算机设备 | |
CN108292075A (zh) | 拍摄设备及其操作方法 | |
CN109151333B (zh) | 曝光控制方法、装置以及电子设备 | |
CN109194877A (zh) | 图像补偿方法和装置、计算机可读存储介质和电子设备 | |
CN112840634B (zh) | 用于获得图像的电子装置及方法 | |
CN109361853B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN112351209B (zh) | 用于移动终端的外置镜头、控制镜头的方法、移动终端及存储介质 | |
TW201301878A (zh) | 影像擷取方法與影像擷取系統 | |
US20080084584A1 (en) | Emphasizing image portions in an image | |
WO2023142830A1 (zh) | 切换摄像头的方法与电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |