CN110620873B - 设备成像方法、装置、存储介质及电子设备 - Google Patents

设备成像方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN110620873B
CN110620873B CN201910756091.4A CN201910756091A CN110620873B CN 110620873 B CN110620873 B CN 110620873B CN 201910756091 A CN201910756091 A CN 201910756091A CN 110620873 B CN110620873 B CN 110620873B
Authority
CN
China
Prior art keywords
image
images
dynamic range
high dynamic
shooting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910756091.4A
Other languages
English (en)
Other versions
CN110620873A (zh
Inventor
姚坤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Realme Chongqing Mobile Communications Co Ltd
Original Assignee
Realme Chongqing Mobile Communications Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Realme Chongqing Mobile Communications Co Ltd filed Critical Realme Chongqing Mobile Communications Co Ltd
Priority to CN201910756091.4A priority Critical patent/CN110620873B/zh
Publication of CN110620873A publication Critical patent/CN110620873A/zh
Application granted granted Critical
Publication of CN110620873B publication Critical patent/CN110620873B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

本申请实施例公开了一种设备成像方法、装置、存储介质及电子设备,其中,电子设备包括多个视场角不同的摄像头,通过接收图像拍摄指令,并根据该图像拍摄指令通过多个摄像头同步拍摄得到多个图像,然后将拍摄得到的多个图像中对应视场角最小的图像设为基准图像,并将多个图像中除基准图像外的其它图像与基准图像对齐,最后根据对齐后的多个图像进行高动态范围合成,得到具有高动态范围的第一合成图像。由此,本申请通过一次拍摄即可得到用于进行高动态范围合成的多个图像,大大节省了合成得到高动态范围的图像的时间,提高了电子设备拍摄得到高动态范围图像的效率。

Description

设备成像方法、装置、存储介质及电子设备
技术领域
本申请涉及图像处理技术领域,具体涉及一种设备成像方法、装置、存储介质及电子设备。
背景技术
由于电子设备本身的硬件限制,目前的电子设备只能拍摄亮度范围比较小的场景,若在场景明暗相差太大时进行拍摄,拍摄出来的图像容易丢失明处和/或暗处的细节。为此,相关技术提出了高动态范围(或称宽动态范围)合成技术,通过拍摄多张图像合成一张高动态范围的图像。然而,相关技术拍摄得到高动态范围图像的效率较低。
发明内容
本申请实施例提供了一种设备成像方法、装置、存储介质及电子设备,能够提高电子设备拍摄得到的整张成像图像的质量。
第一方面,本申请实施例提供了一种设备成像方法,应用于电子设备,所述电子设备包括多个视场角不同的摄像头,所述设备成像方法包括:
接收图像拍摄指令,并根据所述图像拍摄指令通过所述多个摄像头同步拍摄得到多个图像;
将所述多个图像中对应视场角最小的图像设为基准图像;
将所述多个图像中除所述基准图像外的其它图像与所述基准图像对齐;
根据对齐后的所述多个图像进行高动态范围合成,得到具有高动态范围的第一合成图像。
第二方面,本申请实施例提供了一种设备成像装置,应用于电子设备,所述电子设备包括多个视场角不同的摄像头,所述设备成像装置包括:
图像采集模块,用于接收图像拍摄指令,并根据所述图像拍摄指令通过所述多个摄像头同步拍摄得到多个图像;
基准确定模块,用于将所述多个图像中对应视场角最小的图像设为基准图像;
图像对齐模块,用于将所述多个图像中除所述基准图像外的其它图像与所述基准图像对齐;
图像合成模块,用于根据对齐后的所述多个图像进行高动态范围合成,得到具有高动态范围的第一合成图像。
第三方面,本申请实施例提供了一种存储介质,其上存储有计算机程序,当所述计算机程序被处理器调用时,使得所述处理器执行如本申请实施例提供的设备成像方法。
第四方面,本申请实施例提供了一种电子设备,包括处理器、存储器以及多个视场角不同的摄像头,所述存储器存储有计算机程序,所述处理器通过调用所述计算机程序,用于执行如本申请实施例提供的设备成像方法。
本申请实施例中,电子设备包括多个视场角不同的摄像头,通过接收图像拍摄指令,并根据该图像拍摄指令通过多个摄像头同步拍摄得到多个图像,然后将拍摄得到的多个图像中对应视场角最小的图像设为基准图像,并将多个图像中除基准图像外的其它图像与基准图像对齐,最后根据对齐后的多个图像进行高动态范围合成,得到具有高动态范围的第一合成图像。由此,本申请通过一次拍摄即可得到用于进行高动态范围合成的多个图像,大大节省了合成得到高动态范围的图像的时间,提高了电子设备拍摄得到高动态范围图像的效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的设备成像方法的一流程示意图。
图2是本申请实施例中电子设备包括的三个视场角不同的摄像头的设置方式示意图。
图3是本申请实施例中触发输入图像拍摄指令的操作示意图。
图4是本申请实施例中拍摄得到三个图像的图像内容对比示意图。
图5是本申请实施例中创建的三个视图组件示例图。
图6是本申请实施例中对视图组件的位置进行调整的操作示意图。
图7是本申请实施例中根据视图组件的位置合成得到第二合成图像的示意图。
图8是本申请实施例提供的设备成像方法的另一流程示意图。
图9是本申请实施例提供的设备成像装置的一结构示意图。
图10是本申请实施例提供的电子设备的一结构示意图。
图11是本申请实施例提供的电子设备的另一结构示意图。
具体实施方式
请参照图式,其中相同的组件符号代表相同的组件,本申请的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本申请具体实施例,其不应被视为限制本申请未在此详述的其它具体实施例。
本申请实施例首先提供一种设备成像方法,该设备成像方法应用于电子设备。其中,该设备成像方法的执行主体可以是本申请实施例提供的设备成像装置,或者集成了该设备成像装置的电子设备,该设备成像装置可以采用硬件或者软件的方式实现,电子设备可以是智能手机、平板电脑、掌上电脑、笔记本电脑、或者台式电脑等配置有处理器而具有处理能力的设备。
请参照图1,图1为本申请实施例提供的设备成像方法的流程示意图。该设备成像方法应用于本申请实施例提供的电子设备,如图1所示,本申请实施例提供的设备成像方法的流程可以如下:
101,接收图像拍摄指令,并根据图像拍摄指令同步通过多个摄像头拍摄得到多个图像。
在本申请实施例中,电子设备包括多个视场角不同的摄像头。应当说明的是,本申请实施例中对这多个摄像头的设置方式不做具体限制,可由本领域普通技术人员根据实际需要设置。比如,请参照图2,电子设备包括成直线相邻设置的三个视场角不同的摄像头,分别为第一摄像头、第二摄像头和第三摄像头,其中,第一摄像头视场角为45度左右,即俗称的标准类型的摄像头;第二摄像头的视场角为40度以内,即俗称的长焦摄像头;第三摄像头的视场角为60度以上,即俗称的广角摄像头。
本申请实施例中,图像拍摄指令可由用户直接输入,用于指示电子设备对待拍摄对象进行拍摄。其中,待拍摄对象即电子设备在接收到输入的图像拍摄指令时,电子设备所设置的多个摄像头所对准的对象,包括但不限于人、物以及景等。
比如,用户在操作电子设备启动拍摄类应用(比如电子设备的系统应用“相机”),并通过移动电子设备,使得电子设备的多个视场角不同的摄像头对准待拍摄对象之后,可以通过点击“相机”预览界面提供的“拍照”按键(为虚拟按键),向电子设备输入图像拍摄指令,如图3所示。
又比如,用户在操作电子设备启动拍摄类应用,并通过移动电子设备,使得电子设备的多个视场角不同的摄像头对准待拍摄对象之后,可以说出语音指令“拍照”,向电子设备输入图像拍摄指令。
本申请实施例中,电子设备在接收到图像拍摄指令之后,即根据该图像拍摄指令同步通过多个摄像头拍摄得到多个图像。
比如,以图2所示的三个视场角不同的摄像头为例,电子设备在同一时刻通过第一摄像头拍摄得到第一图像,通过第二摄像头拍摄得到第二图像,以及通过第三摄像头拍摄得到第三图像。其中,请参照图4,由于第一摄像头的视场角大于第二摄像头的视场角,第一摄像头的拍摄范围将包括包括第二摄像头的拍摄范围,相应第一图像的图像内容将包括第二图像的图像内容;而第三摄像头的视场角大于第一摄像头的视场角,第三摄像头的拍摄范围将包括第一摄像头的拍摄范围,相应第三图像的图像内容将包括第一图像的图像内容。
102,将多个图像中对应视场角最小的图像设为基准图像。
本申请实施例中,电子设备在通过其设置的多个视场角不同的摄像头拍摄得到多个图像之后,将多个图像中对应视场角最小的图像,也即是其中图像内容最小的图像设为基准图像。比如,对于图4所示的多个图像,其中,第三图像的图像内容包括第一图像的图像内容,第一图像的图像内容包括第二图像的图像内容,如上所述,该图像内容最小的第二图像将被设为基准图像。
103,将多个图像中除基准图像外的其它图像与基准图像对齐。
本申请实施例中,电子设备在将拍摄得到的多个图像中对应视场角最小的图像设为基准图像之后,以基准图像的图像内容为基准,将多个图像中除基准图像外的其它图像与基准图像对齐。
比如,对于图4所示的多个图像,其中第二图像被设为基准图像,电子设备将第一图像以及第三图像的图像内容与第二图像的图像内容对齐。
104,根据对齐后的多个图像进行高动态范围合成,得到具有高动态范围的第一合成图像。
可以理解的是,高动态范围图像相比普通的图像,能够提供更大的动态范围和图像细节。本申请实施例中,电子设备在将多个图像对齐后,即可按照预设的高动态范围合成算法,根据对齐后的多个图像进行高动态范围合成,也即是根据多个图像中相同的图像内容进行高动态范围合成,得到具有高动态范围的第一合成图像,该第一合成图像的图像内容与基准图像的图像内容相同。
由上可知,本申请中的电子设备包括多个视场角不同的摄像头,通过接收图像拍摄指令,并根据该图像拍摄指令通过多个摄像头同步拍摄得到多个图像,然后将拍摄得到的多个图像中对应视场角最小的图像设为基准图像,并将多个图像中除基准图像外的其它图像与基准图像对齐,最后根据对齐后的多个图像进行高动态范围合成,得到具有高动态范围的第一合成图像。由此,本申请通过一次拍摄即可得到用于进行高动态范围合成的多个图像,大大节省了合成得到高动态范围的图像的时间,提高了电子设备拍摄得到高动态范围图像的效率。
在一实施例中,“通过多个摄像头拍摄得到多个图像”,包括:
(1)通过多个摄像头按照不同曝光参数拍摄得到多个图像;
“根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像”,包括:
(2)按照第一高动态范围合成方式,根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像。
本申请实施例中,曝光参数包括曝光值(即俗称的EV值)或曝光时长,电子设备可以通过多个摄像头按照不同的曝光值拍摄得到多个图像,也可以通过多个摄像头按照不同的曝光时长拍摄得到多个图像。
比如,对于图2所示的多个摄像头,电子设备可以通过第一摄像头按照预设标准曝光值拍摄得到第一图像,通过第二摄像头按照预设欠曝光值拍摄得到第二图像,通过第三摄像头按照预设过曝光值拍摄得到第三图像,其中,预设标准曝光值、预设短曝光值以及预设长曝光值可由本领域普通技术人员根据实际需要取经验值。
又比如,电子设备可以通过第一摄像头按照预设标准曝光时长拍摄得到第一图像,通过第二摄像头按照预设短曝光时长拍摄得到第二图像,通过第三摄像头按照预设长曝光时长拍摄得到第三图像,其中,预设标准曝光时长、预设短曝光时长以及预设长曝光时长可由本领域普通技术人员根据实际需要取经验值。
对于通过不同曝光参数拍摄得到的多个图像,电子设备按照第一高动态范围合成方式,根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像。
比如,假设电子设备通过第一摄像头按照曝光值EV0拍摄得到第一图像,通过第二摄像头按照曝光值EV-2拍摄得到第二图像,通过第三摄像头按照曝光值EV+2拍摄得到第三图像,则将第一图像记为标准曝光图像,将第二图像记为欠曝光图像,将第三图像记为过曝光图像,然后利用以下公式,对三个图像对齐后的相同图像内容部分进行高动态范围合成:
HDR(i)=l*ME(i)+m*LE(i)+n*HE(i);
其中,HDR(i)表示合成得到的高动态范围的第一合成图像第i个像素点,ME(i)表示标准曝光图像中前述相同图像内容的第i个像素点,1为标准曝光图像对应的补偿权值,LE(i)表示欠曝光图像中前述相同图像内容的第i个像素点,m表示欠曝光图像对应的补偿权值,HE(i)表示过曝光图像中前述相同图像内容的第i个像素点,n表示过曝光图像对应的补偿权值。
在一实施例中,“通过多个摄像头拍摄得到多个图像”,包括:
(1)通过多个摄像头按照相同曝光参数拍摄得到多个图像;
“根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像”,包括:
(2)按照第二高动态范围合成方式,根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像。
本申请实施例中,电子设备可以通过多个摄像头按照相同的曝光值拍摄得到多个图像,可以通过多个摄像头按照相同的曝光时长拍摄得到多个图像。
比如,对于图2所示的多个摄像头,电子设备可以通过第一摄像头、第二摄像头以及第三摄像头均按照曝光值EV-2拍摄,分别得到第一图像、第二图像和第三图像;又比如,电子设备可以通过第一摄像头、第二摄像头以及第三摄像头均按照预设短曝光时长拍摄,分别得到第一图像、第二图像和第三图像。
对于通过相同曝光参数拍摄得到的多个图像,电子设备按照第二高动态范围合成方式,根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像。
比如,假设电子设备通过第一摄像头、第二摄像头以及第三摄像头按照预设短曝光时长分别拍摄得到第一图像、第二图像、第三图像,在按照第二高动态范围合成方式进行高动态范围合成处理时,首先对第一图像、第二图像、第三图像进行多帧降噪合成,得到一个降噪合成图像。可以理解的是,由于第一图像、第二图像以及第三图像均为短曝光图像,其将更多保留拍摄对象中较亮区域的特征。同样的,多帧降噪合成而得到的降噪合成图像同样更多保留的是拍摄对象中较亮区域的特征。此时,电子设备进一步提升降噪合成图像的亮度,使得拍摄对象中较亮区域的特征以及较暗区域的特征得以同时呈现,从而得到高动态范围的第一合成图像。
在一实施例中,“接收图像拍摄指令,并根据图像拍摄指令通过多个摄像头同步拍摄得到多个图像”之前,还包括:
(1)在预览界面创建与多个摄像头数量相同的视图组件,且视图组件的大小与其对应的摄像头的视场角大小正相关;
(2)在视图组件中展示其对应摄像头的预览画面。
本申请实施例中,为了便于用户拍摄,还提供一种可选的图像预览方式。其中,电子设备在预览界面中创建与多个摄像头数量相同的视图组件,这些视图组件分别对应一个摄像头,且视图组件的大小与其对应的摄像头的视场角大小正相关。然后,在各视图组件中分别展示其对应的摄像头的预览画面。
比如,以安卓系统为例,对于图2所示多个摄像头,请参照图5,电子设备分别在预览界面创建三个视图组件,分别为对应第一摄像头的SurfaceView1、对应第二摄像头的SurfaceView2,以及对应第三摄像头的SurfaceView3,且第一摄像头和SurfaceView1之间通过数据传输通道pipeline1逻辑连接,第二摄像头和SurfaceView2之间通过数据传输通道pipeline2逻辑连接,第三摄像头和SurfaceView3之间通过数据传输通道pipeline3逻辑连接,相应的,电子设备将第一摄像头采集的预览图像通过pipeline1输送给SurfaceView1进行展示,将第二摄像头采集的预览图像通过pipeline2输送给SurfaceView2进行展示,将第三摄像头采集的预览图像通过pipeline3输送给SurfaceView3进行展示。
在一实施例中,本申请实施例提供的设备成像方法还包括:
接收对视图组件的位置调整操作,并根据位置调整操作调整视图组件的位置。
本申请实施例中,电子设备可以接收对视图组件的位置调整操作,并根据接收到的位置调整操作调整视图组件的位置,使得用户可根据实际需要对视图组件的位置进行调整,从而对不同摄像头的预览图像的显示位置进行调整,提高了图像预览的灵活性和趣味性。
比如,请参照图6,电子设备在预览界面创建有三个视图组件,分别为SurfaceView1、SurfaceView2和SurfaceView3,用户可以通过手指来拖动SurfaceView1,向电子设备输入对SurfaceView1的位置调整操作。相应的,电子设备将根据该位置调整操作,跟随用户的拖动调整SurfaceView1的位置。
在一实施例中,“将多个图像中对应视场角最小的图像设为基准图像”之前,还包括:
(1)判断当前的图像拍摄模式是否为高动态范围拍摄模式;
(2)若当前的图像拍摄模式为高动态范围拍摄模式,则将多个图像中对应视场角最小的图像设为基准图像。
本申请实施例中,提供有两种可选的图像拍摄方式供用户选择,分别为高动态范围拍摄模式和叠加拍摄模式。
其中,电子设备在接收到图像拍摄指令后,首先判断当前的图像拍摄模式是否为高动态范围拍摄模式。
若当前的图像拍摄模式为高动态范围拍摄模式,则电子设备按照以上实施例记载的方式拍摄得到用于进行高动态范围合成的多个图像,并将多个图像中对应视场角最小的图像设为基准图像,进行高动态范围合成得到第一合成图像,具体可参照以上实施例中的相关模式,此处不再赘述。
此外,“判断当前的图像拍摄模式是否为高动态范围拍摄模式”之后,还包括:
若当前的图像拍摄模式为叠加拍摄模式,则根据各视图组件的当前位置,将多个图像中的图像内容进行叠加合成,得到图像内容相互叠加的第二合成图像。
本申请实施例中,若当前的图像拍摄模式为叠加拍摄模式,则电子设备通过多个摄像头按照预设标准曝光值拍摄得到多个图像,或者通过多个摄像头按照预设标准曝光时长拍摄得到多个图像。此时,电子设备进一步根据各视图组件的当前位置,将多个图像中的图像内容进行叠加合成,得到图像内容相互叠加的第二合成图像。
比如,请参照图7,假设电子设备在预览界面中创建有三个视图组件,分别为SurfaceView1、SurfaceView2和SurfaceView3,其当前位置如图7所示,合成得到的第二合成图像即包括第一图像的图像内容,又包括第二图像的图像内容,还包括第三图像的图像内容。
请参照图8,图8为本申请实施例提供的设备成像方法的另一种流程示意图,该设备成像方法应用于本申请实施例提供的电子设备,该电子设备包括第一摄像头、第二摄像头和第三摄像头,且第三摄像头的视场角大于第一摄像头的视场角,第一摄像头的视场角大于第二摄像头的视场角,该设备成像方法的流程可以包括:
201、电子设备在预览界面创建对应第一摄像头的视图组件、对应第二摄像头的视图组件以及对应第三摄像头的视图组件,并在各视图组件中展示其对应摄像头的预览画面。
请参照图2,电子设备包括成直线相邻设置的三个视场角不同的摄像头,分别为第一摄像头、第二摄像头和第三摄像头,其中,第一摄像头视场角为45度左右,即俗称的标准类型的摄像头;第二摄像头的视场角为40度以内,即俗称的长焦摄像头;第三摄像头的视场角为60度以上,即俗称的广角摄像头。
本申请实施例中,为了便于用户拍摄,电子设备在预览界面中创建与多个摄像头数量相同的视图组件,这些视图组件分别对应一个摄像头,且视图组件的大小与其对应的摄像头的视场角大小正相关。然后,在各视图组件中分别展示其对应的摄像头的预览画面。
比如,以安卓系统为例,对于图2所示多个摄像头,请参照图5,电子设备分别在预览界面创建三个视图组件,分别为对应第一摄像头的SurfaceView1、对应第二摄像头的SurfaceView2,以及对应第三摄像头的SurfaceView3,且第一摄像头和SurfaceView1之间通过数据传输通道pipeline1逻辑连接,第二摄像头和SurfaceView2之间通过数据传输通道pipeline2逻辑连接,第三摄像头和SurfaceView3之间通过数据传输通道pipeline3逻辑连接,相应的,电子设备将第一摄像头采集的预览图像通过pipeline1输送给SurfaceView1进行展示,将第二摄像头采集的预览图像通过pipeline2输送给SurfaceView2进行展示,将第三摄像头采集的预览图像通过pipeline3输送给SurfaceView3进行展示。
202、电子设备接收图像拍摄指令,并根据当前的图像拍摄模式同步通过第一摄像头、第二摄像头和第三摄像头拍摄得到第一图像、第二图像和第三图像,若当前图像拍摄模式为高动态范围拍摄模式,则转入203,若当前图像拍摄模式为叠加拍摄模式,则转入205。
本申请实施例中,图像拍摄指令可由用户直接输入,用于指示电子设备对待拍摄对象进行拍摄。其中,待拍摄对象即电子设备在接收到输入的图像拍摄指令时,电子设备所设置的多个摄像头所对准的对象,包括但不限于人、物以及景等。
比如,用户在操作电子设备启动拍摄类应用(比如电子设备的系统应用“相机”),并通过移动电子设备,使得电子设备的多个视场角不同的摄像头对准待拍摄对象之后,可以通过点击“相机”预览界面提供的“拍照”按键(为虚拟按键),向电子设备输入图像拍摄指令,如图3所示。
又比如,用户在操作电子设备启动拍摄类应用,并通过移动电子设备,使得电子设备的多个视场角不同的摄像头对准待拍摄对象之后,可以说出语音指令“拍照”,向电子设备输入图像拍摄指令。
应当说明的是,根据当前的图像拍摄模式不同,电子设备的拍摄方式也不同。
其中,若当前的图像拍摄模式为高动态范围拍摄模式,则电子设备通过第一摄像头按照预设标准曝光值拍摄得到第一图像,通过第二摄像头按照预设欠曝光值拍摄得到第二图像,通过第三摄像头按照预设过曝光值拍摄得到第三图像。或者,电子设备通过第一摄像头、第二摄像头以及第三摄像头均按照预设短曝光时长拍摄,相应得到第一图像、第二图像和第三图像。
若当前的图像拍摄模式为叠加拍摄模式,则电子设备通过第一摄像头、第二摄像头以及第三摄像头均按照预设标准曝光值拍摄,相应得到第一图像、第二图像和第二图像。
203、电子设备以第二图像为基准,将第一图像、第三图像与第二图像对齐。
如上所述,第一摄像头的视场角大于第二摄像头的视场角,而第三摄像头的视场角又大于第一摄像头的视场角,相应第三图像的图像内容包括第一图像的图像内容,第一图像的图像内容包括第二图像的图像内容,电子设备将其中图像内容最小的第二图像设为基准图像。
然后,电子设备以第二图像的图像内容为基准,将第三图像和第一图像的图像内容与第二图像的图像内容对齐。
204、电子设备根据对齐后的第一图像、第二图像和第三图像进行高动态范围合成,得到具有高动态范围的第一合成图像。
可以理解的是,高动态范围图像相比普通的图像,能够提供更大的动态范围和图像细节。本申请实施例中,电子设备在将第一图像、第二图像以及第三图像对齐后,根据拍摄图像的方式不同,采用不同的高动态范围合成方式进行合成。
其中,当电子设备分别通过第一摄像头、第二摄像头、第三摄像头按照预设标准曝光值、预设欠曝光值、预设过曝光值拍摄得到第一图像、第二图像、第三图像时,第一图像记为标准曝光图像,将第二图像记为欠曝光图像,将第三图像记为过曝光图像,然后利用以下公式,对三个图像对齐后的相同图像内容部分进行高动态范围合成:
HDR(i)=l*ME(i)+m*LE(i)+n*HE(i);
其中,HDR(i)表示合成得到的高动态范围的第一合成图像第i个像素点,ME(i)表示标准曝光图像中前述相同图像内容的第i个像素点,l为标准曝光图像对应的补偿权值,LE(i)表示欠曝光图像中前述相同图像内容的第i个像素点,m表示欠曝光图像对应的补偿权值,HE(i)表示过曝光图像中前述相同图像内容的第i个像素点,n表示过曝光图像对应的补偿权值。
当电子设备通过第一摄像头、第二摄像头以及第三摄像头均按照预设短曝光时长拍摄,相应得到第一图像、第二图像和第二图像时。电子设备首先对第一图像、第二图像、第三图像进行多帧降噪合成,得到一个降噪合成图像。可以理解的是,由于第一图像、第二图像以及第三图像均为短曝光图像,其将更多保留拍摄对象中较亮区域的特征。同样的,多帧降噪合成而得到的降噪合成图像同样更多保留的是拍摄对象中较亮区域的特征。此时,电子设备进一步提升降噪合成图像的亮度,使得拍摄对象中较亮区域的特征以及较暗区域的特征得以同时呈现,从而得到高动态范围的第一合成图像。
205、电子设备根据各视图组件的当前位置,将第一图像、第二图像和第三图像中的图像内容进行叠加合成,得到图像内容相互叠加的第二合成图像。
比如,请参照图7,假设电子设备在预览界面中创建有三个视图组件,分别为SurfaceView1、SurfaceView2和SurfaceView3,其当前位置如图7所示,合成得到的第二合成图像即包括第一图像的图像内容,又包括第二图像的图像内容,还包括第三图像的图像内容。
本申请实施例还提供一种设备成像装置。请参照图9,图9为本申请实施例提供的设备成像装置的结构示意图。其中该设备成像装置应用于电子设备,该电子设备包括多个视场角不同的摄像头,该设备成像装置包括图像采集模块301、基准确定模块302、图像对齐模块303以及图像合成模块304,如下:
图像采集模块301,用于接收图像拍摄指令,并根据图像拍摄指令同步通过多个摄像头拍摄得到多个图像;
基准确定模块302,用于将多个图像中对应视场角最小的图像设为基准图像;
图像对齐模块303,用于将多个图像中除基准图像外的其它图像与基准图像对齐;
图像合成模块304,用于根据对齐后的多个图像进行高动态范围合成,得到具有高动态范围的第一合成图像。
在一实施例中,在通过多个摄像头拍摄得到多个图像时,图像采集模块301用于:
通过多个摄像头按照不同曝光参数拍摄得到多个图像;
在根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像时,图像合成模块304用于:
按照第一高动态范围合成方式,根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像。
在一实施例中,在通过多个摄像头拍摄得到多个图像时,图像采集模块301用于:
通过多个摄像头按照相同曝光参数拍摄得到多个图像;
在根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像时,图像合成模块304用于:
按照第二高动态范围合成方式,根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像。
在一实施例中,设备成像装置还包括图像预览模块,在接收图像拍摄指令,并根据图像拍摄指令通过多个摄像头同步拍摄得到多个图像之前,用于:
在预览界面创建与多个摄像头数量相同的视图组件,且视图组件的大小与其对应的摄像头的视场角大小正相关;
在视图组件中展示其对应摄像头的预览画面。
在一实施例中,图像预览模块还用于:
接收对视图组件的位置调整操作,并根据位置调整操作调整视图组件的位置。
在一实施例中,设备成像装置还包括模式识别模块,在将多个图像中对应视场角最小的图像设为基准图像之前,用于:
判断当前的图像拍摄模式是否为高动态范围拍摄模式;
基准确定模块302还用于当前的图像拍摄模式为高动态范围拍摄模式时,将多个图像中对应视场角最小的图像设为基准图像。
在一实施例中,在模式识别模块判断当前的图像拍摄模式是否为高动态范围拍摄模式之后,图像合成模块304还用于当前的图像拍摄模式为叠加拍摄模式时,根据各视图组件的当前位置,将多个图像中的图像内容进行叠加合成,得到图像内容相互叠加的第二合成图像。
应当说明的是,本申请实施例提供的设备成像装置与上文实施例中的设备成像方法属于同一构思,在设备成像装置上可以运行设备成像方法实施例中提供的任一方法,其具体实现过程详见设备成像方法实施例,此处不再赘述。
本申请实施例提供一种计算机可读的存储介质,其上存储有计算机程序,当其存储的计算机程序在计算机上执行时,使得计算机执行如本申请实施例提供的设备成像方法中的步骤。其中,存储介质可以是磁碟、光盘、只读存储器(Read Only Memory,ROM,)或者随机存取器(Random Access Memory,RAM)等。
本申请实施例还提供一种电子设备,请参照图10,电子设备包括处理器401、存储器402、多个视场角不同的摄像头403。其中,处理器401与存储器402、摄像头403电性连接。
处理器401是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或加载存储在存储器402内的计算机程序,以及调用存储在存储器402内的数据,执行电子设备的各种功能并处理数据。
存储器402可用于存储软件程序以及模块,处理器401通过运行存储在存储器402的计算机程序以及模块,从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的计算机程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器402还可以包括存储器控制器,以提供处理器401对存储器402的访问。
本申请实施例中对这多个摄像头的设置方式不做具体限制,比如,请参照图2,电子设备包括成直线相邻设置的三个视场角不同的摄像头,分别为第一摄像头、第二摄像头和第三摄像头,其中,第一摄像头视场角为45度左右,即俗称的标准类型的摄像头;第二摄像头的视场角为40度以内,即俗称的长焦摄像头;第三摄像头的视场角为60度以上,即俗称的广角摄像头。
在本申请实施例中,电子设备中的处理器401会按照如下的步骤,将一个或一个以上的计算机程序的进程对应的指令加载到存储器402中,并由处理器401运行存储在存储器402中的计算机程序,从而实现各种功能,如下:
接收图像拍摄指令,并根据图像拍摄指令同步通过多个摄像头拍摄得到多个图像;
将多个图像中对应视场角最小的图像设为基准图像;
将多个图像中除基准图像外的其它图像与基准图像对齐;
根据对齐后的多个图像进行高动态范围合成,得到具有高动态范围的第一合成图像。
请参照图11,图11为本申请实施例提供的电子设备的另一结构示意图,与图10所示电子设备的区别在于,电子设备还包括输入单元404和输出单元405等组件。
其中,输入单元404可用于接收输入的数字、字符信息或用户特征信息(比如指纹),以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入等。
输出单元405可用于显示由用户输入的信息或提供给用户的信息,如屏幕。
在本申请实施例中,电子设备中的处理器401会按照如下的步骤,将一个或一个以上的计算机程序的进程对应的指令加载到存储器402中,并由处理器401运行存储在存储器402中的计算机程序,从而实现各种功能,如下:
接收图像拍摄指令,并根据图像拍摄指令同步通过多个摄像头拍摄得到多个图像;
将多个图像中对应视场角最小的图像设为基准图像;
将多个图像中除基准图像外的其它图像与基准图像对齐;
根据对齐后的多个图像进行高动态范围合成,得到具有高动态范围的第一合成图像。
在一实施例中,在通过多个摄像头拍摄得到多个图像时,处理器401执行:
通过多个摄像头按照不同曝光参数拍摄得到多个图像;
在根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像时,处理器401执行:
按照第一高动态范围合成方式,根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像。
在一实施例中,在通过多个摄像头拍摄得到多个图像时,处理器401执行:
通过多个摄像头按照不同曝光参数拍摄得到多个图像;
在根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像时,处理器401执行:
按照第二高动态范围合成方式,根据对齐后的多个图像进行高动态范围合成处理,得到具有高动态范围的第一合成图像。
在一实施例中,在接收图像拍摄指令,并根据图像拍摄指令通过多个摄像头同步拍摄得到多个图像之前,处理器401还执行:
在预览界面创建与多个摄像头数量相同的视图组件,且视图组件的大小与其对应的摄像头的视场角大小正相关;
在视图组件中展示其对应摄像头的预览画面。
在一实施例中,处理器401还执行:
接收对视图组件的位置调整操作,并根据位置调整操作调整视图组件的位置。
在一实施例中,在将多个图像中对应视场角最小的图像设为基准图像之前,处理器401还执行:
判断当前的图像拍摄模式是否为高动态范围拍摄模式;
若当前的图像拍摄模式为高动态范围拍摄模式时,则将多个图像中对应视场角最小的图像设为基准图像。
在一实施例中,在判断当前的图像拍摄模式是否为高动态范围拍摄模式之后,处理器401还执行:
若当前的图像拍摄模式为叠加拍摄模式时,根据各视图组件的当前位置,将多个图像中的图像内容进行叠加合成,得到图像内容相互叠加的第二合成图像。
应当说明的是,本申请实施例提供的电子设备与上文实施例中的设备成像方法属于同一构思,在电子设备上可以运行设备成像方法实施例中提供的任一方法,其具体实现过程详见特征提取方法实施例,此处不再赘述。
需要说明的是,对本申请实施例的设备成像方法而言,本领域普通测试人员可以理解实现本申请实施例的设备成像方法的全部或部分流程,是可以通过计算机程序来控制相关的硬件来完成,所述计算机程序可存储于一计算机可读取存储介质中,如存储在电子设备的存储器中,并被该电子设备内的至少一个处理器执行,在执行过程中可包括如设备成像方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储器、随机存取记忆体等。
对本申请实施例的设备成像装置而言,其各功能模块可以集成在一个处理芯片中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中,所述存储介质譬如为只读存储器,磁盘或光盘等。
以上对本申请实施例所提供的一种设备成像方法、装置、存储介质及电子设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (8)

1.一种设备成像方法,应用于电子设备,其特征在于,所述电子设备包括多个视场角不同的摄像头,所述设备成像方法包括:
接收图像拍摄指令,并根据所述图像拍摄指令通过多个所述摄像头按照相同的预设短曝光时长同步拍摄待拍摄对象得到多个图像;
将所述多个图像中对应视场角最小的图像设为基准图像;
将所述多个图像中除所述基准图像外的其它图像与所述基准图像对齐;
根据对齐后的所述多个图像进行多帧降噪合成处理,得到降噪合成图像;以及
对所述降噪合成图像进行亮度提升处理,使得所述待拍摄对象中较亮区域的特征以及较暗区域的特征得以同时呈现,得到具有高动态范围的第一合成图像。
2.根据权利要求1所述的设备成像方法,其特征在于,所述接收图像拍摄指令,并根据所述图像拍摄指令通过多个所述摄像头按照相同的预设短曝光时长同步拍摄待拍摄对象得到多个图像之前,还包括:
在预览界面创建与多个所述摄像头数量相同的视图组件,且所述视图组件的大小与其对应的摄像头的视场角大小正相关;
在所述视图组件中展示其对应摄像头的预览画面。
3.根据权利要求2所述的设备成像方法,其特征在于,所述设备成像方法还包括:
接收对所述视图组件的位置调整操作,并根据所述位置调整操作调整所述视图组件的位置。
4.根据权利要求3所述的设备成像方法,其特征在于,所述将所述多个图像中对应视场角最小的图像设为基准图像之前,还包括:
判断当前的图像拍摄模式是否为高动态范围拍摄模式;
若当前的图像拍摄模式为高动态范围拍摄模式,则将所述多个图像中对应视场角最小的图像设为基准图像。
5.根据权利要求4所述的设备成像方法,其特征在于,所述判断当前的图像拍摄模式是否为高动态范围拍摄模式之后,还包括:
若当前的图像拍摄模式为叠加拍摄模式,则根据各所述视图组件的当前位置,将所述多个图像中的图像内容进行叠加合成,得到图像内容相互叠加的第二合成图像。
6.一种设备成像装置,应用于电子设备,其特征在于,所述电子设备包括多个视场角不同的摄像头,所述设备成像装置包括:
图像采集模块,用于接收图像拍摄指令,并根据所述图像拍摄指令通过多个所述摄像头按照相同的预设短曝光时长同步拍摄待拍摄对象得到多个图像;
基准确定模块,用于将所述多个图像中对应视场角最小的图像设为基准图像;
图像对齐模块,用于将所述多个图像中除所述基准图像外的其它图像与所述基准图像对齐;
图像合成模块,用于根据对齐后的所述多个图像进行多帧降噪合成处理,得到降噪合成图像;以及对所述降噪合成图像进行亮度提升处理,使得所述待拍摄对象中较亮区域的特征以及较暗区域的特征得以同时呈现,得到具有高动态范围的第一合成图像。
7.一种存储介质,其上存储有计算机程序,其特征在于,当所述计算机程序被处理器调用时,使得所述处理器执行如权利要求1至5任一项所述的设备成像方法。
8.一种电子设备,包括处理器、存储器以及多个视场角不同的摄像头,所述存储器储存有计算机程序,其特征在于,所述处理器通过调用所述计算机程序,用于执行如权利要求1至5任一项所述的设备成像方法。
CN201910756091.4A 2019-08-06 2019-08-06 设备成像方法、装置、存储介质及电子设备 Active CN110620873B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910756091.4A CN110620873B (zh) 2019-08-06 2019-08-06 设备成像方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910756091.4A CN110620873B (zh) 2019-08-06 2019-08-06 设备成像方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN110620873A CN110620873A (zh) 2019-12-27
CN110620873B true CN110620873B (zh) 2022-02-22

Family

ID=68921905

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910756091.4A Active CN110620873B (zh) 2019-08-06 2019-08-06 设备成像方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN110620873B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111294517B (zh) * 2020-03-03 2021-12-17 荣耀终端有限公司 一种图像处理的方法及移动终端
CN111654623B (zh) * 2020-05-29 2022-03-22 维沃移动通信有限公司 拍照方法、装置和电子设备
CN112188082A (zh) * 2020-08-28 2021-01-05 努比亚技术有限公司 高动态范围图像拍摄方法、拍摄装置、终端及存储介质
CN114466134A (zh) * 2021-08-17 2022-05-10 荣耀终端有限公司 生成hdr图像的方法及电子设备
CN114143471B (zh) * 2021-11-24 2024-03-29 深圳传音控股股份有限公司 图像处理方法、系统、移动终端及计算机可读存储介质
CN116095512B (zh) * 2022-07-15 2024-04-02 荣耀终端有限公司 终端设备的拍照方法及相关装置
CN117615257B (zh) * 2024-01-18 2024-04-05 常州微亿智造科技有限公司 一种成像方法、装置、介质及设备

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107534737B (zh) * 2015-08-31 2020-11-17 华为技术有限公司 一种拍摄图片的方法及装置
CN105120172A (zh) * 2015-09-07 2015-12-02 青岛海信移动通信技术股份有限公司 一种移动终端前后置摄像头拍照方法及移动终端
KR20170123125A (ko) * 2016-04-28 2017-11-07 엘지전자 주식회사 이동단말기 및 그 제어방법
CN107222677A (zh) * 2017-05-27 2017-09-29 成都通甲优博科技有限责任公司 多摄像头同时打开的方法及装置
CN107465882B (zh) * 2017-09-22 2019-11-05 维沃移动通信有限公司 一种图像拍摄方法及移动终端
CN108234898A (zh) * 2018-02-07 2018-06-29 信利光电股份有限公司 多摄像头的同步拍摄方法、拍摄装置、移动终端和可读存储介质
CN109064415A (zh) * 2018-07-09 2018-12-21 奇酷互联网络科技(深圳)有限公司 图像处理方法、系统、可读存储介质及终端
CN109639996B (zh) * 2019-01-23 2023-06-06 努比亚技术有限公司 高动态场景成像方法、移动终端及计算机可读存储介质

Also Published As

Publication number Publication date
CN110620873A (zh) 2019-12-27

Similar Documents

Publication Publication Date Title
CN110620873B (zh) 设备成像方法、装置、存储介质及电子设备
CN110493538B (zh) 图像处理方法、装置、存储介质及电子设备
CN111418201B (zh) 一种拍摄方法及设备
CN109862282B (zh) 人物图像处理方法和装置
CN108322646B (zh) 图像处理方法、装置、存储介质及电子设备
CN109996009B (zh) 图像处理方法、装置、存储介质及电子设备
CN110248098B (zh) 图像处理方法、装置、存储介质及电子设备
CN109167931B (zh) 图像处理方法、装置、存储介质及移动终端
CN101213828B (zh) 将虹膜颜色结合到红眼修正中的方法和设备
CN110971841B (zh) 图像处理方法、装置、存储介质及电子设备
KR20130071793A (ko) 디지털 촬영 장치 및 이의 제어 방법
CN107147851B (zh) 照片处理方法、装置、计算机可读存储介质及电子设备
CN110290299B (zh) 成像方法、装置、存储介质及电子设备
CN110430370B (zh) 图像处理方法、装置、存储介质及电子设备
CN112887617B (zh) 一种拍摄方法、装置和电子设备
CN113905182B (zh) 一种拍摄方法及设备
KR102207633B1 (ko) 촬영 장치 및 그 제어 방법
CN110035237B (zh) 图像处理方法、装置、存储介质及电子设备
CN113329172B (zh) 拍摄方法、装置及电子设备
JP2019012881A (ja) 撮像制御装置及びその制御方法
CN110581956A (zh) 图像处理方法、装置、存储介质及电子设备
CN110493515B (zh) 高动态范围拍摄模式开启方法、装置、存储介质及电子设备
CN108492266B (zh) 图像处理方法、装置、存储介质及电子设备
CN112422798A (zh) 拍照方法、装置、电子设备和存储介质
CN113747067A (zh) 拍照方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant