CN110312075B - 设备成像方法、装置、存储介质及电子设备 - Google Patents
设备成像方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN110312075B CN110312075B CN201910578473.2A CN201910578473A CN110312075B CN 110312075 B CN110312075 B CN 110312075B CN 201910578473 A CN201910578473 A CN 201910578473A CN 110312075 B CN110312075 B CN 110312075B
- Authority
- CN
- China
- Prior art keywords
- shooting
- camera
- image
- shot
- cameras
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
Abstract
本申请实施例公开了一种设备成像方法、装置、存储介质及电子设备,其中,电子设备包括第一摄像头和多个第二摄像头,第二摄像头的拍摄区域与第一摄像头的拍摄区域的边缘部分重叠。本申请实施例通过接收对待拍摄场景的图像拍摄请求;基于图像拍摄请求,确定待拍摄场景中的拍摄主体;根据拍摄主体,确定需要调用的第二摄像头;通过第一摄像头以拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像;通过确定的第二摄像头以拍摄主体为焦点对待拍摄场景进行拍摄,并对确定的第二摄像头拍摄得到的图像与基底图像进行图像合成处理,得到图像拍摄请求的成像图像。由此,最终得到成像图像的边缘区域的清晰度得以提高,提高了整张成像图像的质量。
Description
技术领域
本申请涉及图像处理技术领域,具体涉及一种设备成像方法、装置、存储介质及电子设备。
背景技术
目前,用户通常利用具有摄像头的电子设备拍摄图像,能够通过这些电子设备随时随地的记录身边发生的事情,看到的景物等。然而,由于摄像头本身的硬件缺陷,使得其拍摄的图像往往中间区域比较清晰,而边缘区域则相对模糊,导致整张成像图像的质量较差。
发明内容
本申请实施例提供了一种设备成像方法、装置、存储介质及电子设备,能够提高电子设备拍摄得到的整张成像图像的质量。
第一方面,本申请实施例提供了一种设备成像方法,应用于电子设备,所述电子设备包括第一类型的第一摄像头和多个第二类型的第二摄像头,所述第二摄像头的拍摄区域与所述第一摄像头的拍摄区域的边缘部分重叠,所述设备成像方法包括:
接收对待拍摄场景的图像拍摄请求;
基于所述图像拍摄请求,确定所述待拍摄场景中的拍摄主体;
根据所述拍摄主体,确定需要调用的第二摄像头;
通过所述第一摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像;
通过所述确定的第二摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,并对所述确定的第二摄像头拍摄得到的图像与所述基底图像进行图像合成处理,得到所述图像拍摄请求的成像图像。
第二方面,本申请实施例提供了一种设备成像装置,应用于电子设备,所述电子设备包括第一类型的第一摄像头和多个第二类型的第二摄像头,所述第二摄像头的拍摄区域与所述第一摄像头的拍摄区域的边缘部分重叠,所述设备成像装置包括:
请求接受模块,用于接收对待拍摄场景的图像拍摄请求;
第一确定模块,用于基于所述图像拍摄请求,确定所述待拍摄场景中的拍摄主体;
第二确定模块,用于根据所述拍摄主体,确定需要调用的第二摄像头;
第一获取模块,用于通过所述第一摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像;
第二获取模块,用于通过所述确定的第二摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,并对所述确定的第二摄像头拍摄得到的图像与所述基底图像进行图像合成处理,得到所述图像拍摄请求的成像图像。
第三方面,本申请实施例提供了一种存储介质,其上存储有计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行如本申请实施例提供的设备成像方法。
第四方面,本申请实施例提供了一种电子设备,包括处理器、存储器、第一类型的第一摄像头和多个第二类型的第二摄像头,所述第二摄像头的拍摄区域与所述第一摄像头的拍摄区域的边缘部分重叠,所述存储器存储有计算机程序,所述处理器通过调用所述计算机程序,执行如本申请实施例提供的设备成像方法。
本申请实施例中,电子设备包括第一摄像头和多个第二摄像头,其中,第二摄像头的拍摄区域与第一摄像头的拍摄区域的边缘部分重叠。电子设备通过接收对待拍摄场景的图像拍摄请求;基于图像拍摄请求,确定待拍摄场景中的拍摄主体;根据拍摄主体,确定需要调用的第二摄像头;通过第一摄像头以拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像;通过确定的第二摄像头以拍摄主体为焦点对待拍摄场景进行拍摄,并对确定的第二摄像头拍摄得到的图像与基底图像进行图像合成处理,得到图像拍摄请求的成像图像。由此,最终得到成像图像的边缘区域的清晰度得以提高,提高了整张成像图像的质量。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的设备成像方法的一流程示意图。
图2是本申请实施例中第一摄像头和第二摄像头的一种设置方式示意图。
图3是本申请实施例中第二摄像头与第一摄像头的拍摄区域对比示意图。
图4是本申请实施例中触发输入图像拍摄请求的操作示意图。
图5是本申请实施例中第二摄像头与第一摄像头的拍摄区域的另一对比示意图。
图6是本申请实施例中第二图像和基底图像的图像内容对比示意图。
图7是本申请实施例中所有第二图像和基底图像同时重叠的重叠区域示意图。
图8是本申请实施例提供的设备成像方法的另一流程示意图。
图9是本申请实施例中第一摄像头和第二摄像头的另一种设置方式示意图。
图10是本申请实施例提供的设备成像装置的一结构示意图。
图11是本申请实施例提供的电子设备的一结构示意图。
图12是本申请实施例提供的电子设备的另一结构示意图。
具体实施方式
请参照图式,其中相同的组件符号代表相同的组件,本申请的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本申请具体实施例,其不应被视为限制本申请未在此详述的其它具体实施例。
本申请实施例首先提供一种设备成像方法,该设备成像方法应用于电子设备。其中,该设备成像方法的执行主体可以是本申请实施例提供的设备成像装置,或者集成了该设备成像装置的电子设备,该设备成像装置可以采用硬件或者软件的方式实现,电子设备可以是智能手机、平板电脑、掌上电脑、笔记本电脑、或者台式电脑等配置有处理器而具有处理能力的设备。
请参照图1,图1为本申请实施例提供的设备成像方法的流程示意图。该设备成像方法应用于本申请实施例提供的电子设备,如图1所示,本申请实施例提供的设备成像方法的流程可以如下:
101,接收对待拍摄场景的图像拍摄请求。
应当说明的是,在本申请实施例中,电子设备包括第一类型的第一摄像头和多个第二类型的第二摄像头,其中,第一摄像头的拍摄区域可以包括第二摄像头的拍摄区域,第二摄像头的拍摄区域与第一摄像头的拍摄区域的边缘部分重叠,且任意两个第二摄像头之间的重叠拍摄区域与第一摄像头的拍摄区域的中间部分重叠。
比如,请结合参照图2和图3,第一摄像头为标准类型的摄像头,或者说视场角为45度左右的摄像头,第二摄像头为长焦类型的摄像头,或者说视场角为40度以内的摄像头。电子设备可以包括一个第一摄像头和四个第二摄像头,分别为第二摄像头A、第二摄像头B、第二摄像头C以及第二摄像头D,各第二摄像头的轴线朝向第一摄像头的轴线倾斜并相交。例如,第二摄像头A的拍摄区域a对应第一摄像头的拍摄区域的左上角,第二摄像头B的拍摄区域b对应第一摄像头的拍摄区域的右上角,第二摄像头C的拍摄区域c对应第一摄像头的拍摄区域的左下角,第二摄像头D的拍摄区域d对应第一摄像头的拍摄区域的右下角,由此,第二摄像头的拍摄区域与第一摄像头的拍摄区域的边缘部分重叠,且任意两个第二摄像头之间的重叠拍摄区域(即两个第二摄像头拍摄区域之间的重叠区域)与第一摄像头的拍摄区域的中间部分重叠。
在一实施例中,四个第二摄像头的拍摄区域可以有共同重叠的区域,每个第二摄像头的拍摄区域之内都包含该区域。可选的,该共同重叠区域可以位于第一摄像头的拍摄区域的中间部分,也可以根据拍摄对象的不同在第一摄像头的拍摄区域中进行选择。
本申请实施例中,图像拍摄请求可由用户直接输入,用于指示电子设备对待拍摄场景进行拍摄。其中,待拍摄场景即电子设备在接收到输入的图像拍摄请求时,第一摄像头所对准的场景,包括但不限于人、物以及景等。
比如,用户在操作电子设备启动拍摄类应用(比如电子设备的系统应用“相机”),并通过移动电子设备,使得电子设备的第一摄像头以及第二摄像头对准待拍摄场景之后,可以通过点击“相机”预览界面提供的“拍照”按键(虚拟按键)向电子设备输入图像拍摄请求,如图4所示。或者,也可以点击设备中具有“拍照”功能的实体按键,向电子设备输入图像拍摄请求。
又比如,用户在操作电子设备启动拍摄类应用,并通过移动电子设备,使得电子设备的第一摄像头以及第二摄像头对准待拍摄场景之后,可以说出语音指令“拍照”,向电子设备输入图像拍摄请求。或者,在电子设备内预先设置一些拍照手势,当待拍摄场景中出现该手势时,向电子设备输入图像拍摄请求。
102,基于图像拍摄请求,确定待拍摄场景中的拍摄主体。
其中,拍摄主体可以为待拍摄场景中的待聚焦对象,即用户想要重点拍摄的对象。例如,当待拍摄场景为一头牛在山脚下吃草的场景时,用户想要重点拍摄牛,那么,牛可作为拍摄主体。
在一实施例中,可以通过用户主动选择的方式确定待拍摄场景中的拍摄主体,用户操作电子设备启动拍摄类应用(比如电子设备的系统应用“相机”)拍摄成像之前,通过点击或者框选等方式在拍摄类应用的预览界面上直接选择出拍摄主体,可选的,确定待拍摄场景中的拍摄主体的步骤可以包括:在第一摄像头的预览图像中获取对拍摄主体聚焦的第一聚焦指令,将第一聚焦指令指向的对象确定为拍摄主体。
或者,可以由电子设备自动确定出拍摄主体。例如,获取待拍摄场景内各对象与电子设备的距离,比较待拍摄场景内各对象与电子设备的距离远近,将各对象中距离所述电子设备最近的对象确定为拍摄主体。其中,可通过任意方式来获取待拍摄场景内各对象与电子设备的距离进行比较。例如,双摄像头测距方式、结构光测距方式、飞行时间测距方式等,或者其他获取待拍摄场景内各对象与电子设备的距离的任何方式,在此不做任何限制。
可选的,在比较各对象与电子设备的距离远近之前,可以通过预览图像中像素坐标值与待拍摄场景中实际坐标值的映射关系将预览图像上的各个对象对应到待拍摄场景中,以实现测距。像素坐标为相机坐标系中的二维坐标,实际坐标为世界坐标系中的三维坐标,通过多个视角获取这两个坐标系间的平移向量以计算这两个坐标系之间的映射关系,从而确定出像素坐标值与实际坐标值的映射关系。
像素坐标值与实际坐标值的映射关系确定之后,就可以通过该映射关系,准确定位预览图像中的各个对象对应现实待拍摄场景中的实际对象。可选的,可以根据像素坐标值与实际坐标值的映射关系建立摄像机模型,也可以根据相机坐标系与世界坐标系的映射关系建立摄像机模型,将相应的映射关系放入摄像机模型中进行训练,或者通过多次学习,不断优化摄像机模型中的映射关系。
此外,还可以对待拍摄场景的预览图像进行灰度化处理,例如,取相邻两张预览图像进行灰度化处理,得到灰度预览图像。可选的,拍摄主体可以为人或物,可以为静止的拍摄主体,也可以为运动的拍摄主体。对于运动的拍摄主体,可以通过第一摄像头获取两张相邻的预览图像,计算两张相邻的预览图像中同一对象的灰度化差值,若灰度化差值大于预设阈值,则将该对象确定为拍摄主体。
103,根据拍摄主体,确定需要调用的第二摄像头。
由于不同第二摄像头具有不同的拍摄区域,在不同的拍摄场景下,根据用户需求和拍摄主体自身所处的环境或距离电子设备的远近的不同,可以调用不同的第二摄像头对拍摄主体进行拍摄。例如,在有的场景下,用户可能只是想获得一个精简版的图像,不需要太高的清晰度,这时,可以只调用第一摄像头进行拍摄,也可以只调用一个第一摄像头和一个第二摄像头进行拍摄;或者,在一些时候,用户想要拍摄非常清晰的照片,或者拍摄主体过远,需要调用多个摄像头才能拍摄出很清晰的照片,这时可以调用尽可能多的第一摄像头和尽可能多的第二摄像头进行拍摄。
在一实施例中,可以根据拍摄主体与电子设备的距离来决定需要调用的摄像头,可以为一个摄像头(比如一个第一摄像头),也可以为多个摄像头的组合(如若干第一摄像头和若干第二摄像头的组合)。在确定出拍摄主体之后,获取拍摄主体与电子设备的距离,将拍摄主体与电子设备的距离与预设距离作比较,当拍摄主体与电子设备的距离小于第一预设距离时,开启近景拍摄模式,调用电子设备的一个第一摄像头及一个第二摄像头;或者当拍摄主体与电子设备的距离大于第二预设距离时,开启远景拍摄模式,调用电子设备的所有第一摄像头及所有第二摄像头。
或者,还可以根据拍摄主体所在的拍摄区域,确定需要调用的第二摄像头。例如,请一并参阅图3和图5,图5为本申请实施例中第二摄像头与第一摄像头的拍摄区域的另一对比示意图。电子设备可以包括一个第一摄像头和四个第二摄像头,分别为第二摄像头A、第二摄像头B、第二摄像头C以及第二摄像头D,各第二摄像头的轴线朝向第一摄像头的轴线倾斜并相交。例如,第二摄像头A的拍摄区域a对应第一摄像头的拍摄区域的左上角,第二摄像头B的拍摄区域b对应第一摄像头的拍摄区域的右上角,第二摄像头C的拍摄区域c对应第一摄像头的拍摄区域的左下角,第二摄像头D的拍摄区域d对应第一摄像头的拍摄区域的右下角,由此,第二摄像头的拍摄区域与第一摄像头的拍摄区域的边缘部分重叠。拍摄区域ab为第二摄像头A的拍摄区域a与第二摄像头B的拍摄区域b的重叠区域,拍摄区域ac为第二摄像头A的拍摄区域a与第二摄像头C的拍摄区域c的重叠区域,拍摄区域bc为第二摄像头B的拍摄区域b与第二摄像头C的拍摄区域c的重叠区域,拍摄区域cd为第二摄像头C的拍摄区域c与第二摄像头D的拍摄区域d的重叠区域,拍摄区域abcd为第二摄像头A、B、CD的拍摄区域a、b、c、d的共同重叠区域。
其中,可以将拍摄区域中包含拍摄主体的第二摄像头确定为需要调用的第二摄像头。拍摄主体位于哪个第二摄像头的拍摄区域内,就将哪个第二摄像头确定为需要调用的第二摄像头。例如,当拍摄主体位于重叠拍摄区域ab中时,拍摄主体即位于拍摄区域a内,又位于拍摄区域b内,将拍摄区域中包含拍摄主体的第二摄像头A和第二摄像头B确定为需要调用的第二摄像头;当拍摄主体位于重叠拍摄区域ac中时,拍摄主体即位于拍摄区域a内,又位于拍摄区域c内,将拍摄区域中包含拍摄主体的第二摄像头A和第二摄像头C确定为需要调用的第二摄像头;等等,此处不一一举例。
若拍摄主体位于四个第二摄像头拍摄区域的共同重叠区域abcd中,意味着四个第二摄像头的拍摄区域都包含拍摄主体,因而,可以将四个摄像头都确定为需要调用的第二摄像头。
可选的,电子设备中的第一摄像头可以包括一个,也可以包括多个。当电子设备中只包含一个第一摄像头时,每次拍摄时该第一摄像头都被调用;当电子设备中包含多个第一摄像头时,则可以根据拍摄主体,确定需要调用的第一摄像头。
例如,电子设备可以包括两个第一摄像头,分别为第一主摄像头和第一副摄像头。根据拍摄主体与电子设备的距离确定需要调用的第一摄像头,可以只调用第一主摄像头,也可以调用第一主摄像头和第一副摄像头。在确定出拍摄主体之后,获取拍摄主体与电子设备的距离,将拍摄主体与电子设备的距离与预设距离作比较,当拍摄主体与电子设备的距离小于预设距离时,将第一主摄像头确定为需要调用的第一摄像头;当拍摄主体与电子设备的距离大于预设距离时,将第一主摄像头和第一副摄像头确定为需要调用的第一摄像头。
104,通过第一摄像头以拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像。
比如,电子设备在接收到用户通过语音方式输入的对待拍摄场景的图像拍摄请求时,即根据该图像拍摄请求,首先通过第一摄像头以拍摄主体为焦点对待拍摄场景进行拍摄。其中,第一摄像头可以只有一个,可以通过该第一摄像头拍摄一张以拍摄主体为焦点的第一图像,作为基底图像。或者,第一摄像头可以有两个,通过两个第一摄像头拍摄两张以拍摄主体为焦点的第一图像,将这两张第一图像进行图像合成处理,将合成后的图像作为基底图像。
通过第一摄像头以拍摄主体为焦点对待拍摄场景进行拍摄,得到至少一张以拍摄主体为焦点的第一图像,对这些第一图像进行图像合成处理,并将合成之后的图像设为基底图像。例如,在至少一张以拍摄主体为焦点的第一图像中分别选择同一位置清晰度高的像素块进行合成,得到基底图像。通常来说,图像越清晰,其对比度越高。因此,可以使用图像的对比度来衡量图像的清晰度。
105,通过确定的第二摄像头以拍摄主体为焦点对待拍摄场景进行拍摄,并对确定的第二摄像头拍摄得到的图像与基底图像进行图像合成处理,得到图像拍摄请求的成像图像。
在一些实施例中,电子设备通过确定的一个第二摄像头对待拍摄场景进行拍摄,将拍摄得到的一个第二图像与基底图像进行图像合成处理,得到图像拍摄请求的成像图像。或者,电子设备通过确定的多个第二摄像头对待拍摄场景进行拍摄,相应得到多个第二图像,将确定的多个第二摄像头拍摄得到的多个第二图像与基底图像进行图像合成处理,得到图像拍摄请求的成像图像。应当说明的是,在通过确定的第二摄像头以拍摄主体为焦点对待拍摄场景进行拍摄时,确定的第二摄像头与第一摄像头采用相同的图像参数(比如对比度、亮度)进行拍摄,由此,确定的第二摄像头的拍摄区域虽为第一摄像头的拍摄区域的局部,但确定的第二摄像头拍摄得到的第二图像与第一摄像头拍摄得到的第一图像的图像效果相同。
比如,请继续参阅图6,图6为本申请实施例中第二图像和基底图像的图像内容对比示意图。电子设备包括四个第二摄像头,分别为第二摄像头A、第二摄像头B、第二摄像头C以及第二摄像头D,且这四个第二摄像头的拍摄区域分别对应第一摄像头拍摄区域的左上角、右上角、左下角以及右下角,通过这四个第二摄像头将拍摄得到四个第二图像,如图5所示,第二摄像头A拍摄的第二图像a1的图像内容对应基底图像左上角的图像内容,第二摄像头B拍摄的第二图像b1的图像内容对应基底图像右上角的图像内容,第二摄像头C拍摄的第二图像c1的图像内容对应基底图像左下角的图像内容,第二摄像头D拍摄的第二图像d1的图像内容对应基底图像右下角的图像内容,这样,不同的第二图像的图像内容即覆盖了基底图像中边缘区域的不同位置。其中,拍摄主体位于第二摄像头A和第二摄像头B的拍摄区域内,第二摄像头A和第二摄像头B为确定的第二摄像头,在多个第二摄像头中,电子设备只调用确定的第二摄像头A和第二摄像头B对待拍摄场景进行拍摄,得到第二图像a1和第二图像b1,将第二图像a1和第二图像b1与第一摄像头拍摄得到的基底图像进行图像合成处理,得到图像拍摄请求的成像图像。
应当说明的是,本申请实施例中对第一摄像头拍摄第一图像和确定的第二摄像头拍摄第二图像的先后顺序不做限定,可以是在第一摄像头拍摄第一图像后确定的第二摄像头拍摄第二图像,可以是确定的第二摄像头拍摄第二图像后第一摄像头拍摄第一图像,还可以是第一摄像头拍摄第一图像的同时确定的第二摄像头拍摄第二图像。
本申请实施例中,电子设备在通过第一摄像头拍摄后得到基底图像,以及通过确定的第二摄像头拍摄得到若干第二图像之后,将拍摄得到的若干第二图像与基底图像对齐。
基于对齐后的基底图像和第二图像,对于基底图像和第二图像的重叠部分,计算重叠的各像素点的平均像素值,比如,确定的第二摄像头为四个摄像头时,电子设备除了通过第一摄像头拍摄得到基底图像之外,还通过四个第二摄像头拍摄得到四个第二图像,请参照图6,各第二图像与基底图像同时重叠的重叠区域位于基底图像的中间区域,这样,对于图6所示的重叠区域,某位置的像素点在五个图像(即基底图像和四个第二图像)中的像素值分别为0.8、0.9、1.1、1.2和1,则可计算得到该位置的像素点的平均像素值为1。
之后,根据基底图像中对应的各位置像素点所得到的平均像素值得到合成图像,比如,可以将基底图像的各像素点的像素值相应调整为计算得到的各平均像素值,从而得到合成图像;又比如,还可以根据计算得到各平均像素值,生成一幅新的图像,即合成图像。
相应的,确定的第二摄像头也可以包括电子设备的第二摄像头中的任意一个、两个、三个、…,在此对确定的第二摄像头的数量不做限制,,具体可以为根据本申请确定出的需要调用的第二摄像头的数量。通过任意数量的确定的第二摄像头以拍摄主体为焦点对待拍摄场景进行拍摄及图像合成处理的方法参照上述以四个确定的第二摄像头为例的步骤。
本申请实施例中,电子设备在对拍摄得到的若干个第二图像与基底图像进行图像合成处理之后,将合成得到的合成图像设为图像拍摄请求的成像图像,至此,电子设备即完成了对应接收到的图像拍摄请求一次完整拍摄操作。
比如,请继续参照图7,图7由此示出了基底图像到成像图像的清晰度变化,其中,X轴表示由图像边缘区域到中心区域,再由中心区域到边缘区域的位置变化,Y轴表示跟随X轴变化的清晰度,可以看出,在基底图像中,中心区域的清晰度最高,随着中心区域向边缘区域的扩散,清晰度逐渐降低,且变化较为剧烈,而在成像图像中,中心区域的清晰度最高,且相较于基底图像,成像图像的边缘区域的清晰度被整体提高,随着中心区域向边缘区域的扩散,虽然清晰度逐渐降低,且变化更为平滑,使得成像图像的整体图像质量得以提高。
由上可知,本申请实施例中,电子设备包括第一摄像头和多个第二摄像头,第二摄像头的拍摄区域与第一摄像头的拍摄区域的边缘部分重叠。电子设备通过接收对待拍摄场景的图像拍摄请求;基于图像拍摄请求,确定待拍摄场景中的拍摄主体;根据拍摄主体,确定需要调用的第二摄像头;通过第一摄像头以拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像;通过确定的第二摄像头以拍摄主体为焦点对待拍摄场景进行拍摄,并对确定的第二摄像头拍摄得到的图像与基底图像进行图像合成处理,得到图像拍摄请求的成像图像。由此,最终得到成像图像的边缘区域的清晰度得以提高,提高了整张成像图像的质量。
在一实施例中,确定待拍摄场景中的拍摄主体,包括:
(1)通过第一摄像头获取待拍摄场景的预览图像;
(2)在所述预览图像中获取待拍摄场景中各个对象的轮廓信息;
(3)将与预设轮廓相匹配的对象确定为拍摄主体。
其中,若识别出多个与预设轮廓相匹配的对象,则计算所述预览图像中多个与预设轮廓相匹配的对象包含的像素点个数,将所述与预设轮廓相匹配的对象中包含像素点个数最多的对象确定为拍摄主体。
在一实施例中,根据拍摄主体,确定需要调用的第二摄像头,包括:
将拍摄区域中包含所述拍摄主体的第二摄像头确定为需要调用的第二摄像头。
可选的,将拍摄区域中包含所述拍摄主体的第二摄像头确定为需要调用的第二摄像头之前,还可以确定待拍摄场景中的参考对象,将拍摄区域中包含所述拍摄主体的第二摄像头、包含所述参考对象的第二摄像头确定为需要调用的第二摄像头。
其中,如果把拍摄主体比作前景对象,那么参考对象即为背景对象,可以为待拍摄场景中除拍摄主体外的其他对象。待拍摄场景中拍摄主体的背景里的任意对象,都可以作为待拍摄场景中拍摄主体的参考对象。例如,当待拍摄场景为一头牛在山脚下吃草的场景时,用户想要重点拍摄牛,那么,牛可作为拍摄主体,山可作为参考对象。
例如,可以通过用户主动选择的方式确定待拍摄场景中的参考对象,用户操作电子设备启动拍摄类应用(比如电子设备的系统应用“相机”)拍摄成像之前,通过点击或者框选等方式在拍摄类应用的预览界面上直接选择出参考对象,可选的,确定待拍摄场景中的参考对象的步骤可以包括:在第一摄像头的预览图像中获取对参考对象聚焦的第二聚焦指令,将第二聚焦指令指向的对象确定为参考对象。
或者,可以由电子设备自动确定出参考对象。例如,获取待拍摄场景内各对象与电子设备的距离,比较待拍摄场景内各对象与电子设备的距离远近,将各对象中距离所述电子设备最远的对象确定为参考对象。其中,可通过任意方式来获取待拍摄场景内各对象与电子设备的距离进行比较。例如,双摄像头测距方式、结构光测距方式、飞行时间测距方式等,或者其他获取待拍摄场景内各对象与电子设备的距离的任何方式,在此不做任何限制。
可选的,在比较各对象与电子设备的距离远近之前,可以通过预览图像中像素坐标值与待拍摄场景中实际坐标值的映射关系将预览图像上的各个对象对应到待拍摄场景中,以实现测距。像素坐标为相机坐标系中的二维坐标,实际坐标为世界坐标系中的三维坐标,通过多个视角获取这两个坐标系间的平移向量以计算这两个坐标系之间的映射关系,从而确定出像素坐标值与实际坐标值的映射关系。
像素坐标值与实际坐标值的映射关系确定之后,就可以通过该映射关系,准确定位预览图像中的各个对象对应现实待拍摄场景中的实际对象。可选的,可以根据像素坐标值与实际坐标值的映射关系建立摄像机模型,也可以根据相机坐标系与世界坐标系的映射关系建立摄像机模型,将相应的映射关系放入摄像机模型中进行训练,或者通过多次学习,不断优化摄像机模型中的映射关系。
此外,还可以对待拍摄场景的预览图像进行灰度化处理,例如,取相邻两张预览图像进行灰度化处理,得到灰度预览图像,可以通过第一摄像头获取至少两张相邻的预览图像,计算相邻两张预览图像中同一对象的灰度化差值,若灰度化差值小于预设阈值,则将该对象确定为参考对象。
确定出待拍摄场景中的拍摄主体和参考对象之后,将将拍摄区域中包含所述拍摄主体的第二摄像头、包含所述参考对象的第二摄像头确定为需要调用的第二摄像头,通过所述第一摄像头分别以所述拍摄主体及参考对象为焦点对待拍摄场景进行拍摄,将拍摄得到的图像进行图像合成处理,得到基底图像,通过所述确定的第二摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,并对所述确定的第二摄像头拍摄得到的图像与所述基底图像进行图像合成处理,得到所述图像拍摄请求的成像图像。
在一实施例中,电子设备还包括覆盖第一摄像头和/或第二摄像头的电致变色组件,“通过所述确定的第二摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄”之前,还包括:
将所述确定的第二摄像头上覆盖的电致变色组件切换至透明状态;
“得到图像拍摄请求的成像图像”之后,还包括:
将电致变色组件切换至着色状态,以隐藏所述确定的第二摄像头。
本申请实施例中,为了提升电子设备的完整性,还在第一摄像头和/或第二摄像头之上覆盖电致变色组件,从而在需要时利用电致变色组件对摄像头进行隐藏。
以下首先对电致变色组件的工作原理进行简单介绍。
电致变色是指材料的颜色/透明度在外加电场的作用下发生稳定、可逆的变化的现象。具有电致变色性能的材料可以称为电致变色材料。而本申请实施例中的电致变色组件,就是利用电致变色材料制成。
其中,电致变色组件可以包括层叠设置的两层导电层,以及位于两个导电层之间的变色层、电解质层、离子存储层。比如,电致变色组件的两个透明导电层之上未施加电压(或者说,电压为0V)时,该电致变色组件将呈透明状态,而当施加在其两个透明导电层之间的电压由0V变为3V时,该电致变色组件将呈黑色,当施加在其两个透明导电层之间的电压由3V变为-3V时,该电致变色组件将由黑色变为透明,等等。这样,利用电致变色组件颜色可调的特性,可以对第一摄像头和/或第二摄像头进行隐藏。
而在通过第一摄像头获取到基底图像,以及通过多个第二摄像头拍摄得到多个第二图像,并最终合成得到成像图像且退出启动的拍摄类应用之后,电子设备即将电致变色组件切换至着色状态,从而隐藏第一摄像头和/或第二摄像头。
比如,电子设备设置有同时覆盖全部第一摄像头和第二摄像头的电致变色组件,且电子设备设置有第一摄像头和第二摄像头的一面的颜色为黑色,则电子设备在未启动拍摄类应用时,保存电致变色组件处于黑色的着色状态,使得第一摄像头和第二摄像头被隐藏;而在启动拍摄类应用时,同步将第一摄像头上覆盖的电致变色组件切换至透明状态,使得电子设备能够通过第一摄像头获取预览图像以及进行拍摄;在确定出需要调用的第二摄像头之后和/或在通过所述确定的第二摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄之前,将确定的第二摄像头上覆盖的电致变色组件切换至透明状态,使得电子设备能够通过第二摄像头进行拍摄;而在最终合成得到成像图像且退出启动的拍摄类应用之后,电子设备将电致变色组件切换至黑色的着色状态,使得第一摄像头和第二摄像头再次被隐藏。
请参照图8,图8为本申请实施例提供的设备成像方法的另一种流程示意图,该设备成像方法应用于本申请实施例提供的电子设备,如该电子设备包括两个第一类型的第一摄像头以及四个第二类型的第二摄像头,第一摄像头的拍摄区域包括第二摄像头的拍摄区域,第二摄像头的拍摄区域与其中一个第一摄像头的拍摄区域的边缘部分重叠,该设备成像方法的流程可以包括:
201、电子设备接收对待拍摄场景的图像拍摄请求。
请一并参照图3和图9,第一摄像头为标准类型的摄像头,或者说视场角为45度左右的摄像头,第二摄像头为长焦类型的摄像头,或者说视场角为40度以内的摄像头。电子设备包括两个第一摄像头和四个第二摄像头,分别为第一摄像头E、第一摄像头F、第二摄像头A、第二摄像头B、第二摄像头C以及第二摄像头D,各第二摄像头的轴线朝向第一摄像头E的轴线倾斜并相交,使得第二摄像头A的拍摄区域a对应第一摄像头E的拍摄区域的左上角,第二摄像头B的拍摄区域b对应第一摄像头E的拍摄区域的右上角,第二摄像头C的拍摄区域c对应第一摄像头E的拍摄区域的左下角,第二摄像头D的拍摄区域d对应第一摄像头E的拍摄区域的右下角,由此,第二摄像头的拍摄区域与第一摄像头E的拍摄区域的边缘部分重叠,且任意两个第二摄像头之间的重叠拍摄区域(即两个第二摄像头拍摄区域之间的重叠区域)都包含在第一摄像头E的拍摄区域中,第一摄像头F的拍摄区域可以与第一摄像头F的拍摄区域相同。
本申请实施例中,图像拍摄请求可由用户直接输入,用于指示电子设备对待拍摄场景进行拍摄。其中,待拍摄场景即电子设备在接收到输入的图像拍摄请求时,第一摄像头所对准的场景,包括但不限于人、物以及景等。
比如,用户在操作电子设备启动拍摄类应用(比如电子设备的系统应用“相机”),并通过移动电子设备,使得电子设备的第一摄像头以及第二摄像头对准待拍摄场景之后,可以通过点击“相机”预览界面提供的“拍照”按键(虚拟按键)向电子设备输入图像拍摄请求,如图4所示。或者,也可以点击设备中具有“拍照”功能的实体按键,向电子设备输入图像拍摄请求。
又比如,用户在操作电子设备启动拍摄类应用,并通过移动电子设备,使得电子设备的第一摄像头以及第二摄像头对准待拍摄场景之后,可以说出语音指令“拍照”,向电子设备输入图像拍摄请求。或者,在电子设备内预先设置一些拍照手势,当待拍摄场景中出现该手势时,向电子设备输入图像拍摄请求。
202、电子设备确定待拍摄场景中的拍摄主体和参考对象。
电子设备确定待拍摄场景中的拍摄主体和参考对象的步骤,可以包括:
(1)通过第一摄像头获取所述待拍摄场景的预览图像。
比如,用户在操作电子设备启动拍摄类应用(比如电子设备的系统应用“相机”)时,将相机拍摄方向对准待拍摄场景,通过“相机”预览界面实时获取待拍摄场景的预览图像,获取到的预览图像可以一帧帧地缓存在电子设备中。
在一实施例中,电子设备的第一摄像头和/或第二摄像头上覆盖有电致变色组件,电致变色组件具有透明状态和黑色的着色状态,当第一摄像头和/或第二摄像头未被调用时,第一摄像头和/或第二摄像头上覆盖的电致变色组件处于黑色的着色状态,以隐藏第一摄像头和/或第二摄像头。在通过第一摄像头获取待拍摄场景的预览图像之前,将第一摄像头上覆盖的电致变色组件切换至透明状态。其中,第一摄像头可以有一个,也可以有多个,在此对第一摄像头的数量不做限定。
(2)在所述预览图像中获取所述待拍摄场景中各个对象的轮廓信息。
其中,首先对预览图像进行灰度化处理,得到灰度预览图像。例如,使用彩色转灰度公式:Gray=R*0.299+G*0.587+B*0.114,将预览图像中每个RGB(red green blue,三原色光)像素转为灰度值,其中,R、G、B分别代表RGB各分量(分别对应三原色光红色、绿色、蓝色)的值。
得到灰度预览图像后,可以使用高斯滤波器对灰度预览图像进行高斯模糊处理,整体降低灰度预览图像的图像噪声,降低灰度预览图像的细节层次,以便更准确地计算灰度预览图像的图像梯度值及边缘幅值。其中,可以使用各种图像处理算子计算图像梯度值,例如,罗伯特算子(Roberts operator)、普鲁伊特算子(Prewitt operator)、索贝尔算子(Sobel operator)等。然后,根据图像梯度,获取图像边缘幅值与角度。
在获取灰度预览图像的边缘幅值与角度之后,对灰度预览图像进行非最大信号压制处理,实现边缘细化,取出无用边缘信息,进一步减少灰度预览图像的边缘像素。
最后,通过双阈值(Fuzzy threshold)边缘连接处理,整体上保留强边缘舍弃弱边缘,并对获取的边缘进行连接处理。非最大信号压制以后,输出的幅值如果直接显示结果,可能会有少量的非边缘像素被包含到结果中,所以要通过选取阈值进行取舍,并且,如果选择的阈值较小,起不到过滤非边缘的作用;如果选择的阈值过大,容易丢失真正的图像边缘。因而,采用双阈值边缘方法实现边缘选取及边缘连接。例如,设置一个高阈值和一个低阈值,其中高阈值高于低阈值,对于任意边缘像素:
如果边缘像素的梯度值高于高阈值,则将其标记为强边缘像素;
如果边缘像素的梯度值小于高阈值并且大于低阈值,则将其标记为弱边缘像素;
如果边缘像素的梯度值小于低阈值,则抑制该边缘像素,例如,将该边缘像素丢弃。
其中,首先将强边缘像素被确定为边缘,因为它们是从图像中的真实边缘中提取出来的。然而,对于弱边缘像素,可能是从真实边缘提取的,也可能是因噪声或颜色变化引起的。由真实边缘引起的弱边缘像素将连接到强边缘像素,而因噪声或颜色变化引起的噪声响应未连接。因而,对于弱边缘像素,若该弱边缘像素能连接到强边缘像素,则可保留该弱边缘像素。例如,查看弱边缘像素及其8个邻域像素,只要其中一个为强边缘像素,则该弱边缘点就可以保留为真实的边缘。
通过对获取的边缘进行连接处理,就可以最终在预览图像中进行图像边缘提取,获取待拍摄场景中各个对象的轮廓信息。
(3)将与预设主体轮廓相匹配的对象确定为拍摄主体,将与预设参考轮廓相匹配的对象确定为参考对象。
在电子设备中,可以预先存储多个预设主体轮廓及预设参考轮廓,在获取待拍摄场景中各个对象的轮廓信息之后,将这些轮廓信息与预设主体轮廓及预设参考轮廓相匹配。当待拍摄场景中的轮廓信息匹配到预设主体轮廓时,识别待拍摄场景中与预设主体轮廓相匹配的对象,将其确定为拍摄主体;当待拍摄场景中的轮廓信息匹配到预设参考轮廓时,识别待拍摄场景中与预设参考轮廓相匹配的对象,将其确定为拍摄主体。
例如,常见的拍摄主体有人、动物、食物等,常见的参考对象有山、树、建筑物等。可以预先存储人、动物、食物的轮廓信息作为预设主体轮廓,预先存储山、树、建筑物的轮廓信息作为背景轮廓。当电子设备在待拍摄场景中识别到人和山时,自动将人作为拍摄主体,将山作为参考对象。
另外,预设主体轮廓及预设参考轮廓中,也可以包含同一对象的轮廓信息。例如,建筑物即可以作为拍摄主体,也可以作为参考对象。当识别出待拍摄场景中的某个对象即与预设主体轮廓相匹配,又与预设参考轮廓相匹配时,可以比较该对象与待拍摄场景中识别出的其他拍摄主体或参考对象与电子设备的距离,从而确定将该对象作为拍摄主体还是参考对象。例如,在待拍摄场景中,已识别出一个拍摄主体,此时又识别到一个即与预设主体轮廓相匹配,又与预设参考轮廓相匹配的待确定对象,通过比较电子设备与该拍摄主体及待确定对象的距离远近,将二者中更近的作为拍摄主体,将二者中更远的作为参考对象。若该待确定对象比该拍摄主体距离电子设备更近,则将该待确定对象作为新的拍摄主体,而将原拍摄主体作为新的参考对象。
在一实施例中,为每一个预设拍摄主体及预设参考对象关联对应的标签,当待拍摄场景中识别出与预设拍摄主体及预设背景相匹配的对象时,获取该对象对应的标签,并跳转到对应的拍摄模式。例如,在待拍摄场景中识别出拍摄主体“人”时,获取对应标签“人”,并跳转到人像拍摄模式;在待拍摄场景中识别出拍摄主体“食物”时,获取对应标签“食物”,并跳转到美食拍摄模式,等等,此处不一一举例。
可选的,若识别出多个与预设主体轮廓或背景轮廓相匹配的对象,则计算预览图像中多个与预设主体轮廓或背景轮廓相匹配的对象包含的像素点个数,将与预设主体轮廓相匹配的对象中包含像素点个数最多的对象确定为拍摄主体,将与预设参考轮廓相匹配的对象中包含像素点最少的对象确定为参考对象。
203、电子设备将拍摄区域中包含拍摄主体的第二摄像头、包含参考对象的第二摄像头确定为需要调用的第二摄像头。
请一并参阅图3和图5,图5为本申请实施例中第二摄像头与第一摄像头的拍摄区域的另一对比示意图。电子设备可以包括一个第一摄像头和四个第二摄像头,分别为第二摄像头A、第二摄像头B、第二摄像头C以及第二摄像头D,各第二摄像头的轴线朝向第一摄像头的轴线倾斜并相交。例如,第二摄像头A的拍摄区域a对应第一摄像头的拍摄区域的左上角,第二摄像头B的拍摄区域b对应第一摄像头的拍摄区域的右上角,第二摄像头C的拍摄区域c对应第一摄像头的拍摄区域的左下角,第二摄像头D的拍摄区域d对应第一摄像头的拍摄区域的右下角,由此,第二摄像头的拍摄区域与第一摄像头的拍摄区域的边缘部分重叠。拍摄区域ab为第二摄像头A的拍摄区域a与第二摄像头B的拍摄区域b的重叠区域,拍摄区域ac为第二摄像头A的拍摄区域a与第二摄像头C的拍摄区域c的重叠区域,拍摄区域bc为第二摄像头B的拍摄区域b与第二摄像头C的拍摄区域c的重叠区域,拍摄区域cd为第二摄像头C的拍摄区域c与第二摄像头D的拍摄区域d的重叠区域,拍摄区域abcd为第二摄像头A、B、CD的拍摄区域a、b、c、d的共同重叠区域。
在一实施例中,确定出待拍摄场景中的拍摄主体和参考对象之后,将拍摄区域中包含拍摄主体的第二摄像头、包含参考对象的第二摄像头确定为需要调用的第二摄像头。例如,当拍摄主体位于重叠拍摄区域ab中,背景对象位于拍摄区域ac中时,将拍摄区域中包含拍摄主体和/或参考对象的第二摄像头A、第二摄像头B和第二摄像头C确定为需要调用的第二摄像头;当拍摄主体位于重叠拍摄区域ac中,背景对象位于拍摄区域ad中时,将拍摄区域中包含拍摄主体和/或参考对象的第二摄像头A、第二摄像头B和第二摄像头D确定为需要调用的第二摄像头;等等,此处不一一举例。
对某个第二摄像头而言,若该第二摄像头的拍摄区域中包含拍摄主体,则调用该第二摄像头;若该第二摄像头的拍摄区域中包含参考对象,则调用该第二摄像头;若该第二摄像头的拍摄区域中同时包含拍摄主体和参考对象,则调用该第二摄像头;若该第二摄像头的拍摄区域中不包含拍摄主体要不包含参考对象,则不调用该第二摄像头。
通过在待拍摄场景中确定出参考对象,不但根据拍摄主体确定出部分第二摄像头,还根据参考对象确定出部分摄像头。如此一来,第二摄像头既能对拍摄主体拍摄,也能对参考对象进行拍摄。
204、电子设备通过第一摄像头分别以拍摄主体及参考对象为焦点对待拍摄场景进行拍摄,对拍摄得到的图像进行图像合成处理,得到基底图像。
比如,电子设备在接收到用户通过语音方式输入的对待拍摄场景的图像拍摄请求时,即根据该图像拍摄请求,首先通过第一摄像头对待拍摄场景进行拍摄。其中,第一摄像头可以只有一个,通过该第一摄像头拍摄以拍摄主体为焦点的图像,也通过该第一摄像头拍摄以参考对象为焦点的图像,即通过同一个第一摄像头分别拍摄以拍摄主体及参考对象为焦点的图像。或者,第一摄像头可以有两个,通过两个第一摄像头中的一个第一摄像头以拍摄主体为焦点进行拍摄,通过另一个第一摄像头以参考对象为焦点进行拍摄。
拍摄得到至少一张以拍摄主体为焦点的图像以及至少一张以参考对象为焦点的第一图像,将以拍摄主体为焦点的第一图像及以参考对象为焦点的第一图像进行图像合成处理,并将合成之后的图像设为基底图像。例如,在以拍摄主体为焦点的第一图像中截取拍摄主体,在以背景景对象为焦点的第一图像中提出拍摄主体,与前者截取的拍摄主体进行合成,得到基底图像。又例如,在以拍摄主体为焦点的第一图像及以参考对象为焦点的第一图像中分别选择同一位置清晰度高的像素块进行合成,得到基底图像。通常来说,图像越清晰,其对比度越高。因此,可以使用图像的对比度来衡量图像的清晰度。
205、电子设备将确定的第二摄像头上覆盖的电致变色组件切换至透明状态。
在第二摄像头未被确定调用时,第二摄像头上覆盖的电致变色组件处于黑色的着色状态。在确定出第二摄像头后,电子设备将确定出的需要调用的第二摄像头上覆盖的电致变色组件由黑色的着色状态切换至透明状态,便于第二摄像头进行后续的拍摄。
206、电子设备通过确定的第二摄像头以拍摄主体和/或参考对象为焦点对待拍摄场景进行拍摄,并对确定的第二摄像头拍摄得到的图像与基底图像进行图像合成处理,得到图像拍摄请求的成像图像。
在一实施例中,电子设备可以根据拍摄主体的位置,调整确定的第二摄像头的拍摄角度,使得拍摄主体位于所有确定的第二摄像头共同重叠的拍摄区域,从而以拍摄主体为焦点对待拍摄场景进行拍摄,得到以拍摄主体为焦点的第二图像。将拍摄得到的以拍摄主体为焦点的第二图像与基底图像进行图像合成处理,得到图像拍摄请求的成像图像。
在一实施例中,在确定出拍摄主体和参考对象之后,电子设备可以根据拍摄主体和参考对象的位置,调整确定的第二摄像头的拍摄角度,分别以拍摄主体和/或参考对象为焦点对待拍摄场景进行拍摄,得到以拍摄主体为焦点的第二图像和以参考对象为焦点的第二图像。将拍摄得到的以拍摄主体和/或参考对象为焦点的第二图像与基底图像进行图像合成处理,得到图像拍摄请求的成像图像。
207、电子设备将透明状态的电致变色组件切换至着色状态。
为了便于拍摄,被调用的第一摄像头和第二摄像头上覆盖的电致变色组件在拍摄前被切换至透明状态。得到图像拍摄请求的成像图像之后,将第一摄像头和第二摄像头上覆盖的电致变色组件由透明状态切换至着色状态。由此,在摄像头不被调用时可以将摄像头进行隐藏,而只有当摄像头被确定后(被确定为需要调用的摄像头后),才将摄像头显现出来,如此,就可以保证电子设备的外观上隐藏摄像头,达到美观的效果。
由上可知,本申请实施例中,电子设备包括第一摄像头和多个第二摄像头,第二摄像头的拍摄区域与第一摄像头的拍摄区域的边缘部分重叠。电子设备通过接收对待拍摄场景的图像拍摄请求;基于图像拍摄请求,确定待拍摄场景中的拍摄主体;根据拍摄主体,确定需要调用的第二摄像头;通过第一摄像头以拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像;通过确定的第二摄像头以拍摄主体为焦点对待拍摄场景进行拍摄,并对确定的第二摄像头拍摄得到的图像与基底图像进行图像合成处理,得到图像拍摄请求的成像图像。由此,最终得到成像图像的边缘区域的清晰度得以提高,提高了整张成像图像的质量。
本申请实施例还提供一种设备成像装置。请参照图10,图10为本申请实施例提供的设备成像装置的结构示意图。其中该设备成像装置应用于电子设备,该电子设备包括图像传感器,该图像传感器具有第一工作模式和第二工作模式,该设备成像装置包括请求接收模块301、第一确定模块302、、第二确定模块303、第一获取模块304以及第二获取模块305,如下:
请求接受模块301,用于接收对待拍摄场景的图像拍摄请求;
第一确定模块302,用于基于所述图像拍摄请求,确定所述待拍摄场景中的拍摄主体;
第一确定模块303,用于根据所述拍摄主体,确定需要调用的第二摄像头;
第一获取模块304,用于通过所述第一摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像;
第二获取模块305,用于通过所述确定的第二摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,并对所述确定的第二摄像头拍摄得到的图像与所述基底图像进行图像合成处理,得到所述图像拍摄请求的成像图像。
在一实施例中,在确定所述待拍摄场景中的拍摄主体时,第一确定模块302用于:
通过第一摄像头获取所述待拍摄场景的预览图像;
在所述预览图像中获取所述待拍摄场景中各个对象的轮廓信息;
将与预设轮廓相匹配的对象确定为拍摄主体。
其中,若识别出多个与预设轮廓相匹配的对象,则计算预览图像中多个与预设轮廓相匹配的对象包含的像素点个数,将与预设轮廓相匹配的对象中包含像素点个数最多的对象确定为拍摄主体。
在一实施例中,根据所述拍摄主体,确定需要调用的第二摄像头时,第二确定模块303用于:
将拍摄区域中包含所述拍摄主体的第二摄像头确定为需要调用的第二摄像头。
在一实施例中,在根据所述拍摄主体,确定需要调用的第二摄像头时,第二确定模块303还用于:
确定所述待拍摄场景中的参考对象;
将拍摄区域中包含所述拍摄主体的第二摄像头、包含所述参考对象的第二摄像头确定为需要调用的第二摄像头。
相应的,在通过所述第一摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像时,第一获取模块304还用于:
通过所述第一摄像头分别以所述拍摄主体及参考对象为焦点对待拍摄场景进行拍摄,将拍摄得到的图像进行图像合成处理,得到基底图像。
在一实施例中,电子设备还包括覆盖第二摄像头的电致变色组件,设备成像装置还包括电致变色模块,用于:
在第二获取模块305在以所述拍摄主体为焦点对待拍摄场景进行拍摄之前,将所述确定的第二摄像头上覆盖的电致变色组件切换至透明状态。
在一实施例中,第一摄像头与第二摄像头共用图像传感器。
应当说明的是,本申请实施例提供的设备成像装置与上文实施例中的设备成像方法属于同一构思,在设备成像装置上可以运行设备成像方法实施例中提供的任一方法,其具体实现过程详见设备成像方法实施例,此处不再赘述。
本申请实施例提供一种计算机可读的存储介质,其上存储有计算机程序,当其存储的计算机程序在计算机上执行时,使得计算机执行如本申请实施例提供的设备成像方法中的步骤。其中,存储介质可以是磁碟、光盘、只读存储器(Read Only Memory,ROM,)或者随机存取器(Random Access Memory,RAM)等。
本申请实施例还提供一种电子设备,请参照图11,电子设备包括处理器401、存储器402、第一类型的第一摄像头403以及多个第二类型的第二摄像头404。其中,处理器401与存储器402、第一摄像头403以及第二摄像头404电性连接。
处理器401是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或加载存储在存储器402内的计算机程序,以及调用存储在存储器402内的数据,执行电子设备的各种功能并处理数据。
存储器402可用于存储软件程序以及模块,处理器401通过运行存储在存储器402的计算机程序以及模块,从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的计算机程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器402还可以包括存储器控制器,以提供处理器401对存储器402的访问。
第一摄像头403为标准类型的摄像头,或者说视场角为45度左右的摄像头。
第二摄像头404为长焦类型的摄像头,或者说视场角为40度以内的摄像头。
在本申请实施例中,电子设备中的处理器401会按照如下的步骤,将一个或一个以上的计算机程序的进程对应的指令加载到存储器402中,并由处理器401运行存储在存储器402中的计算机程序,从而实现各种功能,如下:
接收对待拍摄场景的图像拍摄请求;
基于所述图像拍摄请求,确定所述待拍摄场景中的拍摄主体;
根据所述拍摄主体,确定需要调用的第二摄像头;
通过所述第一摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像;
通过所述确定的第二摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,并对所述确定的第二摄像头拍摄得到的图像与所述基底图像进行图像合成处理,得到所述图像拍摄请求的成像图像。
请参照图12,图12为本申请实施例提供的电子设备的另一结构示意图,与图11所示电子设备的区别在于,电子设备还包括输入单元405和输出单元406等组件。
其中,输入单元405可用于接收输入的数字、字符信息或用户特征信息(比如指纹),以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入等。
输出单元406可用于显示由用户输入的信息或提供给用户的信息,如屏幕。
在本申请实施例中,电子设备中的处理器401会按照如下的步骤,将一个或一个以上的计算机程序的进程对应的指令加载到存储器402中,并由处理器401运行存储在存储器402中的计算机程序,从而实现各种功能,如下:
接收对待拍摄场景的图像拍摄请求;
基于所述图像拍摄请求,确定所述待拍摄场景中的拍摄主体;
根据所述拍摄主体,确定需要调用的第二摄像头;
通过所述第一摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像;
通过所述确定的第二摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,并对所述确定的第二摄像头拍摄得到的图像与所述基底图像进行图像合成处理,得到所述图像拍摄请求的成像图像。
在一实施例中,在确定所述待拍摄场景中的拍摄主体时,处理器401还执行:
通过第一摄像头获取所述待拍摄场景的预览图像;
在所述预览图像中获取所述待拍摄场景中各个对象的轮廓信息;
将与预设轮廓相匹配的对象确定为拍摄主体。
其中,若识别出多个与预设轮廓相匹配的对象,则计算预览图像中多个与预设轮廓相匹配的对象包含的像素点个数,将与预设轮廓相匹配的对象中包含像素点个数最多的对象确定为拍摄主体。
在一实施例中,根据所述拍摄主体,确定需要调用的第二摄像头时,处理器401还执行:
将拍摄区域中包含所述拍摄主体的第二摄像头确定为需要调用的第二摄像头。
在一实施例中,在根据所述拍摄主体,确定需要调用的第二摄像头时,处理器401还执行:
确定所述待拍摄场景中的参考对象;
将拍摄区域中包含所述拍摄主体的第二摄像头、包含所述参考对象的第二摄像头确定为需要调用的第二摄像头。
相应的,在通过所述第一摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,得到基底图像时,处理器401还执行:
通过所述第一摄像头分别以所述拍摄主体及参考对象为焦点对待拍摄场景进行拍摄,将拍摄得到的图像进行图像合成处理,得到基底图像。
在一实施例中,电子设备还包括覆盖第二摄像头的电致变色组件,在以所述拍摄主体为焦点对待拍摄场景进行拍摄之前,处理器401还执行:
将所述确定的第二摄像头上覆盖的电致变色组件切换至透明状态。
应当说明的是,本申请实施例提供的电子设备与上文实施例中的设备成像方法属于同一构思,在电子设备上可以运行设备成像方法实施例中提供的任一方法,其具体实现过程详见特征提取方法实施例,此处不再赘述。
需要说明的是,对本申请实施例的设备成像方法而言,本领域普通测试人员可以理解实现本申请实施例的设备成像方法的全部或部分流程,是可以通过计算机程序来控制相关的硬件来完成,计算机程序可存储于一计算机可读取存储介质中,如存储在电子设备的存储器中,并被该电子设备内的至少一个处理器执行,在执行过程中可包括如设备成像方法的实施例的流程。其中,的存储介质可为磁碟、光盘、只读存储器、随机存取记忆体等。
对本申请实施例的设备成像装置而言,其各功能模块可以集成在一个处理芯片中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中,存储介质譬如为只读存储器,磁盘或光盘等。
以上对本申请实施例所提供的一种设备成像方法、装置、存储介质及电子设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上,本说明书内容不应理解为对本申请的限制。
Claims (7)
1.一种设备成像方法,应用于电子设备,其特征在于,所述电子设备包括两个第一类型的第一摄像头和多个第二类型的第二摄像头,所述第二摄像头的拍摄区域与所述第一摄像头的拍摄区域的边缘部分重叠,所述设备成像方法包括:
接收对待拍摄场景的图像拍摄请求;
基于所述图像拍摄请求,确定所述待拍摄场景中的拍摄主体以及所述参考对象;
获取所述拍摄主体与电子设备的距离;
当所述拍摄主体与电子设备的距离小于预设距离时,确定需要调用的第一摄像头的数量为一个,通过所述确定的第一摄像头分别以所述拍摄主体及参考对象为焦点对待拍摄场景进行拍摄,对所述确定的第一摄像头拍摄得到的图像进行图像合成处理,得到基底图像;当所述拍摄主体与电子设备的距离大于预设距离时,确定需要调用的第一摄像头的数量为两个,通过所述确定的第一摄像头中的一个第一摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,通过另一个第一摄像头以所述参考对象为焦点对待拍摄场景进行拍摄,对所述确定的第一摄像头拍摄得到的图像进行图像合成处理,得到基底图像;
将拍摄区域中包含所述拍摄主体的第二摄像头以及拍摄区域中包含所述参考对象的第二摄像头确定为需要调用的第二摄像头,通过所述确定的第二摄像头分别以所述拍摄主体及参考对象为焦点对待拍摄场景进行拍摄,并对所述确定的第二摄像头拍摄得到的图像与所述基底图像进行图像合成处理,得到所述图像拍摄请求的成像图像。
2.根据权利要求1所述的设备成像方法,其特征在于,所述确定所述待拍摄场景中的拍摄主体,包括:
通过第一摄像头获取所述待拍摄场景的预览图像;
在所述预览图像中获取所述待拍摄场景中各个对象的轮廓信息;
将与预设轮廓相匹配的对象确定为拍摄主体。
3.根据权利要求2所述的设备成像方法,其特征在于,所述将与预设轮廓相匹配的对象确定为拍摄主体,包括:
若识别出多个与预设轮廓相匹配的对象,则计算所述预览图像中多个与预设轮廓相匹配的对象包含的像素点个数;
将所述与预设轮廓相匹配的对象中包含像素点个数最多的对象确定为拍摄主体。
4.根据权利要求1-3任一项所述的设备成像方法,其特征在于,所述电子设备还包括覆盖所述第二摄像头的电致变色组件,所述通过所述确定的第二摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄之前,还包括:
将所述确定的第二摄像头上覆盖的电致变色组件切换至透明状态。
5.一种设备成像装置,应用于电子设备,其特征在于,所述电子设备包括两个第一类型的第一摄像头和多个第二类型的第二摄像头,所述第二摄像头的拍摄区域与所述第一摄像头的拍摄区域的边缘部分重叠,所述设备成像方法包括:
请求接受模块,用于接收对待拍摄场景的图像拍摄请求;
第一确定模块,用于基于所述图像拍摄请求,确定所述待拍摄场景中的拍摄主体以及所述参考对象;
第一获取模块,用于获取所述拍摄主体与电子设备的距离;当所述拍摄主体与电子设备的距离小于预设距离时,确定需要调用的第一摄像头的数量为一个,通过所述确定的第一摄像头分别以所述拍摄主体及参考对象为焦点对待拍摄场景进行拍摄,对所述确定的第一摄像头拍摄得到的图像进行图像合成处理,得到基底图像;当所述拍摄主体与电子设备的距离大于预设距离时,确定需要调用的第一摄像头的数量为两个,通过所述确定的第一摄像头中的一个第一摄像头以所述拍摄主体为焦点对待拍摄场景进行拍摄,通过另一个第一摄像头以所述参考对象为焦点对待拍摄场景进行拍摄,对所述确定的第一摄像头拍摄得到的图像进行图像合成处理,得到基底图像;
第二确定模块,用于将拍摄区域中包含所述拍摄主体的第二摄像头以及拍摄区域中包含所述参考对象的第二摄像头确定为需要调用的第二摄像头;
第二获取模块,用于通过所述确定的第二摄像头分别以所述拍摄主体及参考对象为焦点对待拍摄场景进行拍摄,并对所述确定的第二摄像头拍摄得到的图像与所述基底图像进行图像合成处理,得到所述图像拍摄请求的成像图像。
6.一种存储介质,其上存储有计算机程序,其特征在于,当所述计算机程序在计算机上运行时,使得所述计算机执行如权利要求1至4任一项所述的设备成像方法。
7.一种电子设备,包括处理器、存储器、两个第一类型的第一摄像头和多个第二类型的第二摄像头,所述第二摄像头的拍摄区域与所述第一摄像头的拍摄区域的边缘部分重叠,所述存储器储存有计算机程序,其特征在于,所述处理器通过调用所述计算机程序,执行如权利要求1至4任一项所述的设备成像方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910578473.2A CN110312075B (zh) | 2019-06-28 | 2019-06-28 | 设备成像方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910578473.2A CN110312075B (zh) | 2019-06-28 | 2019-06-28 | 设备成像方法、装置、存储介质及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110312075A CN110312075A (zh) | 2019-10-08 |
CN110312075B true CN110312075B (zh) | 2021-02-19 |
Family
ID=68078607
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910578473.2A Active CN110312075B (zh) | 2019-06-28 | 2019-06-28 | 设备成像方法、装置、存储介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110312075B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111787224B (zh) * | 2020-07-10 | 2022-07-12 | 深圳传音控股股份有限公司 | 图像的获取方法、终端设备和计算机可读存储介质 |
CN112532886B (zh) * | 2020-11-30 | 2022-06-10 | 深圳创维新世界科技有限公司 | 全景拍摄方法、装置及计算机可读存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104853091A (zh) * | 2015-04-30 | 2015-08-19 | 广东欧珀移动通信有限公司 | 一种拍照的方法及移动终端 |
CN104937921A (zh) * | 2013-12-06 | 2015-09-23 | 华为终端有限公司 | 一种终端及图像处理方法、图像采集方法 |
CN107749944A (zh) * | 2017-09-22 | 2018-03-02 | 华勤通讯技术有限公司 | 一种拍摄方法及装置 |
CN109040570A (zh) * | 2018-10-26 | 2018-12-18 | Oppo(重庆)智能科技有限公司 | 电子设备的摄像头组件、闪光灯组件及电子设备 |
CN109379528A (zh) * | 2018-12-20 | 2019-02-22 | Oppo广东移动通信有限公司 | 成像方法、成像装置、电子装置及介质 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9374514B2 (en) * | 2013-10-18 | 2016-06-21 | The Lightco Inc. | Methods and apparatus relating to a camera including multiple optical chains |
CN107239205A (zh) * | 2017-05-03 | 2017-10-10 | 努比亚技术有限公司 | 一种拍照方法、移动终端及存储介质 |
CN108900738B (zh) * | 2018-05-31 | 2021-01-15 | Oppo(重庆)智能科技有限公司 | 拍摄装置及电子设备 |
CN109729266A (zh) * | 2018-12-25 | 2019-05-07 | 努比亚技术有限公司 | 一种图像拍摄方法、终端及计算机可读存储介质 |
CN109743552A (zh) * | 2019-01-17 | 2019-05-10 | 宇龙计算机通信科技(深圳)有限公司 | 一种对象监控方法、装置、服务器及存储介质 |
-
2019
- 2019-06-28 CN CN201910578473.2A patent/CN110312075B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104937921A (zh) * | 2013-12-06 | 2015-09-23 | 华为终端有限公司 | 一种终端及图像处理方法、图像采集方法 |
CN104853091A (zh) * | 2015-04-30 | 2015-08-19 | 广东欧珀移动通信有限公司 | 一种拍照的方法及移动终端 |
CN107749944A (zh) * | 2017-09-22 | 2018-03-02 | 华勤通讯技术有限公司 | 一种拍摄方法及装置 |
CN109040570A (zh) * | 2018-10-26 | 2018-12-18 | Oppo(重庆)智能科技有限公司 | 电子设备的摄像头组件、闪光灯组件及电子设备 |
CN109379528A (zh) * | 2018-12-20 | 2019-02-22 | Oppo广东移动通信有限公司 | 成像方法、成像装置、电子装置及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN110312075A (zh) | 2019-10-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11756223B2 (en) | Depth-aware photo editing | |
CN110166680B (zh) | 设备成像方法、装置、存储介质及电子设备 | |
JP6730690B2 (ja) | シーン内に存在する不要なオブジェクトの除去に基づくシーンの画像の動的生成 | |
KR102187146B1 (ko) | 자동 조정가능 텔레 시야(fov)를 갖는 듀얼-애퍼처 줌 디지털 카메라 | |
CN110290324B (zh) | 设备成像方法、装置、存储介质及电子设备 | |
CN109615703B (zh) | 增强现实的图像展示方法、装置及设备 | |
CN110213493B (zh) | 设备成像方法、装置、存储介质及电子设备 | |
WO2015180659A1 (zh) | 图像处理方法和图像处理装置 | |
CN110677621B (zh) | 摄像头调用方法、装置、存储介质及电子设备 | |
CN110300264B (zh) | 图像处理方法、装置、移动终端以及存储介质 | |
CN109565551B (zh) | 对齐于参考帧合成图像 | |
CN110213492B (zh) | 设备成像方法、装置、存储介质及电子设备 | |
CN112672139A (zh) | 投影显示方法、装置及计算机可读存储介质 | |
CN109688321B (zh) | 电子设备及其图像显示方法、具有存储功能的装置 | |
WO2011014421A2 (en) | Methods, systems, and computer-readable storage media for generating stereoscopic content via depth map creation | |
CN110290299B (zh) | 成像方法、装置、存储介质及电子设备 | |
CN110312075B (zh) | 设备成像方法、装置、存储介质及电子设备 | |
CN110278366B (zh) | 一种全景图像虚化方法、终端及计算机可读存储介质 | |
Chang et al. | Panoramic human structure maintenance based on invariant features of video frames | |
CN110177216B (zh) | 图像处理方法、装置、移动终端以及存储介质 | |
CN106878606B (zh) | 一种基于电子设备的图像生成方法和电子设备 | |
CN115393182A (zh) | 图像处理方法、装置、处理器、终端及存储介质 | |
CN115134532A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
US20220343529A1 (en) | Image signal processing based on virtual superimposition | |
CN110545375B (zh) | 图像处理方法、装置、存储介质及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |