CN108712608B - 终端设备拍摄方法和装置 - Google Patents

终端设备拍摄方法和装置 Download PDF

Info

Publication number
CN108712608B
CN108712608B CN201810468308.7A CN201810468308A CN108712608B CN 108712608 B CN108712608 B CN 108712608B CN 201810468308 A CN201810468308 A CN 201810468308A CN 108712608 B CN108712608 B CN 108712608B
Authority
CN
China
Prior art keywords
black
image
camera
white
color
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810468308.7A
Other languages
English (en)
Other versions
CN108712608A (zh
Inventor
白剑
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810468308.7A priority Critical patent/CN108712608B/zh
Publication of CN108712608A publication Critical patent/CN108712608A/zh
Application granted granted Critical
Publication of CN108712608B publication Critical patent/CN108712608B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images

Abstract

本申请公开了一种终端设备拍摄方法和装置,其中,终端设备的拍摄模组包括:长焦彩色摄像头、广角彩色摄像头、以及至少一个黑白摄像头,拍摄方法包括:获取通过长焦彩色摄像头拍摄的第一彩色图像;获取通过广角彩色摄像头拍摄的第二彩色图像;获取通过黑白摄像头拍摄的黑白图像;对第一彩色图像、第二彩色图像以及黑白图像进行图像融合计算,生成目标合成图像。由此,提供了一种多摄像头的拍摄方法,满足了多种场景的拍摄需求,提高了拍摄质量。

Description

终端设备拍摄方法和装置
技术领域
本申请涉及终端设备拍摄技术领域,尤其涉及一种终端设备拍摄方法和装置。
背景技术
双摄像头已经越来越多地应用于移动终端设备上,相关技术中的双摄像头,往往采用长焦镜头和广角镜头。由长焦镜头用来拍摄照片,由广角镜头用来辅助计算照片的深度信息,以便进行后续的图像虚化处理。
但是,相关技术中的双摄像头在亮度较高,光线较高的环境,成像效果比较好,但在暗光环境下,成像效果就比较差。
申请内容
本申请旨在至少在一定程度上解决相关技术中的技术问题之一。
为此,本申请提出一种终端设备拍摄方法和装置,以提高暗光环境下,摄像模组的成像效果。
为达上述目的,本申请第一方面实施例提出了一种终端设备拍摄方法,所述终端设备的后置拍摄模组包括:长焦彩色摄像头、广角彩色摄像头、以及至少一个黑白摄像头,所述拍摄方法包括:获取通过所述长焦彩色摄像头拍摄的第一彩色图像;获取通过所述广角彩色摄像头拍摄的第二彩色图像;获取通过所述黑白摄像头拍摄的黑白图像;对所述第一彩色图像、所述第二彩色图像以及所述黑白图像进行图像融合计算,生成目标合成图像。
为达上述目的,本申请第二方面实施例提出了一种终端设备拍摄装置,所述终端设备的后置拍摄模组包括:长焦彩色摄像头、广角彩色摄像头、以及至少一个黑白摄像头,所述拍摄装置包括:第一获取模块,用于获取通过所述长焦彩色摄像头拍摄的第一彩色图像;第二获取模块,用于获取通过所述广角彩色摄像头拍摄的第二彩色图像;第三获取模块,用于获取通过所述黑白摄像头拍摄的黑白图像;生成模块,用于对所述第一彩色图像、所述第二彩色图像以及所述黑白图像进行图像融合计算,生成目标合成图像。
为达上述目的,本申请第三方面实施例提出了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现如前述第一方面实施例所述的终端设备拍摄方法。
为达上述目的,本申请第四方面实施例提出了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如前述第一方面实施例所述的终端设备拍摄方法。
为达上述目的,本申请第五方面实施例提出了一种摄像模组,包括:长焦彩色摄像头、广角彩色摄像头、至少一个黑白摄像头、图像传感器和处理器,其中,所述长焦彩色摄像头、广角彩色摄像头、至少一个黑白摄像头均与所述图像传感器连接,所述图像传感器与所述处理器连接,其中,所述图像传感器,用于获取通过所述长焦彩色摄像头拍摄的第一彩色图像,通过所述广角彩色摄像头拍摄的第二彩色图像,以及通过所述黑白摄像头拍摄的黑白图像;所述处理器,用于对所述第一彩色图像、所述第二彩色图像以及所述黑白图像进行图像融合计算,生成目标合成图像。本申请提供的技术方案,至少包括如下有益效果:
有效的提高了长焦彩色和广角彩色弱光以及夜间拍照亮度不够,图像质量差的问题,在正常光照下也可以使照片色彩亮度更鲜亮,图片像素更真实,满足了多种场景的拍摄需求,提高了拍摄质量。
本申请附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1是根据本申请一个实施例的终端设备拍摄方法的流程图;
图2(a)是根据本申请一个实施例的终端设备的摄像头的设置示意图;
图2(b)是根据本申请另一个实施例的终端设备的摄像头的设置示意图;
图2(c)是根据本申请又一个实施例的终端设备的摄像头的设置示意图;
图3是根据本申请另一个实施例的终端设备拍摄方法的流程图;
图4是根据本申请一个实施例的终端设备拍摄装置的结构示意图;
图5是根据本申请另一个实施例的终端设备拍摄装置的结构示意图;
图6是根据本申请又一个实施例的终端设备拍摄装置的结构示意图;
图7是根据本申请一个实施例的摄像模组的结构示意图;以及
图8为一个实施例中图像处理电路的示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本申请,而不能理解为对本申请的限制。
下面参考附图描述本申请实施例的终端设备拍摄方法和装置。
本申请实施例的拍摄方法的执行设备可以是手机、平板电脑、个人数字助理、穿戴式设备等具有多个摄像头的硬件设备,该穿戴式设备可以是智能手环、智能手表、智能眼镜等。
该具有多摄像头的硬件设备中,包含摄像模组,该摄像模组中包括长焦彩色摄像头、广角彩色摄像头、以及至少一个黑白摄像头,上述摄像头均具有各自独立的镜片、图像传感器和音圈马达。多摄像头中的摄像头均与摄像头连接头相连,从而根据摄像头连接头提供的电流值驱动音圈马达,使得摄像头在音圈马达的驱动下调整镜片与图像传感器之间的距离,从而实现对焦拍摄。
图1是根据本申请一个实施例的终端设备拍摄方法的流程图,如图1所示,该方法包括:
步骤101,获取通过长焦彩色摄像头拍摄的第一彩色图像。
具体地,长焦彩色摄像头镜头景深小,能压缩空间感,远近景物大小差别不明显,总体的说来成像偏大,因而,可以保证拍摄的第一彩色图像中包含了较大的拍摄角度。
需要说明的是,本实施例中的长焦彩色摄像头可以为一个或多个,从而,第一彩色图像可以是单个长焦彩色摄像头拍摄得到的,也可以是由多个彩色摄像头拍摄后合成得到的。
步骤102,获取通过广角彩色摄像头拍摄的第二彩色图像。
具体地,广角彩色摄像头景深大,能增加空间感,远近景物大小差别明显,总体来说成像偏小,因而,可以保证拍摄的第二彩色图像中包含了较大的景深空间。
需要说明的是,本实施例中的广角彩色摄像头可以为一个或多个,从而,第二彩色图像可以是单个广角彩色摄像头拍摄得到的,也可以是由多个广角彩色摄像头拍摄后合成得到的。步骤103,获取通过黑白摄像头拍摄的黑白图像。
具体而言,彩色摄像头中有彩色滤镜,叫拜尔滤色镜。其实是一种将RGB滤色器排列在光传感组件方格之上所形成的马赛克彩色滤色阵列,经过滤镜后得到RGB三种主色(图中使用灰度图表示RGB显示效果)。
黑白摄像头没有拜尔滤色镜,所有的光都入射进来,所以和具有拜尔滤色镜的彩色摄像头相比可以获得更大的进光量,光学传感器的灵敏度也更高。因此黑白相摄像头相对彩色摄像头,图像更加明亮,细节信息能够保留的更好(图中使用灰度值表示黑白图像的亮度)。
从而,基于上述描述的摄像头的成像原理,由于彩色摄像头在拍摄时,在夜景等进光量不足的应用场景下,获取的第一彩色图像和第二彩色图像的像素质量不高,可能成像质量较为失真,因而,在本申请的实施例中,设置了黑白摄像头,根据黑白摄像头可以采集到黑白全波段的光线,保证更多的进光量,从而黑白图像中保留了丰富的成像细节。
步骤104,对第一彩色图像、第二彩色图像以及黑白图像进行图像融合计算,生成目标合成图像。
具体地,对第一彩色图像、第二彩色图像以及黑白图像进行图像融合计算,生成目标合成图像,以生成的目标合成图像,同时兼顾了拍摄角度,拍摄景深,又保证拍照进光量,保证在夜间弱光环境下也能拍出角度大,景深深度远而图像质量不失真的图片。
举例而言,利用黑白摄像头进光量大,传感器灵敏度高的优势,在我后置广角彩色+长焦彩色双摄的基础上,弥补了彩色进光量的不足,特别是弱光和夜间场景下,黑白摄像头+彩色摄像头结合出来的图片明显要比彩色+彩色摄像头拍出来的照片亮度很高,相片噪点更低。
其中,由于摄像头拍摄同一场景下的物体,摄像头之间因为存在间距(包括水平间距和竖直间距),所以有部分像素会有位移,因而需要对像素进行对齐处理,根据应用场景的不同,生成目标合成图像时对第一彩色图像、第二彩色图像以及黑白图像进行图像融和时采用的像素对齐方式不同,示例说明如下:
作为一种可能的实现方式:
在本示例中,为了说明的方便,以一个长焦彩色摄像头、一个广角彩色摄像头拍摄的彩色图像的像素对齐为例进行说明。
具体地,首先,在第一彩色图像中,确定与第二彩色图像取景画面相同的分布区域,因广角摄像头的视场角大于长焦摄像头,因此,对同一取景画面进行拍摄时,广角摄像头采集到的第二彩色图像中图像区域较大,长焦摄像头采集到的第一彩色图像中图像区域较小,在第二彩色图像中找到和第一彩色图像中相同的取景画面,确定出第一彩色图像和第二彩色图像中相同的取景画面对应的目标图像区域,对确定出的相同的区域进行像素对齐,比如,将第一彩色图像中目标图像区域的特征点和第二彩色像素中的目标特征点进行位置比对确定位置差值,根据该位置差值对第二彩色像素中每个像素进行位置修正以实现与第一彩色图像中的像素对齐,或者,可以对第一彩色像素中每个像素进行位置修正以实现与第二彩色图像中的像素对齐。
当然,在实际应用中,为了适应不同的拍摄需求,至少一个黑白摄像头可以包括不同的摄像头类型,示例说明如下:
在本申请的一个实施例中,如图2(a)所示,为了保证较好的拍摄角度,至少一个黑白摄像头包括:一个长焦黑白摄像头,从而,在本实施例中,获取长焦黑白摄像头拍摄的第一黑白图像,进而,对第一彩色图像和第一黑白图像进行图像融合计算生成第一合成图像,对第二彩色图像和第一合成图像进行图像融合计算生成目标合成图像。由此,在本实施例中,由于大角度范围内的亮度信息得到了满足,生成的最后的目标合成图像中,不但拍摄角度较大,而且亮度较高,成像质量较高。
需要强调的是,在实际应用中,一个长焦黑白摄像头与一个长焦彩色摄像头、一个广角彩色摄像头的设置位置可以根据需要设定,图2(a)所示的排布方式仅为一种示例。
在本申请的一个实施例中,为了保证较好的拍摄景深,如图2(b)所示,至少一个黑白摄像头包括:拍摄的一个广角黑白摄像头,从而,在本实施例中,获取通过广角黑白摄像头拍摄的第二黑白图像,进而,对第二彩色图像和第二黑白图像进行图像融合计算生成第二合成图像,对第一彩色图像和第二合成图像进行图像融合计算生成目标合成图像。由此,在本实施例中,由于大景深范围内的亮度信息得到了满足,生成的最后的目标合成图像中,不但景深范围较大,而且亮度较高,成像质量较高。
需要强调的是,在实际应用中,一个广角黑白摄像头与一个长焦彩色摄像头、一个广角彩色摄像头的设置位置可以根据需要设定,图2(b)所示的排布方式仅为一种示例。
在本申请的一个实施例中,为了保证较好的拍摄景深和较广的拍摄角度,如图2(c)所示,至少一个黑白摄像头包括:一个长焦黑白摄像头和一个广角黑白摄像头,从而,在本实施例中,获取通过长焦黑白摄像头拍摄的第一黑白图像,以及获取通过广角黑白摄像头拍摄的第二黑白图像,对第一彩色图像和第二彩色图像进行图像融合计算生成第三合成图像,进而,对第一黑白图像和第二黑白图像进行图像融合计算生成第四合成图像,并且对第三合成图像和第四合成图像进行图像融合计算生成目标合成图像。由此,在本实施例中,由于大景深范围内的亮度信息得到了满足,大角度范围内的亮度也得到了满足,从而,生成的最后的目标合成图像中,不但景深范围较大、角度较广,而且亮度较高,成像质量较高。
需要强调的是,在实际应用中,至少一个广角黑白摄像头和至少一个长焦摄像头与一个长焦彩色摄像头、一个广角彩色摄像头的设置位置可以根据需要设定,图2(c)所示的排布方式仅为一种示例。
在本实施例中,为了取得更好的拍摄效果,还可根据环境光线亮度进行具体的拍摄摄像头的选择,具体地,如图3所示,在上述拍摄场景中,选择摄像头的步骤为:
步骤201,检测拍摄场景中第一检测区域和第二检测区域的光亮度,其中,第二检测区域距离后置拍摄模组的距离大于第一检测区域距离后置拍摄模组的距离。
其中,第二检测区域距离后置拍摄模组的距离大于第一检测区域距离后置拍摄模组的距离,在不同的应用场景下,第一检测区域和第二检测区域可以分别对应于后景区域和前景区域、左侧区域和右侧区域、上侧区域和下侧区域等,在此不作限制。
具体地,作为一种可能的实现方式,可采用独立的测光元件,对第一检测区域和第二检测区域进行测光,输出对应的环境光亮度。
作为另一种可能的实现方式,可通过摄像模组的图像传感器获取第一检测区域和第二检测区域的光亮度。
作为又一种可能的实现方式,还可以读取广角摄像头和长焦摄像头自动调节的ISO值,根据读取到的ISO值,确定环境亮度,根据环境亮度和光强值的对应关系,确定当前对应检测区域的光亮度。一般来说,广角摄像头和长焦摄像头应采用相同的ISO值,从而采用该ISO值,便可以确定对应的光亮度。但若读取到的长焦摄像头ISO值和广角摄像头ISO值是不同的,可以根据两者的平均值确定对应的光亮度。
需要说明的是,ISO值用来指示摄像头的感光度,常用的ISO值有50、100、200、400、1000等等,摄像头可以根据环境亮度,自动调节ISO值,从而,本实施例中,可以根据ISO值,反推出对应检测区域的光亮度。一般在光线充足的情况下,ISO值器50或100,在光线不足的情况下,ISO值可以为400或更高。
步骤202,若检测获知第一检测区域和第二检测区域的光亮度均大于预设阈值,则关闭长焦黑白摄像头和广角黑白摄像头工作。
具体地,若检测获知第一检测区域和第二检测区域的光亮度均大于预设阈值,则表明当前拍摄环境中光线充足,从而关闭长焦黑白摄像头和广角黑白摄像头工作,减小功耗,提高拍摄效率。
步骤203,若检测获知第一检测区域和第二检测区域的光亮度均小于等于预设阈值,则开启长焦黑白摄像头和广角黑白摄像头。
具体地,若检测获知第一检测区域和第二检测区域的光亮度均小于等于预设阈值,则表明当前拍摄环境中光线较暗,从而打开长焦黑白摄像头和广角黑白摄像头工作,提高成像质量。
步骤204,若检测获知第一检测区域大于预设阈值,且第二检测区域的光亮度小于或等于预设阈值,则开启长焦黑白摄像头,以及关闭广角黑白摄像头。
具体地,若检测获知第一检测区域大于预设阈值,以及第二检测区域的光亮度小于等于预设阈值,则表明较大景深区域位置的环境光线不足,从而开启长焦黑白摄像头工作,以及关闭广角黑白摄像头工作,在降低拍摄功耗的同时,保证成像质量。
步骤205,若检测获知第一检测区域小于等于预设阈值,且第二检测区域的光亮度大于预设阈值,则关闭长焦黑白摄像头,且开启广角黑白摄像头。
具体地,若检测获知第一检测区域小于等于预设阈值,以及第二检测区域的光亮度大于预设阈值,则表明较小景深区域位置的环境光线不足,从而关闭长焦黑白摄像头工作,以及开启广角黑白摄像头工作,在降低拍摄功耗的同时,保证成像质量。
综上所述,本申请实施例的终端设备拍摄方法,有效的提高了长焦彩色和广角彩色弱光以及夜间拍照亮度不够,图像质量差的问题,在正常光照下也可以使照片色彩亮度更鲜亮,图片像素更真实,满足了多种场景的拍摄需求,提高了拍摄质量。
为了实现上述实施例,本申请还提出一种终端设备拍摄装置,终端设备的后置拍摄模组包括:长焦彩色摄像头、广角彩色摄像头、以及至少一个黑白摄像头,图4是根据本申请一个实施例的终端设备拍摄装置的结构示意图。如图4所示,该拍摄装置包括:第一获取模块100、第二获取模块200、第三获取模块300和生成模块400。
其中,第一获取模块100,用于获取通过长焦彩色摄像头拍摄的第一彩色图像。
第二获取模块200,用于获取通过广角彩色摄像头拍摄的第二彩色图像。
第三获取模块300,用于获取通过黑白摄像头拍摄的黑白图像。
生成模块400,用于对第一彩色图像、第二彩色图像以及黑白图像进行图像融合计算,生成目标合成图像。
在本申请的一个实施例中,至少一个黑白摄像头包括:一个长焦黑白摄像头,第三获取模块300,具体用于获取通过所述长焦黑白摄像头拍摄的第一黑白图像,在该实施例中,如图5所示,生成模块400包括第一生成单元410和第二生成单元420。
其中,第一生成单元410,用于对第一彩色图像和第一黑白图像进行图像融合计算生成第一合成图像。
第二生成单元420,用于对第二彩色图像和第一合成图像进行图像融合计算生成目标合成图像。
在本申请的一个实施例中,至少一个黑白摄像头包括:一个广角黑白摄像头第三获取模块300,具体用于获取通过广角黑白摄像头拍摄的第二黑白图像,在该实施例中,如图6所示,生成模块400包括第三生成单元430和第四生成单元440。
其中,第三生成单元430,用于对第二彩色图像和第二黑白图像进行图像融合计算生成第二合成图像。
第四生成单元440,用于对第一彩色图像和第二合成图像进行图像融合计算生成目标合成图像。
需要说明的是,前述对方法实施例的解释说明也适用于该实施例的装置,此处不再赘述。
综上所述,本申请实施例的终端设备拍摄装置,有效的提高了长焦彩色+广角彩色弱光以及夜间拍照亮度不够,图像质量差的问题,在正常光照下也可以使照片色彩亮度更鲜亮,图片像素更真实,满足了多种场景的拍摄需求,提高了拍摄质量。
为了实现上述实施例,本申请还提出一种摄像模组,如图7所示,包括:长焦彩色摄像头、广角彩色摄像头、至少一个黑白摄像头、图像传感器和处理器,其中,长焦彩色摄像头、广角彩色摄像头、至少一个黑白摄像头均与图像传感器连接,图像传感器与处理器连接,其中,图像传感器,用于获取通过长焦彩色摄像头拍摄的第一彩色图像,通过广角彩色摄像头拍摄的第二彩色图像,以及通过黑白摄像头拍摄的黑白图像;处理器,用于对第一彩色图像、第二彩色图像以及黑白图像进行图像融合计算,生成目标合成图像。
为了实现上述实施例,本申请还提出一种终端设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现如前述实施例所述的终端设备拍摄方法。
上述终端设备中还包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。图8为一个实施例中图像处理电路的示意图。如图8所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图8所示,图像处理电路包括ISP处理器940和控制逻辑器950。成像设备910捕捉的图像数据首先由ISP处理器940处理,ISP处理器940对图像数据进行分析以捕捉可用于确定和/或成像设备910的一个或多个控制参数的图像统计信息。成像设备910具体可以包括三个或者大于三个摄像头,每一个摄像头可包括具有一个或多个透镜912和图像传感器914,三个或者大于三个摄像头中,存在至少一个长焦彩色摄像头、至少一个广角彩色摄像头和至少一个黑白摄像头以用于采集本申请中的第一彩色图图像、第二彩色图像和黑白图像等。图像传感器914可包括色彩滤镜阵列(如Bayer滤镜),图像传感器914可获取用图像传感器914的每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器940处理的一组原始图像数据。传感器920可基于传感器920接口类型把采集到的原始图像数据即第一彩色图图像、第二彩色图像和黑白图像数据提供给ISP处理器940。传感器920接口可以利用SMIA(Standard Mobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
ISP处理器940按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器940可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器940还可从图像存储器930接收像素数据。例如,从传感器920接口将原始像素数据发送给图像存储器930,图像存储器930中的原始像素数据再提供给ISP处理器940以供处理。图像存储器930可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自传感器920接口或来自图像存储器930的原始图像数据时,ISP处理器940可进行一个或多个图像处理操作,如时域滤波,在本发明的实施例中,ISP处理器940对第一彩色图像、第二彩色图像以及黑白图像进行图像融合计算,生成目标合成图像。处理后的图像数据可发送给图像存储器930,以便在被显示之前进行另外的处理。ISP处理器940从图像存储器930接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器970,以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器940的输出还可发送给图像存储器930,且显示器970可从图像存储器930读取图像数据。在一个实施例中,图像存储器930可被配置为实现一个或多个帧缓冲器。此外,ISP处理器940的输出可发送给编码器/解码器960,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器970设备上之前解压缩。编码器/解码器960可由CPU或GPU或协处理器实现。
ISP处理器940确定的统计数据可发送给控制逻辑器950单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜912阴影校正等图像传感器914统计信息。控制逻辑器950可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像设备910的控制参数以及的控制参数。例如,控制参数可包括传感器920控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜912控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜912阴影校正参数。
为了实现上述实施例,本申请还提出一种计算机可读存储介质,其上存储有计算机程序,该程序被移动终端的处理器执行时实现如前述实施例中所述的终端设备拍摄方法。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如,如果用硬件来实现和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种终端设备拍摄方法,其特征在于,所述终端设备的拍摄模组包括:长焦彩色摄像头、广角彩色摄像头、以及至少一个黑白摄像头,所述拍摄方法包括:
获取通过所述长焦彩色摄像头拍摄的第一彩色图像;
获取通过所述广角彩色摄像头拍摄的第二彩色图像;
获取通过所述黑白摄像头拍摄的黑白图像;
对所述第一彩色图像、所述第二彩色图像以及所述黑白图像进行图像融合计算,生成目标合成图像;获取所述至少一个黑白摄像头中包含的摄像头;
当所述至少一个黑白摄像头包括:一个长焦黑白摄像头和一个广角黑白摄像头时,检测拍摄场景中第一检测区域和第二检测区域的光亮度,其中,所述第二检测区域距离后置拍摄模组的距离大于所述第一检测区域距离所述后置拍摄模组的距离;
若检测获知所述第一检测区域和所述第二检测区域的光亮度均大于预设阈值,则关闭所述长焦黑白摄像头和所述广角黑白摄像头;
若检测获知所述第一检测区域和所述第二检测区域的光亮度均小于或等于预设阈值,则开启所述长焦黑白摄像头和所述广角黑白摄像头;
若检测获知所述第一检测区域的光亮度大于预设阈值,且所述第二检测区域的光亮度小于或等于预设阈值,则开启所述长焦黑白摄像头,并关闭所述广角黑白摄像头;
若检测获知所述第一检测区域的光亮度小于等于预设阈值,且所述第二检测区域的光亮度大于预设阈值,则关闭所述长焦黑白摄像头,并开启所述广角黑白摄像头。
2.如权利要求1所述的方法,其特征在于,在所述获取所述至少一个黑白摄像头中包含的摄像头之后,还包括,若所述至少一个黑白摄像头包括:一个长焦黑白摄像头;
所述获取通过所述黑白摄像头拍摄的黑白图像包括:
获取通过所述长焦黑白摄像头拍摄的第一黑白图像;
所述对所述第一彩色图像、所述第二彩色图像以及所述黑白图像进行图像融合计算,生成目标合成图像,包括:
对所述第一彩色图像和所述第一黑白图像进行图像融合计算生成第一合成图像;
对所述第二彩色图像和所述第一合成图像进行图像融合计算生成目标合成图像。
3.如权利要求1所述的方法,其特征在于,在所述获取所述至少一个黑白摄像头中包含的摄像头之后,还包括,若所述至少一个黑白摄像头包括:一个广角黑白摄像头;
所述获取通过所述黑白摄像头拍摄的黑白图像包括:
获取通过所述广角黑白摄像头拍摄的第二黑白图像;
所述对所述第一彩色图像、所述第二彩色图像以及所述黑白图像进行图像融合计算,生成目标合成图像,包括:
对所述第二彩色图像和所述第二黑白图像进行图像融合计算生成第二合成图像;
对所述第一彩色图像和所述第二合成图像进行图像融合计算生成目标合成图像。
4.如权利要求1所述的方法,其特征在于,在所述当所述至少一个黑白摄像头包括:一个长焦黑白摄像头和一个广角黑白摄像头时;
所述获取通过所述黑白摄像头拍摄的黑白图像包括:
获取通过所述长焦黑白摄像头拍摄的第一黑白图像,以及获取通过所述广角黑白摄像头拍摄的第二黑白图像;
所述对所述第一彩色图像、所述第二彩色图像以及所述黑白图像进行图像融合计算,生成目标合成图像,包括:
对所述第一彩色图像和所述第二彩色图像进行图像融合计算生成第三合成图像;
对所述第一黑白图像和所述第二黑白图像进行图像融合计算生成第四合成图像;
对所述第三合成图像和所述第四合成图像进行图像融合计算生成目标合成图像。
5.一种终端设备拍摄装置,其特征在于,所述终端设备的后置拍摄模组包括:长焦彩色摄像头、广角彩色摄像头、以及至少一个黑白摄像头,所述拍摄装置包括:
第一获取模块,用于获取通过所述长焦彩色摄像头拍摄的第一彩色图像;
第二获取模块,用于获取通过所述广角彩色摄像头拍摄的第二彩色图像;
第三获取模块,用于获取通过所述黑白摄像头拍摄的黑白图像;
生成模块,用于对所述第一彩色图像、所述第二彩色图像以及所述黑白图像进行图像融合计算,生成目标合成图像;
第四获取模块,用于获取所述至少一个黑白摄像头中包含的摄像头;
检测模块,用于当所述至少一个黑白摄像头包括:一个长焦黑白摄像头和一个广角黑白摄像头时,检测拍摄场景中第一检测区域和第二检测区域的光亮度,其中,所述第二检测区域距离后置拍摄模组的距离大于所述第一检测区域距离所述后置拍摄模组的距离;
关闭模块,用于在检测获知所述第一检测区域和所述第二检测区域的光亮度均大于预设阈值时,关闭所述长焦黑白摄像头和所述广角黑白摄像头;
开启模块,用于在检测获知所述第一检测区域和所述第二检测区域的光亮度均小于或等于预设阈值时,开启所述长焦黑白摄像头和所述广角黑白摄像头;
所述开启模块,还用于在检测获知所述第一检测区域的光亮度大于预设阈值,且所述第二检测区域的光亮度小于或等于预设阈值时,开启所述长焦黑白摄像头,并关闭所述广角黑白摄像头;
所述关闭模块,还用于在检测获知所述第一检测区域的光亮度小于等于预设阈值,且所述第二检测区域的光亮度大于预设阈值时,关闭所述长焦黑白摄像头,并开启所述广角黑白摄像头。
6.如权利要求5所述的装置,其特征在于,若所述第四获取模块获取到所述至少一个黑白摄像头包括:一个长焦黑白摄像头;
所述第三获取模块,具体用于获取通过所述长焦黑白摄像头拍摄的第一黑白图像;
所述生成模块,包括:
第一生成单元,用于对所述第一彩色图像和所述第一黑白图像进行图像融合计算生成第一合成图像;
第二生成单元,用于对所述第二彩色图像和所述第一合成图像进行图像融合计算生成目标合成图像。
7.如权利要求5所述的装置,其特征在于,若所述第四获取模块获取所述至少一个黑白摄像头包括:一个广角黑白摄像头;
所述第三获取模块,具体用于获取通过所述广角黑白摄像头拍摄的第二黑白图像;
所述生成模块,包括:
第三生成单元,用于对所述第二彩色图像和所述第二黑白图像进行图像融合计算生成第二合成图像;第四生成单元,用于对所述第一彩色图像和所述第二合成图像进行图像融合计算生成目标合成图像。
8.一种计算机设备,其特征在于,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时,实现如权利要求1-4中任一所述的终端设备拍摄方法。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-4中任一所述的终端设备拍摄方法。
10.一种摄像模组,其特征在于,包括:长焦彩色摄像头、广角彩色摄像头、至少一个黑白摄像头、图像传感器和处理器,其中,所述长焦彩色摄像头、广角彩色摄像头、至少一个黑白摄像头均与所述图像传感器连接,所述图像传感器与所述处理器连接,其中,
所述图像传感器,用于获取通过所述长焦彩色摄像头拍摄的第一彩色图像,通过所述广角彩色摄像头拍摄的第二彩色图像,以及通过所述黑白摄像头拍摄的黑白图像;
所述处理器,用于对所述第一彩色图像、所述第二彩色图像以及所述黑白图像进行图像融合计算,生成目标合成图像,获取所述至少一个黑白摄像头中包含的摄像头,当所述至少一个黑白摄像头包括:一个长焦黑白摄像头和一个广角黑白摄像头时,检测拍摄场景中第一检测区域和第二检测区域的光亮度,其中,所述第二检测区域距离后置拍摄模组的距离大于所述第一检测区域距离所述后置拍摄模组的距离,若检测获知所述第一检测区域和所述第二检测区域的光亮度均大于预设阈值,则关闭所述长焦黑白摄像头和所述广角黑白摄像头,若检测获知所述第一检测区域和所述第二检测区域的光亮度均小于或等于预设阈值,则开启所述长焦黑白摄像头和所述广角黑白摄像头,若检测获知所述第一检测区域的光亮度大于预设阈值,且所述第二检测区域的光亮度小于或等于预设阈值,则开启所述长焦黑白摄像头,并关闭所述广角黑白摄像头,若检测获知所述第一检测区域的光亮度小于等于预设阈值,且所述第二检测区域的光亮度大于预设阈值,则关闭所述长焦黑白摄像头,并开启所述广角黑白摄像头。
CN201810468308.7A 2018-05-16 2018-05-16 终端设备拍摄方法和装置 Active CN108712608B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810468308.7A CN108712608B (zh) 2018-05-16 2018-05-16 终端设备拍摄方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810468308.7A CN108712608B (zh) 2018-05-16 2018-05-16 终端设备拍摄方法和装置

Publications (2)

Publication Number Publication Date
CN108712608A CN108712608A (zh) 2018-10-26
CN108712608B true CN108712608B (zh) 2020-01-10

Family

ID=63868074

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810468308.7A Active CN108712608B (zh) 2018-05-16 2018-05-16 终端设备拍摄方法和装置

Country Status (1)

Country Link
CN (1) CN108712608B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109194881A (zh) * 2018-11-29 2019-01-11 珠海格力电器股份有限公司 图像处理方法、系统及终端
CN111665245A (zh) * 2019-03-05 2020-09-15 中国航发商用航空发动机有限责任公司 航空润滑油监测装置及监测方法
CN110191274A (zh) * 2019-06-28 2019-08-30 Oppo广东移动通信有限公司 成像方法、装置、存储介质及电子设备
CN110602387B (zh) * 2019-08-28 2021-04-23 维沃移动通信有限公司 拍摄方法及电子设备
CN110767145B (zh) * 2019-10-24 2022-07-26 武汉天马微电子有限公司 显示装置及其驱动方法
CN110929615B (zh) * 2019-11-14 2022-10-18 RealMe重庆移动通信有限公司 图像处理方法、图像处理装置、存储介质与终端设备
CN112991188B (zh) * 2019-12-02 2023-06-27 RealMe重庆移动通信有限公司 图像处理方法及装置、存储介质、电子设备
CN113472971B (zh) * 2020-03-31 2023-05-23 北京小米移动软件有限公司 一种摄像系统的布局检测方法、布局检测装置及摄像系统
CN113364975B (zh) * 2021-05-10 2022-05-20 荣耀终端有限公司 一种图像的融合方法及电子设备
CN115696067B (zh) * 2021-08-12 2024-03-26 荣耀终端有限公司 终端的图像处理方法、终端设备和计算机可读存储介质
CN113888580B (zh) * 2021-09-18 2023-06-30 成都华安视讯科技有限公司 一种宠物智能跟踪拍摄记录方法
CN114095661B (zh) * 2022-01-18 2022-06-14 深圳维特智能科技有限公司 低功耗控制电源管理方法、装置和计算机设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102088614A (zh) * 2010-11-23 2011-06-08 北京邮电大学 一种放大视频图像的方法和装置
CN107454322A (zh) * 2017-07-31 2017-12-08 广东欧珀移动通信有限公司 拍照方法、装置、计算机可存储介质和移动终端

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6924938B2 (en) * 2003-03-19 2005-08-02 Ricoh Company, Ltd. Zoom lens, camera, and mobile information terminal
US7864443B2 (en) * 2007-12-07 2011-01-04 Ricoh Company, Ltd. Zoom lens, imaging apparatus, and personal data assistant
CN102495520A (zh) * 2011-12-14 2012-06-13 天津大学 自会聚式多视点三维数据采集系统及方法
CN107819992B (zh) * 2017-11-28 2020-10-02 信利光电股份有限公司 一种三摄像头模组及电子设备

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102088614A (zh) * 2010-11-23 2011-06-08 北京邮电大学 一种放大视频图像的方法和装置
CN107454322A (zh) * 2017-07-31 2017-12-08 广东欧珀移动通信有限公司 拍照方法、装置、计算机可存储介质和移动终端

Also Published As

Publication number Publication date
CN108712608A (zh) 2018-10-26

Similar Documents

Publication Publication Date Title
CN108712608B (zh) 终端设备拍摄方法和装置
CN107948519B (zh) 图像处理方法、装置及设备
KR102279436B1 (ko) 이미지 처리 방법, 장치 및 기기
KR102293443B1 (ko) 듀얼 카메라를 이용한 이미지 처리 방법 및 이동 단말기
CN108989700B (zh) 成像控制方法、装置、电子设备以及计算机可读存储介质
JP7145208B2 (ja) デュアルカメラベースの撮像のための方法および装置ならびに記憶媒体
CN109040609B (zh) 曝光控制方法、装置、电子设备和计算机可读存储介质
CN110445988B (zh) 图像处理方法、装置、存储介质及电子设备
CN109005364B (zh) 成像控制方法、装置、电子设备以及计算机可读存储介质
CN213279832U (zh) 图像传感器、相机和终端
CN108024054B (zh) 图像处理方法、装置、设备及存储介质
CN108154514B (zh) 图像处理方法、装置及设备
CN110248106B (zh) 图像降噪方法、装置、电子设备以及存储介质
CN110198418B (zh) 图像处理方法、装置、存储介质及电子设备
CN108156369B (zh) 图像处理方法和装置
CN107846556B (zh) 成像方法、装置、移动终端和存储介质
CN107509044B (zh) 图像合成方法、装置、计算机可读存储介质和计算机设备
CN110166706B (zh) 图像处理方法、装置、电子设备以及存储介质
CN108683863B (zh) 成像控制方法、装置、电子设备以及可读存储介质
CN108024057B (zh) 背景虚化处理方法、装置及设备
CN109040607B (zh) 成像控制方法、装置、电子设备和计算机可读存储介质
CN110430370B (zh) 图像处理方法、装置、存储介质及电子设备
CN107872631B (zh) 基于双摄像头的图像拍摄方法、装置及移动终端
CN110290325B (zh) 图像处理方法、装置、存储介质及电子设备
US11601600B2 (en) Control method and electronic device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant