CN105827965A - 一种基于移动终端的图像处理方法及移动终端 - Google Patents

一种基于移动终端的图像处理方法及移动终端 Download PDF

Info

Publication number
CN105827965A
CN105827965A CN201610179454.9A CN201610179454A CN105827965A CN 105827965 A CN105827965 A CN 105827965A CN 201610179454 A CN201610179454 A CN 201610179454A CN 105827965 A CN105827965 A CN 105827965A
Authority
CN
China
Prior art keywords
pixel
original image
image
black
matched
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610179454.9A
Other languages
English (en)
Other versions
CN105827965B (zh
Inventor
殷求明
万美君
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN201610179454.9A priority Critical patent/CN105827965B/zh
Publication of CN105827965A publication Critical patent/CN105827965A/zh
Application granted granted Critical
Publication of CN105827965B publication Critical patent/CN105827965B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明提供了一种基于移动终端的图像处理方法及移动终端,所述移动终端包括第一摄像头和第二摄像头,所述第一摄像头用于拍摄彩色的图像,所述第二摄像头用于拍摄黑白的图像,所述方法包括:获取所述第一摄像头和第二摄像头在同一时刻,对同一拍摄目标所拍摄的第一彩色原始图像和黑白原始图像;对所述第一彩色原始图像和黑白原始图像进行合成处理,生成第一中间图像;对所述第一中间图像进行图像处理,生成目标图像。本发明可以达到第一中间图像能够保持其数据位宽,数据量更大、图像质量更高、噪声更小更少、细节展现更好,并且,利用数据量更大的第一中间图像进行图像处理,能够获得质量更高的目标图像。

Description

一种基于移动终端的图像处理方法及移动终端
技术领域
本发明涉及图像处理领域,尤其涉及一种基于移动终端的图像处理方法及移动终端。
背景技术
随着信息技术的发展,移动终端越来越普及。在移动终端中,摄像功能成为了用户越来越看重的功能。目前,移动终端的彩色加黑白双摄像头摄像功能得到了越来越多的关注,各家厂商都在研究通过彩色加黑白双摄像头合成图像来提高拍照效果。
在现有技术中,彩色加黑白双摄像头拍摄图片的方法一般包括如下流程:打开相机,进入双camera拍照模式;点击拍照,获得彩色10bitRaw图像数据以及黑白10bitRaw图像数据;将彩色10bitRaw图像数据以及黑白10bitRaw图像数据通过图像信号处理器(ISP)进行处理,得到彩色8bitYUV420图像数据以及黑白8bitYUV420图像数据;对上述彩色8bitYUV420图像数据以及黑白8bitYUV420图像数据进行合成,得到一张合成后的8bitYUV420图像数据;将该合成后的8bitYUV420图像数据进行JPEG压缩并存储成用户目标看到的JPEG图片。
然而,分别将彩色10bitRaw图像数据以及黑白10bitRaw图像数据经过ISP处理后,对应得到的是像素位宽为8bit的YUV420格式的彩色原始图像以及8bit的YUV420格式的黑白原始图像,彩色原始图像以及黑白原始图像的像素位宽从10bit降至8bit,导致图像数据丢失。随后,利用2张8bit的YUV420图像数据进行算法合成,大大降低了合成图像的质量。
发明内容
本发明实施例提供一种基于移动终端的图像处理方法及移动终端,以解决图像数据经过ISP处理后图像数据丢失、合成图像质量低的问题。
第一方面,提供了一种基于移动终端的图像处理方法,所述方法应用于移动终端,所述移动终端包括第一摄像头和第二摄像头,所述第一摄像头用于拍摄彩色的图像,所述第二摄像头用于拍摄黑白的图像,所述方法包括:
获取所述第一摄像头和第二摄像头在同一时刻,对同一拍摄目标所拍摄的第一彩色原始图像和黑白原始图像;
对所述第一彩色原始图像和黑白原始图像进行合成处理,生成第一中间图像;
对所述第一中间图像进行图像处理,生成目标图像。
第二方面,提供了一种移动终端,所述移动终端包括第一摄像头和第二摄像头,所述第一摄像头用于拍摄彩色的图像,所述第二摄像头用于拍摄黑白的图像,所述移动终端还包括:
图像拍摄模块,用于获取所述第一摄像头和第二摄像头在同一时刻,对同一拍摄目标所拍摄的第一彩色原始图像和黑白原始图像;
图像合成模块,用于对所述图像拍摄模块获取的第一彩色原始图像和黑白原始图像进行合成处理,生成第一中间图像;
图像处理模块,用于对所述图像合成模块生成的第一中间图像进行图像处理,生成目标图像。
这样,本发明实施例中,通过对双摄像头获得的第一彩色原始图像以及黑白原始图像后进行合成,得到第一中间图像,然后对第一中间图像进行图像处理,生成目标图像的技术手段,解决了图像数据经过ISP处理后图像数据丢失、目标图像质量低的技术问题,达到了第一中间图像能够保持其数据位宽,数据量更大、图像质量更高、噪声更小更少、细节展现更好,并且,利用数据量更大的第一中间图像进行图像处理,能够获得质量更高的目标图像。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明第一实施例的一种基于移动终端的图像处理方法的流程图;
图2是本发明第二实施例的一种基于移动终端的图像处理方法的流程图;
图3是本发明一个实施例的移动终端的框图;
图4是本发明的移动终端实施例中的图像合成模块的框图;
图5是本发明的移动终端实施例中的第一中间图像生成子模块的框图;
图6是本发明的移动终端实施例中的像素点属性确定单元的框图;
图7是本发明的移动终端实施例中的重置单元的框图;
图8是本发明的移动终端实施例中的第二色彩赋值单元的框图;
图9是本发明的移动终端实施例中的图像处理模块的结构框图;
图10是本发明另一个实施例的移动终端的框图;
图11是本发明又一个实施例的移动终端的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
第一实施例
参照图1,示出了本发明一个实施例的一种基于移动终端的图像处理方法的流程图,本发明实施例中的移动终端可以包括第一摄像头以及第二摄像头,其中,该第一摄像头用于拍摄彩色的图像,第二摄像头用于拍摄黑白的图像该图像处理方法包括:
步骤101,获取所述第一摄像头和第二摄像头在同一时刻,对同一拍摄目标所拍摄的第一彩色原始图像和黑白原始图像。
当用户开启移动终端的相机应用程序时,打开彩色摄像头以及黑白摄像头,当移动终端在捕捉到用户发出的拍摄命令后,控制第一摄像头和第二摄像头在同一时刻,对同一拍摄目标进行拍摄,获取第一摄像头拍摄的第一彩色原始图像,以及,第二摄像头拍摄的黑白原始图像。
步骤102,对所述第一彩色原始图像和黑白原始图像进行合成处理,生成第一中间图像。
移动终端获得第一彩色原始图像和黑白原始图像以后,首先可以采用预设的合成算法对该第一彩色原始图像和黑白原始图像进行合成处理,生成第一中间图像,此时,第一中间图像的比特位宽bit能够与第一彩色原始图像和黑白原始图像保持一致,其数据量更大、图像质量更高、噪声更小更少、细节展现更好。
步骤103,对所述第一中间图像进行图像处理,生成目标图像。
移动终端得到数据量更大、图像质量更高、噪声更小更少、细节展现更好的第一中间图像以后,可以对该第一中间图像进行图像处理,生成用户目标看到的、质量更高的目标图像。
在本发明实施例中,移动终端获取双摄像头拍摄的第一彩色原始图像以及黑白原始图像以后,对该第一彩色原始图像和黑白原始图像进行合成,生成第一中间图像,然后对第一中间图像进行图像处理,生成目标图像。对第一彩色原始图像以及黑白原始图像先合成再进行图像处理,使得第一中间图像能够保持其比特位宽,数据量更大、图像质量更高、噪声更小更少、细节展现更好。利用数据量更大的第一中间图像进行图像处理,能够获得质量更高的目标图像。
第二实施例
参照图2,示出了本发明另一个实施例的一种基于移动终端的图像处理方法的流程图,在本发明实施例中,移动终端可以包括两个位于同一拍摄平面且相邻的摄像头,即第一摄像头以及第二摄像头,其中,该第一摄像头用于拍摄彩色的图像,该第二摄像头用于拍摄黑白的图像,因此,该第一摄像头也可以称为彩色摄像头,该第二摄像头也可以称为黑白摄像头。
本发明实施例的移动终端可以包括智能手机、平板、掌上电脑(PersonalDigitalAssistant,PDA)、照相机,等等,进一步地,该移动终端还可以包括显示屏,其中,终端中的摄像头用于实现拍照、摄像功能,而显示屏用于实现对拍摄画面的预览功能,即,通过对摄像头当前摄入的画面进行实时显示,以供用户预览,从而达到取景器的效果。
该图像处理方法可以包括如下步骤:
步骤201,获取所述第一摄像头和第二摄像头在同一时刻,对同一拍摄目标所拍摄的第一彩色原始图像和黑白原始图像。
在具体实现中,本发明实施例的移动终端中具有单摄像头与双摄像头相互切换的功能按钮,当用户开启移动终端的相机应用程序时,首先进入单摄像头camera的拍照模式(即普通拍照模式),若用户点击该单摄像头与双摄像头相互切换的功能按钮,则可以切换到双摄像头拍照模式,同时打开彩色摄像头以及黑白摄像头,采用该彩色摄像头以及黑白摄像头进行图像预览。
当用户点击移动终端和/或相机应用程序的拍照按钮(包括虚拟按键或者物理按键)或通过语音方式发出拍摄命令时,相机应用程序捕获到该拍摄命令,生成拍摄指令,并将该拍摄指令发送至移动终端的芯片中,以控制彩色摄像头以及黑白摄像头同时对同一拍摄目标分别进行拍摄,得到对应的第一彩色原始图像和黑白原始图像。
在实际中,该第一彩色原始图像和黑白原始图像均为10比特位宽(10bit)的原始图像域(RawDomain)图像数据。
步骤202,以所述黑白原始图像为基准,将所述第一彩色原始图像校正至与所述黑白原始图像为同一视场的图像,生成第二彩色原始图像。
在实际中,由于位于同一平面的彩色摄像头与黑白摄像头的位置不同,导致两者拍摄的视角存在轻微差别,因此,同一拍摄目标在第一彩色原始图像以及黑白原始图像中的像素位置存在差别。
为了克服上述像素位置的差别,可以根据两个摄像头的摄像头参数将第一彩色原始图像校正至与黑白原始图像同一视场,得到第二彩色原始图像。在具体实现中,可以以黑白原始图像作为基准,根据两个摄像头的摄像头参数,计算出第一彩色原始图像相对于黑白原始图像偏移的像素,然后根据该偏移的像素,将第一彩色原始图像的像素整体移动偏移的像素,得到第二彩色原始图像,这样就可以将第一彩色原始图像与黑白原始图像统一视场了。校正之后,同一个拍摄目标在两幅图像中的像素位置就一致了。
在具体实现中,摄像头的摄像头参数可以预先(例如,在模组组装过程)标定得到,该摄像头参数可以包括成像内参数以及成像外参数,其中,成像内参数至少可以包括视角信息、畸变信息等;成像外参数可以包括两个摄像头的相对位置关系等。
步骤203,基于所述第二彩色原始图像的色彩信息,对所述黑白原始图像进行色彩信息赋值,生成第一中间图像。
首先,可以分别对所述第二彩色原始图像和黑白原始图像进行二维梯度运算,得到所述第二彩色原始图像的每个像素点的二维梯度信息以及所述黑白原始图像的每个像素点的二维梯度信息。
在具体实现中,图像梯度可以把图像看成二维离散函数,图像梯度其实就是这个二维离散函数的求导,例如,
图像梯度:G(x,y)=dx(i,j)+dy(i,j);
而dx(i,j)=I(i+1,j)-I(i,j);
dy(i,j)=I(i,j+1)-I(i,j);
其中,I是图像像素的值(如:RGB值),(i,j)为像素的坐标。
根据第二彩色原始图像中每个像素点的二维梯度信息以及黑白原始图像中每个像素点的二维梯度信息,可以将第二彩色原始图像的像素点与黑白原始图像的像素点进行匹配。
获得第二彩色原始图像每个像素点的二维梯度信息以及黑白原始图像中每个像素点的二维梯度信息以后,进一步可以基于所述黑白原始图像的每个像素点的二维梯度信息与所述第二彩色原始图像中的每个像素点的二维梯度信息,确定所述黑白原始图像中每个像素点的属性,其中,所述属性包括匹配像素点、疑似匹配像素点或不匹配像素点。
具体而言,获得第二彩色原始图像每个像素点的二维梯度信息以及黑白原始图像中每个像素点的二维梯度信息以后,可以以黑白原始图像作为基准图像,将黑白原始图像的每个像素点的二维梯度信息与第二彩色原始图像中的像素点的二维梯度信息进行匹配,根据匹配结果确定黑白原始图像的每个像素点的属性。
作为本发明实施例的一种优选示例,黑白原始图像的像素点的属性可以包括匹配像素点、疑似匹配像素点或不匹配像素点。具体的,若黑白原始图像的像素点在第二彩色原始图像中具有匹配的像素点,则黑白原始图像中的该像素点的属性为匹配像素点。若黑白原始图像的像素点在第二彩色原始图像中具有疑似匹配的像素点,则黑白原始图像中的该像素点的属性为疑似匹配像素点。若黑白原始图像的像素点在第二彩色原始图像中没有匹配的像素点,则黑白原始图像中的该像素点的属性为不匹配像素点。
在本发明实施例的一种优选实施例中,可以采用如下方式确定黑白原始图像中每个像素点的属性:
对于所述黑白原始图像的每个像素点(x0,y0),在所述第二彩色原始图像中查找与所述像素点(x0,y0)的位置相对应的像素点(x1,y1);并在所述第二彩色原始图像中以所述像素点(x1,y1)为中心的第一预设范围内的所有像素点的二维梯度信息中,查找与所述像素点(x0,y0)的二维梯度信息差值最小的像素点(x2,y2);以及,计算所述像素点(x0,y0)与所述像素点(x2,y2)的相似置信度cov;
若所述cov大于第一预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中具有匹配的像素点,并标记所述像素点(x0,y0)的属性为匹配像素点;
若所述cov小于第二预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中没有匹配的像素点,并标记所述像素点(x0,y0)的属性为不匹配像素点;
若所述cov大于或等于第二预设阈值且cov小于或等于第一预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中具有疑似匹配的像素点,并标记所述像素点(x0,y0)的属性为疑似匹配像素点。
具体而言,可以以黑白原始图像为基准,对黑白原始图像的每个像素点(x0,y0),遍历第二彩色原始图像中每个像素点,在第二彩色原始图像中查找与该(x0,y0)的位置相对应的像素点(x1,y1)。
随后,在第二彩色原始图像中以该像素点(x1,y1)为中心,获取在像素点(x1,y1)的第一预设范围内的所有像素点的二维梯度信息,并将该在像素点(x1,y1)的第一预设范围内的所有像素点的二维梯度信息与黑白原始图像的像素点(x0,y0)的二维梯度信息进行比较,从该第一预设范围内的所有像素点的二维梯度信息中获得与黑白原始图像的像素点(x0,y0)的二维梯度信息差值最小的像素点(x2,y2)。
在实际中,像素点(x1,y1)的第一预设范围可以为根据经验设定的范围值,例如,该第一预设范围可以为像素点(x1,y1)周边13*13个像素点的图像范围。本发明实施例对第一预设范围的设定不加以限定。
在第二彩色原始图像中获得像素点(x2,y2)以后,可以进一步验证该像素点(x2,y2)是否为与像素点(x0,y0)匹配的点。在具体实现中,可以通过计算像素点(x2,y2)与像素点(x0,y0)的相似置信度cov来判断该像素点(x2,y2)是否为与像素点(x0,y0)匹配的点。
本发明实施例对像素点(x2,y2)与像素点(x0,y0)的相似置信度cov计算方式不作限定,本领域技术人员采用现有的通用方式计算均是可以的。
若cov大于第一预设阈值,则可以判定像素点(x0,y0)在第二彩色原始图像中具有匹配的像素点,并标记像素点(x0,y0)的属性为匹配像素点;若cov小于第二预设阈值,则可以判定像素点(x0,y0)在第二彩色原始图像中没有匹配的像素点,并标记该像素点(x0,y0)的属性为不匹配像素点;若cov大于或等于第二预设阈值且cov小于或等于第一预设阈值,则可以判定像素点(x0,y0)在第二彩色原始图像中具有疑似匹配的像素点,并标记该像素点(x0,y0)的属性为疑似匹配像素点。
在实际应用中,第一预设阈值以及第二预设阈值可以为经验值,本发明实施例对第一预设阈值以及第二预设阈值的设定不作限制。例如,第一预设阈值为0.85,第二预设阈值为0.6,如果cov>0.85,则认为像素点(x0,y0)在第二彩色原始图像中具有匹配的像素点(x2,y2),即像素点(x0,y0)的属性为匹配像素点;如果cov<0.6,则认为像素点(x0,y0)在第二彩色原始图像中不具有匹配的像素点,即像素点(x0,y0)的属性为不匹配像素点;如果cov>=0.6且cov<=0.85,则认为像素点(x0,y0)在第二彩色原始图像中具有疑似匹配的像素点(x2,y2),即像素点(x0,y0)的属性为疑似匹配像素点。
在具体实现中,可以建立匹配点队列、疑似匹配点队列以及不匹配点队列。当判定黑白原始图像中某个像素点的属性为匹配像素点时,可以将该像素点记录在匹配点队列中;当判定黑白原始图像中某个像素点的属性为不匹配像素点时,可以将该像素点记录在不匹配点队列中;当判定黑白原始图像中某个像素点的属性为疑似匹配像素点时,可以将该像素点记录在疑似匹配点队列中。
若所述黑白原始图像的像素点的属性为疑似匹配像素点,则将所述疑似匹配像素点重置为匹配像素点或不匹配像素点。
当黑白原始图像中每个像素点遍历完成后,对疑似匹配点队列中的每个疑似匹配像素点,可以进一步将其属性重置为匹配像素点或不匹配像素点。
在本发明实施例的一种优选实施例中,可以采用如下方式将疑似匹配像素点重置为匹配像素点或不匹配像素点:
若所述黑白原始图像的像素点为疑似匹配像素点,则获取在以所述像素点(x0,y0)为中心的第二预设范围内标记为匹配像素点的像素点个数;若所述标记为匹配像素点的像素点个数大于或等于第三预设阈值,则将所述疑似匹配像素点重置为匹配像素点;若所述标记为匹配像素点的像素点个数小于第三预设阈值,则将所述疑似匹配像素点重置为不匹配像素点。
在实际中,该第二预设范围可以为根据经验设定的范围值,例如,该第二预设范围可以为疑似匹配像素点周边3*3区域的图像范围。本发明实施例对第二预设范围的设定不加以限定。
较为优选的,为了提高判断的合理性,第三预设阈值取值可以为大于或等于该第二预设范围内的所有像素点的总数的一半。例如,若第二预设范围为3*3,则其所有像素点的总个数为9,则第三预设阈值可以大于或等于4。
即对疑似匹配像素点(x0,y0)进行3*3区域搜索,如果周边9个像素点有超过5个像素点的属性为匹配像素点,则将该疑似匹配像素点(x0,y0)重置为匹配像素点,此时,可以在疑似匹配点队列中删除该疑似匹配像素点,并在匹配点队列中增加该像素点的记录。
否则,如果周边9个像素点中匹配像素点的个数不足5个,则将该疑似匹配像素点(x0,y0)的属性重置为不匹配像素点,此时,可以在疑似匹配点队列中删除该疑似匹配像素点,并在不匹配点队列中增加该像素点的记录。
若所述黑白原始图像的像素点的属性为匹配像素点,则获取所述第二彩色原始图像中与所述匹配像素点匹配的像素点的色彩信息,并将所述色彩信息赋值给所述黑白原始图像中对应的匹配像素点。
在具体实现中,第二彩色原始图像的每个像素点具有色彩信息,而黑白原始图像的每个像素点没有色彩信息。若黑白原始图像的像素点(x0,y0)在第二彩色原始图像中具有匹配的像素点(x2,y2),则可以提取(x2,y2)的色彩信息,并将(x2,y2)的色彩信息直接赋值给黑白原始图像对应的像素点(x0,y0)。
若所述黑白原始图像的像素点的属性为不匹配像素点,则根据所述不匹配像素点的预设区域的像素点的色彩信息,对所述不匹配像素点进行色彩信息赋值。
当黑白原始图像中每个像素点遍历完成后,对不匹配点队列中的每个不匹配像素点,可以采用其周边像素点的色彩信息对其进行色彩信息赋值。
在本发明实施例的一种优选实施例中,可以采用如下方式对不匹配像素点进行色彩信息赋值:
对所述黑白原始图像进行图像边缘提取,得到所述黑白原始图像的边缘信息;根据所述边缘信息,判断所述不匹配像素点是否落在所述黑白原始图像的边缘上;若判断结果为否,则对以所述不匹配像素点为中心的第三预设范围内的所有已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第一色彩信息平均值,并将所述第一色彩信息平均值赋值给所述不匹配像素点;若判断结果为是,则将与所述不匹配像素点所落边缘之间的距离最近的第四预设阈值个数的已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第二色彩信息平均值,并将所述第二色彩信息平均值赋值给所述不匹配像素点。
在具体实现中,图像梯度的重要性质是:梯度的方向在图像灰度最大变化率的上,它恰好反映出图像边缘上的灰度变化。因此,获得黑白原始图像的每个像素点的二维梯度信息以后,可以基于该二维梯度信息,采用边缘提取算法对黑白原始图像进行边缘提取,获得黑白原始图像的边缘信息。
其中,边缘提取是指数字图像处理中,对于图片轮廓的一个处理。对于边界处,灰度值变化比较剧烈的地方,就定义为边缘。
作为一种示例,边缘提取算法可以包括:Robert算子、Sobel算子、Prewitt算子、Krisch算子,等等。
获得黑白原始图像的边缘信息以后,可以进一步判断黑白原始图像中的不匹配像素点是否落在黑白原始图像的边缘上,并根据判断结果采用不同的方式对该不匹配像素点进行色彩信息赋值。
如果该不匹配像素点没有落在黑白原始图像的边缘上,则可以以该不匹配像素点为中心,获得该不匹配像素点的第三预设范围内的所有已经进行色彩信息赋值的像素点的色彩信息,并对该第三预设范围内的所有已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第一色彩信息平均值,以及,将该第一色彩信息平均值赋值给该不匹配像素点。
需要说明的是,该第三预设范围可以为根据经验设定的范围值,例如,该第三预设范围可以为不匹配像素点周边3*3区域的图像范围,本发明实施例对第三预设范围的设定不加以限定。
例如,若第三预设范围为3*3区域的图像范围,则可以获得该不匹配像素点周边3*3区域的图像范围内所有的已经进行色彩信息赋值的像素点的色彩信息,计算该所有已经进行色彩信息赋值的像素点的色彩信息的平均值,作为第一平均色彩信息,并将该第一平均色彩信息赋值给该不匹配像素点。
需要说明的是,该第一平均色彩信息可以为所有的已经进行色彩信息赋值的像素点的色彩信息直接进行平均的值,也可以是所有已经进行色彩信息赋值的像素点的色彩信息添加权重后再进行平均运算所得的值,本发明实施例对此不作限定。
如果该不匹配像素点落在黑白原始图像的边缘上,则可以获取与该不匹配像素点所落边缘之间的距离最近的第四预设阈值个数的已经进行色彩信息赋值的像素点的色彩信息,对该第四预设阈值个数的已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第二色彩信息平均值,并将该第二色彩信息平均值赋值给该不匹配像素点。
其中,该第四预设阈值可以为根据经验设定的范围值,例如,该第四预设阈值可以为5,本发明实施例对第四预设阈值的设定不加以限定。
该第二平均色彩信息可以为对第四预设阈值个数的已经进行色彩信息赋值的像素点的色彩信息直接进行平均的值,也可以对第四预设阈值个数的已经进行色彩信息赋值的像素点的色彩信息添加权重后再进行平均所得的值,本发明实施例对此不作限定。
需要说明的是,上述根据所述不匹配像素点的预设区域的像素点的色彩信息,对所述不匹配像素点进行色彩信息赋值的过程仅仅是本发明实施例的一种示例,本领域技术人员还可以采用其他方式对不匹配像素点进行色彩信息赋值,例如,获取该不匹配像素点在第二彩色原始图像中的对应位置像素点,并获取该对应位置像素点的预设区域的像素点的色彩信息平均值,依据该平均值进行该不匹配像素点的色彩赋值。本发明实施例对此不作限定。
当所述黑白原始图像的每个像素点均完成色彩信息赋值以后,生成第一中间图像。
当黑白原始图像的所有像素点都被赋予色彩信息时,整个合成过程结束,得到第一中间图像,在本发明实施例中,该第一中间图像为一帧10bit的RawDomain图像数据。
本发明实施例将该2张10bit的RawDomain图像数据进行算法合成,得到一帧10bit的RawDomain的第一中间图像,使得合成后的10bit的第一中间图像的图像质量更高、噪声更小更少、细节展现更好。
在本发明实施例中,以黑白原始图像为主,使用其更丰富的亮度信息,更好的感光能力,辅以第二彩色原始图像的色彩信息,能够获得质量更好的第一中间图像。
需要说明的是,在本发明实施例中,若移动终端支持CameraRaw操作,则可以应用移动终端自身的芯片完成彩色的图像与黑白的图像的合成过程,即彩色摄像头及黑白摄像头获得第一彩色原始图像和黑白原始图像以后,将该第一彩色原始图像和黑白原始图像传送至移动终端自身的芯片,应用移动终端自身的芯片执行步骤202及步骤203。
若移动终端不支持CameraRaw操作,则可以由移动终端的外置ARM(AdvancedRISCMachines)核或DSP(DigitalSignalProcess,数字信号处理)核的芯片完成彩色的图像与黑白的图像的合成过程,即即彩色摄像头及黑白摄像头获得第一彩色原始图像和黑白原始图像以后,将该第一彩色原始图像和黑白原始图像传送至移动终端外置ARM核或DSP核的芯片,应用移动终端外置ARM核或DSP核的芯片执行步骤202及步骤203。
该外置ARM核或DSP核的芯片可以采用MIPICSI接口与Camera模组连接,MIPICSI接口与移动终端自身的芯片连接,数据处理完后直接将第一中间图像给ISP(ImageSignalProcessor,图像信号处理设备)进行处理。
优选地,该外置芯片可以为专用图像处理DSP核芯片,其处理速度可以达到ARM处理能力的十几倍,这样可以给用户体验带来质的提升,将模式拍照做到正常拍照的用户体验。
相比于在CameraRaw中执行合成算法,通过引入专用的图像处理芯片执行合成算法,能够大大提高了图像处理的速度和效果(普通的彩色加黑白双摄像头基于YUV420格式合成算法运行一般会是2S,严重影响拍照速度和用户体验,并且本发明实施例是使用10bit的Raw图像数据进行合成,这需要更长的合成时间,若使用外置的图像算法处理芯片,可以使得图像算法处理速度在0.5S以内),优化了双camera模式拍照的效果,提升用户体验。
步骤204,对所述第一中间图像进行图像增强处理,得到第二中间图像。
本发明实施例中,移动终端自身的芯片或外置的芯片获得第一中间图像以后,可以将该第一中间图像传送至ISP进行进一步的图像增强处理。
作为一种示例,该图像增强处理至少可以包括:对所述第一中间图像进行马赛克处理、锐化处理、去噪处理、色彩转换处理、色彩增强等处理。
在图像处理过程中,色域转换(将10bit的Raw图像数据经过去马赛克转换成RGB图像数据,再经过色彩矩阵运算转换成YUV420的图像)使得ISP输出了一帧8bit的YUV420图像数据,即第二中间图像。
步骤205,对所述第二中间图像进行压缩处理,生成目标图像。
得到8bit的YUV420的第二中间图像以后,可以在HAL层(HAL层被称为硬件抽象层,它位于操作系统内核和硬件电路之间的接口层,目的是将硬件抽象化。它隐藏了特定平台的硬件接口细节,为操作系统提供虚拟的硬件平台,使其具有硬件无关性,这样就可以在多种平台上移植。)使用移动终端平台自带的硬件编码模块对第二中间图像进行JPEG编码压缩处理,生成JPEG图像,然后将硬件编码生成的JPEG图像传到移动终端的AP层(应用层)保存为用户目标看到的目标图像。
在本发明实施例中,采用两张10bit的RawDomain图像数据进行合成,合成得到一帧10bit的RawDomain图像数据,使得第一中间图像的作用域为10bit的RawDomain,其图像信息量更大,合成后的图像质量更高,噪声更小更少,细节展现更好。利用数据量更大的Raw图像输入源进行ISP转换,获得质量更好的JPEG图像。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请实施例并不受所描述的动作顺序的限制,因为依据本申请实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本申请实施例所必须的。
第三实施例
图3是本发明一个实施例的移动终端的框图。图3所示的移动终端300包括第一摄像头(图中未示出)以及第二摄像头(图中未示出),所述第一摄像头用于拍摄彩色的图像,所述第二摄像头用于拍摄黑白的图像。所述移动终端300还可以包括图像拍摄模块301、图像合成模302以及图像处理模块303。
图像拍摄模块301,用于获取所述第一摄像头和第二摄像头在同一时刻,对同一拍摄目标所拍摄的第一彩色原始图像和黑白原始图像。
图像合成模块302,用于对所述图像拍摄模块301获取的第一彩色原始图像和黑白原始图像进行合成处理,生成第一中间图像。
图像处理模块303,用于对所述图像合成模块302生成的第一中间图像进行图像处理,生成目标图像。
在本发明实施例的一种优选实施例中,参考图4所示的图像合成模块的框图,所述图像合成模块302进一步可以包括如下子模块:
视场校正子模块3021,用于以所述黑白原始图像为基准,将所述第一彩色原始图像校正至与所述黑白原始图像为同一视场的图像,生成第二彩色原始图像。
第一中间图像生成子模块3022,用于基于视场校正子模块3021生成的所述第二彩色原始图像的色彩信息,对所述黑白原始图像进行色彩信息赋值,生成第一中间图像。
在本发明实施例的一种优选实施例中,参考图5所示的第一中间图像生成子模块的框图,所述第一中间图像生成子模块3022进一步可以包括如下单元:
二维梯度运算单元30221,用于分别对所述第二彩色原始图像和黑白原始图像进行二维梯度运算,得到所述第二彩色原始图像的每个像素点的二维梯度信息以及所述黑白原始图像的每个像素点的二维梯度信息。
像素点属性确定单元30222,用于基于所述二维梯度运算单元30221获得的黑白原始图像的每个像素点的二维梯度信息与所述第二彩色原始图像中的每个像素点的二维梯度信息,确定所述黑白原始图像中每个像素点的属性,其中,所述属性包括匹配像素点、疑似匹配像素点或不匹配像素点。
重置单元30223,用于基于所述像素点属性确定单元30222获取的疑似匹配像素点,将所述疑似匹配像素点重置为匹配像素点或不匹配像素点。
第一色彩赋值单元30224,用于基于所述像素点属性确定单元30222或所述重置单元30223获取的匹配像素点,获取所述第二彩色原始图像中与所述匹配像素点匹配的像素点的色彩信息,并将所述色彩信息赋值给所述黑白原始图像中对应的匹配像素点。
第二色彩赋值单元30225,用于基于所述像素点属性确定单元30222或所述重置单元30223获取的不匹配像素点,根据所述不匹配像素点的预设区域的像素点的色彩信息,对所述不匹配像素点进行色彩信息赋值。
第一中间图像获得单元30226,用于当所述黑白原始图像的每个像素点均完成色彩信息赋值以后,生成第一中间图像。
在本发明实施例的一种优选实施例中,参考图6所示的像素点属性确定单元的框图,所述像素点属性确定单元30222进一步包括如下子单元:
第一像素点查找子单元302221,用于对于所述黑白原始图像的每个像素点(x0,y0),在所述第二彩色原始图像中查找与所述像素点(x0,y0)的位置相对应的像素点(x1,y1)。
第二像素点查找子单元302222,用于在所述第二彩色原始图像中以所述第一像素点查找子单元302221获取的像素点(x1,y1)为中心的第一预设范围内的所有像素点的二维梯度信息中,查找与所述像素点(x0,y0)的二维梯度信息差值最小的像素点(x2,y2)。
相似置信度计算子单元302223,用于计算所述像素点(x0,y0)与所述第二像素点查找子单元302222获取的像素点(x2,y2)的相似置信度cov。
第一标记子单元302224,用于在所述相似置信度计算子单元302223获取的cov大于第一预设阈值时,判定所述像素点(x0,y0)在第二彩色原始图像中具有匹配的像素点,并标记所述像素点(x0,y0)的属性为匹配像素点。
第二标记子单元302225,用于在所述相似置信度计算子单元302223获取的cov小于第二预设阈值时,判定所述像素点(x0,y0)在第二彩色原始图像中没有匹配的像素点,并标记所述像素点(x0,y0)的属性为不匹配像素点。
第三标记子单元302226,用于在所述相似置信度计算子单元302223获取的cov大于或等于第二预设阈值且cov小于或等于第一预设阈值时,判定所述像素点(x0,y0)在第二彩色原始图像中具有疑似匹配的像素点,并标记所述像素点(x0,y0)的属性为疑似匹配像素点。
在本发明实施例的一种优选实施例中,参考图7所示的重置单元的框图,重置单元30223进一步包括如下子单元:
匹配像素点个数获取子单元302231,用于若所述黑白原始图像的像素点为疑似匹配像素点,则获取在以所述像素点(x0,y0)为中心的第二预设范围内标记为匹配像素点的像素点个数。
第一重置子单元302232,用于在所述匹配像素点个数获取子单元302231获取的标记为匹配像素点的像素点个数大于或等于第三预设阈值时,将所述疑似匹配像素点重置为匹配像素点。
第二重置子单元302233,用于在所述匹配像素点个数获取子单元302231获取的标记为匹配像素点的像素点个数小于第三预设阈值时,将所述疑似匹配像素点重置为不匹配像素点。
其中,所述第三预设阈值取值为大于或等于所述第二预设范围内的所有像素点的总数的一半。
在本发明实施例的一种优选实施例中,参考图8所示的第二色彩赋值单元的框图,所述第二色彩赋值单元30225进一步可以包括如下子单元:
边缘提取子单元302251,用于对所述黑白原始图像进行图像边缘提取,得到所述黑白原始图像的边缘信息。
边缘判断子单元302252,用于根据所述边缘提取子单元302251获取的边缘信息,判断所述不匹配像素点是否落在所述黑白原始图像的边缘上;。
第一平均色彩赋值子单元302253,用于在所述边缘判断子单元302252获取的判断结果为否时,对以所述不匹配像素点为中心的第三预设范围内的所有已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第一色彩信息平均值,并将所述第一色彩信息平均值赋值给所述不匹配像素点。
第二平均色彩赋值子单元302254,用于在所述边缘判断子单元302252获取的判断结果为是时,将与所述不匹配像素点所落边缘之间的距离最近的第四预设阈值个数的已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第二色彩信息平均值,并将所述第二色彩信息平均值赋值给所述不匹配像素点。
在本发明实施例的一种优选实施例中,参考图9所示的图像处理模块的结构框图,图像处理模块303可以包括如下子模块:
图像增强子模块3031,用于对所述第一中间图像进行图像增强处理,得到第二中间图像。
图像压缩子模块3032,用于对所述图像增强子模块3031获取的第二中间图像进行压缩处理,生成目标图像。
在本发明实施例的一种优选实施例中,所述第一彩色原始图像、黑白原始图像、第二彩色原始图像和第一中间图像均为10比特位宽的原始图像域图像,所述第二中间图像为8比特位宽的YUV格式图像,所述目标图像为JPEG格式的图像。
在本发明实施例的一种优选实施例中,所述图像增强子模块3031还用于:
对所述第一中间图像进行马赛克处理、锐化处理、去噪处理、色彩转换处理、色彩增强处理。
在本发明实施例的一种优选实施例中,所述图像合成模块302置于移动终端的外置ARM核或DSP核的芯片中。
移动终端300能够实现图1和图2的方法实施例中移动终端实现的各个过程,为避免重复,这里不再赘述。
在本发明实施例中,移动终端300采用图像拍摄模块301获取第一摄像头及第二摄像头拍摄的第一彩色原始图像以及黑白原始图像,采用图像合成模块302对获得的第一彩色原始图像以及黑白原始图像进行合成,得到第一中间图像,然后采用图像处理模块303对第一中间图像进行图像处理,生成目标图像。对第一彩色原始图像以及黑白原始图像先合成再进行图像处理,使得第一中间图像能够保持其数据位宽,数据量更大、图像质量更高、噪声更小更少、细节展现更好。利用数据量更大的第一中间图像进行图像处理,能够获得质量更高的目标图像。
第四实施例
图10是本发明另一个实施例的移动终端的框图。图10所示的移动终端1000包括:至少一个处理器1001、存储器1002、至少一个网络接口1004和其他用户接口1003、拍照组件1006。移动终端1000中的各个组件通过总线系统1005耦合在一起。可理解,总线系统1005用于实现这些组件之间的连接通信。总线系统1005除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图10中将各种总线都标为总线系统1005,拍照组件1006包括第一摄像头和第二摄像头,其中,第一摄像头用于拍摄彩色的图像,第二摄像头用于拍摄黑白的图像。
其中,用户接口1003可以包括显示器、键盘或者点击设备(例如,鼠标,轨迹球(trackball)、触感板或者触摸屏等。
可以理解,本发明实施例中的存储器1002可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-OnlyMemory,ROM)、可编程只读存储器(ProgrammableROM,PROM)、可擦除可编程只读存储器(ErasablePROM,EPROM)、电可擦除可编程只读存储器(ElectricallyEPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(RandomAccessMemory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(StaticRAM,SRAM)、动态随机存取存储器(DynamicRAM,DRAM)、同步动态随机存取存储器(SynchronousDRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(DoubleDataRateSDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(EnhancedSDRAM,ESDRAM)、同步连接动态随机存取存储器(SynchlinkDRAM,SLDRAM)和直接内存总线随机存取存储器(DirectRambusRAM,DRRAM)。本发明实施例描述的系统和方法的存储器1002旨在包括但不限于这些和任意其它适合类型的存储器。
在一些实施方式中,存储器1002存储了如下的元素,可执行模块或者数据结构,或者他们的子集,或者他们的扩展集:操作系统10021和应用程序10022。
其中,操作系统10021,包含各种系统程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序10022,包含各种应用程序,例如照相机应用程序、媒体播放器(MediaPlayer)、浏览器(Browser)等,用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序10022中。
在本发明实施例中,通过调用存储器1002存储的程序或指令,具体的,可以是应用程序10022中存储的程序或指令,处理器1001用于获取所述第一摄像头和第二摄像头在同一时刻,对同一拍摄目标所拍摄的第一彩色原始图像和黑白原始图像;对所述第一彩色原始图像和黑白原始图像进行合成处理,生成第一中间图像;对所述第一中间图像进行图像处理,生成目标图像。
上述本发明实施例揭示的方法可以应用于处理器1001中,或者由处理器1001实现。处理器1001可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器1001中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器1001可以是通用处理器、数字信号处理器(DigitalSignalProcessor,DSP)、专用集成电路(ApplicationSpecificIntegratedCircuit,ASIC)、现成可编程门阵列(FieldProgrammableGateArray,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器1002,处理器1001读取存储器1002中的信息,结合其硬件完成上述方法的步骤。
可以理解的是,本发明实施例描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现,处理单元可以实现在一个或多个专用集成电路(ApplicationSpecificIntegratedCircuits,ASIC)、数字信号处理器(DigitalSignalProcessing,DSP)、数字信号处理设备(DSPDevice,DSPD)、可编程逻辑设备(ProgrammableLogicDevice,PLD)、现场可编程门阵列(Field-ProgrammableGateArray,FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。
对于软件实现,可通过执行本发明实施例所述功能的模块(例如过程、函数等)来实现本发明实施例所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
可选地,处理器1001还用于:以所述黑白原始图像为基准,将所述第一彩色原始图像校正至与所述黑白原始图像为同一视场的图像,生成第二彩色原始图像;基于所述第二彩色原始图像的色彩信息,对所述黑白原始图像进行色彩信息赋值,生成第一中间图像。
可选地,处理器1001还用于:分别对所述第二彩色原始图像和黑白原始图像进行二维梯度运算,得到所述第二彩色原始图像的每个像素点的二维梯度信息以及所述黑白原始图像的每个像素点的二维梯度信息;基于所述黑白原始图像的每个像素点的二维梯度信息与所述第二彩色原始图像中的每个像素点的二维梯度信息,确定所述黑白原始图像中每个像素点的属性,其中,所述属性包括匹配像素点、疑似匹配像素点或不匹配像素点;若所述黑白原始图像的像素点的属性为疑似匹配像素点,则将所述疑似匹配像素点重置为匹配像素点或不匹配像素点;若所述黑白原始图像的像素点的属性为匹配像素点,则获取所述第二彩色原始图像中与所述匹配像素点匹配的像素点的色彩信息,并将所述色彩信息赋值给所述黑白原始图像中对应的匹配像素点;若所述黑白原始图像的像素点的属性为不匹配像素点,则根据所述不匹配像素点的预设区域的像素点的色彩信息,对所述不匹配像素点进行色彩信息赋值;当所述黑白原始图像的每个像素点均完成色彩信息赋值以后,生成第一中间图像。
可选地,处理器1001还用于:对于所述黑白原始图像的每个像素点(x0,y0),在所述第二彩色原始图像中查找与所述像素点(x0,y0)的位置相对应的像素点(x1,y1);在所述第二彩色原始图像中以所述像素点(x1,y1)为中心的第一预设范围内的所有像素点的二维梯度信息中,查找与所述像素点(x0,y0)的二维梯度信息差值最小的像素点(x2,y2);计算所述像素点(x0,y0)与所述像素点(x2,y2)的相似置信度cov;若所述cov大于第一预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中具有匹配的像素点,并标记所述像素点(x0,y0)的属性为匹配像素点;若所述cov小于第二预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中没有匹配的像素点,并标记所述像素点(x0,y0)的属性为不匹配像素点;若所述cov大于或等于第二预设阈值且cov小于或等于第一预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中具有疑似匹配的像素点,并标记所述像素点(x0,y0)的属性为疑似匹配像素点。
可选地,处理器1001还用于:若所述黑白原始图像的像素点为疑似匹配像素点,则获取在以所述像素点(x0,y0)为中心的第二预设范围内标记为匹配像素点的像素点个数;若所述标记为匹配像素点的像素点个数大于或等于第三预设阈值,则将所述疑似匹配像素点重置为匹配像素点;若所述标记为匹配像素点的像素点个数小于第三预设阈值,则将所述疑似匹配像素点重置为不匹配像素点;其中,所述第三预设阈值取值为大于或等于所述第二预设范围内的所有像素点的总数的一半。
可选地,处理器1001还用于:对所述黑白原始图像进行图像边缘提取,得到所述黑白原始图像的边缘信息;根据所述边缘信息,判断所述不匹配像素点是否落在所述黑白原始图像的边缘上;若判断结果为否,则对以所述不匹配像素点为中心的第三预设范围内的所有已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第一色彩信息平均值,并将所述第一色彩信息平均值赋值给所述不匹配像素点;若判断结果为是,则将与所述不匹配像素点所落边缘之间的距离最近的第四预设阈值个数的已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第二色彩信息平均值,并将所述第二色彩信息平均值赋值给所述不匹配像素点。
可选地,处理器1001连接ISP,由ISP对所述第一中间图像进行图像处理,生成目标图像,包括:对所述第一中间图像进行图像增强处理,得到第二中间图像;对所述第二中间图像进行压缩处理,生成目标图像。
可选地,所述第一彩色原始图像、黑白原始图像、第二彩色原始图像和第一中间图像均为10比特位宽的原始图像域图像,所述第二中间图像8比特位宽的YUV格式图像,所述目标图像为JPEG格式的图像。
可选地,ISP对所述第一中间图像进行图像增强处理进一步包括:对所述第一中间图像进行马赛克处理、锐化处理、去噪处理、色彩转换处理、色彩增强处理。
可选地,处理器1001连接外置ARM核或DSP核的芯片,由所述外置ARM核或DSP核的芯片对所述第一彩色原始图像和黑白原始图像进行合成处理。
移动终端1000能够实现前述实施例中移动终端实现的各个过程,为避免重复,这里不再赘述。
在本发明实施例中,移动终端可以获取双摄像头获得的第一彩色原始图像以及黑白原始图像,并对其进行合成,得到第一中间图像,然后对第一中间图像进行图像处理,生成目标图像。对第一彩色原始图像以及黑白原始图像先合成再进行图像处理,使得第一中间图像能够保持其数据位宽,数据量更大、图像质量更高、噪声更小更少、细节展现更好。利用数据量更大的第一中间图像进行图像处理,能够获得质量更好的目标图像。
第五实施例
图11是本发明另一个实施例的移动终端的结构示意图。具体地,图11中的移动终端1100可以为手机、平板电脑、个人数字助理(PersonalDigitalAssistant,PDA)、或车载电脑等。
图11中的移动终端1100包括射频(RadioFrequency,RF)电路1110、存储器1120、输入单元1130、显示单元1140、处理器1160、音频电路1170、WiFi(WirelessFidelity)模块1180、电源1190和拍照组件1111。
其中,输入单元1130可用于接收用户输入的数字或字符信息,以及产生与移动终端1100的用户设置以及功能控制有关的信号输入。具体地,本发明实施例中,该输入单元1130可以包括触控面板1131。触控面板1131,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1131上的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板1131可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给该处理器1160,并能接收处理器1160发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1131。除了触控面板1131,输入单元1130还可以包括其他输入设备1132,其他输入设备1132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
其中,显示单元1140可用于显示由用户输入的信息或提供给用户的信息以及移动终端1100的各种菜单界面。显示单元1140可包括显示面板1141,可选的,可以采用LCD或有机发光二极管(OrganicLight-EmittingDiode,OLED)等形式来配置显示面板1141。
应注意,触控面板1131可以覆盖显示面板1141,形成触摸显示屏,当该触摸显示屏检测到在其上或附近的触摸操作后,传送给处理器1160以确定触摸事件的类型,随后处理器1160根据触摸事件的类型在触摸显示屏上提供相应的视觉输出。
触摸显示屏包括应用程序界面显示区及常用控件显示区。该应用程序界面显示区及该常用控件显示区的排列方式并不限定,可以为上下排列、左右排列等可以区分两个显示区的排列方式。该应用程序界面显示区可以用于显示应用程序的界面。每一个界面可以包含至少一个应用程序的图标和/或widget桌面控件等界面元素。该应用程序界面显示区也可以为不包含任何内容的空界面。该常用控件显示区用于显示使用率较高的控件,例如,设置按钮、界面编号、滚动条、电话本图标等应用程序图标等。
拍照组件1111包括第一摄像头和第二摄像头,其中,第一摄像头用于拍摄彩色的图像,第二摄像头用于拍摄黑白的图像。
其中处理器1160是移动终端1100的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在第一存储器1121内的软件程序和/或模块,以及调用存储在第二存储器522内的数据,执行移动终端1100的各种功能和处理数据,从而对移动终端1100进行整体监控。可选的,处理器1160可包括一个或多个处理单元。
在本发明实施例中,通过调用存储该第一存储器1121内的软件程序和/或模块和/或该第二存储器1122内的数据,处理器1160用于获取所述第一摄像头和第二摄像头在同一时刻,对同一拍摄目标所拍摄的第一彩色原始图像和黑白原始图像;对所述第一彩色原始图像和黑白原始图像进行合成处理,生成第一中间图像;对所述第一中间图像进行图像处理,生成目标图像
可选地,处理器1160还用于:以所述黑白原始图像为基准,将所述第一彩色原始图像校正至与所述黑白原始图像为同一视场的图像,生成第二彩色原始图像;基于所述第二彩色原始图像的色彩信息,对所述黑白原始图像进行色彩信息赋值,生成第一中间图像。
可选地,处理器1160还用于:分别对所述第二彩色原始图像和黑白原始图像进行二维梯度运算,得到所述第二彩色原始图像的每个像素点的二维梯度信息以及所述黑白原始图像的每个像素点的二维梯度信息;基于所述黑白原始图像的每个像素点的二维梯度信息与所述第二彩色原始图像中的每个像素点的二维梯度信息,确定所述黑白原始图像中每个像素点的属性,其中,所述属性包括匹配像素点、疑似匹配像素点或不匹配像素点;若所述黑白原始图像的像素点的属性为疑似匹配像素点,则将所述疑似匹配像素点重置为匹配像素点或不匹配像素点;若所述黑白原始图像的像素点的属性为匹配像素点,则获取所述第二彩色原始图像中与所述匹配像素点匹配的像素点的色彩信息,并将所述色彩信息赋值给所述黑白原始图像中对应的匹配像素点;若所述黑白原始图像的像素点的属性为不匹配像素点,则根据所述不匹配像素点的预设区域的像素点的色彩信息,对所述不匹配像素点进行色彩信息赋值;当所述黑白原始图像的每个像素点均完成色彩信息赋值以后,生成第一中间图像。
可选地,处理器1160还用于:对于所述黑白原始图像的每个像素点(x0,y0),在所述第二彩色原始图像中查找与所述像素点(x0,y0)的位置相对应的像素点(x1,y1);在所述第二彩色原始图像中以所述像素点(x1,y1)为中心的第一预设范围内的所有像素点的二维梯度信息中,查找与所述像素点(x0,y0)的二维梯度信息差值最小的像素点(x2,y2);计算所述像素点(x0,y0)与所述像素点(x2,y2)的相似置信度cov;若所述cov大于第一预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中具有匹配的像素点,并标记所述像素点(x0,y0)的属性为匹配像素点;若所述cov小于第二预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中没有匹配的像素点,并标记所述像素点(x0,y0)的属性为不匹配像素点;若所述cov大于或等于第二预设阈值且cov小于或等于第一预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中具有疑似匹配的像素点,并标记所述像素点(x0,y0)的属性为疑似匹配像素点。
可选地,处理器1160还用于:若所述黑白原始图像的像素点为疑似匹配像素点,则获取在以所述像素点(x0,y0)为中心的第二预设范围内标记为匹配像素点的像素点个数;若所述标记为匹配像素点的像素点个数大于或等于第三预设阈值,则将所述疑似匹配像素点重置为匹配像素点;若所述标记为匹配像素点的像素点个数小于第三预设阈值,则将所述疑似匹配像素点重置为不匹配像素点;其中,所述第三预设阈值取值为大于或等于所述第二预设范围内的所有像素点的总数的一半。
可选地,处理器1160还用于:对所述黑白原始图像进行图像边缘提取,得到所述黑白原始图像的边缘信息;根据所述边缘信息,判断所述不匹配像素点是否落在所述黑白原始图像的边缘上;若判断结果为否,则对以所述不匹配像素点为中心的第三预设范围内的所有已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第一色彩信息平均值,并将所述第一色彩信息平均值赋值给所述不匹配像素点;若判断结果为是,则将与所述不匹配像素点所落边缘之间的距离最近的第四预设阈值个数的已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第二色彩信息平均值,并将所述第二色彩信息平均值赋值给所述不匹配像素点。
可选地,处理器1160连接ISP,由ISP对所述第一中间图像进行图像处理,生成目标图像,包括:对所述第一中间图像进行图像增强处理,得到第二中间图像;对所述第二中间图像进行压缩处理,生成目标图像。
可选地,所述第一彩色原始图像、黑白原始图像、第二彩色原始图像和第一中间图像均为10比特位宽的原始图像域图像,所述第二中间图像为8比特位宽的YUV格式图像,所述目标图像为JPEG格式的图像。
可选地,ISP对所述第一中间图像进行图像增强处理包括:对所述第一中间图像进行马赛克处理、锐化处理、去噪处理、色彩转换处理、色彩增强处理。
可选地,所述处理器1160连接外置ARM核或DSP核的芯片,由所述外置ARM核或DSP核的芯片对所述第一彩色原始图像和黑白原始图像进行合成处理。
可见,在本发明实施例中,移动终端可以获取双摄像头获得的第一彩色原始图像以及黑白原始图像,并对其进行合成,得到第一中间图像,然后对第一中间图像进行图像处理,生成目标图像。对第一彩色原始图像以及黑白原始图像先合成再进行图像处理,使得第一中间图像能够保持其数据位宽,数据量更大、图像质量更高、噪声更小更少、细节展现更好。利用数据量更大的第一中间图像进行图像处理,能够获得质量更好的目标图像。
本领域普通技术人员可以意识到,结合本发明实施例中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (20)

1.一种基于移动终端的图像处理方法,其特征在于,所述移动终端包括第一摄像头和第二摄像头,所述第一摄像头用于拍摄彩色的图像,所述第二摄像头用于拍摄黑白的图像,所述方法包括:
获取所述第一摄像头和第二摄像头在同一时刻,对同一拍摄目标所拍摄的第一彩色原始图像和黑白原始图像;
对所述第一彩色原始图像和黑白原始图像进行合成处理,生成第一中间图像;
对所述第一中间图像进行图像处理,生成目标图像。
2.根据权利要求1所述的方法,其特征在于,所述对所述第一彩色原始图像和黑白原始图像进行合成处理,生成第一中间图像的步骤,包括:
以所述黑白原始图像为基准,将所述第一彩色原始图像校正至与所述黑白原始图像为同一视场的图像,生成第二彩色原始图像;
基于所述第二彩色原始图像的色彩信息,对所述黑白原始图像进行色彩信息赋值,生成第一中间图像。
3.根据权利要求2所述的方法,其特征在于,所述基于所述第二彩色原始图像的色彩信息,对所述黑白原始图像进行色彩信息赋值,生成第一中间图像的步骤,包括:
分别对所述第二彩色原始图像和黑白原始图像进行二维梯度运算,得到所述第二彩色原始图像的每个像素点的二维梯度信息以及所述黑白原始图像的每个像素点的二维梯度信息;
基于所述黑白原始图像的每个像素点的二维梯度信息与所述第二彩色原始图像中的每个像素点的二维梯度信息,确定所述黑白原始图像中每个像素点的属性,其中,所述属性包括匹配像素点、疑似匹配像素点或不匹配像素点;
若所述黑白原始图像的像素点的属性为疑似匹配像素点,则将所述疑似匹配像素点重置为匹配像素点或不匹配像素点;
若所述黑白原始图像的像素点的属性为匹配像素点,则获取所述第二彩色原始图像中与所述匹配像素点匹配的像素点的色彩信息,并将所述色彩信息赋值给所述黑白原始图像中对应的匹配像素点;
若所述黑白原始图像的像素点的属性为不匹配像素点,则根据所述不匹配像素点的预设区域的像素点的色彩信息,对所述不匹配像素点进行色彩信息赋值;
当所述黑白原始图像的每个像素点均完成色彩信息赋值以后,生成第一中间图像。
4.根据权利要求3所述的方法,其特征在于,所述基于所述黑白原始图像的每个像素点的二维梯度信息与所述第二彩色原始图像中的每个像素点的二维梯度信息,确定所述黑白原始图像中每个像素点的属性的步骤,包括:
对于所述黑白原始图像的每个像素点(x0,y0),在所述第二彩色原始图像中查找与所述像素点(x0,y0)的位置相对应的像素点(x1,y1);
在所述第二彩色原始图像中以所述像素点(x1,y1)为中心的第一预设范围内的所有像素点的二维梯度信息中,查找与所述像素点(x0,y0)的二维梯度信息差值最小的像素点(x2,y2);
计算所述像素点(x0,y0)与所述像素点(x2,y2)的相似置信度cov;
若所述cov大于第一预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中具有匹配的像素点,并标记所述像素点(x0,y0)的属性为匹配像素点;
若所述cov小于第二预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中没有匹配的像素点,并标记所述像素点(x0,y0)的属性为不匹配像素点;
若所述cov大于或等于第二预设阈值且cov小于或等于第一预设阈值,则判定所述像素点(x0,y0)在第二彩色原始图像中具有疑似匹配的像素点,并标记所述像素点(x0,y0)的属性为疑似匹配像素点。
5.根据权利要求4所述的方法,其特征在于,所述若所述黑白原始图像的像素点的属性为疑似匹配像素点,则将所述疑似匹配像素点重置为匹配像素点或不匹配像素点的步骤,包括:
若所述黑白原始图像的像素点为疑似匹配像素点,则获取在以所述像素点(x0,y0)为中心的第二预设范围内标记为匹配像素点的像素点个数;
若所述标记为匹配像素点的像素点个数大于或等于第三预设阈值,则将所述疑似匹配像素点重置为匹配像素点;
若所述标记为匹配像素点的像素点个数小于第三预设阈值,则将所述疑似匹配像素点重置为不匹配像素点;
其中,所述第三预设阈值取值为大于或等于所述第二预设范围内的所有像素点的总数的一半。
6.根据权利要求3所述的方法,其特征在于,所述根据所述不匹配像素点的第一预设范围的像素点的色彩信息,对所述不匹配像素点进行色彩信息赋值的步骤,包括:
对所述黑白原始图像进行图像边缘提取,得到所述黑白原始图像的边缘信息;
根据所述边缘信息,判断所述不匹配像素点是否落在所述黑白原始图像的边缘上;
若判断结果为否,则对以所述不匹配像素点为中心的第三预设范围内的所有已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第一色彩信息平均值,并将所述第一色彩信息平均值赋值给所述不匹配像素点;
若判断结果为是,则将与所述不匹配像素点所落边缘之间的距离最近的第四预设阈值个数的已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第二色彩信息平均值,并将所述第二色彩信息平均值赋值给所述不匹配像素点。
7.根据权利要求1-5中任一项所述的方法,其特征在于,所述对所述第一中间图像进行图像处理,生成目标图像的步骤,包括:
对所述第一中间图像进行图像增强处理,得到第二中间图像;
对所述第二中间图像进行压缩处理,生成目标图像。
8.根据权利要求7所述的方法,其特征在于,所述第一彩色原始图像、黑白原始图像、第二彩色原始图像和第一中间图像均为10比特位宽的原始图像域图像,所述第二中间图像为8比特位宽的YUV格式图像,所述目标图像为JPEG格式的图像。
9.根据权利要求7或8所述的方法,其特征在于,所述对所述第一中间图像进行图像增强处理的步骤,包括:
对所述第一中间图像进行马赛克处理、锐化处理、去噪处理、色彩转换处理、色彩增强处理。
10.根据权利要求1所述的方法,其特征在于,所述对所述第一彩色原始图像和黑白原始图像进行合成处理的步骤由移动终端的外置ARM核或DSP核的芯片执行。
11.一种移动终端,其特征在于,所述移动终端包括第一摄像头和第二摄像头,所述第一摄像头用于拍摄彩色的图像,所述第二摄像头用于拍摄黑白的图像,所述移动终端还包括:
图像拍摄模块,用于获取所述第一摄像头和第二摄像头在同一时刻,对同一拍摄目标所拍摄的第一彩色原始图像和黑白原始图像;
图像合成模块,用于对所述图像拍摄模块获取的第一彩色原始图像和黑白原始图像进行合成处理,生成第一中间图像;
图像处理模块,用于对所述图像合成模块生成的第一中间图像进行图像处理,生成目标图像。
12.根据权利要求11所述的移动终端,其特征在于,所述图像合成模块包括:
视场校正子模块,用于以所述黑白原始图像为基准,将所述第一彩色原始图像校正至与所述黑白原始图像为同一视场的图像,生成第二彩色原始图像;
第一中间图像生成子模块,用于基于所述视场校正子模块生成的第二彩色原始图像的色彩信息,对所述黑白原始图像进行色彩信息赋值,生成第一中间图像。
13.根据权利要求12所述的移动终端,其特征在于,所述第一中间图像生成子模块包括:
二维梯度运算单元,用于分别对所述第二彩色原始图像和黑白原始图像进行二维梯度运算,得到所述第二彩色原始图像的每个像素点的二维梯度信息以及所述黑白原始图像的每个像素点的二维梯度信息;
像素点属性确定单元,用于基于所述二维梯度运算单元获得的黑白原始图像的每个像素点的二维梯度信息与所述第二彩色原始图像中的每个像素点的二维梯度信息,确定所述黑白原始图像中每个像素点的属性,其中,所述属性包括匹配像素点、疑似匹配像素点或不匹配像素点;
重置单元,用于基于所述像素点属性确定单元获取的疑似匹配像素点,将所述疑似匹配像素点重置为匹配像素点或不匹配像素点;
第一色彩赋值单元,用于基于所述像素点属性确定单元或所述重置单元获取的匹配像素点,获取所述第二彩色原始图像中与所述匹配像素点匹配的像素点的色彩信息,并将所述色彩信息赋值给所述黑白原始图像中对应的匹配像素点;
第二色彩赋值单元,用于基于所述像素点属性确定单元或所述重置单元获取的不匹配像素点,根据所述不匹配像素点的预设区域的像素点的色彩信息,对所述不匹配像素点进行色彩信息赋值;
第一中间图像获得单元,用于当所述黑白原始图像的每个像素点均完成色彩信息赋值以后,生成第一中间图像。
14.根据权利要求13所述的移动终端,其特征在于,所述像素点属性确定单元包括:
第一像素点查找子单元,用于对于所述黑白原始图像的每个像素点(x0,y0),在所述第二彩色原始图像中查找与所述像素点(x0,y0)的位置相对应的像素点(x1,y1);
第二像素点查找子单元,用于在所述第二彩色原始图像中以所述第一像素点查找子单元获取的像素点(x1,y1)为中心的第一预设范围内的所有像素点的二维梯度信息中,查找与所述像素点(x0,y0)的二维梯度信息差值最小的像素点(x2,y2);
相似置信度计算子单元,用于计算所述像素点(x0,y0)与所述第二像素点查找子单元获取的像素点(x2,y2)的相似置信度cov;
第一标记子单元,用于在所述相似置信度计算子单元获取的cov大于第一预设阈值时,判定所述像素点(x0,y0)在第二彩色原始图像中具有匹配的像素点,并标记所述像素点(x0,y0)的属性为匹配像素点;
第二标记子单元,用于在所述相似置信度计算子单元获取的cov小于第二预设阈值时,判定所述像素点(x0,y0)在第二彩色原始图像中没有匹配的像素点,并标记所述像素点(x0,y0)的属性为不匹配像素点;
第三标记子单元,用于在所述相似置信度计算子单元获取的cov大于或等于第二预设阈值且cov小于或等于第一预设阈值时,判定所述像素点(x0,y0)在第二彩色原始图像中具有疑似匹配的像素点,并标记所述像素点(x0,y0)的属性为疑似匹配像素点。
15.根据权利要求14所述的移动终端,其特征在于,所述重置单元包括:
匹配像素点个数获取子单元,用于若所述黑白原始图像的像素点为疑似匹配像素点,则获取在以所述像素点(x0,y0)为中心的第二预设范围内标记为匹配像素点的像素点个数;
第一重置子单元,用于在所述匹配像素点个数获取子单元获取的标记为匹配像素点的像素点个数大于或等于第三预设阈值时,将所述疑似匹配像素点重置为匹配像素点;
第二重置子单元,用于在所述匹配像素点个数获取子单元获取的标记为匹配像素点的像素点个数小于第三预设阈值时,将所述疑似匹配像素点重置为不匹配像素点;
其中,所述第三预设阈值取值为大于或等于所述第二预设范围内的所有像素点的总数的一半。
16.根据权利要求13所述的移动终端,其特征在于,所述第二色彩赋值单元包括:
边缘提取子单元,用于对所述黑白原始图像进行图像边缘提取,得到所述黑白原始图像的边缘信息;
边缘判断子单元,用于根据所述边缘提取子单元获取的边缘信息,判断所述不匹配像素点是否落在所述黑白原始图像的边缘上;;
第一平均色彩赋值子单元,用于在所述边缘判断子单元获取的判断结果为否时,对以所述不匹配像素点为中心的第三预设范围内的所有已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第一色彩信息平均值,并将所述第一色彩信息平均值赋值给所述不匹配像素点;
第二平均色彩赋值子单元,用于在所述边缘判断子单元获取的判断结果为是时,将与所述不匹配像素点所落边缘之间的距离最近的第四预设阈值个数的已经进行色彩信息赋值的像素点的色彩信息进行求平均运算,得到第二色彩信息平均值,并将所述第二色彩信息平均值赋值给所述不匹配像素点。
17.根据权利要求11-15中任一项所述的移动终端,其特征在于,所述图像处理模块包括:
图像增强子模块,用于对所述第一中间图像进行图像增强处理,得到第二中间图像;
图像压缩子模块,用于对所述图像增强子模块获取的第二中间图像进行压缩处理,生成目标图像。
18.根据权利要求17所述的移动终端,其特征在于,所述第一彩色原始图像、黑白原始图像、第二彩色原始图像和第一中间图像均为10比特位宽的原始图像域图像,所述第二中间图像为8比特位宽的YUV格式图像,所述目标图像为JPEG格式的图像。
19.根据权利要求17或18所述的移动终端,其特征在于,所述图像增强子模块还用于:
对所述第一中间图像进行马赛克处理、锐化处理、去噪处理、色彩转换处理、色彩增强处理。
20.根据权利要求11所述的移动终端,其特征在于,所述图像合成模块置于移动终端的外置ARM核或DSP核的芯片中。
CN201610179454.9A 2016-03-25 2016-03-25 一种基于移动终端的图像处理方法及移动终端 Active CN105827965B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610179454.9A CN105827965B (zh) 2016-03-25 2016-03-25 一种基于移动终端的图像处理方法及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610179454.9A CN105827965B (zh) 2016-03-25 2016-03-25 一种基于移动终端的图像处理方法及移动终端

Publications (2)

Publication Number Publication Date
CN105827965A true CN105827965A (zh) 2016-08-03
CN105827965B CN105827965B (zh) 2019-04-12

Family

ID=56525310

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610179454.9A Active CN105827965B (zh) 2016-03-25 2016-03-25 一种基于移动终端的图像处理方法及移动终端

Country Status (1)

Country Link
CN (1) CN105827965B (zh)

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105827971A (zh) * 2016-03-31 2016-08-03 维沃移动通信有限公司 一种图像处理方法及移动终端
CN106412460A (zh) * 2016-11-30 2017-02-15 努比亚技术有限公司 一种图像处理方法及设备
CN106454290A (zh) * 2016-10-12 2017-02-22 成都西纬科技有限公司 一种双摄像头图像处理系统及方法
CN106447641A (zh) * 2016-08-29 2017-02-22 努比亚技术有限公司 图像生成装置及方法
CN106502027A (zh) * 2016-11-22 2017-03-15 宇龙计算机通信科技(深圳)有限公司 一种双摄像头模组及智能设备
CN106506962A (zh) * 2016-11-29 2017-03-15 维沃移动通信有限公司 一种图像处理方法及移动终端
CN106780330A (zh) * 2016-12-08 2017-05-31 中国人民解放军国防科学技术大学 一种基于彩色与黑白双摄像头的超分辨率重建方法
CN106791379A (zh) * 2016-12-05 2017-05-31 奇酷互联网络科技(深圳)有限公司 基于双摄像头图像合成的方法及装置
CN106845449A (zh) * 2017-02-22 2017-06-13 浙江维尔科技有限公司 一种图像处理装置、方法以及人脸识别系统
CN106937097A (zh) * 2017-03-01 2017-07-07 奇酷互联网络科技(深圳)有限公司 一种图像处理方法、系统及移动终端
CN106973231A (zh) * 2017-04-19 2017-07-21 宇龙计算机通信科技(深圳)有限公司 图片合成方法及系统
CN107038695A (zh) * 2017-04-20 2017-08-11 厦门美图之家科技有限公司 一种图像融合方法及移动设备
CN107277352A (zh) * 2017-06-30 2017-10-20 维沃移动通信有限公司 一种拍摄的方法和移动终端
CN107347139A (zh) * 2017-06-30 2017-11-14 维沃移动通信有限公司 一种图像数据的处理方法和移动终端
CN107395898A (zh) * 2017-08-24 2017-11-24 维沃移动通信有限公司 一种拍摄方法及移动终端
CN107423713A (zh) * 2017-07-28 2017-12-01 广东欧珀移动通信有限公司 美颜方法、电子装置和计算机可读存储介质
WO2018040751A1 (zh) * 2016-08-29 2018-03-08 努比亚技术有限公司 图像生成装置及方法、图像处理设备及存储介质
WO2018072267A1 (zh) * 2016-10-17 2018-04-26 华为技术有限公司 用于终端拍照的方法及终端
CN107995486A (zh) * 2017-12-11 2018-05-04 珠海格力电器股份有限公司 一种摄像头校正方法及装置
CN108012084A (zh) * 2017-12-14 2018-05-08 维沃移动通信有限公司 一种图像生成方法、应用处理器ap及第三方图像处理芯片
CN108810416A (zh) * 2018-06-29 2018-11-13 维沃移动通信有限公司 一种图像处理方法及终端设备
WO2019047620A1 (zh) * 2017-09-07 2019-03-14 华为技术有限公司 一种成像装置及成像方法
CN109655010A (zh) * 2018-10-31 2019-04-19 上海畅联智融通讯科技有限公司 一种相机动态网格化摄物测量的方法
CN111510698A (zh) * 2020-04-23 2020-08-07 惠州Tcl移动通信有限公司 图像处理方法、装置、存储介质及移动终端

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130215288A1 (en) * 2012-02-08 2013-08-22 Canon Kabushiki Kaisha Image capturing apparatus provided with a function of combining a plurality of captured images
CN103971340A (zh) * 2014-05-15 2014-08-06 中国科学院光电技术研究所 一种高位宽数字图像动态范围压缩和细节增强方法
CN103986875A (zh) * 2014-05-29 2014-08-13 宇龙计算机通信科技(深圳)有限公司 一种图像获取装置、方法、终端及视频获取方法
CN104156931A (zh) * 2014-09-04 2014-11-19 成都金盘电子科大多媒体技术有限公司 一种新的数字减影血管造影方法
CN104363375A (zh) * 2014-11-28 2015-02-18 广东欧珀移动通信有限公司 一种照片降噪的方法、装置及终端
CN105049718A (zh) * 2015-07-06 2015-11-11 深圳市金立通信设备有限公司 一种图像处理方法及终端

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130215288A1 (en) * 2012-02-08 2013-08-22 Canon Kabushiki Kaisha Image capturing apparatus provided with a function of combining a plurality of captured images
CN103971340A (zh) * 2014-05-15 2014-08-06 中国科学院光电技术研究所 一种高位宽数字图像动态范围压缩和细节增强方法
CN103986875A (zh) * 2014-05-29 2014-08-13 宇龙计算机通信科技(深圳)有限公司 一种图像获取装置、方法、终端及视频获取方法
CN104156931A (zh) * 2014-09-04 2014-11-19 成都金盘电子科大多媒体技术有限公司 一种新的数字减影血管造影方法
CN104363375A (zh) * 2014-11-28 2015-02-18 广东欧珀移动通信有限公司 一种照片降噪的方法、装置及终端
CN105049718A (zh) * 2015-07-06 2015-11-11 深圳市金立通信设备有限公司 一种图像处理方法及终端

Cited By (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105827971B (zh) * 2016-03-31 2019-01-11 维沃移动通信有限公司 一种图像处理方法及移动终端
CN105827971A (zh) * 2016-03-31 2016-08-03 维沃移动通信有限公司 一种图像处理方法及移动终端
CN106447641A (zh) * 2016-08-29 2017-02-22 努比亚技术有限公司 图像生成装置及方法
WO2018040751A1 (zh) * 2016-08-29 2018-03-08 努比亚技术有限公司 图像生成装置及方法、图像处理设备及存储介质
CN106454290A (zh) * 2016-10-12 2017-02-22 成都西纬科技有限公司 一种双摄像头图像处理系统及方法
WO2018072267A1 (zh) * 2016-10-17 2018-04-26 华为技术有限公司 用于终端拍照的方法及终端
US10827140B2 (en) 2016-10-17 2020-11-03 Huawei Technologies Co., Ltd. Photographing method for terminal and terminal
CN106502027A (zh) * 2016-11-22 2017-03-15 宇龙计算机通信科技(深圳)有限公司 一种双摄像头模组及智能设备
CN106506962A (zh) * 2016-11-29 2017-03-15 维沃移动通信有限公司 一种图像处理方法及移动终端
CN106412460B (zh) * 2016-11-30 2019-08-30 深圳市中兴移动软件有限公司 一种图像处理方法及设备
CN106412460A (zh) * 2016-11-30 2017-02-15 努比亚技术有限公司 一种图像处理方法及设备
CN106791379A (zh) * 2016-12-05 2017-05-31 奇酷互联网络科技(深圳)有限公司 基于双摄像头图像合成的方法及装置
CN106780330B (zh) * 2016-12-08 2018-05-11 中国人民解放军国防科学技术大学 一种基于彩色与黑白双摄像头的超分辨率重建方法
CN106780330A (zh) * 2016-12-08 2017-05-31 中国人民解放军国防科学技术大学 一种基于彩色与黑白双摄像头的超分辨率重建方法
CN106845449A (zh) * 2017-02-22 2017-06-13 浙江维尔科技有限公司 一种图像处理装置、方法以及人脸识别系统
CN106937097A (zh) * 2017-03-01 2017-07-07 奇酷互联网络科技(深圳)有限公司 一种图像处理方法、系统及移动终端
CN106973231A (zh) * 2017-04-19 2017-07-21 宇龙计算机通信科技(深圳)有限公司 图片合成方法及系统
CN107038695A (zh) * 2017-04-20 2017-08-11 厦门美图之家科技有限公司 一种图像融合方法及移动设备
CN107347139A (zh) * 2017-06-30 2017-11-14 维沃移动通信有限公司 一种图像数据的处理方法和移动终端
CN107277352A (zh) * 2017-06-30 2017-10-20 维沃移动通信有限公司 一种拍摄的方法和移动终端
CN107423713A (zh) * 2017-07-28 2017-12-01 广东欧珀移动通信有限公司 美颜方法、电子装置和计算机可读存储介质
CN107395898A (zh) * 2017-08-24 2017-11-24 维沃移动通信有限公司 一种拍摄方法及移动终端
WO2019047620A1 (zh) * 2017-09-07 2019-03-14 华为技术有限公司 一种成像装置及成像方法
CN107995486A (zh) * 2017-12-11 2018-05-04 珠海格力电器股份有限公司 一种摄像头校正方法及装置
CN108012084A (zh) * 2017-12-14 2018-05-08 维沃移动通信有限公司 一种图像生成方法、应用处理器ap及第三方图像处理芯片
CN108810416A (zh) * 2018-06-29 2018-11-13 维沃移动通信有限公司 一种图像处理方法及终端设备
CN108810416B (zh) * 2018-06-29 2021-11-26 维沃移动通信有限公司 一种图像处理方法及终端设备
CN109655010A (zh) * 2018-10-31 2019-04-19 上海畅联智融通讯科技有限公司 一种相机动态网格化摄物测量的方法
CN109655010B (zh) * 2018-10-31 2020-07-07 上海畅联智融通讯科技有限公司 一种相机动态网格化摄物测量的方法
CN111510698A (zh) * 2020-04-23 2020-08-07 惠州Tcl移动通信有限公司 图像处理方法、装置、存储介质及移动终端

Also Published As

Publication number Publication date
CN105827965B (zh) 2019-04-12

Similar Documents

Publication Publication Date Title
CN105827965A (zh) 一种基于移动终端的图像处理方法及移动终端
CN105827754B (zh) 一种高动态范围图像的生成方法及移动终端
CN105827971A (zh) 一种图像处理方法及移动终端
CN105872148B (zh) 一种高动态范围图像的生成方法及移动终端
CN107197169B (zh) 一种高动态范围图像拍摄方法及移动终端
CN105827964B (zh) 一种图像处理方法及移动终端
CN107205119B (zh) 一种图像数据的处理方法和装置
CN109691080B (zh) 拍摄图像方法、装置和终端
CN107395898A (zh) 一种拍摄方法及移动终端
US9756261B2 (en) Method for synthesizing images and electronic device thereof
CN105827970B (zh) 一种图像处理方法及移动终端
WO2019001152A1 (zh) 拍照方法及移动终端
CN106060406A (zh) 一种拍照方法及移动终端
CN105847674A (zh) 一种基于移动终端的预览图像处理方法及移动终端
CN106101545A (zh) 一种图像处理方法及移动终端
CN106937055A (zh) 一种图像处理方法及移动终端
CN106506962A (zh) 一种图像处理方法及移动终端
CN107172346A (zh) 一种虚化方法及移动终端
CN106454085B (zh) 一种图像处理方法和移动终端
CN105827963B (zh) 一种拍照过程中场景变化检测方法及移动终端
CN106454086A (zh) 一种图像处理方法和移动终端
CN106488133A (zh) 一种运动对象的检测方法及移动终端
CN107026982B (zh) 一种移动终端的拍照方法及移动终端
CN105959574A (zh) 一种拍照方法及移动终端
CN107222686A (zh) 一种图像数据的处理方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant