CN107770447B - 图像处理方法、装置、计算机可读存储介质和电子设备 - Google Patents
图像处理方法、装置、计算机可读存储介质和电子设备 Download PDFInfo
- Publication number
- CN107770447B CN107770447B CN201711046463.1A CN201711046463A CN107770447B CN 107770447 B CN107770447 B CN 107770447B CN 201711046463 A CN201711046463 A CN 201711046463A CN 107770447 B CN107770447 B CN 107770447B
- Authority
- CN
- China
- Prior art keywords
- image
- processed
- channel
- beauty
- beautifying
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 title claims abstract description 101
- 238000003672 processing method Methods 0.000 title claims abstract description 30
- 230000003796 beauty Effects 0.000 claims abstract description 126
- 238000000034 method Methods 0.000 claims abstract description 21
- 230000008569 process Effects 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 4
- 238000001514 detection method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 238000003384 imaging method Methods 0.000 description 7
- 230000002087 whitening effect Effects 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 2
- 238000003705 background correction Methods 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 208000020154 Acnes Diseases 0.000 description 1
- 206010014970 Ephelides Diseases 0.000 description 1
- 208000003351 Melanosis Diseases 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 239000000872 buffer Substances 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
Abstract
本申请涉及一种图像处理方法、装置、计算机可读存储介质和电子设备。所述方法包括：获取待处理图像及对应的参考图像，所述参考图像为对图像进行美颜处理时作为参照标准的图像；将所述待处理图像对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述待处理图像的各个通道图像对应的美颜参数；根据所述美颜参数对所述待处理图像的各个通道图像进行美颜处理，得到美颜图像。上述图像处理方法、装置、计算机可读存储介质和电子设备，提高了图像处理的准确率。
Description
技术领域
本申请涉及计算机技术领域，特别是涉及图像处理方法、装置、计算机可读存储介质和电子设备。
背景技术
无论是在工作还是生活中，拍照都是一项必不可少的技能。为了拍出一张让人满意的照片，不仅需要在拍摄过程中对拍摄参数进行改善，还需要在拍摄完成之后对照片本身进行改善。美颜处理就是指对照片进行美化的一种方法，经过美颜处理之后，会让照片中的人物看起来更加符合人类的审美。
发明内容
本申请实施例提供一种图像处理方法、装置、计算机可读存储介质和电子设备，可以提高图像处理的准确率。
一种图像处理方法，所述方法包括：
获取待处理图像及对应的参考图像，所述参考图像为对图像进行美颜处理时作为参照标准的图像；
将所述待处理图像对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述待处理图像的各个通道图像对应的美颜参数；
根据所述美颜参数对所述待处理图像的各个通道图像进行美颜处理，得到美颜图像。
一种图像处理装置，所述装置包括：
图像获取模块，用于获取待处理图像及对应的参考图像，所述参考图像为对图像进行美颜处理时作为参照标准的图像；
参数获取模块，用于将所述待处理图像对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述待处理图像的各个通道图像对应的美颜参数；
美颜处理模块，用于根据所述美颜参数对所述待处理图像的各个通道图像进行美颜处理，得到美颜图像。
一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如下步骤：
获取待处理图像及对应的参考图像，所述参考图像为对图像进行美颜处理时作为参照标准的图像；
将所述待处理图像对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述待处理图像的各个通道图像对应的美颜参数；
根据所述美颜参数对所述待处理图像的各个通道图像进行美颜处理，得到美颜图像。
一种电子设备，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行如下步骤：
获取待处理图像及对应的参考图像，所述参考图像为对图像进行美颜处理时作为参照标准的图像；
将所述待处理图像对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述待处理图像的各个通道图像对应的美颜参数；
根据所述美颜参数对所述待处理图像的各个通道图像进行美颜处理，得到美颜图像。
上述图像处理方法、装置、计算机可读存储介质和电子设备，将待处理图像与参考图像进行比较，获取待处理图像中各个通道图像的美颜参数，并根据获取的美颜参数对待处理图像的各个通道图像进行美颜处理。根据参考图像进行美颜处理，提高了图像处理的准确率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为一个实施例中图像处理方法的应用环境图；
图2为一个实施例中图像处理方法的流程图；
图3为另一个实施例中图像处理方法的流程图；
图4为又一个实施例中图像处理方法的流程图；
图5为一个实施例中获取深度信息的原理图；
图6为一个实施例中图像处理装置的结构示意图；
图7为一个实施例中图像处理电路的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
图1为一个实施例中图像处理方法的应用环境图。如图1所示，该应用环境中包括用户终端102和服务器104。用户终端102中可以用于采集待处理图像，生成待处理图像，然后将待处理图像发送到服务器104中。服务器104接收到待处理图像之后，获取待处理图像对应的参考图像；将待处理图像对应的各个通道图像与参考图像对应的各个通道图像进行比较，获取待处理图像的各个通道图像对应的美颜参数；根据美颜参数对待处理图像的各个通道图像进行美颜处理，得到美颜图像。最后服务器104将美颜处理后的待处理图像返回给用户终端102。可以理解的是，用户终端102可以向服务器104发送一个待处理图像集合，该待处理图像集合中包含多张待处理图像。服务器104接收到待处理图像集合之后，对待处理图像集合中的待处理图像进行美颜处理。其中，用户终端102是处于计算机网络最外围，主要用于输入用户信息以及输出处理结果的电子设备，例如可以是个人电脑、移动终端、个人数字助理、可穿戴电子设备等。服务器104是用于响应服务请求，同时提供计算服务的设备，例如可以是一台或者多台计算机。可以理解的是，在本申请提供的其他实施例中，该图像处理方法的应用环境中可以只包括用户终端102，即用户终端102用于采集待处理图像，并将待处理图像进行美颜处理。
图2为一个实施例中图像处理方法的流程图。如图2所示，该图像处理方法包括步骤202至步骤206。其中：
步骤202，获取待处理图像及对应的参考图像，参考图像为对图像进行美颜处理时作为参照标准的图像。
在一个实施例中，待处理图像是指需要进行美颜处理的图像。待处理图像可以是由移动终端进行采集的。移动终端上安装有可以用于拍摄的摄像头，用户可以通过移动终端发起拍照指令，移动终端在检测到拍照指令之后，通过摄像头采集拍摄图像。移动终端会将采集的图像进行存储，形成一个图像集合。可以理解的是，待处理图像还可以是通过其他途径获取的，在此不做限定。例如，待处理图像还可以是从网页中下载的，或者是从外接存储设备中导入的等等。获取待处理图像具体可以包括：接收用户输入的美颜指令，并根据美颜指令获取待处理图像，其中美颜指令中包含图像标识。图像标识是指区分不同待处理图像的唯一标识，根据图像标识获取待处理图像。例如，图像标识可以是图像名称、图像编码、图像存储地址等中的一种或多种。具体地，移动终端在获取到待处理图像之后，可以在移动终端本地进行美颜处理，也可以将待处理图像发送至服务器进行美颜处理。参考图像是指对图像进行美颜处理时作为参照标准的图像。参考图像可以和待处理图像是对应的，在对待处理图像进行美颜处理时，获取对应的参考图像进行参照。例如，若待处理图像中的人物是黄种人，则就获取黄种人对应的参考图像；若待处理图像中的人物是白种人，则就获取白种人对应的参考图像。
步骤204，将待处理图像对应的各个通道图像与参考图像对应的各个通道图像进行比较，获取待处理图像的各个通道图像对应的美颜参数。
参考图像是美颜处理时的用于参照的图像，将待处理图像和参照图像进行比较，从而获取待处理图像的美颜参数。例如，在进行美白处理的时候，获取一张用户手动进行美白处理之后的图像作为参考图像，那么在需要将待处理图像进行美白处理的时候，就可以将待处理图像的肤色和参考图像中的肤色进行比较，获取待处理图像中的美颜参数，根据获取的美颜参数将待处理图像进行处理，将待处理图像中的肤色调整至标准值。具体地，待处理图像是由若干个像素点构成的，每个像素点可以由多个颜色通道构成，每个颜色通道表示一个颜色分量。例如，图像可以由RGB(Red Green Blue，红，绿，蓝)三通道构成，也可以是由HSV(Hue Saturation Value，色调，饱和度，明度)三通道构成，还可以是由CMY(CyanMagenta Yellow，洋红，青，黄)三通道构成。则在对图像进行美颜处理的时候，可以分别对图像的各个颜色通道进行美颜处理，每个颜色通道的处理可以不相同。则可以将待处理图像对应的各个通道图像与参考图像对应的各个通道图像进行比较，获取待处理图像的各个通道图像对应的美颜参数。其中，通道图像就是指某一个颜色通道的像素点所构成的图像。
具体地，在进行美白处理的时候，可以通过调节各个颜色通道值来实现对图像的美白处理。则可以获取待处理图像对应的各个通道图像与参考图像对应的各个通道图像进行差值，根据该差值获取待处理图像的各个通道图像对应的美颜参数。更进一步地，可以遍历待处理图像中需要进行美颜处理的像素点，将获取的像素点的通道值与参考图像中对应像素点的通道值进行比较，得到像素点的各个通道对应的美颜参数。然后再根据获取的美颜参数对待处理图像中的像素点进行处理。
步骤206，根据美颜参数对待处理图像的各个通道图像进行美颜处理，得到美颜图像。
美颜处理就是指对照片进行美化的一种方法。例如，对图像中的人像进行美白、磨皮处理，也可以是指对人像进行美妆、瘦脸、瘦身等处理。分别获取各个通道图像的美颜参数，并根据获取的美颜参数对各个通道图像进行美颜处理，将美颜处理完成之后的各个通道图像进行合成，得到最终的美颜图像。
上述实施例提供的图像处理方法，将待处理图像与参考图像进行比较，获取待处理图像中各个通道图像的美颜参数，并根据获取的美颜参数对待处理图像的各个通道图像进行美颜处理。根据参考图像进行美颜处理，提高了图像处理的准确率。
图3为另一个实施例中图像处理方法的流程图。如图3所示，该图像处理方法包括步骤302至步骤308。其中：
步骤302，获取待处理图像及对应的人物属性特征，并根据人物属性特征获取对应的参考图像。
在本申请提供的实施例中，人物属性特征是指表示图像中人物的人物属性的特征，例如人物属性特征可以是指性别特征、年龄特征、人种特征等中的一种或多种。步骤302具体可以包括：获取待处理图像，并获取待处理图像中的人像区域；根据人像区域获取对应的人物属性特征，并根据所述人物属性特征获取对应的参考图像。可以理解的是，通过图像采集装置采集图像的时候，可以同时获取图像对应的深度图，深度图中的像素点与图像中的像素点对应。深度图中的像素点表示图像中对应像素的深度信息，深度信息即为像素点对应的物体到图像采集装置的深度信息。例如，深度信息可以通过双摄像头进行获取，得到的像素点对应的深度信息可以为1米、2米或3米等。一般认为人像与人脸在同一垂直平面上，人像到图像采集装置的深度信息与人脸到图像采集装置的深度信息的取值在同一范围内。因此，在获取人脸区域后，可以从深度图中获取人脸区域对应的深度信息，然后根据人脸区域对应的深度信息可以获取人像区域对应的深度信息，然后根据人像区域对应的深度信息即可获取到待处理图像中的人像区域。则获取待处理图像中的人像区域具体可以包括：获取待处理图像对应的深度信息；检测待处理图像中的人脸区域，并根据人脸区域和深度信息，获取待处理图像中的人像区域。其中，人脸区域是指待处理图像中人像的人脸所在的区域，人像区域是指待处理图像中的整个人像所在的区域。
在一个实施例中，可以通过人脸检测算法获取待处理图像的人脸区域，人脸检测算法可以包括基于几何特征的检测方法、特征脸检测方法、线性判别分析方法、基于隐马尔柯夫模型检测方法等，在此不做限定。预先建立人物属性特征根与参考图像的对应关系，根据人物属性特征可以获取对应的参考图像。例如，识别到待处理图像中有张三，则获取张三对应的参考图像作为参考标准进行美颜处理。
步骤304，将待处理图像对应的各个通道图像与参考图像对应的各个通道图像进行比较，获取待处理图像的各个通道图像对应的美颜参数。
具体地，待处理图像可以转化为不同的色彩空间的图像，每个色彩空间的图像都可以包括多个通道图像，不同色彩空间的图像可以相互转换。常用的色彩空间包括RGB色彩空间、HSV色彩空间、CMY色彩空间等。例如，在RGB色彩空间中，待处理图像中每个像素点都可以包括R分量、G分量和B分量，待处理图像中所有像素点的R分量构成R通道图像，所有像素点的G分量构成G通道图像，所有像素点的G分量构成G通道图像。参考图像中的通道值可以看做是标准值，根据待处理图像与参考图像比较结果进行美颜处理，可以使美颜处理更加准确。具体地，将待处理图像对应的各个通道图像与参考图像对应的各个通道图像进行比较，可以获取待处理图像的各个通道图像对应的美颜参数。更进一步，可以将待处理图像对应的RGB三通道图像与参考图像对应的RGB三通道图像进行比较，获取待处理图像的RGB三通道图像对应的美颜参数。
在本申请提供的实施例中，美颜参数是指表示进行美颜处理的程度的参数。具体地，可以获取待处理图像的各个通道的粗糙度参考图像各个通道的粗糙度的差值，根据该差值来获取对应的美颜参数。其中，粗糙度是指表示待处理图像的纹理平滑程度的参数。举例来说，可以获取待处理图像中的R分量的粗糙度与参考图像中的R分量的粗糙度的差值，若该差值越大，说明待处理图像中的R分量与参考图像的R分量差距越大，则待处理图像中的R分量需要进行的处理程度就越深，对应的美颜参数就越大。
步骤306，根据美颜参数对待处理图像的各个通道图像分别进行美颜处理。
在一个实施例中，在获取到各个通道图像的美颜参数之后，可以根据美颜参数对各个通道图像进行美颜处理。可以理解的是，在进行美颜处理的时候，可以只对待处理图像中的某一个区域进行美颜处理，而不需要对整个待处理图像进行处理。在对某一个区域进行处理的时候，只需要获取该区域的美颜参数即可。则图像处理方法还可以包括：获取待处理图像中的目标区域，将目标区域对应的各个通道图像与参考图像对应的各个通道图像进行比较，获取目标区域的各个通道图像对应的美颜参数；根据美颜参数对目标区域的各个通道图像分别进行美颜处理。其中，目标区域是指需要进行美颜处理的区域。例如，目标区域可以为人脸区域、人像区域或皮肤区域，在此不做限定。假设是对皮肤区域进行美颜处理的话，只需要将皮肤区域与参考图像的皮肤区域进行比较即可。
步骤308，将美颜处理后的各个通道图像进行融合，得到美颜图像。
上述实施例提供的图像处理方法，将待处理图像与参考图像进行比较，获取待处理图像中各个通道图像的美颜参数，并根据获取的美颜参数对待处理图像的各个通道图像进行美颜处理。根据参考图像进行美颜处理，提高了图像处理的准确率。
图4为又一个实施例中图像处理方法的流程图。如图4所示，该图像处理方法包括步骤402至步骤410。其中：
步骤402，获取待处理图像，并获取待处理图像中的人像区域。
在一个实施例中，获取人像区域的方法包括：获取待处理图像对应的深度信息；检测待处理图像中的人脸区域，并根据人脸区域和深度信息，获取待处理图像中的人像区域。具体地，可以通过人脸检测算法获取待处理图像的人脸区域，人脸检测算法可以包括基于几何特征的检测方法、特征脸检测方法、线性判别分析方法、基于隐马尔柯夫模型检测方法等，在此不做限定。深度信息可以通过双摄像头来获取。图5为一个实施例中获取深度信息的原理图。如图5所示，已知第一摄像头502到第二摄像头504之间的距离Tc，通过第一摄像头502和第二摄像头504分别拍摄物体506对应的图像，根据该图像可以获取第一夹角A1和第二夹角A2，第一摄像头502到第二摄像头504所在水平线与物体502之间的垂直交点为交点508。假设第一摄像头502到交点508的距离为Tx，那么交点508到第二摄像头504的距离就为Tc-Tx，物体506的深度信息即物体506到交点508的垂直距离为Ts。根据第一摄像头502、物体506和交点508组成的三角形，则可以得到以下公式：
同理，根据第二摄像头504、物体506和交点508组成的三角形，则可以得到以下公式：
由上述公式可以得到物体506的深度信息为：
在一个实施例中，根据深度信息提取的是待处理图像中与人脸在同一深度信息范围内的物体所在的图像区域，假设人旁边有其他物体存在，那么提取出来的图像区域就可能存在除人像区域之外的其他物体。这时候可以根据图像区域的颜色信息进一步将人像区域提取出来。则获取人脸区域及对应的人像区域具体可以包括：获取待处理图像及对应的深度信息；检测待处理图像中的人脸区域，并根据人脸区域和深度信息获取待处理图像中的图像区域；根据图像区域的颜色信息提取人像区域。颜色信息是指用来表示图像的色彩的相关参数，例如颜色信息可以包括图像中色彩的色调、饱和度、明度等信息。其中，色彩的色调是指色彩的角度度量，其取值范围为0°～360°，从红色开始按逆时针方向计算，红色为0°，绿色为120°，蓝色为240°。饱和度是指色彩接近光谱的程度，一般饱和度越高，色彩越鲜艳；饱和度越低，色彩越暗淡。明度则表示色彩的明亮程度。不同的物体往往有不同的颜色特征，即在图像中呈现的颜色信息也是不一样的。例如树木的颜色为绿色、天空为蓝色、大地为黄色等等。根据图像区域中的颜色信息可以提取人像区域和人像区域外的区域。
具体地，获取图像区域的颜色分量，提取图像区域中颜色分量在预设范围内的区域作为人像区域。颜色分量是指将待处理图像转化为某一从色彩维度的图像所产生的图像分量，例如颜色分量可以是指图像的RGB颜色分量、CMY颜色分量、HSV颜色分量等，可以理解的是RGB颜色分量、CMY颜色分量、HSV颜色分量之间可以相互转换。例如，获取图像区域的HSV颜色分量，提取图像区域中HSV颜色分量在预设范围内的区域作为人像区域。其中，HSV颜色分量分别是指图像的色调(H)、饱和度(S)、明度(V)分量，分别给这三个分量设定一个预设范围，并将图像区域中这三个分量在预设范围内的区域提取出来，作为人像区域。具体可以是获取图像区域的HSV颜色分量，并获取图像区域中满足条件“H值在20～25、S值在10～50、V值在50～85之间”的区域，作为人像区域。
步骤404，若存在两个或两个以上的人像区域，则遍历每一个人像区域获取对应的人物属性特征。
可以理解的是，人像区域是由待处理图像中的若干个像素点构成的连通区域，每个人像区域都是一个独立的连通区域。若待处理图像中存在两个或两个以上的人像区域，则每个人像区域的人物属性特征可能不一样，那么就可以分别获取每个人像区域的人物属性特征，然后针对每一个人像区域单独进行美颜处理。具体地，遍历待处理图像中的每一个人像区域，并获取每一个人像区域对应的人物属性特征。例如，待处理图像中包括人像1、人像2和人像3，人像1的人物属性特征为幼年，人像2的人物属性特征为青年，人像3的人物属性特征为老年。
步骤406，根据人物属性特征获取每一个人像区域对应的参考图像。
在本申请提供的实施例中，人物属性特征可以有不同的划分标准，可以根据人脸、年龄、性别、人种等不同标准进行划分，在此不做具体限定。首先建立人物属性特征与参考图像的对应关系，然后根据人物属性特征获取对应的参考图像。例如，移动终端中可以预先存储黄种人、白种人、黑种人对应的参考图像，如果检测到待处理图像中存在人像区域，则根据人像区域的人种分别获取对应的参考图像。
步骤408，将人像区域对应的各个通道图像与参考图像对应的各个通道图像进行比较，获取人像区域的各个通道图像对应的美颜参数。
在一个实施例中，获取的参考图像也是一个人像图像，将人像区域图像与参考图像进行比较，若人像区域图像与参考图像相差越大，则美颜参数越大，相应的美颜处理的程度越深。具体地，可以将人像区域对应的RGB三通道图像与参考图像对应的RGB三通道图像进行比较，获取人像区域的RGB三通道图像对应的美颜参数。
步骤410，根据美颜参数对待处理图像中的人像区域的对应的各个通道图像进行美颜处理，得到美颜图像。
根据美颜参数对人像区域进行美颜处理后，需要将美颜处理之后的人像区域与待处理图像进行合成，得到美颜图像。可以理解的是，将人像区域做了美颜处理，而待处理图像中除人像区域之外的剩余区域未做美颜处理，可能会导致两部分有明显的差异，则在合成的时候，需要将人像区域的边界进行过渡处理，使合成后的图像看起来更加自然。
上述实施例提供的图像处理方法，将待处理图像与参考图像进行比较，获取待处理图像中各个通道图像的美颜参数，并根据获取的美颜参数对待处理图像的各个通道图像进行美颜处理。根据参考图像进行美颜处理，提高了图像处理的准确率。
图6为一个实施例中图像处理装置的结构示意图。如图6所示，该图像处理装置包括图像获取模块602、参数获取模块604和美颜处理模块606。其中：
图像获取模块602，用于获取待处理图像及对应的参考图像，所述参考图像为对图像进行美颜处理时作为参照标准的图像。
参数获取模块604，用于将所述待处理图像对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述待处理图像的各个通道图像对应的美颜参数。
美颜处理模块606，用于根据所述美颜参数对所述待处理图像的各个通道图像进行美颜处理，得到美颜图像。
上述实施例提供的图像处理装置，将待处理图像与参考图像进行比较，获取待处理图像中各个通道图像的美颜参数，并根据获取的美颜参数对待处理图像的各个通道图像进行美颜处理。根据参考图像进行美颜处理，提高了图像处理的准确率。
在一个实施例中，图像获取模块602还用于获取待处理图像及对应的人物属性特征，并根据所述人物属性特征获取对应的参考图像。
在一个实施例中，图像获取模块602还用于获取待处理图像，并获取所述待处理图像中的人像区域；根据所述人像区域获取对应的人物属性特征，并根据所述人物属性特征获取对应的参考图像。
在一个实施例中，图像获取模块602还用于若存在两个或两个以上的人像区域，则遍历每一个人像区域获取对应的人物属性特征；根据所述人物属性特征获取每一个人像区域对应的参考图像。
在一个实施例中，参数获取模块604还用于获取所述待处理图像中的人像区域；将所述人像区域对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述人像区域的各个通道图像对应的美颜参数。
在一个实施例中，参数获取模块604还用于将所述人像区域对应的RGB三通道图像与所述参考图像对应的RGB三通道图像进行比较，获取所述人像区域的RGB三通道图像对应的美颜参数。
在一个实施例中，美颜处理模块606还用于根据所述美颜参数对所述待处理图像的各个通道图像分别进行美颜处理；将所述美颜处理后的各个通道图像进行融合，得到美颜图像。
上述图像处理装置中各个模块的划分仅用于举例说明，在其他实施例中，可将图像处理装置按照需要划分为不同的模块，以完成上述图像处理装置的全部或部分功能。
本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机程序的非易失性计算机可读存储介质，当所述计算机程序被一个或多个处理器执行时，使得所述处理器执行以下步骤：
获取待处理图像及对应的参考图像，所述参考图像为对图像进行美颜处理时作为参照标准的图像；
将所述待处理图像对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述待处理图像的各个通道图像对应的美颜参数；
根据所述美颜参数对所述待处理图像的各个通道图像进行美颜处理，得到美颜图像。
在一个实施例中，所述处理器执行的所述获取待处理图像及对应的参考图像包括：
获取待处理图像及对应的人物属性特征，并根据所述人物属性特征获取对应的参考图像。
在一个实施例中，所述处理器执行的所述获取待处理图像及对应的参考图像包括：
获取待处理图像，并获取所述待处理图像中的人像区域；
根据所述人像区域获取对应的人物属性特征，并根据所述人物属性特征获取对应的参考图像。
在一个实施例中，所述处理器执行的所述根据所述人像区域获取对应的人物属性特征，并根据所述人物属性特征获取对应的参考图像包括：
若存在两个或两个以上的人像区域，则遍历每一个人像区域获取对应的人物属性特征；
根据所述人物属性特征获取每一个人像区域对应的参考图像。
在一个实施例中，所述处理器执行的所述将所述待处理图像对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述待处理图像的各个通道图像对应的美颜参数包括：
获取所述待处理图像中的人像区域；
将所述人像区域对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述人像区域的各个通道图像对应的美颜参数。
在一个实施例中，所述处理器执行的所述将所述人像区域对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述人像区域图像的各个通道图像对应的美颜参数包括：
将所述人像区域对应的RGB三通道图像与所述参考图像对应的RGB三通道图像进行比较，获取所述人像区域的RGB三通道图像对应的美颜参数。
在一个实施例中，所述处理器执行的根据所述美颜参数对所述待处理图像的各个通道图像进行美颜处理包括：
根据所述美颜参数对所述待处理图像的各个通道图像分别进行美颜处理；
将所述美颜处理后的各个通道图像进行融合，得到美颜图像。
本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图7为一个实施例中图像处理电路的示意图。如图7所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。
如图7所示，图像处理电路包括ISP处理器740和控制逻辑器750。成像设备710捕捉的图像数据首先由ISP处理器740处理，ISP处理器740对图像数据进行分析以捕捉可用于确定和/或成像设备710的一个或多个控制参数的图像统计信息。成像设备710可包括具有一个或多个透镜712和图像传感器714的照相机。图像传感器714可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器714可获取用图像传感器714的每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器740处理的一组原始图像数据。传感器720(如陀螺仪)可基于传感器720接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器740。传感器720接口可以利用SMIA(Standard Mobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外，图像传感器714也可将原始图像数据发送给传感器720，传感器720可基于传感器720接口类型把原始图像数据提供给ISP处理器740，或者传感器720将原始图像数据存储到图像存储器730中。
ISP处理器740按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器740可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。
ISP处理器740还可从图像存储器730接收图像数据。例如，传感器720接口将原始图像数据发送给图像存储器730，图像存储器730中的原始图像数据再提供给ISP处理器740以供处理。图像存储器730可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。
当接收到来自图像传感器714接口或来自传感器720接口或来自图像存储器730的原始图像数据时，ISP处理器740可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器730，以便在被显示之前进行另外的处理。ISP处理器740还可从图像存储器730接收处理数据，对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器780，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，ISP处理器740的输出还可发送给图像存储器730，且显示器780可从图像存储器730读取图像数据。在一个实施例中，图像存储器730可被配置为实现一个或多个帧缓冲器。此外，ISP处理器740的输出可发送给编码器/解码器770，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器780设备上之前解压缩。
ISP处理器740处理图像数据的步骤包括：对图像数据进行VFE(Video Front End，视频前端)处理和CPP(Camera Post Processing，摄像头后处理)处理。对图像数据的VFE处理可包括修正图像数据的对比度或亮度、修改以数字方式记录的光照状态数据、对图像数据进行补偿处理(如白平衡，自动增益控制，γ校正等)、对图像数据进行滤波处理等。对图像数据的CPP处理可包括对图像进行缩放、向每个路径提供预览帧和记录帧。其中，CPP可使用不同的编解码器来处理预览帧和记录帧。ISP处理器740处理后的图像数据可发送给美颜模块760，以便在被显示之前对图像进行美颜处理。美颜模块760对图像数据美颜处理可包括：美白、祛斑、磨皮、瘦脸、祛痘、增大眼睛等。其中，美颜模块760可为移动终端中CPU(Central Processing Unit，中央处理器)、GPU或协处理器等。美颜模块760处理后的数据可发送给编码器/解码器770，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器780设备上之前解压缩。其中，美颜模块760还可位于编码器/解码器770与显示器780之间，即美颜模块对已成像的图像进行美颜处理。上述编码器/解码器770可为移动终端中CPU、GPU或协处理器等。
ISP处理器740确定的统计数据可发送给控制逻辑器750单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜712阴影校正等图像传感器714统计信息。控制逻辑器750可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定成像设备710的控制参数以及ISP处理器740的控制参数。例如，成像设备710的控制参数可包括传感器720控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜712控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜712阴影校正参数。
运用图7中图像处理技术可实现如上述实施例提供的图像处理方法。
一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例提供的图像处理方法。
本申请所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。
Claims (8)
1.一种图像处理方法，其特征在于，所述方法包括：
接收用户输入的美颜指令，根据所述美颜指令中包含的图像标识获取待处理图像，并获取所述待处理图像中的人像区域；
根据所述人像区域获取对应的人物属性特征，并根据所述人物属性特征获取对应的参考图像，所述参考图像为对图像进行美颜处理时作为参照标准的图像；
将所述待处理图像对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述待处理图像的各个通道图像对应的美颜参数；
根据所述美颜参数对所述待处理图像的各个通道图像进行美颜处理，得到美颜图像。
2.根据所述权利要求1所述的图像处理方法，其特征在于，所述根据所述人像区域获取对应的人物属性特征，并根据所述人物属性特征获取对应的参考图像包括：
若存在两个或两个以上的人像区域，则遍历每一个人像区域获取对应的人物属性特征；
根据所述人物属性特征获取每一个人像区域对应的参考图像。
3.根据所述权利要求1所述的图像处理方法，其特征在于，所述将所述待处理图像对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述待处理图像的各个通道图像对应的美颜参数包括：
获取所述待处理图像中的人像区域；
将所述人像区域对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述人像区域的各个通道图像对应的美颜参数。
4.根据所述权利要求3所述的图像处理方法，其特征在于，所述将所述人像区域对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述人像区域图像的各个通道图像对应的美颜参数包括：
将所述人像区域对应的RGB三通道图像与所述参考图像对应的RGB三通道图像进行比较，获取所述人像区域的RGB三通道图像对应的美颜参数。
5.根据所述权利要求1至4任一项所述的图像处理方法，其特征在于，根据所述美颜参数对所述待处理图像的各个通道图像进行美颜处理包括：
根据所述美颜参数对所述待处理图像的各个通道图像分别进行美颜处理；
将所述美颜处理后的各个通道图像进行融合，得到美颜图像。
6.一种图像处理装置，其特征在于，所述装置包括：
图像获取模块，用于接收用户输入的美颜指令，根据所述美颜指令中包含的图像标识获取待处理图像，并获取所述待处理图像中的人像区域；根据所述人像区域获取对应的人物属性特征，并根据所述人物属性特征获取对应的参考图像，所述参考图像为对图像进行美颜处理时作为参照标准的图像；
参数获取模块，用于将所述待处理图像对应的各个通道图像与所述参考图像对应的各个通道图像进行比较，获取所述待处理图像的各个通道图像对应的美颜参数；
美颜处理模块，用于根据所述美颜参数对所述待处理图像的各个通道图像进行美颜处理，得到美颜图像。
7.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的图像处理方法。
8.一种电子设备，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行如权利要求1至5中任一项所述的图像处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711046463.1A CN107770447B (zh) | 2017-10-31 | 2017-10-31 | 图像处理方法、装置、计算机可读存储介质和电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711046463.1A CN107770447B (zh) | 2017-10-31 | 2017-10-31 | 图像处理方法、装置、计算机可读存储介质和电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107770447A CN107770447A (zh) | 2018-03-06 |
| CN107770447B true CN107770447B (zh) | 2020-06-23 |
Family
ID=61270278
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711046463.1A Expired - Fee Related CN107770447B (zh) | 2017-10-31 | 2017-10-31 | 图像处理方法、装置、计算机可读存储介质和电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107770447B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109685741B (zh) * | 2018-12-28 | 2020-12-11 | 北京旷视科技有限公司 | 一种图像处理方法、装置及计算机存储介质 |
| CN111031239B (zh) * | 2019-12-05 | 2021-06-18 | Oppo广东移动通信有限公司 | 图像处理方法及其装置、电子设备和计算机可读存储介质 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103617638A (zh) * | 2013-12-05 | 2014-03-05 | 北京京东尚科信息技术有限公司 | 图像处理的方法及装置 |
| CN103793888A (zh) * | 2014-02-18 | 2014-05-14 | 厦门美图网科技有限公司 | 一种基于参照图像的主要颜色的图像增强方法 |
| CN106570909A (zh) * | 2016-11-02 | 2017-04-19 | 华为技术有限公司 | 一种肤色检测方法、装置及终端 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105516585B (zh) * | 2015-11-30 | 2019-08-16 | 努比亚技术有限公司 | 一种自动调整肤色的装置和方法 |
-
2017
- 2017-10-31 CN CN201711046463.1A patent/CN107770447B/zh not_active Expired - Fee Related
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103617638A (zh) * | 2013-12-05 | 2014-03-05 | 北京京东尚科信息技术有限公司 | 图像处理的方法及装置 |
| CN103793888A (zh) * | 2014-02-18 | 2014-05-14 | 厦门美图网科技有限公司 | 一种基于参照图像的主要颜色的图像增强方法 |
| CN106570909A (zh) * | 2016-11-02 | 2017-04-19 | 华为技术有限公司 | 一种肤色检测方法、装置及终端 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN107770447A (zh) | 2018-03-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3477931B1 (en) | Image processing method and device, readable storage medium and electronic device | |
| CN107730444B (zh) | 图像处理方法、装置、可读存储介质和计算机设备 | |
| CN107808136B (zh) | 图像处理方法、装置、可读存储介质和计算机设备 | |
| CN107730445B (zh) | 图像处理方法、装置、存储介质和电子设备 | |
| CN107818305B (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 | |
| CN107680128B (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
| CN107886484B (zh) | 美颜方法、装置、计算机可读存储介质和电子设备 | |
| CN107730446B (zh) | 图像处理方法、装置、计算机设备及计算机可读存储介质 | |
| CN108024107B (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
| CN107993209B (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
| CN107509031B (zh) | 图像处理方法、装置、移动终端及计算机可读存储介质 | |
| CN107766831B (zh) | 图像处理方法、装置、移动终端和计算机可读存储介质 | |
| CN107945135B (zh) | 图像处理方法、装置、存储介质和电子设备 | |
| CN107862658B (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
| CN108111749B (zh) | 图像处理方法和装置 | |
| CN107862653B (zh) | 图像显示方法、装置、存储介质和电子设备 | |
| CN107493432B (zh) | 图像处理方法、装置、移动终端及计算机可读存储介质 | |
| CN109360254B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
| CN107563976B (zh) | 美颜参数获取方法、装置、可读存储介质和计算机设备 | |
| CN107800965B (zh) | 图像处理方法、装置、计算机可读存储介质和计算机设备 | |
| CN108717530B (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
| CN108055452A (zh) | 图像处理方法、装置及设备 | |
| CN107948617B (zh) | 图像处理方法、装置、计算机可读存储介质和计算机设备 | |
| CN107704798B (zh) | 图像虚化方法、装置、计算机可读存储介质和计算机设备 | |
| CN111028137A (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information |
Address after: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Applicant after: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. Address before: Changan town in Guangdong province Dongguan 523860 usha Beach Road No. 18 Applicant before: GUANGDONG OPPO MOBILE TELECOMMUNICATIONS Corp.,Ltd. |
|
| CB02 | Change of applicant information | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200623 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |