CN107563957B - 眼部图像处理方法及装置 - Google Patents

眼部图像处理方法及装置 Download PDF

Info

Publication number
CN107563957B
CN107563957B CN201710657865.9A CN201710657865A CN107563957B CN 107563957 B CN107563957 B CN 107563957B CN 201710657865 A CN201710657865 A CN 201710657865A CN 107563957 B CN107563957 B CN 107563957B
Authority
CN
China
Prior art keywords
pixel
eye
brightness adjustment
boundary
brightness
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710657865.9A
Other languages
English (en)
Other versions
CN107563957A (zh
Inventor
陈志军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN201710657865.9A priority Critical patent/CN107563957B/zh
Publication of CN107563957A publication Critical patent/CN107563957A/zh
Application granted granted Critical
Publication of CN107563957B publication Critical patent/CN107563957B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)

Abstract

本公开是关于一种眼部图像处理方法及装置,该方法包括:定位待处理图像中人脸的眼睛区域;确定所述眼睛区域内每个像素到所述眼睛区域的边界的最近距离;确定所述眼睛区域中各像素的亮度调整基数;按照第一预设规则确定所述眼睛区域中像素的亮度调整幅度,其中,所述第一预设规则包括所述最近距离与所述亮度调整幅度正相关;根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅度,调整所述述眼睛区域中各像素的亮度。该技术方案可以使亮眼效果更自然,处理后的最终图像的效果也更加自然。

Description

眼部图像处理方法及装置
技术领域
本公开涉及图像处理技术领域,尤其涉及眼部图像处理方法及装置。
背景技术
随着相机、手机、平板电脑等电子拍摄设备的升级换代,人们对其拍摄 的图像效果要求随之升高,目前有很多美图软件可以对拍摄的照片进行美化 处理,使其具有更好的视觉效果,这些美化处理通常是对图像的对比度和亮 度等参数进行调整。
发明内容
本公开实施例提供一种眼部图像处理方法及装置。所述技术方案如下:
根据本公开实施例的第一方面,提供一种眼部图像处理方法,包括:
定位待处理图像中人脸的眼睛区域;
确定所述眼睛区域内每个像素到所述眼睛区域的边界的最近距离;
确定所述眼睛区域中各像素的亮度调整基数;
按照第一预设规则确定所述眼睛区域中像素的亮度调整幅度,其中,所 述第一预设规则包括所述最近距离与所述亮度调整幅度正相关;
根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅度,调整 所述述眼睛区域中各像素的亮度。
本公开的实施例提供的技术方案可以包括以下有益效果:本实施例可以 定位待处理图像中人脸的眼睛区域;确定所述眼睛区域内每个像素到所述眼 睛区域的边界的最近距离;确定所述眼睛区域中各像素的亮度调整基数;按 照最近距离与亮度调整幅度的正相关关系,确定所述眼睛区域中各像素的亮 度调整幅度,根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅 度,调整所述述眼睛区域中各像素的亮度,如此,从眼睛区域的中心到眼睛 区域的边界,亮度调整幅度逐渐变小,有个过渡,这样,眼睛区域的中间部位的亮度变化仍可保持较大,使得人物的眼睛有神,人物比较精神,而过渡 到边界内围的像素的亮度整幅度已很小,这样调整后的亮度与眼周部位的亮 度没有明显差别,亮眼效果更自然,眼部调整后最终图像的效果也更加自然。
在一个实施例中,按照第一预设规则确定所述眼睛区域中像素的亮度调 整幅度,包括:
确定所述眼睛区域中到所述眼睛区域的边界的最近距离小于等于n的像 素所在的渐变区域;
按照所述第一预设规则确定所述渐变区域中像素的亮度调整幅度。
本公开的实施例提供的技术方案可以包括以下有益效果:本实施例可以 按照最近距离与亮度调整幅度正相关,确定所述眼睛区域中到所述眼睛区域 的边界的最近距离小于等于n的各像素的亮度调整幅度,如此,从最近距离 为n到最近距离为0的边界,像素的亮度整幅度已逐渐变小,导致眼睛区域 边界处的亮度变化也变小,眼睛区域边界处与眼周部位的亮度的差别就会变 小,亮眼效果更自然,眼部调整后最终图像的效果也更加自然。
在一个实施例中,所述按照所述第一预设规则确定所述渐变区域中像素 的亮度调整幅度包括:
按照以下公式确定亮度调整幅度θ1:
θ1=α*((x+m)/(n+m))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述n为一大 于0的预设值,所述α为小于等于1的常数,所述m为一大于等于0的预设 值。
本公开的实施例提供的技术方案可以包括以下有益效果:按照 θ1=α*((x+m)/(n+m))确定眼睛区域中到所述眼睛区域的边界的最近距离小 于等于n的各像素的亮度调整幅度,如此,逐渐过渡到边界内围的像素的亮 度整幅度已很小,至眼睛区域的边界上的像素时亮度变化已变为很小,与眼 周部位的亮度差别变小,亮眼效果更自然,眼部调整后最终图像的效果也更 加自然。
在一个实施例中,所述方法还包括:
确定所述眼睛区域外各像素的亮度调整基数;
确定所述眼睛区域外每个像素到所述眼睛区域的边界的最近距离;
按照第二预设规则确定所述眼睛区域外、距离所述眼睛区域的边界的最 近距离在所述p之内的各像素的亮度调整幅度,其中,所述第二预设规则包 括所述最近距离与所述亮度调整幅度负相关;
根据所述眼睛区域外所述各像素的亮度调整基数和所述亮度调整幅度, 调整所述眼睛区域外、距离所述眼睛区域的边界的最近距离在所述p之内的 各像素的亮度。
本公开的实施例提供的技术方案可以包括以下有益效果:本实施例可以 按照第二预设规则确定所述眼睛区域外、距离所述眼睛区域的边界的最近距 离在所述p之内的各像素的亮度调整幅度,进而调整所述眼睛区域外、距离 所述眼睛区域的边界的最近距离在所述p之内的各像素的亮度,即使确定的 眼睛区域过小也能够保证实际眼睛区域的亮度调整,也可以使眼睛区域内的 亮度到眼周部位的亮度的过渡更加自然,亮眼效果更自然,眼部调整后最终 图像的效果也更加自然。
在一个实施例中,所述按照第二预设规则确定所述眼睛区域外、距离所 述眼睛区域的边界的最近距离在所述p之内的各像素的亮度调整幅度包括:
按照以下公式确定亮度调整幅度θ2:
θ2=α*((p-x)/(q+p))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述q为一大 于等于0的预设值,所述α为小于等于1的常数,所述p为一大于0的预设 值。
本公开的实施例提供的技术方案可以包括以下有益效果:本实施例可以 按照公式θ2=α*((p-x)/(q+p))确定所述眼睛区域外、距离所述眼睛区域的边 界的最近距离在所述p之内的各像素的亮度调整幅度,进而调整所述眼睛区 域外、距离所述眼睛区域的边界的最近距离在所述p之内的各像素的亮度, 即使确定的眼睛区域过小也能够保证实际眼睛区域的亮度调整,也可以使眼 睛区域内的亮度到眼周部位的亮度的过渡更加自然,亮眼效果更自然,眼部 调整后最终图像的效果也更加自然。
根据本公开实施例的第二方面,提供一种眼部图像处理装置,包括:
定位模块,用于定位待处理图像中人脸的眼睛区域;
第一确定模块,用于确定所述眼睛区域内每个像素到所述眼睛区域的边 界的最近距离;
第二确定模块,用于确定所述眼睛区域中各像素的亮度调整基数;
第三确定模块,用于按照第一预设规则确定所述眼睛区域中像素的亮度 调整幅度,其中,所述第一预设规则包括所述最近距离与所述亮度调整幅度 正相关;
第一调整模块,用于确定所述眼睛区域中到所述眼睛区域的边界的最近 距离小于等于n的像素所在的渐变区域;
第二确定子模块,用于按照所述第一预设规则确定所述渐变区域中像素 的亮度调整幅度。
在一个实施例中,所述第三确定模块包括:
第一确定子模块,用于按照第一预设规则确定所述眼睛区域中到所述眼 睛区域的边界的最近距离小于等于n的各像素的亮度调整幅度。
在一个实施例中,所述第一确定子模块,用于按照以下公式确定亮度调 整幅度θ1:
θ1=α*((x+m)/(n+m))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述n为一大 于0的预设值,所述α为小于等于1的常数,所述m为一大于等于0的预设 值。
在一个实施例中,所述装置还包括:
第四确定模块,用于确定所述眼睛区域外各像素的亮度调整基数;
第五确定模块,用于确定所述眼睛区域外每个像素到所述眼睛区域的边 界的最近距离;
第六确定模块,用于按照第二预设规则确定所述眼睛区域外、距离所述 眼睛区域的边界的最近距离在所述p之内的各像素的亮度调整幅度,其中, 所述第二预设规则包括所述最近距离与所述亮度调整幅度负相关;
第二调整模块,用于根据所述眼睛区域外所述各像素的亮度调整基数和 所述亮度调整幅度,调整所述眼睛区域外、距离所述眼睛区域的边界的最近 距离在所述p之内的各像素的亮度。
在一个实施例中,所述第六确定模块包括:
第三确定子模块,用于按照以下公式确定亮度调整幅度θ2:
θ2=α*((p-x)/(q+p))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述q为一大 于等于0的预设值,所述α为小于等于1的常数,所述p为一大于0的预设 值。
根据本公开实施例的第三方面,提供一种眼部图像处理装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
定位待处理图像中人脸的眼睛区域;
确定所述眼睛区域内每个像素到所述眼睛区域的边界的最近距离;
确定所述眼睛区域中各像素的亮度调整基数;
按照第一预设规则确定所述眼睛区域中像素的亮度调整幅度,其中,所 述第一预设规则包括所述最近距离与所述亮度调整幅度正相关;
根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅度,调整 所述述眼睛区域中各像素的亮度。
根据本公开实施例的第四方面,提供一种计算机可读存储介质,存储有 计算机指令,所述计算机指令被处理器执行时实现上述方法中的步骤。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性 的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公 开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的一种眼部图像处理方法的流程图。
图2是根据一示例性实施例示出的眼睛区域的边界的示意图。
图3是根据一示例性实施例示出的一种眼部图像处理方法的流程图。
图4是根据一示例性实施例示出的一种眼部图像处理方法的流程图。
图5是根据一示例性实施例示出的一种待处理图像中的眼部图像的示意 图。
图6是根据一示例性实施例示出的一种处理后的眼部图像的示意图。
图7是根据一示例性实施例示出的一种眼部图像处理装置的框图。
图8是根据一示例性实施例示出的一种眼部图像处理装置的框图。
图9是根据一示例性实施例示出的一种眼部图像处理装置的框图。
图10是根据一示例性实施例示出的一种眼部图像处理装置的框图。
图11是根据一示例性实施例示出的一种眼部图像处理装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描 述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要 素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有 实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些 方面相一致的装置和方法的例子。
目前在处理人物图像时,可以调亮眼部的亮度,使图像中的人物看着更加 有神,但是调亮眼部亮度后,会使眼部明显变亮,与眼周部位的亮度有明显 差别,这就使得处理后的最终图像不自然。
为解决上述问题,本公开可以定位待处理图像中人脸的眼睛区域;确定 所述眼睛区域内每个像素到所述眼睛区域的边界的最近距离;确定所述眼睛 区域中各像素的亮度调整基数;按照第一预设规则确定所述眼睛区域中像素 的亮度调整幅度,其中,所述第一预设规则包括所述最近距离与所述亮度调 整幅度成正相关;根据所述眼睛区域中各像素的亮度调整基数和所述亮度调 整幅度,调整所述述眼睛区域中各像素的亮度,如此使得离眼睛区域的边界 越近的像素,亮眼幅度越轻,离眼睛区域的中心越近的像素,亮眼幅度越大, 从眼睛区域的中心到眼睛区域的边界,亮眼幅度逐渐变小,有个过渡,这样, 眼睛区域的边界内围的像素的亮度已变化很小,与眼周部位的亮度没有明显 差别,亮眼效果更自然,处理后的最终图像的效果也更加自然。
图1是根据一示例性实施例示出的一种眼部图像处理方法的流程图,如 图1所示,该眼部图像处理方法用于终端等设备中,包括以下步骤101-105:
在步骤101中,定位待处理图像中人脸的眼睛区域。
在该实施例中,终端在得到待处理图像后,可以先采用人脸检测识别该 待处理图像中的人脸的位置,然后可以采用人脸特征点定位算法,定位出人 脸上的眼睛区域,这里,人脸特征点定位的目的是在检测到人脸的基础上, 进一步确定脸部特征点(如眼睛、眉毛、鼻子、嘴巴、脸部外轮廓)的位置。 经典的人脸特征点定位算法包括ASM(Active ShapeModel,主动形状模型) 和AAM(Active Appearance Model,主动表现模型)。
这里,终端确定的眼睛区域包括左眼区域和右眼区域。
在步骤102中,确定所述眼睛区域内每个像素到所述眼睛区域的边界的 最近距离。
在该实施例中,终端可以确定左眼区域内每个像素到所述左眼区域的边 界的最近距离,以及右眼区域内每个像素到所述右眼区域的边界的最近距离。 示例的,图2是根据一示例性实施例示出的眼睛区域的边界的示意图。参考 图2,终端确定眼睛区域的边界为左眼边界201和右眼边界202,终端可以确 定左眼边界201内到每个像素到左眼边界201的最近距离,以及右眼边界202 内到每个像素到右眼边界202的最近距离。
在该实施例中,终端可以使用距离变换算法来确定所述眼睛区域内每个 像素到所述眼睛区域的边界的最近距离,距离变换算法是图像处理的一种方 法,通过使用两遍扫描光栅算法可以快速计算到曲线或点集的距离,如此即 可快速计算出眼睛区域内每个像素到所述眼睛区域的边界所在曲线或边界上 的像素集的最近距离,距离变换算法需要先将图像进行二值化处理,得到二 值化图像,在二维空间中,该二值图像可以认为仅包含目标像素(眼睛区域 内每个像素)和背景像素(眼睛区域的边界上的每个像素)两种像素,目标 像素值为1,背景像素值为0;距离变换的结果不是另一幅二值图像,而是一 幅灰度级图像,即距离图像,该距离图像中每个像素(即眼睛区域内每个像 素)的灰度值为该像素与距其最近的背景像素间(眼睛区域的边界上的每个 像素)的距离,即眼睛区域内每个像素到所述眼睛区域的边界的最近距离。
这里,该最近距离可以是曼哈顿距离(Manhattan Distance),也可以是 欧式距离。终端采用距离变换算法确定所述眼睛区域内每个像素到所述眼睛 区域的边界的最近距离,计算快捷方便。
在步骤103中,确定所述眼睛区域中各像素的亮度调整基数。
在该实施例中,终端可以采用一些图像的局部对比度增强算法来对待处 理图像的眼睛区域中各像素的亮度进行调整,进而确定该眼睛区域中各像素 的亮度调整基数,该局部对比度增强算法可以是自适应直方图均衡化 (Adaptive histogram equalization,AHE)、限制对比度自适应直方图均衡(Contrast Limited Adaptive histogramequalization,CLAHE)和ACE (Adaptive Contrast Enhancement,自适应对比度增强)算法等。
这里以ACE为例进行说明,ACE算法采用了反锐化掩模技术,其过程 如下:首先图像被分成两个部分;一是低频的反锐化掩模(unsharp mask) 部分,可以通过图像的低通滤波(平滑,模糊技术)获得;二是高频成分, 可以通过原图减去反锐化掩模获取;然后高频部分被放大(放大系数集为对 比度增益)并加入到反锐化掩模中去,最后得到对比度增强的眼睛区域,此时, 终端就可以确定该眼睛区域中各像素的亮度调整基数。采用ACE算法增强图 像的对比度,有更好的增强效果,使得图像的亮度调整更合适,效果更好。 采用ACE算法,确定所述眼睛区域中各像素的亮度调整基数,使得该眼睛区 域中各像素的亮度变化的更加合适,效果更好。
在步骤104中,按照第一预设规则确定所述眼睛区域中像素的亮度调整 幅度,其中,所述第一预设规则包括所述最近距离与所述亮度调整幅度成正 相关。
在该实施例中,最近距离与亮度调整幅度成正相关包括最近距离与亮度 调整幅度之间成线性正相关或非线性正相关,只要保证像素离眼睛区域的边 界的最近距离越小,该像素的亮度调整幅度越小就可以。
在该实施例中,终端可以按照离眼睛区域的边界的最近距离越小的像素 的亮度调整幅度越小的第一预设规则,确定眼睛区域中各像素的亮度调整幅 度,如此,距离眼睛区域的边界越近的像素的亮度调整幅度就越小。这样, 眼睛区域的越靠中心位置的像素的亮度调整幅度可以越大,可以大幅度增强 人眼的亮度,使人物更加精神,而眼睛区域的越靠边界的像素的亮度调整幅 度可以越小,到达边界内围的像素的调整幅度已变化很小,与眼周部位的亮 度没有明显差别,使得亮度调整幅度有个逐渐减小的过渡过程。
在步骤105中,根据所述眼睛区域中各像素的亮度调整基数和所述亮度 调整幅度,调整所述述眼睛区域中各像素的亮度。
在该实施例中,终端可以将眼睛区域中各像素的亮度调整基数乘以各像 素的亮度调整幅度,得到各像素最终的亮度调整值,然后终端就可以按照各 像素最终的亮度调整值来调整所述述眼睛区域中各像素的亮度。
这里需要说明的是,终端如果只采用图像的局部对比度增强算法来调亮 对待处理图像的眼睛区域中各像素的亮度,会导致变亮的眼睛区域与未变亮 的眼外区域有明显的亮度差别,而本实施例在采用图像的局部对比度增强算 法确定对待处理图像的眼睛区域中各像素的亮度调整基数后,会将确定出亮 度调整基数乘以逐渐变化的亮度调整幅度,由于眼睛区域的越靠中心位置的 像素的亮度调整幅度越大,而眼睛区域的越靠边界的像素的亮度调整幅度越 小,故,这就会使得眼睛区域内从眼睛区域中间部位向眼睛区域边界,各像 素的亮度调整幅度会相应的逐渐减小,使得亮度调整幅度有个逐渐减小的过 渡过程,到达边界内围的像素的调整幅度已变化很小,与眼周部位的亮度没 有明显差别,这就使得眼镜区域的亮度调整更自然。
本实施例可以定位待处理图像中人脸的眼睛区域;确定所述眼睛区域内 每个像素到所述眼睛区域的边界的最近距离;确定所述眼睛区域中各像素的 亮度调整基数;按照最近距离与亮度调整幅度的正相关关系,确定所述眼睛 区域中像素的亮度调整幅度,根据所述眼睛区域中各像素的亮度调整基数和 所述亮度调整幅度,调整所述述眼睛区域中各像素的亮度,如此,从眼睛区 域的中心到眼睛区域的边界,亮度调整幅度逐渐变小,有个过渡,这样,眼 睛区域的中间部位的亮度变化仍可保持较大,使得人物的眼睛有神,人物比较精神,而过渡到边界内围的像素的亮度整幅度已很小,这样调整后的亮度 与眼周部位的亮度没有明显差别,亮眼效果更自然,眼部调整后最终图像的 效果也更加自然。
在一种可能的实施方式中,上述眼部图像处理方法中的步骤104可以实 施为以下步骤A1。
在步骤A1中,确定所述眼睛区域中到所述眼睛区域的边界的最近距离 小于等于n的像素所在的渐变区域。
在步骤A2中,按照所述第一预设规则确定所述渐变区域中像素的亮度 调整幅度。
在该实施例中,终端可以从所述眼睛区域中选取渐变区域,该渐变区域 内的像素到所述眼睛区域的边界的最近距离均小于等于n;对于该渐变区域 内的像素,终端可以按照所述最近距离与所述亮度调整幅度成正相关的关系, 将该渐变区域内的像素中离眼睛区域的边界的最近距离越小的像素的亮度调 整幅度确定的越小。
示例的,参考图2,以左眼区域为例,假设界线203上的像素到左眼边 界201的最近距离均为n,则左眼边界201和界线203之间的区域即为渐变 区域,对于渐变区域内的像素来说,像素到所述眼睛区域的边界的最近距离 越小即离眼睛区域的边界越近,亮眼幅度值就越小,如此,终端就可以将界 线203与左眼边界201之间包含界线203的像素的亮度调整幅度设置为从界 线203到左眼边界201逐渐减小,如此,从界线203到眼睛区域的边界,亮度调整幅度逐渐变小,有个变小的过渡,这样,逐渐过渡到边界内围的像素 的亮度整幅度已很小,这样眼睛区域内像素的亮度至左眼边界201上的像素 时,亮度变化为就会很小,与眼周部位的亮度之间的差别也会变小,亮眼效 果更自然,眼部调整后最终图像的效果也更加自然。
本实施例可以按照最近距离与亮度调整幅度成正相关,确定所述眼睛区 域中到所述眼睛区域的边界的最近距离小于等于n的各像素的亮度调整幅 度,如此,从最近距离为n到最近距离为0的边界,像素的亮度整幅度已逐 渐变小,导致眼睛区域边界处的亮度变化也变小,眼睛区域边界处与眼周部 位的亮度的差别就会变小,亮眼效果更自然,眼部调整后最终图像的效果也 更加自然。
在一种可能的实施方式中,上述眼部图像处理方法中的步骤A1可以实 施为以下步骤A11。
在步骤A11中,按照以下公式确定亮度调整幅度θ1:
θ1=α*((x+m)/(n+m))公式1
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述n为一大 于0的预设值,所述α为小于等于1的常数,所述m为一大于等于0的预设 值。
在该实施例中,最近距离与亮度调整幅度成正相关包括最近距离与亮度 调整幅度之间成线性正相关,该线性正相关的关系式如公式1所示,当m=0 时,θ1=α*((x+m)/(n+m))=α*(x/n),x与θ1成正比关系,θ1随着x的减小成 比例的减小,当然m也可以大于0,此时,x与θ1也成线性正相关关系,θ1随 着x的减小而线性减小,但不成比例减小。当然,x与θ1之间的关系式还可 以是其他形式,只要保证θ1随着x的减小而减小即可,在此并不做限制。
在该实施例中,n为一大于0的预设值,终端可以针对大量用户的眼睛 区域,确定这些眼睛区域内部的像素至所述眼睛区域的边界的最近距离中的 最大值,终端可以从这些最大值中选择一最小的值作为该预设值。该m为一 大于等于0的预设值,该α为小于等于1的常数,α的取值可以是1,也可以 是小于1的小数如0.9等。
在该实施例中,参考图2,以左眼区域为例,假设界线203上的像素到 左眼边界201的最近距离均为n,则对于眼睛区域中左眼边界201的最近距 离小于等于n的各像素即左眼边界201和界线203之间渐变区域内的像素来 说,像素到所述眼睛区域的边界的最近距离x越小即离眼睛区域的边界越近, (x+m)/(n+m)就越小,此时计算出的亮眼幅度值就越小,按照上述公式,终 端可以将界线203与左眼边界201之间包含界线203的像素的亮度调整幅度逐渐由α线性减小至m/(n+m),如此,从界线203到左眼边界201,亮度调 整幅度逐渐变小,有个过渡,逐渐过渡到边界内围的像素的亮度整幅度已很 小,与眼周部位的亮度差别变小,亮眼效果更自然,眼部调整后最终图像的 效果也更加自然。
这里需要说明的是,m为0时,界线203至左眼边界201的亮度整幅度 逐渐变化由α逐渐变为0,使得眼睛区域的边界部分的亮度与眼周部位的亮 度差别更小;当然,m也可以不等于0,此时,m的取值应较小,如不大于 n,这样,终端将从界线203到左眼边界201的亮度调整幅度设置为由α至 m/(n+m)线性减小时,就会使得眼睛区域的边界部分的亮度与眼周部位的亮 度之间差别更小,亮眼效果更自然,眼部调整后最终图像的效果也更加自然。
这里需要说明的是,终端可以确定眼睛区域的边界的最近距离大于n的 各像素即界线203之内的像素的亮度调整幅度为1,如此,终端就可以直接 使用界线203之内的像素的亮度调整基数作为最终的亮度调整值。为了保证 亮度变化的自然过渡,终端也可以确定眼睛区域的边界的最近距离大于n的 各像素即界线203之内的像素的亮度调整幅度为α,这样,眼睛区域的中间 部位即界线203内的像素亮度仍可保持较大幅度的变化,使得人物的眼睛有 神,人物比较精神。
本实施例可以按照θ1=α*((x+m)/(n+m))确定眼睛区域中到所述眼睛区 域的边界的最近距离小于等于n的各像素的亮度调整幅度,如此,逐渐过渡 到边界内围的像素的亮度整幅度已很小,至眼睛区域的边界上的像素时亮度 变化已变为很小,与眼周部位的亮度差别变小,亮眼效果更自然,眼部调整 后最终图像的效果也更加自然。
在一种可能的实施方式中,上述眼部图像处理方法还可以包括以下步骤 D1至步骤D4。
在步骤D1中,确定所述眼睛区域外各像素的亮度调整基数。
在该实施例中,终端可以采用图像的局部对比度增强算法来对待处理图 像中各像素的亮度进行调整,进而确定该待处理图像中各像素的亮度调整基 数,即终端在确定所述眼睛区域中各像素的亮度调整基数时,也确定眼睛区 域外各像素的亮度调整基数。
在步骤D2中,确定所述眼睛区域外每个像素到所述眼睛区域的边界的 最近距离。
在该实施例中,终端可以采用距离转化算法确定待处理图像中各像素到 所述眼睛区域的边界的最近距离,即终端可以在确定所述眼睛区域内各像素 到所述眼睛区域的边界的最近距离的同时,也确定所述眼睛区域外每个像素 到所述眼睛区域的边界的最近距离。
在步骤D3中,按照第二预设规则确定所述眼睛区域外、距离所述眼睛 区域的边界的最近距离在所述p之内的各像素的亮度调整幅度,其中,所述 第二预设规则包括所述最近距离与所述亮度调整幅度负相关。
在该实施例中,确定的眼睛区域可能会出现误差,确定的眼睛区域比实 际的眼睛区域小,此时为了保证实际眼睛区域的亮度调整,终端还可以调整 眼睛区域外、距离所述眼睛区域的边界的最近距离在所述p之内的各像素,p 为一大于0预设值,示例的,可以是5或8或10个像素的距离等。
在该实施例中,最近距离与所述亮度调整幅度负相关包括最近距离与亮 度调整幅度之间成线性负相关或非线性负相关,只要保证像素离眼睛区域的 边界的最近距离越大,该像素的亮度调整幅度越小就可以。
示例的,参考图2,以左眼区域为例,假设左眼区域内的界线203上的 像素到左眼边界201的最近距离均为n,左眼区域外的界线204上的像素到 左眼边界201的最近距离均为p,则对于眼睛区域中左眼边界201的最近距 离小于等于n的各像素即左眼边界201和界线203之间包含界线203上的像 素来说,像素到所述眼睛区域的边界的最近距离x越小即离眼睛区域的边界 越近,亮度调整幅度就越小,则对于眼睛区域外与左眼边界201的最近距离 小于等于p的各像素即左眼边界201和界线204之间的像素来说,这些像素 到所述眼睛区域的边界的最近距离x越大即离眼睛区域的边界越远,亮度调 整幅度就越小;由上所述,终端可以将界线203到左眼边界201的亮度调整 幅度逐渐减小后,再将左眼边界201至界线204的亮度调整幅度逐渐减小, 即终端可以将界线203至界线204的像素的亮度调整幅度逐渐减小。
在步骤D4中,根据所述眼睛区域外所述各像素的亮度调整基数和所述 亮度调整幅度,调整所述眼睛区域外、距离所述眼睛区域的边界的最近距离 在所述p之内的各像素的亮度。
在该实施例中,终端可以将眼睛区域外、距离所述眼睛区域的边界的最 近距离在所述p之内的各像素的亮度调整基数乘以各像素的亮度调整幅度, 得到各像素最终的亮度调整值,然后终端就可以按照各像素最终的亮度调整 值来调整所述述眼睛区域中各像素的亮度,即使确定的眼睛区域过小也能够 保证实际眼睛区域的亮度调整。
这里,从该眼睛区域内部到眼睛区域的边界的外部一段距离,亮眼幅度 值会逐渐线性减小,如此使确定的眼睛区域内与眼周部位的亮度都有一个逐 渐过渡的过程,过渡自然,亮眼效果更自然,眼部调整后最终图像的效果也 更加自然。
本实施例可以按照第二预设规则确定所述眼睛区域外、距离所述眼睛区 域的边界的最近距离在所述p之内的各像素的亮度调整幅度,进而调整所述 眼睛区域外、距离所述眼睛区域的边界的最近距离在所述p之内的各像素的 亮度,即使确定的眼睛区域过小也能够保证实际眼睛区域的亮度调整,也可 以使眼睛区域内的亮度到眼周部位的亮度的过渡更加自然,亮眼效果更自然, 眼部调整后最终图像的效果也更加自然。
在一种可能的实施方式中,上述眼部图像处理方法中的步骤D3可以实 施为以下步骤D31。
在步骤D31中,按照以下公式确定亮度调整幅度θ2:
θ2=α*((p-x)/(q+p))公式2
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述q为一大 于等于0的预设值,所述α为小于等于1的常数,所述p为一大于0的预设 值。
在该实施例中,最近距离与亮度调整幅度成负相关包括最近距离与亮度 调整幅度之间成线性负相关,该线性负相关的关系式如公式2所示,当q=0 时,θ2=α*((p-x)/(q+p))=α*((p-x)/p),x与θ2成线性负相关关系,θ2随着x 的增大线性的减小,当然q也可以大于0,此时,x与θ2也成线性负相关关 系,θ2随着x的增大而线性减小。当然,x与θ2之间的关系式还可以是其他 形式,只要保证θ2随着x的增大而减小即可,在此并不做限制。
在该实施例中,参考图2,以左眼区域为例,左眼区域外的界线204上 的像素到左眼边界201的最近距离均为p,对于眼睛区域外左眼边界201的 最近距离小于等于p的各像素即左眼边界201和界线204之间的像素来说, 这些像素到所述眼睛区域的边界的最近距离x越大即离眼睛区域的边界越 远,(p-x)/(q+p)就越小,此时计算出的从左眼边界201到界线204的亮眼幅 度值就会由α*(p/(q+p))至0线性减小。这里,左眼区域外的像素中到左眼边 界201的最近距离越大,亮度幅度值就越小,到界线204时,亮度幅度值应 该减小为0。
在该实施例中,终端可以按照公式1确定所述眼睛区域的边界的最近距 离小于等于n的各像素的亮度调整幅度θ1,按照公式2确定眼睛区域外、距 离所述眼睛区域的边界的最近距离在所述p之内的各像素的亮度调整幅度 θ2,如此,参考图2,以左眼区域为例,假设左眼区域内的界线203上的像 素到左眼边界201的最近距离均为n,左眼区域外的界线204上的像素到左 眼边界201的最近距离均为p,则对于眼睛区域中左眼边界201的最近距离小于等于n的各像素即左眼边界201和界线203之间包含界线203上的像素 来说,像素到所述眼睛区域的边界的最近距离x越小即离眼睛区域的边界越 近,(x+m)/(n+m)就越小,此时计算出的界线203至左眼边界201的亮眼幅 度值就会由α至α*(m/(n+m))线性减小,对于眼睛区域外左眼边界201的最 近距离小于等于p的各像素即左眼边界201和界线204之间的像素来说,这 些像素到所述眼睛区域的边界的最近距离x越大即离眼睛区域的边界越远,(p-x)/(q+p)就越小,此时计算出的从左眼边界201到界线204的亮眼幅度值 就会由α*(p/(q+p))至0线性减小。
这里,为了保证左眼边界201处像素过渡的连贯性,可以使α*(m/(n+m)) =α*(p/(q+p)),此时,m=p,n=q;这样,界线203至左眼边界201的亮眼 幅度值就会由α至α*(m/(n+m))线性减小,左眼边界201到界线204的亮眼 幅度值就会由α*(p/(q+p))=α*(m/(n+m))至0线性减小。
这里,终端可以确定眼睛区域的边界的最近距离大于n的各像素即界线 203之内的像素的亮度调整幅度为α,眼睛区域的中间部位即界线203内的 像素亮度仍可保持较大幅度的变化,使得人物的眼睛有神,人物比较精神, 而从该中间部位到眼睛区域的边界的外部一段距离,亮眼幅度值会逐渐线性 减小,至外部一段距离后减小为0,如此即使确定的眼睛区域内与眼周部位 的亮度都有一个逐渐过渡的过程,过渡自然,亮眼效果更自然,眼部调整后 最终图像的效果也更加自然。
本实施例可以按照公式θ2=α*((p-x)/(q+p))确定所述眼睛区域外、距离 所述眼睛区域的边界的最近距离在所述p之内的各像素的亮度调整幅度,进 而调整所述眼睛区域外、距离所述眼睛区域的边界的最近距离在所述p之内 的各像素的亮度,即使确定的眼睛区域过小也能够保证实际眼睛区域的亮度 调整,也可以使眼睛区域内的亮度到眼周部位的亮度的过渡更加自然,亮眼 效果更自然,眼部调整后最终图像的效果也更加自然。
下面通过几个实施例详细介绍实现过程。
图3是根据一示例性实施例示出的一种眼部图像处理方法的流程图,如 图3所示,该方法可以由终端等设备实现,包括步骤301-306。
在步骤301中,定位待处理图像中人脸的眼睛区域。
在步骤302中,确定所述眼睛区域内每个像素到所述眼睛区域的边界的 最近距离,以及所述眼睛区域外各像素的亮度调整基数。
在步骤303中,确定所述眼睛区域中各像素的亮度调整基数,以及所述 眼睛区域外各像素的亮度调整基数。
在步骤304中,按照第一预设规则确定所述眼睛区域中到所述眼睛区域 的边界的最近距离小于等于n的各像素的亮度调整幅度,所述第一预设规则 包括所述最近距离与所述亮度调整幅度正相关。
在步骤305中,按照第二预设规则确定所述眼睛区域外、距离所述眼睛 区域的边界的最近距离在所述p之内的各像素的亮度调整幅度,其中,所述 第二预设规则包括所述最近距离与所述亮度调整幅度负相关。
在步骤306中,根据所述眼睛区域中各像素的亮度调整基数和所述亮度 调整幅度,调整所述述眼睛区域中各像素的亮度,根据所述眼睛区域外所述 各像素的亮度调整基数和所述亮度调整幅度,调整所述眼睛区域外、距离所 述眼睛区域的边界的最近距离在所述p之内的各像素的亮度。
图4是根据一示例性实施例示出的一种眼部图像处理方法的流程图,如 图4所示,该方法可以由终端等设备实现,包括步骤401-406。
在步骤401中,定位待处理图像中人脸的眼睛区域。
在步骤402中,确定所述眼睛区域内每个像素到所述眼睛区域的边界的 最近距离,以及所述眼睛区域外各像素的亮度调整基数。
在步骤403中,确定所述眼睛区域中各像素的亮度调整基数,以及所述 眼睛区域外各像素的亮度调整基数。
在步骤404中,按照公式1确定所述眼睛区域中到所述眼睛区域的边界 的最近距离小于等于n的各像素的亮度调整幅度。
θ1=α*((x+m)/(n+m)) 公式1
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述n为一大 于0的预设值,所述α为小于等于1的常数,所述m为一大于等于0的预设 值。
在步骤405中,按照公式2确定所述眼睛区域外、距离所述眼睛区域的 边界的最近距离在所述p之内的各像素的亮度调整幅度。
θ2=α*((p-x)/(q+p)) 公式2
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述q为一大 于等于0的预设值,所述α为小于等于1的常数,所述p为一大于0的预设 值。
在步骤406中,根据所述眼睛区域中各像素的亮度调整基数和所述亮度 调整幅度,调整所述述眼睛区域中各像素的亮度;根据所述眼睛区域外所述 各像素的亮度调整基数和所述亮度调整幅度,调整所述眼睛区域外、距离所 述眼睛区域的边界的最近距离在所述p之内的各像素的亮度。
图5是根据一示例性实施例示出的一种待处理图像中的眼部图像的示意 图。图6是根据一示例性实施例示出的一种处理后的眼部图像的示意图。按 照本实施例中的步骤处理图5所示的眼部图像501后,可以得到图6所示的 处理后的眼部图像601,从图5和图6中可以看出,处理后的眼部图像中, 任务的眼睛更加明亮且比较自然。
下述为本公开装置实施例,可以用于执行本公开方法实施例。
图7是根据一示例性实施例示出的一种眼部图像处理装置的框图,该装 置可以通过软件、硬件或者两者的结合实现成为电子设备的部分或者全部。 如图7所示,该眼部图像处理装置包括:定位模块701、第一确定模块702、 第二确定模块703、第三确定模块704和第一调整模块705;其中:
定位模块701,用于定位待处理图像中人脸的眼睛区域;
第一确定模块702,用于确定所述眼睛区域内每个像素到所述眼睛区域 的边界的最近距离;
第二确定模块703,用于确定所述眼睛区域中各像素的亮度调整基数;
第三确定模块704,用于按照第一预设规则确定所述眼睛区域中像素的 亮度调整幅度,其中,所述第一预设规则包括所述最近距离与所述亮度调整 幅度正相关;
第一调整模块705,用于根据所述眼睛区域中各像素的亮度调整基数和 所述亮度调整幅度,调整所述述眼睛区域中各像素的亮度。
作为一种可能的实施例,图8是根据一示例性实施例示出的一种眼部图 像处理装置的框图,参考图8,上述公开的眼部图像处理装置还可以把所述 第三确定模块704配置成包括第一确定子模块7041和第二确定子模块7042, 其中:
第一确定子模块7041,用于确定所述眼睛区域中到所述眼睛区域的边界 的最近距离小于等于n的像素所在的渐变区域。
第二确定子模块7042,用于按照所述第一预设规则确定所述渐变区域中 像素的亮度调整幅度。
作为一种可能的实施例,上述公开的眼部图像处理装置中,所述第一确 定子模块7041,用于按照以下公式确定亮度调整幅度θ1:
θ1=α*((x+m)/(n+m))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述n为一大 于0的预设值,所述α为小于等于1的常数,所述m为一大于等于0的预设 值。
作为一种可能的实施例,图9是根据一示例性实施例示出的一种眼部图 像处理装置的框图,参考图9,上述公开的眼部图像处理装置还可以被配置 成包括第四确定模块706、第五确定模块707、第六确定模块708和第二调整 模块709,其中:
第四确定模块706,用于确定所述眼睛区域外各像素的亮度调整基数;
第五确定模块707,用于确定所述眼睛区域外每个像素到所述眼睛区域 的边界的最近距离;
第六确定模块708,用于按照第二预设规则确定所述眼睛区域外、距离 所述眼睛区域的边界的最近距离在所述p之内的各像素的亮度调整幅度,其 中,所述第二预设规则包括所述最近距离与所述亮度调整幅度负相关;
第二调整模块709,用于根据所述眼睛区域外所述各像素的亮度调整基 数和所述亮度调整幅度,调整所述眼睛区域外、距离所述眼睛区域的边界的 最近距离在所述p之内的各像素的亮度。
作为一种可能的实施例,图10是根据一示例性实施例示出的一种眼部图 像处理装置的框图,参考图10,上述公开的眼部图像处理装置还可以把所述 第六确定模块708配置成包括第三确定子模块7081,其中:
第三确定子模块7081,用于按照以下公式确定亮度调整幅度θ2:
θ2=α*((p-x)/(q+p))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述q为一大 于等于0的预设值,所述α为小于等于1的常数,所述p为一大于0的预设 值。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有 关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图11是根据一示例性实施例示出的一种眼部图像处理装置的框图,该装 置适用于终端设备。例如,装置1100可以是移动电话,游戏控制台,电脑、 平板设备,个人数字助理等。
装置1100可以包括以下一个或多个组件:处理组件1101,存储器1102, 电源组件1103,多媒体组件1104,音频组件1105,输入/输出(I/O)接口 1106,传感器组件1107,以及通信组件1108。
处理组件1101通常控制装置1100的整体操作,诸如与显示,电话呼叫, 数据通信,相机操作和记录操作相关联的操作。处理组件1101可以包括一个 或多个处理器1120来执行指令,以完成上述的方法的全部或部分步骤。此外, 处理组件1101可以包括一个或多个模块,便于处理组件1101和其他组件之 间的交互。例如,处理组件1101可以包括多媒体模块,以方便多媒体组件 1104和处理组件1101之间的交互。
存储器1102被配置为存储各种类型的数据以支持在装置1100的操作。 这些数据的示例包括用于在装置1100上操作的任何应用程序或方法的指令, 联系人数据,电话簿数据,消息,图片,视频等。存储器1102可以由任何类 型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储 器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读 存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁 存储器,快闪存储器,磁盘或光盘。
电源组件1103为装置1100的各种组件提供电力。电源组件1103可以包 括电源管理系统,一个或多个电源,及其他与为装置1100生成、管理和分配 电力相关联的组件。
多媒体组件1104包括在所述装置1100和用户之间的提供一个输出接口 的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。 如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入 信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上 的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测 与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组 件1104包括一个前置摄像头和/或后置摄像头。当装置1100处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒 体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具 有焦距和光学变焦能力。
音频组件1105被配置为输出和/或输入音频信号。例如,音频组件1105 包括一个麦克风(MIC),当装置1100处于操作模式,如呼叫模式、记录模 式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信 号可以被进一步存储在存储器1102或经由通信组件1108发送。在一些实施 例中,音频组件1105还包括一个扬声器,用于输出音频信号。
I/O的接口1106为处理组件1101和外围接口模块之间提供接口,上述 外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主 页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件1107包括一个或多个传感器,用于为装置1100提供各个方 面的状态评估。例如,传感器组件1107可以检测到装置1100的打开/关闭状 态,组件的相对定位,例如所述组件为装置1100的显示器和小键盘,传感器 组件1107还可以检测装置1100或装置1100一个组件的位置改变,用户与装 置1100接触的存在或不存在,装置1100方位或加速/减速和装置1100的温 度变化。传感器组件1107可以包括接近传感器,被配置用来在没有任何的物 理接触时检测附近物体的存在。传感器组件1107还可以包括光传感器,如 CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该 传感器组件1107还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力 传感器或温度传感器。
通信组件1108被配置为便于装置1100和其他设备之间有线或无线方式 的通信。装置1100可以接入基于通信标准的无线网络,如WiFi,2G或3G, 或它们的组合。在一个示例性实施例中,通信组件1108经由广播信道接收来 自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中, 所述通信组件1108还包括近场通信(NFC)模块,以促进短程通信。例如, 在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术, 超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置1100可以被一个或多个应用专用集成电路 (ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻 辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器 或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储 介质,例如包括指令的存储器1102,上述指令可由装置1100的处理器1120 执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、 随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本实施例提供了一种计算机可读存储介质,当所述存储介质中的指令由 装置1100的处理器执行时实现以下步骤:
定位待处理图像中人脸的眼睛区域;
确定所述眼睛区域内每个像素到所述眼睛区域的边界的最近距离;
确定所述眼睛区域中各像素的亮度调整基数;
按照第一预设规则确定所述眼睛区域中像素的亮度调整幅度,其中,所 述第一预设规则包括所述最近距离与所述亮度调整幅度正相关;
根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅度,调整 所述述眼睛区域中各像素的亮度。
所述存储介质中的指令被处理器执行时还可以实现以下步骤:
按照第一预设规则确定所述眼睛区域中像素的亮度调整幅度,包括:
确定所述眼睛区域中到所述眼睛区域的边界的最近距离小于等于n的像 素所在的渐变区域;
按照所述第一预设规则确定所述渐变区域中像素的亮度调整幅度。
所述存储介质中的指令被处理器执行时还可以实现以下步骤:
所述按照所述第一预设规则确定所述渐变区域中像素的亮度调整幅度包 括:
按照以下公式确定亮度调整幅度θ1:
θ1=α*((x+m)/(n+m))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述n为一大 于0的预设值,所述α为小于等于1的常数,所述m为一大于等于0的预设 值。
所述存储介质中的指令被处理器执行时还可以实现以下步骤:
所述方法还包括:
确定所述眼睛区域外各像素的亮度调整基数;
确定所述眼睛区域外每个像素到所述眼睛区域的边界的最近距离;
按照第二预设规则确定所述眼睛区域外、距离所述眼睛区域的边界的最 近距离在所述p之内的各像素的亮度调整幅度,其中,所述第二预设规则包 括所述最近距离与所述亮度调整幅度负相关;
根据所述眼睛区域外所述各像素的亮度调整基数和所述亮度调整幅度, 调整所述眼睛区域外、距离所述眼睛区域的边界的最近距离在所述p之内的 各像素的亮度。
所述存储介质中的指令被处理器执行时还可以实现以下步骤:
所述按照第二预设规则确定所述眼睛区域外、距离所述眼睛区域的边界 的最近距离在所述p之内的各像素的亮度调整幅度包括:
按照以下公式确定亮度调整幅度θ2:
θ2=α*((p-x)/(q+p))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述q为一大 于等于0的预设值,所述α为小于等于1的常数,所述p为一大于0的预设 值。
本公开还提供了一种眼部图像处理装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
定位待处理图像中人脸的眼睛区域;
确定所述眼睛区域内每个像素到所述眼睛区域的边界的最近距离;
确定所述眼睛区域中各像素的亮度调整基数;
按照第一预设规则确定所述眼睛区域中像素的亮度调整幅度,其中,所 述第一预设规则包括所述最近距离与所述亮度调整幅度正相关;
根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅度,调整 所述述眼睛区域中各像素的亮度。
所述处理器还可以被配置为:
按照第一预设规则确定所述眼睛区域中像素的亮度调整幅度,包括:
确定所述眼睛区域中到所述眼睛区域的边界的最近距离小于等于n的像 素所在的渐变区域;
按照所述第一预设规则确定所述渐变区域中像素的亮度调整幅度。
所述处理器还可以被配置为:
所述按照所述第一预设规则确定所述渐变区域中像素的亮度调整幅度包 括:
按照以下公式确定亮度调整幅度θ1:
θ1=α*((x+m)/(n+m))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述n为一大 于0的预设值,所述α为小于等于1的常数,所述m为一大于等于0的预设 值。
所述处理器还可以被配置为:
所述方法还包括:
确定所述眼睛区域外各像素的亮度调整基数;
确定所述眼睛区域外每个像素到所述眼睛区域的边界的最近距离;
按照第二预设规则确定所述眼睛区域外、距离所述眼睛区域的边界的最 近距离在所述p之内的各像素的亮度调整幅度,其中,所述第二预设规则包 括所述最近距离与所述亮度调整幅度负相关;
根据所述眼睛区域外所述各像素的亮度调整基数和所述亮度调整幅度, 调整所述眼睛区域外、距离所述眼睛区域的边界的最近距离在所述p之内的 各像素的亮度。
所述处理器还可以被配置为:
所述按照第二预设规则确定所述眼睛区域外、距离所述眼睛区域的边界 的最近距离在所述p之内的各像素的亮度调整幅度包括:
按照以下公式确定亮度调整幅度θ2:
θ2=α*((p-x)/(q+p))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述q为一大 于等于0的预设值,所述α为小于等于1的常数,所述p为一大于0的预设 值。
本领域技术人员在考虑说明书及实践这里公开的公开后,将容易想到本 公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性 变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公 开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被 视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确 结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所 附的权利要求来限制。

Claims (12)

1.一种眼部图像处理方法,其特征在于,包括:
定位待处理图像中人脸的眼睛区域;
确定所述眼睛区域内每个像素到所述眼睛区域的边界的最近距离;
确定所述眼睛区域中各像素的亮度调整基数,所述确定所述眼睛区域中各像素的亮度调整基数包括:采用局部对比度增强算法对所述眼睛区域中各像素的亮度进行调整,进而确定所述眼睛区域中各像素的亮度调整基数;
按照第一预设规则确定所述眼睛区域中像素的亮度调整幅度,其中,所述第一预设规则包括所述最近距离与所述亮度调整幅度正相关;
根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅度,调整所述眼睛区域中各像素的亮度,所述根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅度,调整所述眼睛区域中各像素的亮度包括:将所述眼睛区域中各像素的亮度调整基数乘以各像素的亮度调整幅度,得到各像素最终的亮度调整值,按照各像素最终的亮度调整值来调整所述眼睛区域中各像素的亮度。
2.根据权利要求1所述的方法,其特征在于,按照第一预设规则确定所述眼睛区域中像素的亮度调整幅度,包括:
确定所述眼睛区域中到所述眼睛区域的边界的最近距离小于等于n的像素所在的渐变区域;
按照所述第一预设规则确定所述渐变区域中像素的亮度调整幅度。
3.根据权利要求2所述的方法,其特征在于,所述按照所述第一预设规则确定所述渐变区域中像素的亮度调整幅度包括:
按照以下公式确定亮度调整幅度θ1:
θ1=α*((x+m)/(n+m))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述n为一大于0的预设值,所述α为小于等于1的常数,所述m为一大于等于0的预设值。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
确定所述眼睛区域外各像素的亮度调整基数;
确定所述眼睛区域外每个像素到所述眼睛区域的边界的最近距离;
按照第二预设规则确定所述眼睛区域外、距离所述眼睛区域的边界的最近距离在p之内的各像素的亮度调整幅度,其中,所述第二预设规则包括所述最近距离与所述亮度调整幅度负相关;所述p为一大于0预设值;
根据所述眼睛区域外所述各像素的亮度调整基数和所述亮度调整幅度,调整所述眼睛区域外、距离所述眼睛区域的边界的最近距离在所述p之内的各像素的亮度。
5.根据权利要求4所述的方法,其特征在于,所述按照第二预设规则确定所述眼睛区域外、距离所述眼睛区域的边界的最近距离在p之内的各像素的亮度调整幅度包括:
按照以下公式确定亮度调整幅度θ2:
θ2=α*((p-x)/(q+p))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述q为一大于等于0的预设值,所述α为小于等于1的常数。
6.一种眼部图像处理装置,其特征在于,包括:
定位模块,用于定位待处理图像中人脸的眼睛区域;
第一确定模块,用于确定所述眼睛区域内每个像素到所述眼睛区域的边界的最近距离;
第二确定模块,用于确定所述眼睛区域中各像素的亮度调整基数,所述确定所述眼睛区域中各像素的亮度调整基数包括:采用局部对比度增强算法对所述眼睛区域中各像素的亮度进行调整,进而确定所述眼睛区域中各像素的亮度调整基数;
第三确定模块,用于按照第一预设规则确定所述眼睛区域中像素的亮度调整幅度,其中,所述第一预设规则包括所述最近距离与所述亮度调整幅度正相关;
第一调整模块,用于根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅度,调整所述眼睛区域中各像素的亮度,所述根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅度,调整所述眼睛区域中各像素的亮度包括:将所述眼睛区域中各像素的亮度调整基数乘以各像素的亮度调整幅度,得到各像素最终的亮度调整值,按照各像素最终的亮度调整值来调整所述眼睛区域中各像素的亮度。
7.根据权利要求6所述的装置,其特征在于,所述第三确定模块包括:
第一确定子模块,用于确定所述眼睛区域中到所述眼睛区域的边界的最近距离小于等于n的像素所在的渐变区域;
第二确定子模块,用于按照所述第一预设规则确定所述渐变区域中像素的亮度调整幅度。
8.根据权利要求7所述的装置,其特征在于,
所述第一确定子模块,用于按照以下公式确定亮度调整幅度θ1:
θ1=α*((x+m)/(n+m))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述n为一大于0的预设值,所述α为小于等于1的常数,所述m为一大于等于0的预设值。
9.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第四确定模块,用于确定所述眼睛区域外各像素的亮度调整基数;
第五确定模块,用于确定所述眼睛区域外每个像素到所述眼睛区域的边界的最近距离;
第六确定模块,用于按照第二预设规则确定所述眼睛区域外、距离所述眼睛区域的边界的最近距离在p之内的各像素的亮度调整幅度,其中,所述第二预设规则包括所述最近距离与所述亮度调整幅度负相关;所述p为一大于0预设值;
第二调整模块,用于根据所述眼睛区域外所述各像素的亮度调整基数和所述亮度调整幅度,调整所述眼睛区域外、距离所述眼睛区域的边界的最近距离在所述p之内的各像素的亮度。
10.根据权利要求9所述的装置,其特征在于,所述第六确定模块包括:
第三确定子模块,用于按照以下公式确定亮度调整幅度θ2:
θ2=α*((p-x)/(q+p))
其中,所述x为像素到所述眼睛区域的边界的最近距离,所述q为一大于等于0的预设值,所述α为小于等于1的常数。
11.一种眼部图像处理装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
定位待处理图像中人脸的眼睛区域;
确定所述眼睛区域内每个像素到所述眼睛区域的边界的最近距离;
确定所述眼睛区域中各像素的亮度调整基数,所述确定所述眼睛区域中各像素的亮度调整基数包括:采用局部对比度增强算法对所述眼睛区域中各像素的亮度进行调整,进而确定所述眼睛区域中各像素的亮度调整基数;
按照第一预设规则确定所述眼睛区域中像素的亮度调整幅度,其中,所述第一预设规则包括所述最近距离与所述亮度调整幅度正相关;
根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅度,调整所述眼睛区域中各像素的亮度,所述根据所述眼睛区域中各像素的亮度调整基数和所述亮度调整幅度,调整所述眼睛区域中各像素的亮度包括:将所述眼睛区域中各像素的亮度调整基数乘以各像素的亮度调整幅度,得到各像素最终的亮度调整值,按照各像素最终的亮度调整值来调整所述眼睛区域中各像素的亮度。
12.一种计算机可读存储介质,存储有计算机指令,其特征在于,所述计算机指令被处理器执行时实现权利要求1至5任一项所述的方法的步骤。
CN201710657865.9A 2017-08-03 2017-08-03 眼部图像处理方法及装置 Active CN107563957B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710657865.9A CN107563957B (zh) 2017-08-03 2017-08-03 眼部图像处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710657865.9A CN107563957B (zh) 2017-08-03 2017-08-03 眼部图像处理方法及装置

Publications (2)

Publication Number Publication Date
CN107563957A CN107563957A (zh) 2018-01-09
CN107563957B true CN107563957B (zh) 2021-03-23

Family

ID=60975010

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710657865.9A Active CN107563957B (zh) 2017-08-03 2017-08-03 眼部图像处理方法及装置

Country Status (1)

Country Link
CN (1) CN107563957B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109618098B (zh) * 2019-01-04 2021-02-26 Oppo广东移动通信有限公司 一种人像面部调整方法、装置、存储介质及终端
CN110399802B (zh) * 2019-06-28 2022-03-11 北京字节跳动网络技术有限公司 处理面部图像眼睛亮度的方法、装置、介质和电子设备
CN114360471B (zh) * 2020-05-15 2024-09-27 华为技术有限公司 显示调整方法、装置、系统及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102096911A (zh) * 2011-01-31 2011-06-15 格科微电子(上海)有限公司 亮度提升的方法
CN103258343A (zh) * 2013-05-07 2013-08-21 中南大学 一种基于图像编辑的眼部图像处理方法
CN105469017A (zh) * 2014-06-26 2016-04-06 小米科技有限责任公司 人脸图像处理方法及装置
CN106023104A (zh) * 2016-05-16 2016-10-12 厦门美图之家科技有限公司 人脸眼部区域的图像增强方法、系统及拍摄终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102096911A (zh) * 2011-01-31 2011-06-15 格科微电子(上海)有限公司 亮度提升的方法
CN103258343A (zh) * 2013-05-07 2013-08-21 中南大学 一种基于图像编辑的眼部图像处理方法
CN105469017A (zh) * 2014-06-26 2016-04-06 小米科技有限责任公司 人脸图像处理方法及装置
CN106023104A (zh) * 2016-05-16 2016-10-12 厦门美图之家科技有限公司 人脸眼部区域的图像增强方法、系统及拍摄终端

Also Published As

Publication number Publication date
CN107563957A (zh) 2018-01-09

Similar Documents

Publication Publication Date Title
CN108898546B (zh) 人脸图像处理方法、装置及设备、可读存储介质
CN109345485B (zh) 一种图像增强方法、装置、电子设备及存储介质
CN104156947B (zh) 图像分割方法、装置及设备
CN107330868B (zh) 图片处理方法及装置
US11061202B2 (en) Methods and devices for adjusting lens position
CN108470322B (zh) 处理人脸图像的方法、装置及可读存储介质
CN107958439B (zh) 图像处理方法及装置
CN108154466B (zh) 图像处理方法及装置
CN104156915A (zh) 肤色调整方法和装置
CN104182967B (zh) 图像处理方法、装置及终端
CN107944367B (zh) 人脸关键点检测方法及装置
CN107967459B (zh) 卷积处理方法、装置及存储介质
CN107341777B (zh) 图片处理方法及装置
CN107464253B (zh) 眉毛定位方法及装置
CN107730448B (zh) 基于图像处理的美颜方法及装置
CN106651777B (zh) 图像处理方法及装置、电子设备
CN107231505B (zh) 图像处理方法及装置
CN107729880A (zh) 人脸检测方法及装置
CN112614064B (zh) 图像处理方法、装置、电子设备及存储介质
CN108200279B (zh) 背光调节方法、装置和设备
CN107403144B (zh) 嘴巴定位方法及装置
CN107563957B (zh) 眼部图像处理方法及装置
CN105472228B (zh) 图像处理方法、装置及终端
CN107730443B (zh) 图像处理方法、装置及用户设备
CN108596957B (zh) 物体跟踪方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant