CN107016648A - 电子设备及其控制方法 - Google Patents
电子设备及其控制方法 Download PDFInfo
- Publication number
- CN107016648A CN107016648A CN201710052809.2A CN201710052809A CN107016648A CN 107016648 A CN107016648 A CN 107016648A CN 201710052809 A CN201710052809 A CN 201710052809A CN 107016648 A CN107016648 A CN 107016648A
- Authority
- CN
- China
- Prior art keywords
- skin
- information
- skin area
- colour
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 45
- 230000001815 facial effect Effects 0.000 claims abstract description 47
- 238000001514 detection method Methods 0.000 claims abstract description 36
- 238000012545 processing Methods 0.000 claims description 57
- 238000004891 communication Methods 0.000 claims description 12
- 238000003384 imaging method Methods 0.000 claims description 3
- 238000004458 analytical method Methods 0.000 abstract description 9
- 230000010365 information processing Effects 0.000 abstract description 6
- 230000008569 process Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 14
- 230000008859 change Effects 0.000 description 10
- 239000003086 colorant Substances 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 208000002874 Acne Vulgaris Diseases 0.000 description 5
- 206010000496 acne Diseases 0.000 description 5
- 210000004209 hair Anatomy 0.000 description 5
- 210000001747 pupil Anatomy 0.000 description 5
- 206010027146 Melanoderma Diseases 0.000 description 4
- 210000001508 eye Anatomy 0.000 description 4
- 230000037303 wrinkles Effects 0.000 description 4
- 230000009759 skin aging Effects 0.000 description 3
- 241000894007 species Species 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 210000004709 eyebrow Anatomy 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000004913 activation Effects 0.000 description 1
- 230000032683 aging Effects 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 230000037308 hair color Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/62—Retouching, i.e. modification of isolated colours only or in isolated picture areas only
- H04N1/628—Memory colours, e.g. skin or sky
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/178—Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/179—Human faces, e.g. facial parts, sketches or expressions metadata assisted face recognition
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
提供一种电子设备。所述电子设备包括:输入端,其包括被配置为接收图像的输入电路;以及处理器,其被配置为:从图像检测皮肤区域以便获取关于包括在皮肤区域中的像素的像素值的信息;基于皮肤区域中的面部区域获取关于皮肤区域的特征的信息;以及基于关于像素值的信息和关于皮肤区域的特征的信息处理皮肤区域的图像质量。因此,能够减少在仅执行定量元素的分析时发生的皮肤区域的图像失真,并且基于除定量元素之外的定性元素的分析改进皮肤区域的图像质量偏好。
Description
相关申请的交叉引用
本申请基于并且在美国法典第35篇第119条下要求2016年1月27日在韩国知识产权局中提交的10-2016-0009872号韩国专利申请的优先权,所述申请的公开内容通过引用整体并入本文。
技术领域
本公开大体上涉及电子设备及其控制方法,并且例如涉及能够对数字图像执行图像处理的电子设备及其控制方法。
背景技术
随着电子技术的发展,各种类型的电子产品已开发出并且广泛分布。具体地,甚至已经在大多数家庭中广泛使用了各种显示设备,诸如电视(TV)、移动电话、个人计算机(PC)、膝上型计算机以及个人数字助理(PDA)。
随着显示设备的使用增加,对各种功能的用户需求已增加。具体地,随着用于显示设备的图像处理的改进的技术的恒定发展,已进行对图像处理的各种尝试。
详细地,相关领域已广泛使用一种方法,所述方法用于基于诸如眼睛、鼻子和嘴巴的面部特征,诸如色度、饱和度以及亮度的颜色特征等将皮肤区域与数字图像分开以便与背景分开地执行图像处理。
这样,与皮肤区域分开地执行图像处理的原因是肤色是人们在我们的日常生活中最频繁接触的颜色,因此对肤色的轻微变化可产生敏感地反应,这与其他对象的颜色的变化截然不同。
然而,常规地,对皮肤区域的图像处理基于皮肤区域的像素的定量元素,诸如色度、亮度以及饱和度。然而,除定量元素之外考虑到定性元素的执行各种类型的图像处理的需求已增加。
发明内容
本公开的示例性实施方案解决了以上缺点以及以上未描述的其他缺点。
本公开提供了能够通过分析皮肤区域的定性元素和定量元素来对皮肤区域执行图像处理的电子设备和其控制方法。
根据本公开的示例性方面,电子设备包括:输入端,其包括被配置为接收图像的输入电路;以及处理器,其被配置为:从图像检测皮肤区域以便获取关于包括在皮肤区域中的像素的像素值的信息;基于皮肤区域中的面部区域获取关于皮肤区域的特征的信息;并且基于关于像素值的信息和关于皮肤区域的特征的信息处理皮肤区域的图像质量。
关于皮肤区域的特征的信息可包括关于以下中的至少一个的信息:关于皮肤区域的性别、年龄、种族以及地域。
关于像素值的信息可包括关于以下中的至少一个的信息:颜色、饱和度、对比度、亮度以及色温。
电子设备还可包括:存储装置,其被配置为存储关于用户的肤色偏好的信息,其中处理器可确定在关于肤色偏好的信息当中与关于皮肤区域的特征的信息相对应的肤色,并且取决于所确定的肤色处理皮肤区域的图像质量。
电子设备还可包括:通信器,其包括被配置为执行与外部服务器的通信的通信电路,其中处理器可控制通信器的通信电路以便从外部服务器接收关于用户的肤色偏好的信息。
处理器可基于包括在皮肤区域中的面部区域中的至少一个对象检测以下中的至少一个:关于皮肤区域的性别、年龄、种族以及地域。
电子设备还可包括:成像器,其包括被配置成为用户拍摄图像的成像电路,其中处理器可基于用户的图像的面部区域获取关于用户的皮肤区域的特征的信息;基于关于用户的皮肤区域的特征的信息确定用户的肤色偏好;并且基于所确定的偏好处理包括在图像中的皮肤区域的图像质量。
处理器可在多个预设帧间隔内逐渐地处理皮肤区域的图像质量。
电子设备还可包括:显示器,其中处理器可控制显示器来显示皮肤区域的图像质量被处理了的图像。
根据本公开的另一示例性方面,控制电子设备的方法包括:从输入图像检测皮肤区域;获取关于包括在皮肤区域中的像素的像素值的信息;基于皮肤区域中的面部区域获取关于皮肤区域的特征的信息;以及基于关于像素值的信息和关于皮肤区域的特征的信息处理皮肤区域的图像质量。
关于皮肤区域的特征的信息可包括关于以下中的至少一个的信息:关于皮肤区域的性别、年龄、种族以及地域。
关于像素值的信息可包括关于以下中的至少一个的信息:颜色、饱和度、对比度、亮度以及色温。
在处理皮肤区域的图像质量的过程中,可确定在预先存储的关于用户的肤色偏好的信息当中与关于皮肤区域的特征的信息相对应的肤色,并且可取决于所确定的肤色来处理皮肤区域的图像质量。
所述方法还可包括:从外部服务器接收关于用户的肤色偏好的信息。
在获取关于皮肤区域的特征的信息的过程中,可基于包括在皮肤区域中的面部区域中的至少一个对象检测以下中的至少一个:关于皮肤区域的性别、年龄、种族以及地域。
所述方法还可包括:为用户拍摄图像;基于用户的图像中的面部区域获取关于用户的皮肤区域的特征的信息;基于关于用户的皮肤区域的特征的信息确定用户的肤色偏好;以及基于所确定的偏好处理包括在图像中的皮肤区域的图像质量。
在处理皮肤区域的图像质量时,可在多个预设帧间隔内逐渐地处理皮肤区域的图像质量。
所述方法还可包括:显示其中皮肤区域的图像质量被处理了的图像。
如上所述,根据本公开的各种示例性实施方案,能够减少在仅执行定量元素的分析时发生的皮肤区域的图像失真,并且基于对定性元素的分析改进皮肤区域的图像质量偏好。
附图说明
根据结合附图的以下详细描述,本公开的上述和/或其他方面将更容易显而易见,其中相似的附图标记表示相似的元件,其中:
图1是示出根据本公开的示例性实施方案的电子设备的示例性配置的框图;
图2是示出根据本公开的另一示例性实施方案的电子设备的示例性配置的框图;
图3是示出根据本公开的示例性实施方案的处理器的示例性配置的框图;
图4是示出根据本公开的另一示例性实施方案的电子设备的示例性配置的框图;
图5是示出根据本公开的示例性实施方案的用于检测定性信息的示例性方法的图;
图6和7是示出根据本公开的示例性实施方案的用于确定图像处理参数的示例性过程的图;
图8是示出根据本公开的另一示例性实施方案的电子设备的示例性配置的框图;
图9是示出根据本公开的示例性实施方案的基于用户的图像执行图像处理的示例性过程的图;
图10是示出根据本公开的示例性实施方案的在显示除了人类之外还包括动物的图像时执行图像处理的示例性过程的图;
图11是示出根据本公开的示例性实施方案的用于设置肤色偏好信息的示例性UI的图;
图12是示出根据本公开的另一示例性实施方案的电子设备的示例性配置的框图;
图13是示出图1中示出的电子设备的示例性配置的框图;
图14是示出根据本公开的示例性实施方案的存储在存储装置中的示例性软件模块的图;以及
图15是示出根据本公开的示例性实施方案的控制电子设备的示例性方法的流程图。
具体实施方式
此后,将参考附图更详细地描述本公开的示例性实施方案。
图1是示出根据本公开的示例性实施方案的电子设备的示例性配置的框图。
参考图1,电子设备100包括输入端(例如,包括输入电路)110以及处理器(例如,包括处理电路)120。
只要电子设备100是可对图像执行图像处理功能的设备,就可非限制地使用任何电子设备。例如,电子设备100可通过各种类型的电子设备实现,诸如电视(TV)、电子黑板、电子表(electronic table)、大格式显示器(LFD)、智能电话、平板机、台式PC、笔记本、机顶盒、智能手表、可佩戴设备等,但不限于此。
输入端110可包括被配置为接收图像的各种输入电路。例如,图像可包括静止图像和运动图像,并且可通过文档、照片、视频等实现,但并不限于此。进一步地,输入端110可通过无线或有线通信从外部设备接收图像,还可从电子设备100的存储装置(未示出)接收图像,并且从多个图像存储在其中的存储装置接收图像,所述存储装置诸如USB存储器、CD以及外部硬盘驱动器。
处理器120可包括各种处理电路,所述处理电路被配置为从图像检测皮肤区域以便获得关于包括在皮肤区域中的像素的像素值的信息。
例如,处理器120可从通过输入端110输入的图像检测识别为人类皮肤的皮肤区域。从图像检测识别为人类皮肤的皮肤区域的技术可例如指的是,通过将与人类皮肤相关联的多个预先存储的图像与颜色、形状等进行比较来检测皮肤区域的技术。所述技术已经已知并因此其详细描述将省去。
进一步地,处理器120可获取包括在所检测皮肤区域中的像素的像素值的信息。例如,关于像素值的信息可包括关于以下中的至少一个的信息:颜色、饱和度、对比度、亮度以及色温。颜色、饱和度、对比度、亮度以及色温可被数字化并且可被数字化的信息被定义为定量信息。
例如,处理器120可基于包括在所检测皮肤区域中的像素的像素值获得定量信息,诸如皮肤区域的颜色、饱和度、对比度、亮度以及色温。进一步地,关于像素值的信息可包括除前述组分之外的可数字化的与皮肤区域相关联的所有信息。
进一步地,处理器120可基于皮肤区域中的面部区域获得关于皮肤区域的特征的信息。
例如,处理器120可检测皮肤区域中的面部区域,并且可通过例如将多个预先存储的呈面部形状的图像进行比较来检测面部区域。
进一步地,关于皮肤区域的特征的信息可包括关于以下中的至少一个的信息:关于皮肤区域的性别、年龄、种族以及地域。性别、年龄、种族以及地域不是类似像素值的可数字化的信息,并且未数字化的信息被定义为定性信息。
例如,处理器120可基于包括在皮肤区域中的面部区域中的至少一个对象检测以下中的至少一个:关于皮肤区域的性别、年龄、种族以及地域。
例如,处理器120可基于包括在面部区域中的头发长度、眉毛形状、鼻子形状、嘴唇形状、面部形式等确定皮肤区域的性别。
进一步地,处理器120可基于包括在面部区域中的皮肤色调、瞳孔颜色等确定皮肤区域的种族。
进一步地,处理器120可分析可确定皮肤的老化情况的元素,诸如包括在面部区域中的皱纹的数量和形状、粉刺的存在和不存在、黑斑的存在和不存在等,从而确定皮肤区域的年龄。
进一步地,处理器120可基于使用电子设备100的用户的用户帐户信息、电子设备100的设置信息、关于连接到电子设备100的外部设备的设置信息、在电子设备100或连接到电子设备100的外部设备中设置的使用语言等来确定使用电子设备100的用户的区域。
例如,电子设备100的设置信息可包括关于取决于电子设备100的销售区域而进行改变的设置值的信息。进一步地,用户区域可例如指的是基于前述信息导出的国家或大陆。
前述处理器120的获得关于皮肤区域的特征的信息的过程可单独地将以性别、年龄、种族以及地域分类和存储的多个图像进行比较以便确定皮肤区域的性别、年龄、种族以及地域。
进一步地,处理器120可基于关于包括在皮肤区域中的像素的像素值的信息以及关于皮肤区域的特征的信息处理皮肤区域的图像质量。以下将描述图像处理的更详细的描述。
图2是示出根据本公开的另一示例性实施方案的电子设备的示例性配置的框图。
参考图2,电子设备100可包括输入端110、处理器120以及存储装置130。
已经描述了输入端110和处理器120,并因此将省去其重复详细描述。
存储装置130存储关于用户的肤色偏好的信息。例如,关于用户的肤色偏好的信息可例如指的是关于通过诸如性别、年龄、种族、区域等的类别实现的用户偏好的肤色的信息。
例如,关于用户的肤色偏好的信息可包括类似当性别是女性、年龄是二十几岁、种族是西方人并且区域是美利坚合众国时用户偏好明亮颜色的肤色的信息。
进一步地,关于用户的肤色偏好的信息可包括类似当性别是男性、年龄是二十几岁、种族是亚洲人并且区域是韩国时用户偏好浅棕色的肤色的信息。
关于用户的肤色偏好的信息可例如以查找表形式存储。
例如,处理器120可确定在关于肤色偏好的信息中对应于关于皮肤区域的特征的信息的肤色,并且取决于所确定肤色处理皮肤区域的图像质量。
例如,当由处理器120获取的关于皮肤区域的特征的信息对应于性别是女性、年龄是三十几岁并且种族是亚洲人的情况时,处理器120可将关于皮肤区域的前述特征的信息与关于用户的肤色偏好的信息匹配以便确定用于图像处理的肤色。
例如,当在性别是女性、年龄是三十几岁并且种族是亚洲人的情况下在关于用户的肤色偏好的信息中对应肤色被设置为浅棕色时,处理器120可执行图像处理以便将输入图像的皮肤区域的肤色改变为浅棕色。
在此示例中,处理器120可基于关于像素值的信息以及关于皮肤区域的特征的信息执行图像处理以便将输入图像的皮肤区域的肤色改变为所确定肤色。
例如,处理器120可通过考虑性别、年龄、种族、区域等(这些都是关于皮肤区域的特征的信息)来确定如何改变关于像素值的信息中的颜色、饱和度、对比度、亮度等的值。以下将参考附图描述其更详细的描述。
处理器120可不断地更新关于用户的肤色偏好的信息以便提供大数据。例如,处理器120可考虑到用户输入和使用历史连续地更新关于用户的肤色偏好的信息,并且还可基于用户输入和使用历史存储关于用户的肤色偏好中的变化的数据。
进一步地,处理器120还可从外部设备接收关于用户的肤色偏好的信息并且将所接收信息存储在存储装置130中。
图4是示出根据本公开的另一示例性实施方案的电子设备的示例性配置的框图。
参考图4,电子设备100可包括输入端110、处理器120、存储装置130以及通信器(例如,包括通信电路)140。在此配置中,已经描述了输入端110、处理器120以及存储装置130,并因此将省去其重复详细描述。
通信器140可包括被配置为执行与外部服务器的通信的各种通信电路。例如,通信器140可通过各种通信方案执行与外部服务器的通信,所述通信方案诸如蓝牙(BT)、无线保真(WI-FI)、Zigbee、红外(IR)、串行接口、通用串行总线(USB)以及近场通信(NFC)。
进一步地,处理器120可控制通信器140从外部服务器接收关于用户的肤色偏好的信息。
例如,从外部服务器接收的关于用户的肤色偏好的信息还可包括通过由用户直接上传到外部服务器存储的关于用户的肤色偏好的信息,且还可包括关于除相应电子设备100的用户之外的不同于该用户的其他第三方偏好的肤色偏好的信息。
进一步地,外部服务器还可通过考虑使用相应电子设备100的用户的年龄、性别、区域等通过存储并数据库化关于不同于使用相应电子设备100的用户的第三方的肤色偏好的信息来提供肤色推荐服务,并且电子设备100可基于通过通信器140从外部服务器接收的肤色推荐服务自动地执行图像处理。
图3是示出根据本公开的示例性实施方案的处理器的示例性配置的框图。
参考图3,处理器120可包括包含硬件、软件、固件和/或其任何组合的各种模块,包括:皮肤区域检测单元121、定量皮肤区域分析单元122、定性皮肤区域分析单元123、皮肤图像处理参数计算单元124、非皮肤图像处理单元125以及图像处理单元126。
如果输入图像10输入到电子设备100,那么皮肤区域检测单元121可从输入图像10检测识别为人类皮肤的区域。例如,输入图像10还可通过有线通信方案或无线通信方案输入到电子设备100,可以是预先存储在电子设备100中的图像,并且还可通过将外部存储器设备(诸如USB和外部硬件)连接到电子设备100来被输入。
例如,当输入图像10是包括背景区域和多个对象的图像时,皮肤区域检测单元121可考虑到取决于包括在背景区域以及多个对象中的每个对象中的像素值的颜色的连续性、颜色的变化强度、对象的形式等从输入图像10中分离出背景区域和多个对象。
进一步地,皮肤区域检测单元121可在多个对象中检测对应于人类的对象并且如果检测到对应于人类的对象,那么可检测识别为人类皮肤的区域。
例如,皮肤区域检测单元121可通过将与人类相关联的多个图像(基于性别分类的与人类相关联的图像、基于种族分类的与人类相关联的图像、通过国家或区域分类的与人类相关联的图像,等等)与多个对象进行比较来检测被确定为人类形式的对象以便检测对应于多个人类的对象。
进一步地,皮肤区域检测单元121可通过将确定为人类形式的所检测对象中的与皮肤区域相关联的多个图像(通过性别分类的与肤色相关联的图像、根据种族分类的与肤色相关联的图像、通过国家或区域分类的与肤色相关联的图像、与皮肤形式相关联的图像、与皮肤的表面状态相关联的图像,等等)与确定为人类形式的对象进行比较来检测皮肤区域。
进一步地,定量皮肤区域分析单元122可通过分析包括在由皮肤区域检测单元121检测到的皮肤区域中的像素的像素值来获取关于像素值的信息,其中关于像素值的信息可包括颜色、饱和度、对比度、亮度以及色温中的至少一个。诸如颜色、饱和度、对比度、亮度以及色温的信息可数字化地表示,其预先被定义为定量信息。
例如,定量皮肤区域分析单元122可检测数字化的信息,诸如黄棕色、饱和度为30、对比度为50、亮度为70以及色温为50℃。
进一步地,定性皮肤区域分析单元123可获取关于由皮肤区域检测单元121检测到的皮肤区域的特征的信息。例如,可检测到由皮肤区域检测单元121检测到的皮肤区域中的面部区域,并且可基于所检测面部区域获取关于皮肤区域的特征的信息。
例如,关于皮肤区域的特征的信息可包括关于皮肤区域的性别、年龄、种族以及地域中的至少一个。诸如关于皮肤区域的性别、年龄、种族以及地域的信息不被数字化,其预先被定义为定性信息。
例如,定性皮肤区域分析单元123可基于包括在由皮肤区域检测单元121检测到的皮肤区域中的面部区域中的至少一个对象检测以下中的至少一个:关于皮肤区域的性别、年龄、种族以及地域。
例如,将参考图5描述使用定性皮肤区域分析单元123检测定性信息的过程。
图5是示出根据本公开的示例性实施方案的用于检测定性信息的示例性方法的图。
参考图5,定性皮肤区域分析单元123可基于包括在面部区域中的眼睛、鼻子、嘴巴等、面部形式、头发长度等检测以下中的至少一个:关于皮肤区域的性别、年龄、种族以及地域。
例如,定性皮肤区域分析单元123可通过分析可确定性别的元素来检测关于皮肤区域的性别,所述元素诸如包括在面部区域中的头发长度550、嘴唇形状560以及面部形式570。
进一步地,定性皮肤区域分析单元123可通过分析可确定种族的元素来检测关于皮肤区域的种族,所述元素诸如包括在面部区域中的皮肤色调510以及瞳孔颜色520。
进一步地,定性皮肤区域分析单元123可通过分析可确定皮肤老化的元素来检测关于皮肤区域的年龄,所述元素诸如包括在面部区域中的皱纹530的数量和形状、粉刺或黑斑的存在和不存在以及粉刺或黑斑的位置540等。
进一步地,定性皮肤区域分析单元123可通过分析所有元素来检测关于皮肤区域的区域,所述所有元素诸如包括在面部区域中的眼睛、鼻子和嘴巴的尺寸和位置;取决于眼睛、鼻子和嘴巴的布置的总体面部形式;头发颜色;瞳孔颜色;眉毛的形式、位置和颜色;嘴唇的形式、位置和颜色。
例如,定性皮肤区域分析单元123可使用包括与每种元素相关联的各种图像的数据库来在检测关于皮肤区域的性别、年龄、种族以及地域时分析可确定性别的元素、可确定种族的元素、可确定皮肤老化的元素等,其中数据库还可存储在外部服务器中并且还可存储在电子设备100的存储装置130中。例如,定性皮肤区域分析单元123可将前述数据库与包括在面部区域中的多个对象进行比较和匹配,以便分析可确定性别的元素、可确定种族的元素、可确定皮肤老化的元素等。
因此,定性皮肤区域分析单元123可结合图5的左侧示出的面部区域考虑到包括在面部区域中的头发长度、嘴唇形状、面部形状等检测到性别是男性;考虑到包括在面部区域中的肤色、瞳孔颜色等检测到种族是白种人;考虑到包括在面部区域中的皱纹的数量、位置和形状、粉刺和黑斑的存在和不存在等检测到年龄是五十几岁;通过参考电子设备100的区域设置值、用户信息以及用户账户信息中的至少一个检测到用户是居住在美利坚合众国的美国人;并且基于用户是美国人的事实检测关于对应于前述性别、年龄和种族的图像的一般偏好的肤色的信息。
定性皮肤区域分析单元123可结合图5的右侧示出的面部区域考虑到包括在面部区域中的头发长度、嘴唇形状、面部形状等检测到性别是女性;考虑到包括在面部区域中的肤色、瞳孔颜色等检测到种族是亚洲人;考虑到包括在面部区域中的皱纹的数量、位置和形状、粉刺和黑斑的存在和不存在等检测到年龄是二十几岁;通过参考电子设备100的区域设置值、用户信息以及用户账户信息中的至少一个检测到用户是居住在韩国的韩国人;并且基于用户是韩国人的事实检测关于对应于前述性别、年龄和种族的图像的一般偏好的肤色的信息。
参考图3,如果为定量信息的关于包括在皮肤区域中的像素的像素值的信息以及为定性信息的关于皮肤区域的特征的信息从定量皮肤区域分析单元122和定性皮肤区域分析单元123获得,那么皮肤图像处理参数计算单元124可确定用于执行输入图像10的皮肤区域的图像处理的图像处理参数。例如,图像处理参数可例如指的是用于在执行对输入图像10的皮肤区域的图像处理时改变颜色、亮度、饱和度、对比度等的参数。
进一步地,在皮肤区域检测单元121在输入图像10中检测到识别为人类皮肤的区域之后剩余的区域可由非皮肤图像处理单元125处理。
例如,考虑到识别为人类皮肤的区域的图像处理参数,针对输入图像10的总体协调,非皮肤图像处理单元125可确定在检测到输入图像10中识别为人类皮肤的区域之后的剩余区域的补偿处理参数。
进一步地,图像处理单元126可接收由皮肤图像处理参数计算单元124计算的图像处理参数以及由非皮肤图像处理单元125计算的补偿处理参数以便对输入图像10的皮肤区域或者不同于皮肤区域的剩余区域执行图像处理。
进一步地,图像处理单元126可将输入图像10(对其执行图像处理)输出到显示器160。
以下将参考图6和图7更详细地描述确定由皮肤图像处理参数计算单元124计算的图像处理参数的过程。
图6和图7是示出根据本公开的示例性实施方案的用于计算图像处理参数的示例性过程的图。
参考图6,水平轴Cb表示蓝色-黄色,垂直轴Cr表示红色-绿色,并且示出可由肤色表示的总区域600。
进一步地,第一区域620表示取决于用户的肤色偏好的信息的性别是女性、种族是亚洲人并且年龄是二十几岁的肤色的设置区域,并且第二区域630表示取决于用户的肤色偏好的信息当性别是男性、种族是白种人并且年龄是五十几岁时的肤色的设置区域。
进一步地,第三区域610表示配置包括在输入图像10中的皮肤区域的多个像素的YCbCr数据的分布。
例如,皮肤图像处理参数计算单元124可分析第三区域610的YCbCr数据的分布以便导出包括在输入图像10中的皮肤区域的肤色的YCbCr颜色空间内的中心坐标。
进一步地,皮肤图像处理参数计算单元124可基于关于皮肤区域的特征的信息(性别、年龄、种族以及地域中的至少一个)确定第三区域610位于可由肤色表示的总区域600的哪个位置,所述信息是从定性皮肤区域分析单元123输入的定性信息。
例如,皮肤图像处理参数计算单元124可确定包括在输入图像中的皮肤区域的肤色的YCbCr颜色空间内的中心坐标位于可由肤色表示的总区域600的哪个位置。
例如,当从定性皮肤区域分析单元123接收的关于皮肤区域的特征的信息是性别是男性、种族是白种人并且年龄是五十几岁时,第三区域610的中心坐标可确定为包括在第二区域630中。
进一步地,皮肤图像处理参数计算单元124可基于关于像素值的信息(颜色、饱和度、对比度、亮度以及色温中的至少一个)计算将第三区域610移动到所确定位置所需要的像素值的图像处理参数,所述信息是从定量皮肤区域分析单元122接收的定量信息。
根据前述实例,皮肤图像处理参数计算单元124可计算图像处理参数,类似将第三区域610的中心坐标包括在第二区域630中所需要的像素值,基于关于第三区域610的像素值的当前信息(颜色:浅棕色、饱和度:50、对比度:60、亮度:40等)将颜色改变为黄棕色,将饱和度增加10,将对比度减少20并且将亮度增加10。
进一步地,图像处理单元126可基于由皮肤图像处理参数计算单元124计算的图像处理参数将第三区域610的中心坐标移动到设置位置612,使得中心坐标包括在第二区域630中。
进一步地,当从定性皮肤区域分析单元123接收的关于皮肤区域的特征的信息是性别是女性、种族是亚种人并且年龄是二十几岁时,图像处理单元126可基于由皮肤图像处理参数计算单元124计算的图像处理参数将第三区域610的中心坐标移动到设置位置611,使得中心坐标包括在第一区域620中。
当如现有技术那样仅考虑到关于像素值的信息(该信息为定量信息)而执行图像处理时,例如,第三区域610不能均匀地移动到第一区域620。例如,根据现存技术,取决于所定义的图像处理参数,仅可通过一种方法执行图像处理。
然而,根据本公开的前述示例性实施方案,考虑到为定性信息的关于皮肤区域的特征的信息,第三区域610可移动到第一区域620或第二区域630。例如,处理器120可取决于为定性信息的关于皮肤区域的特征的信息确定各种图像处理参数,使得可通过各种方法执行图像处理。
图6示出水平轴Cb表示蓝色-黄色并且垂直轴Cr表示红色-绿色,以便仅描述颜色的坐标,而饱和度、对比度和亮度也可单独地调整。
例如,图7示出调整亮度的示例,其中水平轴表示颜色,垂直轴表示亮度,并且示出与肤色的亮度相关联的总区域700。
进一步地,第一区域730表示取决于用户的肤色偏好的信息的性别是女性、种族是亚洲人并且年龄是二十几岁的肤色的亮度的设置区域,并且第二区域720表示取决于用户的肤色偏好的信息当性别是男性、种族是白种人并且年龄是五十几岁时的肤色的亮度的设置区域。
进一步地,第三区域710表示关于配置包括在输入图像10中的皮肤区域的多个像素的亮度的数据的分布。
例如,皮肤图像处理参数计算单元124可分析关于第三区域710的亮度的数据的分布以便导出第三区域710的中心坐标。
进一步地,皮肤图像处理参数计算单元124可基于关于皮肤区域的特征的信息(性别、年龄、种族以及地域中的至少一个)确定第三区域710位于与肤色的亮度相关联的总区域700的哪个位置,所述信息是从定性皮肤区域分析单元123输入的定性信息。
例如,皮肤图像处理参数计算单元124可确定第三区域710的中心坐标位于与肤色的亮度相关联的总区域700的哪个位置。
例如,当从定性皮肤区域分析单元123接收的关于皮肤区域的特征的信息是性别是女性、种族是亚洲人并且年龄是二十几岁时,皮肤图像处理参数计算单元124可确定第三区域710的中心坐标包括在第一区域730中。
进一步地,皮肤图像处理参数计算单元124可基于关于像素值的信息(颜色、饱和度、对比度、亮度以及色温中的至少一个)计算将第三区域710移动到所确定位置所需要的像素值的图像处理参数,所述信息是从定量皮肤区域分析单元122接收的定量信息。
根据前述示例,皮肤图像处理参数计算单元124可计算图像处理参数,类似将第三区域710的中心坐标包括在第一区域730中所需要的像素值,基于关于第三区域710的像素值的当前信息(颜色:浅棕色、饱和度:50、对比度:60、亮度:40等)将亮度增加20。
进一步地,图像处理单元126可基于由皮肤图像处理参数计算单元124计算的图像处理参数将第三区域710的中心坐标移动到设置位置711,使得中心坐标包括在第一区域730中。
图8是示出根据本公开的另一示例性实施方案的电子设备的示例性配置的框图。
参考图8,电子设备100包括输入端110,处理器120以及成像器(例如,包括成像电路,例如诸如摄像机且不限于此)150。
此处,已经描述了输入端110和处理器120,并因此将省去其重复详细描述。
成像器150可包括被配置成为用户的图像照相的各种成像电路。成像器150可通过摄像机、红外传感器、操作传感器等实现,但不限于此。
进一步地,处理器120可基于用户的图像的面部区域获取关于用户的皮肤区域的特征的信息;基于关于用户的皮肤区域的特征的信息确定用户的肤色偏好;并且基于所确定偏好处理包括在图像中的皮肤区域的图像质量。
例如,处理器120可从由成像器150拍摄的用户图像检测皮肤区域,并且基于皮肤区域的面部区域确定关于以下中的至少一个的信息:关于用户的皮肤区域的性别、年龄、种族以及地域。
进一步地,处理器120可基于关于用户的皮肤区域的性别、年龄、种族以及地域中的至少一个的所确定信息确定用户偏好的肤色,并且取决于所确定肤色处理输入图像10的皮肤区域的图像质量。
例如,当用户是二十几岁的亚洲男性时,处理器120可基于关于肤色偏好的数据库确定二十几岁的亚洲男性偏好二十几岁的西方女性的浅肤色,使得其可执行过程来将输入图像10的皮肤区域改变为浅肤色。
例如,关于肤色偏好的数据库还可存储在存储装置130中但还可存储在外部服务器中,并且关于肤色偏好的数据库可通过不断收集关于用户的各种肤色的偏好信息来更新。
图9是示出根据本公开的示例性实施方案的基于用户的图像执行图像处理的示例性过程的图。
参考图9,如果成像器910在显示设备900显示图像920的状态下为用户930拍摄了一张图像,那么处理器120可从用户930的图像确定用户930是男性青年亚洲人。
进一步地,处理器120可基于关于肤色偏好的数据库确定用户是亚洲青年男性,其偏好表示二十几岁的西方男性的阳刚美的浅棕色肤色,并因此处理器可执行过程来将包括在所显示的图像920中的西方男性的肤色改变为浅棕色。
当所显示的图像包括除人类之外的非人类的对象时,处理器120可不对非人类的对象执行图像处理。
图10是示出根据本公开的示例性实施方案的在显示除了人类之外还包括动物的图像时执行图像处理的示例性过程的图。
参考图10,在显示设备1000显示包括人类1011和小狗1012的图像1010的状态下,处理器120可基于存储关于人类的各种图像的数据库从图像1010仅检测到人类1011,并且基于对应于人类1011的区域获取关于像素值的信息以及关于皮肤区域的特征的信息,并且因此可基于所获取的信息处理包括在对应于人类1011的区域中的皮肤区域的图像质量。
进一步地,处理器120不对对应于小狗1012(不是人类)的区域执行图像处理。
图11是示出根据本公开的示例性实施方案的用于设置肤色偏好信息的示例性UI的图。
参考图11,显示设备1100可显示可允许用户直接设置关于肤色偏好的信息的UI1110。
例如,可设置关于肤色偏好的信息的UI 1110包括可设置年龄、性别、种族以及地域的项,并且包括包含可基于所选择年龄、性别、种族以及地域选择的各种肤色的颜色列表1111。
用户可移动颜色列表1111中的选择窗口1112以便选择偏好的肤色,并且处理器120可显示反映所选择肤色的图像1113并且向用户示出所显示图像1113。
因此,用户可实时确认反映所选择肤色的图像1113,并且存储关于针对用户的肤色偏好的信息所选择的所选年龄、性别、种族、区域和肤色的信息。
如图11所示,还可考虑用户可通过UI 1110(所述UI 1110可设置关于肤色偏好的信息)来直接输入关于年龄、性别、种族等的信息的情况,以及处理器120自动地确定用户的年龄、性别、种族等并且随后用户设置对应于用户的所确定年龄、性别、种族等的偏好的肤色的情况。
例如,处理器120可分析由成像器150获取的用户的图像以便确定用户的年龄、性别、种族等,并且显示关于用户的所确定年龄、性别、种族等的信息并且向用户示出所显示信息。用户可确认由处理器120自动确定的用户的年龄、性别、种族等,并且随后可通过图11中描述的颜色列表1111直接设置偏好的肤色。
因此,处理器120可将基于用户的操作选择的偏好的肤色与通过分析用户的图像所确定的用户的年龄、性别、种族等匹配并且存储它。
例如,当用户是二十几岁的亚洲男性时,处理器120可分析由成像器150获取的用户的图像以便确定年龄是二十几岁、性别是男性并且种族是亚洲人,并且当根据用户操作选择的偏好的肤色是浅米色时可生成关于肤色偏好的信息,其中二十几岁的亚洲男性偏好的肤色与浅米色匹配,并且存储所生成信息。
进一步地,随后处理器120可基于关于肤色偏好的所存储信息对输入的图像执行图像处理,并且还可将关于肤色偏好的所存储信息传输到服务器。
因此,服务器可通过接收关于各种年龄、性别和种族的用户偏好的肤色的信息生成关于肤色偏好的大数据,并且还可基于因此生成的大数据来为每个用户提供偏好的肤色推荐服务、按照区域的电子设备100的针对肤色的自动设置服务等。
图12是示出根据本公开的另一示例性实施方案的电子设备100的示例性配置的框图。
参考图12,电子设备100可包括输入端110、处理器120以及显示器160。
此处,已经描述了输入端110和处理器120,并因此将省去其重复详细描述。
显示器160可显示各种图像并且通过液晶显示器(LCD)、有机发光二极管显示器(OLED)、等离子体显示面板(PDP)等实现,但不限于此。
进一步地,处理器120可控制显示器160来显示其中皮肤区域的图像质量被处理了的图像。
处理器120可在多个预设帧间隔内逐渐地处理皮肤区域的图像质量。
例如,当图像处理参数对应于以下情况时,处理器120可在五个帧间隔内逐渐地执行图像处理:其中颜色是黄棕色、饱和度增加20、对比度增加10并且亮度减少20。例如,在五个帧间隔中的每一个内,颜色可变为黄棕色,饱和度可增加4,对比度可增加2,并且亮度可减少4。
因此,处理器120可自然地改变所显示图像中的肤色。
图13是示出图1中示出的电子设备的示例性配置的框图。
参考图13,电子设备100’包括输入端(例如,包括输入电路)110、处理器(例如,包括处理电路)120、存储装置130、通信器(例如,包括通信电路)140、成像器(例如,包括成像电路)150、显示器160、扬声器170以及麦克风180。将省去图13中示出的部件中的先前描述的部件的详细描述。
处理器120包括各种处理电路并且控制电子设备100’的大体操作。
例如,处理器120包括RAM 121、ROM 122、主CPU 123、图形处理器124、第一至第n个接口125-1至125-n以及总线126。
RAM 121、ROM 122、主CPU 123、图形处理器124、第一至第n个接口125-1至125-n等可通过总线126连接到彼此。
第一至第n个接口125-1至125-n连接到前述各种部件。接口中的一个可以是通过网络连接到外部装置的网络接口。
主CPU 123访问存储装置130以便使用存储在存储装置130中的O/S执行启动。进一步地,主CPU 123使用存储在存储装置130中的各种程序、内容、数据等执行各种操作。
例如,主CPU 123可从输入图像10检测皮肤区域以便获取关于包括在皮肤区域中的像素的像素值的信息并且基于皮肤区域中的面部区域获取关于皮肤区域的特征的信息。
ROM 122存储用于系统启动的一组指令。当输入开启指令以供应电力时,主CPU123根据存储在ROM 122中的指令将存储在存储装置130中的O/S复制到RAM 121并且执行O/S以启动系统。如果启动完成,那么主CPU 123将存储在存储装置130中的各种应用程序复制到RAM 121,并且执行复制到RAM 121的应用程序,从而执行各种操作。
图形处理器124使用运算器(未示出)和渲染器(未示出)来生成包括诸如图标、图像和文本的各种对象的屏幕。运算器(未示出)基于所接收的控制指令来运算属性值,所述属性值诸如是根据屏幕的布局的每个对象所位于的坐标值、形式、尺寸和颜色。渲染器(未示出)基于由运算器(未示出)运算的属性值来创建各种包括对象的布局的屏幕。
例如,图形处理器124可基于关于由主CPU 123获取的像素值的信息以及关于皮肤区域的特征的信息来处理皮肤区域的图像质量。
处理器120的前述操作可由存储在存储装置130中的程序执行。
存储装置130存储各种数据,诸如用于驱动电子设备100’的操作系统(O/S)软件模块,以及类似各种种类的多媒体内容的各种数据。
例如,存储装置130可包括软件模块,所述软件模块作用来从输入图像10检测皮肤区域,获取关于包括在皮肤区域中的像素的像素值的信息,基于皮肤区域中的面部区域获取关于皮肤区域的特征的信息,并且基于关于像素值的信息和关于皮肤区域的特征的信息处理皮肤区域的图像质量。
扬声器170可用于基于包括在所接收的广播信号中的音频信号输出声音信号。进一步地,扬声器170可用于在所存储的音乐文件和图像文件播放时输出相应的声音信号。
麦克风180可用于接收用户的发音语音。麦克风180可接收关于用户发出的偏好的肤色的信息,并且处理器120可存储所接收信息或者基于所接收信息执行对输入图像10的皮肤区域的图像处理。
图14是示出根据本公开的示例性实施方案的存储在存储装置中的示例性软件模块的图。
参考图14,存储装置130存储各种程序,诸如皮肤区域检测模块131、像素值检测模块132、皮肤区域的特征信息检测模块133以及皮肤区域的图像处理模块134。
处理器120的前述操作可由存储在存储装置130中的程序执行。此后,以下将更详细地描述使用存储在存储装置130中的程序的处理器120的详细操作。
皮肤区域检测模块131可作用来基于数据库从输入图像10检测皮肤区域,与人类皮肤区域相关联的图像存储在所述数据库中。
进一步地,像素值检测模块132可作用来分析包括在所检测皮肤区域中的像素的像素值以便检测关于以下中的至少一个的信息:颜色、饱和度、对比度、亮度以及色温。
进一步地,皮肤区域的特征信息检测模块133可作用来基于皮肤区域中的面部区域检测关于皮肤区域的性别、年龄、种族以及地域中的至少一个的信息,所述皮肤区域基于数据库来被检测,所述数据库存储基于关于皮肤区域的性别、年龄、种族、区域等被划分的各种图像。
进一步地,皮肤区域的图像处理模块134可作用来基于分别由像素值检测模块132和皮肤区域的特征信息检测模块133检测的关于像素值的信息以及关于皮肤区域的特征的信息处理输入图像10的皮肤区域的图像质量。
图15是示出根据本公开的示例性实施方案的控制电子设备的示例性方法的流程图。
图15中示出的控制电子设备的方法从输入图像检测皮肤区域(S1510)。
进一步地,获取关于包括在皮肤区域中的像素的像素值的信息(S1520)。
进一步地,基于皮肤区域中的面部区域获取关于皮肤区域的特征的信息(S1530)。
基于关于像素值的信息和关于皮肤区域的特征的信息处理皮肤区域的图像质量(S1540)。
例如,关于皮肤区域的特征的信息可包括关于皮肤区域的性别、年龄、种族以及地域中的至少一个的信息。
进一步地,关于像素值的信息可包括关于以下中的至少一个的信息:颜色、饱和度、对比度、亮度以及色温。
进一步地,在处理皮肤区域的图像质量时,可确定在预先存储的用户肤色偏好中对应于关于皮肤区域的特征的信息的肤色,并且可取决于所确定的肤色处理皮肤区域的图像质量。
根据本公开的示例性实施方案的控制电子设备的方法还可包括从外部服务器接收关于用户的肤色偏好的信息。
进一步地,在获取关于皮肤区域的特征的信息时,可基于包括在皮肤区域中的面部区域中的至少一个对象检测以下中的至少一个:关于皮肤区域的性别、年龄、种族以及地域。
进一步地,控制电子设备的方法还可包括:为用户拍摄图像,基于用户的图像中的面部区域获取关于用户的皮肤区域的特征的信息,基于关于用户的皮肤区域的特征的信息确定用户的肤色偏好,以及基于所确定偏好处理包括在图像中的皮肤区域的图像质量。
进一步地,在处理皮肤区域的图像质量时,可在多个预设帧间隔内逐渐地处理皮肤区域的图像质量。
进一步地,控制电子设备的方法还可包括显示其中皮肤区域的图像质量被处理了的图像。
可提供非暂态计算机可读介质,在所述非暂态计算机可读介质中存储有顺序地执行根据本公开的控制方法的程序。
非暂态计算机可读介质可例如指代半永久地存储数据并且可由装置读取的介质。例如,上述各种应用或程序可存储和提供在非暂态计算机可读介质中,诸如光盘(CD)、数字通用盘(DVD)、硬盘、蓝光盘、通用串行总线(USB)、存储卡、只读存储器(ROM)等,但不限于此。
另外,尽管电子设备的框图中未示出总线,但电子设备中的相应部件之间的通信可通过总线执行。另外,每个装置中可进一步包括执行上述各种过程的处理器,诸如专用处理器、中央处理单元(CPU)、微处理器等。
尽管在上文中示出和描述了本公开的各种示例性实施方案,但本公开不限于上述示例性实施方案,而是可由本公开所属领域的技术人员进行各种修改,这将不脱离如随附权利要求书中阐述的本公开的范围和精神。这些修改也应被理解为落入本公开的范围内。
Claims (15)
1.一种电子设备,包括:
输入端,包括被配置为接收图像的输入电路;以及
处理器,被配置为:通过从所述图像检测皮肤区域来获取关于包括在所述图像的所述皮肤区域中的像素的像素值的信息;基于所述皮肤区域中的面部区域获取关于所述皮肤区域的特征的信息;以及基于关于所述像素值的信息和关于所述皮肤区域的特征的信息来处理所述皮肤区域的图像质量。
2.如权利要求1所述的电子设备,其中关于所述皮肤区域的特征的信息包括关于以下中的至少一个的信息:关于所述皮肤区域的性别、年龄、种族以及地域。
3.如权利要求1所述的电子设备,其中关于所述像素值的信息包括关于以下中的至少一个的信息:颜色、饱和度、对比度、亮度以及色温。
4.如权利要求1所述的电子设备,还包括:
存储装置,被配置为存储关于用户的肤色偏好的信息,
其中所述处理器被配置为确定在关于所述肤色偏好的信息当中与关于所述皮肤区域的特征的信息相对应的肤色,并且基于所确定的肤色处理所述皮肤区域的图像质量。
5.如权利要求4所述的电子设备,其还包括:
通信器,包括被配置为执行与外部服务器的通信的通信电路,
其中所述处理器被配置为控制所述通信电路从所述外部服务器接收关于所述用户的所述肤色偏好的信息。
6.如权利要求2所述的电子设备,其中所述处理器被配置为基于包括在所述皮肤区域中的所述面部区域中的至少一个对象检测以下中的至少一个:关于所述皮肤区域的性别、年龄、种族以及地域。
7.如权利要求1所述的电子设备,还包括:
成像器,包括被配置成为用户拍摄图像的成像电路,
其中所述处理器被配置为基于所述用户的所述图像的所述面部区域获取关于所述用户的所述皮肤区域的特征的信息;基于关于所述用户的所述皮肤区域的特征的信息来确定所述用户的所述肤色偏好;并且基于所确定的偏好来处理包括在所述图像中的所述皮肤区域的图像质量。
8.如权利要求1所述的电子设备,其中所述处理器被配置为在多个预设帧间隔内处理所述皮肤区域的图像质量。
9.如权利要求1所述的电子设备,还包括:
显示器,
其中所述处理器被配置为控制所述显示器来显示所述皮肤区域的图像质量被处理了的图像。
10.一种控制电子设备的方法,包括:
从所接收的输入图像检测皮肤区域;
获取关于包括在所述皮肤区域中的像素的像素值的信息;
基于所述皮肤区域中的面部区域获取关于所述皮肤区域的特征的信息;以及
基于关于所述像素值的信息和关于所述皮肤区域的特征的信息来处理所述皮肤区域的图像质量。
11.如权利要求10所述的方法,其中关于所述皮肤区域的特征的信息包括关于以下中的至少一个的信息:关于所述皮肤区域的性别、年龄、种族以及地域。
12.如权利要求10所述的方法,其中关于所述像素值的信息包括关于以下中的至少一个的信息:颜色、饱和度、对比度、亮度以及色温。
13.如权利要求10所述的方法,其中在处理所述皮肤区域的图像质量的过程中,确定在预先存储的关于用户的肤色偏好的信息当中与关于所述皮肤区域的特征的信息相对应的肤色,并且基于所确定的肤色来处理所述皮肤区域的图像质量。
14.如权利要求13所述的方法,还包括:
从外部服务器接收关于所述用户的所述肤色偏好的信息。
15.如权利要求11所述的方法,其中在获取关于所述皮肤区域的特征的信息的过程中,基于包括在所述皮肤区域中的所述面部区域中的至少一个对象检测以下中的至少一个:关于所述皮肤区域的性别、年龄、种族以及地域。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020160009872A KR102541829B1 (ko) | 2016-01-27 | 2016-01-27 | 전자 장치 및 그 제어 방법 |
KR10-2016-0009872 | 2016-01-27 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107016648A true CN107016648A (zh) | 2017-08-04 |
Family
ID=59360532
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710052809.2A Pending CN107016648A (zh) | 2016-01-27 | 2017-01-24 | 电子设备及其控制方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10354124B2 (zh) |
EP (1) | EP3360322A4 (zh) |
KR (1) | KR102541829B1 (zh) |
CN (1) | CN107016648A (zh) |
WO (1) | WO2017131348A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109639981A (zh) * | 2018-12-29 | 2019-04-16 | 维沃移动通信有限公司 | 一种图像拍摄方法及移动终端 |
CN110443769A (zh) * | 2019-08-08 | 2019-11-12 | Oppo广东移动通信有限公司 | 图像处理方法、图像处理装置及终端设备 |
CN113551772A (zh) * | 2020-04-07 | 2021-10-26 | 武汉高德智感科技有限公司 | 一种红外测温方法、红外测温系统及存储介质 |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10650225B2 (en) * | 2016-12-27 | 2020-05-12 | Canon Kabushiki Kaisha | Image processing apparatus which determines category to which object in image belongs, method therefor, and object discrimination apparatus |
DE102017212176A1 (de) * | 2017-07-17 | 2019-01-17 | Henkel Ag & Co. Kgaa | System und Verfahren zum Ermitteln einer Wirksamkeit einer kosmetischen Hautbehandlung |
CN107465903B (zh) * | 2017-09-08 | 2019-04-26 | Oppo广东移动通信有限公司 | 图像白平衡方法、装置和计算机可读存储介质 |
CN107580251B (zh) * | 2017-09-15 | 2018-09-21 | 南京陶特思软件科技有限公司 | 信息输入方式自适应选择系统 |
CN110580676A (zh) * | 2018-06-07 | 2019-12-17 | 富泰华工业(深圳)有限公司 | 人脸漫画形象制作方法、电子装置和存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070031033A1 (en) * | 2005-08-08 | 2007-02-08 | Samsung Electronics Co., Ltd. | Method and apparatus for converting skin color of image |
US20090028434A1 (en) * | 2007-07-29 | 2009-01-29 | Vincent Vanhoucke | System and method for displaying contextual supplemental content based on image content |
CN101542522A (zh) * | 2007-03-15 | 2009-09-23 | 欧姆龙株式会社 | 眼睛颜色校正装置以及程序 |
US20120257826A1 (en) * | 2011-04-09 | 2012-10-11 | Samsung Electronics Co., Ltd | Color conversion apparatus and method thereof |
CN103428568A (zh) * | 2012-05-23 | 2013-12-04 | 索尼公司 | 电子镜装置、电子镜显示方法、以及电子镜程序 |
US20140062862A1 (en) * | 2012-08-31 | 2014-03-06 | Omron Corporation | Gesture recognition apparatus, control method thereof, display instrument, and computer readable medium |
US20150332345A1 (en) * | 2014-05-14 | 2015-11-19 | International Business Machines Corporation | Advertisement selection and model augmentation based upon physical characteristics of a viewer |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4095765B2 (ja) * | 2000-04-14 | 2008-06-04 | 富士通株式会社 | カラー画像処理装置 |
US7616233B2 (en) | 2003-06-26 | 2009-11-10 | Fotonation Vision Limited | Perfecting of digital image capture parameters within acquisition devices using face detection |
KR100818983B1 (ko) * | 2005-12-09 | 2008-04-03 | 삼성전자주식회사 | 후보 이미지와 자연어를 이용한 최적 선호색 재현 장치 및 방법, 선호색에 대한 특정 정보 생성 장치 및 방법, 및 상기 방법을 이용한 기록매체 |
KR100679052B1 (ko) * | 2006-01-04 | 2007-02-06 | 삼성전자주식회사 | 최적 선호색 편집 장치 및 방법 |
JP5239126B2 (ja) | 2006-04-11 | 2013-07-17 | 株式会社ニコン | 電子カメラ |
KR20090113075A (ko) | 2008-04-25 | 2009-10-29 | 삼성디지털이미징 주식회사 | 디지털 영상 처리 장치 및 그 제어 방법 |
WO2010012448A2 (en) | 2008-07-30 | 2010-02-04 | Fotonation Ireland Limited | Automatic face and skin beautification using face detection |
US8525847B2 (en) | 2009-06-01 | 2013-09-03 | Apple Inc. | Enhancing images using known characteristics of image subjects |
JP2013131077A (ja) | 2011-12-21 | 2013-07-04 | Casio Comput Co Ltd | 画像処理装置、画像処理方法及びプログラム、画像処理システム |
US20130031458A1 (en) * | 2011-07-27 | 2013-01-31 | Microsoft Corporation | Hyperlocal content determination |
JP2013046374A (ja) | 2011-08-26 | 2013-03-04 | Sanyo Electric Co Ltd | 画像処理装置 |
WO2013036618A1 (en) | 2011-09-06 | 2013-03-14 | Canfield Scientific, Incorporated | Systems, devices, and methods for image analysis |
-
2016
- 2016-01-27 KR KR1020160009872A patent/KR102541829B1/ko active IP Right Grant
- 2016-12-12 US US15/375,637 patent/US10354124B2/en active Active
- 2016-12-28 EP EP16888324.7A patent/EP3360322A4/en active Pending
- 2016-12-28 WO PCT/KR2016/015377 patent/WO2017131348A1/en active Application Filing
-
2017
- 2017-01-24 CN CN201710052809.2A patent/CN107016648A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070031033A1 (en) * | 2005-08-08 | 2007-02-08 | Samsung Electronics Co., Ltd. | Method and apparatus for converting skin color of image |
CN101542522A (zh) * | 2007-03-15 | 2009-09-23 | 欧姆龙株式会社 | 眼睛颜色校正装置以及程序 |
US20090028434A1 (en) * | 2007-07-29 | 2009-01-29 | Vincent Vanhoucke | System and method for displaying contextual supplemental content based on image content |
US20120257826A1 (en) * | 2011-04-09 | 2012-10-11 | Samsung Electronics Co., Ltd | Color conversion apparatus and method thereof |
CN103428568A (zh) * | 2012-05-23 | 2013-12-04 | 索尼公司 | 电子镜装置、电子镜显示方法、以及电子镜程序 |
US20140062862A1 (en) * | 2012-08-31 | 2014-03-06 | Omron Corporation | Gesture recognition apparatus, control method thereof, display instrument, and computer readable medium |
US20150332345A1 (en) * | 2014-05-14 | 2015-11-19 | International Business Machines Corporation | Advertisement selection and model augmentation based upon physical characteristics of a viewer |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109639981A (zh) * | 2018-12-29 | 2019-04-16 | 维沃移动通信有限公司 | 一种图像拍摄方法及移动终端 |
CN109639981B (zh) * | 2018-12-29 | 2021-12-24 | 维沃移动通信有限公司 | 一种图像拍摄方法及移动终端 |
CN110443769A (zh) * | 2019-08-08 | 2019-11-12 | Oppo广东移动通信有限公司 | 图像处理方法、图像处理装置及终端设备 |
CN110443769B (zh) * | 2019-08-08 | 2022-02-08 | Oppo广东移动通信有限公司 | 图像处理方法、图像处理装置及终端设备 |
CN113551772A (zh) * | 2020-04-07 | 2021-10-26 | 武汉高德智感科技有限公司 | 一种红外测温方法、红外测温系统及存储介质 |
CN113551772B (zh) * | 2020-04-07 | 2023-09-15 | 武汉高德智感科技有限公司 | 一种红外测温方法、红外测温系统及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
EP3360322A1 (en) | 2018-08-15 |
EP3360322A4 (en) | 2018-10-17 |
KR20170089534A (ko) | 2017-08-04 |
US20170213073A1 (en) | 2017-07-27 |
KR102541829B1 (ko) | 2023-06-09 |
WO2017131348A1 (en) | 2017-08-03 |
US10354124B2 (en) | 2019-07-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107016648A (zh) | 电子设备及其控制方法 | |
TWI585711B (zh) | 獲得保養信息的方法、分享保養信息的方法及其電子裝置 | |
US20200387763A1 (en) | Item recommendations based on image feature data | |
US11568981B2 (en) | User terminal apparatus and control method thereof | |
US10366487B2 (en) | Electronic apparatus for providing health status information, method of controlling the same, and computer-readable storage medium | |
AU2015201759B2 (en) | Electronic apparatus for providing health status information, method of controlling the same, and computer readable storage medium | |
US10786196B2 (en) | Display apparatus and control method thereof for skin care analysis | |
US10776854B2 (en) | Merchandise recommendation device, merchandise recommendation method, and program | |
US20170262959A1 (en) | Browsing interface for item counterparts having different scales and lengths | |
CN107407967A (zh) | 信息处理系统、信息处理方法和程序 | |
KR20200017266A (ko) | 아바타에 대응하는 속성에 따른 아이템을 제공하는 방법 및 장치 | |
US11010894B1 (en) | Deriving a skin profile from an image | |
US11607124B2 (en) | System and method for measuring pupillary distance | |
US20220004809A1 (en) | Method and system for generating user driven adaptive object visualizations using generative adversarial network models | |
US10026176B2 (en) | Browsing interface for item counterparts having different scales and lengths | |
US11308653B2 (en) | Electronic device and method for providing augmented reality service based on a user of electronic device | |
GB2577274A (en) | Automated text layout, colour and other stylization on an image or video, and the tracking and application of user color preferences | |
JP7408922B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
US20230129243A1 (en) | Style profile engine | |
US20230260000A1 (en) | Prospective Object Search Techniques Based on Removed Objects | |
US20240071019A1 (en) | Three-dimensional models of users wearing clothing items | |
JP6839391B2 (ja) | アイテム管理装置、アイテム管理方法及びアイテム管理プログラム | |
CN113592818A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
Liu et al. | Image Analytics: A consolidation of visual feature extraction methods | |
KR20210077275A (ko) | 제품과 사용자의 매칭을 위한 전자 장치 및 이를 포함하는 매칭 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20170804 |