CN109196856A - 虚拟化妆装置和虚拟化妆方法 - Google Patents

虚拟化妆装置和虚拟化妆方法 Download PDF

Info

Publication number
CN109196856A
CN109196856A CN201780033963.3A CN201780033963A CN109196856A CN 109196856 A CN109196856 A CN 109196856A CN 201780033963 A CN201780033963 A CN 201780033963A CN 109196856 A CN109196856 A CN 109196856A
Authority
CN
China
Prior art keywords
face
makeup
image
automatic focusing
cosmetic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780033963.3A
Other languages
English (en)
Other versions
CN109196856B (zh
Inventor
富田裕人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of CN109196856A publication Critical patent/CN109196856A/zh
Application granted granted Critical
Publication of CN109196856B publication Critical patent/CN109196856B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/958—Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging
    • H04N23/959—Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging by adjusting depth of field during image capture, e.g. maximising or setting range based on scene characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computing Systems (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

虚拟化妆装置具有：显示控制部，其在使由具备自动调焦功能的摄像机拍摄到的脸部影像显示的状态下，受理用于指定针对脸部影像的虚拟化妆的内容的化妆指定操作；以及摄像机控制部，其以被进行了规定的化妆指定操作为条件，来使摄像机开始进行自动调焦动作。

Description

虚拟化妆装置和虚拟化妆方法
技术领域
本公开涉及一种对脸部影像进行虚拟化妆的虚拟化妆装置和虚拟化妆方法。
背景技术
存在一种涉及通过图像处理对拍摄脸部所得到的图像实施假想的化妆的所谓的虚拟化妆的技术(例如，参照专利文献1)。在专利文献1所记载的技术中，显示由具备自动调焦功能的摄像机拍摄到的脸部的静止图像，当被进行针对眼睛、嘴唇等脸上部位的选择操作时，将所选择的脸上部位部分的颜色置换为任意的颜色。根据该技术，能够简单地生成对用户所选择的脸上部位假想地实施化妆后的图像。
并且，近年来，还盛行开发一种关于针对拍摄脸部所得到的动态图像(以下称为“脸部影像”)的虚拟化妆的技术(例如，参照专利文献2)。在专利文献2所记载的技术中，将内眼角、嘴角等脸部特征点作为跟踪点来追踪脸上部位的位置，将眼影、口红等化妆局部的图像(以下称为“化妆局部图像”)连续地叠加到影像中的脸部的规定位置。根据该技术，在脸部的位置、朝向时刻发生变化的脸部影像中也能够实现虚拟化妆。
另外，考虑每当进行指定针对脸部影像的虚拟化妆的内容的操作(以下称为“化妆指定操作”)时，就生成并显示实时地反映出操作的内容的影像。这样的虚拟化妆在下面简称为“针对脸部影像的虚拟化妆”。
另一方面，当用户所关注的脸部影像模糊时，还是会使用户感到不适。因而，期望一种能够更舒适地进行针对脸部影像的虚拟化妆的技术。
本公开的目的在于更舒适地进行针对脸部影像的虚拟化妆。
专利文献1：日本特开2001-204545号公报
专利文献2：日本特开2013-101633号公报
发明内容
本公开的虚拟化妆装置具备：显示控制部，其在使由具备自动调焦功能的摄像机拍摄到的脸部影像显示的状态下，受理用于指定针对所述脸部影像的虚拟化妆的内容的化妆指定操作；以及摄像机控制部，其以被进行了规定的所述化妆指定操作为条件，来使所述摄像机的自动调焦动作开始。
本公开的虚拟化妆方法包括以下步骤：开始显示由具备自动调焦功能的摄像机拍摄到的脸部影像，受理用于指定针对所述脸部影像的虚拟化妆的内容的化妆指定操作；以及以进行了规定的所述化妆指定操作为条件，来使所述摄像机的自动调焦动作开始。
根据本公开，能够更舒适地进行针对脸部影像的虚拟化妆。
附图说明
图1是示出本公开的一个实施方式所涉及的虚拟化妆装置的使用状态的一例的图。
图2是示出本实施方式中的虚拟化妆画面一例的图。
图3是示出本实施方式所涉及的虚拟化妆装置的结构的一例的框图。
图4是示出本实施方式中的脸上部位信息表的一例的图。
图5是示出本实施方式中的化妆项目信息表的一例的图。
图6是示出本实施方式中的信息对应表的一例的图。
图7是示出本实施方式所涉及的虚拟化妆装置的动作的一例的流程图。
具体实施方式
下面，参照附图来详细说明本公开的一个实施方式。
<装置的概要>
首先，说明本实施方式所涉及的虚拟化妆装置的概要。
图1是示出本实施方式所涉及的虚拟化妆装置的使用状态的一例的图。
如图1所示，虚拟化妆装置100例如是能够竖立放置在桌上的平板型终端。虚拟化妆装置100在板状的壳体110的主面配置有摄像机120和带触摸面板的显示器130。此外，虚拟化妆装置100也可以在壳体110的主面还配置有灯。
由用户200调整用户200与虚拟化妆装置100之间的相对位置，使得例如摄像机120中拍出脸部210、能够视觉确认带触摸面板的显示器130且手指220能够触碰到带触摸面板的显示器130。
摄像机120是具备自动调焦功能的数字摄像机，拍摄用户200的脸部210的影像(以下称为“脸部影像”)。
带触摸面板的显示器130是用于进行针对脸部影像的虚拟化妆的用户界面，显示虚拟化妆画面300。
图2是示出虚拟化妆画面300的一例的图。
如图2所示，虚拟化妆画面300包括影像显示区域310和操作受理区域320。
影像显示区域310实时地显示由摄像机120拍摄到的脸部影像的镜像影像(下面简称为“脸部影像”)。另外，影像显示区域310根据对操作受理区域320的操作，将基于该操作决定的化妆局部图像叠加于脸部影像来进行显示。
此外，在此，“实时”是指包含延迟时间小到使用户200感受到与照镜子的感觉接近的感觉的程度的概念。另外，化妆局部图像是表示将化妆项目(例如，口红、眼影)施用于对应的脸上部位(例如，嘴唇、眼皮)时的化妆后的状态的图像。
操作受理区域320例如包括项目选择区321、颜色选择区322、风格选择区323以及处理选择区324。
项目选择区321用于受理从预先决定的多个化妆项目中选择成为操作对象的化妆项目的操作。此外，项目选择区321也可以按大分类和小分类来阶段性地受理选择操作。颜色选择区322用于受理从按每个化妆项目预先决定的多个颜色中选择对化妆项目应用的颜色的操作。风格选择区323用于受理从按每个化妆项目预先决定的多个化妆的涂布形状中选择对化妆项目应用的形状的操作。即，项目选择区321～风格选择区323用于受理指定虚拟化妆的内容的操作(以下称为“化妆指定操作”))。
处理选择区324用于受理关于表示通过化妆指定操作指定的虚拟化妆的内容的信息(以下称为“化妆指定信息”)选择应执行的处理的操作。在上述处理中包括与化妆指定信息对应的化妆局部图像的预览显示以及化妆指定信息的记录等。
影像显示区域310持续地实时显示所拍摄到的脸部影像。在该状态下，当摄像机120(参照图1)的自动调焦动作被频繁地进行时，如上述那样有可能使用户感到不适。因此，虚拟化妆装置100以被进行了规定的化妆指定操作为条件，来使摄像机120的自动调焦动作开始，在没有进行该操作时，不盲目地进行自动调焦动作。
例如，虚拟化妆装置100逐次判定是否被进行了在项目选择区321中选择化妆项目的操作(下面称为“项目选择操作”)。而且，虚拟化妆装置100在被进行了项目选择操作时，将与所选择的化妆项目(例如口红)对应的脸上部位(例如嘴唇)311作为焦点位置，来进行摄像机120的调焦动作。此外，虚拟化妆装置100也可以将表示焦点位置的对焦框312叠加于处理选择区324的脸部影像来进行显示。
用户200(参照图1)例如在想要开始进行唇类(LIP)的虚拟化妆的情况下，首先在项目选择区321中选择口红。于是，虚拟化妆装置100立即使焦点(focus)对准与口红对应的脸上部位即嘴唇，来显示将用户200所关注的嘴唇鲜明地映出的脸部影像。
即，虚拟化妆装置100能够避免因盲目地进行自动调焦动作而引起的厌烦，并且将被用户200作为虚拟化妆对象而关注的脸部部分鲜明地显示。
下面，详细地说明上述虚拟化妆装置100的结构和动作。
<装置的结构>
首先，说明虚拟化妆装置100的结构。
图3是示出虚拟化妆装置100的结构的一例的框图。
在图3中，虚拟化妆装置100具有摄像机120、带触摸面板的显示器130、信息保存部140、影像处理部150、显示控制部160以及摄像机控制部170。
摄像机120是具有光学系统、快门机构以及摄像元件的数字摄像机，拍摄脸部影像，并将所得到的脸部影像的流数据输出到影像处理部150。此外，关于使脸部影像在左右方向上反转的处理，既可以在摄像机120中进行，也可以在后级的影像处理部150或显示控制部160中进行。
另外，摄像机120具有AF(Auto Focus：自动调焦)部121。AF部121在被后述的摄像机控制部170指定了焦点位置时，进行使焦点对准该位置的调焦动作。此外，摄像机120与有无调焦动作无关地进行拍摄，并输出影像流数据。
带触摸面板的显示器130例如具有液晶显示器以及配置于该液晶显示器的表面的透明的触摸面板。在用户的手指220接触到带触摸面板的显示器130时，带触摸面板的显示器130检测该接触，并向显示控制部160输出表示手指220接触到哪个区域的操作信息。另外，带触摸面板的显示器130例如通过图像信号的输入等来从显示控制部160接受控制，显示上述的虚拟化妆画面300(参照图2)等各种图像和影像。
信息保存部140保存虚拟化妆装置100的各部进行动作所需要的各种信息。信息保存部140例如预先保存有脸上部位信息表、化妆项目信息表以及信息对应表。
图4是示出脸上部位信息表的一例的图。
如图4所示，在脸上部位信息表410中，按每个脸上部位411描述了提取用信息412、基准脸部特征点413、AF用区域414等。
提取用信息412是用于从脸部影像中提取脸上部位的信息，例如是包含脸上部位的图像区域的图像特征。基准脸部特征点413是脸部特征点中的、成为脸上部位在脸部影像中所占的区域的基准的一个或多个脸部特征点。AF用区域414是以基准脸部特征点413为基准决定的、在使焦点对准脸上部位时成为对焦判定的对象的区域。
例如，与“嘴唇”这样的脸上部位411相对应地描述了“E1”这样的提取用信息412、“左嘴角、右嘴角、……”这样的基准脸部特征点413以及“F1”这样的AF用区域414。这些描述规定了：在从脸部影像中提取嘴唇的情况下，使用提取用信息E1；以及在使焦点对准嘴唇的情况下，使用以左嘴角、右嘴角等脸部特征点为基准决定的区域F1来搜索对比度的峰值位置。
图5是示出化妆项目信息表的一例的图。
如图5所示，在化妆项目信息表420中，按化妆项目421与化妆项目的细目即项目细目422的每个组合(下面简称为“化妆项目”)描述了颜色423、浓度424、基准脸部特征点425以及局部区域426。
颜色423是化妆项目的化妆局部图像的颜色。浓度424是将化妆局部图像叠加于脸部图像时的透明度。基准脸部特征点425是脸部特征点中的成为化妆局部图像在脸部影像中所占的区域的基准的一个或多个脸部特征点。局部区域426是以基准脸部特征点425为基准决定的、化妆局部图像在脸部影像中所占的区域。
例如，与“唇类(LIPS)”这样的化妆项目421的“口红”这样的项目细目422相对应地描述了“粉色”这样的颜色423、“D11”这样的浓度424、“左嘴角、右嘴角、……”这样的基准脸部特征点424以及“M11”这样的局部区域426。这些描述规定了：在粉色被选择为口红的颜色的情况下，将用浓度D11的粉色填涂脸部影像中的以左嘴角、右嘴角等脸部特征点为基准决定的区域M11这样的图像作为化妆局部图像使用。
图6是示出信息对应表的一例的图。
如图6所示，在信息对应表430中，按每个化妆项目431描述了成为应用该化妆项目431的对象的脸上部位432。即，在信息对应表430中描述了在存在被用户200选择为虚拟化妆的对象的化妆项目431时用户200关注哪个脸上部位432的可能性高。此外，化妆项目431与化妆项目信息表420中描述的化妆项目421对应(参照图5)，脸上部位432与脸上部位信息表410中描述的脸上部位411对应(参照图4)。
例如，与“唇类(LIPS)”这样的化妆项目421对应地关联有“嘴唇”这样的脸上部位432。该描述关于唇类(LIPS)规定了嘴唇为应用对象。换言之，上述对应表示在唇类被选择为虚拟化妆的对象时应使焦点对准嘴唇。
图3的影像处理部150基于脸上部位信息表410中的提取用信息412(参照图4)，来从脸部影像的流数据中逐次提取嘴唇、眼睛等脸上部位。而且，影像处理部150对显示控制部160输出脸部影像的流数据，并且逐次输出表示包括基准脸部特征点在内的各脸上部位的位置的信息(下面称为“部位位置信息”)。此外，作为由影像处理部150提取脸部特征点的提取方法，能够采用专利文献1和专利文献2中记载的方法等公知的方法。
显示控制部160基于脸部影像的流数据、操作信息以及部位位置信息，来生成包含脸部影像的虚拟化妆画面300(参照图2)，并使带触摸面板的显示器130显示该虚拟化妆画面300。显示控制部160具有操作受理部161和化妆叠加部162。
在脸部影像被显示于带触摸面板的显示器130的状态下，操作受理部161受理化妆指定操作。即，操作受理部161生成并显示虚拟化妆画面300的操作受理区域320，基于操作信息来判定对操作受理区域320进行的操作。而且，操作受理部161每当被进行化妆指定操作时，就将表示该操作内容的信息输出到化妆叠加部162。另外，操作受理部161在被进行了规定的化妆指定操作时，将该意思通知给摄像机控制部170。
规定的化妆指定操作是指表示用户200关注脸部影像中的哪个部分来作为虚拟化妆的对象的可能性高的操作。在本实施方式中，规定的化妆指定操作被设为上述的项目选择操作。操作受理部161在被进行了项目选择操作时，向摄像机控制部170输出表示所选择的化妆项目的信息(下面称为“选择项目信息”)。
化妆叠加部162基于脸部影像的流数据来使虚拟化妆画面300的影像显示区域310显示实时的脸部影像。另外，化妆叠加部162根据有无化妆指定操作以及化妆指定操作的内容，基于部位位置信息和化妆项目信息表420(参照图5)来生成化妆局部图像，并将该化妆局部图像叠加于脸部影像。此外，作为由化妆叠加部162生成虚拟化妆影像(叠加有化妆局部图像的脸部影像)的生成方法，能够采用专利文献1和专利文献2中记载的方法等公知的方法。
摄像机控制部170对摄像机120的包括自动调焦动作在内的各种动作进行控制。特别是，摄像机控制部170以被进行了项目选择操作为条件，来使摄像机120的AF部121的自动调焦动作开始。此时，摄像机控制部170基于选择项目信息、信息对应表430(参照图6)以及脸上部位信息表410(参照图4)，来将与所选择的化妆项目对应的脸上部位的AF用区域设为自动调焦动作的焦点位置。即，摄像机控制部170不盲目地进行自动调焦动作，并且至少在被进行了项目选择操作时进行自动调焦动作，使得与所选择的化妆项目对应的脸上部位被鲜明地映出。
此外，虚拟化妆装置100例如具有CPU(Central Processing Unit：中央处理单元)、保存有控制程序的ROM(Read Only Memory：只读存储器)等存储介质以及RAM(RandomAccess Memory：随机存取存储器)等作业用存储器等硬件。在该情况下，上述的各部的功能通过由CPU执行控制程序来实现。
根据这样的结构，虚拟化妆装置100能够至少在用户200关注脸部影像的某个部分的可能性高的定时进行自动调焦动作，并能够限制在其它定时的自动调焦动作。
<装置的动作>
接着，说明虚拟化妆装置100的动作。
图7是示出虚拟化妆装置100的动作的一例的流程图。
在步骤S1100中，摄像机控制部170将摄像机120的曝光(亮度)、白平衡(颜色)以及焦点位置设定为规定值。该规定值例如是通过在对虚拟化妆装置100的设置时由操作员等事先进行设定来与设置环境(周围的亮度等)相匹配地决定的。
此外，用户200的脸部相对于摄像机120的位置容易发生变化，但特别是在设置场所为店铺的情况下，周边的照明环境大多不会大幅地发生变化。
在步骤S1200中，摄像机120、摄像机120以及带触摸面板的显示器130开始进行脸部影像的拍摄和虚拟化妆画面300(参照图2)的显示。
虚拟化妆装置100以规定的周期(例如，脸部影像的每帧的间隔)反复执行后续的步骤S1300～S1900的处理。
在步骤S1300中，影像处理部150从脸部影像中提取脸上部位。
在步骤S1400中，操作受理部161判定是否被进行了化妆指定操作。操作受理部161在没有被进行化妆指定操作的情况下(S1400：“否”)，使处理进入后述的步骤S1900。另外，操作受理部161在被进行了化妆指定操作的情况下(S1400：“是”)，使处理进入步骤S1500。
在步骤S1500中，操作受理部161判定被进行的化妆指定操作是否为项目选择操作(规定的化妆指定操作)。操作受理部161在被进行的化妆指定操作为项目选择操作的情况下(S1500：“是”)，使处理进入步骤S1600。另外，操作受理部161在被进行的化妆指定操作为项目选择操作以外的操作的情况下(S1500：“否”)，使处理进入后述的步骤S1800。
在步骤S1600中，摄像机控制部170判定与通过项目选择操作选择的化妆项目对应的脸上部位的位置(AF用区域，下面称为“关注位置”)。
在步骤S1700中，摄像机控制部170将关注位置设为焦点位置，来使AF部121实施自动调焦动作。摄像机控制部170在步骤S1700以外的定时基本上不指示自动调焦动作。
此外，在进行自动调焦动作的期间，显示控制部160用从自动调焦动作开始之前拍摄到的脸部影像中获得的脸部静止图像代替脸部影像的流数据来显示于虚拟化妆画面300的影像显示区域310。由此，能够防止影像显示区域310的脸部影像突然变得不清晰，从而能够减少给用户200带来的不适感。
在步骤S1800中，化妆叠加部162开始进行与化妆指定操作所指定的虚拟化妆的内容对应的化妆局部图像的生成、以及化妆局部图像向脸部影像的叠加。此外，化妆叠加部162在已经开始进行化妆局部图像的叠加的情况下，根据最后进行的化妆指定操作的内容来变更虚拟化妆影像的状态。
然后，在步骤S1900中，摄像机120(或其它装置部)根据用户200的操作等判定是否被指示了结束与虚拟化妆有关的处理。摄像机120在没有被指示结束处理的情况下(S1900：“否”)，使处理返回到步骤S1300。另外，在摄像机120被指示了结束处理的情况下(S1900：“是”)，结束一系列的处理。
通过这样的动作，虚拟化妆装置100能够将自动调焦动作的实施限制在进行了项目选择操作的定时，并且能够显示追随脸部影像的变化的虚拟化妆影像。
此外，摄像机控制部170也可以在进行项目选择操作后的自动调焦动作完成之后，基于脸部影像中的脸部大小(脸部区域的宽度、面积等)的变化来调整摄像机的焦距。
在该情况下，例如，影像处理部150周期性地判定脸部影像中的脸部大小，并将判定结果输出到摄像机控制部170。脸部大小例如能够通过计算肤色区域的面积、左右的瞳孔中心之间的距离来判定。而且，摄像机控制部170基于从紧挨着前次进行自动调焦动作之后起脸部大小发生的变化(例如大小之比)以及通过前次的自动调焦动作决定的焦距，来估计在当前的脸部的位置对焦的焦距。在该情况下，期望摄像机控制部170预先保持有表示按脸部大小的每个变化的图案调整调焦透镜后的调焦透镜的位置的表。
另外，摄像机控制部170也可以在被进行项目选择操作之前也使AF部121实施自动调焦动作。但是，期望摄像机控制部170使被进行项目选择操作之前的自动调焦动作的频度高于被进行项目选择操作之后的自动调焦动作的频度。
另外，也可以是，摄像机控制部170在满足规定的条件的情况下，即使被进行了项目选择操作，也不实施自动调焦动作。作为上述规定的条件，例如包括：从前次进行自动调焦动作的定时(下面称为“前次AF定时”)起经过的时间少；从前次的AF定时起脸部的移动少；以及从前次的AF定时起脸部大小发生的变化少等。
<本实施方式的效果>
如以上所说明的那样，本实施方式所涉及的虚拟化妆装置100具有：显示控制部160，其在使由具备自动调焦功能的摄像机120拍摄到的脸部影像显示的状态下，受理用于指定针对脸部影像的虚拟化妆的内容的化妆指定操作；以及摄像机控制部170，其以被进行了规定的化妆指定操作为条件，来使摄像机120的自动调焦动作开始。
即，本实施方式所涉及的虚拟化妆装置100在实时的虚拟化妆中将摄像机120的AF处理限制为与虚拟化妆处理联动。由此，本实施方式所涉及的虚拟化妆装置100能够更舒适地进行针对脸部影像的虚拟化妆。
<本实施方式的变形例>
此外，成为自动调焦动作的触发的规定的化妆指定操作不限定于项目选择操作，例如也可以是为了开始进行虚拟化妆而指示操作受理区域320的显示开始的操作。
另外，成为虚拟化妆的对象的化妆局部和脸上部位不限定于上述的例子。虚拟化妆装置100也可以将假发、彩色隐形眼镜、纹身、眼镜、饰品、特殊化妆等包含在成为虚拟化妆的对象的化妆局部中。在该情况下，也期望虚拟化妆装置100按每个化妆局部预先保持有应使焦点对准哪个脸上部位的信息。
另外，虚拟化妆装置不限定于平板型终端，例如也可以是智能手机、个人计算机。
另外，利用触摸面板进行接触检测的对象不限定于手指，例如也可以是手写笔。
另外，操作受理部也可以经由与显示器分离的触摸面板、鼠标、键盘、用多个键式开关等替换操作受理区域320的各区域的专用输入装置、或者基于视线检测的操作界面等来受理化妆指定操作。
另外，虚拟化妆装置的结构的一部分也可以与该装置的结构的其它部分以物理方式分离。在该情况下，这些分离的多个部分需要各自具备用于彼此进行通信的通信部。
<本公开的总结>
本公开的虚拟化妆具有：显示控制部，其在使由具备自动调焦功能的摄像机拍摄到的脸部影像显示的状态下，受理用于指定针对所述脸部影像的虚拟化妆的内容的化妆指定操作；以及摄像机控制部，其以被进行了规定的所述化妆指定操作为条件，来使所述摄像机的自动调焦动作开始。
此外，在上述虚拟化妆装置中，也可以是，所述摄像机控制部使被进行所述规定的化妆指定操作之前的所述自动调焦动作的频度低于被进行所述规定的化妆指定操作之后的所述自动调焦动作的频度。
另外，在上述虚拟化妆装置中，也可以是，所述摄像机控制部在被进行所述规定的化妆指定操作之前不使所述自动调焦动作开始。
另外，在上述虚拟化妆装置中，也可以是，所述规定的化妆指定操作包括选择化妆项目的项目选择操作，该化妆项目为针对所述脸部影像的虚拟化妆的局部且预先与脸上部位对应，所述摄像机控制部将与所选择的所述化妆项目对应的所述脸上部位的与在所述脸部影像中的位置对应的位置设为所述自动调焦动作的焦点位置。
另外，在上述虚拟化妆装置中，也可以是，所述显示控制部将所选择的所述化妆项目的化妆局部图像叠加于正在显示的所述脸部影像中的对应的所述脸上部位的位置来进行显示。
另外，在上述虚拟化妆装置中，也可以是，所述显示控制部显示从所述自动调焦动作开始之前的所述脸部影像中获得的脸部静止图像，来代替在所述自动调焦动作正在进行的期间获取到的所述脸部影像。
另外，在上述虚拟化妆装置中，也可以是，所述摄像机控制部在被进行所述规定的化妆指定操作后的所述自动调焦动作完成之后，基于所述脸部影像中的脸部大小的变化，来调整所述摄像机的焦距。
本公开的虚拟化妆方法包括以下步骤：开始显示由具备自动调焦功能的摄像机拍摄到的脸部影像，受理用于指定针对所述脸部影像的虚拟化妆的内容的化妆指定操作；以及以进行了规定的所述化妆指定操作为条件，来使所述摄像机的自动调焦动作开始。
本公开的虚拟化妆程序包括以下步骤：开始显示由具备自动调焦功能的摄像机拍摄到的脸部影像，受理用于指定针对所述脸部影像的虚拟化妆的内容的化妆指定操作；以及以进行了规定的所述化妆指定操作为条件，来使所述摄像机的自动调焦动作开始。
产业上的可利用性
本公开所涉及的虚拟化妆装置、虚拟化妆方法以及虚拟化妆程序作为能够更舒适地进行针对脸部影像的虚拟化妆的虚拟化妆装置、虚拟化妆方法以及虚拟化妆程序是有用的。
附图标记说明
100：虚拟化妆装置；110：壳体；120：摄像机；121：AF部；130：带触摸面板的显示器；140：信息保存部；150：影像处理部；160：显示控制部；161：操作受理部；162：化妆叠加部；170：摄像机控制部。

Claims (8)

1.一种虚拟化妆装置，具有：
显示控制部，其在使由具备自动调焦功能的摄像机拍摄到的脸部影像显示的状态下，受理用于指定针对所述脸部影像的虚拟化妆的内容的化妆指定操作；以及
摄像机控制部，其以被进行了规定的所述化妆指定操作为条件，来使所述摄像机的自动调焦动作开始。
2.根据权利要求1所述的虚拟化妆装置，其特征在于，
所述摄像机控制部使被进行所述规定的化妆指定操作之前的所述自动调焦动作的频度低于被进行所述规定的化妆指定操作之后的所述自动调焦动作的频度。
3.根据权利要求1所述的虚拟化妆装置，其特征在于，
所述摄像机控制部在被进行所述规定的化妆指定操作之前不使所述自动调焦动作开始。
4.根据权利要求1所述的虚拟化妆装置，其特征在于，
所述规定的化妆指定操作包括选择化妆项目的项目选择操作，该化妆项目为针对所述脸部影像的虚拟化妆的局部且预先与脸上部位对应，
所述摄像机控制部将与所选择的所述化妆项目对应的所述脸上部位的与在所述脸部影像中的位置对应的位置设为所述自动调焦动作的焦点位置。
5.根据权利要求4所述的虚拟化妆装置，其特征在于，具有：
所述显示控制部将所选择的所述化妆项目的化妆局部图像叠加于正在显示的所述脸部影像中的对应的所述脸上部位的位置来进行显示。
6.根据权利要求1所述的虚拟化妆装置，其特征在于，
所述显示控制部显示从所述自动调焦动作开始之前的所述脸部影像中获得的脸部静止图像，来代替在所述自动调焦动作正在进行的期间获取到的所述脸部影像。
7.根据权利要求1所述的虚拟化妆装置，其特征在于，
所述摄像机控制部在被进行所述规定的化妆指定操作后的所述自动调焦动作完成之后，基于所述脸部影像中的脸部的大小的变化，来调整所述摄像机的焦距。
8.一种虚拟化妆方法，包括以下步骤：
开始显示由具备自动调焦功能的摄像机拍摄到的脸部影像，受理用于指定针对所述脸部影像的虚拟化妆的内容的化妆指定操作；以及
以进行了规定的所述化妆指定操作为条件，来使所述摄像机的自动调焦动作开始。
CN201780033963.3A 2016-06-10 2017-05-16 虚拟化妆装置和虚拟化妆方法 Expired - Fee Related CN109196856B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016116340A JP6731616B2 (ja) 2016-06-10 2016-06-10 バーチャルメイク装置、バーチャルメイク方法、およびバーチャルメイクプログラム
JP2016-116340 2016-06-10
PCT/JP2017/018311 WO2017212878A1 (ja) 2016-06-10 2017-05-16 バーチャルメイク装置、およびバーチャルメイク方法

Publications (2)

Publication Number Publication Date
CN109196856A true CN109196856A (zh) 2019-01-11
CN109196856B CN109196856B (zh) 2022-02-11

Family

ID=60578640

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780033963.3A Expired - Fee Related CN109196856B (zh) 2016-06-10 2017-05-16 虚拟化妆装置和虚拟化妆方法

Country Status (4)

Country Link
US (1) US10666853B2 (zh)
JP (1) JP6731616B2 (zh)
CN (1) CN109196856B (zh)
WO (1) WO2017212878A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111988530A (zh) * 2020-09-01 2020-11-24 青岛海信移动通信技术股份有限公司 移动终端及其拍照方法

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11113511B2 (en) * 2017-02-01 2021-09-07 Lg Household & Health Care Ltd. Makeup evaluation system and operating method thereof
KR102339223B1 (ko) * 2017-08-22 2021-12-15 삼성전자주식회사 전자 장치 및 전자 장치에서 카메라 기능과 연관된 콘텐트 제공 방법
WO2020090458A1 (ja) * 2018-10-29 2020-05-07 ソニー株式会社 表示装置、及び表示制御方法
CN111324274A (zh) * 2018-12-13 2020-06-23 北京京东尚科信息技术有限公司 虚拟试妆方法、装置、设备及存储介质
US11690435B2 (en) 2020-07-07 2023-07-04 Perfect Mobile Corp. System and method for navigating user interfaces using a hybrid touchless control mechanism
JP2024508267A (ja) * 2021-02-23 2024-02-26 北京市商▲湯▼科技▲開▼▲發▼有限公司 画像処理方法及び装置、電子機器並びに記憶媒体
EP4113253A1 (en) * 2021-07-02 2023-01-04 Perfect Mobile Corp. System and method for navigating user interfaces using a hybrid touchless control mechanism
US11900545B2 (en) * 2022-01-06 2024-02-13 Lemon Inc. Creating effects based on facial features

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1598683A (zh) * 2003-09-19 2005-03-23 松下电器产业株式会社 自动聚焦方法和自动聚焦照相机
CN101246541A (zh) * 2007-02-16 2008-08-20 索尼株式会社 图像处理设备和方法、图像拾取设备、以及计算机程序
CN101383907A (zh) * 2007-09-04 2009-03-11 奥林巴斯映像株式会社 图像处理装置和图像处理方法
CN101535889A (zh) * 2006-11-07 2009-09-16 索尼爱立信移动通讯股份有限公司 用户定义的自动聚焦区域
CN101719984A (zh) * 2009-11-09 2010-06-02 北京中星微电子有限公司 一种图像处理的装置
CN102478700A (zh) * 2010-11-25 2012-05-30 财团法人工业技术研究院 自动聚焦装置及方法
US20120257000A1 (en) * 2011-04-07 2012-10-11 Tara Chand Singhal System and method for a grooming mirror in a portable electronic device with a user-facing camera
US20130089245A1 (en) * 2010-06-21 2013-04-11 Pola Chemical Industries, Inc. Age estimation method and sex determination method
CN103493471A (zh) * 2011-04-23 2014-01-01 奥林巴斯映像株式会社 摄像装置和摄像方法
CN103780815A (zh) * 2009-11-25 2014-05-07 奥林巴斯映像株式会社 摄影系统、摄影设备以及摄影设备用附件设备
CN103970525A (zh) * 2013-01-25 2014-08-06 韩国电子通信研究院 用于虚拟化妆的设备和方法
CN104038691A (zh) * 2013-03-07 2014-09-10 联发科技股份有限公司 自动聚焦方法及自动聚焦装置
CN104380339A (zh) * 2013-04-08 2015-02-25 松下电器（美国）知识产权公司 能够将涂敷了化妆涂料的状态虚拟地再现的图像处理装置、图像处理方法、程序
CN104797165A (zh) * 2013-08-30 2015-07-22 松下知识产权经营株式会社 化妆辅助装置、化妆辅助方法以及化妆辅助程序
CN104954695A (zh) * 2015-07-14 2015-09-30 厦门美图之家科技有限公司 一种视频拍摄的对焦锁定方法和系统
CN105574484A (zh) * 2014-11-04 2016-05-11 三星电子株式会社 电子装置及用于在电子装置中分析脸部信息的方法

Family Cites Families (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3912834B2 (ja) * 1997-03-06 2007-05-09 有限会社開発顧問室 顔画像の修正方法、化粧シミュレーション方法、化粧方法、化粧サポート装置及びファンデーション転写膜
JP2001204545A (ja) 2000-01-28 2001-07-31 Iti Joho Kogaku Kenkyusho:Kk 化粧鏡装置
JP3779570B2 (ja) * 2001-07-30 2006-05-31 デジタルファッション株式会社 化粧シミュレーション装置、化粧シミュレーション制御方法、化粧シミュレーションプログラムを記録したコンピュータ読み取り可能な記録媒体
US8553949B2 (en) * 2004-01-22 2013-10-08 DigitalOptics Corporation Europe Limited Classification and organization of consumer digital images using workflow, and face detection and recognition
US7555148B1 (en) * 2004-01-22 2009-06-30 Fotonation Vision Limited Classification system for consumer digital images using workflow, face detection, normalization, and face recognition
US20070019882A1 (en) * 2004-01-30 2007-01-25 Shoji Tanaka Makeup simulation program, makeup simulation device, and makeup simulation method
US8194173B2 (en) * 2004-07-16 2012-06-05 Nikon Corporation Auto-focusing electronic camera that focuses on a characterized portion of an object
US7612794B2 (en) * 2005-05-25 2009-11-03 Microsoft Corp. System and method for applying digital make-up in video conferencing
CN101341507B (zh) * 2005-12-01 2012-07-04 株式会社资生堂 面部分类方法以及面部分类装置
CN101371272B (zh) 2006-01-17 2012-07-18 株式会社资生堂 化妆模拟系统，化妆模拟装置，化妆模拟方法
US7634108B2 (en) * 2006-02-14 2009-12-15 Microsoft Corp. Automated face enhancement
US8620038B2 (en) * 2006-05-05 2013-12-31 Parham Aarabi Method, system and computer program product for automatic and semi-automatic modification of digital images of faces
US8660319B2 (en) * 2006-05-05 2014-02-25 Parham Aarabi Method, system and computer program product for automatic and semi-automatic modification of digital images of faces
WO2007128117A1 (en) * 2006-05-05 2007-11-15 Parham Aarabi Method. system and computer program product for automatic and semi-automatic modification of digital images of faces
US7916129B2 (en) * 2006-08-29 2011-03-29 Industrial Technology Research Institute Interactive display system
US8340512B2 (en) * 2007-03-15 2012-12-25 Nvidia Corporation Auto focus technique in an image capture device
JP5432532B2 (ja) * 2008-01-22 2014-03-05 株式会社 資生堂 化粧方法、化粧シミュレーション装置、及び化粧シミュレーションプログラム
JP5025532B2 (ja) * 2008-03-12 2012-09-12 キヤノン株式会社 撮影装置、撮像装置の制御方法及び撮像装置の制御プログラム
FR2942401A1 (fr) * 2009-02-23 2010-08-27 Oreal Procede de traitement cosmetique comportant la projection d'une image sur la zone a traiter
CN102339466B (zh) * 2010-07-15 2016-04-13 韩华泰科株式会社 用于检测具有特定形状的区域的方法和相机
US20120099756A1 (en) * 2010-10-20 2012-04-26 Faiz Feisal Sherman Product Identification
JP2012181688A (ja) * 2011-03-01 2012-09-20 Sony Corp 情報処理装置、情報処理方法、情報処理システムおよびプログラム
US8811726B2 (en) * 2011-06-02 2014-08-19 Kriegman-Belhumeur Vision Technologies, Llc Method and system for localizing parts of an object in an image for computer vision applications
JP2013070303A (ja) * 2011-09-26 2013-04-18 Kddi Corp 画面への押圧で撮影が可能な撮影装置、撮影方法及びプログラム
WO2013084233A1 (en) * 2011-12-04 2013-06-13 Digital Makeup Ltd Digital makeup
US8908904B2 (en) * 2011-12-28 2014-12-09 Samsung Electrônica da Amazônia Ltda. Method and system for make-up simulation on portable devices having digital cameras
TW201330609A (zh) * 2012-01-06 2013-07-16 Hon Hai Prec Ind Co Ltd 智慧追蹤裝置
US9118876B2 (en) * 2012-03-30 2015-08-25 Verizon Patent And Licensing Inc. Automatic skin tone calibration for camera images
US9449412B1 (en) * 2012-05-22 2016-09-20 Image Metrics Limited Adaptive, calibrated simulation of cosmetic products on consumer devices
US9224248B2 (en) * 2012-07-12 2015-12-29 Ulsee Inc. Method of virtual makeup achieved by facial tracking
US20140160019A1 (en) * 2012-12-07 2014-06-12 Nvidia Corporation Methods for enhancing user interaction with mobile devices
WO2014118842A1 (ja) * 2013-02-01 2014-08-07 パナソニック株式会社 美容支援装置、美容支援システム、美容支援方法、並びに美容支援プログラム
JP6008323B2 (ja) * 2013-02-01 2016-10-19 パナソニックＩｐマネジメント株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
JP6128309B2 (ja) * 2013-02-01 2017-05-17 パナソニックＩｐマネジメント株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
JP5991536B2 (ja) * 2013-02-01 2016-09-14 パナソニックＩｐマネジメント株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
CN103197491B (zh) * 2013-03-28 2016-03-30 华为技术有限公司 快速自动聚焦的方法和图像采集装置
GB2518589B (en) * 2013-07-30 2019-12-11 Holition Ltd Image processing
CN104822292B (zh) * 2013-08-30 2019-01-04 松下知识产权经营株式会社 化妆辅助装置、化妆辅助系统、化妆辅助方法以及化妆辅助程序
US10339685B2 (en) * 2014-02-23 2019-07-02 Northeastern University System for beauty, cosmetic, and fashion analysis
JP6581333B2 (ja) * 2014-03-14 2019-09-25 キヤノン株式会社 画像処理装置、撮像装置およびプログラム
US9760935B2 (en) * 2014-05-20 2017-09-12 Modiface Inc. Method, system and computer program product for generating recommendations for products and treatments
US20160042557A1 (en) * 2014-08-08 2016-02-11 Asustek Computer Inc. Method of applying virtual makeup, virtual makeup electronic system, and electronic device having virtual makeup electronic system
KR102214918B1 (ko) * 2014-10-21 2021-02-10 삼성전자주식회사 얼굴 인식 방법 및 장치
US20160127691A1 (en) * 2014-11-04 2016-05-05 WOW Insites LLP Method, computer program, and system for adjusting cameras
US10083345B2 (en) * 2015-05-05 2018-09-25 Myongsu Choe Makeup supporting methods for creating and applying a makeup guide content to makeup user's face on a real-time basis
US20160357578A1 (en) * 2015-06-03 2016-12-08 Samsung Electronics Co., Ltd. Method and device for providing makeup mirror
US9584716B2 (en) * 2015-07-01 2017-02-28 Sony Corporation Method and apparatus for autofocus area selection by detection of moving objects
KR102429427B1 (ko) * 2015-07-20 2022-08-04 삼성전자주식회사 촬영 장치 및 그 동작 방법
EP3335195A2 (en) * 2015-08-14 2018-06-20 Metail Limited Methods of generating personalized 3d head models or 3d body models
WO2017073001A1 (ja) * 2015-10-26 2017-05-04 パナソニックＩｐマネジメント株式会社 メイクパーツ生成装置およびメイクパーツ生成方法
JP6778877B2 (ja) * 2015-12-25 2020-11-04 パナソニックＩｐマネジメント株式会社 メイクパーツ作成装置、メイクパーツ利用装置、メイクパーツ作成方法、メイクパーツ利用方法、メイクパーツ作成プログラム、およびメイクパーツ利用プログラム
EP3423990A1 (en) * 2016-03-02 2019-01-09 Holition Limited Locating and augmenting object features in images
US10324739B2 (en) * 2016-03-03 2019-06-18 Perfect Corp. Systems and methods for simulated application of cosmetic effects

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1598683A (zh) * 2003-09-19 2005-03-23 松下电器产业株式会社 自动聚焦方法和自动聚焦照相机
CN101535889A (zh) * 2006-11-07 2009-09-16 索尼爱立信移动通讯股份有限公司 用户定义的自动聚焦区域
CN101246541A (zh) * 2007-02-16 2008-08-20 索尼株式会社 图像处理设备和方法、图像拾取设备、以及计算机程序
CN101383907A (zh) * 2007-09-04 2009-03-11 奥林巴斯映像株式会社 图像处理装置和图像处理方法
CN101719984A (zh) * 2009-11-09 2010-06-02 北京中星微电子有限公司 一种图像处理的装置
CN103780815A (zh) * 2009-11-25 2014-05-07 奥林巴斯映像株式会社 摄影系统、摄影设备以及摄影设备用附件设备
US20130089245A1 (en) * 2010-06-21 2013-04-11 Pola Chemical Industries, Inc. Age estimation method and sex determination method
CN102478700A (zh) * 2010-11-25 2012-05-30 财团法人工业技术研究院 自动聚焦装置及方法
US20120257000A1 (en) * 2011-04-07 2012-10-11 Tara Chand Singhal System and method for a grooming mirror in a portable electronic device with a user-facing camera
CN103493471A (zh) * 2011-04-23 2014-01-01 奥林巴斯映像株式会社 摄像装置和摄像方法
CN103970525A (zh) * 2013-01-25 2014-08-06 韩国电子通信研究院 用于虚拟化妆的设备和方法
CN104038691A (zh) * 2013-03-07 2014-09-10 联发科技股份有限公司 自动聚焦方法及自动聚焦装置
CN104380339A (zh) * 2013-04-08 2015-02-25 松下电器（美国）知识产权公司 能够将涂敷了化妆涂料的状态虚拟地再现的图像处理装置、图像处理方法、程序
CN104797165A (zh) * 2013-08-30 2015-07-22 松下知识产权经营株式会社 化妆辅助装置、化妆辅助方法以及化妆辅助程序
CN105574484A (zh) * 2014-11-04 2016-05-11 三星电子株式会社 电子装置及用于在电子装置中分析脸部信息的方法
CN104954695A (zh) * 2015-07-14 2015-09-30 厦门美图之家科技有限公司 一种视频拍摄的对焦锁定方法和系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111988530A (zh) * 2020-09-01 2020-11-24 青岛海信移动通信技术股份有限公司 移动终端及其拍照方法

Also Published As

Publication number Publication date
CN109196856B (zh) 2022-02-11
JP2017220158A (ja) 2017-12-14
JP6731616B2 (ja) 2020-07-29
WO2017212878A1 (ja) 2017-12-14
US10666853B2 (en) 2020-05-26
US20190297271A1 (en) 2019-09-26

Similar Documents

Publication Publication Date Title
CN109196856A (zh) 虚拟化妆装置和虚拟化妆方法
KR102283613B1 (ko) 아바타 생성 사용자 인터페이스
AU2020269590B2 (en) Avatar integration with multiple applications
EP3047884B1 (en) Program, information-processing device, information-processing system, and avatar generating method
JP6735325B2 (ja) アバター作成ユーザインターフェース
CN103024338B (zh) 具有图像捕获和分析模块的显示设备
EP3752904B1 (en) Avatar integration with multiple applications
US11145091B2 (en) Makeup simulation device, method, and non-transitory recording medium
CN103945104B (zh) 信息处理方法及电子设备
JP6111723B2 (ja) 画像生成装置、画像生成方法及びプログラム
CN105657249A (zh) 一种图像处理方法及用户终端
AU2021350084B2 (en) Systems, methods, and graphical user interfaces for updating display of a device relative to a user's body
CN110046020B (zh) 电子设备、计算机可读存储介质及电子设备处执行的方法
KR102378806B1 (ko) 아바타 생성 사용자 인터페이스
JP2000151985A (ja) 画像処理方法及び記録媒体
TW201531931A (zh) 用於改善顯示於電子裝置螢幕上的文字的可讀性之系統和方法
KR20190122740A (ko) 정보처리장치, 프로그램
JP2017004258A (ja) 画像処理装置、画像処理方法及びプログラム
JP2012065049A (ja) 画像処理装置及び画像処理方法
JP7502711B1 (ja) プログラム、情報処理方法、情報処理装置
JP6969622B2 (ja) 撮影遊戯装置およびプログラム
CN117351105A (zh) 图像编辑方法、终端和电子设备
JP2024082674A (ja) 情報処理装置、情報処理方法、およびプログラム
CN117572953A (zh) 一种视线识别方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20220211

CF01 Termination of patent right due to non-payment of annual fee