CN107220960A - 一种试妆方法、系统及设备 - Google Patents
一种试妆方法、系统及设备 Download PDFInfo
- Publication number
- CN107220960A CN107220960A CN201710390963.0A CN201710390963A CN107220960A CN 107220960 A CN107220960 A CN 107220960A CN 201710390963 A CN201710390963 A CN 201710390963A CN 107220960 A CN107220960 A CN 107220960A
- Authority
- CN
- China
- Prior art keywords
- face
- makeup
- image
- frame
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 65
- 239000002537 cosmetic Substances 0.000 title claims abstract description 11
- 230000000694 effects Effects 0.000 claims abstract description 69
- 230000001815 facial effect Effects 0.000 claims abstract description 58
- 239000000284 extract Substances 0.000 claims abstract description 10
- 238000000605 extraction Methods 0.000 claims description 9
- 230000006870 function Effects 0.000 claims description 4
- 108010001267 Protein Subunits Proteins 0.000 claims description 3
- 239000006071 cream Substances 0.000 description 7
- 210000004709 eyebrow Anatomy 0.000 description 6
- 238000009877 rendering Methods 0.000 description 4
- 239000000839 emulsion Substances 0.000 description 3
- 238000010030 laminating Methods 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 210000000720 eyelash Anatomy 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 238000009738 saturating Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0631—Item recommendations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Economics (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Development Economics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种试妆方法、系统及设备，该方法包括：当接收到用户的上妆指令，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像，并计算每一个所述人脸面部图像中各个人脸面部部位的位置，依据该上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应的位置上，提取出各个目标面部部位的位置；对提取出的所述各个目标面部部位进行上妆，并将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，并将得到的上妆后的每一帧视频画面按照预设的帧率进行展示。这样，可以对动态的图像进行上妆，并动态的展示上妆效果，而且展示的彩妆效果更加贴合实际中人脸的化妆效果。
Description
技术领域
本发明涉及图像处理领域，尤其涉及一种试妆方法、系统及设备。
背景技术
在购买化妆品时，用户往往需要在脸上试妆，并且可能会重复进行多次试妆，这样会对用户本来的妆容造成影响，并且用户操作起来也比较繁琐。
目前，存在很多对用户进行模拟上妆的产品，但是通常是先对人脸图像进行拍照或者上传人脸图像，然后在静止的图像上对人脸图像进行上妆，这种方式无法生动的向用户展示真实的上妆效果，用户体验性较差。现有技术中，虽然也存在对动态图像进行处理的产品，但是采用的是贴图的方式，这样无法看出贴合人脸的化妆效果，影响了化妆效果的展示。
发明内容
有鉴于此，本发明实施例公开了一种试妆方法、系统及设备，解决了现有技术中采用贴图的方式，而无法看出贴合人脸的化妆效果，从而影响了化妆效果展示的问题，并且实现了不间断的动态图像的显示。
本发明公开了一种试妆方法，所述方法包括：
当接收到用户的上妆指令时，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像；
计算每一个所述人脸面部图像中各个人脸面部部位的位置；
依据所述上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位；
对提取出的所述各个目标面部部位进行上妆，并将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；原每一帧人脸面部图像为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像；
按照预设的帧率，将上妆后的每一帧视频画面进行展示。
可选的，所述从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位，包括：
从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位所对应的关键点的像素点；
依据所述各个目标面部部位所对应的关键点的像素点，勾画出各个目标面部部位的轮廓线。
可选的，所述对提取出的所述各个目标面部部位进行上妆，包括：
确定所述彩妆指令对应的每一个彩妆效果；
将每一个彩妆效果，在该彩妆效果相对应的目标面部部位的轮廓线内进行渲染。
可选的，所述将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，包括：
依据所述上妆指令确定此次经过上妆的各个目标面部部位的透明度的值；
确定将各个目标面部部位进行叠加时的透明度和插值算法的比例；
依据所述透明度和差值算法的比例以及所述透明度的值，将此次经过上妆的各个目标面部部位叠加到原每一帧人脸面部图像对应的位置上。
可选的，所述将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；原每一帧人脸面部图像为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像，包括：
针对于任何一个目标面部部位，判断每一帧人脸面部图像在所述目标面部部位的位置上，是否叠加过经过上妆的所述目标面部部位；
若是没有叠加过经过上妆的所述目标面部部位，将此次经过上妆的所述目标面部部位叠加到每一帧人脸面部图像中所述目标面部部位的位置上；
若是叠加过经过上妆的所述目标面部部位，清除每一帧人脸面部图像在所述目标面部部位的位置上叠加的经过上妆的目标面部部位，并将此次经过上妆的目标面部部位叠加到原每一帧人脸面部图像在所述目标面部部位的位置上。
本发明实施例还公开了一种试妆系统，所述系统包括：
获取单元，用于当接收到用户的上妆指令时，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像；
计算单元，用于计算每一个所述人脸面部图像中各个人脸面部部位的位置；
提取单元，用于依据所述上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位；
上妆单元，用于对提取出的所述各个目标面部部位进行上妆；
叠加单元，用于将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；原每一帧人脸面部图像为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像；
展示单元，用于按照预设的帧率，将上妆后的每一帧视频画面进行展示。
可选的，所述提取单元包括：
提取子单元，用于从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位所对应的关键点的像素点；
勾画子单元，用于依据所述各个目标面部部位所对应的关键点的像素点，勾画出各个目标面部部位的轮廓线。
可选的，所述上妆单元包括：
第一确定子单元，用于确定所述彩妆指令对应的每一个彩妆效果；
上妆子单元，用于将每一个彩妆效果，在该彩妆效果相对应的目标面部部位的轮廓线内进行渲染。
可选的，所述叠加单元包括：
判断子单元，用于针对于任何一个目标面部部位，判断每一帧人脸面部图像在所述目标面部部位的位置上，是否叠加过经过上妆的所述目标面部部位；
第二叠加子单元，用于若是没有叠加过经过上妆的所述目标面部部位，将此次经过上妆的所述目标面部部位叠加到每一帧人脸面部图像中所述目标面部部位的位置上；
第三叠加子单元，用于若是叠加过经过上妆的所述目标面部部位，清除每一帧人脸面部图像在所述目标面部部位的位置上叠加的经过上妆的目标面部部位，并将此次经过上妆的目标面部部位叠加到原每一帧人脸面部图像在所述目标面部部位的位置上。
本发明实施例还公开了一种试妆设备，所述设备可以包括：
存储器、处理器、视频采集器和图像显示器；
其中，所述存储器与所述处理器连接，用于存储程序，以及程序运行过程中产生的数据；
所述处理器，用于通过运行所述存储器中存储的程序，实现以下功能：
当接收到用户的上妆指令时，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像；
计算每一个所述人脸面部图像中各个人脸面部部位的位置；
依据所述上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位；
对提取出的所述各个目标面部部位进行上妆，并将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；原每一帧人脸面部图像为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像；
按照预设的帧率，将上妆后的每一帧视频画面进行展示。
本实施例中，当接收到用户的上妆指令，对当前视频流中每一帧视频画面中包含的人脸面部图像进行上妆时；首先，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像，并计算每一个所述人脸面部图像中各个人脸面部部位的位置，依据该上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应的位置上，提取出各个目标面部部位的位置；对提取出的所述各个目标面部部位进行上妆，并将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，并将得到的上妆后的每一帧视频画面按照预设的帧率进行展示。这样，可以对动态的图像进行上妆，并动态的展示上妆效果，而且，通过本实施例的方法展示的彩妆效果更加贴合实际中人脸的化妆效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1示出了本发明实施例提供的一种试妆方法的流程示意图；
图2示出了本发明实施例提供的一种试妆实例展示图；
图3示出了本发明实施例提供的一种试妆方法的流程示意图；
图4示出了本发明实施例提供的一种试妆系统的结构示意图；
图5示出了本发明实施例提供的一种试妆设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本实施例中，需要说明的是，本实施例中，本实施例提供的方法的执行主体可以是电脑、手机、IPAD等可以执行所述方法的终端。
参考图1，示出了本发明实施例提出的一种试妆方法的流程示意图，在本实施例中，所述方法可以包括：
S101：当接收到用户的上妆指令时，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像；
本实施例中，当接收到用户的上妆指令时，可以实时的对当前采集到的视频流中每一帧视频画面中包含的人脸面部图像进行上妆，因此，首先需要实时获取当前视频流中每一帧视频画面中包含的人脸面部图像。
本实施例中，S101中实时获取当前视频流中每一帧视频画面中包含的人脸面部图像，具体可以包括：
实时采集当前视频流；
实时捕捉所述当前视频流中每一帧视频画面；
实时获取所述每一帧视频画面中包含的人脸面部图像。
本实施例中，所述用户可以选择的彩妆可以包括多种，例如可以包括：粉底液、唇膏、眼影、眼线笔、睫毛膏等(如图2所示)；用户选择了彩妆后，可以生成相应的上妆指令，上妆指令例如可以包括以下的一种或者多种：粉底液上妆指令、唇膏上妆指令、眼线上妆指令、睫毛上妆指令等。
S102：计算每一个所述人脸面部图像中各个人脸面部部位的位置；
本实施例中，人脸图像包括多个面部特征，例如可以包括面部轮廓和五官对应的多个面部部位，其中，五官对应的多个部位可以包括：眉毛、眼睛、鼻子和嘴巴。而，每个面部部位对应于多个关键点，也可以理解为根据这些关键点可以勾勒出该面部部位的轮廓。其中，眉毛的关键点可以包括：眉头、眉峰、眉尾等可以勾勒眉毛轮廓的特征点；眼睛的关键点可以包括：眼角、眼中心、眼头等可以勾勒眼睛轮廓的特征点；鼻子的关键点点可以包括：鼻尖、鼻翼以及可以勾勒鼻子轮廓的特征点；嘴巴的关键点可以包括：可以勾勒嘴巴轮廓的各个特征点。对面部上妆时，也是对面部和五官的多个部位进行上妆。
本实施例中，S102可以理解为，计算每一帧视频画面中包含的人脸面部图像中各个人脸面部部位的位置，也可以理解为先计算每个面部部位关键点在每一帧画面中的坐标位置，也就是每个关键点的像素点，然后根据这些坐标位置计算出每个面部部位在每一帧画面中的位置。
本实施例中，计算人脸面部图像中的各个面部部位的位置，要通过对人脸的识别、面部部位的检测、提取，进而对面部部位中的关键点进行计算，具体的可以包括以下的步骤：
1)对该目标人脸图像平滑除噪；
针对图像中噪点的存在，对图像进行平滑处理,采用不同参数的平滑函数，对图像进行平滑处理。
2)从该人脸面部图像中提取各个面部部位；
提取图像中不同的区域块并结合相关的局部纹理算法对子图集合进行特征提取，并且划定范围对特征进行量化集合。
在本实施例中，提取图像中不同的特征区域，并结合相关的局部纹理算法对预设的面部部位进行提取，例如：对眼睛、眉毛等特征点的提取。
3)特征检索和点定位；
深入分析人脸图像的特点，根据算法训练得到的模型特征库判断人脸并搜索最佳像素点，达到对提取出的面部部位精确检测定位的目的，从而得到提取出的面部部位的坐标位置。
S103：依据所述上妆指令确定需要上妆的至少一个目标面部部位，并依据各个目标面部部位的位置，提取出所述各个目标面部部位；
本实施例中，所述上妆指令可以包括对面部部位中的一个或者多个进行上妆，例如用户选择的彩妆为唇膏和眼影，则上妆指令确定的需要上妆的目标面部特征可以为嘴巴和眼睛。
本实施例中，可以根据各个需要上妆的目标面部部位的位置，将各个目标面部部位提取出来，具体的，可以包括：
从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位所对应的关键点的像素点；
依据所述各个面部部位所对应的关键点的像素点，勾画出各个目标面部部位的轮廓线。
举例说明：若用户选择的彩妆为唇膏，则对应的面部部位为嘴巴，提取出每一帧视频画面中人脸面部图像中的构成嘴巴轮廓的一些关键点的像素点，并依据这些关键点的像素点，勾画出每一个嘴巴的轮廓线。
S104：对提取出的所述各个目标面部部位进行上妆，并将经过上妆的各个目标面部部位依据预设的方法叠加到每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；
本实施例中，为了避免对面部部位进行彩妆效果的渲染时，超出一定的范围，需要在面部部位的轮廓线内进行渲染，具体的S104包括：
确定所述彩妆指令对应的每一个彩妆效果；
将每一个彩妆效果，在该彩妆效果相对应的面部部位的轮廓线内进行渲染。
本实施例中，用户可以选择一种彩妆也可以选择多种彩妆，若是选择一种彩妆，只需要将用户选择的该彩妆的彩妆效果，在该彩妆对应的面部部位的轮廓线内进行渲染；若是选择多种彩妆，则上妆指令对应多个彩妆效果，每一个彩妆效果对应一个面部部位，将每一个彩妆效果在对应的面部部位的轮廓线内进行渲染。
举例说明：假如用户选择的彩妆包括：粉底和唇膏，则上妆指令对应多个彩妆效果为粉底效果和唇膏效果，粉底对应的面部部位为面部轮廓、唇膏对应的面部部位为嘴巴，对面部部位进行上妆时，可以是对每一帧人脸面部图像的脸部轮廓进行粉底效果的渲染，对每一帧人脸面部图像的嘴巴进行唇膏效果的渲染。
本实施例中，为了向用户展示的彩妆更加的真实，在将上妆后的面部部位叠加到每一帧人脸面部图像对应的位置上时，需要采用合适的透明度和插值算法，具体的可以包括：
依据所述上妆指令确定此次经过上妆的各个目标面部部位的透明度的值；
确定将各个目标面部部位进行叠加时的透明度和插值算法的比例；
依据所述透明度和差值算法的比例以及所述透明度的值，将经过上妆的各个目标面部部位叠加到原每一帧人脸面部图像对应的位置上。
本实施例中，不同的彩妆所用的透明度和插值算法的比例不同，为了展示不同的效果，彩妆的透明度的值也不同；相同的彩妆，不同的颜色或者型号，所用到的透明度和插值算法的比例也不同，透明度的值也不同。
举例说明：口红和粉底液展示的彩妆效果不同，所用到的透明度和插值算法的比例、以及透明度的值不同；不同的口红的颜色所用的透明度和插值算法的比例不同、透明度的值也不同。
本实施例中，原每一帧人脸面部图像可以理解为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像。例如：假设用户第一次选择的口红的颜色为红色，对于每一帧当前的视频流，都会叠加了红色口红的效果，当用户更换口红颜色后，假设第二次选择的口红的颜色为粉色，则应该将红色口红的效果清除后，再将粉色口红的效果叠加到当前视频流对应的原每一帧人脸面部图像上，具体的，如图3所示，S104可以包括：
S201：针对于任何一个目标面部部位，判断每一帧人脸面部图像在所述目标面部部位的位置上，是否叠加过经过上妆的所述目标面部部位；
S202：若是没有叠加过经过上妆的所述目标面部部位，将此次经过上妆的所述目标面部部位叠加到每一帧人脸面部图像中所述目标面部部位的位置上；
S203：若是叠加过经过上妆的所述目标面部部位，清除每一帧人脸面部图像在所述目标面部部位的位置上叠加的经过上妆的目标面部部位，并将此次经过上妆的目标面部部位叠加到原每一帧人脸面部图像在所述目标面部部位的位置上。
S105：按照预设的帧率，将上妆后的每一帧视频画面进行展示。
本实施例中，用户选择的彩妆可以同时为一个或者多个，则上妆指令对应的面部部位也可以为一个或者多个；当用户选择的彩妆为一个时，假设该彩妆为口红，则该彩妆对应的面部部位为嘴巴，对每一帧的视频画面对应的嘴巴渲染了口红的效果后，将渲染后的嘴巴叠加到原每一帧人脸面部图像对应的位置上；则此时，针对于叠加了口红效果的每一帧视频画面，按照预设的方法，按照预设的帧率依次进行展示；若用户选择的彩妆为多个，假设用户选择的彩妆包括口红和粉底，则对应的面部部位分别为嘴巴和脸部轮廓，将每一帧上的嘴巴和脸部轮廓上妆后，依次将上妆后的嘴巴叠加到原每一帧人脸面部图像对应的嘴巴的位置上，将上妆后的脸部轮廓叠加到原每一帧人脸面部图像对应脸部轮廓的位置上；则此时，针对于叠加了口红效果和粉底效果的每一帧视频画面，按照预设的帧率依次进行展示。
通过以上的描述可知，在实际应用中，对上妆后的每一帧视频画面，进行展示，可以包括以下的几种方式：
方式一：将不同的彩妆逐一进行展示；
具体的，用户可以先选择一个彩妆，对该彩妆进行展示后，用户可以选择其它彩妆，然后再对再次选择的彩妆进行展示。
举例说明：假设用户首先选择的彩妆是红色口红，当对该红色口红的彩妆效果进行展示后，若用户再次选择眼影，可以在叠加了红色口红的彩妆效果的当前视频流的每一帧人脸面部图像上叠加上眼影的彩妆效果；但是当用户再次选择的彩妆为粉色口红时，可以将叠加了红色口红彩妆效果的当前视频流的每一帧人脸面部图像上叠加的红色口红效果清除后，叠加上粉色口红的彩妆效果，并对粉色口红的彩妆效果进行展示。
方式二：将不同的彩妆同时叠加后，同时进行展示；
具体的，用户可以同时选择多个彩妆，当对这多个彩妆效果渲染到相对应的面部部位后，将多个上妆后的面部部位依次叠加到原每一帧人脸面部图像对应的位置上，然后对这些彩妆效果同时展示。
本实施例中，当接收到用户的上妆指令，对当前视频流中每一帧视频画面中包含的人脸面部图像进行上妆时；首先，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像，并计算每一个所述人脸面部图像中各个人脸面部部位的位置，依据该上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应的位置上，提取出各个目标面部部位的位置；对提取出的所述各个目标面部部位进行上妆，并将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，并将得到的上妆后的每一帧视频画面按照预设的帧率进行展示。这样，可以对动态的图像进行上妆，并动态的展示上妆效果，而且，通过本实施例的方法展示的彩妆效果更加贴合实际中人脸的化妆效果。
参考图4，示出了本发明实施例提供的一种试妆系统的结构示意图，在本实施例中，所述系统可以包括：
获取单元301，用于当接收到用户的上妆指令时，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像；
计算单元302，用于计算每一个所述人脸面部图像中各个人脸面部部位的位置；
提取单元303，用于依据所述上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位；
上妆单元304，用于对提取出的所述各个目标面部部位进行上妆；
叠加单元305，用于将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；原每一帧人脸面部图像为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像；
展示单元306，用于按照预设的帧率，将上妆后的每一帧视频画面进行展示。
可选的，所述提取单元包括：
提取子单元，用于从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位所对应的关键点的像素点；
勾画子单元，用于依据所述各个面部部位所对应的关键点的像素点，勾画出各个目标面部部位的轮廓线。
可选的，所述上妆单元包括：
第一确定子单元，用于确定所述彩妆指令对应的每一个彩妆效果；
上妆子单元，用于将每一个彩妆效果，在该彩妆效果相对应的目标面部部位的轮廓线内进行渲染。
可选的，所述叠加单元包括：
第二确定子单元，用于依据所述上妆指令确定经过上妆的各个目标面部部位的透明度的值；
第三确定子单元，用于确定将各个目标面部部位进行叠加时的透明度和插值算法的比例；
第一叠加子单元，用于依据所述透明度和差值算法的比例以及所述透明度的值，将此次经过上妆的各个目标面部部位叠加到原每一帧人脸面部图像对应的位置上。
可选的，所述叠加单元包括：
判断子单元，用于针对于任何一个目标面部部位，判断每一帧人脸面部图像在所述目标面部部位的位置上，是否叠加过经过上妆的所述目标面部部位；
第二叠加子单元，用于若是没有叠加过经过上妆的所述目标面部部位，将此次经过上妆的所述目标面部部位叠加到每一帧人脸面部图像中所述目标面部部位的位置上；
第三叠加子单元，用于若是叠加过经过上妆的所述目标面部部位，清除每一帧人脸面部图像在所述目标面部部位的位置上叠加的经过上妆的目标面部部位，并将此次经过上妆的目标面部部位叠加到原每一帧人脸面部图像在所述目标面部部位的位置上。
本实施例中，需要说明的是，所述试妆系统可以是安装在终端上的APP。其中，终端可以包括：电脑、手机、IPAD等。
本实施例中，当接收到用户的上妆指令，对当前视频流中每一帧视频画面中包含的人脸面部图像进行上妆时；首先，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像，并计算每一个所述人脸面部图像中各个人脸面部部位的位置，依据该上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应的位置上，提取出各个目标面部部位的位置；对提取出的所述各个目标面部部位进行上妆，并将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，并将得到的上妆后的每一帧视频画面按照预设的帧率进行展示。这样，可以对动态的图像进行上妆，并动态的展示上妆效果，而且，通过本实施例的系统展示的彩妆效果更加贴合实际中人脸的化妆效果。
参考图5示出了本发明实施例提供的一种试妆设备的结构示意图，在本实施例中，所述设备可以包括：
存储器401、处理器402、视频采集器403和图像显示器404；
其中，所述存储器401与所述处理器402连接，用于存储程序，以及程序运行过程中产生的数据；
所述处理器402，用于通过运行所述存储器中存储的程序，实现以下功能：
当接收到用户的上妆指令时，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像；
计算每一个所述人脸面部图像中各个人脸面部部位的位置；
依据所述上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位；
对提取出的所述各个目标面部部位进行上妆，并将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；原每一帧人脸面部图像为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像；
按照预设的帧率，将上妆后的每一帧视频画面进行展示。
其中，所述视频采集器403可以用于当接收到用户的上妆指令时，实时获取当前视频流获取；
所述图像显示器404可以用于对每一帧视频画面进行显示。
该图像显示器404，可以对视频采集器采集到的每一帧视频画面进行显示，包括：上妆前前的视频画面和上妆后的视频画面。
可选的，所述处理器402从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位时，具体用于：
从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位所对应的关键点的像素点；
依据所述各个目标面部部位所对应的关键点的像素点，勾画出各个目标面部部位的轮廓线。
可选的，所述处理器402对提取出的所述各个目标面部部位进行上妆时，具体用于：
确定所述彩妆指令对应的每一个彩妆效果；
将每一个彩妆效果，在该彩妆效果相对应的目标面部部位的轮廓线内进行渲染。
可选的，所述处理器402将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上时，具体用于：
依据所述上妆指令确定此次经过上妆的各个目标面部部位的透明度的值；
确定将各个目标面部部位进行叠加时的透明度和插值算法的比例；
依据所述透明度和差值算法的比例以及所述透明度的值，将此次经过上妆的各个目标面部部位叠加到原每一帧人脸面部图像对应的位置上。
可选的，所述处理器402将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；原每一帧人脸面部图像为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像时，具体用于：
针对于任何一个目标面部部位，判断每一帧人脸面部图像在所述目标面部部位的位置上，是否叠加过经过上妆的所述目标面部部位；
若是没有叠加过经过上妆的所述目标面部部位，将此次经过上妆的所述目标面部部位叠加到每一帧人脸面部图像中所述目标面部部位的位置上；
若是叠加过经过上妆的所述目标面部部位，清除每一帧人脸面部图像在所述目标面部部位的位置上叠加的经过上妆的目标面部部位，并将此次经过上妆的目标面部部位叠加到原每一帧人脸面部图像在所述目标面部部位的位置上。
本实施例中，所述试妆设备可以是终端上的硬件设备，其中，终端可以包括：电脑、手机、IPAD等。
通过本实施例中的设备，可以对动态的图像进行上妆，并动态的展示上妆效果，而且，通过本实施例的方法展示的彩妆效果更加贴合实际中人脸的化妆效果。
需要说明的是，本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种试妆方法，其特征在于，所述方法包括：
当接收到用户的上妆指令时，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像；
计算每一个所述人脸面部图像中各个人脸面部部位的位置；
依据所述上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位；
对提取出的所述各个目标面部部位进行上妆，并将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；原每一帧人脸面部图像为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像；
按照预设的帧率，将上妆后的每一帧视频画面进行展示。
2.根据权利要求1所述的方法，其特征在于，所述从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位，包括：
从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位所对应的关键点的像素点；
依据所述各个目标面部部位所对应的关键点的像素点，勾画出各个目标面部部位的轮廓线。
3.根据权利要求2所述的方法，其特征在于，所述对提取出的所述各个目标面部部位进行上妆，包括：
确定所述彩妆指令对应的每一个彩妆效果；
将每一个彩妆效果，在该彩妆效果相对应的目标面部部位的轮廓线内进行渲染。
4.根据权利要求1所述的方法，其特征在于，所述将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，包括：
依据所述上妆指令确定此次经过上妆的各个目标面部部位的透明度的值；
确定将各个目标面部部位进行叠加时的透明度和插值算法的比例；
依据所述透明度和差值算法的比例以及所述透明度的值，将此次经过上妆的各个目标面部部位叠加到原每一帧人脸面部图像对应的位置上。
5.根据权利要求1所述的方法，其特征在于，所述将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；原每一帧人脸面部图像为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像，包括：
针对于任何一个目标面部部位，判断每一帧人脸面部图像在所述目标面部部位的位置上，是否叠加过经过上妆的所述目标面部部位；
若是没有叠加过经过上妆的所述目标面部部位，将此次经过上妆的所述目标面部部位叠加到每一帧人脸面部图像中所述目标面部部位的位置上；
若是叠加过经过上妆的所述目标面部部位，清除每一帧人脸面部图像在所述目标面部部位的位置上叠加的经过上妆的目标面部部位，并将此次经过上妆的目标面部部位叠加到原每一帧人脸面部图像在所述目标面部部位的位置上。
6.一种试妆系统，其特征在于，所述系统包括：
获取单元，用于当接收到用户的上妆指令时，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像；
计算单元，用于计算每一个所述人脸面部图像中各个人脸面部部位的位置；
提取单元，用于依据所述上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位；
上妆单元，用于对提取出的所述各个目标面部部位进行上妆；
叠加单元，用于将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；原每一帧人脸面部图像为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像；
展示单元，用于按照预设的帧率，将上妆后的每一帧视频画面进行展示。
7.根据权利要求6所述的系统，其特征在于，所述提取单元包括：
提取子单元，用于从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位所对应的关键点的像素点；
勾画子单元，用于依据所述各个目标面部部位所对应的关键点的像素点，勾画出各个目标面部部位的轮廓线。
8.根据权利要求7所述的系统，其特征在于，所述上妆单元包括：
第一确定子单元，用于确定所述彩妆指令对应的每一个彩妆效果；
上妆子单元，用于将每一个彩妆效果，在该彩妆效果相对应的目标面部部位的轮廓线内进行渲染。
9.根据权利要求6所述的系统，其特征在于，所述叠加单元包括：
判断子单元，用于针对于任何一个目标面部部位，判断每一帧人脸面部图像在所述目标面部部位的位置上，是否叠加过经过上妆的所述目标面部部位；
第二叠加子单元，用于若是没有叠加过经过上妆的所述目标面部部位，将此次经过上妆的所述目标面部部位叠加到每一帧人脸面部图像中所述目标面部部位的位置上；
第三叠加子单元，用于若是叠加过经过上妆的所述目标面部部位，清除每一帧人脸面部图像在所述目标面部部位的位置上叠加的经过上妆的目标面部部位，并将此次经过上妆的目标面部部位叠加到原每一帧人脸面部图像在所述目标面部部位的位置上。
10.一种试妆设备，其特征在于，所述设备包括：
存储器、处理器、视频采集器和图像显示器；
其中，所述存储器与所述处理器连接，用于存储程序，以及程序运行过程中产生的数据；
所述处理器，用于通过运行所述存储器中存储的程序，实现以下功能：
当接收到用户的上妆指令时，实时获取当前视频流中每一帧视频画面中包含的人脸面部图像；
计算每一个所述人脸面部图像中各个人脸面部部位的位置；
依据所述上妆指令确定需要上妆的至少一个目标面部部位，并从每一个人脸面部图像的相应位置上，提取出所述各个目标面部部位；
对提取出的所述各个目标面部部位进行上妆，并将此次经过上妆的各个目标面部部位依据预设的方法叠加到原每一帧人脸面部图像对应的位置上，得到上妆后的每一帧视频画面；原每一帧人脸面部图像为未叠加过任何经过上妆的目标面部部位的每一帧人脸面部图像；
按照预设的帧率，将上妆后的每一帧视频画面进行展示。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710390963.0A CN107220960B (zh) | 2017-05-27 | 2017-05-27 | 一种试妆方法、系统及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710390963.0A CN107220960B (zh) | 2017-05-27 | 2017-05-27 | 一种试妆方法、系统及设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107220960A true CN107220960A (zh) | 2017-09-29 |
| CN107220960B CN107220960B (zh) | 2021-01-05 |
Family
ID=59947913
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710390963.0A Active CN107220960B (zh) | 2017-05-27 | 2017-05-27 | 一种试妆方法、系统及设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107220960B (zh) |
Cited By (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108537722A (zh) * | 2018-03-30 | 2018-09-14 | 北京金山安全软件有限公司 | 图像处理方法、装置、电子设备及介质 |
| CN108564526A (zh) * | 2018-03-30 | 2018-09-21 | 北京金山安全软件有限公司 | 一种图像处理方法、装置、电子设备及介质 |
| CN108606453A (zh) * | 2018-04-19 | 2018-10-02 | 郑蒂 | 一种智能化妆镜 |
| CN109583385A (zh) * | 2018-11-30 | 2019-04-05 | 深圳市脸萌科技有限公司 | 人脸图像处理方法、装置、电子设备及计算机存储介质 |
| CN109712013A (zh) * | 2018-11-16 | 2019-05-03 | 北京达佳互联信息技术有限公司 | 页面交互方法和装置 |
| CN109961566A (zh) * | 2017-12-26 | 2019-07-02 | 阿里巴巴集团控股有限公司 | 自动售货机及其信息处理方法、装置及系统 |
| CN110135929A (zh) * | 2018-02-02 | 2019-08-16 | 英属开曼群岛商玩美股份有限公司 | 实行于虚拟化妆应用程序的系统、方法及存储媒体 |
| CN110223094A (zh) * | 2018-03-02 | 2019-09-10 | 阿里巴巴集团控股有限公司 | 展示设备、方法和系统 |
| CN110728618A (zh) * | 2018-07-17 | 2020-01-24 | 阿里巴巴集团控股有限公司 | 虚拟试妆的方法、装置、设备及图像处理方法 |
| CN111259696A (zh) * | 2018-11-30 | 2020-06-09 | 百度在线网络技术（北京）有限公司 | 用于显示图像的方法及装置 |
| CN111586428A (zh) * | 2020-04-30 | 2020-08-25 | 永康精信软件开发有限公司 | 具有虚拟人物上妆功能的化妆品直播系统及方法 |
| CN112819767A (zh) * | 2021-01-26 | 2021-05-18 | 北京百度网讯科技有限公司 | 图像处理方法、装置、设备、存储介质以及程序产品 |
| CN113301243A (zh) * | 2020-09-14 | 2021-08-24 | 阿里巴巴集团控股有限公司 | 图像处理方法、交互方法、系统、装置、设备和存储介质 |
| CN113453027A (zh) * | 2020-03-27 | 2021-09-28 | 阿里巴巴集团控股有限公司 | 直播视频、虚拟上妆的图像处理方法、装置及电子设备 |
| CN113450367A (zh) * | 2020-03-24 | 2021-09-28 | 北京字节跳动网络技术有限公司 | 图像处理方法及装置 |
| US11404086B2 (en) | 2020-02-14 | 2022-08-02 | Perfect Mobile Corp. | Systems and methods for segment-based virtual application of makeup effects to facial regions displayed in video frames |
| US11922540B2 (en) | 2020-02-14 | 2024-03-05 | Perfect Mobile Corp. | Systems and methods for segment-based virtual application of facial effects to facial regions displayed in video frames |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101779218A (zh) * | 2007-08-10 | 2010-07-14 | 株式会社资生堂 | 化妆模拟系统、化妆模拟装置、化妆模拟方法以及化妆模拟程序 |
| CN102184714A (zh) * | 2010-06-22 | 2011-09-14 | 上海盈方微电子有限公司 | 一种提高插值效率的lcd图像缩放实现方法 |
| CN102262788A (zh) * | 2010-05-24 | 2011-11-30 | 上海一格信息科技有限公司 | 个人三维形象互动试妆信息数据处理方法及装置 |
| CN102436668A (zh) * | 2011-09-05 | 2012-05-02 | 上海大学 | 京剧脸谱自动化妆方法 |
| CN103093357A (zh) * | 2012-12-07 | 2013-05-08 | 江苏乐买到网络科技有限公司 | 一种网络购物中的彩妆试妆系统 |
| US8505552B1 (en) * | 2012-06-08 | 2013-08-13 | Anastasia Soare | Golden ratio eyebrow overlay device |
| CN103714225A (zh) * | 2012-09-28 | 2014-04-09 | 由田新技股份有限公司 | 自动彩妆的信息系统及其进行上妆方法 |
| CN104463938A (zh) * | 2014-11-25 | 2015-03-25 | 福建天晴数码有限公司 | 三维虚拟试妆方法和装置 |
| CN106447739A (zh) * | 2016-09-30 | 2017-02-22 | 北京美到家科技有限公司 | 化妆区域动态图像生成方法、美妆辅助方法及其装置 |
| CN106682958A (zh) * | 2016-11-21 | 2017-05-17 | 汕头市智美科技有限公司 | 一种虚拟试妆方法及装置 |
-
2017
- 2017-05-27 CN CN201710390963.0A patent/CN107220960B/zh active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101779218A (zh) * | 2007-08-10 | 2010-07-14 | 株式会社资生堂 | 化妆模拟系统、化妆模拟装置、化妆模拟方法以及化妆模拟程序 |
| CN102262788A (zh) * | 2010-05-24 | 2011-11-30 | 上海一格信息科技有限公司 | 个人三维形象互动试妆信息数据处理方法及装置 |
| CN102184714A (zh) * | 2010-06-22 | 2011-09-14 | 上海盈方微电子有限公司 | 一种提高插值效率的lcd图像缩放实现方法 |
| CN102436668A (zh) * | 2011-09-05 | 2012-05-02 | 上海大学 | 京剧脸谱自动化妆方法 |
| US8505552B1 (en) * | 2012-06-08 | 2013-08-13 | Anastasia Soare | Golden ratio eyebrow overlay device |
| CN103714225A (zh) * | 2012-09-28 | 2014-04-09 | 由田新技股份有限公司 | 自动彩妆的信息系统及其进行上妆方法 |
| CN103093357A (zh) * | 2012-12-07 | 2013-05-08 | 江苏乐买到网络科技有限公司 | 一种网络购物中的彩妆试妆系统 |
| CN104463938A (zh) * | 2014-11-25 | 2015-03-25 | 福建天晴数码有限公司 | 三维虚拟试妆方法和装置 |
| CN106447739A (zh) * | 2016-09-30 | 2017-02-22 | 北京美到家科技有限公司 | 化妆区域动态图像生成方法、美妆辅助方法及其装置 |
| CN106682958A (zh) * | 2016-11-21 | 2017-05-17 | 汕头市智美科技有限公司 | 一种虚拟试妆方法及装置 |
Non-Patent Citations (3)
| Title |
|---|
| XINJIE ZHANG ET AL.: "Modeling Expressions of Peking Opera Facial Make-up", 《2011 12TH INTERNATIONAL CONFERENCE ON COMPUTER-AIDED DESIGN AND COMPUTER GRAPHICS》 * |
| 杜辉 等: "个性化虚拟化妆效果迁移", 《计算机辅助设计与图形学学报》 * |
| 蔡春花: "基于Linux的虚拟试妆系统设计", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109961566A (zh) * | 2017-12-26 | 2019-07-02 | 阿里巴巴集团控股有限公司 | 自动售货机及其信息处理方法、装置及系统 |
| CN110135929A (zh) * | 2018-02-02 | 2019-08-16 | 英属开曼群岛商玩美股份有限公司 | 实行于虚拟化妆应用程序的系统、方法及存储媒体 |
| CN110223094A (zh) * | 2018-03-02 | 2019-09-10 | 阿里巴巴集团控股有限公司 | 展示设备、方法和系统 |
| CN108537722A (zh) * | 2018-03-30 | 2018-09-14 | 北京金山安全软件有限公司 | 图像处理方法、装置、电子设备及介质 |
| CN108564526A (zh) * | 2018-03-30 | 2018-09-21 | 北京金山安全软件有限公司 | 一种图像处理方法、装置、电子设备及介质 |
| CN108606453A (zh) * | 2018-04-19 | 2018-10-02 | 郑蒂 | 一种智能化妆镜 |
| CN110728618A (zh) * | 2018-07-17 | 2020-01-24 | 阿里巴巴集团控股有限公司 | 虚拟试妆的方法、装置、设备及图像处理方法 |
| CN110728618B (zh) * | 2018-07-17 | 2023-06-27 | 淘宝（中国）软件有限公司 | 虚拟试妆的方法、装置、设备及图像处理方法 |
| CN109712013A (zh) * | 2018-11-16 | 2019-05-03 | 北京达佳互联信息技术有限公司 | 页面交互方法和装置 |
| CN109583385A (zh) * | 2018-11-30 | 2019-04-05 | 深圳市脸萌科技有限公司 | 人脸图像处理方法、装置、电子设备及计算机存储介质 |
| CN111259696A (zh) * | 2018-11-30 | 2020-06-09 | 百度在线网络技术（北京）有限公司 | 用于显示图像的方法及装置 |
| CN111259696B (zh) * | 2018-11-30 | 2023-08-29 | 百度在线网络技术（北京）有限公司 | 用于显示图像的方法及装置 |
| US11404086B2 (en) | 2020-02-14 | 2022-08-02 | Perfect Mobile Corp. | Systems and methods for segment-based virtual application of makeup effects to facial regions displayed in video frames |
| US11922540B2 (en) | 2020-02-14 | 2024-03-05 | Perfect Mobile Corp. | Systems and methods for segment-based virtual application of facial effects to facial regions displayed in video frames |
| CN113450367A (zh) * | 2020-03-24 | 2021-09-28 | 北京字节跳动网络技术有限公司 | 图像处理方法及装置 |
| CN113453027A (zh) * | 2020-03-27 | 2021-09-28 | 阿里巴巴集团控股有限公司 | 直播视频、虚拟上妆的图像处理方法、装置及电子设备 |
| CN111586428A (zh) * | 2020-04-30 | 2020-08-25 | 永康精信软件开发有限公司 | 具有虚拟人物上妆功能的化妆品直播系统及方法 |
| CN113301243A (zh) * | 2020-09-14 | 2021-08-24 | 阿里巴巴集团控股有限公司 | 图像处理方法、交互方法、系统、装置、设备和存储介质 |
| CN113301243B (zh) * | 2020-09-14 | 2023-08-11 | 阿里巴巴（北京）软件服务有限公司 | 图像处理方法、交互方法、系统、装置、设备和存储介质 |
| CN112819767A (zh) * | 2021-01-26 | 2021-05-18 | 北京百度网讯科技有限公司 | 图像处理方法、装置、设备、存储介质以及程序产品 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN107220960B (zh) | 2021-01-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107220960A (zh) | 一种试妆方法、系统及设备 | |
| US10292481B2 (en) | Makeup application assistance device, makeup application assistance method, and makeup application assistance program | |
| US20180012390A1 (en) | Enhancing video chatting | |
| EP2820970B1 (en) | Makeup application assistance device, makeup application assistance method, and makeup application assistance program | |
| US9760935B2 (en) | Method, system and computer program product for generating recommendations for products and treatments | |
| CN109801380A (zh) | 一种虚拟试衣的方法、装置、存储介质及计算机设备 | |
| US20130169827A1 (en) | Method and system for make-up simulation on portable devices having digital cameras | |
| CN108537126B (zh) | 一种人脸图像处理方法 | |
| CN111783511A (zh) | 美妆处理方法、装置、终端以及存储介质 | |
| CN109712080A (zh) | 图像处理方法、图像处理装置及存储介质 | |
| CN108399654B (zh) | 描边特效程序文件包的生成及描边特效生成方法与装置 | |
| CN104463938A (zh) | 三维虚拟试妆方法和装置 | |
| CN108664884B (zh) | 一种虚拟试妆方法及装置 | |
| WO2018079255A1 (ja) | 画像処理装置、画像処理方法、および画像処理プログラム | |
| CN106682632A (zh) | 用于处理人脸图像的方法和装置 | |
| WO2015017687A2 (en) | Systems and methods for producing predictive images | |
| CN108227922A (zh) | 一种虚拟现实的实时数字影像上妆方法 | |
| US9965778B2 (en) | System and method for the indication of modification region boundaries on facial images | |
| CN106447739A (zh) | 化妆区域动态图像生成方法、美妆辅助方法及其装置 | |
| KR20190043925A (ko) | 헤어 스타일 시뮬레이션 서비스를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체 | |
| JP6128356B2 (ja) | メイクアップ支援装置およびメイクアップ支援方法 | |
| JP2019512141A (ja) | 顔モデル編集方法及び装置 | |
| CN114155569B (zh) | 一种化妆进度检测方法、装置、设备及存储介质 | |
| Evangelista et al. | Realistic AR makeup over diverse skin tones on mobile | |
| JP6128357B2 (ja) | メイクアップ支援装置およびメイクアップ支援方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |