CN117769723A - 增强的现实化妆设计过滤器 - Google Patents

Abstract

用于生成、共享和呈现增强的现实化妆设计滤镜的系统、设备和方法。一个或多个非暂态计算机存储设备可以存储计算机可读指令，当计算电路执行该计算机可读指令时，使得计算电路执行用于生成增强的现实化妆设计滤镜的操作。操作可以包括使用一个或多个辐射传感器来限定生物表面的基线描述，辐射传感器与计算电路电耦合。操作可以包括使用辐射传感器中的一个或多个识别来化妆品制剂向生物表面的施用。操作可以包括参考基线描述来生成描述施用的迹线。操作还可以包括输出迹线。

Description

增强的现实化妆设计过滤器

相关申请的交叉引用

本申请要求于2021年9月30日提交的美国专利申请No.17/491,061和于2021年12月15日提交的法国专利申请No.FR 2113547的权益，其内容通过引用整体并入本文。

发明内容

用于生成、共享和呈现增强的现实化妆设计过滤器(滤镜，过滤程序，filter)的系统、设备和方法。一个或多个非暂态(非瞬态，non-transitory)计算机存储设备可以存储计算机可读指令，当计算电路执行该计算机可读指令时，使得计算电路执行用于生成增强的现实化妆设计过滤器的操作。操作可以包括使用一个或多个辐射传感器来限定生物表面的基线描述(baseline description)，辐射传感器与计算电路电耦合。操作可以包括使用辐射传感器中的一个或多个来识别化妆品制剂向生物表面的施用。操作可以包括参考基线描述生成描述施用的迹线。操作还可以包括输出迹线。

在一些实施例中，识别化妆品制剂的施用包括使用一个或多个辐射传感器和基线来描述相对于生物表面检测化妆品制剂。生成迹线可以包括接收描述多个形状类型的信息，使用基线描述将形状类型的第一形状类型归属于生物表面的至少一部分，生成化妆品制剂的施用的数字表示，该数字表示描述相对于基线描述的位置信息，以及将数字表示从第一形状类型转换为形状类型的第二形状类型。生物表面可以是面部。第一形状类型和第二形状类型可以描述面部特征。限定生物表面的基线描述可以包括使用与计算电路电耦合的辐射源将不可见电磁辐射发射至生物表面上。一个或多个辐射传感器可以包括被配置为检测来自紫外线、可见光或红外光谱范围或其组合的电磁辐射的相机。

在一些实施例中，生成迹线包括追踪相对于生物表面的施用的运动并且生成相对于基线描述的运动的数字表示。该操作还可以包括识别化妆品制剂并且使用化妆品制剂的标识符信息来限定化妆品制剂的颜色。操作还可以包括评估生物表面的表面色调、评估化妆品制剂的制剂色调以及使用表面色调和制剂色调来确定化妆品制剂的颜色。

在一些实施例中，一个或多个非暂态计算机存储设备与智能手机电耦合。输出迹线可以包括将迹线通信到远程计算系统。

一种用于生成增强的现实化妆设计过滤器的方法可以包括使用一个或多个辐射源和一个或多个辐射传感器来限定生物表面的基线描述。该方法可以包括使用辐射传感器来识别化妆品制剂向生物表面的施用。该方法可以包括参考基线描述来生成描述施用的迹线。该方法还可以包括输出迹线。

在一些实施例中，生成迹线包括接收描述多个形状类型的形状信息，使用形状信息将形状类型的第一形状类型归属于(attribute to)生物表面的至少一部分，生成化妆品制剂的施用的数字表示，该数字表示描述相对于基线描述的位置信息，将数字表示从第一形状类型转换为形状类型的第二形状类型。在一些实施例中，识别化妆品制剂的施用包括检测化妆品制剂的施用器，评估化妆品制剂的施用器相对于生物表面的位置，追踪施用器相对于生物表面的运动，以及生成相对于基线描述的运动的数字表示。该方法还可以包括评估生物表面的表面色调，评估化妆品制剂的制剂色调，以及使用表面色调和制剂色调来确定化妆品制剂的颜色。

提供本发明内容是为了以简化形式来介绍以下在具体实施方式中进一步描述的概念的选择。本发明内容不旨在标识所要求保护的主题的关键特征，也不旨在用作确定所要求保护的主题的范围的帮助。

附图说明

图1是根据各实施例示出的用于推断化妆设计的系统的实施例的示意图。

图2是根据各实施例示出的用于制备增强的现实化妆设计过滤器的示例技术的示意图。

图3是根据各实施例示出的用于部署增强的现实化妆设计过滤器的示例技术的示意图。

图4是根据各实施例示出的用于将增强的现实化妆设计过滤器从一种形状类型转换为另一种形状类型的示例技术的示意图。

图5是根据各实施例示出的用于在多个层中生成增强的现实化妆设计过滤器的示例技术的示意图。

图6是根据各实施例示出的用于使用表面色调和制剂色调来确定制剂颜色的示例技术的示意图。

图7是根据各实施例示出的包括图1的系统的部件的示例系统的框图。

图8是根据各实施例示出的示例计算设备的各方面的框图。

在上述附图中，除非另有说明，否则相同的附图标记在各个视图中指代相同的部件。并非元件的所有实例都必须被标记以在适当的情况下简化附图。附图不一定按比例绘制，而是强调说明所描述的原理。当当结合附图进行参考时，通过参考以下详细描述，本发明的上述方面和许多伴随的优点将变得更容易理解。

具体实施方式

以图案和形状施用化妆品和化妆用品可能是困难的。例如，认证的化妆专业人员通常应用复杂设计和剧院化妆用品。此外，对于行动能力或视力有限的人来说，自我施用通常是一个挑战。甚至相对简单的化妆设计可以包括多个化妆品产品的分层、混合以及特定于面部或面部特征的形状类型的化妆品的施用。例如，施用到椭圆形面部的化妆用品或其他化妆品通常与施用到方形或长方形面部的化妆用品或其他化妆品的构型不同。以这种方式，简单地将静态纹理对象(诸如纹理掩模)映射到表面上不能再现化妆设计的美学效果，因为它将被施用于表面。此外，组成化妆程序(化妆例程，cosmetic routine)的操作的精确顺序和范围通常不能从成品设计的图像中确定。为此，化妆教程通常以视频或分步指南的形式提供，其中，图像示出了多个中间状态下的设计，从而达到最终效果。即便如此，在展示特定化妆设计方面，特定的脸型教程和特定的肤色教程比一般教程更有效。然而，这样的方法在没有适当的工具和使用特定的技术和化妆品制剂的经验的情况下，这种方法可能很难观察和复制。

描述了用于从施用于生物受试者的目标身体表面(诸如受试者的面部或其他感兴趣区域)的化妆程序来生成增强的现实化妆设计过滤器的技术。所描述的实施例采用图像传感器来限定目标身体表面的一个或多个3D轮廓映射。在这样的应用的上下文中，所描述的实施例提供了比复杂的手动程序更高的精度和更大的易用性。因此，该技术通过分配动态增强的现实化妆设计过滤器来改进化妆品的手动应用，该动态增强的现实化妆设计过滤器可以自动(例如，无需人工干预)适应于形状类型和肤色。过滤器可以以对增强现实过滤器的终端用户的形状类型和肤色敏感的方式再现逐步的化妆程序，包括特定工具、施用迹线和完成效果的增强现实渲染。

在说明性示例中，智能手机的用户创建生成特定美学效果的他们的化妆程序的视频。作为制作视频的一部分，智能手机捕获图像和用户面部的表面映射。初始图像用于生成基线，利用该基线可以检测化妆品的后续应用，诸如粉底、高光、填充物、眼影、腮红、睫毛膏等。在制作视频的同时，智能手机迭代地重新限定基线作为将每个新施用限定为化妆设计的新的层的一部分，并且通过检测用户的手的运动、识别新的工具或制剂和/或检测用户的面部相对于更新的基线的颜色偏移来识别新施用。在程序的过程中，生成包括运动、纹理和/或透明度信息的多层动态过滤器。动态过滤器参考化妆视频的创建者的脸型并且存储在分布式存储网络上。过滤器可用于不同用户通过增强现实界面进行虚拟投影。过滤器可以用于再现层效果，以将化妆设计真实地映射到不同的脸型上，并且以特定于观看者的脸型和肤色的方式引导观看者完成化妆程序，如下面段落中所述。

图1是根据各实施例示出的用于生成增强现实化妆设计过滤器110的示例系统100的实施例的示意图。示例系统100包括一个或多个客户端计算设备130、相机140、一个或多个远程计算机系统160(也称为服务器)以及一个或多个用户设备190。作为示例系统100的一部分，组成系统部件可以通过无线通信和/或通过有线通信可操作地耦合。在一些实施例中，组成部件可以通过无线配对(例如，蓝牙)和/或经由本地无线网络(例如，通过无线路由器)直接通信。在一些实施例中，组成部件可以通过一个或多个网络170进行通信，网络170可以是或包括公共网络(例如，互联网)或专用网络(例如，内联网)。以这种方式，示例系统100可以包括被配置为通过无线连接传送电子信息的多个不同的设备。此外或可替代地，一些组成部件可集成到单个设备中。

为了解释清楚，增强现实化妆设计过滤器110也被称为化妆设计110。化妆设计110是化妆程序(化妆例程，cosmetic routine)的数字表示，包括存储在客户端计算设备130、服务器160和/或用户设备190的存储器中的一组纹理、映射数据、表面信息和元信息。化妆设计110包括参考相关面部特征120的轮廓图和/或目标区域的基线特征125的一个或多个迹线115，而不是在投影到平坦平面上并且随后用作纹理掩模的特定面部上再现化妆程序的最终结果的单个纹理。化妆设计110还可以包括描述迹线115的动态元件117的数据。以这种方式，化妆设计110可以被部署到用户设备190，作为逐步再现化妆设计110的逐层应用的动画增强现实过滤器。

作为说明性示例，客户端计算设备130可以结合相机140。类似地，示例系统100可以包括多个客户端计算设备130，其中，第一客户端计算设备130是被配置为托管用户界面元素并且通过网络170连接到服务器160的移动电子设备(例如，平板电脑、智能手机或笔记本电脑)，而第二客户端计算设备130与相机140集成并且被配置为协调相机140与第一客户端计算设备130的操作。示例系统100的组成部件可以被提供有计算机可执行指令(例如，软件、固件等)以实现和协调示例系统100的一个或多个特征的操作。以这种方式，示例系统100的操作可以经由用户界面来协调，其经由一个或多个组成部件来访问。

客户端计算设备130可以是或包括专门构建的移动计算设备，该移动计算设备包括相机140、一个或多个电磁(EM)辐射源(被示为相机140的一部分)、以及用于用视觉和/或听觉提示来提示生物表面180的一个或多个用户接口元件131。例如，接口元件131可以是或包括显示器133以生成化妆设计110的视觉表示。接口元件131还可以包括用户输入部件，该用户输入部件包括但不限于触摸屏、键盘、触控板或鼠标。在该示例中，客户端计算设备130的部件可以被集成到类似于消费化妆品的壳体中，诸如例如浴室或化妆镜。在该示例中，壳体可以隐藏电源、热管理系统和其他部件。

虽然客户端计算设备130和相机140以特定配置示出，但是可以设想附加的和/或可替代的形状因素。例如，系统100可以包括与客户端计算设备130通信的智能手机或平板电脑，使得智能手机或平板电脑进行一个或多个计算机可执行操作。以此方式，图像生成操作可由包括有相机140的智能手机执行，且图像处理操作可至少部分地在独立设备(例如服务器160)上执行。

在一些实施例中，相机140可以是或包括多个传感器和/或源，包括但不限于可见光图像传感器141、深度传感器143和/或不可见EM辐射源145，包括但不限于红外或近红外辐射。与客户端计算设备130一样，相机140可以包括通信电路147，以实现与示例系统100的其他组成部件的无线通信和/或配对。虽然相机140被示为示例系统100的独立部件，但是相机140也可以被集成到示例系统100的其他组成部件之一中。例如，客户端计算设备130可以结合相机140(例如，作为智能手机或平板电脑)。

深度传感器143可以捕获生物表面180的一个或多个图像，包括但不限于生物表面180的目标身体表面181的图像。在图1中所提供的图示中，生物表面180是使用示例系统100来创建化妆设计110的人，并且目标身体表面181是眼睛和眉毛周围的区域中的人的面部。深度传感器143可以生成目标身体表面181的表面映射183。目标身体表面181的轮廓和深度信息可以随时间变化或在用户之间变化，并且相机可以生成表面映射183作为用于由客户端计算设备130推断、修改和/或生成化妆设计110的操作的一部分。

深度传感器185可以是图像传感器，并且可以捕获包括目标身体表面181的视场185内的图像。深度传感器143可以是或包括但不限于基于激光的传感器(例如，LiDAR)、飞行时间相机、结构光发生器、包括运动传感器和可见图像相机的视觉同时定位和映射(vSLAM)传感器组件或基于超声的传感器组件，使得相机140可以生成表面映射183。

例如，在深度传感器143是红外深度感测相机的情况下，不可见EM辐射源145可以是或包括将包括目标身体表面181的生物表面180暴露于结构不可见红外辐射的红外源。在另一示例中，在深度传感器是LiDAR系统或飞行时间相机的情况下，不可见EM辐射源145可以是或包括红外二极管激光器。以这种方式，由不可见EM辐射源145生成的EM辐射可以在角展度187上被扫描或以其他方式指向目标身体表面181，使得目标身体表面181被暴露。在一些实施例中，通过应用于由可见光传感器141(例如，通过vSLAM技术)所捕获的可见光谱(例如，RGB)图像的特征和/或边缘检测来促进和/或启用目标身体表面181的检测。

表面映射183可以为目标身体表面181中的特征提供轮廓信息和/或位置信息，例如，关于眉脊和鼻梁的相对位置的精确信息，其中，眉毛相对于眼睛开始和结束等，和/或推断化妆品设计110以部署到社交媒体平台或其他服务，从而经由用户设备190将化妆设计110分发给用户。以这种方式，化妆设计110可以被表示为被传送到服务器160的数据文件，例如，作为化妆设计的在线平台和/或数据库的一部分。

表面映射183可用于通过确定生物表面180的特征的形状类型并且将化妆设计110转换成另一不同形状类型来修改化妆设计110。在一些实施例中，多个层被限定为生成或修改化妆设计110的一部分。示例性系统100可以实现参考图2-图6所描述的示例性技术以检测多个化妆品制剂到目标身体表面181的施用，并且可以生成在空间和时间上描述共同限定化妆设计110的施用的一个或多个迹线115。

有利地，例如，通过与社交媒体集成，通过映射目标身体表面181和用户设备190的用户的对应区域，并且通过推断化妆设计110或化妆设计110的每个组成层以适合对应区域，可以以提高的准确度和精度将化妆设计110作为增强现实过滤器分发到用户设备190。此外，化妆设计110可以以教程可视化的形式动态地呈现，由此层和迹线两者被动画化以展示化妆设计110的层、运动、颜色和其他化妆方面。以这种方式，化妆设计110表示通过将化妆设计110从创建者适配到用户而对用户体验的改善，并且还表示对系统性能的改善，因为完整的化妆设计110可以作为掩模数据而不是图像数据来进行传送。因此，减少了在网络170上分配化妆设计110以及在服务器160上存储时所涉及的数据量和计算资源。

图2是根据各实施例示出的用于制备增强现实化妆设计110过滤器的示例过程200的示意图。示例过程200可以被实现为由图1的示例系统100的组成部件执行或以其他方式执行的多个操作。以这种方式，操作可以是或包括由计算机系统的一个或多个处理器(诸如图1的客户端计算设备130)响应于存储在计算机系统的非瞬态存储器上的计算机可读指令的执行而执行的操作。虽然以特定顺序示出了操作，但是示例过程200可以包括更多或更少的操作，并且操作的顺序可以变化。在一些实施例中，一些操作由不同的物理计算机执行，如参考图1更详细描述的。例如，一些操作可以由不同的部件可互换地执行，或者可以通过两个或更多个部件的协调操作来执行。

在操作201处，计算机系统限定生物表面180的基线描述210。在一些实施例中，基线描述210被限定为例如通过将可见颜色信息参考到描述生物表面180的表面轮廓映射信息来生成表面映射183的一部分。以这种方式，基线描述210可以包括生物表面180的数字表示(例如，数字数据)，包括表面映射183和颜色信息。示例过程200在图1的目标身体表面181的上下文中示出，但是应当理解的是，生物表面180可以是或包括面部、手部、面部的一部分或施用化妆品制剂的其他表面。

在一些实施例中，限定基线描述210包括使用相机140或被配置为检测可见光或不可见EM辐射的其他辐射传感器来生成生物表面180的一个或多个图像。可以使用相机140的辐射源(诸如结构光发生器、LiDAR源或ToF相机源)将隐形EM辐射发射至生物表面180上。例如，图像可以描述生物表面180的面部特征120以及基线特征125。基线特征125可以是或包括在示例过程200之前施用到生物表面180的材料，使得生物表面180的至少一部分包括颜料、化妆品制剂或可由相机140检测的其他特征。例如，基线特征125被示为睫毛和眼线。类似地，基线特征125可以包括但不限于生物表面180的除了面部特征120之外的瑕疵、皱纹、疤痕或其他美学方面。相比之下，面部特征120是指生物表面180的器官、毛发和其他地形特征，其限定表面映射183并且通过物理效果(包括但不限于阴影、透视等)来影响基线描述210。

在操作203处，计算机系统识别化妆品制剂220在生物表面180上的一个或多个施用215。化妆品制剂220可包括但不限于化妆品、睫毛膏、口红、唇线笔、眼线笔、高光、美容霜、软膏或可局部施用到生物表面180的其他材料。化妆品制剂220的施用215可以由相机140使用辐射传感器(诸如可见光传感器、不可见EM辐射传感器等)来检测。以这种方式，施用215可以被检测为生物表面相对于基线描述的偏移，例如，在着色、表面反射率或不可见EM辐射的吸光度/反射比方面。在说明性示例中，可以通过生物表面180相对于包括可忽略镜面反射的基线描述的镜面反射的增加来检测有光泽的唇部涂层。类似地，相对于基线描述，可以通过镜面反射的减少和漫反射的增加来检测哑光粉底。在非限制性示例中，可以通过在可见光图像中限定亮度通道并且对亮度通道进行阈值处理来检测镜面反射，其中，镜面反射被限定为在逐像素基础上超过阈值的亮度值。

在一些实施例中，计算机系统检测接近生物表面180的施用器225，诸如刷子、海绵、铅笔、手指或其他施用器225。在一些实施例中，计算机系统识别施用器225的标识符，例如，其中，施用器225包括注册标记，诸如条形码、QR码、RFID标签或标识符信息的其他表示。以这种方式，计算机系统可以在空间和时间上识别施用215，并且可以识别化妆品制剂220。为此，操作203可以可选地包括识别化妆品制剂220并且使用化妆品制剂220的标识符信息来限定化妆品制剂220的颜色。例如，虽然可以使用相机140来评估未识别的化妆品制剂220的颜色，如参考图6更详细描述的，但是识别施用器225可以允许计算机系统直接确定化妆品制剂220的颜色，其中，施用器225装载有特定的化妆品制剂220，而不是多用途施用器225。可以以这种方式来识别化妆品制剂220的施用器225的示例包括但不限于铅笔、唇膏、凝胶施用器或可与制备的化妆品制剂220一起获得的其他施用器225。化妆品制剂220的施用215可以包括施用器225相对于生物表面180的运动230。运动230可以包括关于整体化妆设计110的美学效果的有意义的信息，诸如在混合和留痕(smudging)运动中。因此，施用器225的运动230可以在用于生成迹线的操作期间被检测和使用。

施用215还可以包括对已经布置在生物表面180上的制剂220的修改或操作。例如，可以通过均匀涂抹、留痕(smudging)、混合、铺展或其他技术来改变化妆品制剂220的范围、着色和反射率。可以通过检测工具或手指并且检测生物表面180相对于基线描述210的变化来识别这样的施用215，不是将新制剂220添加到生物表面180，而是修改已经处置的制剂220。如参考图1所述，基线描述210可以相对于每个相应的施用215，其中，施用215是分层的和/或混合的。例如，已经施用制剂220的生物表面180的特定区域的基线描述210可以被重新限定为包括制剂220。以此方式，可以更精确且准确地检测后续施用215。

在操作205处，计算机系统生成描述在操作203处识别的施用215的一个或多个踪迹115。生成迹线115可以包括确定施用215的范围217、层序列(参见图5)和着色(参见图6)，使得化妆设计110可以真实地再现施用215的美学效果并且还可以再现施用215的序列。范围217、着色和层序列信息以及与在用户设备190上真实地再现迹线115相关的其他信息可以被编码为数字表示，诸如参考基线描述210的强度数据集。例如，在图2中以虚线示出的施用215的范围217可以被检测为相对于基线描述的EM辐射的着色的偏移、吸光度的偏移和/或反射比的偏移。以这种方式，迹线115可以再现各施用215的美学效果。

在一些实施例中，计算机系统使用由相机140生成的图像和/或轮廓数据来追踪施用器的运动230。因此，生成迹线115可以包括生成相对于生物表面180的各种运动230的数字表示，如基线描述中所描述的，以及描述在施用215中所使用的化妆品制剂220的颜色信息。迹线115一旦生成就可以进行转换，以在不同形状的生物表面180上再现化妆设计110的美学效果，如通过参考图3更详细地描述的用户设备190所看到的。

迹线115可以对层混合和分层信息进行编码，使得多个迹线115的组合可以再现迹线115之间的交互。例如，可以将一组多个眼影颜色的施用215混合到生物表面180的眼睛和眉毛之间的区域，以在眼影区域中赋予颜色梯度。在该示例中，示例过程200包括操作201-205的多次迭代，使得眉毛和眼睛之间的区域由多个迹线115来描述并且还由描述多个迹线如何相关的交互术语来描述。在一些实施例中，迹线115包括引用动态元素117的透明度信息，诸如阿尔法通道信息，该动态元素描述施用215的着色或其他美学效果的局部透明度。以这种方式，迹线115可以再现化妆品制剂220的操作，诸如混合、留痕(smudging)、均匀涂抹或化妆设计的典型的其他技术。在说明性示例中，迹线115和/或动态元素117可以包括参考运动230和制剂220的透明度值的向量，使得迹线115基于运动230再现制剂220的均匀涂抹或混合。

在操作207处，计算机系统输出作为操作201-205的一部分检测到的迹线115。输出(多个)迹线115可以包括电子操作，包括但不限于将(多个)迹线115存储在客户端计算设备130的本地数据存储中，经由网络170将(多个)迹线115传送到(多个)服务器160，和/或直接(例如，通过电子配对)或经由网络180与(多个)用户设备190共享(多个)迹线115。

虽然示例过程200的描述集中于眉毛/眼睛区域的化妆设计，但是该操作可以类似地应用于其他表面。例如，化妆设计110可以描述化妆品制剂220到附加的/可替代的表面的施用215，该附加的/可替代的表面包括但不限于嘴唇、鼻子、脸颊、前额或手部。类似地，化妆设计110可以改变面部特征120的外观，包括但不限于眉毛、眼睛、嘴唇、颧骨、下颌线或手部。在另一个说明性示例中，化妆设计110可以包括一系列迹线115，用于通过施用一种或多种化妆品制剂120来强调颧骨的外观。

图3是根据各实施例示出的用于部署增强现实化妆设计110过滤器的示例过程300的示意图。与图2的示例过程200一样，示例过程300可以被实现为由图1的示例系统100的组成部件执行或以其他方式执行的多个操作。以这种方式，响应于存储在计算机系统的非瞬态存储器上的计算机可读指令的执行，操作可以是或包括由计算机系统的一个或多个处理器(诸如图1的用户设备190)所执行的操作。虽然以特定顺序示出了操作，但是示例过程300可以包括更多或更少的操作，并且操作的顺序可以变化。在一些实施例中，一些操作由不同的物理计算机执行，如参考图1所更详细地描述的。例如，一些操作可以由不同的部件可互换地执行，或者可以通过两个或更多个部件(诸如用户设备190和服务器160)的协调操作来执行。

在操作301处，用户设备190接收描述化妆设计110的数据310。接收数据310可以包括通过网络170(例如，互联网、蜂窝网络等)的电子通信，但是还可以包括通过配对或其他方法的直接通信。在图3中，用户设备190被示为从服务器160接收数据310，但是应当理解的是，可以从客户端计算设备130接收数据310。数据310可以包括在示例过程200的一次或多次迭代期间生成的迹线115，如参考图2更详细描述的，并且还可以包括描述生物表面180的元信息，诸如生物表面180的形状类型，如参考图4更详细描述的。

用于接收数据310的操作可以包括一种或多种数据传输技术，包括但不限于无线通信或有线通信。例如，用户设备190可以与客户端计算设备130无线通信以接收数据210作为无线传输。

在一些实施例中，接收数据310可以包括浏览器环境，诸如推荐引擎，由此用户设备190的用户可以查看由一个或多个创建者生成的一组化妆设计110，而不是直接与创建者通信以请求设计。附加地或可替代地，数据310可以被推送到用户设备190，例如，作为用户设备190的用户可以注册、关注和/或订阅的社交媒体服务的一部分。在一些实施例中，至少部分地基于描述用户设备190的用户的标识符信息来推荐数据310。在用户设备190的用户通过历史交易数据展示美学偏好的情况下，可以优先推荐反映该偏好的化妆设计110。还可以使用人口统计、社会经济或生物特征数据来推荐化妆设计110。例如，在用户设备190的用户驻留在地理区域中的情况下，可以推荐反映该地理区域的趋势的化妆设计110。类似地，在用户设备190的用户在给定年龄范围内、受雇于给定领域或部门、或者是给定社交网络的一部分的情况下，可以识别和推荐反映对应于每个相应类别的趋势的化妆设计。

在操作303处，用户设备190映射对应于生物表面180的用户表面315，化妆设计110将被虚拟地施用于该生物表面。映射用户表面315可以包括与参考图1的生成表面映射183所描述的操作类似的操作，包括但不限于结构光方法、LiDAR或ToF方法、vSLAM方法、超声方法等。表面315可以由多边形317的网格描述，每个多边形317的网格可以限定表面315的对应区域的多个特性，包括但不限于色调、反射率、温度等。

在用户设备190是结合深度传感器319的智能手机的情况下，操作303可以包括执行存储在用户设备190的存储器中的一个或多个应用以使用深度传感器来映射表面。以这种方式，用户表面315可以被表示为描述用户表面315的表面轮廓和面部特征320的数据中的数字表示。在一些实施例中，示例过程300包括将化妆设计110与用户表面315的现有美学外观集成。为此，在表面映射期间包括美学特征321，诸如化妆品、睫毛膏、睫毛等。

映射用户表面315还可以包括评估可以是局部表面色调的表面色调，如参考图6更详细描述的。以这种方式，示例过程300可以考虑生物表面180和用户表面315之间的肤色的差异。例如，作为数据310的一部分提供的元数据，或可替代地存储在服务器160和/或用户设备190的存储器中的元数据，可以包括将颜色交叉引用到肤色的参考表或查找表，使得化妆设计110可以适于再现化妆设计110的美学效果，而不是精确颜色的字面转换。

在操作305处，参考在操作303处生成的用户表面315的映射，使用作为数据310的一部分所接收的迹线115来生成过滤器325。过滤器325可以是或包括数字表示，诸如纹理对象，其被格式化以与用户表面315的映射相结合。在说明性示例中，用户表面315由多边形317的网格来描述，并且过滤器325参考多边形317，使得每个多边形317限定描述过滤器325的外观的值的向量。

在一些实施例中，过滤器325包括动态元素330，诸如动画效果或层间效应，其可用于展示用于创建化妆设计110的施用215的序列。动态元素330可以再现参考图1-2中的迹线115所描述的动态元素117的至少一部分。

在操作307处，计算机系统呈现与用户表面315的图像335集成的过滤器325。呈现过滤器325可以包括通过屏幕337来显示过滤器325。例如，用户设备190可以是包括触摸屏显示器的智能手机或平板电脑。可以使用特征追踪或其他增强现实技术将过滤器325实时或接近实时地映射到用户表面315，其中，“接近实时”描述用户设备190的用户的定性体验，由此通过示例过程300的操作而引入的延迟实际上是不可察觉的。

过滤器325可以被呈现为用户设备190的用户可以例如通过选择或突出显示通过屏幕337而操纵的交互式图形元素。在一些实施例中，选择过滤器325可以在可选操作309处启动动态元素330的动画。附加地或可替代地，动画化过滤器325可以包括发起虚拟教程，由此按分层顺序来呈现过滤器325，使得在用户表面315上再现施用215的序列。可以经由用户设备190暂停、反转、前进或以其他方式来操纵序列，并且可以通过例如利用屏幕337上的用户动作340选择过滤器325来激活特定动态元素。

在一些实施例中，在呈现过滤器325时，与屏幕337的交互允许用户设备190的用户编辑、添加或移除一个或多个过滤器325。代替激活动态元素，不同的用户动作340可以发起一个或多个替代过程。例如，双指轻击可以打开菜单341，菜单341允许用户设备190的用户查看描述施用器225、化妆品制剂215的信息或描述过滤器325的其他信息。类似地，按压并且保持过滤器325可以使用户设备190访问在线市场以允许用户购买化妆品制剂220、施用器225或其他消费产品。在一些实施例中，可以生成社交媒体控件的菜单343，使得用户设备的用户可以与过滤器325共享图像335，可以与其他用户通信，或者可以提供反馈或以其他方式与化妆设计110的创建者通信。应当理解的是，所描述的用户动作的类型是示例性的。用户界面元素(诸如菜单341和/或社交媒体菜单343)可以通过可替代的和/或附加的交互来调用。在一些实施例中，菜单元素默认呈现在显示器337上。

图4是根据各实施例示出的用于将增强现实化妆设计110过滤器从一种形状类型转换为另一种形状类型的示例过程400的示意图。与示例过程200和300一样，示例过程400可以被实现为由图1的示例系统100的组成部件所执行或以其他方式来执行的多个操作。以这种方式，响应于存储在计算机系统的非瞬态存储器上的计算机可读指令的执行，操作可以是或包括由计算机系统的一个或多个处理器(诸如图1的客户端计算设备130、服务器160和/或用户设备190)所执行的操作。虽然以特定顺序示出了操作，但是示例过程400可以包括更多或更少的操作，并且操作的顺序可以变化。在一些实施例中，一些操作由不同的物理计算机执行，如参考图1更详细描述的。例如，一些操作可以由不同的部件可互换地执行，或者可以通过两个或更多个部件的协调操作来执行。

参考基线描述210生成迹线115，如参考图2更详细描述的，并且因此特定于生物表面180。因此，示例过程400描述了用于将过滤器325从第一面形状外推到第二面形状的操作，其作为生成迹线115和/或过滤器325的一部分。虽然参考图4的描述集中于脸型，但是应当理解的是，操作可以类似地应用于各个面部特征的形状，诸如眼睛形状、嘴部形状或其他特征形状，使得迹线115被变换以真实地再现迹线115的美学效果，而不是简单地将迹线115作为纹理施用于用户表面315。

在操作401处，计算机系统使用一个或多个迹线115生成掩模数据410。在迹线115相对于描述生物表面的形貌数据的情况下，生成掩模数据410包括将描述施用215的数据投影到描述生物表面180的形貌数据上，从而允许将迹线115从一种形状类型420改为另一种形状类型420。

在操作403处，计算机系统将第一形状类型420归属于生物表面180的至少一部分。例如，计算机系统可以参考描述多个形状类型420的形状信息。形状信息可以存储在服务器160或客户端计算设备130上、从服务器160或客户端计算设备130访问或以其他方式接收。以这种方式，示例过程400可以包括接收描述多个形状类型420的信息。

将形状类型420归属于生物表面180可以包括参考基线描述210以确定指示形状类型420的生物表面180的特征尺寸、间距或其他方面。在脸型的说明性示例中，可以通过将网格或其他形式的引导件421投影到基线描述210上来限定特征方面，使得可以通过限定基线描述210的轮廓423、通过识别基线描述210的一个或多个点处的特征曲率425、或通过识别特征之间的特征间隔427来识别形状类型420。应当理解的是，可以采用涉及使用计算机图像处理技术的边缘检测和特征检测的方法来确定形状类型420的属性。

在操作405，计算机系统用于不同形状类型420的一个或多个形状过滤器430。作为生成形状过滤器430的一部分，在操作401处生成的掩模数据410从第一形状类型420-1转换为第二形状类型420-2、第三形状类型420-3或附加的或可替代得形状类型420。掩模数据410的转换可以包括但不限于将第一形状类型420-1的掩模数据410投影到第二形状类型420-2的形貌数据上，并且将相应的转换应用到迹线115上。以此方式，形状过滤器430将迹线115的美学形状和着色再现到不同于第一形状类型420-1的形状类型420上。

在一些实施例中，生成用于不同形状类型420的形状过滤器430可以包括对掩模数据410的附加修改，除了空间投影之外，以考虑不同的物理形状。例如，一些形状类型420的特征在于或多或少明显的面部特征，诸如眉脊、前额弯曲、下巴形状、颧骨、下颌形状等。为此，作为生成形状过滤器430的一部分，形状过滤器430可以重新定位、划分、省略、复制、镜像或以其他方式变换掩模数据410。在说明性示例中，从与心形脸型相对应的第一形状类型420-1生成用于与矩形脸型相对应的第二形状类型420-2的形状过滤器430包括将前额迹线朝向发际线向上重新定位并且将前额迹线加宽到前额的任一边，以及沿着下颌线划分和镜像下巴迹线。作为为每个形状类型420生成形状过滤器430的一部分，可以将相应的变换应用于每个迹线115的掩模数据410。

在面部特征的背景下，化妆设计110在特定面部特征处(例如，眉毛和眼睛之间的眼影设计)完成，示例过程400的组成操作可以基于类似的原理来应用。例如，在参考圆形眼睛形状类型420来创建化妆设计110的情况下，在操作405处生成形状过滤器430可以包括将掩模数据410从圆形眼睛转换为杏仁眼睛形状类型420或其他眼睛特定形状类型420。应当理解的是，相应的操作可以应用于嘴唇、手部、耳朵或其他生物表面的形状。

图5是根据各实施例示出的用于在多个层中生成增强的现实化妆设计过滤器510的示例过程500的示意图。与示例过程200、300和400一样，示例过程500可以被实现为由图1的示例系统100的组成部件执行或以其他方式来执行的多个操作。以这种方式，响应于存储在计算机系统的非瞬态存储器上的计算机可读指令的执行，操作可以是或包括由计算机系统的一个或多个处理器(诸如图1的客户端计算设备130、服务器160和/或用户设备190)执行的操作。虽然以特定顺序示出了操作，但是示例过程500可以包括更多或更少的操作，并且操作的顺序可以变化。在一些实施例中，一些操作由不同的物理计算机来执行，如参考图1更详细描述的。例如，一些操作可以由不同的部件可互换地执行，或者可以通过两个或更多个部件的协调操作来执行。

如参考图1-3所更详细地描述的，迹线115可以通过记录多个化妆品制剂220到生物表面180的顺序施用来生成，使得增强的现实化妆设计过滤器510可以被划分成离散的层。如参考图3更详细描述的，过滤器510的呈现可以再现施用的逐层序列。类似地，示例过程400还可以结合示例过程500的逐层方面，其中，不同的形状类型420涉及不同的分层过程、层间混合以及由形状类型420的差异导致的更复杂的光和阴影效果。

在操作501-507处，限定层序列，其中，每个层包括一个或多个迹线115。例如，在操作501处，限定包括前额迹线515和颧骨迹线517的第一层。在操作503处，限定包括前额迹线520、脸颊迹线521和下巴迹线523的第二层。在操作505处，限定包括高亮迹线525的高亮层，以强调或突出覆盖第一层和第二层的一个或多个面部特征。在操作507处，限定眼睛层，包括眼影迹线530和眼下迹线531，覆盖高亮层、第一层和第二层。

以这种方式，增强的现实化妆设计过滤器510可以在用户设备190上呈现期间动态地添加或移除层。类似地，客户端计算设备130可以将一个或多个迹线115与多个层中的每个层相关联。如示例过程500中所描述的限定层允许限定层间混合规则。例如，较高阶的层可能超过较低阶的层。高阶层可以完全遮挡低阶层。例如通过掩模数据410的阿尔法通道而限定的透明度或部分透明度可以允许多个层覆盖在图像337中，以生成包括来自多个层的共同局部化而贡献的净美学效果。

图6是根据各实施例示出的用于使用表面色调和制剂色调来确定制剂颜色的示例过程600的示意图。

如参考图2更详细描述的，检测化妆品制剂220的施用215可以包括确定化妆品制剂220的颜色和/或识别化妆品制剂220。在用于确定颜色的技术包括基于由相机140生成的图像的图像处理操作的情况下，各种化妆品制剂220的颜色可能受到施用215附近的生物表面180的色调的影响。以此方式，当在过滤器325中使用时，图像像素值的直接读取可能生成不准确的色彩渲染。

在操作601处，计算机系统测量对应于施用215的多个区域610，并且评估每个区域610的生物表面180的表面色调615。在一些实施例中，示例过程600的操作与示例过程200并行地执行，但是也可以使用基线描述210、在迹线115的生成期间记录的图像或在开始示例过程200之前生成的图像的校准集来在不同时间执行。可以设想的是，表面色调615可以在区域610之间局部地不同，例如，在面部特征投射阴影的地方或者在表面限定一个或多个轮廓的地方。为此，操作601可以包括用于单个施用215的限定的多个表面色调610。

在操作603处，计算机系统测量包括施用215的图像中的区域610，并且评估化妆品制剂220的一个或多个局部制剂色调625。评估表面色调615和制剂色调625可以包括对每个区域610中的一个或多个像素进行采样并且确定每个区域610的平均着色。应当理解的是，制剂色调625将受到下面的表面色调615的影响，使得表面色调615可以用作用于以对肤色敏感的方式来评估制剂色调的参考基线值。有利地，以这种方式实现包括评估表面色调615的计算机图像处理方法允许化妆设计110响应于用户的肤色，而不是呈现静态增强现实掩模。

在操作605处，计算机系统使用表面色调615和制剂色调625来确定化妆品制剂的颜色630。与表面色调615和制剂色调625相反，可以设想的是，每个化妆品制剂220包括均匀分散或分布的一种或多种颜料，使得该制剂例如通过可见光的漫反射来表达单一可见颜色。为此，制剂颜色630可以是或包括颜色分量的向量，诸如RGB三元组或另一种颜色表示方法。

作为操作605的一部分，可以比较相应的表面色调615和制剂色调625，并且可以考虑表面色调615对制剂色调625的总体影响，作为确定化妆品制剂220的颜色630的一部分。在说明性示例中，在不同区域610被差分照明的情况下，例如通过使用表面色调615来校正制剂色调625中的亮度变化来比较表面色调615和制剂色调625可以控制照明对色彩渲染的影响。

应当理解的是，确定制剂颜色630可以提高化妆设计110在不同生物表面上、在不同环境条件下以及在不同制剂下的美学效果的再现性。如参考图2更详细描述的，制剂颜色630可以被修改以考虑创建者和用户之间的肤色差异。类似地，可以基于环境条件来修改制剂颜色630以提高逼真的颜色保真度。例如，在明亮条件下，可以增加颜色强度，而在昏暗条件下，可以降低颜色强度。在一些情况下，可以动态地修改着色以考虑光和形状。例如，作为示例过程300的一部分，制剂颜色630可以被修改为包括更大的蓝色分量以反映其相应的迹线115是处于阴影中的。相反地，当对应迹线115移动到更亮地照明中时，蓝色分量可减少。

如贯穿前述所解释的，用于生成、修改和/或呈现迹线115和过滤器325的操作被设想为由包括计算机电路、通信模块和存储在存储器中的计算机可读指令的一个或多个电子设备来执行。通过图1的示例系统100的组成元件的协调操作，增强现实过滤器可以被生成并且近实时地呈现给集成到社交媒体平台中的用户设备190的用户。增强现实过滤器可以逼真地再现化妆设计的美学效果，考虑到脸型、肤色和环境条件的差异，并且可以动态地呈现以改善超出当前可能的增强现实或常规社交媒体的化妆程序序列的共享。

图7是根据各实施例示出的包括图1的系统的部件的示例系统700的框图。示例系统700包括与远程计算机系统160进行电子通信(例如，通过网络170)的客户端计算设备130。示例系统700在相关联的系统元件的上下文中示出了图1的系统100的示例，并且因此描述了执行如图2-6所描述的操作的电子设备和软件。图7描绘了系统元件、特征和配置的非限制性示例；设想了许多其他特征和配置。在图7所示的示例中，图1的客户端计算设备130包括计算机系统710、用于与生物表面180交互的多个部件720、计算机可读介质730和客户端应用740，其可以作为计算机可执行指令而存储在计算机可读介质730上，并且当由计算机系统710执行时，可以实现参考图1的系统100所描述的操作以及图2-3的示例技术的操作。

客户端计算设备130包括子部件，包括但不限于电源711、人机接口713、一个或多个处理器715、网络接口717，并且可以包括计算机可读介质730。电源711是直流电源，例如可充电电池或被配置为连接到线路电源(例如，110VAC、220VAC等)的整流电源。人机接口(HMI)713可以包括能够接收用户输入或生成用于呈现给用户的输出的任何类型的设备，诸如用于音频输出的扬声器、用于接收音频命令的麦克风、按钮开关、拨动开关、电容开关、旋转开关、滑动开关、摇臂开关或触摸屏。

一个或多个处理器715被配置为执行存储在计算机可读介质730上的计算机可执行指令。在实施例中，例如，作为执行客户端应用740的一部分，处理器715被配置为经由通信总线或其他电路向部件720发送信号和/或从部件720接收信号。网络接口717被配置为代表处理器715向和从客户端计算设备130(或其他计算设备)发送和接收信号。网络接口717可以实现任何合适的通信技术，包括但不限于短程无线技术，诸如蓝牙、红外、近场通信和Wi-Fi；远程无线技术，诸如WiMAX、2G、3G、4G、LTE和10G；以及有线技术，诸如USB、火线(FireWire)、雷电技术(Thunderbolt)和/或以太网。计算机可读介质730是其上可以存储计算机可执行指令的任何类型的计算机可读介质，包括但不限于闪存(SSD)、ROM、EPROM、EEPROM和FPGA。计算机可读介质730和处理器715可以被组合成单个设备，诸如ASIC，或者计算机可读介质730可以包括高速缓存存储器、寄存器或处理器715的另一部件。

在所示实施例中，计算机可读介质730存储计算机可执行指令，该计算机可执行指令响应于由一个或多个处理器715的执行而使客户端计算设备130实现控制引擎731。如上所述，控制引擎731控制客户端计算设备130的一个或多个方面。在一些实施例中，计算机可执行指令被配置为使客户端计算设备130执行一个或多个操作，诸如生成目标表面的表面映射、生成迹线或将迹线输出到服务器160。在一些实施例中，控制引擎731通过根据客户端应用740促进计算机系统710和部件720之间的交互来控制基本功能。在一些实施例中，控制引擎731检测来自HMI 713的指示将启动化妆程序的输入(例如，响应于电源开关或“启动”按钮的激活，或检测到图1的相机140前方的面部)，或从客户端计算设备130、远程计算机系统160或用户设备190接收信号(例如，通过蓝牙配对连接)。

客户端计算设备130的部件可以适用于应用，或者可以专用于应用(例如，ASIC)。例如，部件720可以包括一个或多个相机721、显示器723、一个或多个辐射源725和/或一个或多个辐射传感器727，如参考图1更详细地描述的。在一些实施例中，部件720集成到单个设备中。以这种方式，客户端计算设备130可以是被配置为与部件720协同执行客户端应用740的专用计算设备。在一些实施例中，客户端计算设备130是存储客户端应用740的通用移动电子设备，诸如平板电脑或智能手机。

在一些实施例中，客户端应用740还包括图像捕获/3D扫描引擎741，其被配置为捕获和处理从部件720中的一个或多个部件获得的数字图像(例如，彩色图像、红外图像、深度图像等)，包括但不限于立体图像、LiDAR数据或其他形式的表面/深度感测信息。在一些实施例中，这样的数据用于获得目标身体表面(例如，图1的目标表面181)的干净且精确的3D轮廓映射。在一些实施例中，数字图像或扫描由客户端计算设备130处理和/或传输到远程计算机系统160以在3D模型引擎781中进行处理。在实施例中，在位置追踪引擎743中使用捕获的图像数据来确定特征、关键点或边缘在目标身体表面上的位置。在一些实施例中，位置追踪引擎743例如通过实现v-SLAM技术来追踪3D空间中的目标身体表面的轮廓。在一些实施例中，根据本文所述的技术，来自位置追踪引擎743的位置信息用于生成待传输到控制引擎731的信号，该信号用于控制计算机系统710的一个或多个部件720或元件，包括例如源725或HMI 713。

在一些实施例中，基于从客户端计算设备130获得的传感器数据来生成本文所描述的数字3D模型。因此，数字3D模型由客户端计算设备130或一些其他计算设备(诸如云计算系统)或其组合生成。在一些实施例中，数字3D模型包括3D拓扑和纹理信息，其可以用于再现身体表面的准确表示，诸如面部结构和皮肤特征，如参考图1-6更详细地描述的。

在一些实施例中，客户端应用740包括用户界面745。在实施例中，用户界面745包括交互式功能，包括但不限于经由显示器呈现以帮助用户选择化妆设计、教程视频或动画的图形指南或提示。在一些实施例中，用户界面745提供指导(例如，视觉指南，诸如箭头或目标、进度指示符、音频/触觉反馈、合成语音等)以在特定照明条件、角度等下指导用户，以便确保收集足够的数据以供映射和投影引擎使用。

客户端应用740可以包括映射模块747。映射模块747可以是或包括用于将化妆设计的数字表示转换成增强的现实化妆设计过滤器的计算机可读指令(例如，软件、驱动器等)。作为映射模块747的操作的一部分，客户端应用740可以从相机721和传感器727接收实时数据，该实时数据可以由3D扫描引擎741、位置追踪引擎743处理，并且可以用于在施用于目标身体表面的序列期间逐渐更新映射和化妆设计。以这种方式，映射模块747可以对目标身体表面的运动做出响应，从而增加客户端计算设备130对用户部位上的运动的容差，而不会损失化妆设计过滤器的保真度。在一些实施例中，这种实时扫描/追踪的计算资源需求可以通过并行化或分发程序分布在诸如远程计算机系统160的多个设备上。

客户端应用740的通信模块749可以用于准备用于传输到其他设备或系统(诸如远程计算机系统160或用户设备190)的信息，或者从其他设备或系统接收和解释信息，如参考图1更详细描述的。这样的信息可以包括捕获的数字图像、扫描或视频、个人护理设备设置、定制护理程序、用户偏好、用户标识符、设备标识符等。在实施例中，客户端计算设备130收集描述护理程序的执行的数据、身体表面的图像数据或其他数据。在实施例中，这样的数据经由网络接口717传输到远程计算机系统160以用于进一步处理或存储(例如，在产品数据存储783或用户简档数据存储785中)。客户端计算设备130可以由消费者、个人护理专业人员或一些其他实体使用以与系统700的其他部件(诸如远程计算机系统160或用户设备190)进行交互。在实施例中，客户端计算设备130是移动计算设备，诸如配备有部件720和客户端应用740的智能手机或平板计算设备，或者通过与外围设备的电耦合来提供这些部件。

现在将描述远程计算机系统160的说明性部件和功能。远程计算机系统160包括例如在云计算布置中实现一个或多个所示部件的一个或多个服务器计算机。远程计算机系统160包括投影引擎787、3D模型引擎781、产品数据存储783和用户简档数据存储785。在实施例中，3D模型引擎781使用图像数据(例如，彩色图像数据、红外图像数据)和深度数据来生成目标身体表面的3D模型。图像数据是从客户端计算设备130获得的，例如，从与客户端计算设备130集成或以其他方式与客户端计算设备130电耦合的相机721或传感器727获得的。在实施例中，与用户相关联的图像数据和深度数据被存储在用户简档数据存储785中。在一个实施例中，在存储对用户私有或可用于识别用户的任何信息之前获得用户同意。

在实施例中，映射/投影引擎787执行与美容程序有关的数据的处理，诸如使用图像/传感器数据生成目标表面的映射和/或生成美容程序的投影作为增强现实过滤器，然后可以将该增强现实过滤器发送到用户设备190。在一些实施例中，投影引擎787使用来自用户简档数据存储785、产品数据存储783、3D模型引擎781或一些其他源或源的组合的用户信息来生成化妆设计数据。

3D模型引擎781可以采用机器学习或人工智能技术(例如，模板匹配、特征提取和匹配、分类、人工神经网络、深度学习架构、遗传算法等)。例如，为了根据面部的表面映射来生成化妆设计，3D模型引擎781可以分析由3D模型引擎781生成的面部映射，以测量或映射目标身体表面的轮廓、皱纹、皮肤纹理等。3D模型引擎781可以基于由用户通过用户设备190提供的标识符代码来接收描述化妆设计的数据。在这样的场景中，3D模型引擎781可以使用这样的信息来生成化妆设计(例如，图1的化妆设计110)到增强的现实化妆设计过滤器的用户的相应身体表面的图像上的投影。

图7所示的设备可以经由网络170彼此通信，网络170可以包括任何合适的通信技术，包括但不限于有线技术，诸如DSL、以太网、光纤、USB、火线(FireWire)、雷电技术(Thunderbolt)；无线技术，诸如WiFi、WiMAX、3G、4G、LTE、5G、10G和蓝牙；以及专用网络(例如，内联网)或公共网络(例如，互联网)。通常，图7的计算设备或部件或根据所描述的实施例使用的其他部件或计算设备之间的通信直接或通过中间部件或设备发生。

参考图1和7公开和描述的布置的替代方案是可能的。例如，被描述为在多个部件中实现的功能可以替代地被合并到单个部件中，或者被描述为在单个部件中实现的功能可以在多个示出的部件中实现，或者在图1或图7中未示出的其他部件中实现。作为另一示例，在不脱离所描述的实施例的范围的情况下，图1和图7中被示出为包括特定部件的设备可以替代地包括更多部件、更少部件或不同部件。作为另一示例，被描述为由特定设备或子部件执行的功能可以替代地由系统内的一个或多个其他设备来执行。作为示例，3D模型引擎714可以在客户端计算设备130中或在一些其他设备或设备的组合中实现。

除了本文其他地方描述的所描述的实施例的技术益处之外，在一些实施例中实现了许多其他技术益处。例如，系统700允许过程的一些方面由个人护理设备或客户端计算设备独立地进行，同时将其他处理负担移动到远程计算机系统160(其可以是相对高功率和可靠的计算系统)，从而改善性能并且保持用于由个人护理设备或客户端计算设备提供的功能的电池寿命。

通常，本文使用的词语“引擎”是指以编程语言(例如C、C++、COBOL、JAVA^TM、PHP、Perl、HTML、CSS、JavaScript、VBScript、ASPX、Microsoft.NET^TM和/或类似物)编写的硬件或软件指令所包含的逻辑。引擎可以被编译成可执行程序或以解释的编程语言编写。软件引擎可以从其他引擎或从其自身调用。通常，本文描述的引擎是指可以与其他引擎合并或划分为子引擎的逻辑模块。引擎可以存储在任何类型的计算机可读介质或计算机存储设备中，并且存储在一个或多个通用计算机上并且由其执行，从而创建被配置为提供引擎或其功能的专用计算机。

如本领域普通技术人员所理解的，如本文所述的“数据存储”可以是被配置为存储数据以供计算设备访问的任何合适的设备。数据存储的一个示例是在一个或多个计算设备上执行并且可通过高速网络访问的高度可靠的高速关系数据库管理系统(DBMS)。数据存储的另一示例是键值存储。然而，可以使用能够响应于查询而快速且可靠地提供所存储的数据的任何其他合适的存储技术和/或设备，并且计算设备可以是本地而不是通过网络可访问的，或者可以作为基于云的服务来提供。数据存储还可以包括以有组织的方式存储在计算机可读存储介质上的数据，如下面进一步描述的。本领域普通技术人员将认识到，在不脱离本公开的范围的情况下，本文描述的独立的数据存储可以组合成单个数据存储，和/或本文描述的单个数据存储可以分成多个数据存储。

图8是根据各实施例示出的示例计算设备800的各方面的框图。虽然参考各实施例描述了多种不同类型的计算设备，但是示例计算设备800描述了许多不同类型的计算设备所共有的各种元件。虽然图8是参考被实现为网络上的设备的计算设备来描述的，但以下描述适用于服务器、个人计算机、移动电话、智能手机、平板电脑、嵌入式计算设备、以及可用于实现本公开的实施例的部分的其他设备。此外，本领域普通技术人员和其他人将认识到，计算设备800可以是任何数量的当前可用的或尚未开发的设备中的任何一个。

在计算设备800最基本的配置中，示例计算设备800包括通过通信总线806连接的至少一个处理器802和系统存储器804。根据设备的确切配置和类型，系统存储器804可以是易失性或非易失性存储器，诸如只读存储器(“ROM”)、随机存取存储器(“RAM”)、EEPROM、闪存或类似的存储器技术。本领域普通技术人员和其他人将认识到，系统存储器804通常存储处理器802可立即访问和/或当前正在操作的数据和/或程序模块。在这方面，处理器802可以通过支持指令的执行来用作计算设备800的计算中心。

如图8进一步所示，计算设备800可以包括网络接口810，网络接口810包括用于通过网络与其他设备通信的一个或多个部件。本公开的实施例可以访问利用网络接口810使用公共网络协议来执行通信的基本服务。网络接口810还可以包括被配置为经由一个或多个无线通信协议(诸如WiFi、2G、3G、LTE、WiMAX、蓝牙、低功耗蓝牙等)进行通信的无线网络接口。如本领域普通技术人员将理解的，图8中所示的网络接口810可以表示上面关于图1的系统100的特定部件所描述和示出的一个或多个无线接口或物理通信接口。

在图8所示的示例性实施例中，计算设备800还包括存储介质808。然而，可以使用不包括用于将数据持久存储到本地存储介质的装置的计算设备来访问服务。因此，图8中所描绘的存储介质808用虚线表示以指示存储介质808是可选的。在任何情况下，存储介质808可以是易失性或非易失性的、可移动的或不可移动的，使用能够存储信息的任何技术来实现，包括但不限于硬盘驱动器、固态驱动器、CD ROM、DVD或其他盘存储器、磁带盒、磁带、磁盘存储器等。

如本文所使用的，术语“计算机可读介质”包括以能够存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术实现的易失性和非易失性以及可移动和不可移动介质。就此而言，图8中描绘的系统存储器804和存储介质808仅仅是计算机可读介质的示例。

包括处理器802、系统存储器804、通信总线806、存储介质808和网络接口810的计算设备的合适的实现是已知的并且是商业上可获得的。为了便于说明并且因为对于理解所要求保护的主题不重要，所以图8没有示出许多计算设备的一些典型部件。在这方面，示例计算设备800可以包括输入设备，诸如键盘、小键盘、鼠标、麦克风、触摸输入设备、触摸屏等。这样的输入设备可以通过有线或无线连接(包括RF、红外、串联、并联、蓝牙、低功耗蓝牙、USB或使用无线或物理连接的其他合适的连接协议)耦合到示例计算设备800。类似地，示例计算设备800还可以包括诸如显示器、扬声器、打印机等的输出设备。由于这些设备在本领域中是公知的，因此在此不进一步说明或描述它们。

虽然已经示出和描述了说明性实施例，但是应当理解的是，在不脱离本发明的精神和范围的情况下，可以在其中进行各种改变。应当理解的是，本文描述的方法和系统不限于特定方法、特定部件或特定实施方式。还应当理解的是，本文使用的术语仅用于描述实施例的目的，而不旨在进行限制。

如说明书和所附权利要求中所使用的，单数形式“一”、“一个”和“该”包括复数引用，除非上下文另有明确规定。范围在本文中可以表达为从“约”一个特定值和/或到“约”另一个特定值。当表达这样的范围时，另一实施例包括从一个特定值和/或到另一特定值。类似地，当通过使用先行词“约”将值表示为近似值时，将理解为特定值形成另一实施例。还应理解的是，每个范围的端点相对于另一个端点都是重要的，并且独立于另一个终点。

“任选的”或“任选地”意指随后描述的事件或情况可以发生或可以不发生，并且该描述包括所述事件或情况发生的实例和不发生的实例。

在本说明书的整个说明书和权利要求书中，词语“包括”和词语的变型，诸如“包括”和“包括”，意指“包括但不限于”，并且不旨在排除例如其他部件、整数或步骤。“示例性”意指“其示例”并且不旨在传达优选或理想实施例的指示。“诸如”不是限制性的，而是出于解释的目的。

权利要求书(按照条约第19条的修改)

1.一个或多个存储有计算机可读指令的非暂态计算机存储设备，当所述计算机可读指令由计算电路执行时，使所述计算电路执行用于生成增强的现实化妆设计过滤器的操作，所述操作包括：

使用一个或多个辐射传感器来限定生物表面的基线描述，所述辐射传感器与所述计算电路电耦合，其中，所述基线描述包括所述生物表面的数字表示，所述数字表示包括表面映射和颜色信息；

使用所述辐射传感器中的一个或多个来识别化妆品制剂向所述生物表面的施用，其中，所述施用包括施用器的运动或设置在所述生物表面上的化妆品制剂的改变；

参考所述基线描述来生成描述所述施用的迹线，其中，所述迹线包括待施用或待改变的化妆品制剂的程度、颜色、层序列或反射率；以及

输出所述迹线，其中，所述增强的现实化妆设计过滤器可以通过增强现实界面来观看，以引导观看者通过化妆程序。

2.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，识别所述化妆品制剂的所述施用包括：使用所述辐射传感器中的一个或多个和所述基线描述以检测所述化妆品制剂的类型。

3.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，生成所述迹线包括：

接收描述面部或面部特征的多个形状类型的电子信息；

使用所述基线描述将所述形状类型的第一形状类型归属于所述生物表面的至少一部分；

生成所述化妆品制剂的施用的数字数据的数字表示，所述数字表示描述了相对于所述基线描述的位置信息；以及

将所述数字表示从所述形状类型的所述第一形状类型转换为第二形状类型。

4.根据权利要求3所述的一个或多个非暂态计算机存储设备，其中，所述生物表面是面部，并且其中，所述第一形状类型和所述第二形状类型描述了面部特征。

5.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，限定生物表面的基线描述包括：使用与所述计算电路电耦合的辐射源将不可见电磁辐射发射至所述生物表面上。

6.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，所述一个或多个辐射传感器包括相机，所述相机配置为检测来自以下各项的电磁辐射：紫外线、可见光或红外光谱范围或其组合。

7.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，生成所述迹线包括：

追踪所述施用相对于所述生物表面的运动；以及

生成相对于所述基线描述的所述运动的数字表示。

8.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，所述指令由所述计算电路执行时，使得所述计算电路执行进一步操作，所述进一步操作包括：

识别所述化妆品制剂；和

使用所述化妆品制剂的标识符信息来限定所述化妆品制剂的颜色。

9.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，所述指令由所述计算电路执行时，使所述计算电路执行进一步操作，所述进一步操作包括：

评估所述生物表面的表面色调；

评估所使用的所述化妆品制剂的制剂色调；以及

使用所述表面色调和所述制剂色调来确定所述化妆品制剂的颜色。

10.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，所述一个或多个非暂态计算机存储设备与智能手机电耦合。

11.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，输出所述迹线包括：

将所述迹线传送到远程计算系统。

12.一种用于生成增强的现实化妆设计过滤器的方法，包括：

使用一个或多个辐射源和一个或多个辐射传感器来限定生物表面的基线描述，其中，所述基线描述包括所述生物表面的数字表示，所述数字表示包括表面映射和颜色信息；

使用所述辐射传感器来识别化妆品制剂向所述生物表面的施用，其中，所述施用包括施用器的运动或设置在所述生物表面上的化妆品制剂的改变；

参考所述基线描述来生成描述所述施用的迹线，其中，所述迹线包括待施用或待改变的化妆品制剂的程度、颜色、层序列或反射率；以及

输出所述迹线，其中，所述增强现实化妆设计过滤程序可以通过增强现实界面来观看，以引导观看者通过化妆程序。

13.根据权利要求12所述的方法，其中，生成所述迹线包括：

接收描述多个形状类型的形状信息；

使用所述形状信息将所述形状类型的第一形状类型归属于所述生物表面的至少一部分；

生成所述化妆品制剂的施用的数字表示，所述数字表示描述了相对于所述基线描述的位置信息；以及

将所述数字表示从所述形状类型的所述第一形状类型转换为第二形状类型。

14.根据权利要求12所述的方法，其中，识别所述化妆品制剂的所述施用包括：

检测所述化妆品制剂的施用器；

评估所述化妆品制剂的所述施用器相对于所述生物表面的位置；

追踪所述施用器相对于所述生物表面的运动；以及

生成相对于所述基线描述的所述运动的数字表示。

15.根据权利要求12所述的方法，还包括：

评估所述生物表面的表面色调；

评估所述化妆品制剂的制剂色调；以及

使用所述表面色调和所述制剂色调来确定所述化妆品制剂的颜色。

Claims (15)

1.一个或多个存储有计算机可读指令的非暂态计算机存储设备，当所述计算机可读指令由计算电路执行时，使所述计算电路执行用于生成增强的现实化妆设计过滤器的操作，所述操作包括：

使用一个或多个辐射传感器来限定生物表面的基线描述，所述辐射传感器与所述计算电路电耦合；

使用所述辐射传感器中的一个或多个来识别化妆品制剂向所述生物表面的施用；

参考所述基线描述来生成描述所述施用的迹线；以及

输出所述迹线。

2.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，识别所述化妆品制剂的所述施用包括：相对于所述生物表面使用所述辐射传感器中的一个或多个和所述基线描述以检测所述化妆品制剂。

3.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，生成所述迹线包括：

接收描述多个形状类型的信息；

使用所述基线描述将所述形状类型的第一形状类型归属于所述生物表面的至少一部分；

生成所述化妆品制剂的施用的数字表示，所述数字表示描述了相对于所述基线描述的位置信息；以及

将所述数字表示从所述形状类型的所述第一形状类型转换为第二形状类型。

4.根据权利要求3所述的一个或多个非暂态计算机存储设备，其中，所述生物表面是面部，并且其中，所述第一形状类型和所述第二形状类型描述了面部特征。

5.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，限定生物表面的基线描述包括：使用与所述计算电路电耦合的辐射源将不可见电磁辐射发射至所述生物表面上。

6.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，所述一个或多个辐射传感器包括相机，所述相机配置为检测来自以下各项的电磁辐射：紫外线、可见光或红外光谱范围或其组合。

7.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，生成所述迹线包括：

追踪所述施用相对于所述生物表面的运动；以及

生成相对于所述基线描述的所述运动的数字表示。

8.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，所述指令由所述计算电路执行时，使得所述计算电路执行进一步操作，所述进一步操作包括：

识别所述化妆品制剂；和

使用所述化妆品制剂的标识符信息来限定所述化妆品制剂的颜色。

9.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，所述指令由所述计算电路执行时，使所述计算电路执行进一步操作，所述进一步操作包括：

评估所述生物表面的表面色调；

评估所使用的所述化妆品制剂的制剂色调；以及

使用所述表面色调和所述制剂色调来确定所述化妆品制剂的颜色。

10.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，所述一个或多个非暂态计算机存储设备与智能手机电耦合。

11.根据权利要求1所述的一个或多个非暂态计算机存储设备，其中，输出所述迹线包括：

将所述迹线传送到远程计算系统。

12.一种用于生成增强的现实化妆设计过滤器的方法，包括：

使用一个或多个辐射源和一个或多个辐射传感器来限定生物表面的基线描述；

使用所述辐射传感器来识别化妆品制剂向所述生物表面的施用；

参考所述基线描述来生成描述所述施用的迹线；以及

输出所述迹线。

13.根据权利要求12所述的方法，其中，生成所述迹线包括：

接收描述多个形状类型的形状信息；

使用所述形状信息将所述形状类型的第一形状类型归属于所述生物表面的至少一部分；

生成所述化妆品制剂的施用的数字表示，所述数字表示描述了相对于所述基线描述的位置信息；以及

将所述数字表示从所述形状类型的所述第一形状类型转换为第二形状类型。

14.根据权利要求12所述的方法，其中，识别所述化妆品制剂的所述施用包括：

检测所述化妆品制剂的施用器；

评估所述化妆品制剂的所述施用器相对于所述生物表面的位置；

追踪所述施用器相对于所述生物表面的运动；以及

生成相对于所述基线描述的所述运动的数字表示。

15.根据权利要求12所述的方法，还包括：

评估所述生物表面的表面色调；

评估所述化妆品制剂的制剂色调；以及

使用所述表面色调和所述制剂色调来确定所述化妆品制剂的颜色。