CN113486695A - 一种化妆镜的妆容辅助方法及化妆镜 - Google Patents

Abstract

本申请提供一种化妆镜的妆容辅助方法及化妆镜，在接收到妆容辅助指示后，从检测到的面部图像中获取妆容辅助部位的M个第一关键点的位置信息；将M个第一关键点的位置信息通过该妆容辅助部位的妆容模型，确定该妆容辅助部位的妆容辅助轨迹；将妆容辅助轨迹显示于化妆镜上。该方案中化妆镜通过实时捕获用户的面部图像，关于各个妆容辅助部位，化妆镜为用户实时生成对应的妆容辅助轨迹，且通过化妆镜的镜面对妆容辅助轨迹进行实时展示，从而达到了一种实时性的、高准确性的辅助上妆的效果。

Description

一种化妆镜的妆容辅助方法及化妆镜

技术领域

本申请实施例涉及人工智能技术领域，尤其涉及一种化妆镜的妆容辅助方法及化妆镜。

背景技术

目前，随着计算机技术的超速发展，各种智能设备日新月异、种类繁多。其中，智能化妆镜越也不例外，持续受到用户的追捧与购买。智能化妆镜汇集了各种美妆教程、视频和资讯，用户直接通过镜面显示器来控制智能系统，也可以通过语音或者手势动作来与镜面进行简单的交互；在用户面对智能化妆镜整理仪表仪容的过程中，智能化妆镜可以实现控制播放音乐、分析用户的健康状态、查询天气情况、阅读新闻、观赏节目等诸多功能。

然而，针对用户在对脸部进行化妆的场景，智能化妆镜尚无法提供一种妆容的辅助方案，用于实现用户实时地根据智能化妆镜对妆容的指示来进行脸部妆容的修饰。

申请内容

本申请提供一种化妆镜的妆容辅助方法及化妆镜，用于实现智能化妆镜实时地根据用户脸部的当前状态为用户自动化生成并显示待化妆部位的辅助妆容，从而便于用户根据辅助妆容进行化妆，达到贴合的辅助效果。

第一方面，本申请实施例提供一种化妆镜的妆容辅助方法，该方法包括：在接收到妆容辅助指示后，从检测到的面部图像中获取妆容辅助部位的M个第一关键点的位置信息；将所述M个第一关键点的位置信息通过所述妆容辅助部位的妆容模型，确定所述妆容辅助部位的妆容辅助轨迹；将所述妆容辅助轨迹显示于化妆镜上。

基于该方案，对于化妆镜，通过接收用户发送的妆容辅助指示，便可向用户提供妆容辅助功能，其中，针对任一妆容辅助部位，化妆镜从所获取的用户的面部图像中获取该妆容辅助部位对应的M个第一关键点的位置信息，并将所确定的M个第一关键点的位置信息输入针对该妆容辅助部位的妆容模型中，由妆容模型构建关于该妆容辅助部位的妆容辅助轨迹，最终将构建好的妆容辅助轨迹显示于化妆镜上，便于用户根据妆容辅助轨迹对该妆容辅助部位进行上妆。该方案中化妆镜通过实时捕获用户的面部图像，关于各个妆容辅助部位，化妆镜为用户实时生成对应的妆容辅助轨迹，且通过化妆镜的镜面对妆容辅助轨迹进行实时展示，从而达到了一种实时性的、高准确性的辅助上妆的效果。

在一种可能实现的方法中，所述M个第一关键点包括妆容辅助部位的第一头部关键点和妆容辅助部位的第一尾部关键点；所述将所述M个第一关键点的位置信息通过所述妆容辅助部位的妆容模型，确定所述妆容辅助部位的妆容辅助轨迹，包括：根据所述第一头部关键点和所述第一尾部关键点，确定所述妆容辅助部位的各辅助点的第一坐标值；针对任一辅助点，获取相邻点与所述辅助点之间的预设角度；根据所述预设角度和所述相邻点的第二坐标值，确定所述辅助点的第二坐标值；根据所述辅助点的第一坐标值和所述辅助点的第二坐标值确定所述辅助点的位置信息；根据各辅助点的位置信息和所述M个第一关键点的位置信息，确定所述妆容辅助轨迹。

基于该方案，针对一妆容辅助部位，从标识该妆容辅助部位的M个第一关键点中，获取第一头部关键点和第一尾部关键点，并根据第一头部关键点和第一尾部关键点构建关于该妆容辅助部位的妆容辅助轨迹，其中首先可以确定该妆容辅助部位的各辅助点的第一坐标值，然后针对其中的任一个辅助点，根据预设的对该妆容辅助部位的设计要求，获取相邻点与该辅助点的预设角度，接着根据预设角度和相邻点的第二坐标值，确定该辅助点的第二坐标值，从而用该辅助点的第一坐标值和该辅助点的第二坐标值表示该辅助点的位置信息，最后通过该妆容辅助部位的M个第一关键点的位置信息，确定关于该妆容辅助部位的妆容辅助轨迹。该方式中，在为任一妆容辅助部位生成妆容辅助轨迹时，可以将该妆容辅助部位的第一头部关键点和第一尾部关键点作为构建的起点，并基于预设的对该妆容辅助部位的设计要求以及用户实时的头部姿态，实时地构建妆容辅助轨迹并向用户进行展示，便于用户实时地根据所显示的妆容辅助轨迹对妆容辅助部位进行上妆，提升了用户体验感。

在一种可能实现的方法中，所述根据所述辅助点的第一坐标值和所述辅助点的第二坐标值确定所述辅助点的位置信息，包括：根据所述第一头部关键点的第二坐标值和所述第一尾部关键点的第二坐标值，确定所述第一头部关键点和所述第一尾部关键点之间的第一偏转角度；根据所述第一偏转角度调整所述辅助点的第一坐标值和所述辅助点的第二坐标值，得到所述辅助点的位置信息。

基于该方案，用户在面对化妆镜进行上妆时，难免发生偏头的情况。对于这种情形，针对某一妆容辅助部位，通过确定该妆容辅助部位相较于用户在正对镜面时的妆容辅助部位的第一偏转角度，然后根据该第一偏转角度对用户正对镜面时的妆容辅助部位对应的妆容辅助轨迹进行调整，从而得到该妆容辅助部位的多个辅助点的位置信息并形成妆容辅助轨迹向用户进行展示，提升了用户体验感。

在一种可能实现的方法中，所述从检测到的面部图像中获取妆容辅助部位的M个第一关键点的位置信息，包括：在确定所述面部图像不存在遮挡情况时，根据人脸关键点检测算法，确定所述M个第一关键点的位置信息。

基于该方案，对于一妆容辅助部位，若化妆镜通过所获取的面部图像确定并未发生对该妆容辅助部位的遮挡，则可以直接根据人脸关键点检测算法确定针对该妆容辅助部位的M个第一关键点的位置信息。该方式具有准确、高效地生成关于该妆容辅助部位的妆容辅助轨迹的效果，并在化妆镜上显示妆容辅助轨迹，便于用户对该妆容辅助部位进行上妆。

在一种可能实现的方法中，所述从检测到的面部图像中获取妆容辅助部位的M个第一关键点的位置信息，包括：在确定所述妆容辅助部位存在遮挡情况时，根据所述妆容辅助部位的对称部位的M个第二关键点的位置信息，确定所述M个第一关键点的位置信息。

基于该方案，基于人脸是对称的思想，对于一妆容辅助部位，若化妆镜通过所获取的面部图像确定存在对该妆容辅助部位的遮挡事件，则可以根据该妆容辅助部位的对称部位的M个第二关键点的位置信息，确定针对该妆容辅助部位的M个第一关键点的位置信息，其中化妆镜确定该妆容辅助部位的对称部位并未发生遮挡事件。该方式具有准确、灵活地生成关于妆容辅助部位的妆容辅助轨迹的效果，并在化妆镜上显示妆容辅助轨迹，便于用户对该妆容辅助部位进行上妆。

在一种可能实现的方法中，所述根据所述妆容辅助部位的对称部位的M个第二关键点的位置信息，确定所述M个第一关键点的位置信息，包括：根据所述面部图像的N个关键点确定头部姿态；根据所述头部姿态中的偏航角，调整所述对称部位的第二头部关键点和所述对称部位的第二尾部关键点之间的距离；根据所述头部姿态中的滚转角，调整所述第二头部关键点和所述第二尾部关键点之间的第二偏转角度；根据调整后的第二头部关键点和调整后的第二尾部关键点，得到所述M个第一关键点的位置信息。

基于该方案，对于一妆容辅助部位，若化妆镜通过所获取的面部图像确定存在对该妆容辅助部位的遮挡事件，则可以根据该妆容辅助部位的对称部位的M个第二关键点的位置信息来确定针对该妆容辅助部位的M个第一关键点的位置信息，其中，化妆镜通过面部图像的N个关键点确定用户的头部姿态，头部姿态可以通过偏航角和滚转角进行描述，在获取到偏航角以及滚转角后，对对称部位的第二头部关键点和第二尾部关键点进行调整，从而可以根据调整后的第二头部关键点和调整后的第二尾部关键点确定该妆容辅助部位的M个第一关键点的位置信息。该方式具有准确、灵活地生成关于妆容辅助部位的妆容辅助轨迹的效果，并在化妆镜上显示妆容辅助轨迹，便于用户对该妆容辅助部位进行上妆。

第二方面，本申请实施例提供一种化妆镜，该化妆镜包括：图像采集器，用于获取用户的面部图像；处理器，被配置为：在接收到妆容辅助指示后，从所述面部图像中获取妆容辅助部位的M个第一关键点的位置信息；将所述M个第一关键点的位置信息通过所述妆容辅助部位的妆容模型，确定所述妆容辅助部位的妆容辅助轨迹；显示屏，设置于所述化妆镜的镜面，用于根据处理器的配置，显示所述妆容辅助轨迹。

基于该方案，对于化妆镜，通过接收用户发送的妆容辅助指示，便可向用户提供妆容辅助功能，其中，针对任一妆容辅助部位，化妆镜从所获取的用户的面部图像中获取该妆容辅助部位对应的M个第一关键点的位置信息，并将所确定的M个第一关键点的位置信息输入针对该妆容辅助部位的妆容模型中，由妆容模型构建关于该妆容辅助部位的妆容辅助轨迹，最终将构建好的妆容辅助轨迹显示于化妆镜上，便于用户根据妆容辅助轨迹对该妆容辅助部位进行上妆。该方案中化妆镜通过实时捕获用户的面部图像，关于各个妆容辅助部位，化妆镜为用户实时生成对应的妆容辅助轨迹，且通过化妆镜的镜面对妆容辅助轨迹进行实时展示，从而达到了一种实时性的、高准确性的辅助上妆的效果。

在一种可能实现的方法中，所述M个第一关键点包括妆容辅助部位的第一头部关键点和妆容辅助部位的第一尾部关键点；所述处理器，被具体配置为：根据所述第一头部关键点和所述第一尾部关键点，确定所述妆容辅助部位的各辅助点的第一坐标值；针对任一辅助点，获取相邻点与所述辅助点之间的预设角度；根据所述预设角度和所述相邻点的第二坐标值，确定所述辅助点的第二坐标值；根据所述辅助点的第一坐标值和所述辅助点的第二坐标值确定所述辅助点的位置信息；根据各辅助点的位置信息和所述M个第一关键点的位置信息，确定所述妆容辅助轨迹。

基于该方案，针对一妆容辅助部位，从标识该妆容辅助部位的M个第一关键点中，获取第一头部关键点和第一尾部关键点，并根据第一头部关键点和第一尾部关键点构建关于该妆容辅助部位的妆容辅助轨迹，其中首先可以确定该妆容辅助部位的各辅助点的第一坐标值，然后针对其中的任一个辅助点，根据预设的对该妆容辅助部位的设计要求，获取相邻点与该辅助点的预设角度，接着根据预设角度和相邻点的第二坐标值，确定该辅助点的第二坐标值，从而用该辅助点的第一坐标值和该辅助点的第二坐标值表示该辅助点的位置信息，最后通过该妆容辅助部位的M个第一关键点的位置信息，确定关于该妆容辅助部位的妆容辅助轨迹。该方式中，在为任一妆容辅助部位生成妆容辅助轨迹时，可以将该妆容辅助部位的第一头部关键点和第一尾部关键点作为构建的起点，并基于预设的对该妆容辅助部位的设计要求以及用户实时的头部姿态，实时地构建妆容辅助轨迹并向用户进行展示，便于用户实时地根据所显示的妆容辅助轨迹对妆容辅助部位进行上妆，提升了用户体验感。

在一种可能实现的方法中，所述处理器，被具体配置为：根据所述第一头部关键点的第二坐标值和所述第一尾部关键点的第二坐标值，确定所述第一头部关键点和所述第一尾部关键点之间的第一偏转角度；根据所述第一偏转角度调整所述辅助点的第一坐标值和所述辅助点的第二坐标值，得到所述辅助点的位置信息。

基于该方案，用户在面对化妆镜进行上妆时，难免发生偏头的情况。对于这种情形，针对某一妆容辅助部位，通过确定该妆容辅助部位相较于用户在正对镜面时的妆容辅助部位的第一偏转角度，然后根据该第一偏转角度对用户正对镜面时的妆容辅助部位对应的妆容辅助轨迹进行调整，从而得到该妆容辅助部位的多个辅助点的位置信息并形成妆容辅助轨迹向用户进行展示，提升了用户体验感。

在一种可能实现的方法中，所述处理器，被具体配置为：在确定所述面部图像不存在遮挡情况时，根据人脸关键点检测算法，确定所述M个第一关键点的位置信息。

基于该方案，对于一妆容辅助部位，若化妆镜通过所获取的面部图像确定并未发生对该妆容辅助部位的遮挡，则可以直接根据人脸关键点检测算法确定针对该妆容辅助部位的M个第一关键点的位置信息。该方式具有准确、高效地生成关于该妆容辅助部位的妆容辅助轨迹的效果，并在化妆镜上显示妆容辅助轨迹，便于用户对该妆容辅助部位进行上妆。

在一种可能实现的方法中，所述处理器，被具体配置为：在确定所述妆容辅助部位存在遮挡情况时，根据所述妆容辅助部位的对称部位的M个第二关键点的位置信息，确定所述M个第一关键点的位置信息。

基于该方案，基于人脸是对称的思想，对于一妆容辅助部位，若化妆镜通过所获取的面部图像确定存在对该妆容辅助部位的遮挡事件，则可以根据该妆容辅助部位的对称部位的M个第二关键点的位置信息，确定针对该妆容辅助部位的M个第一关键点的位置信息，其中化妆镜确定该妆容辅助部位的对称部位并未发生遮挡事件。该方式具有准确、灵活地生成关于妆容辅助部位的妆容辅助轨迹的效果，并在化妆镜上显示妆容辅助轨迹，便于用户对该妆容辅助部位进行上妆。

在一种可能实现的方法中，所述处理器，被具体配置为：根据所述面部图像的N个关键点确定头部姿态；根据所述头部姿态中的A，调整所述对称部位的第二头部关键点和所述对称部位的第二尾部关键点之间的距离；根据所述头部姿态中的B，调整所述第二头部关键点和所述第二尾部关键点之间的第二偏转角度；根据调整后的第二头部关键点和调整后的第二尾部关键点，得到所述M个第一关键点的位置信息。

基于该方案，对于一妆容辅助部位，若化妆镜通过所获取的面部图像确定存在对该妆容辅助部位的遮挡事件，则可以根据该妆容辅助部位的对称部位的M个第二关键点的位置信息来确定针对该妆容辅助部位的M个第一关键点的位置信息，其中，化妆镜通过面部图像的N个关键点确定用户的头部姿态，头部姿态可以通过偏航角和滚转角进行描述，在获取到偏航角以及滚转角后，对对称部位的第二头部关键点和第二尾部关键点进行调整，从而可以根据调整后的第二头部关键点和调整后的第二尾部关键点确定该妆容辅助部位的M个第一关键点的位置信息。该方式具有准确、灵活地生成关于妆容辅助部位的妆容辅助轨迹的效果，并在化妆镜上显示妆容辅助轨迹，便于用户对该妆容辅助部位进行上妆。

第三方面，本申请实施例提供了一种计算设备，包括：

存储器，用于存储程序指令；

处理器，用于调用所述存储器中存储的程序指令，按照获得的程序执行如第一方面的任一实现方法。

第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于使计算机执行如第一方面的任一实现方法。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的一种可能的系统架构示意图；

图2为本申请实施例提供的一种化妆镜的妆容辅助方法；

图3为本申请实施例提供的一种面部图像的关键点的位置信息的示意图；

图4为本申请实施例提供的一种基于28点的眉形构建示意图；

图5为本申请实施例提供的一种基于16点的腮红构建示意图；

图6为本申请实施例提供的一种妆容辅助轨迹的调整示意图；

图7为本申请实施例提供的一种化妆镜；

图8为本申请实施例提供的一种计算设备的示意图。

具体实施方式

为了使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请作进一步地详细描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。

目前，由于智能化妆镜汇集了各种美妆教程、视频和资讯，用户通过使用智能化妆镜，可以接收到各种美妆信息；此外，用户在面对智能化妆镜整理仪表仪容的过程中，智能化妆镜还可支持音乐播放、分析用户的健康状态、查询天气情况、阅读行为、观赏节目等诸多功能。

然而，针对用户在对脸部进行化妆的场景，智能化妆镜尚无法提供一种妆容的辅助方案，用于实现用户实时地根据智能化妆镜对妆容的指示来进行脸部妆容的修饰。

基于上述问题，本申请实施例提供一种可能的系统架构。如图1所示，为本申请实施例提供的一种可能的系统架构示意图，该系统架构包括化妆镜110和用户120。其中，化妆镜110包括处理器1101和图像采集器1102，可选的，化妆镜110还包括显示屏1103。

其中，图像采集器1102可以为直接安装于化妆镜110上的摄像头，也可以为间接连接于化妆镜110的摄像头，本申请实施例不做具体限定。图像采集器1102可以用于实时地获取用户的面部图像，并将所获取的面部图像发送至化妆镜110中的处理器1101。

处理器1101用于对图像采集器1102发送的面部图像进行处理。其中，处理的内容可以包括：在接收到妆容辅助指示后，针对任一个妆容辅助部位，从面部图像中确定针对该妆容辅助部位的M个第一关键点的位置信息；通过将所确定的M个第一关键点的位置信息输入至适用于该妆容辅助部位的妆容模型中，从而可以得到针对该妆容辅助部位的妆容辅助轨迹。

显示屏1103设置于化妆镜110的镜面上，用于对处理器1101确定出的妆容辅助轨迹进行展示，以便于用户根据所显示的妆容辅助轨迹对妆容辅助部位进行上妆。

基于背景技术的问题和图1所示的系统架构，如图2所示，为本申请实施例提供的一种化妆镜的妆容辅助方法，该方法可以由图1所示的处理器1101执行，包括以下步骤：

步骤201，在接收到妆容辅助指示后，从检测到的面部图像中获取妆容辅助部位的M个第一关键点的位置信息。

在本步骤中，所述面部图像可以由图1所示的图像采集器1102对用户的脸部实时采集而得到。

步骤202，将所述M个第一关键点的位置信息通过所述妆容辅助部位的妆容模型，确定所述妆容辅助部位的妆容辅助轨迹。

在本步骤中，针对用户脸部的任一妆容辅助部位，可以预先构建好关于该妆容辅助部位的妆容模型。具体的，在为妆容辅助部位构建妆容模型的过程中，通过获取用户脸部关键点的位置信息，其中，对于用户脸部的不同部位，关键点的位置信息各不相同，从而在获取到用户脸部关键点的位置信息后，可以根据妆容辅助部位的关键点的位置信息构建妆容模型。因此，针对任一妆容辅助部位，可构建对应的妆容模型，并在获取到关于妆容辅助部位的关键点的位置信息后，通过输入对应的妆容模型中，从而可以快速确定出妆容辅助部位的妆容辅助轨迹。

步骤203，将所述妆容辅助轨迹显示于化妆镜上。

在本步骤中，所述妆容辅助轨迹可以通过图1所示的显示屏1103进行显示，以便于用户可以实时地根据所显示的妆容辅助轨迹对妆容辅助部位进行化妆。

基于该方案，对于化妆镜，通过接收用户发送的妆容辅助指示，便可向用户提供妆容辅助功能，其中，针对任一妆容辅助部位，化妆镜从所获取的用户的面部图像中获取该妆容辅助部位对应的M个第一关键点的位置信息，并将所确定的M个第一关键点的位置信息输入针对该妆容辅助部位的妆容模型中，由妆容模型构建关于该妆容辅助部位的妆容辅助轨迹，最终将构建好的妆容辅助轨迹显示于化妆镜上，便于用户根据妆容辅助轨迹对该妆容辅助部位进行上妆。该方案中化妆镜通过实时捕获用户的面部图像，关于各个妆容辅助部位，化妆镜为用户实时生成对应的妆容辅助轨迹，且通过化妆镜的镜面对妆容辅助轨迹进行实时展示，从而达到了一种实时性的、高准确性的辅助上妆的效果。

以下将结合示例分别对上述一些步骤进行详细说明。

在上述步骤201的一个实施中，妆容辅助指示可以是用户点击智能化妆镜中的“面部上妆”的功能按钮；相应的，智能化妆镜可以接收到用户发出的需要对自己的面部进行化妆的指示，此时智能化妆镜通过启用图像采集器来对用户的面部进行图像采集，对采集到的面部图像进行分析后为用户推荐适宜的妆容。其中，对采集到的面部图像进行分析，可以通过实用的人脸关键点检测器(A Practical Facial Landmark Detector，PFLD)对面部图像进行关键点位置信息的识别。PFLD算法是目前主流数据集上精确度高、实时性好的人脸关键点检测算法模型，包括：在无约束姿态、表情、光照以及遮挡的复杂情况下，PFLD人脸关键点检测算法可表现出很高的准确性；以及，拥有140fps(Frames Per Second，即每秒传输帧数)性能的模型仅2.1M，从而在嵌入式平台上可达到良好的实时性效果。PFLD人脸关键点检测算法针对几何约束和数据不平衡问题，设计了一种新的损失函数；为了扩大感受且更好地捕捉人脸的全局结构，设计了一种多尺度全链接MS-FC层用于精确定位面部图像中的关键点。如采用106个关键点标注数据，定位眼部轮廓等细节位置。如图3所示，为本申实施例提供的一种面部图像的关键点的位置信息的示意图，图3中，不仅针对用户面部轮廓进行了标注，还针对眉毛、眼睛、鼻子以及嘴巴等细节位置进行了标注，如针对用户的右侧眉毛，使用26、27、28、29、30、31、32和33这8个关键点进行标注；对于用户脸部的其他部位，不再一一举例说明。

可选的，在获取到用户面部的关键点的位置信息后，可以确定用户的头部姿态。头部姿态指的是用户的头部相对于相机的方向和位置。

通过移动物体相对于相机的位置，或者移动相机相对于物体的位置，即可改变物体的姿态。姿态估计问题通常是Perspective-n-Point(透视n点定位，PNP)问题，即相对于标定相机(calibrated camera)，确定物体的姿态。其中，已知物体的n个3D点，以及其在图片中所对应的2D投影，则对于一个标定好的摄像机，根据目标在3D世界坐标系中n个点的坐标和对应投影到2D图像坐标系中的点集之间的变换关系矩阵进行求解。

当将确定物体姿态的方法应用于用户头部姿态的确定时，根据前述的PFLD人脸关键点检测算法确定出用户脸部的多个关键点的位置信息后，则可以继续以用户面部人脸关键点中的1、11、34、46及47点这5个2D关键点为基准，由Opencv中的姿态估计算法将5个世界坐标系的模板3D关键点通过旋转、平移等变换投射至这5个2D关键点，进而估计得变换参数，最后求得2D平面中的头部的姿态参数，并分别表示为：偏航角Yaw，俯仰角Pitch和滚转角Roll。其中，yaw是围绕Y轴旋转，表示摇头；pitch是围绕X轴旋转，表示点头；roll是围绕Z轴旋转，表示摆头。

在上述步骤202的一个实施中，所述M个第一关键点包括妆容辅助部位的第一头部关键点和妆容辅助部位的第一尾部关键点；所述将所述M个第一关键点的位置信息通过所述妆容辅助部位的妆容模型，确定所述妆容辅助部位的妆容辅助轨迹，包括：根据所述第一头部关键点和所述第一尾部关键点，确定所述妆容辅助部位的各辅助点的第一坐标值；针对任一辅助点，获取相邻点与所述辅助点之间的预设角度；根据所述预设角度和所述相邻点的第二坐标值，确定所述辅助点的第二坐标值；根据所述辅助点的第一坐标值和所述辅助点的第二坐标值确定所述辅助点的位置信息；根据各辅助点的位置信息和所述M个第一关键点的位置信息，确定所述妆容辅助轨迹。

在智能化妆镜的图像采集器采集到用户的面部图像后，可对采集到的面部图像进行分析，并在分析后为用户推荐适宜的妆容，让用户自行决断是否采用智能化妆镜所推荐的妆容。其中，如果用户确定使用推荐的妆容，则用户可以依据所显示的妆容辅助轨迹进行上妆；如果用户确定不使用推荐的妆容，则用户可以跳过妆容辅助步骤，而在美妆库中选择自己喜爱的妆容进行上妆。当然，用户在美妆库中选择了一个妆容后，同样是通过对应的妆容辅助轨迹进行显示，以直观地提示用户根据妆容辅助轨迹进行上妆。

其中，在用户确定使用智能化妆镜推荐的妆容进行上妆时，针对任一妆容辅助部位，可以对应生成该妆容辅助部位的妆容辅助轨迹并通过智能化妆镜的显示屏向用户进行展示。其中，妆容辅助部位可以是眉毛、脸颊、眼部等部位。

下面以为眉毛和脸颊分别构建妆容模型为例进行说明。

示例1：为眉毛构建妆容模型，即眉形设计。

根据不同的用户化妆需求，眉毛可以被设计成多种眉形，如柳叶眉、一字眉、剑眉等诸多眉形，不同的眉形具有不同的眉形特点调节参数。此外，为了准确地描摹不同眉形的呈现效果，实际在构造眉毛的妆容模型时，以眉头为起点进行构建，其对应的妆容辅助轨迹可以采用42点来显示眉形轮廓。本申请中为了简化眉形的构建复杂度，提供一种基于28点的眉形构建示意图，如图4所示，其中图4的眉毛对应于图3所示的用户的右侧眉毛。

参考图4，A(X1，Y1)点为眉头点，B(X2，Y2)点为眉尾点，并设眉头点A和眉尾点B处于同一高度，从而可进一步设A、B所在的水平线为L2。首先将AB两点之间的长度均分为14份，每份长度设为d；以A点为起点，向上构建第一个上眉轮廓点C(X3，Y3)。如此，C点横、纵坐标分别表示如下：

X3＝X1+d

Y3＝Y1–d*tan(θ)

进一步的，以C点为起点，向上构建第二个上眉轮廓点D(X4，Y4)。如此，D点横、纵坐标分别表示如下：

X4＝X3+d

Y3＝Y3–d*tan(θ＇)

其中，θ、θ＇为基于眉形特点调节的参数，代表眉形的走向。

基于C点和D点的构建逻辑，可以逐一确定28点中除去A点、B点、C点和D点之外的余下24点的坐标。该构建过程的目的是为了对于一种特定的眉形，确定出对应于该眉形的一系列的眉形特点调节的参数。从而，在得到关于每一种眉形的眉形特点调节的参数后，对于不同的用户，由于用户眉头点A和眉尾点B之间长度的不同，眉毛的妆容模型可以自适应调节，也即对应于眉毛的妆容辅助轨迹可基于A、B两点的长度实现自适应调节。

示例2：为脸颊构建妆容模型，即腮红设计。

根据不同的用户化妆需求，用户在脸颊上进行腮红的修饰时，同样可以设计多种类型的腮红形状，不同类型腮红形状具有不同的腮红特点调节参数。此外，为了准确地描摹不同形状的腮红的呈现效果，实际在构造脸颊的妆容模型时，以鼻翼关键点与脸部轮廓关键点之间的一点为起点进行构建，其对应的妆容辅助轨迹可以采用42点来显示腮红轮廓。本申请中为了简化腮红的构建复杂度，提供一种基于16点的腮红构建示意图，如图5所示，其中图5的脸颊对应于图3所示的用户的右侧脸颊。

参考图5，A(X1，Y1)为鼻翼关键点与脸部轮廓关键点之间的一点，存在一定比例关系，B(X2，Y2)、C(X3，Y3)、D(X4，Y4)点为脸部轮廓的三点，并设A点和B点处于同一高度，从而可进一步设A、B在一条水平线上，则C点到AB之间的高度为H1，D点到AB之间的高度为H2。

以构建位于AB上半部分的妆容模型为例，首先将AB两点之间的长度均分为8份，每份长度为d；以A点为起点，向上构建第一个上部腮红轮廓点E(X5，Y5)。如此，E点横、纵坐标分别表示如下：

X5＝X1+d

Y5＝Y1–d*tan(θ)

其中，θ为基于腮红特点调节的参数，代表腮红的形状。

基于C点的构建逻辑，可以逐一确定16点中除去A点、B点、C点、D点和E点之外的余下11点的坐标。该构建过程的目的是为了对于一种特定的腮红形状，确定出对应于该腮红形状的一系列的腮红特点调节的参数。从而，在得到关于每一种形状的腮红的腮红特点调节的参数后，对于不同的用户，由于用户A点、B点之间长度的不同，脸颊的妆容模型可以自适应调节，也即对应于脸颊的妆容辅助轨迹可基于A、B两点的长度实现自适应调节。

在上述眉形构建的例子中，28点是M个第一关键点的一种示例，眉头点A是妆容辅助部位的第一头部关键点的一种示例，眉尾点B是妆容辅助部位的第一尾部关键点的一种示例。C点和D点可分别表示一个辅助点，根据眉头点A和眉尾点B之间的长度，可以确定各个辅助点的横坐标值，其中，横坐标值是第一坐标值的一种示例；针对任一辅助点，如C点，C与和它位置相邻的A点之间的预设角度θ是根据预设眉形的特点进行确定的，然后根据A点的纵坐标值和预设角度θ，可以确定C点的纵坐标值，其中，纵坐标值是第二坐标值的一种示例；基于同样的道理，可以确定用于构建用户预设眉形的各个辅助点的位置信息；最后，可以根据各个辅助点的位置信息和28个第一关键点的位置信息，确定用户眉毛的妆容辅助轨迹。

需要说明的是，上述眉毛的妆容辅助轨迹以及脸颊的妆容辅助轨迹，是基于用户的脸部并未发生任何遮挡而进行设计并构建的。

可选的，所述从检测到的面部图像中获取妆容辅助部位的M个第一关键点的位置信息，包括：在确定所述面部图像不存在遮挡情况时，根据人脸关键点检测算法，确定所述M个第一关键点的位置信息。

可选的，所述根据所述辅助点的第一坐标值和所述辅助点的第二坐标值确定所述辅助点的位置信息，包括：根据所述第一头部关键点的第二坐标值和所述第一尾部关键点的第二坐标值，确定所述第一头部关键点和所述第一尾部关键点之间的第一偏转角度；根据所述第一偏转角度调整所述辅助点的第一坐标值和所述辅助点的第二坐标值，得到所述辅助点的位置信息。

在用户化妆的过程中，可以通过常规的检测识别网络来识别化妆过程中可能存在的对用户脸部进行遮挡的物体，如用户的手部、化妆工具等；针对某一妆容辅助部位，判定是否发生对该妆容辅助部位的遮挡情况。若确定用户的脸部不发生遮挡，则根据人脸关键点检测算法，如PFLD人脸关键点检测算法，确定关于各个妆容辅助部位的多个第一关键点的位置信息。

设妆容辅助部位是眉毛，在确定用户的脸部不发生遮挡时，其中包括眉毛不被遮挡，从而，可以获取该妆容辅助部位的多个第一关键点的位置信息，如确定第一头部关键点和第一尾部关键点的位置信息。然而，由于用户在化妆过程中可能发生头部的偏转问题，因此，需要对上述例子中所确定的妆容辅助轨迹进行调整，以实时地对用户的眉毛的妆容辅助轨迹进行输出，满足用户在各种头部偏转情况下的化妆需求。

以确定图3所示的右侧眉毛对应的妆容辅助轨迹为例，其中点26表示眉头点，点27表示眉尾点。在使用检测识别网络识别出用户的脸部并未发生任何遮挡时，可以通过PFLD人脸关键点检测算法确定出点26和点27的位置信息。将点26与点27两点之间长度均分为14份，每份长度为d’。根据点26和点27的位置信息中的纵坐标的数据，可以对当前状态下的用户的眉毛的妆容辅助轨迹进行确定。具体地，在将图4所示的妆容辅助轨迹中的C点自适应到用户脸部C”(X3’，Y3’)时，可以包括以下三种情形：

情形1，当y₂₆＝y₂₇时。

d’＝(x₂₆-x₂₇)/14

X3’＝x₂₆+d’

Y3’＝y₂₆-d’*tan(θ)

其中，θ为模型构建中获取的已知参数。

情形2，当y₂₆>y₂₇时。

点26与点27所在直线与X轴形成的角度为a，如图6所示，为本申请实施例提供的一种妆容辅助轨迹的调整示意图。首先，以点26为圆心，以点26与点27之间的距离为半径，将点27旋转水平方向到27’点，基于点26与点27’来实现模型与脸型的调节适配，获取的临时C”点坐标为(X”，Y”)：

d’＝((x₂₆-x₂₇)²+(y₂₆-y₂₇)²)^1/2/14

X”＝x₂₆+d’

Y”＝y₂₆-d’*tan(θ)

所有模型点都计算完成后，将所有点进行旋转。例如点27’，以点26到点27距离为半径，以点26为圆心向上旋转a角度到点27的位置，其他所有点也对应旋转a角度，以点26为圆心，以模型点到点26的距离为半径进行旋转，即得到自适应辅助眉形。以临时C”(X”，Y”)点旋转到图6中C”(X3’，Y3’)点计算过程为例说明如下：

r＝((X”-x₂₆)²+(Y”-y₂₆)²)^1/2

X3’＝x₂₆+r*cos(θ+a)

Y3’＝y₂₆–r*sin(θ+a)

情形2，当y₂₆<y₂₇时。

点26与点27所在直线与X轴形成的角度为-a(其中，“-”表示点26与点27所在直线与X轴的下半部分形成角度，其中角度的大小为a)，首先，将以点26为圆心，以点26与点27之间的距离为半径，将点27旋转水平方向到27’点，基于点26与点27’来实现模型与脸型的调节适配，获取的临时C”点坐标为(X”，Y”)：

d’＝((x₂₆-x₂₇)²+(y₂₆-y₂₇)²)^1/2/14

X”＝x₂₆+d’

Y”＝y₂₆-d’*tan(θ)

所有模型点都计算完成后，将所有点进行旋转，例如27’点以点26到点27距离为半径，以点26为圆心向下旋转a角度到点27的位置，其他所有点也对应旋转a角度，以点26为圆心，以模型点到点26的距离为半径进行旋转，即得到自适应辅助眉形。

以临时C”(X”，Y”)点旋转到图6中C”(X3’，Y3’)点计算过程为例说明如下：

i当θ>a时：

r＝((X”-x₂₆)²+(Y”-y₂₆)²)^1/2

X3’＝x₂₆+r*cos(θ-a)

Y3’＝y₂₆–r*sin(θ-a)

ii当θ<＝a时：

r＝((X”-x₂₆)²+(Y”-y₂₆)²)^1/2

X3’＝x₂₆+r*cos(a-θ)

Y3’＝y₂₆+r*sin(a-θ)

可选的，所述从检测到的面部图像中获取妆容辅助部位的M个第一关键点的位置信息，包括：在确定所述妆容辅助部位存在遮挡情况时，根据所述妆容辅助部位的对称部位的M个第二关键点的位置信息，确定所述M个第一关键点的位置信息。

可选的，所述根据所述妆容辅助部位的对称部位的M个第二关键点的位置信息，确定所述M个第一关键点的位置信息，包括：根据所述面部图像的N个关键点确定头部姿态；根据所述头部姿态中的偏航角，调整所述对称部位的第二头部关键点和所述对称部位的第二尾部关键点之间的距离；根据所述头部姿态中的滚转角，调整所述第二头部关键点和所述第二尾部关键点之间的第二偏转角度；根据调整后的第二头部关键点和调整后的第二尾部关键点，得到所述M个第一关键点的位置信息。

在用户化妆的过程中，可以通过常规的检测识别网络来识别化妆过程中可能存在的对用户脸部进行遮挡的物体，针对某一妆容辅助部位，若判定发生对该妆容辅助部位的遮挡，则进一步确定该妆容辅助部位的对称部位是否发生遮挡，包括：该妆容辅助部位的对称部位也被遮挡和该妆容辅助部位的对称部位并未被遮挡。

针对该妆容辅助部位的对称部位也被遮挡的情形，可以通过向用户发出提示信息，以提示用户避免对该妆容辅助部位的遮挡或者对称部位的遮挡。

针对该妆容辅助部位的对称部位并未发生遮挡的情形，可以通过该对称部位的第二关键点的信息来确定该妆容辅助部位的妆容辅助轨迹。具体可以采用以下方式来确定：

根据用户面部图像的N个关键点确定用户的头部姿态。如针对PFLD人脸关键点检测算法识别出的用户脸部的1、11、34、46和47点这5个关键点确定用户的头部姿态，该些关键点在图3中进行展示。其中，用户的头部姿态可通过偏航角Yaw、俯仰角Pitch和滚转角Roll进行表示。

由于偏航角Yaw对妆容辅助轨迹的AB两点之间的长度有影响，滚转角对偏转角度有影响，在获取到用于表示用户头部姿态的偏航角Yaw时，则可以根据偏航角Yaw对该妆容辅助部位的对称部位的第二头部关键点和对称部位的第二尾部关键点之间的距离进行调整，在获取到用于表示用户头部姿态的滚转角Roll时，则可以根据滚转角Roll对该妆容辅助部位的对称部位的第二头部关键点和第二尾部关键点之间的第二偏转角度进行调整；在得到调整后的第二头部关键点和调整后第二尾部关键点时，根据用户脸部是对称的思想，则可以确定该妆容辅助部位的M个第一关键点的位置信息，从而将M个第一关键信息输入该妆容辅助部位的妆容辅助轨迹的模型中，最终得到该妆容辅助部位的妆容辅助轨迹。

基于同样的构思，本申请实施例还提供一种化妆镜，该化妆镜可对应参照图1所示系统中的化妆镜110，如图7所示，它至少包含存储器701和处理器702，该存储器用于存储程序指令；该处理器用于调用所述存储器中存储的程序指令，通过执行按照获得的程序至少实现如下方法：在接收到妆容辅助指示后，从所述面部图像中获取妆容辅助部位的M个第一关键点的位置信息；将所述M个第一关键点的位置信息通过所述妆容辅助部位的妆容模型，确定所述妆容辅助部位的妆容辅助轨迹。

值得注意的是，本申请实施例中的化妆镜可实现的方法具体可参照上述方法实施例中的对应说明，不再赘述。

本申请实施例还提供了一种计算设备，该计算设备具体可以为桌面计算机、便携式计算机、智能手机、平板电脑、个人数字助理(Personal Digital Assistant，PDA)等。该计算设备可以包括中央处理器(Center Processing Unit，CPU)、存储器、输入/输出设备等，输入设备可以包括键盘、鼠标、触摸屏等，输出设备可以包括显示设备，如液晶显示器(Liquid Crystal Display，LCD)、阴极射线管(Cathode Ray Tube，CRT)等。

存储器，可以包括只读存储器(ROM)和随机存取存储器(RAM)，并向处理器提供存储器中存储的程序指令和数据。在本申请实施例中，存储器可以用于存储化妆镜的妆容辅助方法的程序指令；

处理器，用于调用所述存储器中存储的程序指令，按照获得的程序执行化妆镜的妆容辅助方法。

如图8所示，为本申请实施例提供的一种计算设备的示意图，该计算设备包括：

处理器801、存储器802、收发器803、总线接口804；其中，处理器801、存储器802与收发器803之间通过总线805连接；

所述处理器1001，用于读取所述存储器1002中的程序，执行上述化妆镜的妆容辅助方法；

处理器801可以是中央处理器(central processing unit，简称CPU)，网络处理器(network processor，简称NP)或者CPU和NP的组合。还可以是硬件芯片。上述硬件芯片可以是专用集成电路(application-specific integrated circuit，简称ASIC)，可编程逻辑器件(programmable logic device，简称PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(complex programmable logic device，简称CPLD)，现场可编程逻辑门阵列(field-programmable gate array，简称FPGA)，通用阵列逻辑(generic array logic,简称GAL)或其任意组合。

所述存储器802，用于存储一个或多个可执行程序，可以存储所述处理器801在执行操作时所使用的数据。

具体地，程序可以包括程序代码，程序代码包括计算机操作指令。存储器802可以包括易失性存储器(volatile memory)，例如随机存取存储器(random-access memory，简称RAM)；存储器802也可以包括非易失性存储器(non-volatile memory)，例如快闪存储器(flash memory)，硬盘(hard disk drive，简称HDD)或固态硬盘(solid-state drive，简称SSD)；存储器802还可以包括上述种类的存储器的组合。

存储器802存储了如下的元素，可执行模块或者数据结构，或者它们的子集，或者它们的扩展集：

操作指令：包括各种操作指令，用于实现各种操作。

操作系统：包括各种系统程序，用于实现各种基础业务以及处理基于硬件的任务。

总线805可以是外设部件互连标准(peripheral component interconnect，简称PCI)总线或扩展工业标准结构(extended industry standard architecture，简称EISA)总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示，图8中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

总线接口804可以为有线通信接入口，无线总线接口或其组合，其中，有线总线接口例如可以为以太网接口。以太网接口可以是光接口，电接口或其组合。无线总线接口可以为WLAN接口。

本申请实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于使计算机执行化妆镜的妆容辅助方法。

本领域内的技术人员应明白，本申请的实施例可提供为方法、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本申请的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。

显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种化妆镜的妆容辅助方法，其特征在于，包括：

在接收到妆容辅助指示后，从检测到的面部图像中获取妆容辅助部位的M个第一关键点的位置信息；

将所述M个第一关键点的位置信息通过所述妆容辅助部位的妆容模型，确定所述妆容辅助部位的妆容辅助轨迹；

将所述妆容辅助轨迹显示于化妆镜上。

2.如权利要求1所述的方法，其特征在于，

所述M个第一关键点包括妆容辅助部位的第一头部关键点和妆容辅助部位的第一尾部关键点；

所述将所述M个第一关键点的位置信息通过所述妆容辅助部位的妆容模型，确定所述妆容辅助部位的妆容辅助轨迹，包括：

根据所述第一头部关键点和所述第一尾部关键点，确定所述妆容辅助部位的各辅助点的第一坐标值；

针对任一辅助点，获取相邻点与所述辅助点之间的预设角度；根据所述预设角度和所述相邻点的第二坐标值，确定所述辅助点的第二坐标值；根据所述辅助点的第一坐标值和所述辅助点的第二坐标值确定所述辅助点的位置信息；

根据各辅助点的位置信息和所述M个第一关键点的位置信息，确定所述妆容辅助轨迹。

3.如权利要求2所述的方法，其特征在于，

所述根据所述辅助点的第一坐标值和所述辅助点的第二坐标值确定所述辅助点的位置信息，包括：

根据所述第一头部关键点的第二坐标值和所述第一尾部关键点的第二坐标值，确定所述第一头部关键点和所述第一尾部关键点之间的第一偏转角度；

根据所述第一偏转角度调整所述辅助点的第一坐标值和所述辅助点的第二坐标值，得到所述辅助点的位置信息。

4.如权利要求1-3任一项所述的方法，其特征在于，

所述从检测到的面部图像中获取妆容辅助部位的M个第一关键点的位置信息，包括：

在确定所述面部图像不存在遮挡情况时，根据人脸关键点检测算法，确定所述M个第一关键点的位置信息。

5.如权利要求1-3任一项所述的方法，其特征在于，

所述从检测到的面部图像中获取妆容辅助部位的M个第一关键点的位置信息，包括：

在确定所述妆容辅助部位存在遮挡情况时，根据所述妆容辅助部位的对称部位的M个第二关键点的位置信息，确定所述M个第一关键点的位置信息。

6.如权利要求5所述的方法，其特征在于，

所述根据所述妆容辅助部位的对称部位的M个第二关键点的位置信息，确定所述M个第一关键点的位置信息，包括：

根据所述面部图像的N个关键点确定头部姿态；

根据所述头部姿态中的偏航角，调整所述对称部位的第二头部关键点和所述对称部位的第二尾部关键点之间的距离；

根据所述头部姿态中的滚转角，调整所述第二头部关键点和所述第二尾部关键点之间的第二偏转角度；

根据调整后的第二头部关键点和调整后的第二尾部关键点，得到所述M个第一关键点的位置信息。

7.一种化妆镜，其特征在于，包括：

图像采集器，用于获取用户的面部图像；

处理器，被配置为：

在接收到妆容辅助指示后，从所述面部图像中获取妆容辅助部位的M个第一关键点的位置信息；

将所述M个第一关键点的位置信息通过所述妆容辅助部位的妆容模型，确定所述妆容辅助部位的妆容辅助轨迹；

显示屏，设置于所述化妆镜的镜面，用于根据处理器的配置，显示所述妆容辅助轨迹。

8.如权利要求7所述的化妆镜，其特征在于，所述M个第一关键点包括妆容辅助部位的第一头部关键点和妆容辅助部位的第一尾部关键点；

所述处理器，被具体配置为：

根据所述第一头部关键点和所述第一尾部关键点，确定所述妆容辅助部位的各辅助点的第一坐标值；

针对任一辅助点，获取相邻点与所述辅助点之间的预设角度；根据所述预设角度和所述相邻点的第二坐标值，确定所述辅助点的第二坐标值；根据所述辅助点的第一坐标值和所述辅助点的第二坐标值确定所述辅助点的位置信息；

根据各辅助点的位置信息和所述M个第一关键点的位置信息，确定所述妆容辅助轨迹。

9.一种计算机设备，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于调用所述存储器中存储的计算机程序，按照获得的程序执行如权利要求1-6任一项所述的方法。

10.一种计算机可读存储介质，其特征在于，所述存储介质存储有程序，当所述程序在计算机上运行时，使得计算机实现执行如权利要求1-6任一项所述的方法。

Images