HK40112944A - 信息处理装置、信息处理方法以及信息处理程序 - Google Patents

Description

信息处理装置、信息处理方法以及信息处理程序

技术领域

本发明涉及一种信息处理装置、信息处理方法以及信息处理程序。

背景技术

在研究化妆品(cosmetic)的购买时，经常存在以下情况：即使观看对模特等其他人的面部实施的化妆，也想象不到置换为自己的情况下的形象，从而不知道是否适合自己。

以往，作为用于满足想要确认对其他人的面部实施的化妆是否适合自己之类的需求的技术，已知有将其他人的化妆作为参考来辅助化妆(make up)的技术。例如，已知有与利用者的面部组成部分的区域相对应地呈现其他人的化妆信息的技术。

现有技术文献

专利文献

专利文献1：日本专利第5991536号公报

非专利文献1：W.Jiang，S.Liu，C.Gao，J.Cao，R.He，J.Feng，S.Yan“PSGAN：Poseand Expression Robust Spatial-Aware CAN for Customizable Makeup Transfer，”[online]，[2022年1月24日搜索]，因特网＜https://openaccess.thecvf.com/content_CVPR_2020/html/Jiang_PSGAN_Pose_and_Expression_Robust_Spatial-Aware_GAN_for_Customizable_Makeup_CVPR_2020_paper.ht ml>

发明内容

发明要解决的问题

然而，在现有的技术中，例如无法在通过试妆功能确认了其他人在化妆中使用的物品是否适合自己之后向销售物品的销售网站引导顾客、无法使用成果报酬来促进化妆发布者辅助引导顾客的活跃度。因此，对于将其他人的化妆作为参考的利用者而言，存在进一步提高可用性的余地。

本申请是鉴于上述情况而完成的，其目的在于促进对于将其他人的化妆作为参考的利用者而言的可用性的进一步提高。

用于解决问题的方案

本申请所涉及的信息处理装置的特征在于，具有：生成部，其根据进行了规定的化妆的发布者的面部图像来生成化妆信息，所述化妆信息用于生成对面部图像应用与该规定的化妆同样的化妆后的面部图像；以及决定部，其根据对利用者的面部图像应用化妆信息后的面部图像的利用状况，来决定对发布了作为该化妆信息的生成源的面部图像的发布者给予的报酬。

发明的效果

根据实施方式的一个方面，实现能够促进将其他人的化妆作为参考的利用者而言的可用性的进一步提高这一效果。

附图说明

图1是示出实施方式所涉及的信息处理系统的结构例的图。

图2是示出实施方式所涉及的信息处理的一例的图。

图3是用于说明实施方式所涉及的提高面部图像的优先级的情况下的信息处理的说明图。

图4是示出实施方式所涉及的利用者终端的结构例的图。

图5是示出实施方式所涉及的发布者终端的结构例的图。

图6是示出实施方式所涉及的信息处理装置的结构例的图。

图7是示出实施方式所涉及的发布者信息存储部的一例的图。

图8是示出实施方式所涉及的化妆品信息存储部的一例的图。

图9是示出实施方式所涉及的信息处理的一例的流程图。

图10是示出实现信息处理装置的功能的计算机的一例的硬件结构图。

具体实施方式

下面，参照附图来详细地说明用于实施本申请所涉及的信息处理装置、信息处理方法以及信息处理程序的方式(下面称为“实施方式”)。此外，本申请所涉及的信息处理装置、信息处理方法以及信息处理程序并不受该实施方式限定。另外，在下面的各实施方式中，对相同的部位标注相同的附图标记，并省略重复的说明。

(实施方式)

(1.信息处理系统的结构)

对图1所示的信息处理系统1进行说明。如图1所示，信息处理系统1包括利用者终端10、发布者终端20以及信息处理装置100。利用者终端10、发布者终端20以及信息处理装置100经由规定的通信网(网络N)以能够进行有线或无线通信的方式连接。图1是示出实施方式所涉及的信息处理系统1的结构例的图。

利用者终端10是由具有想要确认对其他人的面部施加的化妆是否适合自己之类的需求的利用者利用的信息处理装置。另外，利用利用者终端10的利用者例如正在研究购买化妆品。利用者终端10只要能够实现实施方式中的处理即可，无论是哪种装置都可以。另外，利用者终端10也可以是智能手机、平板型终端、笔记本型PC(Personal Computer：个人计算机)、台式PC、移动电话机、PDA(Personal Digital Assistant：掌上电脑)等装置。在图2中，示出利用者终端10是智能手机的情况。

利用者终端10例如是智能手机、平板电脑等智能设备，是能够经由3G～5G(Generation：代)、LTE(Long Term Evolution：长期演进)等无线通信网来与任意的服务器装置进行通信的便携式终端装置。另外，利用者终端10也可以具有液晶显示器等屏幕，该屏幕具有触摸面板的功能，并且从利用者受理通过手指、触控笔等进行的轻敲操作、滑动操作、滚动操作等针对内容等显示数据的各种操作。在图2中，利用者终端10由利用者U11利用。

发布者终端20是由提供化妆后的面部图像的发布者利用的信息处理装置。另外，利用发布者终端20的发布者例如发布通过从化妆前的素颜状态起实施化妆来完成化妆后的面部图像。发布者终端20只要能够实现实施方式中的处理即可，无论是哪种装置都可以。另外，发布者终端20也可以是智能手机、平板型终端、笔记本型PC、台式PC、移动电话机、PDA等装置。在图2中，示出发布者终端20是智能手机的情况。

发布者终端20例如是智能手机、平板电脑等智能设备，是能够经由3G～5G、LTE等无线通信网来与任意的服务器装置进行通信的便携式终端装置。另外，发布者终端20也可以具有液晶显示器等屏幕，该屏幕具有触摸面板的功能，并且从发布者受理通过手指、触控笔等进行的轻敲操作、滑动操作、滚动操作等针对内容等显示数据的各种操作。在图2中，发布者终端20由发布者P11和发布者P12利用。发布者终端20₁和发布者终端20₂分别是发布者P11和发布者P12的发布者终端20。

信息处理装置100是以促进对于将其他人的化妆作为参考的利用者而言的可用性的进一步提高为目的的信息处理装置，只要能够实现实施方式中的处理即可，无论是哪种装置都可以。信息处理装置100例如通过服务器装置、云系统等实现。例如，信息处理装置100通过提供销售化妆品的规定的电子商城的服务器装置、云系统等实现。

(2.信息处理的一例)

图2是示出实施方式所涉及的信息处理系统1的信息处理的一例的图。下面，在实施方式中，将满足利用者U11的想要确认发布者P11的化妆是否适合自己之类的需求的情况下的处理作为一例来进行说明。

信息处理装置100获取利用者U11从由发布者发布的面部图像中选择出的面部图像的信息(步骤S101)，该发布者例如是在SNS(Social Networking Service：社会型网络服务)上关注者数量超过规定的阈值的被称为所谓影响者(influencer)的名人等。此外，利用者U11能够选择的面部图像中也可以包括由一个发布者发布的多个面部图像。在图2中，设为包括由发布者P11发布的面部图像IM11、由发布者P12发布的面部图像IM12等。下面，设为利用者U11从内容CT11中选择了面部图像IM11来进行说明。此外，关于内容CT11中显示的面部图像，无论基于哪种标准来选择都可以。例如，可以优先地选择由利用者U11所关注的发布者发布的面部图像。另外，内容CT11是管理发布者的面部图像的规定的服务中的内容。

面部图像IM11是发布者P11的进行规定的化妆后的面部图像。此外，面部图像IM21是与面部图像IM11的化妆相应的、发布者P11的化妆前的面部图像。既可以使面部图像IM21同面部图像IM11一起显示于内容CT11，也可以通过针对面部图像IM11的操作(例如，点击或轻敲)来显示面部图像IM21。另外，也可以不对利用者显示面部图像IM21。由此，发布者也可以不对利用者提供素颜，因此能够促进对于发布者而言的可用性的提高。另外，面部图像IM12是发布者P12的规定的化妆后的面部图像。此外，面部图像IM22是与于面部图像IM12的化妆相应的、发布者P12的化妆前的面部图像。既可以使面部图像IM22同面部图像IM12一起显示于内容CT11，也可以通过针对面部图像IM12的操作等来显示面部图像IM22。另外，也可以不对利用者显示面部图像IM22。

在此，作为用于生成化妆信息的方法的一例，例如举出非专利文献1中公开的被称为PSGAN(Pose and Expression Robust Spatial-Aware Generative AdversarialNetwork：姿态稳健型可感知空间式生成对抗网络)的、仅使化妆信息从面部图像移动到另外的面部的方法(非专利文献1)。该方法是使用了深度学习的方法，能够与表情、姿势无关地仅使化妆信息移动到另外的面部。信息处理装置100使用PSGAN等方法来生成化妆信息，该化妆信息用于生成对面部图像应用与在由利用者U11选择出的面部图像IM11中使用的发布者P11的化妆同样的化妆后的面部图像(步骤S102)。然后，信息处理装置100使用PSGAN等方法，对利用者U11的面部图像IM1应用在步骤S102中生成的化妆信息(步骤S103)。此时，面部图像IM1也可以是任意地获取到的面部图像。面部图像IM1例如既可以是利用者U11预先登记并存储在外部的信息处理装置、本装置中的面部图像，也可以是从利用者终端10发送的面部图像。另外，面部图像IM1既可以是由利用者U11选择为应用对象的面部图像，也可以是被自动地选择为应用对象的面部图像。另外，面部图像IM2是与面部图像IM1相应的、应用后的面部图像。

信息处理装置100向利用者终端10发送用于显示包含在步骤S103中应用了化妆信息后的利用者U11的面部图像IM2、以及在化妆中使用的化妆品(与物品对应)的说明内容的内容的信息(步骤S104)。然后，利用者终端10基于从信息处理装置100发送的信息来显示内容CT1。

在此，内容CT1中包含发布者P11在与面部图像IM11相关的化妆中使用的化妆品的说明内容。例如，包含化妆品的商品名称、价格等信息。在图2中示出了包含唇膏和粉底这两种化妆品(PR1和PR2)的情况，但关于化妆品的数量并无特别限定。例如，内容CT1中也可以包含发布者P11为了从面部图像IM21的化妆前的状态打造出面部图像IM11的规定的化妆后的状态而使用的全套化妆品的说明内容。另外，说明内容中也可以包含受理用于访问能够购买在化妆中使用的全套化妆品的规定的电子商城的操作的操作受理信息B1。在操作受理信息B1受理操作时，例如既可以访问介绍了全套化妆品的商品页面，也可以访问将全套化妆品放入购物车后的购买页面。此外，操作受理信息B1也可以与面部图像IM2、说明内容中的其它内容成为一体，也可以在受理针对面部图像IM2、说明内容中的其它内容的操作时访问商品页面、购买页面。

信息处理装置100判定利用者U11是否购买了与说明内容相关联的化妆品。例如，信息处理装置100判定利用者U11在通过对操作受理信息B1进行操作而访问的规定的电子商城是否购买了包括化妆品PR1和化妆品PR2的整套化妆品或一部分化妆品。信息处理装置100在判定为利用者U11进行了购买的情况下，决定将与利用者U11的购买相应的报酬给予发布者P11，该发布者P11是发布了使用与图像IM2的化妆信息对应的化妆后的面部图像的发布者。然后，信息处理装置100进行用于将与利用者U11的购买相应的报酬给予发布者P11的处理。此外，信息处理装置100也可以决定发送用于发布者P11收取与利用者U11的购买相应的报酬的信息。在该情况下，信息处理装置100发送用于发布者P11收取与利用者U11的购买相应的报酬的信息。另外，信息处理装置100也可以决定将报酬汇入发布者P11的账户。在该情况下，信息处理装置100执行用于将报酬汇入发布者P11的账户的处理。

(处理的变形1：使用化妆前的面部图像进行的显示)

在上述实施方式中，示出了在内容CT11中显示面部图像IM11、面部图像IM12等规定的化妆后的面部图像的情况，但不限于该例。例如，也可以在内容CT11中显示面部图像IM21、面部图像IM22等化妆前的面部图像，通过对化妆前的面部图像进行操作来显示化妆后的面部图像。而且，信息处理装置100也可以通过利用者U11观看并选择与化妆前的面部图像对应的、化妆后的面部图像，来生成对利用者的面部图像应用的化妆信息。

(处理的变形2：化妆动态图像的显示)

在上述实施方式中示出了在内容CT11中显示面部图像IM11、面部图像IM12等规定的化妆后的面部图像并且通过对化妆后的面部图像进行操作来显示例如化妆前的面部图像的情况，但不限于该例。例如，也可以通过对化妆后的面部图像进行操作来显示发布者为了从化妆前的状态打造出化妆后的状态而进行的化妆的化妆动态图像。此外，化妆动态图像中例如包含面部图像IM21、面部图像IM22等化妆前的面部图像以及面部图像IM11、面部图像IM12等规定的化妆后的面部图像。另外，化妆动态图像也可以同化妆后的面部图像一起显示于内容CT11。

(处理的变形3：化妆前的面部图像的限定)

在上述实施方式中，示出了面部图像IM21、面部图像IM22等化妆前的面部图像是发布者的素颜的面部图像的情况，但不限于该例。例如，面部图像IM21、面部图像IM22等化妆前的面部图像只要是面部图像IM11、面部图像IM12等在规定的化妆前的面部图像即可，也可以是仅涂了唇膏、粉底等实施了某种程度的化妆后的面部图像。在该情况下，信息处理装置100既可以生成如对利用者的面部图像不应用在面部图像IM21、面部图像IM22等化妆前的面部图像中已使用的化妆品的化妆信息那样的化妆信息，也可以生成如对利用者的面部图像应用了在面部图像IM21、面部图像IM22等化妆前的面部图像中已使用的化妆品的化妆信息那样的化妆信息。此外，面部图像IM21、面部图像IM22等化妆前的面部图像在用于生成化妆信息之后被用于骨骼的学习，因此，即使不是素颜的面部图像，也能够生成适当的化妆信息。因此，将发布者的化妆前的面部图像例如在管理发布者的面部图像的规定的服务中仅登记一次即可。另外，在面部图像IM21、面部图像IM22等化妆前的面部图像中已使用的化妆品的说明内容既可以包含于内容CT1，也可以不包含于内容CT1。

(处理的变形4：物品信息的自动提取)

在上述实施方式中，例如也可以预先通过图像解析从面部图像IM11、面部图像IM21中确定出发布者P11在与面部图像IM11相关的化妆中使用的化妆品，并将该化妆品与面部图像IM11、面部图像IM21相关联地存储于外部的信息处理装置、本装置。另外，例如也可以基于发布者P11在规定的电子商城购买化妆品的购买历史记录来确定化妆品并将该化妆品与面部图像IM11、面部图像IM21相关联地存储，也可以通过由发布者P11从基于化妆品的购买历史记录以候选的形式显示的一览中进行选择来确定化妆品并将该化妆品与面部图像IM11、面部图像IM21相关联地存储。另外，例如也可以通过从发布者P11受理了未在规定的电子商城销售的化妆品的登记来确定化妆品，并将该化妆品与面部图像IM11、面部图像IM21相关联地存储。

(处理的变形5：反映化妆的顺序)

在上述实施方式中，信息处理装置100也可以通过确定发布者P11进行了与面部图像IM11相关的化妆的化妆顺序，来生成反映了化妆顺序的化妆信息。此时，信息处理装置100例如也可以通过从发布者P11受理化妆顺序的输入来确定化妆顺序，在具有与面部图像IM11相关的化妆动态图像的情况下，也可以根据化妆动态图像来确定化妆顺序。另外，信息处理装置100例如也可以通过根据多个化妆动态图像进行学习来确定化妆顺序。另外，在化妆动态图像的情况下，信息处理装置100能够按化妆品的每个类别生成化妆信息，因此也可以进行能够应用的面部图像的选择。另外，反映了化妆顺序的说明内容也可以包含于内容CT1。由此，信息处理装置100能够进行包括化妆顺序在内的适当的建议。

(处理的变形6：面部图像的优先显示1)

在上述实施方式中，关于内容CT1中显示的面部图像，既可以基于任意基准来选择，也可以根据任意的优先级来显示。例如，既可以优先地选择由利用者U11所关注的发布者发布的面部图像，也可以是发布者的关注者数量越多则发布者的面部图像越优先地被显示。另外，例如也可以基于利用者U11的面部信息、其它身体信息来优先地选择或显示。

在此，作为面部信息的一例，例如举出构成面部的组成部分的形状、尺寸、配置、面部的颜色、轮廓(形状)、瞳孔的颜色、大小等。另外，面部的颜色例如包括素颜的面部颜色。例如，包括除嘴唇以外的测量部位整体的平均颜色、额头区域的平均颜色、左眼下区域的平均颜色、右眼下区域的平均颜色、左脸颊区域的平均颜色、右脸颊区域的平均颜色、鼻区域的平均颜色、上唇的平均颜色、下唇的平均颜色、下巴区域的平均颜色等。另外，作为面部信息以外的其它身体信息的一例，例如举出头发(发型、发质、头发的颜色、装饰品等)、皮肤(肤色、肤质、皱纹等)、体型(组成部分的尺寸、整体的平衡)等。

在上述实施方式中，也可以以身体信息越接近利用者U11则发布者的面部图像越优先地被选择或显示出的方式来提高优先级。例如，也可以是，面部、面部以外的身体信息与利用者U11越相同或相似，则使发布者的面部图像的优先级越高。另外，例如也可以是，年龄、皮肤年龄、皮肤的烦恼与利用者U11越相同或相似，则使发布者的面部图像的优先级越高。另外，例如也可以是，化妆的烦恼与利用者U11越相同或相似，则使发布者的面部图像的优先级越高。另外，例如也可以是，发型、发色、头发的喜好与利用者U11越相同或相似，则使发布者的面部图像的优先级越高。另外，也可以以身体信息与利用者U11相差越远则发布者的面部图像越不优先被选择或显示的方式来降低优先级。例如也可以是，面部的组成部分平衡与利用者U11越不同，则使发布者的面部图像的优先级越低。另外，例如也可以是，面部的轮廓与利用者U11越不同，则使发布者的面部图像的优先级越低。另外，例如也可以是，素颜的面部颜色与利用者U11越不同，则使发布者的面部图像的优先级越低。

另外，也可以基于多个利用者对面部图像的访问历史记录、购买历史记录、评价历史记录等表示面部图像的受欢迎程度的指标来优先地选择或显示。具体地说，也可以基于由多个利用者选择出的面部图像的访问历史记录、基于借助通过选择面部图像而提供的内容进行的顾客引导而产生的多个利用者的购买历史记录、通过选择面部图像来应用化妆时的多个利用者的评价历史记录、购买后的多个利用者对面部图像或所购买的化妆品的评价历史记录等，来优先地选择或显示。例如也可以是，多个利用者对面部图像的访问历史记录、购买历史记录、评价历史记录等表示面部图像的受欢迎程度的指标越高，则使面部图像的优先级越高。另外，也可以基于发布者在化妆中使用的全套化妆品的总价格来优先地选择或显示。例如，发布者在化妆中使用的全套化妆品的总价格越高，则既可以使面部图像的优先级越高，也可以使面部图像的优先级越低。

(处理的变形7：面部图像的优先显示2)

在上述实施方式中，也可以基于利用者U11的化妆品的购买历史记录来优先地选择或显示。例如也可以是，与利用者U11手头的化妆品越相同或相似，则使发布者的面部图像的优先级越高。例如，在利用者U11的购买历史记录中包括化妆品PR1、化妆品PR2、化妆品PR3的情况下，也可以是，化妆品PR1、化妆品PR2、化妆品PR3中有越多的化妆品包括在发布者的购买历史记录中，则使发布者的面部图像的优先级越高。例如，也可以使购买历史记录中包括化妆品PR2和化妆品PR3的发布者的面部图像的优先级高于购买历史记录中仅包括化妆品PR1的发布者的面部图像的优先级。另外，例如也可以是，与利用者U11手头的化妆品越相同或相似，则使面部图像的优先级越高。例如，在利用者U11的购买历史记录中包括化妆品PR1、化妆品PR2、化妆品PR3的情况下，也可以是，化妆品PR1、化妆品PR2、化妆品PR3中有越多的化妆品在化妆中被使用，则使使用化妆品后的面部图像的优先级越高。

图3是用于说明与利用者U11手头的化妆品越相同或相似则使面部图像的优先级越高的情况下的信息处理的说明图，所述优先级是基于利用者U11的化妆品的购买历史记录的优先级。面部图像IM11和面部图像IM12是由发布者P11发布的面部图像，面部图像IM12是由发布者P12发布的面部图像。另外，在与面部图像IM11相关的化妆中使用的化妆品是化妆品PR1、化妆品PR2、化妆品PR3，在与面部图像IM111相关的化妆中使用的化妆品是化妆品PR1、化妆品PR4、化妆品PR5，在与面部图像IM12相关的化妆中使用的化妆品是化妆品PR2、化妆品PR6、化妆品PR7、化妆品PR8。在利用者U11的购买历史记录中包括化妆品PR1、化妆品PR2、化妆品PR3、化妆品PR6的情况下，使用了共同的化妆品PR1、化妆品PR2、化妆品PR3的面部图像IM11的优先级最高，使用了共同的化妆品PR2、化妆品PR6的面部图像IM111的优先级居中，使用了共同的化妆品PR1的面部图像IM12的优先级最低。

(处理的变形8：颜色信息的获取)

在上述实施方式中，面部颜色等肤色例如也可以是由能够通过利用者U11佩戴来进行测量的ZOZOGLASS(注册商标)等测量装备测量出的肤色。通过在进行光的校正后准确地测量肤色，能够提高由信息处理装置100生成的化妆信息的精度。

〔3.利用者终端的结构〕

接着，使用图4对实施方式所涉及的利用者终端10的结构进行说明。图4是示出实施方式所涉及的利用者终端10的结构例的图。如图4所示，利用者终端10具有通信部11、输入部12、输出部13以及控制部14。

(通信部11)

通信部11例如由NIC(Network Interface Card：网络接口卡)等实现。而且，通信部11与规定的网络N进行有线或无线连接，经由规定的网络N来与信息处理装置100等之间进行信息的发送和获取。

(输入部12)

输入部12受理来自利用者的各种操作。在图2中，受理来自利用者U11的各种操作。例如，输入部12也可以通过触摸面板功能经由显示面受理来自利用者的各种操作。另外，输入部12也可以从设置于利用者终端10的按钮、连接于利用者终端10的键盘、鼠标受理各种操作。

(输出部13)

输出部13例如是由液晶显示器、有机EL(Electro-Luminescence：电致发光)显示器等实现的平板终端等的显示屏幕，是用于显示各种信息的显示装置。例如，输出部13显示从信息处理装置100发送的信息。

(控制部14)

控制部14例如是控制器(controller)，通过由CPU(Central Processing Unit：中央处理单元)、MPU(Micro Processing Unit：微处理单元)等将RAM(Random AccessMemory：随机存取存储器)作为作业区域执行利用者终端10内部的存储装置中存储的各种程序来实现，例如该各种程序包括安装于利用者终端10的应用的程序，例如该各种程序包括用于显示包含从信息处理装置100发送的面部图像的内容的应用的程序。另外，控制部14例如由ASIC(Application Specific Integrated Circuit：专用集成电路)、FPGA(FieldProgrammable Gate Array：现场可编程门阵列)等集成电路实现。

如图4所示，控制部14具有接收部141和发送部142，实现或执行下面说明的信息处理的作用。

(接收部141)

接收部141从信息处理装置100等其它信息处理装置接收各种信息。例如，接收部141接收用于显示包含应用了与在由利用者选择出的面部图像中使用的发布者的化妆同样的化妆后的利用者的面部图像、以及在化妆中使用的化妆品的说明内容的内容的信息。

(发送部142)

发送部142向信息处理装置100等其它信息处理装置发送各种信息。例如，发送部142发送由利用者选择出的面部图像的信息，以确认发布者的化妆是否适合自己。

〔4.发布者终端的结构〕

接着，使用图5对实施方式所涉及的发布者终端20的结构进行说明。图5是示出实施方式所涉及的发布者终端20的结构例的图。如图5所示，发布者终端20具有通信部21、输入部22、输出部23以及控制部24。

(通信部21)

通信部21例如由NIC等实现。而且，通信部21与规定的网络N进行有线或无线连接，经由规定的网络N来与信息处理装置100等之间进行信息的发送和获取。

(输入部22)

输入部22受理来自发布者的各种操作。在图2中，受理来自发布者P11和发布者P12的各种操作。例如，输入部22也可以通过触摸面板功能经由显示面受理来自发布者的各种操作。另外，输入部22也可以从设置于发布者终端20的按钮、连接于发布者终端20的键盘、鼠标受理各种操作。

(输出部23)

输出部23例如是由液晶显示器、有机EL显示器等实现的平板终端等的显示屏幕，是用于显示各种信息的显示装置。例如，输出部23显示从信息处理装置100发送的信息。

(控制部24)

控制部24例如是控制器，通过由CPU、MPU等将RAM作为作业区域执行发布者终端20内部的存储装置中存储的各种程序来实现。例如，该各种程序包括安装于发布者终端20的应用的程序。例如，该各种程序包括根据发布者的操作来发送发布者的面部图像的应用的程序。另外，控制部14例如由ASIC、FPGA等集成电路来实现。

如图5所示，控制部24具有接收部241和发送部242，实现或执行下面说明的信息处理的作用。

(接收部241)

接收部241从信息处理装置100等其它信息处理装置接收各种信息。例如，在观看发布者所提供的面部图像并对自己的面部图像应用了化妆的利用者在规定的电子商城购买了与所应用的化妆对应的化妆品的情况下，接收部241接收与根据利用者的购买而决定的、发布者能够收取的报酬有关的信息。此外，接收部241也可以接收用于发布者收取与利用者的购买相应的报酬的信息。

(发送部242)

发送部242向信息处理装置100等其它信息处理装置发送各种信息。例如，发送部142根据发布者的操作来发送发布者的面部图像。

(5.信息处理装置的配置)

接着，使用图6对实施方式所涉及的信息处理装置100的结构进行说明。图6是示出实施方式所涉及的信息处理装置100的结构例的图。如图6所示，信息处理装置100具有通信部110、存储部120以及控制部130。此外，信息处理装置100也可以具有从信息处理装置100的管理者受理各种操作的输入部(例如键盘、鼠标等)、用于显示各种信息的显示部(例如液晶显示器等)。

(通信部110)

通信部110例如由NIC等实现。而且，通信部110与网络N进行有线或无线连接，经由网络N来与利用者终端10等之间进行信息的发送和获取。

(存储部120)

存储部120例如由RAM、快闪存储器等半导体存储器元件或者硬盘、光盘等存储装置实现。如图6所示，存储部120具有发布者信息存储部121和化妆品信息存储部122。

发布者信息存储部121存储发布者的面部图像。在此，在图7中示出实施方式所涉及的发布者信息存储部121的一例。如图7所示，发布者信息存储部121具有“发布者ID”、“面部图像”之类的项目。

“发布者ID”表示用于识别发布者的识别信息。“面部图像”表示发布者在初次利用时等登记的发布者的素颜的面部图像。在图7所示的例子中，示出了对于“面部图像”保存“面部图像#11”、“面部图像#12”之类的概念性信息的例子，但实际上保存图像数据等。另外，对于“面部图像”例如也可以保存图像数据所在的URL、表示保存位置的文件路径名等。

即，在图7中示出根据发布者“P11”识别出的发布者的素颜的面部图像是“面部图像#11”的例子。

化妆品信息存储部122存储发布者在化妆中使用的化妆品的信息。如图8所示，化妆品信息存储部122具有“发布者ID”、“面部图像”、“全套化妆品”之类的项目。

“发布者ID”表示用于识别发布者的识别信息。“面部图像”表示由发布者发布的面部图像。在图8所示的例子中，示出了对于“面部图像”保存“面部图像#21”、“面部图像#22”之类的概念性信息的例子，但实际上保存图像数据等。另外，对于“面部图像”例如也可以保存图像数据所在的URL、表示保存位置的文件路径名等。“全套化妆品”表示发布者在化妆中使用的全套化妆品。

即，在图8中，示出以下例子：由根据发布者“P11”识别出的发布者发布的面部图像是“面部图像#21”，发布者在化妆中使用的全套化妆品是“〇〇牌的商品A1(唇膏)、××牌的商品A2(粉底)、…”。此外，括号内表示化妆品的类别。

(控制部130)

控制部130是控制器，例如通过由CPU、MPU等将RAM作为作业区域执行信息处理装置100内部的存储装置中存储的各种程序来实现。另外，控制部130是控制器，例如由ASIC、FPGA等集成电路来实现。

如图6所示，控制部130具有获取部131、生成部132、应用部133、提供部134以及决定部135，实现或执行下面说明的信息处理的作用。此外，控制部130的内部结构不限于图6示出的结构，只要是进行后述的信息处理的结构即可，也可以是其它结构。

(获取部131)

获取部131从外部的信息处理装置获取各种信息。获取部131从利用者终端10等其它信息处理装置获取各种信息。

获取部131从存储部120获取各种信息。另外，获取部131将获取到的各种信息保存于存储部120。

获取部131获取在规定的服务中利用者从由发布者发布的面部图像中选择出的面部图像的信息。

获取部131获取发布者在与由利用者选择出的面部图像相关的化妆中使用的化妆品的信息。

(生成部132)

生成部132基于由获取部131获取到的信息，使用PSGAN等方法来生成化妆信息，该化妆信息用于生成对面部图像应用与在由利用者选择出的面部图像中使用的发布者的化妆同样的化妆后的面部图像。另外，也可以是，在确定了与由利用者选择出的面部图像相关的、发布者进行了化妆的化妆顺序的情况下，生成部132生成反映了化妆顺序的化妆信息。

生成部132生成用于显示包含通过后述的应用部133应用了化妆信息后的面部图像、以及基于由获取部131获取到的信息确定出的化妆品的说明内容的内容的信息。

(应用部133)

应用部133对被选择为应用对象的利用者的面部图像应用由生成部132生成的化妆信息，由此生成使利用者终端10显示的面部图像。

应用部133应用根据从基于优先级优先地被选择或显示了的面部图像中选择出的面部图像而生成的化妆信息，来生成显示于利用者终端10的面部图像，所述优先级是根据利用者的面部信息、身体信息、化妆品的购买历史记录等决定出的优先级，所述面部图像的该优先级越高则越优先地被选择或显示。

应用部133应用根据从基于优先级优先地被选择或显示了的面部图像中选择出的面部图像而生成的化妆信息，来生成显示于利用者终端10的面部图像，所述优先级是根据对面部图像的访问历史记录、购买历史记录、评价历史记录等表示面部图像的受欢迎程度的指标决定出的优先级，所述面部图像的该优先级越高则越优先地被选择或显示。

应用部133应用根据从基于优先级从优先地被选择或显示了的面部图像中选择出的面部图像而生成的化妆信息，来生成显示于利用者终端10的面部图像，所述优先级是根据发布者在化妆中使用的化妆品的总价格决定出的优先级，所述面部图像的该优先级越高则越优先地被选择或显示。

(提供部134)

提供部134向利用者终端10发送由生成部132生成的用于显示内容的信息。利用者终端10当接收到由提供部134发送的信息时，显示与由生成部132生成的信息对应的内容。

(决定部135)

决定部135判定利用者是否购买了与由提供部134提供的内容相关联的化妆品，在判定为购买了化妆品的情况下，决定将与利用者的购买相应的报酬给予发布了由利用者选择出的面部图像的发布者。然后，提供部134进行用于将与利用者的购买相应的报酬给予发布者的处理。另外，决定部135也可以决定发送用于发布者收取与利用者的购买相应的报酬的信息。在该情况下，提供部134发送用于发布者收取与利用者的购买相应的报酬的信息。另外，决定部135也可以决定将报酬汇入发布者的账户。在该情况下，提供部134进行用于将报酬汇入发布者的账户的处理。

(6.信息处理的流程)

接着，使用图9来说明由实施方式所涉及的信息处理系统1进行的信息处理的过程。图9是示出由实施方式所涉及的信息处理系统1进行的信息处理的过程的流程图。

如图9所示，信息处理装置100获取在规定的服务中利用者从由发布者发布的面部图像中选择出的面部图像的信息(步骤S201)。

信息处理装置100基于获取到的信息来生成化妆信息，该化妆信息用于生成对面部图像应用与在由利用者选择出的面部图像中使用的发布者的化妆同样的化妆(步骤S202)。

信息处理装置100通过对被选择为应用对象的利用者的面部图像应用所生成的化妆信息，来生成向利用者提供的面部图像(步骤S203)。

信息处理装置100发送用于显示包含所生成的面部图像、以及发布者在化妆中使用的化妆品的说明内容的内容的信息(步骤S204)。

〔7.变形例〕

上述的实施方式所涉及的信息处理系统1除了上述实施方式以外，也可以以各种不同方式来实施。因此，下面对信息处理系统1的其它实施方式进行说明。

在上述实施方式中，示出了在利用者终端10中显示应用了化妆信息后的、应用后的利用者的面部图像的情况，但不限于该例。例如，也可以显示于与利用者在线上进行通信的其他人的终端装置。例如也可以是，当利用者为了在线上参加会议而利用者选择发布者的面部图像时，对在线上参加会议的利用者的面部虚拟地应用与选择出的面部图像有关的化妆，来在其他人的终端装置中显示应用了与由利用者选择出的面部图像有关的化妆后的面部图像。而且，也可以是，当利用者使用发布者的化妆参加会议时，根据利用时间、利用频率等利用状况来对利用者收费。而且，也可以进行用于将对利用者收取的收费金额的一部分作为报酬给予发布者的处理。由此，由于在线上对其他人显示化妆后的面部，因此利用者能够以素颜状态参加会议。

在该情况下，应用部133通过对摄像中的利用者的面部图像实时地应用由生成部132生成的化妆信息，来实时地生成显示于其他人的终端装置的面部图像。生成部132使用由应用部133生成的面部图像，来实时地生成用于使对利用者的面部图像应用了化妆信息后的面部图像显示于其他人的终端装置的信息。提供部134通过发送由生成部132生成的信息，来向在线上实时地与利用者进行通信的其他人传送通过应用部133应用了化妆信息后的面部图像。决定部135根据在线上利用了由应用部133生成的面部图像的利用状况(例如，利用时间、利用频率)，来决定对发布了由利用者选择出的面部图像的发布者给予的报酬。换言之，决定部135根据对利用者的面部图像应用了化妆信息后的面部图像的利用状况，来决定对发布了作为化妆信息的生成源的面部图像的发布者给予的报酬。此外，也可以在利用者的云上进行应用等，在该情况下，提供部134例如也可以仅提供化妆信息的使用权。而且，利用者也可以通过行使所提供的使用权，来使对利用者的面部图像应用了化妆信息后的面部图像显示于其他人的终端装置。

〔8.效果〕

如上所述，实施方式所涉及的信息处理装置100具有生成部132和决定部135。生成部132根据进行了规定的化妆的发布者的面部图像来生成化妆信息，该化妆信息用于生成对面部图像应用与规定的化妆同样的化妆后的面部图像。决定部135根据对利用者的面部图像应用化妆信息后的面部图像的利用状况，来决定对发布了作为化妆信息的生成源的面部图像的发布者给予的报酬。

由此，实施方式所涉及的信息处理装置100能够适当地满足利用者的想要以对自己应用了其他人的化妆后的面部图像参加线上会议之类的的需求。

另外，决定部135根据对利用者的面部图像应用化妆信息后的面部图像被该利用者利用了的利用时间或利用频率，来决定报酬。

由此，实施方式所涉及的信息处理装置100能够适当地激励发布者发布面部图像。

另外，应用部133应用根据从基于规定的基准优先地被选择或显示了的面部图像中选择出的面部图像而生成的化妆信息。

由此，实施方式所涉及的信息处理装置100能够基于规定的基准对利用者提供适当的信息，因此能够更适当地满足利用者的需求。

另外，应用部133应用根据从基于优先级优先地被选择或显示了的面部图像中选择出的面部图像而生成的化妆信息，所述优先级是根据利用者的面部信息、身体信息及物品的购买历史记录中的至少任一者决定出的优先级，所述面部图像的该优先级越高则越优先地被选择或显示。

由此，实施方式所涉及的信息处理装置100能够基于面部信息、身体信息、物品的购买历史记录等对利用者提供适当的信息，因此能够更适当地满足利用者的需求。

另外，应用部133应用根据从基于优先级优先地被选择或显示了的面部图像中选择出的面部图像而生成的化妆信息，所述优先级是根据对面部图像的访问历史记录、购买历史记录及评价历史记录中的至少任一者决定出的优先级，所述面部图像的该优先级越高则越优先地被选择或显示。

由此，实施方式所涉及的信息处理装置100能够基于对面部图像的访问历史记录、购买历史记录、评价历史记录等对利用者提供适当的信息，因此能够更适当地满足利用者的需求。

另外，应用部133应用根据从基于优先级优先地被选择或显示了的面部图像中选择出的面部图像而生成的化妆信息，所述优先级是根据物品的总价格决定出的优先级，面部图像的该优先级越高则越优先地被选择或显示。

由此，实施方式所涉及的信息处理装置100能够基于物品的总价格对利用者提供适当的信息，因此能够更适当地满足利用者的需求。

〔9.硬件结构〕

另外，上述的实施方式所涉及的利用者终端10、发布者终端20以及信息处理装置100例如由如图10所示的结构的计算机1000来实现。图10是示出实现利用者终端10、发布者终端20以及信息处理装置100的功能的计算机的一例的硬件结构图。计算机1000具有CPU1100、RAM 1200、ROM 1300、HDD 1400、通信接口(I/F)1500、输入输出接口(I/F)1600以及媒体接口(I/F)1700。

CPU 1100基于ROM 1300或HDD 1400中保存的程序进行动作，来进行各部的控制。ROM 1300保存在计算机1000启动时由CPU 1100执行的启动程序、依赖于计算机1000的硬件的程序等。

HDD 1400保存由CPU 1100执行的程序、由该程序使用的数据等。通信接口1500经由规定的通信网从其它设备获取数据并发送到CPU 1100，将CPU 1100所生成的数据经由规定的通信网发送到其它设备。

CPU 1100经由输入输出接口1600来控制显示器、打印机等输出装置以及键盘、鼠标等输入装置。CPU 1100经由输入输出接口1600从输入装置获取数据。另外，CPU 1100将所生成的数据经由输入输出接口1600输出到输出装置。

媒体接口1700读取记录介质1800中保存的程序或数据，并经由RAM 1200提供给CPU 1100。CPU 1100将该程序经由媒体接口1700从记录介质1800加载到RAM 1200上，并执行所加载的程序。记录介质1800例如是DVD(Digital Versatile Disc：数字多功能光盘)、PD(Phase change rewritable Disk：相变式可重复擦写光盘)等光学记录介质、MO(Magneto-Optical disk：磁光盘)等磁光记录介质、磁带介质、磁记录介质或半导体存储器等。

例如，在计算机1000作为实施方式所涉及的终端装置10、发布者终端20以及信息处理装置100发挥功能的情况下，计算机1000的CPU 1100通过执行加载到RAM 1200上的程序来实现控制部14、24以及130的功能。计算机1000的CPU 1100从记录介质1800读取并执行这些程序，作为另一例，也可以经由规定的通信网从其它装置获取这些程序。

〔10.其它〕

另外，上述实施方式中所说明的各处理中的、设为自动进行的处理来说明的处理的全部或一部分也能够手动地进行，或者设为手动进行的处理来说明的处理的全部或一部分也能够通过公知的方法自动地进行。除此之外，包含上文中、附图中所示出的处理过程、具体名称、各种数据、参数的信息能够任意地变更，除非另有记载。例如，各图所示的各种信息不限于图示的信息。

另外，图示的各装置的各构成要素是功能概念性的，并不需要在物理上如图示那样构成。即，各装置的分散/整合的具体方式不限于图示的方式，构成为能够将其全部或一部分根据各种负荷、使用状况等以任意的单位在功能上或物理上进行分散/整合。

另外，上述的实施方式在处理内容不矛盾的范围内能够适当地进行组合。

上面基于附图详细地说明了本申请的几个实施方式，但这些是例示，能够以在发明内容一栏所记载的方式的基础上基于本领域技术人员的知识实施各种变形、改良得到的其它方式来实施本发明。

另外，上述的“部(section、module、unit)”能够换称为“单元”、“电路”等。例如，获取部能够换称为获取单元、获取电路。

附图标记说明

1：信息处理系统；10：利用者终端；11：通信部；12：输入部；13：输出部；14：控制部；20：发布者终端；21：通信部；22：输入部；23：输出部；24：控制部；100：信息处理装置；110：通信部；120：存储部；121：发布者信息存储部；122：化妆品信息存储部；130：控制部；131：获取部；132：生成部；133：应用部；134：提供部；135：决定部；141：接收部；142：发送部；241：接收部；242：发送部；N：网络。

Claims (9)

1.一种信息处理装置，其特征在于，具有：

生成部，其根据进行了规定的化妆的发布者的面部图像来生成化妆信息，所述化妆信息用于生成对面部图像应用与该规定的化妆同样的化妆后的面部图像；以及

决定部，其根据对利用者的面部图像应用化妆信息后的面部图像的利用状况，来决定对发布了作为该化妆信息的生成源的面部图像的发布者赋予的报酬。

2.根据权利要求1所述的信息处理装置，其特征在于，

所述决定部根据对利用者的面部图像应用化妆信息后的面部图像被该利用者利用了的利用时间或利用频率，来决定所述报酬。

3.根据权利要求1或2所述的信息处理装置，其特征在于，

还具有应用部，所述应用部对利用者的面部图像应用根据该利用者从由满足规定的条件的发布者发布的面部图像中选择出的面部图像而生成的化妆信息。

4.根据权利要求3所述的信息处理装置，其特征在于，

所述应用部应用根据从基于规定的基准优先地被选择或显示了的所述面部图像中选择出的面部图像而生成的所述化妆信息。

5.根据权利要求4所述的信息处理装置，其特征在于，

所述应用部应用根据从基于优先级优先地被选择或显示了的所述面部图像中选择出的面部图像而生成的所述化妆信息，所述优先级是基于所述利用者的面部信息、身体信息及物品的购买历史记录中的至少任一者决定出的优先级，所述面部图像的该优先级越高则越优先地被选择或显示。

6.根据权利要求4所述的信息处理装置，其特征在于，

所述应用部应用根据从基于优先级优先地被选择或显示了的所述面部图像中选择出的面部图像而生成的所述化妆信息，所述优先级是基于对所述面部图像的访问历史记录、购买历史记录及评价历史记录中的至少任一者决定出的优先级，所述面部图像的该优先级越高则越优先地被选择或显示。

7.根据权利要求4所述的信息处理装置，其特征在于，

所述应用部应用根据从基于优先级优先地被选择或显示了的所述面部图像中选择出的面部图像而生成的所述化妆信息，所述优先级是基于物品的总价格决定出的优先级，所述面部图像的该优先级越高则越优先地被选择或显示。

8.一种信息处理方法，由计算机执行，所述信息处理方法的特征在于，包括：

生成工序，根据进行了规定的化妆的发布者的面部图像来生成化妆信息，所述化妆信息用于生成对面部图像应用与该规定的化妆同样的化妆后的面部图像；以及

决定工序，根据对利用者的面部图像应用化妆信息后的面部图像的利用状况，来决定对发布了作为该化妆信息的生成源的面部图像的发布者赋予的报酬。

9.一种信息处理程序，其特征在于，使计算机执行以下过程：

生成过程，根据进行了规定的化妆的发布者的面部图像来生成化妆信息，所述化妆信息用于生成对面部图像应用与该规定的化妆同样的化妆后的面部图像；以及

决定过程，根据对利用者的面部图像应用化妆信息后的面部图像的利用状况，来决定对发布了作为该化妆信息的生成源的面部图像的发布者赋予的报酬。