CN116888634A - 信息处理装置、方法、程序、系统以及美容方法 - Google Patents
信息处理装置、方法、程序、系统以及美容方法 Download PDFInfo
- Publication number
- CN116888634A CN116888634A CN202280014549.9A CN202280014549A CN116888634A CN 116888634 A CN116888634 A CN 116888634A CN 202280014549 A CN202280014549 A CN 202280014549A CN 116888634 A CN116888634 A CN 116888634A
- Authority
- CN
- China
- Prior art keywords
- image
- person
- information processing
- posture
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 64
- 239000002537 cosmetic Substances 0.000 title claims description 44
- 238000000034 method Methods 0.000 title claims description 19
- 238000003672 processing method Methods 0.000 title description 4
- 230000009471 action Effects 0.000 claims description 26
- 230000000694 effects Effects 0.000 claims description 3
- 230000036544 posture Effects 0.000 description 36
- 230000003796 beauty Effects 0.000 description 32
- 230000006399 behavior Effects 0.000 description 21
- 238000003860 storage Methods 0.000 description 18
- 238000003384 imaging method Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 8
- 210000000707 wrist Anatomy 0.000 description 8
- 238000005520 cutting process Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 210000004247 hand Anatomy 0.000 description 5
- 230000000295 complement effect Effects 0.000 description 4
- 210000000988 bone and bone Anatomy 0.000 description 2
- 239000004744 fabric Substances 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 210000000746 body region Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- -1 etc.) by hand Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Abstract
即使在自己对自己进行治疗的情况下，也提高他人的在场感。本发明的一实施方式涉及的信息处理装置具备：决定部，其基于图像中的人物，决定物体的位置和姿势；重叠部，其将所述图像与所决定的所述位置和所述姿势的所述物体的CG图像重叠；以及显示部，其显示重叠得到的重叠图像。
Description
技术领域
本发明涉及信息处理装置、方法、程序、系统以及美容方法。
背景技术
以往，已知有在美容沙龙等处，美容师等治疗师对顾客进行有关美容的行为的美容术。顾客能够获得由受到他人对自己进行有关美容的行为带来的满足感。
另一方面，也已知有并非治疗师而是顾客自己进行有关美容的行为的被称为“自美容(self-esthetic)”的美容术。另外，有时顾客会在自己家中等处，模仿专业人士的行为，自己进行有关美容的行为(专利文献1)。
现有技术文献
专利文献1：日本特开2012-37626号公报
发明内容
发明所要解决的问题
然而，即使自己对自己进行治疗(做美容、化妆)，也难以感觉像是在由他人为自己治疗。
于是，本发明的目的在于，即使在自己对自己进行治疗的情况下，也会提高他人的在场感(存在感)。
用于解决问题的技术方案
本发明的一实施方式涉及的信息处理装置具备：决定部，其基于图像中的人物，决定物体的位置和姿势；重叠部，其将所述图像与所决定的所述位置和所述姿势的所述物体的CG图像重叠；以及显示部，其显示重叠得到的重叠图像。
发明效果
在本发明中，即使在自己对自己进行治疗的情况下，也能够提高他人的在场感。
附图说明
图1是表示本发明的一实施方式涉及的整体结构的图。
图2是表示本发明的一实施方式涉及的信息处理装置的功能块的图。
图3是表示本发明的一实施方式涉及的重叠显示的处理(第1实施方式)的流程的流程图。
图4是表示本发明的一实施方式涉及的重叠显示的处理(第2实施方式)的流程的流程图。
图5是本发明的一实施方式涉及的信息处理装置所显示的画面的一例(第1实施方式)。
图6是本发明的一实施方式涉及的信息处理装置所显示的画面的一例(第2实施方式)。
图7是表示本发明的一实施方式涉及的信息处理装置的硬件结构的图。
具体实施方式
以下，参照附图，对各实施方式进行说明。此外，在本说明书和附图中，对于实质上具有相同的功能结构的构成要素，附加相同的标号，从而省略重复的说明。
＜用语说明＞
·“实时图像”是指，信息处理装置10(在后面详细说明)的摄像头(camera)功能正在拍摄的图像。
·“CG(计算机图形学)图像”是指，信息处理装置10生成的图像。此外，CG图像也可以是将事先拍摄的动态图像加工得到的图像。
·“有关美容的行为”是指，由手、化妆用具等进行的任意的有关美容的行为(例如，化妆品的涂抹等)。
＜整体结构＞
图1是表示本发明的一实施方式涉及的整体结构的图。人物20通过一边看着显示于信息处理装置10的画面一边对自己进行任意的治疗(行为)(例如，进行有关美容的行为)，能够感觉像是在受到他人对自己进行该治疗(行为)(例如，在接受有关美容的行为)。
具体而言，在本发明的一实施方式中，人物20一边使搭载于信息处理装置10的有画面一侧的摄像头的镜头拍到(映现)人物20的上半身，一边对自己进行有关美容的行为。在信息处理装置10中，显示将物体(例如，美容师等治疗师)的CG图像重叠于人物20的实时图像而得到的动态图像。物体的CG图像是物体正在对人物20进行有关美容的行为的CG图像。人物20通过一边看着这样的动态图像一边对自己进行有关美容的行为，能够感觉像是在受到他人(也即是说物体)对自己进行有关美容的行为。
信息处理装置10拍摄人物20的动态图像，显示将物体(例如，美容师等治疗师)的CG图像重叠于人物20的实时图像而得到的动态图像。例如，信息处理装置10是具有摄像头(也可以是3D摄像头)功能的智能手机、平板电脑、个人计算机等。后面将会参照图2对信息处理装置10进行详细说明。
此外，在本说明书中，对信息处理装置10是一个设备(例如，具有摄像头功能的智能手机等)的情况进行说明，但信息处理装置10也可以由多个设备(例如，不具有摄像头功能的设备和数码摄像头)构成。另外，也可以设为，信息处理装置10以外的装置(服务器等)执行在本说明书中说明的信息处理装置10所执行的处理中的一部分处理。
＜信息处理装置10的功能块＞
图2是表示本发明的一实施方式涉及的信息处理装置10的功能块的图。信息处理装置10能够具备拍摄部101、确定部102、决定部103、选择部104、重叠部105以及显示部106。另外，信息处理装置10能够通过执行程序，作为拍摄部101、确定部102、决定部103、选择部104、重叠部105和显示部106发挥功能。以下，分别进行说明。
拍摄部101取得实时图像。具体而言，拍摄部101拍摄人物20的动态图像。例如，拍摄部101拍摄正在进行有关美容的行为的人物20的上半身的动态图像。
确定部102确定拍摄部101取得的实时图像中的人物20的身体的一部分。以下，对＜＜用于将人物20的身体的一部分区域消除(例如透明化)的确定＞＞和＜＜用于决定物体的位置和姿势的确定＞＞进行说明。
＜＜用于将人物20的身体的一部分区域消除(例如透明化)的确定＞＞
确定部102确定实时图像内的、人物20的身体的一部分区域(例如，从肘到指尖、从手腕到指尖等、至少包括手的区域)。此外，人物20也可以持有化妆用具等物品。另外，确定部102将所确定的人物20的身体的一部分区域(例如，至少包括手的区域)及人物20所持之物的区域(持有物品的情况下)从实时图像中消除(例如透明化)。此外，消除人物20的身体的一部分区域的处理可以执行也可以不执行。
＜＜区域的确定方法＞＞
例如，确定部102通过参照事先存储于信息处理装置10的人类骨骼的信息(特征点的位置等)而推定人物20的骨骼、或提取同一颜色的区域、或在动态图像中提取人物20中的示出一定速度以上的快速运动的部分，能够确定实时图像内的人物20的至少包括手的区域。
＜＜用于决定物体的位置和姿势的确定＞＞
以下，分为第1实施方式和第2实施方式进行说明。
在第1实施方式中，确定部102确定实时图像中的人物20的至少手(例如，从肘到指尖、从手腕到指尖等)的位置和姿势。此外，人物20也可以持有化妆用具等物品。
此外，“位置”表示人物20所在的图像(在此为实时图像)中的位置。另外，“姿势”表示人物20的身体姿势(姿态、体位等)。
＜＜位置和姿势的确定方法＞＞
例如，确定部102通过参照事先存储于信息处理装置10的人类骨骼的信息(特征点的位置等)而推定人物20的骨骼、或提取同一颜色的区域、或在动态图像中提取人物20中的示出一定速度以上的快速运动的部分，能够确定实时图像中的人物20的至少手的位置和姿势。
在第2实施方式中，确定部102确定实时图像中的人物20的手或者人物20所持之物(例如化妆用具)与人物20的面部(脸)的接触点。
＜＜接触点的确定方法＞＞
例如，确定部102能够解析实时图像，确定实时图像中的人物20的手(例如手指)或者人物20所持之物与人物20的面部的接触点。例如，确定部102能够使用利用手(例如手指)接触到面部(例如脸颊)的多个图像机器学习得到的已学习模型，从实时图像中确定接触点。此外，确定部102也可以基于佩戴于人物20的手指等的传感器的检测结果，确定人物20的手(例如手指)或者人物20所持之物与人物20的面部的接触点。
决定部103基于实时图像中的人物20，决定物体的位置和姿势。此外，“位置”表示物体在设想为存在的虚拟空间中的位置。另外，“姿势”表示物体的身体姿势(姿态、体位等)。
具体而言，决定部103基于人物身体的一部分与物体的位置和姿势的对应关系，决定物体的位置和姿势。
对应关系可以是事先确定的数据库，也可以是机器学习出的已学习模型。数据库使人物身体的一部分(具体而言，人物的至少手的位置和姿势，或者人物的手或人物所持之物与人物的面部的接触点)的信息与物体的位置和姿势的信息相关联。另外，已学习模型是若被输入人物身体的一部分(具体而言，人物的至少手的位置和姿势，或者人物的手或人物所持之物与人物的面部的接触点)的信息、则输出物体的位置和姿势的信息的预测模型。
以下，分为第1实施方式和第2实施方式进行说明。
＜＜第1实施方式＞＞
在第1实施方式中，决定部103基于确定部102所确定的人物20的至少手(例如，从肘到指尖、从手腕到指尖等)的位置和姿势，决定物体的位置和姿势。例如，决定部103能够使人物20的至少手的位置和姿势与物体的至少手的位置和姿势相同。再者，决定部103能够以人物20和物体的至少手的位置和姿势相同、且物体站在人物20的斜后方等、治疗时可能的治疗师的站立位置为条件，决定物体的其他部分(也即是说，至少手以外的部分)的位置和姿势。
＜＜第2实施方式＞＞
在第2实施方式中，决定部103基于确定部102所确定的人物20的手或者人物20所持之物(例如，化妆用具)与人物20的面部的接触点，决定物体的位置和姿势。例如，决定部103能够使人物20的手或者人物20所持之物(例如，化妆用具)与人物20的面部的接触点、和物体的手或者物体所持之物(例如，化妆用具)与人物20的面部的接触点相同。再者，决定部103能够以人物20的手等的接触点和物体的手等的接触点相同、且物体站在人物20的后方等、治疗时可能的治疗师的站立位置为条件，决定物体的其他部分(至少手以外的部分)的位置和姿势。
选择部104选择物体。例如，选择部104能够选择人物20等从多个物体中指定的物体。人物20能够在显示有多个物体(例如，物体的面部的图像)的画面中选择物体。
另外，例如，选择部104能够选择通过机器学习而预测的适合于人物20的物体。另外，例如，选择部104能够选择预定的物体(对所有人物一样的物体)。
在此，对物体进行说明。物体不限于人物，也可以是动物、角色等。例如，物体是过去对人物20进行过有关美容的行为的人物。此外，过去对人物20进行过有关美容的行为的人物也可以参照与人物20的识别信息(所登记的会员ID等)相关联的治疗历史记录等而选择。此外，物体的CG图像不限于物体的全身的CG图像，也可以是物体的一部分(例如物体的手等)的CG图像。另外，物体的CG图像也可以是物体持有物品(例如，与人物20所持之物(例如化妆用具)相同的物品)的CG图像。
重叠部105将拍摄到人物20的实时图像(消除了包括人物20的至少手的区域的实时图像)与决定部103所决定的位置和姿势的物体的CG图像重叠。具体而言，重叠部105在实时图像上重叠CG图像。
再者，重叠部105能够补全图像。具体而言，重叠部105能够对实时图像和物体的CG图像重叠得到的图像重叠基于补全用的图像(例如，人物20开始有关美容的行为之前的图像)再现出的人物20的身体的一部分(例如，没在进行有关美容的行为的状态的手)的CG图像。由此，能够生成人物20自身没在进行有关美容的行为的动态图像。
另外，具体而言，重叠部105能够在确定部102所确定的人物20的身体的一部分区域(例如，至少包括手的区域)上重叠补全用的图像(例如，人物20开始有关美容的行为之前的图像)中的该区域的图像。也即是说，重叠部105在实时图像中的包括人物20的至少手的区域被消除(例如透明化)之后，补全应该存在于该区域的背景，并在此基础上重叠物体。由此，能够生成填补了被消除的区域的动态图像。
此外，重叠部105也可以改变物体的CG图像的位置和姿势(例如，使物体站立的位置移动)以使物体自然运动。另外，重叠部105也可以不使物体的CG图像的位置和姿势与人物20联动(或者也可以临时地降低对于人物20的运动的追随速度)，以使得在人物20有急剧运动的情况下，物体不会出现不自然的运动。由此，能够生成物体不会过于静止和不会过于运动的动态图像。
显示部106显示重叠部105重叠得到的图像。
＜处理方法＞
以下，对第1实施方式的重叠显示的处理方法以及第2实施方式的重叠显示的处理方法进行说明。
＜＜第1实施方式＞＞
图3是表示本发明的一实施方式涉及的重叠显示的处理(第1实施方式)的流程的流程图。
在步骤11(S11)中，拍摄部101取得实时图像。具体而言，拍摄部101拍摄人物20的动态图像。
在步骤12(S12)中，确定部102确定在S11的实时图像内的、人物20的至少包括手的区域(例如，从肘到指尖、从手腕到指尖等区域)。另外，确定部102确定S11的实时图像中的人物20的至少手(例如，从肘到指尖、从手腕到指尖等)的位置和姿势。此外，人物20也可以持有化妆用具等物品。
在步骤13(S13)中，确定部102将在S12中确定的人物20的至少包括手的区域以及人物20所持之物的区域(持有物品的情况下)从实时图像中消除(例如透明化)。
在步骤14(S14)中，决定部103基于S11的实时图像中的人物20，决定物体的位置和姿势。具体而言，决定部103基于在S12中所确定的人物20的至少手(例如，从肘到指尖、从手腕到指尖等)的位置和姿势，决定物体的位置和姿势。
在步骤15(S15)中，重叠部105将拍摄到人物20的实时图像(在S13中消除了人物20的至少包括手的区域的实时图像)与在S14中决定的位置和姿势的物体的CG图像重叠。再者，重叠部105能够补全图像。
在步骤16(S16)中，显示部106显示在S15中重叠得到的图像。具体而言，显示部106将通过S11～S15的处理所生成的多个图像显示为动态图像。
＜＜第2实施方式＞＞
图4是表示本发明的一实施方式涉及的重叠显示的处理(第2实施方式)的流程的流程图。
在步骤21(S21)中，拍摄部101取得实时图像。具体而言，拍摄部101拍摄人物20的动态图像。
在步骤22(S22)中，确定部102确定在S21的实时图像内的、人物20的至少包括手的区域(例如，从肘到指尖、从手腕到指尖等区域)。此外，人物20也可以持有化妆用具等物品。
在步骤23(S23)中，确定部102将在S22中确定的人物20的至少包括手的区域以及人物20所持之物的区域(持有物品的情况下)从实时图像中消除(例如透明化)。
在步骤24(S24)中，确定部102确定S21的实时图像中的人物20的手或者人物20所持之物(例如，化妆用具)与人物20的面部的接触点。
在步骤25(S25)中，决定部103基于S21的实时图像中的人物20，决定物体的位置和姿势。具体而言，决定部103基于在S24中确定的人物20的手或者人物20所持之物(例如，化妆用具)与人物20的面部的接触点，决定物体的位置和姿势。
在步骤26(S26)中，重叠部105将拍摄到人物20的实时图像(在S23中消除了人物20的至少包括手的区域的实时图像)与在S25中决定的位置和姿势的物体的CG图像重叠。再者，重叠部105能够补全图像。
在步骤27(S27)中，显示部106显示在S26中重叠得到的图像。具体而言，显示部106将通过S21～S26的处理所生成的多个图像显示为动态图像。
＜＜CG图像的制作＞＞
在本发明的一实施方式中，能够从动态图像中剪切进行有关美容的行为的人物。作为剪切方法，既可以从利用绿幕(色度键)等拍摄出的动态图像中剪切，也可以从通常的动态图像中指定想要剪切的部分而剪切。在本发明的一实施方式中，物体是对人物进行有关美容的行为的人物，物体的CG图像使用拍摄预定颜色(例如绿色)的背景的物体对预定颜色(例如绿色)的面部的形状进行有关美容的行为的情形而得到的动态图像来制作(此外，也被称为绿幕)。例如，拍摄对人物进行有关美容的行为的人以预定颜色(例如绿色)的布等为背景的在对用预定颜色(例如绿色)的布等覆盖的面部进行有关美容的行为的情形。通过在该拍摄到的动态图像中，剪切对人物进行有关美容的行为的人的手等(也可以连包括手在内的身体的一部分和/或手所持的美容用具也包括在内地剪切，或者剪切进行有关美容的行为的人的全身)，制作物体的CG图像。
＜＜其他实施方式＞＞
在本发明的一实施方式中，人物20的手的运动与CG的物体的运动不联动。具体而言，确定部102将人物20的身体的一部分区域(例如，至少包括手的区域)以及人物20所持之物的区域(持有物品的情况下)从实时图像中消除(例如透明化)。而且，决定部103基于实时图像中的人物20(具体而言，基于实时图像中的人物20的位置(例如，人物20的面部的位置和姿势))，决定物体的位置和姿势。例如，决定部103以使物体的手接触实时图像中的人物20的面部的方式决定物体的位置和姿势。而且，重叠部105将拍摄到人物20的实时图像(消除了人物20的至少包括手的区域的实时图像)与物体的CG图像重叠。人物20按照物体的CG的运动，进行有关美容的行为。
此外，在本说明书中，说明了对实时图像重叠CG图像的实施方式，但不限于此，本发明也能够应用于对事先拍摄好的图像重叠CG图像的实施方式。
＜显示画面＞
以下，对第1实施方式的显示画面以及第2实施方式的显示画面进行说明。在本发明的一实施方式中，在信息处理装置10显示人物20在受到物体(例如，美容师等治疗师)进行有关美容的行为的动态图像。
＜＜第1实施方式＞＞
图5是本发明的一实施方式涉及的信息处理装置10所显示的画面的一例(第1实施方式)。在第1实施方式中，物体(例如，美容师等治疗师)的CG图像的位置和姿势与人物20的至少手(例如，从肘到指尖、从手腕到指尖等)的位置和姿势联动。例如，人物20能够查看人物20以坐着的状态接受有关美容的行为的动态图像(此外，图5的人物20在面向图5的显示于信息处理装置10的画面的状态下进行有关美容的行为)。
＜＜第2实施方式＞＞
图6是本发明的一实施方式涉及的信息处理装置10所显示的画面的一例(第2实施方式)。在第2实施方式中，物体(例如，美容师等治疗师)的CG图像的位置和姿势与人物20的手或者人物20所持之物(例如，化妆用具)和人物20的面部的接触点联动。例如，人物20能够查看人物20以仰卧的状态接受有关美容的行为的动态图像(此外，图6的人物20在面向图6的显示于信息处理装置10的画面的状态下进行有关美容的行为)。
＜美容方法＞
本发明的一实施方式是一边浏览上述说明的图像一边进行有关美容的行为的美容方法。即，本发明的一实施方式是一边浏览图像一边进行有关美容的行为的美容方法，该图像是基于实时图像中的人物决定了物体的位置和姿势、且将实时图像与所决定的位置和姿势的物体的CG图像重叠而得到的图像。
＜效果＞
如此，在本发明的一实施方式中，人物20通过一边看着显示于信息处理装置10的画面一边对自身进行有关美容的行为，能够感觉像是在由其他人(也即是说物体(例如，美容师等治疗师))进行有关美容的行为。
＜硬件结构＞
图7是表示本发明的一实施方式涉及的信息处理装置的硬件结构的图。
信息处理装置10具有CPU(Central Processing Unit)1001、ROM(Read OnlyMemory)1002和RAM(Random Access Memory)1003。CPU1001、ROM1002和RAM1003形成所谓的计算机。
另外，信息处理装置10能够具有辅助存储装置1004、显示装置1005、操作装置1006、I/F(Interface)装置1007和驱动装置1008。
此外，信息处理装置10的各硬件经由总线B相互连接。
CPU1001是执行安装于辅助存储装置1004的各种程序的运算设备。
ROM1002是非易失性存储器。ROM1002作为存储CPU1001执行安装于辅助存储装置1004的各种程序所需的各种程序、数据等的主存储设备而发挥功能。具体而言，ROM1002作为存储BIOS(Basic Input/Output System)、EFI(Extensible Firmware Interface)等引导启动程序等的主存储设备而发挥功能。
RAM1003是DRAM(Dynamic Random Access Memory)、SRAM(Static Random AccessMemory)等易失性存储器。RAM1003作为提供安装于辅助存储装置1004的各种程序由CPU1001执行时被展开的工作区域的主存储设备而发挥功能。
辅助存储装置1004是存储各种程序、和各种程序被执行时所使用的信息的辅助存储设备。
显示装置1005是显示信息处理装置10的内部状态等的显示设备。
操作装置1006是操作信息处理装置10的人针对信息处理装置10输入各种指示的输入设备。
I/F装置1007是用于连接于网络并与其他装置进行通信的通信设备。
驱动装置1008是用于设置(set)存储介质1009的设备。这里所说的存储介质1009包括如CD-ROM、软盘、光磁盘等那样光学、电或磁记录信息的介质。另外，存储介质1009也可以包括如EPROM(Erasable Programmable Read Only Memory)、闪速存储器等那样电记录信息的半导体存储器等。
此外，安装于辅助存储装置1004的各种程序例如通过所分发的存储介质1009被设置于驱动装置1008并由驱动装置1008读出记录于该存储介质1009的各种程序来安装。或者，安装于辅助存储装置1004的各种程序也可以通过经由I/F装置1007从网络下载来安装。
信息处理装置10具有拍摄装置1010。拍摄装置1010对人物20进行拍摄。
以上，对本发明的实施例进行了详细说明，但本发明不限定于上述的特定实施方式，可以在权利要求书所记载的本发明的主旨范围内进行各种变形/变更。
本国际申请主张基于在2021年3月11日申请的日本专利申请2021-039295号的优先权，在此将2021-039295号的所有内容引用于本国际申请。
标号说明
10信息处理装置；20人物；101拍摄部；102确定部；103决定部；104选择部；105重叠部；106显示部；1001 CPU；1002 ROM；1003 RAM；1004辅助存储装置；1005显示装置；1006操作装置；1007 I/F装置；1008驱动装置；1009存储介质；1010拍摄装置。
Claims (18)
1.一种信息处理装置，具备：
决定部，其基于图像中的人物，决定物体的位置和姿势；
重叠部，其将所述图像与所决定的所述位置和所述姿势的所述物体的CG图像重叠；以及
显示部，其显示重叠得到的重叠图像。
2.根据权利要求1所述的信息处理装置，
所述图像是实时图像。
3.根据权利要求1所述的信息处理装置，
所述图像是事先拍摄好的图像。
4.根据权利要求1至3中任一项所述的信息处理装置，
所述决定部基于所述人物的至少手的位置和姿势，决定所述物体的所述位置和所述姿势。
5.根据权利要求1至3中任一项所述的信息处理装置，
所述决定部基于所述人物的手或者所述人物所持之物与所述人物的面部的接触点，决定所述物体的所述位置和所述姿势。
6.根据权利要求1至3中任一项所述的信息处理装置，
所述决定部基于所述人物的面部的位置和姿势，决定所述物体的所述位置和所述姿势。
7.根据权利要求1至6中任一项所述的信息处理装置，
所述重叠部还重叠所述人物的身体的一部分的CG图像。
8.根据权利要求1至7中任一项所述的信息处理装置，
所述决定部基于人物的身体的一部分与物体的位置和姿势的对应关系，决定所述物体的所述位置和所述姿势。
9.根据权利要求1至8中任一项所述的信息处理装置，
所述人物在进行有关美容的行为。
10.根据权利要求9所述的信息处理装置，
所述物体的CG图像是所述物体在对所述人物进行有关美容的行为的CG图像。
11.根据权利要求10所述的信息处理装置，
所述物体的CG图像使用拍摄所述物体在对面部形状进行有关美容的行为的情形而得到的动态图像来制作。
12.根据权利要求10或11所述的信息处理装置，
所述物体的CG图像是在进行有关美容的行为的人物或角色的至少手和所述在进行有关美容的行为的人物或角色所持之物的CG图像。
13.根据权利要求10至12中任一项所述的信息处理装置，
所述物体是过去对所述人物进行过有关美容的行为的人物。
14.根据权利要求1至13中任一项所述的信息处理装置，
还具备选择所述物体的选择部。
15.一种方法，是计算机执行的方法，包括：
基于图像中的人物决定物体的位置和姿势的步骤；
将所述图像与所决定的所述位置和所述姿势的所述物体的CG图像重叠的步骤；和
显示重叠得到的重叠图像的步骤。
16.一种程序，用于使计算机作为决定部、重叠部和显示部发挥功能，
所述决定部基于图像中的人物，决定物体的位置和姿势，
所述重叠部将所述图像与所决定的所述位置和所述姿势的所述物体的CG图像重叠，
所述显示部显示重叠得到的重叠图像。
17.一种系统，是包括信息处理装置和服务器的系统，具备：
决定部，其基于图像中的人物，决定物体的位置和姿势；
重叠部，其将所述图像与所决定的所述位置和所述姿势的所述物体的CG图像重叠；以及
显示部，其显示重叠得到的重叠图像。
18.一种美容方法，是一边浏览图像一边进行有关美容的行为的美容方法，
所述图像是重叠图像，是基于图像中的人物，决定了物体的位置和姿势，并重叠所述图像与所决定的所述位置和所述姿势的所述物体的CG图像而得到了所述重叠图像。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021039295 | 2021-03-11 | ||
| JP2021-039295 | 2021-03-11 | ||
| PCT/JP2022/008552 WO2022190954A1 (ja) | 2021-03-11 | 2022-03-01 | 情報処理装置、方法、プログラム、システム、および美容方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN116888634A true CN116888634A (zh) | 2023-10-13 |
Family
ID=83226609
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202280014549.9A Pending CN116888634A (zh) | 2021-03-11 | 2022-03-01 | 信息处理装置、方法、程序、系统以及美容方法 |
Country Status (3)
| Country | Link |
|---|---|
| JP (1) | JPWO2022190954A1 (zh) |
| CN (1) | CN116888634A (zh) |
| WO (1) | WO2022190954A1 (zh) |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012181688A (ja) * | 2011-03-01 | 2012-09-20 | Sony Corp | 情報処理装置、情報処理方法、情報処理システムおよびプログラム |
| CN107111861B (zh) * | 2015-01-29 | 2021-06-18 | 松下知识产权经营株式会社 | 图像处理装置、触笔以及图像处理方法 |
-
2022
- 2022-03-01 CN CN202280014549.9A patent/CN116888634A/zh active Pending
- 2022-03-01 WO PCT/JP2022/008552 patent/WO2022190954A1/ja active Application Filing
- 2022-03-01 JP JP2023505321A patent/JPWO2022190954A1/ja active Pending
Also Published As
| Publication number | Publication date |
|---|---|
| JPWO2022190954A1 (zh) | 2022-09-15 |
| WO2022190954A1 (ja) | 2022-09-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110363867B (zh) | 虚拟装扮系统、方法、设备及介质 | |
| CN111787242B (zh) | 用于虚拟试衣的方法和装置 | |
| US9563975B2 (en) | Makeup support apparatus and method for supporting makeup | |
| US9369638B2 (en) | Methods for extracting objects from digital images and for performing color change on the object | |
| RU2668408C2 (ru) | Устройства, системы и способы виртуализации зеркала | |
| US8976160B2 (en) | User interface and authentication for a virtual mirror | |
| US8982110B2 (en) | Method for image transformation, augmented reality, and teleperence | |
| US8970569B2 (en) | Devices, systems and methods of virtualizing a mirror | |
| JP6750504B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
| KR101710521B1 (ko) | 사용자 신체의 cg 표현 기능이 구비된 가상 피팅을 위한 시뮬레이션 장치, 방법 및 이를 위한 컴퓨터 프로그램 | |
| JP2005216061A (ja) | 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス | |
| WO2021039856A1 (ja) | 情報処理装置、表示制御方法および表示制御プログラム | |
| KR20200094768A (ko) | 스트로크 특수 효과 프로그램 파일 패키지의 생성 및 스트로크 특수 효과 생성 방법과 장치 | |
| WO2015017687A2 (en) | Systems and methods for producing predictive images | |
| JP2021144582A (ja) | メイクアップシミュレーション装置、メイクアップシミュレーション方法及びプログラム | |
| CN108268227B (zh) | 显示设备 | |
| CN116888634A (zh) | 信息处理装置、方法、程序、系统以及美容方法 | |
| CN110750154A (zh) | 显示器控制方法、系统、装置、设备和存储介质 | |
| JP2006294066A (ja) | 画像処理装置、画像処理方法、記録媒体、コンピュータプログラム、半導体デバイス | |
| CN111083345B (zh) | 独照生成装置和方法及其非易失性计算机可读媒体 | |
| JP2012065049A (ja) | 画像処理装置及び画像処理方法 | |
| CN111627118A (zh) | 景物画像的展示方法、展示装置、电子设备及存储介质 | |
| JP7397282B2 (ja) | 静止判定システム及びコンピュータプログラム | |
| KR101277553B1 (ko) | 아바타를 이용한 온라인 쇼핑몰에서의 착장 이미지 제공 방법 및 시스템 | |
| JP2023532841A (ja) | 処理後の使用者の外観の予測 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |