CN106846493A - 3d虚拟试戴方法及装置 - Google Patents

3d虚拟试戴方法及装置 Download PDF

Info

Publication number
CN106846493A
CN106846493A CN201710023595.6A CN201710023595A CN106846493A CN 106846493 A CN106846493 A CN 106846493A CN 201710023595 A CN201710023595 A CN 201710023595A CN 106846493 A CN106846493 A CN 106846493A
Authority
CN
China
Prior art keywords
image
human body
product
picture
product picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710023595.6A
Other languages
English (en)
Inventor
段元文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201710023595.6A priority Critical patent/CN106846493A/zh
Publication of CN106846493A publication Critical patent/CN106846493A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种3D虚拟试戴方法，包括：在显示屏显示展示平台对应的产品图片；在接收到基于显示屏当前显示的产品图片触发的试戴指令时，控制摄像头进行拍照操作；在图像中检测到所述产品图片对应的人体部位时，对拍照操作获取到的图像进行识别操作，以获得所述产品图片对应的人体部位图像；基于人体部位图像以及所述产品图片生成3D试戴影像，并在显示屏显示生成的所述3D试戴影像。本发明还公开了一种3D虚拟试戴装置。本发明实现了根据试戴指令对用户选择的产品进行3D虚拟试戴，使得试戴的结果更加精确、更加美观，且能够实时反馈试戴的效果，试戴的操作过程简单且不需要专门的服务人员，减少该展示平台对应商家的销售成本。

Description

3D虚拟试戴方法及装置
技术领域
本发明涉及图像处理技术领域，尤其涉及一种3D虚拟试戴方法及装置。
背景技术
首饰是用各种金属、宝石、玉石及其它贵重物品等材料制成的起装饰作用的装饰品，金属、宝石、玉石及其它贵重物品等材料能够增加首饰的美感、色彩和价值。全世界各个年龄段的人们出于装饰和庆祝的目的在使用首饰。
目前，大多首饰店(例如珠宝店)采用实物试戴，用户在首饰店(例如珠宝店)试戴感兴趣的饰品，因此，首饰店的展示平台均需要配置一到多名售货员，以便于用户试戴以及咨询。但是，实物试戴的方式容易造成饰品的损坏甚至被掉包等，对商家造成不必要的损失，并且在展示平台配置售货员使商家的销售成本较高。
发明内容
本发明提供一种3D虚拟试戴方法及装置，旨在解决实物试戴的方式容易造成饰品的损坏甚至被掉包以及在展示平台配置售货员使商家的销售成本较高的技术问题。
为实现上述目的，本发明提供的一种3D虚拟试戴方法，应用于展示平台，所述展示平台设有摄像头以及显示屏，所述3D虚拟试戴方法包括以下步骤：
在所述显示屏显示所述展示平台对应的产品图片；
在接收到基于所述显示屏当前显示的产品图片触发的试戴指令时，控制所述摄像头进行拍照操作；
在拍照操作获取到的图像中检测到所述产品图片对应的人体部位时，对所述图像进行识别操作，以获得所述产品图片对应的人体部位图像；
基于所述人体部位图像以及所述产品图片生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像。
优选地，所述基于所述人体部位图像以及所述产品图片生成3D影像的步骤包括：
基于所述人体部位图像获取人体部位坐标；
基于人体部位坐标计算所述人体部位图像以及所述产品图片的拟合位置；
基于所述拟合位置、所述人体部位图像以及所述产品图片生成所述3D试戴影像。
优选地，所述基于所述拟合位置、所述人体部位图像以及所述产品图片生成所述3D试戴影像的步骤包括：
基于所述人体部位坐标调整所述产品图片中的产品姿势；
基于所述拟合位置、所述人体部位图像以及调整后的所述产品图片生成所述3D试戴影像。
优选地，所述基于所述人体部位图像以及所述产品图片生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像的步骤之后，所述3D虚拟试戴方法还包括：
基于所述人体部位坐标确定所述产品对应的型号信息；
在所述显示屏显示确定的所述型号信息。
优选地，所述产品图片包括头部饰品图片、颈部饰品图片或者手部饰品图片。
此外，为实现上述目的，本发明还提供一种3D虚拟试戴装置，应用于展示平台，所述展示平台设有摄像头以及显示屏，所述3D虚拟试戴装置包括：
第一显示模块，用于在所述显示屏显示所述展示平台对应的产品图片；
控制模块，用于在接收到基于所述显示屏当前显示的产品图片触发的试戴指令时，控制所述摄像头进行拍照操作；
识别模块，用于在拍照操作获取到的图像中检测到所述产品图片对应的人体部位时，对所述图像进行识别操作，以获得所述产品图片对应的人体部位图像；
生成模块，用于基于所述人体部位图像以及所述产品图片生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像。
优选地，所述生成模块包括：
获取单元，用于基于所述人体部位图像获取人体部位坐标；
计算单元，用于基于人体部位坐标计算所述人体部位图像以及所述产品图片的拟合位置；
生成单元，用于基于所述拟合位置、所述人体部位图像以及所述产品图片生成所述3D试戴影像。
优选地，所述生成单元包括：
调整子单元，用于基于所述人体部位坐标调整所述产品图片中的产品姿势；
生成子单元，用于基于所述拟合位置、所述人体部位图像以及调整后的所述产品图片生成所述3D试戴影像。
优选地，所述虚拟试戴装置还包括：
确定模块，用于基于所述人体部位坐标确定所述产品对应的型号信息；
第二显示模块，用于在所述显示屏显示确定的所述型号信息。
优选地，所述产品图片包括头部饰品图片、颈部饰品图片或者手部饰品图片。
本发明通过在所述显示屏显示所述展示平台对应的产品图片，接着在接收到基于所述显示屏当前显示的产品图片触发的试戴指令时，控制所述摄像头进行拍照操作，而后在拍照操作获取到的图像中检测到所述产品图片对应的人体部位时，对所述图像进行识别操作，以获得所述产品图片对应的人体部位图像，最后基于所述人体部位图像以及所述产品图片生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像，实现了根据试戴指令对用户选择的产品进行3D虚拟试戴，使得试戴的结果更加精确、更加美观，且能够实时反馈试戴的效果，试戴的操作过程简单且不需要专门的服务人员，进而提高产品的销售效率，同时还能够防止产品的损坏以及丢失，并能够减少在展示平台设置的销售人员的数量，进而减少该展示平台对应商家的销售成本。
附图说明
图1为本发明3D虚拟试戴方法第一实施例的流程示意图；
图2为本发明3D虚拟试戴方法第二实施例中基于所述人体部位图像以及所述产品图片生成3D试戴影像的步骤的细化流程示意图；
图3为本发明3D虚拟试戴方法第三实施例中基于所述拟合位置、所述人体部位图像以及所述产品图片生成所述3D试戴影像的步骤的细化流程示意图；
图4为本发明3D虚拟试戴方法第四实施例的流程示意图；
图5为本发明3D虚拟试戴装置第一实施例的功能模块示意图；
图6为本发明3D虚拟试戴装置第二实施例中生成模块的细化功能模块示意图；
图7为本发明3D虚拟试戴装置第三实施例中生成单元的细化功能模块示意图；
图8为本发明3D虚拟试戴装置第四实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
本发明提供一种3D虚拟试戴方法。参照图1，图1为本发明3D虚拟试戴方法第一实施例的流程示意图。
在本实施例中，该3D虚拟试戴方法应用于展示平台，其特征在于，所述展示平台设有摄像头以及显示屏。
在本实施例中，显示屏为触摸屏，用于显示产品图片。摄像头可以设置于显示屏的上方，便于拍摄用户的头部图像，当然，为便于拍摄用户的手部以及儿童的图像，可以在合适的位置设置另一摄像头，例如，在显示屏的下方、且距离地面1米高度的位置。
该3D虚拟试戴方法包括：
步骤S10，在所述显示屏显示所述展示平台对应的产品图片；
在本实施例中，展示平台对应的产品图片为预先设置的产品图片，例如，该展示平台对应商家所售卖产品的图片。在所述显示屏显示所述展示平台对应的产品图片时，可采用循环显示的方式，每一张产品图片的显示时长为预设值例如10s。
步骤S20，在接收到基于所述显示屏当前显示的产品图片触发的试戴指令时，控制所述摄像头进行拍照操作；
在本实施例中，在显示屏的显示界面中，每一个产品图片均设有对应的试戴选项，用户可通过点击该试戴选项触发对应产品的试戴指令。在接收到基于所述显示屏当前显示的产品图片触发的试戴指令时，控制所述摄像头进行拍照操作，以获得包括产品图片对应的人体部位的图片，例如，在该产品为镯子、手环等商品时，拍照操作获得的图片应包括用户的手腕部位，在该产品为戒子等商品时，拍照操作获得的图片应包括用户的手指部位，在该产品为耳钉、耳环、耳坠等商品时，拍照操作获得的图片应包括用户的耳朵部位，在该产品为项链、吊坠等商品时，拍照操作获得的图片应包括用户的颈部部位。
步骤S30，在拍照操作获取到的图像中检测到所述产品图片对应的人体部位时，对所述图像进行识别操作，以获得所述产品图片对应的人体部位图像；
在本实施例中，在摄像头拍摄的图像中检测到所述产品图片对应的人体部位时，对拍照操作获取到的图像进行识别操作，以获得所述产品图片对应的人体部位图像，本实施例中，可采用现有图像识别算法对获取到的图像进行识别。
在一实施例中，在对拍照操作获取到的图像进行识别操作未获得所述产品图片对应的人体部位图像时，根据获取到的图像提示用户调整当前的位置或姿势。例如，在产品图片为项链等颈部产品图片，而对拍照操作获取到的图像进行识别操作未得到用户的颈部特征，则提示用户调整当前的位置，例如，在对拍照操作获取到的图像进行识别操作仅得到用户颈部以下的特征时，提示用户向前移动，在对拍照操作获取到的图像进行识别操作仅得到用户的都不特征时时，提示用户向后移动。
步骤S40，基于所述人体部位图像以及所述产品图片生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像。
在本实施例中，在获得人体部位图像时，基于所述产品图片与所述人体部位图像生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像；具体地，根据人体部位图像调整调整所述产品图片中的产品姿势以及产品图片的大小，然后基于调整后的产品图片与所述人体部位图像生成3D试戴影像，优选地，可通过计算所述人体部位图像以及所述产品图片的拟合位置，根据该拟合位置对所述调整后的产品图片与所述人体部位图像进行拟合操作获得试戴图片，或者将调整后的产品图片与所述人体部位图像进行叠加操作得到试戴图片，最后将试戴图片进行3D处理得到3D试戴影像。
在本实施例中，在试戴过程中，可跟踪用户试戴位置，具体地摄像头实时进行拍照操作，处理器对摄像头拍摄的每一张图像进行处理，以生成3D试戴影像，进而实现在用户的位置或姿势调整时，能够生成动态的3D试戴影像并进行显示，以提高试戴的效果。
需要强调的是，在本实施例中，产品图片包括头部饰品图片、颈部饰品图片或者手部饰品图片，即对应的产品包括戒指、项链、手链、耳钉、耳环、耳坠以及头饰等产品。
本实施例提出的3D虚拟试戴方法，通过在所述显示屏显示所述展示平台对应的产品图片，接着在接收到基于所述显示屏当前显示的产品图片触发的试戴指令时，控制所述摄像头进行拍照操作，而后在拍照操作获取到的图像中检测到所述产品图片对应的人体部位时，对所述图像进行识别操作，以获得所述产品图片对应的人体部位图像，最后基于所述人体部位图像以及所述产品图片生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像，实现了根据试戴指令对用户选择的产品进行3D虚拟试戴，使得试戴的结果更加精确、更加美观，且能够实时反馈试戴的效果，试戴的操作过程简单且不需要专门的服务人员，进而提高产品的销售效率，同时还能够防止产品的损坏以及丢失，并能够减少在展示平台设置的销售人员的数量，进而减少该展示平台对应商家的销售成本。
基于第一实施例提出本发明3D虚拟试戴方法的第二实施例，参照图2，在本实施例中，步骤S40包括：
步骤S41，基于所述人体部位图像获取人体部位坐标；
在本实施例中，在对拍照操作获取到的图像进行识别操作以获得人体部位图像时，基于所述人体部位图像获取人体部位坐标，该人体部位坐标包括该产品图片对应的人体部位中各个点的坐标。具体地，可以采用基于几何特征的人体部位识别方法，包括但不限于：将人体部位用一个几何特征矢量表示，用模式识别中的层次聚类思想设计分类器来对人体部位进行识别。它要求该矢量具有一定独特性，可以反映不同人体部位部特征的差别。识别工作的流程大体如下：首先检测出人体部位特征点，通过测量这些关键点之间的相对距离，得到描述每个人体部位的特征矢量。通过上述每个人体部位的特征矢量得到关键点之间的相对距离，进而得到人体部位坐标。
步骤S42，基于人体部位坐标计算所述人体部位图像以及所述产品图片的拟合位置；
在本实施例中，该拟合位置表示人体部位图像以及所述产品图片的重合的图像，基于人体部位坐标能够准确的计算所述人体部位图像以及所述产品图片的拟合位置。
步骤S43，基于所述拟合位置、所述人体部位图像以及所述产品图片生成所述3D试戴影像。
在本实施例中，在得到拟合位置时，基于拟合位置、人体部位图像以及所述产品图片生成所述3D试戴影像，例如，根据该拟合位置对所述调整后的产品图片与所述人体部位图像进行拟合操作获得试戴图片，或者将调整后的产品图片与所述人体部位图像进行叠加操作得到试戴图片，而后将试戴图片进行3D处理即可得到3D试戴影像。
本实施例提出的3D虚拟试戴方法，通过基于所述人体部位图像获取人体部位坐标，接着基于人体部位坐标计算所述人体部位图像以及所述产品图片的拟合位置，而后基于所述拟合位置、所述人体部位图像以及所述产品图片生成所述3D试戴影像，能够根据人体部位坐标准确的得到3D试戴影像，使得试戴的结果更加精确、更加美观，提高了用户体验。
基于第二实施例提出本发明3D虚拟试戴方法的第三实施例，参照图3，在本实施例中，步骤S43包括：
步骤S431，基于所述人体部位坐标调整所述产品图片中的产品姿势；
在本实施例中，为确保3D试戴影像的准确性，可基于所述人体部位坐标调整所述产品图片中的产品姿势，以使产品图片中的产品姿势与人体部位图像中的人体部位姿势保持一致，提高3D试戴的精度及效果。
步骤S432，基于所述拟合位置、所述人体部位图像以及调整后的所述产品图片生成所述3D试戴影像。
在本实施例中，在基于人体部位坐标调整所述产品图片中的产品姿势之后，基于所述拟合位置、人体部位图像以及调整后的所述产品图片生成所述3D试戴影像，以使产品图片中的产品姿势与人体部位图像中的人体部位姿势保持一致，提高3D试戴的精度及效果。
本实施例提出的3D虚拟试戴方法，通过基于所述人体部位坐标调整所述产品图片中的产品姿势，接着基于所述拟合位置、所述人体部位图像以及调整后的所述产品图片生成所述3D试戴影像，通过调整所述产品图片中的产品姿势，使得产品图片中的产品姿势能够与人体部位图像中的人体部位姿势保持一致，提高3D试戴的精度及效果，进一步提高了用户体验。
基于第一实施例提出本发明3D虚拟试戴方法的第四实施例，参照图4，在本实施例中，在步骤S40之后，该3D虚拟试戴方法还包括：
步骤S50，基于所述人体部位坐标确定所述产品对应的型号信息；
其中，型号信息是指该产品的对应的尺寸、大小等所对应的产品型号。
在本实施例中，根据人体部位坐标能够准确确定所述产品对应的型号信息，以便于为用户提供大小、尺寸合适的产品。
步骤S60，在所述显示屏显示确定的所述型号信息。
在本实施例中，在确定产品对应的型号信息时，在显示屏中显示该型号信息，以使用户能够及时查看该型号信息，便于用户在购买该产品时，选择合适的产品，避免用户购买的产品大小不适合等情况的发生。
本实施例提出的3D虚拟试戴方法，通过基于所述人体部位坐标确定所述产品对应的型号信息，接着在所述显示屏显示所述型号信息，使得用户能够根据该型号信息选择大小、尺寸等合适的产品，进而避免用户购买的产品大小不适合，提高了用户体验。
本发明进一步提供一种3D虚拟试戴装置。参照图5，图5为本发明3D虚拟试戴装置第一实施例的功能模块示意图。
在本实施例中，3D虚拟试戴装置应用于展示平台，其特征在于，所述展示平台设有摄像头以及显示屏。
在本实施例中，显示屏为触摸屏，用于显示产品图片。摄像头可以设置于显示屏的上方，便于拍摄用户的头部图像，当然，为便于拍摄用户的手部以及儿童的图像，可以在合适的位置设置另一摄像头，例如，在显示屏的下方、且距离地面1米高度的位置。
该3D虚拟试戴装置包括：
第一显示模块10，用于在所述显示屏显示所述展示平台对应的产品图片；
在本实施例中，展示平台对应的产品图片为预先设置的产品图片，例如，该展示平台对应商家所售卖产品的图片。第一显示模块10在所述显示屏显示所述展示平台对应的产品图片时，可采用循环显示的方式，每一张产品图片的显示时长为预设值例如10s。
控制模块20，用于在接收到基于所述显示屏当前显示的产品图片触发的试戴指令时，控制所述摄像头进行拍照操作；
在本实施例中，在显示屏的显示界面中，每一个产品图片均设有对应的试戴选项，用户可通过点击该试戴选项触发对应产品的试戴指令。在接收到基于所述显示屏当前显示的产品图片触发的试戴指令时，控制模块20控制所述摄像头进行拍照操作，以获得包括产品图片对应的人体部位的图片，例如，在该产品为镯子、手环等商品时，拍照操作获得的图片应包括用户的手腕部位，在该产品为戒子等商品时，拍照操作获得的图片应包括用户的手指部位，在该产品为耳钉、耳环、耳坠等商品时，拍照操作获得的图片应包括用户的耳朵部位，在该产品为项链、吊坠等商品时，拍照操作获得的图片应包括用户的颈部部位。
识别模块30，用于在拍照操作获取到的图像中检测到所述产品图片对应的人体部位时，对所述图像进行识别操作，以获得所述产品图片对应的人体部位图像；
在本实施例中，在摄像头拍摄的图像中检测到所述产品图片对应的人体部位时，识别模块30对拍照操作获取到的图像进行识别操作，以获得所述产品图片对应的人体部位图像，本实施例中，可采用现有图像识别算法对获取到的图像进行识别。
在一实施例中，在对拍照操作获取到的图像进行识别操作未获得所述产品图片对应的人体部位图像时，根据获取到的图像提示用户调整当前的位置或姿势。例如，在产品图片为项链等颈部产品图片，而对拍照操作获取到的图像进行识别操作未得到用户的颈部特征，则提示用户调整当前的位置，例如，在对拍照操作获取到的图像进行识别操作仅得到用户颈部以下的特征时，提示用户向前移动，在对拍照操作获取到的图像进行识别操作仅得到用户的都不特征时时，提示用户向后移动。
生成模块40，用于基于所述人体部位图像以及所述产品图片生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像。
在本实施例中，在获得人体部位图像时，生成模块40基于所述产品图片与所述人体部位图像生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像；具体地，根据人体部位图像调整调整所述产品图片中的产品姿势以及产品图片的大小，然后基于调整后的产品图片与所述人体部位图像生成3D试戴影像，优选地，可通过计算所述人体部位图像以及所述产品图片的拟合位置，根据该拟合位置对所述调整后的产品图片与所述人体部位图像进行拟合操作获得试戴图片，或者将调整后的产品图片与所述人体部位图像进行叠加操作得到试戴图片，最后将试戴图片进行3D处理得到3D试戴影像。
需要强调的是，在本实施例中，产品图片包括头部饰品图片、颈部饰品图片或者手部饰品图片，即对应的产品包括戒指、项链、手链、耳钉、耳环、耳坠以及头饰等产品。
在本实施例中，在试戴过程中，可跟踪用户试戴位置，具体地摄像头实时进行拍照操作，处理器对摄像头拍摄的每一张图像进行处理，以生成3D试戴影像，进而实现在用户的位置或姿势调整时，能够生成动态的3D试戴影像并进行显示，以提高试戴的效果。
本实施例提出的3D虚拟试戴装置，通过第一显示模块10在所述显示屏显示所述展示平台对应的产品图片，接着在接收到基于所述显示屏当前显示的产品图片触发的试戴指令时，控制模块20控制所述摄像头进行拍照操作，而后在所述图像中检测到所述产品图片对应的人体部位时，识别模块30对拍照操作获取到的图像进行识别操作，以获得所述产品图片对应的人体部位图像，最后生成模块40基于所述人体部位图像以及所述产品图片生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像，实现了根据试戴指令对用户选择的产品进行3D虚拟试戴，使得试戴的结果更加精确、更加美观，且能够实时反馈试戴的效果，试戴的操作过程简单且不需要专门的服务人员，进而提高产品的销售效率，同时还能够防止产品的损坏以及丢失，并能够减少在展示平台设置的销售人员的数量，进而减少该展示平台对应商家的销售成本。
基于第一实施例提出本发明3D虚拟试戴装置的第二实施例，参照图6，在本实施例中，生成模块40包括：
获取单元41，用于基于所述人体部位图像获取人体部位坐标；
在本实施例中，在对拍照操作获取到的图像进行识别操作以获得人体部位图像时，获取单元41基于所述人体部位图像获取人体部位坐标，该人体部位坐标包括该产品图片对应的人体部位中各个点的坐标。具体地，可以采用基于几何特征的人体部位识别方法，包括但不限于：将人体部位用一个几何特征矢量表示，用模式识别中的层次聚类思想设计分类器来对人体部位进行识别。它要求该矢量具有一定独特性，可以反映不同人体部位部特征的差别。识别工作的流程大体如下：首先检测出人体部位特征点，通过测量这些关键点之间的相对距离，得到描述每个人体部位的特征矢量。通过上述每个人体部位的特征矢量得到关键点之间的相对距离，进而得到人体部位坐标。
计算单元42，用于基于人体部位坐标计算所述人体部位图像以及所述产品图片的拟合位置；
在本实施例中，该拟合位置表示人体部位图像以及所述产品图片的重合的图像，计算单元42基于人体部位坐标能够准确的计算所述人体部位图像以及所述产品图片的拟合位置。
生成单元43，用于基于所述拟合位置、所述人体部位图像以及所述产品图片生成所述3D试戴影像。
在本实施例中，在得到拟合位置时，生成单元43基于拟合位置、人体部位图像以及所述产品图片生成所述3D试戴影像，例如，根据该拟合位置对所述调整后的产品图片与所述人体部位图像进行拟合操作获得试戴图片，或者将调整后的产品图片与所述人体部位图像进行叠加操作得到试戴图片，而后将试戴图片进行3D处理即可得到3D试戴影像。
本实施例提出的3D虚拟试戴装置，通过获取单元41基于所述人体部位图像获取人体部位坐标，接着计算单元42基于人体部位坐标计算所述人体部位图像以及所述产品图片的拟合位置，而后生成单元43基于所述拟合位置、所述人体部位图像以及所述产品图片生成所述3D试戴影像，能够根据人体部位坐标准确的得到3D试戴影像，使得试戴的结果更加精确、更加美观，提高了用户体验。
基于第二实施例提出本发明3D虚拟试戴装置的第三实施例，参照图7，在本实施例中，生成单元43包括：
调整子单元431，用于基于所述人体部位坐标调整所述产品图片中的产品姿势；
在本实施例中，为确保3D试戴影像的准确性，调整子单元431可基于所述人体部位坐标调整所述产品图片中的产品姿势，以使产品图片中的产品姿势与人体部位图像中的人体部位姿势保持一致，提高3D试戴的精度及效果。
生成子单元432，用于基于所述拟合位置、所述人体部位图像以及调整后的所述产品图片生成所述3D试戴影像。
在本实施例中，在基于人体部位坐标调整所述产品图片中的产品姿势之后，生成子单元432基于所述拟合位置、人体部位图像以及调整后的所述产品图片生成所述3D试戴影像，以使产品图片中的产品姿势与人体部位图像中的人体部位姿势保持一致，提高3D试戴的精度及效果。
本实施例提出的3D虚拟试戴装置，通过调整子单元431基于所述人体部位坐标调整所述产品图片中的产品姿势，接着生成子单元432基于所述拟合位置、所述人体部位图像以及调整后的所述产品图片生成所述3D试戴影像，通过调整所述产品图片中的产品姿势，使得产品图片中的产品姿势能够与人体部位图像中的人体部位姿势保持一致，提高3D试戴的精度及效果，进一步提高了用户体验。
基于第一实施例提出本发明3D虚拟试戴装置的第四实施例，参照图8，在本实施例中，虚拟试戴装置还包括：
确定模块50，用于基于所述人体部位坐标确定所述产品对应的型号信息；
其中，型号信息是指该产品的对应的尺寸、大小等所对应的产品型号。
在本实施例中，确定模块50根据人体部位坐标能够准确确定所述产品对应的型号信息，以便于为用户提供大小、尺寸合适的产品。
第二显示模块60，用于在所述显示屏显示确定的所述型号信息。
在本实施例中，在确定产品对应的型号信息时，第二显示模块60在显示屏中显示该型号信息，以使用户能够及时查看该型号信息，便于用户在购买该产品时，选择合适的产品，避免用户购买的产品大小不适合等情况的发生。
本实施例提出的3D虚拟试戴装置，通过基于所述人体部位坐标确定所述产品对应的型号信息，接着在所述显示屏显示所述型号信息，使得用户能够根据该型号信息选择大小、尺寸等合适的产品，进而避免用户购买的产品大小不适合，提高了用户体验。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种3D虚拟试戴方法，应用于展示平台，其特征在于，所述展示平台设有摄像头以及显示屏，所述3D虚拟试戴方法包括以下步骤：
在所述显示屏显示所述展示平台对应的产品图片；
在接收到基于所述显示屏当前显示的产品图片触发的试戴指令时，控制所述摄像头进行拍照操作；
在拍照操作获取到的图像中检测到所述产品图片对应的人体部位时，对所述图像进行识别操作，以获得所述产品图片对应的人体部位图像；
基于所述人体部位图像以及所述产品图片生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像。
2.如权利要求1所述的3D虚拟试戴方法，其特征在于，所述基于所述人体部位图像以及所述产品图片生成3D影像的步骤包括：
基于所述人体部位图像获取人体部位坐标；
基于人体部位坐标计算所述人体部位图像以及所述产品图片的拟合位置；
基于所述拟合位置、所述人体部位图像以及所述产品图片生成所述3D试戴影像。
3.如权利要求2所述的3D虚拟试戴方法，其特征在于，所述基于所述拟合位置、所述人体部位图像以及所述产品图片生成所述3D试戴影像的步骤包括：
基于所述人体部位坐标调整所述产品图片中的产品姿势；
基于所述拟合位置、所述人体部位图像以及调整后的所述产品图片生成所述3D试戴影像。
4.如权利要求1所述的3D虚拟试戴方法，其特征在于，所述基于所述人体部位图像以及所述产品图片生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像的步骤之后，所述3D虚拟试戴方法还包括：
基于所述人体部位坐标确定所述产品对应的型号信息；
在所述显示屏显示确定的所述型号信息。
5.如权利要求1至4任一项所述的3D虚拟试戴方法，其特征在于，所述产品图片包括头部饰品图片、颈部饰品图片或者手部饰品图片。
6.一种3D虚拟试戴装置，应用于展示平台，其特征在于，所述展示平台设有摄像头以及显示屏，所述3D虚拟试戴装置包括：
第一显示模块，用于在所述显示屏显示所述展示平台对应的产品图片；
控制模块，用于在接收到基于所述显示屏当前显示的产品图片触发的试戴指令时，控制所述摄像头进行拍照操作；
识别模块，用于在拍照操作获取到的图像中检测到所述产品图片对应的人体部位时，对所述图像进行识别操作，以获得所述产品图片对应的人体部位图像；
生成模块，用于基于所述人体部位图像以及所述产品图片生成3D试戴影像，并在所述显示屏显示生成的所述3D试戴影像。
7.如权利要求6所述的3D虚拟试戴装置，其特征在于，所述生成模块包括：
获取单元，用于基于所述人体部位图像获取人体部位坐标；
计算单元，用于基于人体部位坐标计算所述人体部位图像以及所述产品图片的拟合位置；
生成单元，用于基于所述拟合位置、所述人体部位图像以及所述产品图片生成所述3D试戴影像。
8.如权利要求7所述的3D虚拟试戴装置，其特征在于，所述生成单元包括：
调整子单元，用于基于所述人体部位坐标调整所述产品图片中的产品姿势；
生成子单元，用于基于所述拟合位置、所述人体部位图像以及调整后的所述产品图片生成所述3D试戴影像。
9.如权利要求6所述的3D虚拟试戴装置，其特征在于，所述虚拟试戴装置还包括：
确定模块，用于基于所述人体部位坐标确定所述产品对应的型号信息；
第二显示模块，用于在所述显示屏显示确定的所述型号信息。
10.如权利要求6至9任一项所述的3D虚拟试戴装置，其特征在于，所述产品图片包括头部饰品图片、颈部饰品图片或者手部饰品图片。
CN201710023595.6A 2017-01-12 2017-01-12 3d虚拟试戴方法及装置 Pending CN106846493A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710023595.6A CN106846493A (zh) 2017-01-12 2017-01-12 3d虚拟试戴方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710023595.6A CN106846493A (zh) 2017-01-12 2017-01-12 3d虚拟试戴方法及装置

Publications (1)

Publication Number Publication Date
CN106846493A true CN106846493A (zh) 2017-06-13

Family

ID=59123273

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710023595.6A Pending CN106846493A (zh) 2017-01-12 2017-01-12 3d虚拟试戴方法及装置

Country Status (1)

Country Link
CN (1) CN106846493A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109671159A (zh) * 2018-12-26 2019-04-23 贵州锦微科技信息有限公司 基于3d vr技术的少数民族美发虚拟试戴方法
CN110288715A (zh) * 2019-07-04 2019-09-27 厦门美图之家科技有限公司 虚拟项链试戴方法、装置、电子设备及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102156808A (zh) * 2011-03-30 2011-08-17 北京触角科技有限公司 增强现实实时虚拟饰品试戴系统及方法
CN103514350A (zh) * 2012-06-27 2014-01-15 富泰华工业（深圳）有限公司 具有虚拟试衣功能的电子装置及虚拟试衣方法
CN104217350A (zh) * 2014-06-17 2014-12-17 北京京东尚科信息技术有限公司 实现虚拟试戴的方法和装置
CN104851004A (zh) * 2015-05-12 2015-08-19 杨淑琪 一种饰品试戴的展示装置和展示方法
CN104881526A (zh) * 2015-05-13 2015-09-02 深圳彼爱其视觉科技有限公司 一种基于3d的物品穿戴方法及眼镜试戴方法
CN104898832A (zh) * 2015-05-13 2015-09-09 深圳彼爱其视觉科技有限公司 一种基于智能终端的3d实时眼镜试戴方法
CN105551037A (zh) * 2015-12-10 2016-05-04 广州视源电子科技股份有限公司 用户服装尺码匹配方法、系统和智能镜子
CN106210504A (zh) * 2014-09-04 2016-12-07 株式会社东芝 图像处理装置、图像处理系统及图像处理方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102156808A (zh) * 2011-03-30 2011-08-17 北京触角科技有限公司 增强现实实时虚拟饰品试戴系统及方法
CN103514350A (zh) * 2012-06-27 2014-01-15 富泰华工业（深圳）有限公司 具有虚拟试衣功能的电子装置及虚拟试衣方法
CN104217350A (zh) * 2014-06-17 2014-12-17 北京京东尚科信息技术有限公司 实现虚拟试戴的方法和装置
CN106210504A (zh) * 2014-09-04 2016-12-07 株式会社东芝 图像处理装置、图像处理系统及图像处理方法
CN104851004A (zh) * 2015-05-12 2015-08-19 杨淑琪 一种饰品试戴的展示装置和展示方法
CN104881526A (zh) * 2015-05-13 2015-09-02 深圳彼爱其视觉科技有限公司 一种基于3d的物品穿戴方法及眼镜试戴方法
CN104898832A (zh) * 2015-05-13 2015-09-09 深圳彼爱其视觉科技有限公司 一种基于智能终端的3d实时眼镜试戴方法
CN105551037A (zh) * 2015-12-10 2016-05-04 广州视源电子科技股份有限公司 用户服装尺码匹配方法、系统和智能镜子

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109671159A (zh) * 2018-12-26 2019-04-23 贵州锦微科技信息有限公司 基于3d vr技术的少数民族美发虚拟试戴方法
CN110288715A (zh) * 2019-07-04 2019-09-27 厦门美图之家科技有限公司 虚拟项链试戴方法、装置、电子设备及存储介质
CN110288715B (zh) * 2019-07-04 2022-10-28 厦门美图之家科技有限公司 虚拟项链试戴方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
JP7253017B2 (ja) 反射を利用する拡張現実システムおよび方法
US9341464B2 (en) Method and apparatus for sizing and fitting an individual for apparel, accessories, or prosthetics
US20170148220A1 (en) Information processing apparatus, display control method, and program
Kim et al. Augmented reality fashion apparel simulation using a magic mirror
CN110859630A (zh) 一种基于ar技术的姿态矫正器及其矫正方法
JP2021534516A (ja) 眼鏡用仮想試着システム及び方法
US20220044311A1 (en) Method for enhancing a user's image while e-commerce shopping for the purpose of enhancing the item that is for sale
KR20170133455A (ko) 제스처를 사용한 3차원 의복 수정 기법
US11620762B2 (en) Systems and methods for sizing objects via a computing device
JP2020109935A (ja) 動画配信システム、動画配信方法、動画配信プログラム、情報処理端末及び動画視聴プログラム
JP2004094773A (ja) 頭部装着物画像合成方法、化粧画像合成方法、頭部装着物画像合成装置、化粧画像合成装置及びプログラム
EP4270317A1 (en) Foot shape measurement apparatus and computer program
CN106846493A (zh) 3d虚拟试戴方法及装置
CN107622428A (zh) 一种实现虚拟试穿的方法及装置
CN106845379A (zh) 图像显示方法及装置
KR20200009182A (ko) 증강 현실 구조의 네일 아트 자동 판매 장치
US20230290096A1 (en) Progressive body capture of user body for building an avatar of user
CN107886387A (zh) 采用增强现实技术提供手掌装饰虚拟图像的实现方法及其装置
KR20200009423A (ko) 증강 현실 네일 아트 이미지 생성 장치 및 그 방법
KR20200099121A (ko) 증강 현실 구조의 네일 아트 자동 판매 장치
WO2023076502A1 (en) Systems and methods of using augmented reality for generating custom-designed wearable ornamental articles
TWI789674B (zh) 資訊取得裝置、資訊取得方法、及控制程式
JP6784056B2 (ja) 頭部装着型表示装置、表示システム、頭部装着型表示装置の制御方法、およびコンピュータープログラム
JP7312309B2 (ja) 情報提供装置、情報提供方法、及び制御プログラム
TWM451605U (zh) 多重模型的虛擬試衣平台

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170613