CN109345337A - 一种网购试穿戴方法、虚拟试衣镜、系统及存储介质 - Google Patents
一种网购试穿戴方法、虚拟试衣镜、系统及存储介质 Download PDFInfo
- Publication number
- CN109345337A CN109345337A CN201811074155.4A CN201811074155A CN109345337A CN 109345337 A CN109345337 A CN 109345337A CN 201811074155 A CN201811074155 A CN 201811074155A CN 109345337 A CN109345337 A CN 109345337A
- Authority
- CN
- China
- Prior art keywords
- user
- mirror
- clothes
- virtual
- model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000010414 shopping Methods 0.000 title claims abstract description 53
- 238000000034 method Methods 0.000 title claims abstract description 52
- 238000001514 detection method Methods 0.000 claims abstract description 42
- 230000000694 effects Effects 0.000 claims abstract description 24
- 230000015654 memory Effects 0.000 claims description 46
- 238000004590 computer program Methods 0.000 claims description 22
- 230000001815 facial effect Effects 0.000 claims description 13
- 238000013528 artificial neural network Methods 0.000 claims description 10
- 230000006870 function Effects 0.000 claims description 10
- 230000004927 fusion Effects 0.000 claims description 7
- 238000004088 simulation Methods 0.000 claims description 5
- 230000006399 behavior Effects 0.000 claims 1
- 238000004364 calculation method Methods 0.000 claims 1
- 239000011449 brick Substances 0.000 description 4
- 239000004570 mortar (masonry) Substances 0.000 description 4
- 239000007787 solid Substances 0.000 description 4
- 230000001537 neural effect Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 208000001491 myopia Diseases 0.000 description 1
- 210000005036 nerve Anatomy 0.000 description 1
- 230000035515 penetration Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0641—Shopping interfaces
- G06Q30/0643—Graphical representation of items or shoppers
-
- A—HUMAN NECESSITIES
- A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
- A47G—HOUSEHOLD OR TABLE EQUIPMENT
- A47G1/00—Mirrors; Picture frames or the like, e.g. provided with heating, lighting or ventilating means
- A47G1/02—Mirrors used as equipment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Human Computer Interaction (AREA)
- Economics (AREA)
- General Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Marketing (AREA)
- Development Economics (AREA)
- User Interface Of Digital Computer (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种基于虚拟试衣镜的网购试穿戴方法、虚拟试衣镜、系统及存储介质，该方法包括：S1、通过人体检测装置检测镜体前是否存在用户；S2、当镜体前存在用户时，进入衣服穿戴效果展示模式，发送指令使镜体显示3D虚拟试衣场景并通过人体检测装置实时识别用户的姿势动作；S3、执行所识别到的用户的姿势动作所对应的回调函数；S4、接收到用户登录请求时，获取用户的帐号信息，将用户的帐号信息和用户收藏的衣服数据信息上传至衣服收藏数据库中。该方法能通过3D人体模型向用户展示各种服装的穿着效果，用户只需位于虚拟试衣镜的摄像头的摄影区域内即可通过姿势动作来发出相应的指令从而实现更换服装、收藏服装等操作。
Description
技术领域
本发明涉及电子商务技术领域，尤其涉及一种基于虚拟试衣镜的网购试穿戴方法、虚拟试衣镜、系统及存储介质。
背景技术
随着互联网技术的发展，互联网普及率越来越高，网络购物作为一种新兴的购物方式，因其方便快捷而受到广大消费者的喜爱。目前，网上购物通常是通过给用户展示商品的照片来给用户提供参考，用户仅能通过照片来判断商品是否符合自己，经常出现网购回来的衣物不理想而发生换货退货现象，给消费者带来不便。
发明内容
为了克服现有技术的不足，本发明的目的之一在于提供一种基于虚拟试衣镜的网购试穿戴方法，其能通过3D人体模型向用户展示各种服装的穿着效果，用户只需位于虚拟试衣镜的摄像头的摄影区域内即可通过姿势动作来发出相应的指令从而实现更换服装、收藏服装等操作，用户可通过终端登录自己的帐号查看收藏的服装从而决定是否购买。
本发明的目的之二在于提供一种虚拟试衣镜，其能通过3D人体模型向用户展示各种服装的穿着效果，用户只需位于虚拟试衣镜的摄像头的摄影区域内即可通过姿势动作来发出相应的指令从而实现更换服装、收藏服装等操作，用户可通过终端登录自己的帐号查看收藏的服装从而决定是否购买。
本发明的目的之三在于提供一种基于虚拟试衣镜的网购试穿戴系统，其能通过3D人体模型向用户展示各种服装的穿着效果，用户只需位于虚拟试衣镜的摄像头的摄影区域内即可通过姿势动作来发出相应的指令从而实现更换服装、收藏服装等操作，用户可通过终端登录自己的帐号查看收藏的服装从而决定是否购买。
本发明的目的之四在于提供一种计算机可读存储介质，该存储介质所存储的计算机程序运行时能通过3D人体模型向用户展示各种服装的穿着效果，用户只需位于虚拟试衣镜的摄像头的摄影区域内即可通过姿势动作来发出相应的指令从而实现更换服装、收藏服装等操作，用户可通过终端登录自己的帐号查看收藏的服装从而决定是否购买。
本发明的目的之一采用如下技术方案实现：
一种基于虚拟试衣镜的网购试穿戴方法，所述虚拟试衣镜包括镜体、人体检测装置和3D虚拟显示控制模块，所述3D虚拟显示控制模块包括处理器和存储器，所述处理器分别与所述存储器、所述镜体、所述人体检测装置连接，所述人体检测装置安装在所述镜体的正面；
所述存储器中存储有多种服装的3D模型以及不同体型的3D人体模特，所述存储器还存储有可执行计算机程序，所述处理器读取所述存储器的计算机程序并运行以实现以下方法：
通过所述人体检测装置检测所述镜体前是否存在用户；
当所述镜体前存在用户时，进入衣服穿戴效果展示模式，发送指令使所述镜体显示3D虚拟试衣场景并通过所述人体检测装置实时识别用户的姿势动作，其中，所述3D虚拟试衣场景为身穿在售衣服的3D人体模特，该3D人体模特是根据用户的体型来匹配的相应体型的3D人体模特；
执行所识别到的用户的姿势动作所对应的回调函数以实现操作指示视频展示、更换所述镜体当前显示的3D人体模特的衣物、使所述镜体当前显示的3D人体模特转动身体或将所述镜体当前所显示的衣服收藏记录在本地；
接收到用户登录请求时，获取用户的帐号信息，将用户的帐号信息和用户收藏的衣服数据信息上传至衣服收藏数据库中，用户收藏的衣服数据信息与用户的帐号信息对应存储。
进一步地，所述执行所识别到的用户的姿势动作所对应的回调函数以实现操作指示视频展示、更换所述镜体当前显示的3D人体模特的衣物、使所述镜体当前显示的3D人体模特转动身体或将所述镜体当前所显示的衣服收藏记录在本地具体为：
当识别到用户在预设时间内静止不动或指向所述镜体显示的界面中的使用帮助按钮时，发送指令使所述镜体展示操作指示视频，所述操作指示视频为使用该虚拟试衣镜的操作流程；
当识别到用户向左或向右挥动手臂时，更换所述镜体当前显示的3D人体模特的衣服；
当识别到用户转动身体时，使所述镜体当前显示的3D人体模特转动身体；
当识别到用户指向所述镜体当前显示的3D人体模特的上身、下身、头部或足部时，更换所述镜体当前显示的3D人体模特的上衣、下衣、帽子或鞋子；
当识别到用户指向所述镜体显示的界面中的收藏按钮或用户做出收藏手势时，将所述镜体当前所显示的衣服记录在本地。
进一步地，所述人体检测装置采用摄像头，所述通过所述人体检测装置检测所述镜体前是否存在用户具体为：
实时接收所述摄像头的录像数据并把录像数据解码成图片序列；
将图片传递给人体识别神经网络以使所述人体识别神经网络识别是否有人；
若否，则使人体识别神经网络继续识别；
若是，则进入衣服穿戴效果展示模式，发送指令使所述镜体显示3D虚拟试衣场景并实时识别所述摄像头的录像数据中用户的姿势动作。
进一步地，所述实时识别所述摄像头的录像数据中用户的姿势动作具体为：
实时接收所述摄像头的录像数据并把录像数据解码成图片序列；
将图片传递给姿势识别网络以使所述姿势识别网络识别用户的姿势动作。
进一步地，所述姿势识别网络识别用户的姿势动作的过程为：
所述姿势识别网络识别人体关键点并将人体关键点坐标信号发送给动作识别模块；
所述动作识别模块根据人体关键点坐标得出用户的肢体的轮廓并通过Kalmanfilter对轮廓进行平滑处理后识别用户的姿势动作。
进一步地，所述方法还包括：
接收到模拟真人试穿效果展示指令时，获取用户的人脸图像并将用户的人脸图像融合在3D人体模特的脸部上；
将该用户收藏在衣服收藏数据库中的某一套衣服的3D模型融合在具有用户的人脸图像的3D人体模特上并向用户进行展示；
接收到更换衣服指令时，更换所述具有用户的人脸图像的3D人体模特身上的衣服；
接收到显示衣服的产品信息指令时，显示当前衣服的产品信息；
接收到购买请求时，生成支付代码和支付订单；
当用户支付成功后，下单完成。
进一步地，根据用户的体型来匹配的相应体型的3D人体模特的方式可为：检测用户的可用于确定其体型的若干个关键点，关键点包括用户的头部、脚部及肩部，根据各个关键点坐标确定用户的体型，查找存储器所存储的3D人体模特中与用户体型最接近的3D人体模特。
进一步地，所述方法还包括：
将用户收藏在衣服收藏数据库中的商品信息上传至导购系统数据库以使导购员可通过导购系统数据库查看用户的衣服收藏列表从而提供相应的衣服给用户进行真实试穿。进一步地，该方法还包括：
当识别到用户的手指指向所述镜体显示的界面上的选择模特按钮时，进入3D人体模特列表以供用户更换不同性别或体型的3D人体模特。
本发明的目的之二采用如下技术方案实现：
一种虚拟试衣镜，包括镜体、人体检测装置和3D虚拟显示控制模块，所述3D虚拟显示控制模块包括处理器和存储器，所述处理器分别与所述存储器、所述镜体、所述人体检测装置连接，所述人体检测装置安装在所述镜体的正面，所述存储器预存有不同体型及不同性别的3D人体模特数据以及各种服装的3D模型，所述存储器存储有可执行计算机程序，所述处理器读取所述存储器的计算机程序并运行以实现上述的基于虚拟试衣镜的网购试穿戴方法。
本发明的目的之三采用如下技术方案实现：
一种基于虚拟试衣镜的网购试穿戴系统，包括：虚拟试衣镜、移动终端以及导购终端；所述虚拟试衣镜包括镜体、人体检测装置和3D虚拟显示控制模块，所述3D虚拟显示控制模块包括处理器和存储器，所述处理器分别与所述存储器、所述镜体、所述人体检测装置连接，所述人体检测装置安装在所述镜体的正面；所述移动终端和所述导购终端均可与所述3D虚拟显示控制模块进行通信；所述存储器预存有不同体型及不同性别的3D人体模特数据以及各种服装的3D模型，所述存储器存储有可执行计算机程序，所述处理器读取所述存储器的计算机程序并运行以实现上述的基于虚拟试衣镜的网购试穿戴方法。
本发明的目的之四采用如下技术方案实现：
一种计算机可读存储介质，所述计算机可读存储介质存储有可执行计算机程序，所述计算机程序运行时可实现上述的基于虚拟试衣镜的网购试穿戴方法。
相比现有技术，本发明的有益效果在于：
该基于虚拟试衣镜的网购试穿戴方法能通过3D人体模特向用户展示各种服装的穿着效果，用户只需位于虚拟试衣镜的摄像头的摄影区域内即可通过姿势动作来发出相应的指令从而实现更换服装、收藏服装等操作，用户可通过终端登录自己的帐号查看收藏的服装从而决定是否购买。
附图说明
图1为本发明提供一种基于虚拟试衣镜的网购试穿戴方法的流程示意图。
具体实施方式
下面，结合附图以及具体实施方式，对本发明做进一步描述，需要说明的是，在不相冲突的前提下，以下描述的各实施例之间或各技术特征之间可以任意组合形成新的实施例。
请参阅图1，一种基于虚拟试衣镜的网购试穿戴方法，虚拟试衣镜包括镜体、人体检测装置和3D虚拟显示控制模块，3D虚拟显示控制模块包括处理器和存储器，处理器分别与存储器、镜体、人体检测装置连接，人体检测装置安装在镜体的正面；
所述存储器中存储有多种服装的3D模型以及不同体型的3D人体模特，存储器还存储有可执行计算机程序，处理器读取存储器的计算机程序并运行以实现以下方法：
S1、通过人体检测装置检测镜体前是否存在用户；
S2、当镜体前存在用户时，进入衣服穿戴效果展示模式，发送指令使镜体显示3D虚拟试衣场景并通过人体检测装置实时识别用户的姿势动作，其中，3D虚拟试衣场景为身穿在售衣服的3D人体模特，该3D人体模特是根据用户的体型来匹配的相应体型的3D人体模特；
S3、执行所识别到的用户的姿势动作所对应的回调函数以实现操作指示视频展示、更换所述镜体当前显示的3D人体模特的衣物、使所述镜体当前显示的3D人体模特转动身体或将所述镜体当前所显示的衣服收藏记录在本地；
S4、接收到用户登录请求时，获取用户的帐号信息，将用户的帐号信息和用户收藏的衣服数据信息上传至衣服收藏数据库中，用户收藏的衣服数据信息与用户的帐号信息对应存储。
该方法通过将各种服装的3D模型与3D人体模特融合在一起，并通过镜体进行展示，用户可通过镜体观看服装的穿着效果，用户只需位于虚拟试衣镜的摄像头的摄影区域内即可通过姿势动作来发出相应的指令从而实现更换服装、收藏服装等操作，用户在查看完各种服装之后，若是收藏有心仪的服装，可在虚拟试衣镜上登录自己的帐号，从而将收藏的服装同步到自己的帐号上，如果用户当时还不想购买，等到想要购买的时候通过终端(如手机、平板电脑等)登录自己的帐号查看收藏的服装再进行购买。
对于在城市里工作的人来说，只有在节假日才有时间外出逛街买衣服，多数人会因为没有时间而选择网上购买衣物，但是网上购买无法进行试穿，不知道衣服是否适合自己，网购的店家通常是通过照片来展示衣服，网购用户无法获知衣服的立体效果如何，即使某些店家会有模特穿着衣服拍摄的短视频，但是通常只有一个模特，而网购用户的身材体型可能与模特相差甚远，也无法想象自己穿上衣服的效果，如此一来，会存在很多退货换货现象。对于网购用户来说，退换货是一件非常麻烦的事情，还需要自己额外支付邮费，因此，很多人也会希望到实体店购买，但是，节假日外出购物的人非常多，实体店面的空间有限，所设置的试衣间有限，往往需要排很长时间的队才能试衣，这会浪费大量的时间用来等候。而本发明所提供的方法正是为了解决用户网购衣物容易不合身的麻烦以及到实体店购买又由于人多而造成时间的浪费的问题，通过该方法，用户可直接通过虚拟试衣镜观看各种服装的3D穿着效果，可以更准确地判断是否适合自己，降低因不合适而产生退换货几率，又不需要花费大量的时间去实体店查看。
需要说明的是，在虚拟试衣镜未检测到有人时，镜体上可循环播放该虚拟试衣镜的操作指示视频或者循环展示在售衣服的3D穿着效果；此外，用户还可通过镜体上的相关按钮来实现衣服类型搜索，去除一些不感兴趣的衣服类型。
对于根据用户的体型来匹配的相应体型的3D人体模特的方式可为：检测用户的可用于确定其体型的若干个关键点，关键点包括用户的头部、脚部、肩部等，根据关键点坐标确定用户的体型，查找存储器所存储的3D人体模特之中与用户体型最接近的3D人体模特。虚拟试衣镜直接识别用户的体型，从而从3D人体模特数据库中调取最接近用户体型的3D人体模特，使得用户可以拥有更直观地感受以确定衣服是否适合自己。
作为一种优选的实施方式，步骤S3中的所述执行所识别到的用户的姿势动作所对应的回调函数以实现操作指示视频展示、更换所述镜体当前显示的3D人体模特的衣物、使所述镜体当前显示的3D人体模特转动身体或将所述镜体当前所显示的衣服收藏记录在本地具体为：
当识别到用户在预设时间内静止不动或指向镜体显示的界面中的使用帮助按钮时，发送指令使镜体展示操作指示视频，操作指示视频为使用该虚拟试衣镜的操作流程；
当识别到用户向左或向右挥动手臂时，更换镜体当前显示的3D人体模特的衣服，具体的，当用户向左挥动手臂时，将衣服3D模型库中当前所显示的衣服的下一套衣服更换在3D人体模特身上；当用户向右挥动手臂时，将衣服3D模型库中当前所显示的衣服的上一套衣服更换在3D人体模特身上；
当识别到用户转动身体时，使镜体当前显示的3D人体模特转动身体；
当识别到用户指向镜体当前显示的3D人体模特的上身、下身、头部或足部时，更换镜体当前显示的3D人体模特的上衣、下衣、帽子或鞋子；
当识别到用户指向镜体显示的界面中的收藏按钮或用户做出收藏手势时，将镜体当前所显示的衣服记录在本地。通过将姿势动作与某个操作匹配，当识别到用户做出某个姿势动作时，执行该姿势动作对应的操作，实现了用户直接通过肢体语言与虚拟试衣镜进行交互，方便快捷，提高用户体验感。
作为一种优选的实施方式，人体检测装置采用摄像头，通过所述人体检测装置检测镜体前是否存在用户具体为：
实时接收摄像头的录像数据并把录像数据解码成图片序列；
将图片传递给人体识别神经网络以使人体识别神经网络识别是否有人；
若否，则使人体识别神经网络继续识别；
若是，则进入衣服穿戴效果展示模式，发送指令使镜体显示3D虚拟试衣场景并实时识别摄像头的录像数据中用户的姿势动作。
利用机器学习的方式来识别人体，通过建立人体识别神经网络，对人体识别神经网络进行训练过后，使其能快速地识别出人体，方便快捷，自动化程度高。
作为一种优选的实施方式，实时识别摄像头的录像数据中用户的姿势动作具体为：
实时接收摄像头的录像数据并把录像数据解码成图片序列；
将图片传递给姿势识别网络以使姿势识别网络识别用户的姿势动作。
作为一种优选的实施方式，姿势识别网络识别用户的姿势动作的过程为：
姿势识别网络识别人体关键点并将人体关键点坐标信号发送给动作识别模块；
动作识别模块根据人体关键点坐标得出用户的肢体的轮廓并通过Kalman filter对轮廓进行平滑处理后识别用户的姿势动作。
通过对人体关键点的识别，如手关节、肩膀、胯部等关键点的位置从而来判断用户的姿势动作，进而执行姿势动作所对应的操作，在本实施例中，通过执行姿势动作相应的回调函数来实现。存储器中预先注册了挥动手臂回调函数、转动身体回调函数、更换衣服回调函数等，当识别到用户的某个姿势动作时，触发相应的回调函数。
作为一种优选的实施方式，方法还包括：
接收到模拟真人试穿效果展示指令时，获取用户的人脸图像并将用户的人脸图像融合在3D人体模特的脸部上；
将该用户收藏在衣服收藏数据库中的某一套衣服的3D模型融合在具有用户的人脸图像的3D人体模特上并向用户进行展示；
接收到更换衣服指令时，更换具有用户的人脸图像的3D人体模特身上的衣服；
接收到显示衣服的产品信息指令时，显示当前衣服的产品信息；
接收到购买请求时，生成支付代码和支付订单；
当用户支付成功后，下单完成。
该方法还可以将用户的人脸匹配到3D人体模特的脸部位置，使得用户可以更直观地看到自己穿着服装的感觉以判断服装是否适合自己。该方法具有两种实施方式，其一是通过虚拟试衣镜来实现，具体为：用户通过指定动作或者指向镜体显示界面上的模拟真人试穿按钮时，3D虚拟显示控制模块通过摄像头来获取用户的照片，然后通过神经卷积网络来对图片进行人脸分割，将用户的人脸图像分离出来，从而将用户的人脸图像融合在3D人体模特的脸部上，生成一个以用户的样貌为模型的3D人体模特，再将所需要试穿的衣服的3D模型融合在该3D人体模特身上，用户就可以看到自己身穿试穿衣服时的效果，从而决定是否购买，对于更换试穿衣服的操作，与先前衣服穿戴效果展示模式是一种的，当用户想购买时，可通过指定动作或者指向镜体显示界面上的购买按钮，3D虚拟显示控制模块则生成支付代码以及支付订单，可通过镜体显示支付二维码，用户可通过微信或者支付宝进行支付，也可以通过输入银联卡的帐号密码来进行支付；其二是通过移动终端来实现，具体为：用户可通过登录移动终端上的应用App，然后发起模拟真人试穿请求以使移动终端可从衣服收藏数据库中读取衣服数据，然后通过移动终端进行自拍，移动终端将自拍图像传输给3D虚拟显示控制模块使3D虚拟显示控制模块利用神经卷积网络来对图片进行人脸分割，将用户的人脸图像分离出来，从而将用户的人脸图像融合在3D人体模特的脸部上，生成一个以用户的样貌为模型的3D人体模特，再将所需要试穿的衣服的3D模型融合在该3D人体模特身上，从而将身穿所试衣服的3D人体模特的数据信息传输给移动终端，使得用户通过移动终端就可以看到自己身穿试穿衣服时的效果，对于更换3D人体模特身上的衣服可通过在移动终端的屏幕左右滑动从而使移动终端向3D虚拟显示控制模块发送相应的指令来实现，也可通过点击移动终端屏幕上的切换按钮从而使移动终端向3D虚拟显示控制模块发送相应的指令来实现，用户点击衣服时，可进入商品列表，显示衣服的产品信息。
作为一种优选的实施方式，方法还包括：将用户收藏在衣服收藏数据库中的商品信息上传至导购系统数据库以使导购员可通过导购系统数据库查看用户的衣服收藏列表从而提供相应的衣服给用户进行真实试穿。对于一些想要进行真实试衣的用户，可以直接到实体店告知导购员想要试衣服，导购员可根据用户的账户ID查看用户之前收藏的衣服列表，从而根据衣服列表将用户想要试穿的衣服拿给用户，减少了用户自个寻找的麻烦，由于导购员对于衣服的摆放位置比较熟悉，寻找起来，效率会高很多，节省用户的时间。
作为一种优选的实施方式，该方法还包括：当识别到用户的手指指向镜体显示的界面上的选择模特按钮时，进入3D人体模特列表以供用户更换不同性别或体型的3D人体模特。此外，当用户想要给不在身边的家人朋友购买衣服的时候，可以直接手动选择与家人朋友相近的体型的3D人体模特，可以更直观地感受到是否合适对方。
本发明还提供了一种虚拟试衣镜，包括镜体、人体检测装置和3D虚拟显示控制模块，所述3D虚拟显示控制模块包括处理器和存储器，所述处理器分别与所述存储器、所述镜体、所述人体检测装置连接，所述人体检测装置安装在所述镜体的正面，所述存储器预存有不同体型及不同性别的3D人体模特数据以及各种服装的3D模型，所述存储器存储有可执行计算机程序，所述处理器读取所述存储器的计算机程序并运行以实现上述的基于虚拟试衣镜的网购试穿戴方法。此外，在虚拟试衣镜的基础上，本发明还提供了一种基于虚拟试衣镜的网购试穿戴系统，包括：虚拟试衣镜、移动终端以及导购终端；虚拟试衣镜包括镜体、人体检测装置和3D虚拟显示控制模块，3D虚拟显示控制模块包括处理器和存储器，处理器分别与存储器、镜体、人体检测装置连接，人体检测装置安装在镜体的正面；移动终端和导购终端均可与3D虚拟显示控制模块进行通信；存储器预存有不同体型及不同性别的3D人体模特数据以及各种服装的3D模型，存储器存储有可执行计算机程序，处理器读取存储器的计算机程序并运行以实现上述的基于虚拟试衣镜的网购试穿戴方法。优选地，人体检测装置采用摄像头。
此外，本发明还提供了一种计算机可读存储介质，计算机可读存储介质存储有可执行计算机程序，计算机程序运行时可实现上述的基于虚拟试衣镜的网购试穿戴方法。
上述实施方式仅为本发明的优选实施方式，不能以此来限定本发明保护的范围，本领域的技术人员在本发明的基础上所做的任何非实质性的变化及替换均属于本发明所要求保护的范围。
Claims (12)
1.一种基于虚拟试衣镜的网购试穿戴方法，其特征在于，所述虚拟试衣镜包括镜体、人体检测装置和3D虚拟显示控制模块，所述3D虚拟显示控制模块包括处理器和存储器，所述处理器分别与所述存储器、所述镜体、所述人体检测装置连接，所述人体检测装置安装在所述镜体的正面；
所述存储器中存储有多种服装的3D模型以及不同体型的3D人体模特，所述存储器还存储有可执行计算机程序，所述处理器读取所述存储器的计算机程序并运行以实现以下方法：
通过所述人体检测装置检测所述镜体前是否存在用户；
当所述镜体前存在用户时，进入衣服穿戴效果展示模式，发送指令使所述镜体显示3D虚拟试衣场景并通过所述人体检测装置实时识别用户的姿势动作，其中，所述3D虚拟试衣场景为身穿在售衣服的3D人体模特，该3D人体模特是根据用户的体型来匹配的相应体型的3D人体模特；
执行所识别到的用户的姿势动作所对应的回调函数以实现操作指示视频展示、更换所述镜体当前显示的3D人体模特的衣物、使所述镜体当前显示的3D人体模特转动身体或将所述镜体当前显示的衣服收藏记录在本地；
接收到用户登录请求时，获取用户的帐号信息，将用户的帐号信息和用户收藏的衣服数据信息上传至衣服收藏数据库中，用户收藏的衣服数据信息与用户的帐号信息对应存储。
2.如权利要求1所述的基于虚拟试衣镜的网购试穿戴方法，其特征在于，所述执行所识别到的用户的姿势动作所对应的回调函数以实现操作指示视频展示、更换所述镜体当前显示的3D人体模特的衣物、使所述镜体当前显示的3D人体模特转动身体或将所述镜体当前显示的衣服收藏记录在本地具体为：
当识别到用户在预设时间内静止不动或指向所述镜体显示的界面中的使用帮助按钮时，发送指令使所述镜体展示操作指示视频，所述操作指示视频为使用该虚拟试衣镜的操作流程；
当识别到用户向左或向右挥动手臂时，更换所述镜体当前显示的3D人体模特的衣服；
当识别到用户转动身体时，使所述镜体当前显示的3D人体模特转动身体；
当识别到用户指向所述镜体当前显示的3D人体模特的上身、下身、头部或足部时，更换所述镜体当前显示的3D人体模特的上衣、下衣、帽子或鞋子；
当识别到用户指向所述镜体显示的界面中的收藏按钮或用户做出收藏手势时，将所述镜体当前所显示的衣服收藏记录在本地。
3.如权利要求1所述的基于虚拟试衣镜的网购试穿戴方法，其特征在于，所述人体检测装置采用摄像头，所述通过所述人体检测装置检测所述镜体前是否存在用户具体为：
实时接收所述摄像头的录像数据并把录像数据解码成图片序列；
将图片传递给人体识别神经网络以使所述人体识别神经网络识别是否有人；
若否，则使人体识别神经网络继续识别；
若是，则进入衣服穿戴效果展示模式，发送指令使所述镜体显示3D虚拟试衣场景并实时识别所述摄像头的录像数据中用户的姿势动作。
4.如权利要求3所述的基于虚拟试衣镜的网购试穿戴方法，其特征在于，所述实时识别所述摄像头的录像数据中用户的姿势动作具体为：
实时接收所述摄像头的录像数据并把录像数据解码成图片序列；
将图片传递给姿势识别网络以使所述姿势识别网络识别用户的姿势动作。
5.如权利要求4所述的基于虚拟试衣镜的网购试穿戴方法，其特征在于，所述姿势识别网络识别用户的姿势动作的过程为：
所述姿势识别网络识别人体关键点并将人体关键点坐标信号发送给动作识别模块；
所述动作识别模块根据人体关键点坐标得出用户的肢体的轮廓并通过Kalman filter对轮廓进行平滑处理后识别用户的姿势动作。
6.如权利要求5所述的基于虚拟试衣镜的网购试穿戴方法，其特征在于，所述方法还包括：
接收到模拟真人试穿效果展示指令时，获取用户的人脸图像并将用户的人脸图像融合在3D人体模特的脸部上；
将该用户收藏在衣服收藏数据库中的某一套衣服的3D模型融合在具有用户的人脸图像的3D人体模特上并向用户进行展示；
接收到更换衣服指令时，更换所述具有用户的人脸图像的3D人体模特身上的衣服；
接收到显示衣服的产品信息指令时，显示当前衣服的产品信息；
接收到购买请求时，生成支付代码和支付订单；
当用户支付成功后，下单完成。
7.如权利要求1所述的基于虚拟试衣镜的网购试穿戴方法，其特征在于，所述方法还包括：
将用户收藏在衣服收藏数据库中的商品信息上传至导购系统数据库以使导购员可通过导购系统数据库查看用户的衣服收藏列表从而提供相应的衣服给用户进行真实试穿。
8.如权利要求1所述的基于虚拟试衣镜的网购试穿戴方法，其特征在于，根据用户的体型来匹配的相应体型的3D人体模特的方式可为：检测用户的可用于确定其体型的若干个关键点，关键点包括用户的头部、脚部及肩部，根据各个关键点坐标确定用户的体型，查找存储器所存储的3D人体模特中与用户体型最接近的3D人体模特。
9.如权利要求2所述的基于虚拟试衣镜的网购试穿戴方法，其特征在于，该方法还包括：
当识别到用户的手指指向所述镜体显示的界面上的选择模特按钮时，进入3D人体模特列表以供用户更换不同性别或体型的3D人体模特。
10.一种虚拟试衣镜，其特征在于，所述虚拟试衣镜包括镜体、人体检测装置和3D虚拟显示控制模块，所述3D虚拟显示控制模块包括处理器和存储器，所述处理器分别与所述存储器、所述镜体、所述人体检测装置连接，所述人体检测装置安装在所述镜体的正面，所述存储器预存有不同体型及不同性别的3D人体模特数据以及各种服装的3D模型，所述存储器存储有可执行计算机程序，所述处理器读取所述存储器的计算机程序并运行以实现如权利要求1至9任一项所述的基于虚拟试衣镜的网购试穿戴方法。
11.一种基于虚拟试衣镜的网购试穿戴系统，其特征在于，包括：虚拟试衣镜、移动终端以及导购终端；所述虚拟试衣镜包括镜体、人体检测装置和3D虚拟显示控制模块，所述3D虚拟显示控制模块包括处理器和存储器，所述处理器分别与所述存储器、所述镜体、所述人体检测装置连接，所述人体检测装置安装在所述镜体的正面；所述移动终端和所述导购终端均可与所述3D虚拟显示控制模块进行通信；所述存储器预存有不同体型及不同性别的3D人体模特数据以及各种服装的3D模型，所述存储器存储有可执行计算机程序，所述处理器读取所述存储器的计算机程序并运行以实现如权利要求1至9任一项所述的基于虚拟试衣镜的网购试穿戴方法。
12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有可执行计算机程序，所述计算机程序运行时可实现如权利要求1至9任一项所述的基于虚拟试衣镜的网购试穿戴方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811074155.4A CN109345337A (zh) | 2018-09-14 | 2018-09-14 | 一种网购试穿戴方法、虚拟试衣镜、系统及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811074155.4A CN109345337A (zh) | 2018-09-14 | 2018-09-14 | 一种网购试穿戴方法、虚拟试衣镜、系统及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109345337A true CN109345337A (zh) | 2019-02-15 |
Family
ID=65305240
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811074155.4A Pending CN109345337A (zh) | 2018-09-14 | 2018-09-14 | 一种网购试穿戴方法、虚拟试衣镜、系统及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109345337A (zh) |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109919121A (zh) * | 2019-03-15 | 2019-06-21 | 百度在线网络技术（北京）有限公司 | 一种人体模型的投影方法、装置、电子设备及存储介质 |
| CN110084676A (zh) * | 2019-04-24 | 2019-08-02 | 深圳市观梦科技有限公司 | 一种线上商品推荐方法、网络终端和具有存储功能的装置 |
| CN110211196A (zh) * | 2019-05-28 | 2019-09-06 | 山东大学 | 一种基于姿势引导的虚拟试穿方法及装置 |
| CN110349269A (zh) * | 2019-05-21 | 2019-10-18 | 珠海随变科技有限公司 | 一种目标穿戴物试戴方法及系统 |
| CN110841094A (zh) * | 2019-11-26 | 2020-02-28 | 上海景峰制药有限公司 | 一种更衣方法、装置、更衣柜、设备和存储介质 |
| CN111787242A (zh) * | 2019-07-17 | 2020-10-16 | 北京京东尚科信息技术有限公司 | 用于虚拟试衣的方法和装置 |
| CN111784442A (zh) * | 2020-06-05 | 2020-10-16 | 陈庆奇 | 一种3d虚拟智能试衣系统 |
| CN112116430A (zh) * | 2020-09-28 | 2020-12-22 | 西安万像电子科技有限公司 | 虚拟穿戴系统及其控制方法、虚拟试衣系统和虚拟穿戴镜 |
| CN112242007A (zh) * | 2020-10-12 | 2021-01-19 | 新疆爱华盈通信息技术有限公司 | 一种虚拟试穿方法 |
| CN113038148A (zh) * | 2019-12-09 | 2021-06-25 | 上海幻电信息科技有限公司 | 商品动态演示方法、装置及存储介质 |
| CN113140044A (zh) * | 2020-01-20 | 2021-07-20 | 海信视像科技股份有限公司 | 一种虚拟穿戴物品显示的方法及智能试衣装置 |
| US11494732B2 (en) | 2020-10-30 | 2022-11-08 | International Business Machines Corporation | Need-based inventory |
| CN117289791A (zh) * | 2023-08-22 | 2023-12-26 | 杭州空介视觉科技有限公司 | 元宇宙人工智能虚拟装备数据生成方法 |
| CN117575636A (zh) * | 2023-12-19 | 2024-02-20 | 东莞莱姆森科技建材有限公司 | 一种基于视频处理的智能镜控制方法及系统 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103049852A (zh) * | 2012-12-19 | 2013-04-17 | 武汉世纪炎龙网络科技有限公司 | 虚拟试衣系统 |
| US20140168217A1 (en) * | 2012-12-14 | 2014-06-19 | Electronics And Telecommunications Research Institute | Method of fitting virtual item using human body model and system for providing fitting service of virtual item |
| CN105825407A (zh) * | 2016-03-31 | 2016-08-03 | 上海晋荣智能科技有限公司 | 虚拟试衣镜系统 |
| CN205507877U (zh) * | 2015-11-16 | 2016-08-24 | 长春理工大学 | 一种可用于网购的三维实时动态的虚拟试衣装置 |
| CN106097442A (zh) * | 2016-08-24 | 2016-11-09 | 广东华邦云计算股份有限公司 | 一种智能仿真试衣系统及其应用方法 |
| CN106887035A (zh) * | 2017-01-12 | 2017-06-23 | 深圳市衣梦科技有限公司 | 一种智能试衣装置 |
-
2018
- 2018-09-14 CN CN201811074155.4A patent/CN109345337A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140168217A1 (en) * | 2012-12-14 | 2014-06-19 | Electronics And Telecommunications Research Institute | Method of fitting virtual item using human body model and system for providing fitting service of virtual item |
| CN103049852A (zh) * | 2012-12-19 | 2013-04-17 | 武汉世纪炎龙网络科技有限公司 | 虚拟试衣系统 |
| CN205507877U (zh) * | 2015-11-16 | 2016-08-24 | 长春理工大学 | 一种可用于网购的三维实时动态的虚拟试衣装置 |
| CN105825407A (zh) * | 2016-03-31 | 2016-08-03 | 上海晋荣智能科技有限公司 | 虚拟试衣镜系统 |
| CN106097442A (zh) * | 2016-08-24 | 2016-11-09 | 广东华邦云计算股份有限公司 | 一种智能仿真试衣系统及其应用方法 |
| CN106887035A (zh) * | 2017-01-12 | 2017-06-23 | 深圳市衣梦科技有限公司 | 一种智能试衣装置 |
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109919121A (zh) * | 2019-03-15 | 2019-06-21 | 百度在线网络技术（北京）有限公司 | 一种人体模型的投影方法、装置、电子设备及存储介质 |
| CN110084676A (zh) * | 2019-04-24 | 2019-08-02 | 深圳市观梦科技有限公司 | 一种线上商品推荐方法、网络终端和具有存储功能的装置 |
| CN110349269A (zh) * | 2019-05-21 | 2019-10-18 | 珠海随变科技有限公司 | 一种目标穿戴物试戴方法及系统 |
| CN110211196A (zh) * | 2019-05-28 | 2019-09-06 | 山东大学 | 一种基于姿势引导的虚拟试穿方法及装置 |
| CN111787242A (zh) * | 2019-07-17 | 2020-10-16 | 北京京东尚科信息技术有限公司 | 用于虚拟试衣的方法和装置 |
| CN110841094A (zh) * | 2019-11-26 | 2020-02-28 | 上海景峰制药有限公司 | 一种更衣方法、装置、更衣柜、设备和存储介质 |
| CN113038148A (zh) * | 2019-12-09 | 2021-06-25 | 上海幻电信息科技有限公司 | 商品动态演示方法、装置及存储介质 |
| CN113140044A (zh) * | 2020-01-20 | 2021-07-20 | 海信视像科技股份有限公司 | 一种虚拟穿戴物品显示的方法及智能试衣装置 |
| CN111784442A (zh) * | 2020-06-05 | 2020-10-16 | 陈庆奇 | 一种3d虚拟智能试衣系统 |
| CN112116430A (zh) * | 2020-09-28 | 2020-12-22 | 西安万像电子科技有限公司 | 虚拟穿戴系统及其控制方法、虚拟试衣系统和虚拟穿戴镜 |
| CN112242007A (zh) * | 2020-10-12 | 2021-01-19 | 新疆爱华盈通信息技术有限公司 | 一种虚拟试穿方法 |
| US11494732B2 (en) | 2020-10-30 | 2022-11-08 | International Business Machines Corporation | Need-based inventory |
| CN117289791A (zh) * | 2023-08-22 | 2023-12-26 | 杭州空介视觉科技有限公司 | 元宇宙人工智能虚拟装备数据生成方法 |
| CN117575636A (zh) * | 2023-12-19 | 2024-02-20 | 东莞莱姆森科技建材有限公司 | 一种基于视频处理的智能镜控制方法及系统 |
| CN117575636B (zh) * | 2023-12-19 | 2024-05-24 | 东莞莱姆森科技建材有限公司 | 一种基于视频处理的智能镜控制方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109345337A (zh) | 一种网购试穿戴方法、虚拟试衣镜、系统及存储介质 | |
| US11403829B2 (en) | Object preview in a mixed reality environment | |
| JP7196885B2 (ja) | 検索システム、検索方法、及びプログラム | |
| KR102425462B1 (ko) | 패션 선호도 분석 기법 | |
| CN103428571B (zh) | 智能的电视购物系统和方法 | |
| CN111681070B (zh) | 线上商品的购买方法、购买装置、存储装置及购买设备 | |
| US20100265311A1 (en) | Apparatus, systems, and methods for a smart fixture | |
| KR101620938B1 (ko) | 의류 제품 판매 지원 장치와 이와 통신 가능한 의류 제품 정보 관리 서버, 의류 연관 제품 추천 서버 및 의류 제품 정보 제공 방법 | |
| JPWO2006085385A1 (ja) | 販売支援装置 | |
| WO2020239251A1 (en) | Methods and systems for determining body measurements and providing clothing size recommendations | |
| CN108596730A (zh) | 服饰信息的处理方法、装置及智能设备 | |
| US9990665B1 (en) | Interfaces for item search | |
| US11978105B2 (en) | System, method, and apparatus for processing clothing item information for try-on | |
| CN110443637A (zh) | 用户购物行为分析方法、装置及存储介质 | |
| WO2019192415A1 (zh) | 试衣间以及门店系统 | |
| KR20200079721A (ko) | 스마트 의류 관리 시스템 및 그 방법 | |
| KR20230143588A (ko) | 3d 아바타 이미지의 가상 착용 상태 제공 소프트웨어 어플리케이션 | |
| KR101974573B1 (ko) | 온/오프라인 쇼핑몰 시스템 | |
| US20200226668A1 (en) | Shopping system with virtual reality technology | |
| KR20190070452A (ko) | 증강현실 의류 쇼핑을 위한 웨어러블 글래스 및 증강현실 의류 쇼핑 방법 | |
| KR102065561B1 (ko) | 온/오프라인 쇼핑몰 시스템 | |
| KR20140015709A (ko) | 이미지 매칭 시스템 및 방법 | |
| CN109345731A (zh) | 一种基于电子购物墙的网络购物方法、系统及存储介质 | |
| US20220414755A1 (en) | Method, device, and system for providing fashion information | |
| CN114339434A (zh) | 货品试穿效果的展示方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20190215 |
|
| WD01 | Invention patent application deemed withdrawn after publication |