CN104616190A - 基于互联网和移动互联网的多终端3d体感购物方法及系统 - Google Patents

Abstract

本发明涉及一种基于互联网和移动互联网的多终端3D体感购物方法及系统，其通过用户凌空操控3D交互浏览或试穿试戴各种物件，体验满意后直接进行购买。本发明实现多屏幕联合体验购物，以体感技术和视频图像处理技术相结合，使各种商品的3D物件模型或3D场景与人体在三维虚拟空间产生互动，并将互动视频图像直观地显示在交互的显示屏上。消费者可以随时随地进行凌空操控3D交互浏览或试穿试戴不同的虚拟物件，人与商品在三维空间产生虚拟交互，提升用户购物的真实体验感，增强购物的乐趣，减少网购中的退换货率。

Description

基于互联网和移动互联网的多终端 3D 体感购物方法及系统

技术领域

本发明涉及应用计算机、体感和互联网的综合技术领域，更具体地，涉及一种基于互联网和移动互联网的多终端3D体感购物方法及系统。

背景技术

随着全球化信息技术的发展，未来将是一个以互联网和知识经济为核心的信息时代，人们的生活方式趋于网络化、智能化，购物方式由以前单一的现场购物逐渐转变为线下（实体）体验，线上（网络）购物相结合，购买一些生活用品不用再跑到商场或超市逐一挑选，通过电脑或智能移动设备终端上登录购物网站即可选择自己中意的商品，并可实现短时间的送货上门，用户足不出户即可完成购物，确实，现有的网络购物为人们的生活增加了很多便利性。但是现有购物系统也存在不少缺点：

一、购物网站数量众多，各个网站的操作界面千差万别，用户很难寻找到自己需求商品的界面，且对于一些年纪偏大或偏小的用户更加无法很好地使用这些购物网站，从而也就使得这些人群不得不回到传统的现场购物时代。

二、对于服装类的商品，由于缺乏亲身试穿、品种搭配等特性，试衣效果方式不理想；虽然近年来逐渐兴起虚拟试衣系统，但现存的方案或者平面效果，没有3D (Three Dimensions，三维 )效果，或者不能根据用户自身的体型尺寸试穿，无法判断是否合身，或者缺乏品种多样、细节丰富的服装模型，试穿效果都不甚理想。

三、不能以视频方式将可穿戴商品虚拟试穿试戴在购物者身上或虚拟拿在手上，也不能以3D效果展示商品信息和环境三维信息，导致退换货率一直居高不下。

四、目前的网络购物行为基本上是由卖家用户通过客户端发布网络商品信息，再由买家用户通过客户端浏览和购买网络商品。但是这样的网络购物方式显然比较被动，网络商品的流动性较缓慢，对于卖家用户来说，无法尽快出售网络商品，从而回笼现金流，以便于周转；对于买家用户来说，无法进一步获取更多商品信息或优惠信息。

五、现有购物终端不能实现多屏联合，更不能通过电视终端实现3D体感购物。

发明内容

本发明旨在至少在一定程度上解决上述技术问题之一。

本发明首要目的是提供一种能够凌空操控3D交互浏览或试穿试戴各种物件的基于互联网和移动互联网的多终端3D体感购物方法。

本发明进一步的目的是提供一种基于互联网和移动互联网的多终端3D体感购物系统。

为解决上述技术问题，本发明第一方面的技术方案如下：

本发明提供一种基于互联网和移动互联网的多终端3D体感购物方法,其包括如下步骤：

S1.通过用户购物终端凌空操控3D交互浏览或试穿试戴各种物件，所述物件为预存于存储装置的各种商品的3D物件模型；

S2.用户购物终端发出购物指令通过互联网或移动互联网发送到云服务端；

S3.云服务端将接收到的购物指令数据进行分析比对，得出购物结果信息，并根据结果信息发送购物需求信息至相对应的商户数据端；

S5.商户数据端将包括支付信息、地址信息的订单信息经云服务端传输到用户购物终端；

S6.用户购物终端完成支付，商家根据接收到的地址信息进行商品的配送。

进一步的，上述基于互联网和移动互联网的多终端3D体感购物方法中，凌空操控3D交互浏览物件时，所述S1具体包括：

s10.用户位于用户购物终端屏幕前能感应到的位置上；

s11.体感设备装置扫描用户人体骨骼数据；

s12.用户通过肢体动作进行凌空操控3D交互浏览物件。

更进一步的，上述的基于互联网和移动互联网的多终端3D体感购物方法中，所述体感设备装置通过扑捉人体深度图像和识别人脸特征以获取人体主要骨骼点的位置，通过算法计算人体整个骨骼点的旋转，从而不断跟踪人体的整个活动、动作指令和确认用户身份。

进一步的，上述基于互联网和移动互联网的多终端3D体感购物方法中，凌空操控3D试穿试戴物件包括真人试穿试戴和3D人体模型试穿试戴，所述S1具体包括：

s13.用户位于用户购物终端屏幕前能感应到的位置上；

s14.摄像机采集用户视频图像及实景图像；同时，体感设备装置扫描用户人体身材三维数据，并在一定时间内生成3D人体模型；

s15.用户通过凌空操控3D物件模型，将物件试穿试戴在身上。

更进一步的，上述基于互联网和移动互联网的多终端3D体感购物方法中，所述体感设备装置扫描用户人体身材三维数据，通过点云算法建构3D人体模型，试穿试戴时，3D人体模型与3D物件模型进行自动匹配，从而实现3D人体模型完美试穿试戴。

进一步的，上述基于互联网或移动互联网的体感购物方法中，用户通过凌空操控选择或切换真人试穿试戴或3D人体模型试穿试戴，当进行3D人体模型试穿试戴时，用户首次在用户购物终端屏幕前会有一个等待3D人体模型构建的时间。

进一步的，上述基于互联网或移动互联网的体感购物方法中，当设备扫描检测到用户人体身材三维数据与预存的3D人体模型不一致时，会重新提示生成3D人体模型及保存。

进一步的，上述基于互联网和移动互联网的多终端3D体感购物方法，其特征在于，所述S1之前包括：

S01.用户采用凌空操控或语音口令启动或关闭语音导航功能，通过语音发送关键词，商户数据端根据所述的关键词将对应的商品信息通过云服务端传输到用户购物终端，其中关键词可以包括关注度、价格、品牌、种类等等中的一种或多种。比如用户语音说出1000元的裙子、海尔电冰箱等。

进一步的，上述基于互联网或移动互联网的体感购物方法中，所述S1之前包括：

S02.商户数据端将商品的更新信息通过云服务端传输到用户购物终端，所述更新信息包括商品打折促销信息；或者，

S03.商户数据端根据用户购物终端的浏览行为判定该用户的喜好，并根据所述的喜好从对应类别的商品中随机选择或选择热度最高的商品的信息通过云服务端传输到用户购物终端。

另一方面，本发明还提供一种基于互联网和移动互联网的多终端3D体感购物系统,其包括：

用户购物终端，用户通过该终端进行凌空操控3D交互浏览或试穿试戴各种3D物件；

商户数据端，用于创建、管理各种3D商品模型和3D服饰模型；

云服务端，为用户购物终端和商户数据端存贮数据以及处理业务。

进一步的，所述用户购物终端为设于公共场所的广告终端或个人移动终端或计算机终端或家用的电视终端。比如台式电脑、笔记本电脑、平板电脑、手机、pda、机顶盒或智能电视终端等。

与现有技术相比，本发明技术方案的有益效果是：

本发明以体感技术和视频图像处理技术相结合，使各种商品的3D物件模型或3D场景与人体在三维虚拟空间产生互动，并将互动视频图像直观地显示在互动交互的显示屏上。让人与商品在三维空间产生虚拟互动，提升用户购物的真实体验感，增强购物的乐趣，减少网购中的退换货率。用户可以随时对满意商品进行网上支付购买。

本发明实现多终端联合购物，特别是包括家庭用的智能电视终端，这样，家庭成员一家老少都能够参与到该3D购物系统，并可以及时更新各成员的3D人体模型，使所购服饰更加精准合适，享受足不出户的购物新体验。

本发明提供各种品牌商品的3D物件模型，用户可以在线交互浏览、试穿试戴，包括虚拟3D服装模型、饰品等等，由用户进行任意搭配，本发明作为一种高效销售渠道的同时，也可起到一定程度的宣传、广告作用。

本发明提供各种3D物件模型，比如可以为每一款服装制作3D服装模型， 可以体现服装的面料、弹性、伸展感，并且可根据尺码按比例改变模型大小，消费者足不出户就可买到品种多样的商品。

使用本发明购物系统，用户可调用商品的3D物件模型或3D场景进行互动展示，在互动显示屏上显示效果，利用体感控制器及视频摄像装置，根据用户身材高矮、大小调节商品的3D物件模型或3D场景，使商品的3D物件模型或3D场景与用户视频图像协同匹配，用户可前后、左右或任意角度观看物件或场景展示效果，并且还可通过手势等肢体动作，以互动显示屏为操作界面选择商品的3D物件模型或3D场景展示。当没有用户使用系统设备时，互动显示屏可播放商户广告。

附图说明

图1是本发明体感购物系统的结构拓扑示意图。

图2是本发明体感购物方法中凌空操控3D交互浏览物件的流程图。

图3是本发明体感购物方法中凌空操控3D试穿试戴物件的流程图。

附图仅用于示例性说明，不能理解为对本发明的限制；为了更好说明实施例，附图某些部件会有省略、放大或缩小，并不代表实际产品的尺寸。

对于本领域技术人员来说，附图中某些公知结构及其说明可能省略是可以理解的。

具体实施方式

下面结合附图和具体实施例，对本发明做进一步详细说明。

本实施例公开提供一种基于互联网和移动互联网的多终端3D体感购物方法,其包括如下步骤：

S1.通过用户购物终端凌空操控3D交互浏览或试穿试戴各种物件，所述物件为预存于存储装置的各种商品的3D物件模型；

S2.用户购物终端发出购物通过互联网或移动互联网发送到云服务端；

S3.云服务端将接收到的购物指令数据进行分析比对，得出购物结果信息，并根据结果信息发送购物需求信息至相对应的商户数据端；

S5.商户数据端将包括支付信息、地址信息的订单信息经云服务端传输到用户购物终端；

S6.用户购物终端完成支付，商家根据接收到的地址信息进行商品的配送。

各种商品的3D物件模型包括衣服、包包、首饰、帽子、化妆美容、发型发式、鞋子，眼镜等物件三维物件模型以及其它的商品。

用户可以在线凌空操控3D交互浏览各种商品，例如好像将一个杯子拿在手上，并且可以任意旋转；用户可以试穿试戴各种服饰，包括虚拟3D服装模型、饰品等等，由用户进行任意搭配，满意了就下单，购物非常简便，适合所有人群。

如图2所示，当用户需要浏览感兴趣的商品时，本发明可以实现凌空操控3D交互浏览，具体包括：

首先，用户位于用户购物终端屏幕前能感应到的位置上；

接着，体感设备装置扫描用户人体骨骼数据；该体感设备装置采用红外体感控制器，其通过扑捉人体深度图像和识别人脸特征以获取人体主要骨骼点的位置，通过算法计算人体整个骨骼点的旋转，从而不断跟踪人体的整个活动、动作指令和确认用户身份。从而实现用户通过肢体动作可以进行凌空操控3D交互浏览各种物件，比如将一个杯子拿在手上可以任意角度观察。

如图3所示，当用户想要购买服饰时，本发明可以实现凌空操控3D试穿试戴各种服饰，而且还可以选择真人试穿试戴或3D人体模型试穿试戴，具体包括：

首先，用户位于用户购物终端屏幕前能感应到的位置上；

其次，摄像机采集用户视频图像及实景图像；

接着，体感设备装置扫描用户人体身材三维骨骼数据，该体感设备装置采用红外体感控制器，扫描用户人体身材三维骨骼数据，此时，用户可以通过凌空操控3D物件模型，将物件试穿试戴在真人身上。

假如用户首次在用户购物终端屏幕前停留一定时间，系统会通过点云算法自动生成该用户的3D人体模型并保存在存储装置中，构建好3D人体模型后，用户就可以通过凌空操控选择或切换真人试穿试戴或3D人体模型试穿试戴，当进行3D人体模型试穿试戴时，3D人体模型与3D物件模型自动进行匹配，用户采用凌空操控3D物件模型，将可以将物件完美试穿试戴在3D人体模型上。

具体涉及到3D人体模型试穿试戴的几个解决方案如下：

（1）2D RGB人体影像与3D服饰模型进行实时跟踪和匹配。3D服饰模型可以是预先制作好的模型库和通过程序算法动态创建模型两个方式结合，然后根据体感设备装置扫描到的人体身材三维骨​骼数据再对3D服饰模型进行动态变形实现。

(2）通过体感设备装置，扫描人体身材三维数据，通过点云算法，重建完全的3D人体模型，通过3D人体模型与3D服饰模型自动进行匹配，实现3D人体模型虚拟试穿戴服饰。3D服饰模型可以是预先制作好的模型库和通过程序算法动态创建模型两个方式结合，然后根据体感设备扫描的人体身材三维骨​骼数据再对3D服饰模型进行动态变形实现。

(3)通过体感设备装置,实时扫描人体身材三维骨​骼数据，通过点云三维重建部分3D人体模型，并且模型是实时渲染，然后与3D服饰模型自动进行匹配，实现3D人体模型虚拟试穿试戴服饰。3D服饰模型可以是预先制作好的模型库和通过程序算法动态创建模型两个方式结合，然后根据体感设备装置扫描的人体身材三维骨​骼数据再对3D服饰模型进行动态变形实现。

另外，当用户实时人体身材三维数据与预存的3D人体模型不一致时，系统还能够提醒用户，并重新生成3D人体模型及保存。

本发明基于互联网或移动互联网的体感购物方法中，用户采用凌空操控或语音口令启动或关闭语音导航功能，通过语音发送关键词，商户数据端根据所述的关键词将对应的商品信息通过云服务端传输到用户购物终端，其中关键词可以包括关注度、价格、品牌、种类等等中的一种或多种。比如用户语音说出1000元的裙子、海尔电冰箱等，互动屏幕就会显示用户所需要的商品，接着用户可以凌空操控3D交互浏览或试穿试戴所需的商品，使得购物非常简便。

另外，为提高网络商品的流动性，商户数据端可以自动发送商品信息到用户购物终端，比如，商品的更新信息、商品打折促销信息或者根据用户的喜好从对应类别的商品中随机选择或选择热度最高的商品的信息。这样，对于商家用户来说，能够出售网络商品，从而回笼现金流，便于周转；对于买家用户来说，能够进一步获取更多商品信息或优惠信息，享受产品的更多折扣。

图1为本发明基于互联网和移动互联网的多终端3D体感购物系统的结构拓扑示意图,其包括：

用户购物终端，用户通过该终端进行凌空操控3D交互浏览或试穿试戴各种3D物件；

商户数据端，用于创建、管理各种3D商品模型和3D服饰模型；

云服务端，为用户购物终端和商户数据端存贮数据以及处理业务。

其中，用户购物终端支持多终端设备，设于公共场所的广告终端或个人移动终端或计算机终端或家用的电视终端，包括台式电脑，笔记本电脑，平板电脑，手机，PDA，机顶盒，智能电视等终端设备。

本发明通过体感购物，可以随时随地进行，比如在家庭的电视机搭配一个体感设备装置，家庭成员就可以实现在家里进行在线3D交互浏览各种商品或者进行真人试穿试戴或3D人体模型试穿试戴各种服饰。

当某个家庭成员在挑选到合适的物品后，可以加入购物车，然后结算成二维码，移动终端通过扫描二维码，直接支付，并完成配送的环节。

另外，本发明系统也会自动识别上一次成员在另外的终端设备所试穿试戴的服饰，如果有打折或者促销、降价等情况，会在现有的终端显示设备进行提示。

企业用户通过商户数据端，创建、管理3D商品模型和3D服饰模型以及所有服饰分类信息、介绍信息、规格参数、库存参数等，其能够快速制作3D服饰模型，通过拍摄多张不同角度的服饰图片，放置入后台软件进行标记定位后，软件通过算法可以把多张不同角度图片自动融合生成为三维模型，这样能快速解决后期服饰制作成本的难题。

商户数据端快速建立3D服饰模型后上传到云服务端处理以及存储。企业用户通过商户数据端，实现更新服饰数据，处理购物订单，退货，退款等功能。

云服务端负责为用户购物终端和商户数据端存储数据以及处理业务。支持大数据的并发访问和处理，并能处理用户客户端以及企业用户数据端发出的对云服务端任务的请求服务，并在云服务端处理这些任务后，把计算处理后的任务结果返回给用户购物终端和商户数据端。

使用本发明基于互联网和移动互联网的多终端3D体感购物系统，使用者不仅能够通过虚拟现实系统感受到在客观物理世界中所经历的“身临其境”的逼真性 ,而且能够突破空间、时间以及其它客观限制，感受到在真实世界中无法亲身经历的体验，且本发明的3D体感购物系统本着以消费者体验为上，当用户在该3D体感购物系统前随意的动作，例如弯腰、转身、下蹲，显示屏内的虚拟物件也随着人体的动作而动作，这依赖于实景人体图像的具体位置与人体深度骨骼图的绑定动作，使消费者得到全新的体验。

综上，本发明3D体感购物系统是时尚与科技的完美结合，整合2D图像处理追踪技术、3D技术、AR（Augmented Reality ）增强现实技术、人脸识别技术、体感技术等创新科技；是集形象搭配、互动分享、广告展示、购物、数据监测和支付等功能于一体的智能自助购物平台；是整合了云处理与设置在公共场所屏幕、移动终端显示屏，PC的显示屏，以及家庭客厅的电视屏四大屏幕，实现智能购物。电商平台可以将该系统设置于中高端生活社区、商务写字楼、大学校园、便利店等贴近消费者的公众场所，消费者可以随时随地进行凌空操控3D交互浏览或试穿试戴不同的虚拟物品，通过体验满意后再下单购买。

显然，本发明的上述实施例仅仅是为清楚地说明本发明所作的举例，而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说，在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明权利要求的保护范围之内。

Claims (11)

1.一种基于互联网和移动互联网的多终端3D体感购物方法,其特征在于，包括如下步骤：

S1.通过用户购物终端凌空操控3D交互浏览或试穿试戴各种物件，所述物件为预存于存储装置的各种商品的3D物件模型；

S2.用户购物终端发出购物指令通过互联网或移动互联网发送到云服务端；

S3.云服务端将接收到的购物指令数据进行分析比对，得出购物结果信息，并根据结果信息发送购物需求信息至相对应的商户数据端；

S5.商户数据端将包括支付信息、地址信息的订单信息经云服务端传输到用户购物终端；

S6.用户购物终端完成支付，商家根据接收到的地址信息进行商品的配送。

2.根据权利要求1所述的基于互联网和移动互联网的多终端3D体感购物方法，其特征在于，凌空操控3D交互浏览物件时，所述S1具体包括：

s10.用户位于用户购物终端屏幕前能感应到的位置上；

s11.体感设备装置扫描用户人体骨骼数据；

s12.用户通过肢体动作进行凌空操控3D交互浏览物件。

3.根据权利要求2所述的基于互联网和移动互联网的多终端3D体感购物方法，其特征在于，所述体感设备装置通过扑捉人体深度图像和识别人脸特征以获取人体主要骨骼点的位置和人脸识别标识，通过算法计算人体整个骨骼点的旋转，从而不断跟踪人体的整个活动、动作指令和确认用户身份。

4.根据权利要求1所述的基于互联网和移动互联网的多终端3D体感购物方法，其特征在于，凌空3D试穿试戴物件包括真人试穿试戴和3D人体模型试穿试戴，所述S1具体包括：

s13.用户位于用户购物终端屏幕前能感应到的位置上；

s14.摄像机采集用户视频图像及实景图像；同时，体感设备装置扫描用户人体身材三维数据，并在一定时间内生成3D人体模型及保存；

s15.用户通过凌空动作操控3D物件模型，将物件试穿试戴在身上。

5. 根据权利要求4所述的基于互联网和移动互联网的多终端3D体感购物方法，其特征在于，所述体感设备装置扫描用户人体身材三维数据，通过点云算法构建3D人体模型，试穿试戴时，3D人体模型与3D物件模型进行自动匹配，从而实现3D人体模型的完美试穿试戴。

6.根据权利要求4所述的基于互联网和移动互联网的多终端3D体感购物方法，其特征在于，用户通过凌空操控选择或切换真人试穿试戴或3D人体模型试穿试戴，当进行3D人体模型试穿试戴时，用户首次在用户购物终端屏幕前会有一个等待3D人体模型构建的时间。

7.根据权利要求5所述的基于互联网和移动互联网的多终端3D体感购物方法，其特征在于，当设备扫描检测到用户人体身材三维数据与预存的3D人体模型不一致时，会重新提示生成3D人体模型及保存。

8.根据权利要求1至6任一项所述的基于互联网和移动互联网的多终端3D体感购物方法，其特征在于，所述S1之前包括：

S01.用户采用凌空操控或语音口令启动或关闭语音导航功能，通过语音发送关键词，商户数据端根据所述的关键词将对应的商品信息通过云服务端传输到用户购物终端。

9.根据权利要求1至6任一项所述的基于互联网和移动互联网的多终端3D体感购物方法，其特征在于，所述S1之前包括：

S02.商户数据端将商品的更新信息通过云服务端传输到用户购物终端，所述更新信息包括商品打折促销信息；或者，

S03.商户数据端根据用户购物终端的浏览行为判定该用户的喜好，并根据所述的喜好从对应类别的商品中随机选择或选择热度最高的商品的信息通过云服务端传输到用户购物终端。

10.一种基于互联网和移动互联网的多终端3D体感购物系统,其特征在于，包括：

用户购物终端，用户通过该终端进行凌空操控3D交互浏览或试穿试戴各种3D物件；

商户数据端，用于创建、管理各种3D商品模型和3D服饰模型；

云服务端，为用户购物终端和商户数据端存贮数据以及处理业务。

11.根据权利要求9所述的基于互联网和移动互联网的多终端3D体感购物系统，其特征在于，所述用户购物终端为设于公共场所的广告终端或个人移动终端或计算机终端或家用的电视终端。