CN105528056A - 一种智能体验购物装置及体验方法 - Google Patents

Abstract

本发明涉及一种智能体验购物装置及体验方法。该智能体验购物装置，包括显示设备和人体感应智能设备，所述人体感应智能设备集合有中枢处理器、视频影像采集器、存储器、人体实时动作识别器，所述视频影像采集器、存储器、人体实时动作识别器分别与中枢处理器逻辑连接；中枢处理器与显示设备进行信息交互，存储器储存有三维物件模型，通过成像处理器和人体骨骼跟踪处理器处理后，把人体的身形转换为人体深度骨络图，并识别人体的实时动作，通过人体肢体动作就能够操控该智能体验购物装置，无需直接接触，其通过人体凌空肢体动作操作就可以把虚拟物件精准地试穿试戴到人体的精确位置，且三维物件模型能随着人体肢体而摆动，达到最佳试穿试戴效果。

Description

一种智能体验购物装置及体验方法

技术领域

本发明涉及交互操作技术领域，更具体地，涉及一种智能体验购物装置及体验方法。

背景技术

传统购买服饰是在服饰实体店里，购买者通常在服饰店里的试衣镜试穿戴以审视评估实际效果，随着服饰行业的迅猛发展，各式各样的服饰让人眼花缭乱，款式繁多让人难以取舍，好在随着电子商务的兴起，人们可以享受更多的智能服务。比如中国专利ZL200920051812.3公开一种“智能试衣镜”，其包括一镜面,镜面的背面设有光反射层,镜面上设有智能显示屏和信号收发装置,信号收发装置与智能显示屏电性连接。光反射层设有配合智能显示屏的镂空窗口。这样，顾客可以从试衣镜中审视试衣效果，同时观看智能显示播放的产品信息。但是这种试衣镜的功能还是比较有限的，不能实现与顾客的互动，试衣者只能被动观看，不能实现良好的试戴效果。

纵观消费者在网购购物的体验，从早期只能看看图片和文字介绍，只是单方面的传达信息，没有办法实现互动的操作，更没有办法实现自身的虚拟试穿试戴的体验，后来，出现了一些体验机，其增加了可以进行互动的触摸屏，但是触摸屏用久了会发热，而且触摸屏需要人们近距离的操作，大尺寸的屏幕会看得比较辛苦，眼睛近距离会很容易累，而且离屏幕近，辐射比较厉害，甚至屏幕用久了会很容易脏，有细菌等情况，不利于人的身体健康，也不能让消费者能够得到更快速轻松的互动体验；到目前通过普通摄像头结合图片能让消费者有了一个虚拟体验购物，但基本上都是二维图片，其效果生硬，失真，就算有一些产品声称是三维做的虚拟体验购物系统，但其三维物件模型的效果差，从而无法实现良好的虚拟体验。

发明内容

本发明旨在至少在一定程度上解决上述技术问题。

本发明首要目的是提供一种能够呈现出来真人试穿试戴三维虚拟物件的智能体验购物装置。

本发明进一步的目的是提供一种应用上述智能体验购物装置的体验方法。

为解决上述技术问题，本发明第一方面的技术方案如下：

本发明为一种智能体验购物装置，包括显示设备、与显示设备连接的人体感应智能设备，所述人体感应智能设备集合有中枢处理器、视频影像采集器、存储器、人体实时动作识别器，所述视频影像采集器、存储器、人体实时动作识别器分别与中枢处理器逻辑连接；所述中枢处理器与显示设备进行信息交互，存储器储存有三维物件模型。

所述人体感应智能设备为盒体结构，其前端设有旋转部件，该旋转部件根据安装高度在上下30度至38度之间可调节感应人体的朝向。该人体感应智能设备为集成一体化，可在比较宽的范围内捕抓人体的动作，应用范围广。

所述人体实时动作识别器包括红外发射器、CMOS红外接收器、成像处理器和人体骨骼跟踪处理器，所述红外发射器、CMOS红外接收器均通过成像处理器与人体骨骼跟踪处理器连接，所述人体骨骼跟踪处理器与中枢处理器连接。

所述显示设备为多媒体显示设备或者至少有一个显示器。

另一方面，根据上述智能体验购物装置的体验方法，其包括如下步骤：

S1.视频影像采集器获取实景影像；

S2.人体实时动作识别器根据人体的动作获取人体的三维数据，中枢处理器根据人体实时动作所选择的三维物件，调取存储于存储器的三维物件模型与人体的三维数据对接；

S3.中枢处理器控制三维物件模型与实景中的人体结合形成的试戴影像在显示设备显示。

进一步的，步骤S2包括：

S21.红外发射器发出红外线发射到有实景的场景中；

S22.CMOS红外接收器接收红外信息，通过成像处理器和人体骨骼跟踪处理器分析区分出人体的信息和场景的信息，标定出人体位置和人体深度骨骼图，并一直实时跟踪人体的肢体动作和位置移动；

S23.将三维物件模型与标定出来的人体深度骨骼图进行精确对接，判断三维物件模型要叠加到实景人体图像的具体位置并进行与人体深度骨骼图的绑定动作。

进一步的，在步骤S23之前是使用三维制作软件制作好物件模型，然后编写程序把制作好的三维物件模型导入到软件中，通过软件中的三维引擎驱动三模物件模型。

所述三维物件模型包括衣服、包包、首饰、帽子、化妆美容、发型发式、鞋子，眼镜等物件。

更进一步的，为了使显示设备更好的捕捉人体深度骨骼图，人体位置与显示设备的距离为0.6M-5M。

与现有技术相比，本发明技术方案的有益效果是：

本发明智能体验购物装置能精准识别人体的位置，通过成像处理器和人体骨骼跟踪处理器处理后，把人体的身形转换为人体深度骨络图，并识别人体的实时动作，通过人体肢体动作就能够操作该智能体验购物装置，无需直接接触，其通过人体凌空肢体动作操作就可以把虚拟物件精准地试穿试戴到人体的精确位置，当购物者选中显示设备里的三维物件模型后，虚拟物件精准地试穿试戴到人体的精确位置，并随着人体的运动，虚拟物件也能随着人体的运动而运动；本发明使用了全新的体感识别技术，结合增强现实技术，更好的解决虚拟体验购物过程中的效果；本发明三维制作的物件真实逼真，并会随着人体骨络的动作而动作，会与人体产生真实的物理碰撞反应，与人体动作进行互动，达到良好的试穿试戴效果，增强购物系统的体验效果。

附图说明

图1是本发明智能体验购物装置的系统框图。

图2是本发明人体实时动作识别器结构示意图。

图中，人体感应智能设备1，中枢处理器11、视频影像采集器12、存储器13、人体实时动作识别器14红外发射器141、CMOS红外接收器142、成像处理器143和人体骨骼跟踪处理器144，显示设备2。

附图仅用于示例性说明，不能理解为对本发明的限制；为了更好说明实施例，附图某些部件会有省略、放大或缩小，并不代表实际产品的尺寸。

对于本领域技术人员来说，附图中某些公知结构及其说明可能省略是可以理解的。

在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以是通过中间媒介间接连接，可以说两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明的具体含义。

具体实施方式

下面结合附图和具体实施例，对本发明做进一步详细说明。

如图1，本发明公开一种智能体验购物装置，其包括显示设备2、与显示设备连接的人体感应智能设备1，该人体感应智能设备1集合有中枢处理器11、视频影像采集器12、存储器13、人体实时动作识别器14，其中，视频影像采集器12、存储器13、人体实时动作识别器14分别与中枢处理器11逻辑连接；而中枢处理器11与显示设备2进行信息交互，存储器13储存有包括衣服、包包、首饰、帽子、化妆美容、发型发式、鞋子，眼镜等物件三维物件模型。

具体的，人体感应智能设备1为盒体结构，其前端设有旋转部件，该旋转部件根据安装高度在上下30度至38度之间可调节感应人体的朝向。该人体感应智能设备1为集成一体化，设备体积小，可在比较宽的范围内捕抓人体的动作，应用范围广，且由于旋转部件是根据安装高度，设置在上下30度至38度之间，这样的角度适合一般人的身高，个子高的可以距离显示设备远一些，个子矮的可以距离显示设备近一些，使红外线设备能扫描到人的全身，从而使所选的虚拟物件更加的匹配人的身材，一般人与显示设备的距离为0.6M-5M之间。

图2显示，人体感应智能设备1内的人体实时动作识别器14包括红外发射器141、CMOS红外接收器142、成像处理器143和人体骨骼跟踪处理器144，其中，红外发射器141、CMOS红外接收器142均通过成像处理器143与人体骨骼跟踪处理器144连接，人体骨骼跟踪处理器144与中枢处理器11连接。

另一方面，本发明还公开一种根据上述智能体验购物装置的体验方法，其包括如下步骤：

步骤1.视频影像采集器获取实景影像；

步骤2.人体实时动作识别器根据人体的动作获取人体的三维数据，中枢处理器根据人体实时动作所选择的三维物件，调取存储于存储器的三维物件模型与人体的三维数据对接；

步骤3.中枢处理器控制三维物件模型与实景中的人体结合形成的试戴影像在显示设备显示。

其中，步骤2具体包括：

步骤21.红外发射器发出红外线发射到有实景的场景中；

步骤22.CMOS红外接收器接收红外信息，通过成像处理器和人体骨骼跟踪处理器分析区分出人体的信息和场景的信息，标定出人体位置和人体深度骨骼图，并一直实时跟踪人体的肢体动作和位置移动；

步骤23.将三维物件模型与标定出来的人体深度骨骼图进行精确对接，判断三维物件模型要叠加到实景人体图像的具体位置并进行与人体深度骨骼图的绑定动作。

具体应用中，在步骤23之前是使用三维制作软件制作好物件模型，然后编写程序把制作好的三维物件模型导入到软件中，通过软件中的三维引擎驱动三模物件模型。三维物件模型包括衣服、包包、首饰、帽子、化妆美容、发型发式、鞋，眼镜等物件。

另外，本发明显示设备2可以是多媒体设备，比如可以为拼接墙、广告机、电视墙、投影、玻璃成像、户外广告屏或电视机等任何可进行操控的显示设备。其中，显示设备可以是一个显示器或多个显示器，当一个显示器时，在没有体验者在设备前体验时，显示器作为显示屏播放各自购物信息或其他广告信息，当然，也可以是上下安装的上显示屏和下显示屏，两个显示屏可以同步显示或异步显示，比如，上显示屏是广告播放机，自动播放各类品牌平面广告、动画视频、促销信息，下显示屏是动作感应展示机，展示区可由体验者通过凌空动作操控实现上述购物体验方法或者观看各类信息推广展示。并且上显示屏和下显示屏也可以进行切换控制，互动体验效果非常好。

使用本发明智能体验购物装置，使用者不仅能够通过虚拟现实系统、感受到在客观物理世界中所经历的“身临其境”的逼真性,而且能够突破空间、时间以及其它客观限制,感受到在真实世界中无法亲身经历的体验，且本发明的智能体验购物装置本着以消费者体验为上，当人在智能体验购物装置前随意的动作，例如弯腰、转身、下蹲，显示设备内的虚拟物件也随着人体的动作而动作，这依赖于实景人体图像的具体位置与人体深度骨骼图的绑定动作，使消费者得到全新的体验。

综上，本发明智能体验购物装置的虚拟体验购物的体验效果大幅度提升，几乎达到了与真实试穿试戴的效果是一样的，通过编程的优化，三维引擎的优化，使三维模型能够与人体产生真实物理碰撞反应，效果更佳更逼真。利用本发明智能体验购物装置，可以试穿试戴衣服、眼镜、鞋、包包、首饰，帽子、化妆美容、发型发式等，可以大大方便消费者的购物体验，方便消费者快速筛选产品，并能作为品牌商家的流动商店系统，大大减低商家开店的成本，也能够作为品牌商家广告宣传营销工具，收集消费者的试穿试戴的体验数据和购物数据。

随着发明人的进一步研发，现在本发明智能体验购物装置是集形象搭配、互动分享、购物、数据监测和支付等功能于一体的智能购物终端。电商平台可以将该装置设置于中高端生活社区、商务写字楼、大学校园、便利店等贴近消费者的公众场所，也可以通过玻璃成像的方法，在外围玻璃橱窗、墙壁上运用这一技术，使消费者随时随地都可以试穿试戴不同的虚拟物品，消费者也可以先在品牌的电商平台上选择合适的产品，然后在该装置试穿体验，满意后再下单购买，免除了网购服饰过程中经常遇到的退货和换货的烦恼。

当消费者虚拟体验后，如果觉得满意，只需要确认所购买虚拟物品的颜色，数量，尺寸，显示设备上会自动生成一个二维码，消费者只需要用移动终端，如平板电脑或者手机，对着二维码扫一扫，填入送货地址和个人信息即可通过支付宝或网上银行进行汇款交易供应商还可以得到每个商铺，每个城市的消费者在区域内虚拟体验的次数，体验的时间，哪些商品比较受欢迎，消费者在哪些虚拟物品上停留的时间比较长，从而使供应商得到更加详细的信息。

显然，本发明的上述实施例仅仅是为清楚地说明本发明所作的举例，而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说，在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明权利要求的保护范围之内。

Claims (10)

1.一种智能体验购物装置，包括显示设备，其特征在于，还包括与显示设备连接的人体感应智能设备，所述人体感应智能设备集合有中枢处理器、视频影像采集器、存储器、人体实时动作识别器，所述视频影像采集器、存储器、人体实时动作识别器分别与中枢处理器逻辑连接；所述中枢处理器与显示设备进行信息交互，存储器储存有三维物件模型。

2.根据权利要求1所述的智能体验购物装置，其特征在于，所述人体感应智能设备为盒体结构，其前端设有旋转部件，该旋转部件根据安装高度在上下30度至38度之间可调节感应人体的朝向。

3.根据权利要求1所述的智能体验购物装置，其特征在于，所述人体实时动作识别器包括红外发射器、CMOS红外接收器、成像处理器和人体骨骼跟踪处理器，所述红外发射器、CMOS红外接收器均通过成像处理器与人体骨骼跟踪处理器连接，所述人体骨骼跟踪处理器与中枢处理器连接。

4.根据权利要求1所述的智能体验购物装置，其特征在于，所述显示设备为多媒体显示设备。

5.根据权利要求1所述的智能体验购物装置，其特征在于，所述显示设备至少有一个显示器。

6.一种根据权利要求1至5任一项所述的智能体验购物装置的体验方法，其特征在于，包括如下步骤：

S1.视频影像采集器获取实景影像；

S2.人体实时动作识别器根据人体的动作获取人体的三维数据，中枢处理器根据人体实时动作所选择的三维物件，调取存储于存储器的三维物件模型与人体的三维数据对接匹配；

S3.中枢处理器控制三维物件模型与实景中的人体结合形成的试戴影像在显示设备显示。

7.根据权利要求6所述的体验方法，其特征在于，步骤S2包括：

S21.红外发射器发出红外线发射到有实景的场景中；

S22.CMOS红外接收器接收红外信息，通过成像处理器和人体骨骼跟踪处理器分析区分出人体的信息和场景的信息，标定出人体位置和人体深度骨骼图，并一直实时跟踪人体的肢体动作和位置移动；

S23.将三维物件模型与标定出来的人体深度骨骼图进行精确对接，判断三维物件模型要叠加到实景人体图像的具体位置并进行与人体深度骨骼图的绑定动作。

8.根据权利要求7所述的体验方法，其特征在于，在步骤S23之前是使用三维制作软件制作好物件模型，然后编写程序把制作好的三维物件模型导入到软件中，通过软件中的三维引擎驱动三模物件模型。

9.根据权利要求6所述的体验方法，其特征在于，所述三维物件模型包括衣服、包包、首饰、帽子、化妆美容、发型发式、鞋子，眼镜物件。

10.根据权利要求6所述的体验方法，其特征在于，人体位置与显示设备的距离为0.6M-5M。