CN109643527A - 用于零售环境仿真的虚拟现实平台 - Google Patents

用于零售环境仿真的虚拟现实平台 Download PDF

Info

Publication number
CN109643527A
CN109643527A CN201780033924.3A CN201780033924A CN109643527A CN 109643527 A CN109643527 A CN 109643527A CN 201780033924 A CN201780033924 A CN 201780033924A CN 109643527 A CN109643527 A CN 109643527A
Authority
CN
China
Prior art keywords
user
data
equipment
emulation
product
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780033924.3A
Other languages
English (en)
Inventor
T.韦德迈尔
M.诺尔斯
A.雷克
A.瓦西洛夫斯基
B.詹森
F.舍胡
G.M.小卡普托
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ekester Solutions Inc
Original Assignee
Ekester Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ekester Solutions Inc filed Critical Ekester Solutions Inc
Publication of CN109643527A publication Critical patent/CN109643527A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • G06Q30/0643Graphical representation of items or shoppers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0623Item investigation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0631Item recommendations

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Processing Or Creating Images (AREA)
  • Software Systems (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供了用于生成零售商店的虚拟现实(VR)仿真的系统和方法,该仿真被配置和显示在沉浸式VR显示设备上,该沉浸式VR显示设备使用户能够体验仿真零售商店,如同它是实体零售商店一样。该系统使用户能够布置陈列柜和其他内部商店部件,并利用要在零售商店中销售的产品来填充货架、架子等等。VR平台使多个用户能够同步观看VR仿真并做出协调的改变,以开发零售商店的优化配置。可以收集、汇总并分析营销、销售、商家和其他数据,以识别某些产品的购买趋势;所分析的数据可以标识用户购物偏好,并且VR平台可以生成仅包括与用户相关的产品的定制零售商店。

Description

用于零售环境仿真的虚拟现实平台
相关申请的交叉引用
本申请要求来自2016年4月1日提交的名称为“Virtual Reality Platform forCustomized Retail Environment Simulation”的序列号为62/317,199的美国临时专利申请、2016年4月6日提交的名称为“Virtual Reality Enabled Review Simulation”的序列号为62/319,186的美国临时专利申请、以及2016年4月6日提交的名称为“Virtual RealityEnabled Assembly Simulation”的序列号为62/319,243的美国临时专利申请的优先权的权益,所有这些申请都通过引用全部并入本文。
背景技术
虚拟现实(VR)设备是计算机硬件和软件的系统,主要包括头戴式显示设备,其向佩戴者提供仿真环境并创建高度沉浸式的体验。头戴式显示器或头戴式耳机被设计成遮住佩戴者的实际环境并用不同的环境的计算机生成的仿真代替它。VR设备可以包括一个或多个控制器,该一个或多个控制器典型地是手持的且允许佩戴者与仿真环境进行交互。头戴式耳机和控制器附着到计算设备(诸如,台式机或平板计算机或智能电话)或与其通信。计算设备存储并执行软件和设备接口,以产生仿真环境并处理用户输入。
VR设备已经以各种形式存在了数十年,但是,它们在很大程度上未获得商业市场中的成功。然而,目前,若干个新发布或即将发布的虚拟现实设备被期待最终使真正沉浸式的虚拟现实实现。预期的成功基于下述各项:新颖的设备设计方案;图形和数据处理能力和传输速度方面的进步;以及可将设备成本降低到消费者可管理水平的制造效率。随着VR设备变得更广泛地被采用且与佩戴者的沉浸和控制需要更加协调,创建使用VR环境仿真以呈现内容、完成任务并便于人们之间的通信的全新平台的机会正在出现。
消费者零售是不断演进的有高度竞争力的市场,并且企业和商店所有者必须不断地工作以创建驱动销售并促进重复拜访的购物体验。数据驱动模型的成长已经示出:做出诸如商店布局、营销或促销标牌之类的改变或者其他店内推销概念可以对销售具有深刻的影响。实际上,在实体商店中实现这些改变可能是高成本的、耗时的且对正常操作有破坏性的,并且它经常要求自适应(ad hoc)调整或甚至完全的重新工作以优化结果。如本文中所描述,VR设备可以用于改进人员的零售产品购买体验。零售商可以创建、修改并评估其中可以测试无限数目的零售概念的虚拟商店,从而获得与在零售空间中什么有用以及什么没用有关的数据。企业和商店所有者可以与远程的同事共享并查阅虚拟商品显示、促销或营销标牌或者其他概念,从而节省了旅行并消除了对高成本实体模型的需要。
客户可能始终能够物理地拜访零售商店并从货架购买物品,但是,经由电子商务进行的消费者消费继续在流行度方面增加。不幸的是,电子商务发生在网站上和移动设备应用中;电子商务是二维购物,其具有诸如便利性和数据可用性之类的优势,但是它不能代替拜访零售商店的沉浸感和产品交互性体验。结合了亲身零售购物和电子商务两者的优点的环境仿真平台将是有利的。
发明内容
本公开提供了一种以硬件和软件实现的虚拟现实(VR)平台,其提供了创建、编辑并显示用于在VR设备上呈现的零售商店的环境仿真。该平台被配置成使VR设备的用户沉浸在仿真内以提供下述环境:在该环境中,用户可以独自地或与其他用户协作地组装零售商店布局和其中的产品的计算机仿真的表示。该平台进一步使环境和表示能够在查阅和修订仿真中跨多个VR设备而共享。该平台进一步使得能够使用这种环境仿真以最终向客户提供人类尺度的零售购物体验。
该平台可以动态地创建、存储并取回产品部件、处理用户输入(例如,与仿真环境的交互、语音命令等)以用于使用尺寸、空间、几何或图像数据来组装产品并在虚拟仿真内呈送视觉表示。VR设备可能能够向通过通信网络而连接的其他VR设备呈现可扩展的三维产品组件设计以用于反馈和查阅。进行呈现的VR设备可能能够基于诸如由同事提供的反馈来对该设计做出改变。环境仿真可以包括产品的视觉表示,且可以使诸如零售客户之类的用户能够与视觉表示进行交互。用户可能能够通过仿真来购买产品,并且该平台可以便于购买交易。
该平台可以处理与用户有关的数据、与产品有关的数据、与从商家的购买有关的数据、和/或其他市场数据,以识别与用户相关或可能与用户相关的产品。该平台可以生成包括所识别的相关产品的环境仿真,从而创建给用户定制的虚拟店面。仿真可以包括计算机控制的化身,其可以充当收银员、购物助理以及对零售购物来说常见的其他人员。该平台可以同时同步环境仿真向多个VR设备的呈现,且可以使多个用户能够在仿真内经由他们相应的化身来彼此看到、听到和交互。
在一个实现方式中,本发明是一种用于生成零售商店的虚拟现实(VR)仿真的设备。该设备包括一个或多个电子数据储存器,其单独地或组合地存储以下各项:包括描述零售商店的内部结构的第一商店地图的地图数据,该内部结构包括占地面积、墙壁和门;描述用于组织零售商店的多个布局元素和在零售商店中销售的多个产品的资产数据;以及至少描述该多个布局元素和该多个产品相对于第一商店地图的第一布置的商店平面图数据。本发明包括与该一个或多个电子数据储存器通信并与沉浸式第一VR显示设备通信的VR平台,该沉浸式第一VR显示设备将仿真数据变换成VR仿真并向第一VR显示设备的第一用户呈现VR仿真,使得用户感知到以人类尺度表示零售商店的零售商店环境。VR平台包括执行计算机实现指令的一个或多个硬件计算设备,该计算机实现指令在执行时使VR平台:获得对第一商店地图、商店平面图数据和资产数据的访问,以基于第一商店地图来生成仿真商店环境;从资产数据生成多个资产对象,该多个资产对象包括在第一布置中引用的该多个布局元素和该多个产品中的每一个的视觉表示;根据第一布置将该多个资产对象插入到仿真商店环境中以产生仿真数据;将仿真数据发送到第一VR显示设备;从第一VR显示设备接收用户输入,该用户输入由第一用户在由第一VR显示设备对VR仿真的呈现期间提供;确定用户输入指示该多个资产对象中的一个或多个的修改;基于该修改来修改第一布置以产生该多个布局元素和该多个产品相对于第一商店地图的第二布置;并将第二布置存储在该一个或多个电子数据储存器中作为商店平面图数据。
一个或多个电子数据储存器可以进一步单独地或组合地存储用户数据,该用户数据标识第一用户和与VR平台通信的沉浸式第二VR显示设备的第二用户。该多个资产对象可以包括在第一配置中表示该多个布局元素中的第一布局元素且位于第一商店地图上的第一位置处的第一布局对象;并且该一个或多个硬件计算设备进一步执行指令以使VR平台将仿真数据发送到第二VR显示设备,以使第一VR显示设备和第二VR显示设备将仿真数据的VR仿真显示为经同步的仿真,其中第一用户和第二用户体验相同的零售商店环境。
在修改第一布置之前,本发明可以确定用户输入包括该修改由第一用户和第二用户批准的指示;并基于用户输入来修改第一布置。硬件计算设备确定该修改将第一布局对象改变成第二配置和第二位置中的一个或全部两者;并生成第二布置以将第一布局对象包括在第二配置和第二位置中的一个或全部两者中。
在另一个实现方式中,一个或多个硬件计算设备进一步执行指令以使VR平台确定用户数据将第一用户标识为呈现者并将第二用户标识为观看着;并且在接收到用户输入之前,它从第二VR显示设备接收观看者用户输入。观看者用户输入包括修改,并使第一VR显示设备向第一用户显示批准由第二用户经由观看者用户输入提出的修改的提示。用户输入包括第一用户对该提示的响应。
在另一个实现方式中,该一个或多个电子数据储存器单独地或组合地被配置成存储描述用户与零售商店环境的交互的使用数据。该一个或多个硬件计算设备进一步执行指令以使VR平台使第一VR显示设备生成描述第一用户与该多个资产对象中的一个或多个目标资产对象在VR仿真中的每个交互的第一使用数据,第一使用数据包括用户输入,其中用户输入包括以下各项中的一个或多个:第一用户与该一个或多个目标资产对象中的每一个进行交互的次数;第一VR显示设备向第一用户显示包括该一个或多个目标资产对象中的每一个的视野所花费的时间量;以及指示第一用户通过与该一个或多个目标资产对象进行交互而发起了该多个产品中的一个或多个的购买的信息。该设备可以接收第一使用数据,将第一使用数据与存储在该一个或多个电子数据储存器中的使用数据相结合以产生汇总使用数据,并基于汇总使用数据来确定修改包括改变在第一布置中针对该一个或多个目标资产对象中的一个或多个而识别的一个或多个性质。
在另一个实现方式中,该设备包括:一个或多个电子数据储存器,其单独地或组合地被配置成存储标识第一用户并描述第一用户的一个或多个购物偏好的用户数据;以及一个或多个硬件计算设备,其进一步执行指令以使VR平台比较汇总使用数据和用户数据,以从该多个产品确定与第一用户的该一个或多个购物偏好相关联的多个优选产品,并产生第二布置,使得基于第二布置生成的VR仿真中的多个资产对象包括来自该多个产品的仅该多个优选产品的表示。
在另一个实现方式中,一个或多个硬件计算设备进一步执行指令以使VR平台从针对该多个产品中的每一个以及该多个布局元素中的每一个的资产数据生成对应3D模型,以产生多个3D模型,并将该多个3D模型发送到第一VR显示设备。这使第一设备显示设备在显示VR仿真时进行以下操作:使第一用户能够选择用于在该多个布局元素中的第一布局元素的第一视觉表示上显示的该多个产品中的一个或多个;从第一用户接收该多个产品中的第一产品的选择;确定第一产品的视觉表示是该多个3D模型中的第一3D模型;将第一新资产对象插入到VR仿真中;使用户能够将第一新资产对象放置在第一布局元素上的期望位置中,该期望位置与第一商店地图上的新资产位置相对应;并将包括第一产品和新资产位置的用户输入发送到VR平台。
另一个实现方式是一种用于生成零售商店的虚拟现实(VR)仿真的系统,该设备包括多个电子数据储存器以及与该多个电子数据储存器通信并与沉浸式第一VR显示设备通信的一个或多个硬件计算设备,该沉浸式第一VR显示设备将仿真数据变换成VR仿真并向第一VR显示设备的用户呈现VR仿真,使得用户感知到以人类尺度表示零售商店的零售商店环境。一个或多个硬件计算设备执行计算机实现指令,该计算机实现指令在执行时使该一个或多个硬件计算设备从该多个电子数据储存器中的一个或多个接收下述各项:与多个产品以及被配置成显示该多个产品中的一个或多个的多个布局对象相关联的资产数据;零售商店的商店平面图,该商店平面图包括至少商店地图以及该多个布局对象的相对于商店地图的布局。硬件计算设备进行以下操作:基于资产数据获得多个布局对象模型,该多个布局对象模型中的每一个包括该多个布局对象中的一个的3D计算机图形模型;基于商店平面图生成仿真数据,其中仿真数据包括仿真商店环境,仿真商店环境包括该多个布局对象模型并被配置成显示该多个产品的视觉表示;并将仿真数据发送到第一VR显示设备。
在该系统中,一个或多个硬件计算设备进一步执行指令以使该一个或多个硬件计算设备进行以下操作:确定商店平面图与该多个布局对象模型有关地描述用于显示的该多个产品的布置;基于资产数据获得一个或多个资产对象,该一个或多个资产对象中的每一个包括该一个或多个所选产品中的一个的3D计算机图形模型;并根据商店平面图将该一个或多个资产对象插入到仿真商店环境中。
在该系统中,一个或多个硬件计算设备进一步执行指令以使该一个或多个硬件计算设备在与该一个或多个所选产品中的第一所选产品相关联的资产数据中识别针对第一所选产品的包装数据,该包装数据包括包装类型、尺寸集合以及一个或多个图像,该一个或多个图像表示第一所选产品的对应3D计算机图形模型的每个可观看侧。硬件计算设备进行以下操作:生成具有由包装类型标识的形状的空白3D模型;根据尺寸集合来缩放空白3D模型以产生经缩放的3D模型;将该一个或多个图像呈送到经缩放的3D模型上以产生第一所选产品的对应3D计算机图形模型;并创建该一个或多个资产对象中的第一资产对象,该第一资产对象包括第一所选产品的对应3D计算机图形模型以及由第一VR显示设备使用的资产标识符,以实现由用户在VR仿真内与第一资产对象的交互。
在该系统中,该多个数据储存器中的一个是用户数据储存器,其包括标识该系统的第一用户并描述第一用户的一个或多个属性的用户数据,该一个或多个硬件设备进一步与多个外部数据储存器通信,并且该一个或多个硬件计算设备进一步执行指令以使该一个或多个硬件计算设备从用户数据储存器接收用户数据,使用用户数据从该多个外部数据储存器中的一个或多个获得描述以下各项中的一个或多个的购买数据:该多个产品的先前销售;由第一用户对该多个产品中的一个或多个进行的购买;该系统的具有该一个或多个属性的其他用户的购买行为;以及针对该多个产品中的一个或多个的营销信息。
该设备进行以下操作:识别用户数据与购买数据之间的一个或多个关系以产生用户简档,该用户简档与第一用户相关联并描述用户的一个或多个购物偏好;从该多个产品并且至少基于用户简档确定与该一个或多个购物偏好相关的多个优选产品;并创建包括该多个优选产品的显示的布置。
执行指令可以使该一个或多个硬件计算设备使第一VR显示设备生成描述第一用户与该一个或多个资产对象中的第一资产对象在VR仿真中的每个交互的第一使用数据,该第一使用数据包括以下各项中的一个或多个:第一用户与第一资产对象进行交互的次数;第一VR显示设备显示包括第一资产对象的视野所花费的时间量;以及指示第一用户通过与第一资产对象进行交互而发起了一个或多个优选产品的购买的信息。计算设备接收第一使用数据,并将第一使用数据与用户简档相结合。
执行指令可以进一步使该一个或多个硬件计算设备进行以下操作:将仿真数据发送到与该一个或多个硬件计算设备通信的沉浸式第二VR显示设备;使第一VR显示设备和第二VR显示设备将仿真数据的VR仿真显示为经同步的仿真,其中第一VR显示设备的第一用户和第二VR显示设备的第二用户体验相同的零售商店环境;从第一VR显示设备和第二VR显示设备中的一个或全部两者接收描述与VR仿真的一个或多个用户交互的反馈数据;确定该反馈数据描述对该多个布局对象的布局以及该一个或多个资产对象的布置中的一个或全部两者的一个或多个修改;并修改商店平面图以反映该一个或多个修改。该系统,其中该一个或多个硬件计算设备进一步执行指令以使该一个或多个硬件计算设备在修改商店平面图之前确定该反馈数据包括该一个或多个修改由第一用户和第二用户批准的指示。
执行指令可以进一步使该一个或多个硬件计算设备从该多个电子数据储存器获得与第一用户和第二用户相关联的用户数据,确定该用户数据将第一用户标识为呈现者并将第二用户标识为观看者,并且在修改商店平面图之前确定该反馈数据包括第二用户的交互生成了该一个或多个修改的第一指示和该一个或多个修改由第一用户批准的第二指示。
执行指令可以进一步使该一个或多个硬件计算设备进行以下操作:将仿真数据发送到与该一个或多个硬件计算设备通信的第三显示设备;使第三显示设备将仿真数据的VR仿真与第一VR显示设备和第二VR显示设备一起显示为经同步的仿真;生成均包括用户标识符和用户图形表示的多个身份令牌,该多个身份令牌中的每个身份令牌与包括第一用户、第二用户和第三用户的多个用户中的对应用户相关联;确定第一用户正在使用第一VR显示设备并且第二用户正在使用第二VR显示设备;将该多个身份令牌中的标识第一用户的第一令牌和标识第二用户的第二令牌发送到第三显示设备;并使第三显示设备将界面与VR仿真一起显示,该界面指示第一用户和第二用户在经同步的仿真中是活跃的,且包括第一令牌和第二令牌的对应图形表示。
执行指令可以进一步使该一个或多个硬件计算设备进行以下操作:确定第一用户正在经由第一VR显示设备来访问该系统并且第二用户正在经由第二VR显示设备来访问该系统;并在将仿真数据发送到第一VR显示设备和第二VR显示设备之前生成视觉地表示第一用户的第一化身对象,生成视觉地表示第二用户的第二化身对象;并将第一化身对象和第二化身对象插入到仿真数据中以使第一用户和第二用户能够在经同步的仿真中看到彼此。
执行指令可以进一步使该一个或多个硬件计算设备进行以下操作:生成使用户能够选择要在零售商店环境中视觉地表示的该多个产品中的任一个的用户接口对象;将用户接口对象插入到仿真环境中以生成仿真数据;在由第一VR显示设备将VR仿真呈现给VR显示设备的第一用户期间,使第一VR显示设备响应于请求激活的第一用户输入而激活用户接口对象,从第一VR显示设备接收第二用户输入,确定第二用户输入包括由第一用户使用用户接口对象对该多个产品中的第一产品的选择,基于与第一产品相关联的资产数据获得包括第一产品的3D计算机图形模型的第一资产对象,将第一资产对象发送到第一VR显示设备,使第一VR显示设备将第一资产对象包括在VR仿真中,并使第一用户能够将用于显示的第一资产对象定位在该多个布局对象中的第一布局对象上;从第一VR显示设备接收第三用户输入,确定第三用户输入标识第一资产对象相对于第一布局对象的位置;并更新商店平面图以指示第一布局对象在该位置处显示第一产品的一个或多个实例。
该多个电子数据储存器可以存储多个话音标签,该多个话音标签中的每一个描述多个语音命令中的对应语音命令,并且该一个或多个硬件计算设备进一步执行指令以使该一个或多个硬件计算设备进行以下操作:从第一VR显示设备接收用户输入;确定用户输入包括第一用户的话音;确定该话音标识该多个语音命令中的搜索命令,并进一步识别一个或多个搜索词;确定该一个或多个搜索词标识与该多个产品相关联的多个产品类型中的第一产品类型;从该多个产品识别具有第一产品类型的多个所选产品;基于与该多个所选产品相关联的资产数据来获得多个资产对象,该多个资产对象中的每一个包括该多个所选产品中的一个的3D计算机图形模型;并将该多个资产对象发送到第一VR显示设备。
资产数据可以进一步与多个营销对象相关联,该多个营销对象描述零售商店的标牌,并且其中为了生成仿真数据,该一个或多个硬件计算设备进一步执行指令以使该一个或多个硬件计算设备进行以下操作:使用资产数据来获得该多个产品和该多个营销对象的图形模型;并基于商店平面图将该图形模型插入到仿真商店环境中,使得VR仿真向第一用户呈现零售商店环境,作为能够代替对零售商店进行仿真的实体模型商店的所组装的商店环境。
执行指令可以进一步使该一个或多个硬件计算设备进行以下操作:接收指示第一视角或第二视角的选择的用户输入;并且响应于用户输入,使第一VR显示设备基于该选择来从第一视角或第二视角显示VR仿真,其中第一视角包括以人类尺度表示的零售商店环境的视野,其中使第一用户能够以第一人称视角遍及零售商店环境移动视野;并且第二视角包括零售商店环境的模型视图,其中从上面示出表示商店平面图的整个仿真商店环境。
本发明的前述和其他优势将从以下描述中显现。在该描述中,参考了附图,附图形成该描述的部分,并且在附图中,作为图示而示出了本发明的优选实施例。然而,这种实施例不必然表示本发明的全部范围,并且因此参考权利要求且在本文中用于解释本发明的范围。
图1A和1B是用于实现本公开的系统和方法的示例性虚拟现实(VR)设备的图。
图2是图1的VR设备的示例性部件的示意图。
图3是根据本公开的示例性的所生成的VR环境的屏幕截图。
图4是演示了用户对仿真资产的操控的示例性的所生成的VR环境的屏幕截图。
图5是根据本公开的另一个示例性的所生成的VR实施例的屏幕截图。
图6是根据本公开的另一个示例性的所生成的VR实施例的模型视图的屏幕截图。
图7是实现商店布局查阅仿真的VR平台的示例性实施例的图。
图8是实现仿真查阅的VR平台的不同尺度中的示例性观看者VR终端的图。
图9是实现仿真查阅的VR平台的示例性呈现者VR终端的图。
图10A是示出了生成针对用户的定制商店仿真的方法的流程图。
图10B是对数据进行编译或归一化以用于生成定制商店的示例性方法的流程图。
图10C是识别产品以用于生成定制商店的示例性方法的流程图。
图11A是用于生成针对一个或多个用户定制的零售商店的仿真的示例性VR平台架构的图。
图11B是针对在零售商店的仿真中使用的资产的数据结构的图。
图12A是示出了向用户呈现定制商店仿真的方法的流程图。
图12B是示出了向多个用户呈现定制商店仿真的方法的流程图。
图13是根据本公开的示例性VR平台架构的图。
图14是根据本公开的另一个示例性VR平台架构的图。
具体实施方式
本公开提供了用于组装三维产品和环境布局设计(诸如,零售商店)、共享并查阅这些设计并且最终生成可被呈现在虚拟现实(VR)设备上的现实交互式环境仿真的系统、设备配置和过程。传统上,对于对零售商店布局设计或其他商店固定物的改变而言,可以将诸如公司高管之类的查阅者邀请到其中可以设置模型商店的一个位置。模型商店可以显示用于布置货架的设计以及用于储备商品的配置。该设计的查阅者可能必须物理地拜访模型商店并观看该设计以便提供反馈。在查阅者要求对该设计的显著改变的情况下,查阅者可能必须离开并行进回到该位置以查阅这些改变。本公开提供了便于创建并修改零售概念设计且在仿真虚拟环境(诸如,零售商店)内远程查阅它们的VR技术的平台。当被可能的客户利用时,本公开中的VR平台确定与VR设备的用户的购买偏好有关的信息,使用该信息以识别与用户相关的产品,并生成包含所识别的产品的定制零售商店的VR仿真。本VR平台可以进一步将仿真与交易处理器耦合以使用户能够在用户的定制商店内购买产品。本VR平台和它实现的用于处理用户数据、购买数据以及其他营销数据的方法可以显著减少原本将用户与用户想要买的产品相联系而将需要的时间和计算开销。与典型的电子商务体验形成对照,VR平台和它生成的仿真向用户提供了现实的、人类尺度的购物体验,从而增加了对用户来说可用的数据的量并使用户对购买感到更舒服。所呈现的产品的量可以被显著缩小到仅与用户相关的那些量,从而与充满不相关的产品的实际零售商店相比改进了购物效率。
在涵盖设计、查阅或客户使用的一些实施例中,本VR平台可以被实现在具有标准二维计算机屏幕或其他传统显示器的用户设备上。然而,可以由此实现VR平台的优势中的仅一些。计算机监视器未提供与真正VR设备(诸如,图1的VR设备)的沉浸式体验相当的沉浸式体验。用户在没有VR设备的情况下不能体验如本公开内所理解的以人类尺度表示的虚拟购物。考虑到这种优势,在VR设备上生成可使用的、现实的仿真呈现了独特的挑战,本VR平台如下面所描述的那样解决该独特的挑战。一些所描述的解决方案被容易地推广或可以被容易地推广以用于在任何现代VR设备上实现,而其他解决方案可以被实现在具有特定部件的VR设备上。
VR设备配置
图1A和1B图示了能够在本VR平台内实现或操作的VR设备100。VR设备100的合适的已知实现方式包括但不限于HTC VIVE(图1A-B中所图示)、OCULUS RIFT和TOUCH、SAMSUNG GEARVR以及SONY PLAYSTATION VR。在一些实施例中,VR设备100可以包括头戴式显示设备或“头戴式耳机”102以及一个或多个手持控制器104、106。在其他实施例中,头戴式耳机102可以用其他显示技术(诸如,创建沉浸式图形显示的全息图生成器或其他投影仪)代替。附加地或可替换地,(一个或多个)手持控制器104、106可以由移动感测系统代替,该移动感测系统附着到用户或跟踪用户,且可以检测用户的手势和其他移动。
VR设备100可以进一步包括计算设备110,头戴式耳机102和/或其他部件(例如,控制器104、106)连接到计算设备110。计算设备110可以执行数据取回和处理功能以促进生成目前描述的环境仿真的方法,并且其自身可以生成描述环境仿真的仿真数据,且可以将仿真数据发送到头戴式耳机102。可以利用适当的硬件或软件将计算设备110配置成执行仿真生成过程。示例性硬件包括图形处理器和其他合适处理器、数据网络接口、输入/输出端口以及其他外围设备接口等等。可以利用本硬件和软件模块来组装和/或配置任何计算设备,并且本公开考虑了家庭和办公室台式计算机、个人辅助设备、诸如平板计算机和智能电话之类的移动计算设备、游戏和其他专用控制台等等,仅作为非限制性示例。计算设备110可以被配置成连接到局域网(LAN)、Wi-Fi网络、广域网(WAN)或另一个通信网络,且可以在任何所连接的网络上向其他设备发射数据并从其他设备接收数据,这些其他设备包括其他用户设备、远程服务器、VR设备100的其他部件等等。在其他实施例中,计算设备110的一些或全部功能可以取而代之由远程服务器(未示出)执行,如下面进一步描述。附加地或可替换地,计算设备110可以集成到头戴式耳机102或VR设备100的另一个部件中。
头戴式耳机102可以包括显示组件120,显示组件120被配置成向头戴式耳机102佩戴者呈现环境仿真的沉浸式视觉表示。显示组件120可以包括一个或多个显示设备122,其接收仿真数据,根据显示组件120的格式将仿真数据变换成视觉表示,并在一个或多个屏幕(未示出)上显示视觉表示。显示设备122可以采用适合于呈送高分辨率计算机图形的任何显示技术;非限制性示例包括发光二极管(LED)显示器、有机发光二极管(OLED)显示器、有源矩阵OLED(AMOLED)显示器、液晶显示器(LCD)、电润湿显示器等等。在一些实施例中,显示设备122可以利用非常低时延的技术,以便尽可能快地对佩戴者的移动做出响应。在一个示例中,由于AMOLED在小于一毫秒内切换颜色的能力而使用AMOLED屏幕。减少时延提高了VR设备100的仿真的现实感,并减少了与本体感觉不一致相关联的运动病。
显示设备122可以与一个或多个光学组件124协作,该一个或多个光学组件124使由显示设备122生成的图像失真以填充佩戴者的视野。在一个非限制性示例中,光学组件124可以是两个放大镜,每一个位于佩戴者的眼睛之一的前方。在一些实施例中,显示组件120可以向佩戴者呈现立体的(或其他三维表示)、全视野的视觉表示。为了实现这一点,显示设备122可以将仿真数据渲染成两个略微不同的图像,该两个略微不同的图像描绘相同场景的左眼和右眼视图;此外,仿真数据可以描述被失真以抵消由光学组件124引起的失真的仿真环境的视觉表示。头戴式耳机102可以进一步包括弹性材料126,其接触佩戴者的面部并在佩戴者的眼睛周围形成完整的周边,从而挡住来自用户的实际环境的光。
头戴式耳机102可以包括位置跟踪设备,诸如陀螺仪、加速度计、磁力计、面向外部的相机、红外LED和其他运动传感器。可以协调位置跟踪设备以检测佩戴者的头部的旋转、平移和/或加速,且可以生成对应的位置数据并将它传输到计算设备110。计算设备110进而更新佩戴者的化身在仿真中的位置、身体取向和/或视野取向。附加地或可替换地,VR设备100可以包括外部位置跟踪设备112(诸如,激光跟踪模块),其可以安装在房间中并用于跟踪佩戴者的位置,以及定义虚拟现实空间的边界(即,识别真实墙壁并在碰撞前警告佩戴者)。
VR设备100的手持控制器104、106还可以包括位置跟踪设备,或者它们的位置可以由头戴式耳机102的位置跟踪设备或外部位置跟踪设备112来跟踪。控制器104、106在仿真中可以具有它们自身的化身,其实质上充当佩戴者的手或从现实世界到VR仿真的另一个触觉锚。控制器104、106可以包括用户输入设备的任何合适布置,该用户输入设备包括按钮、压敏触摸板、加速度计等等。
VR设备100可以进一步包括用于向佩戴者发射音频信号的音频反馈系统(未示出)。音频反馈系统可以包括内置到头戴式耳机102中的扬声器、分离的耳罩式或入耳式耳机、连接到计算设备110的远程扬声器、或另一合适声音发射设备。VR设备100还可以包括音频输入设备(未示出),诸如内置到头戴式耳机102中或与头戴式耳机102分离的麦克风。
图2图示了可执行目前数据收集和分析以及仿真生成过程的计算设备200的部件视图。计算设备200可以是图1A-B的VR设备100的分离的计算设备110,或者可以集成到VR设备100的头戴式耳机102中,或者可以是一个或多个远程服务器,或者可以是本地和远程设备的组合。计算设备200包括中央处理器202、针对诸如音频或图形处理之类的任务的一个或多个专用处理器204、网络接口模块206、一个或多个输入模块208、一个或多个输出模块209以及存储器210,所有这些可以借助通信总线而彼此通信。计算设备200还可以包括电源218,其可以向计算设备200的各种部件提供功率。
中央处理器202和(一个或多个)专用处理器204可以包括一个或多个微处理器,该一个或多个微处理器被专门配置成与存储器210通信以实现存储在其中的各种软件模块和关联程序指令;这种模块包括仿真生成模块120、信号处理模块214和话音识别模块216。存储器210一般包括RAM、ROM、闪存、固态存储器和/或其他永久性或非暂时性计算机可读储存介质。仿真生成模块120可以作为程序指令而存储在存储器中。当由(一个或多个)处理器202、204执行时,仿真生成模块120可以将(一个或多个)处理器202、204配置成针对如本文中所描述的VR设备生成环境仿真。仿真生成模块120的执行可以配置或指示(一个或多个)处理器202、204以访问和/或使用计算设备200的其他模块,包括但不限于:访问或使用音频处理器以取回设备可读音频输入;访问或使用视频和/或图形处理器以渲染或以其他方式处理图形数据;访问输入模块208以从位置跟踪设备、用户控制的输入设备等等接收输入数据或其他信号;执行信号处理模块214以从接收到的输入数据获得数据和/或指令;以及执行话音识别模块216以将被识别为话音的音频输入转换成已知操作,并在仿真数据上执行该操作。
存储器210可以附加地存储信号处理模块214,其提供计算机程序指令以供中央处理器202在分析接收到的信号(诸如,输入数据)时使用。信号处理模块214可以包括可执行算法以将输入数据识别为音频数据、位置数据、用户动作数据、用户命令数据以及与计算设备200的操作相关的其他类型的数据。处理器210可以附加地存储话音识别模块216,其提供计算机程序指令以供中央处理器202在识别音频输入包含话音和/或包含特定词或短语(诸如,已知命令或影响仿真的其他操作)时使用。话音识别模块216可以是产生话音识别结果的任何程序,诸如听写应用、计算设备200的操作系统本机的话音处理器、或应用编程接口。存储器210可以存储针对关键词和短语的一个或多个语言模型,并且话音识别模块216可以将中央处理器202配置成将音频输入与所存储的语言模型进行比较,以识别音频输入的内容。
专用处理器204可以是在特定类型的数据上执行特定操作的一组微处理器、集成或分立电路或软件实现模块。在一个实施例中,专用处理器204包括音频处理器,该音频处理器将由计算设备200接收到的声信号或表示声信号的电信号转换成中央处理器202可读的音频输入。在一个示例中,该音频处理器可以是模数转换器。该音频处理器可以接收由输入模块208生成的信号并从中生成音频输入。因此,输入模块208可以包括音频输入设备(诸如,麦克风或麦克风阵列),无论是模拟的还是数字的。麦克风或麦克风阵列可以被实现为定向麦克风或定向麦克风阵列。在一些实施例中,输入模块208接收并记录声信号,并将该记录输出到音频处理器。输入模块208还可以从音频处理器接收设置用于获得音频的采样率(无论以取样率还是比特率表示)的指令。输入模块208还(或取而代之)可以包括可将声能转换成电信号以供音频处理器处理的一个或多个压电元件和/或微机电系统(MEMS)。输入模块208可以按照期望而进一步被提供有放大器、整流器和/或其他音频处理部件。
在一些实施例中,专用处理器204可以包括将原始仿真数据转换成可被呈送到显示设备的仿真数据的视频和/或图形处理器。图形处理器可以是图形处理器单元或其集合,或者可以是图形卡。图形处理器可以将经转换的仿真数据发送到输出模块209,输出模块209可以是计算设备200的视频输出接口,一个或多个显示设备附着到该视频输出接口。除了其他之外,合适的输出接口包括数字视觉接口(DVI)、视频图形阵列(VGA)和高清多媒体接口(HDMI)。仿真生成模块120可以生成使视觉表示失真的原始仿真数据,如上面所描述的那样,或者仿真生成模块120可以以其他方式将图形处理器配置成渲染原始仿真数据以产生失真的仿真数据,该失真的仿真数据然后在显示期间由头戴式耳机的光学器件校正。
网络接口模块206可以向计算设备200提供到一个或多个网络250(诸如,LAN或广域网)的连接。网络接口模块206可以附加地或可替换地使得能够直接与其他设备对等连接,诸如经由蓝牙或Wi-Fi Direct(直连)。中央处理器202可以向远程VR设备、远程服务器以及也经由网络250进行通信的其他计算设备发送指令和信息,并从其接收指令和信息。在一些实施例中,网络接口模块206包括无线网络接口,其向计算设备200提供在一个或多个无线网络上的连接。
输入模块208可以进一步包括一个或多个相机或其他图像/视频捕捉设备。中央处理器202或图形处理器可以执行信号处理模块214以分析由相机捕捉的视频或图像,且如果需要的话,可以然后执行仿真生成模块120以更新仿真数据。类似地,输入模块208可以包括位置跟踪设备或面向它的接口,并且中央处理器202可以执行信号处理模块214以分析接收到的位置数据,且如果需要的话,可以然后执行仿真生成模块120以更新仿真数据。在一些实施例中,中央处理器202可以设置供输入模块208从位置传感器接收数据的取样率。该取样率可以被设置得足够高(例如,1kHz或每秒1000个样本),以允许中央处理器202确定移动的方向和速度并内插或预测佩戴者在不远的将来的位置;因此,中央处理器202和图形处理器可以协作以预先渲染仿真图像并进一步减少时延。其他输入模块208可以包括或连接到用户输入设备(诸如,VR设备控制器、键盘或鼠标、触摸屏等等)。
除了(一个或多个)视频输出接口之外,输出模块209可以包括扬声器或扬声器阵列(或用于连接扬声器的端口/接口),连同用于将计算设备200的模拟或数字信号转换成供扬声器输出的声信号的任何必需的电子部件。一旦输入命令/查询被计算设备200处理,输出模块209就可以接收并输出该命令或查询的结果。输出模块209还可以输出其他音频数据,诸如存储在存储器210中或经由来自远程设备的数据流而获得的音乐或其他所记录的音频、来自呈现仿真的其他VR设备的音频数据、与到房间中的墙壁或对象的接近度有关的对佩戴者的警报等等。
尽管已经描述了用于实现VR设备和VR平台的关联部分的非限制性示例性硬件,但是将理解的是,可以从示例中导出其他合适硬件和软件实现方式而无需过度实验;下面描述了一些其他示例性实现方式。
组装仿真
VR平台可以用于可视化和仿真可在沉浸式VR设备上在三个维度中向用户呈现并显示的环境。目前描述的实施例的细节具体地涉及内部零售商店环境,尽管可以仿真任何开放或封闭环境。VR平台可以用于实现环境的不同方面的三维视觉表示的组装。特别地,零售商店环境可以包括零售商店的关联房间、所划定的区域(即,部门)、走廊、过道、端头(endcap)、固定物和它的其他内部特征。占地面积、天花板、屋顶结构、供暖和通风(HVAC)、电气、管道和其他系统、墙壁、门、直通和其他内部永久(或以其他方式不可移动)结构的配置可以从存储在计算机存储器中或仿真生成器可访问的数据储存器中的商店地图确定。可替换地,这种配置可以由仿真生成器根据要显示的产品的量和变化的类型自动生成,或通过由用户提供的约束或其他参数而自动生成。仿真可以表示整个零售商店,或者可以表示零售商店的部分,诸如某个区域或部门、房间、过道或要由货架图配置的分立货架空间(例如,端头)。图3图示了当仿真被限于所陈列的空间时来自用户的第一人称视角的示例性视觉表示300;在所图示的示例中,仅要陈列的区域中的货架302是可见的。
在VR启用的组装过程的示例中,要仿真的商店环境的类型是由用户选择的,诸如杂货商店或消费者电子产品商店。专用于某些商店类型或甚至专用于一商店类型内的特定商店的资产可以被上传并存储在数据库中,且可以被取回以用于组装。如本文中所描述,“资产”是描述可被放置在零售商店内的特定物理对象的数据结构;VR系统使用本文中表征的信息和图形处理技术来解释资产,以产生可被放置在仿真中的资产的视觉表示(在本文中被称为“对象”)。尽管可以仿真任何零售商店部件,但是可用于VR平台的大多数资产可以落入以下三种资产类型中:布局元素;产品(即,在零售商店中销售的商品);以及营销元素(诸如,壁挂、标牌和目录)。布局元素划定并组织零售商店环境中的空间。布局元素的非限制性示例包括:货架模块、冷藏单元(即,用于杂货商店中的冷藏产品)、端头、架子、售货亭以及用于显示商品的其他显示模块;用于划定空间的断面模块(诸如,墙壁和分隔物元素)、柜台(例如,销售柜台或部门柜台)、收银通道等等;交互式元素(诸如,自动化柜员机和自动售货机;家具、镜子、标牌和其他功能性或非功能性元素;等等。布局元素自身可以是可配置的,具有由针对对应元素的资产数据描述的分立配置或配置范围。例如,货架模块可以被指派有固定高度和宽度,但是货架的数目和每个货架的高度可以是可由具有这么做的必需许可的用户来配置的。在一些实施例中,布局元素可以包括由一个或多个其他布局元素的多个实例组成的复合元素。例如,资产数据库可以描述“过道”布局元素,该“过道”布局元素由首尾相接地放置的多个货架模块和/或冷藏单元组成以表示杂货商店过道的一侧或全部两侧。
VR系统可以使用户能够选择要被放置在仿真商店环境内(诸如,要被放置在图3中的货架302上)的资产。当用户选择要添加到虚拟环境的资产时,VR平台使用关于该资产的信息以在虚拟环境内创建并视觉地呈送该资产。该系统通过组合包括由该系统的用户提供或以其他方式存储在内容库或数据库中的若干段信息的所存储的数据元素,来在虚拟仿真内创建并视觉地呈送资产。内容库可以包括资产的细节,诸如空间或几何数据、图像数据、元数据、或者对于在虚拟环境内生成该资产的三维视觉表示而言可能必要的其他这种信息。例如,在数据库内,描述产品的资产可以具有标识资产的具体实例的唯一标识符,和/或可以具有与由资产表示的产品相关联的单位标识符(诸如,库存单位(SKU)代码)。数据库可以包括表示以下内容的资产的1个到10个或可能更多个2D图像:由单位标识符标识且与可以对用户来说可访问的资产的前侧、后侧、顶侧、底侧、左侧或右侧相对应的产品的视图。用户还可以上传附加的图像、资产尺寸、元数据或产品属性,或者指定形状类型以在内容库内补充现有资产信息或提供附加细节。
利用关于资产的该信息,该平台首先将所上传的图像的接缝缝合在一起,以创建表示整个资产包装器的全景图像。然后,该平台生成所指定的形状类型的空白3D模型,并使用来自内容库或由用户上传的所指定的尺寸来缩放该空白3D模型。表示资产的全景图像被包在该模型周围,以创建要缩放的资产的3D模型。然后使用该3D模型的输出来创建虚拟仿真。该3D模型连同其对应的元数据和关于资产的其他产品属性或类别数据(诸如,产品类型或包装类型)可以被存储在内容库中。例如,针对咖啡过滤器的盒的视觉数据可以包括该资产为“盒”包装类型的指示器、盒侧面的尺寸、盒的重量、咖啡过滤器的实际盒的一个或多个侧面的图像、以及与该资产的交互性有关的参数。仿真生成器将图像呈送到盒对象,将盒的尺寸指派到该对象,将盒对象与标识符相关联,且然后可以将盒对象放置在仿真中。
理想地,用户可以佩戴VR头戴式耳机,其使用户沉浸在所呈送的VR商店环境内。使用控制器(诸如,图1A中的104、106)或其他接口设备,用户可以与来自内容库的物品(诸如,具体商品或营销材料)进行交互,并将它们放置在货架302上或虚拟商店内,以创建零售商店环境。可以使用用户接口(诸如,来自图1A的控制器104、106)通过键盘或鼠标或者附加地或可替换地通过语音命令从数据库取回对象。在组装过程的实施例中,资产的某些属性或部件可以作为针对资产的元数据内的可辨别“话音”标签而被存储在内容库数据库中。语音命令可以由中央处理器中的话音辨别模块来辨别,且出于取回所存储的资产的目的而与内容库中的话音标签匹配。例如,用户可以说“搜索咖啡过滤器”来找到可用的咖啡过滤器选择和选项以用于组装。然后,使用控制器,用户可以与该选择进行交互,诸如将它放置在货架上或者移动到它在仿真环境内所位于的地方。在图4中图示了这一点的示例,其中虚拟“臂”402能够与虚拟对象进行交互。
可以调整或操控商店内的部件的配置,以测试商店布局思想、可视化货架配置或商店显示、或者评估其他设计概念以用于在现实的实体商店中实现它们之前进行测试。图5图示了经组装的仿真环境500的示例。如图5中所示,经组装的环境是以人类尺度表示的虚拟三维杂货商店,其中货架的过道装载有商品、描述性标牌、定价信息以及将在用户可与之交互的典型杂货商店中找到的其他方面。
可以附加地或可替换地生成其他视角。例如图6中所图示,当整个商店被仿真时,可以从“模型”视点呈送视觉表示600,从而向用户给出以下印象:他正在以从零度(平行于仿真商店地板)到90度(垂直于商店地板,如图6中所示)的任何合适视角角度向下看该商店的模型。该商店可以在没有屋顶的情况下被仿真,使得用户可以从模型视角观看商店的内部的布局(即,过道、货架、收银站、房间内部等)。可以使用户能够在模型视点(以最大距离)与第一人称视角之间改变视角。
在该虚拟环境内,关于优化零售结果,可以仿真并评估购物体验的许多方面。用户可能能够导航通过虚拟商店,检查并调整所陈列的空间,尝试新的店内概念,或者除此之外以在实体商店中实现将显着更耗时和/或更昂贵的方式定制商店。与现有解决方案相比,通过对用户给予人类尺度的实时现实观看体验并与零售商店环境进行交互,虚拟现实显示设备的沉浸式本质进一步改进了组装零售商店仿真的有效性。
查阅仿真
本公开的VR平台还包括用于实现VR启用的查阅仿真的系统和方法。产品设计(诸如,商店布局、资产配置、标牌或其他店内概念)可以被呈现在VR设备上,并可以在一个或多个设备上观看。每个VR设备可以彼此远离地定位在不同地理位置中,并通过通信网络进行连接。图7图示了用于执行模型商店的查阅仿真的VR平台700的可能示例实施例。经组装的商店环境(例如,来自图5的环境500)被生成在呈现者VR设备702上,并通过网络704而共享到其中可以同时观看它的三个其他观看者VR设备706、708、710。特别地,可以从参与用户的相应视角702A、706A、708A、710A观看该商店环境。这防止了使企业所有者或高管行进到公共位置以查阅实体模型商店的需要。在该示例中,与三个其他设备共享VR环境,尽管在其他实施例中,可以与更多或更少的参与者经由他们自身的VR设备或共享VR设备共享该VR环境。
中央服务器可以将原始仿真数据分发到VR设备702、706-710以用于在相应显示器上呈送虚拟环境。附加地,VR平台的一个或多个中央服务器可以被包括在查阅仿真系统中以用于执行数据收集、处理和导出。中央服务器可以是计算机服务器或互连计算机服务器的系统,诸如web服务器、应用服务器、应用平台、虚拟服务器、云数据服务器、或者具有中央处理单元(CPU)、微处理器或其他合适硬件的其他类似计算设备。应当理解的是,除非以其他方式从上下文清楚表明,被描述为由单个设备执行的操作可以由多个设备共同执行,该多个设备可以形成分布式和/或虚拟系统。因此,可以存在可被链住或以其他方式配置的同构或变化的类型、层或其他元素、过程或部件的若干个协作服务器,其可以交互以执行诸如从对中央服务器来说本地可访问或通过网络远程可访问的适当数据储存器获得数据之类的任务。
中央服务器可以包括任何适当的硬件、软件和固件,以用于按照需要与数据储存器和VR设备通信以执行针对VR设备的一个或多个仿真应用的方面,处置针对应用的数据访问和设备逻辑中的一些或全部。中央服务器可以包括用于执行上面针对所有所连接的VR设备而描述的过程的若干个模块,包括但不限于:数据纳入模块,用于从数据储存器取回生成仿真所需的任何数据,并用于根据仿真应用来处理这种数据;数据导出模块,用于存储所生成和修改的数据(诸如,将仿真数据存储在仿真数据储存器中);仿真生成器,用于生成如上面所描述的原始仿真数据并将仿真数据传输到VR设备;同步模块,用于在呈现相同仿真的多个VR设备之间同步仿真数据;话音辨别模块,用于从包含话音的音频输入中提取命令和其他信息;以及交易处理模块,用于创建并传输针对在仿真中发起的交易的交易数据。
附加地,中央服务器或另一个计算设备可以使仿真数据和其他所生成的数据对其他设备来说可用并且在其他服务中可用;这包括:以任何形式分发数据,或者可替换地,向外部设备和服务提供对一个或多个数据储存器的访问。在一些实施例中,应用编程接口(API)(例如,代表性状态转移(“REST”)API)可以被配置成实现或促进由另一个计算设备或系统对内容的访问。
例如,一个或多个商家系统可以使用API以向VR平台提供产品数据、资产数据、销售和/或营销数据、用户账户和历史数据、商店地图、所生成的仿真以及其他数据。
中央服务器典型地将包括操作系统,该操作系统提供用于该服务器的一般管理和操作的可执行设备逻辑,并且中央服务器典型地将包括存储指令的计算机可读储存介质(例如,硬盘、随机存取存储器、只读存储器等),该指令在由服务器的处理器执行时允许服务器执行其所意图的功能。用于服务器的操作系统和一般功能的合适实现方式是已知的或商业可用的,并且是本领域普通技术人员(特别是根据本公开)容易实现的。
观看者可以经由显示设备(理想地,诸如图1中所描述的示例之类的VR头戴式耳机)来观看三维产品设计,诸如零售商店布局。观看者可以在观看仿真环境之后通过通信网络来提供反馈。例如,一个观看者可能想要在零售商店中的某个货架上或者针对要完全移除或代替的某些方面重新布置某个商品。可以使用控制器或其他接口设备(诸如,键盘)将观看者的反馈输入到观看者VR显示设备,并且可以经由通信网络将观看者的反馈传输到呈现者VR设备。附加地或可替换地,这可以包括通过VR头戴式耳机上或连接到VR头戴式耳机的麦克风和扬声器进行的语音通信。在接收到反馈时,呈现者可以使用控制器来做出对产品设计的所建议的改变。在呈现者做出改变之后,对产品设计的改变将在观看者VR显示设备上可用。一旦呈现者在呈现者VR设备上做出改变,经改变的产品设计就可以是容易可用的。呈现者和观看者的作用可以不是静态的。例如,呈现者可以将呈现者权利传递给观看者,该观看者然后变成呈现者且可能能够实现设计改变。
尽管呈现者可以典型地一次被指派到一个VR设备702,但是可以存在其中所有观看者可以充当呈现者且能够改变产品设计的情形。产品设计一般可以是三维的,然而,当设计被示为VR专用设备外的二维图像时,可以进行产品设计显示和改变。由此,观看者和呈现者还可以在个体位置处观看作为二维图像和/或视频的产品设计,而不影响其他位置处的显示性质。即使每个VR设备位置可以具有供观看者和/或呈现者看到产品设计的三维图像和/或视频的设备,观看者和/或呈现者也可能能够选择要观看的产品设计的二维视图。二维图像和/或视频可以由查阅者在相同VR设备中观看,或者可替换地,观看者可以在头戴式耳机中观看产品设计的三维图像,且可以在诸如电视之类的分离的设备中观看二维图像。
VR平台能够以不同空间尺度显示仿真环境,如图8中所图示。每个观看者可以挑选用于观看的仿真环境的具体部分,或者通过移动图像和/或放大/缩小图像来调整在观看者显示设备中显示的图像的大小。图像特异性中的改变是跨设备而独立的,因此,改变一个显示设备上的视图可以不影响在另一个观看者显示设备或呈现者显示设备上显示的视图。参考图8,三个不同视图802、804、806以跨三个示例显示设备的不同尺度级别而呈现。
可以针对查阅产品设计的观看者和呈现者中的每一个指派身份令牌。身份令牌可以是参与查阅仿真的观看者和呈现者中的每一个的编号或简化图像。身份令牌可以被显示在设备中。所显示的身份令牌可以不包括设备的观看者或呈现者他/她自身,并且,可以显示针对其他设备的所有身份令牌。或者可替换地,所有身份令牌可以被显示在所有设备中。在某些情形中,身份令牌可以是表示观看者和呈现者中的每一个的化身。该化身可以被放置和并入到在设备中显示的仿真环境中。例如,观看者和呈现者的化身可以并入到在图5中所描绘的示例零售商店中。观看者和呈现者可以在查阅仿真期间看到其他人的化身并与其他人的化身进行交互。身份令牌还可以用于标识向呈现者提供的反馈并标识在查阅仿真期间做出的每个改变。
图9图示了呈现者VR设备900的一个示例。如图9中所示,零售商店布局设置908被显示在呈现者VR设备中。零售商店布局908可以在三维视图中或在二维视图中。使用呈现者VR设备900,呈现者可能能够在虚拟环境内移动,诸如通过走向在VR设备中显示的仿真货架对象。在一个实施例中,呈现者可能能够使用控制器来挑选货架上的商品、移动它、和/或用不同的商品代替它,而观看者观察这些改变。附加地或可替换地,可以使呈现者和/或一些或全部查阅者能够添加、删除和/或操控布局对象和其他仿真对象,以便改变仿真环境。如本文所描述,这些改变可以被其他用户接受、拒绝或修改,从而迭代仿真数据,直到该环境表示零售商店的优化或目标布局。
图标902表示针对可在呈现者VR设备900中显示的其他观看者的身份令牌。如图9中所示,图标902可以被显示在三维视图908外部。然而,它们还可以是观看者的化身,且可以被放置在虚拟商店仿真内的三维视图908内部。
文档904也可以在呈现者VR设备900中显而易见。如图9中所示,一个或多个文档904可以被显示为示出零售商店设置的三维视图908外部的二维视图。二维文档904和三维视图908可以被显示在两个分离的设备中。例如,零售商店可以被显示在头戴式耳机中,并且该一个或多个二维文档904可以被显示在房间内部的分离的监视器中。然而,二维文档904和三维视图908还可以被显示在一个集成设备中。这种设备可以是头戴式耳机或独立电视,或者是可同时示出二维文档904和三维视图908的任何其他设备。
除了设计并查阅零售商店的不同方面之外,VR平台还以类似的方式仿真客户的零售体验。使用头戴式耳机或用于显示VR环境的其他可接受设备,将向客户呈现(例如在图5中)由本系统生成的零售环境的示例性视觉表示500。
VR设备的用户可以在仿真中被表示为一个或多个化身。化身可以具有影响它在商店内的视角和移动以及如下面所描述的它对其他用户的外貌的可编程参数。例如,用户可以设置化身的高度,这使仿真生成器在规模商店仿真内的对应高度处呈送第一人称视点。由仿真生成器分析的位置数据可以改变视图以及化身的仿真内外貌。例如,用户可以蹲下或踮着脚站立或转动他的头,从而使位置跟踪设备生成新的位置数据;相应地,仿真生成器可以提高或降低第一人称视点的相对高度,或者可以旋转所显示的视野。在一些实施例中,其他移动(诸如,挥手或跨胸部折叠手臂)也可以在仿真中被检测并表示。化身可以进一步具有子化身,诸如表示手持控制器的“手”化身。
在一些实施例中,VR平台可以被配置成同时向多个用户显示仿真,且可以进一步将该多个用户放置在相同的仿真中并使用户能够彼此交互。因此,当第一用户在商店中的位置在第二用户的视野内时,可以使第一用户的化身对第二用户来说可见。化身的参数以及它的位置和取向、它与仿真对象的交互以及其他特征可以被准确地表示在向正在看化身的用户呈现的仿真中。在一些实施例中,可以使各种用户能够选择它们的相应化身的一个或多个可见特性。在一个实施例中,用户可以从多个模板化身中选择预配置的化身。在其他实施例中,VR平台可以包括身体扫描设备或与身体扫描设备对接,该身体扫描设备捕捉用户在现实生活中的物理特性,并生成与用户自身非常相似的用户化身的模型。类似地,身体扫描设备或另一个扫描设备可以捕捉用户的面部外貌,并将所捕捉的面部映射到用户的化身。可以应用三维计算机图形建模技术,以创建用户正在交谈或正在做出其他面部表情或者正在特定方向上移位其焦点的外貌。
视觉指示器也可以与另一个用户的化身相关联地呈现。例如,可以显示标识化身的用户名称或其他信息,或者可以显示指示用户的特殊状态(例如,用户是呈现者,或者是商店所有者,或者当前正在讲话)的标记物。附加地,在一些实施例中,仿真生成器可以在仿真中包括计算机控制的化身。这可以用于例如将“个人购物者”或收银员放置在商店中。用户控制和/或计算机控制的化身可以交换对象。在一些实施例中,仿真包括用户接口,其使用户能够将其自身的文件或内容上传到仿真中;这种文件/内容可以与仿真对象相关联并被显示在仿真中。仿真的并发用户还可能能够使用他们的相应VR设备的音频输入和输出接口而彼此听到;话音通信可以由VR平台来促进。
用户经由他们的化身可能能够根据仿真和资产的参数来与仿真中的一些或全部资产进行交互。例如,如图4的视觉表示400中所示,用户可能能够使用其(一个或多个)手化身402来拾起并检查(例如,旋转、以及拉近到视口以提高分辨率)仿真商店中的货架406上的任何产品404,但是,货架406自身可能太重而不能抬起,或者可能在其交互性参数中被标记为不可移动。下面描述了可能涉及VR平台的其他部件的附加交互,诸如使用户能够添加或购买资产。
VR平台的一些实施例可以通过提供管理用户的移动感知的仿真控制装置来部分或完全地解决用户运动病的问题。典型地,三维(例如,VR)仿真包括相对于用户平移静态的环境,并且用户的化身和关联的相机类的视野在环境内移动以生成不同有利点。在VR仿真中,用户可能必须行走或执行现实生活中的其他运动的移动,该其他运动的移动在仿真中被转化(例如,经由VR设备上的位置传感器)成化身的移动。附加地或可替换地,VR平台可以通过移动和/或缩放用户周围的仿真环境来仿真环境中的用户移动,而用户可以保持静态(即,站着不动)。这可以减弱或消除仿真中的平移移动与现实世界中的对应移动的缺乏或限制之间的感知不一致。用户可以提供输入(诸如,手势、按钮按压、语音命令等等)以遍及仿真环境而“移动”。该系统可以将用户输入处理成用户的化身的对应位置改变,且可以通过在三个空间维度中的任一个中平移仿真环境、旋转仿真环境和/或缩放向用户投射的图像来相应地更新所呈现的仿真。
仿真生成器可以分析任何合适用户输入以改变仿真的性质。移动可以由位置数据来表示,且可以更新用户在仿真内的位置和取向;附加地,移动可能导致与仿真对象的碰撞,作为响应,该仿真对象需要被移动或修改。来自控制器的输入(诸如,按钮或触摸板按压)如本领域已知的那样可以与特定动作相关联,并且仿真生成器可以分析动作的效果并相应地更新仿真。用于向用户呈现信息的用户接口也可以针对VR设备而优化。例如,信息的屏幕上或“抬头式”显示器已经被示出为中断到仿真中的沉浸。取而代之,可以经由向用户的音频输出,或者通过将信息呈送到用户将现实地感知为仿真环境的一部分的仿真对象上,来提供信息。
例如,在不同交互模式下,可见对象可以被“突出显示”在仿真中,使得用户知道可以选择它们或与它们进行交互。交互模式可能包括编辑固定物,其中仅仿真中的固定物可以被选择和重新布置。其他交互模式可能包括但不限于:产品放置、过道放置、VR环境呈现或共享的观看;本文中描述了这些交互模式的各种示例。该系统可以确定交互模式,该交互模式可以由针对仿真的元数据来标识和/或可以由可配置设置来确定,该可配置设置涉及仿真、涉及每个用户或涉及用户的某些组。例如,交互模式可以与用户类型相关联,该用户类型在查阅仿真中可以是“呈现者”或“查阅者”;交互模式可以在不同类型的用户之间不同,从而确定关于在仿真中操控对象而对关联用户的任何限制。当将对象呈送到与各种用户相关联的VR设备的观看视角时,该系统可以确定针对对应用户的交互模式;如果用户能够选择对象、操控对象或以其他方式与对象进行交互,则该系统可以将视觉表示修改为包括突出显示,该突出显示诸如是更明亮的颜色、光谱数据的不同渲染(例如,仿真环境照明的反射)、对象的边缘的特殊照明特征(例如,在观看视角中利用亮色线描出对象的轮廓)等等。
当针对仿真(无论是在仿真内部还是外部)而创建对象时,对象或其部件(例如,资产)可以被“加标签”,这是因为它们可能包括该系统为了根据关联对象类型(例如,固定物类型、资产类型等)生成对象而处理的信息。当根据仿真的交互模式来仿真对应对象时,这些标签可以应用或传达某个功能。也就是说,基于如何创建了对象以及应用了什么标签,不同对象在不同模式中可以是交互式的。例如,包括所设置的数目的货架以及所设置的长度、高度和货架间距的货架模块可以被放置在仿真中,且可以在仿真处于“固定物编辑”或“过道放置”交互模式中时而不是在仿真处于“产品放置”模式中时被操控。该系统可以将存在于仿真中的所有用户放置到相同交互模式中,或者可以将不同用户协调到不同交互模式中。在一个示例中,具有呈现者状态的用户可以是允许操控固定物(诸如,货架模块、冷冻模块、过道、结账台、照明固定物等)的交互模式中的唯一用户,而所有其他用户被放置在“查阅”模式中,其中他们仅可以彼此交互而不能改变VR环境,或者仅可以操控所放置的产品等等。
可以向特定用户、用户的子集或每个用户提供其他抬头式显示器。另一个示例是远距传送显示器,其允许用户在被约束到较小物理空间时导航广域的虚拟空间。例如,VR头戴式耳机可以在仿真内显示虚拟网格,以向用户提供他们可能接近物理边界的提示。在仿真组装期间,用户可以选择虚拟环境内的另一个位置,并被自动传送到那里而不移动通过物理空间。可以在显示器中示出他们将在VR环境内被传送到哪里的预览,以最小化移动长距离的震动效应,以及向用户提供确认他们在该环境内的新位置选择的选项。在仿真查阅期间,可以与多个用户共享VR环境。虚拟提示可以由呈现者放置在该环境内,例如,在随着呈现者移动通过空间时的兴趣点处。这些提示可以被用作查阅者的所建议的远距传送位置,或被用作沿供查阅者遵循的路径的标记物。仿真呈现者还可以使用提示以使用远距传送特征来召集查阅者。呈现者可以选择遍及该环境的位置以召集查阅者。可以向查阅者示出这些位置的预览,诸如在自我导向远距传送过程期间,以最小化运动病并确认远距传送。类似地,诸如键盘和鼠标之类的典型用户输入设备难以在VR仿真中使用,且还扰乱用户的沉浸,所以,命令和数据条目可以由用户话音来输入。
仿真生成器还可以在仿真内跟踪关于用户、资产和/或位置的使用数据(例如,在房间中花费的时间),且可以根据任何期望的应用来生成、存储并分析使用数据。可生成对应使用数据的用户移动或交互的非限制性示例包括:在一位置(诸如,房间)中花费的时间量;在视野聚焦在特定资产上或聚焦在特定标题上(即,以用于执行视觉注意力分析)的情况下花费的时间量;携带资产所花费的时间量;与资产进行交互(例如,拾起资产)的次数;化身通过商店的行进路径;化身与对象(例如,货架)的碰撞的频率;与资产相关联的产品的购买趋势;与另一个化身通信所花费的时间量;等等。
生成定制零售仿真
本VR平台的实现方式可以使用上面所描述的设备和仿真器生成过程,以生成专用于特定用户的购买趋势和产品兴趣的定制零售商店仿真,并在VR设备上向用户呈现仿真。在一些实施例中,“定制”导致了表示相关产品的仿真资产在仿真货架和架子上、仿真陈列柜中等等的显示。因此,用户使用VR设备可在例如图4-6的视觉表示中看到并与之交互的产品是针对与用户的相关度而选择的。图10A图示了可由一个或多个计算设备执行以生成定制零售商店仿真的部分或全部的示例性方法1000,该一个或多个计算设备包括单独或彼此协作的VR设备、一个或多个服务器以及其他计算设备。在步骤1002处,该设备可以收集确定和描述要在定制商店中显示的产品所需的任何数据。该数据可以是从一个或多个合适的源收集的,且可以包括:专用于用户的数据、专用于VR平台和/或其他关联服务的其他用户的数据、和/或与产品相关且从商家、产品营销服务、促销数据储存器以及其他第三方数据源获得的数据。
在步骤1004处,该设备可以编译、归一化并以其他方式分析数据,以便对所收集的数据的元素之间的关系进行识别和/或定量和/或定性;因此,用户的产品期望和偏好、购物行为等等的简档形成,并且该设备可以将与用户简档中的信息相关的任何产品与该用户相关联,以用于在定制商店中潜在地显示。图10B图示了如在步骤1004中那样编译数据的示例性方法1030。在步骤1032处,该设备可以创建用户简档,或者可以访问现有用户简档(如果有的话)。在步骤1034处,该设备可以通过对所收集的数据之间的关系进行建模来确定用户偏好,该所收集的数据可以包括已经处于用户简档中的数据(如果用户简档被访问的话)。在步骤1036处,该设备可以将用户简档中的用户偏好和其他信息与针对一个或多个产品的所收集的销售和营销数据进行相关。在步骤1038处,该设备可以将这些相关性存储在用户简档中。
返回到图10A,在步骤1006处,该设备可以识别要显示在定制商店仿真中的产品。该产品可以从在步骤1004中确定的数据关系识别,且可以进一步从在仿真或另一个购物交易期间收集的实时数据识别。图10C图示了用于如在步骤1006中那样识别产品的示例性方法1040。在步骤1042处,该设备可以接收指定购物旅程类型的用户输入或用户简档数据元素,这可以确定与用户的当前偏好相关的产品的参数。在步骤1044处,该设备可以创建或取回购物简档,诸如在图10A的步骤1004处生成的用户简档。在步骤1046处,该设备可以将购物简档与购物旅程的类型进行比较,并且在步骤1048处,该设备可以识别与用户和购物旅程的类型两者相关的产品。在步骤1050处,该设备可以可选地将所识别的产品的集合与描述当前产品促销的一个或多个数据结构进行比较,以便确定促销产品是应当被添加到所识别的产品的集合还是应当从所识别的产品的集合中移除。
返回到图10A,在步骤1008处,该设备可以接收针对所识别的产品的资产数据。资产数据可以包括在仿真内生成产品的视觉表示所需的视觉数据和其他数据。在步骤1010处,该设备可以生成商店环境1010,诸如通过创建计算机图形对象(例如,关于所提供或所生成的商店地图)、程序指令以及对在其中用户的化身将能够移动并观察的空间进行建模的其他仿真参数。在步骤1012处,该设备可以生成资产对象,该资产对象是用户在仿真中可看到并与之交互的仿真对象,且可以包括每个所识别的产品的一个或多个实例。在步骤1014处,该设备可以在所生成的商店环境内布置资产对象,这完成了所生成的仿真。在步骤1016处,该设备可以将仿真数据存储在数据储存器中和/或可以经由VR设备向用户呈现仿真。
图11A图示了VR平台1100的示例性部分系统架构,VR平台1100生成上面所描述的用于在VR显示设备1150(例如,头戴式耳机)上显示的定制零售商店仿真。计算设备1102(其可以是一个设备或多个协作设备)生成仿真数据,并将它递送到VR显示设备1150。在一些实施例中,计算设备1102可以是包括VR显示设备1150的VR设备的计算设备(即,计算设备1102可以是计算设备140,并且VR显示设备1150可以是图1A的头戴式耳机102)。附加地或可替换地,计算设备1102可以是如下面进一步描述的远程服务器或其他远程计算设备。数据图1104图示了在仿真的生成期间(例如,在执行图10A的方法1000时)由计算设备1102程序性地生成的中间数据。利用来自一个或多个商家系统1120的用户数据和/或销售数据来编译、归一化并以其他方式分析来自用户数据储存器1114的一个或多个用户的用户数据可以产生经编译的数据1106。经编译的数据1106可以通过对针对用户、销售等的数据之间的关系进行定量来提供识别相关产品的基础。例如,数据结构1160图示了用户与从提供销售和促销数据的商家和/或其他第三方获得的数据之间的关系。
使用经编译的数据1106和来自商家系统1120或其他系统的潜在地附加的产品数据,计算设备可以确定用户相关产品1108。计算设备1102可以使用相关产品1108以对资产数据储存器1116中的关联资产数据进行定位并生成资产对象1110。资产对象1110可以被放置在仿真环境中以产生仿真数据1112,计算设备1102可以直接地或经由一个或多个其他计算设备将仿真数据1112递送到VR显示设备1150。计算设备1102从VR显示设备1150和/或VR设备接收反馈,该反馈表示用户在仿真内的动作。示例性反馈包括如上面所描述的跟踪数据和/或交易数据。在仿真期间生成的数据(包括仿真数据1112、对所存储的仿真数据的修改、记录用户动作的数据、购买数据等等)可以被导出到一个或多个关联的数据储存器1118,该一个或多个关联的数据储存器1118可以包括用户数据储存器1114、针对所生成的仿真的数据储存器以及本文中所描述的其他数据储存器。
图11B图示了资产数据储存器1116中的资产的示例性数据结构1162。资产包含确定如何向用户显示该资产的某个结构信息。这包括但不限于:图像1140、几何形状1141、空间数据1142和表示资产形状的资产尺寸1143、以及任何资产装配或动画数据和细节级别图像。该信息表示资产1130的结构部分。存在表示资产1132的智能的资产元数据的另一个集合。这指代已知属性1144(像品牌和类别)以及可从其他数据源、营销库、第三方或用户自身相关或发现的非结构化属性1145。资产的完整图片包含所有这些元素:结构和智能这两者。
诸如图10A的方法1000之类的商店生成方法可以在用户请求对定制商店仿真的访问之前执行,使得仿真数据可以被存储且然后被快速取回以用于在被请求时呈送到VR设备。仿真数据可以被周期性地更新或在一事件(例如,使用用户的账户的新购买)时更新,使得所显示的产品与用户的当前兴趣协调。参考图12A,当用户请求对定制商店仿真的访问时,VR设备和/或一个或多个协作服务器或其他计算设备可以执行向用户呈现仿真的方法1200。用户登录到VR平台(步骤1202),且在步骤1204处选择已经生成或可从用户简档数据生成的定制商店或“房间”,或者选择引导针对用户的当前购物需要而定制的新零售商店仿真的生成的产品或类别。在步骤1206处,该设备向用户的VR设备呈送关联的或所生成的定制商店仿真,并且用户观看在仿真中表示的产品并与其进行交互(步骤1208)。用户可以拾起物品(即,资产对象),并将它返回到货架或将它放在用户的购物篮中(步骤1210)。当结束购物时,用户可以执行结账离开过程(步骤1212),诸如通过去往仿真商店中的收银机。
图12B图示了另一种方法1250,其中同时向多个用户呈现仿真。用户登录到VR平台(步骤1252),并且在步骤1254处,用户同意一起进入定制商店仿真。在步骤1256处,该设备如上面描述的那样向每个用户的VR设备呈送关联的定制商店仿真,并且用户均从他们自身的有利点观看仿真(步骤1258),并与在仿真中表示的产品和其他用户进行交互(步骤1260)。用户可以拾起物品(即,资产对象),并将它返回到货架或将它放在用户的购物篮中(步骤1262)。当结束购物时,每个用户可以执行结账离开过程(步骤1264),诸如通过去往仿真商店中的收银机。
VR平台架构
图13和14图示了用于实现目前描述的VR平台的示例性一般系统架构。参考图13,VR平台1300可以包括“独立的”VR设备1302(例如,图1A-B的VR设备100和图2的200),其执行上面所描述的数据取回和导出以及仿真生成过程。所取回、分析、生成、导出等的数据可以存储在VR设备1302可访问的一个或多个数据储存器中。一般如本文中所使用,数据储存器可以是VR设备1302可自由或安全访问或者可使VR设备1302可自由或安全访问的任何信息储存库。合适的数据储存器包括但不限于:数据库或数据库系统,其可以是本地数据库、在线数据库、桌面数据库、服务器侧数据库、关系数据库、分层数据库、网络数据库、对象数据库、对象关系数据库、关联数据库、面向概念的数据库、实体属性值数据库、多维数据库、半结构化数据库、星型模式数据库、XML或JSON数据对象数据库、文件、文件集合、电子表格、或者位于计算机、客户端、服务器或本领域中已知或未来开发的任何其他储存设备上的其他数据储存装置;文件系统;以及电子文件(诸如,网页、电子表格和文档)。每个数据储存器可以是临时的或永久实现的。
平台1300中的数据储存器可以包括在特定VR设备1302操作中使用的具体信息。更具体地,数据储存器可以包括若干个分离的数据表、数据库、数据文档、动态数据储存方案和/或其他数据储存机构以及用于存储与本公开的特定方面有关的数据的介质,该与本公开的特定方面有关的数据包括但不限于本文中所描述的数据结构和用户接口数据。应当理解的是,可以存在可能需要被存储在数据储存器中的许多方面,诸如可被存储在数据储存器中的任何适当机构中的用户信息、访问权信息以及商家专有数据。数据储存器可以通过与其相关联的逻辑而可操作成从VR设备1302接收指令,并响应于此而获得、更新或以其他方式处理数据。VR设备1302可以响应于接收到的指令而提供静态数据、动态数据或静态和动态数据的组合。动态数据(诸如,在web日志(博客)、web或移动应用和应用接口、电子商务网站和接口、销售点数据生成系统、新闻服务和其他应用中使用的数据)可以由如所描述的服务器侧结构化语言生成,或者可以由VR设备1302、VR平台1300中的其他VR设备1352、商家数据系统、购买数据汇总系统、交易处理系统以及其他系统提供。
VR平台1300可以包括地图数据储存器1310,其存储表示商店地图的数据。VR设备1302可以从地图数据储存器1310取回商店地图,以便基于商店地图生成环境仿真。VR设备1302还可以将新的或经更改的商店地图存储在地图数据储存器1310中。VR平台1300可以包括资产数据储存器1312,其存储涉及可如上面所描述的那样仿真的资产的数据和元数据。VR设备1302可以访问资产数据储存器1312,以搜索适当的资产并取回它们以用于结合到仿真中。
VR平台1300可以包括用户数据储存器1314,其维持专用于VR设备1302的特定用户的数据。这种用户数据可以包括识别如上面所描述的信息、个人和/或专业细节、以及用于利用各种商家、社交联网服务和其他系统访问用户的帐户的登录或其他授权信息。这种数据可以进一步包括表示用户的过去购买、VR设备1302的使用、与其他用户的通信以及可在生成仿真时有用的其他可追踪活动的原始或经处理的历史数据。附加地,用户数据可以包括与以下各项有关的用户供给的偏好:仿真向用户的呈现、和/或具体资产、特定类型的资产、或VR设备1302应当评估以包括在仿真中的具有特定特性的资产。VR设备1302可以在由用户授予的权限下访问用户数据储存器1314,且可以如上面所描述的那样取回用户数据并在用户数据上进行操作。
VR平台1300可以包括一个或多个销售数据储存器1316,该一个或多个销售数据储存器1316包含针对与或可能与用于仿真的资产相关联的产品的销售数据。销售数据可以由一个或多个商家或由数据汇总系统来提供,或者可以由VR平台1300通过其他手段获得。销售数据可以由VR设备1302使用以识别趋势,将购买信息与其他信息(像产品放置和用户参与)相关联,并执行与如上面所描述的那样生成仿真有关的其他处理。与此相关,VR平台1300可以包括一个或多个营销数据储存器1318,其包含描述营销努力、市场渗透以及与特定产品有关的其他绩效信息的附加的经汇总的信息。营销数据可以包括与产品、类别或品牌促销策略或策略历史和有效性有关的信息。随着针对实际购物行为和结果而测量出有效性,可以不时地更新营销数据储存器,以便变得更加有效。
VR平台1300还可以包括仿真数据储存器1320,其存储与VR设备1302已经生成的仿真有关的信息。这种先前生成的仿真数据可以以本文中所描述的任何方式使用,诸如,以执行可彼此比较的零售商店环境设计的迭代,以确定针对实体零售商店的优化布局。VR设备1302可以将所生成的仿真存储在仿真数据储存器1320中,并按照需要而取回它们。
VR平台1300还可以包括一个或多个计算设备(诸如,服务器),其与VR设备1302远离并与VR设备1302协作以执行某些功能。特别地,每个计算设备可以包括一个或多个处理器和设备逻辑,该设备逻辑在被(一个或多个)处理器执行时将计算设备配置成执行期望的操作。在一个实施例中,VR平台1300可以包括话音辨别服务器1330,以用于辨别由VR设备1302传输的音频文件中的话音,并将话音到可操作格式(诸如,文本或已知程序指令(即,命令))的转化导出回到VR设备1302。在一个实施例中,VR平台1300可以包括交易服务器1340,以用于促进由仿真内的用户动作发起的购买和其他交易。VR设备1302可以将描述期望交易的交易数据传输到交易服务器1340,并且交易服务器1340可以与其他系统(诸如,商家库存系统和支付处理系统)进行交互,以执行交易或识别交易中的差错。VR平台1300还可以包括同步服务器1350,其维持在相同仿真上操作的VR设备1302与其他VR设备1352之间的同步仿真数据。
参考图14,分布式VR平台1400可以包括一个或多个中央服务器1402,其执行数据收集、处理和导出,并进一步生成原始仿真数据。中央服务器1402然后将原始仿真数据分发到VR设备1450、1452、1454以用于呈送到相应的显示器。中央服务器1402可以是服务器计算机或互连服务器计算机(诸如,web服务器、应用服务器、应用平台、虚拟服务器、云数据服务器等等)的系统、个人计算机、膝上型计算机、平板计算机、电子阅读器、智能电话、个人数据助理、机顶盒、数字媒体播放器、微控制台、家庭自动化系统、或者具有中央处理单元(CPU)、微处理器或其他合适处理器的类似计算设备。应当理解的是,除非以其他方式从上下文清楚表明,被描述为由单个设备执行的操作可以由多个设备共同执行,该多个设备可以形成分布式和/或虚拟系统。因此,可以存在可被链住或以其他方式配置的同构或变化的类型、层或其他元素、过程或部件的若干个协作服务器1402,其可以交互以执行诸如从对中央服务器1402来说本地可访问或通过网络远程可访问的适当数据储存器获得数据之类的任务。特别地,VR平台1400可以包括并且中央服务器1402可以访问地图数据储存器1410、资产数据储存器1412、用户数据储存器1414、销售数据储存器1416、营销数据储存器1418和仿真数据储存器1420中的一个或多个,如上面关于图13的数据储存器1310-1320所描述。
中央服务器1402可以包括任何适当的硬件、软件和固件,以用于按照需要而与数据储存器1410-1420和VR设备1450-1454通信,以执行针对VR设备1450-1454的一个或多个仿真应用的方面,处置针对应用的数据访问和设备逻辑中的一些或全部。中央服务器1402可以包括用于执行上面所描述的过程的若干个模块,包括但不限于:数据纳入模块1430,用于从数据储存器1410-1420取回生成仿真所需的任何数据并用于根据仿真应用来处理这种数据;数据导出模块1432,用于存储所生成和修改的数据(诸如,将仿真数据存储在仿真数据储存器1420中);仿真生成器1434,用于生成如上面所描述的原始仿真数据并将仿真数据传输到VR设备1450-1454;同步模块1436,用于在呈现相同仿真的多个VR设备1450-1454之间同步仿真数据;话音辨别模块1438,用于从包含话音的音频输入中提取命令和其他信息;以及交易处理模块1440,用于创建并传输针对在仿真中发起的交易的交易数据。
附加地,中央服务器1402或另一个计算设备可以使仿真数据和其他所生成的数据对其他设备来说可用并且在其他服务中可用;这包括以任何形式分发数据或者可替换地向外部设备和服务提供对数据储存器1410-1420中的一个或多个的访问。在一些实施例中,应用编程接口(API)1442(例如,代表性状态转移(“REST”)API)可以被配置成实现或促进由另一个计算设备或系统对内容的访问。例如,一个或多个商家系统1460可以使用API以向VR平台1400提供产品数据、资产数据、销售和/或营销数据、用户账户和历史数据、商店地图、所生成的仿真以及其他数据。
中央服务器1402典型地将包括操作系统,该操作系统提供用于该服务器的一般管理和操作的可执行设备逻辑,并且中央服务器1402典型地将包括存储指令的计算机可读储存介质(例如,硬盘、随机存取存储器、只读存储器等),该指令在由服务器的处理器执行时允许服务器执行其所意图的功能。用于服务器的操作系统和一般功能的合适实现方式是已知的或商业可用的,并且是本领域普通技术人员(特别是根据本公开)容易地实现的。在一个实施例中,环境是利用若干个计算机系统和部件的分布式和/或虚拟计算环境,该若干个计算机系统和部件使用一个或多个计算机网络或直接连接经由通信链路而互连。
已经根据一个或多个优选实施例描述了本发明,并且应当领会的是,除了明确声明的那些等同物、可替换方案、变型和修改之外,许多等同物、可替换方案、变型和修改是可能的且在本发明的范围内。

Claims (20)

1.一种用于生成零售商店的虚拟现实(VR)仿真的设备,所述设备包括:
一个或多个电子数据储存器,其单独地或组合地存储以下各项:
地图数据,包括描述所述零售商店的内部结构的第一商店地图,所述内部结构包括占地面积、墙壁和门;
资产数据,描述用于组织所述零售商店的多个布局元素和在所述零售商店中销售的多个产品;以及
商店平面图数据,至少描述所述多个布局元素和所述多个产品相对于所述第一商店地图的第一布置;以及
与所述一个或多个电子数据储存器通信并与沉浸式第一VR显示设备通信的VR平台,所述沉浸式第一VR显示设备将仿真数据变换成所述VR仿真并向所述第一VR显示设备的第一用户呈现所述VR仿真,使得用户感知到以人类尺度表示所述零售商店的零售商店环境,所述VR平台包括执行计算机实现指令的一个或多个硬件计算设备,所述计算机实现指令在执行时使所述VR平台进行以下操作:
获得对所述第一商店地图、所述商店平面图数据和所述资产数据的访问;
基于所述第一商店地图来生成仿真商店环境;
从所述资产数据生成多个资产对象,所述多个资产对象包括在所述第一布置中引用的所述多个布局元素和所述多个产品中的每一个的视觉表示;
根据所述第一布置将所述多个资产对象插入到所述仿真商店环境中,以产生所述仿真数据;
将所述仿真数据发送到所述第一VR显示设备;
从所述第一VR显示设备接收用户输入,所述用户输入由所述第一用户在由所述第一VR显示设备对所述VR仿真的呈现期间提供;
确定所述用户输入指示所述多个资产对象中的一个或多个的修改;
基于所述修改来修改所述第一布置以产生所述多个布局元素和所述多个产品相对于所述第一商店地图的第二布置;以及
将所述第二布置存储在所述一个或多个电子数据储存器中作为所述商店平面图数据。
2.如权利要求1所述的设备,其中:
所述一个或多个电子数据储存器进一步单独地或组合地存储用户数据,所述用户数据标识所述第一用户和与所述VR平台通信的沉浸式第二VR显示设备的第二用户;
所述多个资产对象包括在第一配置中表示所述多个布局元素中的第一布局元素且位于所述第一商店地图上的第一位置处的第一布局对象;以及
所述一个或多个硬件计算设备进一步执行所述指令以使所述VR平台进行以下操作:
将所述仿真数据发送到所述第二VR显示设备;
使所述第一VR显示设备和所述第二VR显示设备将所述仿真数据的所述VR仿真显示为经同步的仿真,其中所述第一用户和所述第二用户体验相同的零售商店环境;
在修改所述第一布置之前,确定所述用户输入包括所述修改由所述第一用户和所述第二用户批准的指示;以及
基于所述用户输入来修改所述第一布置:
确定所述修改将所述第一布局对象改变成第二配置和第二位置中的一个或全部两者;以及
生成所述第二布置以将所述第一布局对象包括在所述第二配置和所述第二位置中的一个或全部两者中。
3.如权利要求2所述的设备,其中所述一个或多个硬件计算设备进一步执行所述指令以使所述VR平台进行以下操作:
确定所述用户数据将所述第一用户标识为呈现者并将所述第二用户标识为观看着;以及
在接收到所述用户输入之前:
从所述第二VR显示设备接收观看者用户输入,所述观看者用户输入包括所述修改;以及
使所述第一VR显示设备向所述第一用户显示批准由所述第二用户经由所述观看者用户输入提出的修改的提示,所述用户输入包括所述第一用户对所述提示的响应。
4.如权利要求1所述的设备,其中:
所述一个或多个电子数据储存器单独地或组合地被配置成存储描述用户与所述零售商店环境的交互的使用数据;以及
所述一个或多个硬件计算设备进一步执行所述指令以使所述VR平台进行以下操作:
使所述第一VR显示设备生成描述所述第一用户与所述多个资产对象中的一个或多个目标资产对象在所述VR仿真中的每个交互的第一使用数据,所述第一使用数据包括所述用户输入,其中所述用户输入包括以下各项中的一个或多个:所述第一用户与所述一个或多个目标资产对象中的每一个进行交互的次数;所述第一VR显示设备向所述第一用户显示包括所述一个或多个目标资产对象中的每一个的视野所花费的时间量;以及指示所述第一用户通过与所述一个或多个目标资产对象进行交互而发起了所述多个产品中的一个或多个的购买的信息;
接收所述第一使用数据;
将所述第一使用数据与存储在所述一个或多个电子数据储存器中的使用数据相结合,以产生汇总使用数据;以及
基于所述汇总使用数据来确定所述修改包括改变在所述第一布置中针对所述一个或多个目标资产对象中的一个或多个而识别的一个或多个性质。
5.如权利要求4所述的设备,其中:
所述一个或多个电子数据储存器单独地或组合地被配置成存储标识所述第一用户并描述所述第一用户的一个或多个购物偏好的用户数据;以及
所述一个或多个硬件计算设备进一步执行所述指令以使所述VR平台进行以下操作:
比较所述汇总使用数据和所述用户数据,以从所述多个产品确定与所述第一用户的所述一个或多个购物偏好相关联的多个优选产品;
产生所述第二布置,使得基于所述第二布置生成的所述VR仿真中的多个资产对象包括来自所述多个产品的仅所述多个优选产品的表示。
6.如权利要求1所述的设备,其中所述一个或多个硬件计算设备进一步执行所述指令以使所述VR平台进行以下操作:
从针对所述多个产品中的每一个以及所述多个布局元素中的每一个的资产数据生成对应3D模型,以产生多个3D模型;
将所述多个3D模型发送到所述第一VR显示设备;
使所述第一设备显示设备在显示所述VR仿真时进行以下操作:
使所述第一用户能够选择用于在所述多个布局元素中的第一布局元素的第一视觉表示上显示的所述多个产品中的一个或多个;
从所述第一用户接收所述多个产品中的第一产品的选择;
确定所述第一产品的视觉表示是所述多个3D模型中的第一3D模型;
将第一新资产对象插入到所述VR仿真中,所述第一新资产对象作为所述第一3D模型而向所述用户表示;
使所述用户能够将所述第一新资产对象放置在所述第一布局元素上的期望位置中,所述期望位置与所述第一商店地图上的新资产位置相对应;以及
将包括所述第一产品和所述新资产位置的用户输入发送到所述VR平台。
7.一种用于生成零售商店的虚拟现实(VR)仿真的系统,所述设备包括多个电子数据储存器以及与所述多个电子数据储存器通信并与沉浸式第一VR显示设备通信的一个或多个硬件计算设备,所述沉浸式第一VR显示设备将仿真数据变换成所述VR仿真并向所述第一VR显示设备的用户呈现所述VR仿真,使得所述用户感知到以人类尺度表示所述零售商店的零售商店环境,所述一个或多个硬件计算设备执行计算机实现指令,所述计算机实现指令在执行时使所述一个或多个硬件计算设备进行以下操作:
从所述多个电子数据储存器中的一个或多个接收以下各项:
资产数据,与多个产品和被配置成显示所述多个产品中的一个或多个的多个布局对象相关联;以及
针对所述零售商店的商店平面图,所述商店平面图包括至少商店地图以及所述多个布局对象的相对于所述商店地图的布局;
基于所述资产数据获得多个布局对象模型,所述多个布局对象模型中的每一个包括所述多个布局对象的一个的3D计算机图形模型;
基于所述商店平面图生成所述仿真数据,其中所述仿真数据包括仿真商店环境,所述仿真商店环境包括所述多个布局对象模型并被配置成显示所述多个产品的视觉表示;以及
将所述仿真数据发送到所述第一VR显示设备。
8.如权利要求7所述的系统,其中为了生成所述仿真数据,所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
确定所述商店平面图与所述多个布局对象模型有关地描述用于显示的所述多个产品的布置;
基于所述资产数据获得一个或多个资产对象,所述一个或多个资产对象中的每一个包括所述一个或多个所选产品中的一个的3D计算机图形模型;以及
根据所述商店平面图将所述一个或多个资产对象插入到所述仿真商店环境中。
9.如权利要求8所述的系统,其中为了获得所述一个或多个资产对象,所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
在与所述一个或多个所选产品中的第一所选产品相关联的资产数据中识别针对所述第一所选产品的包装数据,所述包装数据包括包装类型、尺寸集合以及一个或多个图像,所述一个或多个图像表示所述第一所选产品的对应3D计算机图形模型的每个可观看侧;
生成具有由所述包装类型标识的形状的空白3D模型;
根据所述尺寸集合来缩放所述空白3D模型以产生经缩放的3D模型;
将所述一个或多个图像呈送到经缩放的3D模型上,以产生所述第一所选产品的所述对应3D计算机图形模型;以及
创建所述一个或多个资产对象中的第一资产对象,所述第一资产对象包括所述第一所选产品的所述对应3D计算机图形模型以及由所述第一VR显示设备使用的资产标识符,以实现由所述用户在所述VR仿真内与所述第一资产对象的交互。
10.如权利要求8所述的系统,其中所述多个数据储存器中的一个是用户数据储存器,其包括标识所述系统的第一用户并描述所述第一用户的一个或多个属性的用户数据,所述一个或多个硬件设备进一步与多个外部数据储存器通信,并且所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
从所述用户数据储存器接收所述用户数据;
使用所述用户数据从所述多个外部数据储存器中的一个或多个获得描述以下各项中的一个或多个的购买数据:
所述多个产品的先前销售;
由所述第一用户对所述多个产品中的一个或多个的购买;
所述系统的具有所述一个或多个属性的其他用户的购买行为;以及
针对所述多个产品中的一个或多个的营销信息;
识别所述用户数据与所述购买数据之间的一个或多个关系以产生用户简档,所述用户简档与所述第一用户相关联并描述所述用户的一个或多个购物偏好;
从所述多个产品并且至少基于所述用户简档确定与所述一个或多个购物偏好相关的多个优选产品;以及
创建包括所述多个优选产品的显示的布置。
11.如权利要求10所述的系统,其中所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
使所述第一VR显示设备生成描述所述第一用户与所述一个或多个资产对象中的第一资产对象在所述VR仿真中的每个交互的第一使用数据,所述第一使用数据包括以下各项中的一个或多个:所述第一用户与所述第一资产对象进行交互的次数;所述第一VR显示设备显示包括所述第一资产对象的视野所花费的时间量;以及指示所述第一用户通过与所述第一资产对象进行交互而发起了所述优选产品中的一个或多个的购买的信息;
接收所述第一使用数据;以及
将所述第一使用数据与所述用户简档相结合。
12.如权利要求8所述的系统,其中所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
将所述仿真数据发送到与所述一个或多个硬件计算设备通信的沉浸式第二VR显示设备;
使所述第一VR显示设备和所述第二VR显示设备将所述仿真数据的所述VR仿真显示为经同步的仿真,其中所述第一VR显示设备的第一用户和所述第二VR显示设备的第二用户体验相同的零售商店环境;
从所述第一VR显示设备和所述第二VR显示设备中的一个或全部两者接收描述与所述VR仿真的一个或多个用户交互的反馈数据;
确定所述反馈数据描述对所述多个布局对象的布局以及所述一个或多个资产对象的布置中的一个或全部两者的一个或多个修改;以及
修改所述商店平面图以反映所述一个或多个修改。
13.如权利要求12所述的系统,其中所述一个或多个硬件计算设备进一步执行所述指令,以使所述一个或多个硬件计算设备在修改所述商店平面图之前确定所述反馈数据包括所述一个或多个修改由所述第一用户和所述第二用户批准的指示。
14.如权利要求12所述的系统,其中所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
从所述多个电子数据储存器获得与所述第一用户和所述第二用户相关联的用户数据;
确定所述用户数据将所述第一用户标识为呈现者并将所述第二用户标识为观看者;以及
在修改所述商店平面图之前,确定所述反馈数据包括所述第二用户的交互生成了所述一个或多个修改的第一指示和所述一个或多个修改由所述第一用户批准的第二指示。
15.如权利要求12所述的系统,其中所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
将所述仿真数据发送到与所述一个或多个硬件计算设备通信的第三显示设备;
使所述第三显示设备将所述仿真数据的所述VR仿真与所述第一VR显示设备和所述第二VR显示设备一起显示为经同步的仿真;
生成均包括用户标识符和用户图形表示的多个身份令牌,所述多个身份令牌中的每个身份令牌与包括所述第一用户、所述第二用户和所述第三用户的多个用户中的对应用户相关联;
确定所述第一用户正在使用所述第一VR显示设备并且所述第二用户正在使用所述第二VR显示设备;
将所述多个身份令牌中的标识所述第一用户的第一令牌和标识所述第二用户的第二令牌发送到所述第三显示设备;以及
使所述第三显示设备将界面与所述VR仿真一起显示,所述界面指示所述第一用户和所述第二用户在经同步的仿真中是活跃的,且包括所述第一令牌和所述第二令牌的对应图形表示。
16.如权利要求12所述的系统,其中所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
确定所述第一用户正在经由所述第一VR显示设备来访问所述系统并且所述第二用户正在经由所述第二VR显示设备来访问所述系统;以及
在将所述仿真数据发送到所述第一VR显示设备和所述第二VR显示设备之前进行以下操作:
生成视觉地表示所述第一用户的第一化身对象;
生成视觉地表示所述第二用户的第二化身对象;以及
将所述第一化身对象和所述第二化身对象插入到所述仿真数据中,以使所述第一用户和所述第二用户能够在经同步的仿真中看到彼此。
17.如权利要求7所述的系统,其中所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
生成使所述用户能够选择要在所述零售商店环境中视觉地表示的所述多个产品中的任一个的用户接口对象;
将所述用户接口对象插入到所述仿真环境中以生成所述仿真数据;
在由所述第一VR显示设备将所述VR仿真呈现给所述VR显示设备的第一用户期间进行以下操作:
使所述第一VR显示设备响应于请求激活的第一用户输入而激活所述用户接口对象;
从所述第一VR显示设备接收第二用户输入;
确定所述第二用户输入包括由所述第一用户使用所述用户接口对象对所述多个产品中的第一产品的选择;
基于与所述第一产品相关联的资产数据获得包括所述第一产品的3D计算机图形模型的第一资产对象;
将所述第一资产对象发送到所述第一VR显示设备;
使所述第一VR显示设备将所述第一资产对象包括在所述VR仿真中,并使所述第一用户能够将用于显示的所述第一资产对象定位在所述多个布局对象中的第一布局对象上;
从所述第一VR显示设备接收第三用户输入;
确定所述第三用户输入标识所述第一资产对象相对于所述第一布局对象的位置;以及
更新所述商店平面图以指示所述第一布局对象在所述位置处显示所述第一产品的一个或多个实例。
18.如权利要求7所述的系统,其中所述多个电子数据储存器存储多个话音标签,所述多个话音标签中的每一个描述多个语音命令中的对应语音命令,并且其中所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
从所述第一VR显示设备接收用户输入;
确定所述用户输入包括所述第一用户的话音;
确定所述话音标识所述多个语音命令中的搜索命令并进一步识别一个或多个搜索词;
确定所述一个或多个搜索词标识与所述多个产品相关联的多个产品类型中的第一产品类型;
从所述多个产品识别具有所述第一产品类型的多个所选产品;
基于与所述多个所选产品相关联的资产数据来获得多个资产对象,所述多个资产对象中的每一个包括所述多个所选产品中的一个的3D计算机图形模型;以及
将所述多个资产对象发送到所述第一VR显示设备。
19.如权利要求7所述的系统,其中所述资产数据进一步与多个营销对象相关联,所述多个营销对象描述所述零售商店的标牌,并且其中为了生成所述仿真数据,所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
使用所述资产数据来获得所述多个产品和所述多个营销对象的图形模型;以及
基于所述商店平面图将所述图形模型插入到所述仿真商店环境中,使得所述VR仿真向所述第一用户呈现所述零售商店环境,作为能够代替仿真所述零售商店的实体模型商店的所组装的商店环境。
20.如权利要求7所述的系统,其中所述一个或多个硬件计算设备进一步执行所述指令以使所述一个或多个硬件计算设备进行以下操作:
接收指示第一视角或第二视角的选择的用户输入;以及
响应于所述用户输入,使所述第一VR显示设备基于所述选择来从所述第一视角或所述第二视角显示所述VR仿真,其中:
所述第一视角包括以所述人类尺度表示的所述零售商店环境的视野,其中使所述第一用户能够以第一人称视角遍及所述零售商店环境移动所述视野;以及
所述第二视角包括所述零售商店环境的模型视图,其中从上面示出表示所述商店平面图的整个仿真商店环境。
CN201780033924.3A 2016-04-01 2017-04-03 用于零售环境仿真的虚拟现实平台 Pending CN109643527A (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201662317199P 2016-04-01 2016-04-01
US62/317199 2016-04-01
US201662319243P 2016-04-06 2016-04-06
US201662319186P 2016-04-06 2016-04-06
US62/319186 2016-04-06
US62/319243 2016-04-06
PCT/US2017/025787 WO2017173457A1 (en) 2016-04-01 2017-04-03 Virtual reality platform for retail environment simulation

Publications (1)

Publication Number Publication Date
CN109643527A true CN109643527A (zh) 2019-04-16

Family

ID=59965321

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780033924.3A Pending CN109643527A (zh) 2016-04-01 2017-04-03 用于零售环境仿真的虚拟现实平台

Country Status (6)

Country Link
US (2) US10943291B2 (zh)
EP (1) EP3424039A4 (zh)
CN (1) CN109643527A (zh)
AU (1) AU2017240823B2 (zh)
CA (1) CA3023644A1 (zh)
WO (1) WO2017173457A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110174951A (zh) * 2019-05-30 2019-08-27 郑州爱普锐科技有限公司 基于vr实训设备的人物动作识别方法
CN110348198A (zh) * 2019-06-21 2019-10-18 华为技术有限公司 仿真对象的身份识别方法、相关装置及系统
CN111857330A (zh) * 2020-06-04 2020-10-30 嘉兴惠风智能科技有限公司 零售货品陈列与展示虚拟仿真智能交互系统及其交互方法
CN112184356A (zh) * 2019-07-03 2021-01-05 苹果公司 指导式零售体验
CN114638579A (zh) * 2022-04-01 2022-06-17 机科发展科技股份有限公司 可视化库存动态数据显示组件、方法、存储器、电子设备

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11094002B1 (en) * 2016-09-15 2021-08-17 Catherine Allin Self-learning aisle generating system and methods of making and using same
US10733149B2 (en) * 2017-05-18 2020-08-04 Nec Corporation Template based data reduction for security related information flow data
US11158126B1 (en) * 2017-06-30 2021-10-26 Apple Inc. Redirected walking in virtual reality environments
US10970545B1 (en) * 2017-08-31 2021-04-06 Amazon Technologies, Inc. Generating and surfacing augmented reality signals for associated physical items
KR102595790B1 (ko) * 2018-01-26 2023-10-30 삼성전자주식회사 전자 장치 및 그의 제어방법
WO2019178276A1 (en) * 2018-03-13 2019-09-19 Ronald Winston Virtual reality system and method
US10650239B2 (en) 2018-07-25 2020-05-12 At&T Intellectual Property I, L.P. Context-based object location via augmented reality device
US10699488B1 (en) * 2018-09-07 2020-06-30 Facebook Technologies, Llc System and method for generating realistic augmented reality content
US10970898B2 (en) * 2018-10-10 2021-04-06 International Business Machines Corporation Virtual-reality based interactive audience simulation
CN109857656A (zh) * 2019-01-18 2019-06-07 深圳壹账通智能科技有限公司 基于测试的适配方法、装置、计算机设备及存储介质
US10847007B1 (en) * 2019-07-03 2020-11-24 Thembisa Felix Interactive monitoring system
CN110415037A (zh) * 2019-07-30 2019-11-05 赵超 一种三维投影全息全景影像的虚拟生活娱乐及购销方法
CN110705063A (zh) * 2019-09-20 2020-01-17 深圳市酷开网络科技有限公司 一种模拟震动方法、系统及存储介质
US20210294940A1 (en) * 2019-10-07 2021-09-23 Conor Haas Dodd System, apparatus, and method for simulating the value of a product idea
CN111178306B (zh) * 2019-12-31 2024-01-26 维沃移动通信有限公司 一种显示控制方法及电子设备
US11095855B2 (en) * 2020-01-16 2021-08-17 Microsoft Technology Licensing, Llc Remote collaborations with volumetric space indications
US20210358023A1 (en) * 2020-05-15 2021-11-18 Lindsy D. Melcher Electronic storefront system and a method of providing an electronic storefront
US11307651B2 (en) * 2020-06-30 2022-04-19 At&T Intellectual Property I, L.P. Immersion control system for extended reality systems
US11405484B2 (en) 2020-11-30 2022-08-02 At&T Intellectual Property I, L.P. Variable-intensity immersion for extended reality media
CN113034232B (zh) * 2021-03-26 2022-10-04 青岛博芬智能科技股份有限公司 用于模拟酒柜的方法、装置和显示终端
ES2926914A1 (es) * 2021-04-27 2022-10-31 Olalla David Rodriguez Procedimiento de realidad virtual para espacios de entretenimiento
US20240096033A1 (en) * 2021-10-11 2024-03-21 Meta Platforms Technologies, Llc Technology for creating, replicating and/or controlling avatars in extended reality
US11966960B2 (en) * 2021-10-28 2024-04-23 International Business Machines Corporation Method, system, and computer program product for virtual reality based commerce experience enhancement
US20230351486A1 (en) * 2022-04-27 2023-11-02 Maplebear Inc. (Dba Instacart) Synchronizing a rendering of a physical retail store in a virtual reality environment with the physical retail store
US20240037639A1 (en) * 2022-07-26 2024-02-01 Ta'nesha Ratliff Virtual reality shopping system

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001069364A2 (en) * 2000-03-10 2001-09-20 Richfx Ltd. Natural user interface for virtual reality shopping systems
CN1987857A (zh) * 2006-12-18 2007-06-27 于慧 采用虚拟仿真综合图文信息交互实现数字城市系统的方法
CN101427245A (zh) * 2001-10-12 2009-05-06 罗姆及海斯电子材料有限公司 方便查看者在有关化学产品的在线信息中导航的方法和系统
CN101690150A (zh) * 2007-04-14 2010-03-31 缪斯科姆有限公司 基于虚拟现实的电话会议
US20130226744A1 (en) * 1999-08-06 2013-08-29 Catherine Lin-Hendel System and method for constructing and displaying active virtual reality cyber malls, show rooms, galleries, stores, museums, and objects within
US20140052550A1 (en) * 2004-03-11 2014-02-20 American Express Travel Related Services Company, Inc. Virtual reality shopping experience
CN103970823A (zh) * 2013-01-28 2014-08-06 波音公司 利用模型查看器的复杂系统的元件的全景可视化
CN104010206A (zh) * 2014-06-17 2014-08-27 合一网络技术(北京)有限公司 基于地理位置的虚拟现实视频播放的方法和系统
CN104751697A (zh) * 2015-02-01 2015-07-01 郑州旅游职业学院 用于旅游专业学生言语能力及文化素养提升的教学系统
US20150309705A1 (en) * 2014-04-28 2015-10-29 Invodo, Inc. System and method of three-dimensional virtual commerce environments
CN105188516A (zh) * 2013-03-11 2015-12-23 奇跃公司 用于增强和虚拟现实的系统与方法
CN105353871A (zh) * 2015-10-29 2016-02-24 上海乐相科技有限公司 一种虚拟现实场景中目标物体的控制方法及装置

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7797204B2 (en) * 2001-12-08 2010-09-14 Balent Bruce F Distributed personal automation and shopping method, apparatus, and process
JP4413633B2 (ja) * 2004-01-29 2010-02-10 株式会社ゼータ・ブリッジ 情報検索システム、情報検索方法、情報検索装置、情報検索プログラム、画像認識装置、画像認識方法および画像認識プログラム、ならびに、販売システム
US20080043013A1 (en) * 2006-06-19 2008-02-21 Kimberly-Clark Worldwide, Inc System for designing shopping environments
US8321797B2 (en) * 2006-12-30 2012-11-27 Kimberly-Clark Worldwide, Inc. Immersive visualization center for creating and designing a “total design simulation” and for improved relationship management and market research
US8861898B2 (en) * 2007-03-16 2014-10-14 Sony Corporation Content image search
US20080262910A1 (en) 2007-04-20 2008-10-23 Utbk, Inc. Methods and Systems to Connect People via Virtual Reality for Real Time Communications
US8630924B2 (en) * 2007-08-31 2014-01-14 Accenture Global Services Limited Detection of stock out conditions based on image processing
EP2201466A4 (en) * 2007-09-12 2012-06-20 Airkast Inc SYSTEM AND METHOD FOR MARKING FOR A WIRELESS DEVICE
US8520979B2 (en) * 2008-08-19 2013-08-27 Digimarc Corporation Methods and systems for content processing
US8108778B2 (en) 2008-09-30 2012-01-31 Yahoo! Inc. System and method for context enhanced mapping within a user interface
US20100306120A1 (en) * 2009-05-28 2010-12-02 Yunus Ciptawilangga Online merchandising and ecommerce with virtual reality simulation of an actual retail location
AU2011220382A1 (en) * 2010-02-28 2012-10-18 Microsoft Corporation Local advertising content on an interactive head-mounted eyepiece
US20120290366A1 (en) * 2011-05-10 2012-11-15 International Business Machines Corporation Optimization of purchase benefits by use of multiple financial accounts
NZ594388A (en) * 2011-08-03 2013-05-31 Serko Ltd Allocating expenses of a traveller's itinerary to cost centres within an Enterprise Resource Planning system
US10096033B2 (en) * 2011-09-15 2018-10-09 Stephan HEATH System and method for providing educational related social/geo/promo link promotional data sets for end user display of interactive ad links, promotions and sale of products, goods, and/or services integrated with 3D spatial geomapping, company and local information for selected worldwide locations and social networking
US9262780B2 (en) * 2012-01-09 2016-02-16 Google Inc. Method and apparatus for enabling real-time product and vendor identification
US9361730B2 (en) * 2012-07-26 2016-06-07 Qualcomm Incorporated Interactions of tangible and augmented reality objects
US9367870B2 (en) * 2012-10-05 2016-06-14 Sap Se Determining networked mobile device position and orientation for augmented-reality window shopping
US9449343B2 (en) * 2012-10-05 2016-09-20 Sap Se Augmented-reality shopping using a networked mobile device
US20140152847A1 (en) * 2012-12-03 2014-06-05 Google Inc. Product comparisons from in-store image and video captures
US9824387B2 (en) * 2013-03-15 2017-11-21 Proximity Concepts, LLC Systems and methods involving proximity, mapping, indexing, mobile, advertising and/or other features
US9524482B2 (en) * 2014-07-18 2016-12-20 Oracle International Corporation Retail space planning system

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130226744A1 (en) * 1999-08-06 2013-08-29 Catherine Lin-Hendel System and method for constructing and displaying active virtual reality cyber malls, show rooms, galleries, stores, museums, and objects within
WO2001069364A2 (en) * 2000-03-10 2001-09-20 Richfx Ltd. Natural user interface for virtual reality shopping systems
CN101427245A (zh) * 2001-10-12 2009-05-06 罗姆及海斯电子材料有限公司 方便查看者在有关化学产品的在线信息中导航的方法和系统
US20140052550A1 (en) * 2004-03-11 2014-02-20 American Express Travel Related Services Company, Inc. Virtual reality shopping experience
CN1987857A (zh) * 2006-12-18 2007-06-27 于慧 采用虚拟仿真综合图文信息交互实现数字城市系统的方法
CN101690150A (zh) * 2007-04-14 2010-03-31 缪斯科姆有限公司 基于虚拟现实的电话会议
CN103970823A (zh) * 2013-01-28 2014-08-06 波音公司 利用模型查看器的复杂系统的元件的全景可视化
CN105188516A (zh) * 2013-03-11 2015-12-23 奇跃公司 用于增强和虚拟现实的系统与方法
US20150309705A1 (en) * 2014-04-28 2015-10-29 Invodo, Inc. System and method of three-dimensional virtual commerce environments
CN104010206A (zh) * 2014-06-17 2014-08-27 合一网络技术(北京)有限公司 基于地理位置的虚拟现实视频播放的方法和系统
CN104751697A (zh) * 2015-02-01 2015-07-01 郑州旅游职业学院 用于旅游专业学生言语能力及文化素养提升的教学系统
CN105353871A (zh) * 2015-10-29 2016-02-24 上海乐相科技有限公司 一种虚拟现实场景中目标物体的控制方法及装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110174951A (zh) * 2019-05-30 2019-08-27 郑州爱普锐科技有限公司 基于vr实训设备的人物动作识别方法
CN110174951B (zh) * 2019-05-30 2022-06-21 郑州爱普锐科技有限公司 基于vr实训设备的人物动作识别方法
CN110348198A (zh) * 2019-06-21 2019-10-18 华为技术有限公司 仿真对象的身份识别方法、相关装置及系统
US11887261B2 (en) 2019-06-21 2024-01-30 Huawei Technologies Co., Ltd. Simulation object identity recognition method, related apparatus, and system
CN110348198B (zh) * 2019-06-21 2024-04-12 华为技术有限公司 仿真对象的身份识别方法、相关装置及系统
CN112184356A (zh) * 2019-07-03 2021-01-05 苹果公司 指导式零售体验
CN111857330A (zh) * 2020-06-04 2020-10-30 嘉兴惠风智能科技有限公司 零售货品陈列与展示虚拟仿真智能交互系统及其交互方法
CN114638579A (zh) * 2022-04-01 2022-06-17 机科发展科技股份有限公司 可视化库存动态数据显示组件、方法、存储器、电子设备
CN114638579B (zh) * 2022-04-01 2023-04-07 机科发展科技股份有限公司 可视化库存动态数据显示组件、方法、存储器、电子设备

Also Published As

Publication number Publication date
EP3424039A1 (en) 2019-01-09
US11823256B2 (en) 2023-11-21
WO2017173457A1 (en) 2017-10-05
US10943291B2 (en) 2021-03-09
US20210166300A1 (en) 2021-06-03
EP3424039A4 (en) 2019-11-06
AU2017240823A1 (en) 2018-11-22
AU2017240823B2 (en) 2023-03-02
CA3023644A1 (en) 2017-10-05
US20190251622A1 (en) 2019-08-15

Similar Documents

Publication Publication Date Title
CN109643527A (zh) 用于零售环境仿真的虚拟现实平台
US10846937B2 (en) Three-dimensional virtual environment
US11915288B2 (en) Useful and novel shopping application
US10235810B2 (en) Augmented reality e-commerce for in-store retail
US11449829B2 (en) Apparatus and method of conducting a transaction in a virtual environment
US10049500B2 (en) Augmented reality e-commerce for home improvement
Lee et al. Consumer experiences, the key to survive in an omni-channel environment: Use of virtual technology
US20170116667A1 (en) Apparatus and method for providing a virtual shopping space
US11908159B2 (en) Systems and methods for representing user interactions in multi-user augmented reality
CN104616190A (zh) 基于互联网和移动互联网的多终端3d体感购物方法及系统
WO2016191685A1 (en) Graphical processing of data, in particular by mesh vertices comparison
CN107092435A (zh) 基于商标图形识别并互动的方法及系统
US11847716B2 (en) Systems and methods for generating multi-user augmented reality content
US20210142394A1 (en) Virtual shopping software system and method
Grande et al. Supporting Small Businesses and Local Economies Through Virtual Reality Shopping and Artificial Intelligence: A Position Paper.
Bug et al. The future of fashion films in augmented reality and virtual reality
Ruiz et al. Augmented Reality as a Marketing Strategy for the Positioning of a Brand
Zhu Dynamic contextualization using augmented reality
Joseph AUGMENTED REALITY IN E-COMMERCE

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190416

WD01 Invention patent application deemed withdrawn after publication