CN116385089A - 实现与增强现实环境有关的购买的系统和计算机实现的方法、计算机可读介质和ar设备 - Google Patents

实现与增强现实环境有关的购买的系统和计算机实现的方法、计算机可读介质和ar设备 Download PDF

Info

Publication number
CN116385089A
CN116385089A CN202211711154.2A CN202211711154A CN116385089A CN 116385089 A CN116385089 A CN 116385089A CN 202211711154 A CN202211711154 A CN 202211711154A CN 116385089 A CN116385089 A CN 116385089A
Authority
CN
China
Prior art keywords
data
payment
purchase
user
augmented reality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211711154.2A
Other languages
English (en)
Inventor
C-G·埃内
M·埃尔尼
J·奈特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huppertab Co
Original Assignee
Huppertab Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huppertab Co filed Critical Huppertab Co
Publication of CN116385089A publication Critical patent/CN116385089A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/22—Payment schemes or models
    • G06Q20/24—Credit schemes, i.e. "pay after"
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/208—Input by product or record sensing, e.g. weighing or scanner processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/321—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices using wearable devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/38—Payment protocols; Details thereof
    • G06Q20/42—Confirmation, e.g. check or permission by the legal debtor of payment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0611—Request for offers or quotes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07G—REGISTERING THE RECEIPT OF CASH, VALUABLES, OR TOKENS
    • G07G1/00—Cash registers
    • G07G1/0036—Checkout procedures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Finance (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明涉及用于实现与增强现实环境有关的购买的系统和计算机实现的方法、计算机可读介质和AR设备。该计算机实现的方法中，增强现实环境由AR设备(110)和/或AR后端(120)提供，AR设备(110)具有至少一个显示器(111)和至少一个传感器。该方法包括：在增强现实环境中可视化购买激励(220)；基于来自至少一个传感器的第一信号(310)获得选择数据(315)，选择数据(315)指示所选择的用于购买的项目(210)；基于来自至少一个传感器的第二信号(320)获得反应数据(325)；评估反应数据(325)以确认或取消购买；将定价数据(330)和支付数据(335)分配给所选择的项目(210)；如果确认购买，则将定价数据(330)和/或支付数据(335)传输到支付系统(140)。

Description

实现与增强现实环境有关的购买的系统和计算机实现的方 法、计算机可读介质和AR设备
技术领域
本申请涉及用于实现与增强现实环境有关的购买的计算机实现的方法、计算机可读介质、AR设备和用于实现与增强现实环境有关的购买的系统。
背景技术
虚拟现实(VR)和增强现实(AR)在过去十年中经历了实质性的发展。虚拟现实使得用户能够体验计算机生成的虚拟环境并与该虚拟环境交互，该虚拟环境可以与现实世界类似或完全不同。虚拟现实的主要特征是引起用户的沉浸式感受，其中沉浸感可以定义为用户在虚拟环境中感知到实际存在感。在增强现实中，用户的现实世界的感知被计算机生成的虚拟内容增强。因此，VR和AR都为用户提供了虚拟环境。然而，VR和AR的不同之处在于，VR中的虚拟环境在用户的感知中完全替代现实世界，而AR中的虚拟环境通常并入用户感知的现实世界的元素。
虚拟现实和增强现实的应用领域广泛分布并且包括例如娱乐、游戏、商务和教育。
通常，VR应用和AR应用需要专门的硬件，该硬件具有使得用户能够感知虚拟环境并与该虚拟环境交互的一个或多个输入和输出设备。因此，输入和输出设备的数量和类型决定了用户的交互可能性并因此对于沉浸感是至关重要的。
在本说明书中，术语AR设备用于任何类型的被配置成为用户呈现AR应用的虚拟环境并使得用户能够与所述虚拟环境交互的硬件。该虚拟环境还由后端部件另外提供，该后端部件在本文中称为AR后端。例如，AR后端可以是执行资源密集计算并将结果提供给AR设备的服务器。AR后端可以集成到AR设备中或者可以是与AR设备通信联接的外部部件。
通常，AR设备佩戴在用户的头部上(头戴式设备，HMD)，使得AR设备跟随用户的头部运动。头戴式设备的通常形式包括眼镜、护目镜、全罩或半罩头盔以及耳麦。通常，这些AR设备具有一个或多个输入设备，该一个或多个输入设备具有能够检测用户的头部、注视、手、手指、臂部和/或指向设备的运动的至少一个传感器(例如，眼球跟踪器、运动传感器、陀螺仪、惯性测量单元、前向摄像头、触觉传感器)。此外，AR设备通常具有使得用户能够感知虚拟环境的一个或多个输出设备(例如，显示器、扬声器、力反馈致动器)。
在许多AR应用中，向用户提供购买增强现实环境中的项目的机会。特别地，增强现实环境可以包括提供多种用于购买的项目的虚拟商场。这些项目可以是各种类型的。该项目可以是在虚拟世界中提供的物质商品和/或服务，但是在现实世界中递送/提供(例如，当增强现实环境提供现实世界商店的虚拟模型时)。购买还可以与该项目的租借有关。
替选地，该项目可以是数字内容。如本文所使用的，数字内容包括例如视频、电子游戏、图像、不可替代令牌(NFT)、播客、出版物、音乐、和针对用户唯一(或不唯一)的待在虚拟环境中显示的数字图像(包括虚拟服装、外套、头饰、鞋类、和珠宝，具有或不具有相关联的用户的图像或替身)、以及任何以数字形式传送的内容。替选地，数字内容的购买可以包括取得从本地或远程内容服务器访问数字内容预定或无限制时间段的权利。
对于增强现实应用的用户，非常希望在不明显中断他的/她的增强现实体验的情况下进行购买，特别是在确认购买和/或提供支付数据时。这方面在以低价(例如，0.01欧元至1.00欧元)提供项目时特别适宜。针对该购买的支付称为小额支付。对于单个小额支付，用户通常不希望注册或输入支付数据，因为付出和受益不成合理的比例。
另一方面，一个重要方面是用户保持完全控制在虚拟环境中的购买决定。此外，大部分用户想要确保其数据、特别是诸如信用卡号的支付数据被保密。实际上，可能存在用户不想向AR应用提供他的/她的支付数据的情况。在这种情况下，AR设备和/或AR后端不具有或不完全具有对与用户相关联的支付系统的界面的访问权。
发明内容
因此，本发明的一个目的是提供用于实现与增强现实环境有关的购买的计算机实现的方法和相应的系统。此外，本发明的一个目的是以用户可以以直观且快速的方式进行购买的方式实现在增强现实体验中购买项目的过程。另外，本发明的一个目的是，即使提供增强现实环境的AR设备和/或AR后端不具有或具有有限的对支付系统的界面的访问权，也能够实现所述购买。
本发明的这些目的通过根据本发明的计算机实现的方法、计算机可读介质、AR设备和系统来实现。
特别地，本发明的目的通过一种用于实现与增强现实环境有关的购买的计算机实现的方法来实现。这里，所述增强现实环境由AR设备和/或AR后端提供，所述AR设备具有至少一个显示器和至少一个传感器，所述至少一个传感器优选眼球跟踪器、位置传感器和/或惯性测量单元。所述方法包括以下步骤：
-在所述增强现实环境中可视化购买激励，特别地，通过使用所述显示器进行可视化；
-基于来自所述至少一个传感器的第一信号获得选择数据，所述选择数据指示所选择的用于购买的项目，特别是虚拟内容项目和/或现实世界项目；
-基于来自所述至少一个传感器的第二信号获得反应数据，所述第二信号在一时长内持续被获取；
-评估所述反应数据以确认或取消购买所选择的项目；
-将定价数据和支付数据分配给所选择的项目，特别地，通过执行数据库查找进行分配；
-如果确认购买，则将所述定价数据和/或所述支付数据传输到支付系统以启动所选择的项目的支付。
本发明的核心方面是用户可以在增强现实体验中表达以及确认或取消他的/她的购买意图。这通过获取并处理来自AR设备的至少一个传感器的多个信号来实现。因此，所述方法允许挑选选择用于购买的项目和/或确认/取消购买所需的用户动作，所述用户动作和用户与增强现实环境交互而执行的那些动作(例如，姿势和运动)相似或相同。
在增强现实环境中可视化的购买激励使用户注意到某一项目可用于购买。在简单的情况下，购买激励可以是该项目本身的可视化。替选地，购买激励可以是增强现实环境中的购买图标(例如，在该项目附近现实的购物车符号)或专门区域(例如，虚拟结账区域)。
根据所述方法，用户是否要购买项目的意图在多个阶段中进行获取和确认。
在第一阶段，获得选择数据，该选择数据指示用户所选择的用于潜在购买的项目。该选择数据基于来自AR设备的至少一个传感器的第一信号。特别地，第一信号可以是AR设备的眼球跟踪器的传感器信号并且指示用户注视增强现实环境中的项目。
在第二阶段，基于来自至少一个传感器的第二信号获得反应数据。优选地，但非强制性地，在一时长内持续获取第二信号。例如，第二信号可以从眼球跟踪器获得并且指示用户持续注视所选择的项目预定时间。替选地，第二信号可以从惯性测量单元获得并且指示用户停留在专门区域(例如，结账区域)预定时间。
在第三阶段，评估反应数据以确认或取消购买所选择的项目。如果反应数据的绝大部分(例如，大于或等于80％)满足所期望的特性，则可以确认购买。
接下来，将定价数据和支付数据分配给所选择的项目。定价数据可以包括与该项目相关联的价格。支付数据可以包括支付的接收方以及其他支付形式(例如，支付方法)。分配定价数据和/或支付数据的步骤可以包括执行数据库查找。特别地，可能需要请求在远程服务器上的数据库中的所选择的项目的实际价格，所述数据库例如为提供所选择的项目的商家的产品数据库。
如果评估反应数据得出确认购买，则将定价数据和/或支付数据传输到支付系统以启动所选择的项目的支付。支付系统可以为用户提供如下方式进行支付：通过例如ApplePay(苹果支付)、Google Pay(谷歌支付)、法定货币、加密电子货币，通过允许第三方支付余额，通过应用应计减免抵消该余额，或通过在诸如用户的关联移动设备的合适设备上激活的电子钱包应用。
支付的启动可以触发由现实世界中的技术系统执行的一个或多个动作，其中所述动作可以准备递送和/或提供所购买的项目。
在一个实施方式中，在评估所述反应数据时，如果所述反应数据的至少一部分指示如下内容，则可以确认购买：
-用户注视所述增强现实环境中的区域，优选地，通过所述眼球跟踪器的传感器信号指示所述用户的注视；
-用户处于所述增强现实环境中的区域中的位置，优选地，通过所述位置传感器和/或所述惯性测量单元的传感器信号指示所述用户的位置；和/或
-所述用户的预定数量的点头，优选地，通过所述惯性测量单元的传感器信号指示所述用户的预定数量的点头。
特别地，如果所述反应数据的至少主要部分(例如，超过50％，优选地超过75％)指示所述事件，则可以确认购买。
在一个实施方式中，如果所述反应数据的至少一部分指示用户的预定数量的摇头，则可以取消购买，优选地，通过所述惯性测量单元的传感器信号指示所述用户的预定数量的摇头。
后两个实施方式使得用户能够以直观且方便的方式确认或取消购买。作为用于检测用户的点头的必要条件，优选地，检测用户的头部在预定的竖直角度范围内的运动。类似地，作为用于检测用户的摇头的必要条件，优选地，检测用户的头部在预定的水平角度范围内的运动。
在另一实施方式中，所述反应数据可以指示用户的用于确认或拒绝购买的身体姿势。该身体姿势可以由AR设备的一个或多个传感器捕获。
特别地，身体姿势可以是利用手指在AR设备的专门部分上轻触，所述专门部分例如为在所述设备的外表面上提供的触摸平板。特别地，可以要求在短时间内再进行两次手指轻触以用于确认购买动作。
身体姿势的其他示例包括跳跃、手信号、手指敲击等。还可以通过AR设备的声音传感器和/或视频传感器来检测身体姿势。
在一个实施方式中，所述方法还包括以下步骤：
-在所述增强现实环境中可视化所述时长内的时间进度。
在一个实施方式中，可以通过进度条、倒计时器、彩色编码(例如，从绿色到橙色到红色)和/或时钟来可视化所述时间进度。
为了实现所述时间进度的可视化，在一个实施方式中，所述方法还可以包括以下步骤：
-响应于所述第一信号中的至少一个第一信号或由所述至少一个第一信号触发，存储所述时长的开始时间；
-确定所述时长的结束时间，优选地，使得所述结束时间与所述开始时间之间的差值等于预定恒定值，优选地，所述预定恒定值小于或等于5秒。
例如，所述时长可以由开始时间和结束时间限定。开始时间可以由指示用户注视购买指示器的第一信号触发。可以确定结束时间使得结束时间在开始时间之后t秒，其中t为任意预定恒定值，优选地小于或等于5，例如为3。
在一个实施方式中，为了可视化所述时间进度，所述方法可以包括以下步骤中的一个或多个步骤：
-在所述时长的开始时间显示时间指示器；
-根据时间的进度更新所述时间指示器；
-在所述时长的结束时间移除所述时间指示器。
优选地，显示所述时间指示器使用所述显示器执行。为了根据时间更新所述时间指示器，优选地，通过所述AR设备的时间单元获得时间。
所述方法的其他实施方式使得用户能够在不立即触发支付的情况下消费所购买的项目。
在一个实施方式中，所述支付系统可以适于执行来自用户的支付交易，使得只有在根据所述定价数据的项目成本的总成本以及与所述用户相关联的未结算的在先义务的总金额超过阈值金额时才需要支付，所述阈值金额例如为5欧元。
因此，用户能够立即消费，但是稍后再支付。更确切地说，用户可以积累多次小额支付，如果未结算义务的总金额超过阈值金额，则为相应的购买进行支付。这使得以低价购买项目对用户来说更有吸引力，因为可以提高交易的付出收益比。此外，可以更高效地使用支付交易所需的技术资源，因为不是每次购买都触发支付交易。例如在欧洲专利EP2476087中描述了这种支付系统。
在一个实施方式中，在所述增强现实环境中显示交易状态指示器，其中，所述交易状态指示器指示以下中的至少一者：
-所选择的项目的所述定价数据；
-在所述支付系统需要支付之前的所述阈值金额；
-若存在的话，未结算的在先义务。
通过该实施方式，向用户提供对他的/她的购买决定可能有用的信息。特别地，所述交易状态指示器可以被配置成使得用户可以读取当前购买是否会触发支付交易。
本发明的目的还通过一种用于实现与增强现实环境有关的购买的计算机实现的方法来实现，该方法特别是上述任一种方法，所述增强现实环境由AR设备和/或AR后端提供。这里，所述AR设备具有至少一个显示器和至少一个传感器，所述至少一个传感器优选眼球跟踪器、位置传感器和/或惯性测量单元，所述方法包括以下步骤：
-由移动设备接收触发信号，所述触发信号指示用户的购买意图，特别地，所述触发信号为音频信号；
-由所述移动设备识别与所述购买意图有关的至少一个项目，特别地，通过将至少一个请求发送到所述AR设备和/或所述AR后端进行识别；
-将定价数据和支付数据分配给所识别的项目，特别地，通过执行数据库查找进行分配；
-由所述移动设备将所述定价数据和/或所述支付数据传输到支付系统以启动所选择的项目的支付。
例如，移动设备可以是智能手机或智能扬声器。特别地，移动设备可以位于用户的附近，使得移动设备可以接收用户的语音命令。
该实施方式的核心方面是使用移动设备、而不是AR设备或AR后端来与支付系统进行通信。特别地，该实施方式关注用户不希望将支付数据提供给AR设备/AR后端，或者是AR设备/AR后端不支持优选的支付系统的情况；取而代之，用户想要使用他的/她的移动设备上设置的(可能多个)支付方法中的一种支付方法。
此外，该实施方式实现了用于与增强现实环境有关的购买的双重认证。这里，需要AR设备启动购买，因此AR设备用作认证的第一部件。然而，完成购买需要由用户的移动设备执行的动作。因此，用户的移动设备用作认证的第二部件。这可以为用户提高购买的安全性。此外，可以在认证过程中看见第一认证，该认证过程为用户执行的用以访问虚拟现实世界和/或在启动购买时所需要的。通常，本发明允许在增强现实环境中进行购买的多重认证。
移动设备还可以提供关于用户和/或用户账户的特性的证明，其中需要该特性来完成购买过程。具体地，移动设备可以提供用户的年龄、支付能力(即，提供至少一种有效支付方法)等的证明。
应当注意，对于AR设备(例如，使用MAC地址)和移动设备(例如，使用IMSI码和/或MAC地址)，将相应设备唯一地映射到用户(账户)都是可能的。
此外，所描述的实施方式使得用户能够使用在移动设备与支付系统之间建立的可信的和/或安全的通信通道，而不是在AR设备与支付系统之间的可能不可信的通信通道。特别地，移动设备可以支持通过AR设备不支持的安全协议(例如，SSL、TLS)与支付系统进行通信。因此，使用移动设备与支付系统进行通信可以提高用户的支付处理的安全性。
根据上述方法，移动设备接收指示用户的购买意图的触发信号。例如，触发信号可以是用户的语音命令“购买该项目”。
在接下来的步骤中，移动设备识别与购买意图有关的至少一个项目。该步骤可以包括将至少一个请求发送到AR设备和/或AR后端。
如果已经识别出与购买意图有关的项目，则将定价数据和支付数据分配给所识别的项目。定价数据可以包括与该项目相关联的价格。支付数据可以包括支付的接收方以及其他支付形式(例如，支付方法)。分配定价数据和支付数据的步骤可以包括执行数据库查找。特别地，可能需要请求在远程服务器上的数据库中的所选择的项目的当前价格，所述数据库例如为提供所选择的项目的商家的产品数据库。
最后，由移动设备将定价数据和/或支付数据传输到支付系统以启动所选择的项目的支付。
在一个实施方式中，识别与所述购买意图有关的所述至少一个项目包括：
-由所述移动设备将请求发送到所述AR设备和/或所述AR后端，所述请求包括识别数据和与所述购买意图有关的数据；
-由所述AR设备和/或所述AR后端将所述请求关联到所述增强现实环境中的替身，所述替身与所述识别数据相关联；
-使用与购买信息有关的数据以及所述替身的至少一个特性由所述AR设备和/或所述AR后端确定至少一个项目。
识别数据可以是移动设备的用户的标识符(例如，用户账户名)和/或移动设备本身的标识符(例如，MAC地址)。特别地，识别数据应当能够将移动设备的用户关联到增强现实环境中用户的代表(本文中称为替身)。
从另一个角度，识别数据和替身(的特性)可以看作双重认证的组成部分。由增强现实环境中的替身启动的购买仅在移动设备提供了认证数据时才能完成。因此，除了在虚拟世界中获取的购买意图，还需要由用户控制的物质对象(移动设备)的特性来完成购买。这可以提高用户购买的安全性。
与购买意图有关的数据可以是任何描述所接收的触发信号的数据(例如，基于所接收的语音命令进行语言识别的结果)。
在一个实施方式中，所述替身的所述至少一个特性对应于：
-用户注视所述增强现实环境中的区域，优选地，通过所述眼球跟踪器的传感器信号指示所述用户的注视；和/或
-用户处于所述增强现实环境中的区域中的位置，优选地，通过所述位置传感器和/或所述惯性测量单元的传感器信号指示所述用户的位置。
特别地，替身的特性可以实现结合与购买意图有关的数据来确定与用户的购买意图有关的项目。应当注意，触发信号(或与购买意图有关的数据)本身可能不足以用于该目的。例如，在没有上下文信息的情况下，用户的语音命令“购买该项目”明显不足以确定用户想要购买哪个项目。然而，与用户注视(更具体地，用户替身的注视)增强现实环境中的项目一起，就可以识别感兴趣的项目。
在一个实施方式中，触发信号是语音信号并且所述方法还包括验证语音信号的真实性的步骤。这可以防止未授权的人通过语音命令启动购买。
在一个实施方式中，触发信号是包括触发短语和/或移动设备的别名的语音信号。如果多于一个移动设备响应语音命令，则这可以帮助寻址所期望的移动设备。
在一个实施方式中，所述方法还包括由移动设备从多个支付系统中选择出一个支付系统的步骤。该选择可以根据定价数据和/或支付数据进行，特别地，选择适合于当前购买的支付系统。
在一个实施方式中，所述方法还包括以下步骤：
-由所述移动设备将与所识别的项目有关的描述数据传输到所述AR设备；
-由所述AR设备可视化所述描述数据，特别地，通过使用所述显示器进行可视化；
-由所述AR设备基于来自所述至少一个传感器的第三信号评估反应数据，以确认或取消购买所选择的项目。
根据该实施方式，用户能够验证由移动设备识别的项目是否匹配他的/她的实际购买意图的主题。反应数据的评估可以如上述结合第一方面的方法描述的方式实现，特别地，通过检测用户的注视、点头等进行评估。
本发明的目的还通过一种计算机可读介质实现，所述计算机可读介质存储指令，所述指令在由至少一个处理器执行时使得所述至少一个处理器实现上述方法。
此外，本发明的目的通过一种AR设备实现，所述AR设备包括上述计算机可读介质。
上述计算机可读介质和AR设备的优势与上述方法的优势类似或相同。
本发明的目的还通过一种被配置成实现上述任一方法的系统来实现。
特别地，该目的通过一种用于实现与增强现实环境有关的购买的系统实现，所述系统包括：
-AR设备，所述AR设备具有至少一个显示器和至少一个传感器，所述至少一个传感器优选眼球跟踪器、位置传感器和/或惯性测量单元；
-AR后端；和
-至少一个支付系统。
这里，所述增强现实环境由所述AR设备和/或所述AR后端提供，其中，所述AR设备被配置成在所述增强现实环境中可视化购买激励，特别地，通过使用所述显示器进行可视化。此外，所述AR后端被配置成执行以下操作中的至少一者：
-基于来自所述至少一个传感器的第一信号获得选择数据，所述选择数据指示所选择的用于购买的项目；
-基于来自所述至少一个传感器的第二信号获得反应数据，所述第二信号在一时长内持续被获取；
-评估所述反应数据以确认或取消购买所选择的项目；
-将定价数据和支付数据分配给所选择的项目，特别地，通过执行数据库查找进行分配；
-如果确认购买，则将所述定价数据和/或所述支付数据传输到所述支付系统以启动所选择的项目的支付。
在一个实施方式中，所述系统还包括移动设备，特别是智能手机或智能扬声器，所述移动设备被配置成执行以下操作中的至少一者：
-接收触发信号，所述触发信号指示用户的购买意图，特别地，所述触发信号为语音信号；
-识别与所述购买意图有关的至少一个项目，特别地，通过将至少一个请求发送到所述AR设备和/或所述AR后端进行识别；
-将定价数据和支付数据分配给所识别的项目，特别地，通过执行数据库查找进行分配；
-将所述定价数据和/或所述支付数据传输到所述支付系统以启动所选择的项目的支付。
上述系统的有益效果和优势与上述方法的优势相同或类似。
本发明还描述了其他实施方式。
需要明确指出的是，所有描述的方面都可以根据需要彼此结合。特别地，关于设备和系统描述的方面也针对相应的方法公开，反之亦然。
附图说明
下面关于附图描述本发明的实施方式，附图中：
图1示出了头戴式AR设备；
图2示出了在增强现实环境中提供的虚拟服装商店；
图3示出了描述用于实现与增强现实环境有关的购买的方法的流程图；
图4示出了时间进度的可视化；
图5示出了根据第二实施方式的用于实现与增强现实环境有关的购买的方法以及用于实现该方法的系统；
图6-图15描绘了根据本发明的其他方面的由HMD创建并对佩戴该HMD的用户可见的代表性虚拟图像。
具体实施方式
在以下描述中，相同的附图标记用于相同的部件和具有相同效果的部件。
图1示出了AR设备110与其部件。AR设备110可以安装在用户的头部上并且包括显示器111、眼球跟踪器112和惯性测量单元113。眼球跟踪器112被配置成提供指示用户的视线的传感器信号。惯性测量单元113包括加速度计和陀螺仪，并被配置成提供指示用户的位置和/或角速度的传感器信号。
应当注意，典型的AR设备还包括各种内部部件(例如，CPU、存储单元、网络单元)和传感器。然而，为了简单起见，图1中的AR设备100仅包括这些单元的子集。
图2示出了由结合图1描述的AR设备100提供的增强现实环境。该增强现实环境使得用户能够通过虚拟服装商店200导航并查看可用于购买的多种服装项目。在所呈现的实例中，衬衫210和裤子211、212挂在虚拟服装商店200的墙壁上。购物车符号220显示在衬衫210下方，表示衬衫210可用于购买。
尽管用户能够通过如图2所示的虚拟服装商店200自由导航，但是他的/她的当前视角限于视场230(参见图2中的虚线矩形)。换句话说，用户注视衬衫210和相应的购物车符号220。
图3示出了描述用于实现从结合图1和图2描述的增强现实环境购买衬衫210的方法的流程图。
在启动步骤S1中，通过使用显示器111将购物车符号220可视化为增强现实环境中的购买激励。以此方式，告知用户可以购买衬衫210。
接下来，在第一分析步骤S2中，AR设备110分析眼球跟踪器112的第一信号310。在该实施方式中，第一信号310指示用户的注视固定在衬衫210(参见图2中的视场230)上。通过该行为，用户表达了其购买衬衫210的兴趣。作为第一分析步骤S2的结果，获得选择数据315，该选择数据315指示所选择的可能购买的项目，即衬衫210。
在随后的第二分析步骤S3中，AR设备110分析来自眼球跟踪器112的第二信号320。第二信号320指示用户注视时长为5秒，其中该时长根据第一信号310通过用户第一次注视衬衫210的事件触发。在该时长内，时间进度使用显示器111在增强现实环境中可视化。该过程将在以下结合图4进行描述。可视化该时间进度允许用户看到他/她必须注视衬衫210多久来确认购买。作为结果，获得反应数据325。根据该实施方式，反应数据325包括在该时长内用户的视场的快照。
接下来，在评估步骤S4中，AR设备110评估反应数据325以确认或取消购买衬衫210。在该实施方式中，购买被确认，因为来自反应数据325的快照的主要部分包含衬衫210而且没有其他可用于购买的项目(例如，图2中紧挨着衬衫210的裤子)。在该上下文中，术语“主要”可以定义为50％-100％，优选80％-100％。替选地或附加地，如果反应数据指示用户的视线偏离基准线至少预定角度，则可以取消购买，其中基准线指向所选择的项目(衬衫210)。
现在已经检测到并确认应当购买衬衫210，在数据收集步骤S5中AR设备110需要支付交易所需的其他信息。具体地，通过向提供衬衫210的商家的产品数据库发送请求来确定衬衫210的实际价格。衬衫210的价格被存储为定价数据330。此外，创建指示支付的接收方的支付数据335。
在数据分配步骤S6中，定价数据330和支付数据335被分配给衬衫210以准备购买交易。
在校验步骤S7中，AR设备110校验在评估步骤S4中是否已经确认购买。如果已经确认购买，则执行支付传输步骤S8，否则终止购买过程(终止步骤S9)。根据所描述的实施方式，已经确认购买，因此执行支付传输步骤S8。
在支付传输步骤S8中，将定价数据330和支付数据335从AR设备110传输到支付系统。基于所接收的数据，支付系统执行处理支付所需的其他步骤(例如，对信用卡进行计费)。
图4示出了来自图3中描述的方法的第二分析步骤S2期间的时间进度的可视化。在该实施方式中，通过显示在用户的视场230的下边缘处的水平进度条410可视化时间进度。进度条410被分成等长的片段。消逝的时间由黑色条可视化，该黑色条的长度对应于自触发时长开始消逝的时间量。因此，图4的进度条410指示已经过去大约一半的时间。
此外，图4示出了向用户提供指令的指令文本域420，例如，“继续将注视固定在该项目上以确认购买”。
图5示出了根据第二实施方式的用于实现与结合图1至图4描述的增强现实环境有关的购买的方法。此外，图5示出了用于实现该方法的系统。
图5的系统包括佩戴在用户500的头部上的AR设备110以及AR后端120。AR设备110和AR后端120通信联接并向用户500提供增强现实环境。该系统的其他部件有用户500的智能手机130、产品数据库150和支付系统140。智能手机130与AR后端120、产品数据库150以及支付系统140通信联接。此外，智能手机130被配置成接收来自用户500的语音命令。
应当注意，在该实施方式中，AR设备110和AR后端120都不能直接访问支付系统140。因此，与结合图3描述的方法不同，以下描述的方法是关于由智能手机130执行与支付系统的通信的情况。
在触发步骤S11中，智能手机130接收来自用户500的语音命令“购买这件衬衫！”。
在确定请求S12a中，智能手机130向AR后端120发送请求以确定用户500意图购买的项目。作为该请求的一部分，智能手机130发送所接收的语音命令的语言处理后的版本以及智能手机130的标识符。
AR后端120使用所接收的标识符来将该请求关联到用户500以及在增强现实环境中与用户500相关联的替身。由于替身位于虚拟服装商店200中并且用户注视着衬衫210(参见图2)，因此将衬衫210识别为用户购买意图的主题。
因此，在确定响应步骤S12b中，将描述衬衫210的数据从AR后端120传输到智能手机130。
因此，作为中间结果，智能手机130通过请求AR后端120而将用户的语音命令“购买这件衬衫！”关联到衬衫210。
在查找请求S13a中，智能手机130向产品数据库150发送请求以请求衬衫210的定价数据330和支付数据335。在查找响应步骤S13b中返回这些数据。
最后，在交易步骤S14中，智能手机130将定价数据330和支付数据335传输到支付系统140。基于所接收的数据，支付系统140执行处理支付所需的其他步骤。
本领域技术人员能够意识到，在不偏离本发明的核心的情况下，可以对上述实施方式做出各种修改。
尽管已经在增强现实系统的上下文中描述了本发明，但是应当清楚的是，所描述的技术和方案也能够应用于虚拟现实系统和设置。
图5的实施方式可以在以下方面进行增强，在智能手机已经识别出与用户购买意图有关的项目之后，关于该项目的描述数据被传输到AR设备。然后，AR设备可视化所识别的项目并提示用户确认购买一个项目。可以如结合图3的实施方式描述的那样获得用户的确认。AR后端还可以返回与用户购买意图有关的多于一个项目(例如，如果请求模糊不清)。在这种情况下，用户的进一步选择/确认步骤是必要的并且可以以类似方式实现。
此外，图5的实施方式可以采用以下方式进行修改：智能手机基于所接收的触发信号(至少部分地)识别出待购买的项目。具体地，当接收到语音信号“购买这件衬衫！”时，智能手机可以检测到用户购买意图与服装项目有关。
在基于图5的另一实施方式中，触发信号包括使得智能手机能够(至少部分地)识别项目的基准标识符。具体地，该基准标识符可以是产品编号和/或可以通过使用AR设备的显示器向用户在增强现实环境中可视化。
此外，尽管上述实施方式仅包含单个支付系统，但是应当清楚的是，本发明允许集成多个支付系统。以此方式，不同的支付系统可以提供不同的支付方法(例如，信用卡、加密电子货币)，并且用户可以选择其中之一。替选地，该决定可以由AR设备/AR后端和/或移动设备做出，优选地根据相应的购买来做出决定。
为简单起见，在以上实施方式中，没有触发其他动作来准备递送和/或提供所购买的项目。然而，在一些实施方式中，将由现实世界中的技术系统执行这些动作并且将通过启动支付来触发这些动作。这些动作的示例包括：
-取出所购买的项目，特别是由自动化仓库中的机器人取出；
-特别是由生产机器生产和/或配置所购买的项目，尤其是根据用户说明来生产和/或配置；
-将(所购买的)数字内容从服务器转发到移动设备和/或将数字内容存储在移动设备上。
以下关于图6至图15解释本发明的其他方面。
根据本发明，该创新方法开始于用户的指示选择虚拟现实环境或增强现实环境或全息环境中的现实或虚拟对象以用于潜在购买或租借交易的动作。这种指示和选择可以例如通过以下至少一者来执行：用户持续注视待选择的项目范围内预定时间段，与指向设备相关联的信号，检测到预定头部运动、手的姿势、手指的姿势和/或臂部的姿势。应当很容易理解，本文描述的HMD可以为各种形式，包括但不限于眼镜、护目镜、全罩或半罩头盔或者其他形式的头饰，具有合适的用于做出选择和/或检测选择的传感器，包括但不限于例如用于检测佩戴者的头部、手、手指、臂部和/或指向设备的运动的HMD中的(一个或多个)前向摄像头、运动传感器和/或陀螺仪或者与HMD相关联的外部设备，以及用于检测佩戴者的注视的摄像头和/或传感器。
潜在交易可以用于购买商品和/或服务，或者租借商品和/或服务预定时间段，包括但不限于物质项目和数字内容。如本文所使用的，数字内容包括例如视频、电子游戏、图像、不可替代令牌(NFT)、播客、出版物、音乐、和针对用户唯一(或不唯一)的待在虚拟环境中显示的数字图像(包括虚拟服装、外套、头饰、鞋类、和珠宝，具有或不具有相关联的用户的图像或替身)、以及任何以数字形式传送的内容。此外，替选地，这种潜在交易可以是取得从本地或远程内容服务器访问数字内容预定或无限制时间段的权利。
响应于该购买指示，交易管理软件模块使得HMD提供有利的多功能虚拟工具，本文中称为“虚拟交易管理小工具”，其对用户可见。所提供的虚拟交易管理小工具的一个方面是优选地提供以下指示：(a)所选择的项目的成本；(b)在触发支付结算需求之前可用于应用到延迟支付义务的预定最大阈值量；以及(c)任何在先未结算支付义务。如本文将进一步描述的，可选地，交易管理小工具还可以显示应计减免余额。
在将交易管理小工具呈现给用户之后，检测到用户的第二动作，其导向交易的下一阶段。例如，在充足的延迟支付义务的量可用于应用到购买的情况下，在预定时间段内检测到用户在预定水平或竖直角度范围内的预定数量的摇头或点头，可以告知用户的意图是继续购买。替选地，可以例如通过以下方式告知用户的意图是继续：朝向用户的视场边缘(例如，视场的为此显示购物车的拐角)或用户的视场中的虚拟图标的注视运动，在预定时间段内眨眼预设次数，另一预定头部、手、手指和/或臂部姿势，眼球移动或语音命令。替选地，用户的这种动作和交互可以指示不意图购买，或者指示之前刚刚进行的购买应当撤销(该动作可以例如响应于出现在交易管理小工具中或附近的询问是否意图撤销购买的信息而进行)。
在语音命令的情况下，HMD或移动设备中的音频单元可以操作以识别语音信号，该语音信号包括触发短语(例如，“稍后支付(LATERPAY)该项目”)和/或移动设备的别名中的一者或多者。在识别任何触发系统之前，优选地，音频单元可以操作以鉴定/验证语音信号为用户授权的。
在完成交易或撤销交易的情况下，优选地，附加信息可以出现在交易管理小工具中或附近，以确认交易已进行或已撤销。在与支付系统的通信不可用的情况下(例如，当用户正在离线玩增强现实游戏时)，交易管理小工具可以指示延迟支付购买待处理，直至购买请求已经被传输到支付系统并由支付系统批准时为止(在与支付系统的通信只是延迟或中断的情况下，这可能只是短暂的)。替选地，例如在认为用户处于时间敏感的交易状态的情况下(例如，在游戏应用中的“激战”状态下进行购买)，该请求可以被增强现实系统推迟。
一旦交易已经完成，优选地，交易管理小工具就被更新以指示未结算延迟支付义务的新余额。当用户的(一个或多个)延迟支付交易的总金额达到或超过阈值(例如，用于支付交易的$5.00阈值)时，优选地，可以向用户呈现指示已达到阈值的交易管理小工具，并且向用户提供通过交易管理小工具访问支付系统的权利以用于结算延迟支付义务的所有或一部分。阈值可以固定，也可以为用户提供一些弹性(例如，当延迟支付总计为阈值的80％时请求部分结算，或者基于用户的支付历史允许高于阈值的超支)。
支付系统可以为用户提供多于一种的用于该结算的支付选项，包括例如用信用卡、Apple Pay(苹果支付)、Google Pay(谷歌支付)、法定货币、加密电子货币，允许第三方支付余额，应用应计减免抵消该余额，或通过在诸如用户的关联移动设备的合适设备上激活的电子钱包应用。替选地，如果用户不能在所请求的时刻执行结算，则支付购买可以通过替选方式进行(例如，通过钱包应用中的减免余额或通过允许第三方支付余额)。作为另一替选，只有当通过钱包应用或其他支付应用不能支付时才可以其次进行延迟支付方法。
替选地，该系统可以允许由第三方(例如，由用户的家长)支付或预支付阈值量。该特征例如可以提供有利的家长控制和/或监控机制。家长预支付例如可以通过家长的支付方式的约定(例如，通过来自家长的长期信用卡支付补充指令)周期性地续期。
图6至图15提供了如在本发明的增强现实系统中可以实现的延迟支付方法的示例性图示。图6示出了交易管理小工具多功能工具的代表性初始状态，该交易管理小工具多功能工具由交易管理软件模块产生以用于通过用户佩戴的HMD在虚拟环境中显示。有利地，用户可以根据本发明的延迟支付方法的各个方面与交易管理小工具交互。在图6中，交易管理小工具通过“Omega(Ω)圆”的任何部分都没有阴影以及可选地通过示出文本“$0.00”来图示没有未结算的未处理延迟支付($0.00余额)。将关于图7至图15所示的用户的示例性交易序列更详细地描述产生的交易管理小工具及其各种示例性状态的某些状态。
图7示出了在虚拟环境中显示的示例性虚拟衬衫，用于例如与用户的替身一起使用，该用户可能对该虚拟衬衫的潜在交易感兴趣，例如购买、许可或租借。用户可以使用各种方法中的任一种来选择所显示的虚拟衬衫，所述各种方法包括例如：前述与HMD相关联的指向设备；手、手指和/或臂部姿势；和/或通过检测用户朝向对象注视至少预定时间段。在选择用于潜在交易的该衬衫之后，如图8所示，将显示交易管理小工具以用于在HMD中查看。图8中显示的代表性交易管理小工具包括所示出的虚拟衬衫的交易成本，即$1.76，其中Omega圆仍然显示没有未结算的未处理延迟支付($0.00余额)，并且可选地包括用于确认虚拟衬衫的交易的指令。
然后，在用户与交易管理小工具交互以确认虚拟衬衫的交易之后，交易管理小工具的显示将被更新成如图9所示，以通过将Omega圆表示成具有代表性黑色部分来示出用于虚拟衬衫的未结算交易金额$1.76的经确认的延迟支付义务，所述代表性黑色部分从左部分端部沿顺时针方向延伸到成比例地表示延迟支付义务的允许的总额$5.00中的$1.76的点。
通过用户与交易管理小工具的交互的增强现实系统的检测可以为例如与HMD相关联的传感器的形式，所述传感器检测以下至少一者：在至少预定时间段内用户在预定竖直角度范围之内或之外的预定数量的点头，在预定时间段内眨眼至少预设次数，预定头部运动，手、手指和/或臂部姿势，眼球移动，指向设备动作，和/或语音命令。用户可以使用以上提到的与交易管理小工具的示例性交互中未用于确认交易的那些交互来取消或撤销该潜在交易。
作为对用户与交易管理小工具的交互的辅助，优选地，可以在用户的视场内显示附加时间指示器，该时间指示器从预订时长的开始时间开始。该时间指示器可以例如通过进度条、倒计时器、彩色编码和/或时钟来指示该时长期间的时间进度。优选地，可以通过HMD和/或移动设备的时间单元提供时间指示器根据时间进度的更新，该时间单元还可以优选地操作以在该时长的结束时间移除时间指示器。优选地，该时长可以被设定成预定的恒定值，例如5秒。
在交易完成、或者取消或撤销之后，交易管理小工具则可以在适当或预设时间段之后消失，并在该用户指示对下一潜在交易感兴趣时或在允许的在先交易的延迟支付义务的恢复中再现给用户。在替选方案中，交易管理小工具可以不消失，而是可以重新定位到所显示的虚拟环境中的一区域和/或可以减小尺寸以用于持续显示延迟支付义务的当前余额。
图10示出了可以由HMD在虚拟环境中显示的示例性的第二项目(虚拟裤子)，用户可能对该虚拟裤子感兴趣以用于第二潜在交易，例如购买、许可或租借。用户可以使用以上关于图7所描述的各种方法中的任一种方法来选择所显示的虚拟裤子，所述各种方法包括例如：与HMD相关联的指向设备；手、手指和/或臂部姿势；和/或通过检测用户朝向对象注视至少预定时间段。在选择用于潜在交易的虚拟裤子之后，如图11所示，将由HMD在虚拟环境中显示交易管理小工具。图11中显示的代表性交易管理小工具包括所示出的虚拟裤子的交易成本，即$3.61，其中通过将Omega圆表示成具有相应的黑色来使Omega圆仍然显示延迟支付义务的$1.76的余额，所述相应的黑色指示该金额相对于允许的合计最大延迟支付义务$5.00的比例。图11中，所显示的交易管理小工具还可选地包括用于确认虚拟裤子的交易的指令。
在用户与交易管理小工具交互以确认虚拟裤子的交易之后，将更新交易管理小工具的显示，如图12所示，以示出未结算的总计交易金额$5.37的延迟支付义务，即虚拟衬衫和虚拟裤子的交易所欠的累计交易金额，其中黑色圆弧完全围绕Omega圆延伸。因此，如图所示，已经允许超过该$5.00阈值$0.37的超支。因为未结算的总计交易金额$5.37超过允许的合计最大延迟支付义务$5.00，图12的交易管理小工具还显示“您已超过您的$5.00限额”，以及可选选项“现在支付”以使得用户能够容易地与支付系统通信以进行结算。如果用户不选择“现在支付”选项或指示取消潜在交易，则将不完成虚拟裤子的交易。
此外，在该延迟支付义务未结算的情况下，优选地，交易管理小工具和/或虚拟或增强现实系统可以向用户提供视觉和/或听觉警报，该警报指示到结算该支付义务之时，用户将不能访问支付系统并将不能通过增强现实或虚拟现实平台、或全息平台、由该支付系统支持的操作系统或网站中的任一者进入其他商品、服务和数字内容的交易。
再次参照图12，在用户选择选项“现在支付”之后，示例性交易管理小工具更新成如图13所示，具有代表性的可选择的一个或多个用户交互选项以用于结算，例如“苹果支付”。在选择苹果支付的支付选项之后，用户将能够支付她的/他的延迟支付义务$5.37。应当理解，这种支付选项可以包括上述一个或多个支付选项，包括信用卡、苹果支付(如图所示)、谷歌支付、法定货币、加密电子货币、允许第三方支付余额、应用应计减免抵消该余额、或通过在诸如用户的关联移动设备的合适设备上激活的电子钱包应用。一旦用户已经支付了$5.37的支付义务，交易管理小工具就可以更新成反映或确认该支付，例如图14中所示。
使用由根据本发明的交易管理软件模块产生的交易管理小工具不仅使得用户能够利用延迟支付快速进行交易，而且可以通过以不同颜色、图案或阴影描绘Omega圆的相应片段，或者以不同颜色、图案或阴影突出该片段的轮廓，来反映例如提供给用户或由用户得到的减免或折扣。类似地，提供给用户或由用户得到的代金券(例如，用于参与虚拟环境中的活动)可以以类似方式反映在Omega圆中，具有或不具有关于可使用该代金券的物质或虚拟项目或者服务的指示符。该代金券还可以非限制性地反映针对产品、电子游戏服务、和对事件的访问所得到的减免和/或折扣，所述事件例如音乐会、戏剧表演、体育赛事、博物馆、美术馆、或者实际或虚拟博物馆或动物园的旅行。一个具体示例包括得到参与虚拟环境中的活动的这种代金券，以在现实世界中针对产品和/或活动使用所得到的减免或折扣，这些产品和/或活动包括例如：接收服务，或参加音乐会、体育赛事、戏剧表演或旅行。
图15示出了有利地描绘“Omega圆”(表示$1.76的延迟支付义务)的交易管理小工具，其中通过灰色圆弧指示未决的延迟支付义务，该灰色圆弧从黑色圆弧开始沿顺时针方向延伸，用于离线进行的或在针对相应确认的交易待接受的延迟支付义务所需的时间段期间进行的购买。尽管附图中所示出的交易管理小工具以Omega圆和美元金额的形式示出，但是也可以用替选符号来表示，包括例如其他形状(例如，(一个或多个)倾斜的条形、或下降的直线)的指示符以及其他货币金额。
通过实现有利的、独特的虚拟交易管理小工具多功能工具以及使得用户能够与这种图像指示器交互并结合在虚拟或增强现实环境中选择现实或虚拟对象用于潜在购买、租借或访问交易，根据本发明的交易系统有益地实现了快速交易，包括利用有限的用户交互确认这种具有延迟支付义务的交易。这种交易系统及其方法特别有利于虚拟环境中的小额支付交易。
应当理解，尽管已经通过示例图示并描述了本发明的各个方面，但是本文描述的本发明不限于此，而是如公开内容所建议的以及如所附权利要求的范围内所指示的，还可以以其他各种方式实施本发明。例如，尽管公开内容中关于虚拟现实HMD和系统描述了用于利用延迟支付义务和有限的用户交互实现快速交易的交易系统的创新方法，但是这种创新还可以在增强现实或全息系统等中实现。
附图标记：
110AR设备
111显示器
112眼球跟踪器
113惯性测量单元
120AR后端
130智能手机
140支付系统
150产品数据库
200虚拟服装商店
210衬衫
211、212裤子
220购物车符号
230视场
310第一信号
315选择数据
320第二信号
325反应数据
330定价数据
335支付数据
410进度条
420指令文本域
500用户
S1启动步骤
S2第一分析步骤
S3第二分析步骤
S4评估步骤
S5数据收集步骤
S6数据分配步骤
S7校验步骤
S8支付传输步骤
S9终止步骤
S11触发步骤
S12a确定请求
S12b确定响应
S13a查找请求
S13b查找响应
S14交易步骤

Claims (15)

1.一种用于实现与增强现实环境有关的购买的计算机实现的方法，所述增强现实环境由AR设备(110)和/或AR后端(120)提供，所述AR设备(110)具有至少一个显示器(111)和至少一个传感器，所述至少一个传感器优选眼球跟踪器(112)、位置传感器和/或惯性测量单元(113)，所述方法包括以下步骤：
-在所述增强现实环境中可视化购买激励(220)，特别地，通过使用所述显示器(111)进行可视化；
-基于来自所述至少一个传感器的第一信号(310)获得选择数据(315)，所述选择数据(315)指示所选择的用于购买的项目(210)，特别是虚拟内容项目和/或现实世界项目；
-基于来自所述至少一个传感器的第二信号(320)获得反应数据(325)，所述第二信号(320)在一时长内持续被获取；
-评估所述反应数据(325)以确认或取消购买所选择的项目(210)；
-将定价数据(330)和支付数据(335)分配给所选择的项目(210)，特别地，通过执行数据库查找进行分配；
-如果确认购买，则将所述定价数据(330)和/或所述支付数据(335)传输到支付系统(140)以启动所选择的项目(210)的支付。
2.根据权利要求1所述的方法，其特征在于，如果所述反应数据(325)的至少一部分指示如下内容，则确认购买：
-用户注视所述增强现实环境中的区域(230)，优选地，通过所述眼球跟踪器(112)的传感器信号指示所述用户的注视；
-用户处于所述增强现实环境中的区域中的位置，优选地，通过所述位置传感器和/或所述惯性测量单元(113)的传感器信号指示所述用户的位置；和/或
-所述用户的预定数量的点头，优选地，通过所述惯性测量单元(113)的传感器信号指示所述用户的预定数量的点头。
3.根据权利要求1或2所述的方法，其特征在于，如果所述反应数据(325)的至少一部分指示用户的预定数量的摇头，则取消购买，优选地，通过所述惯性测量单元(113)的传感器信号指示所述用户的预定数量的摇头。
4.根据权利要求1至3中任一项、特别是权利要求2所述的方法，其特征在于，所述方法还包括以下步骤：
-在所述增强现实环境中可视化所述时长内的时间进度，特别地，通过进度条(410)、倒计时器、彩色编码和/或时钟来可视化所述时间进度。
5.根据权利要求1至4中任一项所述的方法，其特征在于，所述方法还包括：
-响应于所述第一信号中的至少一个第一信号或由所述至少一个第一信号触发，存储所述时长的开始时间；
-确定所述时长的结束时间，优选地，使得所述结束时间与所述开始时间之间的差值等于预定恒定值，优选地，所述预定恒定值小于或等于5秒。
6.根据权利要求1至5中任一项、特别是权利要求4至5所述的方法，其特征在于，可视化所述时间进度包括以下步骤中的一个或多个步骤：
-在所述时长的开始时间显示时间指示器，特别地，使用所述显示器(111)进行显示；
-根据时间的进度更新所述时间指示器，优选地，通过所述AR设备(110)的时间单元提供所述时间指示器的更新；
-在所述时长的结束时间移除所述时间指示器。
7.根据权利要求1至6中任一项所述的方法，其特征在于，所述支付系统(140)适于执行来自用户的支付交易，使得只有在根据所述定价数据(330)的项目成本的总成本以及与所述用户相关联的未结算的在先义务的总金额超过阈值金额时才需要支付，其中，优选地，在所述增强现实环境中显示交易状态指示器，所述交易状态指示器指示以下中的至少一者：
-所选择的项目(210)的所述定价数据(330)；
-在所述支付系统(140)需要支付之前的所述阈值金额；
-若存在的话，未结算的在先义务。
8.一种用于实现与增强现实环境有关的购买的计算机实现的方法，特别是根据权利要求1至7中任一项所述的方法，所述增强现实环境由AR设备(110)和/或AR后端(120)提供，所述AR设备(110)具有至少一个显示器(111)和至少一个传感器，所述至少一个传感器优选眼球跟踪器、位置传感器和/或惯性测量单元(113)，所述方法包括以下步骤：
-由移动设备(130)接收触发信号，所述触发信号指示用户的购买意图，特别地，所述触发信号为音频信号；
-由所述移动设备(130)识别与所述购买意图有关的至少一个项目(210)，特别地，通过将至少一个请求发送到所述AR设备(110)和/或所述AR后端(120)进行识别；
-将定价数据(330)和支付数据(335)分配给所识别的项目(210)，特别地，通过执行数据库查找进行分配；
-由所述移动设备(130)将所述定价数据(330)和/或所述支付数据(335)传输到支付系统(140)以启动所选择的项目(210)的支付。
9.根据权利要求1至8中任一项、特别是权利要求8所述的方法，其特征在于，识别与所述购买意图有关的所述至少一个项目(210)包括：
-由所述移动设备(130)将请求发送到所述AR设备(110)和/或所述AR后端(120)，所述请求包括识别数据和与所述购买意图有关的数据；
-由所述AR设备和/或所述AR后端将所述请求关联到所述增强现实环境中的替身，所述替身与所述识别数据相关联；
-使用与所述购买信息有关的数据以及所述替身的至少一个特性由所述AR设备(110)和/或所述AR后端(120)确定至少一个项目(210)。
10.根据权利要求1至9中任一项、特别是权利要求8至9所述的方法，其中，所述替身的所述至少一个特性对应于：
-用户注视所述增强现实环境中的区域(230)，优选地，通过所述眼球跟踪器的传感器信号指示所述用户的注视；和/或
-用户处于所述增强现实环境中的区域中的位置，优选地，通过所述位置传感器和/或所述惯性测量单元(113)的传感器信号指示所述用户的位置。
11.根据权利要求1至10中任一项、特别是权利要求8至10所述的方法，其特征在于，所述方法还包括以下步骤：
-由所述移动设备(130)将与所识别的项目(210)有关的描述数据传输到所述AR设备(110)；
-由所述AR设备(110)可视化所述描述数据，特别地，通过使用所述显示器(111)进行可视化；
-由所述AR设备(110)基于来自所述至少一个传感器的第三信号评估反应数据(325)，以确认或取消购买所选择的项目(210)。
12.一种计算机可读介质，所述计算机可读介质存储指令，所述指令在由至少一个处理器执行时使得所述至少一个处理器实现根据权利要求1至11中任一项所述的方法。
13.一种AR设备(110)，包括根据权利要求12所述的计算机可读介质。
14.一种用于实现与增强现实环境有关的购买的系统，所述系统包括：
-AR设备(110)，所述AR设备(110)具有至少一个显示器(111)和至少一个传感器，所述至少一个传感器优选眼球跟踪器(112)、位置传感器和/或惯性测量单元(113)；
-AR后端(120)；
-至少一个支付系统(140)，
其中，所述增强现实环境由所述AR设备(110)和/或所述AR后端(120)提供，所述AR设备(110)被配置成在所述增强现实环境中可视化购买激励，特别地，通过使用所述显示器(111)进行可视化，以及所述AR后端(120)被配置成执行以下操作中的至少一者：
-基于来自所述至少一个传感器的第一信号(310)获得选择数据(315)，所述选择数据(315)指示所选择的用于购买的项目(210)；
-基于来自所述至少一个传感器的第二信号(320)获得反应数据(325)，所述第二信号(320)在一时长内持续被获取；
-评估所述反应数据(325)以确认或取消购买所选择的项目(210)；
-将定价数据(330)和支付数据(335)分配给所选择的项目(210)，特别地，通过执行数据库查找进行分配；
-如果确认购买，则将所述定价数据(330)和/或所述支付数据(335)传输到所述支付系统(140)以启动所选择的项目(210)的支付。
15.根据权利要求14所述的系统，其特征在于，所述系统还包括移动设备(130)，特别是智能手机或智能扬声器，所述移动设备(130)被配置成执行以下操作中的至少一者：
-接收触发信号，所述触发信号指示用户的购买意图，特别地，所述触发信号为语音信号；
-识别与所述购买意图有关的至少一个项目(210)，特别地，通过将至少一个请求发送到所述AR设备(110)和/或所述AR后端(120)进行识别；
-将所述定价数据(330)和所述支付数据(335)分配给所识别的项目(210)，特别地，通过执行数据库查找进行分配；
-将所述定价数据(330)和/或所述支付数据(335)传输到所述支付系统(140)以启动所选择的项目(210)的支付。
CN202211711154.2A 2021-12-30 2022-12-29 实现与增强现实环境有关的购买的系统和计算机实现的方法、计算机可读介质和ar设备 Pending CN116385089A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US202163295239P 2021-12-30 2021-12-30
US63/295,239 2021-12-30
EP22153987.7 2022-01-28
EP22153987.7A EP4207036A1 (en) 2021-12-30 2022-01-28 A computer-implemented method for enabling purchases related to an augmented reality environment, a computer readable medium, an ar device, and a system for enabling purchases related to an augmented reality environment

Publications (1)

Publication Number Publication Date
CN116385089A true CN116385089A (zh) 2023-07-04

Family

ID=80122777

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211711154.2A Pending CN116385089A (zh) 2021-12-30 2022-12-29 实现与增强现实环境有关的购买的系统和计算机实现的方法、计算机可读介质和ar设备

Country Status (5)

Country Link
US (1) US20230222479A1 (zh)
EP (1) EP4207036A1 (zh)
JP (1) JP2023099344A (zh)
CN (1) CN116385089A (zh)
IE (1) IE20220125U1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102009050985A1 (de) 2009-09-08 2011-03-17 Cosmin-Gabriel Ene Bezahlsystem, Einkaufssystem und Verfahren zum Durchführen einer Vielzahl von Bezahlvorgängen
US20160070439A1 (en) * 2014-09-04 2016-03-10 International Business Machines Corporation Electronic commerce using augmented reality glasses and a smart watch
CN106980983A (zh) * 2017-02-23 2017-07-25 阿里巴巴集团控股有限公司 基于虚拟现实场景的业务认证方法及装置
US20200371673A1 (en) * 2019-05-22 2020-11-26 Microsoft Technology Licensing, Llc Adaptive interaction models based on eye gaze gestures

Also Published As

Publication number Publication date
US20230222479A1 (en) 2023-07-13
IES87404Y1 (en) 2023-07-05
JP2023099344A (ja) 2023-07-12
EP4207036A1 (en) 2023-07-05
IE20220125U1 (en) 2023-07-05

Similar Documents

Publication Publication Date Title
US11182842B2 (en) No authentication payment and seamless authentication
US11074644B2 (en) Systems and methods for augmented reality payments
CN106251133B (zh) 用于可穿戴设备的忠诚度账户和自有品牌账户的用户界面
US10740807B2 (en) Systems and methods for transmission of representational image-based offers based on a tactile input
US10783531B2 (en) Cardless payment transactions based on geographic locations of user devices
US10482664B1 (en) Augmented and virtual reality system and method for conducting transactions
WO2012125940A1 (en) Making interactive purchases through a media display device
WO2014204676A1 (en) Systems and methods for emv chip and pin payments
US20230230086A1 (en) Value transfer via facial recognition
US20160140553A1 (en) Authentication and transactions in a three-dimensional image enhancing display device
US11966926B2 (en) Method and system for asynchronous mobile payments for multiple in-person transactions conducted in parallel
GB2513602A (en) Authentication system for purchase delivery
WO2015199804A1 (en) Systems and methods for facilitating purchase using gesture
WO2015112279A1 (en) Systems and methods for facilitating transactions using pattern recognition
CN116385089A (zh) 实现与增强现实环境有关的购买的系统和计算机实现的方法、计算机可读介质和ar设备
US11880837B2 (en) System and computer-implemented method for dynamic merchant configuration in a payment terminal for transacting in a virtual environment
US20220084103A1 (en) No authentication payment and seamless authentication
US20240029040A1 (en) Method and system for augmented feature purchase
US20130282450A1 (en) Method and apparatus for the generation of virtual goods with randomized value elements
AU2015200585A1 (en) Transactions by flicking

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication