CN112184359A - 受引导的消费者体验 - Google Patents

受引导的消费者体验 Download PDF

Info

Publication number
CN112184359A
CN112184359A CN202010634100.5A CN202010634100A CN112184359A CN 112184359 A CN112184359 A CN 112184359A CN 202010634100 A CN202010634100 A CN 202010634100A CN 112184359 A CN112184359 A CN 112184359A
Authority
CN
China
Prior art keywords
product
environment
image
display
virtual object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010634100.5A
Other languages
English (en)
Inventor
A·B·奥泽
J·S·赖林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of CN112184359A publication Critical patent/CN112184359A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/01—Customer relationship services
    • G06Q30/015—Providing customer assistance, e.g. assisting a customer within a business location or via helpdesk
    • G06Q30/016—After-sales
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0281—Customer communication at a business location, e.g. providing product or service information, consulting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0613—Third-party assisted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/10—Terrestrial scenes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1083—In-session procedures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开涉及一种用于提供受引导的消费者体验的示例性过程，在所述示例性过程中，显示了包括产品的图像的产品信息。提供了与远程用户的通信会话。在提供所述通信会话时，使用从所述通信会话接收的信息来调整所述产品信息的所述显示。所述产品的表示通过以下方式在计算机生成现实中显示：使用相机捕获图像，通过合成表示所述产品的虚拟对象和所捕获的图像来生成环境的视图，以及显示所述环境的所述视图。

Description

受引导的消费者体验
背景技术
1.技术领域
本公开整体涉及使用电子设备的消费者体验，并且更具体地涉及用于提供具有计算机生成现实能力的交互式受引导的消费者体验的技术。
2.相关领域的描述
常规的电子消费者体验允许用户使用电子设备(诸如膝上型计算机或台式计算机、平板电脑或智能电话)在线浏览以及购买产品。用户可在不与另一人交互的情况下，通过网站或应用程序访问产品信息，选择产品以及购买该产品。
发明内容
本公开描述了用于增强消费者体验(包括在线零售体验和客户支持体验)的技术。在线购物可缺乏瞬时反馈、对问题的回答、建议以及亲自购物体验的人与人之间的联系。当前的在线消费者应用程序要求用户浏览菜单或执行搜索功能以定位感兴趣的产品。本文所述的技术提供与远程销售人员的实时通信(经由音频和/或视频电子通信会话)，该远程销售人员可在用户的设备上演示产品。这允许消费者与销售人员交互会话，销售人员可提供相关的产品并基于会话提出建议。销售人员可经由电子通信会话使产品在用户的设备上显示，并且用户可操纵产品以查看各种部分和特征。销售人员也可操纵产品以在没有用户输入的情况下指出产品的特征。这提供受引导的远程购物体验，其允许销售人员在从产品选择到购买的购物体验过程中引导用户，而不需要用户的手动输入，但具有允许用户根据需要选择产品并与产品交互的灵活性。
本文所述的另一个特征是将交互式计算机生成现实能力结合到消费者体验中的能力。例如，在与远程用户(例如，销售人员)的通信会话期间，消费者可激活相机以捕获消费者环境的图像，然后生成环境的视图(例如，计算机生成现实(CGR)环境)以显示产品在消费者的当前环境中的外观。虽然环境的视图显示在消费者的设备上，但销售人员可将产品添加到该环境，以不同的产品替换当前显示的产品，以及演示计算机生成现实环境中的产品和特征。这允许销售人员在计算机生成现实中的购物体验过程中继续引导消费者。
除了购物之外，这些特征也可用来增强产品支持。例如，膝上型计算机的所有者可发起与产品支持专员的通信会话。膝上型电脑的虚拟表示可在所有者正用于进行通信的设备(例如，智能电话)上显示。所有者可操纵虚拟表示以解释膝上型电脑的问题，并且产品支持专员可操纵在所有者的通信设备上显示的虚拟表示以在故障排除会话过程中引导所有者以解决这些问题。
根据一些实施方案，显示包括产品的图像的产品信息，并且提供与所述产品的销售人员的通信会话。在提供所述通信会话时，使用从所述通信会话接收的信息来调整所述产品信息的所述显示。所述产品的表示通过以下方式显示：使用相机捕获图像，通过合成表示所述产品的虚拟对象和所捕获的图像来生成环境的视图，以及显示所述环境的所述视图。
根据一些实施方案，所述技术由系统、电子设备或计算机可读存储介质(暂态或非暂态)提供。
附图说明
为了更好地理解各种所述实施方案，应该结合以下附图参考下面的具体实施方式，在附图中，类似的附图标号在所有附图中指示对应的部分。
图1A至图1B描绘了根据各种实施方案的用于各种计算机生成现实技术的示例性系统。
图2A至图2S示出了根据各种实施方案的用于受引导的消费者体验的用户界面。
图3描绘了根据各种实施方案的用于受引导的消费者体验的示例性过程的流程图。
具体实施方式
以下描述阐述了示例性方法、参数等。此类描述并非意在限制本公开的范围，而是作为对示例性实施方案的描述来提供。
描述了用于与各种计算机生成的现实技术相关地使用此类系统的电子系统和技术的各种示例。
物理环境(或真实环境)是指人们在没有电子系统帮助的情况下能够感测和/或交互的物理世界。物理环境诸如物理公园包括物理物品(或物理对象或真实对象)，诸如物理树木、物理建筑物和物理人。人们能够诸如通过视觉、触觉、听觉、味觉和嗅觉来直接感测物理环境和/或与物理环境交互。
相反，计算机生成现实(CGR)环境是指人们经由电子系统感知和/或交互的完全或部分模拟的环境。在CGR中，跟踪人的物理运动的一个子集或其表示，并且作为响应，以符合至少一个物理定律的方式调节在CGR环境中模拟的一个或多个虚拟对象的一个或多个特征。例如，CGR系统可以检测人的头部转动，并且作为响应，以与此类视图和声音在物理环境中变化的方式类似的方式调节呈现给人的图形内容和声场。在一些情况下(例如，出于可达性原因)，对CGR环境中虚拟对象的特征的调节可以响应于物理运动的表示(例如，声音命令)来进行。
人可以利用其感官中的任一者来感测CGR对象和/或与CGR对象交互，包括视觉、听觉、触觉、味觉和嗅觉。例如，人可以感测音频对象和/或与音频对象交互，音频对象创建3D或空间音频环境，3D或空间音频环境提供3D空间中点音频源的感知。又如，音频对象可以使能音频透明度，该音频透明度在有或者没有计算机生成的音频的情况下选择性地引入来自物理环境的环境声音。在某些CGR环境中，人可以感测和/或只与音频对象交互。
CGR的示例包括虚拟现实和混合现实。
虚拟现实(VR)环境(虚拟环境)是指被设计成对于一个或多个感官完全基于计算机生成的感官输入的模拟环境。VR环境包括人可以感测和/或交互的多个虚拟对象。例如，树木、建筑物和代表人的化身的计算机生成的图像是虚拟对象的示例。人可以通过在计算机生成的环境内人的存在的模拟、和/或通过在计算机生成的环境内人的物理运动的一个子组的模拟来感测和/或与VR环境中的虚拟对象交互。
与被设计成完全基于计算机生成的感官输入的VR环境相比，混合现实(MR)环境是指被设计成除了包括计算机生成的感官输入(例如，虚拟对象)之外还引入来自物理环境的感官输入或其表示的模拟环境。在虚拟连续体上，MR环境是完全物理环境作为一端以及VR环境作为另一端之间的任何状况，但不包括这两端。
在一些MR环境中，计算机生成的感官输入可以对来自物理环境的感官输入的变化进行响应。另外，用于呈现MR环境的一些电子系统可以跟踪相对于物理环境的位置和/或取向，以使虚拟对象能够与真实对象(即，来自物理环境的物理物品或其表示)交互。例如，系统可以导致运动使得虚拟树木相对于物理地面看起来是静止的。
MR的示例包括增强现实和增强虚拟。
增强现实(AR)环境是指其中一个或多个虚拟对象叠加在物理环境或其表示之上的模拟环境。例如，用于呈现AR环境的电子系统可具有透明或半透明显示器，人可以透过该显示器直接查看物理环境。该系统可以被配置成在透明或半透明显示器上呈现虚拟对象，使得人利用该系统感知叠加在物理环境之上的虚拟对象。另选地，系统可以具有不透明显示器和一个或多个成像传感器，成像传感器捕获物理环境的图像或视频，这些图像或视频是物理环境的表示。系统将图像或视频与虚拟对象组合，并在不透明显示器上呈现组合物。人利用系统经由物理环境的图像或视频而间接地查看物理环境，并且感知叠加在物理环境之上的虚拟对象。如本文所用，在不透明显示器上显示的物理环境的视频被称为“透传视频”，意味着系统使用一个或多个图像传感器捕获物理环境的图像，并且在不透明显示器上呈现AR环境时使用那些图像。进一步另选地，系统可以具有投影系统，该投影系统将虚拟对象投射到物理环境中，例如作为全息图或者在物理表面上，使得人利用该系统感知叠加在物理环境之上的虚拟对象。
AR环境也是指其中物理环境的表示被计算机生成的感官信息进行转换的模拟环境。例如，在提供透传视频中，系统可以对一个或多个传感器图像进行转换以施加与成像传感器所捕获的视角不同的选择视角(例如，视点)。又如，物理环境的表示可以通过图形地修改(例如，放大)其部分而进行转换，使得经修改部分可以是原始捕获图像的代表性的但不是真实的版本。再如，物理环境的表示可以通过以图形方式消除其部分或将其部分进行模糊处理而进行转换。
增强虚拟(AV)环境是指其中虚拟或计算机生成的环境结合来自物理环境的一个或多个感官输入的模拟环境。感官输入可以是物理环境的一个或多个特征的表示。例如，AV公园可以具有虚拟树木和虚拟建筑物，但人的脸部是从对物理人拍摄的图像逼真再现的。又如，虚拟对象可以采用一个或多个成像传感器所成像的物理物品的形状或颜色。再如，虚拟对象可以采用符合太阳在物理环境中的位置的阴影。
有许多不同类型的电子系统使人能够感测和/或与各种CGR环境交互。示例包括头戴式系统、基于投影的系统、平视显示器(HUD)、集成有显示能力的车辆挡风玻璃、集成有显示能力的窗户、被形成为被设计用于放置在人眼睛上的透镜的显示器(例如，类似于隐形眼镜)、耳机/听筒、扬声器阵列、输入系统(例如，具有或没有触觉反馈的可穿戴或手持控制器)、智能电话、平板电脑、和台式/膝上型计算机。头戴式系统可以具有一个或多个扬声器和集成的不透明显示器。另选地，头戴式系统可以被配置成接受外部不透明显示器(例如，智能电话)。头戴式系统可以结合用于捕获物理环境的图像或视频的一个或多个成像传感器、和/或用于捕获物理环境的音频的一个或多个麦克风。头戴式系统可以具有透明或半透明显示器，而不是不透明显示器。透明或半透明显示器可以具有媒介，代表图像的光通过该媒介被引导到人的眼睛。显示器可以利用数字光投影、OLED、LED、uLED、硅基液晶、激光扫描光源或这些技术的任意组合。媒介可以是光学波导、全息图媒介、光学组合器、光学反射器、或它们的任意组合。在一个示例中，透明或半透明显示器可被配置为选择性地变得不透明。基于投影的系统可以采用将图形图像投影到人的视网膜上的视网膜投影技术。投影系统也可以被配置成将虚拟对象投影到物理环境中，例如作为全息图或在物理表面上。
图1A和图1B示出了在各种计算机生成的现实技术中使用的示例性系统100。
在一些示例中，如图1A所示，系统100包括设备100a。设备100a包括各种部件，诸如处理器102、RF电路104、存储器106、图像传感器108、取向传感器110、麦克风112、位置传感器116、扬声器118、显示器120和触敏表面122。这些部件任选地通过设备100a的通信总线150进行通信。
在一些示例中，系统100的元件在基站设备(例如，计算设备，诸如远程服务器、移动设备或膝上型计算机)中实现，并且系统100的其他元件在设计成由用户佩戴的头戴式显示器(HMD)设备中实现，其中HMD设备与基站设备通信。在一些示例中，设备100a在基站设备或HMD设备中实现。
如图1B所示，在一些示例中，系统100包括两个(或更多个)通信中的设备，诸如通过有线连接或无线连接。第一设备100b(例如，基站设备)包括处理器102、RF电路104和个存储器106。这些部件可选地通过设备100b的通信总线150进行通信。第二设备100c(例如，头戴式设备)包括各种部件，诸如处理器102、RF电路104、存储器106、图像传感器108、取向传感器110、麦克风112、位置传感器116、扬声器118、显示器120和触敏表面122。这些部件可选地通过设备100c的通信总线150进行通信。
在一些示例中，系统100为移动设备。在一些示例中，系统100为头戴式显示器(HMD)设备。在一些示例中，设备100为可穿戴HUD设备。
系统100包括处理器102和存储器106。处理器102包括一个或多个通用处理器、一个或多个图形处理器、和/或一个或多个数字信号处理器。在一些示例中，存储器106是存储计算机可读指令的一个或多个非暂态计算机可读存储介质(例如，闪存存储器，随机存取存储器)，所述计算机可读指令被配置为由处理器102执行以执行下述技术。
系统100包括RF电路104。RF电路104可选地包括用于与电子设备、网络(诸如互联网、内联网)和/或无线网络(诸如蜂窝网络和无线局域网(LAN))通信的电路。RF电路104可选地包括用于使用近场通信和/或短程通信(诸如
Figure BDA0002567248250000061
)进行通信的电路。
系统100包括显示器120。在一些示例中，显示器120包括第一显示器(例如，左眼显示器面板)和第二显示器(例如，右眼显示器面板)，每个显示器用于向用户的相应眼睛显示图像。对应的图像同时显示在第一显示器和第二显示器上。可选地，对应的图像包括来自不同视点的相同虚拟对象和/或相同物理对象的表示，从而产生视差效应，该视差效应向用户提供显示器上对象的立体感效应。在一些示例中，显示器120包括单个显示器。对于用户的每只眼睛，对应的图像同时显示在单个显示器的第一区域和第二区域上。可选地，对应的图像包括来自不同视点的相同虚拟对象和/或相同物理对象的表示，从而产生视差效应，该视差效应向用户提供单个显示器上对象的立体感效应。
在一些示例中，系统100包括用于接收用户输入的触敏表面122，诸如轻击输入和轻扫输入。在一些示例中，显示器120和触敏表面122形成触敏显示器。
系统100包括图像传感器108。图像传感器108可选地包括一个或多个可见光图像传感器(诸如电荷耦合设备(CCD)传感器)和/或可操作以从真实环境获得物理对象的图像的互补金属氧化物半导体(CMOS)传感器。图像传感器还可选地包括一个或多个红外(IR)传感器，诸如无源IR传感器或有源IR传感器，用于检测来自真实环境的红外光。例如，有源IR传感器包括IR发射器，诸如IR点发射器，用于将红外光发射到真实环境中。图像传感器108还可选地包括一个或多个事件相机，这些事件相机被配置为捕获真实环境中的物理对象的移动。图像传感器108还可选地包括一个或多个深度传感器，这些深度传感器被配置为检测物理对象与系统100的距离。在一些示例中，系统100组合使用CCD传感器、事件相机和深度传感器来检测系统100周围的物理环境。在一些示例中，图像传感器108包括第一图像传感器和第二图像传感器。第一图像传感器和第二图像传感器可选地被配置为从两个不同的视角捕获真实环境中的物理对象的图像。在一些示例中，系统100使用图像传感器108来接收用户输入，诸如手势。在一些示例中，系统100使用图像传感器108来检测系统100和/或显示器120在真实环境中的位置和取向。例如，系统100使用图像传感器108来跟踪显示器120相对于真实环境中的一个或多个固定对象的位置和取向。
在一些示例中，系统100包括麦克风112。系统100使用麦克风112来检测来自用户和/或用户的真实环境的声音。在一些示例中，麦克风112包括麦克风阵列(包括多个麦克风)，其任选地串联操作，以便识别环境噪声或在真实环境的空间中定位声源。
系统100包括用于检测系统100和/或显示器120的取向和/或移动的取向传感器110。例如，系统100使用取向传感器110来跟踪系统100和/或显示器120的位置和/或取向的变化，诸如关于真实环境中的物理对象。取向传感器110可选地包括一个或多个陀螺仪和/或一个或多个加速度计。
现在参见图2A至图2S，描述了用于受引导的消费者体验的示例性技术。
图2A描绘了具有显示器202的电子设备200。在一些实施方案中，设备200是智能电话、平板电脑、膝上型计算机、台式计算机或具有显示器的其他电子系统或设备(例如，图1A至图1B中的设备100a或100c)。在图2A中，显示器202是触敏显示器。在一些实施方案中，设备200与鼠标、键盘或接收输入的其他外围设备通信。
在图2A中，设备200显示在线购物应用程序的用户界面204a，该用户界面包括对应于计算机、电话和电视的用户界面对象。在一些实施方案中，用户界面对象是允许用户导航应用程序(例如，将物品放置在虚拟购物车中、结账和支付所选择的物品)的可选择的示能表示。用户界面204a还包括与销售人员进行通信会话的选项。响应于接收到用户输入，提供与销售人员的通信会话。在图2A中，用户输入210a包括触敏显示器202上的接触。
响应于接收到用户输入210a，设备200发起与销售人员(也称为“客户支持专员”)的通信会话。如图2B所示，设备200以用户界面204b替换用户界面204a，用户界面204b包括正在发起与销售人员的视频通话的视觉指示。在一些实施方案中，通信会话是具有双向音频的双向视频通信、具有双向音频的单向视频通信或没有视频的双向音频通信。在一些实施方案中，设备200包括供用户选择由会话提供的通信类型或在会话期间改变通信类型的选项。
转到图2C，一旦建立了通信会话，设备200就显示包括销售人员的视频的用户界面204c。在一些实施方案中，设备200显示表示销售人员的头像。在一些实施方案中，设备200响应于接收到用户输入210a而显示用户界面204c，而不显示用户界面204b。
在提供通信会话时，设备200的用户可与销售人员进行视频和/或音频会话。销售人员可通过远程控制用户显示器的各方面在购物体验过程中引导用户。
在一些实施方案中，在提供通信会话时，设备200使用从该通信会话接收的信息来显示产品信息。例如，如果设备200的用户向销售人员指示对膝上型计算机的兴趣，则销售人员可经由通信会话(例如，经由该销售人员是本地的但远离设备200的服务器或设备)发送信息，该信息使得膝上型计算机的图像与其他产品信息一起在设备200上显示。在一些实施方案中，响应于从通信会话接收的信息(例如，由销售人员经由远程设备或服务器发起)，设备200在应用程序上显示包括在用户的虚拟购物车中的物品的产品信息。
图2D示出了在设备250处显示的示例性用户界面252a，该示例性用户界面对于销售人员是本地的但远离设备200。用户界面252a还包括示能表示254。响应于对示能表示254的选择，设备250发起使得产品的图像在设备200上显示的过程。在一些实施方案中，响应于接收到对示能表示254的选择，设备250显示允许销售人员选择用于在设备200处显示的产品(例如，膝上型电脑)的一个或多个其他用户界面、用户界面菜单和/或示能表示。在一些实施方案中，响应于对示能表示254的选择，设备250使得包括在用户(消费者)的虚拟购物车中的一个或多个产品的图像在设备200处显示。
在图2D中，用户界面252a不包括由设备200捕获的图像或视频(例如，来自用户设备的用户的实时视频馈送)。例如，通信会话向销售人员提供来自设备200的音频，但不提供视频以便保护用户的隐私。在一些实施方案中，通信会话向设备250提供来自设备200的视频，并且该视频在用户界面252a上显示。
在例示的实施方案中，响应于从通信会话接收到信息，设备200通过以用户界面204d替换用户界面204c来显示产品信息，如图2E所示。用户界面204d包括产品信息206，该产品信息包括膝上型计算机的图像206a和描述性文本206b(“12英寸膝上型电脑”和“256GB黑色”)。在设备250(例如，销售人员的设备)上，显示用户界面252b，其包括对应于在设备200处显示的产品信息的产品信息256，如例如图2F所示。
在一些实施方案中，响应于来自销售人员的输入(例如，经由远程设备或服务器)而提供来自通信会话的信息。在一些实施方案中，响应于在设备200处接收到输入，设备200显示用户界面204d。例如，设备200可响应于触敏显示器202上的接触(例如，购物车图标208上的接触；在一些实施方案中，购物车图标208在用户界面204a、204b和/或204c上显示)而显示用户界面204d。在一些实施方案中，设备200响应于由设备200接收的语音输入(例如，“向我展示购物车”)而显示用户界面204d。
在图2E中，用户界面204d包括销售人员的图像212。图像212通过向设备200的用户指示在显示产品信息时继续提供通信会话来提供更多信息。在一些实施方案中，用户界面204d(和/或下文所述的用户界面204e、204f、204g和/或204h)不包括销售人员的图像212。在一些实施方案中，设备200更一般地不显示销售人员的图像(或表示)(例如，如果通信会话仅包括来自销售人员的音频)。在一些实施方案中(例如，如果通信会话仅包括来自销售人员的音频)，则设备200响应于接收到图2A中的用户输入210a而显示用户界面204d，而不显示销售人员的图像(或表示)(例如，不包括用户界面204d中的图像212以及/或者不显示用户界面204c)。
用户界面204d还包括用户界面对象214a(例如，示能表示)，该用户界面对象允许设备200的用户探索其他产品(例如，通过轻击触敏显示器202上对应于用户界面对象214a的位置)。
在一些实施方案中，设备200使用从通信会话接收的附加信息来显示附加产品信息。例如，类似于销售人员可发起在图2E中的用户界面204d上的产品信息206的显示(例如，膝上型电脑和相关信息)的方式，销售人员可发起(例如，经由远程设备或服务器)另一种产品的显示。例如，销售人员可采取使得经由设备200用来显示另一种产品的通信会话将信息发送到设备200的动作。例如，在图2F中，销售人员可选择示能表示254以发起附加产品信息的显示。
在例示的实施方案中，设备200显示用户界面204e以指示销售人员正在向显示器添加产品，如图2G所示。在一些实施方案中，当设备200和/或远程服务器处理销售人员添加附加产品信息的请求时(例如，当正从数据库中检索附加产品信息时)，设备200显示用户界面204e。用户界面204e是用户界面204d的修改版本。与用户界面204d相比，产品信息206和背景变灰，并且用户界面对象214a被用户界面对象214b替换，这指示销售人员正在向显示器添加产品。如本文所用，“显示产品”意指显示产品的表示(例如，图像或虚拟对象)和/或信息。类似地，“添加产品”意指显示附加产品的表示和/或信息。
图2H示出了包括9英寸平板电脑的附加产品信息216的示例性用户界面204f。在一些实施方案中，用户界面204f响应于在设备200处接收到的用户输入(例如，如果在用户的虚拟购物车中存在多个产品，或者用户导航到用于选择附加产品以及选择另一种产品的用户界面)而被显示。在例示的实施方案中，用户界面204f初始显示在显示器202上水平居中的附加产品信息216，其中产品信息206被显示但被部分地隐藏(例如，隐藏在显示器202的左边缘)。产品信息206和附加产品信息216的各种布置是可能的(例如，水平布置、竖直布置、二者完全显示、重叠等)。在设备250(例如，销售人员的设备)上，显示用户界面252c，其包括对应于在设备200处显示的产品信息的产品信息256和258，如例如图2I所示。设备250上的用户界面252c包括焦点指示器260，该焦点指示器指示平板电脑在设备200(例如，消费者的设备)上处于焦点(例如，中心位置)。
在显示用户界面204f时，设备200接收指示对平板电脑的选择的数据。在一些实施方案中，指示对产品的选择的数据包括在从通信会话接收的信息中(例如，销售人员经由远程设备或服务器选择膝上型电脑，该远程设备或服务器经由通信会话传送该选择)。在图2J中，指示对平板电脑的选择的数据包括触敏显示器202上对应于表示平板电脑的附加产品信息216的位置处的接触210b。
响应于接收到指示对平板电脑的选择的数据，设备200在视觉上区分附加产品信息216以指示平板电脑已被选择。在一些实施方案中，通过突出显示附加产品信息216、放大附加产品信息216、勾勒附加产品信息216、使用户界面204f的其他部分(例如，产品信息206和/或背景)变灰以及/或者移除用户界面204f的其他部分来在视觉上强调附加产品信息216。在图2K中，设备200通过放大平板电脑的表示并移除膝上型电脑的表示来强调附加产品信息216，同时保持销售人员的图像212。在一些实施方案中，放大所选择的产品的图像216包括动画，在该动画中图像216被放大并且看起来在垂直于显示器202的方向上(例如，更靠近用户)移动。
在一些实施方案中，表示216包括虚拟对象(例如，可由用户或销售人员旋转以及放大的平板电脑的三维表示)。在一些实施方案中，响应于接收到指示对平板电脑的选择的数据，设备200显示虚拟对象(例如，以虚拟对象替换图像216)。
在一些实施方案中，设备200的用户和销售人员两者可调整产品信息(例如，216)的显示。例如，设备200可使用从通信会话接收的信息(例如，经由销售人员在远程设备上的输入)来调整产品信息的显示。设备200还可响应于在设备200处接收到的输入来调整产品信息的显示。例如，用户可在触敏显示器202上提供输入以放大、缩小和/或旋转产品信息的显示。调整产品信息的显示可包括添加产品信息(如上所述)并移除产品信息。
在例示的实施方案中，如图2L所示，与图2K相比，设备200通过旋转平板电脑的表示(例如，图像216)来调整产品信息的显示。在一些实施方案中，由于销售人员使产品移动，因此设备200使用来自通信会话的信息来调整平板电脑的显示。以这种方式，销售人员可操纵所选择的产品的显示，例如以向设备200的用户显示该产品的某些特征。另选地或除此之外，设备200的用户可操纵产品的显示，例如以查看产品的不同部分。在一些实施方案中，可仅以预先确定的配置(例如，尺寸和/或取向)显示产品。此外，由于在整个该过程中提供了通信会话，因此用户和销售人员可具有进行中的会话，同时可互换地操纵所选择的产品的图像。用户可询问问题或告知销售人员他或她想要看什么产品，并且销售人员可回答问题、指出特征，并且向设备200的用户询问问题以确定设备200的用户对正在看的什么产品感兴趣。
再次参见图2K至图2L，响应于对产品的选择(例如，图2J中的输入210b)，设备200显示可被选择以激活计算机生成现实模式的用户界面对象218(例如，示能表示)，其中在CGR环境中显示所选择的产品。例如，响应于接收到用户输入210c(例如，如图2L所示的用户界面对象218处的触摸)，设备200在CGR环境中显示所选择的产品的表示。在一些实施方案中，设备200通过以下方式在CGR中显示产品的表示：使用相机(例如，设备200的背部上的相机)捕获图像，通过合成表示该产品的虚拟对象和所捕获的图像来生成CGR环境，以及显示所生成的CGR环境。在一些实施方案中，在CGR中显示产品的表示的过程的至少一部分在除设备200之外的设备处执行(例如，与设备200通信的设备(诸如与设备200配对(例如，经由蓝牙通信)的设备，或与设备200共用同一网络(例如，LAN或Wi-Fi网络)的设备)接收所捕获的图像并合成虚拟对象和所捕获的图像)。
图2M示出了包括示例性CGR环境220的用户界面204h的实施方案。为了生成图2M中的CGR环境220，设备200捕获周围物理环境的图像(例如，使用后置相机)并合成表示产品(平板电脑)的虚拟对象222和物理环境的图像。在一些实施方案中，虚拟对象222的显示基于所捕获的图像中的特征(例如，设备200基于所捕获的图像的特性来确定虚拟对象的比例、位置、取向、阴影或其他特征)。在图2M中，虚拟对象222被显示为使得平板电脑看起来平放在桌子224上。例如，可分析所捕获的图像以识别对象(诸如桌子224)及其位置，然后可生成CGR环境，使得虚拟对象在物理环境中的实际位置处显示。在一些实施方案中，虚拟对象的位置相对于物理环境保持固定，使得设备200的用户可将设备200的相机朝向物理环境的不同部分引导，同时虚拟对象222保持在桌子224上的相同位置处显示。
在一些实施方案中，设备250(例如，销售人员的设备)显示指示设备200已进入CGR模式的用户界面对象。在一些实施方案中(例如，为了保护用户隐私)，在设备250处不提供以及/或者显示由设备200捕获以生成CGR环境的图像和/或视频。相反，例如，设备250保持图2I中所示的视图。在一些实施方案中(例如，如果设备200的用户肯定同意共享由设备200捕获的图像)，则设备250显示CGR环境220。
在一些实施方案中，在CGR环境中显示附加产品和/或产品演示。图2N至图2O示出了将键盘(例如，表示键盘的虚拟对象)添加到CGR环境220的示例性动画。如图所示，表示平板电脑的虚拟对象222被旋转为直立到其在被配置为具有键盘时将坐置的位置，并且表示键盘的虚拟对象226从显示器202的右边缘平移到平板电脑下方的位置，使得键盘看起来平放在桌子224上。在一些实施方案中，平板电脑和键盘由单个虚拟对象228表示。在一些实施方案中，设备200停止显示仅表示平板电脑的虚拟对象222并且显示组合的虚拟对象228(例如，没有动画)。
在一些实施方案中，销售人员使得在CGR环境中显示附加产品和/或产品演示(例如，设备200没有从用户接收输入)。例如，设备200的用户可经由通信会话告知销售人员他或她对用于由虚拟对象222表示的平板电脑的键盘感兴趣，或者销售人员可向用户推荐键盘。销售人员可经由远程设备上的输入(例如，通过选择设备250上的示能表示254)发起所需产品的添加，并且使用从通信会话接收的信息来调整CGR环境的显示。在一些实施方案中，响应于设备200接收到用户输入(例如，触敏显示器202上的语音命令或触摸输入)而在CGR环境中显示附加产品和/或演示。在一些实施方案中，设备200的用户和销售人员两者可发起在CGR环境中设备的显示。在添加键盘之后，设备250(例如，销售人员的设备)可显示用户界面252d，该用户界面包括对应于在设备200处显示的产品信息的产品信息，包括对应于平板电脑和键盘组合的产品信息262，例如如图2P所示。
图2Q示出了在其中将另一个虚拟对象添加到CGR环境220并显示虚拟演示的示例。表示智能电话(例如，设备200)的虚拟对象230与组合的平板电脑和键盘的虚拟对象228一起显示。例如，销售人员可基于与设备200相关联的用户配置文件或由设备200经由通信会话提供的信息来了解用户拥有或正在使用什么类型的设备。在例示的实施方案中，软件产品232(例如，电子邮件应用程序)的虚拟演示在虚拟智能电话230的屏幕以及虚拟对象228的对应于平板电脑的显示器的部分上显示。销售人员可激活虚拟演示(例如，经由设备250处的输入)以向用户示出用户的电话和平板电脑如何一起操作以提供电子邮件应用程序。
在例示的实施方案中，用户接下来提供对应于停止CGR环境的显示的请求的输入210d。在图2Q中，用户选择用户界面对象234(例如，“关闭”示能表示)。响应于接收到停止CGR环境220的显示的请求，在例示的实施方案中，设备200返回到用户界面204f，如图2R所示。与图2J相比，图2R中的用户界面204f包括在CGR环境220的显示期间添加的由虚拟对象228表示的产品的产品信息。与先前添加的膝上型电脑的图像206一起显示表示例如图2O中所示的平板电脑和键盘组合的图像236。在一些实施方案中，用户可在显示器上从左向右轻扫使膝上型电脑的图像206在显示器上居中(例如，响应于在触敏显示器202上接收到从左到右的轻扫手势，设备200滚动所显示的产品并使膝上型电脑在显示器上居中)。在一些实施方案中，更新在设备250处显示的用户界面252d(例如，通过移动焦点指示器260)以指示哪个产品在显示器202上居中。
在图2R中，用户界面204f包括标记为“购买”的示能表示240。示能表示240可被标记为“立即购买”、“支付”等。在一些实施方案中，示能表示240先前被包括在用户界面204f(例如，图2H至图2J)上以及/或者用户界面204d、204e、204g和/或204h上。在一些实施方案中，设备250在例如用户界面252a、252b、252c和/或252d上显示类似于示能表示240的示能表示。
设备200检测示能表示240上的用户输入210e(例如，轻击)。响应于检测到用户输入210e，设备200显示图2S中所示的用户界面204i。在一些实施方案中，销售人员可发起用户界面204i在设备200上的显示(例如，经由设备250处的输入)。
用户界面204i包括购买信息，诸如被购买产品的产品信息236、价格信息242a(例如，产品价格、运输成本、税费、总成本等)、配送信息242b、账单信息242c和支付信息242d。购买信息可涉及一个或多个产品(例如，通信会话中涉及的产品(膝上型电脑、平板电脑和/或键盘)以及/或者包括在与设备200相关联的虚拟购物车中的其他产品)。在一些实施方案中，用户界面204i包括允许用户编辑购买信息(例如，改变配送地址或支付方式)的一个或多个示能表示和/或菜单。在一些实施方案中，销售人员可改变购买信息(例如，经由设备250处的输入)。
在一些实施方案中，设备200显示分期付款信息。例如，可响应于设备200处的用户输入或在由销售人员发起时(例如，经由设备250处的输入)显示分期付款信息。分期付款信息可包括例如支付条款，诸如每月支付金额、期限(例如，12期、24期等)、利率、头期款、总分期金额、手续费、以旧换新选项(例如，以当前拥有的设备进行信用交易的选项)等。
在图2S中，用户界面204i包括可被选择以完成交易的示能表示244。在一些实施方案中，需要(例如，由用户)选择示能表示244来完成交易。在一些实施方案中，交易可由销售人员(例如，基于通过通信会话来自设备200的用户的口头确认，经由设备250处的输入)完成。
应当认识到，上文相对于图2A至图2S所讨论的实施方案是示例性的，并非旨在进行限制。例如，上述技术可用于产品支持专员以向产品的所有者提供故障排除建议。
现在转到图3，描绘了用于提供包括CGR环境的受引导的消费者体验的示例性过程300的流程图。过程300可使用用户设备(例如，100a、100c或200)来执行。尽管在图3中以特定顺序描绘了过程300的框，但可以以其他顺序执行这些框。此外，过程300的一个或多个框可以是任选的并且/或者可以执行附加框。
在框302处，设备显示包括产品的图像的产品信息。在一些实施方案中，响应于在设备处接收到用户输入而显示产品信息。在一些实施方案中，产品的图像包括虚拟对象，诸如产品的虚拟三维(3D)表示(例如，产品的交互式虚拟3D模型)。
在框304处，设备提供与产品的销售人员的通信会话。在一些实施方案中，使用从通信会话接收的信息来显示包括产品的图像的产品信息。在一些实施方案中，远程参与者发起产品信息的显示(例如，销售人员在远离用户设备的设备处提供输入以添加产品信息并发起用户界面204d)。
在一些实施方案中，通信会话包括单向视频(例如，销售人员到设备的传入视频)和双向音频。在一些实施方案中，销售人员包括客户支持专员、产品专员等，即使销售是通过另一个渠道(例如，参见图2A至图2S所述的应用程序)进行的也是如此。在一些实施方案中，设备显示销售人员或客户支持专员的实时图像。在一些实施方案中，设备显示销售人员的头像。在一些实施方案中，设备显示销售人员的全屏视图(例如，204c)，并且当显示产品信息时，设备切换到新界面(例如，204d)。在一些实施方案中，设备将销售人员的图像移动至显示器一角中的窗口(例如，212)。在一些实施方案中，当显示产品信息(例如，初始产品信息或附加产品信息)时，设备调整显示器以指示正在添加产品(例如，204e)。在一些实施方案中，设备显示用于添加更多产品的示能表示(例如，214a)。
在框306处，在提供通信会话时，设备使用从通信会话接收的信息(例如，在设备200处没有用户输入)来调整产品信息的显示。在一些实施方案中，调整产品信息的显示包括旋转、放大、突出显示产品信息或产品的表示(例如，产品的图像或虚拟3D模型)等。在一些实施方案中，调整产品信息的显示包括添加或移除产品信息。在一些实施方案中，调整产品信息的显示包括指定产品(例如，图2J)。在一些实施方案中，调整产品信息的显示包括显示动画。
在一些实施方案中，指定产品包括突出显示、勾勒、居中以及/或者放大所选择的产品。在一些实施方案中，指定产品包括将产品的图像改变为交互式虚拟对象。在一些实施方案中，移除未选择的产品的显示(例如，移除所有未指定的产品信息)。
在一些实施方案中，远程参与者(例如，销售人员或客户支持专员)在远程设备处提供输入，该输入使得产品信息的显示被调整。在一些实施方案中，将产品信息调整为预定义的配置(例如，用户和/或销售人员可从一组预定义的产品视图/配置中进行选择)。在一些实施方案中，可连续调整产品的图像(例如，产品的图像的显示取向和/或尺寸是能够连续调整的)。在一些实施方案中，设备响应于用户输入(例如，用户可在触敏显示器202上以触摸输入旋转、放大产品的图像或虚拟3D模型等)而调整产品信息的显示。
在框308处，设备在CGR中显示产品的表示。在一些实施方案中，设备通过执行框708A、708B和/或708C中所述的操作来在CGR中显示产品的表示。
在框308A处，设备使用相机(例如，108)捕获图像(或视频)。在一些实施方案中，相机包括在设备中或耦接到该设备。在一些实施方案中，图像(或视频)由远程相机捕获并传输到设备或远程服务器。
在框308B处，设备通过合成表示(第一)产品的(第一)虚拟对象和所捕获的图像(或视频)来生成CGR环境。在一些实施方案中，合成虚拟对象和所捕获的图像(或视频)基于设备的确定的取向、设备的确定的位置或设备的确定的姿势。在一些实施方案中，合成虚拟对象和所捕获的图像(或视频)基于所捕获的图像(或视频)中的识别的表面(例如，识别桌子224的表面，使得表示电话的虚拟对象230可被显示为使得其看起来平放在CGR环境220中的组合的平板电脑和键盘旁边的桌子224上)。在一些实施方案中，合成虚拟对象和所捕获的图像(或视频)基于所捕获的图像(或视频)中的识别的特征点。在一些实施方案中，合成虚拟对象和所捕获的图像(或视频)包括将虚拟对象以预定义或固定的配置放置在CGR环境中(例如，用户不能在CGR环境中移动或重新布置虚拟对象)。在一些实施方案中，生成CGR环境包括合成：虚拟对象(例如，222)、虚拟产品演示(例如，232)以及所捕获的图像(或视频)。在一些实施方案中，通信会话的远程参与者(例如，销售人员)发起产品演示。
在一些实施方案中，远程服务器执行框308B中所述的一些或全部操作。例如，远程服务器(1)获取所捕获的图像(来自设备或远程相机)以及指示产品的数据(来自设备或远程数据库)，(2)通过合成表示产品的虚拟对象和所捕获的图像来生成CGR环境，以及(3)将表示所生成的CGR环境的数据(例如，经由通信会话)发送到设备。
在框308C处，设备显示所生成的CGR环境(例如，220)。在一些实施方案中，虚拟对象在CGR环境中相对于所捕获的图像(或视频)中的物理元素被显示为按比例缩放。在一些实施方案中，所选择的产品或处于焦点的产品的表示(例如，216)是CGR环境中表示的唯一产品(例如，即使所显示的产品信息包括对应于多于一种产品(例如，206和216)的信息)。在一些实施方案中，显示所生成的CGR环境包括动画(例如，通过例如旋转图像216以及/或者改变其尺寸以使之成为虚拟对象222，来以动画方式显示从用户界面204g到用户界面204h的过渡)。在一些实施方案中，使用来自通信会话的信息(例如，由销售人员)或响应于由设备接收到的用户输入而将虚拟对象添加到CGR环境。在一些实施方案中，显示所生成的CGR环境包括以包括所生成的CGR环境的用户界面(例如，204h)替换现有用户界面(例如，204f或204g)。在一些实施方案中，响应于用户输入(例如，210c)而执行框308A、308B和/或308C。在一些实施方案中，显示所生成的CGR环境包括移除表示销售人员(例如，212)的图像(例如，实时图像或头像)。
在一些实施方案中，虚拟产品演示在CGR环境之外(例如，在用户界面204f或204g中)显示。在一些实施方案中，虚拟产品演示在物理设备的图像(或视频)上显示(例如，软件产品的虚拟演示叠加在所捕获的图像(或视频)中的物理元素的物理显示上，诸如所捕获的图像中的物理膝上型计算机的显示)。
在一些实施方案中，设备通过以下方式调整所生成的CGR环境的显示：通过合成表示第二产品(例如，电话的虚拟对象230或虚拟产品演示232)的第二虚拟对象和所捕获的图像(或视频)来生成更新的CGR环境；以及显示所生成的更新的CGR环境。在一些实施方案中，第二虚拟对象包括第一产品(例如，图2O中的平板电脑)和第二产品(例如，图2O中的键盘)的表示。在一些实施方案中，调整所生成的CGR环境的显示包括以动画方式显示第二虚拟对象进入CGR环境中的过程。在一些实施方案中，调整所生成的CGR环境的显示包括移动第一虚拟对象。在一些实施方案中，设备响应于由设备接收到的用户输入(例如，触敏显示器202上的触摸输入)而调整所生成的CGR环境的显示。
用于执行上述过程300的特征的能够执行的指令任选地包括在被配置为由一个或多个处理器(例如，处理器102)执行的暂态或非暂态计算机可读存储介质(例如，存储器106)或其他计算机程序产品中。
上述技术的各方面设想了采集和使用个人信息以提供受引导的消费者体验的可能性。此类信息应在用户知情同意的情况下收集。
处理此类个人信息的实体将遵守既定的隐私做法和/或隐私政策(例如，由第三方认证的政策)，这些政策(1)通常被认为符合或超过行业或政府要求，(2)用户可访问，(3)根据需要进行更新，并且(4)符合适用法律。处理此类个人信息的实体将把这些信息用于合理且合法的用途，而不在那些合法用途之外进行共享或销售。
然而，用户可选择性地限制个人信息的访问/使用。例如，用户可选择参与或不参与他们的个人信息的收集。此外，尽管上述技术的各方面设想了个人信息的使用，但是这些技术的各方面可在不需要或不使用个人信息的情况下实现。例如，如果采集了位置信息、用户名和/或地址，它们可被一般化和/或屏蔽，使得它们不唯一地识别个体。
出于例示和描述的目的呈现了具体实施方案的前述描述。它们并非旨在穷举或将权利要求的范围限制于所公开的精确形式，并且应当理解，鉴于上述教导，许多修改和变型是可能的。

Claims (25)

1.一种电子设备，包括：
一个或多个处理器；和
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于以下操作的指令：
显示包括产品的图像的产品信息；
提供与远程用户的通信会话；
在提供所述通信会话时，使用从所述通信会话接收的信息来调整所述产品信息的所述显示；以及
通过以下方式显示所述产品的表示：
使用相机捕获图像；
通过合成表示所述产品的虚拟对象和所捕获的图像来生成环境的视图；以及
显示所述环境的所述视图。
2.根据权利要求1所述的电子设备，所述一个或多个程序还包括用于以下操作的指令：
显示所述远程用户的头像。
3.根据权利要求1所述的电子设备，其中使用从所述通信会话接收的信息来显示包括所述产品的所述图像的所述产品信息。
4.根据权利要求1所述的电子设备，所述一个或多个程序还包括用于以下操作的指令：
在提供所述通信会话时，响应于所述电子设备的用户的输入而调整所述产品信息的所述显示。
5.根据权利要求1所述的电子设备，其中合成所述虚拟对象和所捕获的图像基于所述电子设备的确定的取向、所述电子设备的确定的位置或所述电子设备的确定的姿势。
6.根据权利要求1所述的电子设备，其中合成所述虚拟对象和所捕获的图像基于所捕获的图像中的识别的表面。
7.根据权利要求1所述的电子设备，其中合成所述虚拟对象和所捕获的图像基于所捕获的图像中的识别的特征点。
8.根据权利要求1所述的电子设备，所述一个或多个程序还包括用于以下操作的指令：
通过以下方式调整所述环境的所述视图的所述显示：
使用所述相机捕获第二图像；
通过合成表示第二产品的第二虚拟对象和第二所捕获的图像来生成所述环境的更新视图；以及
显示所述环境的所生成的更新视图。
9.根据权利要求1所述的电子设备，其中生成所述环境的所述视图包括合成所述虚拟对象、虚拟产品演示以及所捕获的图像。
10.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行以下操作的指令：
显示包括产品的图像的产品信息；
提供与远程用户的通信会话；
在提供所述通信会话时，使用从所述通信会话接收的信息来调整所述产品信息的所述显示；以及
通过以下方式显示所述产品的表示：
使用相机捕获图像；
通过合成表示所述产品的虚拟对象和所捕获的图像来生成环境的视图；并且
显示所述环境的所述视图。
11.根据权利要求10所述的非暂态计算机可读存储介质，所述一个或多个程序还包括用于以下操作的指令：
显示所述远程用户的头像。
12.根据权利要求10所述的非暂态计算机可读存储介质，其中使用从所述通信会话接收的信息来显示包括所述产品的所述图像的所述产品信息。
13.根据权利要求10所述的非暂态计算机可读存储介质，所述一个或多个程序还包括用于以下操作的指令：
在提供所述通信会话时，响应于所述电子设备的用户的输入而调整所述产品信息的所述显示。
14.根据权利要求10所述的非暂态计算机可读存储介质，其中合成所述虚拟对象和所捕获的图像基于所述电子设备的确定的取向、所述电子设备的确定的位置或所述电子设备的确定的姿势。
15.根据权利要求10所述的非暂态计算机可读存储介质，其中合成所述虚拟对象和所捕获的图像基于所捕获的图像中的识别的表面以及所捕获的图像中的识别的特征点。
16.根据权利要求10所述的非暂态计算机可读存储介质，所述一个或多个程序还包括用于以下操作的指令：
通过以下方式调整所述环境的所述视图的所述显示：
使用所述相机捕获第二图像；
通过合成表示第二产品的第二虚拟对象和第二所捕获的图像来生成所述环境的更新视图；以及
显示所述环境的所生成的更新视图。
17.根据权利要求10所述的非暂态计算机可读存储介质，其中生成所述环境的所述视图包括合成所述虚拟对象、虚拟产品演示以及所捕获的图像。
18.一种方法，包括：
显示包括产品的图像的产品信息；
提供与远程用户的通信会话；
在提供所述通信会话时，使用从所述通信会话接收的信息来调整所述产品信息的所述显示；以及
通过以下方式显示所述产品的表示：
使用相机捕获图像；
通过合成表示所述产品的虚拟对象和所捕获的图像来生成环境的视图；以及
显示所述环境的所述视图。
19.根据权利要求18所述的方法，还包括：
显示所述远程用户的头像。
20.根据权利要求18所述的方法，其中使用从所述通信会话接收的信息来显示包括所述产品的所述图像的所述产品信息。
21.根据权利要求18所述的方法，还包括：
在提供所述通信会话时，响应于所述电子设备的用户的输入而调整所述产品信息的所述显示。
22.根据权利要求18所述的方法，其中合成所述虚拟对象和所捕获的图像基于所述电子设备的确定的取向、所述电子设备的确定的位置或所述电子设备的确定的姿势。
23.根据权利要求18所述的方法，其中合成所述虚拟对象和所捕获的图像基于所捕获的图像中的识别的表面以及所捕获的图像中的识别的特征点。
24.根据权利要求18所述的方法，还包括：
通过以下方式调整所述环境的所述视图的所述显示：
使用所述相机捕获第二图像；
通过合成表示第二产品的第二虚拟对象和第二所捕获的图像来生成所述环境的更新视图；以及
显示所述环境的所生成的更新视图。
25.根据权利要求18所述的方法，其中生成所述环境的所述视图包括合成所述虚拟对象、虚拟产品演示以及所捕获的图像。
CN202010634100.5A 2019-07-03 2020-07-02 受引导的消费者体验 Pending CN112184359A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962870396P 2019-07-03 2019-07-03
US62/870,396 2019-07-03
US16/904,995 US11816800B2 (en) 2019-07-03 2020-06-18 Guided consumer experience
US16/904,995 2020-06-18

Publications (1)

Publication Number Publication Date
CN112184359A true CN112184359A (zh) 2021-01-05

Family

ID=71452071

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010634100.5A Pending CN112184359A (zh) 2019-07-03 2020-07-02 受引导的消费者体验

Country Status (3)

Country Link
US (1) US11816800B2 (zh)
EP (1) EP3761252A1 (zh)
CN (1) CN112184359A (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11775130B2 (en) 2019-07-03 2023-10-03 Apple Inc. Guided retail experience
US11556169B2 (en) * 2021-02-11 2023-01-17 Meta Platforms Technologies, Llc Adaptable personal user interfaces in cross-application virtual reality settings
US11948244B2 (en) * 2022-02-11 2024-04-02 Shopify Inc. Augmented reality enabled dynamic product presentation

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140208272A1 (en) * 2012-07-19 2014-07-24 Nitin Vats User-controlled 3d simulation for providing realistic and enhanced digital object viewing and interaction experience
US20170132841A1 (en) * 2015-09-22 2017-05-11 3D Product Imaging Inc. Augmented reality e-commerce for home improvement
CN106796700A (zh) * 2014-06-27 2017-05-31 宇宙设想有限公司 用于电子商务的使用标记媒体、3d索引虚拟现实图像和全球定位系统位置的用户界面
CN106875244A (zh) * 2016-12-19 2017-06-20 乐视控股（北京）有限公司 一种虚拟现实购物方法、装置和电子设备
US10134084B1 (en) * 2017-11-17 2018-11-20 Capital One Services, Llc Augmented reality systems for facilitating a purchasing process at a merchant location
WO2019067476A2 (en) * 2017-09-29 2019-04-04 Apple Inc. PLATFORM OF REALITY GENERATED BY COMPUTER
US20190114689A1 (en) * 2017-10-13 2019-04-18 Midea Group Co., Ltd. Method and system for providing personalized on-location information exchange

Family Cites Families (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005119550A2 (en) * 2004-05-28 2005-12-15 Iteam, Inc. Virtual consultation system and method
US7457730B2 (en) * 2005-12-15 2008-11-25 Degnan Donald A Method and system for virtual decoration
US20080071559A1 (en) * 2006-09-19 2008-03-20 Juha Arrasvuori Augmented reality assisted shopping
US8601386B2 (en) 2007-04-20 2013-12-03 Ingenio Llc Methods and systems to facilitate real time communications in virtual reality
CA2659698C (en) 2008-03-21 2020-06-16 Dressbot Inc. System and method for collaborative shopping, business and entertainment
US10872322B2 (en) * 2008-03-21 2020-12-22 Dressbot, Inc. System and method for collaborative shopping, business and entertainment
US20130215116A1 (en) 2008-03-21 2013-08-22 Dressbot, Inc. System and Method for Collaborative Shopping, Business and Entertainment
US8199966B2 (en) * 2008-05-14 2012-06-12 International Business Machines Corporation System and method for providing contemporaneous product information with animated virtual representations
US20090287534A1 (en) * 2008-05-14 2009-11-19 Shang Qing Guo System and method for providing contemporaneous product information and sales support for retail customers
US10737185B2 (en) 2009-03-18 2020-08-11 Microsoft Technology Licensing, Llc Virtual environment controls based on voice chat audio inputs
US9747622B1 (en) * 2009-03-24 2017-08-29 Overstock.Com, Inc. Point-and-shoot product lister
US8606642B2 (en) * 2010-02-24 2013-12-10 Constantine Siounis Remote and/or virtual mall shopping experience
US9317133B2 (en) * 2010-10-08 2016-04-19 Nokia Technologies Oy Method and apparatus for generating augmented reality content
US9563906B2 (en) * 2011-02-11 2017-02-07 4D Retail Technology Corp. System and method for virtual shopping display
US9213420B2 (en) * 2012-03-20 2015-12-15 A9.Com, Inc. Structured lighting based content interactions
US20140236776A1 (en) 2013-02-19 2014-08-21 Covidien Lp System and Method for Virtual Product Demonstrations
US9679332B2 (en) * 2013-02-28 2017-06-13 Lg Electronics Inc. Apparatus and method for processing a multimedia commerce service
US9196005B2 (en) 2013-05-10 2015-11-24 Verizon and Redbox Digital Entertainment Services, LLC Vending kiosk user interface systems and methods
US10311161B2 (en) * 2014-03-13 2019-06-04 Ebay Inc. Interactive displays based on user interest
US9639957B2 (en) * 2014-06-12 2017-05-02 A9.Com, Inc. Recommendations utilizing visual image analysis
US9734634B1 (en) * 2014-09-26 2017-08-15 A9.Com, Inc. Augmented reality product preview
US10134082B2 (en) * 2014-10-13 2018-11-20 Paypal, Inc. Virtual display device for an interactive merchant sales environment
US10026629B2 (en) * 2014-10-17 2018-07-17 Tokyo Electron Limited Substrate liquid processing apparatus, substrate liquid processing method, and computer-readable storage medium storing substrate liquid processing program
US10509619B2 (en) * 2014-12-15 2019-12-17 Hand Held Products, Inc. Augmented reality quick-start and user guide
US10354256B1 (en) * 2014-12-23 2019-07-16 Amazon Technologies, Inc. Avatar based customer service interface with human support agent
US11257143B2 (en) 2014-12-30 2022-02-22 Hand Held Products, Inc. Method and device for simulating a virtual out-of-box experience of a packaged product
US9965793B1 (en) * 2015-05-08 2018-05-08 Amazon Technologies, Inc. Item selection based on dimensional criteria
WO2016200863A1 (en) * 2015-06-09 2016-12-15 GeoPRI, LLC Systems and methods for providing product information via an interactive display device
EP3329484A4 (en) 2015-07-29 2019-06-05 Sensel Inc. SYSTEMS AND METHODS FOR HANDLING A VIRTUAL ENVIRONMENT
US9886086B2 (en) 2015-08-21 2018-02-06 Verizon Patent And Licensing Inc. Gesture-based reorientation and navigation of a virtual reality (VR) interface
GB201517101D0 (en) 2015-09-28 2015-11-11 Univ Essex Entpr Ltd Mixed-reality system
WO2017072616A1 (en) * 2015-10-29 2017-05-04 Koninklijke Philips N.V. Remote assistance workstation, method and system with a user interface for remote assistance with spatial placement tasks via augmented reality glasses
KR102471977B1 (ko) 2015-11-06 2022-11-30 삼성전자 주식회사 복수의 전자장치 사이에서 가상 객체를 표시하는 방법 및 이를 지원하는 전자 장치
US10572923B2 (en) * 2016-02-16 2020-02-25 Walmart Apollo, Llc Physical shopping with physical and/or virtualized customer assistance
US20180061128A1 (en) 2016-08-23 2018-03-01 Adobe Systems Incorporated Digital Content Rendering Coordination in Augmented Reality
US10831334B2 (en) 2016-08-26 2020-11-10 tagSpace Pty Ltd Teleportation links for mixed reality environments
GB2554914B (en) * 2016-10-14 2022-07-20 Vr Chitect Ltd Virtual reality system and method
US10332317B2 (en) 2016-10-25 2019-06-25 Microsoft Technology Licensing, Llc Virtual reality and cross-device experiences
GB2570073A (en) 2016-10-27 2019-07-10 Walmart Apollo Llc Systems and methods for conserving computing resources during an online or virtual shopping session
US20180121997A1 (en) * 2016-10-27 2018-05-03 Wal-Mart Stores, Inc. Systems and methods for adjusting the display quality of an avatar during an online or virtual shopping session
US10754417B2 (en) 2016-11-14 2020-08-25 Logitech Europe S.A. Systems and methods for operating an input device in an augmented/virtual reality environment
US10379881B2 (en) 2016-11-16 2019-08-13 Citrix Systems, Inc. Delivering an immersive remote desktop
US10817066B2 (en) 2016-12-05 2020-10-27 Google Llc Information privacy in virtual reality
US20180324229A1 (en) 2017-05-05 2018-11-08 Tsunami VR, Inc. Systems and methods for providing expert assistance from a remote expert to a user operating an augmented reality device
US10319150B1 (en) * 2017-05-15 2019-06-11 A9.Com, Inc. Object preview in a mixed reality environment
WO2018222756A1 (en) * 2017-05-30 2018-12-06 Ptc Inc. Object initiated communication
US10432613B2 (en) * 2017-08-23 2019-10-01 Dell Products L. P. HTTPS enabled client tool
US10754496B2 (en) 2017-08-24 2020-08-25 Microsoft Technology Licensing, Llc Virtual reality input
US10591730B2 (en) 2017-08-25 2020-03-17 II Jonathan M. Rodriguez Wristwatch based interface for augmented reality eyewear
WO2019055703A2 (en) 2017-09-13 2019-03-21 Magical Technologies, Llc VIRTUAL DISPLAY PANEL, FACILITATION OF COLLABORATION, AND MESSAGE OBJECTS FOR FACILITATING COMMUNICATION SESSIONS IN AN INCREASED REALITY ENVIRONMENT
US10553031B2 (en) * 2017-12-06 2020-02-04 Microsoft Technology Licensing, Llc Digital project file presentation
US10777009B2 (en) * 2018-02-18 2020-09-15 CN2, Inc. Dynamically forming an immersive augmented reality experience through collaboration between a consumer and a remote agent
US10789622B2 (en) * 2018-05-07 2020-09-29 Adobe Inc. Generating and providing augmented reality representations of recommended products based on style compatibility in relation to real-world surroundings
US10956967B2 (en) * 2018-06-11 2021-03-23 Adobe Inc. Generating and providing augmented reality representations of recommended products based on style similarity in relation to real-world surroundings
US10573019B1 (en) * 2018-09-25 2020-02-25 Ebay Inc. Augmented reality digital content search and sizing techniques
WO2020077500A1 (en) * 2018-10-15 2020-04-23 Midea Group Co., Ltd. System and method for providing real-time product interaction assistance
US10990246B1 (en) * 2018-10-31 2021-04-27 Amazon Technologies, Inc. Techniques for generating digital content
US11126845B1 (en) * 2018-12-07 2021-09-21 A9.Com, Inc. Comparative information visualization in augmented reality
US10970547B2 (en) 2018-12-07 2021-04-06 Microsoft Technology Licensing, Llc Intelligent agents for managing data associated with three-dimensional objects
US11080941B2 (en) * 2018-12-20 2021-08-03 Microsoft Technology Licensing, Llc Intelligent management of content related to objects displayed within communication sessions
US11610247B2 (en) * 2019-04-05 2023-03-21 Shopify Inc. Method and system for recommending items for a surface
US11301908B2 (en) * 2019-05-03 2022-04-12 Genesys Telecommunications Laboratories, Inc. System and method for providing contextual summaries in interaction transfer
US11775130B2 (en) 2019-07-03 2023-10-03 Apple Inc. Guided retail experience
US20210110646A1 (en) 2019-10-11 2021-04-15 Citrix Systems, Inc. Systems and methods of geolocating augmented reality consoles

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140208272A1 (en) * 2012-07-19 2014-07-24 Nitin Vats User-controlled 3d simulation for providing realistic and enhanced digital object viewing and interaction experience
CN106796700A (zh) * 2014-06-27 2017-05-31 宇宙设想有限公司 用于电子商务的使用标记媒体、3d索引虚拟现实图像和全球定位系统位置的用户界面
US20170132841A1 (en) * 2015-09-22 2017-05-11 3D Product Imaging Inc. Augmented reality e-commerce for home improvement
CN106875244A (zh) * 2016-12-19 2017-06-20 乐视控股（北京）有限公司 一种虚拟现实购物方法、装置和电子设备
WO2019067476A2 (en) * 2017-09-29 2019-04-04 Apple Inc. PLATFORM OF REALITY GENERATED BY COMPUTER
US20190114689A1 (en) * 2017-10-13 2019-04-18 Midea Group Co., Ltd. Method and system for providing personalized on-location information exchange
US10134084B1 (en) * 2017-11-17 2018-11-20 Capital One Services, Llc Augmented reality systems for facilitating a purchasing process at a merchant location

Also Published As

Publication number Publication date
EP3761252A1 (en) 2021-01-06
US11816800B2 (en) 2023-11-14
US20210005022A1 (en) 2021-01-07

Similar Documents

Publication Publication Date Title
US11137967B2 (en) Gaze-based user interactions
CN113661691B (zh) 用于提供扩展现实环境的电子设备、存储介质和方法
CN110968188B (zh) 基于头部位置的应用程序放置
US20160253843A1 (en) Method and system of management for switching virtual-reality mode and augmented-reality mode
JP6023801B2 (ja) シミュレーション装置
US11775130B2 (en) Guided retail experience
EP3761252A1 (en) Guided consumer experience
US20170195664A1 (en) Three-dimensional viewing angle selecting method and apparatus
CN112041788A (zh) 使用眼睛注视来选择文本输入字段
CN111226187A (zh) 通过镜子与用户交互的系统和方法
CN111833139B (zh) 产品比较技术
CN111612916A (zh) 在环境内的移动
US20240103614A1 (en) Devices, methods, for interacting with graphical user interfaces
WO2024064388A1 (en) Devices, methods, for interacting with graphical user interfaces
CN111913568A (zh) 与配置显示设备相关的技术

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination