CN115631323A - Ar导览系统及ar导览方法 - Google Patents

Ar导览系统及ar导览方法 Download PDF

Info

Publication number
CN115631323A
CN115631323A CN202211407285.1A CN202211407285A CN115631323A CN 115631323 A CN115631323 A CN 115631323A CN 202211407285 A CN202211407285 A CN 202211407285A CN 115631323 A CN115631323 A CN 115631323A
Authority
CN
China
Prior art keywords
display device
user
mobile terminal
instruction
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211407285.1A
Other languages
English (en)
Inventor
赵维奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sichuan Smart Boy Technology Co ltd
Original Assignee
Sichuan Smart Boy Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sichuan Smart Boy Technology Co ltd filed Critical Sichuan Smart Boy Technology Co ltd
Priority to CN202211407285.1A priority Critical patent/CN115631323A/zh
Publication of CN115631323A publication Critical patent/CN115631323A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3605—Destination input or retrieval
    • G01C21/362—Destination input or retrieval received from an external device or application, e.g. PDA, mobile phone or calendar application
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3635—Guidance using 3D or perspective road maps
    • G01C21/3638—Guidance using 3D or perspective road maps including 3D objects and buildings
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/365—Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3667—Display of a road map
    • G01C21/367—Details, e.g. road map scale, orientation, zooming, illumination, level of detail, scrolling of road map or positioning of current position marker
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3697—Output of additional, non-guidance related information, e.g. low fuel level
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/01—Customer relationship services
    • G06Q30/015—Providing customer assistance, e.g. assisting a customer within a business location or via helpdesk
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0261—Targeted advertisements based on user location
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0265—Vehicular advertisement
    • G06Q30/0266—Vehicular advertisement based on the position of the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0881—Seat occupation; Driver or passenger presence
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
    • G09B9/042—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles providing simulation in a real vehicle
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles
    • G09B9/05—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles the view from a vehicle being simulated

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Human Computer Interaction (AREA)
  • General Business, Economics & Management (AREA)
  • Optics & Photonics (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及一种新的AR导览系统和AR导览方法。根据本发明的一个方面，本发明的一个或多个实施方式公开了一种AR导览系统，包括，AR显示装置，所述AR显示装置被配置用来提供近眼显示功能；移动终端，所述移动终端和所述AR显示装置通信连接；所述移动终端被配置向所述AR显示装置发送控制指令，使得所述AR显示装置显示所述控制指令所对应的AR内容。通过本发明公开的一个或多个实施例，可以通过移动终端控制AR显示装置的显示内容，从而无需通过CV等复杂算法对目标进行识别，技术实施成本低、用户体验高，可以满足一些特定的导览场景的需求。

Description

AR导览系统及AR导览方法
技术领域
本发明涉及软件系统领域，尤其涉及一种在通过AR显示装置进行AR导览的系统和方法。
本申请是同一申请人的申请日为2021年1月22日、申请号为2021100892954、发明名称为“AR导览系统及AR导览方法”的中国发明专利申请的分案申请。
背景技术
目前传统的导览方式是通过语音讲解设备向用户介绍其相关的场景(例如博物馆、展览馆)的内容，缺乏和用户的有效交互。基于AR设备的导览系统和方法也逐步普及，但是现有的基于AR设备的导览是CV算法识别目标物体后，再向用户播放一些AR内容。
在一些场景下，由于环境限制，AR设备可能无法识别目标物体，导致AR内容不能及时呈现，因此导致用户体验较差。且CV算法的识别需要对目标物体进行事先训练，导览方案的成本较高。
发明内容
本发明的目的在于提供一种新的AR导览系统和AR导览方法，实现了通过移动终端控制AR显示装置显示AR内容，从而满足一些特定场景的导览需求。
根据本发明的一个方面，本发明的一个或多个实施方式公开了一种应用于载人装置销售的AR导览系统，包括，AR显示装置，由用户佩戴，所述AR显示装置被配置用来提供近眼显示功能；移动终端，由销售人员控制，所述移动终端和所述AR显示装置通信连接；所述移动终端被配置向所述AR显示装置发送控制指令，使得所述AR显示装置显示所述控制指令所对应的AR内容；其中所述控制指令包括：体验模式指令和推介模式指令，其中所述体验模式指令使得所述AR显示装置进入体验模式，并播放预设于AR显示装置中的AR内容；所述推介模式指令使得所述AR显示装置进入推介模式，且所述移动终端进入推介菜单页面；根据所述推介菜单页面的激活项的组合，所述移动终端向所述AR显示装置发送显示指令，使得所述AR显示装置显示和所述激活项的组合对应的AR内容。
根据本发明的另一个方面，本发明的一个或多个实施方式公开了一种应用于载人装置销售的AR导览方法，包括：AR显示装置被配置为与移动终端通信连接，并接收所述移动终端的控制指令，其中所述AR显示装置由用户佩戴，其中所述移动控制终端由销售人员控制；根据所述控制指令，所述AR显示装置显示与所述控制指令对应的AR内容；其中所述控制指令包括：体验模式指令，其中所述体验模式指令使得所述AR显示装置进入体验模式，并播放预设于AR显示装置中的AR内容；其中所述控制指令包括推介模式指令，所述推介模式指令使得所述AR显示装置进入推介模式，且所述移动终端进入推介菜单页面；根据推介菜单页面的激活项的组合，所述移动终端向所述AR显示装置发送显示指令，使得所述AR显示装置显示所和所述激活项的组合对应的AR内容。
通过本发明公开的一个或多个实施例，可以通过移动终端控制AR显示装置的显示内容，从而无需通过CV算法等复杂算法对目标物体进行识别，技术实施成本低、用户体验高，且满足一些特定的导览场景的需求。
附图说明
图1示出了根据本发明一个或多个实施例的AR导览系统的示意图；
图2示出了根据本发明一个或多个实施例的AR导览系统的移动终端的一个UI界面的示意图；
图3示出了根据本发明的一个或多个实施例的AR导览系统的移动终端的一个UI界面的示意图；
图4示出了根据本发明的一个或多个实施例的AR导览方法的流程图。
具体实施方式
为更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效，以下结合附图及较佳实施例，对依据本发明提出的AR导览系统及AR导览方法的具体实施方式、结构、特征及其功效，详细说明如后。
根据本发明的一个方面，如图1所示，示出了根据本发明的一个或多个实施例的AR导览系统的示意图，其中包括AR显示装置100和移动终端200，AR显示装置100和移动终端200通信连接。具体地，AR显示装置100能够将虚拟的信息叠加到真实世界，使佩戴者可以在看到真实世界画面的情况下，同时看到虚拟信息，实现两种信息的相互补充。在一个或多个实施例中，AR显示装置100包括AR/MR眼镜、AR/MR头环、AR/MR头盔等不同类型的头戴式设备，MR(Mixed Reality)和AR(Augmented Reality)的区别在于MR技术更加突出虚拟信息，而AR技术更加突出真实信息，两者的技术方案上并无本质区别，因此在本发明中，以AR统称包含AR、MR等现实扩增的技术。移动终端200为智能手机、平板电脑、笔记本电脑等移动终端设备，其具有人机交互界面、计算能力、存储能力和通信能力。移动终端200和AR显示装置100通过网线、USB数据线、WIFI、蓝牙等有线或无线的方式连接。在一些变换的实施例中，移动终端200可以被非移动终端替代，例如可以用位于控制中心的台式机向AR显示装置100发送控制信号。
在一个或多个实施例中，移动终端200被配置为向AR显示装置100发送控制指令，使得AR显示装置100显示所述控制指令所对应的AR内容。控制指令包括体验模式指令和推介模式指令。具体地，移动终端200的控制指令的发送可以通过移动终端200上的UI界面的方式，由移动终端200的操作者进行选择。如图2所示，示出了移动终端的一个UI界面的示意图。在其中一个实施例中，移动终端200的界面上具有体验模式和推介模式两个可交互的按钮。当操作者选择体验模式后，则移动终端200向AR显示装置100发送体验模式的指令；当操作者选择推介模式后，则移动终端200向AR显示装置100发送推介模式的指令。在图2的右上角的圆圈内可以显示不同模式的预览效果图，供操作者预览。
在一个或多个实施例中，在接收到控制指令后，AR显示装置100检测用户的FOV(Field of View)是否位于预设的初始位置，若用户的FOV位于预设的初始位置，则启动AR内容的播放，并通过IMU传感器感测用户的姿态变化，并调整所述AR内容。具体地，由于AR显示装置100是一种近眼显示器，因此用户的FOV方向也对应者AR显示装置100的显示屏幕的FOV方向，因此在进行虚实结合的场景叠加过程中，需要确保用户的FOV位于适当的位置，避免虚实结合后的虚拟的信息和真实场景不匹配的情况。例如，在以汽车为例的载人设备的销售导览场景中，需要通过AR显示装置100向用户呈现的AR内容为汽车内部的功能键说明及实际效果演示，则初始位置设定为用户FOV朝向汽车方向盘的中心，在确认用户FOV位于该初始位置，启动AR内容，从而使得AR内容和真实的汽车功能键的布局相匹配。通过设置在AR显示装置100上的IMU传感器检测用户的姿态变化(例如包含转头、低头、抬头等)，可以由此可以对正在播放的AR内容进行对应的操作，使得AR内容的显示和真实场景匹配。
当AR显示装置100接收到体验模式指令后，移动终端200后续并不介入AR显示装置100和用户的交互过程中，即进入体验模式后，AR显示装置100显示的内容和移动终端200的操作无关联，除非通过移动终端200的指令使得AR显示装置100退出体验模式。在其中一个实施例中，体验模式下的AR内容包括3D模型、视频、文本、音频等一种或多个媒体形式的组合。在一个具体的示例中，在以汽车为代表的载人器具的销售导览场景中，销售员可以通过让客户佩戴AR显示装置100，销售员则通过移动终端200发送体验模式指令，使得用户佩戴的AR显示装置100进入体验模式，在体验模式中，可以根据预先设定的内容，用户可以看到其关注的汽车产品的广告视频以及试驾体验视频，从而方便用户进一步决策是否需要进行后续的购买行为。
在另一些实施例中，AR显示装置100通过定位技术检测用户的位置，并根据用户的特定位置播放与所述特定位置对应的AR内容。在其中一个实施例中，AR导览系统被应用到以汽车为代表的载人装置的销售导览时，AR显示装置100通过定位技术检测用户是否位于主驾驶位、副驾驶位或后排，并根据用户的位置播放与主驾驶位、副驾驶位或后排位置对应的AR内容。例如，当用户位于主驾驶位的时候，AR内容为主驾驶位视角视频的AR内容、主驾驶位的操作介绍等匹配主驾驶位的AR内容；当用户位于后排时，AR内容为汽车后排的操作指南、后排的驾驶体验视频以及后排的安全性能介绍等匹配后排座位的AR内容。在一个或多个实施例中，可以使用的定位技术包括CV定位、WIFI定位、蓝牙定位、NFC定位、RFID定位中的一个或多个。CV定位即通过位于AR显示装置的摄像头，通过CV算法识别用户FOV(Fieldof View)方向的场景的特征，确定用户当前的位置。WIFI定位、蓝牙定位、NFC定位、RFID定位均是室内定位的方式，可以通过设置于室内的一个或多个发射点，通过AR显示装置100上的接收点收到的信号的强度，来判断当前的位置。
在一个或多个实施例中，AR显示装置100还与载人装置通信连接，并接收用户对载人装置的操作指令，AR显示装置100根据操作指令调整AR内容。在其中一个实施例中，以汽车为例，AR显示装置可以与汽车通过蓝牙、WIFI、USB数据线等方式通信连接，此时，汽车可以接收用户的操作，并将用户的操作转换为操作指令，发送给AR显示装置100，从而控制AR内容的呈现方式。在一个示例中，若AR内容为模拟驾驶内容，AR显示装置100可以根据用户拨动方向盘的操作，而控制模拟驾驶中的汽车的转向；在另一个示例中，若AR内容为汽车功能展示，则可以根据用户对功能键的按压、旋转灯操作，而在AR内容中播放对应的功能介绍。由此，用户可以通过AR显示装置，在不需要进行真实试驾的情况下，完成车辆的使用体验，由此可以提高汽车销售的效率。
当AR显示装置100接收到推介模式指令后，推介模式指令使得所述AR显示装置100进入推介模式，且移动终端200进入推介菜单页面；根据推介菜单页面的激活项的组合，移动终端200向AR显示装置100发送显示指令，使得AR显示装置100显示所和激活项的组合对应的AR内容。具体地，如图3所示，示出了根据本发明一个或多个实施例的AR导览系统的移动终端的一个UI界面的示意图。图3的场景为以汽车为代表的载人装置的销售导览，在图3中，移动终端200的操作者(即汽车销售人员)可以选择汽车的外观颜色、内饰主题、轮毂选择菜单中的选项，并使得这些菜单中的其中一项处于激活状态，在选择完毕后，可以通过点击“开始演示”按钮，将这些菜单的激活项的组合，形成一个显示指令，发送给AR显示装置100，从而使得AR显示装置100显示对应的车型，消费者即可以看到对应车型的AR内容。
在其中一些实施例中，AR内容可以存放在移动终端200或云服务器，并通过通信连接的方式随着控制指令或显示指令一起传输给AR显示装置100，但是在这种情况下，可以减少对AR显示装置的预先配置的工作，但是由于AR内容的数据量会比较大，在通信速度受限的情况下，可能会对AR内容的显示产生限制。在另一些实施例中，AR内容可以存放在AR显示装置100的本地，并通过移动终端的控制指令或显示指令进行调整，在这种情况下，需要事先在AR显示装置内存放AR内容，但是AR内容的显示不受通信连接的限制。
如图4所示，根据本发明的另一方面，示出了根据本发明的一个或多个实施例的AR导览方法的流程图，包括步骤：
S1、AR显示装置被配置为与移动终端通信连接，并接收所述移动终端的控制指令；
S2、根据所述控制指令，所述AR显示装置显示与所述控制指令对应的AR内容。
在步骤S1中，控制指令包括体验模式指令和推介模式指令。具体地，移动终端的控制指令的发送可以通过UI界面的方式，由移动终端的操作者进行选择。如图2所示，示出了移动终端的一个UI界面图，移动终端的界面上具有体验模式和推介模式两个可交互的按钮。当操作者选择体验模式后，则移动终端向AR显示装置发送体验模式的指令；当操作者选择推介模式后，则移动终端向AR显示装置发送推介模式的指令。在图2的右上角的圆圈内可以显示不同模式的预览效果图，供操作者观察。
在步骤S2中，在接收到控制指令后，AR显示装置检测用户的FOV(Field of View)是否位于预设的初始位置，若用户的FOV位于预设的初始位置，则启动AR内容的播放，并通过IMU传感器感测用户的姿态变化，并调整所述AR内容。具体地，由于AR显示装置是一种近眼显示器，因此用户的FOV方向也对应者AR显示装置的显示屏幕的FOV方向，因此在进行虚实结合的场景叠加过程中，需要确保用户的FOV位于适当的位置，避免虚实结合后的虚拟的信息和真实场景不匹配的情况。例如，在以汽车为例的载人设备的销售导览场景中，需要通过AR显示装置向用户呈现的AR内容为汽车内部的案件说明及实际效果演示，则初始位置设定为用户FOV朝向汽车方向盘的中心，在确认用户FOV位于该初始位置，启动AR内容，从而使得AR内容和真实的汽车操作界面相匹配。通过设置在AR显示装置上的IMU传感器检测用户的姿态变化(例如包含转头、低头、抬头等)，可以由此可以对正在播放的AR内容进行对应的操作，使得AR内容的显示和真实场景匹配。
步骤S1和S2中的进一步的实施方式和上文关于AR导览系统描述的一个或多个实施例一致或类似，且实现相同或类似的技术效果，在此不再赘述。
以上所述，仅是本发明的较佳实施例而已，并非对本发明作任何形式上的限制，虽然本发明已以较佳实施例揭露如上，然而并非用以限定本发明,任何熟悉本专业的技术人员，在不脱离本发明技术方案范围内,当可利用上述揭示的技术内容作出些许更动或修饰为等同变化的等效实施例,但凡是未脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰，均仍属于本发明技术方案的范围内。

Claims (7)

1.一种AR导览系统，应用于载人装置销售场景，包括，
AR显示装置，由用户佩戴，所述AR显示装置被配置用来提供近眼显示功能；
移动终端，由销售人员控制，所述移动终端和所述AR显示装置通信连接；
所述移动终端被配置向所述AR显示装置发送控制指令，使得所述AR显示装置显示所述控制指令所对应的AR内容；
其中所述控制指令包括：体验模式指令和推介模式指令，
其中所述体验模式指令使得所述AR显示装置进入体验模式，并播放预设于AR显示装置中的AR内容；
所述推介模式指令使得所述AR显示装置进入推介模式，且所述移动终端进入推介菜单页面；
根据所述推介菜单页面的激活项的组合，所述移动终端向所述AR显示装置发送显示指令，使得所述AR显示装置显示和所述激活项的组合对应的AR内容。
2.根据权利要求1所述的AR导览系统，所述移动终端被配置向所述AR显示装置发送控制指令，使得所述AR显示装置显示所述控制指令所对应的AR内容，进一步包括，
在接收到所述控制指令后，所述AR显示装置检测用户的FOV是否位于预设的初始位置，
若用户的FOV位于预设的初始位置，则启动AR内容的播放，并通过IMU传感器感测用户的姿态变化，并调整所述AR内容。
3.根据权利要求1所述的AR导览系统，进一步包括，
在体验模式中，所述AR显示装置通过定位技术检测用户的特定位置，并根据用户的特定位置播放与所述特定位置对应的AR内容。
4.根据权利要求3所述的AR导览系统，所述AR导览系统被应用到载人装置的销售导览时，进一步包括，
所述AR显示装置通过定位技术检测用户是否位于主驾驶位、副驾驶位或其他位置，并根据用户的位置播放与主驾驶位、副驾驶位或其他位置对应的AR内容，
所述定位技术包括CV定位、WIFI定位、蓝牙定位、NFC定位、RFID定位中的一个或多个。
5.根据权利要求4所述的AR导览系统，进一步包括，
所述AR显示装置还与所述载人装置通信连接，并接收用户对所述载人装置的操作指令，
所述AR显示装置根据所述操作指令调整所述AR内容。
6.一种AR导览方法，应用于载人装置销售场景，包括，
AR显示装置被配置为与移动终端通信连接，并接收所述移动终端的控制指令，其中所述AR显示装置由用户佩戴，其中所述移动控制终端由销售人员控制；
根据所述控制指令，所述AR显示装置显示与所述控制指令对应的AR内容；
其中所述控制指令包括：体验模式指令，
其中所述体验模式指令使得所述AR显示装置进入体验模式，并播放预设于AR显示装置中的AR内容；
其中所述控制指令包括推介模式指令，
所述推介模式指令使得所述AR显示装置进入推介模式，且所述移动终端进入推介菜单页面；
根据推介菜单页面的激活项的组合，所述移动终端向所述AR显示装置发送显示指令，使得所述AR显示装置显示所和所述激活项的组合对应的AR内容。
7.根据权利要求6所述的方法，所述根据所述控制指令，所述AR显示装置显示与所述控制指令对应的AR内容，进一步包括，
在接收到所述控制指令后，所述AR显示装置检测用户的FOV是否位于预设的初始位置；
若用户的FOV位于预设的初始位置，则启动AR内容的播放，并通过IMU传感器感测用户的姿态变化，并调整所述AR内容。
CN202211407285.1A 2021-01-22 2021-01-22 Ar导览系统及ar导览方法 Pending CN115631323A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211407285.1A CN115631323A (zh) 2021-01-22 2021-01-22 Ar导览系统及ar导览方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202110089295.4A CN112907754A (zh) 2021-01-22 2021-01-22 Ar导览系统及ar导览方法
CN202211407285.1A CN115631323A (zh) 2021-01-22 2021-01-22 Ar导览系统及ar导览方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202110089295.4A Division CN112907754A (zh) 2021-01-22 2021-01-22 Ar导览系统及ar导览方法

Publications (1)

Publication Number Publication Date
CN115631323A true CN115631323A (zh) 2023-01-20

Family

ID=76118455

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202211407285.1A Pending CN115631323A (zh) 2021-01-22 2021-01-22 Ar导览系统及ar导览方法
CN202110089295.4A Pending CN112907754A (zh) 2021-01-22 2021-01-22 Ar导览系统及ar导览方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202110089295.4A Pending CN112907754A (zh) 2021-01-22 2021-01-22 Ar导览系统及ar导览方法

Country Status (2)

Country Link
US (1) US20220236068A1 (zh)
CN (2) CN115631323A (zh)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130136566A (ko) * 2011-03-29 2013-12-12 퀄컴 인코포레이티드 로컬 멀티-사용자 협업을 위한 모듈식 모바일 접속된 피코 프로젝터들
KR101535032B1 (ko) * 2014-07-17 2015-07-07 현대자동차주식회사 차량 인터페이스 확장 방법
US9881422B2 (en) * 2014-12-04 2018-01-30 Htc Corporation Virtual reality system and method for controlling operation modes of virtual reality system
US10326822B2 (en) * 2015-12-03 2019-06-18 Google Llc Methods, systems and media for presenting a virtual operating system on a display device
CN205647764U (zh) * 2016-02-26 2016-10-12 李科 可显示的便捷穿戴设备
US10403046B2 (en) * 2017-10-20 2019-09-03 Raytheon Company Field of view (FOV) and key code limited augmented reality to enforce data capture and transmission compliance
CN112215964A (zh) * 2020-09-28 2021-01-12 杭州灵伴科技有限公司 基于ar的场景导览方法和设备

Also Published As

Publication number Publication date
US20220236068A1 (en) 2022-07-28
CN112907754A (zh) 2021-06-04

Similar Documents

Publication Publication Date Title
US11127217B2 (en) Shared environment for a remote user and vehicle occupants
US10754496B2 (en) Virtual reality input
TWI567670B (zh) 切換虛擬實境模式與擴增實境模式的管理方法以及系統
CN104469464B (zh) 图像显示装置、控制图像显示装置的方法、计算机程序以及图像显示系统
US8966366B2 (en) Method and system for customizing information projected from a portable device to an interface device
TWI540534B (zh) 虛擬導覽控制系統與方法
EP3449635B1 (en) Display device and method of operating the same
US11710310B2 (en) Virtual content positioned based on detected object
CN111052063B (zh) 电子装置及其控制方法
US20050010875A1 (en) Multi-focal plane user interface system and method
US11325028B2 (en) Pro gaming AR visor and method for parsing context specific HUD content from a video stream
US11423619B2 (en) System and method for a virtual showroom
WO2023226864A1 (zh) 车机系统、实现增强现实和虚拟现实的方法以及存储介质
CN103443756A (zh) 展示用系统
CN115631323A (zh) Ar导览系统及ar导览方法
EP2932356B1 (en) Method for activating a mobile device in a network, and associated display device and system
KR102431493B1 (ko) 증강현실 콘텐츠 기반 차량기능 안내 및 가상 시험주행 경험 제공 시스템 및 방법
CN114089890A (zh) 车辆模拟驾驶方法、设备、存储介质及程序产品
KR20150095290A (ko) 모바일 단말 장치와 차량 디스플레이 장치의 연동 시스템 및 방법
WO2018225488A1 (ja) 情報処理装置、および情報処理方法、並びにプログラム
WO2024142300A1 (ja) 情報処理装置、端末機及び情報処理方法
US11981186B2 (en) Method and system for responsive climate control interface
KR101372582B1 (ko) 무선제어를 위한 스마트폰의 사용자 인터페이스 장치
CN116176432B (zh) 车载设备控制方法、装置、车辆和存储介质
US20230169697A1 (en) A computer software module arrangement, a circuitry arrangement, an arrangement and a method for providing a virtual display

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination