CN110478901A - 基于增强现实设备的交互方法及系统 - Google Patents

基于增强现实设备的交互方法及系统 Download PDF

Info

Publication number
CN110478901A
CN110478901A CN201910765900.8A CN201910765900A CN110478901A CN 110478901 A CN110478901 A CN 110478901A CN 201910765900 A CN201910765900 A CN 201910765900A CN 110478901 A CN110478901 A CN 110478901A
Authority
CN
China
Prior art keywords
augmented reality
scene
target scene
range
interaction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910765900.8A
Other languages
English (en)
Other versions
CN110478901B (zh
Inventor
刘幕俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201910765900.8A priority Critical patent/CN110478901B/zh
Publication of CN110478901A publication Critical patent/CN110478901A/zh
Priority to EP20853764.7A priority patent/EP3978089A4/en
Priority to PCT/CN2020/102478 priority patent/WO2021031755A1/zh
Priority to US17/563,144 priority patent/US20220122331A1/en
Application granted granted Critical
Publication of CN110478901B publication Critical patent/CN110478901B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/216—Input arrangements for video game devices characterised by their sensors, purposes or types using geographical information, e.g. location of the game device or player using GPS
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5255—Changing parameters of virtual cameras according to dedicated instructions from a player, e.g. using a secondary joystick to rotate the camera around a player's character
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/55—Controlling game characters or game objects based on the game progress
    • A63F13/57—Simulating properties, behaviour or motion of objects in the game world, e.g. computing tyre load in a car race game
    • A63F13/577—Simulating properties, behaviour or motion of objects in the game world, e.g. computing tyre load in a car race game using determination of contact between game characters or objects, e.g. to avoid collision between virtual racing cars
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • A63F13/655—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/90—Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
    • A63F13/92—Video game devices specially adapted to be hand-held while playing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/292—Multi-camera tracking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/536—Depth or shape recovery from perspective effects, e.g. by using vanishing points
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G06T7/579—Depth or shape recovery from multiple images from motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G06T7/593—Depth or shape recovery from multiple images from stereo images
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/20—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform
    • A63F2300/206—Game information storage, e.g. cartridges, CD ROM's, DVD's, smart cards
    • A63F2300/207—Game information storage, e.g. cartridges, CD ROM's, DVD's, smart cards for accessing game resources from local storage, e.g. streaming content from DVD
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/08—Bandwidth reduction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Environmental & Geological Engineering (AREA)
  • Remote Sensing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本公开涉及增强现实技术领域，具体涉及一种基于增强现实设备的交互方法、一种基于增强现实设备的交互系统、一种计算机可读介质以及一种电子设备。所述方法包括：获取增强现实设备的当前位置信息，确认当前位置的预设范围内是否包括可加载场景；在所述当前位置预设范围内包含可加载场景时，获取所述当前位置与所述可加载场景之间的距离以判断是否进入一目标场景的加载范围；在所述增强现实设备进入所述目标场景的加载范围内时，加载所述目标场景模型以用于在所述增强现实设备中展示所述目标场景。本公开能够实现对目标场景的准确定位，并及时展示。有效的提升用户体验。

Description

基于增强现实设备的交互方法及系统
技术领域
本公开涉及增强现实技术领域，具体涉及一种基于增强现实设备的交互方法、一种基于增强现实设备的交互系统、一种计算机可读介质以及一种电子设备。
背景技术
现有的角色扮演类游戏，用户一般利用显示器来观看游戏画面。或者对于虚拟现实游戏来说，用户通过使用头盔，以沉浸式的方式观看虚拟画面。但上述的游戏形式只能在固定的地点实现，不能结合现实场景或物体。目前，出现了越来越多的增强现实游戏。增强现实游戏的特点是在现实场景画面上叠加游戏场景(即虚拟场景)，使游戏场景和现实场景产生互动。
但现有的增强现实游戏中，由于用户定位不准确，存在不能准确加载增强现实游戏场景的情况。此外，在进入游戏场景后，用户与增强现实游戏场景中的虚拟对象交互时，存在用户定位不准确，无法准确与虚拟对象交互的情况。导致用户体验差。
需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本公开的目的在于提供一种基于增强现实设备的交互方法、一种基于增强现实设备的交互系统、一种计算机可读介质、一种电子设备，可以为用户准确的定位增强现实游戏场景，。
本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。
根据本公开的第一方面，提供一种基于增强现实设备的交互方法，包括：
获取增强现实设备的当前位置信息，确认当前位置的预设范围内是否包括可加载场景；
在所述当前位置预设范围内包含可加载场景时，获取所述当前位置与所述可加载场景之间的距离以判断是否进入一目标场景的加载范围；
在所述增强现实设备进入所述目标场景的加载范围内时，加载所述目标场景模型以用于在所述增强现实设备中展示所述目标场景。
根据本公开的第二方面，提供一种基于增强现实设备的交互系统，包括：
可加载场景判断模块，用于获取增强现实设备的当前位置信息，确认当前位置的预设范围内是否包括可加载场景；
目标场景判断模块，用于在所述当前位置预设范围内包含可加载场景时，获取所述当前位置与所述可加载场景之间的距离以判断是否进入一目标场景的加载范围；
目标场景加载模块，用于在所述增强现实设备进入所述目标场景的加载范围内时，加载所述目标场景模型以用于在所述增强现实设备中展示所述目标场景。
根据本公开的第三方面，提供一种计算机可读介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述的基于增强现实设备的交互方法。
根据本公开的第四方面，提供一种电子设备，包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现上述的基于增强现实设备的交互方法。
本公开的一种实施例所提供的基于增强现实设备的交互方法中，通过首先获取增强现实设备当前位置周围的可加载场景，再判断是否进入任意一个场景的加载范围，并在判断进入加载范围时在增强现实设备中展示该目标场景。从而实现对目标场景的准确定位，并及时展示。有效的提升用户体验。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1示意性示出本公开示例性实施例中一种基于增强现实设备的交互方法的示意图；
图2示意性示出本公开示例性实施例中一种虚拟场景与增强现实设备之间位置关系的示意图；
图3示意性示出本公开示例性实施例中一种目标场景坐标系与现实环境坐标系之间的关系的示意图；
图4示意性示出本公开示例性实施例中一种增强现实设备在目标场景坐标系中与虚拟交互对象的位置交互示意图；
图5示意性示出本公开示例性实施例中一种基于增强现实设备的交互系统的组成示意图；
图6示意性示出本公开示例性实施例中一种电子设备的计算机系统的结构示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。
此外，附图仅为本公开的示意性图解，并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体，不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
本示例实施方式中提供了一种基于增强现实设备的交互方法，可以应用于AR眼镜、AR头盔等增强现实设备，或者也可以应用于手机、平板电脑等配置有后置摄像头的智能终端设备。参考图1中所示，上述的基于增强现实设备的定位方法可以包括以下步骤：
S11，获取增强现实设备的当前位置信息，确认当前位置的预设范围内是否包括可加载场景；
S12，在所述当前位置预设范围内包含可加载场景时，获取所述当前位置与所述可加载场景之间的距离以判断是否进入一目标场景的加载范围；
S13，在所述增强现实设备进入所述目标场景的加载范围内时，加载所述目标场景模型以用于在所述增强现实设备中展示所述目标场景。
本示例实施方式所提供的基于增强现实设备的交互方法中，一方面，通过首先获取增强现实设备当前位置周围的可加载场景，再判断是否进入任意一个场景的加载范围，并在判断进入加载范围时在增强现实设备中展示该目标场景。从而实现对目标场景的准确定位，并及时展示。另一方面，可以有效的加深用户的沉浸感，提升用户体验。
下面，将结合附图及实施例对本示例实施方式中的基于增强现实设备的交互方法的各个步骤进行更详细的说明。
上述的增强现实设备可以是AR眼镜、AR头盔等智能终端设备。以AR眼镜为例，可以在眼镜框架上设置双目或单目透视光学引擎，通过该光学引擎可以向用户展示动态数据，例如视频、图表、指示信息、控制信息等，并且不影响对周围环境的观察。另外，在AR眼镜上还可以配置摄像组件，摄像组件可以包括高清摄像机，以及深度相机等。同时，AR眼镜上还可以装配有传感器，例如陀螺仪、加速度传感器、磁力计以及光传感器，或者也可以是九轴传感器，例如包括：三轴陀螺仪、三轴加速度计、三轴地磁计的组合，或者六轴加速度传感器、三轴陀螺仪的组合，或者是六轴陀螺仪、三轴加速度计的组合。并且，AR眼镜还可以配置有GPS组件、蓝牙组件以及电源组件和输入设备。AR眼镜还可以连接有一控制器，在该控制器上可以装配上述的GPS组件、蓝牙组件、WiFi组件、电源组件以及输入设备、处理器和存储器等模块或单元。当然，在AR眼镜本体或控制器上还可以设置有数据接口，便于数据的传输，以及与外接设备的连接。本公开对AR眼镜的具体结构和形式不做特殊限定。
或者，也可以是配置有后置摄像头、传感器组件以及增强现实应用程序的手机、平板电脑等智能终端设备。例如，在手机中安装增强现实应用程序后，可以将手机的屏幕作为显示器，同时显示真实的环境以及虚拟控件，等等。以下实施例中以增强现实设备采用AR眼镜为例进行说明。
步骤S11，获取增强现实设备的当前位置信息，确认当前位置的预设范围内是否包括可加载场景。
本示例实施方式中，上述的可加载场景可以是包含不同内容的游戏的虚拟场景。各虚拟场景可以包含不同形状的边界和展示范围，并可以根据各虚拟场景的展示范围预先配置对应的坐标范围。举例来说，在增强现实游戏中，可以利用AR眼镜上装配的GPS组件获取当前的位置信息。并可以在地图中判断当前位置附近是否包括可加载的虚拟场景。例如，参考图2所示，在当前场景中，当前游戏地图中用户201周围包括可加载的虚拟场景211、虚拟场景212、虚拟场景213、虚拟场景214以及虚拟场景215。或者，也可以将用户201当前位置为圆心，预设的距离为半径作圆，判断在该范围内是否存在可加载场景。例如，图2中所示，虚拟场景212和虚拟场景214位于用户201当前位置的预设范围中，则虚拟场景212和虚拟场景214为可加载场景。
步骤S12，在所述当前位置预设范围内包含可加载场景时，获取所述当前位置与所述可加载场景之间的距离以判断是否进入一目标场景的加载范围。
本示例实施方式中，为了提高用户的使用体验，提升游戏沉浸感受，可以预先设置各虚拟场景的加载范围。举例来说，可以根据各虚拟场景在现实场景中设置的实际位置及周围环境配置其对应的加载范围。例如，若虚拟场景的展示位置为相对空旷的广场上，且周围不存在阻碍视线的障碍物，便需要当用户的常规视力可以看见时便加载该虚拟场景，此时便可以配置该虚拟场景具有较大的加载范围。若虚拟场景位于室内或者相对较小的空间中，例如树下、墙角等位置，则可以配置其具有较小的加载范围。当增强现实设备的当前视野朝向该场景时，便加载对应的目标虚拟场景，使用户的观看感受更加贴近真实，避免用户已经进入目标场景的有效范围内时才展示对应的目标场景。此外，对于虚拟场景来说，其加载范围和展示范围可以是不同的坐标范围，例如，参考图2所示，虚拟场景211、虚拟场景212、虚拟场景213以及虚拟场景214的加载范围均大于其实际展示范围。此外，虚拟场景的加载范围也可以与展示范围相同，例如图2中虚拟场景215所示。
在获取用户201当前位置周围的可加载场景后，便可以计算用户201与各可加载场景之间的距离。举例来说，可以根据坐标数据计算用户当前位置与各可加载场景中心坐标之间的当前距离，若当前距离小于或等于可加载场景的中心坐标到加载范围的半径距离，则认为进入该可加载场景的加载范围中。否则，则认为未进入可加载场景的加载范围中。
步骤S13，在所述增强现实设备进入所述目标场景的加载范围内时，加载所述目标场景模型以用于在所述增强现实设备中展示所述目标场景。
本示例实施方式中，当判断增强现实设备进入目标场景的记载范围内时，便可以加载目标场景模式，并在增强现实设备的界面中展示所述目标场景。各目标场景的模型可以存储在本地，或者网络服务器上。例如，在AR眼镜中展示目标场景。通过在判断用户进入虚拟场景的加载范围内时便预先加载该虚拟场景的地图模型，能够有效的提升用户观看的感受，提高用户沉浸感。
此外，加载所述目标场景模型以用于在增强现实设备中展示所述目标场景时，还可以读取所述目标场景对应的任务列表，以用于在所述增强现实设备中展示所述任务列表。任务列表中可以包括该目标场景的介绍信息以及任务信息等数据。
本示例实施方式中，在增强现实设备进入所述目标场景的加载范围内时，上述方法还可以包括：
步骤S131，生成一触发指令，以激活所述增强现实设备的摄像组件和传感器组件；
步骤S132，利用所述摄像组件获取所述增强现实设备当前视野对应的图像数据，以及利用所述传感器组件获取所述增强现实设备的动作数据；
步骤S133，结合所述图像数据和所述动作数据获取所述增强现实设备在所述目标场景坐标系中的位置信息。
本示例实施方式中，上述增强现实环境中目标场景的坐标系可以基于现实环境建立，如图3所示，目标场景的坐标系可以与与现实环境采用相同比例。并且，当增强现实设备进入目标场景的加载范围，并开始加载目标场景对应的模型时，便可以生成一触发指令，增强现实设备可以根据该触发指令激活摄像组件和传感器组件开始采集数据，并获取增强现实设备在目标场景坐标系中的位置信息。具体来说，可以包括以下步骤：
步骤S1331，对所述深度图像进行识别以获取标的物的深度数据，以根据所述深度数据获取所述增强现实设备与所述标的物的距离；以及
步骤S1332，读取所述增强现实设备的传感器数据，根据所述传感器数据获取所述增强现实设备的动作识别结果；
步骤S1333，结合所述动作识别结果、所述增强现实设备与所述标的物的距离确定所述增强现实设备在所述目标场景坐标系中的场景位置信息。
举例来说，各待展示的增强现实场景以及目标场景中可以预先配置一个或多个标的物。该标的物可以采用真实场景中既有的物体，例如带有标记的电线杆、路牌或者垃圾箱等等。当然，也可以是专门为各虚拟场景配置的带有标记信息的标的物。并且，可以预先确定各标的物在目标场景坐标系中的坐标。
AR眼镜上可以装配的摄像组件至少包括一深度摄像头，例如采用ToF模组。可以利用该深度摄像头拍摄增强现实设备当前视野中现实场景对应的深度图像。并对深度图像中的标的物进行识别，获取深度信息，并将该距离作为距离识别结果。从而根据深度数据获取AR眼镜与至少一个标的物之间的距离。
举例来说，若用户佩戴AR眼镜，拍摄的当前视野对应的深度图像进行识别后，在当前识别到两个不同的标的物A、B时，若A、B在同一平面，便可以在目标场景坐标系中，分别以A、B为圆心，以识别出的距离为半径分别作圆，则两圆的交点便是AR眼镜当前在目标场景坐标系中的位置。
进一步的，在本公开的其他示例实施方式中，在计算用户在目标场景坐标系中的场景坐标时，还可以读取所述增强现实设备的传感器数据，根据所述传感器数据获取所述增强现实设备的动作识别结果；结合增强现实设备的动作识别结果和增强现实设备与标的物之间的在目标场景坐标系中的距离数据确定增强现实设备在所述目标场景坐标系中更加精确的坐标信息。
举例来说，可以根据九轴传感器采集的数据来计算AR眼镜，即用户视线在水平方向及垂直方向的角度，进而获取AR眼镜与特征匹配对象之间在水平方向及垂直方向的角度。从而在目标场景坐标系中，将AR眼镜与标的物之间的距离，结合AR眼镜与标的物之间在水平方向及垂直方向的角度信息，可以更加准确的计算用户当前在目标场景坐标系中的精确坐标。例如，当用户站在地面看向悬挂在半空中的标的物时，其视线与水平方向、垂直方向均具有夹角。利用九轴传感器便可以识别到用户的抬头动作，以及具体的角度，从而可以根据该角度数据结合标的物的坐标以及识别出的距离更加精准的定位用户的位置。
或者，在在本公开的其他示例实施方式中，还可以利用深度图像中识别到的两个或者多个标的物分别利用上述的方法计算用户的精确坐标，再利用多个精确坐标之间相互校验，从而获取最终的精确坐标。
进一步的，基于上述内容，在本公开的其他示例实施方式中，在所述目标场景坐标系中判断所述增强现实设备是否进入一虚拟交互对象的有效交互范围，以用于在所述增强现实设备进入虚拟对象的有效交互范围时，触发与所述虚拟交互对象的交互。举例来说，目标场景中可以包括移动和固定的虚拟交互对象。
本示例实施方式中，对于可以移动虚拟交互对象来说，可以包括：
步骤S211，获取所述移动虚拟对象当前在所述目标场景坐标系中的场景位置信息，以确定所述移动虚拟对象当前的有效交互范围；
步骤S212，若所述增强现实设备的当前用户交互范围与所述移动虚拟交互对象的有效交互范围重叠，则确定所述增强现实设备进入所述移动虚拟交互对象的有效交互范围。
参考图4所示，目标场景中可以包括NPC(non-player character，非玩家角色)、商店等虚拟对象。各虚拟对象可以预先配置有一定的有效交互范围。例如，如图4所示，虚拟对象411具有较大的有效交互范围，虚拟对象412具有较小的有效交互范围。各虚拟对象的有效交互范围的大小可以根据具体需求，或者根据角色的特点来确定。对于移动虚拟交互对象来说，可以先确定其当前坐标，再根据其预设的交互范围计算当前时刻的有效交互范围对应的坐标。此外，对于增强现实设备来说，也可以预先配置有交互范围。同样的，对于增强现实设备而言，也可以根据当前在目标场景坐标系中的坐标和预设的交互范围计算当前的用户交互范围。在增强现实设备的当前用户交互范围与移动虚拟交互对象的有效交互范围发生重叠时，便判定增强现实设备进入移动虚拟交互对象的有效交互范围，可以开始与该移动虚拟交互对象进行交互，例如进行对话、接收任务数据等等。
本示例实施方式中，对于可以固定虚拟交互对象来说，可以包括：
获取所述增强现实设备在所述目标场景坐标系中当前的场景位置信息，并在当前位置位于所述固定虚拟交互对象对应的有效交互范围时，确定所述增强现实设备进入所述固定移动虚拟交互对象的有效交互范围。
对于固定虚拟交互对象而言，其有效交互范围为固定的坐标范围，当增强现实设备的当前坐标处于一固定虚拟交互对象的固定的有效交互范围内时，便触发与该固定虚拟交互对象之间的交互。或者，当增强现实设备对象的当前用户交互范围与固定虚拟交互对象的有效交互范围发生重叠时，便触发与该固定虚拟交互对象之间的交互。
本公开实施例所提供的方法，通过预先判断用户周围的可以加载的增强现实场景，并在于某一个或多个待加载的场景到达一定的具体范围时，便可以进行预先的加载，可以及时的触发并加载增强现实游戏区域场景。提升用户的使用体验。另外，在进入目标场景后，通过利用采集用户当前视野的图像进行识别以及结合动作识别结果来准确定位用户在目标场景坐标系中的更加精确的位置。能够使用户可以更加准确的与增强现实场景中的虚拟对象进行交互。实现对增强现实场景的准确定位，以及在增强现实场景坐标系中的准确定位，有效的提升用户体验。
需要注意的是，上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。
进一步的，参考图5所示，本示例的实施方式中还提供一种基于增强现实设备的交互系统50，包括可加载场景判断模块501、目标场景判断模块502和目标场景加载模块503。其中：
所述可加载场景判断模块501可以用于获取增强现实设备的当前位置信息，确认当前位置的预设范围内是否包括可加载场景。
所述目标场景判断模块502可以用于在所述当前位置预设范围内包含可加载场景时，获取所述当前位置与所述可加载场景之间的距离以判断是否进入一目标场景的加载范围。
所述目标场景加载模块503用于在所述增强现实设备进入所述目标场景的加载范围内时，加载所述目标场景模型以用于在所述增强现实设备中展示所述目标场景。
在本公开的一种示例中，所述系统50还可以包括：组件激活模块、数据采集模块和位置信息计算模块(图中未示出)。其中，
所述组件激活模块可以用于生成一触发指令可以用于以激活所述增强现实设备的摄像组件和传感器组件。
所述数据采集模块可以用于利用所述摄像组件获取所述增强现实设备当前视野对应的图像数据，以及利用所述传感器组件获取所述增强现实设备的动作数据。
所述位置信息计算模块可以用于结合所述图像数据和所述动作数据获取所述增强现实设备在所述目标场景坐标系中的位置信息。
在本公开的一种示例中，所述所述位置信息计算模块可以包括：图像处理单元、传感器数据处理单元以及结果计算单元(图中未示出)。其中，
所述图像处理单元可以用于对所述深度图像进行识别以获取标的物的深度数据，以根据所述深度数据获取所述增强现实设备与所述标的物的距离。
所述传感器数据处理单元可以用于读取所述增强现实设备的传感器数据，根据所述传感器数据获取所述增强现实设备的动作识别结果。
所述结果计算单元可以用于结合所述动作识别结果、所述增强现实设备与所述标的物的距离确定所述增强现实设备在所述目标场景坐标系中的场景位置信息。
在本公开的一种示例中，所述系统50还可以包括：虚拟交互对象识别模块(图中未示出)。
所述虚拟交互对象识别模块可以用于在所述目标场景坐标系中判断所述增强现实设备是否进入一虚拟交互对象的有效交互范围，以用于在所述增强现实设备进入虚拟对象的有效交互范围时，触发与所述虚拟交互对象的交互。
在本公开的一种示例中，所述虚拟交互对象识别模块可以包括：移动对象交互范围计算单元、第一交互判断单元(图中未示出)。其中，
所述移动对象交互范围计算单元可以用于在所述虚拟交互对象为移动虚拟交互对象时，获取所述移动虚拟对象当前在所述目标场景坐标系中的场景位置信息，以确定所述移动虚拟对象当前的有效交互范围；
所述第一交互判断单元可以用于若所述增强现实设备的当前用户交互范围与所述移动虚拟交互对象的有效交互范围重叠，则确定所述增强现实设备进入所述移动虚拟交互对象的有效交互范围。
在本公开的一种示例中，所述虚拟交互对象识别模块还可以包括：第二交互判断单元(图中未示出)。
所述第二交互判断单元可以用于在所述虚拟交互对象为固定虚拟交互对象时，获取所述增强现实设备在所述目标场景坐标系中当前的场景位置信息，并在当前位置位于所述固定虚拟交互对象对应的有效交互范围时，确定所述增强现实设备进入所述固定移动虚拟交互对象的有效交互范围。
在本公开的一种示例中，所述系统50还包括：任务列表获取模块(图中未示出)。
所述任务列表获取模块可以用于在加载所述目标场景模型以用于在增强现实设备中展示所述目标场景时，读取所述目标场景对应的任务列表，以用于在所述增强现实设备中展示所述任务列表。
上述的基于增强现实设备的交互系统中各模块的具体细节已经在对应的基于增强现实设备的交互方法中进行了详细的描述，因此此处不再赘述。
应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
图6示出了适于用来实现本发明实施例的电子设备的计算机系统的结构示意图。上述的电子设备可以是例如AR眼镜、AR头盔等增强现实设备
需要说明的是，图6示出的电子设备的计算机系统600仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图6所示，计算机系统600包括中央处理单元(Central Processing Unit，CPU)601，其可以根据存储在只读存储器(Read-Only Memory，ROM)602中的程序或者从存储部分608加载到随机访问存储器(Random Access Memory，RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中，还存储有系统操作所需的各种程序和数据。CPU 601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(Input/Output，I/O)接口605也连接至总线604。
以下部件连接至I/O接口605：包括键盘、鼠标等的输入部分606；包括诸如阴极射线管(Cathode Ray Tube，CRT)、液晶显示器(Liquid Crystal Display，LCD)等以及扬声器等的输出部分607；包括硬盘等的存储部分608；以及包括诸如LAN(Local Area Network，局域网)卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器610上，以便于从其上读出的计算机程序根据需要被安装入存储部分608。
特别地，根据本发明的实施例，下文参考流程图描述的过程可以被实现为计算机软件程序。例如，本发明的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分509从网络上被下载和安装，和/或从可拆卸介质511被安装。在该计算机程序被中央处理单元(CPU)501执行时，执行本申请的系统中限定的各种功能。
需要说明的是，本发明实施例所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、闪存、光纤、便携式紧凑磁盘只读存储器(Compact Disc Read-Only Memory，CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、有线等等，或者上述的任意合适的组合。
附图中的流程图和框图，图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现，所描述的单元也可以设置在处理器中。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定。
作为另一方面，本申请还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被一个该电子设备执行时，使得该电子设备实现如下述实施例中所述的方法。例如，所述的电子设备可以实现如图1所示的各个步骤。
此外，上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限。

Claims (10)

1.一种基于增强现实设备的交互方法，其特征在于，包括：
获取增强现实设备的当前位置信息，确认当前位置的预设范围内是否包括可加载场景；
在所述当前位置预设范围内包含可加载场景时，获取所述当前位置与所述可加载场景之间的距离以判断是否进入一目标场景的加载范围；
在所述增强现实设备进入所述目标场景的加载范围内时，加载所述目标场景模型以用于在所述增强现实设备中展示所述目标场景。
2.根据权利要求1所述的方法，其特征在于，所述增强现实设备进入所述目标场景的加载范围内时，所述方法还包括：
生成一触发指令，以激活所述增强现实设备的摄像组件和传感器组件；
利用所述摄像组件获取所述增强现实设备当前视野对应的图像数据，以及利用所述传感器组件获取所述增强现实设备的动作数据；
结合所述图像数据和所述动作数据获取所述增强现实设备在所述目标场景坐标系中的位置信息。
3.根据权利要求2所述的方法，其特征在于，所述图像数据包括深度图像；
所述结合所述图像数据和所述动作数据获取所述增强现实设备在所述目标场景坐标系中的位置信息包括：
对所述深度图像进行识别以获取标的物的深度数据，以根据所述深度数据获取所述增强现实设备与所述标的物的距离；以及
读取所述增强现实设备的传感器数据，根据所述传感器数据获取所述增强现实设备的动作识别结果；
结合所述动作识别结果、所述增强现实设备与所述标的物的距离确定所述增强现实设备在所述目标场景坐标系中的场景位置信息。
4.根据权利要求3所述的方法，其特征在于，所述方法还包括：
在所述目标场景坐标系中判断所述增强现实设备是否进入一虚拟交互对象的有效交互范围，以用于在所述增强现实设备进入虚拟对象的有效交互范围时，触发与所述虚拟交互对象的交互。
5.根据权利要求4所述的方法，其特征在于，所述虚拟交互对象为移动虚拟交互对象；
所述判断所述增强现实设备是否进入一虚拟交互对象的有效交互范围包括：
获取所述移动虚拟对象当前在所述目标场景坐标系中的场景位置信息，以确定所述移动虚拟对象当前的有效交互范围；
若所述增强现实设备的当前用户交互范围与所述移动虚拟交互对象的有效交互范围重叠，则确定所述增强现实设备进入所述移动虚拟交互对象的有效交互范围。
6.根据权利要求4所述的方法，其特征在于，所述虚拟交互对象为固定虚拟交互对象；
所述判断所述增强现实设备是否进入一虚拟交互对象的有效交互范围包括：
获取所述增强现实设备在所述目标场景坐标系中当前的场景位置信息，并在当前位置位于所述固定虚拟交互对象对应的有效交互范围时，确定所述增强现实设备进入所述固定移动虚拟交互对象的有效交互范围。
7.根据权利要求1所述的方法，其特征在于，所述加载所述目标场景模型以用于在增强现实设备中展示所述目标场景时，所述方法还包括：
读取所述目标场景对应的任务列表，以用于在所述增强现实设备中展示所述任务列表。
8.一种基于增强现实设备的交互系统，其特征在于，包括：
可加载场景判断模块，用于获取增强现实设备的当前位置信息，确认当前位置的预设范围内是否包括可加载场景；
目标场景判断模块，用于在所述当前位置预设范围内包含可加载场景时，获取所述当前位置与所述可加载场景之间的距离以判断是否进入一目标场景的加载范围；
目标场景加载模块，用于在所述增强现实设备进入所述目标场景的加载范围内时，加载所述目标场景模型以用于在所述增强现实设备中展示所述目标场景。
9.一种计算机可读介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的基于增强现实设备的交互方法。
10.一种电子设备，其特征在于，包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如权利要求1至7中任一项所述的基于增强现实设备的交互方法。
CN201910765900.8A 2019-08-19 2019-08-19 基于增强现实设备的交互方法及系统 Active CN110478901B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201910765900.8A CN110478901B (zh) 2019-08-19 2019-08-19 基于增强现实设备的交互方法及系统
EP20853764.7A EP3978089A4 (en) 2019-08-19 2020-07-16 Interactive method and system based on augmented reality device, electronic device, and computer readable medium
PCT/CN2020/102478 WO2021031755A1 (zh) 2019-08-19 2020-07-16 基于增强现实设备的交互方法及系统、电子设备、计算机可读介质
US17/563,144 US20220122331A1 (en) 2019-08-19 2021-12-28 Interactive method and system based on augmented reality device, electronic device, and computer readable medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910765900.8A CN110478901B (zh) 2019-08-19 2019-08-19 基于增强现实设备的交互方法及系统

Publications (2)

Publication Number Publication Date
CN110478901A true CN110478901A (zh) 2019-11-22
CN110478901B CN110478901B (zh) 2023-09-22

Family

ID=68552079

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910765900.8A Active CN110478901B (zh) 2019-08-19 2019-08-19 基于增强现实设备的交互方法及系统

Country Status (4)

Country Link
US (1) US20220122331A1 (zh)
EP (1) EP3978089A4 (zh)
CN (1) CN110478901B (zh)
WO (1) WO2021031755A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111790151A (zh) * 2020-06-28 2020-10-20 上海米哈游天命科技有限公司 一种场景中物体加载方法、装置、存储介质及电子设备
CN112330820A (zh) * 2020-11-12 2021-02-05 北京市商汤科技开发有限公司 信息展示方法、装置、电子设备及存储介质
CN113093915A (zh) * 2021-04-23 2021-07-09 深圳市商汤科技有限公司 多人互动的控制方法、装置、设备及存储介质
CN113253834A (zh) * 2020-02-07 2021-08-13 联想（新加坡）私人有限公司 用于在增强现实视野中显示窗的设备、方法和程序产品
CN113262478A (zh) * 2020-02-17 2021-08-17 Oppo广东移动通信有限公司 增强现实处理方法及装置、存储介质和电子设备
CN113516989A (zh) * 2020-03-27 2021-10-19 浙江宇视科技有限公司 声源音频的管理方法、装置、设备和存储介质
CN113791846A (zh) * 2020-11-13 2021-12-14 北京沃东天骏信息技术有限公司 信息展示方法及装置、电子设备、存储介质
CN117687718A (zh) * 2024-01-08 2024-03-12 元年科技(珠海)有限责任公司 一种虚拟数字场景展示方法以及相关装置

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113577766B (zh) * 2021-08-05 2024-04-02 百度在线网络技术（北京）有限公司 对象处理方法及装置
KR102670496B1 (ko) * 2022-01-13 2024-05-31 네이버랩스 주식회사 기 설정된 단위 공간에 기반하여 증강현실 뷰를 통해 증강 콘텐츠를 제공하는 방법 및 장치
CN117354568A (zh) * 2022-06-27 2024-01-05 华为技术有限公司 一种显示方法、设备及系统
CN115268749B (zh) * 2022-07-20 2024-04-09 广州视享科技有限公司 增强现实设备的控制方法、移动终端及防遮挡系统
CN115268655A (zh) * 2022-08-22 2022-11-01 江苏泽景汽车电子股份有限公司 基于增强现实的交互方法、系统，车辆及存储介质
CN115082648B (zh) * 2022-08-23 2023-03-24 海看网络科技(山东)股份有限公司 一种基于标志物模型绑定的ar场景布置方法及系统

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140240464A1 (en) * 2013-02-28 2014-08-28 Motorola Mobility Llc Context-Based Depth Sensor Control
CN107767459A (zh) * 2016-08-18 2018-03-06 深圳市劲嘉数媒科技有限公司 基于增强现实的展示方法、装置和系统
CN108415570A (zh) * 2018-03-07 2018-08-17 网易（杭州）网络有限公司 基于增强现实的控件选择方法和装置
CN108434739A (zh) * 2018-01-30 2018-08-24 网易（杭州）网络有限公司 游戏场景中虚拟资源的处理方法及装置
CN108499103A (zh) * 2018-04-16 2018-09-07 网易（杭州）网络有限公司 场景元素的显示方法及装置
CN108568112A (zh) * 2018-04-20 2018-09-25 网易（杭州）网络有限公司 一种游戏场景的生成方法、装置和电子设备
CN109656441A (zh) * 2018-12-21 2019-04-19 广州励丰文化科技股份有限公司 一种基于虚拟现实的导览方法及系统
CN109685909A (zh) * 2018-11-12 2019-04-26 腾讯科技（深圳）有限公司 图像的显示方法、装置、存储介质和电子装置
CN109782901A (zh) * 2018-12-06 2019-05-21 网易（杭州）网络有限公司 增强现实交互方法、装置、计算机设备及存储介质
CN109886191A (zh) * 2019-02-20 2019-06-14 上海昊沧系统控制技术有限责任公司 一种基于ar的识别物管理方法及系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6166744A (en) * 1997-11-26 2000-12-26 Pathfinder Systems, Inc. System for combining virtual images with real-world scenes
CN103257876B (zh) * 2013-04-28 2016-04-13 福建天晴数码有限公司 C3游戏地图动态加载的方法
CN106020493A (zh) * 2016-03-13 2016-10-12 成都市微辣科技有限公司 一种基于虚拟现实的产品展示装置及方法
CN106547599B (zh) * 2016-11-24 2020-05-05 腾讯科技（深圳）有限公司 一种资源动态加载的方法及终端
IT201700058961A1 (it) * 2017-05-30 2018-11-30 Artglass S R L Metodo e sistema di fruizione di un contenuto editoriale in un sito preferibilmente culturale o artistico o paesaggistico o naturalistico o fieristico o espositivo
CN107198876B (zh) * 2017-06-07 2021-02-05 北京小鸟看看科技有限公司 游戏场景的加载方法及装置
CN111201067B (zh) * 2017-10-31 2021-10-22 多玩国株式会社 输入接口系统、输入接口的控制方法以及存储有控制程序的存储介质
CN108854070A (zh) * 2018-06-15 2018-11-23 网易（杭州）网络有限公司 游戏中的信息提示方法、装置及存储介质

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140240464A1 (en) * 2013-02-28 2014-08-28 Motorola Mobility Llc Context-Based Depth Sensor Control
CN105393079A (zh) * 2013-02-28 2016-03-09 谷歌技术控股有限责任公司 基于上下文的深度传感器控制
CN107767459A (zh) * 2016-08-18 2018-03-06 深圳市劲嘉数媒科技有限公司 基于增强现实的展示方法、装置和系统
CN108434739A (zh) * 2018-01-30 2018-08-24 网易（杭州）网络有限公司 游戏场景中虚拟资源的处理方法及装置
CN108415570A (zh) * 2018-03-07 2018-08-17 网易（杭州）网络有限公司 基于增强现实的控件选择方法和装置
CN108499103A (zh) * 2018-04-16 2018-09-07 网易（杭州）网络有限公司 场景元素的显示方法及装置
CN108568112A (zh) * 2018-04-20 2018-09-25 网易（杭州）网络有限公司 一种游戏场景的生成方法、装置和电子设备
CN109685909A (zh) * 2018-11-12 2019-04-26 腾讯科技（深圳）有限公司 图像的显示方法、装置、存储介质和电子装置
CN109782901A (zh) * 2018-12-06 2019-05-21 网易（杭州）网络有限公司 增强现实交互方法、装置、计算机设备及存储介质
CN109656441A (zh) * 2018-12-21 2019-04-19 广州励丰文化科技股份有限公司 一种基于虚拟现实的导览方法及系统
CN109886191A (zh) * 2019-02-20 2019-06-14 上海昊沧系统控制技术有限责任公司 一种基于ar的识别物管理方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
J. BENJAMIN GOTOW, KRZYSZTOF ZIENKIEWICZ, JULES WHITE,: "Addressing Challenges with Augmented Reality", 《INSTITUTE FOR COMPUTER SCIENCES, SOCIAL INFORMATICS AND TELECOMMUNICATIONS ENGINEERING 2010》 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113253834A (zh) * 2020-02-07 2021-08-13 联想（新加坡）私人有限公司 用于在增强现实视野中显示窗的设备、方法和程序产品
CN113262478A (zh) * 2020-02-17 2021-08-17 Oppo广东移动通信有限公司 增强现实处理方法及装置、存储介质和电子设备
CN113262478B (zh) * 2020-02-17 2023-08-25 Oppo广东移动通信有限公司 增强现实处理方法及装置、存储介质和电子设备
CN113516989A (zh) * 2020-03-27 2021-10-19 浙江宇视科技有限公司 声源音频的管理方法、装置、设备和存储介质
CN111790151A (zh) * 2020-06-28 2020-10-20 上海米哈游天命科技有限公司 一种场景中物体加载方法、装置、存储介质及电子设备
CN112330820A (zh) * 2020-11-12 2021-02-05 北京市商汤科技开发有限公司 信息展示方法、装置、电子设备及存储介质
CN113791846A (zh) * 2020-11-13 2021-12-14 北京沃东天骏信息技术有限公司 信息展示方法及装置、电子设备、存储介质
CN113093915A (zh) * 2021-04-23 2021-07-09 深圳市商汤科技有限公司 多人互动的控制方法、装置、设备及存储介质
CN117687718A (zh) * 2024-01-08 2024-03-12 元年科技(珠海)有限责任公司 一种虚拟数字场景展示方法以及相关装置
CN117687718B (zh) * 2024-01-08 2024-09-06 元年科技(珠海)有限责任公司 一种虚拟数字场景展示方法以及相关装置

Also Published As

Publication number Publication date
CN110478901B (zh) 2023-09-22
EP3978089A4 (en) 2022-08-10
US20220122331A1 (en) 2022-04-21
EP3978089A1 (en) 2022-04-06
WO2021031755A1 (zh) 2021-02-25

Similar Documents

Publication Publication Date Title
CN110478901B (zh) 基于增强现实设备的交互方法及系统
CN107450088B (zh) 一种基于位置的服务lbs的增强现实定位方法及装置
CN107771342B (zh) 一种增强现实显示方法及头戴式显示设备
CN109743626B (zh) 一种图像显示方法、图像处理方法和相关设备
US11195320B2 (en) Feed-forward collision avoidance for artificial reality environments
CN107562189B (zh) 一种基于双目摄像头的空间定位方法及服务设备
CN111290580B (zh) 基于视线追踪的校准方法及相关装置
CN113407084B (zh) 展示内容更新方法、头戴式显示设备和计算机可读介质
WO2018113759A1 (zh) 基于定位系统和ar/mr的探测系统及探测方法
US10488949B2 (en) Visual-field information collection method and system for executing the visual-field information collection method
CN113483774A (zh) 导航方法、装置、电子设备及可读存储介质
CN113074736A (zh) 室内导航定位方法、设备、电子设备、存储介质及产品
CN111569414B (zh) 虚拟飞行器的飞行展示方法、装置、电子设备及存储介质
CN109559382A (zh) 智能导游方法、装置、终端和介质
EP4162344A1 (en) Device navigation based on concurrent position estimates
CN114647305B (zh) Ar导览中的障碍物提示方法、头戴式显示设备和可读介质
EP2574029A1 (en) Object distribution range setting device and object distribution range setting method
CN107848460A (zh) 用于车辆的系统、方法和设备以及计算机可读介质
WO2022190970A1 (ja) 情報処理装置、情報処理方法、プログラム、及び、情報処理システム
KR20220056834A (ko) 표시 방법, 장치, 단말 기기, 컴퓨터 판독 가능한 저장 매체 및 컴퓨터 프로그램
CN112053444B (zh) 基于光通信装置叠加虚拟对象的方法和相应的电子设备
KR101939530B1 (ko) 지형정보 인식을 기반으로 증강현실 오브젝트를 표시하는 방법 및 그 장치
EP4086102B1 (en) Navigation method and apparatus, electronic device, readable storage medium and computer program product
US20250021203A1 (en) Information interaction method, electronic device, and storage medium
US20240078734A1 (en) Information interaction method and apparatus, electronic device and storage medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant