CN113776553A - Ar数据展示方法、装置、电子设备及存储介质 - Google Patents

Ar数据展示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN113776553A
CN113776553A CN202111014893.1A CN202111014893A CN113776553A CN 113776553 A CN113776553 A CN 113776553A CN 202111014893 A CN202111014893 A CN 202111014893A CN 113776553 A CN113776553 A CN 113776553A
Authority
CN
China
Prior art keywords
navigation
target
data
equipment
real
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111014893.1A
Other languages
English (en)
Inventor
李宇飞
张建博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen TetrasAI Technology Co Ltd
Original Assignee
Shenzhen TetrasAI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen TetrasAI Technology Co Ltd filed Critical Shenzhen TetrasAI Technology Co Ltd
Priority to CN202111014893.1A priority Critical patent/CN113776553A/zh
Publication of CN113776553A publication Critical patent/CN113776553A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3667Display of a road map
    • G01C21/367Details, e.g. road map scale, orientation, zooming, illumination, level of detail, scrolling of road map or positioning of current position marker
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Navigation (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开提供了一种AR数据展示方法、装置、电子设备及存储介质,该方法包括:获取增强现实AR设备的起始位姿数据;基于所述AR设备的起始位姿数据以及所述AR设备的目的地信息,获取导航路线;基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据;所述AR导航数据中包括与所述AR设备的实时位姿数据关联的目标场所发布的资源信息;通过AR设备展示包含所述AR导航数据的AR导航图。

Description

AR数据展示方法、装置、电子设备及存储介质
技术领域
本公开涉及增强显示技术领域,具体而言,涉及一种增强现实(AugmentedReality,AR)数据展示方法、装置、电子设备及存储介质。
背景技术
随着智能设备的广泛使用,导航在用户的出行过程中起到了至关重要的作用。比如,在景区、商场、街道等不熟悉的地方,人们经常会通过地图软件进行导航,到达目的地。
一般的,传统的导航软件是基于全球定位系统(Global Positioning System,GPS)对智能设备进行定位,并基于定位结果展示导航路线,导航软件提供的导航信息除了导航路线以及用户定位位置信息外,还会包含预先存储的地图上的一些数据,这些数据都是地图关联的静态数据。
发明内容
有鉴于此,本公开至少提供一种AR数据展示方法、装置、电子设备及存储介质。
第一方面,本公开提供了一种AR数据展示方法,包括:
获取增强现实AR设备的起始位姿数据;
基于所述AR设备的起始位姿数据以及所述AR设备的目的地信息,获取导航路线;
基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据;所述AR导航数据中包括与所述AR设备的实时位姿数据关联的目标场所发布的资源信息;
通过AR设备展示包含所述AR导航数据的AR导航图。
采用上述方法,可以在确定导航路线之后,基于确定的导航路线,以及导航中对AR设备定位后得到的实时位姿数据,确定AR导航数据;AR导航数据中包括与AR设备的实时位姿数据关联的目标场所发布的资源信息;并通过AR设备展示包含AR导航数据的AR导航图。本公开实施例可以实现在导航过程中,实时的展示与AR设备的实时位姿数据关联的目标场所发布的资源信息,由此,可以实现在AR设备同步展示导航路线以及中途经过的或附近的目标场所发布的资源信息,使得用户及时获取到与当前导航路线相关的一些场所的发布资源信息,一方面可以提高目标场所相关资源的利用率,另一方面实现向用户适时推送一些发布资源信息,供用户导航途中参考,用户无需通过专门的资源信息获取途径(比如专门打开相关app的资源信息发布页面)查看相关资源信息,提高了信息获取效率。
一种可能的实施方式中,基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据,包括:
基于所述AR设备的实时位姿数据,确定匹配该实时位姿数据的目标场所;
获取所述目标场所发布的资源信息,以及所述资源信息的展示位置;
基于所述导航路线、所述资源信息、以及所述资源信息的展示位置,确定AR导航数据。
一种可能的实施方式中,根据下述步骤确定导航中所述AR设备的所述实时位姿数据:
基于导航中实时获取的场景图像、和构建的三维场景地图,确定导航中所述AR设备的所述实时位姿数据;和/或,
基于所述AR设备上设置的定位传感器,确定导航中所述AR设备的所述实时位姿数据。
这里,可以通过定位传感器确定AR设备的实时位姿数据,计算资源耗费较少;或者,也可以通过场景图像、以及构建的三维场景地图,这种方式可以实现更准确地确定AR设备的实时位姿数据。
一种可能的实施方式中,获取所述目标场所发布的资源信息,包括:
获取与所述目标场所相关的当前活动信息;
从所述当前活动信息中,提取所述目标场所在当前活动中发布的所述资源信息。
上述实施方式下,可以通过获取与目标场所相关的当前活动信息,从当前活动信息中,提取目标场所在当前活动中发布的资源信息,也即实现只展示当前活动信息中的资源信息这一关键信息,节省地图上的展示区域,也有利于用户视觉聚焦,更方便地获取关键信息。
一种可能的实施方式中,基于所述AR设备的实时位姿数据,确定匹配该实时位姿数据的目标场所,包括:
根据所述AR设备的所述实时位姿数据,确定与所述AR设备距离设定范围内的所述目标场所。
一种可能的实施方式中,所述目标场所包括目标实体场所和/或目标虚拟场所。
这里,目标场所包括目标实体场所和/或目标虚拟场所,目标场所的设置较为丰富。
一种可能的实施方式中,在通过AR设备展示包含所述AR导航数据的AR导航图之后,还包括:
响应作用在所述资源信息上的第一触发操作,通过AR设备展示到达所述资源信息对应的目标场所的导航路线;或者,
响应作用在所述资源信息上的第一触发操作,在所述AR导航图中展示所述目标场所的位置标记。
在上述实施方式中,响应作用在资源信息上的第一触发操作,可以展示到达资源信息对应的目标场所的导航路线,以便用户基于指示的到达目标场所的导航路线,到达目标场所;或者,还可以响应作用在资源信息上的第一触发操作,在AR导航图中展示目标场所的位置标记,进而可以基于展示的目标场所的位置标记,对目标场所的位置有一个清楚的、直观的认知,便于判断是否前往目标场所。
一种可能的实施方式中,在通过AR设备展示包含所述AR导航数据的AR导航图之后,还包括:
响应作用在所述资源信息上的第二触发操作,通过所述AR设备展示目标应用链接;
在所述目标应用链接被触发之后,通过所述AR设备展示所述目标场所的目标活动页面,其中,所述目标活动页面中展示有参与目标活动能够获取的目标资源对应的所述资源信息。
上述实施方式下,还可以响应作用在资源信息上的第二触发操作,在AR设备上展示目标应用链接,进一步的,在目标应用链接被触发之后,可以通过AR设备展示目标场所的目标活动页面,该目标活动页面中展示有参与目标活动能够获取的目标资源对应的资源信息,如此,可以更方便用户定位到目标活动页面。
以下装置、电子设备等的效果描述参见上述方法的说明,这里不再赘述。
第二方面,本公开提供了一种AR数据展示装置,包括:
第一获取模块,用于获取增强现实AR设备的起始位姿数据;
第二获取模块,用于基于所述AR设备的起始位姿数据以及所述AR设备的目的地信息,获取导航路线;
确定模块,用于基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据;所述AR导航数据中包括与所述AR设备的实时位姿数据关联的目标场所发布的资源信息;
第一展示模块,用于通过AR设备展示包含所述AR导航数据的AR导航图。
一种可能的实施方式中,所述确定模块,在基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据时,用于:
基于所述AR设备的实时位姿数据,确定匹配该实时位姿数据的目标场所;
获取所述目标场所发布的资源信息,以及所述资源信息的展示位置;
基于所述导航路线、所述资源信息、以及所述资源信息的展示位置,确定AR导航数据。
一种可能的实施方式中,所述确定模块,用于根据下述步骤确定导航中所述AR设备的所述实时位姿数据:
基于导航中实时获取的场景图像、和构建的三维场景地图,确定导航中所述AR设备的所述实时位姿数据;和/或,
基于所述AR设备上设置的定位传感器,确定导航中所述AR设备的所述实时位姿数据。
一种可能的实施方式中,所述确定模块,在获取所述目标场所发布的资源信息时,用于:
获取与所述目标场所相关的当前活动信息;
从所述当前活动信息中,提取所述目标场所在当前活动中发布的所述资源信息。
一种可能的实施方式中,所述确定模块,在基于所述AR设备的实时位姿数据,确定匹配该实时位姿数据的目标场所时,用于:
根据所述AR设备的所述实时位姿数据,确定与所述AR设备距离设定范围内的所述目标场所。
一种可能的实施方式中,所述目标场所包括目标实体场所和/或目标虚拟场所。
一种可能的实施方式中,在通过AR设备展示包含所述AR导航数据的AR导航图之后,还包括:第二展示模块,用于:
响应作用在所述资源信息上的第一触发操作,通过AR设备展示到达所述资源信息对应的目标场所的导航路线;或者,
响应作用在所述资源信息上的第一触发操作,在所述AR导航图中展示所述目标场所的位置标记。
一种可能的实施方式中,在通过AR设备展示包含所述AR导航数据的AR导航图之后,还包括:第三展示模块,用于:
响应作用在所述资源信息上的第二触发操作,通过所述AR设备展示目标应用链接;
在所述目标应用链接被触发之后,通过所述AR设备展示所述目标场所的目标活动页面,其中,所述目标活动页面中展示有参与目标活动能够获取的目标资源对应的所述资源信息。
第三方面,本公开提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如上述第一方面或任一实施方式所述的AR数据展示方法的步骤。
第四方面,本公开提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如上述第一方面或任一实施方式所述的AR数据展示方法的步骤。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种AR数据展示方法的流程示意图;
图2a示出了本公开实施例所提供的一种AR数据展示方法中,AR设备的界面示意图;
图2b示出了本公开实施例所提供的一种AR数据展示方法中,AR设备的界面示意图;
图2c示出了本公开实施例所提供的一种AR数据展示方法中,AR设备的界面示意图;
图2d示出了本公开实施例所提供的一种AR数据展示方法中,AR设备的界面示意图;
图2e示出了本公开实施例所提供的一种AR数据展示方法中,AR设备的界面示意图;
图3示出了本公开实施例所提供的一种AR数据展示装置的架构示意图;
图4示出了本公开实施例所提供的一种电子设备400的结构示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中的附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
一般的,传统的导航软件是基于全球定位系统(Global Positioning System,GPS)对智能设备进行定位,并基于定位结果展示导航路线,导航软件提供的导航信息除了导航路线以及用户定位位置信息外,还会包含预先存储的地图上的一些数据,这些数据都是地图关联的静态数据。为了解决上述问题,本公开实施例提供了一种增强现实(Augmented Reality,AR)数据展示方法。
为便于对本公开实施例进行理解,首先对本公开实施例所公开的一种AR数据展示方法进行详细介绍。该方法的执行主体可以为AR设备,AR设备为能够支持AR功能的智能设备,比如,AR设备包括但不限于手机、平板、AR眼镜等;也可以为服务器,比如云端服务器或本地服务器。
参见图1所示,为本公开实施例所提供的一种AR数据展示方法的流程示意图,该方法包括S101-S104,其中:
S101,获取增强现实AR设备的起始位姿数据。
S102,基于AR设备的起始位姿数据以及所述AR设备的目的地信息,获取导航路线。
S103,基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据;所述AR导航数据中包括与所述AR设备的实时位姿数据关联的目标场所发布的资源信息。
S104,通过AR设备展示包含所述AR导航数据的AR导航图。
上述方法中,可以在确定导航路线之后,基于确定的导航路线,以及导航中对AR设备定位后得到的实时位姿数据,确定AR导航数据;AR导航数据中包括与AR设备的实时位姿数据关联的目标场所发布的资源信息;并通过AR设备展示包含AR导航数据的AR导航图。本公开实施例可以实现在导航过程中,实时的展示与AR设备的实时位姿数据关联的目标场所发布的资源信息,由此,可以实现在AR设备同步展示导航路线以及中途经过的或附近的目标场所发布的资源信息,使得用户及时获取到与当前导航路线相关的一些场所的发布资源信息,一方面可以提高目标场所相关资源的利用率,另一方面实现向用户适时推送一些发布资源信息,供用户导航途中参考,用户无需通过专门的资源信息获取途径(比如专门打开相关app的资源信息发布页面)查看相关资源信息,提高了信息获取效率。
针对S101以及S102:
可以利用视觉定位的方式,确定AR设备的起始位姿数据。比如,用户在发起导航时,可以先通过AR设备拍摄现实场景图像;再基于获取到的现实场景图像,确定AR设备的起始位姿数据,使得执行主体能够获取到AR设备的起始位姿数据。其中,确定AR设备的起始位姿数据的过程可以在执行主体上完成,也可以在其他设备上完成。
具体实施,可以将获取的现实场景图像、与构建的三维场景地图进行匹配,确定AR设备的起始位姿数据。其中,起始位姿数据中包括AR设备的位置数据和朝向数据。具体的,可以提取现实场景图像中包括的至少一个特征点的特征信息,将现实场景图像中包括的至少一个特征点的特征信息和构建的三维场景地图进行匹配,确定AR设备的起始位姿数据。
可以根据下述步骤构建三维场景地图:获取该场景对应的视频,从视频中采样得到多帧场景样本,利用神经网络算法从多帧场景样本中提取得到多个样本特征点信息;再可以基于提取得到的多个样本特征点信息,构建三维场景地图。
这里,还可以确定AR设备的目的地信息,比如,用户在AR设备的目标位置处输入目的地后,响应于该输入操作,确定AR设备的目的地信息。进而可以根据AR设备的起始位姿数据以及AR设备的目的地信息,获取导航路线,以便携带有AR设备的用户可以按照导航路线的指示到达目的地。
实施时,可以利用AR设备上安装的导航程序,确定从AR设备的起始位姿数据指示的起始位置到达目的地的导航路线。
针对S103:
在按照导航路线指示的方向移动的过程中,实时的确定AR设备的实时位姿数据,比如可以利用同步定位与建图(simultaneous localization and mapping,SLAM)算法,确定实时位姿数据。再可以基于导航路线和实时位姿数据,确定AR导航数据,其中,该AR导航数据中包括与AR设备的实时位姿数据关联的目标场所发布的资源信息。该资源信息中可以包括AR数据、文本数据、视频数据、音频数据中的一种或多种等。
其中,所述目标场所包括目标实体场所和/或目标虚拟场所。目标实体场所可以为现实场景中包括的任一真实场所,比如,目标实体场所可以为真实场景中的路口位置、真实商家对应的场所、真实景点等;目标虚拟场所可以为在现实场景的特定信息点处设置的虚拟场所,比如,目标虚拟场所可以为虚拟游乐园、虚拟景点等。资源信息可以包括目标场所的介绍信息、优惠券信息、活动信息、指示牌信息、广告信息等。这里,目标场所包括目标实体场所和/或目标虚拟场所,目标场所的设置较为丰富。
在具体实施时,该AR导航数据中还可以包括指示移动方向的虚拟导航对象,比如,虚拟导航对象可以为虚拟导航员和/或虚拟导航箭头。
一种可选实施方式中,基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据,包括:
步骤一、基于所述AR设备的实时位姿数据,确定匹配该实时位姿数据的目标场所。
步骤二、获取所述目标场所发布的资源信息,以及所述资源信息的展示位置。
步骤三、基于所述导航路线、所述资源信息、以及所述资源信息的展示位置,确定AR导航数据。
步骤一中,可以先确定AR设备的实时位姿数据,再基于AR设备的实时位姿数据,确定匹配该实时位姿数据的目标场所。
可以根据下述方式确定导航中所述AR设备的所述实时位姿数据:
方式一、基于导航中实时获取的场景图像、和构建的三维场景地图,确定导航中所述AR设备的所述实时位姿数据。
方式二、基于所述AR设备上设置的定位传感器,确定导航中所述AR设备的所述实时位姿数据。
在方式一中,示例性的,在导航过程中,可以实时获取AR设备采集的场景图像,对场景图像进行特征提取,得到场景图像中包括的至少一个特征点信息;将场景图像中包括的至少一个特征点信息、与构建的三维场景地图进行匹配,确定AR设备的实时位姿数据。
具体实施时,可以通过视觉定位服务(Visual Positioning Service,VPS)系统确定AR设备的实时位姿数据,即可以将获取的场景图像输入至VPS系统中,VPS系统基于场景图像、和构建的三维场景地图,确定AR设备的实时位姿数据。
在方式二中,AR设备上设置有定位传感器,可以通过定位传感器检测到的数据,确定AR设备的实时位姿数据。示例性的,可以通过AR设备上设置的定位传感器、slam跟踪算法,确定AR设备的实时位姿数据。
具体实施时,还可以每间隔固定时间或AR设备每移动固定距离时,使用方式一的过程,确定AR设备的实时位姿数据,在固定时间之内或在移动的固定距离之内利用方式二的过程,确定AR设备的实时位姿数据。
比如,若设置的固定时间为10秒或固定距离为10米时,则在基于前一帧场景图像以及三维场景地图,确定AR设备的实时位姿数据之后,在间隔10秒之后或移动10米之后,获取当前帧场景图像,并基于当前帧场景图像和三维场景地图,确定AR设备的实时位姿数据。在基于上一帧场景图像确定AR设备的实时位姿数据之后,在基于当前帧场景图像,确定AR设备的实时位姿数据之前,可以利用方式二的过程,实时确定AR设备的实时位姿数据。
这里,可以通过定位传感器确定AR设备的实时位姿数据,计算资源耗费较少;或者,也可以通过场景图像、以及构建的三维场景地图,这种方式可以实现更准确地确定AR设备的实时位姿数据。
一种可选实施方式中,基于所述AR设备的实时位姿数据,确定匹配该实时位姿数据的目标场所,包括:根据所述AR设备的所述实时位姿数据,确定与所述AR设备距离设定范围内的所述目标场所。
这里,可以设置基于AR设备的实时位姿数据、和设定范围,确定与AR设备距离设定范围内的目标场所。比如,若设定范围为5米,则根据AR设备的实时位姿数据,将与AR设备的距离在5米之内的场所,确定为目标场所。其中,设定范围可以基于AR设备拍摄的最远距离进行确定,或者,设定范围也可以基于实际需要进行确定。
步骤二中,可以获取目标场所发布的资源信息、以及该资源信息的展示位置。这里,资源信息可以为目标场所周期性发布的信息,比如,目标场所A可以在每天早上8点发布资源信息。每个目标场所对应的资源信息的展示位置可以为提前设置,即获取资源信息对应的预设的展示位置。比如,可以将目标场所A门口对应的位置,确定为资源信息的展示位置。
在资源信息为指示牌信息时,该指示牌信息为提前设置的指示信息;该指示牌的展示位置为提前设置的位置。比如,指示牌信息可以为右行-场所A、场所B、场所C;直行-场所D、场所E。
这里,可以根据下述步骤获取所述目标场所发布的资源信息:
A1,获取与所述目标场所相关的当前活动信息。
A2,从所述当前活动信息中,提取所述目标场所在当前活动中发布的所述资源信息。
上述实施方式下,可以通过获取与目标场所相关的当前活动信息,从当前活动信息中,提取目标场所在当前活动中发布的资源信息,也即实现只展示当前活动信息中的资源信息这一关键信息,节省地图上的展示区域,也有利于用户视觉聚焦,更方便地获取关键信息。
具体实施时,可以获取与目标场所相关的当前活动信息,与目标场所相关的当前活动信息可以为目标场所发布的信息,或者,与目标场所相关的当前活动信息也可以为第三方发布的目标场所的当前活动信息;其中,该当前活动信息可以活动方式、活动时间、活动内容、目标场所对应的标识名称等。
再从获取的当前活动信息中,提取目标场所在当前活动中发布的资源信息。比如,从当前活动信息中提取优惠劵的属性信息,该优惠劵的属性信息可以为优惠时间、优惠金额、优惠方式等。或者,从当前活动信息中提取商家的基本信息,商家的基本信息可以为商家名称、类型、商家内包括的物品等。
在具体实施时,AR设备可以在按照导航路线移动的过程中,可以在AR设备每移动设置的第一距离之后,从服务器获取展示位置与当前位姿数据之间的距离小于或等于第二距离的候选资源信息。比如,AR设备在前一次获取候选资源信息之后,AR设备移动了10米后,基于AR设备的当前位姿数据,获取该当前位姿数据周围10米之内的候选资源信息,将获取的候选资源信息存储在AR设备中,以便在AR设备移动过程中可以实时的展示对应的资源信息。即AR设备可以每移动10米,从服务器获取一次与当前位姿数据匹配的候选资源信息。其中,第一距离和第二距离可以根据实际需要进行设置。
示例性的,AR设备可以在按照导航路线移动的过程中,还可以在基于场景图像、和三维场景地图,确定AR设备的实时位姿数据之后,基于该AR设备的实时位姿数据,获取该实时位姿数据周围10米之内的候选资源信息,将获取的候选资源信息存储在AR设备中。
步骤三中,可以基于导航路线、资源信息、以及资源信息的展示位置,确定AR导航数据。示例性的,该AR导航数据中包括导航路线、和在资源信息对应的展示位置处设置的资源信息,即AR导航数据为在对应的展示位置处展示有资源信息的AR导航路线,以便AR设备可以展示该导航路线、和展示在展示位置处设置的资源信息,使得AR设备对应的用户可以在导航过程中查看发布的资源信息。
针对S104:
在生成AR导航数据之后,若执行主体为服务器,则可以将该AR导航数据发送给AR设备,AR设备展示包含AR导航数据的AR导航图。若执行主体为AR设备,则在生成AR导航数据之后,AR设备展示包含AR导航数据的AR导航图。这里,AR导航图可以为在当前场景图像中添加有AR导航数据的展示图像。
参见图2a所示的一种AR数据展示方法中,AR设备的界面示意图,该AR设备的界面中展示有AR导航图,该图2a中包括虚拟导航员21、虚拟导航箭头22、目标场所23、以及设置在展示位置处的、与目标场所23关联的资源信息。
一种可选实施方式中,在通过AR设备展示包含所述AR导航数据的AR导航图之后,还包括:
响应作用在所述资源信息上的第一触发操作,通过AR设备展示到达所述资源信息对应的目标场所的导航路线;或者,
响应作用在所述资源信息上的第一触发操作,在所述AR导航图中展示所述目标场所的位置标记。
示例性的,作用在资源信息上的第一触发操作可以为点击资源信息的操作。在接收到作用在资源信息上的第一触发操作之后,响应该第一触发操作,可以通过基于AR设备的当前位置和资源信息对应的目标场所的位置,生成到达目标场所的导航路线,并在AR设备上展示到达资源信息对应的目标场所的导航路线。
或者,响应第一触发操作,在AR导航图中确定目标场所的位置,并在AR导航图中添加目标场所的位置标记,以便AR设备在展示AR导航图时可以展示目标场所的位置标记。其中,位置标记可以为设置的任一形状的图形标记,比如,位置标记可以为五角星的图形标记、心形的图形标记等。参见图2b所示的一种AR数据展示方法中,AR设备的界面示意图,响应作用在资源信息上的第一触发操作,在AR导航图中展示目标场所23的位置标记24。
在上述实施方式中,响应作用在资源信息上的第一触发操作,可以展示到达资源信息对应的目标场所的导航路线,以便用户基于指示的到达目标场所的导航路线,到达目标场所;或者,还可以响应作用在资源信息上的第一触发操作,在AR导航图中展示目标场所的位置标记,进而可以基于展示的目标场所的位置标记,对目标场所的位置有一个清楚的、直观的认知,便于判断是否前往目标场所。
作为一可选实施方式,在通过AR设备展示包含所述AR导航数据的AR导航图之后,还包括:
B1,响应作用在所述资源信息上的第二触发操作,通过所述AR设备展示目标应用链接。
B2,在所述目标应用链接被触发之后,通过所述AR设备展示所述目标场所的目标活动页面,其中,所述目标活动页面中展示有参与目标活动能够获取的目标资源对应的所述资源信息。
上述实施方式下,还可以响应作用在资源信息上的第二触发操作,在AR设备上展示目标应用链接,进一步的,在目标应用链接被触发之后,可以通过AR设备展示目标场所的目标活动页面,该目标活动页面中展示有参与目标活动能够获取的目标资源对应的资源信息,如此,可以更方便用户定位到目标活动页面。
示例性的,作用在资源信息上的第二触发操作可以为双击资源信息、点击资源信息上设置的功能按钮等。响应作用在资源信息上的第二触发操作,可以在AR设备上展示目标应用链接,该目标应用链接可以为该目标场所对应的应用程序的链接、或者该目标场所对应的小程序的链接等。
示例性的,AR设备对应的用户可以点击该目标应用链接,触发该目标应用链接,在目标应用链接被触发之后,通过AR设备展示目标场所的目标活动页面,该目标活动页面中展示有参与目标活动能够获取的目标资源对应的资源信息。比如,目标活动页面中展示有优惠劵,以便AR设备对应的用户可以从目标活动页面中获取该优惠劵。
参见图2c所示的一种AR数据展示方法中,AR设备的界面示意图,响应作用在资源信息上的第二触发操作,在AR设备上展示目标应用链接,并在目标应用链接被触发之后,通过AR设备展示目标场所的目标活动页面,目标活动页面的展示如图2d所示。
示例性的,在AR设备按照导航路线的指示移动时,可以实时获取AR设备的位姿数据,在检测到与该位姿数据对应的指示牌信息时,可以获取该指示牌信息、和指示牌对应的展示位置,在AR设备采集的场景图像中展示该指示牌,
参见图2e所示的一种AR数据展示方法中,AR设备的界面示意图,该图中包括虚拟指示牌25,该虚拟指示牌上显示有指示牌信息,该指示牌信息包括方向指示标识,以及每个方向上包括的场所信息,比如,第一方向上包括有场所A、场所B、以及洗手间标识;与第一方向相对的第二方向上包括有场所P、场所Q;第三方向上包括有场所D、场所E、场所F;与第三方向相对的第四方向上包括有场所N、场所M、和楼梯间标识。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于相同的构思,本公开实施例还提供了一种AR数据展示装置,参见图3所示,为本公开实施例提供的一种AR数据展示装置的架构示意图,包括第一获取模块301、第二获取模块302、确定模块303、第一展示模块304、第二展示模块305、第三展示模块306,具体的:
第一获取模块301,用于获取增强现实AR设备的起始位姿数据;
第二获取模块302,用于基于所述AR设备的起始位姿数据以及所述AR设备的目的地信息,获取导航路线;
确定模块303,用于基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据;所述AR导航数据中包括与所述AR设备的实时位姿数据关联的目标场所发布的资源信息;
第一展示模块304,用于通过AR设备展示包含所述AR导航数据的AR导航图。
一种可能的实施方式中,所述确定模块303,在基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据时,用于:
基于所述AR设备的实时位姿数据,确定匹配该实时位姿数据的目标场所;
获取所述目标场所发布的资源信息,以及所述资源信息的展示位置;
基于所述导航路线、所述资源信息、以及所述资源信息的展示位置,确定AR导航数据。
一种可能的实施方式中,所述确定模块303,用于根据下述步骤确定导航中所述AR设备的所述实时位姿数据:
基于导航中实时获取的场景图像、和构建的三维场景地图,确定导航中所述AR设备的所述实时位姿数据;和/或,
基于所述AR设备上设置的定位传感器,确定导航中所述AR设备的所述实时位姿数据。
一种可能的实施方式中,所述确定模块303,在获取所述目标场所发布的资源信息时,用于:
获取与所述目标场所相关的当前活动信息;
从所述当前活动信息中,提取所述目标场所在当前活动中发布的所述资源信息。
一种可能的实施方式中,所述确定模块303,在基于所述AR设备的实时位姿数据,确定匹配该实时位姿数据的目标场所时,用于:
根据所述AR设备的所述实时位姿数据,确定与所述AR设备距离设定范围内的所述目标场所。
一种可能的实施方式中,所述目标场所包括目标实体场所和/或目标虚拟场所。
一种可能的实施方式中,在通过AR设备展示包含所述AR导航数据的AR导航图之后,还包括:第二展示模块305,用于:
响应作用在所述资源信息上的第一触发操作,通过AR设备展示到达所述资源信息对应的目标场所的导航路线;或者,
响应作用在所述资源信息上的第一触发操作,在所述AR导航图中展示所述目标场所的位置标记。
一种可能的实施方式中,在通过AR设备展示包含所述AR导航数据的AR导航图之后,还包括:第三展示模块306,用于:
响应作用在所述资源信息上的第二触发操作,通过所述AR设备展示目标应用链接;
在所述目标应用链接被触发之后,通过所述AR设备展示所述目标场所的目标活动页面,其中,所述目标活动页面中展示有参与目标活动能够获取的目标资源对应的所述资源信息。
在一些实施例中,本公开实施例提供的装置具有的功能或包含的模板可以用于执行上文方法实施例描述的方法,其具体实现可以参照上文方法实施例的描述,为了简洁,这里不再赘述。
基于同一技术构思,本公开实施例还提供了一种电子设备。参照图4所示,为本公开实施例提供的电子设备的结构示意图,包括处理器401、存储器402、和总线403。其中,存储器402用于存储执行指令,包括内存4021和外部存储器4022;这里的内存4021也称内存储器,用于暂时存放处理器401中的运算数据,以及与硬盘等外部存储器4022交换的数据,处理器401通过内存4021与外部存储器4022进行数据交换,当电子设备400运行时,处理器401与存储器402之间通过总线403通信,使得处理器401在执行以下指令:
获取增强现实AR设备的起始位姿数据;
基于所述AR设备的起始位姿数据以及所述AR设备的目的地信息,获取导航路线;
基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据;所述AR导航数据中包括与所述AR设备的实时位姿数据关联的目标场所发布的资源信息;
通过AR设备展示包含所述AR导航数据的AR导航图。
此外,本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的AR数据展示方法的步骤。
本公开实施例所提供的AR数据展示方法的计算机程序产品,包括存储了程序代码的计算机可读存储介质,所述程序代码包括的指令可用于执行上述方法实施例中所述的AR数据展示方法的步骤,具体可参见上述方法实施例,在此不再赘述。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
本公开涉及增强现实领域,通过获取现实环境中的目标对象的图像信息,进而借助各类视觉相关算法实现对目标对象的相关特征、状态及属性进行检测或识别处理,从而得到与具体应用匹配的虚拟与现实相结合的AR效果。示例性的,目标对象可涉及与人体相关的脸部、肢体、手势、动作等,或者与物体相关的标识物、标志物,或者与场馆或场所相关的沙盘、展示区域或展示物品等。视觉相关算法可涉及视觉定位、SLAM、三维重建、图像注册、背景分割、对象的关键点提取及跟踪、对象的位姿或深度检测等。具体应用不仅可以涉及跟真实场景或物品相关的导览、导航、讲解、重建、虚拟效果叠加展示等交互场景,还可以涉及与人相关的特效处理,比如妆容美化、肢体美化、特效展示、虚拟模型展示等交互场景。
可通过卷积神经网络,实现对目标对象的相关特征、状态及属性进行检测或识别处理。上述卷积神经网络是基于深度学习框架进行模型训练而得到的网络模型。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上仅为本公开的具体实施方式,但本公开的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应以权利要求的保护范围为准。

Claims (11)

1.一种AR数据展示方法,其特征在于,包括:
获取增强现实AR设备的起始位姿数据;
基于所述AR设备的起始位姿数据以及所述AR设备的目的地信息,获取导航路线;
基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据;所述AR导航数据中包括与所述AR设备的实时位姿数据关联的目标场所发布的资源信息;
通过AR设备展示包含所述AR导航数据的AR导航图。
2.根据权利要求1所述的方法,其特征在于,基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据,包括:
基于所述AR设备的实时位姿数据,确定匹配该实时位姿数据的目标场所;
获取所述目标场所发布的资源信息,以及所述资源信息的展示位置;
基于所述导航路线、所述资源信息、以及所述资源信息的展示位置,确定AR导航数据。
3.根据权利要求1或2所述的方法,其特征在于,根据下述步骤确定导航中所述AR设备的所述实时位姿数据:
基于导航中实时获取的场景图像、和构建的三维场景地图,确定导航中所述AR设备的所述实时位姿数据;和/或,
基于所述AR设备上设置的定位传感器,确定导航中所述AR设备的所述实时位姿数据。
4.根据权利要求2所述的方法,其特征在于,获取所述目标场所发布的资源信息,包括:
获取与所述目标场所相关的当前活动信息;
从所述当前活动信息中,提取所述目标场所在当前活动中发布的所述资源信息。
5.根据权利要求2所述的方法,其特征在于,基于所述AR设备的实时位姿数据,确定匹配该实时位姿数据的目标场所,包括:
根据所述AR设备的所述实时位姿数据,确定与所述AR设备距离设定范围内的所述目标场所。
6.根据权利要求1~5任一所述的方法,其特征在于,所述目标场所包括目标实体场所和/或目标虚拟场所。
7.根据权利要求1~6任一所述的方法,其特征在于,在通过AR设备展示包含所述AR导航数据的AR导航图之后,还包括:
响应作用在所述资源信息上的第一触发操作,通过AR设备展示到达所述资源信息对应的目标场所的导航路线;或者,
响应作用在所述资源信息上的第一触发操作,在所述AR导航图中展示所述目标场所的位置标记。
8.根据权利要求1~6任一所述的方法,其特征在于,在通过AR设备展示包含所述AR导航数据的AR导航图之后,还包括:
响应作用在所述资源信息上的第二触发操作,通过所述AR设备展示目标应用链接;
在所述目标应用链接被触发之后,通过所述AR设备展示所述目标场所的目标活动页面,其中,所述目标活动页面中展示有参与目标活动能够获取的目标资源对应的所述资源信息。
9.一种AR数据展示装置,其特征在于,包括:
第一获取模块,用于获取增强现实AR设备的起始位姿数据;
第二获取模块,用于基于所述AR设备的起始位姿数据以及所述AR设备的目的地信息,获取导航路线;
确定模块,用于基于所述导航路线,以及导航中对所述AR设备定位后得到的实时位姿数据,确定AR导航数据;所述AR导航数据中包括与所述AR设备的实时位姿数据关联的目标场所发布的资源信息;
第一展示模块,用于通过AR设备展示包含所述AR导航数据的AR导航图。
10.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至8任一所述的AR数据展示方法的步骤。
11.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至8任一所述的AR数据展示方法的步骤。
CN202111014893.1A 2021-08-31 2021-08-31 Ar数据展示方法、装置、电子设备及存储介质 Pending CN113776553A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111014893.1A CN113776553A (zh) 2021-08-31 2021-08-31 Ar数据展示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111014893.1A CN113776553A (zh) 2021-08-31 2021-08-31 Ar数据展示方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN113776553A true CN113776553A (zh) 2021-12-10

Family

ID=78840298

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111014893.1A Pending CN113776553A (zh) 2021-08-31 2021-08-31 Ar数据展示方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN113776553A (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625993A (zh) * 2009-07-30 2012-08-01 Sk普兰尼特有限公司 用于提供增强现实的方法、服务器和便携终端
CN105229417A (zh) * 2013-03-14 2016-01-06 三星电子株式会社 具有动态更新机制的导航系统及其操作的方法
CN106289302A (zh) * 2016-08-09 2017-01-04 浙江吉利控股集团有限公司 一种导航路线规划方法及其导航装置
CN109059934A (zh) * 2018-09-28 2018-12-21 Oppo广东移动通信有限公司 路径规划方法、装置、终端及存储介质
CN110019600A (zh) * 2017-10-13 2019-07-16 腾讯科技(深圳)有限公司 一种地图处理方法、装置及存储介质
CN111595349A (zh) * 2020-06-28 2020-08-28 浙江商汤科技开发有限公司 导航方法及装置、电子设备和存储介质
CN112729327A (zh) * 2020-12-24 2021-04-30 浙江商汤科技开发有限公司 一种导航方法、装置、计算机设备及存储介质
CN113178006A (zh) * 2021-04-25 2021-07-27 深圳市慧鲤科技有限公司 导航地图生成方法、装置、计算机设备及存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102625993A (zh) * 2009-07-30 2012-08-01 Sk普兰尼特有限公司 用于提供增强现实的方法、服务器和便携终端
CN105229417A (zh) * 2013-03-14 2016-01-06 三星电子株式会社 具有动态更新机制的导航系统及其操作的方法
CN106289302A (zh) * 2016-08-09 2017-01-04 浙江吉利控股集团有限公司 一种导航路线规划方法及其导航装置
CN110019600A (zh) * 2017-10-13 2019-07-16 腾讯科技(深圳)有限公司 一种地图处理方法、装置及存储介质
CN109059934A (zh) * 2018-09-28 2018-12-21 Oppo广东移动通信有限公司 路径规划方法、装置、终端及存储介质
CN111595349A (zh) * 2020-06-28 2020-08-28 浙江商汤科技开发有限公司 导航方法及装置、电子设备和存储介质
CN112729327A (zh) * 2020-12-24 2021-04-30 浙江商汤科技开发有限公司 一种导航方法、装置、计算机设备及存储介质
CN113178006A (zh) * 2021-04-25 2021-07-27 深圳市慧鲤科技有限公司 导航地图生成方法、装置、计算机设备及存储介质

Similar Documents

Publication Publication Date Title
US10127734B2 (en) Augmented reality personalization
US10055894B2 (en) Markerless superimposition of content in augmented reality systems
CN111638796A (zh) 虚拟对象的展示方法、装置、计算机设备及存储介质
CN110019600B (zh) 一种地图处理方法、装置及存储介质
CN112179331B (zh) Ar导航的方法、装置、电子设备及存储介质
CN110794955B (zh) 定位跟踪方法、装置、终端设备及计算机可读取存储介质
CN103838370A (zh) 图像处理装置、图像处理方法、程序和终端装置
EP2988473B1 (en) Argument reality content screening method, apparatus, and system
CN113359986B (zh) 增强现实数据展示方法、装置、电子设备及存储介质
CN107643084A (zh) 提供数据对象信息、实景导航方法及装置
CN113282687A (zh) 数据展示方法、装置、计算机设备及存储介质
CN111625100A (zh) 图画内容的呈现方法、装置、计算机设备及存储介质
CN113345108A (zh) 增强现实数据展示方法、装置、电子设备及存储介质
EP3007136B1 (en) Apparatus and method for generating an augmented reality representation of an acquired image
CN113359983A (zh) 增强现实数据呈现方法、装置、电子设备及存储介质
CN111665945A (zh) 一种游览信息展示方法及装置
CN108235764B (zh) 信息处理方法、装置、云处理设备及计算机程序产品
CN113776553A (zh) Ar数据展示方法、装置、电子设备及存储介质
WO2021079820A1 (ja) 需要度算出装置、イベント支援システム、需要度算出方法、及びイベント支援システムの生産方法
CN111953849A (zh) 展示留言板的方法、装置、电子设备及存储介质
CN112817454A (zh) 一种信息展示方法、装置、相关设备及存储介质
CN111625103A (zh) 雕塑展示方法、装置、电子设备及存储介质
JP2017078915A (ja) 情報特定装置、方法、及びプログラム
CN111986332A (zh) 展示留言板的方法、装置、电子设备及存储介质
WO2021079821A1 (ja) 広告情報生成装置、イベント支援システム、広告情報生成方法、及びイベント支援システムの生産方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination