CN112287928A - 一种提示方法、装置、电子设备及存储介质 - Google Patents
一种提示方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN112287928A CN112287928A CN202011124853.8A CN202011124853A CN112287928A CN 112287928 A CN112287928 A CN 112287928A CN 202011124853 A CN202011124853 A CN 202011124853A CN 112287928 A CN112287928 A CN 112287928A
- Authority
- CN
- China
- Prior art keywords
- user
- condition
- early warning
- prompt
- prompting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 72
- 230000003190 augmentative effect Effects 0.000 claims abstract description 4
- 230000033001 locomotion Effects 0.000 claims description 40
- 238000004590 computer program Methods 0.000 claims description 11
- 230000003287 optical effect Effects 0.000 description 12
- 230000008569 process Effects 0.000 description 11
- 238000001514 detection method Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 10
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 5
- 238000013459 approach Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000011960 computer-aided design Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012876 topography Methods 0.000 description 2
- 206010013647 Drowning Diseases 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- GOLXNESZZPUPJE-UHFFFAOYSA-N spiromesifen Chemical compound CC1=CC(C)=CC(C)=C1C(C(O1)=O)=C(OC(=O)CC(C)(C)C)C11CCCC1 GOLXNESZZPUPJE-UHFFFAOYSA-N 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
- G08B21/08—Alarms for ensuring the safety of persons responsive to the presence of persons in a body of water, e.g. a swimming pool; responsive to an abnormal condition of a body of water
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
- G08B21/24—Reminder alarms, e.g. anti-loss alarms
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
- H04W4/021—Services related to particular areas, e.g. point of interest [POI] services, venue services or geofences
Abstract
本公开提供了一种提示方法、装置、电子设备及存储介质,其中,该提示方法包括:基于增强现实AR设备拍摄的目标场所的现实场景图像,确定所述AR设备的当前位姿数据;基于所述AR设备的当前位姿数据,以及所述目标场所对应的至少一个关注区域信息,确定所述AR设备与至少一个关注区域之间的相对位姿信息;在所述AR设备与任一关注区域之间的所述相对位姿信息满足预设提示条件的情况下,对用户进行预警提示。
Description
技术领域
本公开涉及通信领域,具体而言,涉及一种提示方法、装置、电子设备及存储介质。
背景技术
随着经济的发展,越来越多的游乐场所出现在人们的生活中,比如景区、游乐园、动物园和一些大型公园,一般情况下,游乐场所内会提供一些指示牌,对游客的位置以及游乐场所内的各个景点进行展示。
通常情况下,为了保障游客安全,游乐场所会存在一些指示牌,以指示危险区域或者游乐场所的边界区域,但是指示牌的数量有限,提示效果较差。
发明内容
本公开实施例至少提供一种提示方案。
第一方面,本公开实施例提供了一种提示方法,包括:
基于增强现实AR设备拍摄的目标场所的现实场景图像,确定所述AR设备的当前位姿数据;
基于所述AR设备的当前位姿数据,以及所述目标场所对应的至少一个关注区域信息,确定所述AR设备与至少一个关注区域之间的相对位姿信息;
在所述AR设备与任一关注区域之间的所述相对位姿信息满足预设提示条件的情况下,对用户进行预警提示。
本公开实施例中,在基于AR设备拍摄的现实场景图像确定出AR设备的当前位姿数据后,可以提前确定AR设备与目标场所内的关注区域之间的相对位姿信息,在相对位姿信息满足预设提示条件的情况下,即可以对用户进行预警提示,比如根据相对位姿信息确定用户靠近危险区域时,可以对用户进行预警提示,从而提高用户在目标场所下行走时的安全性。
在一种可能的实施方式中,根据以下步骤确定所述目标场所对应的至少一个关注区域信息:
根据在预先构建的所述目标场所的三维场景地图中标记的至少一个关注区域的边界信息,确定至少一个关注区域对应的地理位置范围。
在一种可能的实施方式中,所述关注区域包括危险区域;
所述基于所述AR设备的当前位姿数据,以及所述目标场所对应的至少一个关注区域信息,确定所述AR设备与至少一个关注区域之间的相对位姿信息,包括:
根据所述AR设备的当前位姿数据,以及所述至少一个危险区域信息,确定所述AR设备朝向的至少一个危险区域,以及与所述至少一个危险区域的第一相对距离;
所述在所述AR设备与任一关注区域之间的所述相对位姿信息满足预设提示条件的情况下,对用户进行预警提示,包括:
在确定所述第一相对距离满足预设提示条件的情况下,对所述用户进行预警提示。
本公开实施例中,在关注区域包括危险区域的情况下,提出通过AR设备的朝向来确定用户大概率靠近的危险区域,进一步在确定AR设备与该危险区域之间的相对距离满足预设提示条件的情况下,对用户进行预警提示,以保证用户在目标场所内的出行安全。
在一种可能的实施方式中,在对所述用户进行预警提示之前,所述提示方法还包括:
获取所述AR设备的运动数据;
所述在确定所述第一相对距离满足预设提示条件的情况下,对所述用户进行预警提示,包括:
基于所述AR设备的运动数据,确定所述AR设备向所述任一危险区域移动,且所述第一相对距离小于第一预设距离阈值的情况下,对所述用户进行预警提示。
本公开实施例中,可以结合AR设备的运动数据确定AR设备是否朝向危险区域移动,然后结合AR设备和危险区域的相对距离,可以确定该AR设备是否存在进入危险区域的趋势,从而可以提前对用户进行预警提示,以保证用户在目标场所中的安全。
在一种可能的实施方式中,所述关注区域包括所述目标场所;
所述基于所述AR设备的当前位姿数据,以及所述目标场所对应的至少一个关注区域信息,确定所述AR设备与至少一个关注区域之间的相对位姿信息,包括:
基于所述AR设备的当前位姿数据,以及所述目标场所对应的地理位置范围,确定所述AR设备朝向的所述目标场所的目标边界,以及与所述目标边界的第二相对距离;
所述在所述AR设备与任一关注区域之间的所述相对位姿信息满足预设提示条件的情况下,对用户进行预警提示,包括:
在确定所述第二相对距离满足预设提示条件的情况下,对所述用户进行预警提示。
本公开实施例中,在关注区域包括目标场所的情况下,提出通过AR设备的朝向来确定用户大概率靠近的目标边界,进一步在确定AR设备与该目标边界之间的相对距离满足预设提示条件的情况下,可以对用户进行预警提示,避免用户误走出目标场所,以保证用户的安全。
在一种可能的实施方式中,在对所述用户进行预警提示之前,所述提示方法还包括:
获取所述AR设备的运动数据;
所述在确定所述第二相对距离满足预设提示条件的情况下,对所述用户进行预警提示,包括:
基于所述AR设备的运动数据,确定所述AR设备朝向所述目标边界移动,且所述第二相对距离小于第二预设距离阈值的情况下,对所述用户进行预警提示。
本公开实施例中,可以结合AR设备的运动数据确定AR设备是否朝向危险区域移动,然后结合AR设备和危险区域的相对距离,可以确定该AR设备是否存在进入危险区域的趋势,从而可以提前对用户进行预警提示,以保证用户在目标场所中的安全。
在一种可能的实施方式中,所述在所述AR设备与任一关注区域之间的所述相对位姿信息满足预设提示条件的情况下,对用户进行预警提示,包括:
根据所述AR设备与所述任一关注区域之间的相对位姿信息,以及所述任一关注区域的区域属性信息,生成提示信息;
对所述用户播放所述提示信息。
本公开实施例中,提出结合AR设备与关注区域之间的相对位姿信息,共同生成针对该关注区域的全面信息,在对用户提示时,提示较为全面的信息,以提高用户体验度。
在一种可能的实施方式中,所述对用户进行预警提示,包括:
以语音形式、文字形式、动画形式、警示符、和闪光形式中的至少一种对所述用户进行预警提示。
第二方面,本公开实施例提供了一种提示装置,包括:
第一确定模块,用于基于增强现实AR设备拍摄的目标场所的现实场景图像,确定所述AR设备的当前位姿数据;
第二确定模块,用于基于所述AR设备的当前位姿数据,以及所述目标场所对应的至少一个关注区域信息,确定所述AR设备与至少一个关注区域之间的相对位姿信息;
预警提示模块,用于在所述AR设备与任一关注区域之间的所述相对位姿信息满足预设提示条件的情况下,对用户进行预警提示。
第三方面,本公开实施例提供了一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如第一方面所述的提示方法的步骤。
第四方面,本公开实施例提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如第一方面所述的提示方法的步骤。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种提示方法的流程图;
图2示出了本公开实施例所提供的一种提示场景示意图;
图3示出了本公开实施例所提供的另一种提示场景示意图;
图4示出了本公开实施例所提供的另一种提示方法的流程图;
图5示出了本公开实施例所提供的一种构建三维场景地图的方法流程图;
图6示出了本公开实施例所提供的一种确定AR设备的当前位姿数据的方法流程图;
图7示出了本公开实施例所提供的另一种确定AR设备的当前位姿数据的方法流程图;
图8示出了本公开实施例所提供的一种提示装置的结构示意图
图9示出了本公开实施例所提供的一种电子设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
本文中术语“和/或”,仅仅是描述一种关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
一些大型公共场所中,比如游乐场、公园等区域中一般会设置指示牌,对公共场所禁止靠近的场所,比如危险区域或者保密区域,或者公共场所的边界进行提示,通过指示牌提示的方式需要用户看到指示牌才能起到提示作用,考虑到提示牌的数量有限,且局限性较大,因此通过提示牌进行提示时无法有效对用户进行提示,以保证用户的安全性。
基于上述研究,本公开提供了一种提示方法,在基于AR设备拍摄的现实场景图像确定出AR设备的当前位姿数据后,可以提前确定AR设备与目标场所内的关注区域之间的相对位姿信息,在相对位姿信息满足预设提示条件的情况下,可以对用户进行预警提示,比如根据相对位姿信息确定用户靠近危险区域时,可以对用户进行预警提示,从而提高用户在目标场所内的安全性。
为便于对本实施例进行理解,首先对本公开实施例所公开的一种提示方法进行详细介绍,本公开实施例所提供的提示方法的执行主体一般为具有一定计算能力的计算机设备,该计算机设备例如包括:终端设备或服务器或其它处理设备,终端设备可以为用户设备(User Equipment,UE)、移动设备、用户终端、手持设备、计算设备、车载设备、AR眼镜、可穿戴设备等。在一些可能的实现方式中,该提示方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
参见图1所示,为本公开实施例提供的提示方法的流程图,该提示方法包括以下S101~S103:
S101,基于增强现实AR设备拍摄的目标场所的现实场景图像,确定AR设备的当前位姿数据。
示例性地,AR设备具体可以包括智能手机、平板电脑和AR眼镜等,AR设备可以内置图像采集部件也可以外接图像采集部件,在AR设备进入工作状态后,可以通过图像采集部件实时拍摄目标场所,得到现实场景图像。
示例性地,目标场所可以包括公园、游乐园、景区等场所等公共场所,也可以包含其它试用本方案的场所,在此不进行具体限定。
示例性地,考虑到现实场景图像是通过AR设备的图像采集部件采集的,AR设备的当前位姿数据可以通过AR设备的图像采集部件的当前位姿数据表示,具体可以包括AR设备的图像采集部件在目标场所对应的世界坐标系下的当前位置坐标和当前姿态数据,其中当前位置坐标可以通过该图像采集部件在世界坐标系中的位置坐标表示;当前姿态数据可以通过该图像采集部件的当前朝向来表示,该图像采集部件的当前朝向可以通过图像采集部件的光轴与世界坐标系中的X轴、Y轴和Z轴的当前夹角来表示。
具体地,在基于AR设备拍摄的现实场景图像来确定AR设备的当前位姿数据时,可以基于该现实场景图像和表征该目标场所的三维场景地图来进行定位,另外在定位过程中还可以结合AR设备内置的惯性测量单元(Inertial Measurement Unit,IMU)对AR设备进行定位,具体地的定位方式将在后文进行具体介绍。
S102,基于AR设备的当前位姿数据,以及目标场所对应的至少一个关注区域信息,确定AR设备与至少一个关注区域之间的相对位姿信息。
示例性地,关注区域可以包括需要用户关注的区域,比如目标场所内的危险区域、禁行区域、边界区域等需要提示用户关注的区域,关注区域信息可以包括关注区域对应的地理位置范围,可以预先存储关注区域在目标场所对应的世界坐标系中的地理位置范围。
示例性地,AR设备与至少一个关注区域之间的相对位姿信息可以包括AR设备和该至少一个关注区域之间的相对距离和相对角度,其中,相对距离可以通过AR设备的图像采集部件的光心与该至少一个关注区域的目标位置点在世界坐标系下的相对距离表示,该目标位置点可以包括该至少一个关注区域的中心位置点,也可以包括该至少一个关注区域的边界上与图像采集部件的光心之间距离最近的位置点;相对角度可以通过AR设备的图像采集部件的光轴指向该至少一个关注区域的目标位置点时的方向与该光轴的当前朝向之间的夹角表示。
S103,在AR设备与任一关注区域之间的相对位姿信息满足预设提示条件的情况下,对用户进行预警提示。
示例性地,针对目标场所内不同类型的关注区域,预设提示条件可以不同,比如针对危险类型的关注区域,在AR设备的图像采集部件朝向该关注区域,且AR设备和该关注区域之间的相对距离小于设定距离的情况下,可以确定AR设备与该关注区域之间的相对位姿信息满足预设提示条件,针对不同类型的关注区域,预设提示条件可以不同,具体详见后文介绍。
示例性地,在对用户进行预警提示时,包括:
以语音形式、文字形式、动画形式、警示符、和闪光形式中的至少一种对用户进行预警提示。
其中,文字形式、动画形式、警示符可以为叠加在真实场景中的虚拟对象,比如,在AR设备与任一关注区域之间的相对位姿信息满足预设提示条件的情况下,可以按照在AR设备拍摄的现实场景图像中叠加进行预警提示的虚拟对象的方式,对用户进行提示。
除了通过文字形式、动画形式、警示符等视觉信息对用户进行预警提示外,还可以通过语音形式和/或闪光形式对用户进行提示,便于有效提示用户注意关注区域。
示例性地,在对用户进行预警提示时,可以通过AR设备对用户进行提示,比如通过上述提到的可以作为AR设备的智能手机、平板电脑和AR眼镜对用户进行预警提示,也可以通过与AR设备连接的穿戴设备,比如智能手环对用户进行提示,或者还可以通过设置在目标场所内的提示装置对用户进行预警提示,在此不进行限定。
本公开实施例中,在基于AR设备拍摄的现实场景图像确定出AR设备的当前位姿数据后,可以提前确定AR设备与目标场所内的关注区域之间的相对位姿信息,在相对位姿信息满足预设提示条件的情况下,可以对用户进行预警提示,比如根据相对位姿信息确定用户靠近危险区域时,可以对用户进行预警提示,从而提高用户在目标场所下行走时的安全性。
下面将结合具体实施例对上述S101~S103进行详细说明。
针对上述S102中提到的关注区域信息,具体可以根据以下步骤确定目标场所对应的至少一个关注区域信息:
根据在预先构建的目标场所的三维场景地图中标记的至少一个关注区域的边界信息,确定至少一个关注区域对应的地理位置范围。
示例性地,预先构建的目标场所的三维场景地图可以基于预先采集的目标场所的大量视频图像进行离线构建得到,该三维场景地图基于目标场所对应的视频数据生成,可以构建与目标场所在相同坐标系下完全重合的三维场景地图,因此可以将该三维场景地图作为该目标场所的高精度地图使用。
示例性地,关注区域在三维场景地图中占据一定的面积,可以预先对该关注区域的边界线进行标注,获取边界线上的位置点在世界坐标系下的位置坐标,按照该方式可以得到关注区域在世界坐标系下的地理位置范围。
示例性地,边界线上的每个位置点在世界坐标系下的位置坐标可以包括该位置点在世界坐标系下沿X轴方向的坐标值,该位置点在世界坐标系下沿Y轴方向的坐标值,该位置点在世界坐标系下沿Z轴方向的坐标值,进一步地,在根据边界线上的位置点在世界坐标系下的位置坐标,确定关注区域在世界坐标系下的地理位置范围时,可以基于边界线上的位置点在世界坐标系下的沿X轴方向的坐标值,确定该关注区域沿X轴方向的坐标范围,基于边界线上的位置点在世界坐标系下的沿Y轴方向的坐标值,确定该关注区域沿Y轴方向的坐标范围,以及基于边界线上的位置点在世界坐标系下的沿Z轴方向的坐标值,确定该关注区域沿Z轴方向的坐标范围,将关注区域沿X轴方向的坐标范围、沿Y轴方向的坐标范围和沿Z轴方向的坐标范围作为关注区域对应的地理位置范围。
在一种实施方式中,关注区域包括危险区域;针对上述S102,在基于AR设备的当前位姿数据,以及目标场所对应的至少一个关注区域信息,确定AR设备与至少一个关注区域之间的相对位姿信息时,包括:
根据AR设备的当前位姿数据,以及至少一个危险区域信息,确定AR设备朝向的至少一个危险区域,以及与该至少一个危险区域的第一相对距离。
示例性地,基于上述提到的确定关注区域对应的地理位置范围的方式,预先确定每个危险区域在世界坐标系下的地理位置范围,基于AR设备的当前位姿数据,可以确定AR设备的当前朝向,然后结合每个危险区域在世界坐标系下的地理位置范围,可以筛选出AR设备朝向的至少一个危险区域。
具体地,可以将AR设备的图像采集部件的光轴沿图像采集部件朝向方向的延长线经过的设定区域作为AR设备朝向的至少一个危险区域;AR设备与该至少一个危险区域的第一相对距离可以通过该AR设备的图像采集部件的光心与该至少一个危险区域的目标位置点在世界坐标系下的距离来表示,目标位置点详见上文解释,在此不再解释。
具体地,在AR设备与任一关注区域之间的相对位姿信息满足预设提示条件的情况下,对用户进行预警提示,包括:
在确定第一相对距离满足预设提示条件的情况下,对用户进行预警提示。
第一相对距离表示AR设备与AR设备朝向的至少一个危险区域之间的相对距离,当用户佩戴的AR设备朝向该至少一个危险区域时,大概率情况下,用户会朝该至少一个危险区域移动,因此可以考虑在第一相对距离满足预设提示条件的情况下,对用户进行预警提示,提示用户对危险区域进行注意,避免继续前进导致的危险事故。
本公开实施例中,在关注区域包括危险区域的情况下,提出通过AR设备的朝向来确定用户大概率靠近的危险区域,进一步在确定AR设备与该危险区域之间的相对距离满足预设提示条件的情况下,对用户进行预警提示,以保证用户在目标场所内的出行安全。
进一步地,在对用户进行预警提示之前,本公开实施例提供的提示方法还包括:
获取AR设备的运动数据。
示例性地,在一种实施方式中,可以根据AR设备当前采集的现实场景图像和三维场景地图,确定AR设备的当前位姿数据,可以根据AR设备在历史时间段内采集的现实场景图像和三维场景地图,确定AR设备的历史位姿数据,进一步可以基于该AR设备的历史位姿数据和当前位姿数据,确定该AR设备的运动数据。
在另一种实施方式中,还可以基于惯性测量单元(Inertial Measurement Unit,IMU)相结合的方式,确定出AR设备的运动数据,比如先基于AR设备在上一时刻采集的现实场景图像和三维场景地图确定出AR设备在上一时刻对应的历史位姿数据,然后基于IMU从上一时刻至当前时刻采集的数据,确定AR设备的在当前时刻对应的当前位姿数据,进一步可以基于该AR设备的历史位姿数据和当前位姿数据,确定该AR设备的运动数据。
示例性地,运动数据具体可以包括运动方向、运动速度等,根据该运动方向可以确定AR设备是否朝向任一危险区域移动,以及朝向该任一危险区域的运动速度,运动速度可以通过AR设备在不同时刻分别对应的位姿数据以及不同时刻之间的时间间隔进行确定,在此不再进行具体阐述。
进一步地,在确定第一相对距离满足预设提示条件的情况下,对用户进行预警提示,包括:
基于AR设备的运动数据,确定AR设备向任一危险区域移动,且第一相对距离小于第一预设距离阈值的情况下,对用户进行预警提示。
根据上述方式选择出的至少一个危险区域是AR设备朝向的危险区域,若该AR设备向该朝该至少一个危险区域的方向移动,可以表示该AR设备逐渐靠近该任一危险区域,这样可以在第一相对距离小于第一预设距离阈值的情况下,对用户进行预警提示。
另外,在确定AR设备向任一危险区域移动的情况下,还可以结合AR设备的运动速度,确定AR设备向任一危险区域移动时的运动速度,然后在该运动速度大于预设速度阈值的情况下,确定第一相对距离小于第三预设距离阈值的情况下,对用户进行预警提示,这里的第三预设距离阈值可以大于第一预设距离阈值,即当AR设备向该任一危险区域的运动速度较快时,可以提前对用户进行预警提示。
如图2所示,是针对设定区域为危险区域的情况下,比如设定区域为深水区域的情况下,通过AR设备对用户进行提示的场景示意图,用户在靠近危险区域深水区域时,可以通过AR设备的显示屏展示用于对用户进行预警提示的虚拟文字信息,比如“前方存在深水区域,请您注意安全”,以提示用户前方危险,请注意安全,以便提示用户停止靠近或者绕道而行。
本公开实施例中,可以结合AR设备的运动数据确定AR设备是否朝向危险区域移动,然后结合AR设备和危险区域的相对距离,可以确定该AR设备是否存在进入危险区域的趋势,从而可以提前对用户进行预警提示,以保证用户在目标场所中的安全。
在另一种实施方式中,关注区域包括目标场所;针对上述S103,在基于AR设备的当前位姿数据,以及目标场所对应的至少一个关注区域信息,确定AR设备与至少一个关注区域之间的相对位姿信息时,可以包括:
基于AR设备的当前位姿数据,以及目标场所对应的地理位置范围,确定AR设备朝向的目标场所的目标边界,以及与目标边界的第二相对距离。
示例性地,可以将AR设备的图像采集部件的光轴在图像采集部件的朝向方向上,与目标场所边界相交的位置点向两端延伸设定长度后的得到的边界作为这里的目标边界,比如图像采集部件的朝向方向为世界坐标系X轴的正方向,可以将图像采集部件的光轴朝X轴正方向上延伸时与目标场所边界相交的位置点A所在的设定长度的边界作为目标边界。
示例性地,在目标边界确定后,可以将AR设备的图像采集部件的光心,和图像采集部件的光轴与目标边界相交的位置点之间的距离,作为这里的第二相对距离。
进一步地,在AR设备与任一关注区域之间的相对位姿信息满足预设提示条件的情况下,对用户进行预警提示时,可以包括:
在确定第二相对距离满足预设提示条件的情况下,对用户进行预警提示。
第二相对距离表示AR设备与AR设备朝向的目标边界之间的相对距离,当用户佩戴AR设备,且AR设备朝向该目标边界时,大概率情况下,用户会朝该目标边界移动,因此可以考虑在第二相对距离满足预设提示条件的情况下,对用户进行预警提示,提示用户前方即将走出目标场所。
本公开实施例中,在关注区域包括目标场所的情况下,提出通过AR设备的朝向来确定用户大概率靠近的目标边界,进一步在确定AR设备与该目标边界之间的相对距离满足预设提示条件的情况下,可以对用户进行预警提示,避免用户无意走出目标场所,以保证用户的安全。
进一步地,在对用户进行预警提示之前,提示方法还包括:
获取AR设备的运动数据。
这里获取AR设备的运动数据的方式详见上文,在此不再赘述,根据AR设备的运动方向可以确定AR设备是否朝向目标边界移动,以及朝向该目标边界的运动速度,运动速度可以通过AR设备在不同时刻分别对应的位姿数据以及不同时刻之间的时间间隔进行确定,不再进行具体阐述。
在确定第二相对距离满足预设提示条件的情况下,对用户进行预警提示,包括:
基于AR设备的运动数据,确定AR设备朝向目标边界移动,且第二相对距离小于第二预设距离阈值的情况下,对用户进行预警提示。
根据上述方式选择出的目标边界是AR设备朝向的边界,若该AR设备向该朝该目标边界的方向移动,可以表示该AR设备逐渐靠近该目标边界,有可能存在意外走出目标场所的情况,这样可以在第二相对距离小于第二预设距离阈值的情况下,对用户进行预警提示。
另外,在确定AR设备向目标边界移动的情况下,还可以结合AR设备的运动速度,确定AR设备向目标边界移动时的运动速度,然后在该运动速度大于预设速度阈值的情况下,确定第二相对距离小于第四预设距离阈值的情况下,对用户进行预警提示,这里的第四预设距离阈值可以大于第二预设距离阈值,即当AR设备向该目标边界的运动速度较快时,可以提前对用户进行预警提示。
如图3所示,是针对关注区域为目标场所为例的情况下,通过AR设备对用户进行提示的场景示意图,用户在靠近目标边界时,可以通过AR设备的展示用于对用户进行预警提示的虚拟文字信息,比如提示“前方已达到园区边界,请您确认是否离开园区”,以提示用户注意前方即将离开目标场所。
本公开实施例中,可以结合AR设备的运动数据确定AR设备是否朝向危险区域移动,然后结合AR设备和危险区域的相对距离,可以确定该AR设备是否存在进入危险区域的趋势,从而可以提前对用户进行预警提示,以保证用户在目标场所中的安全。
在另一种实施方式中,针对上述S103,在AR设备与任一关注区域之间的相对位姿信息满足预设提示条件的情况下,对用户进行预警提示时,如图4所示,可以包括以下S1031~S1032:
S1031,根据AR设备与任一关注区域之间的相对位姿信息,以及任一关注区域的区域属性信息,生成提示信息;
S1032,对用户播放提示信息。
示例性地,关注区域的区域属性信息可以包括用于指示该关注区域名称、属性特征的信息,比如针对景区内的水域,该水域对应的属性特征信息包括水域名称、水域尺寸、深度等特征信息;再比如针对景区内的一著名景点,该著名景点的区域属性信息可以包括针对该著名景点的简介,比如名称、年代以及历史故事等。
这里在生成提示信息时,可以结合AR设备与任一关注区域之间的相对位姿信息和该任一关注区域的区域属性信息一同生成用于对用户进行提示的提示信息,比如提示前方500米有水深2米的水池,小心落水;比如提示前方600米为著名景点西湖,其年代信息,发生的历史传说故事等。
在生成提示信息后,该提示信息可以为虚拟动画形式,并配有语音提示,可以通过AR设备或者目标场所内的提示装置对该提示信息进行播放,以达到对用户进行预警提示的目的。
本公开实施例中,提出结合AR设备与关注区域之间的相对位姿信息,共同生成针对该关注区域的全面信息,在对用户提示时,提示较为全面的信息,以提高用户体验度。
针对上述多次提到的预先构建的目标场所的三维场景地图,如图5所示,可以按照以下方式预先构建目标场所的三维场景地图,包括S501~S503:
S501,获取目标场所对应的多张现实场景样本图像。
示例性地,可以预先通过无人机对该目标场所进行多角度航拍,得到该目标场所对应的大量现实场景样本图像。
S502,基于多张现实场景样本图像,构建目标场所对应的初始三维场景模型。
针对S502,在基于多张现实场景样本图像,生成目标场所对应的初始三维场景模型时,可以包括:
(1)从获取的每张现实场景样本图像中提取多个特征点;
(2)基于提取的多个特征点,以及预存的与目标场所匹配的三维样本图,生成初始三维场景模型;其中,三维样本图为预存储的表征目标场所形貌特征的三维图。
具体地,针对每张现实场景样本图像提取的特征点可以为能够表征该张现实场景样本图像关键信息的点,比如针对包含建筑物的现实场景样本图像,这里的特征点可以表示该建筑物轮廓信息的特征点。
示例性地,这里预存的与目标场所的三维样本图可以包括提前设置好的能够表征该目标场所形貌特征、且带有尺寸标注的三维图,比如可以是表征该目标场所形貌特征的计算机辅助设计(Computer Aided Design,CAD)三维图。
针对该目标场所,当提取的特征点足够多时,特征点构成的特征点云,可以构成表征该目标场所的三维模型,这里的特征点云中的特征点是没有单位的,特征点云构成的三维模型也是没有单位的,然后将该特征点云与带有尺度标注的且能够表征该目标场所形貌特征的三维图对齐后,即得到该目标场所对应的初始三维场景模型。
S503,将构建的初始三维场景模型上的标定特征点与目标场所对应的标定特征点进行对齐,生成三维场景地图。
生成的初始三维模型可能会存在失真现象,然后可以通过目标场所上的标定特征点和初始三维场景模型上的标定特征点来完成对齐过程,从而得到准确度较高的三维场景地图。
针对S503,在将构建的初始三维场景模型上的标定特征点与目标场所对应的标定特征点进行对齐,生成三维场景地图时,包括:
(1)在目标场所对应的初始三维场景模型中提取用于表征目标场所多个空间位置点的标定特征点;
(2)确定标定特征点在目标场所对应的真实二维地图中的真实坐标数据,并基于每个标定特征点对应的真实坐标数据,调整初始三维场景模型中各个特征点的坐标数据。
示例性地,可以选择一些表征建筑物边缘、角落的空间位置点的特征点作为这里的标定特征点,然后基于标定特征点对应的真实坐标数据以及该标定特征点在初始三维场景模型中的坐标数据,确定坐标数据调整量,然后基于该坐标数据调整量对初始三维模型中各个特征点的坐标数据进行修正,即可以得到准确度较高的三维场景地图。
构建完成目标场所的三维场景地图后,可以基于AR设备拍摄的现实场景图像和该三维场景地图对AR设备进行定位,在基于现实场景图像,以及预先构建的目标场所的三维场景地图,确定AR设备的当前位姿数据时,如图6所示,可以包括以下S601~S602:
S601,提取现实场景图像包含的特征点,以及提取预先构建三维场景地图时的每张现实场景样本图像的特征点;
S602,基于现实场景图像对应的特征点以及预先构建三维场景地图时的每张现实场景样本图像对应的特征点,确定与现实场景图像相似度最高的目标现实场景样本图像;
S603,基于目标现实场景样本图像对应的拍摄位姿数据,确定AR设备的当前位姿数据。
示例性地,在获取到AR设备拍摄的现实场景图像后,可以通过该现实场景图像中特征点,以及预先构建三维场景地图时每张现实场景样本图像的特征点,找到与该现实场景图像相似度最高的目标现实场景样本图像,比如可以基于现实场景图像的特征点的特征信息与每张现实场景样本图像的特征点的特征信息,确定该现实场景图像和每张现实场景样本图像的相似度值,将相似度值最高且超过相似度阈值的现实场景样本图像作为这里的目标现实场景样本图像。
在确定出目标现实场景样本图像后,可以基于将该目标现实场景样本图像对应的拍摄位姿数据确定AR设备的当前位姿数据。
具体地,针对上述S603,在基于目标现实场景样本图像对应的拍摄位姿数据,确定AR设备的当前位姿数据时,如图7所示,可以包括以下S6031~S6032:
S6031,确定目标现实场景样本图像中的目标对象和现实场景图像中的目标对象之间的相对位姿数据;
S6032,基于相对位姿数据和目标现实场景样本图像对应的拍摄位姿数据,确定AR设备的当前位姿数据。
示例性地,与现实场景图像的相似度最高的目标现实场景样本图像中包含的目标对象与现实场景图像中包含的目标对象为相同的目标对象,比如现实场景图像中包含的目标对象为建筑物A,目标现实场景样本图像中包含的目标对象也为建筑物A,这样可以通过确定现实场景图像中的建筑物A和目标现实场景样本图像中的建筑物A之间的相对位姿数据,确定出图像采集部件在拍摄现实场景图像和拍摄目标现实场景样本图像时的相对拍摄位姿数据,进一步可以基于该相对拍摄位姿数据和目标现实场景样本图像对应的拍摄位姿数据,确定出AR设备的当前位姿数据。
示例性地,在确定目标现实场景样本图像中的目标对象和现实场景图像中的目标对象之间的相对位姿数据时,可以基于三维检测技术,分别确定目标场景图像样本图像和现实场景图像中的目标对象对应的三维检测信息,三维检测信息可以包括目标对象在世界坐标系下的中心点位置坐标、目标对象的3D检测框的长度、宽度和高度,以及该目标对象的设定正方向与世界坐标系的各个坐标轴之间的夹角,按照这样的方式可以得到目标现实场景样本图像中的目标对象对应的三维检测信息,以及现实场景图像中的目标对象对应的三维检测信息,然后基于目标现实场景样本图像中的目标对象对应的三维检测信息和现实场景图像中的目标对象对应的三维检测信息,可以确定出该相对位姿数据。
针对确定现实场景图像中的目标对象的三维检测信息的过程为例,可以先基于该现实场景图像以及预先训练的深度图神经网络,确定该现实场景图像对应的深度图像,深度图像中包含构成目标对象的各个像素点对应的深度信息,然后基于现实场景图像中构成目标对象的每个像素点的像素坐标值,以及图像采集部件对应的内部参数,可以确定出构成目标对象的每个像素点在相机坐标系下的相机坐标值,进一步,基于构成目标对象的每个像素点在相机坐标系下的相机坐标值、深度信息以及相机外部参数,可以确定出构成目标对象的每个像素点世界坐标系下的三维坐标值,然后基于该三维坐标值可以确定出目标对象对应的三维检测信息。
特殊情况下,当目标现实场景样本图像中的目标对象和现实场景图像中的目标对象的位姿数据相同时,可以直接将目标现实场景样本图像对应的拍摄位姿数据,作为这里AR设备的当前位姿数据。
另外,考虑到现实场景图像并非实时采集的,一般情况下是按照设定时间间隔采集的,另外,基于现实场景图像和三维场景地图进行定位的方式功耗较大,因此在对AR设备进行定位,确定AR设备的当前位姿数据的过程中,可以将基于现实场景图像的视觉定位和IMU定位方式结合使用。
示例性地,可以按照视觉定位周期性地确定AR设备的位姿数据,中间过程通过IMU进行定位,比如,每隔10秒通过视觉方式进行定位,则从AR设备开始工作后的初始位姿数据、第10秒、第20秒、第30秒的位姿数据是基于视觉定位得到的,针对第1秒的位姿数据可以是基于初始位姿数据以及从初始时刻到第1秒过程中AR设备的IMU采集的数据预估得到的,同样,第2秒的位姿数据可以是基于第1秒的位姿数据和从第1秒到第2秒过程中AR设备的IMU采集的数据预估得到的,随着时间的积累,基于IMU定位方式得到的位姿数据不再准确时,可以通过视觉定位方式进行修正,得到准确度较高的位姿数据。
另外,对AR设备进行定位过程还可以基于即时定位与地图构建(SimultaneousLocalization And Mapping,SLAM)的方式对AR设备进行定位,比如预先为目标场所构建世界坐标系,在AR设备进入目标场所后,预先确定该AR设备在世界坐标系下的初始位姿数据,并获取AR设备拍摄的初始现实场景图像,随着AR设备在移动过程中拍摄的现实场景图像,实时构建该目标场所的三维场景地图并对该AR设备进行定位,得到AR设备的当前位姿数据。
基于同一技术构思,本公开实施例中还提供了与提示方法对应的提示装置,由于本公开实施例中的装置解决问题的原理与本公开实施例上述提示方法相似,因此装置的实施可以参见方法的实施,重复之处不再赘述。
参照图8所示,为本公开实施例提供的一种提示装置800的示意图,该提示装置包括:
第一确定模块801,用于基于增强现实AR设备拍摄的目标场所的现实场景图像,确定AR设备的当前位姿数据;
第二确定模块802,用于基于AR设备的当前位姿数据,以及目标场所对应的至少一个关注区域信息,确定AR设备与至少一个关注区域之间的相对位姿信息;
预警提示模块803,用于在AR设备与任一关注区域之间的相对位姿信息满足预设提示条件的情况下,对用户进行预警提示。
在一种可能的实施方式中,第二确定模块802用于根据以下步骤确定目标场所对应的至少一个关注区域信息:
根据在预先构建的目标场所的三维场景地图中标记的至少一个关注区域的边界信息,确定至少一个关注区域对应的地理位置范围。
在一种可能的实施方式中,关注区域包括危险区域;第二确定模块802具体用于:
根据AR设备的当前位姿数据,以及至少一个危险区域信息,确定AR设备朝向的至少一个危险区域,以及与至少一个危险区域的第一相对距离;
预警提示模块803具体用于:
在确定第一相对距离满足预设提示条件的情况下,对用户进行预警提示。
在一种可能的实施方式中,在预警提示模块803对用户进行预警提示之前,第一确定模块801还用于:
获取AR设备的运动数据;
预警提示模块803具体用于:
基于AR设备的运动数据,确定AR设备向任一危险区域移动,且第一相对距离小于第一预设距离阈值的情况下,对用户进行预警提示。
在一种可能的实施方式中,关注区域包括目标场所;第二确定模块802具体用于:
基于AR设备的当前位姿数据,以及目标场所对应的地理位置范围,确定AR设备朝向的目标场所的目标边界,以及与目标边界的第二相对距离;
预警提示模块803具体用于:
在确定第二相对距离满足预设提示条件的情况下,对用户进行预警提示。
在一种可能的实施方式中,在预警提示模块对用户进行预警提示之前,第一确定模块801还用于:
获取AR设备的运动数据;
预警提示模块803具体用于:
基于AR设备的运动数据,确定AR设备朝向目标边界移动,且第二相对距离小于第二预设距离阈值的情况下,对用户进行预警提示。
在一种可能的实施方式中,预警提示模块803具体用于:
根据AR设备与任一关注区域之间的相对位姿信息,以及任一关注区域的区域属性信息,生成提示信息;
对用户播放提示信息。
在一种可能的实施方式中,预警提示模块803在用于对用户进行预警提示时,包括:
以语音形式、文字形式、动画形式、警示符、和闪光形式中的至少一种对用户进行预警提示。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明,这里不再详述。
对应于图1中的提示方法,本公开实施例还提供了一种电子设备900,如图9所示,为本公开实施例提供的电子设备900结构示意图,包括:
处理器91、存储器92、和总线93;存储器92用于存储执行指令,包括内存921和外部存储器922;这里的内存921也称内存储器,用于暂时存放处理器91中的运算数据,以及与硬盘等外部存储器922交换的数据,处理器91通过内存921与外部存储器922进行数据交换,当电子设备900运行时,处理器91与存储器92之间通过总线93通信,使得处理器91执行以下指令:基于增强现实AR设备拍摄的目标场所的现实场景图像,确定AR设备的当前位姿数据;基于AR设备的当前位姿数据,以及目标场所对应的至少一个关注区域信息,确定AR设备与至少一个关注区域之间的相对位姿信息;在AR设备与任一关注区域之间的相对位姿信息满足预设提示条件的情况下,对用户进行预警提示。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的提示方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例所提供的提示方法的计算机程序产品,包括存储了程序代码的计算机可读存储介质,所述程序代码包括的指令可用于执行上述方法实施例中所述的提示方法的步骤,具体可参见上述方法实施例,在此不再赘述。
本公开实施例还提供一种计算机程序,该计算机程序被处理器执行时实现前述实施例的任意一种方法。该计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software DevelopmentKit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本公开的具体实施方式,用以说明本公开的技术方案,而非对其限制,本公开的保护范围并不局限于此,尽管参照前述实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应所述以权利要求的保护范围为准。
Claims (11)
1.一种提示方法,其特征在于,包括:
基于增强现实AR设备拍摄的目标场所的现实场景图像,确定所述AR设备的当前位姿数据;
基于所述AR设备的当前位姿数据,以及所述目标场所对应的至少一个关注区域信息,确定所述AR设备与至少一个关注区域之间的相对位姿信息;
在所述AR设备与任一关注区域之间的所述相对位姿信息满足预设提示条件的情况下,对用户进行预警提示。
2.根据权利要求1所述的提示方法,其特征在于,根据以下步骤确定所述目标场所对应的至少一个关注区域信息:
根据在预先构建的所述目标场所的三维场景地图中标记的至少一个关注区域的边界信息,确定至少一个关注区域对应的地理位置范围。
3.根据权利要求1或2所述的提示方法,其特征在于,所述关注区域包括危险区域;
所述基于所述AR设备的当前位姿数据,以及所述目标场所对应的至少一个关注区域信息,确定所述AR设备与至少一个关注区域之间的相对位姿信息,包括:
根据所述AR设备的当前位姿数据,以及所述至少一个危险区域信息,确定所述AR设备朝向的至少一个危险区域,以及与所述至少一个危险区域的第一相对距离;
所述在所述AR设备与任一关注区域之间的所述相对位姿信息满足预设提示条件的情况下,对用户进行预警提示,包括:
在确定所述第一相对距离满足预设提示条件的情况下,对所述用户进行预警提示。
4.根据权利要求3所述的提示方法,其特征在于,在对所述用户进行预警提示之前,所述提示方法还包括:
获取所述AR设备的运动数据;
所述在确定所述第一相对距离满足预设提示条件的情况下,对所述用户进行预警提示,包括:
基于所述AR设备的运动数据,确定所述AR设备向所述任一危险区域移动,且所述第一相对距离小于第一预设距离阈值的情况下,对所述用户进行预警提示。
5.根据权利要求1至3任一所述的提示方法,其特征在于,所述关注区域包括所述目标场所;
所述基于所述AR设备的当前位姿数据,以及所述目标场所对应的至少一个关注区域信息,确定所述AR设备与至少一个关注区域之间的相对位姿信息,包括:
基于所述AR设备的当前位姿数据,以及所述目标场所对应的地理位置范围,确定所述AR设备朝向的所述目标场所的目标边界,以及与所述目标边界的第二相对距离;
所述在所述AR设备与任一关注区域之间的所述相对位姿信息满足预设提示条件的情况下,对用户进行预警提示,包括:
在确定所述第二相对距离满足预设提示条件的情况下,对所述用户进行预警提示。
6.根据权利要求5所述的提示方法,其特征在于,在对所述用户进行预警提示之前,所述提示方法还包括:
获取所述AR设备的运动数据;
所述在确定所述第二相对距离满足预设提示条件的情况下,对所述用户进行预警提示,包括:
基于所述AR设备的运动数据,确定所述AR设备朝向所述目标边界移动,且所述第二相对距离小于第二预设距离阈值的情况下,对所述用户进行预警提示。
7.根据权利要求1至6任一所述的提示方法,其特征在于,所述在所述AR设备与任一关注区域之间的所述相对位姿信息满足预设提示条件的情况下,对用户进行预警提示,包括:
根据所述AR设备与所述任一关注区域之间的相对位姿信息,以及所述任一关注区域的区域属性信息,生成提示信息;
对所述用户播放所述提示信息。
8.根据权利要求1至7任一所述的提示方法,其特征在于,所述对用户进行预警提示,包括:
以语音形式、文字形式、动画形式、警示符、和闪光形式中的至少一种对所述用户进行预警提示。
9.一种提示装置,其特征在于,包括:
第一确定模块,用于基于增强现实AR设备拍摄的目标场所的现实场景图像,确定所述AR设备的当前位姿数据;
第二确定模块,用于基于所述AR设备的当前位姿数据,以及所述目标场所对应的至少一个关注区域信息,确定所述AR设备与至少一个关注区域之间的相对位姿信息;
预警提示模块,用于在所述AR设备与任一关注区域之间的所述相对位姿信息满足预设提示条件的情况下,对用户进行预警提示。
10.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至8任一所述的提示方法的步骤。
11.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至8任一所述的提示方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011124853.8A CN112287928A (zh) | 2020-10-20 | 2020-10-20 | 一种提示方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011124853.8A CN112287928A (zh) | 2020-10-20 | 2020-10-20 | 一种提示方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112287928A true CN112287928A (zh) | 2021-01-29 |
Family
ID=74424100
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011124853.8A Pending CN112287928A (zh) | 2020-10-20 | 2020-10-20 | 一种提示方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112287928A (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112861725A (zh) * | 2021-02-09 | 2021-05-28 | 深圳市慧鲤科技有限公司 | 一种导航提示方法、装置、电子设备及存储介质 |
CN112954437A (zh) * | 2021-02-02 | 2021-06-11 | 深圳市慧鲤科技有限公司 | 一种视频资源处理方法、装置、计算机设备及存储介质 |
CN112950790A (zh) * | 2021-02-05 | 2021-06-11 | 深圳市慧鲤科技有限公司 | 路线导航方法、装置、电子设备及存储介质 |
CN113011369A (zh) * | 2021-03-31 | 2021-06-22 | 北京市商汤科技开发有限公司 | 一种位置区域监控方法、装置、计算机设备及存储介质 |
CN113445987A (zh) * | 2021-08-05 | 2021-09-28 | 中国铁路设计集团有限公司 | 基于移动终端下增强现实场景的铁路钻探辅助作业方法 |
CN115273391A (zh) * | 2021-04-30 | 2022-11-01 | 深圳Tcl新技术有限公司 | 一种移动对象检测方法、装置、电子设备和存储介质 |
CN115460539A (zh) * | 2022-06-30 | 2022-12-09 | 亮风台(上海)信息科技有限公司 | 一种获取电子围栏的方法、设备、介质及程序产品 |
CN116048241A (zh) * | 2022-06-14 | 2023-05-02 | 荣耀终端有限公司 | 一种提示方法、扩展现实设备及介质 |
CN116361996A (zh) * | 2023-02-10 | 2023-06-30 | 广州市第三市政工程有限公司 | 一种基于无人机的钢网架建模方法、系统和存储介质 |
CN116643648A (zh) * | 2023-04-13 | 2023-08-25 | 中国兵器装备集团自动化研究所有限公司 | 一种三维场景匹配交互方法、装置、设备及存储介质 |
CN116778673A (zh) * | 2023-08-17 | 2023-09-19 | 瞳见科技有限公司 | 水域安全监控方法、系统、终端及存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102519475A (zh) * | 2011-12-12 | 2012-06-27 | 杨志远 | 一种基于增强现实技术的智能导航方法和设备 |
US20120194554A1 (en) * | 2011-01-28 | 2012-08-02 | Akihiko Kaino | Information processing device, alarm method, and program |
KR20190080243A (ko) * | 2017-12-28 | 2019-07-08 | 엘에스산전 주식회사 | 증강 현실 제공 방법 |
JP2019133658A (ja) * | 2018-01-31 | 2019-08-08 | 株式会社リコー | 測位方法、測位装置及び読取り可能な記憶媒体 |
CN110772783A (zh) * | 2019-10-30 | 2020-02-11 | 佛山市艾温特智能科技有限公司 | 一种基于ar游戏的安全防护方法、系统和可读存储介质 |
CN111149134A (zh) * | 2017-09-27 | 2020-05-12 | 费希尔-罗斯蒙特系统公司 | 对受限访问对象的虚拟访问 |
WO2020157995A1 (ja) * | 2019-01-28 | 2020-08-06 | 株式会社メルカリ | プログラム、情報処理方法、及び情報処理端末 |
-
2020
- 2020-10-20 CN CN202011124853.8A patent/CN112287928A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120194554A1 (en) * | 2011-01-28 | 2012-08-02 | Akihiko Kaino | Information processing device, alarm method, and program |
CN102519475A (zh) * | 2011-12-12 | 2012-06-27 | 杨志远 | 一种基于增强现实技术的智能导航方法和设备 |
CN111149134A (zh) * | 2017-09-27 | 2020-05-12 | 费希尔-罗斯蒙特系统公司 | 对受限访问对象的虚拟访问 |
KR20190080243A (ko) * | 2017-12-28 | 2019-07-08 | 엘에스산전 주식회사 | 증강 현실 제공 방법 |
JP2019133658A (ja) * | 2018-01-31 | 2019-08-08 | 株式会社リコー | 測位方法、測位装置及び読取り可能な記憶媒体 |
WO2020157995A1 (ja) * | 2019-01-28 | 2020-08-06 | 株式会社メルカリ | プログラム、情報処理方法、及び情報処理端末 |
CN110772783A (zh) * | 2019-10-30 | 2020-02-11 | 佛山市艾温特智能科技有限公司 | 一种基于ar游戏的安全防护方法、系统和可读存储介质 |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022166173A1 (zh) * | 2021-02-02 | 2022-08-11 | 深圳市慧鲤科技有限公司 | 视频资源处理方法、装置、计算机设备、存储介质及程序 |
CN112954437A (zh) * | 2021-02-02 | 2021-06-11 | 深圳市慧鲤科技有限公司 | 一种视频资源处理方法、装置、计算机设备及存储介质 |
CN112950790A (zh) * | 2021-02-05 | 2021-06-11 | 深圳市慧鲤科技有限公司 | 路线导航方法、装置、电子设备及存储介质 |
CN112861725A (zh) * | 2021-02-09 | 2021-05-28 | 深圳市慧鲤科技有限公司 | 一种导航提示方法、装置、电子设备及存储介质 |
CN113011369A (zh) * | 2021-03-31 | 2021-06-22 | 北京市商汤科技开发有限公司 | 一种位置区域监控方法、装置、计算机设备及存储介质 |
CN115273391A (zh) * | 2021-04-30 | 2022-11-01 | 深圳Tcl新技术有限公司 | 一种移动对象检测方法、装置、电子设备和存储介质 |
CN113445987A (zh) * | 2021-08-05 | 2021-09-28 | 中国铁路设计集团有限公司 | 基于移动终端下增强现实场景的铁路钻探辅助作业方法 |
CN116048241A (zh) * | 2022-06-14 | 2023-05-02 | 荣耀终端有限公司 | 一种提示方法、扩展现实设备及介质 |
CN115460539A (zh) * | 2022-06-30 | 2022-12-09 | 亮风台(上海)信息科技有限公司 | 一种获取电子围栏的方法、设备、介质及程序产品 |
CN115460539B (zh) * | 2022-06-30 | 2023-12-15 | 亮风台(上海)信息科技有限公司 | 一种获取电子围栏的方法、设备、介质及程序产品 |
CN116361996A (zh) * | 2023-02-10 | 2023-06-30 | 广州市第三市政工程有限公司 | 一种基于无人机的钢网架建模方法、系统和存储介质 |
CN116643648A (zh) * | 2023-04-13 | 2023-08-25 | 中国兵器装备集团自动化研究所有限公司 | 一种三维场景匹配交互方法、装置、设备及存储介质 |
CN116643648B (zh) * | 2023-04-13 | 2023-12-19 | 中国兵器装备集团自动化研究所有限公司 | 一种三维场景匹配交互方法、装置、设备及存储介质 |
CN116778673A (zh) * | 2023-08-17 | 2023-09-19 | 瞳见科技有限公司 | 水域安全监控方法、系统、终端及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112287928A (zh) | 一种提示方法、装置、电子设备及存储介质 | |
US20170193679A1 (en) | Information processing apparatus and information processing method | |
CN110245552B (zh) | 车损图像拍摄的交互处理方法、装置、设备及客户端 | |
CN110794955B (zh) | 定位跟踪方法、装置、终端设备及计算机可读取存储介质 | |
CN110764614B (zh) | 增强现实数据呈现方法、装置、设备及存储介质 | |
CN112861725A (zh) | 一种导航提示方法、装置、电子设备及存储介质 | |
CN107562189B (zh) | 一种基于双目摄像头的空间定位方法及服务设备 | |
CN107643084B (zh) | 提供数据对象信息、实景导航方法及装置 | |
US11734898B2 (en) | Program, information processing method, and information processing terminal | |
CN110969592B (zh) | 图像融合方法、自动驾驶控制方法、装置和设备 | |
US9529803B2 (en) | Image modification | |
CN112950790A (zh) | 路线导航方法、装置、电子设备及存储介质 | |
CN112598805A (zh) | 一种提示信息展示方法、装置、设备及存储介质 | |
CN112270272A (zh) | 高精度地图制作中道路路口提取方法及系统 | |
CN112181141A (zh) | Ar定位的方法、装置、电子设备及存储介质 | |
CN112907757A (zh) | 一种导航提示方法、装置、电子设备及存储介质 | |
CN111651055A (zh) | 城市虚拟沙盘展示方法、装置、计算机设备及存储介质 | |
CN109543563B (zh) | 安全提示方法、装置、存储介质及电子设备 | |
CN113345108A (zh) | 增强现实数据展示方法、装置、电子设备及存储介质 | |
CN113282687A (zh) | 数据展示方法、装置、计算机设备及存储介质 | |
CN112906625A (zh) | 一种避障提示方法、装置、电子设备及存储介质 | |
CN110737326A (zh) | 虚拟对象的显示方法、装置、终端设备及存储介质 | |
CN112907746A (zh) | 电子地图的生成方法、装置、电子设备及存储介质 | |
CN111914739A (zh) | 智能跟随方法、装置、终端设备和可读存储介质 | |
CN113011369A (zh) | 一种位置区域监控方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |