CN108168540A - 一种智能眼镜导航方法、装置及智能眼镜 - Google Patents

一种智能眼镜导航方法、装置及智能眼镜 Download PDF

Info

Publication number
CN108168540A
CN108168540A CN201711403288.7A CN201711403288A CN108168540A CN 108168540 A CN108168540 A CN 108168540A CN 201711403288 A CN201711403288 A CN 201711403288A CN 108168540 A CN108168540 A CN 108168540A
Authority
CN
China
Prior art keywords
user
real scene
destination
intelligent glasses
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711403288.7A
Other languages
English (en)
Inventor
沈文策
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujian Cnfol Information Technology Co Ltd
Original Assignee
Fujian Cnfol Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujian Cnfol Information Technology Co Ltd filed Critical Fujian Cnfol Information Technology Co Ltd
Priority to CN201711403288.7A priority Critical patent/CN108168540A/zh
Publication of CN108168540A publication Critical patent/CN108168540A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00

Abstract

本发明实施例提供了一种智能眼镜导航方法、装置及智能眼镜,所述方法包括:获得用户的语音指令,语音指令中包括目标信息,通过语义分析算法识别出目标信息,并根据目标信息中的用户需要到达的目的地的位置或类型,确定出目的地位置;获取用户的起始位置,并规划出从起始位置到目的地位置的路径;获取用户通过智能眼镜看到的真实场景的实景图像,通过对实景图像进行图像处理,识别出实景图像中的预设图像区域,并根据预设图像区域,确定出真实场景中与预设图像区域对应的预设场景区域;通过增强现实技术,在预设场景区域中,投影出路径的方向标识。可以避免用户在查看导航路线时分散注意力,进而避免了行进过程中的安全隐患。

Description

一种智能眼镜导航方法、装置及智能眼镜
技术领域
本发明涉及移动智能设备技术领域,特别是涉及一种智能眼镜导航方法、装置及智能眼镜。
背景技术
随着城市规模的不断扩大,以及人们活动范围的不断增加,在很多时候人们所处的位置或环境都不是自己所熟悉的区域。所以,及时的辨别方向,快速确定出到目的地的路线,就显得越来越重要。
现有的技术中,通常可以利用手机作为导航工具,利用手机上的各种地图软件或导航软件可以较为方便的确定出与目的地之间的线路。在手机上输入目的地的位置后,手机可以规划处从用户所在的当前位置到目的地的路径,从而为用户进行导航服务。
但通过手机进行导航时,需要用户经常查看手机,或者仔细收听手机的语音提示。然而,在很多情况下,例如,在骑行中或者开车时,用户如果频繁的查看手机、或者分配较多的注意力来收听手机的语音提示,容易造成用户的注意力分散,进而造成在行进过程中的安全隐患。
发明内容
本发明实施例的目的在于提供一种智能眼镜导航方法、装置及智能眼镜,以避免用户在查看导航路线时分散注意力,从而避免行进过程中的安全隐患。具体技术方案如下:
本发明实施例提供了一种智能眼镜导航方法,应用于智能眼镜,包括:
获得用户的语音指令,所述语音指令中包括目标信息,所述目标信息包括所述用户需要到达的目的地的位置或类型;
通过语义分析算法识别出所述目标信息,并根据所述目标信息中的所述用户需要到达的目的地的位置或类型,确定出目的地位置;
获取用户的起始位置,并规划出从所述起始位置到所述目的地位置的路径;
获取所述用户通过所述智能眼镜看到的真实场景的实景图像,通过对所述实景图像进行图像处理,识别出所述实景图像中的预设图像区域,并根据所述预设图像区域,确定出所述真实场景中与所述预设图像区域对应的预设场景区域;
通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识,所述方向标识用于指示出从用户所在的当前位置沿所述路径到达所述目的地位置所要行进的方向或轨迹,所述当前位置位于所述用户的起始位置与所述目的地位置的路径之间。
可选的,所述通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识,包括:
获取所述用户所处于的所述当前位置,并确定出从所述当前位置到达所述目的地位置时,在当前的所述真实场景中所要行进的方向或轨迹;
根据所述方向或轨迹,通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识。
可选的,所述目标信息包括位置信息或类别信息,所述位置信息为所述用户需要到达的目的地的名称或位置,所述类别信息为所述用户需要到达的目的地所具有的属性或类别。
可选的,当所述目标信息为所述类别信息时,所述通过语义分析算法识别出所述语音指令中所含有的目标信息,并根据所述目标信息中的所述用户需要到达的目的地的位置或类型,确定出目的地位置,包括:
通过语义分析算法识别出所述语音指令中所含有的类别信息;
根据所述类别信息向用户提供与所述类别信息对应的一个或多个目的地;
接收所述用户的选择指令,根据所述选择指令确定出所述用户所选择的目的地,并将所述目的地的位置作为所述目的地位置。
可选的,在所述通过语义分析算法识别出所述语音指令中所含有的目标信息,并根据所述目标信息中的所述用户需要到达的目的地的位置或类型,确定出目的地位置之后,所述方法还包括:
向用户展示与所述目的地位置有关的预设信息,所述预设信息至少包括以下信息中的一种或多种:目的地简介、目的地距离、预计到达时间以及到达所述目的地位置的可选交通方式。
可选的,所述获取所述用户通过所述智能眼镜看到的真实场景的实景图像,通过对所述实景图像进行图像处理,识别出所述实景图像中的预设图像区域,并根据所述预设图像区域,确定出所述真实场景中与所述预设图像区域对应的预设场景区域,包括:
按预设时间周期,获取所述用户通过所述智能眼镜看到的真实场景的实景图像,并对本次预设时间周期内获取的实景图像进行图像处理,识别出所述实景图像中的预设图像区域;
通过所述预设图像区域,确定出本次预设时间周期中所述真实场景中与所述预设图像区域对应的预设场景区域;
相应的,所述通过增强现实技术,在所述用户通过所述智能眼镜看到的所述预设场景区域中,投影出所述路径的方向标识,包括:
按所述预设周期,通过增强现实技术,在所述用户通过所述智能眼镜看到的所述预设场景区域中,投影出所述路径的方向标识,同时去除上一个预设时间周期时所投影出的方向标识。
可选的,所述方法还包括:
在导航过程中,实时监测用户眼球注视所述预设场景区域的持续时间,当所述持续时间大于预设阈值时,向用户发出警告信息。
本发明实施例还提供了一种智能眼镜导航装置,应用于智能眼镜,包括:
第一获取模块,用于获得用户的语音指令,所述语音指令中包括目标信息,所述目标信息包括所述用户需要到达的目的地的位置或类型;
分析模块,用于通过语义分析算法识别出所述目标信息,并根据所述目标信息中的所述用户需要到达的目的地的位置或类型,确定出目的地位置;
第二获取模块,用于获取用户的起始位置,并规划出从所述起始位置到所述目的地位置的路径;
第三获取模块,用于获取所述用户通过所述智能眼镜看到的真实场景的实景图像,通过对所述实景图像进行图像处理,识别出所述实景图像中的预设图像区域,并根据所述预设图像区域,确定出所述真实场景中与所述预设图像区域对应的预设场景区域;
投影模块,用于通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识,所述方向标识用于指示出从用户所在的当前位置沿所述路径到达所述目的地位置所要行进的方向或轨迹,所述当前位置位于所述用户的起始位置与所述目的地位置的路径之间。
可选的,所述投影模块,具体用于:
获取所述用户所处于的所述当前位置,并确定出从所述当前位置到达所述目的地位置时,在当前的所述真实场景中所要行进的方向或轨迹;根据所述方向或轨迹,通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识。
可选的,所述装置中的所述目标信息包括位置信息或类别信息,所述位置信息为所述用户需要到达的目的地的名称或位置,所述类别信息为所述用户需要到达的目的地所具有的属性或类别。
可选的,当所述目标信息为所述类别信息时,所述分析模块302,具体用于:
通过语义分析算法识别出所述语音指令中所含有的类别信息;根据所述类别信息向用户提供与所述类别信息对应的一个或多个目的地;接收所述用户的选择指令,根据所述选择指令确定出所述用户所选择的目的地,并将所述目的地的位置作为所述目的地位置。
可选的,所述装置还包括:
展示模块,用于向用户展示与所述目的地位置有关的预设信息,所述预设信息至少包括以下信息中的一种或多种:目的地简介、目的地距离、预计到达时间以及到达所述目的地位置的可选交通方式。
可选的,所述第三获取模块,具体用于:
按预设时间周期,获取所述用户通过所述智能眼镜看到的真实场景的实景图像,并对本次预设时间周期内获取的实景图像进行图像处理,识别出所述实景图像中的预设图像区域;通过所述预设图像区域,确定出本次预设时间周期中所述真实场景中与所述预设图像区域对应的预设场景区域;
相应的,所述投影模块,具体用于:
按所述预设周期,通过增强现实技术,在所述用户通过所述智能眼镜看到的所述预设场景区域中,投影出所述路径的方向标识,同时去除上一个预设时间周期时所投影出的方向标识。
可选的,所述装置还包括:
监测模块,用于在导航过程中,实时监测用户眼球注视所述预设场景区域的持续时间,当所述持续时间大于预设阈值时,向用户发出警告信息。
本发明实施例还提供了一种智能眼镜,该智能眼镜可以应用上述任一种智能眼镜导航方法。
在本发明实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述任一所述的智能眼镜导航方法。
在本发明实施的又一方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的智能眼镜导航方法。
本发明实施例提供的一种智能眼镜导航方法、装置及智能眼镜,可以获得用户的语音指令,并根据该语音指令,确定出目的地位置,并规划出从当前的起始位置到所述目的地位置的路径。然后可以将该路径的方向标识,通过增强现实技术叠加在用户通过智能眼镜所看到的真实场景中,从而用户不需要在行进过程中查看所规划的路径,可以直接在真实场景中看到所规划的路径的方向标识,根据该方向标识,用户就可以了解到从用户所在的当前位置应该按什么方向或轨迹行进就可以沿所规划的路径到达目的地位置。从而可以避免用户在查看导航路线时分散注意力,进而避免了行进过程中的安全隐患。当然,实施本发明的任一产品或方法必不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的智能眼镜导航方法的流程图;
图2为本发明实施例提供的真实场景中投影方向标识的示意图;
图3为本发明实施例提供的智能眼镜导航装置的结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,图1为本发明实施例提供的智能眼镜导航方法的流程图,包括:
步骤101,获得用户的语音指令,语音指令中包括目标信息,目标信息包括用户需要到达的目的地的位置或类型。
随着智能移动终端技术的进步,越来越多的可以穿戴智能设备进入人们的生活。智能眼镜就是一种十分重要的可穿戴智能设备。智能眼镜能够将镜片作为显示屏幕,使得人们在通过姜片看到正常的真实景物时,还可以再镜片上看到其他信息。并且智能眼镜可以在自身集成处理器、存储器等部件,从而具有一定数据处理能力,或者可以通过例如蓝牙等通信接口,连接其他设备,如手机等,从而利用其他智能设备作为数据处理的工具。
智能眼镜可以通过内置的麦克风等部件,采集到用户的语音指令。例如,与现有的智能手机语音输入功能类似,用户按下智能眼镜上的语音控制键后,智能眼镜就可以开始接受用户所说出的语音指令。
用户所说出的语音指令可以含有目标信息,目标信息可以是用户所要到达的目的地的具体的地址或者目的地名称,也可以是目的地的类型。
具体的,目标信息可以包括位置信息或类别信息,位置信息为用户需要到达的目的地的名称或位置,类别信息为用户需要到达的目的地所具有的属性或类别。
位置信息一般可以直接反映出用户所要到达的目的地,而类别信息只能反映出用户所要到达的目的地的类型或类别。
例如,语音指令可以为“我要去人民路5号”,或者“去省中医医院”,则其中的“人民路5号”和“省中医医院”则为位置信息,通过该位置信息可以直接确定出所要达到的目的地的位置或名称。
语音指令还可以为“去附近的餐厅”或者“我要去医院”,则其中的“餐厅”或“医院”则为类别信息,只能反映出所要到达的目的地的类型,由于存在多个餐厅或医院,所以不能直接确定出目的地的具体位置。
步骤102,通过语义分析算法识别出语音指令中所含有的目标信息,并根据目标信息中的用户需要到达的目的地的位置或类型,确定出目的地位置。
智能眼镜获取了语音指令之后,可以通过语义分析算法对所接收到的语音指令进行分析,一般可以先将语音指令在智能眼镜内部转换为文本信息,并存储在存储器中,再利用语义分析算法对所转换的文本信息进行识别。语义分析算法可以识别出文本中的名词、动词以及连接词,从而识别出语音指令中所含有的目标信息。
例如,结合上面的例子,当用户输入的语音指令为“我要去人民路5号”时,语义分析算法可以根据不同词性的词语将该语音指令进行分割,例如可以将该语音指令分割为:“我”“要去”“人民路5号”这三部分,并且将教师目的的动词“要去”之后所连接的名词性词组“人民路5号”确定为目标信息。
具体的,在现有技术中,存在多种语义分析算法,例如:PLSA(probabilisticlatent semantic analysis,概率语义分析算法)和NMF(Non-negative MatrixFactorization,非负矩阵分解算法)等。可以根据需要进行选择,再次不再进行赘述。
当确定出目标信息后,就可以根据该目标信息,确定出目的地位置。
当该目标信息为位置信息时,如该目标信息为“人民路5号”,则可以直接可以将该目标信息中的名称或位置作为目的地位置。
当目标信息为类别信息时,步骤102,通过语义分析算法识别出语音指令中所含有的目标信息,并根据目标信息中的用户需要到达的目的地的位置或类型,确定出目的地位置,可以包括:
步骤102a,通过语义分析算法识别出语音指令中所含有的类别信息。
步骤102b,根据类别信息向用户提供与类别信息对应的一个或多个目的地。
步骤102c,接收用户的选择指令,根据选择指令确定出用户所选择的目的地,并将目的地的位置作为目的地位置。
当智能眼镜获得语音指令后,通过上述方法,可以通过语义分析算法确定出目标信息,且该目标信息为类别信息。例如,语音指令为“我要去医院”,通过语义分析算法确定出类别信息为“医院”。
当确定出类别信息后,就根据该类别信息向用户推荐并提供与类别信息对应的一个或多个目的地。例如,当确定出类别信息为“医院”,然后可以自动进行检索医院,并且可以得到多个检索出的结果,例如,中心医院,中医医院、儿童医院等等。然后可以通过智能眼镜的显示屏等装置向用户显示出多个目的地,以供用户进行选择。
用户可以针对所提供的一个或多个目的地进行选择,并生成选择指令,选择指令可以有多种形式,例如,用户点击操作所形成的执行,或者用于语音输入的指令等等,只要能够使智能眼镜了解到用户所选择的目的地的指令,都可以作为选择指令。智能眼镜根据该选择指令,将用户所选择的目的地,作为目的地位置。例如,用户选择“中心医院”,则智能眼镜将中心医院的位置作为目的地位置。通过为用户提供多个目的地的选择,使得用户可以更好的确定出所要到达的具体的目的地,提高了用户体验。
步骤103,获取用户的起始位置,并规划出从起始位置到目的地位置的路径。
当确定出目的地位置后,智能眼镜就可以进行路径规划。
首先智能眼镜可以通过自身所具有的GPS模块等部件,确定出佩戴有该智能眼镜的用户当前所在的起始位置,或者用户也可以输入起始位置,并且还可以通过传感器确定出用户当前所面对的方向等。
确定出用户的起始位置后,就可以根据各类路径规划算法,确定出从起始位置到目的地位置的路径。并且可以根据用户选择,确定出不同限制条件下的路径,例如,用户可以选择避免拥堵,不走高速等限制条件,或者还可以选择不同类型交通工具所对应的路径,例如,驾驶汽车时对应的路径、步行或骑行时对应的路径等等。具体的,在现有技术中,存在多种的路径的规划方法,可以根据需要进行选择,在此不再赘述。
步骤104,获取用户通过智能眼镜看到的真实场景的实景图像,通过对所述实景图像进行图像处理,识别出实景图像中的预设图像区域,并根据预设图像区域,确定出真实场景中与预设图像区域对应的预设场景区域。
当确定出路径后,智能眼镜可以先获取用户当前所看到的真实场景的实景图像。智能眼镜一般佩戴在用户头上,并且与用户的视线平行,通过智能眼镜上所具有的摄像头等图像采集元件,可以容易的获取到与用户事实所看到的真实场景相一致的实景图像,实景图像可以为图片或者视频帧。
智能眼镜获取到当前的实景图像后,可以对该实景图像进行图像处理,例如,可以通过经过训练的卷积神经网络等方式对该实景图形进行识别,从而识别出实景图像中的预设图像区域,或者也可以通过其他现有的图像识别方法确定出出实景图像中的预设图像区域。由于智能眼镜所获取的实景图像,即为当前用户通过所看到的当前真实景物的图像,所以智能眼镜可以根据实景图像中的预设图像区域,确定出当前真实场景中与预设图像区域对应的预设场景区域。
预设图像区域可以是特定类型的区域,例如,优选的,预设图像区域可以为地面或墙面等区域。一般情况下,由于真实场景中的地面或墙面可以较为容易的进行识别,并且面积较大,可以更容易通过实景图像中所识别出的墙面或地面,确定出真实场景的墙面或地面所在的预设场景区域,在后续步骤中更容易的在该预设场景区域投影方向标识,且并且方便用户观看。
步骤105,通过增强现实技术,在预设场景区域中,投影出路径的方向标识,该方向标识用于指示出从用户所在的当前位置沿所规划的路径到达目的地位置所要行进的方向或轨迹。当前位置位于用户的起始位置与目的地位置的路径之间,并且当前位置可以包括起始位置。
当确定出真实场景中的预设场景区域后,就可以利用增强现实的技术手段,在该预设场景区域中投影或显示虚拟的方向标识,该方向标识可以是箭头或线条等各类符号,用于指示出用户所在的当前位置按所规划的路径行进时,所要行进的方向或轨迹。
增强现实的技术可已经得到了很多的应用,在本发明实施例中,方向标识可以在智能眼镜的镜片上进行显示,并且所显示的位置可以根据所获取的真实场景的实景图像中的预设图像区域进行确定,当用户通过该智能眼镜观看真实场景的场景时,该方向标识就可以叠加在真实场景中,并显示在真实场景中的预设场景区域中。具体的,增强现实技术的实现方式属于现有技术,在此不再赘述。
具体的,通过增强现实技术,在预设场景区域中,投影出路径的方向标识,可以包括:
第一步,获取用户所处于的当前位置,并确定出从当前位置到达目的地位置时,在当前的真实场景中所要行进的方向或轨迹。
第二步,根据方向或轨迹,通过增强现实技术,在预设场景区域中,投影出所述路径的方向标识。
在投影方向标识之前,可以首先通过GPS模块等装置获得用户所处于的用户所在的当前位置,然后可以确定出,从用户所在的当前位置沿所规划出的轨迹前往目的地位置时,在当前所在的真实场景中所要行进的方向,或者在当前的真实场景中所要前进的轨迹。然后根据该方向或轨迹,再通过增强现实技术的手段,在真实场景的预设场景区域中,投影出或显示出一个方向标识,该方向标识可以指示出在该真实场景中,所要行进的方向或者轨迹。
参见图2,图2为本发明实施例提供的真实场景中投影方向标识的示意图。
从图中可以看出,用户通过能眼镜看到的真实场景的预设场景区域中,出现了一个虚拟的箭头201,该箭头201出现在地面上,并且该箭头201的所指的方向即为从用户所在的当前位置沿所规划的路径到达目的地位置所要行进的方向。通过该箭头201,用户则可以确定出应该在当前路口右转,则可以沿所规划的路径到达目的地位置。
在本发明实施例中,通过获得用户的语音指令,并根据该语音指令,确定出目的地位置,并规划出从当前的起始位置到所述目的地位置的路径。然后可以将该路径的方向标识,通过增强现实技术叠加在用户通过智能眼镜所看到的真实场景中,从而用户不需要在行进过程中查看所规划的路径,可以直接在真实场景中看到所规划的路径的方向标识,根据该方向标识,用户就可以了解到从用户所在的当前位置应该按什么方向或轨迹行进就可以沿所规划的路径到达目的地位置。从而可以避免用户在查看导航路线时分散注意力,进而避免了行进过程中的安全隐患。
可选的,在本发明实施例提供的智能眼镜导航方法中,在步骤102,通过语义分析算法识别出语音指令中所含有的目标信息,并根据目标信息中的用户需要到达的目的地的位置或类型,确定出目的地位置之后,所述方法还包括:
向用户展示与目的地位置有关的预设信息,预设信息至少包括以下信息中的一种或多种:目的地简介、目的地距离、预计到达时间以及到达目的地位置的可选交通方式。
当确定出用户所要达到的目的地位置之后,智能眼镜可以在镜片或其他显示装置上显示与目的地位置有关的预设信息,例如,目的地简介、目的地距离、预计到达时间以及到达目的地位置的可选交通方式等等。或者,智能眼镜还可以通过播放音频的方式,向用户介绍该目的地位置有关的预设信息,例如,该目的地位置为景点时,智能眼镜可以自动播放与该景点有关的介绍或者历史典故等等。具体的,预设信息可以通过连接互联网,在互联网上获取。或者,如目的地距离、预计到达时间以及到达目的地位置的可选交通方式信息,可以通过内置的软件计算得到,具体过程属于现有技术,再次不再赘述。
可选的,在本发明实施例提供的智能眼镜导航方法中,步骤104,获取用户通过智能眼镜看到的真实场景的实景图像,通过对实景图像进行图像处理,识别出实景图像中的预设图像区域,并根据预设图像区域,确定出真实场景中与预设图像区域对应的预设场景区域,包括:
按预设时间周期,获取用户通过智能眼镜看到的真实场景的实景图像,并对本次预设时间周期内获取的实景图像进行图像处理,识别出实景图像中的预设图像区域;通过预设图像区域,确定出本次预设时间周期中真实场景中与预设图像区域对应的预设场景区域。
在应用本发明实施例提供的智能眼镜导航方法时,由于用户可能处于运动的状态,所以需要按一定的时间间隔更新所显示的方向标识。所以,可以按预设时间周期,获取用户所看到的真实场景的实景图像。预设时间周期可以根据需要进行设置,例如可以为20秒,或40秒等,智能眼镜还可以根据用户的运动速度来调节预设时间周期的具体值,例如,当用户驾驶汽车时,预设时间周期可以为15秒,用户步行时,预设时间周期可以为30秒。
获取了实景图像,采用与上述相同的方法对该实景图像进行处理,进而确定出本次预设时间周期内的实景图像中的预设图像区域。然后根据该预设图像区域,可以确定出本次预设时间周期中真实场景中与预设图像区域对应的预设场景区域。
相应的,步骤105,通过增强现实技术,在所述用户通过所述智能眼镜看到的所述预设场景区域中,投影出所述路径的方向标识,包括:
按预设周期,通过增强现实技术,在用户通过智能眼镜看到的预设场景区域中,投影出路径的方向标识,同时去除上一个预设时间周期时所投影出的方向标识。
同样的,为了能及时的更新所投影或显示的方向标识,可以按预设周期,在每一个周期时,在该周期所对应的预设场景区域中,重新投影出路径的方向标识,并且去除上一个预设时间周期时所投影出的方向标识。从而使得用户可以及时的了解到所要行进的方向或轨迹。
可选的,在本发明实施例提供的智能眼镜导航方法中,所述方法还包括:
步骤106,在导航过程中,实时监测用户眼球注视预设场景区域的持续时间,当持续时间大于预设阈值时,向用户发出警告信息。
为了防止用户将注意力过多的或者过长时间的集中在所显示的方向标识上,从而导致行进过程中的安全隐患。可以在执行本发明是实例提供的智能眼镜导航方法的过程中,智能眼镜通过自身所具有的运动传感器,或者虹膜传感器等装置蒋策眼球的运动,从而实时监测用户眼球注视预设场景区域的持续时间。
当该持续时间大于预设阈值时,可以向用户发出警告,具体的,可以向用户显示提示信息,或者通过音效、震动等形式向用户发出提醒。其中预设阈值可以进行配置,例如,可以为2秒,4秒等等。
参见图3,图3为本发明实施例提供的智能眼镜导航装置的结构图,应用于智能眼镜,包括:
第一获取模块301,用于获得用户的语音指令,所述语音指令中包括目标信息,所述目标信息包括所述用户需要到达的目的地的位置或类型;
分析模块302,用于通过语义分析算法识别出所述目标信息,并根据所述目标信息中的所述用户需要到达的目的地的位置或类型,确定出目的地位置;
第二获取模块303,用于获取用户的起始位置,并规划出从所述起始位置到所述目的地位置的路径;
第三获取模块304,用于获取所述用户通过所述智能眼镜看到的真实场景的实景图像,通过对所述实景图像进行图像处理,识别出所述实景图像中的预设图像区域,并根据所述预设图像区域,确定出所述真实场景中与所述预设图像区域对应的预设场景区域;
投影模块305,用于通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识,所述方向标识用于指示出从用户所在的当前位置沿所述路径到达所述目的地位置所要行进的方向或轨迹,所述当前位置位于所述用户的起始位置与所述目的地位置的路径之间。
在本发明实施例中,通过获得用户的语音指令,并根据该语音指令,确定出目的地位置,并规划出从当前的起始位置到所述目的地位置的路径。然后可以将该路径的方向标识,通过增强现实技术叠加在用户通过智能眼镜所看到的真实场景中,从而用户不需要在行进过程中查看所规划的路径,可以直接在真实场景中看到所规划的路径的方向标识,根据该方向标识,用户就可以了解到从用户所在的当前位置应该按什么方向或轨迹行进就可以沿所规划的路径到达目的地位置。从而可以避免用户在查看导航路线时分散注意力,进而避免了行进过程中的安全隐患。
可选的,在本发明实施例提供的智能眼镜导航装置中,所述投影模块305,具体用于:
获取所述用户所处于的所述当前位置,并确定出从所述当前位置到达所述目的地位置时,在当前的所述真实场景中所要行进的方向或轨迹;根据所述方向或轨迹,通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识。
可选的,在本发明实施例提供的智能眼镜导航装置中,所述装置中的所述目标信息包括位置信息或类别信息,所述位置信息为所述用户需要到达的目的地的名称或位置,所述类别信息为所述用户需要到达的目的地所具有的属性或类别。
可选的,在本发明实施例提供的智能眼镜导航装置中,当所述目标信息为所述类别信息时,所述分析模块302,具体用于:
通过语义分析算法识别出所述语音指令中所含有的类别信息;根据所述类别信息向用户提供与所述类别信息对应的一个或多个目的地;接收所述用户的选择指令,根据所述选择指令确定出所述用户所选择的目的地,并将所述目的地的位置作为所述目的地位置。
可选的,在本发明实施例提供的智能眼镜导航装置中,所述装置还包括:
展示模块,用于向用户展示与所述目的地位置有关的预设信息,所述预设信息至少包括以下信息中的一种或多种:目的地简介、目的地距离、预计到达时间以及到达所述目的地位置的可选交通方式。
可选的,在本发明实施例提供的智能眼镜导航装置中,所述第三获取模块304,具体用于:
按预设时间周期,获取所述用户通过所述智能眼镜看到的真实场景的实景图像,并对本次预设时间周期内获取的实景图像进行图像处理,识别出所述实景图像中的预设图像区域;通过所述预设图像区域,确定出本次预设时间周期中所述真实场景中与所述预设图像区域对应的预设场景区域;
相应的,所述投影模块305,具体用于:
按所述预设周期,通过增强现实技术,在所述用户通过所述智能眼镜看到的所述预设场景区域中,投影出所述路径的方向标识,同时去除上一个预设时间周期时所投影出的方向标识。
可选的,在本发明实施例提供的智能眼镜导航装置中,所述装置还包括:
监测模块,用于在导航过程中,实时监测用户眼球注视所述预设场景区域的持续时间,当所述持续时间大于预设阈值时,向用户发出警告信息。
本发明实施例还提供了一种智能眼镜,该智能眼镜可以应用上述任一种智能眼镜导航方法。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的智能眼镜导航方法。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的智能眼镜导航方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (10)

1.一种智能眼镜导航方法,其特征在于,应用于智能眼镜,包括:
获得用户的语音指令,所述语音指令中包括目标信息,所述目标信息包括所述用户需要到达的目的地的位置或类型;
通过语义分析算法识别出所述目标信息,并根据所述目标信息中的所述用户需要到达的目的地的位置或类型,确定出目的地位置;
获取用户的起始位置,并规划出从所述起始位置到所述目的地位置的路径;
获取所述用户通过所述智能眼镜看到的真实场景的实景图像,通过对所述实景图像进行图像处理,识别出所述实景图像中的预设图像区域,并根据所述预设图像区域,确定出所述真实场景中与所述预设图像区域对应的预设场景区域;
通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识,所述方向标识用于指示出从用户所在的当前位置沿所述路径到达所述目的地位置所要行进的方向或轨迹,所述当前位置位于所述用户的起始位置与所述目的地位置的路径之间。
2.根据权利要求1所述的方法,其特征在于,所述通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识,包括:
获取所述用户所处于的所述当前位置,并确定出从所述当前位置到达所述目的地位置时,在当前的所述真实场景中所要行进的方向或轨迹;
根据所述方向或轨迹,通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识。
3.根据权利要求1所述的方法,其特征在于,所述目标信息包括位置信息或类别信息,所述位置信息为所述用户需要到达的目的地的名称或位置,所述类别信息为所述用户需要到达的目的地所具有的属性或类别。
4.根据权利要求3所述的方法,其特征在于,当所述目标信息为所述类别信息时,所述通过语义分析算法识别出所述语音指令中所含有的目标信息,并根据所述目标信息中的所述用户需要到达的目的地的位置或类型,确定出目的地位置,包括:
通过语义分析算法识别出所述语音指令中所含有的类别信息;
根据所述类别信息向用户提供与所述类别信息对应的一个或多个目的地;
接收所述用户的选择指令,根据所述选择指令确定出所述用户所选择的目的地,并将所述目的地的位置作为所述目的地位置。
5.根据权利要求1所述的方法,其特征在于,在所述通过语义分析算法识别出所述语音指令中所含有的目标信息,并根据所述目标信息中的所述用户需要到达的目的地的位置或类型,确定出目的地位置之后,所述方法还包括:
向用户展示与所述目的地位置有关的预设信息,所述预设信息至少包括以下信息中的一种或多种:目的地简介、目的地距离、预计到达时间以及到达所述目的地位置的可选交通方式。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述获取所述用户通过所述智能眼镜看到的真实场景的实景图像,通过对所述实景图像进行图像处理,识别出所述实景图像中的预设图像区域,并根据所述预设图像区域,确定出所述真实场景中与所述预设图像区域对应的预设场景区域,包括:
按预设时间周期,获取所述用户通过所述智能眼镜看到的真实场景的实景图像,并对本次预设时间周期内获取的实景图像进行图像处理,识别出所述实景图像中的预设图像区域;
通过所述预设图像区域,确定出本次预设时间周期中所述真实场景中与所述预设图像区域对应的预设场景区域;
相应的,所述通过增强现实技术,在所述用户通过所述智能眼镜看到的所述预设场景区域中,投影出所述路径的方向标识,包括:
按所述预设周期,通过增强现实技术,在所述用户通过所述智能眼镜看到的所述预设场景区域中,投影出所述路径的方向标识,同时去除上一个预设时间周期时所投影出的方向标识。
7.根据权利要求1至5中任一项所述的方法,其特征在于,所述方法还包括:
在导航过程中,实时监测用户眼球注视所述预设场景区域的持续时间,当所述持续时间大于预设阈值时,向用户发出警告信息。
8.一种智能眼镜导航装置,其特征在于,应用于智能眼镜,包括:
第一获取模块,用于获得用户的语音指令,所述语音指令中包括目标信息,所述目标信息包括所述用户需要到达的目的地的位置或类型;
分析模块,用于通过语义分析算法识别出所述目标信息,并根据所述目标信息中的所述用户需要到达的目的地的位置或类型,确定出目的地位置;
第二获取模块,用于获取用户的起始位置,并规划出从所述起始位置到所述目的地位置的路径;
第三获取模块,用于获取所述用户通过所述智能眼镜看到的真实场景的实景图像,通过对所述实景图像进行图像处理,识别出所述实景图像中的预设图像区域,并根据所述预设图像区域,确定出所述真实场景中与所述预设图像区域对应的预设场景区域;
投影模块,用于通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识,所述方向标识用于指示出从用户所在的当前位置沿所述路径到达所述目的地位置所要行进的方向或轨迹,所述当前位置位于所述用户的起始位置与所述目的地位置的路径之间。
9.根据权利要求8所述的装置,其特征在于,所述投影模块,具体用于:
获取所述用户所处于的所述当前位置,并确定出从所述当前位置到达所述目的地位置时,在当前的所述真实场景中所要行进的方向或轨迹;根据所述方向或轨迹,通过增强现实技术,在所述预设场景区域中,投影出所述路径的方向标识。
10.一种智能眼镜,其特征在于,应用权利要求1-7任一所述的方法步骤。
CN201711403288.7A 2017-12-22 2017-12-22 一种智能眼镜导航方法、装置及智能眼镜 Pending CN108168540A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711403288.7A CN108168540A (zh) 2017-12-22 2017-12-22 一种智能眼镜导航方法、装置及智能眼镜

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711403288.7A CN108168540A (zh) 2017-12-22 2017-12-22 一种智能眼镜导航方法、装置及智能眼镜

Publications (1)

Publication Number Publication Date
CN108168540A true CN108168540A (zh) 2018-06-15

Family

ID=62523687

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711403288.7A Pending CN108168540A (zh) 2017-12-22 2017-12-22 一种智能眼镜导航方法、装置及智能眼镜

Country Status (1)

Country Link
CN (1) CN108168540A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109059929A (zh) * 2018-08-30 2018-12-21 Oppo广东移动通信有限公司 导航方法、装置、穿戴式设备及存储介质
CN109767645A (zh) * 2019-02-01 2019-05-17 谷东科技有限公司 一种基于ar眼镜的停车规划辅助方法及系统
CN111402426A (zh) * 2019-01-03 2020-07-10 国际商业机器公司 增强现实安全性
CN111475130A (zh) * 2020-03-27 2020-07-31 深圳光启超材料技术有限公司 轨迹信息的显示方法、头戴设备、存储介质及电子设备
CN112002186A (zh) * 2020-09-04 2020-11-27 语惠科技(南京)有限公司 一种基于增强现实技术的信息无障碍系统及方法
CN112587378A (zh) * 2020-12-11 2021-04-02 中国科学院深圳先进技术研究院 基于视觉的外骨骼机器人足迹规划系统、方法及存储介质
CN112612139A (zh) * 2020-12-21 2021-04-06 上海影创信息科技有限公司 缓解人流对冲的ar眼镜提示方法和系统

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102305631A (zh) * 2011-07-27 2012-01-04 广西卫通汽车信息技术有限公司 一种通过汽车后视镜进行导航的方法及装置
CN102980570A (zh) * 2011-09-06 2013-03-20 上海博路信息技术有限公司 一种实景增强现实导航系统
CN103727944A (zh) * 2012-10-16 2014-04-16 北京掌行通信息技术有限公司 利用图例动态显示行程进度的方法
CN104180814A (zh) * 2013-05-22 2014-12-03 北京百度网讯科技有限公司 移动终端上实景功能中的导航方法和电子地图客户端
CN104280045A (zh) * 2014-10-16 2015-01-14 百度在线网络技术(北京)有限公司 一种导航信息的获取方法及装置
CN104535071A (zh) * 2014-12-05 2015-04-22 百度在线网络技术(北京)有限公司 一种语音导航方法及装置
CN104697545A (zh) * 2013-12-04 2015-06-10 大陆汽车投资(上海)有限公司 导航提示信息的处理方法和装置
CN104792334A (zh) * 2015-04-29 2015-07-22 深圳市凯立德欣软件技术有限公司 一种导航方法及位置服务装置
CN105444775A (zh) * 2015-12-31 2016-03-30 歌尔科技有限公司 一种增强现实的导航系统、头戴设备和导航方法
CN105654044A (zh) * 2015-12-28 2016-06-08 深圳市金立通信设备有限公司 一种信息处理方法以及终端
US20160202067A1 (en) * 2015-01-09 2016-07-14 Boe Technology Group Co., Ltd. Interactive glasses and navigation system
CN106679686A (zh) * 2017-01-03 2017-05-17 京东方科技集团股份有限公司 一种可穿戴设备

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102305631A (zh) * 2011-07-27 2012-01-04 广西卫通汽车信息技术有限公司 一种通过汽车后视镜进行导航的方法及装置
CN102980570A (zh) * 2011-09-06 2013-03-20 上海博路信息技术有限公司 一种实景增强现实导航系统
CN103727944A (zh) * 2012-10-16 2014-04-16 北京掌行通信息技术有限公司 利用图例动态显示行程进度的方法
CN104180814A (zh) * 2013-05-22 2014-12-03 北京百度网讯科技有限公司 移动终端上实景功能中的导航方法和电子地图客户端
CN104697545A (zh) * 2013-12-04 2015-06-10 大陆汽车投资(上海)有限公司 导航提示信息的处理方法和装置
CN104280045A (zh) * 2014-10-16 2015-01-14 百度在线网络技术(北京)有限公司 一种导航信息的获取方法及装置
CN104535071A (zh) * 2014-12-05 2015-04-22 百度在线网络技术(北京)有限公司 一种语音导航方法及装置
US20160202067A1 (en) * 2015-01-09 2016-07-14 Boe Technology Group Co., Ltd. Interactive glasses and navigation system
CN104792334A (zh) * 2015-04-29 2015-07-22 深圳市凯立德欣软件技术有限公司 一种导航方法及位置服务装置
CN105654044A (zh) * 2015-12-28 2016-06-08 深圳市金立通信设备有限公司 一种信息处理方法以及终端
CN105444775A (zh) * 2015-12-31 2016-03-30 歌尔科技有限公司 一种增强现实的导航系统、头戴设备和导航方法
CN106679686A (zh) * 2017-01-03 2017-05-17 京东方科技集团股份有限公司 一种可穿戴设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
郭建: "基于智能眼镜的动态监测分析系统", 《中国优秀硕士学位论文全文数据库信息科技辑》 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109059929A (zh) * 2018-08-30 2018-12-21 Oppo广东移动通信有限公司 导航方法、装置、穿戴式设备及存储介质
CN111402426A (zh) * 2019-01-03 2020-07-10 国际商业机器公司 增强现实安全性
CN111402426B (zh) * 2019-01-03 2023-08-18 勤达睿公司 增强现实安全性
CN109767645A (zh) * 2019-02-01 2019-05-17 谷东科技有限公司 一种基于ar眼镜的停车规划辅助方法及系统
CN111475130A (zh) * 2020-03-27 2020-07-31 深圳光启超材料技术有限公司 轨迹信息的显示方法、头戴设备、存储介质及电子设备
CN112002186A (zh) * 2020-09-04 2020-11-27 语惠科技(南京)有限公司 一种基于增强现实技术的信息无障碍系统及方法
WO2022048455A1 (zh) * 2020-09-04 2022-03-10 语惠科技(南京)有限公司 一种基于增强现实技术的信息无障碍系统及方法
CN112002186B (zh) * 2020-09-04 2022-05-06 语惠科技(南京)有限公司 一种基于增强现实技术的信息无障碍系统及方法
CN112587378A (zh) * 2020-12-11 2021-04-02 中国科学院深圳先进技术研究院 基于视觉的外骨骼机器人足迹规划系统、方法及存储介质
CN112587378B (zh) * 2020-12-11 2022-06-07 中国科学院深圳先进技术研究院 基于视觉的外骨骼机器人足迹规划系统、方法及存储介质
CN112612139A (zh) * 2020-12-21 2021-04-06 上海影创信息科技有限公司 缓解人流对冲的ar眼镜提示方法和系统

Similar Documents

Publication Publication Date Title
CN108168540A (zh) 一种智能眼镜导航方法、装置及智能眼镜
US20200219414A1 (en) Apparatus and method for analyzing images
RU2706462C2 (ru) Облегчение взаимодействия между пользователями и их окружающими средами с помощью гарнитуры, имеющей механизмы ввода
US20210201590A1 (en) Systems, devices, and methods for augmented reality
US20200234168A1 (en) Detecting and correcting potential errors in user behavior
US20170250832A1 (en) Platform for enabling remote services
Sobnath et al. Smart cities to improve mobility and quality of life of the visually impaired
CN105847982A (zh) 电子设备及其内容提供方法
US11243083B2 (en) Implementing route generation with augmented reality
CN103091844A (zh) 将头戴式显示连接到外部显示和其他通信网络
CN103733196A (zh) 用于实现现实世界用户经历的可搜索历史的方法及设备
US10831267B1 (en) Systems and methods for virtually tagging objects viewed by friends and influencers
US9659282B2 (en) Generating a visitation schedule
CN108072368A (zh) 导航方法及装置
US20200236427A1 (en) Personalized content aggregation & delivery
JP2006133903A (ja) 統合情報サービスシステム
US10928212B2 (en) Providing online mapping with user selected preferences
JPWO2007072675A1 (ja) コンテンツ提示装置およびコンテンツ提示方法
Elkhouly et al. Mitigating crowded transportation terminals nearby mega-sports events
Tanwar et al. Machine learning, blockchain, and cyber security in smart environments: Application and Challenges
Kanza et al. Geospatial accessibility and inclusion by combining contextual filters, the metaverse and ambient intelligence
CN110289074A (zh) 运动教学方法、装置、服务器、系统及存储介质
US11526623B2 (en) Information display considering privacy on public display
Zhang Wonder Vision-A Hybrid Way-finding System to assist people with Visual Impairment
Elzie et al. Groups in pedestrian evacuation: Survey data on attitudes

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180615

RJ01 Rejection of invention patent application after publication