CN109059929B - 导航方法、装置、穿戴式设备及存储介质 - Google Patents

导航方法、装置、穿戴式设备及存储介质 Download PDF

Info

Publication number
CN109059929B
CN109059929B CN201811001323.7A CN201811001323A CN109059929B CN 109059929 B CN109059929 B CN 109059929B CN 201811001323 A CN201811001323 A CN 201811001323A CN 109059929 B CN109059929 B CN 109059929B
Authority
CN
China
Prior art keywords
navigation
user
building
image data
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811001323.7A
Other languages
English (en)
Other versions
CN109059929A (zh
Inventor
魏苏龙
林肇堃
麦绮兰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201811001323.7A priority Critical patent/CN109059929B/zh
Publication of CN109059929A publication Critical patent/CN109059929A/zh
Application granted granted Critical
Publication of CN109059929B publication Critical patent/CN109059929B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例公开了一种导航方法、装置、穿戴式设备及存储介质,该方法包括当检测到导航控制指令时,获取摄像头采集的实时图像数据,所述摄像头设置在穿戴式设备上,所述穿戴式设备包括智能眼镜;依据所述实时图像数据和地图信息确定当前用户的位置信息,所述位置信息包括用户的朝向方位;判断所述位置信息是否满足正确导航行进条件,如果否,则触发路径偏移提醒事件,本方案提高了导航准确性,可以及时纠正路线错误。

Description

导航方法、装置、穿戴式设备及存储介质
技术领域
本申请实施例涉及计算机技术,尤其涉及一种导航方法、装置、穿戴式设备及存储介质。
背景技术
随着计算设备的发展以及互联网技术的进步,用户和智能设备之间的交互越来越频繁,如使用智能手机观看电影、电视剧,使用智能电视观看电视节目,使用智能手表查看短消息、体征参数等。
导航作为辅助用户出行的功能之一被用户广泛使用,现有的导航功能可集成在车辆或智能手机中,导航方法存在缺陷,需要改进。
发明内容
本发明提供了一种导航方法、装置、穿戴式设备及存储介质,提高了导航准确性,可以及时纠正路线错误。
第一方面,本申请实施例提供了一种导航方法,包括:
当检测到导航控制指令时,获取摄像头采集的实时图像数据,所述摄像头设置在穿戴式设备上,所述穿戴式设备包括智能眼镜;
依据所述实时图像数据和地图信息确定当前用户的位置信息,所述位置信息包括用户的朝向方位;
判断所述位置信息是否满足正确导航行进条件,如果否,则触发路径偏移提醒事件。
第二方面,本申请实施例还提供了一种导航装置,包括:
图像采集模块,用于当检测到导航控制指令时,获取摄像头采集的实时图像数据,所述摄像头设置在穿戴式设备上,所述穿戴式设备包括智能眼镜;
位置信息确定模块,用于依据所述实时图像数据和地图信息确定当前用户的位置信息,所述位置信息包括用户的朝向方位;
导航路线确定模块,用于判断所述位置信息是否满足正确导航行进条件,如果否,则触发路径偏移提醒事件。
第三方面,本申请实施例还提供了一种穿戴式设备,包括:处理器、存储器以及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如本申请实施例所述的导航方法。
第四方面,本申请实施例还提供了一种包含穿戴式设备可执行指令的存储介质,所述穿戴式设备可执行指令在由穿戴式设备处理器执行时用于执行本申请实施例所述的导航方法。
本方案中,当检测到导航控制指令时,获取摄像头采集的实时图像数据,所述摄像头设置在穿戴式设备上,所述穿戴式设备包括智能眼镜,依据所述实时图像数据和地图信息确定当前用户的位置信息,所述位置信息包括用户的朝向方位,判断所述位置信息是否满足正确导航行进条件,如果否,则触发路径偏移提醒事件,本方案提高了导航准确性,可以及时纠正路线错误。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1是本申请实施例提供的一种导航方法的流程图;
图2是本申请实施例提供的一种导航方法中确定用户朝向方位的示意图;
图3是本申请实施例提供的一种导航方法中确定位置信息是否满足正确导航行进条件的示意图;
图4是本申请实施例提供的另一种导航方法的流程图;
图5是本申请实施例提供的另一种导航方法的流程图;
图6是本申请实施例提供的另一种导航方法的流程图;
图7是本申请实施例提供的另一种导航方法的流程图;
图8是本申请实施例提供的另一种导航方法的流程图;
图9是本申请实施例提供的一种导航装置的结构框图;
图10是本申请实施例提供的一种穿戴式设备的结构示意图;
图11是本申请实施例提供的一种穿戴式设备的示意实物图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
图1是本申请实施例提供的一种导航方法的流程图,可适用于导航行程中,该方法可以由本申请实施例提供的穿戴式设备来执行,该穿戴式设备的导航装置可采用软件和/或硬件的方式实现,如图1所示,本实施例提供的具体方案如下:
步骤S101、当检测到导航控制指令时,获取摄像头采集的实时图像数据。
在一个实施例中,对导航控制指令进行监听,当检测到该导航控制指令时,获取摄像头采集的实时图像数据。其中,该摄像头设置在穿戴式设备上,用以采集用户前方的实时图像数据,如内置在智能眼镜的镜框中,当用户在佩戴智能眼镜时,内置在镜框中的摄像头进行图像数据的实时采集。该穿戴式设备具备导航功能,可根据用户设定的导航起点和导航终点进行导航线路规划,用户可依据导航线路到达导航终点,示例性的,可以是当穿戴式设备开启路径导航时,开始对导航控制指令进行监听,开启的路径导航可以是现有的基于GPS定位信息的导航。
步骤S102、依据所述实时图像数据和地图信息确定当前用户的位置信息。
其中,实时图像数据为摄像头采集的当前的街景、道路图像数据,即用户佩戴穿戴式设备时当前所处的环境的实时图像数据。地图信息为包含不同地理位置的不同信息数据的集合,可以是不同位置的街景图像信息,也可以是包含不同位置的建筑物标识的抽象信息。位置信息则是根据实时图像数据和地图信息确定的当前用户所在位置的精确数据,并且包括用户的朝向方位,其区别于现有技术中通过GPS定位确定的用户的位置数据,其中,朝向方位为用户当前面朝的方位,如用户面朝北面,则朝向方位为北。
在一个实施例中,通过对实时图像数据进行图像识别以得到用户当前所在位置的街道标识和/或建筑物标识,其中,街道标识通过图像识别得到的街道路标牌确定,不同的街道路标牌对应不同的街道标识(如在城市A总共包含B个街道路标牌,每个街道路标牌预先设置有对应的唯一街道标识,当识别到该街道路标牌后,可确定该街道路标牌对应的唯一街道标识),建筑物标识通过识别到的不同建筑物特征确定(如城市a总共包含b个建筑物,每个建筑物各自具备不同的特征,可以是建筑物底商的名称特征、建筑物的形状特征等,根据识别到的建筑物特征以确定唯一对应的建筑物标识,如建筑物a对应的建筑物特征为b,对应的建筑物标识为c),将识别到的街道标识和/或建筑物标识在地图信息中进行查询匹配以相应的得到该街道标识和/或建筑物标识所在的地理位置,具体的,地图信息中包含有不同的街道和建筑物数据,每条街道和每个建筑物均预先设置有唯一街道标识和建筑物标识,该预先设置的街道标识和建筑物标识与前述根据对实时图像识别得到的街道标识和建筑物标识为相同的一套标识。
同时,根据图像识别出的街道路标牌和/或建筑物的大小渐变特征确定当前用户的朝向方位,示例性的,针对图像中的一个建筑物,不同的图像采集角度显示建筑物的大小渐变特征不同,如正对建筑物时,建筑物图像为对称分布,斜对建筑物时,建筑物的近用户侧显示的图像大于远用户侧显示的图像,由此可确定用户当前和建筑物的相对位置,即用户位于显示的建筑物图像较大的一侧,将用户相对建筑物的相对位置到建筑物位置的连线指向的方向确定为用户的朝向方位。如图2所示,图2是本申请实施例提供的一种导航方法中确定用户朝向方位的示意图,其中建筑物1022为依据实时图像数据和地图信息确定出的建筑物,用户1021为根据图像数据中建筑物大小渐变特征确定出的用户模拟位置,用户1021到建筑物1022的虚拟箭头的指向为用户的当前的朝向方位。
步骤S103、判断所述位置信息是否满足正确导航行进条件,如果否,则触发路径偏移提醒事件。
其中,正确导航行进指按照导航线路规划的路线和朝向进行行进,步骤S102中确定出位置信息后,相应的进行位置信息是否满足正确导航行进条件的判断。在一个实施例中,判断位置信息中的朝向方位是否处于当前导航路径的导航起点至导航终点的方位,其中,当前的导航路径可以是全程导航线路中的一段直线路径,即全程导航线路由多段不同的直线路径组合而成。具体的,以当前导航路径的导航起点至导航终点的连线指向的方位为基准方位,确定出的当前用户朝向方位如果和该基准方位的夹角大于或等于90度(也可设定为70度、80度等)则判定该位置信息不满足正确导航行进条件。在另一个实施例中,可判断位置信息中的地理位置是否满足正确导航行进条件,即确定用户当前的地理位置是否处于导航线路中,如果发现位置偏移,不在的导航线路上,则判定为其不满足正确导航行进条件。如图3所示,图3是本申请实施例提供的一种导航方法中确定位置信息是否满足正确导航行进条件的示意图,其中1031为当前导航路径的导航起点,1032为当前导航路径的导航终点,夹角1033为用户的当前朝向方位和基准方位的夹角,该夹角小于90度则判定为当前的位置信息满足正确导航行进条件。当确定出用户的位置信息不满足正确导航行进条件时,即出现路线偏离或朝向方位错误时,触发路径偏移提醒事件以提醒用户当前方位错误。
由上述内容可知,通过摄像头采集的实时图像数据以判定用户当前位置信息是否满足正确导航行进条件,解决了现有GPS导航精度较差无法实时确定用户是否沿着正确导航路线行进的问题,避免了用户出现一段路线偏差后才能通过现有导航功能发现实际路线错误的情况,完善了导航功能,可第一时间发现用户的错误路线。
图4是本申请实施例提供的另一种导航方法的流程图,可选的,所述获取摄像头采集的实时图像数据包括:每隔5秒获取一次摄像头采集的实时图像数据;相应的,所述依据所述实时图像数据和地图信息确定当前用户的位置信息包括:对所述实时图像数据进行图像识别,如果相邻两幅图像中包含同样的建筑物,则确定该建筑物的建筑物标识,根据所述建筑物标识以及地图信息中记录的建筑物数据确定当前用户的朝向方位。如图4所示,技术方案具体如下:
步骤S201、对导航控制指令进行监听。
步骤S202、判断是否检测到导航控制指令,如果是,则执行步骤S203,如果否,则继续监听。
步骤S203、每隔5秒获取一次摄像头采集的实时图像数据。
在一个实施例中,每隔预设时长(可以是3秒、5秒、10秒等)获取一次摄像头采集的实时图像数据,该预设时长可以是大于3秒的任一时长数值。
步骤S204、对所述实时图像数据进行图像识别。
步骤S205、判断相邻两幅图像中是否包含相同的建筑物,如果是,则执行步骤S206,如果否,则执行步骤S203。
示例性的,如每隔5秒获取一次摄像头采集的图像数据,则获取到的相邻两幅图像之间具备一定的采集间隔,并且当识别到两幅图像均包含相同的建筑物时执行步骤S206,避免了由于用户佩戴穿戴式设备时由于瞬间的视线转动造成误导航提示的问题。
步骤S206、确定该建筑物的建筑物标识,根据所述建筑物标识以及地图信息中记录的建筑物数据确定当前用户的朝向方位。
在一个实施例中,对每个地图划分区域中的建筑物进行建筑物标号,同时相应的记录不同建筑物的建筑物特征,示例性的,建筑物特征可以是建筑物的标识牌的文字内容、建筑物的形状、颜色等,后续通过对摄像头采集的图像数据进行识别得到相应的建筑物特征后,可通过建筑物特征的匹配比对确定出当前采集图像中的建筑物标识,进而确定当前用户的朝向方位,具体朝向方位的确定可参见步骤S102的解释部分,此处不再赘述。
步骤S207、判断当前用户的朝向方位是否满足正确导航行进条件,如果否,则执行步骤S208,如果是,则执行步骤S203。
步骤S208、触发路径偏移提醒事件。
由上述可知,在进行导航过程中,对具有一定时间间隔的图像进行获取并对每幅图像中的建筑物进行比对,如果存在相同建筑物则进行后续是否满足正确导航行进条件的判断,一方面降低了穿戴式设备的功耗,另一方面避免了用户临时转换视角带来的误判。
图5是本申请实施例提供的另一种导航方法的流程图,可选的,在判断相邻两幅图像中是否包含相同的建筑物之前,还包括:判断图像识别结果中是否存在岔路,如果存在则判断相邻两幅图像中是否包含相同的建筑物。如图5所示,技术方案具体如下:
步骤S301、对导航控制指令进行监听。
步骤S302、判断是否检测到导航控制指令,如果是,则执行步骤S303,如果否,则继续监听。
步骤S303、每隔5秒获取一次摄像头采集的实时图像数据。
步骤S304、对所述实时图像数据进行图像识别。
步骤S305、判断图像识别结果中是否存在岔路,如果是,则执行步骤S306,如果否,则执行步骤S303。
在一个实施例中,通过机器学习算法对包含岔路的图片数据进行学习训练得到识别模型,将图像识别结果输入至该识别模型以确定是否包含岔路。当识别结果中包含岔路时在执行步骤S306。
步骤S306、判断相邻两幅图像中是否包含相同的建筑物,如果是,则执行步骤S307,如果否,则执行步骤S303。
步骤S307、确定该建筑物的建筑物标识,根据所述建筑物标识以及地图信息中记录的建筑物数据确定当前用户的朝向方位。
步骤S308、判断当前用户的朝向方位是否满足正确导航行进条件,如果否,则执行步骤S309,如果是,则执行步骤S303。
步骤S309、触发路径偏移提醒事件。
由上述可知,在判断相邻图像是否存在相同建筑物之前,确定图像中是否存在岔路,当存在岔路时执行是否存在相同建筑物的判别,降低了穿戴式设备的电量消耗,通常用户在存在岔路时对行走路线是否正确的获知需求最强,其余时刻相对需求较小也不易走错,上述方案进一步提高了导航效率。
在一个可能的实施例中,所述当检测到导航控制指令时,获取摄像头采集的实时图像数据包括:当检测到导航控制指令时,判断摄像头是否开启,如果未开启,则开启摄像头,获取所述摄像头采集的实时图像数据。其中,该集成在穿戴式设备中的摄像头如果未开启,则在检测到导航控制指令后,自动开启摄像头以进行图像数据的采集。
图6是本申请实施例提供的另一种导航方法的流程图,可选的,所述触发路径偏移提醒事件包括:控制骨传导扬声器发送语音提示和/或振动器产生振动,所述骨传导扬声器和所述振动器集成在所述穿戴式设备中。如图6所示,技术方案具体如下:
步骤S401、对导航控制指令进行监听。
步骤S402、判断是否检测到导航控制指令,如果是,则执行步骤S203,如果否,则继续监听。
步骤S403、每隔5秒获取一次摄像头采集的实时图像数据。
步骤S404、对所述实时图像数据进行图像识别。
步骤S405、判断图像识别结果中是否存在岔路,如果是,则执行步骤S306,如果否,则执行步骤S303。
步骤S406、判断相邻两幅图像中是否包含相同的建筑物,如果是,则执行步骤S407,如果否,则执行步骤S403。
步骤S407、确定该建筑物的建筑物标识,根据所述建筑物标识以及地图信息中记录的建筑物数据确定当前用户的朝向方位。
步骤S408、判断当前用户的朝向方位是否满足正确导航行进条件,如果否,则执行步骤S409,如果是,则执行步骤S403。
步骤S409、控制骨传导扬声器发送语音提示和/或振动器产生振动。
在一个实施例中,以智能眼镜作为穿戴式设备为例,骨传导扬声器设置在至少一个镜腿的内侧壁,该骨传导扬声器将处理器发送的音频信号转换为振动信号,通过颅骨传递至人体内耳被听觉神经所感知,该语音提示内容可以是“方向错误”。在一个实施例中,当检测到不满足正确导航行进条件时,可通过穿戴式设备集成的振动器产生振动以提示用户当前方位错误。
由上述可知,当确定用户当前位置不满足导航行进条件时,给出合理提示,其中,采用骨传导扬声器发送语音提示或振动器进行振动可避免在户外环境下受到噪音干扰导致用户无法及时获知提示的问题。
图7是本申请实施例提供的另一种导航方法的流程图,可选的,在检测到导航控制指令之前,还包括:对检测到的语音信息进行识别,如果识别结果满足第一预设条件,则生成导航控制指令。如图7所示,技术方案具体如下:
步骤S501、对检测到的语音信息进行识别,如果识别结果满足第一预设条件,则生成导航控制指令。
在一个实施例中,用户可通过语音触发导航控制指令,穿戴式设备集成有麦克风以采集用户发出的语音信息,当检测到麦克风采集到用户语音信息时,相应的进行语音识别,当识别结果满足第一预设条件时生成导航控制指令,该第一预设条件可以是语音识别结果中包含设定的文字,示例性的,该设定的文字可以是“开启智能导航”、“帮我寻路”等。
步骤S502、当检测到导航控制指令时,获取摄像头采集的实时图像数据。
步骤S503、依据所述实时图像数据和地图信息确定当前用户的位置信息。
步骤S504、如果所述位置信息不满足正确导航行进条件,则控制骨传导扬声器发送语音提示和/或振动器产生振动。
由上述可知,穿戴式设备开启导航功能时,用户可通过语音控制开启判断位置信息是否满足正确导航行进条件的判断,显著完善了现有导航功能,避免用户多走弯路不能及时发现行进在错误线路上的问题。
图8是本申请实施例提供的另一种导航方法的流程图,可选的,在检测到导航控制指令之前,还包括:获取传感器采集的传感数据,如果所述传感数据满足第二预设条件,则生成导航控制指令。如图8所示,技术方案具体如下:
步骤S601、获取传感器采集的传感数据,如果所述传感数据满足第二预设条件,则生成导航控制指令。
其中,传感器集成在穿戴式设备中,在一个实施例中,传感器可以是加速度传感器和陀螺仪传感器,该第二预设条件可以是设置的加速度传感器和陀螺仪传感器的传感数值范围,即获取传感器采集的传感数据,当传感数据满足设置的传感数值范围时,生成导航控制指令,以智能眼镜为例,传感器集成安装在镜腿中,空间坐标系z轴为重力轴,第二预设条件中的传感数值范围可以是重力加速度传感器在z轴的加速度数值范围为0.8g至1.2g,陀螺仪传感器在z轴的加速度数值为-9到9。
在一个实施例中,传感器可以是压力传感器,该压力传感器集成在智能眼镜的镜腿外侧,可以感应用户手指的按压,该第二预设条件可以检测到压力传感器被按压,即检测到压力传感器采集的数值不为0则生成导航控制指令。
步骤S602、当检测到导航控制指令时,获取摄像头采集的实时图像数据。
步骤S603、依据所述实时图像数据和地图信息确定当前用户的位置信息。
步骤S604、如果所述位置信息不满足正确导航行进条件,则控制骨传导扬声器发送语音提示和/或振动器产生振动。
由上述可知,穿戴式设备开启导航功能时,通过传感器检测到的数据生成导航控制指令,简便快捷的触发判断当前用户的位置信息是否满足正确导航行进条件,便于用户控制,提高了精确导航效率。
图9是本申请实施例提供的一种导航装置的结构框图,该装置用于执行上述实施例提供的导航方法,具备执行方法相应的功能模块和有益效果。如图9所示,该装置具体包括:图像采集模块101、位置信息确定模块102和导航路线确定模块103,其中,
图像采集模块101,用于当检测到导航控制指令时,获取摄像头采集的实时图像数据,所述摄像头设置在穿戴式设备上,所述穿戴式设备包括智能眼镜。
在一个实施例中,对导航控制指令进行监听,当检测到该导航控制指令时,获取摄像头采集的实时图像数据。其中,该摄像头设置在穿戴式设备上,用以采集用户前方的实时图像数据,如内置在智能眼镜的镜框中,当用户在佩戴智能眼镜时,内置在镜框中的摄像头进行图像数据的实时采集。该穿戴式设备具备导航功能,可根据用户设定的导航起点和导航终点进行导航线路规划,用户可依据导航线路到达导航终点,示例性的,可以是当穿戴式设备开启路径导航时,开始对导航控制指令进行监听,开启的路径导航可以是现有的基于GPS定位信息的导航。
位置信息确定模块102,用于依据所述实时图像数据和地图信息确定当前用户的位置信息,所述位置信息包括用户的朝向方位。
其中,实时图像数据为摄像头采集的当前的街景、道路图像数据,即用户佩戴穿戴式设备时当前所处的环境的实时图像数据。地图信息为包含不同地理位置的不同信息数据的集合,可以是不同位置的街景图像信息,也可以是包含不同位置的建筑物标识的抽象信息。位置信息则是根据实时图像数据和地图信息确定的当前用户所在位置的精确数据,并且包括用户的朝向方位,其区别于现有技术中通过GPS定位确定的用户的位置数据,其中,朝向方位为用户当前面朝的方位,如用户面朝北面,则朝向方位为北。
在一个实施例中,通过对实时图像数据进行图像识别以得到用户当前所在位置的街道标识和/或建筑物标识,其中,街道标识通过图像识别得到的街道路标牌确定,不同的街道路标牌对应不同的街道标识,建筑物标识通过识别到的不同建筑物特征确定,将识别到的街道标识和/或建筑物标识在地图信息中进行查询匹配以相应的得到该街道标识和/或建筑物标识所在的地理位置,同时,根据图像识别出的街道路标牌和/或建筑物的大小渐变特征确定当前用户的朝向方位,示例性的,针对图像中的一个建筑物,不同的图像采集角度显示建筑物的大小渐变特征不同,如正对建筑物时,建筑物图像为对称分布,斜对建筑物时,建筑物的近用户侧显示的图像大于远用户侧显示的图像,由此可确定用户当前和建筑物的相对位置,即用户位于显示的建筑物图像较大的一侧,将用户相对建筑物的相对位置到建筑物位置的连线指向的方向确定为用户的朝向方位。
导航路线确定模块103,用于判断所述位置信息是否满足正确导航行进条件,如果否,则触发路径偏移提醒事件。
其中,正确导航行进指按照导航线路规划的路线和朝向进行行进,步骤S102中确定出位置信息后,相应的进行位置信息是否满足正确导航行进条件的判断。在一个实施例中,判断位置信息中的朝向方位是否处于当前导航路径的导航起点至导航终点的方位,其中,当前的导航路径可以是全程导航线路中的一段直线路径,即全程导航线路由多段不同的直线路径组合而成。具体的,以当前导航路径的导航起点至导航终点的连线指向的方位为基准方位,确定出的当前用户朝向方位如果和该基准方位的夹角大于或等于90度(也可设定为70度、80度等)则判定该位置信息不满足正确导航行进条件。在另一个实施例中,可判断位置信息中的地理位置是否满足正确导航行进条件,即确定用户当前的地理位置是否处于导航线路中,如果发现位置偏移,不在的导航线路上,则判定为其不满足正确导航行进条件。
由上述内容可知,通过摄像头采集的实时图像数据以判定用户当前位置信息是否满足正确导航行进条件,解决了现有GPS导航精度较差无法实时确定用户是否沿着正确导航路线行进的问题,避免了用户出现一段路线偏差后才能通过现有导航功能发现实际路线错误的情况,完善了导航功能,可第一时间发现用户的错误路线。
在一个可能的实施例中,所述位置信息确定模块具体用于:
对所述实时图像数据进行图像识别确定其中包含的建筑物对应的建筑物标识以及渐变特征;
查询所述建筑物标识在地图信息中对应的地理位置,将所述地理位置确定为用户的位置;
根据所述渐变特征确定用户相对于所述建筑物的相对位置,并根据所述相对位置确定所述用户的朝向方位。
在一个可能的实施例中,所述导航路线确定模块103具体用于:
判断所述朝向方位是否处于当前导航路径的导航起点至导航终点的方位。
在一个可能的实施例中,所述图像采集模块101具体用于:
当检测到导航控制指令时,判断摄像头是否开启,如果未开启,则开启摄像头,获取所述摄像头采集的实时图像数据。
在一个可能的实施例中,所述导航路线确定模块103具体用于:
控制骨传导扬声器发送语音提示和/或振动器产生振动,所述骨传导扬声器和所述振动器集成在所述穿戴式设备中。
在一个可能的实施例中,还包括导航触发模块104,用于在检测到导航控制指令之前,对检测到的语音信息进行识别,如果识别结果满足第一预设条件,则生成导航控制指令。
在一个可能的实施例中,还包括导航触发模块104,用于在检测到导航控制指令之前,获取传感器采集的传感数据,如果所述传感数据满足第二预设条件,则生成导航控制指令,所述传感器集成在所述穿戴式设备上,所述传感器包括加速度传感器、陀螺仪传感器和压力传感器中的至少一种。
本实施例在上述各实施例的基础上提供了一种穿戴式设备,图10是本申请实施例提供的一种穿戴式设备的结构示意图,图11是本申请实施例提供的一种穿戴式设备的示意实物图。如图10和图11所示,该穿戴式设备包括:存储器201、处理器(Central ProcessingUnit,CPU)202、显示部件203、触摸面板204、心率检测模组205、距离传感器206、摄像头207、骨传导扬声器208、麦克风209、呼吸灯210,这些部件通过一个或多个通信总线或信号线211来通信。
应该理解的是,图示穿戴式设备仅仅是穿戴式设备的一个范例,并且穿戴式设备可以具有比图中所示出的更多的或者更少的部件,可以组合两个或更多的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面就本实施例提供的用于导航的穿戴式设备进行详细的描述,该穿戴式设备以智能眼镜为例。
存储器201,所述存储器201可以被CPU202访问,所述存储器201可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
显示部件203,可用于显示图像数据以及操作系统的操控界面,显示部件203嵌入在智能眼镜的镜框中,镜框内部设置有内部传输线路211,该内部传输线路211和显示部件203连接。
触摸面板204,该触摸面板204设置在至少一个智能眼镜镜腿的外侧,用于获取触摸数据,触摸面板204通过内部传输线路211和CPU202连接。其中,触摸面板204可检测用户的手指滑动、点击操作,并相应的把检测到的数据传输至处理器202进行处理以生成对应的控制指令,示例性的,可以是左移指令、右移指令、上移指令、下移指令等。示例性的,显示部件203可显示处理器202传输的虚拟图像数据,该虚拟图像数据可相应的根据触摸面板204检测到的用户操作进行相应变化,具体的,可以是进行画面切换,当检测到左移指令或右移指令后相应的切换上一个或下一个虚拟图像画面;当显示部件203显示视频播放信息时,该左移指令可以是进行播放内容的回播,右移指令可以是进行播放内容的快进;当显示部件203显示的为可编辑文字内容时,该左移指令、右移指令、上移指令、下移指令可以是对光标的位移操作,即光标的位置可根据用户对触摸板的触摸操作而进行移动;当显示部件203显示的内容为游戏动画画面时,该左移指令、右移指令、上移指令、下移指令可以是对游戏中的对象进行控制,如飞机游戏中,可通过该左移指令、右移指令、上移指令、下移指令分别控制飞机的飞行方向;当显示部件203可显示不同频道的视频画面时,该左移指令、右移指令、上移指令、下移指令可进行不同频道的切换,其中,上移指令和下移指令可以是切换到预置频道(如用户使用的常用频道);当显示部件203显示静态图片时,该左移指令、右移指令、上移指令、下移指令可进行不同图片之间的切换,其中,左移指令可以是切换到上一幅图片,右移指令可以是切换至下一幅图,上移指令可以是切换到上一图集,下移指令可以是切换至下一图集。该触摸面板204还可用于对显示部件203的显示开关进行控制,示例性的,当长按压触摸面板204触摸区域时,显示部件203通电显示图像界面,当再次长按压触摸面板204触摸区域时,显示部件203断电,当显示部件203通电后,可通过在触摸面板204进行上滑和下滑操作以调节显示部件203中显示图像的亮度或分辨率。
心率检测模组205,用于测得用户的心率数据,心率指每分钟的心跳次数,该心率检测模组205设置在镜腿内侧。具体的,该心率检测模组205可以是通过电脉冲测量的方式使用干性电极获取人体心电数据,根据心电数据中的振幅峰值确定心率大小;该心率检测模组205还可以是由采用光电法测量心率的光线发射和光线接收器组成,相应的,该心率检测模组205设置在镜腿底部,人体耳廓的耳垂处。心率检测模组205采集到心率数据后可相应的发送至处理器202中进行数据处理已得到佩戴者当前的心率值,在一个实施例中,处理器202在确定出用户的心率值后,可将该心率值实时显示在显示部件203中,可选的处理器202在确定出心率值较低(如小于50)或较高(如大于100)可相应的触发报警器,同时将该心率值和/或生成的报警信息通过通信模块发送至服务器。
距离传感器206,可设置在镜框上,该距离传感器206用于感应人脸到镜框的距离,该距离传感器206可采用红外感应原理实现。具体的,该距离传感器206将采集的距离数据发送至处理器202,处理器202根据该距离数据控制显示部件203的亮暗。示例性的,当确定出距离传感器206采集到的距离小于5厘米时,处理器202相应的控制显示部件203处于点亮状态,当确定出距离传感器为探测到有物体靠近时,相应的控制显示部件204处于关闭状态。
呼吸灯210,可设置在镜框的边缘,当显示部件203关闭显示画面时,该呼吸灯210可根据处理器202的控制而点亮呈渐变亮暗效果。
摄像头207,可以是设置在镜框的上边框的位置,采集用户前方的图像数据的前摄像模块,还可以采集用户眼球信息的后摄像模块,也可以是二者的结合。具体的,摄像头207采集前方图像时,将采集的图像发送至处理器202识别、处理,并根据识别结果触发相应的触发事件。示例性的,当用户在家中佩戴该穿戴设备时,通过对采集的前方图像进行识别,如果识别到家具物品,则相应的查询是否存在对应的控制事件,如果存在,则相应的将该控制事件对应的控制界面显示在显示部件203中,用户可通过触摸面板204进行对应的家具物品的控制,其中该家具物品和智能眼镜通过蓝牙或无线自组网进行网络连接;当用户在户外佩戴该穿戴设备时,可相应的开启目标识别模式,该目标识别模式可用于识别特定的人,摄像头207将采集的图像发送至处理器202进行人脸识别处理,如果识别到设定的预设人脸,则相应的可通过智能眼镜集成的扬声器进行声音播报,该目标识别模式还可以用于识别不同的植物,例如,处理器202根据触摸面板204的触摸操作以记录摄像头207采集的当前图像并通过通信模块发送至服务器以进行识别,服务器对采集图像中的植物进行识别并反馈相关的植物名称、介绍至智能眼镜,并将反馈数据显示在显示部件203中。摄像头207还可以是用于采集用户眼部如眼球的图像,通过对眼球的转动的识别生成不同的控制指令,示例性的,如眼球向上转动生成上移控制指令,眼球向下转动生成下移控制指令,眼球向左转动生成左移控制指令,眼球向右转动生成右移控制指令,其中合格,显示部件203可显示处理器202传输的虚拟图像数据,该虚拟图像数据可相应的根据摄像头207检测到的用户眼球的移动变化生成的控制指令而改变,具体的,可以是进行画面切换,当检测到左移控制指令或右移控制指令后相应的切换上一个或下一个虚拟图像画面;当显示部件203显示视频播放信息时,该左移控制指令可以是进行播放内容的回播,右移控制指令可以是进行播放内容的快进;当显示部件203显示的为可编辑文字内容时,该左移控制指令、右移控制指令、上移控制指令、下移控制指令可以是对光标的位移操作,即光标的位置可根据用户对触摸板的触摸操作而进行移动;当显示部件203显示的内容为游戏动画画面时,该左移控制指令、右移控制指令、上移控制指令、下移控制指令可以是对游戏中的对象进行控制,如飞机游戏中,可通过该左移控制指令、右移控制指令、上移控制指令、下移控制指令分别控制飞机的飞行方向;当显示部件203可显示不同频道的视频画面时,该左移控制指令、右移控制指令、上移控制指令、下移控制指令可进行不同频道的切换,其中,上移控制指令和下移控制指令可以是切换到预置频道(如用户使用的常用频道);当显示部件203显示静态图片时,该左移控制指令、右移控制指令、上移控制指令、下移控制指令可进行不同图片之间的切换,其中,左移控制指令可以是切换到上一幅图片,右移控制指令可以是切换至下一幅图,上移控制指令可以是切换到上一图集,下移控制指令可以是切换至下一图集。
骨传导扬声器208,骨传导扬声器208设置在至少一个镜腿的内壁侧,用于将接收到的处理器202发送的音频信号转换为振动信号。其中,骨传导扬声器208将声音通过颅骨传递至人体内耳,通过将音频的电信号转变为振动信号传递到颅骨耳蜗内,再被听觉神经所感知。通过骨传导扬声器208作为发声装置减少了硬件结构厚度,重量更轻,同时无电磁辐射也不会受到电磁辐射的影响,并且具备抗噪声、防水以及解放双耳的有点。
麦克风209,可设置在镜框的下边框上,用于采集外部(用户、环境)声音并传输至处理器202进行处理。示例性的,麦克风209对用户发出的声音进行采集并通过处理器202进行声纹识别,如果识别为认证用户的声纹,则相应的可接收后续的语音控制,具体的,用户可发出语音,麦克风209将采集到的语音发送至处理器202进行识别以根据识别结果生成对应的控制指令,如“开机”、“关机”、“提升显示亮度”、“降低显示亮度”,处理器202后续根据该生成的控制指令执行对应的控制处理。
上述实施例中提供的穿戴式设备的导航装置及穿戴式设备可执行本发明任意实施例所提供的穿戴式设备的导航方法,具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节,可参见本发明任意实施例所提供的穿戴式设备的导航方法。
本申请实施例还提供一种包含穿戴式设备可执行指令的存储介质,所述穿戴式设备可执行指令在由穿戴式设备处理器执行时用于执行一种导航方法,该方法包括:
当检测到导航控制指令时,获取摄像头采集的实时图像数据,所述摄像头设置在穿戴式设备上,所述穿戴式设备包括智能眼镜;
依据所述实时图像数据和地图信息确定当前用户的位置信息,所述位置信息包括用户的朝向方位;
判断所述位置信息是否满足正确导航行进条件,如果否,则触发路径偏移提醒事件。
在一个可能的实施例中,所述依据所述实时图像数据和地图信息确定当前用户的位置信息包括:
对所述实时图像数据进行图像识别确定其中包含的建筑物对应的建筑物标识以及渐变特征;
查询所述建筑物标识在地图信息中对应的地理位置,将所述地理位置确定为用户的位置;
根据所述渐变特征确定用户相对于所述建筑物的相对位置,并根据所述相对位置确定所述用户的朝向方位。
在一个可能的实施例中,所述判断所述位置信息是否满足正确导航行进条件包括:
判断所述朝向方位是否处于当前导航路径的导航起点至导航终点的方位。
在一个可能的实施例中,所述当检测到导航控制指令时,获取摄像头采集的实时图像数据包括:
当检测到导航控制指令时,判断摄像头是否开启,如果未开启,则开启摄像头,获取所述摄像头采集的实时图像数据。
在一个可能的实施例中,所述触发路径偏移提醒事件包括:
控制骨传导扬声器发送语音提示和/或振动器产生振动,所述骨传导扬声器和所述振动器集成在所述穿戴式设备中。
在一个可能的实施例中,在检测到导航控制指令之前,还包括:
对检测到的语音信息进行识别,如果识别结果满足第一预设条件,则生成导航控制指令。
在一个可能的实施例中,在检测到导航控制指令之前,还包括:
获取传感器采集的传感数据,如果所述传感数据满足第二预设条件,则生成导航控制指令,所述传感器集成在所述穿戴式设备上,所述传感器包括加速度传感器、陀螺仪传感器和压力传感器中的至少一种。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如CD-ROM、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如DRAM、DDR RAM、SRAM、EDO RAM,兰巴斯(Rambus)RAM等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的导航方法操作,还可以执行本发明任意实施例所提供的导航方法中的相关操作。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (9)

1.导航方法,其特征在于,包括:
当检测到导航控制指令时,每隔预设时长获取摄像头采集的实时图像数据,所述摄像头设置在穿戴式设备上,所述穿戴式设备包括智能眼镜;
依据所述实时图像数据和地图信息确定当前用户的位置信息,所述位置信息包括用户的朝向方位;
判断所述位置信息是否满足正确导航行进条件,如果否,则触发路径偏移提醒事件;
所述依据所述实时图像数据和地图信息确定当前用户的位置信息包括:
对所述实时图像数据进行图像识别,判断图像识别结果中是否存在岔路;
若是,且相邻两幅图像中包含相同的建筑物,则确定所述建筑物对应的建筑物标识以及渐变特征,其中,所述渐变特征是根据图像的采集角度确定的;
查询所述建筑物标识在地图信息中对应的地理位置,将所述地理位置确定为用户的位置;
根据所述渐变特征确定用户相对于所述建筑物的相对位置,并根据所述相对位置确定所述用户的朝向方位。
2.根据权利要求1所述的方法,其特征在于,所述判断所述位置信息是否满足正确导航行进条件包括:
判断所述朝向方位是否处于当前导航路径的导航起点至导航终点的方位。
3.根据权利要求1所述的方法,其特征在于,所述当检测到导航控制指令时,每隔预设时长获取摄像头采集的实时图像数据包括:
当检测到导航控制指令时,判断摄像头是否开启,如果未开启,则开启摄像头,每隔预设时长获取所述摄像头采集的实时图像数据。
4.根据权利要求3所述的方法,其特征在于,所述触发路径偏移提醒事件包括:
控制骨传导扬声器发送语音提示和/或振动器产生振动,所述骨传导扬声器和所述振动器集成在所述穿戴式设备中。
5.根据权利要求1-4中任一项所述的方法,其特征在于,在检测到导航控制指令之前,还包括:
对检测到的语音信息进行识别,如果识别结果满足第一预设条件,则生成导航控制指令。
6.根据权利要求1-4中任一项所述的方法,其特征在于,在检测到导航控制指令之前,还包括:
获取传感器采集的传感数据,如果所述传感数据满足第二预设条件,则生成导航控制指令,所述传感器集成在所述穿戴式设备上,所述传感器包括加速度传感器、陀螺仪传感器和压力传感器中的至少一种。
7.导航装置,其特征在于,包括:
图像采集模块,用于当检测到导航控制指令时,每隔预设时长获取摄像头采集的实时图像数据,所述摄像头设置在穿戴式设备上,所述穿戴式设备包括智能眼镜;
位置信息确定模块,用于依据所述实时图像数据和地图信息确定当前用户的位置信息,所述位置信息包括用户的朝向方位;
导航路线确定模块,用于判断所述位置信息是否满足正确导航行进条件,如果否,则触发路径偏移提醒事件;
其中,所述位置信息确定模块具体用于:
对所述实时图像数据进行图像识别,判断图像识别结果中是否存在岔路;
若是,且相邻两幅图像中包含相同的建筑物,则确定所述建筑物对应的建筑物标识以及渐变特征,其中,所述渐变特征是根据图像的采集角度确定的;
查询所述建筑物标识在地图信息中对应的地理位置,将所述地理位置确定为用户的位置;
根据所述渐变特征确定用户相对于所述建筑物的相对位置,并根据所述相对位置确定所述用户的朝向方位。
8.一种穿戴式设备,包括:处理器、存储器以及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-6中任一项所述的导航方法。
9.一种包含穿戴式设备可执行指令的存储介质,其特征在于,所述穿戴式设备可执行指令在由穿戴式设备处理器执行时用于执行如权利要求1-6中任一项所述的导航方法。
CN201811001323.7A 2018-08-30 2018-08-30 导航方法、装置、穿戴式设备及存储介质 Active CN109059929B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811001323.7A CN109059929B (zh) 2018-08-30 2018-08-30 导航方法、装置、穿戴式设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811001323.7A CN109059929B (zh) 2018-08-30 2018-08-30 导航方法、装置、穿戴式设备及存储介质

Publications (2)

Publication Number Publication Date
CN109059929A CN109059929A (zh) 2018-12-21
CN109059929B true CN109059929B (zh) 2021-02-26

Family

ID=64757832

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811001323.7A Active CN109059929B (zh) 2018-08-30 2018-08-30 导航方法、装置、穿戴式设备及存储介质

Country Status (1)

Country Link
CN (1) CN109059929B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109087485B (zh) * 2018-08-30 2021-06-08 Oppo广东移动通信有限公司 驾驶提醒方法、装置、智能眼镜及存储介质
CN111383271B (zh) * 2018-12-29 2023-06-23 阿里巴巴集团控股有限公司 一种基于图片的方向标注方法及装置
CN110213718A (zh) * 2019-05-24 2019-09-06 北京小米移动软件有限公司 感知终端行为的方法及装置
CN110530385A (zh) * 2019-08-21 2019-12-03 西安华运天成通讯科技有限公司 基于图像识别的城市导航方法及其系统
CN111879331B (zh) * 2020-07-31 2022-06-28 维沃移动通信有限公司 导航方法、装置及电子设备
CN113984055A (zh) * 2021-09-24 2022-01-28 北京奕斯伟计算技术有限公司 室内导航定位方法和相关装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69810768D1 (de) * 1997-06-03 2003-02-20 Stephen Bide Tragbares navigationssystem mit richtungsdetektor, positionsdetektor und datenbank
CN103591958B (zh) * 2013-11-12 2017-01-04 中国科学院深圳先进技术研究院 一种基于智能眼镜的人员导航系统及方法
CN103591951B (zh) * 2013-11-12 2017-06-13 中国科学院深圳先进技术研究院 一种室内导航系统及方法
KR101655818B1 (ko) * 2014-12-11 2016-09-08 현대자동차주식회사 웨어러블 글래스, 그 제어 방법 및 차량 제어 시스템
JP2017173252A (ja) * 2016-03-25 2017-09-28 オリンパス株式会社 画像処理装置、画像処理方法および画像処理プログラム
CN106643699B (zh) * 2016-12-26 2023-08-04 北京互易科技有限公司 一种虚拟现实系统中的空间定位装置和定位方法
CN107782314B (zh) * 2017-10-24 2020-02-11 张志奇 一种基于扫码的增强现实技术室内定位导航方法
CN108168540A (zh) * 2017-12-22 2018-06-15 福建中金在线信息科技有限公司 一种智能眼镜导航方法、装置及智能眼镜

Also Published As

Publication number Publication date
CN109059929A (zh) 2018-12-21

Similar Documents

Publication Publication Date Title
CN109059929B (zh) 导航方法、装置、穿戴式设备及存储介质
CN109087485B (zh) 驾驶提醒方法、装置、智能眼镜及存储介质
US20200173804A1 (en) Map display method, device, storage medium and terminal
CN110148294B (zh) 路况状态确定方法及装置
CN102855116B (zh) 信息处理设备和信息处理方法
CN109145847B (zh) 识别方法、装置、穿戴式设备及存储介质
WO2018179644A1 (ja) 情報処理装置、情報処理方法及び記録媒体
JPWO2018025531A1 (ja) 情報処理装置、情報処理方法、およびプログラム
US11989355B2 (en) Interacting with a smart device using a pointing controller
US9483116B2 (en) Method, device, and system for providing sensory information and sense
CN109089087A (zh) 多通道影音联动装置
CN113835519A (zh) 增强现实系统
CN104166929A (zh) 一种基于时空场景的信息推送系统和方法
CN109257490B (zh) 音频处理方法、装置、穿戴式设备及存储介质
JP7405083B2 (ja) 情報処理装置、情報処理方法、及びプログラム
CN111176338A (zh) 导航方法、电子设备及存储介质
CN104956690A (zh) 一种为在用耳适配声音信号的系统
CN109240498B (zh) 交互方法、装置、穿戴式设备及存储介质
CN110008671B (zh) 数据校验方法及装置
WO2023069988A1 (en) Anchored messages for augmented reality
CN109144265A (zh) 显示切换方法、装置、穿戴式设备及存储介质
US20150358782A1 (en) Catch the screen
CN113728621A (zh) 头戴式信息处理装置
WO2022029894A1 (ja) 情報処理装置、情報処理システム、情報処理方法、及びプログラム
US20230259328A1 (en) Information provision system, method, and non-transitory computer-readable medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant