CN107389065A - 一种智能导盲方法、智能导盲装置及智能导盲系统 - Google Patents
一种智能导盲方法、智能导盲装置及智能导盲系统 Download PDFInfo
- Publication number
- CN107389065A CN107389065A CN201710467105.1A CN201710467105A CN107389065A CN 107389065 A CN107389065 A CN 107389065A CN 201710467105 A CN201710467105 A CN 201710467105A CN 107389065 A CN107389065 A CN 107389065A
- Authority
- CN
- China
- Prior art keywords
- road conditions
- guide pattern
- user
- guiding
- intelligent blind
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/20—Instruments for performing navigational calculations
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H3/00—Appliances for aiding patients or disabled persons to walk about
- A61H3/06—Walking aids for blind persons
- A61H3/061—Walking aids for blind persons with electronic detecting or guiding means
Landscapes
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Rehabilitation Therapy (AREA)
- Life Sciences & Earth Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Physical Education & Sports Medicine (AREA)
- Pain & Pain Management (AREA)
- Epidemiology (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Navigation (AREA)
Abstract
本发明适用于导航技术领域,提供了一种智能导盲方法、智能导盲装置及智能导盲系统,包括:接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径;实时采集用户根据所述行走路径行走的过程中的实景路况图像信息;基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式;基于确定的导盲模式进行实时语音导航。通过上述方法能够结合自动导盲和人工导盲,通过语音实时交互进行智能导航,从而提高导盲的准确性与盲人出行的安全性。
Description
技术领域
本发明属于导航技术领域,尤其涉及一种智能导盲方法、智能导盲装置及智能导盲系统。
背景技术
盲人作为社会上的一个特殊群体,需要社会给予他们更多的关爱和照顾,使他们能够更好的独立生活。如何安全行走,是盲人生活中面临的最大问题。盲人一般都是依靠一根手杖,或者再带上导盲犬出行,但是这样的方式并不可靠,局限性很大,长时间的拄杖点地会造成人的疲劳,而且探索范围小;导盲犬容易受外界因素的诱惑,从而误导盲人。而其他视力障碍疾病患者如视网膜劈裂或者老年黄斑病变的患者,他们的出行也是非常不便的,由于他们大多数只能清晰的看到某一特定视觉角度的图像,其余角度的图像均模糊不清,这样的情况下他们的出行是极其不安全的。
目前有多种供盲人使用的导航设备,如具有导航功能的智能手杖等导航设备,可获取使用者周围的环境信息并通过语音输出进行路线引导。现有的盲设备虽然有一定的智能性,但是对于使用者路径选择和当前环境的判断并不是很准确,存在一定的误导性和危险性,盲人的出行仍具有较大的安全隐患。
发明内容
有鉴于此,本发明实施例提供了一种智能导盲方法、智能导盲系统及智能头戴设备,以解决现有导盲设备对使用者路径选择和当前环境的判断并不是很准确从而导致盲人出行仍具有较大的安全隐患的问题。
本发明第一方面提供了一种智能导盲方法,包括:
接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径;
实时采集用户根据所述行走路径行走的过程中的实景路况图像信息;
基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式;
基于确定的导盲模式进行实时语音导航。
本发明第二方面提供了一种智能导盲装置,包括:
路径规划单元,用于接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径;
图像信息采集单元,用于实时采集用户根据所述行走路径行走的过程中的实景路况图像信息;
导盲模式确定单元,用于基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式;
语音导航单元,用于基于确定的导盲模式进行实时语音导航。
本发明第三方面提供了一种智能导盲系统,包括:
所述智能导盲头戴设备,用于接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径;实时采集用户根据所述行走路径行走的过程中的实景路况图像信息;基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式;基于确定的导盲模式进行实时语音导航。
所述智能导盲头戴设备,还用于实时发送实景路况图像信息与用户的姿态信息至服务端;
服务端,用于接收所述智能导盲头戴设备发送的实景路况图像信息与用户的姿态信息;
所述服务端,还用于基于所述智能导盲头戴设备发送的实景路况图像信息与用户的姿态信息,发送语音导航指令至所述智能导盲头戴设备;
所述智能导盲头戴设备,还用于接收所述服务端发送的语音导航指令。
本发明第四方面提供了一种头戴设备,包括:存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上所述智能导盲方法的步骤。
本发明第五方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如上所述智能导盲方法的步骤。
本发明与现有技术相比存在的有益效果是:本发明通过接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径,并采集用户根据所述行走路径行走的过程中的实景路况图像信息,再基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式,可提高导航过程中对用户当前位置环境判断的准确性,最后基于确定的导盲模式进行实时语音导航。上述方法能够结合自动导盲和人工导盲,通过语音实时交互进行导航,从而提高导航的准确性与盲人出行的安全性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种智能导盲系统的系统架构图;
图2是本发明实施例提供的智能头戴设备侧的一种智能导盲方法的实现流程图;
图3a是本发明实施例提供的一种智能导盲装置的结构框图;
图3b是本发明实施例提供的路径规划单元的结构示意框图;
图3c是本发明实施例提供的导盲模式确定单元的结构示意框图;
图3d是本发明实施例提供的语音导航单元的结构示意框图;
图4是本发明实施例提供的一种智能导盲头戴设备的示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本发明实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
实施例一:
图1示出了本发明第一实施例提供的一种智能导盲系统的系统架构图,详述如下:为了便于说明,仅示出了与本发明实施例相关的部分。
参照图1,所述智能导盲系统包括智能导盲头戴设备1和服务器2,其中:
智能导盲头戴设备1,用于接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径;采集用户根据所述行走路径行走的过程中的实景路况图像信息;基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式;基于确定的导盲模式进行实时语音导航。
所述智能导盲头戴设备1,还用于实时发送实景路况图像信息与用户的姿态信息至服务端2。
服务端2,用于接收所述智能导盲头戴设备1发送的实景路况图像信息与用户的姿态信息。
所述服务端2,还用于基于所述智能导盲头戴设备1发送的实景路况图像信息与用户的姿态信息,发送语音导航指令至所述智能导盲头戴设备1。
具体地,服务端2在接收到实景路况图像信息与用户的姿态信息后,后台服务人员根据所述实景路况图像信息与所述用户的姿态信息,判断用户的行驶方向,或者判断用户正前方是否存在障碍物,后台服务人员通过服务端2发送语音指令至所述智能导盲头戴设备1,从而为佩戴所述智能导盲头戴设备1的用户进行实时人工语音导航。
所述智能导盲头戴设备1,还用于接收所述服务端2发送的语音导航指令。
可选地,所述服务端2,还用于接收包含目的地位置信息的用户语音指令。进一步地,所述服务端2还用于基于所述智能导盲头戴设备1发送的实景路况图像信息与用户的姿态信息,以及所述包含目的地位置信息的用户语音指令,发送语音导航指令至所述智能导盲头戴设备1。
进一步地,在本发明实施例中,所述智能导盲头戴设备1为具有无线通信能力的移动终端。多个智能导盲头戴设备1可通过无线方式同时与服务器2连接。
可选地,所述智能导盲系统可以通过无线通信模块建立起两者间的交互通信。本发明所提及的无线通信模块可基于GSM、WCDMA、TD-SCDMA、TDD-LTE、FDD-LTE或者是WIFI等通信协议实现。
本发明第一实施例中,通过智能导盲头戴设备接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径,并实时采集用户根据所述行走路径行走的过程中的实景路况图像信息,再基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式,可提高导航过程中对用户当前位置环境判断的准确性,最后基于确定的导盲模式进行语音导航。同时,通过智能导盲头戴设备实时发送实景路况图像信息与用户的姿态信息至服务端,服务端接收所述智能导盲头戴设备发送的实景路况图像信息与用户的姿态信息,并基于所述智能导盲头戴设备发送的实景路况图像信息与用户的姿态信息,实时发送语音导航指令至所述智能导盲头戴设备,所述智能导盲头戴设备实时接收服务端发送的语音导航指令,通过语音实时交互进行导航,从而提高导航的准确性与盲人出行的安全性。
实施例二:
图2示出了本发明实施例提供的一种智能导盲方法的流程图,在本实施例中,该流程的执行主体为图1所示的智能导盲头戴设备1,详述如下:
步骤S201,接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径。
具体地,在本发明实施例中,接收用户通过麦克风语音输入的目的地位置信息,并通过MCU/DSP芯片进行目的地检索,获取准确的目的地位置信息,从而根据用户当前的位置信息和目的地位置信息,规划行走路径。
可选地,当用户首次使用该智能导盲头戴设备1时,在所述步骤S201之前,需将智能导盲头戴设备1与服务端2进行初始绑定,包括:
A1、发送无线连接请求信号至服务端2。
A2、接收服务端2发送匹配成功的反馈信号,并根据所述反馈信号进行初始化设置。其中,所述反馈信号中包括初始化配置信息。
具体地,发送无线连接请求信号至服务端2,服务端2根据该无线连接请求信号中包括的认证信息,进行匹配认证,若匹配成功,则发送匹配成功的反馈信号至所述智能导盲头戴设备1。智能导盲头戴设备1根据接收的反馈信号中的初始化配置信息进行初始配置,完成初始化绑定。
本发明实施例中的初始绑定技术可以通过驱动或应用软件实现。初始绑定是为了进行配对和初始化设置,以便于后续使用时进行相互识别,以及通过无线通信模块建立起两者间的交互通信。
为了提供最优行走路径,所述步骤S201具体包括:
B1、定位用户当前的位置,获取当前位置信息。
B2、获取服务端2的空闲率。
B3、根据所述当前位置信息、所述目的地位置信息、所述服务端的空闲率以及当前城市道路交通状况,规划并计算用户从当前位置到目的地位置的最优路径。
具体地,通过GPS(Global Positioning System,全球定位系统)定位用户当前的位置,获取当前位置信息。根据所述当前位置信息、所述目的地位置信息以及当前城市道路交通状况即可规划并计算用户从当前位置到目的地位置的最优路径。在本发明实施例中,进一步获取服务端2的空闲率,空闲率是指服务端的没被占用的比率,例如,当服务端2有100个人工通道,被占用了70个通道,那么空闲率=(服务端总通道数-占用通道数)/服务端总通道数,即空闲率为30%。智能导盲头戴设备1根据当前位置信息、目的地位置信息以及服务端的空闲率,再结合当前城市道路交通状况,为用户合理规划和计算从当前位置到目的地位置的最优路径。一般地,最优路径可以为当前位置到目的地位置的最短路径,此时,结合服务端2的空闲率与城市道路交通状况,规划从当前位置到目的地位置最近的路径。可选地,最优路径是指与用户需求最相近、最匹配的路径。例如,用户需求以行走路程最方便为优先,则在规划从当前位置到目的地位置的路径时,结合服务端的空闲率与城市道路交通状况,规划最方便用户行走的路径。
步骤S202,实时采集用户根据所述行走路径行走的过程中的实景路况图像信息。
具体地,在本发明实施例中,智能导盲头戴设备1可通过开启3D摄像头实时拍摄路况视频,实时采集用户根据行走路径行走的过程中的实景路况图像信息。其中,3D摄像头采用已有的3D摄像技术,在此不做限定。
步骤S203,基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式。
具体地,在本发明实施例中,对步骤S202中3D摄像头采集的实景路况图像信息实时处理分析,从而实时确定选择自动导盲模式还是人工导盲模式,从而提高导航的准确性。进一步地,所述步骤S103包括:
C1、基于所述实景路况图像信息,对当前位置的路况进行路况分析。
C2、确定当前位置的路况是否属于预设路况,其中,所述预设路况包括交叉路口和拥挤路段。
进一步地,所述C2具体包括:
C21、判断用户当前的位置是否属于交叉路口,和/或用户当前位置所在的路段的拥堵程度是否超过预设的阈值。
C3、若属于预设路况,则确定为人工导盲模式。
C4、若不属于预设路况,则确定为自动导盲模式。
在本发明实施例中,通过3D摄像头采集的实景路况图像信息实时处理,分析用户根据规划的行走路径的行走过程中当前位置的路况,即根据所述实景路况图像信息分析当前位置的路形,和/或当前位置路段的人流拥挤程度,并进一步判断是否是预设路况中的交叉路口,和/或当前位置路段的人流拥挤程度是否超过预设的阈值。若当前位置属于预设路况中的交叉路口,和/或当前位置路段的人流拥挤程度不小于预设的阈值,则将导盲模式确定为人工导盲模式。若当前位置不属于预设路况中的交叉路口,且当前位置路段的人流拥挤程度小于预设的阈值,则将导盲模式确定为自动导盲模式。
在本发明实施例中,由于实时基于实景路况图像信息进行分析处理,通过判断当前位置的路况信息,实时切换确定导盲模式,从而提高为盲人语音导航的准确性。
步骤S204,基于确定的导盲模式进行实时语音导航。
具体地,在本发明实施例中,导盲模式包括人工导盲模式和自动导盲模式,其中,人工导盲模式通过与服务端2进行无线通信连接,由服务端2进行实时人工语音导航。自动导盲模式由智能导盲头戴设备1内置导航进行语音导航。
可选地,为了能够提高人工导盲的准确性,在人工导盲模式下,所述步骤S104包括:
D1、实时获取用户的姿态信息。
D2、实时发送实景路况图像信息与用户的姿态信息至服务端。
D3、实时接收服务端发送的语音导航指令。
此时,服务端2在接收到实景路况图像信息与用户的姿态信息后,后台服务人员根据所述实景路况图像信息与所述用户的姿态信息,判断用户的行驶方向,或者判断用户正前方是否存在障碍物,后台服务人员通过服务端2发送语音指令至所述智能导盲头戴设备1,从而为佩戴所述智能导盲头戴设备1的用户进行实时人工语音导航。
具体地,所述用户姿态信息为用户佩戴智能导盲头戴设备1的状态信息,例如,智能导盲头戴设备是否处于摇晃状态。服务端2基于接收的实景路况图像信息与用户的姿态信息,从而可准确判断用户当前的位置信息以及当前的状态,即方便服务端2人工判断用户行走的正前方是否有障碍物,并发送语音导航指令至智能导盲头戴设备2,智能导盲头戴设备2接收该语音导航指令,为用户提供实时人工语音导航。
可选地,为了能够提高用户在自动导盲模式下语音导航的安全性,在自动导盲模式下,所述步骤S204包括:
D1'、对所述实景路况图像信息进行图像处理分析。
D2'、检测用户当前的姿态信息。
D3'、基于所述实景路况图像信息的图像处理分析结果与所述用户当前的姿态信息,检测当前位置的预设范围内是否存在障碍物。
D4'、若检测到障碍物,则发送震动提示用户避让障碍物。
具体地,在本发明实施例中,通过实景路况图像信息的图像处理分析结果初步判断存在障碍物,再根据所述用户当前的姿态信息,进一步检测用户的行走方向的预设范围内是否存在阻碍用户行走的障碍物,若检测到障碍物,则发送震动提示用户避让障碍物。可选地,检测到障碍物,可发送铃声加震动的提示,在本发明实施例中,提示方式不做限定。
本发明第二实施例中,通过接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径,并实时采集用户根据所述行走路径行走的过程中的实景路况图像信息,再基于所述实景路况图像信息,确定当前位置的路况是否属于预设路况,若属于预设路况,则确定为人工导盲模式,若不属于预设路况,则确定为自动导盲模式,实时确定导盲模式,可提高导航过程中对用户当前位置环境判断的准确性,最后基于确定的导盲模式进行实时语音导航。上述方法能够结合自动导盲和人工导盲,通过语音实时交互进行导航,从而提高导航的准确性与盲人出行的安全性。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
实施例三:
对应于上文实施例所述的智能导盲方法,图3a示出了本发明实施例提供的装置的结构框图,该装置可应用于智能终端,该智能终端可以包括经无线接入网RAN与一个或多个核心网进行通信的智能头戴设备。为了便于说明,仅示出了与本发明实施例相关的部分。
参照图3a,该智能导盲装置包括:路径规划单元31,图像信息采集单元32,导盲模式确定单元33,语音导航单元34,其中:
路径规划单元31,用于接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径。
具体地,在本发明实施例中,接收用户通过麦克风语音输入的目的地位置信息,并通过MCU/DSP芯片进行目的地检索,获取准确的目的地位置信息,从而根据用户当前的位置信息和目的地位置信息,规划行走路径。
图像信息采集单元32,用于实时采集用户根据所述行走路径行走的过程中的实景路况图像信息。
具体地,在本发明实施例中,智能导盲头戴设备可通过开启3D摄像头实时拍摄路况视频,实时采集用户根据行走路径行走的过程中的实景路况图像信息。其中,3D摄像头采用已有的3D摄像技术,在此不做限定。
导盲模式确定单元33,用于基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式。
具体地,在本发明实施例中,对3D摄像头采集的实景路况图像信息实时处理分析,从而实时确定选择自动导盲模式还是人工导盲模式,从而提高导盲的准确性。
语音导航单元34,用于基于确定的导盲模式进行实时语音导航。
具体地,在本发明实施例中,导盲模式包括人工导盲模式和自动导盲模式,其中,人工导盲模式通过与服务端进行无线通信连接,由服务端进行实时人工语音导航。自动导盲模式由智能导盲头戴设备内置导航进行语音导航。
可选地,如图3b所示,所述路径规划单元31包括:
定位模块311,用于定位用户当前的位置,获取当前位置信息;
空闲率获取模块312,用于获取服务端的空闲率;
路径规划模块313,用于根据所述当前位置信息、所述目的地位置信息、所述服务端的空闲率以及当前城市道路交通状况,规划并计算用户从当前位置到目的地位置的最优路径。
具体地,通过GPS(Global Positioning System,全球定位系统)定位用户当前的位置,获取当前位置信息。根据所述当前位置信息、所述目的地位置信息以及当前城市道路交通状况即可规划并计算用户从当前位置到目的地位置的最优路径。在本发明实施例中,进一步获取服务端的空闲率,空闲率是指服务端的没被占用的比率,例如,当服务端有100个人工通道,被占用了70个通道,那么空闲率=(服务端总通道数-占用通道数)/服务端总通道数,即空闲率为30%。智能导盲头戴设备根据当前位置信息、目的地位置信息以及服务端的空闲率,再结合当前城市道路交通状况,为用户合理规划和计算从当前位置到目的地位置的最优路径。一般地,最优路径可以为当前位置到目的地位置的最短路径,此时,结合服务端的空闲率与城市道路交通状况,规划从当前位置到目的地位置最近的路径。可选地,最优路径是指与用户需求最相近、最匹配的路径。例如,用户需求以行走路程最方便为优先,则在规划从当前位置到目的地位置的路径时,结合服务端的空闲率与城市道路交通状况,规划最方便用户行走的路径。
可选地,如图3c所示,所述导盲模式确定单元33包括:
路况分析模块331,用于基于所述实景路况图像信息,对当前位置的路况进行路况分析;
路况确定模块332,用于确定当前位置的路况是否属于预设路况,其中,所述预设路况包括交叉路口和拥挤路段;
人工模式确定模块333,用于若属于预设路况,则确定为人工导盲模式;
自动模式确定模块334,用于若不属于预设路况,则确定为自动导盲模式。
在本发明实施例中,通过3D摄像头采集的实景路况图像信息实时处理,分析用户根据规划的行走路径的行走过程中当前位置的路况,即根据所述实景路况图像信息分析当前位置的路形,和/或当前位置路段的人流拥挤程度,并进一步判断是否是预设路况中的交叉路口,和/或当前位置路段的人流拥挤程度是否超过预设的阈值。若当前位置属于预设路况中的交叉路口,和/或当前位置路段的人流拥挤程度不小于预设的阈值,则将导盲模式确定为人工导盲模式。若当前位置不属于预设路况中的交叉路口,且当前位置路段的人流拥挤程度小于预设的阈值,则将导盲模式确定为自动导盲模式。
在本发明实施例中,由于实时基于实景路况图像信息进行分析处理,通过实时判断当前位置的路况信息,实时切换确定导盲模式,从而提高为盲人语音导航的准确性。
可选地,如图3d所示,在人工导盲模式下,所述语音导航单元34包括:
姿态信息获取模块341,用于获取用户的姿态信息;
信息发送模块342,用于实时发送实景路况图像信息与用户的姿态信息至服务端;
语音指令接收模块343,用于接收服务端发送的语音导航指令。
具体地,用户姿态信息为用户佩戴智能导盲头戴设备的状态信息,例如,智能导盲头戴设备是否处于摇晃状态。服务端基于接收的实景路况图像信息与用户的姿态信息,从而可准确判断用户当前的位置信息以及当前的状态,即方便服务端人工判断用户行走的正前方是否有障碍物,并发送语音导航指令至智能导盲头戴设备,智能导盲头戴设备接收该语音导航指令,为用户提高导航。
在自动导盲模式下,所述语音导航单元34还包括:
图像处理分析模块344,用于对所述实景路况图像信息进行图像处理分析;
姿态信息检测模块345,用于检测用户当前的姿态信息;
障碍物检测模块346,用于基于所述实景路况图像信息的图像处理分析结果与所述用户当前的姿态信息,检测当前位置的预设范围内是否存在障碍物;
提示模块347,用于若检测到障碍物,则发送震动提示用户避让障碍物。
具体地,在本发明实施例中,通过实景路况图像信息的图像处理分析结果初步判断存在障碍物,再根据所述用户当前的姿态信息,进一步检测用户的行走方向的预设范围内是否存在阻碍用户行走的障碍物,若检测到障碍物,则发送震动提示用户避让障碍物。可选地,检测到障碍物,可发送铃声加震动的提示,在本发明实施例中,提示方式不做限定。
本发明第三实施例中,通过接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径,并实时采集用户根据所述行走路径行走的过程中的实景路况图像信息,再基于所述实景路况图像信息,确定当前位置的路况是否属于预设路况,若属于预设路况,则确定为人工导盲模式,若不属于预设路况,则确定为自动导盲模式,实时确定导盲模式,可提高导航过程中对用户当前位置环境判断的准确性,最后基于确定的导盲模式进行实时语音导航。上述方法能够结合自动导盲和人工导盲,通过语音实时交互进行导航,从而提高导航的准确性与盲人出行的安全性。
实施例四:
图4是本发明一实施例提供的头戴设备的示意图。如图4所示,该实施例的头戴设备4包括:处理器40、存储器41以及存储在所述存储器41中并可在所述处理器40上运行的计算机程序42,例如智能导盲程序。所述处理器40执行所述计算机程序42时实现上述各个智能导盲方法实施例中的步骤,例如图2所示的步骤201至204。或者,所述处理器40执行所述计算机程序42时实现上述各装置实施例中各模块/单元的功能,例如图3所示单元31至34的功能。
示例性的,所述计算机程序42可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器41中,并由所述处理器40执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序42在所述头戴设备4中的执行过程。例如,所述计算机程序42可以被分割成路径规划单元、图像信息采集单元、导盲模式确定单元、语音导航单元34,各单元具体功能如下:
路径规划单元,用于接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径;
图像信息采集单元,用于实时采集用户根据所述行走路径行走的过程中的实景路况图像信息;
导盲模式确定单元,用于基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式;
语音导航单元,用于基于确定的导盲模式进行实时语音导航。
所述头戴设备可包括,但不仅限于,处理器40、存储器41。本领域技术人员可以理解,图4仅仅是头戴设备4的示例,并不构成对头戴设备4的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述头戴设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器40可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器41可以是所述头戴设备4的内部存储单元,例如头戴设备4的硬盘或内存。所述存储器41也可以是所述头戴设备4的外部存储设备,例如所述头戴设备4上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器41还可以既包括所述头戴设备4的内部存储单元也包括外部存储设备。所述存储器41用于存储所述计算机程序以及所述头戴设备所需的其他程序和数据。所述存储器41还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的系统实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,RandomAccess Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括是电载波信号和电信信号。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (10)
1.一种智能导盲方法,其特征在于,所述智能导盲方法包括:
接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径;
实时采集用户根据所述行走路径行走的过程中的实景路况图像信息;
基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式;
基于确定的导盲模式进行实时语音导航。
2.如权利要求1所述的智能导盲方法,其特征在于,所述基于所述实景路况图像信息,实时确定导盲模式,包括:
基于所述实景路况图像信息,对当前位置的路况进行路况分析;
确定当前位置的路况是否属于预设路况,其中,所述预设路况包括交叉路口和拥挤路段;
若属于预设路况,则确定为人工导盲模式;
若不属于预设路况,则确定为自动导盲模式。
3.如权利要求1所述的智能导盲方法,其特征在于,当所述智能穿戴设备处于人工导航模式时,所述基于确定的导盲模式进行语音导航,包括:
获取用户的姿态信息;
实时发送实景路况图像信息与所述用户的姿态信息至服务端;
实时接收服务端发送的语音导航指令。
4.如权利要求1所述的智能导盲方法,其特征在于,当所述智能穿戴设备处于自动导航模式时,所述基于确定的导盲模式进行语音导航,包括:
对所述实景路况图像信息进行图像处理分析;
检测用户当前的姿态信息;
基于所述实景路况图像信息的图像处理分析结果与所述用户当前的姿态信息,检测当前位置的预设范围内是否存在障碍物;
若检测到障碍物,则发送震动提示用户避让障碍物。
5.如权利要求1所述的智能导盲方法,其特征在于,所述接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径,包括:
定位用户当前的位置,获取当前位置信息;
获取服务端的空闲率;
根据所述当前位置信息、所述目的地位置信息、所述服务端的空闲率以及当前城市道路交通状况,规划并计算用户从当前位置到目的地位置的最优路径。
6.一种智能导盲装置,其特征在于,所述智能导盲装置包括:
路径规划单元,用于接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径;
图像信息采集单元,用于实时采集用户根据所述行走路径行走的过程中的实景路况图像信息;
导盲模式确定单元,用于基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式;
语音导航单元,用于基于确定的导盲模式进行实时语音导航。
7.如权利要求6所述的智能导盲装置,其特征在于,所述导盲模式确定单元包括:
路况分析模块,用于基于所述实景路况图像信息,对当前位置的路况进行路况分析;
路况确定模块,用于确定当前位置的路况是否属于预设路况,其中,所述预设路况包括交叉路口和拥挤路段;
人工模式确定模块,用于若属于预设路况,则确定为人工导盲模式;
自动模式确定模块,用于若不属于预设路况,则确定为自动导盲模式。
8.一种智能导盲系统,其特征在于,所述智能导盲系统包括:
所述智能导盲头戴设备,用于接收包含目的地位置信息的用户语音指令,根据所述用户语音指令规划行走路径;实时采集用户根据所述行走路径行走的过程中的实景路况图像信息;基于所述实景路况图像信息,实时确定导盲模式,其中,所述导盲模式包括自动导盲模式和人工导盲模式;基于确定的导盲模式进行实时语音导航。
所述智能导盲头戴设备,还用于实时发送实景路况图像信息与用户的姿态信息至服务端;
服务端,用于接收所述智能导盲头戴设备发送的实景路况图像信息与用户的姿态信息;
所述服务端,还用于基于所述智能导盲头戴设备发送的实景路况图像信息与用户的姿态信息,发送语音导航指令至所述智能导盲头戴设备;
所述智能导盲头戴设备,还用于接收所述服务端发送的语音导航指令。
9.一种头戴设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至5任一项所述方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至5任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710467105.1A CN107389065A (zh) | 2017-06-19 | 2017-06-19 | 一种智能导盲方法、智能导盲装置及智能导盲系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710467105.1A CN107389065A (zh) | 2017-06-19 | 2017-06-19 | 一种智能导盲方法、智能导盲装置及智能导盲系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107389065A true CN107389065A (zh) | 2017-11-24 |
Family
ID=60332539
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710467105.1A Pending CN107389065A (zh) | 2017-06-19 | 2017-06-19 | 一种智能导盲方法、智能导盲装置及智能导盲系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107389065A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108095987A (zh) * | 2017-12-06 | 2018-06-01 | 英业达科技有限公司 | 视障导航系统及其方法 |
CN108478398A (zh) * | 2018-05-17 | 2018-09-04 | 中兴健康科技有限公司 | 人工导盲系统及导盲方法 |
CN112198810A (zh) * | 2020-11-06 | 2021-01-08 | 青岛海尔空调器有限总公司 | 用于智能家居设备导航控制的方法、装置及智能家居设备 |
TWI770779B (zh) * | 2021-01-20 | 2022-07-11 | 鴻海精密工業股份有限公司 | 行人導航方法、電子裝置及存儲介質 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002303532A (ja) * | 2001-04-05 | 2002-10-18 | Hitachi Ltd | 視覚障害者の行動支援装置 |
WO2003078929A1 (en) * | 2002-03-20 | 2003-09-25 | Visuaide Inc. | Wireless handheld navigation system for visually impaired pedestrians |
CN101986673A (zh) * | 2010-09-03 | 2011-03-16 | 浙江大学 | 一种智能手机导盲器及导盲方法 |
CN101514903B (zh) * | 2009-03-17 | 2011-07-06 | 北京航空航天大学 | 一种基于高精度定位的智能导盲系统 |
CN203524952U (zh) * | 2013-10-11 | 2014-04-09 | 陈育聪 | 一种基于视频通讯的导盲系统 |
CN104739622A (zh) * | 2015-02-04 | 2015-07-01 | 覃泳睿 | 一种新型可穿戴导盲设备及其工作方法 |
CN105167967A (zh) * | 2015-09-14 | 2015-12-23 | 深圳市冠旭电子有限公司 | 一种导盲方法及系统 |
CN105563484A (zh) * | 2015-12-08 | 2016-05-11 | 深圳前海达闼云端智能科技有限公司 | 一种云机器人系统、机器人和机器人云平台 |
CN105686934A (zh) * | 2014-11-28 | 2016-06-22 | 航天信息股份有限公司 | 一种导盲方法、设备及系统 |
CN105686935A (zh) * | 2016-01-08 | 2016-06-22 | 中国石油大学(华东) | 一种智能导盲方法 |
CN106236525A (zh) * | 2016-09-23 | 2016-12-21 | 河海大学常州校区 | 一种语音导盲方法及系统 |
CN106377401A (zh) * | 2016-09-14 | 2017-02-08 | 上海高智科技发展有限公司 | 导盲前端设备、导盲后端设备及导盲系统 |
-
2017
- 2017-06-19 CN CN201710467105.1A patent/CN107389065A/zh active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002303532A (ja) * | 2001-04-05 | 2002-10-18 | Hitachi Ltd | 視覚障害者の行動支援装置 |
WO2003078929A1 (en) * | 2002-03-20 | 2003-09-25 | Visuaide Inc. | Wireless handheld navigation system for visually impaired pedestrians |
CN101514903B (zh) * | 2009-03-17 | 2011-07-06 | 北京航空航天大学 | 一种基于高精度定位的智能导盲系统 |
CN101986673A (zh) * | 2010-09-03 | 2011-03-16 | 浙江大学 | 一种智能手机导盲器及导盲方法 |
CN203524952U (zh) * | 2013-10-11 | 2014-04-09 | 陈育聪 | 一种基于视频通讯的导盲系统 |
CN105686934A (zh) * | 2014-11-28 | 2016-06-22 | 航天信息股份有限公司 | 一种导盲方法、设备及系统 |
CN104739622A (zh) * | 2015-02-04 | 2015-07-01 | 覃泳睿 | 一种新型可穿戴导盲设备及其工作方法 |
CN105167967A (zh) * | 2015-09-14 | 2015-12-23 | 深圳市冠旭电子有限公司 | 一种导盲方法及系统 |
CN105563484A (zh) * | 2015-12-08 | 2016-05-11 | 深圳前海达闼云端智能科技有限公司 | 一种云机器人系统、机器人和机器人云平台 |
CN105686935A (zh) * | 2016-01-08 | 2016-06-22 | 中国石油大学(华东) | 一种智能导盲方法 |
CN106377401A (zh) * | 2016-09-14 | 2017-02-08 | 上海高智科技发展有限公司 | 导盲前端设备、导盲后端设备及导盲系统 |
CN106236525A (zh) * | 2016-09-23 | 2016-12-21 | 河海大学常州校区 | 一种语音导盲方法及系统 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108095987A (zh) * | 2017-12-06 | 2018-06-01 | 英业达科技有限公司 | 视障导航系统及其方法 |
CN108478398A (zh) * | 2018-05-17 | 2018-09-04 | 中兴健康科技有限公司 | 人工导盲系统及导盲方法 |
CN108478398B (zh) * | 2018-05-17 | 2023-12-29 | 中兴健康科技有限公司 | 人工导盲系统及导盲方法 |
CN112198810A (zh) * | 2020-11-06 | 2021-01-08 | 青岛海尔空调器有限总公司 | 用于智能家居设备导航控制的方法、装置及智能家居设备 |
TWI770779B (zh) * | 2021-01-20 | 2022-07-11 | 鴻海精密工業股份有限公司 | 行人導航方法、電子裝置及存儲介質 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107389065A (zh) | 一种智能导盲方法、智能导盲装置及智能导盲系统 | |
CN106647765B (zh) | 一种基于割草机器人的规划平台 | |
CN106843230B (zh) | 应用于移动设备的虚拟墙系统及其实现方法 | |
CN105686935B (zh) | 一种智能导盲方法 | |
CN109816976A (zh) | 一种交通管理方法及系统 | |
CN109086919A (zh) | 一种景点路线规划方法、装置、系统及电子设备 | |
CN107144286A (zh) | 导航方法及装置 | |
CN106375448A (zh) | 图像处理方法和装置及系统 | |
CN104075720B (zh) | 基于多代价的路线规划设备和方法 | |
JP2018538627A (ja) | 交通道路の経路ヒートを取得する方法および装置 | |
CN110069408A (zh) | 自动驾驶车辆感知系统测试方法及装置 | |
CN109115237A (zh) | 一种乘车位置推荐方法及服务器 | |
CN102645228A (zh) | 一种车载导航系统通过性寻路算法 | |
CN112154449A (zh) | 车道线融合方法、车道线融合装置、车辆和存储介质 | |
CN106032986A (zh) | 一种导航方法、终端及系统 | |
CN106157670A (zh) | 一种具有信息采集和信息服务手段的路障系统及其控制方法 | |
CN104219760B (zh) | 混合定位方法与系统 | |
CN109117690A (zh) | 可行驶区域检测方法、装置、设备及存储介质 | |
CN106254541A (zh) | 一种为用户推送音乐的方法和装置 | |
CN109840454A (zh) | 目标物定位方法、装置、存储介质以及设备 | |
CN107564329A (zh) | 一种车辆查找方法及终端 | |
CN108733059A (zh) | 一种导览方法及机器人 | |
CN103854494B (zh) | 交通流量的控制方法、系统及装置 | |
CN109470234A (zh) | 智能导盲方法、设备、计算机可读存储介质和终端设备 | |
CN104268513B (zh) | 道路引导数据的获取方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20171124 |