CN103637900A - 基于图像识别的智能导盲杖 - Google Patents

基于图像识别的智能导盲杖 Download PDF

Info

Publication number
CN103637900A
CN103637900A CN201310711816.0A CN201310711816A CN103637900A CN 103637900 A CN103637900 A CN 103637900A CN 201310711816 A CN201310711816 A CN 201310711816A CN 103637900 A CN103637900 A CN 103637900A
Authority
CN
China
Prior art keywords
blind
navigation
guiding
subsystem
sidewalk
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310711816.0A
Other languages
English (en)
Other versions
CN103637900B (zh
Inventor
陈维
徐迈
王祖林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beihang University
Original Assignee
Beihang University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beihang University filed Critical Beihang University
Priority to CN201310711816.0A priority Critical patent/CN103637900B/zh
Publication of CN103637900A publication Critical patent/CN103637900A/zh
Application granted granted Critical
Publication of CN103637900B publication Critical patent/CN103637900B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明公开了一种基于图像识别的智能导盲杖,属于电子信息工程技术领域。所述的智能导盲杖由手型杖柄、智能杖体、滚轮杖尖和蓝牙耳机四部分组成,在导盲杖内嵌入人机交互子系统、路况识别子系统、导航子系统和滚轮制动系统。所述的蓝牙耳机配合人机交互子系统,实现良好人机交互。为了配合导盲杖的图像识别,本发明对现有盲道加以改进。本发明采用图像识别处理的方法,有效识别盲道与公交信息,协助盲人安全独立的出行。导盲杖滚轮杖尖的设计减小盲人受力,手型杖柄的设计融入人性化的设计因素,操作方便。本发明的设计具有实用性和可实现性,体现了强烈的人性关怀,具有良好的市场推广价值和意义。

Description

基于图像识别的智能导盲杖
技术领域
本发明属于电子信息工程技术领域,具体涉及一种基于图像识别的智能导盲杖。
背景技术
盲和视力损伤问题是世界上严重的社会和公共卫生问题之一,世界上视觉障碍者数量众多。目前全世界有盲人近4500万人,视力障碍患者达1.35亿人,中国是全世界盲人最多的国家之一,约有盲人600-700万,占世界盲人总数的18%,另有双眼低视力患者1200万。正常人通过视觉获得的信息占总信息量的70%-80%,黑暗的世界很大程度上限制了盲人信息的获取。
目前,辅助盲人日常出行的工具主要是导盲犬和导盲杖。导盲犬培训成本高,需要日常消耗,寿命有限,不具有广泛推广的可能性。导盲杖由撑杆和手柄组成,给予盲人行走支撑。目前导盲杖主要通过超声波模块来检测路况,提醒盲人躲避障碍物。但存在探测精度低、反馈滞后、功能单一、难于探测较远的或者悬挂的障碍物等缺陷。
仅通过目前的导盲工具,盲人无法独立到达不熟悉的地方,其出行在很大程度上依赖于亲朋的帮助。随着人机交互、计算机视觉和视频传感器的发展趋于成熟,新一代导盲杖的设计与研究存在很大的发展空间,导盲杖有望更加智能化,多功能化,并融入视频采集与图像处理的部分,协助盲人独立抵达目的地。
发明内容
本发明基于盲人独立出行的具体需求,为盲人设计最优出行路线方案,通过图像处理与识别,提供实时可靠的步行导航、公交导航,旨在引导盲人独立安全的到达目的地。
本发明提供的基于图像识别的智能导盲杖,所述的智能导盲杖由手型杖柄、智能杖体、滚轮杖尖和蓝牙耳机四部分组成。所述的手型杖柄位于导盲杖的上端,嵌入人机交互子系统;所述人机交互子系统与蓝牙耳机之间通过无线方式实现输入输出信息交互;同时,所述的人机交互子系统与智能杖体内的路况识别子系统进行信息交互;与滚轮杖尖内的导航子系统进行信息交互。所述手型杖柄的功能为:在盲人持导盲杖时,充当导盲杖的“双手”。盲人以十指相扣的形式握柄,不易滑落,且给其如朋友相伴的温暖感。
所述的智能杖体,位于导盲杖中间段,是导盲杖的主体部分,内部中空,嵌入路况识别子系统,所述的路况识别子系统内包含了微处理器。摄像头和LED照明装置与所述的微处理器连接。所述的路况识别子系统与滚轮杖尖的导航子系统相连。其功能为:充当导盲杖的“眼睛”与“大脑”,识别并判决路面与公交情况,给出相应的导航路线。所述的LED照明装置设置在智能杖体外表面,用于较暗环境下警示周围人注意盲人,同时可以为摄像头摄像提供照明。
所述的滚轮杖尖位于导盲杖底部,为导盲杖与地面接触的部分,滚轮杖尖固定连接在智能杖体的底端。其功能为:充当导盲杖的“双腿”,嵌入有导航子系统和滚轮制动系统,根据导航子系统提供的导航路线,滚轮杖尖调整转动方向,引导盲人按照导航路线轻松前进。滚轮杖尖滚动前进,减少盲人行走受力,在路况不佳的情况,及时抱死,给予盲人必要支撑。
所述的蓝牙耳机,其功能为充当导盲杖的“耳朵”与“嘴”,配合手型杖柄内人机交互子系统,盲人与导盲杖间进行“对话”,实现良好人机交互。此外,盲人可通过蓝牙耳机收听广播或语音节目,丰富行程。
为了配合图像识别,使盲道特征检测和边缘提取的效果更明显,并提供更多的导航信息。本发明对现有盲道加以简单改进,同时加入一些简单的路况标识,让导盲杖更好的识别盲道环境,并获取盲道提供的信息。
应用上述提供的基于图像识别的智能导盲杖,本发明采用图像识别处理的方法,识别路面与公交情况,引领盲人安全到达目的地,具体步骤如下:
第一步、盲人手握手型杖柄,打开总开关按键,导盲杖开始工作,执行对系统各部件的模块初始化。
第二步、打开导航按键,人机交互子系统识别起始点与目的地,确定目的地。起始点A可由GPS定位确定,终点B由人机交互子系统内的语音交互系统识别盲人输入的目的地语言信息确定。
第三步、导航子系统接收人机交互子系统的起始点与目的地信息,设计导航路线;导航路线通过人机交互子系统和蓝牙耳机反馈给盲人,盲人通过手型杖柄上的确定、取消按键进行进一步选择,得出最终的导航路线,并将导航路线通过人机交互子系统输出给滚轮杖尖内设置的导航子系统,准备实施导航。
第四步、导盲杖辅助盲人根据导航路线安全到达目的地。导航子系统与路况识别子系统共同作用,完成对盲道与公交信息的识别。导盲杖通过人机交互子系统与盲人交流,结合路况识别子系统和滚轮制动系统,引导盲人沿着导航路线行进,执行步行、搭乘公交车、打车等动作,引导盲人顺利到达目的地。
与现有技术相比,本发明的优点和积极效果是:
本发明采用图像识别处理的方法,有效识别盲道与公交信息,协助盲人安全独立的出行。导盲杖滚轮杖尖的设计减小盲人受力,手型杖柄的设计融入人性化的设计因素,操作方便。本发明的设计具有实用性和可实现性,体现了强烈的人性关怀,具有良好的市场推广价值和意义。
附图说明
图1改进盲道的结构示意图;
图2A~图2J为提示盲道的提示图标示意图;
图3智能导盲杖的结构示意图;
图4智能导盲杖的操作流程图;
图5路线规划部分的工作流程图;
图6语音交互系统的工作原理示意图;
图7路况识别子系统的工作原理示意图;
图8导航子系统的模式示意图;
图9步行导航的工作流程示意图;
图10公交导航的工作流程示意图。
具体实施方式
下面结合附图与具体实施例对本发明作进一步的描述:
图1为本发明提供的改进盲道的结构示意图,由行进盲道1和提示盲道2组成。为使盲道特征检测和边缘提取的效果更明显,有助于路况识别系统识别盲道,同时起到提醒路人的作用。本发明在盲道边缘3涂上一层不同于盲道颜色的对比强烈的亮色染料,如荧光红等,用于区分盲道区域。
参见图2A~图2J,提示盲道2可以提供丰富的提示信息,但不局限于示例。本发明充分利用提示盲道2的突出盲点,通过在提示盲道2的部分提示盲点涂上异于盲道的颜色,组成代表不同信息的提示图标,并建立提示图标与其对应指示信息的数据库。更具体地,提示图标既可以代表左转右转等简单的行走提示,如图2A中提示盲道中由实心点组成的“L”,对应左转(left),代表前方是左转路段的信息。提示图标也可以代表前方是地铁站或商店等地理位置的提示,如图2I中提示盲道中由实心点组成的S,对应商店(shop),代表前方是商店的信息。提示图标更可以代表对应候车点的到站公交具体是哪一路的信息,如图2G中提示盲道中由实心点组成的“B119”,对应公交119路(BUS119),代表此处是公交119路的候车位置。
图3为本发明提供的智能导盲杖的结构示意图,在本实施例中,所述智能导盲杖由手型杖柄4、智能杖体5、滚轮杖尖6及蓝牙耳机7四部分构成。
所述手型杖柄4的柄形为手心向上张开的手,手掌内嵌入人机交互子系统相关处理设备,手背部集成常用按键,方便盲人使用。其功能在于与盲人进行互动,通过提供十指相扣的握柄方式,让盲人感受如朋友相伴般的温暖。
所述的常用按键包括总开关按键、确定按键、取消按键、导航按键和收音机按键等,比如按下导航按键,导盲杖将会执行导航的一系列操作,按下收音机按键,将会打开收音机。
所述智能杖体5位于导盲杖中间段,内部空心,嵌入路况识别子系统,所述的路况识别子系统内包含微处理器,LED照明装置和摄像头等相关处理设备与微处理器相连,用于执行相应开关动作。所述的路况识别子系统的功能在于识别并判决路面与公交情况,为盲人进行实时导航。在所述智能杖体5的底部和顶部分别安装一个摄像头8,用于采集路面与公交的信息,但不局限于此,可根据需求反复试验得到最佳位置。一般会将两个摄像头8分别设置在手腕和脚踝的位置(对应于智能杖体5的两端位置),并且朝向前方。光线不好时,表面的LED照明装置辅助拍摄。
所述滚轮杖尖6,内部设置导航子系统和滚轮制动系统等相关处理设备,其功能在于提供导航路线,并引领盲人沿导航路线轻松前进。导盲杖倾斜于地面行进时,滚轮有效滑动,导盲杖接近垂直路面时,滚轮抱死,给予盲人支撑。同时,在滚轮制动系统控制下,滚轮杖尖6可根据导航路线调整转动角度,盲人根据感受到的滚轮转动调整身体适应转动方向,进而引导盲人有效前进。
所述蓝牙耳机7,与导盲杖绑定,直接佩戴在盲人耳朵上,其功能在于配合手型杖柄4内人机交互子系统,实现盲人与导盲杖间的良好交互,并可同时收听各类广播或语音节目,丰富盲人行程。
图4为本发明提供的智能导盲杖的导盲方法流程图,在本实施例中,包括如下步骤:
第一步、盲人手握手型杖柄4,打开总开关按键,导盲杖开始工作,执行对系统各部件的模块初始化。所述的初始化模块包括人机交互子系统、路况识别子系统、导航子系统和滚轮制动系统。
第二步、打开导航按键,人机交互子系统识别起始点与目的地,确定目的地。起始点A可由GPS定位确定,终点B由人机交互子系统内的语音交互系统识别盲人输入的目的地语言信息确定。
图6为语音交互系统的工作原理示意图。在本实施例中,手型杖柄4采用语音与按键结合的语音交互系统。盲人在出行过程中可按下手型杖柄4上的导航按键,通过蓝牙耳机语音输入目的地信息,语音交互系统接收并识别目的地,包括以下步骤,但不局限于以下处理方法:
1、语音识别系统对盲人输入语音进行采集,然后对输入语音进行预处理,所述的预处理包括语音信号采样、反混叠带通滤波,去除个体发音差异,去除设备、环境等引起的噪声影响。
2、对预处理后语音进行特征提取,提取输入语音中反映本质特征的声学参数。
3、模式匹配,是整个语音识别系统的核心,计算输入语音特征与储存有各种地点名词的声音模式库之间的相似度,判断盲人输入的目的地。为提高匹配的效率和质量,保证语音导航的可靠性,声音模式库事先采集地点名词语音,进行多次训练,按照一定规则对数据加以聚类,形成地点名词声音模式库。模式匹配时根据盲人所在城市进行小范围地点名词匹配,提高匹配速度与精度。
4、语音识别系统将识别的目的地通过蓝牙耳机告知盲人,盲人通过按下手型杖柄4上的确定或者取消按键进一步确认导盲杖识别的输出地点,最后确定目的地。
第三步、导航子系统接收人机交互子系统的起始点与目的地信息,设计导航路线。导航路线通过人机交互子系统和蓝牙耳机反馈给盲人,盲人通过手型杖柄上的确定、取消按键进行进一步选择,得出最终的导航路线,并将导航路线通过人机交互子系统输出给滚轮杖尖内设置的导航子系统,准备实施导航。
所述的导航子系统包含的导航模式有步行导航、公交导航和智能打车路线以及三者组合路线。
第四步、导盲杖辅助盲人根据导航路线安全到达目的地。导航子系统与路况识别子系统共同作用,完成对盲道与公交信息的识别。导盲杖通过人机交互子系统与盲人交流,结合路况识别子系统和滚轮制动系统,引导盲人沿着导航路线行进,执行步行、搭乘公交车、打车等动作,引导盲人顺利到达目的地。
图5为路线规划模块的工作流程图,实现盲人所在地(起点)与目的地(终点)之间最佳路线查询,在本实施例中,导航子系统内包含有路线规划模块,路线规划模块建立数学模型,将影响盲人出行的各种因素综合为安全性、便利性、时间三个路线评价指标,遍历从起点到终点的各种路线,得到最适合盲人行走的路线。更具体地,路线规划模块通过如下步骤实现路线规划:
1、量化安全性、便利性和时间三个指标。安全性指标主要与盲道建设、城市交通、行人数量等有关,本发明可以调用城市建设局与交通局的有关数据将安全性指标量化,得到综合评价指标。便利性指标主要与盲人采取的行走方式有关,本发明中将盲人出行分解为各种简单动作的集合,如直线行走、左转、右转、过马路、上台阶和下台阶等。根据盲人执行各动作的难易程度,折合成便利性指标的不同系数,难度越大,折合系数越大,得到便利性评价的多元线性效应函数。时间指标为步行时间和坐车时间的总和。步行时间中考虑盲人执行各动作的时间,估计步行速度,得出盲人步行时间,坐车时间中结合交通情况,得出公交车或者出租车行驶时间。
2、建立适当的函数关系求解起始点A与终点B间的路线最优化问题。比如可采用简单的线性函数,但不局限于此。分配给量化的安全性、便利性和时间三个指标恰当的折合系数,并进行线性相加,得到关于三个指标的多元一次线性优化函数。
3、不同导航路线方案将得到不同的优化函数值,按照优化函数值的大小排序,将排序后的导航路线(一般会有两个以上的导航路线供选择)与其优化函数值输出给人机交互子系统,盲人根据人机交互子系统提供的导航路线,执行确认按键以及取消按键,找到适合自己出行的某一个导航路线,确定出具体的出行方案。
图7为路况识别子系统的工作原理示意图。在本实施例中,智能杖体5的底部和顶部装有摄像头8,采集路面与公交图像数据,实时传递给路况识别子系统中的微处理器,实现对盲道的识别、判决。当环境比较暗时,微处理器发出指令打开LED照明装置,以便于摄像头8采集到明亮的图像。为避免对图像的大量重复采集或遗漏采集,减小图像存储与处理量,摄像头的图像采集频率自动适应盲人走路速度,再从接收的视频流中截取视频图像,传递给微处理器。更具体地,以盲道图像处理为例,包括以下步骤,但不局限于以下处理方法:
1、对采集的盲道图像进行预处理,通过图像灰度修正、去噪、锐化、边缘增强等,去除干扰、噪声及差异,提高图像中盲道部分的亮度值。
2、结合盲道先验知识,识别盲道形状、颜色与边缘,从周围环境中提取盲道的边缘轮廓。比如采用康力(canny)边缘提取方法获取盲道边缘轮廓,但不局限于此方法。
3、在边缘提取的基础上,对提取出的盲道区域进行图像分割,探测提示盲道内提示图标。
4、结合微处理器中存储的盲道先验知识,对图像分割后的盲道进行分类判决:判断盲道上有无障碍,识别盲道提示图标并输出其对应提示信息。盲道提示图标的识别是路况识别子系统工作的关键。本发明通过识别盲道提示图标,遍历微处理器中存储的提示图标数据库,即可获得相应的提示信息,给予盲人相应的导航提示。当城市进行建设改造或公交路线调整后,只需要在提示图标数据库改变相应提示图标对应的提示信息,或者增加一些提示图标并对此类图标进行多次训练即可满足需求。
图8为导航子系统的模式示意图,包括步行导航、公交导航、打车导航或者三者模式的组合。步行导航,导盲杖引导盲人直走、拐弯、避障、过马路,上台阶等,安全到达目的地。公交导航,导盲杖引导盲人走到候车区域,顺利搭乘目标公交车,在指定站下车,换乘,安全到达目的地。打车导航,导盲杖自动查询打车费用,开启智能打车功能,帮助盲人顺利到达目的地。更具体地,步行导航与公交导航的工作方式如下,但不局限于示例。
图9为步行导航的工作流程示意图,在本实施实例中,路况识别子系统采集盲道信息,进行相应判决,确定步行场景。滚轮制动系统(动作系统)根据特定步行场景执行相应操作,完成自适应导航,导盲杖引导盲人直走、拐弯、避障、过马路,上台阶等,安全到达目的地。为提高导盲速度,事先收集步行场景组成场景集,训练出与之对应的反馈模板。更具体地,本发明中例举直走,拐弯,过马路几个场景的导航部分作为示例说明,但不局限于此。
(1)直走,路况识别子系统检测前行盲道上有无障碍物:若无,引导盲人继续前进;若有,提示盲人暂停行走。再次检测,若障碍物与静止盲人有相对运动,为暂时性堵塞,发出提示音,提醒路人注意到盲人;若前方为静止障碍物,则引导盲人绕弯行走。
(2)转弯,路况识别子系统根据导航路线和提示图标,确定转弯模式。滚轮杖尖部分在滚轮制动系统控制下缓慢改变方向,带动盲人身体转动到最舒适的持杖方向,即完成拐弯。同时检测盲道上有无障碍物,引导盲人继续前进。
(3)过马路,路况识别子系统根据导航路线和提示图标,确定过马路模式。杖体闪光并发出鸣叫声,引起路人与司机的注意,引导盲人安全穿过马路。
图10为公交导航的工作流程示意图。在本实施实例中,导盲杖引导盲人走到候车区域,顺利搭乘目标公交车,在指定站下车,换乘,安全到达目的地。本发明不是通过直接读取公交数字显示器上的数字来识别公交路数,而是采用一种新的思路,利用路况识别子系统采集盲道图像,读取候车处提示盲道的提示信息,获取候车处到站公交路数。目标公交到站后,再执行相应导航,引导盲人顺利乘坐公交车。更具体地,公交导航包括以下步骤,但不局限于以下处理方法。
1、识别目标公交车。路况识别子系统不断执行对盲道图像的采集与判断,匹配微处理器中存储的盲道图标先验知识,确定不同候车位置对应的到站公交路数,并基于对图像的理解,判断公交路数是否为盲人要乘坐的目标公交车,引领盲人到达正确的候车位置。
2、协助上车。路况识别子系统摄像头在盲人候车时,采集过往车辆信息,进行公交轮廓判断,确定目标公交车到站后,导盲杖发出“您好,我是盲人,我要乘坐**路公交”的提示音,让乘务员注意到盲人,协助其上车。
3、协助下车。导盲杖识别报站声,提示盲人下车时间。到达目标站后,导盲杖发出“您好,我是盲人,我要下车”的提示音,在乘务员协助下安全下车。
在不脱离本发明的精神和本质属性下,可以在其他具体形式中实现本发明,因此,除了上述说明书之外,还可以参考所附的权利要求,作为本发明的范围的指示。

Claims (10)

1.基于图像识别的智能导盲杖,其特征在于:所述的智能导盲杖由手型杖柄、智能杖体、滚轮杖尖和蓝牙耳机四部分组成;所述的手型杖柄位于导盲杖的上端,嵌入人机交互子系统;所述人机交互子系统与蓝牙耳机之间通过无线方式实现输入输出信息交互;同时,所述的人机交互子系统与智能杖体内的路况识别子系统进行信息交互;与滚轮杖尖内的导航子系统进行信息交互;所述的智能杖体,位于导盲杖中间段,内部中空,嵌入路况识别子系统,所述的路况识别子系统内包含了微处理器;摄像头和LED照明装置与所述的微处理器连接;所述的路况识别子系统与滚轮杖尖的导航子系统相连;所述的滚轮杖尖位于导盲杖底部,为导盲杖与地面接触的部分,滚轮杖尖固定连接在智能杖体的底端;所述的蓝牙耳机配合手型杖柄内人机交互子系统,盲人与导盲杖间进行“对话”,实现人机交互。
2.根据权利要求1所述的基于图像识别的智能导盲杖,其特征在于:所述手型杖柄的柄形为手心向上张开的手,手背部集成常用按键;所述的常用按键包括总开关按键、确定按键、取消按键、导航按键和收音机按键。
3.根据权利要求1所述的基于图像识别的智能导盲杖,其特征在于:所述的摄像头有两个,分别设置在所述智能杖体的底部和顶部,并且朝向前方;所述的LED照明装置设置在智能杖体的外表面。
4.根据权利要求1所述的基于图像识别的智能导盲杖的导盲方法,其特征在于,具体步骤如下:
第一步、盲人手握手型杖柄,打开总开关按键,导盲杖开始工作,执行对系统各部件的模块初始化;
第二步、打开导航按键,人机交互子系统识别起始点与目的地,确定目的地;
第三步、导航子系统接收人机交互子系统的起始点与目的地,设计导航路线;导航路线通过人机交互子系统和蓝牙耳机反馈给盲人,盲人通过手型杖柄上的确定、取消按键进行进一步选择,得出最终的导航路线,并将导航路线通过人机交互子系统输出给滚轮杖尖内设置的导航子系统,准备实施导航;
第四步、导盲杖辅助盲人根据导航路线安全到达目的地;导航子系统与路况识别子系统共同作用,完成对盲道与公交信息的识别;导盲杖通过人机交互子系统与盲人交流,结合路况识别子系统和滚轮制动系统,引导盲人沿着导航路线行进,执行步行、搭乘公交车、打车动作,引导盲人顺利到达目的地。
5.根据权利要求4所述的基于图像识别的智能导盲杖的导盲方法,其特征在于:所述的起始点由GPS定位确定,目的地由人机交互子系统内的语音交互系统识别盲人输入的目的地语言信息确定。
6.根据权利要求5所述的基于图像识别的智能导盲杖的导盲方法,其特征在于:所述的语音交互系统的工作方法:
a、语音识别系统对盲人输入语音进行采集,然后对输入语音进行预处理,所述的预处理包括语音信号采样、反混叠带通滤波,去除个体发音差异,去除设备、环境引起的噪声影响;
b、对预处理后语音进行特征提取,提取输入语音中反映本质特征的声学参数;
c、模式匹配,计算输入语音特征与储存有各种地点名词的声音模式库之间的相似度,判断盲人输入的目的地;
d、语音识别系统将识别的目的地通过蓝牙耳机告知盲人,盲人通过按下手型杖柄上的确定按键或者取消按键进一步确认导盲杖识别的输出地点,最后确定目的地。
7.根据权利要求4所述的基于图像识别的智能导盲杖的导盲方法,其特征在于:所述的导航子系统内包含有路线规划模块,路线规划模块通过如下步骤实现路线规划:
i、量化安全性、便利性和时间三个指标;
ii、建立所述的量化指标之间的函数关系,求解起始点A与终点B间的路线最优化问题;
iii、不同导航路线方案将得到不同的优化函数值,按照优化函数值的大小排序,将排序后的导航路线与其优化函数值输出给人机交互子系统,盲人根据人机交互子系统提供的导航路线,执行确认按键以及取消按键,找到适合自己出行的某一个导航路线,确定出具体的出行方案。
8.根据权利要求4所述的基于图像识别的智能导盲杖的导盲方法,其特征在于:所述的路况识别子系统中包含微处理器,实现对盲道的识别、判决,具体处理方法如下:
I、对采集的盲道图像进行预处理,通过图像灰度修正、去噪、锐化和边缘增强,去除干扰、噪声及差异,提高图像中盲道部分的亮度值;
II、结合盲道先验知识,识别盲道形状、颜色与边缘,从周围环境中提取盲道的边缘轮廓;
III、对提取出的盲道区域进行图像分割,探测提示盲道内提示图标;
IV、结合微处理器中存储的盲道先验知识,对图像分割后的盲道进行分类判决:判断盲道上有无障碍,识别盲道提示图标并输出其对应提示信息。
9.根据权利要求4所述的基于图像识别的智能导盲杖的导盲方法,其特征在于:所述的导航子系统的模式包括步行导航、公交导航、打车导航或者三者模式的组合;步行导航,导盲杖引导盲人直走、拐弯、避障、过马路和上台阶,安全到达目的地;公交导航,导盲杖引导盲人走到候车区域,顺利搭乘目标公交车,在指定站下车,换乘,安全到达目的地;打车导航,导盲杖自动查询打车费用,开启智能打车功能,帮助盲人顺利到达目的地。
10.应用于权利要求1所述的导盲杖的盲道,其特征在于:所述盲道由行进盲道和提示盲道组成;在盲道边缘涂上一层不同于盲道颜色的对比强烈的染料,用于区分盲道区域;将提示盲道的部分提示盲点涂上异于盲道的颜色,组成代表不同信息的提示图标,并建立提示图标与其对应指示信息的数据库。
CN201310711816.0A 2013-12-20 2013-12-20 基于图像识别的智能导盲杖 Active CN103637900B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310711816.0A CN103637900B (zh) 2013-12-20 2013-12-20 基于图像识别的智能导盲杖

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310711816.0A CN103637900B (zh) 2013-12-20 2013-12-20 基于图像识别的智能导盲杖

Publications (2)

Publication Number Publication Date
CN103637900A true CN103637900A (zh) 2014-03-19
CN103637900B CN103637900B (zh) 2015-07-08

Family

ID=50243282

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310711816.0A Active CN103637900B (zh) 2013-12-20 2013-12-20 基于图像识别的智能导盲杖

Country Status (1)

Country Link
CN (1) CN103637900B (zh)

Cited By (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104771296A (zh) * 2014-06-16 2015-07-15 刘洋 一种盲人使用的路障检测提醒系统
CN104872943A (zh) * 2015-05-14 2015-09-02 刘超 一种智能手杖
CN105012118A (zh) * 2014-04-22 2015-11-04 上海斐讯数据通信技术有限公司 一种智能导盲的方法及智能导盲杆
CN105078720A (zh) * 2015-09-06 2015-11-25 京东方科技集团股份有限公司 一种智能导盲装置
CN105167967A (zh) * 2015-09-14 2015-12-23 深圳市冠旭电子有限公司 一种导盲方法及系统
CN105407288A (zh) * 2015-12-07 2016-03-16 哈尔滨工业大学深圳研究生院 一种适用于导盲杖系统的图像采集方法
CN105496740A (zh) * 2016-01-08 2016-04-20 中国石油大学(华东) 一种智能导盲装置及安装有该装置的导盲杖
CN105709291A (zh) * 2016-01-07 2016-06-29 王贵霞 一种智能血液透析过滤装置
CN106959690A (zh) * 2017-02-13 2017-07-18 北京百度网讯科技有限公司 无人驾驶车辆的寻找方法、装置、设备及存储介质
CN107224393A (zh) * 2017-08-10 2017-10-03 李海强 可规划路线的导盲手杖
CN107753250A (zh) * 2017-11-16 2018-03-06 中国建筑设计院有限公司 电子盲道及与盲道配合使用的盲人探测手杖
CN108366899A (zh) * 2017-08-02 2018-08-03 深圳前海达闼云端智能科技有限公司 一种图像处理方法、系统以及智能导盲装置
CN108417025A (zh) * 2018-03-10 2018-08-17 张定宇 一种盲人路口通行引导系统、装置及其工作方法
CN108433959A (zh) * 2018-03-26 2018-08-24 湖北大学 多功能智能型导盲杖及其使用方法
CN108670746A (zh) * 2018-06-29 2018-10-19 合肥信亚达智能科技有限公司 一种高识别度路径优化智能监控导盲方法及系统
CN108670745A (zh) * 2018-06-29 2018-10-19 合肥信亚达智能科技有限公司 一种基于语音识别准入的盲人导航方法及系统
CN108670747A (zh) * 2018-06-29 2018-10-19 合肥思博特软件开发有限公司 一种盲人智能辅助出行方法及系统
CN108743266A (zh) * 2018-06-29 2018-11-06 合肥思博特软件开发有限公司 一种盲人智能导航避障出行辅助方法及系统
CN108836770A (zh) * 2018-06-29 2018-11-20 合肥思博特软件开发有限公司 一种实际交通环境下实时避障优化导盲监控方法及系统
CN108938344A (zh) * 2017-05-29 2018-12-07 宁波市镇海怡福莱文化创意有限公司 盲拐与色标组合方法
CN109009902A (zh) * 2017-06-12 2018-12-18 京东方科技集团股份有限公司 导盲杖及导盲方法
CN109602585A (zh) * 2018-11-30 2019-04-12 西安工程大学 一种导盲眼镜及其防撞预警方法
CN109645633A (zh) * 2019-01-21 2019-04-19 珠海格力电器股份有限公司 一种手杖、导航方法、装置
CN109745206A (zh) * 2019-02-27 2019-05-14 长沙伯劳智能科技有限公司 一种盲人走动智能导向棒
CN109938974A (zh) * 2019-04-01 2019-06-28 杨天歌 一种视障人士用便携式智能导盲设备及导盲方法
CN110353958A (zh) * 2019-08-09 2019-10-22 朱原灏 一种协助盲人乘车的便携式装置及其方法
CN110575371A (zh) * 2019-10-22 2019-12-17 大连民族大学 一种智能导盲手杖及控制方法
CN110916989A (zh) * 2019-11-20 2020-03-27 颜振 导盲手杖
CN110974639A (zh) * 2019-12-02 2020-04-10 姜国宁 一种基于导盲耳机的信息确定方法和装置
CN112985438A (zh) * 2021-02-07 2021-06-18 北京百度网讯科技有限公司 智能导盲杖的定位方法、装置、电子设备及存储介质
CN113069329A (zh) * 2020-01-06 2021-07-06 奥迪股份公司 步行辅助系统及方法
WO2022085369A1 (ja) * 2020-10-22 2022-04-28 パナソニック株式会社 歩行者装置、情報収集装置、基地局装置、測位方法、利用者管理方法、情報収集方法、及び施設監視方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201596066U (zh) * 2009-10-30 2010-10-06 山东科技职业学院 导盲杖
CN201624953U (zh) * 2010-04-17 2010-11-10 程卫国 盲人导航手杖
CN202236171U (zh) * 2011-07-28 2012-05-30 张华昱 一种图像超声波导盲系统装置
CN203328996U (zh) * 2013-06-08 2013-12-11 刘叶兴 导盲机器人控制系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201596066U (zh) * 2009-10-30 2010-10-06 山东科技职业学院 导盲杖
CN201624953U (zh) * 2010-04-17 2010-11-10 程卫国 盲人导航手杖
CN202236171U (zh) * 2011-07-28 2012-05-30 张华昱 一种图像超声波导盲系统装置
CN203328996U (zh) * 2013-06-08 2013-12-11 刘叶兴 导盲机器人控制系统

Cited By (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105012118A (zh) * 2014-04-22 2015-11-04 上海斐讯数据通信技术有限公司 一种智能导盲的方法及智能导盲杆
CN105012118B (zh) * 2014-04-22 2017-08-25 上海斐讯数据通信技术有限公司 一种智能导盲的方法及智能导盲杆
CN104771296A (zh) * 2014-06-16 2015-07-15 刘洋 一种盲人使用的路障检测提醒系统
CN104872943A (zh) * 2015-05-14 2015-09-02 刘超 一种智能手杖
CN104872943B (zh) * 2015-05-14 2016-08-17 刘超 一种智能手杖
CN105078720B (zh) * 2015-09-06 2017-11-14 京东方科技集团股份有限公司 一种智能导盲装置
CN105078720A (zh) * 2015-09-06 2015-11-25 京东方科技集团股份有限公司 一种智能导盲装置
US9909893B2 (en) 2015-09-06 2018-03-06 Boe Technology Group Co., Ltd. Intelligent blind guiding device
CN105167967A (zh) * 2015-09-14 2015-12-23 深圳市冠旭电子有限公司 一种导盲方法及系统
CN105407288A (zh) * 2015-12-07 2016-03-16 哈尔滨工业大学深圳研究生院 一种适用于导盲杖系统的图像采集方法
CN105709291B (zh) * 2016-01-07 2018-12-04 王贵霞 一种智能血液透析过滤装置
CN105709291A (zh) * 2016-01-07 2016-06-29 王贵霞 一种智能血液透析过滤装置
CN105496740A (zh) * 2016-01-08 2016-04-20 中国石油大学(华东) 一种智能导盲装置及安装有该装置的导盲杖
CN106959690A (zh) * 2017-02-13 2017-07-18 北京百度网讯科技有限公司 无人驾驶车辆的寻找方法、装置、设备及存储介质
CN108938344A (zh) * 2017-05-29 2018-12-07 宁波市镇海怡福莱文化创意有限公司 盲拐与色标组合方法
US10914591B2 (en) 2017-06-12 2021-02-09 Boe Technology Group Co., Ltd. Guide cane and method for guiding used for guide cane
CN109009902B (zh) * 2017-06-12 2020-08-04 京东方科技集团股份有限公司 导盲杖及导盲方法
WO2018227910A1 (zh) * 2017-06-12 2018-12-20 京东方科技集团股份有限公司 导盲杖及导盲方法
CN109009902A (zh) * 2017-06-12 2018-12-18 京东方科技集团股份有限公司 导盲杖及导盲方法
WO2019024010A1 (zh) * 2017-08-02 2019-02-07 深圳前海达闼云端智能科技有限公司 一种图像处理方法、系统以及智能导盲装置
CN108366899A (zh) * 2017-08-02 2018-08-03 深圳前海达闼云端智能科技有限公司 一种图像处理方法、系统以及智能导盲装置
CN107224393A (zh) * 2017-08-10 2017-10-03 李海强 可规划路线的导盲手杖
CN107753250B (zh) * 2017-11-16 2024-01-26 中国建筑设计院有限公司 电子盲道及与盲道配合使用的盲人探测手杖
CN107753250A (zh) * 2017-11-16 2018-03-06 中国建筑设计院有限公司 电子盲道及与盲道配合使用的盲人探测手杖
CN108417025A (zh) * 2018-03-10 2018-08-17 张定宇 一种盲人路口通行引导系统、装置及其工作方法
CN108433959A (zh) * 2018-03-26 2018-08-24 湖北大学 多功能智能型导盲杖及其使用方法
CN108836770A (zh) * 2018-06-29 2018-11-20 合肥思博特软件开发有限公司 一种实际交通环境下实时避障优化导盲监控方法及系统
CN108743266A (zh) * 2018-06-29 2018-11-06 合肥思博特软件开发有限公司 一种盲人智能导航避障出行辅助方法及系统
CN108670746A (zh) * 2018-06-29 2018-10-19 合肥信亚达智能科技有限公司 一种高识别度路径优化智能监控导盲方法及系统
CN108670745A (zh) * 2018-06-29 2018-10-19 合肥信亚达智能科技有限公司 一种基于语音识别准入的盲人导航方法及系统
CN108670747A (zh) * 2018-06-29 2018-10-19 合肥思博特软件开发有限公司 一种盲人智能辅助出行方法及系统
CN109602585A (zh) * 2018-11-30 2019-04-12 西安工程大学 一种导盲眼镜及其防撞预警方法
CN109602585B (zh) * 2018-11-30 2022-02-22 西安工程大学 一种导盲眼镜及其防撞预警方法
CN109645633A (zh) * 2019-01-21 2019-04-19 珠海格力电器股份有限公司 一种手杖、导航方法、装置
CN109645633B (zh) * 2019-01-21 2024-02-09 珠海格力电器股份有限公司 一种手杖、导航方法、装置
CN109745206A (zh) * 2019-02-27 2019-05-14 长沙伯劳智能科技有限公司 一种盲人走动智能导向棒
CN109938974A (zh) * 2019-04-01 2019-06-28 杨天歌 一种视障人士用便携式智能导盲设备及导盲方法
CN110353958A (zh) * 2019-08-09 2019-10-22 朱原灏 一种协助盲人乘车的便携式装置及其方法
CN110575371A (zh) * 2019-10-22 2019-12-17 大连民族大学 一种智能导盲手杖及控制方法
CN110916989A (zh) * 2019-11-20 2020-03-27 颜振 导盲手杖
CN110974639A (zh) * 2019-12-02 2020-04-10 姜国宁 一种基于导盲耳机的信息确定方法和装置
CN113069329A (zh) * 2020-01-06 2021-07-06 奥迪股份公司 步行辅助系统及方法
WO2022085369A1 (ja) * 2020-10-22 2022-04-28 パナソニック株式会社 歩行者装置、情報収集装置、基地局装置、測位方法、利用者管理方法、情報収集方法、及び施設監視方法
CN112985438A (zh) * 2021-02-07 2021-06-18 北京百度网讯科技有限公司 智能导盲杖的定位方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN103637900B (zh) 2015-07-08

Similar Documents

Publication Publication Date Title
CN103637900B (zh) 基于图像识别的智能导盲杖
CN103126862B (zh) 基于gps、gprs和rfid的室外导盲机器人及导航定位方法
CN105662797B (zh) 一种智能物联网导盲杖
CN105167967B (zh) 一种导盲方法及系统
CN105496740B (zh) 一种智能导盲装置及安装有该装置的导盲杖
CN105868696B (zh) 一种检测多车道车道线的方法和装置
CN204484697U (zh) 智能导盲拐杖
CN105640748B (zh) 一种振动导盲衣服
CN110368275A (zh) 一种导盲机器人及导盲系统、导盲方法
CN204972147U (zh) 基于Kinect的盲人导航系统
CN106236525A (zh) 一种语音导盲方法及系统
CN206003392U (zh) 一种聋哑人社交手套
CN108836769A (zh) 一种智能盲人出行辅助装置及方法
CN105565212A (zh) 基于肌电流和运动传感器的手势控制的搬运堆垛车及方法
CN208448079U (zh) 一种基于智能交互的导盲系统
CN107242964A (zh) 基于深度学习的导盲系统及工作方法
CN109938974A (zh) 一种视障人士用便携式智能导盲设备及导盲方法
CN104200531A (zh) 一种智能公交卡系统
CN109662830B (zh) 一种语言导盲手杖、基于该手杖的深度神经网络优化方法
CN106236524A (zh) 一种盲人助行器
CN109421059A (zh) 一种新型云智能导盲机器人
CN205814622U (zh) 一种盲人智能助行服
CN113624236A (zh) 基于移动设备的盲人导航系统及导航方法
Gintner et al. Improving reverse geocoding: Localization of blind pedestrians using conversational ui
CN114533503B (zh) 一种智慧助盲出行的眼镜系统及交互方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant