CN110335486A - 一种新型色盲辅助驾驶系统 - Google Patents
一种新型色盲辅助驾驶系统 Download PDFInfo
- Publication number
- CN110335486A CN110335486A CN201910609070.XA CN201910609070A CN110335486A CN 110335486 A CN110335486 A CN 110335486A CN 201910609070 A CN201910609070 A CN 201910609070A CN 110335486 A CN110335486 A CN 110335486A
- Authority
- CN
- China
- Prior art keywords
- image
- value
- traffic lights
- color
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 201000007254 color blindness Diseases 0.000 title claims abstract description 21
- 208000036693 Color-vision disease Diseases 0.000 title claims abstract description 19
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 3
- 238000003786 synthesis reaction Methods 0.000 claims abstract description 3
- 239000003086 colorant Substances 0.000 claims description 7
- 238000001914 filtration Methods 0.000 claims description 6
- 238000000034 method Methods 0.000 claims description 6
- 238000011946 reduction process Methods 0.000 claims description 3
- 241001677188 Coccus viridis Species 0.000 claims 1
- 238000007781 pre-processing Methods 0.000 abstract description 3
- 230000004044 response Effects 0.000 abstract description 2
- 230000002547 anomalous effect Effects 0.000 description 4
- 210000002763 pyramidal cell Anatomy 0.000 description 4
- 230000007547 defect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 230000006727 cell loss Effects 0.000 description 2
- 230000035479 physiological effects, processes and functions Effects 0.000 description 2
- 201000000757 red-green color blindness Diseases 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 239000006002 Pepper Substances 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 208000010877 cognitive disease Diseases 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
Classifications
-
- G06T5/70—
-
- G06T5/92—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
Abstract
本发明的一种新型色盲辅助驾驶系统,包括:图像采集模块:具体为摄像机,实时拍摄,将外部图像传输至系统。图像预处理模块:对采集到的图片进行预处理。交通信号灯识别模块:对定位好的红绿灯状态进行识别。语音提示模块:采用离线语音合成系统。根据识别好的交通信号灯状态进行语音提示。显示模块:使用OLED屏幕显示当前交通信号灯状态。本发明能够在尽量节省成本的同时,使操作与回馈界面简洁明了,快速响应,方便色盲患者的使用。
Description
技术领域
本发明图像处理技术领域,尤其涉及一种新型色盲辅助驾驶系统。
背景技术
人的眼睛之所以能辨识颜色,是由于眼睛中存在三种能辨色的锥体细胞:R锥体、G锥体和B锥体。这三种锥体细胞分别能吸收不同波长范围的光,分别是红、绿、蓝(即光的三原色)。当锥体细胞受到损伤或发育不全时,就有可能造成色盲。现实生活中比较常见的是红色盲和绿色盲。红色盲是能辨识红色光的R锥体细胞丧失功能的结果。红色盲由于看不见光谱中的红色光线,光谱有所缩短,只能看见由黄至蓝色段。绿色盲是能辨识绿色光的G锥体细胞丧失功能的结果。虽然绿色盲患者所见光谱并没有缩短,但仍会混淆个别颜色。
现有技术公开了一种色盲辅助驾驶装置,该装置包括图像采集模块,图像预处理模块,红绿灯识别模块以及语音提示模块。本发明在色盲患者障碍色短上通过RGB空间转化为HIS,进而计算出红黄绿三种颜色的H值,根据定义的λ参数判断出为何种信号灯。把信号灯信息通过语音反馈给驾驶员,使色盲驾驶员知晓当前红绿灯状态,并可通过显示屏查看红绿灯状态。
上述现有技术的缺陷:虽然现如今辅助驾驶系统已日渐普及,但目前市场上仅有针对正常人群的全功能式的辅助驾驶系统,而对于色弱色盲这一切群体而言,仍没有得到社会的广泛关注和学者的相关发明研究,市场上并无针对这一特定人群而开发的辅助系统。相对于患病基数庞大的色盲患者而言,市面上的辅助驾驶系统冗余,并且不能简介明了的提示用户所需的关键信息,不仅会使色盲患者为了享受普通人与生俱来的权利而付出过多的经济成本,并且还会在紧急状况发生时,浪费那极其宝贵的时间。
发明内容
本发明所要解决的技术问题是针对背景技术的不足提供了一种新型色盲辅助驾驶系统,其能够在尽量节省成本的同时,使操作与回馈界面简洁明了,快速响应,方便色盲患者的使用。
本发明为解决上述技术问题采用以下技术方案:
一种新型色盲辅助驾驶系统,包括如下步骤:
步骤一,图像采集:通过图像采集设备采集交通信号灯的图像并传输至系统中;
步骤二,图像噪声处理:采用中值滤波对图噪声进行降噪处理;
步骤三,信号灯在图像中的定位:首先,收集所有样式的交通信号灯样本,进行采样后存入数据库;用户使用时,图像采集设备捕捉到疑似目标图像后,输入数据库并与样本进行比较,当疑似目标图像中存在某区域的图像与样本的相似度达到预设在系统中的阈值时,就可以认定该疑似目标图像为交通信号灯图像;
步骤四,对定位后的交通信号灯状态进行识别:首先,将定位后的目标图像由RGB空间转化为HSI空间,然后获取目标图像中每一个像素的H值,并通过计数器对H值进行叠加;
通过对红光颜色统计数据的分析,发现红光颜色的数量会主要集中在[315°,360°]和[0°,30°]的区间,因而将范围[315°,360°]和[0°,30°]定义为红光颜色的H值;绿光颜色的数量主要集中在[150°,210°],定义为绿光颜色的H值;
步骤五,当系统识别当前的交通信号灯的颜色后,将该信号传递给离线语言合成系统,进行语音播报;
步骤六,在步骤五进行语音播报的同时,通过显示屏显示当前交通信号灯的状态。
进一步的,步骤三中,交通信号灯样本以及疑似目标图像的采用模版法进行比对,将样本图像均分为若干相同的区域,并计算单个区域内单位面积的像素的个数,以此计算值为阈值;同样的,计算出疑似目标图像中单个区域内单位面积的像素个数做为实际值,若实际值大于阈值,则认定该疑似目标图像为交通信号灯图像;若实际值小于阈值,则判断该疑似目标图像不是交通信号灯图像。
进一步的,步骤四中,为了使系统更准确地确定交通信号灯的颜色,我们将分别计算出所有颜色像素中的红色像素和绿色像素的比值,将标度定义为参数λ;其中:
λr、λg分别表示红像素个数和绿像素在所有像素个数中,各自所占的比例;Nr、Ng分别表示红象素和绿颜色像素的个数,S为信号灯的面积;经过计算λr和λg值为40%,从而设定λ阈值范围为[0.4,0.6],如果得出的λr或者λg数量在这个范围之内,就判定该交通信号灯此时为红灯或是绿灯。
本发明采用以上技术方案与现有技术相比,具有以下技术效果:
鉴于色盲在中国拥有很大的人口基数,且汽车在我国越来越普及,但是由于他们自身的生理缺陷,却始终无法享受这种便利的交通方式,不能驾驶机动车。为了能使这部分人群突破现在的生理局限,享受到其他普通人轻松就能享受到的待遇,本发明设计一个通过图像处理来辅助色盲驾驶员知晓信号灯当前显示颜色情况的装置,在确保色盲患者能够正常驾车的同时,保证系统可以离线运行,提高系统的可靠度及普及率。
附图说明
图1为本实施例中系统的结构示意图;
图2为本实施例中交通信号灯的识别算法流程图;
图3为本实施例中系统的模块控制图。
图中,1为图像采集模块,2为语音提示模块,3为电源模块,4位显示模块。
具体实施方式
下面结合附图对本发明的技术方案做进一步的详细说明:
一种新型色盲辅助驾驶系统,如图1、2和3所示,该系统包括:
图像采集模块:具体为摄像机,实时拍摄,将外部图像传输至系统。
图像预处理模块:利用STM32F407控制器对采集到的图片进行预处理。
交通信号灯识别模块:利用STM32F407控制器对定位好的红绿灯状态进行识别。
语音提示模块:采用离线语音合成系统。根据识别好的交通信号灯状态进行语音提示。
显示模块:使用OLED屏幕显示当前交通信号灯状态。
具体包括如下步骤:
步骤一,图像采集:通过图像采集设备采集交通信号灯的图像并传输至系统中。
步骤二,图像噪声处理:采用中值滤波对图噪声进行降噪处理。
在图像采集的过程中,受空气条件、日照变化、电磁干扰和图像噪声等因素的影响,采集到的图像通常会变得比实际的模糊,必须经过处理。对这种噪声我们采用中值滤波处理。中值滤波对椒盐噪声滤波有较好的效果,其不光可以达成降噪的目的,还可以很好的保护图片的边缘不会被模糊。
步骤三,信号灯在图像中的定位:首先,收集所有样式的交通信号灯样本,进行采样后存入数据库;用户使用时,图像采集设备捕捉到疑似目标图像后,输入数据库并与样本进行比较,当疑似目标图像中存在某区域的图像与样本的相似度达到预设在系统中的阈值时,就可以认定该疑似目标图像为交通信号灯图像。
具体分析如下,经过中值滤波处理后,图像的预处理进入交通信号灯在图像中的定位阶段,目标是在完整的图像中定位出信号灯的位置,并标识出其中三个颜色的灯的位置。由于实际操作中采集到的图像的背景十分繁复,光照条件也很不均匀,准确定位所采集图像中的信号灯的位置便是整个系统的前提。交通灯的主要特点之一是布局的颜色较深,灰色值较低;另一个特点是大多数交通信号灯的形状是固定的。仅区分为横竖两种。在使用前,先收集各个版本的红绿灯样本,对其特点进行采样后,存入数据库,用户使用时,摄像机捕捉到待确定目标后,输入数据库,与样本进行比较,相似度达到预设的区间时,就可以将其认定为目标。对于样品的特征预设,此系统选用的是较为简单的模版法,将样本长度和宽度X分成相等的部分,形成一个小的均匀面积X×X。对于每个均匀面积,计算黑色像素的个数,除以此小面积的总面积值,若该值超过阈值,便可标记为1,确定该图像中存在信号灯。若小面积不超过阀值,被可标记为0,排除该图像。
步骤四,对定位后的交通信号灯状态进行识别:首先,将定位后的目标图像由RGB空间转化为HSI空间,转换方式如下:
S=1-3·min(r,g,b);s∈[0,1] (4)
然后获取目标图像中每一个像素的H值,并通过计数器对H值进行叠加;
通过对红光颜色统计数据的分析,发现红光颜色的数量会主要集中在[315°,360°]和[0°,30°]的区间,因而将范围[315°,360°]和[0°,30°]定义为红光颜色的H值;绿光颜色的数量主要集中在[150°,210°],定义为绿光颜色的H值;
为了使系统更准确地确定交通信号灯的颜色,我们将分别计算出所有颜色像素中的红色像素和绿色像素的比值,将标度定义为参数λ;其中:
λr、λg分别表示红像素个数和绿像素在所有像素个数中,各自所占的比例;Nr、Ng分别表示红象素和绿颜色像素的个数,S为信号灯的面积;经过计算λr和λg值为40%,从而设定λ阈值范围为[0.4,0.6],如果得出的λr或者λg数量在这个范围之内,就判定该交通信号灯此时为红灯或是绿灯。
步骤五,当系统识别当前的交通信号灯的颜色后,将该信号传递给离线语言合成系统,进行语音播报;
步骤六,在步骤五进行语音播报的同时,通过显示屏显示当前交通信号灯的状态。
技术效果
众所周知,色盲色弱患者由于对交通信号灯的识别障碍,不能驾驶机动车辆。本发明可以辅助色盲色弱患者识别颜色,使其也可以和正常视觉的人群一样驾驶机动车辆。例如,对红色识别的色盲色弱患者,将该装置安装与汽车后视镜前方,并接通车载电源。打开该装置,通过该装置的红绿灯识别算法,识别出红绿灯状态,由语音进行提示,反馈给驾驶员。驾驶员即可根据提示做出相应的操作,正常驾驶机动车辆。
鉴于色盲在中国拥有很大的人口基数,且汽车在我国越来越普及,但是由于他们自身的生理缺陷,却始终无法享受这种便利的交通方式,不能驾驶机动车。为了能使这部分人群突破现在的生理局限,享受到其他普通人轻松就能享受到的待遇,本发明设计一个通过图像处理来辅助色盲驾驶员知晓信号灯当前显示颜色情况的装置,在确保色盲患者能够正常驾车的同时,保证系统可以离线运行,提高系统的可靠度及普及率。
本技术领域技术人员可以理解的是,除非另外定义,这里使用的所有术语(包括技术术语和科学术语)具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样定义,不会用理想化或过于正式的含义来解释。
以上实施例仅为说明本发明的技术思想,不能以此限定本发明的保护范围,凡是按照本发明提出的技术思想,在技术方案基础上所做的任何改动,均落入本发明保护范围之内。上面对本发明的实施方式作了详细说明,但是本发明并不限于上述实施方式,在本领域普通技术人员所具备的知识范围内,还可以在不脱离本发明宗旨的前提下做出各种变化。
Claims (3)
1.一种新型色盲辅助驾驶系统,其特征在于:包括如下步骤:
步骤一,图像采集:通过图像采集设备采集交通信号灯的图像并传输至系统中;
步骤二,图像噪声处理:采用中值滤波对图噪声进行降噪处理;
步骤三,信号灯在图像中的定位:首先,收集所有样式的交通信号灯样本,进行采样后存入数据库;用户使用时,图像采集设备捕捉到疑似目标图像后,输入数据库并与样本进行比较,当疑似目标图像中存在某区域的图像与样本的相似度达到预设在系统中的阈值时,就可以认定该疑似目标图像为交通信号灯图像;
步骤四,对定位后的交通信号灯状态进行识别:首先,将定位后的目标图像由RGB空间转化为HSI空间,然后获取目标图像中每一个像素的H值,并通过计数器对H值进行叠加;
通过对红光颜色统计数据的分析,发现红光颜色的数量会主要集中在[315°,360°]和[0°,30°]的区间,因而将范围[315°,360°]和[0°,30°]定义为红光颜色的H值;绿光颜色的数量主要集中在[150°,210°],定义为绿光颜色的H值;
步骤五,当系统识别当前的交通信号灯的颜色后,将该信号传递给离线语言合成系统,进行语音播报;
步骤六,在步骤五进行语音播报的同时,通过显示屏显示当前交通信号灯的状态。
2.根据权利要求1所述的一种新型色盲辅助驾驶系统,其特征在于:步骤三中,交通信号灯样本以及疑似目标图像的采用模版法进行比对,将样本图像均分为若干相同的区域,并计算单个区域内单位面积的像素的个数,以此计算值为阈值;同样的,计算出疑似目标图像中单个区域内单位面积的像素个数做为实际值,若实际值大于阈值,则认定该疑似目标图像为交通信号灯图像;若实际值小于阈值,则判断该疑似目标图像不是交通信号灯图像。
3.根据权利要求1所述的一种新型色盲辅助驾驶系统,其特征在于:步骤四中,为了使系统更准确地确定交通信号灯的颜色,我们将分别计算出所有颜色像素中的红色像素和绿色像素的比值,将标度定义为参数λ;其中:
λr、λg分别表示红像素个数和绿像素在所有像素个数中,各自所占的比例;Nr、Ng分别表示红象素和绿颜色像素的个数,S为信号灯的面积;经过计算λr和λg值为40%,从而设定λ阈值范围为[0.4,0.6],如果得出的λr或者λg数量在这个范围之内,就判定该交通信号灯此时为红灯或是绿灯。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910609070.XA CN110335486A (zh) | 2019-07-08 | 2019-07-08 | 一种新型色盲辅助驾驶系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910609070.XA CN110335486A (zh) | 2019-07-08 | 2019-07-08 | 一种新型色盲辅助驾驶系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110335486A true CN110335486A (zh) | 2019-10-15 |
Family
ID=68143269
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910609070.XA Pending CN110335486A (zh) | 2019-07-08 | 2019-07-08 | 一种新型色盲辅助驾驶系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110335486A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024032586A1 (zh) * | 2022-08-12 | 2024-02-15 | 抖音视界有限公司 | 图像处理方法、装置、电子设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101964114A (zh) * | 2010-09-16 | 2011-02-02 | 浙江吉利汽车研究院有限公司 | 一种红绿色盲驾驶员交通信号灯辅助识别系统 |
CN102117546A (zh) * | 2011-03-10 | 2011-07-06 | 上海交通大学 | 车载交通信号灯辅助装置 |
CN106023623A (zh) * | 2016-07-28 | 2016-10-12 | 南京理工大学 | 基于机器视觉的车载交通信号与标志的识别及预警方法 |
CN108172003A (zh) * | 2017-11-30 | 2018-06-15 | 广州华夏职业学院 | 交通信号灯车内提醒系统 |
-
2019
- 2019-07-08 CN CN201910609070.XA patent/CN110335486A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101964114A (zh) * | 2010-09-16 | 2011-02-02 | 浙江吉利汽车研究院有限公司 | 一种红绿色盲驾驶员交通信号灯辅助识别系统 |
CN102117546A (zh) * | 2011-03-10 | 2011-07-06 | 上海交通大学 | 车载交通信号灯辅助装置 |
CN106023623A (zh) * | 2016-07-28 | 2016-10-12 | 南京理工大学 | 基于机器视觉的车载交通信号与标志的识别及预警方法 |
CN108172003A (zh) * | 2017-11-30 | 2018-06-15 | 广州华夏职业学院 | 交通信号灯车内提醒系统 |
Non-Patent Citations (1)
Title |
---|
朱宇明: "基于图像处理的色盲辅助驾驶系统", 《通讯世界》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024032586A1 (zh) * | 2022-08-12 | 2024-02-15 | 抖音视界有限公司 | 图像处理方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106384095B (zh) | 基于手机拍摄图像的轿车故障指示灯识别方法 | |
CN101783076B (zh) | 一种视频监控模式下的快速车型识别方法 | |
CN104637342B (zh) | 一种狭小垂直车位场景智能识别与泊车路径规划系统及方法 | |
CN109460715A (zh) | 一种基于机器学习的交通灯自动识别实现方法 | |
CN106017458B (zh) | 移动机器人组合式导航方法及装置 | |
JPH11288459A (ja) | 顔のような領域を検出する方法および装置、ならびに観察者トラッキングディスプレイ | |
CN104021527B (zh) | 一种图像中雨雪的去除方法 | |
CN101964114B (zh) | 一种红绿色盲驾驶员交通信号灯辅助识别系统 | |
CN106454216A (zh) | 基于非制冷红外与微光融合的夜间驾驶系统 | |
CN110738952A (zh) | 一种结合人眼识别、跟踪和光线识别的hud显示方法和系统 | |
CN101383912B (zh) | 电视摄像色彩智能化自动调节方法 | |
CN101937505B (zh) | 一种目标检测方法和设备及其使用的图像采集装置 | |
CN110335486A (zh) | 一种新型色盲辅助驾驶系统 | |
CN102404581A (zh) | 基于插值与近红外的彩色图像处理的方法和装置 | |
CN110215044A (zh) | 一种智能美妆镜 | |
CN102806851B (zh) | 一种带扩展行车视野功能的汽车仪表及汽车 | |
CN108732969B (zh) | 一种基于单片机的汽车手势控制装置及其控制方法 | |
JP2003331384A (ja) | 車種識別装置 | |
CN109410594A (zh) | 一种车牌识别系统及方法 | |
CN107016343A (zh) | 一种基于贝尔格式图像的红绿灯快速识别方法 | |
CN109640496A (zh) | 桥梁用温控色温控制方法及照明设备 | |
CN204168399U (zh) | 一种色盲色觉辅助装置 | |
CN109920262A (zh) | 交通灯识别系统 | |
CN104270588A (zh) | 一种色盲色觉辅助装置 | |
CN110126740A (zh) | 一种汽车电子后视镜的控制方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191015 |