CN103523013B - 车道偏离警报装置 - Google Patents
车道偏离警报装置 Download PDFInfo
- Publication number
- CN103523013B CN103523013B CN201310270897.5A CN201310270897A CN103523013B CN 103523013 B CN103523013 B CN 103523013B CN 201310270897 A CN201310270897 A CN 201310270897A CN 103523013 B CN103523013 B CN 103523013B
- Authority
- CN
- China
- Prior art keywords
- dividing line
- vehicle
- spot
- degree
- distance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012360 testing method Methods 0.000 claims abstract description 49
- 230000003287 optical effect Effects 0.000 claims description 19
- 238000001514 detection method Methods 0.000 claims description 12
- 238000004364 calculation method Methods 0.000 claims description 6
- 238000009499 grossing Methods 0.000 claims 3
- 238000000034 method Methods 0.000 description 33
- 230000003190 augmentative effect Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 11
- 238000012937 correction Methods 0.000 description 8
- 238000001914 filtration Methods 0.000 description 7
- 238000010276 construction Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000000926 separation method Methods 0.000 description 5
- 238000005406 washing Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 238000009434 installation Methods 0.000 description 3
- 238000012805 post-processing Methods 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 206010018612 Gonorrhoea Diseases 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 2
- 238000004140 cleaning Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000654 additive Substances 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 238000005282 brightening Methods 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000003750 conditioning effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000003973 paint Substances 0.000 description 1
- 229910052573 porcelain Inorganic materials 0.000 description 1
- 230000001932 seasonal effect Effects 0.000 description 1
- 239000002689 soil Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
- B60Q9/008—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Mechanical Engineering (AREA)
- Traffic Control Systems (AREA)
- Burglar Alarm Systems (AREA)
- Emergency Alarm Devices (AREA)
- Image Analysis (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明提供车道偏离警报装置,其具备:划分线检测部,其根据通过设于车辆上的摄像装置拍摄所述车辆的行驶路线而获得的图像,对划分线进行检测;污渍检测部,其用于检测所述摄像装置的透镜及所述车辆的车厢外与所述摄像装置之间的分隔部的任一方的污渍;偏离判断部,其用于判断所述车辆是否偏离所述划分线;以及警报判断部,其在判断为所述车辆偏离所述划分线时基于检测出的所述污渍的程度而输出警报信号。输出所述警报信号时的所述车辆相对于所述划分线的位置根据检测出的所述污渍的所述程度而不同。
Description
本申请基于2012年7月3日申请的日本申请NO.2012-149871要求优先权,并将其内容引用在此。
技术领域
本发明涉及在自身车辆从车道偏离那样的情况下发出警报的车道偏离警报装置。
背景技术
提出有各种通过利用车载摄像机拍摄车辆的周围、并对拍摄到的图像中的物体(车辆、行人等)、道路标记、标识(划分线等路面涂料、“停止”等标识等)进行识别的技术。例如,参照日本特开2003-44863号公报,公开有分隔线识别装置。在该分隔线识别装置中,若能利用车载摄像机检测涂绘在道路上的白线、白点(bottsdots,美国许多道路上所用、钉在地上的小型圆形反光瓷球状物)等划分线,并求出车道内的车辆位置、即与划分线的相对位置,则能推测出车辆从车道偏离的可能性的大小。若偏离可能性较大时,向驾驶员发出警报或对转向、制动器进行控制,则能预先防止车道偏离或使偏离量很小。
在公开于日本特开2003-44863号公报中的分隔线识别装置中,由于与附着于摄像机上的污渍的大小相应地使分隔线(白线)识别判断所用的阈值变化,因此,即使附着于摄像机的污渍变大,也能维持白线识别状态。但是,由于使阈值向容易识别白线的方向变化,因此,错误地识别白线以外的物体的可能性提高。若将这样的分隔线识别装置应用于车道偏离警报系统,则导致误警报增大的可能性变高。
发明内容
本发明的车道偏离警报装置具备:划分线检测部,其根据通过设于车辆上的摄像装置拍摄所述车辆的行驶路线而获得的图像,对划分线进行检测;污渍检测部,其用于检测所述摄像装置的透镜及所述车辆的车厢外与所述摄像装置之间的分隔部的任一方的污渍;偏离判断部,其用于判断所述车辆是否偏离所述划分线;以及警报判断部,其在判断为所述车辆偏离所述划分线时基于检测出的所述污渍的程度输出警报信号。输出所述警报信号时的所述车辆相对于所述划分线的位置根据检测出的所述污渍的所述程度而不同。
附图说明
图1是表示第一实施方式的车道偏离警报装置的概略结构图。
图2是用于说明车辆偏离警报装置的基本处理步骤的流程图。
图3是用于说明污渍检测的图。
图4是用于说明划分线检测的图。
图5A及图5B是用于说明距划分线的距离的图。
图6是用于说明将拍摄车辆后方的摄像装置的测量结果补正为来自前轮位置的测量值的方法的一例的图。
图7A及图7B是表示污渍程度和偏离判断用阈值的关系的一例的图。
图8A及图8B是表示污渍程度与对距划分线的距离施加的过滤的过滤系数的关系的一例的图。
图9A及图9B是表示污渍程度和对横摆角施加的补正系数的关系的一例的图。
图10是表示第二实施方式的车道偏离警报装置的概略结构图。
图11A及图11B是用于说明划分线检测的检测范围的图。
图12是表示第三实施方式的车道偏离警报装置的概略结构图。
图13A及图13B是表示对划分线振动量与偏离判断用阈值的关系进行表示的图表的一例的图。
图14A及图14B是表示对划分线振动量与过滤系数的关系进行表示的图表的一例的图。
图15A及图15B是表示对划分线振动量与补正系数的关系进行表示的图表的一例的图。
具体实施方式
(第一实施方式)图1是表示本发明的第一实施方式的车道偏离警报装置100的概略结构图。
如图1所示,本实施方式的车道偏离警报装置100包括划分线检测部1、污渍检测部2、具有偏离判断参数设定部4的偏离判断部3和警报判断部5,以预先设定的周期反复执行计算机程序。
在车道偏离警报装置100中输入有利用摄像装置101拍摄的图像的图像数据,并且输入有车速、转向角、横摆角速度(YawRate)、转向灯(TurnSignal)这些车辆信息。警报判断部5在判断为本车辆偏离行驶的车道的可能性较大时,向警报音产生器102、警报显示器103输出警报产生指令。
摄像装置101将利用CCD(ChargeCoupledDevice)图像传感器、CMOS(ComplementaryMetalOxideSemiconductor)图像传感器等摄像元件拍摄本车辆外而获得的图像直接作为模拟数据或对该图像进行数据处理而转换为能用计算机处理的图像数据,并使用专用线等输出到车辆偏离警报装置100的划分线检测部1及污渍检测部2。
划分线检测部1使用利用摄像装置101取得的、对车外进行摄像而得的图像数据(图像信息)来检测在道路上以实线状、虚线状或点列状涂绘的白线、白点等划分线。所谓白点例如是公路的中央线、一对车道所包含的左车道或右车道等车道的边界线、车道的外侧线等。
污渍检测部2使用利用摄像装置101取得的、对车外进行摄像而得的图像数据(图像信息)来检测透镜污渍。所谓透镜污渍是在将摄像装置101设置于车厢外的情况下附着于摄像装置101的透镜表面的污渍或在将摄像装置101设置于车厢内的情况下附着于摄像装置101与车厢外之间的分隔物(玻璃等)的表面上的污渍等。需要说明的是,在此所说的“污渍”是指“附着有土、泥等地表物的状态”、“附着有融雪剂等人工物的状态”、“附着有水滴、雨滴的状态”、“透镜表面、玻璃表面白浊的状态”等。另外,污渍检测部2求出检测出的污渍程度,并且将其输出到偏离判断参数设定部4。
偏离判断部3进行车辆偏离划分线的可能性是否较大的判断。需要说明的是,这里的车道偏离判断优选与日本工业规格JISD0804或ISO(InternationalOrganizationforStandardization)规格ISO/DIS17361对应。
偏离判断部3基于由污渍检测部2检测出的透镜污渍程度来进行车辆偏离划分线的可能性是否较大的判断。偏离判断参数设定部4进行此时的参数的设定。
在偏离判断部3判断为车辆偏离划分线的可能性较大且不符合警报抑制条件的情况下,警报判断部5使用车内LAN或专用线等通信系统将警报产生指令输出到警报音产生器102、警报显示器103。在此,作为警报抑制条件,存在转向灯显示器处于驾驶员的操作中、距离转向灯显示器操作的结束规定时间内(例如两秒钟)、车速为规定值以下(例如70km/h以下)、道路曲率半径为规定值以下(例如200m以下)等情况。
警报音产生器102包括基于警报判断部5的输出而利用声音向驾驶员传递警报的扬声器等。
警报显示器103包括基于警报判断部5的输出在视觉上向驾驶员传递警报的显示器、仪表板、警告灯等。
图2是表示本实施方式的车道偏离警报装置100所具有的未图示的CPU执行程序而进行的处理步骤的一例的流程图。
首先,在步骤201中,车道偏离警报装置100对利用摄像装置101拍摄的图像进行数字处理而采集为图像数据。但是,在已经由摄像装置101进行过数字处理的情况下,直接采集由摄像装置101输出的图像数据。
接着,在步骤202中,车道偏离警报装置100使用在步骤201中采集的图像数据,通过车道偏离警报装置100内的污渍检测部2检测透镜污渍。使用图3说明该检测透镜污渍的处理的具体方法的例子。
图3是与车道偏离警报装置100在步骤201中采集的图像数据对应的图像350,在车道30上存在有两条划分线31及划分线32。另外,与该图像数据对应的图像350内的阴影区域300表示附着于摄像装置101的透镜表面的泥污,其他的阴影区域也同样地表示泥污。作为检测该泥污区域300的方法,具有利用在行驶中背景流动来检测没有与背景一并流动的泥污区域300的方法,以及使用与周围的亮度差等信息来确定泥污区域300的方法。
接着,污渍检测部2求得检测出的泥污程度。泥污程度通常根据泥污区域300的面积占与图像数据对应的图像350的总面积的比例而求出。例如,将表示泥污程度的指标范围设为0~100,将表示泥污程度的指标较小的情况设为没有污渍。存在如下方法:在泥污区域300的面积占与图像数据对应的图像350的总面积的比例为0%时,将表示泥污程度的指标设为0,在泥污区域300的面积占与图像数据相对应的图像350的总面积的比例为50%时,将表示泥污程度的指标设为100,在泥污区域300的面积占与图像数据对应的图像350的总面积的比例为0%与50%之间的值时,利用线性插补求出表示泥污程度的指标。另外,也可以利用阶梯性等级来表示泥污程度。例如,在泥污区域300的面积占与图像数据对应的图像350的总面积的比例为0%~10%时,将泥污程度定义为等级0,在泥污区域300的面积占与图像数据对应的图像350的总面积的比例为10%~25%时,将泥污程度定义为等级1,在泥污区域300的面积占与图像数据对应的图像350的总面积的比例为25%~40%时,将泥污程度定义为等级2,在泥污区域300的面积占与图像数据对应的图像350的总面积的比例为40%以上时,将泥污程度定义为等级3。
需要说明的是,在此,针对检测泥污的方法进行了说明,但针对雨滴、水滴也能与泥污同样地求出雨滴、水滴区域面积占与图像数据对应的图像350的总面积的比例。针对融雪剂、白浊等的污渍,存在通过检测光的散射情况、图像数据内的物体边缘强度等来求出各自污渍程度的方法。
在本步骤中,对于污渍检测部2最终输出的污渍程度,在污渍程度通过指标0~100表示的情况下,污渍检测部2最终输出的污渍程度由与各个泥污区域300对应的污渍程度中的最大的值来表示,在污渍程度通过阶梯性等级0~3表示的情况下,污渍检测部2最终输出的污渍程度由与各个污渍区域300对应的污渍程度中的最大的等级(例如与等级0相比,等级1较大)来表示。另外,污渍程度不是一定要用指标0~100表示,并且也不是一定要用等级0~等级3的四个阶段表示,只要自始至终使用相同的定义即可。
接着,在步骤203中,车道偏离警报装置100内的划分线检测部1根据与车道偏离警报装置100在步骤201中采集的图像数据对应的图像而对涂绘在道路上的划分线进行检测。使用图4说明关于该检测划分线的处理的具体方法。
如图4所示,车道偏离警报装置100在与通过步骤201采集的图像数据对应的图像450中,在车道40上存在有两条划分线41及42。作为用于检测该划分线41、42的方法,存在通过计算图像450内的边缘强度来抽出划分线的方法。在此,边缘是在图像中亮度值急剧地变化的点。在图4中表示从图像450的端点X1朝向端点X2检测出的边缘强度480。在边缘强度480中,峰值403及峰值405分别是从道路变化为划分线的点,亮度值从暗急剧变亮。峰值404及406分别是从划分线变化为道路的点,亮度值从亮急剧变暗。这样,通过找出峰值403及峰值404的组合以及峰值405及划分线406的组合,从而能够检测出划分线41及42。
另外,划分线检测部1算出划分线与摄像装置101的光轴之间的距离、即从摄像装置101的光轴到划分线的距离。使用图5A及图5B说明该算出从摄像装置101的光轴到划分线的距离的步骤中的具体算法。
图5A与图4同样地是与车道偏离警报装置100在步骤201中采集的图像数据对应的图像450,图5B是与图5A相同状况时的俯瞰图。在图5A及图5B中,存在有两条划分线41及42,用箭头表示摄像装置101的光轴43。在此,作为从摄像装置101的光轴43到划分线42的距离L,例如使用从光轴43到划分线42的内侧(光轴43侧)的点A的距离。划分线检测部1基于边缘强度的峰值求出图5A所示的图像450上的点A的坐标,并将求出的点A的坐标转换为图5B的实际坐标系,从而算出从摄像装置101的光轴43到划分线42的距离L。同样地,划分线检测部1也算出从摄像装置101的光轴43到划分线41的距离。
需要说明的是,在算出从摄像装置101的光轴43到划分线42的距离时,也可以不是如上述那样使用划分线42内侧的点A的坐标而使用划分线42外侧的点或划分线42中心的点的坐标,只要自始至终为相同的定义即可。另外,在算出从摄像装置101的光轴43到划分线的距离时所使用的划分线上的点也可以不是相对于图像450内的各划分线各自一个,而是相对于各划分线设为多个(例如10个)。
接着,在步骤204中,车道偏离警报装置100内的偏离判断部3基于由划分线检测部1在步骤203中检测出的划分线的信息来判断本车辆是否偏离现在行驶中的车道。需要说明的是,在此,假定摄像装置101的安装位置是车辆后端、拍摄方向为车辆后方的情况进行说明。
偏离判断部3首先基于在步骤203中检测出的划分线和从摄像装置101的光轴到划分线的距离来推定从本车辆的规定部位到划分线的距离。在此,根据日本工业规格JISD0804及ISO规格ISO/DIS17361,基于从车辆前轮的外侧部到划分线的距离来判断是否产生警报,因此,需要将根据由摄像装置101拍摄的车辆后方的影像检测出的从光轴到划分线的距离补正为从车辆前轮的外侧部到划分线的距离。使用图6具体地说明该补正处理。
图6是假定车辆60在由两条划分线41及42划分出的车道40上行驶的情况的图。车辆60的行进方向与光轴方向一致。
偏离判断部3将利用设置于车辆后方的摄像装置101算出的从摄像装置101的光轴到左划分线41的距离d1补正为从车辆左前轮的外侧部到左划分线41的距离D1(补正后的到划分线的距离)。从车辆左前轮的外侧部到左划分线41的距离D1能够通过使用从算出自摄像装置101的光轴到左划分线41的距离d1的地点到车辆前轮的距离K、从摄像装置101到车辆左前轮的外侧部的距离C1及车辆横摆角θ而由(1)式算出。
D1=d1-K×tanθ-C1…(1)
同样地,偏离判断部3将利用设置于车辆后方的摄像装置101算出的从摄像装置101的光轴到右划分线42的距离d2补正为从车辆右前轮的外侧到右划分线42的距离D2(补正后的到划分线的距离)。从车辆右前轮的外侧到右划分线42的距离D2能够通过使用从算出自摄像装置101的光轴到右划分线42的距离d2的地点到车辆前轮的距离K、从摄像装置101到车辆右前轮的外侧的距离C2及车辆横摆角θ而由(2)式算出。
D2=d2+K×tanθ-C2…(2)
需要说明的是,作为求出车辆横摆角θ的方法,具有根据距左右的划分线的距离d1、d2的过去多个点的信息利用最小二乘法求出角度的方法、根据一张拍摄图像直接算出划分线的角度的方法等。
接着,偏离判断部3使用利用(1)式及(2)式求出的距划分线的距离D1及D2进行车辆60偏离划分线的可能性是否较大的判断。具体而言,判断距划分线的距离D1(或D2)是否不足预先设定的偏离判断用阈值Ds(D1<Ds),在肯定判断的情况下,判断为车辆60偏离划分线的可能性较大,将该意思在后处理中通知给驾驶员。相反地,在否定判断的情况下,判断为车辆60偏离划分线的可能性较小,将该意思在后处理中通知给驾驶员。
并且,在步骤204中,偏离判断部3的偏离判断参数设定部4使用由污渍检测部2在步骤202中求出的污渍程度而进行偏离判断所利用的参数的设定。其原因在于:随着污渍程度变大,在步骤203中检测出的划分线的检测结果变得不稳定,若直接使用该划分线的检测结果,则可能产生误警报,偏离判断参数设定部4为了减少该误警报的频率而进行偏离判断所利用的参数的设定。使用图说明其具体的方法。
首先,说明偏离判断用阈值Ds的设定方法。图7A及图7B是表示污渍程度与偏离判断用阈值Ds的关系的图表的例子。图7A是在步骤202中求出的污渍程度用指标0~100表示的情况下的图表,设定为随着污渍程度的指标变大而减小偏离判断用阈值Ds的值。另外,图7B是在步骤202中求出的污渍程度用等级0~3表示的情况下的图表,设定为随着污渍程度的等级变大而阶梯性地减小偏离判断用阈值Ds的值。如以上说明那样,通过随着污渍程度变大而将偏离判断用阈值Ds设定得较小,能够设定将污渍程度较大的情况下的划分线检测结果的不稳定度考虑在内的偏离判断所利用的参数,能够减少误警报的频率。
接着,说明对在步骤203中检测出的距划分线的距离d1及d2(参照图6)施加的过滤的过滤系数p(其中,p能采用的范围为0<p≤1)的设定方法。首先,过滤后的距划分线的距离d1f及d2f使用作为各个前次处理周期的计算结果而获得的距离d1fz及d2fz通过(3)式及(4)式进行计算。
d1f=d1fz×(p-1)+d1×p…(3)
d2f=d2fz×(p-1)+d2×p…(4)
根据(3)式及(4)式,过滤系数越小,前次处理周期的计算结果越优先,因此,能够减轻划分线检测结果的不稳定度。接着,若使用(3)式及(4)式的计算结果对(1)式及(2)式进行变形,则获得(5)式及(6)式。
D1=d1f-K×tanθ-C1…(5)
D2=d2f+K×tanθ-C2…(6)
图8A及图8B是表示污渍程度与过滤系数p的关系的图表的例子。图8A是将在步骤202中求出的污渍程度用指标0~100表示的情况下的图表,随着污渍程度的指标变大而将过滤系数p的值设定得较小。另外,图8B是将在步骤202中求出的污渍程度用等级0~3表示的情况下的图表,随着污渍程度的等级变大而阶梯性地将过滤系数p的值设定得较小。如以上说明那样,随着污渍程度变大而将过滤系数p设定得较小,从而能够设定将污渍程度较大的情况下的划分线检测结果的不稳定度考虑在内的偏离判断所利用的参数,能够减少误警报的频率。
需要说明的是,在此说明了对在步骤203中检测出的距划分线的距离d1及d2(参照图6)施加过滤而进行计算的方式,但不言而喻,对利用(1)式及(2)式计算出的D1及D2中施加过滤进行计算也能获得同样的效果。另外,不言而喻,使用(3)式及(4)式的过滤计算式以外的过滤计算式也能获得同样的效果。
接着,说明对(1)式及(2)式、(5)式及(6)式的横摆角θ施加的补正系数q(其中,q能采用的范围为0≤q≤1)的设定方法。首先,使用对横摆角θ施加的补正系数q对(5)式及(6)式进行变形,得到(7)式及(8)式。
D1=d1f-K×tan(θ×q)-C1…(7)
D2=d2f+K×tan(θ×q)-C2…(8)
根据(7)式及(8)式,补正系数q越小,横摆角θ的补正越没有效果,因此,能够减轻横摆角θ的不稳定度。
图9A及图9B是表示污渍程度与补正系数q的关系的图表的例子。图9A是将在步骤202中求出的污渍程度用指标0~100表示的情况下的图表,随着污渍程度的指标变大而将补正系数q的值设定得较小。另外,图9B是将在步骤202中求出的污渍程度用等级0~3表示的情况下的图表,随着污渍程度的等级变大而阶梯性地将补正系数q的值设定得较小。如以上说明那样,随着污渍程度变大而将补正系数q设定得较小,能够设定将污渍程度较大的情况下的横摆角θ的不稳定度考虑在内的偏离判断所利用的参数,能够减少误警报的频率。
如以上说明那样,在步骤204中,在计算距划分线的距离D1及D2时,使用(7)式及(8)式,从而能够设定基于步骤202中求出的污渍程度的偏离判断所利用的参数,因此,能够减少误警报的频率。
最后,在步骤205中,警报判断部5在判断为在步骤204中本车辆偏离划分线的可能性较大且不符合警报抑制条件的情况下,将警报产生指令输出到警报音产生器102、警报显示器103,该程序结束。在此,作为警报抑制条件,具有转向灯显示器处于操作中、距转向灯显示器操作的结束处于规定时间内(例如两秒钟)、车速为规定值以下(例如70km/h以下)、道路曲率半径为规定值以下(例如200m以下)等情况。需要说明的是,解除警报的时机为发出警报且经过规定时间后(例如两秒钟后)。
如以上说明那样,通过基于透镜污渍的污渍程度改变来偏离判断所利用的参数,即使在摄像机的透镜、玻璃等的分隔处附着有污渍的情况下,也能减少误警报的频率。另外,通过减少误警报的频率,对于驾驶员、乘客来说能够提高安心感、可靠性。
在本实施方式中,摄像装置的安装位置是车辆后端,拍摄方向是车辆后方。但是,也可以使用拍摄车辆前方的摄像装置。另外,摄像装置的安装位置等也可以与本实施方式不同。
(第二实施方式)图10是表示本发明的第二实施方式的车道偏离警报装置100的概略结构图。
图10所示的本实施方式的车道偏离警报装置100具有这样的结构:在第一实施方式的车道偏离警报装置100的结构(图1)的基础上,在划分线检测部1内追加了划分线检测参数设定部11。需要说明的是,以下,在图10的结构中,关于标注与已经说明的图1所示的相同符号的部分和具有相同功能的部分,省略说明。
污渍检测部2求出检测出的污渍程度并输出到划分线检测参数设定部11及偏离判断部参数设定部4。
划分线检测参数设定部11基于由污渍检测部2检测出的透镜污渍的程度进行划分线检测部1检测划分线时的参数的设定。
接着,说明本实施方式的车道偏离警报装置100具有的未图示的CPU执行程序而进行的处理步骤的一例。
与本实施方式对应的流程图和与第一实施方式对应的图2的流程图相同,在关于第一实施方式说明的处理内容中追加一部分功能。以下,仅说明追加的功能。
在图2的步骤203中,对使用了步骤202中求出的污渍程度的划分线的检测方法进行改变,并且追加检测出的划分线的可靠度的决定处理。
首先,对于由划分线检测部1进行的划分线的检测方法,使用图11A及图11B来说明具体的方法。图11A及图11B与图4相同是与车道偏离警报装置100在步骤201中采集的图像数据对应的图像450,在车道40中存在有两条划分线41及42。通常,在步骤201中采集的图像中,越是远方的被摄体像,分辨率越低。因此,如图11A所示,划分线的检测是将检测划分线的范围111及112限定在规定范围内而进行处理的。在步骤202中求出的污渍程度变大时,在包含被限定在规定范围内的区域内的远方的被摄体像的部分,难以检测划分线。因此,如图11B所示,划分线检测参数设定部11将基于污渍程度检测划分线的范围进一步限定为范围113及114。这样,污渍程度越大,越无法利用划分线检测部1进行使用了包含远方的被摄体像的部分的划分线检测处理。需要说明的是,本处理也可以通过拍摄时的车辆周边的亮度不同的白天和黑夜来切换处理内容,例如限定仅在黑夜中检测划分线的范围。
接着,关于划分线检测部1检测出的划分线的可靠度的决定方法进行说明。在此,划分线的可靠度用值0~100表示,该值越大,可靠度越高。在图11A的检测划分线的范围111及112中,划分线检测参数设定部11在时间上能连续地检测划分线的情况下提高划分线的可靠度,若超过规定的阈值则认为具有可靠度,将该意思在后处理中通知给驾驶员。在此,随着在步骤202中求出的污渍程度变大,划分线检测参数设定部11判断为具有划分线可靠度的阈值也提高。
如以上说明那样,使用在步骤202中求出的污渍程度来改变划分线的检测方法,并且追加检测出的划分线的可靠度的决定处理,从而能提高划分线的检测精度。
另外,偏离判断部3在计算(1)式及(2)式时也可以利用在步骤203中求出的划分线的可靠度。具体而言,偏离判断部3在判断为具有划分线的可靠度时计算(1)式及(2)式,在不具有划分线的可靠度的情况下不实施(1)式或(2)式的计算,对距划分线的距离D1(或D2)设定无效值。
如以上说明那样,通过基于划分线的可靠度求出距划分线的距离,能产生更高精度的车道偏离警报。
(第三实施方式)图12是表示本发明的第三实施方式的车道偏离警报装置100的概略结构图。
图12所示的本实施方式的车道偏离警报装置100具有这样的结构:在第二实施方式的车道偏离警报装置100的结构(图10)的基础上追加了划分线振动量运算部12。需要说明的是,以下,在图12的结构中,对标注与已经说明的图10所示的相同符号的部分和具有相同功能的部分省略说明。
划分线振动量运算部12基于由划分线检测部1检测出的距划分线的距离运算距划分线的距离的时间序列的振动量、即划分线振动量。偏离判断参数设定部4基于该振动量的大小而设定偏离判断所用的参数。
由划分线振动量运算部12运算出的划分线振动量较大即是由划分线检测部1检测出的划分线的位置具有较大偏差。换言之,由划分线检测部1检测出的检测结果具有较大偏差,表示划分线检测部1所进行的划分线的检测不那么稳定(不正确)。即,在划分线振动量较大的情况下,划分线的检测不稳定,因此,若直接使用该划分线的信息,则可能产生误警报的频率变高。
划分线振动量运算部12将规定期间内的本次处理周期的距划分线的距离和前次处理周期的距划分线的距离之差的标准偏差作为划分线振动量进行运算。另外,划分线振动量可以直接使用标准偏差的值,但也可以由阶梯性等级表示,例如,将划分线振动量为0~5cm时定义为等级0,将划分线振动量为5cm~15cm时定义为等级1,将划分线振动量为15cm以上时定义为等级2。需要说明的是,在此,虽使用标准偏差,但也可以使用分散,且也可以使用其他方法来算出划分线振动量。这样,基于利用划分线振动量运算部12运算出的划分线振动量,偏离判断参数设定部4设定偏离判断所用的参数、即偏离判断用阈值Ds、对距划分线的距离施加的过滤的过滤系数p、对横摆角施加的补正系数q。
首先,说明偏离判断参数设定部4进行的偏离判断用阈值Ds的设定方法。图13A及图13B是表示划分线振动量和偏离判断用阈值Ds的关系的图表的例子。图13A表示随着划分线振动量变大而将偏离判断用阈值Ds的值设定得较小。另外,图13B是将划分线振动量用等级0~2阶梯性表示的情况下的图表,表示随着划分线振动量的等级变大而阶梯性地将偏离判断用阈值Ds的值设定得较小。如以上说明那样,通过随着划分线振动量变大而将偏离判断用阈值Ds设定得较小,能够设定将划分线振动量较大情况下的划分线检测结果的不稳定度考虑在内的偏离判断用参数,能够减少误警报的频率。
接着,说明偏离判断参数设定部4进行的、对距划分线的距离施加的过滤的过滤系数p的设定方法。图14A及图14B是表示划分线振动量和过滤系数p的关系的图表的例子。图14A表示随着划分线振动量变大而将小过滤系数p的值设定得较小。另外,图14B是将划分线振动量用等级0~2阶梯性表示的情况下的图表,表示随着划分线振动量的等级变大而阶梯性将过滤系数p的值设定得较小。如以上说明那样,通过随着划分线振动量变大而将过滤系数p设定得较小,能够设定将划分线振动量较大情况下的划分线检测结果的不稳定度考虑在内的偏离判断用参数,能够减少误警报的频率。
接着,说明偏离判断参数设定部4进行的对横摆角施加的补正系数q的设定方法。图15A及图15B是表示划分线振动量和补正系数q的关系的图表的例子。图15A表示随着划分线振动量变大而将补正系数q的值设定得较小。另外,图15B是将划分线振动量用等级0~等级2表示的情况下的图表,表示随着划分线振动量的等级变大而阶梯性地将补正系数q的值设定得较小。如以上说明那样,通过随着划分线振动量变大而将补正系数q设定得较小,能够设定将划分线振动量较大情况下的横摆角θ的不稳定度考虑在内的偏离判断用参数,能够减少误警报的频率。
需要说明的是,基于划分线振动量设定的偏离判断用参数也可以在如第一实施方式的说明记载的那样、基于在图2的步骤202中求出的污渍程度而设定的偏离判断用参数之外另行运算。在该情况下,偏离判断参数设定部4在步骤204中选择两种偏离判断用参数中的任一者或者将两者的偏离判断用参数平均,来决定最终的偏离判断用参数。需要说明的是,期望对两种偏离判断用参数进行比较而选择较小的一方作为最终偏离判断用参数,由此,能够进一步减少误警报的频率。
另外,在上述的第一实施方式、第二实施方式及第三实施方式中的任一实施方式中,都存在车道偏离警报装置100具有用于除去透镜污渍的清洗装置的情况。在利用清洗装置清洗透镜污渍的期间,在车道偏离警报装置100从摄像装置101获取的图像中混入清洗液、雨刮等而难以进行划分线的检测。因此,在利用清洗装置来清洗透镜污渍的期间,期望做成符合警报判断部5的警报抑制条件或利用划分线检测参数设定部11强制地使检测出划分线的范围为零而做成未检测出划分线的状态等,不从车道偏离警报装置100向外部发出警报产生指令。另外,也可以具有报知装置,在因利用清洗装置清洗透镜污渍为原因而不从车道偏离警报装置100向外部输出警报产生指令时,该报知装置对驾驶员、乘客报知车道偏离警报装置100处于不向外部输出警报产生指令的状态的。这样,能够提高给予驾驶员、乘客的安心感、可靠性。
上述实施例仅是例示,能够在不偏离本发明范围的情况下进行各种变更。
Claims (14)
1.一种车道偏离警报装置,其具备:
划分线检测部,其对通过设于车辆上的摄像装置拍摄所述车辆的行驶路线而获得的图像中的多个划分线所含的划分线进行检测;
污渍检测部,其用于检测所述摄像装置的透镜及所述车辆的车厢外与所述摄像装置之间的分隔部的任一方的污渍的程度;
偏离判断部,其计算出所述车辆与所述划分线所成的角度并计算出从所述车辆的规定部位到所述划分线的距离,在从所述车辆的所述规定部位到所述划分线的所述距离小于预先设定的阈值的情况下,判断为所述车辆偏离所述划分线;以及
警报判断部,其在判断为所述车辆偏离所述划分线时基于检测出的所述污渍的所述程度输出警报信号,
输出所述警报信号时的所述车辆相对于所述划分线的位置根据检测出的所述污渍的所述程度而不同,
所述偏离判断部基于所述污渍的所述程度改变所述阈值。
2.根据权利要求1所述的车道偏离警报装置,其中,
所述偏离判断部基于所述污渍的所述程度改变用于使从所述车辆到所述划分线的所述距离的计算结果平滑化的过滤系数。
3.根据权利要求2所述的车道偏离警报装置,其中,
所述偏离判断部在计算出所述车辆与所述划分线所成的角度并计算出从所述车辆的规定部位到所述划分线的距离时,基于所述污渍的所述程度改变所述所成的角度的利用比率。
4.根据权利要求1所述的车道偏离警报装置,其中,
所述偏离判断部具有基于所述污渍的所述程度改变判断所述车辆是否偏离所述划分线时所使用的参数的偏离判断参数设定部,使用所述参数判断所述车辆是否偏离所述划分线。
5.根据权利要求4所述的车道偏离警报装置,其中,
所述偏离判断部在从所述车辆到所述划分线的距离小于预先设定的阈值的情况下判断为所述车辆偏离所述划分线,
所述偏离判断参数设定部基于由所述污渍检测部检测出的所述污渍的所述程度改变所述阈值。
6.根据权利要求5所述的车道偏离警报装置,其中,
所述偏离判断参数设定部基于所述污渍的所述程度改变用于使从所述车辆到所述划分线的距离的计算结果平滑化的过滤系数。
7.根据权利要求6所述的车道偏离警报装置,其中,
所述偏离判断参数设定部在计算出从所述车辆的规定部位到所述划分线的距离时,基于所述污渍的所述程度,改变所述车辆与所述划分线所成的角度的利用比率。
8.根据权利要求7所述的车道偏离警报装置,其中,
所述划分线检测部具有基于所述污渍的所述程度改变用于检测所述划分线的参数的划分线检测参数设定部。
9.根据权利要求8所述的车道偏离警报装置,其中,
所述划分线检测参数设定部基于所述污渍的所述程度改变所述划分线检测部对所述划分线进行检测的检测范围。
10.根据权利要求9所述的车道偏离警报装置,其中,
所述划分线检测参数设定部基于所述污渍的所述程度改变用于决定所述划分线的可靠度的阈值。
11.根据权利要求4所述的车道偏离警报装置,其中,
该车道偏离警报装置还具有划分线振动量运算部,该划分线振动量运算部用于运算从由所述划分线检测部检测出的所述划分线到所述摄像装置的光轴的距离的时间序列偏差的大小、即划分线振动量,
所述偏离判断参数设定部基于由所述划分线振动量运算部运算出的所述划分线振动量改变所述参数,
所述偏离判断部使用所述参数来判断所述车辆是否偏离所述划分线。
12.根据权利要求11所述的车道偏离警报装置,其中,
所述偏离判断部在从所述车辆到所述划分线的距离小于预先设定的阈值的情况下判断为所述车辆偏离所述划分线,
所述偏离判断参数设定部基于由所述划分线振动量运算部运算出的所述划分线振动量改变所述阈值。
13.根据权利要求12所述的车道偏离警报装置,其中,
所述偏离判断参数设定部基于由所述划分线振动量运算部运算出的所述划分线振动量改变用于使从所述车辆到所述划分线的所述距离的计算结果平滑化的过滤系数。
14.根据权利要求13所述的车道偏离警报装置,其中,
所述偏离判断参数设定部在算出从所述车辆的规定部位到所述划分线的距离时,基于由所述划分线振动量运算部运算出的所述划分线振动量改变所述车辆与所述划分线所成的角度的利用比率。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012-149871 | 2012-07-03 | ||
JP2012149871A JP5887219B2 (ja) | 2012-07-03 | 2012-07-03 | 車線逸脱警報装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103523013A CN103523013A (zh) | 2014-01-22 |
CN103523013B true CN103523013B (zh) | 2016-03-30 |
Family
ID=48740921
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310270897.5A Expired - Fee Related CN103523013B (zh) | 2012-07-03 | 2013-07-01 | 车道偏离警报装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20140009618A1 (zh) |
EP (1) | EP2682897B1 (zh) |
JP (1) | JP5887219B2 (zh) |
CN (1) | CN103523013B (zh) |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101502511B1 (ko) * | 2013-11-28 | 2015-03-13 | 현대모비스 주식회사 | 가상 차선 생성 장치와 방법 및 상기 장치를 구비하는 차선 유지 제어 시스템 |
JP6206334B2 (ja) * | 2014-06-10 | 2017-10-04 | 株式会社デンソー | 検出装置 |
JP6374238B2 (ja) * | 2014-07-01 | 2018-08-15 | クラリオン株式会社 | 車載装置 |
JP2016033729A (ja) * | 2014-07-31 | 2016-03-10 | クラリオン株式会社 | 周囲環境認識装置 |
US20160165571A1 (en) * | 2014-12-09 | 2016-06-09 | At&T Mobility Ii Llc | System and Method for Sending and Receiving Messages by a User Having Multiple Personas Associated with Respective Telephone Numbers |
US20160283874A1 (en) * | 2015-03-23 | 2016-09-29 | International Business Machines Corporation | Failure modeling by incorporation of terrestrial conditions |
CN104915642B (zh) * | 2015-05-26 | 2018-05-11 | 奇瑞汽车股份有限公司 | 前方车辆测距方法及装置 |
KR102222801B1 (ko) * | 2016-07-12 | 2021-03-05 | 닛산 지도우샤 가부시키가이샤 | 주행 제어 방법 및 주행 제어 장치 |
JP6776738B2 (ja) * | 2016-09-01 | 2020-10-28 | トヨタ自動車株式会社 | 情報提供装置および情報提供方法 |
US10339812B2 (en) | 2017-03-02 | 2019-07-02 | Denso International America, Inc. | Surrounding view camera blockage detection |
CN109398355A (zh) * | 2017-08-18 | 2019-03-01 | 郑州宇通客车股份有限公司 | 一种用于基于分布式电机驱动车辆的车道保持方法及车辆 |
CN107697154B (zh) * | 2017-08-30 | 2019-11-22 | 宝沃汽车(中国)有限公司 | 转向角纠正方法、电子助力转向系统及车辆 |
JP6663406B2 (ja) * | 2017-10-05 | 2020-03-11 | 本田技研工業株式会社 | 車両制御装置、車両制御方法、およびプログラム |
JP7140498B2 (ja) | 2018-01-25 | 2022-09-21 | フォルシアクラリオン・エレクトロニクス株式会社 | 表示制御装置及び表示システム |
CN108630014A (zh) * | 2018-05-10 | 2018-10-09 | 苏州天瞳威视电子科技有限公司 | 一种行车线偏离预警系统及方法 |
JP7271908B2 (ja) * | 2018-11-08 | 2023-05-12 | 株式会社アイシン | 周辺監視装置 |
CN110598517B (zh) * | 2019-06-25 | 2023-11-24 | 一汽奔腾轿车有限公司 | 一种弯道车道偏离的检测方法 |
CN112339773B (zh) * | 2020-11-10 | 2021-12-14 | 中科海微(北京)科技有限公司 | 一种基于单目视觉的非主动车道偏离预警方法及系统 |
US20230274554A1 (en) * | 2022-02-28 | 2023-08-31 | Continental Autonomous Mobility US, LLC | System and method for vehicle image correction |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008089966A2 (en) * | 2007-01-23 | 2008-07-31 | Valeo Schalter Und Sensoren Gmbh | Method and system for video-based road characterization, lane detection and departure prevention |
CN201400166Y (zh) * | 2009-03-19 | 2010-02-10 | 创研光电股份有限公司 | 连接全球定位系统使用的车道偏离警示器 |
CN201427553Y (zh) * | 2009-06-26 | 2010-03-24 | 长安大学 | 一种车辆偏离车道报警系统 |
CN101837780A (zh) * | 2009-03-18 | 2010-09-22 | 现代自动车株式会社 | 使用虚拟分车道线的车道偏离报警方法和系统 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3181146B2 (ja) * | 1993-06-30 | 2001-07-03 | マツダ株式会社 | 自動車の安全装置 |
JP3655541B2 (ja) * | 2000-09-18 | 2005-06-02 | トヨタ自動車株式会社 | レーン検出装置 |
JP3733875B2 (ja) * | 2000-09-29 | 2006-01-11 | 日産自動車株式会社 | 道路白線認識装置 |
JP2003044863A (ja) | 2001-07-30 | 2003-02-14 | Nissan Motor Co Ltd | 仕切線認識装置 |
JP4016735B2 (ja) * | 2001-11-30 | 2007-12-05 | 株式会社日立製作所 | レーンマーク認識方法 |
JP3780922B2 (ja) * | 2001-11-30 | 2006-05-31 | 日産自動車株式会社 | 道路白線認識装置 |
JP4124050B2 (ja) * | 2003-07-31 | 2008-07-23 | 日産自動車株式会社 | 車線逸脱防止装置 |
JP2005186813A (ja) * | 2003-12-25 | 2005-07-14 | Fuji Heavy Ind Ltd | 車両用運転支援装置 |
JP5040895B2 (ja) * | 2008-11-17 | 2012-10-03 | 株式会社デンソー | 視界状況判定装置、視界状況判定装置用プログラム及び視界状況判定方法 |
JP5141599B2 (ja) * | 2009-03-06 | 2013-02-13 | 日産自動車株式会社 | 車線認識装置及び方法 |
-
2012
- 2012-07-03 JP JP2012149871A patent/JP5887219B2/ja not_active Expired - Fee Related
-
2013
- 2013-07-01 CN CN201310270897.5A patent/CN103523013B/zh not_active Expired - Fee Related
- 2013-07-02 US US13/933,846 patent/US20140009618A1/en not_active Abandoned
- 2013-07-02 EP EP13174651.3A patent/EP2682897B1/en not_active Not-in-force
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008089966A2 (en) * | 2007-01-23 | 2008-07-31 | Valeo Schalter Und Sensoren Gmbh | Method and system for video-based road characterization, lane detection and departure prevention |
CN101837780A (zh) * | 2009-03-18 | 2010-09-22 | 现代自动车株式会社 | 使用虚拟分车道线的车道偏离报警方法和系统 |
CN201400166Y (zh) * | 2009-03-19 | 2010-02-10 | 创研光电股份有限公司 | 连接全球定位系统使用的车道偏离警示器 |
CN201427553Y (zh) * | 2009-06-26 | 2010-03-24 | 长安大学 | 一种车辆偏离车道报警系统 |
Also Published As
Publication number | Publication date |
---|---|
CN103523013A (zh) | 2014-01-22 |
JP2014013455A (ja) | 2014-01-23 |
US20140009618A1 (en) | 2014-01-09 |
EP2682897A2 (en) | 2014-01-08 |
EP2682897A3 (en) | 2015-02-11 |
EP2682897B1 (en) | 2018-11-21 |
JP5887219B2 (ja) | 2016-03-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103523013B (zh) | 车道偏离警报装置 | |
CN102826093B (zh) | 车道脱离警报装置 | |
JP6126094B2 (ja) | 車載用画像認識装置 | |
JP5981322B2 (ja) | 車載画像処理装置 | |
JP6174975B2 (ja) | 周囲環境認識装置 | |
US8311283B2 (en) | Method for detecting lane departure and apparatus thereof | |
KR101049901B1 (ko) | 센서정보를 이용한 지능형 주행안전 예방 시스템 및 방법 | |
JP4568637B2 (ja) | 道路認識装置 | |
EP2618304A1 (en) | Imaging apparatus, vehicle system having the same, and image-processing method | |
JP2007057331A (ja) | 車載霧判定装置 | |
EP3087532B1 (en) | Method for determining a width of a target vehicle by means of a camera system of a motor vehicle, camera system and motor vehicle | |
JP5457224B2 (ja) | 路面状態検出装置 | |
JP4813304B2 (ja) | 車両周辺監視装置 | |
JP4927908B2 (ja) | 車線位置検知システム | |
JP2017129543A (ja) | ステレオカメラ装置及び車両 | |
KR20170030816A (ko) | 신호등 감지기능을 갖는 자동 순항 제어장치 및 제어방법 | |
JP4762774B2 (ja) | 測距装置および車両の周辺監視装置 | |
JP4629638B2 (ja) | 車両の周辺監視装置 | |
JPH0778240A (ja) | 道路消失点の算出方法 | |
JP2005276041A (ja) | 車線位置検知システム | |
JP4538630B2 (ja) | 移動物体を検出するシステムとその方法 | |
US10867397B2 (en) | Vehicle with a driving assistance system with a low power mode | |
JP2002148356A (ja) | 車外監視装置 | |
JP4052226B2 (ja) | 車両用画像処理装置 | |
JP2022137030A (ja) | 画像処理装置、カメラ、移動体および画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160330 |