CN106483959A - 一种图像空间下的定距离跟车控制方法 - Google Patents

一种图像空间下的定距离跟车控制方法 Download PDF

Info

Publication number
CN106483959A
CN106483959A CN201610990254.1A CN201610990254A CN106483959A CN 106483959 A CN106483959 A CN 106483959A CN 201610990254 A CN201610990254 A CN 201610990254A CN 106483959 A CN106483959 A CN 106483959A
Authority
CN
China
Prior art keywords
automobile
image
coordinate system
car
control method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610990254.1A
Other languages
English (en)
Inventor
蔡英凤
刘泽
王海
陈龙
江浩斌
袁朝春
何友国
唐斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu University
Original Assignee
Jiangsu University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu University filed Critical Jiangsu University
Priority to CN201610990254.1A priority Critical patent/CN106483959A/zh
Publication of CN106483959A publication Critical patent/CN106483959A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • G05D1/0253Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means extracting relative motion information from a plurality of images taken successively, e.g. visual odometry, optical flow

Abstract

本发明公开了一种图像空间下的定距离跟车控制方法,涉及汽车图像处理领域,通过汽车A上的车载摄像机对其前方的汽车B的图像的检测,并记录T时刻汽车B图像空间中的宽度S1,并获取T+N时刻汽车B图像空间的宽度Sn,基于|S1‑Sn|最小的控制,该方法的优势在于该算法无需以世界坐标系下的变量作为控制对象,避免了图像坐标系‑世界坐标系转换时转换误差的负作用。

Description

一种图像空间下的定距离跟车控制方法
技术领域
本发明涉及汽车领域中的图像处理技术,尤其涉及到一种图像空间下的定距离跟车控制方法。
背景技术
用于快速路的定距离跟车技术是一种用于自动驾驶或半自动驾驶车队中的一个关键技术,它实现后车相对于前车以一个固定的距离进行跟随行驶。目前,传统基于视觉的用于快速路的定距离跟车控制算法往往分为以下三个步骤:1.识别近距离的前方车辆,确定图像中前车车轮和地面的接触位置2.利用摄像机内外部光学及几何参数,根据图像中前车车轮和地面的接触位置计算本车距离前方车辆的距离3.以电子油门的电压值和制动管路压力为控制变量,以两车相对距离为控制对象(控制目标),采用各种控制算法进行控制。
上述方法在通常情况下效果较好,但是在车载摄像头的俯仰角出现较明显变化的情况(俯仰角变化情况经常发生于车辆前后轴载荷变化、车辆悬架参数变化、道路颠簸时)下,由于摄像头位姿参数的变化,导致由此所推算出的世界坐标系下的两车距离出现误差,从而进一步导致控制对象失准,最终导致定距离跟车控制算法的失效。
本发明提出了一种仅基于图像变量的定距离跟车控制算法,其优势在于该方法无需以世界坐标系下的变量作为控制对象,避免了图像坐标系-世界坐标系转换时转换误差的负作用。
发明内容
本发明提出了一种基于图像变量的定距离跟车控制方法,其优势在于该方法无需以世界坐标系下的变量作为控制对象,避免图像坐标系-世界坐标系转换时转换误差的负作用。
本发明是通过如下技术方案得以实现的:
一种图像空间下的定距离跟车控制方法,包括如下步骤:
步骤一)汽车A行驶于快速路的一条车道上,汽车A前方有一个需要跟随的汽车B;在T时刻,驾驶员对汽车A发出一条指令,即令汽车A保持当前汽车A和汽车B两车距离不变,进行自动跟车;
步骤二)在T时刻,以汽车A上所搭载的车载摄像机,获取一幅采集到的汽车B图像;采用Haar特征中的Adaboost的车辆检测算法对前方汽车B进行识别后对检测到的前方汽车B区域图像采用Sobel算子,然后进行垂直边缘的增强,采用大津阈值分割法确定阈值并对垂直边缘进行二值化,对二值化图像在水平方向进行投影,并在左右部分分别选取投影数值最大的一个峰值点;计算两个峰值点横坐标之间的像素距离S1,即前车图像坐标系下的宽度;
步骤三)T+1时刻,获取一幅新采集到的前方汽车B图像,重复步骤二),获取前方汽车B前车图像坐标系下的宽度S2;以汽车A电子油门的电压值和制动管路压力为控制量,以S1、S2之差最小为控制目标,以经典的PID控制算法对电子油门的电压值和制动管路压力进行控制,从而实现基于图像的自动定距离跟车控制算法,避免图像坐标系-世界坐标系转换时转换误差的负作用;
步骤四)T+2...N时刻,重复步骤三),直至定距离跟车命令取消。
进一步的,所述步骤二)中的汽车A上所搭载的车载摄像机的位置安装在汽车A前挡风玻璃后,且镜头面向汽车A前方道路区域。
进一步的,所述步骤二)中大津阈值分割法是按图像的灰度特性,将图像分成背景和目标两部分;背景和目标之间的类间方差越大,说明构成图像的两部分的差别越大,当部分目标错分为背景或部分背景错分为目标都会导致两部分差别变小;因此,该方法通过迭代获得一个阈值T,该阈值使得背景和目标之间的方差最大。
进一步的,所述步骤二)在左右部分分别选取投影,其中左右部分是以图像中线分割,左半幅图像为左部分,右半幅图像为右部分。
有益效果:
1.该方法无需以世界坐标系下的变量作为控制对象,避免图像坐标系-世界坐标系转换时转换误差的负作用。
2.采用津阈值分割法对图像进行处理,阈值使得背景和目标之间的方差最大,从而更准确的对图像进行分析处理。
附图说明
附图1为汽车A采集到的前方图像;
附图2为采用成熟的Haar特征中Adaboost的车辆检测算法检测出的车辆;
附图3为大津阈值分割法二值化后的图像垂直边缘;
附图4为大津阈值分割法二值化后的图像在水平方向进行投影;
附图5为本发明系统工作流程图。
具体实施方式
现结合附图对本发明做进一步的描述:
该方法所涉及的设备是一台可以对车辆电子油门的电压值和制动管路压力进行控制的车辆,其控制可以利用外部控制器,通过车辆内部协议直接对电子油门的电压和和制动管路压力进行控制;另外,该汽车A车辆上安装有一台摄像头。该摄像头安装于汽车A前挡风玻璃后,镜头面向车前方道路区域。
结合附图5,步骤一)汽车A行驶于快速路(高速、高架等)的一条车道上,汽车A前方有一个需要跟随的汽车B;在T时刻,驾驶员对汽车A发出一条指令,令汽车A保持当前两车距离不变,进行自动跟车;
步骤二)在T时刻,以汽车A上所搭载的车载摄像机,获取一幅采集到的前方图像;采用成熟的Haar特征+Adaboost的车辆检测算法对前方车辆进行识别;该算法详细见方学志,方巍,郑钰辉。一种基于类Haar特征和改进AdaBoost分类器的车辆识别算法[J].电子学报,2011,39(5):1121-1126;对检测到的汽车A区域图像采用Sobel算子,该算法通过采用级联Adaboost构建训练模型,采用Haar特征对车辆与非车辆样本进行表达;然后以大量有标签的样本对在级联Adaboost模型下训练出一个用于进行车辆辨识的分类器。该分类器可以识别出图像中的车辆。随后,进行垂直边缘的增强,并采用大津阈值分割法[2]确定阈值并对垂直边缘进行二值化:大津阈值分割法是按图像的灰度特性,将图像分成背景和目标两部分。背景和目标之间的类间方差越大,说明构成图像的两部分的差别越大,当部分目标错分为背景或部分背景错分为目标都会导致两部分差别变小。因此,该方法通过迭代获得一个阈值T,该阈值使得背景和目标之间的方差最大。对二值化后的图像在水平方向进行投影,并在左右部分分别选取投影数值最大的两个峰值点。计算两个峰值点横坐标之间的像素距离S1,即前车图像坐标系下的宽度。
为便于理解,结合附图1至4,举1例:
图1为一幅采集到的前方图像,图2为采用成熟的Haar特征+Adaboost的车辆检测算法检测出的车辆,图3为二值化后的垂直边缘,图4为二值化图像在水平方向进行投影,并在左右部分分别选取,以图像中线分割,左半幅图像为左部分,右半幅图像为右部,投影数值最大的两个峰值点。
所述实施例为本发明的优选的实施方式,但本发明并不限于上述实施方式,在不背离本发明的实质内容的情况下,本领域技术人员能够做出的任何显而易见的改进、替换或变型均属于本发明的保护范围。

Claims (4)

1.一种图像空间下的定距离跟车控制方法,其特征在于,包括如下步骤:
步骤一)汽车A行驶于快速路的一条车道上,汽车A前方有一个需要跟随的汽车B;在T时刻,驾驶员对汽车A发出一条指令,即令汽车A保持当前汽车A和汽车B两车距离不变,进行自动跟车;
步骤二)在T时刻,以汽车A上所搭载的车载摄像机,获取一幅采集到的汽车B图像;采用Haar特征中的Adaboost的车辆检测算法对前方汽车B进行识别后对检测到的前方汽车B区域图像采用Sobel算子,然后进行垂直边缘的增强,采用大津阈值分割法确定阈值并对垂直边缘进行二值化,对二值化图像在水平方向进行投影,并在左右部分分别选取投影数值最大的一个峰值点;计算两个峰值点横坐标之间的像素距离S1,即前车图像坐标系下的宽度;
步骤三)T+1时刻,获取一幅新采集到的前方汽车B图像,重复步骤二),获取前方汽车B前车图像坐标系下的宽度S2;以汽车A电子油门的电压值和制动管路压力为控制量,以S1、S2之差最小为控制目标,以经典的PID控制算法对电子油门的电压值和制动管路压力进行控制,从而实现基于图像的自动定距离跟车控制算法,避免图像坐标系-世界坐标系转换时转换误差的负作用;
步骤四)T+2...N时刻,重复步骤三),直至定距离跟车命令取消。
2.根据权利要求1所述的图像空间下的定距离跟车控制方法,其特征在于,所述步骤二)中的汽车A上所搭载的车载摄像机的位置安装在汽车A前挡风玻璃后,且镜头面向汽车A前方道路区域。
3.根据权利要求1至2任一项所述的图像空间下的定距离跟车控制方法,其特征在于,所述步骤二)中大津阈值分割法是按图像的灰度特性,将图像分成背景和目标两部分;背景和目标之间的类间方差越大,说明构成图像的两部分的差别越大,当部分目标错分为背景或部分背景错分为目标都会导致两部分差别变小;因此,该方法通过迭代获得一个阈值T,该阈值使得背景和目标之间的方差最大。
4.根据权利要求1至2任一项所述的图像空间下的定距离跟车控制方法,其特征在于,所述步骤二)在左右部分分别选取投影,其中左右部分是以图像中线分割,左半幅图像为左部分,右半幅图像为右部分。
CN201610990254.1A 2016-11-10 2016-11-10 一种图像空间下的定距离跟车控制方法 Pending CN106483959A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610990254.1A CN106483959A (zh) 2016-11-10 2016-11-10 一种图像空间下的定距离跟车控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610990254.1A CN106483959A (zh) 2016-11-10 2016-11-10 一种图像空间下的定距离跟车控制方法

Publications (1)

Publication Number Publication Date
CN106483959A true CN106483959A (zh) 2017-03-08

Family

ID=58271905

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610990254.1A Pending CN106483959A (zh) 2016-11-10 2016-11-10 一种图像空间下的定距离跟车控制方法

Country Status (1)

Country Link
CN (1) CN106483959A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107290738A (zh) * 2017-06-27 2017-10-24 清华大学苏州汽车研究院(吴江) 一种测量前方车辆距离的方法和装置
CN111736473A (zh) * 2020-08-13 2020-10-02 东北大学秦皇岛分校 基于非线性终端滑模方法的车队有限时间制动控制方法
CN112105539A (zh) * 2018-05-15 2020-12-18 康蒂-特米克微电子有限公司 用于车队中在后车辆的自主操控方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1008482A2 (en) * 1998-12-07 2000-06-14 Ford Global Technologies, Inc. Adaptive cruise control system and methodology, including control of inter-vehicle spacing
CN102673563A (zh) * 2011-03-18 2012-09-19 财团法人工业技术研究院 节能控制方法与系统
US20120308114A1 (en) * 2011-05-31 2012-12-06 Gabriel Othmezouri Voting strategy for visual ego-motion from stereo
CN104049633A (zh) * 2014-06-13 2014-09-17 深圳市宇恒互动科技开发有限公司 一种随动控制方法、随动装置及随动系统
CN104699103A (zh) * 2015-02-28 2015-06-10 厦门大学 用于狭窄空间的四车分载智能拖车系统
CN104991580A (zh) * 2015-06-18 2015-10-21 奇瑞汽车股份有限公司 无人驾驶车辆的控制系统及其控制方法
CN105116901A (zh) * 2015-09-04 2015-12-02 中国石油大学(华东) 一种基于图像处理的双车联动智能校正系统
CN105159291A (zh) * 2015-07-10 2015-12-16 北京印刷学院 一种基于信息物理网的车队智能避障装置及避障方法
CN105678213A (zh) * 2015-12-20 2016-06-15 华南理工大学 基于视频特征统计的双模式蒙面人事件自动检测方法
CN106054902A (zh) * 2016-08-19 2016-10-26 郑晓辉 一种矿山无人运输车队控制系统

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1008482A2 (en) * 1998-12-07 2000-06-14 Ford Global Technologies, Inc. Adaptive cruise control system and methodology, including control of inter-vehicle spacing
CN102673563A (zh) * 2011-03-18 2012-09-19 财团法人工业技术研究院 节能控制方法与系统
US20120308114A1 (en) * 2011-05-31 2012-12-06 Gabriel Othmezouri Voting strategy for visual ego-motion from stereo
CN104049633A (zh) * 2014-06-13 2014-09-17 深圳市宇恒互动科技开发有限公司 一种随动控制方法、随动装置及随动系统
CN104699103A (zh) * 2015-02-28 2015-06-10 厦门大学 用于狭窄空间的四车分载智能拖车系统
CN104991580A (zh) * 2015-06-18 2015-10-21 奇瑞汽车股份有限公司 无人驾驶车辆的控制系统及其控制方法
CN105159291A (zh) * 2015-07-10 2015-12-16 北京印刷学院 一种基于信息物理网的车队智能避障装置及避障方法
CN105116901A (zh) * 2015-09-04 2015-12-02 中国石油大学(华东) 一种基于图像处理的双车联动智能校正系统
CN105678213A (zh) * 2015-12-20 2016-06-15 华南理工大学 基于视频特征统计的双模式蒙面人事件自动检测方法
CN106054902A (zh) * 2016-08-19 2016-10-26 郑晓辉 一种矿山无人运输车队控制系统

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
何春华等: "《基于改进Sobel算子的边缘检测算法的研究》", 《光学技术》 *
张超等: "《智能车跑道图像的大津阈值分割算法》", 《吉首大学学报(自然科学版)》 *
张雪芹等: "《基于类Haar特征和AdaBoost的车辆识别技术》", 《华东理工大学学报(自然科学版)》 *
牛世峰等: "《基于CCD摄像技术的公交车跟车距离监测系统研究》", 《技术科学与工程》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107290738A (zh) * 2017-06-27 2017-10-24 清华大学苏州汽车研究院(吴江) 一种测量前方车辆距离的方法和装置
CN112105539A (zh) * 2018-05-15 2020-12-18 康蒂-特米克微电子有限公司 用于车队中在后车辆的自主操控方法
CN111736473A (zh) * 2020-08-13 2020-10-02 东北大学秦皇岛分校 基于非线性终端滑模方法的车队有限时间制动控制方法

Similar Documents

Publication Publication Date Title
CN107010066B (zh) 车辆的行驶控制装置
CN106295560B (zh) 基于车载双目相机和分段式pid控制的车道保持方法
CN106537180B (zh) 用于用针对行人的主动制动的摄影机输入缓解雷达传感器限制的方法
JP3925488B2 (ja) 車両用画像処理装置
US11024051B2 (en) Object detection device
WO2013136878A1 (ja) 物体検出装置
JP6230482B2 (ja) レーンマーク認識装置、車両及びレーンマーク認識方法
CN106428209A (zh) 转向辅助装置
CN106845332B (zh) 利用轮胎旁溅的基于视觉的潮湿路面状况检测
US20170158237A1 (en) Vehicle traveling control apparatus
JP5363920B2 (ja) 車両用白線認識装置
US10628960B2 (en) Information processing apparatus, imaging apparatus, device control system, moving object, information processing method, and recording medium
JP2009175846A (ja) 車両検出装置
CN113501001A (zh) 一种无人驾驶车辆变道行驶控制方法、系统及终端
JP2016500596A (ja) 車線を逸脱した後の車両の復帰をサポートするための方法、並びに、装置
CN106483959A (zh) 一种图像空间下的定距离跟车控制方法
US10108866B2 (en) Method and system for robust curb and bump detection from front or rear monocular cameras
Ismail et al. Vision-based system for line following mobile robot
Javadi et al. A robust vision-based lane boundaries detection approach for intelligent vehicles
JPWO2019065564A1 (ja) 自動運転制御装置及び方法
US8306270B2 (en) Vehicle travel support device, vehicle, vehicle travel support program
JP6763198B2 (ja) 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム
JP2019067115A (ja) 路面検出装置
KR101738425B1 (ko) 다차선 검출을 위한 관심 영역 설정 장치 및 방법
KR20140087622A (ko) 촬영 영상의 휘도를 이용한 차선 추출 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170308