CN110334625A - 一种面向自动泊车的停车位视觉识别系统及其识别方法 - Google Patents

一种面向自动泊车的停车位视觉识别系统及其识别方法 Download PDF

Info

Publication number
CN110334625A
CN110334625A CN201910555377.6A CN201910555377A CN110334625A CN 110334625 A CN110334625 A CN 110334625A CN 201910555377 A CN201910555377 A CN 201910555377A CN 110334625 A CN110334625 A CN 110334625A
Authority
CN
China
Prior art keywords
parking stall
parking
image
target
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910555377.6A
Other languages
English (en)
Inventor
张小俊
张玉峰
孙凌宇
张明路
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hebei University of Technology
Original Assignee
Hebei University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hebei University of Technology filed Critical Hebei University of Technology
Priority to CN201910555377.6A priority Critical patent/CN110334625A/zh
Publication of CN110334625A publication Critical patent/CN110334625A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/586Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of parking space
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/14Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/141Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及一种面向自动泊车的停车位视觉识别系统及其识别方法,该系统包括对停车场内的停车位图像进行采集的停车位图像采集模块、对接收到的停车位视频图像按帧依次进行识别处理的停车位图像识别处理模块、对停车位图像识别处理模块识别出的目标停车位进行追踪识别的停车位追踪模块以及将停车位追踪模块传递的目标停车位与目标停车位在世界坐标系下的坐标信息实时显示出来的停车位显示模块。本发明设计合理,能在不同环境下准确的识别目标停车位,且识别过程不受目标车位周围停驻车辆的影响,使自动泊车成过程更加准确,具有成本较低、停车位识别正确率较高、能适应不同的环境且鲁棒性较好等特点,有着良好的市场应用前景与推广使用价值。

Description

一种面向自动泊车的停车位视觉识别系统及其识别方法
技术领域
本发明属于计算机图像识别技术领域,尤其是一种面向自动泊车的停车位视觉识别系统及其识别方法。
背景技术
经济的繁荣发展与科技的进步推动了汽车工业朝着自动化、智能化的方向不断前进。随着汽车保有量的不断上升,引发了“泊车难”等一系列问题。为了充分利用城市空间中有限的停车位,提高泊车效率,自动泊车技术应运而生。作为汽车智能化的关键技术之一,自动泊车技术相较人为泊车过程,泊车路径更加准确,泊车操作更加简洁,能尽量减少人为操作失误导致的刮蹭、碰撞等事故,使得泊车过程安全高效。
在自动泊车领域,成熟且应用广泛的停车位检测技术是基于超声波雷达的停车位探测技术。该技术通过超声波雷达探测目标车位周围的停驻车辆,并以停驻车辆之间的距离作为参考来判断目标车位是否可用于泊车。但是,基于超声波雷达的停车位探测技术对目标车位周围的环境过于依赖,当目标车位周围没有停驻车辆或停驻车辆只存在目标车位的前后一侧或左右一侧时,无法有效识别出目标车位。并且,泊车过程结束后,车辆的停放位置受目标车位周围停驻车辆停放位置的影响,当目标车位周围停驻车辆的停放位置偏离所在车位中心区域时,可能导致自动泊车结束后车辆的停放位置偏向目标车位的一侧甚至超出目标车位以致泊车失败。同时,超声波雷达的探测精度受天气、温度、噪声等环境因素的影响,恶劣的环境条件下对目标车位的探测存在较大的偏差,将对最终的泊车精度产生消极影响。
发明内容
本发明的目的在于克服现有技术的不足,提出一种面向自动泊车的停车位视觉识别系统及其识别方法,解决泊车过程中利用超声波雷达探测停车位时的局限与不足,减少停车位识别过程对周围环境的依赖,进而提高泊车的效率与准确性。
本发明解决其技术问题是采取以下技术方案实现的:
一种面向自动泊车的停车位视觉识别系统,包括如下模块:
停车位图像采集模块:对停车场内的停车位图像进行采集,并将采集到的停车位视频图像传递给停车位图像识别处理模块;
停车位图像识别处理模块:对接收到的停车位视频图像按帧依次进行识别处理,直至在某帧视频图像中识别出拍摄完整的停车位,确定该帧视频图像中识别出的完整停车位为目标停车位,并将目标停车位的四个角点的图像坐标传递给停车位追踪模块;
停车位追踪模块:对停车位图像识别处理模块识别出的目标停车位进行追踪识别,绘制目标停车位与目标停车位在世界坐标系下的坐标信息并传递给停车位显示模块;
停车位显示模块:将停车位追踪模块传递的目标停车位与目标停车位在世界坐标系下的坐标信息实时显示出来,供驾驶员参考。
进一步,所述停车位图像采集模块整体安装在车辆两侧B柱上方的车顶边缘;该停车位图像采集模块包含两个安装在底座上的广角摄像头,每个广角摄像均安装在一个底座上并可360度旋转。
一种面向自动泊车的停车位视觉识别系统的识别方法,包括以下步骤:
步骤1、停车位图像采集模块对停车场内的停车位图像进行采集,并将采集到的停车位视频图像传递给停车位图像识别处理模块;
步骤2、停车位图像识别处理模块对接收到的停车位视频图像按帧依次进行识别处理,直至在某帧视频图像中识别出拍摄完整的停车位,确定该帧视频图像中识别出的完整停车位为目标停车位,并将目标停车位的四个角点的图像坐标传递给停车位追踪模块;
步骤3、对停车位图像识别处理模块识别出的目标停车位进行追踪识别,绘制目标停车位与目标停车位在世界坐标系下的坐标信息并传递给停车位显示模块,直至自动泊车过程结束;
步骤4、停车位显示模块将停车位追踪模块检测到并绘制出来的目标停车位与目标停车位在世界坐标系下的坐标信息实时显示出来,供驾驶员参考,实现人机交互功能。
进一步,所述步骤1停车位图像采集模块是通过安装在车辆两侧B柱上方的车顶边缘处的可360度旋转的两个广角摄像头实现的。
进一步,所述步骤2停车位图像识别处理模块识别停车位视频图像中停车位的方法为:
(1)对原始停车位图像中的停车位与背景进行优化分割,将该帧停车位图像分别转换至灰度图与HSV颜色空间;
(2)对优化处理后得到的停车位与背景的分割图像进行细化操作以提取停车位的骨架;
(3)将每条车位线的骨架点聚集起来进行直线拟合,得到每条车位线所在的直线,并将拟合得到的直线聚集,形成车位线集合;
(4)对车位线集合中的直线两两求交点作为停车位角点的候选点,并对候选角点进行判断,如果两个候选停车位角点均在图像之内且连线与车位线集合中的某条直线重合同时该两点之间均匀分布着车位线骨架点,则说明这两个停车位候选角点是停车位四个角点中位于同一条车位线上的两个角点,进行多次判断后,得到图像中停车位的所有角点;判断角点的个数,如果其个数为四,则确定该停车位为拍摄到的完整的目标停车位并将其四个角点的图像坐标传递给停车位追踪模块;否则,继续对接收到的停车位视频图像的第二帧停车位图像进行上述识别操作,直至检测到的角点个数等于四即图像中拍摄到完整的停车位。
进一步,所述步骤(1)的具体实现方法为:
①统计停车位灰度图像中的灰度值,利用直方图阈值法确定灰度分割阈值,根据灰度分割阈值对灰度图进行二值化操作,得到停车位与背景的分割图像即二值图,记为PGray
②对停车位的HSV颜色空间图进行直方图均衡化,然后根据停车位的颜色设定色调H、饱和度S、明度V三个分量的分割阈值,根据分割阈值对停车位的HSV颜色空间图进行二值化操作,得到停车位与背景的分割图像即二值图,记为PHSV
③对分割图像PGray与PHSV分别进行强角点检测,通过对分割图像PGray与PHSV中强角点的分布情况来判断PGray与PHSV分割效果的优劣,决定对二者进行择优选择或者将二者合并。
进一步,所述步骤②三个分量的分割阈值设置如下:白色停车位:H∈[0,360],S∈[0,0.12],V∈[0.78,1];黄色停车位:H∈[22,70],S∈[0.27,1],V∈[0.02,1];蓝色停车位:H∈[200,248],S∈[0.17,1],V∈[0.18,1]。
进一步,所述步骤③决定对二者进行择优选择或者将二者合并的方法为:比较分割图像PGray与PHSV中强角点的分布效果,如果二者强角点的分布效果相差较大,取分布效果较优者作为最终的停车位与背景分割图像;如果二者强角点的分布规律相近,将二者合并后的到的图像作为最终的停车位与背景分割图像。
进一步,所述步骤3的具体实现方法为:
停车位追踪模块接收由停车位图像识别处理模块传来的目标停车位的四个角点的图像坐标,并在接下来的每帧停车位视频图像中追踪目标停车位的四个角点;对每帧停车位视频图像中追踪到的停车位的四个角点,结合其图像坐标以及停车位图像采集模块中摄像头的内外参数,同时建立图像平面与地面的平面单应性关系,进行图像坐标系、摄像头坐标系、世界坐标系的转换,获得该帧中停车位四个角点在世界坐标系下的坐标即目标停车位的实际位置信息,并将其实时传送给自动泊车系统的路径规划模块,路径规划模块根据实时获得的目标停车位的实际位置信息实时规划泊车路径;同时,停车位追踪模块根据每帧停车位视频图像中目标停车位四个角点的图像坐标在该帧中绘制停车位,将绘制的停车位连同停车位四个角点在世界坐标系下的坐标信息一并传递给停车位显示模块并在停车位显示模块中实时显示出来;在车辆沿泊车路径移动时,停车位追踪模块根据视频图像中目标停车位的移动方向与趋势向停车位图像采集模块发送动作信息,使停车位图像采集模块及时调整自身的姿态和拍摄角度,保证其能一直拍摄到目标停车位,避免目标停车位脱离视频图像画面,直到自动泊车过程结束。
本发明的优点和积极效果是:
1、本发明对目标停车位的识别不依赖目标停车位周围的停驻车辆,只要停车区域的地面上绘制有停车位,不论停车位周围是否有车辆停驻,均能将停车位识别出来。
2、本发明使自动泊车系统的路径规划模块所规划的泊车路径不受目标停车位周围停驻车辆的影响,直接从本发明系统获取目标停车位的准确位置并据此实时规划泊车路径,使最终自动泊车结束后车辆准确的停放在目标停车位的中心区域,避免车辆偏离目标停车位停放甚至超出目标停车位停放。
3、本发明在对停车位视频图像中的目标停车位进行识别时,采用了将基于灰度图的图像分割方法与基于HSV颜色空间的图像分割方法相结合的图像分割方法,使不同光照条件下视频图像中目标停车位与背景的分割均能达到良好的效果,进而提高了本发明系统在不同光照条件下对停车位视频图像中目标停车位识别效果的鲁棒性。
4、本发明在对停车位视频图像中的目标停车位进行识别时,采用了提取目标停车位骨架并根据车位线骨架点拟合车位线的车位线检测方法,准确的检测出了每条车位线的中轴所在的直线,同时尽量避免了对图像中冗余直线和干扰直线的检测,有效的降低了车位线的误检率,使车位线的检测过程准确而简洁。
5、本发明在某帧停车位视频图像中利用识别算法识别出目标停车位后,在接下来的每帧停车位视频图像中采用追踪的方法追踪识别目标停车位,相较于对每帧停车位视频图像均采用识别算法识别目标停车位的方法,采用追踪识别目标停车位的方法用时较短,提高了目标停车位识别过程的实时性。
6、本发明的停车位图像采集模块能根据车辆沿泊车路径的运动而实时调整自身的姿态和拍摄角度,保证其能一直拍摄到目标停车位,避免目标停车位脱离视频图像画面,使自动泊车的路径规划模块能实时接收到目标停车位的准确位置信息,确保了泊车路径与最终车辆停放位置的准确性。
7、本发明将目标停车位的识别结果和实际的位置信息在停车位显示模块中显示出来,供驾驶员参考,人机交互友好。
8、本发明设计合理,能在不同环境下准确的识别目标停车位,且识别过程不受目标车位周围停驻车辆的影响,使自动泊车成过程更加准确,具有成本较低、停车位识别正确率较高、能适应不同的环境且鲁棒性较好等特点,有着良好的市场应用前景与推广使用价值。
附图说明
图1为本发明的系统连接示意图;
图2为本发明的停车位图像采集模块的布置示意图;
图3为本发明的停车位识别处理模块对停车位视频图像中目标停车位进行识别的算法流程图;
图4为本发明的停车位追踪模块追踪识别目标停车位的示意图。
具体实施方式
以下结合附图对本发明实施例做进一步详述。
实施例1
一种面向自动泊车的停车位视觉识别系统,如图1所示,包括停车位图像采集模块、停车位图像识别处理模块、停车位追踪模块和停车位显示模块。下面对各个模块分别进行说明:
停车位图像采集模块将停车场内采集到的停车位视频图像传递给停车位图像识别处理模块。如图2所示,停车位图像采集模块包含两个广角摄像头,每个广角摄像均有一个底座与其配套安装,每个摄像头能够在底座上360度旋转并可以按需要调整自身姿态及拍摄角度。停车位图像采集模块整体安装在车辆两侧B柱上方的车顶边缘,负责采集停车场内的停车位图像。
停车位图像识别处理模块对接收到的停车位视频图像按帧依次进行识别处理,直至在某帧视频图像中识别出拍摄完整的停车位,即识别出了停车位的四个角点,确定该帧视频图像中识别出的完整停车位为目标停车位,并将目标停车位的四个角点的图像坐标传递给停车位追踪模块。
停车位追踪模块根据停车位图像识别处理模块传来的目标停车位四个角点的图像坐标在接下来的每帧停车位视频图像中对目标停车位的四个角点进行追踪,获取目标停车位四个角点在每帧停车位视频图像中的坐标。同时,停车位追踪模块对每帧停车位视频图像中目标停车位的四个角点的图像坐标进行图像坐标系、摄像头坐标系、世界坐标系的转换,获得该帧中停车位四个角点在世界坐标系下的坐标即目标停车位的实际位置信息,将其传递给自动泊车系统的路径规划模块,同时根据该帧中停车位四个角点的图像坐标在该帧中绘制停车位,将绘制的停车位连同停车位四个角点在世界坐标系下的坐标信息一并传递给停车位显示模块并在停车位显示模块中实时显示出来。自动泊车系统的路径规划模块根据停车位追踪模块实时传来的目标停车位的实际位置信息开始实时规划泊车路径并使车辆沿规划路径移动。随着车辆的移动,目标停车位在视频图像中也沿着某一方向移动,有脱离图像画面的趋势。此时,停车位追踪模块根据视频图像中目标停车位移动的方向与趋势向停车位图像采集模块发出动作指令,使停车位图像采集模块及时调整自身的姿态与拍摄角度,保证其能一直拍摄到目标停车位,避免目标停车位脱离视频图像画面,直至自动泊车过程结束。
停车位显示模块:将停车位追踪模块检测到并绘制出来的目标停车位与目标停车位在世界坐标系下的坐标信息实时显示出来,供驾驶员参考。
实施例2
基于上述面向自动泊车的停车位视觉识别系统,一种面向自动泊车的停车位视觉识别方法,包括以下步骤:
步骤1、停车位图像采集模块对停车场内的停车位图像进行采集,并将采集到的停车位视频图像传递给停车位图像识别处理模块。
步骤2、停车位图像识别处理模块对接收到的停车位视频图像按帧依次进行识别处理,直至在某帧视频图像中识别出拍摄完整的停车位,确定该帧视频图像中识别出的完整停车位为目标停车位,并将目标停车位的四个角点的图像坐标传递给停车位追踪模块。
如图3所示,停车位图像识别处理模块在对停车位视频图像中目标停车位进行识别时,停车位图像识别处理模块从停车位图像采集模块传来的停车位视频图像中获取一帧图像,对其进行识别处理的步骤如下:
(1)对原始停车位图像中的停车位与背景进行优化分割;将该帧停车位图像分别转换至灰度图与HSV颜色空间。
停车位的每条车位线是具有一定宽度的直线,亮度较地面等背景较高,且具有特定的颜色,包括白色、黄色、蓝色,分别表示收费停车位、专用停车位、免费停车位。
本步骤的具体实现方法为:
①统计停车位灰度图像中的灰度值,利用直方图阈值法确定灰度分割阈值,根据灰度分割阈值对灰度图进行二值化操作,得到停车位与背景的分割图像即二值图,记为PGray
②对停车位的HSV颜色空间图进行直方图均衡化,增强图像中不同区域之间的对比度。然后根据停车位的颜色设定H(色调)、S(饱和度)、V(明度)三个分量的分割阈值,其中,其中白色停车位(收费停车位):H∈[0,360],S∈[0,0.12],V∈[0.78,1];黄色停车位(专用停车位):H∈[22,70],S∈[0.27,1],V∈[0.02,1];蓝色停车位(免费停车位):H∈[200,248],S∈[0.17,1],V∈[0.18,1]。根据分割阈值对停车位的HSV颜色空间图进行二值化操作,得到停车位与背景的分割图像即二值图,记为PHSV
③对分割图像PGray与PHSV分别进行强角点检测,通过对分割图像PGray与PHSV中强角点的分布情况来判断PGray与PHSV分割效果的优劣,决定对二者进行择优选择或者将二者合并。鉴于车位线是具有一定宽度的直线,因而停车位与背景分割效果好的图像中强角点集中在车位线边缘呈直线分布,整体表现出规律的分布效果。反之,停车位与背景分割效果差的图像中多数强角点分布杂乱,沿直线分布的强角点较少,整体表现出无规律的分布效果。比较分割图像PGray与PHSV中强角点的分布效果,如果二者强角点的分布效果相差较大,取强角点分布较为规律即分布效果较优者作为最终的停车位与背景分割图像;如果二者强角点的分布规律相近,将二者合并(取并集)后的到的图像作为最终的停车位与背景分割图像。经过对分割图像PGray与PHSV的择优选择或合并,提高了不同光照条件下图像中停车位与背景分割效果的鲁棒性。
(2)对优化处理后得到的停车位与背景的分割图像进行细化操作以提取停车位的骨架。本发明采用改进的Zhang并行细化算法对优化处理后的停车位与背景的分割图像进行细化操作以提取停车位的骨架,该方法保证在细化过程中使停车位的基本结构特征保持不变,同时保证停车位的细节特征与车位线的连通性不被破坏,得到的骨架线位于车位线的中轴且其宽度为单像素。
(3)将每条车位线的骨架点聚集起来进行直线拟合,得到每条车位线所在的直线,并将拟合得到的直线聚集,形成车位线集合。
(4)对车位线集合中的直线两两求交点作为停车位角点的候选点,并对候选角点进行判断,如果两个候选停车位角点均在图像之内且连线与车位线集合中的某条直线重合同时该两点之间均匀分布着车位线骨架点,则说明这两个停车位候选角点是停车位四个角点中位于同一条车位线上的两个角点,进行多次判断后,得到图像中停车位的所有角点。判断角点的个数,如果其个数为四,则确定该停车位为拍摄到的完整的目标停车位并将其四个角点的图像坐标传递给停车位追踪模块;否则,继续对接收到的停车位视频图像的第二帧停车位图像进行上述识别操作,直至检测到的角点个数等于四即图像中拍摄到完整的停车位。
步骤3、对停车位图像识别处理模块识别出的目标停车位进行追踪识别,绘制目标停车位与目标停车位在世界坐标系下的坐标信息并传递给停车位显示模块,直至自动泊车过程结束。
如图4所示,停车位追踪模块追踪识别目标停车位的具体方法为:
停车位追踪模块接收到停车位识别处理模块传来的目标停车位ABCD的四个角点的图像坐标后,在接下来的每帧停车位视频图像中对目标停车位ABCD的四个角点进行追踪识别。同时,对每帧停车位视频图像中追踪到的目标停车位ABCD的四个角点,结合其图像坐标以及停车位图像采集模块中摄像头的内外参数,同时建立图像平面与地面的平面单应性关系,进行图像坐标系、摄像头坐标系、世界坐标系的转换,获得该帧中目标停车位ABCD四个角点在世界坐标系下的坐标即目标停车位ABCD的实际位置信息,并将其实时传送给自动泊车系统的路径规划模块,路径规划模块根据实时获得的目标停车位ABCD的实际位置信息实时规划泊车路径。与此同时,停车位追踪模块根据每帧停车位视频图像中目标停车位ABCD四个角点的图像坐标在该帧中绘制目标停车位ABCD,将绘制的目标停车位ABCD连同其四个角点在世界坐标系下的坐标信息一并传递给停车位显示模块并在停车位显示模块中实时显示出来。在车辆沿泊车路径移动时,停车位追踪模块根据视频图像中目标停车位ABCD的移动方向与趋势向停车位图像采集模块C2发送动作信息,使停车位图像采集模块C2及时调整自身的姿态和拍摄角度,保证目标停车位ABCD一直处于停车位图像采集模块C2的视角范围EC2F之内,避免车辆沿泊车路径移动时目标停车位ABCD脱离视频图像画面,直到自动泊车过程结束。
步骤4、停车位显示模块将停车位追踪模块检测到并绘制出来的目标停车位与目标停车位在世界坐标系下的坐标信息实时显示出来,供驾驶员参考,实现良好的人机交互功能。
需要强调的是,本发明所述的实施例是说明性的,而不是限定性的,因此本发明包括并不限于具体实施方式中所述的实施例,凡是由本领域技术人员根据本发明的技术方案得出的其他实施方式,同样属于本发明保护的范围。

Claims (9)

1.一种面向自动泊车的停车位视觉识别系统,其特征在于包括如下模块:
停车位图像采集模块:对停车场内的停车位图像进行采集,并将采集到的停车位视频图像传递给停车位图像识别处理模块;
停车位图像识别处理模块:对接收到的停车位视频图像按帧依次进行识别处理,直至在某帧视频图像中识别出拍摄完整的停车位,确定该帧视频图像中识别出的完整停车位为目标停车位,并将目标停车位的四个角点的图像坐标传递给停车位追踪模块;
停车位追踪模块:对停车位图像识别处理模块识别出的目标停车位进行追踪识别,绘制目标停车位与目标停车位在世界坐标系下的坐标信息并传递给停车位显示模块;
停车位显示模块:将停车位追踪模块传递的目标停车位与目标停车位在世界坐标系下的坐标信息实时显示出来,供驾驶员参考。
2.根据权利要求1所述的一种面向自动泊车的停车位视觉识别系统,其特征在于:所述停车位图像采集模块整体安装在车辆两侧B柱上方的车顶边缘;该停车位图像采集模块包含两个安装在底座上的广角摄像头,每个广角摄像均安装在一个底座上并可360度旋转。
3.一种如权利要求1或2所述面向自动泊车的停车位视觉识别系统的识别方法,其特征在于包括以下步骤:
步骤1、停车位图像采集模块对停车场内的停车位图像进行采集,并将采集到的停车位视频图像传递给停车位图像识别处理模块;
步骤2、停车位图像识别处理模块对接收到的停车位视频图像按帧依次进行识别处理,直至在某帧视频图像中识别出拍摄完整的停车位,确定该帧视频图像中识别出的完整停车位为目标停车位,并将目标停车位的四个角点的图像坐标传递给停车位追踪模块;
步骤3、对停车位图像识别处理模块识别出的目标停车位进行追踪识别,绘制目标停车位与目标停车位在世界坐标系下的坐标信息并传递给停车位显示模块,直至自动泊车过程结束;
步骤4、停车位显示模块将停车位追踪模块检测到并绘制出来的目标停车位与目标停车位在世界坐标系下的坐标信息实时显示出来,供驾驶员参考,实现人机交互功能。
4.根据权利要求3所述一种面向自动泊车的停车位视觉识别系统的识别方法,其特征在于:所述步骤1停车位图像采集模块是通过安装在车辆两侧B柱上方的车顶边缘处的可360度旋转的两个广角摄像头实现的。
5.根据权利要求3所述一种面向自动泊车的停车位视觉识别系统的识别方法,其特征在于:所述步骤2停车位图像识别处理模块识别停车位视频图像中停车位的方法为:
⑴对原始停车位图像中的停车位与背景进行优化分割,将该帧停车位图像分别转换至灰度图与HSV颜色空间;
⑵对优化处理后得到的停车位与背景的分割图像进行细化操作以提取停车位的骨架;
⑶将每条车位线的骨架点聚集起来进行直线拟合,得到每条车位线所在的直线,并将拟合得到的直线聚集,形成车位线集合;
⑷对车位线集合中的直线两两求交点作为停车位角点的候选点,并对候选角点进行判断,如果两个候选停车位角点均在图像之内且连线与车位线集合中的某条直线重合同时该两点之间均匀分布着车位线骨架点,则说明这两个停车位候选角点是停车位四个角点中位于同一条车位线上的两个角点,进行多次判断后,得到图像中停车位的所有角点;判断角点的个数,如果其个数为四,则确定该停车位为拍摄到的完整的目标停车位并将其四个角点的图像坐标传递给停车位追踪模块;否则,继续对接收到的停车位视频图像的第二帧停车位图像进行上述识别操作,直至检测到的角点个数等于四即图像中拍摄到完整的停车位。
6.根据权利要求5所述一种面向自动泊车的停车位视觉识别系统的识别方法,其特征在于:所述步骤(1)的具体实现方法为:
①统计停车位灰度图像中的灰度值,利用直方图阈值法确定灰度分割阈值,根据灰度分割阈值对灰度图进行二值化操作,得到停车位与背景的分割图像即二值图,记为PGray
②对停车位的HSV颜色空间图进行直方图均衡化,然后根据停车位的颜色设定色调H、饱和度S、明度V三个分量的分割阈值,根据分割阈值对停车位的HSV颜色空间图进行二值化操作,得到停车位与背景的分割图像即二值图,记为PHSV
③对分割图像PGray与PHSV分别进行强角点检测,通过对分割图像PGray与PHSV中强角点的分布情况来判断PGray与PHSV分割效果的优劣,决定对二者进行择优选择或者将二者合并。
7.根据权利要求6所述一种面向自动泊车的停车位视觉识别系统的识别方法,其特征在于:所述步骤②三个分量的分割阈值设置如下:白色停车位:H∈[0,360],S∈[0,0.12],V∈[0.78,1];黄色停车位:H∈[22,70],S∈[0.27,1],V∈[0.02,1];蓝色停车位:H∈[200,248],S∈[0.17,1],V∈[0.18,1]。
8.根据权利要求6所述一种面向自动泊车的停车位视觉识别系统的识别方法,其特征在于:所述步骤③决定对二者进行择优选择或者将二者合并的方法为:比较分割图像PGray与PHSV中强角点的分布效果,如果二者强角点的分布效果相差较大,取分布效果较优者作为最终的停车位与背景分割图像;如果二者强角点的分布规律相近,将二者合并后的到的图像作为最终的停车位与背景分割图像。
9.根据权利要求3所述一种面向自动泊车的停车位视觉识别系统的识别方法,其特征在于:所述步骤3的具体实现方法为:
停车位追踪模块接收由停车位图像识别处理模块传来的目标停车位的四个角点的图像坐标,并在接下来的每帧停车位视频图像中追踪目标停车位的四个角点;对每帧停车位视频图像中追踪到的停车位的四个角点,结合其图像坐标以及停车位图像采集模块中摄像头的内外参数,同时建立图像平面与地面的平面单应性关系,进行图像坐标系、摄像头坐标系、世界坐标系的转换,获得该帧中停车位四个角点在世界坐标系下的坐标即目标停车位的实际位置信息,并将其实时传送给自动泊车系统的路径规划模块,路径规划模块根据实时获得的目标停车位的实际位置信息实时规划泊车路径;同时,停车位追踪模块根据每帧停车位视频图像中目标停车位四个角点的图像坐标在该帧中绘制停车位,将绘制的停车位连同停车位四个角点在世界坐标系下的坐标信息一并传递给停车位显示模块并在停车位显示模块中实时显示出来;在车辆沿泊车路径移动时,停车位追踪模块根据视频图像中目标停车位的移动方向与趋势向停车位图像采集模块发送动作信息,使停车位图像采集模块及时调整自身的姿态和拍摄角度,保证其能一直拍摄到目标停车位,避免目标停车位脱离视频图像画面,直到自动泊车过程结束。
CN201910555377.6A 2019-06-25 2019-06-25 一种面向自动泊车的停车位视觉识别系统及其识别方法 Pending CN110334625A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910555377.6A CN110334625A (zh) 2019-06-25 2019-06-25 一种面向自动泊车的停车位视觉识别系统及其识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910555377.6A CN110334625A (zh) 2019-06-25 2019-06-25 一种面向自动泊车的停车位视觉识别系统及其识别方法

Publications (1)

Publication Number Publication Date
CN110334625A true CN110334625A (zh) 2019-10-15

Family

ID=68142380

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910555377.6A Pending CN110334625A (zh) 2019-06-25 2019-06-25 一种面向自动泊车的停车位视觉识别系统及其识别方法

Country Status (1)

Country Link
CN (1) CN110334625A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113129634A (zh) * 2019-12-31 2021-07-16 中移物联网有限公司 一种停车位的获取方法、系统及通信设备
CN113255405A (zh) * 2020-02-12 2021-08-13 广州汽车集团股份有限公司 车位线识别方法及其系统、车位线识别设备、存储介质
CN113593297A (zh) * 2021-07-29 2021-11-02 浙江大华技术股份有限公司 一种停车位状态检测方法和装置
CN114040104A (zh) * 2021-11-16 2022-02-11 北京筑梦园科技有限公司 一种设备调试方法、装置及停车管理系统
CN114141051A (zh) * 2021-11-25 2022-03-04 浙江吉利控股集团有限公司 辅助停车方法、辅助停车系统和计算机可读存储介质
CN114274948A (zh) * 2021-12-15 2022-04-05 武汉光庭信息技术股份有限公司 一种基于360度全景的自动泊车方法及装置
EP4138038A1 (en) * 2021-08-20 2023-02-22 Harman International Industries, Incorporated Method and apparatus for automatic parking system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106157310A (zh) * 2016-07-06 2016-11-23 南京汇川图像视觉技术有限公司 基于混合自适应水平集模型与多通道结合的TFT LCD mura缺陷检测方法
CN107609564A (zh) * 2017-09-19 2018-01-19 浙江大学 基于联合分割和傅里叶描述子库的水下目标图像识别方法
CN107665599A (zh) * 2016-07-28 2018-02-06 北海和思科技有限公司 基于视觉检测的停车场车位自动识别方法
CN109598972A (zh) * 2018-11-23 2019-04-09 中汽研(天津)汽车工程研究院有限公司 一种基于视觉的自动泊车停车位检测与测距系统
CN109649384A (zh) * 2019-02-15 2019-04-19 华域汽车系统股份有限公司 一种泊车辅助方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106157310A (zh) * 2016-07-06 2016-11-23 南京汇川图像视觉技术有限公司 基于混合自适应水平集模型与多通道结合的TFT LCD mura缺陷检测方法
CN107665599A (zh) * 2016-07-28 2018-02-06 北海和思科技有限公司 基于视觉检测的停车场车位自动识别方法
CN107609564A (zh) * 2017-09-19 2018-01-19 浙江大学 基于联合分割和傅里叶描述子库的水下目标图像识别方法
CN109598972A (zh) * 2018-11-23 2019-04-09 中汽研(天津)汽车工程研究院有限公司 一种基于视觉的自动泊车停车位检测与测距系统
CN109649384A (zh) * 2019-02-15 2019-04-19 华域汽车系统股份有限公司 一种泊车辅助方法

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113129634A (zh) * 2019-12-31 2021-07-16 中移物联网有限公司 一种停车位的获取方法、系统及通信设备
CN113129634B (zh) * 2019-12-31 2022-05-20 中移物联网有限公司 一种停车位的获取方法、系统及通信设备
CN113255405A (zh) * 2020-02-12 2021-08-13 广州汽车集团股份有限公司 车位线识别方法及其系统、车位线识别设备、存储介质
CN113593297A (zh) * 2021-07-29 2021-11-02 浙江大华技术股份有限公司 一种停车位状态检测方法和装置
EP4138038A1 (en) * 2021-08-20 2023-02-22 Harman International Industries, Incorporated Method and apparatus for automatic parking system
CN114040104A (zh) * 2021-11-16 2022-02-11 北京筑梦园科技有限公司 一种设备调试方法、装置及停车管理系统
CN114141051A (zh) * 2021-11-25 2022-03-04 浙江吉利控股集团有限公司 辅助停车方法、辅助停车系统和计算机可读存储介质
CN114141051B (zh) * 2021-11-25 2023-03-14 浙江吉利控股集团有限公司 辅助停车方法、辅助停车系统和计算机可读存储介质
CN114274948A (zh) * 2021-12-15 2022-04-05 武汉光庭信息技术股份有限公司 一种基于360度全景的自动泊车方法及装置

Similar Documents

Publication Publication Date Title
CN110334625A (zh) 一种面向自动泊车的停车位视觉识别系统及其识别方法
CN107738612B (zh) 基于全景视觉辅助系统的自动泊车停车位检测与识别系统
CN112184818B (zh) 基于视觉的车辆定位方法及应用其方法的停车场管理系统
CN112396650B (zh) 一种基于图像和激光雷达融合的目标测距系统及方法
CN105488454B (zh) 基于单目视觉的前方车辆检测与测距
CN102682292B (zh) 基于单目视觉的道路边缘检测及粗定位方法
US20200041284A1 (en) Map road marking and road quality collecting apparatus and method based on adas system
CN101630412B (zh) 基于相机的车道标志检测
CN103116751B (zh) 一种车牌字符自动识别方法
CN111563412B (zh) 一种基于参数空间投票和贝塞尔拟合的快速车道线检测方法
CN111563469A (zh) 一种不规范停车行为识别方法及装置
CN109726717B (zh) 一种车辆综合信息检测系统
Yuan et al. Robust lane detection for complicated road environment based on normal map
CN104036262B (zh) 一种lpr车牌筛选识别的方法和系统
CN110766979A (zh) 一种用于自动驾驶车辆的泊车车位检测方法
CN103871079A (zh) 基于机器学习和光流的车辆跟踪方法
CN104183127A (zh) 交通监控视频检测方法和装置
Wang et al. A vision-based road edge detection algorithm
CN104657735A (zh) 车道线检测方法、系统、车道偏离预警方法及系统
CN104778444A (zh) 道路场景下车辆图像的表观特征分析方法
CN108647664B (zh) 一种基于环视图像的车道线检测方法
CN109190483B (zh) 一种基于视觉的车道线检测方法
CN109685827B (zh) 一种基于dsp的目标检测与跟踪方法
KR20150049529A (ko) 차량의 위치 추정 장치 및 방법
CN114118252A (zh) 一种基于传感器多元信息融合的车辆检测方法及检测装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20191015