CN113538967A - 一种十字路口场景下的车路协同装置及方法 - Google Patents

一种十字路口场景下的车路协同装置及方法 Download PDF

Info

Publication number
CN113538967A
CN113538967A CN202110678047.3A CN202110678047A CN113538967A CN 113538967 A CN113538967 A CN 113538967A CN 202110678047 A CN202110678047 A CN 202110678047A CN 113538967 A CN113538967 A CN 113538967A
Authority
CN
China
Prior art keywords
information
road
vehicle
crossroad
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110678047.3A
Other languages
English (en)
Other versions
CN113538967B (zh
Inventor
高明裕
姜青峰
林辉品
董哲康
杨宇翔
曾毓
黄继业
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Dianzi University
Original Assignee
Hangzhou Dianzi University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Dianzi University filed Critical Hangzhou Dianzi University
Priority to CN202110678047.3A priority Critical patent/CN113538967B/zh
Publication of CN113538967A publication Critical patent/CN113538967A/zh
Application granted granted Critical
Publication of CN113538967B publication Critical patent/CN113538967B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明公开了一种十字路口场景下的车路协同装置及方法。通过多组摄像头组、激光雷达和定位模块组成的信息采集部分采集车辆行人数据,借助图像会对物体的类型进行识别,结合点云信息框选出不同类型的物体并记录坐标,然后转化为以路口为原点建立的三维坐标系中,得到物体同一坐标系下的大小和位置信息,再计算各个物体之间的相对位置和相对方向,然后转化为预警信息,最后通过通信模块将信息发送给车载端。本方法实现了十字路口复杂路况的分解、分析,方便了驾驶员调取所需的路况信息以做出安全、高效的决策,实现车路协同,同时可以用于道路管理部门进行道路交通的大数据分析以改善道路交通的管理。

Description

一种十字路口场景下的车路协同装置及方法
技术领域
本发明涉及高级驾驶辅助技术领域,特别涉及车路协同技术领域,具体为一种十字路口场景下的车路协同装置及方法。
背景技术
车路协同技术的诞生得益于无人驾驶技术的发展,随着近些年通信技术和传感器技术的发展,车路协同技术也发展到了新高度,特别是5G技术的发展,实现了车和路之间信息的实时互通,从而使车辆在行驶时可以及时获取道路上的信息,以实现更安全、更高效的决策。
但是在车路协同应用过程中,由于一些道路环境的复杂性而难以实现,这些复杂的道路环境中最常见的一个就是十字路口。现有的车路协同技术大多采用摄像头等传感器与云服务器结合的方案,然而十字路口常常包含车辆、行人、信号灯、人行道等多种人为因素和客观环境因素,使得车路协同实现时存在信息难检测、安全难肯定、决策难执行等问题。
发明内容
针对现有技术的不足,本发明提出了一种十字路口场景下的车路协同装置及方法,针对十字路口这种复杂的道路环境,提供一种智能解决方案。
一种十字路口场景下的车路协同装置,包括信息采集模块、路边柜模块、云端服务器和车载端。
所述信息采集模块包括固定杆、摄像头组、激光雷达和定位模块。固定杆安装在十字路口的转弯处,摄像头组、激光雷达和定位模块安装在固定杆上,摄像头组中的摄像头数量由摄像头视角与视距的关系以及道路的宽度决定。
所述路边柜模块包括处理器、通信模块和存储设备。摄像头组、激光雷达和定位模块与处理器通信连接,处理器接收摄像头组采集的图片以及激光雷达采集的激光点云信息,并使用定位模块的位置信息修正;通信模块实现路边柜模块与云端服务器的数据交互,存储设备用于存储配置文件及紧急事件日志。
云端服务器接收路边柜上传的数据后,反馈到车载端。
作为优选,处理器通过API接收摄像头组与激光雷达采集的数据以及修改摄像头组与激光雷达的配置。
作为优选,通信模块为5G通信模块,符合C-V2X标准。
一种十字路口场景下的车路协同方法,包括以下步骤:
步骤1、在一个十字路口安装1个路边柜模块,在4个转弯处安装4组信息采集模块,信息采集模块采集道路的图片、激光点云信息以及位置信息三种道路信息。
作为优选,任意2组相邻的信息采集模块之间的连线与道路垂直或平行。
步骤2、当多组信息采集模块采集到同一个物体的信息时,将图片信息以YUX的形式输出,得到对应的Yi参数。根据激光点云信息判断4组信息采集模块与物体的距离,与物体越近的信息采集模块采集的图片具有更高的权重,根据图片的Yi参数判断图片是否存在异常曝光,判断阈值由现场环境设定,物体准确信息的确定方法为:
Case1、当权重最高的图片为正常曝光时,选择该图片与对应信息采集模块的激光点云信息作为物体的准确数据。
Case2、当权重最高的图片为异常曝光,且剩余图片中只有一张图片为正常曝光时,选择该图片与对应信息采集模块的激光点云信息作为物体的准确数据。
Case3、当权重最高的图片为异常曝光,且剩余图片中有多张图片为正常曝光时,则计算正常曝光图像的信息熵,将信息熵乘以对应图像的权重,作为物体的准确数据。
Case4、当所有图片均为异常曝光时,路边柜模块根据现场环境调节曝光参数。
步骤3、路边柜模块接收信息采集模块采集的路面信息,根据步骤2完成预处理,然后以十字路口中心为原点、垂直地面向上的方向为z轴正方向、正北方向为y轴正方向、正东方向为x轴正方向建立三维直角坐标系,在该三维直角坐标系中记录道路信息。
步骤4、路边柜模块将步骤3中记录的道路信息分辨物体的类型、物体间的距离等,并将该数据发送到云端服务器,服务器中的管理系统对接受的信息进行处理后将路面实时情况反馈给即将驶入该十字路口的车辆,完成车路协同。
本发明具有以下有益效果:
通过摄像头组、激光雷达和定位模块组成的信息采集模块采集十字路口场景下的车辆行人数据,识别物体的类型,结合点云信息框选出不同类型的物体并记录框选的坐标,得到物体在一个坐标系下的大小和位置信息,综合所有物体的大小和位置信息计算各个物体之间的相对位置和相对方向,再将相对位置和方向信息转化为更易于驾驶员理解的可能存在碰撞的方向和距离预警、障碍物预警等预警信息,最后反馈到车载端,对十字路口的复杂路况进行分解、分析,并以十字路口建立管理系统,方便了车辆驾驶员调取所需的路况信息以做出安全、高效的决策,也方便了道路管理部分进行道路交通的大数据分析以改善道路交通的管理。
附图说明
图1为信息采集模块监测角度为135°的示意图;
图2为信息采集模块监测角度为270°的示意图;
图3为物体图像重叠时的物体信息确认方法的流程图;
图4为十字路口场景下的车路协同方法的流程图。
具体实施方式
以下结合附图对本发明作进一步的解释说明;
一种十字路口场景下的车路协同装置,包括信息采集模块、路边柜模块、云端服务器和车载端。
所述信息采集模块包括固定杆、摄像头组、激光雷达和定位模块。固定杆安装在十字路口的转弯处,摄像头组、激光雷达和定位模块安装在固定杆上,摄像头组中的摄像头数量由摄像头视角与视距的关系以及道路的宽度决定,
所述路边柜模块包括处理器、通信模块和存储设备。摄像头组、激光雷达和定位模块与处理器通信连接,处理器通过API接收摄像头组采集的图片以及激光雷达采集的激光点云信息,修改摄像头组与激光雷达的配置,并使用定位模块的位置信息修正;符合C-V2X标准的5G通信模块实现路边柜模块与云端服务器的数据交互,存储设备中存储了软、硬件配置文件与紧急事件日志。
云端服务器接收路边柜上传的数据后,反馈到车载端。
一种十字路口场景下的车路协同方法,包括以下步骤:
步骤1、在一个十字路口安装1个路边柜模块,在4个转弯处安装4组信息采集模块,其中任意2组相邻的信息采集模块之间的连线与道路垂直或平行。信息采集模块采集道路的图片、激光点云信息以及位置信息三种道路信息。
如图1所示,4个信息采集模块分别安装在图中的①、②、④和⑤四个位置,1个信息采集模块的正下方盲区可以由其它3个信息采集模块进行补充。当每个信息采集模块的监测范围为135°时,可以覆盖图1中的十字范围监测,并且存在一些检测重叠区域,使得同一被检测物体被多个信息采集部分同时检测到,如图2所示,当每个信息采集模块的监测范围达到270°时,可以全面覆盖十字路口,但是会存在大量的检测重叠区域。
在实际情况下,太阳光会从不同方向照射十字路口,部分面向太阳方向的信息采集模块可能会存在过曝光,而部分背向太阳的信息采集模块可能会存在欠曝光,或者当夜幕降临摄像头可能会普遍存在欠曝光,这些过曝光和欠曝光造成不同信息采集模块采集到的同一个被检测物体的数据存在一定的区别,进而会影响图像中物体类型的识别,因此需要通过步骤2重叠的信息进行确定。
步骤2、当多组信息采集模块采集到同一个物体的信息时,将图片信息以YUX的形式输出,得到对应的Yi参数,根据图片的Yi参数判断图片是否存在异常曝光:
Figure BDA0003121608060000041
Ymin、Ymax为判断阈值,由现场环境设定。
假设①、②、④和⑤位置上摄像头对检测到的同一物体的数据分别为X1、X2、X3和X4,对应位置上的激光雷达采集到的点云数据分别为X5、X6、X7和X8,根据点云数据为X5、X6、X7和X8可以转换得到①、②、④和⑤位置上摄像头与物体的大致距离为L1、L2、L3和L4,则不同摄像头拍摄的图片的权重αi为:
Figure BDA0003121608060000042
物体准确信息的确定方法为:
Case1、当权重最高的图片为正常曝光时,选择该图片与对应信息采集模块的激光点云信息作为物体的准确数据。
Case2、当权重最高的图片为异常曝光,且剩余图片中只有一张图片为正常曝光时,选择该图片与对应信息采集模块的激光点云信息作为物体的准确数据。
Case3、当权重最高的图片为异常曝光,且剩余图片中有多张图片为正常曝光时,则计算正常曝光图像的信息熵H:
Figure BDA0003121608060000043
其中,Pij为某个像素点的灰度值和它周围像素灰度分布的综合特征:
Pij=f(i,j)/N2
其中(i,j)定义为特征二元组,i表示像素的灰度值,取值范围为[0,255],j表示领域灰度值,取值范围[0,255]。再将对应图片的信息熵Hi乘以其权重αi,作为物体的准确数据。
Case4、当所有图片均为异常曝光时,路边柜模块根据现场环境调节曝光参数。
步骤3、根据步骤2处理后的数据进行坐标转换,统一在以十字路口中心为原点、垂直地面向上的方向为z轴正方向、正北方向为y轴正方向、正东方向为x轴正方向建立三维直角坐标系下显示,当十字路口不是由南北和东西朝向的道路组成时,根据定位模块的位置信息进行道路朝向的修正。
步骤4、如图4所示,路边柜模块将步骤3中记录的道路信息得到该十字路口范围内的车辆和行人信息,并且根据摄像头采集到的数据分辨物体的类型,根据激光雷达采集到的点云信息分析物体间的距离和方向,将这些信息结合之后,转换为是否存在碰撞的判断、碰撞可能存在的距离和方向、人流量和车流量等更易于理解、对驾驶决策更有意义的信息,处理器会检索这些信息,将出现的车车碰撞、人车碰撞、车辆故障长时停车等事件作为紧急事件以紧急事件日志的形式写入路边柜部分的存储设备。并将分析后的数据发送到云端服务器,服务器中的管理系统对接受的信息进行处理后将路面实时情况反馈给即将驶入该十字路口的车辆,播报预警信息,提前为驾驶员做好路径规划,完成车路协同。
此外,道路管理部门可以读取云端服务器中的大数据,以分析车流量、人流量、事故多发路段等多项数据,用于改善道路的管理或快速处理突发的交通事故。

Claims (8)

1.一种十字路口场景下的车路协同方法,其特征在于:该方法具体包括以下步骤:
步骤1、在一个十字路口安装1个路边柜模块,4个转弯处安装4组信息采集模块,采集道路的图片、激光点云信息以及位置信息三种道路信息;
步骤2、当多组信息采集模块采集到同一个物体的信息时,将图片信息以YUX的形式输出,得到对应的Yi参数;根据激光点云信息判断4组信息采集模块与物体的距离,与物体越近的信息采集模块采集的图片具有更高的权重,根据图片的Yi参数判断图片是否存在异常曝光,判断阈值由现场环境设定,物体准确信息的确定方法为:
Case1、当权重最高的图片为正常曝光时,选择该图片与对应信息采集模块的激光点云信息作为物体的准确数据;
Case2、当权重最高的图片为异常曝光,且剩余图片中只有一张图片为正常曝光时,选择该图片与对应信息采集模块的激光点云信息作为物体的准确数据;
Case3、当权重最高的图片为异常曝光,且剩余图片中有多张图片为正常曝光时,则计算正常曝光图像的信息熵,将信息熵乘以对应图像的权重,作为物体的准确数据;
Case4、当所有图片均为异常曝光时,路边柜模块根据现场环境调节曝光参数;
步骤3、路边柜模块接收信息采集模块采集的路面信息,根据步骤2完成预处理,然后以十字路口中心为原点、垂直地面向上的方向为z轴正方向、正北方向为y轴正方向、正东方向为x轴正方向建立三维直角坐标系,在该三维直角坐标系中记录道路信息,并根据位置信息修正坐标;
步骤4、路边柜模块将步骤3中记录的道路信息分辨物体的类型、物体间的距离等,并将该数据发送到云端服务器,服务器中的管理系统对接受的信息进行处理后将路面实时情况反馈给即将驶入该十字路口的车辆,完成车路协同。
2.如权利要求1所述一种十字路口场景下的车路协同方法,其特征在于:任意2组相邻的信息采集模块之间的连线与道路垂直或平行。
3.如权利要求1所述一种十字路口场景下的车路协同方法,其特征在于:步骤3中,图片是否正常曝光的判断方法为:
Figure FDA0003121608050000021
Ymin、Ymax为判断阈值,由现场环境设定。
4.如权利要求1所述一种十字路口场景下的车路协同方法,其特征在于:图片的权重αi计算方法为:
Figure FDA0003121608050000022
其中,L1、L2、L3和L4为不同信息采集模块与物体的距离,Li为第i个信息采集模块与物体的距离。
5.如权利要求1所述一种十字路口场景下的车路协同方法,其特征在于:图像的信息熵H的计算方法为:
Figure FDA0003121608050000023
其中,Pij为某个像素点的灰度值和它周围像素灰度分布的综合特征:
Pij=f(i,j)/N2
其中(i,j)定义为特征二元组,i表示像素的灰度值,取值范围为[0,255],j表示领域灰度值,取值范围[0,255]。
6.如权利要求1所述一种十字路口场景下的车路协同方法,其特征在于:该方法使用了一种十字路口场景下的车路协同装置,包括信息采集模块、路边柜模块、云端服务器和车载端;
所述信息采集模块包括固定杆、摄像头组、激光雷达和定位模块;固定杆安装在十字路口的转弯处,摄像头组、激光雷达和定位模块安装在固定杆上,摄像头组中的摄像头数量由摄像头视角与视距的关系以及道路的宽度决定;
所述路边柜模块包括处理器、通信模块和存储设备;摄像头组、激光雷达和定位模块与处理器通信连接,处理器接收摄像头组采集的图片以及激光雷达采集的激光点云信息,并使用定位模块的位置信息修正;通信模块实现路边柜模块与云端服务器的数据交互,存储设备用于存储配置文件及紧急事件日志;
云端服务器接收路边柜上传的数据后,反馈到车载端。
7.如权利要求6所述一种十字路口场景下的车路协同方法,其特征在于:处理器通过API接收摄像头组与激光雷达采集的数据以及修改摄像头组与激光雷达的配置;通信模块为5G通信模块,符合C-V2X标准。
8.如权利要求1或6所述一种十字路口场景下的车路协同方法,其特征在于:当十字路口不是由南北和东西朝向的道路组成时,根据定位模块的位置信息进行道路朝向的修正。
CN202110678047.3A 2021-06-18 2021-06-18 一种十字路口场景下的车路协同装置及方法 Active CN113538967B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110678047.3A CN113538967B (zh) 2021-06-18 2021-06-18 一种十字路口场景下的车路协同装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110678047.3A CN113538967B (zh) 2021-06-18 2021-06-18 一种十字路口场景下的车路协同装置及方法

Publications (2)

Publication Number Publication Date
CN113538967A true CN113538967A (zh) 2021-10-22
CN113538967B CN113538967B (zh) 2022-07-12

Family

ID=78125203

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110678047.3A Active CN113538967B (zh) 2021-06-18 2021-06-18 一种十字路口场景下的车路协同装置及方法

Country Status (1)

Country Link
CN (1) CN113538967B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115953905A (zh) * 2023-03-15 2023-04-11 河北博士林科技开发有限公司 一种基于激光雷达的车路协同控制系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160127655A1 (en) * 2014-10-30 2016-05-05 Hisense Mobile Communications Technology Co., Ltd. Method and device for image taking brightness control and computer readable storage medium
US20160318490A1 (en) * 2015-04-28 2016-11-03 Mobileye Vision Technologies Ltd. Systems and methods for causing a vehicle response based on traffic light detection
CN109792491A (zh) * 2016-09-30 2019-05-21 松下知识产权经营株式会社 图像生成装置、图像生成方法、程序以及记录介质
WO2020223519A1 (en) * 2019-04-30 2020-11-05 Axon Enterprise, Inc. License plate reading system with enhancements
US20210024000A1 (en) * 2015-05-06 2021-01-28 Magna Mirrors Of America, Inc. Vehicular vision system with episodic display of video images showing approaching other vehicle

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160127655A1 (en) * 2014-10-30 2016-05-05 Hisense Mobile Communications Technology Co., Ltd. Method and device for image taking brightness control and computer readable storage medium
US20160318490A1 (en) * 2015-04-28 2016-11-03 Mobileye Vision Technologies Ltd. Systems and methods for causing a vehicle response based on traffic light detection
US20210024000A1 (en) * 2015-05-06 2021-01-28 Magna Mirrors Of America, Inc. Vehicular vision system with episodic display of video images showing approaching other vehicle
CN109792491A (zh) * 2016-09-30 2019-05-21 松下知识产权经营株式会社 图像生成装置、图像生成方法、程序以及记录介质
WO2020223519A1 (en) * 2019-04-30 2020-11-05 Axon Enterprise, Inc. License plate reading system with enhancements

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
吕成超: "基于视频图像序列的交通对象检测与跟踪算法研究", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115953905A (zh) * 2023-03-15 2023-04-11 河北博士林科技开发有限公司 一种基于激光雷达的车路协同控制系统

Also Published As

Publication number Publication date
CN113538967B (zh) 2022-07-12

Similar Documents

Publication Publication Date Title
KR101534056B1 (ko) 교통 신호 맵핑 및 검출
US9154741B2 (en) Apparatus and method for processing data of heterogeneous sensors in integrated manner to classify objects on road and detect locations of objects
US11699207B2 (en) Camera assessment techniques for autonomous vehicles
CN111508260A (zh) 车辆停车位检测方法、装置和系统
CN109703460B (zh) 多摄像头的复杂场景自适应车辆碰撞预警装置及预警方法
EP2282295A1 (en) Object recognizing device and object recognizing method
CN113593250A (zh) 一种基于视觉识别的违章停车检测系统
CN113658441B (zh) 一种面向自动驾驶的高灵活性可变视角路侧感知装置及超视距感知方法
CN111967396A (zh) 障碍物检测的处理方法、装置、设备及存储介质
Jiang et al. Target detection algorithm based on MMW radar and camera fusion
KR102267517B1 (ko) 도로 안개감지 장치 및 그 감지 방법
US11580659B2 (en) Method for size estimation by image recognition of specific target using given scale
CN113538967B (zh) 一种十字路口场景下的车路协同装置及方法
CN113903012A (zh) 碰撞预警方法及装置、车载设备及存储介质
CN115909240A (zh) 一种基于车道线和车辆识别的道路拥堵检测方法
CN115546738A (zh) 一种铁轨异物检测方法
CN206162876U (zh) 基于能见度检测的道路限速监拍系统
CN112001208A (zh) 用于车辆盲区的目标检测方法、装置和电子设备
JP5115390B2 (ja) 移動体識別装置、コンピュータプログラム及び移動体識別装置の学習方法
CN112817006B (zh) 一种车载智能道路病害检测方法及系统
CN111523368B (zh) 信息处理装置、服务器以及交通管理系统
CN109874099B (zh) 一种联网车载设备流量控制系统
US11227409B1 (en) Camera assessment techniques for autonomous vehicles
CN112241004B (zh) 物体识别装置
CN108628320A (zh) 一种智能汽车无人驾驶系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant