CN208509142U - 一种无人驾驶车全景监视及站台乘客检测系统 - Google Patents
一种无人驾驶车全景监视及站台乘客检测系统 Download PDFInfo
- Publication number
- CN208509142U CN208509142U CN201821194161.9U CN201821194161U CN208509142U CN 208509142 U CN208509142 U CN 208509142U CN 201821194161 U CN201821194161 U CN 201821194161U CN 208509142 U CN208509142 U CN 208509142U
- Authority
- CN
- China
- Prior art keywords
- module
- vehicle
- camera
- image
- arm controller
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Traffic Control Systems (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
本实用新型公开了一种无人驾驶车全景监视及站台乘客检测系统,车外前摄像头、车外后摄像头、车外左摄像头、车外右摄像头分别通过CVBS同轴线与ARM控制器连接,用于采集车外4路实时视频并传输至ARM控制器;ARM控制器与DSP图像拼接模块,DSP图像拼接模块与DSP图像检测模块连接,DSP图像检测模块通过GPU模块与显示仪相连,DSP图像检测模块通过CAN通讯模块与汽车控制器相连;GPS全球定位模块安装在汽车内并与ARM控制器连接;ARM控制器通过网络传输模块与PC远程监控中心相连。本实用新型能够实现无人驾驶旅游观光车360°全景环视、远程监控中心实时监控车辆状态、车辆位置实时定位、站台乘客实时识别与检测,能够自主停泊车辆。
Description
技术领域
本实用新型涉及汽车智能网联领域,具体的说是一种无人驾驶车全景监视及站台乘客检测系统。
背景技术
随着经济的飞速发展,汽车作为人类重要的交通工具,其数量正在迅猛增加,汽车智能网联化是人工智能大背景下必然趋势。
旅游观光车行驶路线相对固定,传统的旅游观光车需要大量驾驶员重复操作。随着汽车智能网联化 ,尤其是无人驾驶技术的发展,无人驾驶旅游观光车逐渐走入人的视野,但目前无人驾驶旅游观光车仍需要解决几个关键问题,即:无法360°感知周围环境,无法对站台乘客进行识别和检测以便自动停泊车辆。
发明内容
发明目的:针对现有技术的不足,本实用新型提供一种无人驾驶车全景监视及站台乘客检测系统,解决现有旅游观光车需要大量驾驶员造成人力资源消耗、无法对站台乘客进行识别的技术难题。
技术方案:本实用新型所述的无人驾驶车全景监视及站台乘客检测系统,包括车载计算终端、车外前摄像头、车外后摄像头、车外左摄像头、车外右摄像头、显示仪、GPS 全球定位模块、网络通讯模块、PC远程监控中心;所述车载计算终端包括ARM控制器、DSP图像拼接模块 、DSP图像检测模块、GPU(Graphics Processing Unit,图形处理器)模块、CAN通讯模块;所述车外前摄像头、车外后摄像头、车外左摄像头、车外右摄像头分别通过CVBS同轴线与ARM控制器连接,用于采集车外4路实时视频并传输至ARM控制器;ARM控制器与DSP图像拼接模块,DSP图像拼接模块与DSP图像检测模块连接,DSP图像检测模块通过GPU模块与显示仪相连,DSP图像检测模块通过CAN通讯模块与汽车控制器相连;所述GPS 全球定位模块安装在汽车内并与ARM控制器连接;所述ARM控制器通过网络传输模块与PC远程监控中心相连。
车外前摄像头、车外后摄像头、车外左摄像头、车外右摄像头分别通过CVBS同轴线与ARM控制器连接,用于监控车外情况,采集车外4路实时视频,将采集到的车外视频数据传输给ARM控制器,通过ARM控制器进行数据存储和处理;DSP图像拼接模块与ARM控制器连接,用于对车外4路相机视频实时处理,并拼接成360°全景视频;DSP图像检测模块与DSP图像拼接模块连接,用于对360°全景视频实时处理,并对无人观光车前方站台乘客进行识别与检测,并将乘客检测结果传送给ARM控制器,当ARM控制器接收DSP图像检测模块的乘客检测结果为有乘客候车时,通过CAN通讯模块将减速停车信号发送给无人观光车整车控制器以便自动停泊车辆;GPU模块用于对360°全景视频进行GPU渲染加速,显示仪模块用于对360°全景视频进行显示,并对站台乘客检测情况实时显示。
GPS 全球定位模块用于通过卫星群对汽车的位置进行实时定位,并将定位数据传送到ARM控制器中进行存储;网络传输模块与ARM控制器连接,用于按照预先约定的通信协议将ARM控制器处理的信息发送给PC远程监控中心;PC远程监控中心用于接收车载计算终端传送过来的360°全景视频、定位、乘客检测护具,经过处理存储在数据库中。
进一步完善上述技术方案,所述车外前摄像头安装在车辆的前方,车外后摄像头安装在车辆的后方,车外左摄像头安装在车辆的左后视镜处,车外右摄像头安装在车辆的右后视镜处。
进一步地,所述DSP图像拼接模块包括相机自动标定模块、图像全景拼接模块;所述相机自动标定模块用于对4路相机参数进行标定,对全景畸变进行校正;所述图像全景拼接模块用于对4路相机视频进行实时全景拼接成360°全景视频。
进一步地,所述DSP图像检测模块包括乘客特征数据库、图像预处理模块、图像识别模块、图像特征匹配模块;所述乘客特征数据库由公开行人特征数据库以及汽车自主采集存储;所述图像预处理模块用于对360°全景视频实时预处理;所述图像识别模块用于将图像预处理模块处理后的图像信息进行乘客识别,所述图像特征匹配模块用于将识别到的图像信息与乘客特征数据库存储的信息进行对比,当检测到站台有乘客候车时,通过CAN通讯模块将减速停车信号发送给汽车控制器以便自动停泊车辆。
进一步地,所述网络传输模块采用4G网络传输模块。
有益效果:与现有技术相比,本实用新型的优点:
(1)本实用新型的360°全景监视及站台乘客检测系统,其结构简单,安装方便,通用性强,无噪音,可直接安装在现有任何一辆旅游观光车上;该系统通过4个车外摄像头模块可以实时采集4路视频,通过图像拼接模块对4路视频进行三维全景拼接,可以对无人旅游观光车周围360°环境状况进行查看,可提前防止周围危险情况发生。
(2)本实用新型的360°全景监视及站台乘客检测系统在车内安装有GPS 全球定位模块,通过GPS 全球定位模块可以随时对汽车进行定位,便于远程监控中心对车辆进行定位和管理。
(3)本实用新型的360°全景监视及站台乘客检测系统在车外安装有4个摄像头模块,分别为车外前摄像头、车外后摄像头、车外左摄像头、车外右摄像头,通过对4路相机视频进行图像拼接,可以实时显示并查看无人旅游观光车周围360°环境信息;同时通过对无人旅游观光车360°全景视频中站台乘客进行识别与检测,当检测到站台有乘客候车时,系统将减速停车信号发送给无人观光车整车控制器以便自动停泊车辆;
(4)本实用新型的360°全景监视及站台乘客检测系统还设有PC远程监控中心,车载计算终端将360°全景视频、定位、乘客检测数据实时传送到PC远程监控中心,便于后续查询,同时还可实现远程监控和管理功能。
附图说明
图1为本实用新型的车体布置示意图;
图2是本实用新型电路原理框图;
附图标记:车载计算终端1、显示仪2、车外前摄像头3、车外左摄像头4、车外后摄像头5、车外右摄像头6、GPS 全球定位模块7、4G网络传输模块8、PC远程监控中心9、ARM控制器11、DSP图像拼接模块12 、DSP图像检测模块13、GPU模块14、CAN通讯模块15、相机自动标定模块121、图像全景拼接模块122、乘客特征数据库131、图像预处理模块132、图像识别模块133、图像特征匹配模块134。
具体实施方式
下面通过附图对本实用新型技术方案进行详细说明。
实施例1:如图1、图2所示的无人驾驶车全景监视及站台乘客检测系统,包括:车载计算终端1、显示仪2、车外前摄像头3、车外后摄像头5、车外左摄像头4、车外右摄像头6、GPS全球定位模块7、4G网络通讯模块8、PC远程监控中心9; 车载计算终端包括ARM控制器11、DSP图像拼接模块 12、DSP图像检测模块13、GPU模块14、CAN通讯模块15;
其中, 4个车外摄像头模块安装在车外,车外前摄像头3安装在车辆的前方,车外后摄像头6安装在车辆的后方,车外左摄像头4安装在车辆的左后视镜附近,车外右摄像头6安装在车辆的右后视镜附近,车外前摄像头3、车外后摄像头5、车外左摄像头4、车外右摄像头6分别通过CVBS同轴线与ARM控制器11连接,用于监控车外情况,采集车外4路实时视频,将采集到的车外视频数据传输给ARM控制器11,通过ARM控制器11进行数据存储和处理;
GPS 全球定位模块7安装在汽车内,GPS 全球定位模块7与ARM控制器11连接,用于通过卫星群对汽车的位置进行实时定位,并将定位数据传送到ARM控制器11中进行存储;
4G网络传输模块8与ARM控制器11连接,用于按照预先约定的通信协议将ARM控制器11处理的信息发送给PC远程监控中心9;
PC远程监控中心9用于接收车载计算终端1传送过来的360°全景视频、定位、乘客检测数据,经过处理存储在数据库中;
DSP图像拼接模块12与ARM控制器11连接,用于对车外4路相机视频实时处理,并拼接成360°全景视频,包括:4相机自动标定模块121、图像全景拼接模块122;4相机自动标定模块121用于对相机参数进行标定,对全景畸变进行校正;图像全景拼接模块122用于对4路相机视频进行实时全景拼接;
DSP图像检测模块13与DSP图像拼接模块12连接,用于对360°全景视频实时处理,并对无人观光车前方站台乘客进行识别与检测,包括:乘客特征数据库131、图像预处理模块132、图像识别模块133、图像特征匹配模块134;乘客特征数据库131由公开行人特征数据库以及旅游观光车自主采集存储;图像预处理模块132用于对360°全景视频实时预处理;图像识别模块133用于将图像预处理模块处理后的图像信息进行乘客识别,图像特征匹配模块134用于将识别到的图像信息与乘客特征数据库存储的信息进行对比,并将乘客检测结果传送给ARM控制器11,当ARM控制器11接收DSP图像检测模块13的乘客检测结果为有乘客候车时,通过CAN通讯模块15将减速停车信号发送给无人观光车整车控制器以便自动停泊车辆;
GPU模块14用于对360°全景视频进行GPU渲染加速;
显示仪模块2用于对360°全景视频进行显示,并对站台乘客检测情况实时显示。
本实用新型采用的ARM控制器为市售普通ARM控制器,DSP图像拼接模块、DSP图像检测模块、GPU模块均采用现有处理方法。
如上,尽管参照特定的优选实施例已经表示和表述了本实用新型,但其不得解释为对本实用新型自身的限制。在不脱离所附权利要求定义的本实用新型的精神和范围前提下,可对其在形式上和细节上作出各种变化。
Claims (5)
1.一种无人驾驶车全景监视及站台乘客检测系统,其特征在于:包括车载计算终端、车外前摄像头、车外后摄像头、车外左摄像头、车外右摄像头、显示仪、GPS 全球定位模块、网络通讯模块、PC远程监控中心;所述车载计算终端包括ARM控制器、DSP图像拼接模块 、DSP图像检测模块、GPU模块、CAN通讯模块;
所述车外前摄像头、车外后摄像头、车外左摄像头、车外右摄像头分别通过CVBS同轴线与ARM控制器连接,用于采集车外4路实时视频并传输至ARM控制器;ARM控制器与DSP图像拼接模块,DSP图像拼接模块与DSP图像检测模块连接,DSP图像检测模块通过GPU模块与显示仪相连,DSP图像检测模块通过CAN通讯模块与汽车控制器相连;
所述GPS 全球定位模块安装在汽车内并与ARM控制器连接;所述ARM控制器通过网络传输模块与PC远程监控中心相连。
2.根据权利要求1所述的无人驾驶车全景监视及站台乘客检测系统,其特征在于:所述车外前摄像头安装在车辆的前方,车外后摄像头安装在车辆的后方,车外左摄像头安装在车辆的左后视镜处,车外右摄像头安装在车辆的右后视镜处。
3.根据权利要求1所述的无人驾驶车全景监视及站台乘客检测系统,其特征在于:所述DSP图像拼接模块包括相机自动标定模块、图像全景拼接模块;所述相机自动标定模块用于对4路相机参数进行标定,对全景畸变进行校正;所述图像全景拼接模块用于对4路相机视频进行实时全景拼接成360°全景视频。
4.根据权利要求1所述的无人驾驶车全景监视及站台乘客检测系统,其特征在于:所述DSP图像检测模块包括乘客特征数据库、图像预处理模块、图像识别模块、图像特征匹配模块;所述乘客特征数据库由公开行人特征数据库以及汽车自主采集存储;所述图像预处理模块用于对360°全景视频实时预处理;所述图像识别模块用于将图像预处理模块处理后的图像信息进行乘客识别,所述图像特征匹配模块用于将识别到的图像信息与乘客特征数据库存储的信息进行对比,当检测到站台有乘客候车时,通过CAN通讯模块将减速停车信号发送给汽车控制器以便自动停泊车辆。
5.根据权利要求1所述的无人驾驶车全景监视及站台乘客检测系统,其特征在于:所述网络传输模块采用4G网络传输模块。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201821194161.9U CN208509142U (zh) | 2018-07-26 | 2018-07-26 | 一种无人驾驶车全景监视及站台乘客检测系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201821194161.9U CN208509142U (zh) | 2018-07-26 | 2018-07-26 | 一种无人驾驶车全景监视及站台乘客检测系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN208509142U true CN208509142U (zh) | 2019-02-15 |
Family
ID=65290583
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201821194161.9U Expired - Fee Related CN208509142U (zh) | 2018-07-26 | 2018-07-26 | 一种无人驾驶车全景监视及站台乘客检测系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN208509142U (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111711744A (zh) * | 2019-03-18 | 2020-09-25 | 北京沃东天骏信息技术有限公司 | 一种摄像头和图像处理方法 |
-
2018
- 2018-07-26 CN CN201821194161.9U patent/CN208509142U/zh not_active Expired - Fee Related
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111711744A (zh) * | 2019-03-18 | 2020-09-25 | 北京沃东天骏信息技术有限公司 | 一种摄像头和图像处理方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108830264B (zh) | 一种无人驾驶公交车的站台乘客检测系统及方法 | |
CN102390370B (zh) | 一种基于立体视觉的车辆行驶应急处理装置及方法 | |
CN110781883B (zh) | 一种基于360度环视摄像头的车位尺寸识别系统及方法 | |
CN107564334B (zh) | 一种停车场车辆盲区危险预警系统及方法 | |
CN105329168A (zh) | 具有行车记录和驾驶辅助功能的抬头显示系统及方法 | |
US11659154B1 (en) | Virtual horizontal stereo camera | |
CN202271980U (zh) | 一种基于立体视觉的车辆行驶应急处理装置 | |
CN109874099B (zh) | 一种联网车载设备流量控制系统 | |
CN109089086A (zh) | 一种全景摄像系统 | |
CN110728770A (zh) | 一种车辆行驶监控方法、装置、系统及电子设备 | |
CN111681454A (zh) | 一种基于驾驶行为的车车协同防撞预警方法 | |
CN103632543A (zh) | 智能云车辆管理系统装置 | |
CN208969681U (zh) | 一种无人驾驶公交车的站台乘客检测系统 | |
CN208509142U (zh) | 一种无人驾驶车全景监视及站台乘客检测系统 | |
CN105809769A (zh) | 一种通过WiFi连接的全景影像行车记录仪 | |
JP2006236094A (ja) | 障害物認識システム | |
CN2700163Y (zh) | 自动泊车系统 | |
CN117135323A (zh) | 一种车载监控方法、设备及车辆 | |
CN210760742U (zh) | 智能车辆辅助驾驶系统 | |
CN114954756B (zh) | 一种基于ar-hmd的智能头盔盲区检测系统和方法 | |
CN107292818B (zh) | 一种基于环视相机的捕线器自动定位系统及方法 | |
CN103978935B (zh) | 基于车辆装配线的车载环视系统摄像头参数线上标定方法 | |
CN114750747B (zh) | 一种可匹配不同人机参数的自动识别泊车方法及系统 | |
CN115641724A (zh) | 一种路内泊位管理的巡检识别方法、系统及计算机介质 | |
CN209729055U (zh) | 一种无线通信停车场监控装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20190215 Termination date: 20190726 |