CN211107382U - 一种基于摄像头的驾驶员手握方向盘监测系统 - Google Patents

一种基于摄像头的驾驶员手握方向盘监测系统 Download PDF

Info

Publication number
CN211107382U
CN211107382U CN201921090796.9U CN201921090796U CN211107382U CN 211107382 U CN211107382 U CN 211107382U CN 201921090796 U CN201921090796 U CN 201921090796U CN 211107382 U CN211107382 U CN 211107382U
Authority
CN
China
Prior art keywords
steering wheel
data
image
storage element
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201921090796.9U
Other languages
English (en)
Inventor
林登冰
林建清
胡红兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Southeast Fujian Automobile Industry Co Ltd
Original Assignee
Southeast Fujian Automobile Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Southeast Fujian Automobile Industry Co Ltd filed Critical Southeast Fujian Automobile Industry Co Ltd
Priority to CN201921090796.9U priority Critical patent/CN211107382U/zh
Application granted granted Critical
Publication of CN211107382U publication Critical patent/CN211107382U/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)

Abstract

本实用新型提供一种基于摄像头的驾驶员手握方向盘监测系统,包括一红外摄像头和一图像处理器,所述红外摄像头安装于车内顶棚位置,所述图像处理器分别与所述红外摄像头和高级驾驶辅助系统连接,处理来自红外摄像头的图像信息,输出给高级驾驶辅助系统。本实用新型系统在不改变现有方向盘、转向装置和车型的情况下,实现驾驶员是否手离开方向盘的精确监测,同时降低成本。

Description

一种基于摄像头的驾驶员手握方向盘监测系统
技术领域
本实用新型涉及汽车高级驾驶辅助领域,尤其涉及一种基于摄像头的驾驶员手握方向盘监测系统。
背景技术
目前自动驾驶是汽车行业的趋势,汽车制造商正在推出众多高级驾驶辅助系统(ADAS),然而,根据《维也纳公约》,驾驶员必须具备掌握车辆的能力,一般而言,若驾驶员手握方向盘,进行自动驾驶运动,驾驶员便具备良好的车辆掌控能力,因此,为确保未来的驾驶辅助或自行驾驶的安全性,需要对驾驶员的手是否握在方向盘上进行监测,确保驾驶员有能力对方向盘进行随时控制,从而确保行车安全。
现有的,主要对驾驶员的手是否离开方向盘进行监测,一般有两种监测方式:1、通过检测方向盘扭力来判断驾驶员手是否握在方向盘上,此方案对方向盘扭力传感器要求较高,且容易受驾驶员习惯和外界环境的影响,该方案误判率较高;2、通过在方向盘内设置一个或多个传感器来监测驾驶员手是否握在方向盘上,这类方案精度较高,但此类方向盘成本高,且对方向盘厂商的技术集成要求高,生产难度大。
发明内容
本实用新型要解决的技术问题,在于提供一种基于摄像头的驾驶员手握方向盘监测系统,在不改变现有方向盘、转向装置和车型的情况下,实现驾驶员的手是否握在方向盘的精确监测,同时降低成本。
本实用新型是这样实现的:一种基于摄像头的驾驶员手握方向盘监测系统,包括一红外摄像头和一图像处理器,所述红外摄像头安装于车内顶棚位置,所述图像处理器分别与所述红外摄像头和高级驾驶辅助系统连接,处理来自红外摄像头的图像信息,输出给高级驾驶辅助系统。
进一步的,所述图像处理器设于一主机内。
进一步的,所述图像处理器集成于红外摄像头内。
进一步的,所述图像处理器包括:图像接收元件、计算元件、数据读取元件、第一存储元件、第二存储元件和数据输出元件;
所述图像接收元件与第一存储元件连接,所述图像接收元件将红外摄像头传来的图像数据存入所述第一存储元件;
所述数据读取元件分别与第一存储元件和第二存储元件连接,读取第一存储元件和第二存储元件中的数据,所述第二存储元件存储有预先定义的图像识别模型;
所述计算元件分别与数据读取元件和数据输出元件连接,通过读取元件获取第一存储元件中来自红外摄像头的图像数据和第二存储元件的图像识别模型,采用所述图像识别模型对图像数据进行计算,得到模型输出数据,通过数据输出元件将数据传输给高级驾驶辅助系统。
本实用新型具有如下优点:采用影像监测驾驶员手离方向盘系统,不仅能提高监测精度,降低误判率,且无需改变现有的方向盘和转向装置,适用于现有任何车型,具备精度高、反应快、成本低、扩展性良好的优点。
附图说明
下面参照附图结合实施例对本实用新型作进一步的说明。
图1为本实用新型一种基于摄像头的驾驶员手握方向盘监测系统的硬件框架图。
图2为本实用新型一种基于摄像头的驾驶员手握方向盘监测系统的图像处理器逻辑结构示意图。
图3为本实用新型一实施例中红外摄像头安装位置示意图。
具体实施方式
如图1至3所示,本实用新型的一种基于摄像头的驾驶员手握方向盘监测系统,包括一红外摄像头和一图像处理器,所述红外摄像头安装于车内顶棚位置,根据实际情况调整红外摄像头的角度,使其可获取整个方向盘图像,所述图像处理器分别与所述红外摄像头和高级驾驶辅助系统连接,处理来自红外摄像头的图像信息,输出给高级驾驶辅助系统,该红外摄像头可以采用高清或标清摄像头,且具有红外线夜间监控能力。
高级驾驶辅助系统是利用安装在车上的各式各样传感器(毫米波雷达、激光雷达、单\双目摄像头以及卫星导航),在汽车行驶过程中随时来感应周围的环境,收集数据,进行静态、动态物体的辨识、侦测与追踪,并结合导航仪地图数据,进行系统的运算与分析,从而预先让驾驶者察觉到可能发生的危险,有效增加汽车驾驶的舒适性和安全性。本发明实施例的所述图像处理器将处理结果输出到高级驾驶辅助系统ADAS,可以对驾驶员的驾驶起到辅助作用。
较佳的,所述图像处理器包括:图像接收元件、计算元件、数据读取元件、第一存储元件、第二存储元件和数据输出元件;
所述图像接收元件与第一存储元件连接,所述图像接收元件将红外摄像头传来的图像数据存入所述第一存储元件;
所述数据读取元件分别与第一存储元件和第二存储元件连接,读取第一存储元件和第二存储元件中的数据,所述第二存储元件存储有预先定义的图像识别模型;
所述计算元件分别与数据读取元件和数据输出元件连接,通过读取元件获取第一存储元件中来自红外摄像头的图像数据和第二存储元件的图像识别模型,采用所述图像识别模型对图像数据进行计算,得到模型输出数据,通过数据输出元件将数据(即数据处理的结果)传输给高级驾驶辅助系统。
其中,所述图像处理器设于一主机内,或者所述图像处理器集成于红外摄像头内。
本实用新型中的第二存储元件存储的图像识别模型的创建过程具体为:采用现有的卷积神经网络模型,通过训练大量的手握和手离方向盘图片,创建图像识别模型(包括卷积核、阈值等),将训练后的图像识别模型存入第二存储元件;以便在接收红外摄像头传来的图像信息时,可通过所述图像识别模型判断驾驶员手是否在方向盘上,并将判断结果输出给高级驾驶辅助系统,由所述高级驾驶辅助系统根据判断结果做出相应处理,比如当发现驾驶员手不在对应位置时,通过汽车音响或仪表等发出警示,从而及时纠正驾驶员驾驶行为,确保行车安全。
在实际操作过程中,采用现有的卷积神经网络模型创建的本实用新型的图像识别模型,可以采用如下操作进行:
a、从样本集中取一个样本(X,Xp),将X输入网络;
b、计算相应的实际输出Op;在此阶段,信息从输入层经过逐级的变换,传送到输出层,这个过程也是网络在完成训练后正常运行时执行的过程,网络执行的是计算(实际上就是输入与每层的权值矩阵相点乘,得到最后的输出结果);
c、算实际输出Op与相应的理想输出Yp的差。
当网络训练完成后,得到通过学习手放在方向盘上的图像识别模型(包括卷积数据、池化数据、ReLu数据等),训练过程包括目前较为成熟的卷积神经网络技术(包括卷积、池化、ReLu、卷积……Softmax以及反馈机制)。将得到的图像结果嵌入到图像处理器的第二存储元件中,供计算单元调用,由计算单元根据该图像识别模型对图像数据计算判断,得到图像数据判断结果(比如驾驶员手是否在方向盘上),并输出结果,供后续处理。
本实用新型系统可满足驾驶辅助等系统对驾驶员是否手握方向盘的状态监测需求,并降低方向盘或转向装置的设计开发难度和成本,同时在具有自动驾驶功能的车辆上,此方案可在监测手动与自动驾驶模式转换方面发挥重大作用,通用性和可移植性强。
虽然以上描述了本实用新型的具体实施方式,但是熟悉本技术领域的技术人员应当理解,我们所描述的具体的实施例只是说明性的,而不是用于对本实用新型的范围的限定,熟悉本领域的技术人员在依照本实用新型的精神所作的等效的修饰以及变化,都应当涵盖在本实用新型的权利要求所保护的范围内。

Claims (4)

1.一种基于摄像头的驾驶员手握方向盘监测系统,其特征在于:包括一红外摄像头和一图像处理器,所述红外摄像头安装于车内顶棚位置,所述图像处理器分别与所述红外摄像头和高级驾驶辅助系统连接,处理来自红外摄像头的图像信息,输出给高级驾驶辅助系统。
2.根据权利要求1所述的一种基于摄像头的驾驶员手握方向盘监测系统,其特征在于:所述图像处理器设于一主机内。
3.根据权利要求1所述的一种基于摄像头的驾驶员手握方向盘监测系统,其特征在于:所述图像处理器集成于红外摄像头内。
4.根据权利要求1所述的一种基于摄像头的驾驶员手握方向盘监测系统,其特征在于:所述图像处理器包括:图像接收元件、计算元件、数据读取元件、第一存储元件、第二存储元件和数据输出元件;
所述图像接收元件与第一存储元件连接,所述图像接收元件将红外摄像头传来的图像数据存入所述第一存储元件;
所述数据读取元件分别与第一存储元件和第二存储元件连接,读取第一存储元件和第二存储元件中的数据,所述第二存储元件存储有预先定义的图像识别模型;
所述计算元件分别与数据读取元件和数据输出元件连接,通过读取元件获取第一存储元件中来自红外摄像头的图像数据和第二存储元件的图像识别模型,采用所述图像识别模型对图像数据进行计算,得到模型输出数据,通过数据输出元件将数据传输给高级驾驶辅助系统。
CN201921090796.9U 2019-07-12 2019-07-12 一种基于摄像头的驾驶员手握方向盘监测系统 Expired - Fee Related CN211107382U (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201921090796.9U CN211107382U (zh) 2019-07-12 2019-07-12 一种基于摄像头的驾驶员手握方向盘监测系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201921090796.9U CN211107382U (zh) 2019-07-12 2019-07-12 一种基于摄像头的驾驶员手握方向盘监测系统

Publications (1)

Publication Number Publication Date
CN211107382U true CN211107382U (zh) 2020-07-28

Family

ID=71692256

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201921090796.9U Expired - Fee Related CN211107382U (zh) 2019-07-12 2019-07-12 一种基于摄像头的驾驶员手握方向盘监测系统

Country Status (1)

Country Link
CN (1) CN211107382U (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110341713A (zh) * 2019-07-12 2019-10-18 东南(福建)汽车工业有限公司 一种基于摄像头的驾驶员手握方向盘监测系统和方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110341713A (zh) * 2019-07-12 2019-10-18 东南(福建)汽车工业有限公司 一种基于摄像头的驾驶员手握方向盘监测系统和方法

Similar Documents

Publication Publication Date Title
CN109496188B (zh) 用于切换车辆驾驶模式的系统和方法
US10606276B2 (en) User data-based autonomous vehicle system
CN108137052B (zh) 驾驶控制装置、驾驶控制方法和计算机可读介质
US10867409B2 (en) Methods and systems to compensate for vehicle calibration errors
US11718328B2 (en) Method and device for supporting an attentiveness and/or driving readiness of a driver during an automated driving operation of a vehicle
EP3586209A1 (en) Vehicle control system
JP6827197B2 (ja) 情報推定システム及び情報推定方法
US20170072955A1 (en) Method for automatically adapting acceleration in a motor vehicle
KR20180092314A (ko) 모션 계획에 기초한 자율 주행 차량의 운행 방법 및 시스템
US20230202531A1 (en) Transitioning steering control from an autonomous vehicle to a driver
US20170285637A1 (en) Driving assistance methods and systems
CN108628298B (zh) 用于自动驾驶车辆的控制型规划和控制系统
KR20220054429A (ko) 운전자 지원을 사용하여 비정상적인 운전자 거동을 검출하고 해결하기
US11479259B2 (en) Information processing system, program, and control method
JP2005538457A (ja) 道路車両用の運転者援助システム
US11524695B2 (en) Interface for harmonizing performance of different autonomous vehicles in a fleet
CN110341713A (zh) 一种基于摄像头的驾驶员手握方向盘监测系统和方法
WO2020226071A1 (ja) 車両位置検出装置、及び、車両位置検出用パラメータセット作成装置
CN111098865A (zh) 用于使用挡风玻璃显示器促进导航的方法及设备
US20230290015A1 (en) Vehicle user interface device and operating method of vehicle user interface device
CN112046502A (zh) 自动驾驶装置和方法
CN211107382U (zh) 一种基于摄像头的驾驶员手握方向盘监测系统
CN109177983B (zh) 车辆运行状态监测方法、装置及设备
KR20240035960A (ko) 자율 주행 장치 및 방법
US20170327037A1 (en) Adaptive rear view display

Legal Events

Date Code Title Description
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200728

Termination date: 20210712

CF01 Termination of patent right due to non-payment of annual fee