CN114291095B - 车内驾乘监控方法 - Google Patents
车内驾乘监控方法 Download PDFInfo
- Publication number
- CN114291095B CN114291095B CN202111456573.1A CN202111456573A CN114291095B CN 114291095 B CN114291095 B CN 114291095B CN 202111456573 A CN202111456573 A CN 202111456573A CN 114291095 B CN114291095 B CN 114291095B
- Authority
- CN
- China
- Prior art keywords
- vehicle
- driver
- vital sign
- seat
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 48
- 238000000034 method Methods 0.000 title claims abstract description 11
- 230000001815 facial effect Effects 0.000 claims description 40
- 230000002159 abnormal effect Effects 0.000 claims description 10
- 206010039203 Road traffic accident Diseases 0.000 abstract description 2
- 238000001514 detection method Methods 0.000 description 6
- 230000029058 respiratory gaseous exchange Effects 0.000 description 2
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 230000006996 mental state Effects 0.000 description 1
Landscapes
- Emergency Alarm Devices (AREA)
- Traffic Control Systems (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Abstract
本发明属于车载电子设备技术领域，特别涉及一种车内驾乘监控方法，本方法基于影像画面中的面部特征信息，结合座椅采集的生命体征信息来判断车内驾驶员与乘员状态，进而做出提示或警示，保证行车安全。在发生交通事故后，结合车内影像记录与行车记录、行车轨迹等信息，能形成完整信息链，有利于追溯事故原因。
Description
技术领域
本发明属于车载电子设备技术领域，特别涉及一种车内驾乘监控方法。
背景技术
安全行驶既需要良好的道路环境，又需要驾驶员具有良好的精神状态。中国专利CN113491520A公开了一种驾驶疲劳检测方法，通过摄像头采集驾乘人员面部图像，通过毫米波雷达采集驾乘人员心率呼吸信息，结合驾乘人员的面部特征点信息和心率呼吸信息得到驾驶疲劳检测结果。这种只能对驾驶员自身进行监测并在检测结果为疲劳驾驶状态进行报警，无法对车内乘客状态进行监测，经营性车辆上乘客与驾驶员发生纠纷诱发事故或驾驶员将未成年乘客遗留在车内的事件时有发生，现有的车辆检测系统无法满足复杂的驾驶需求。
发明内容
本发明的目的在于提供一种能提升驾乘安全性的车内驾乘监控方法。
为实现以上目的，本发明采用的技术方案为：一种车内驾乘监控方法，包括如下步骤：
步骤A、将监测摄像头安装在车内中央后视镜处，监测摄像头为镜头面向车尾的广角摄像头，采集前排乘员的面部影像和后排乘员的上半身影像；将生命体征传感器安装在各座椅的坐垫和/或靠背内；将监测摄像头所采集的画面按照车内座椅分布划分为若干区域，并匹配各区域与对应座椅的生命体征传感器信息；
步骤B、车辆行驶状态下，监测摄像头采集并记录车内的影像画面；
步骤C、分析监测摄像头所采集影像画面中人员的面部特征，
步骤C10、当驾驶座区域人员的面部特征异常时，获取驾驶座座椅处生命体征传感器的信息，结合驾驶座区域人员的面部特征信息与驾驶座座椅处的生命体征信息，判断驾驶员处于何种状态；
步骤C11、若驾驶员处于疲劳状态，控制模块输出指令至警示与救助单元，扬声器发出警示音和/或调节车载空调降低车内温度；
步骤C12、若驾驶员处于危险状态，控制模块输出指令至警示与救助单元，通信单元将监测摄像头所采集的影像画面、驾驶座生命体征信息与车辆定位信息上传至服务平台；
步骤C13、若未能获取驾驶员的面部特征信息，却获取有驾驶员的生命体征信息，控制模块输出指令至警示与救助单元，扬声器发出提示音提示驾驶员去除面部遮挡物或调节座椅姿态、监测摄像头姿态使驾驶员的面部轮廓位于监测摄像头的监测区域内，直至监测摄像头所采集影像画面中能检测到驾驶员的面部特征信息或车辆处于停止状态，
如果扬声器提示音持续T1时长后，监测摄像头所采集的影像画面中仍旧无法获取驾驶员的面部特征信息，控制模块判断驾驶员处于危险状态，进入步骤C12；
步骤C20、当非驾驶座区域人员的面部特征异常时，获取对应座椅处生命体征传感器的信息，结合座椅区域人员的面部特征信息与对应座椅处的生命体征信息，判断乘员处于何种状态；
步骤C21、若乘员处于危险状态，控制模块输出指令至警示与救助单元，扬声器发出提示音提示驾驶员应急处置，同时通信单元将监测摄像头所采集的影像画面、对应座椅处的生命体征信息与车辆定位信息上传至服务平台；服务平台工作人员分析影像画面与生命体征信息，发出指令至扬声器提示驾驶员作对应的应急处理。
步骤C22、若获取有乘员的面部特征信息，却未能获取乘员的生命体征信息，控制模块输出指令至警示与救助单元，扬声器发出提示音提示乘员回到座位就坐。
与现有技术相比，本发明存在以下技术效果：基于影像画面中的面部特征信息，结合座椅采集的生命体征信息来判断车内驾驶员与乘员状态，进而做出提示或警示，保证行车安全。在发生交通事故后，结合车内影像记录与行车记录、行车轨迹等信息，能形成完整信息链，有利于追溯事故原因。
附图说明
下面对本说明书各附图所表达的内容及图中的标记作简要说明：
图1是本发明的示意图。
具体实施方式
下面结合附图，通过对实施例的描述，对本发明的具体实施方式作进一步详细说明。
一种车内驾乘监控方法，包括如下步骤：
步骤A、将监测摄像头21安装在车内中央后视镜处，监测摄像头21为镜头面向车尾的广角摄像头，采集前排乘员的面部影像和后排乘员的上半身影像；将生命体征传感器22安装在各座椅的坐垫和/或靠背内；将监测摄像头21所采集的画面按照车内座椅分布划分为若干区域，并匹配各区域与对应座椅的生命体征传感器22信息；
步骤B、车辆行驶状态下，监测摄像头21采集并记录车内的影像画面；
步骤C、分析监测摄像头21所采集影像画面中人员的面部特征，
步骤C10、当驾驶座区域人员的面部特征异常时，获取驾驶座座椅处生命体征传感器22的信息，结合驾驶座区域人员的面部特征信息与驾驶座座椅处的生命体征信息，判断驾驶员处于何种状态；所述的面部特征异常指的是面部特显示人员痛苦、噎食或眼睛长时间闭合等无法观察路面情况的情况，人员面部特征异常的判断，可应用如专利CN113491520A所述的检测方法；
步骤C11、若驾驶员处于疲劳状态，例如驾驶员眼睛长时间闭合、半闭合且生命体征信息与人员睡眠状态相符，控制模块10输出指令至警示与救助单元30，扬声器31发出警示音和/或调节车载空调降低车内温度。
步骤C12、若驾驶员处于危险状态，例如驾驶员面部特征异常且生命体征信息异常，控制模块10输出指令至警示与救助单元30，通信单元32将监测摄像头21所采集的影像画面、驾驶座生命体征信息与车辆定位信息上传至服务平台40，服务平台40工作人员分析上传的影像画面与生命体征信息，对车辆进行救援或远程接管车辆。
步骤C13、若未能获取驾驶员的面部特征信息，却获取有驾驶员的生命体征信息，驾驶员低头或身体移动至其他区域，这种状态下驾驶员无法专心观察路面情况。控制模块10输出指令至警示与救助单元30，扬声器31发出提示音提示驾驶员去除面部遮挡物或调节座椅姿态、监测摄像头21姿态使驾驶员的面部轮廓位于监测摄像头21的监测区域内，直至监测摄像头21所采集影像画面中能检测到驾驶员的面部特征信息或车辆处于停止状态；如果扬声器31提示音持续T1时长后，监测摄像头21所采集的影像画面中仍旧无法获取驾驶员的面部特征信息，控制模块10判断驾驶员处于危险状态，进入步骤C12。
步骤C20、当非驾驶座区域人员的面部特征异常时，获取对应座椅处生命体征传感器22的信息，结合座椅区域人员的面部特征信息与对应座椅处的生命体征信息，判断乘员处于何种状态，可应用与步骤C10中相同的判断方法。
步骤C21、若乘员处于危险状态，控制模块10输出指令至警示与救助单元30，扬声器31发出提示音提示驾驶员应急处置。
步骤C22、若获取有乘员的面部特征信息，却未能获取乘员的生命体征信息，说明乘员没有坐在座位上，存在危险。控制模块10输出指令至警示与救助单元30，扬声器31发出提示音提示乘员回到座位就坐。
当所监控的车辆为出租车等运营车辆时，所述的步骤C21中，控制模块10输出指令至警示与救助单元30，通信单元32将监测摄像头21所采集的影像画面、对应座椅处的生命体征信息与车辆定位信息上传至服务平台40，服务平台40工作人员分析影像画面与生命体征信息，发出指令至扬声器31提示驾驶员作对应的应急处理。这样在乘员发生危险时，按照扬声器31的提示音处理即可，在保证驾驶员专心驾驶车辆的同时，为乘客提供更适宜的救助方法。
为避免乘员被驾驶员遗留在车内导致人员伤亡或财产损失，还包括步骤D，监测摄像头21自车门落锁后采集T2时长车内的影像画面并分析监测摄像头21所采集影像画面中人员的面部特征，生命体征传感器22自车门落锁后采集T2时长的生命体征信息，若影像画面内任一区域采集到人员的面部特征信息或任一座椅处采集到生命体征信息，控制模块10输出指令至警示与救助单元30，扬声器31发出提示音提示车内遗留生命体。
Claims (1)
1.一种车内驾乘监控方法，包括如下步骤：
步骤A、将监测摄像头(21)安装在车内中央后视镜处，监测摄像头(21)为镜头面向车尾的广角摄像头，采集前排乘员的面部影像和后排乘员的上半身影像；将生命体征传感器(22)安装在各座椅的坐垫和/或靠背内；将监测摄像头(21)所采集的画面按照车内座椅分布划分为若干区域，并匹配各区域与对应座椅的生命体征传感器(22)信息；
步骤B、车辆行驶状态下，监测摄像头(21)采集并记录车内的影像画面；
步骤C、分析监测摄像头(21)所采集影像画面中人员的面部特征，
步骤C10、当驾驶座区域人员的面部特征异常时，获取驾驶座座椅处生命体征传感器(22)的信息，结合驾驶座区域人员的面部特征信息与驾驶座座椅处的生命体征信息，判断驾驶员处于何种状态；
步骤C11、若驾驶员处于疲劳状态，控制模块(10)输出指令至警示与救助单元(30)，扬声器(31)发出警示音和/或调节车载空调降低车内温度；
步骤C12、若驾驶员处于危险状态，控制模块(10)输出指令至警示与救助单元(30)，通信单元(32)将监测摄像头(21)所采集的影像画面、驾驶座生命体征信息与车辆定位信息上传至服务平台(40)，服务平台(40)工作人员分析上传的影像画面与生命体征信息，对车辆进行救援或远程接管车辆；
步骤C13、若未能获取驾驶员的面部特征信息，却获取有驾驶员的生命体征信息，控制模块(10)输出指令至警示与救助单元(30)，扬声器(31)发出提示音提示驾驶员去除面部遮挡物或调节座椅姿态、监测摄像头(21)姿态使驾驶员的面部轮廓位于监测摄像头(21)的监测区域内，直至监测摄像头(21)所采集影像画面中能检测到驾驶员的面部特征信息或车辆处于停止状态，
如果扬声器(31)提示音持续T1时长后，监测摄像头(21)所采集的影像画面中仍旧无法获取驾驶员的面部特征信息，控制模块(10)判断驾驶员处于危险状态，进入步骤C12；
步骤C20、当非驾驶座区域人员的面部特征异常时，获取对应座椅处生命体征传感器(22)的信息，结合座椅区域人员的面部特征信息与对应座椅处的生命体征信息，判断乘员处于何种状态；
步骤C21、若乘员处于危险状态，控制模块(10)输出指令至警示与救助单元(30)，通信单元(32)将监测摄像头(21)所采集的影像画面、对应座椅处的生命体征信息与车辆定位信息上传至服务平台(40)，服务平台(40)发出指令至扬声器(31)，扬声器(31)发出提示音提示驾驶员应急处置；
步骤C22、若获取有乘员的面部特征信息，却未能获取乘员的生命体征信息，控制模块(10)输出指令至警示与救助单元(30)，扬声器(31)发出提示音提示乘员回到座位就坐；
步骤D、监测摄像头(21)自车门落锁后采集T2时长车内的影像画面并分析监测摄像头(21)所采集影像画面中人员的面部特征，生命体征传感器(22)自车门落锁后采集T2时长的生命体征信息，若影像画面内任一区域采集到人员的面部特征信息或任一座椅处采集到生命体征信息，控制模块(10)输出指令至警示与救助单元(30)，扬声器(31)发出提示音提示车内遗留生命体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111456573.1A CN114291095B (zh) | 2021-12-02 | 2021-12-02 | 车内驾乘监控方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111456573.1A CN114291095B (zh) | 2021-12-02 | 2021-12-02 | 车内驾乘监控方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114291095A CN114291095A (zh) | 2022-04-08 |
| CN114291095B true CN114291095B (zh) | 2023-12-19 |
Family
ID=80965186
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111456573.1A Active CN114291095B (zh) | 2021-12-02 | 2021-12-02 | 车内驾乘监控方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114291095B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115071515B (zh) * | 2022-07-06 | 2023-08-22 | 星河智联汽车科技有限公司 | 一种车辆座椅调节方法、装置及车辆 |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN201457227U (zh) * | 2009-06-29 | 2010-05-12 | 华东师范大学附属杨行中学 | 一种提示驾驶员休息的休息机 |
| KR101431738B1 (ko) * | 2013-04-29 | 2014-08-19 | 주식회사 카텍 | 스테레오비전기술을 이용한 차량의 운전상황 감시장치 |
| CN105691367A (zh) * | 2016-01-25 | 2016-06-22 | 大连楼兰科技股份有限公司 | 基于图像与心跳监测联合的公交车主动刹车方法和系统 |
| JP2017021651A (ja) * | 2015-07-13 | 2017-01-26 | 株式会社デンソー | 車両制御装置 |
| CN106608219A (zh) * | 2015-10-23 | 2017-05-03 | 广州汽车集团股份有限公司 | 一种车内生命体征探测处理方法及系统 |
| CN208126407U (zh) * | 2018-02-10 | 2018-11-20 | 青岛科技大学 | 基于软硬件协同图像处理的防疲劳驾驶系统 |
| CN110654393A (zh) * | 2018-06-29 | 2020-01-07 | 比亚迪股份有限公司 | 驾驶员健康状态监测方法、系统、计算机设备及存储介质 |
| CN112172736A (zh) * | 2020-10-20 | 2021-01-05 | 广州小鹏汽车科技有限公司 | 车载安全系统预警方法、车载安全系统、车辆及存储介质 |
| CN112185587A (zh) * | 2020-09-24 | 2021-01-05 | 东风汽车集团有限公司 | 一种自动驾驶车内健康监测方法及存储介质 |
| CN112277955A (zh) * | 2020-10-30 | 2021-01-29 | 安徽江淮汽车集团股份有限公司 | 辅助驾驶方法、装置、设备及存储介质 |
| CN112438728A (zh) * | 2019-08-28 | 2021-03-05 | 深圳市超捷通讯有限公司 | 安全驾驶检测装置及检测方法 |
-
2021
- 2021-12-02 CN CN202111456573.1A patent/CN114291095B/zh active Active
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN201457227U (zh) * | 2009-06-29 | 2010-05-12 | 华东师范大学附属杨行中学 | 一种提示驾驶员休息的休息机 |
| KR101431738B1 (ko) * | 2013-04-29 | 2014-08-19 | 주식회사 카텍 | 스테레오비전기술을 이용한 차량의 운전상황 감시장치 |
| JP2017021651A (ja) * | 2015-07-13 | 2017-01-26 | 株式会社デンソー | 車両制御装置 |
| CN106608219A (zh) * | 2015-10-23 | 2017-05-03 | 广州汽车集团股份有限公司 | 一种车内生命体征探测处理方法及系统 |
| CN105691367A (zh) * | 2016-01-25 | 2016-06-22 | 大连楼兰科技股份有限公司 | 基于图像与心跳监测联合的公交车主动刹车方法和系统 |
| CN208126407U (zh) * | 2018-02-10 | 2018-11-20 | 青岛科技大学 | 基于软硬件协同图像处理的防疲劳驾驶系统 |
| CN110654393A (zh) * | 2018-06-29 | 2020-01-07 | 比亚迪股份有限公司 | 驾驶员健康状态监测方法、系统、计算机设备及存储介质 |
| CN112438728A (zh) * | 2019-08-28 | 2021-03-05 | 深圳市超捷通讯有限公司 | 安全驾驶检测装置及检测方法 |
| CN112185587A (zh) * | 2020-09-24 | 2021-01-05 | 东风汽车集团有限公司 | 一种自动驾驶车内健康监测方法及存储介质 |
| CN112172736A (zh) * | 2020-10-20 | 2021-01-05 | 广州小鹏汽车科技有限公司 | 车载安全系统预警方法、车载安全系统、车辆及存储介质 |
| CN112277955A (zh) * | 2020-10-30 | 2021-01-29 | 安徽江淮汽车集团股份有限公司 | 辅助驾驶方法、装置、设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114291095A (zh) | 2022-04-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107933471B (zh) | 事故主动呼叫救援的方法及车载自动求救系统 | |
| EP3265343B1 (en) | Intelligent safety system for vehicles | |
| CN105636829B (zh) | 车辆辅助系统以及车辆 | |
| CN105144199A (zh) | 支持多种功能的基于成像装置的乘坐者监控系统 | |
| US20160355190A1 (en) | Driving assist device | |
| US20050080533A1 (en) | Vehicle passenger seat sensor network | |
| US20150125126A1 (en) | Detection system in a vehicle for recording the speaking activity of a vehicle occupant | |
| CN114291095B (zh) | 车内驾乘监控方法 | |
| JP2007183824A (ja) | 運転支援装置 | |
| CN108583580A (zh) | 一种驾驶员身体情况监测装置、方法和系统 | |
| CN111583609A (zh) | 一种预警策略差异化设置方法 | |
| CN104376684A (zh) | 一种可防止疲劳驾驶的监控系统 | |
| CN106585548A (zh) | 车门开启安全预警辅助控制方法及系统 | |
| KR101636241B1 (ko) | 졸음 운전 방지 시스템 | |
| CN214084149U (zh) | 乘员监测系统及车辆 | |
| CN107499278A (zh) | 汽车占座、安全带系扣识别远程监控装置、系统及方法 | |
| KR20160139624A (ko) | 운전자 관리 방법 및 장치 | |
| CN112208544B (zh) | 一种驾驶员的驾驶能力判断方法、安全驾驶方法及其系统 | |
| CN110667595A (zh) | 车辆驾驶员身体状态的监控方法和监控系统 | |
| CN112220481A (zh) | 一种驾驶员的驾驶状态检测方法及其安全驾驶方法 | |
| US11433916B1 (en) | System to generate an alert to wake a driver of a vehicle and a method thereof | |
| CN113335296B (zh) | 一种分心驾驶自适应检测系统及方法 | |
| CN216833629U (zh) | 机动车座舱监测装置 | |
| CN107585129A (zh) | 汽车座位占用、安全带系扣识别装置、系统及方法 | |
| CN114013446A (zh) | 一种带驾驶员生命体征监测系统的汽车 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |