CN111703368A - 一种车内遗忘物的检测和提醒系统及方法 - Google Patents
一种车内遗忘物的检测和提醒系统及方法 Download PDFInfo
- Publication number
- CN111703368A CN111703368A CN202010596145.8A CN202010596145A CN111703368A CN 111703368 A CN111703368 A CN 111703368A CN 202010596145 A CN202010596145 A CN 202010596145A CN 111703368 A CN111703368 A CN 111703368A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- image
- real
- control unit
- connected domain
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 35
- 238000004891 communication Methods 0.000 claims abstract description 16
- 238000001514 detection method Methods 0.000 claims abstract description 13
- 239000000284 extract Substances 0.000 abstract description 4
- 238000012935 Averaging Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 2
- 238000005303 weighing Methods 0.000 description 2
- 208000000044 Amnesia Diseases 0.000 description 1
- 208000031091 Amnestic disease Diseases 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000006986 amnesia Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Mechanical Engineering (AREA)
- Emergency Alarm Devices (AREA)
Abstract
本发明涉及汽车技术领域，公开了一种车内遗忘物的检测和提醒系统及方法，其中门锁传感器检测门锁的锁定或开启；当检测到门锁的开启时摄像头开始抓取车内实时图像并发送控制单元；车门位置传感器检测各个车门的位置状态；当检测到车门开启时摄像头停止抓取车内实时图像；点火传感器检测发动机是否熄火；当检测到发动机熄火时摄像头采集车内瞬时图像Pc；控制单元根据摄像头抓取的车内实时图像构建背景图像Pb，并通过Pb和Pc的帧差计算得到图像差异Pd；控制单元提取Pd的连通域并分割连通域，并根据分割的连通域生成物品图像；通信单元接收物品图像并发送给用户。本发明的技术方案能够准确识别车内遗忘物并提醒用户，检测范围广，无需额外加装硬件。
Description
技术领域
本发明涉及汽车技术领域，具体地说，涉及一种车内遗忘物的检测和提醒系统及方法。
背景技术
在乘车过程中，乘客时常因疏忽将物品遗忘在车辆内部，造成种种不便。现有技术中的方案主要是通过称重来检测遗忘物。然而该方案在实施时使用的称重装置受到整车布局的限制，并且检测范围较小。
发明内容
为了克服上述技术问题，本发明提供了一种车内遗忘物的检测和提醒系统及方法，识别准确，检测范围广。
为了实现上述目的，本发明提供了一种车内遗忘物的检测和提醒系统，包括：
门锁传感器、点火传感器、车门位置传感器、摄像头、控制单元和通信单元；
所述门锁传感器用于检测门锁的锁定或开启；
所述摄像头用于当所述门锁传感器检测到所述门锁的开启时开始抓取车内实时图像并发送所述控制单元；
所述车门位置传感器用于检测各个车门的位置状态；
所述摄像头还用于当所述车门位置传感器检测到车门开启时停止抓取所述车内实时图像；
所述点火传感器用于检测发动机是否熄火；
所述摄像头还用于当所述点火传感器检测到所述发动机熄火时采集车内瞬时图像Pc；
所述控制单元用于根据所述摄像头抓取的所述车内实时图像构建背景图像Pb，并通过所述Pb和所述Pc的帧差计算得到图像差异Pd；
所述控制单元用于提取所述Pd的连通域并分割所述连通域；
所述控制单元还用于根据分割的所述连通域生成物品图像；
所述通信单元用于接收所述物品图像并发送给用户。
在本发明的一种可选的实施方式中，所述系统还包括显示单元，用于接收并显示所述物品图像。
在本发明的一种可选的实施方式中，所述控制单元具体用于根据
构建所述Pb；其中Pj为j时刻的所述车内实时图像。
在本发明的一种可选的实施方式中，所述控制单元还用于在提取所述Pd的连通域前对所述Pd进行去噪处理。
本发明还提供了一种车内遗忘物的检测和提醒方法，包括：
检测门锁的锁定或开启；
当检测到所述门锁的开启时开始抓取车内实时图像；
检测各个车门的位置状态；
当检测到车门开启时停止抓取所述车内实时图像；
检测发动机是否熄火；
当检测到所述发动机熄火时采集车内瞬时图像Pc；
根据抓取的所述车内实时图像构建背景图像Pb，并通过所述Pb和所述Pc的帧差计算得到图像差异Pd；
提取所述Pd的连通域并分割所述连通域；
根据分割的所述连通域生成物品图像；
将所述物品图像发送给用户。
在本发明的一种可选的实施方式中，所述方法还包括：
显示所述物品图像。
在本发明的一种可选的实施方式中，所述根据抓取的所述车内实时图像构建背景图像Pb，具体包括：
根据
构建所述Pb；其中Pj为j时刻的所述车内实时图像。
在本发明一种可选的实施方式中，所述方法还包括：
在提取所述Pd的连通域之前，对所述Pd进行去噪处理。
本发明所述的车内遗忘物的检测和提醒系统及方法，该系统包括：门锁传感器、点火传感器、车门位置传感器、摄像头、控制单元和通信单元；所述门锁传感器用于检测门锁的锁定或开启；所述摄像头用于当所述门锁传感器检测到所述门锁的开启时开始抓取车内实时图像并发送所述控制单元；所述车门位置传感器用于检测各个车门的位置状态；所述摄像头还用于当所述车门位置传感器检测到车门开启时停止抓取所述车内实时图像；所述点火传感器用于检测发动机是否熄火；所述摄像头还用于当所述点火传感器检测到所述发动机熄火时采集车内瞬时图像Pc；所述控制单元用于根据所述摄像头抓取的所述车内实时图像构建背景图像Pb，并通过所述Pb和所述Pc的帧差计算得到图像差异Pd；所述控制单元用于提取所述Pd的连通域并分割所述连通域；所述控制单元还用于根据分割的所述连通域生成物品图像；所述通信单元用于接收所述物品图像并发送给用户。本发明的技术方案能够检测和判断遗落在车内的物品，对用户进行提醒，相比传统方法检测范围广，识别更准确，并且无需额外加装硬件，不影响车内布局。
附图说明
图1为本发明所述一种车内遗忘物的检测和提醒系统的示意图；
图2为本发明的技术方案中图像抓取和图像处理的示意图；
图3为本发明所述一种车内遗忘物的检测和提醒方法的流程图；
图4为本发明所述另一种车内遗忘物的检测和提醒方法的流程图。
具体实施方式
下面参考附图来说明本发明的实施例。在本发明的一个附图或一种实施方式中描述的元素和特征可以与一个或更多个其他附图或实施方式中示出的元素和特征相结合。应当注意，为了清楚的目的，附图和说明中省略了与本发明无关的、本领域普通技术人员已知的部件或处理的表示和描述。
本发明实施例提供了一种车内遗忘物的检测和提醒系统，如图1所示，该系统包括：
门锁传感器1、点火传感器2、车门位置传感器3、摄像头4、控制单元5和通信单元6。
门锁传感器1用于检测车辆门锁的锁定或开启。
当门锁传感器1检测到门锁的开启时，摄像头4开始抓取车内实时图像并将车内实时图像发送给控制单元5。
车门位置传感器3用于检测各个车门的位置状态。
控制单元5可以包括存储器51。当车门位置传感器3检测到车门开启时，摄像头4停止抓取车内实时图像。从开始抓取车内实时图像到停止抓取车内实时图像，形成抓取到的图像序列P1至Pn。控制单元5将收到的图像序列P1至Pn保存在存储器51中。
点火传感器2用于检测发动机状态，判断车辆的发动机是否熄火。
当点火传感器2检测到发动机熄火时，摄像头4采集车内瞬时图像Pc并传输给控制单元5。
控制单元5根据摄像头4抓取的车内实时图像构建背景图像Pb，并通过Pb和Pc的帧差计算得到图像差异Pd。其中Pd＝Pc–Pb。
控制单元5可以进一步提取Pd的连通域并分割该连通域。连通域指图像中具有相似亮度值并相互连接的像素点集合。一个目标图像中可能含有一个或多个连通域。例如，Pd中可以包含黑色背景部分以及多个白色的连通域。控制单元5在从Pd提取出的连通域中检测出一个或多个连通域，并将该连通域分割为单独的连通域。分割连通域可以通过算法实现。可以利用遍历法或其他算法将单独的连通域的坐标集合分别提取并保存。
控制单元5可以根据分割的连通域生成物品图像。具体而言，控制单元5还可以根据分割的单独连通域在Pd中的坐标集合，提取实时图像Pc中与坐标集合对应的一个或多个图像部分，并将图像部分发送给通信单元作为一个或多个物品图像。当然，控制单元5也可以在分割连通域之前，生成与一个或多个连通域对应的图像，再将图像分割为物品图像。
可选地，控制单元5还可以对遗忘物的图像进行种类识别，并将识别结果发送给通信单元6。控制单元5可以通过现有的机器视觉技术来识别物品的类别。
通信单元6接收控制单元5传输的物品图像，将物品图像发送给用户。通信单元6也可以将对遗忘物的识别结果和提醒发送给用户。具体的，通信单元6可以经由蓝牙、WIFI或无线手机网络发送给与其相连接的其他通信设备，使用户接收到物品图像或提醒。
进一步的，系统还包括显示单元7。控制单元5将物品图像发送给显示单元7进行显示。显示单元7具体可以是中控显示屏。
本发明实施例所述的车内遗忘物的检测和提醒系统，包括门锁传感器、点火传感器、车门位置传感器、摄像头、控制单元、通信单元等。门锁传感器检测门锁的锁定或开启；当门锁传感器检测到门锁的开启时摄像头开始抓取车内实时图像并发送控制单元；车门位置传感器检测各个车门的位置状态；当车门位置传感器检测到车门开启时摄像头停止抓取车内实时图像；点火传感器检测发动机是否熄火；当点火传感器检测到发动机熄火时摄像头采集车内瞬时图像Pc；控制单元根据摄像头抓取的车内实时图像构建背景图像Pb，并通过Pb和Pc的帧差计算得到图像差异Pd；控制单元提取Pd的连通域并进行分割；控制单元还根据分割的连通域生成物品图像。通信单元接收物品图像并发送给用户，使用户获取到遗忘在车内的物品图像。本发明实施例的技术方案能够检测和判断遗落在车内的物品，对用户进行提醒，相比传统方法检测范围更广，识别更准确，并且充分利用车辆已有硬件，无需额外加装硬件，不影响车内布局。
进一步的，控制单元采用均值法构建背景图像Pb，根据
构建Pb。
其中Pj为j时刻的所述车内实时图像。
采用上述均值法生成Pb能够削弱噪声输入对背景图像的干扰，比如短时光照等。
在实际应用中，控制单元还可以在提取Pd的连通域前对Pd进行去噪处理。通过去噪处理消除小的噪声区域，忽略体积较小的遗忘物。
本发明实施例通过图像分析快速识别乘客遗忘在车内的物品，可以削弱噪声影响，可以使用车辆本身已有硬件，如摄像头等，并且该技术方案检测范围广泛。
图2示出了摄像头抓取的图像及处理后的图像的一个示例。如图2所示，第一幅图为背景图像Pb的示例，包括用户放置物品前的背景；第二幅图为实时图像Pc的一个实例，其包括用户放置的钥匙和背景物品；第三幅图为差分图像Pd的一个示例，Pd中白色像素集合为一个连通域；第四幅图为物品图像的一个示例，其包括从Pc中根据Pd中的连通域坐标集合而提取的物品图像(例如钥匙图像)，其中背景物品被去除。
本发明实施例还提供了一种车内遗忘物的检测和提醒方法，如图3所示，该方法包括：
301、检测门锁的锁定或开启。
当检测到车辆门锁的开启时执行302。
302、开始抓取车内实时图像。
303、检测各个车门的位置状态。
当检测到车门开启时，执行304。
304、停止抓取车内实时图像。
305、检测发动机是否熄火。
当检测到发动机熄火时，执行306。
306、采集车内瞬时图像Pc。
307、根据抓取的车内实时图像构建背景图像Pb，并通过Pb和Pc的帧差计算得到图像差异Pd。
308、提取Pd的连通域并分割连通域。
309、根据分割的连通域生成物品图像。可以根据步骤308分割的单独连通域在Pd中的坐标集合，提取实时图像Pc中与坐标集合对应的一个或多个图像部分作为物品图像。
310、将物品图像发送给用户。
在一种具体的应用场景中，如图4所示，在步骤308后，该方法还包括：
311、显示物品图像。
可以在车内的显示单元显示物品图像。显示单元具体可以是车辆的中控显示屏。
在步骤308之后，一方面，步骤309和310实现区分遗忘物并将遗忘物的图像发送给用户，另一方面，步骤311实现分别显示不同遗忘物的图像。
可选地，还可以对遗忘物的图像进行种类识别，并将识别结果通过显示或语音等方式通知给用户。
进一步的，上述307中根据抓取的车内实时图像构建背景图像Pb，具体为：
根据
构建Pb。其中Pj为j时刻的车内实时图像。采用均值法对P1至Pn进行处理可以削弱噪声输入对背景图像的干扰。
进一步的，在步骤308之前，在执行步骤307之后还包括：
312、对Pd进行去噪处理。
通过去噪处理消除小的噪声区域，忽略体积较小的遗忘物。
本发明实施例通过图像分析快速识别乘客遗忘在车内的物品，能够检测和判断遗落在车内的物品从而对用户进行提醒，还可以削弱噪声影响，同时本发明实施例采用车辆本身已有硬件，如摄像头等，无需额外加装硬件，不影响车内布局。并且该技术方案检测范围广泛。
虽然已经详细说明了本发明及其优点，但是应当理解在不超出由所附的权利要求所限定的本发明的精神和范围的情况下可以进行各种改变、替代和变换。而且，本申请的范围不仅限于说明书所描述的过程、设备、手段、方法和步骤的具体实施例。本领域内的普通技术人员从本发明的公开内容将容易理解，根据本发明可以使用执行与在此所述的相应实施例基本相同的功能或者获得与其基本相同的结果的、现有和将来要被开发的过程、设备、手段、方法或者步骤。因此，所附的权利要求旨在在它们的范围内包括这样的过程、设备、手段、方法或者步骤。
Claims (8)
1.一种车内遗忘物的检测和提醒系统，其特征在于，包括：
门锁传感器、点火传感器、车门位置传感器、摄像头、控制单元和通信单元；
所述门锁传感器用于检测门锁的锁定或开启；
所述摄像头用于当所述门锁传感器检测到所述门锁的开启时开始抓取车内实时图像并发送所述控制单元；
所述车门位置传感器用于检测各个车门的位置状态；
所述摄像头还用于当所述车门位置传感器检测到车门开启时停止抓取所述车内实时图像；
所述点火传感器用于检测发动机是否熄火；
所述摄像头还用于当所述点火传感器检测到所述发动机熄火时采集车内瞬时图像Pc；
所述控制单元用于根据所述摄像头抓取的所述车内实时图像构建背景图像Pb，并通过所述Pb和所述Pc的帧差计算得到图像差异Pd；
所述控制单元用于提取所述Pd的连通域并分割所述连通域；
所述控制单元还用于根据分割的所述连通域生成物品图像；
所述通信单元用于接收所述物品图像并发送给用户。
2.根据权利要求1所述的车内遗忘物的检测和提醒系统，其特征在于，所述系统还包括显示单元，用于接收并显示所述物品图像。
3.根据权利要求1所述的车内遗忘物的检测和提醒系统，其特征在于，所述控制单元具体用于根据
构建所述Pb；其中Pj为j时刻的所述车内实时图像。
4.根据权利要求1至3中任意一项所述的车内遗忘物的检测和提醒系统，其特征在于，所述控制单元还用于在提取所述Pd的连通域前对所述Pd进行去噪处理。
5.一种车内遗忘物的检测和提醒方法，其特征在于，包括：
检测门锁的锁定或开启；
当检测到所述门锁的开启时开始抓取车内实时图像；
检测各个车门的位置状态；
当检测到车门开启时停止抓取所述车内实时图像；
检测发动机是否熄火；
当检测到所述发动机熄火时采集车内瞬时图像Pc；
根据抓取的所述车内实时图像构建背景图像Pb，并通过所述Pb和所述Pc的帧差计算得到图像差异Pd；
提取所述Pd的连通域并分割所述连通域；
根据分割的所述连通域生成物品图像；
将所述物品图像发送给用户。
6.根据权利要求5所述的车内遗忘物的检测和提醒方法，其特征在于，所述方法还包括：
显示所述物品图像。
7.根据权利要求5所述的车内遗忘物的检测和提醒方法，其特征在于，所述根据抓取的所述车内实时图像构建背景图像Pb，具体包括：
根据
构建所述Pb；其中Pj为j时刻的所述车内实时图像。
8.根据权利要求5-7中任意一项所述的车内遗忘物的检测和提醒方法，其特征在于，所述方法还包括：
在提取所述Pd的连通域之前，对所述Pd进行去噪处理。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010596145.8A CN111703368A (zh) | 2020-06-28 | 2020-06-28 | 一种车内遗忘物的检测和提醒系统及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010596145.8A CN111703368A (zh) | 2020-06-28 | 2020-06-28 | 一种车内遗忘物的检测和提醒系统及方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111703368A true CN111703368A (zh) | 2020-09-25 |
Family
ID=72542921
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010596145.8A Pending CN111703368A (zh) | 2020-06-28 | 2020-06-28 | 一种车内遗忘物的检测和提醒系统及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111703368A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114261338A (zh) * | 2021-12-08 | 2022-04-01 | 阿波罗智联(北京)科技有限公司 | 车辆检测方法、装置和自动驾驶车辆 |
| WO2023125431A1 (zh) * | 2021-12-30 | 2023-07-06 | 华为技术有限公司 | 一种检测的方法及装置 |
-
2020
- 2020-06-28 CN CN202010596145.8A patent/CN111703368A/zh active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114261338A (zh) * | 2021-12-08 | 2022-04-01 | 阿波罗智联(北京)科技有限公司 | 车辆检测方法、装置和自动驾驶车辆 |
| WO2023125431A1 (zh) * | 2021-12-30 | 2023-07-06 | 华为技术有限公司 | 一种检测的方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP3647129A1 (en) | Vehicle, vehicle door unlocking control method and apparatus, and vehicle door unlocking system | |
| US11383676B2 (en) | Vehicles, vehicle door unlocking control methods and apparatuses, and vehicle door unlocking systems | |
| US20190141074A1 (en) | Security test system, security test method, function evaluation device, and program | |
| US9662977B2 (en) | Driver state monitoring system | |
| CN111703368A (zh) | 一种车内遗忘物的检测和提醒系统及方法 | |
| CN109532664B (zh) | 离车时提醒用户携带物品的方法及系统 | |
| US9177202B2 (en) | Red-eye detection device | |
| CN110758320B (zh) | 自助试驾的防遗留处理方法、装置、电子设备与存储介质 | |
| WO2022027893A1 (zh) | 安全带佩戴检测方法、装置、电子设备、存储介质及程序 | |
| US20160138318A1 (en) | Controller, control method, and computer-readable recording medium | |
| US20160232415A1 (en) | Detection detection of cell phone or mobile device use in motor vehicle | |
| Pawar et al. | IoT based embedded system for vehicle security and driver surveillance | |
| JP2016111509A (ja) | 車両用画像処理装置、車両用画像処理方法およびプログラム | |
| CN106448251A (zh) | 一种识别方法和终端设备 | |
| CN111325088B (zh) | 信息处理系统、记录介质以及信息处理方法 | |
| CN112634558A (zh) | 防止由不当方从车辆取走物品的系统和方法 | |
| CN202518219U (zh) | 基于机器视觉的安全带佩带识别装置 | |
| CN109177971B (zh) | 汽车和服务器及其安全控制方法、控制装置及存储介质 | |
| CN208861343U (zh) | 一种基于人脸识别的汽车解锁系统 | |
| KR20230009598A (ko) | 차량 번호판 인식 및 위조 판단 방법과 그 방법이 수행되는 시스템 | |
| US20230306757A1 (en) | Vehicle interior monitoring system | |
| CN111489356A (zh) | 基于视觉的汽车门锁弹簧有无检测方法 | |
| CN111126292A (zh) | 一种安全监控方法、装置及系统 | |
| JP7296838B2 (ja) | 緊急通報装置及び方法 | |
| CN113944396A (zh) | 一种车辆前后备箱门自动打开的系统及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20200925 |