CN107585096A - 防遗忘提醒系统、方法及车辆 - Google Patents

Abstract

本发明涉及用于车辆的防遗忘提醒系统、方法及车辆。一种用于车辆的防遗忘提醒系统，包括：图像获取装置，包括一个或者多个摄像单元，并且能够通过摄像单元来收集车辆内的图像信息；控制装置，控制装置预先存储多个物品模型；能够根据收集到的图像信息提取至少一个物品信息；并且能够计算至少一个物品信息与多个物品模型的相似度，控制装置根据相似度确定物品并发出提醒。

Description

防遗忘提醒系统、方法及车辆

技术领域

本发明涉及车辆技术领域，更具体地，本发明涉及防遗忘提醒系统、车辆及防遗忘提醒方法。

背景技术

人们的出行越来越多的依赖交通工具，当人们离开交通工具时，经常会出现将自己的物品遗忘的情况，从而引起很多不必要的麻烦和损失。

例如，乘客乘坐出租车或者公交车下车时，忘记带走自己的随身物品，导致个人财产的丢失；车主将手机、手提包等遗忘在车内，导致需要使用时其不在身边。另外，将贵重物品长时间遗留在车内，也会造成车辆的安全隐患，例如不法分子为了获取车内财产而对车辆进行破坏，导致车辆的损坏以及财产的损失。

因此，需要一种能够在驾驶员或者乘客下车时，检测车内是否存在驾驶员或者乘客的遗留物品，并及时地对驾驶员或者乘客进行提醒的防遗忘提醒系统及方法。

发明内容

本发明的一个目的是提供一种防遗忘提醒系统、车辆及方法，能自动识别车内是否存在遗留物品，并及时地对驾驶员或者乘客进行提醒。

为了实现上述目的，本发明采取了如下技术方案：

根据本发明的一个方面，提供了一种用于车辆的防遗忘提醒系统，包括：图像获取装置，包括一个或者多个摄像单元，并且能够通过摄像单元来收集车辆内的图像信息；控制装置，控制装置预先存储多个物品模型；能够根据收集到的图像信息提取至少一个物品信息；并且能够计算至少一个物品信息与多个物品模型的相似度，所述控制装置根据相似度确定遗留物品并发出提醒。

根据本发明的一个方面，物品模型由多个特征表示，控制装置能够从物品信息提取与物品模型的多个特征相应的多个特征。

根据本发明的一个方面，控制装置能够计算物品模型的多个特征与物品信息的所述相应的多个特征的相似度，根据相似度最高的物品模型确定物品。

根据本发明的一个方面，多个特征包括轮廓特征、颜色特征和纹理特征。

根据本发明的一个方面，还包括车辆状态检测装置，车辆状态检测装置包括一个或者多个传感器，并且能够通过传感器来收集车辆的一个或者多个状态参数，状态参数与乘车人员离开车辆的意图相关；

其中，控制装置根据收集到的状态参数判断乘车人员是否有离开车辆的意图，当判断乘车人员具有离开车辆的意图时，控制装置触发图像获取装置收集所述图像信息。

根据本发明的一个方面，传感器包括下列中的至少一种：设置于车辆内的任一座椅下的第一压力传感器，用以检测座椅的使用状态；设置于车辆的车门钥匙插孔内的第二压力传感器，用以检测车门钥匙插孔的使用状态；与车辆的引擎连接的第一监控装置，用于检测车辆的引擎的使用状态；与车辆的车内电源连接的第二监控装置，用于检测车辆的车内电源的使用状态。

根据本发明的一个方面，控制装置还能够确定遗留物品的种类，并且能将遗留物品所属的种类与预设的分类信息进行比较，以判断是否需要向乘车人员发出提醒。

根据本发明的一个方面，提醒包括视觉提醒、声音提醒或触觉提醒中的至少一种。

根据本发明的一个方面，视觉提醒为通过设置于车辆内的显示装置示出带有遗留物品的信息。

根据本发明的一个方面，还包括确认装置，在判断车辆内存在遗留物品时，可通过确认装置向控制装置发出指令，并设置下次检测到该遗留物品时是否发出提醒。

根据本发明的另一个方面，提供了一种车辆，包括：上述的防遗忘提醒系统。

根据本发明的另一个方面，提供了一种用于车辆的防遗忘提醒方法，包括：收集车辆内的图像信息；根据收集到的图像信息提取至少一个物品信息；计算至少一个物品信息与多个物品模型的相似度；并且，根据相似度确定遗留物品并发出提醒。

采用根据本发明实施例的用于车辆的防遗忘提醒系统、车辆及方法，能够通过采集与提取与车辆内的物品相关的物品特征，自动计算分析出车内是否具有遗留物品，当判断车辆内存在遗留物品时，能够及时向乘车人员发出提醒，能够有效提高对于车内的遗留物品识别分析的准确性、提高计算分析的速度，以及为乘客及驾驶员提供了便利。

附图说明

下面将参考附图来描述本发明示例性实施例的特征、优点和技术效果。

图1是示出根据本发明的一个实施例的防遗忘提醒系统的示意图；

图2是示出根据本发明的另一个实施例的防遗忘提醒系统的示意图；

图3是示出根据本发明的一个实施例的防遗忘提醒方法的流程图。

具体实施方式

下面结合附图和实施例对本发明的实施方式作进一步详细描述。以下实施例的详细描述和附图用于示例性地说明本发明的原理，但不能用来限制本发明的范围，即本发明不限于所描述的优选实施例，本发明的范围由权利要求书限定。

根据本发明的实施例的防遗忘提醒系统用于安装或集成在车辆上(例如轿车、客车或者货车等)，能够通过计算机视觉和图像识别的方式检测车内各个位置是否存在遗留物品(例如手机、钱包、背包或者钥匙等)并相应地为驾驶员或者乘客进行提醒。

图1是示出根据本发明的一个实施例的防遗忘提醒系统的示意图。如图所示，该防遗忘提醒系统100包括图像获取装置110和控制装置120。

图像获取装置110，用于收集车辆内的图像信息。根据本发明的某些实施例图像获取装置110可以包括一个或者多个摄像单元，并且能够通过摄像单元来收集车辆内的图像信息。

根据本发明的某些实施例，摄像单元可以设置于车内的多处位置，例如，将摄像单元设置于驾驶室的顶壁，这种情况下，该摄像单元能够以俯视的视角采集车内的图像信息。另外，还可以将摄像单元设置于座椅下方、靠背后方、仪表盘上方、中央控制台上方、座椅扶手下方等多种位置，从而对座椅区域、仪表盘区域、中央控制台区域进行图像信息的采集，从而全方位的采集车内的图像信息，防止出现遗漏，而导致车内存在遗留物品而未被发现的情况。

根据本发明的实施例，控制装置120可以与图像获取装置110通信，并且能够根据图像获取装置110采集的车内图像信息提取出至少一个物品信息。控制装置120内还预先存储多个物品模型。根据本发明的某些实施例，控制装置120能够计算至少一个物品信息与多个物品模型的相似度，以判断车辆内是否存在遗留物品。具体地，当相似度落入到预设的数值范围内时，控制装置120确定车辆内存在遗留物品，并且同时确定该遗留物品所属的种类。

具体地，控制装置120还包括例如支持向量机等的分类器124。分类器124计算至少一个物品信息与多个物品模型的相似度，并且将物品信息分类，确定其所属的具体种类。每个物品模型可以由支持向量机通过对同一种类的物品的多张训练图像进行反复的分析及识别训练得到，并存储于控制装置120的存储单元123。当分类器124确定物品特征与某一个物品模型的相似度落入到预设的数值范围时，例如该数值范围可以为大于90％，则控制装置120确定车辆内存在遗留物品并且该遗留物品属于该物品模型所属的种类。其中，物品模型由多个特征表示，控制装置120能够从物品信息提取与多个特征相应的多个特征，并且多个特征包括轮廓特征、颜色特征和纹理特征。物品模型可以为轮廓特征集合、颜色特征集合和纹理特征集合。控制装置120能够计算物品模型的多个特征与物品信息的相应的多个特征的相似度，根据相似度最高的物品模型确定物品。

例如，控制装置120的图像接收单元121接收到图像获取装置110采集的车内图像信息，控制装置120的图像处理单元122并从图像信息中获取与车辆内的物品相关的物品特征。控制装置120的存储单元123可以存储由支持向量机学习得到的至少一种物品模型。在一个实施例中，图像处理单元122从图像信息中提取的轮廓特征、颜色特征和纹理特征可以分别输送至分类器124中。存储单元123内存储的轮廓特征集合、颜色特征集合和纹理特征集合也分别输送至分类器124中。分类器124将图像处理单元提取的轮廓特征、颜色特征和纹理特征分别与对应的预设的轮廓特征集合、颜色特征集合和纹理特征集合内的特征进行对比，从而判断车内是否存在遗留物品以及该遗留物品的种类。具体地，当轮廓特征、颜色特征和纹理特征与轮廓特征集合、颜色特征集合和纹理特征集合内的特征分别对比后的全部相似度均落入到预设的数值范围时，控制装置120可以确定车辆内存在遗留物品以及该遗留物品的种类。在另一个实施例中，图像处理单元122也可以将从图像信息中提取的轮廓特征、颜色特征和纹理特征也整合成一个特征集合后输送至分类器124中。分类器124将该特征集合与物品模型进行对比，从而判断车内是否存在遗留物品以及该遗留物品的种类。其中，特征集合可以是简单的将不同特征的组合，也可以是其他更复杂的方法。另外，当同一个物品信息与多个物品模型对比后得到的相似度均落入到预设的范围内时，可以将相似度进行对比，确定相似度最高的物品模型所属的种类是该遗留物品对应的物品种类。

根据本发明的实施例，控制装置120还可对遗留物品所属的种类进行分类，具体地，在判断车辆内存在遗留物品时，控制装置将遗留物品与预设的分类信息进行比较，以判断存在遗留物品时是否需要向乘车人员发出提醒。例如，控制装置120的存储单元123内可以存储有遗留物品的分类信息。例如纸张、书本、绳子等可以设置为无需提醒的一类，而手机、钱包、背包、钥匙等可以设置为需要提醒的一类。当图像处理单元122最终确定该遗留物品的具体类别后，可以根据存储单元123中的分类信息对该遗留物品所属的种类进行分类，从而控制装置120可以判断是否需要向乘车人员发出提醒。

根据本发明的某些实施例，存储单元123中预设的物品模型可以由车辆制造商预先设定。存储单元123中遗留物品的分类信息可以由车辆制造商预先设定和/或可以由车辆使用者手动输入。

根据本发明的某些实施例，控制装置120的通信单元125可以与车辆状态检测装置130有线或者无线通信。车辆状态检测装置130用于收集车辆的一个或者多个状态参数，控制装置120的车辆状态收集单元126接收状态参数，并且通过控制装置120的车辆状态处理单元127根据收集到的状态参数判断乘车人员是否有离开车辆的意图。控制装置120可以构造成：当判断乘车人员具有离开车辆的意图时，控制装置120触发图像获取装置110收集图像信息。根据本发明的某些实施例，车辆状态检测装置130包括一个或者多个传感器，并且能够通过传感器来收集车辆的一个或者多个状态参数。其中，状态参数与乘车人员离开车辆的意图相关，包括车辆内的任一座椅的使用状态、车辆的车门钥匙插孔的使用状态、车辆的引擎的使用状态或车辆的车内电源的使用状态。

例如，如图1所示，车辆状态检测装置130可以包括设置于座椅下方的第一压力传感器131、设置于车门的钥匙插孔内的第二压力传感器132、监控车辆的引擎的使用状态的第一监控装置133以及监控车辆的车内电源使用状态的第二监控装置134。通过上述的各个传感器可以检测车辆内的任一座椅的使用状态、车辆的车门钥匙插孔的使用状态、车辆的引擎的使用状态或车辆的车内电源的使用状态中的至少一个。在一个示例中，当人员离开座椅后，第一压力传感器131检测到的压力值会瞬间变为零，车辆状态收集单元126接收到该压力值的变化信息后，车辆状态处理单元127设定为当接收到该信息时，判断座椅处于空闲状态。当全部的座椅均处于空闲状态时，判断车辆状态为车上的乘车人员具有离开车辆的意图。在另一个示例中，车辆状态收集单元125接收到车辆的引擎的熄灭或车辆的车内电源熄灭后，车辆状态处理单元126设定为当接收到该信息时，判断车辆状态为车上的乘车人员具有离开车辆的意图。在其他实施例中，设置于车门的钥匙插孔内的第二压力传感器132，在有钥匙插入或者拔出时，第二压力传感器132会产生瞬间变化的压力值，车辆状态收集单元126接收到该压力值信息后，车辆状态处理单元127可以设定为当接收瞬间增加的压力值或者瞬间减小的压力值时，判断车辆状态为车上的乘车人员具有离开车辆的意图。当根据上述的方法判断车辆状态为车上的乘车人员具有离开车辆的意图后，控制装置120触发图像获取装置110收集图像信息。

根据本发明的某些实施例，控制装置120的通信单元125可以与提醒装置200有线或者无线通信。控制装置120可以构造成：当在判断车辆内存在遗留物品时，触发提醒装置200向乘车人员发出提醒。

根据本发明的某些实施例，提醒装置200可以包括视觉提醒装置201、声音提醒装置202或触觉提醒装置203中的至少一种，使提醒方式可以包括视觉提醒、声音提醒或触觉提醒的至少一种。例如，视觉提醒装置201可以为设置于车辆内的中央显示屏，并通过通过设置于车辆内的显示装置示出带有遗留物品的信息，例如，通过中央显示屏示出带有遗留物品的图像、图标或者文字信息；声音提醒装置202可以为车内任意的语音提示系统，并通过发声的方式提醒乘车人员车上具有某种遗留物品；触觉提醒装置203可以为设置于车辆任意位置的振动器，通过振动乘车人员离开车辆时需接触的车辆部位的方式对其进行提醒。

根据本发明的某些实施例，控制装置120的通信单元124可以与确认装置140有线或者无线通信。控制装置120可以设置为：在判断车辆内存在遗留物品时，可通过确认装置140向控制装置120发出指令，并设置下次检测到该遗留物品时是否发出提醒。

根据本发明的某些实施例，控制装置120的存储单元123还可以自动保存该确认装置140产生的确认存留信息，并在后续的检测中，当检测到该确认存留信息中的遗留物品时，自动判断是否需要发出提醒。

上文描述的防遗忘提醒系统100的提醒装置200为利用外部的车辆内的具有相应功能的系统来实现的。但是，本发明不限于此。本领域技术人员能够理解，根据本发明的防遗忘提醒系统可以利用系统内部设置的提醒装置来实现，即使提醒装置构成防遗忘提醒系统的一个组成部分。图2是示出根据本发明的另一个实施例的防遗忘提醒系统的示意图。如图2所示，防遗忘提醒系统100包括图像获取装置110、控制装置120、车辆状态检测装置130、确认装置140和提醒装置150。控制装置120与防遗忘提醒系统100自有的提醒装置150有线或者无线通信。防遗忘提醒系统100的其他构造和操作原理参照上文的实施例，在此不再赘述。

根据本发明的防遗忘提醒系统可以应用于车辆。例如，车辆可以安装有根据本发明的防遗忘提醒系统。从而，该车辆可以自动检测车辆上是否具有乘车人员的遗留物品，并且根据检测结果及时地向乘车人员发出提醒。

下面将参考附图描述根据本发明的实施例的用于车辆的防遗忘提醒方法。图3是示出根据本发明的一个实施例的防遗忘提醒方法的流程图。

如图3所示，在步骤S310处，收集车辆内的图像信息。根据本发明的实施例，能够以俯视的视角采集车内的图像信息。除此之外，还可以对座椅区域、仪表盘区域、中央控制台区域进行图像信息的采集，从而全方位的采集车内的图像信息，防止出现遗漏，而导致车内存在遗留物品而未被发现的情况。

在步骤S320处，根据收集到的所述图像信息提取至少一个物品信息。其中，物品模型由多个特征表示，控制装置能够从物品信息提取与多个特征相应的多个特征，多个特征包括轮廓特征、颜色特征和纹理特征。物品模型可以为轮廓特征集合、颜色特征集合和纹理特征集合。

在步骤S330处，并判断车辆内是否存在遗留物品。具体地，判断车辆内是否存在遗留物品的方法为：计算至少一个物品信息与多个物品模型的相似度，以判断车辆内是否存在遗留物品，具体地，当相似度落入到预设的数值范围内时，确定车辆内存在遗留物品，并且同时确定该遗留物品所属的种类。例如该数值范围可以设置为大于90％。

例如，在一个实施例中，当轮廓特征、颜色特征和纹理特征与轮廓特征集合、颜色特征集合和纹理特征集合内的特征对比的相似度全部落入到预设的数值范围时，则可以确定车辆内存在遗留物品以及该遗留物品的种类。在另一个实施例中，从图像信息中提取的轮廓特征、颜色特征和纹理特征也整合成一个特征集合。将特征集合与物品模型进行对比，从而判断车内是否存在遗留物品以及该遗留物品的种类。其中，特征集合可以是简单的将不同特征的组合，也可以是其他更复杂的方法。另外，当同一个物品信息与多个物品模型对比后得到的相似度均落入到预设的范围内时，可以将相似度进行对比，确定相似度最高的物品模型所属的种类是该物品信息对应的物品种类。

在步骤S340处，在确定车辆内存在遗留物品时，向乘车人员发出提醒。其中，提醒方式可以包括视觉提醒、声音提醒或触觉提醒的至少一种。

根据一个实施例，视觉提醒可以为通过设置于车辆内的中央显示屏示出带有遗留物品的图像的方式进行提醒。在另一个实施例中，声音提醒可以为通过车内任意的语音提示系统以发声的方式提醒。在又一个实施例中，触觉提醒可以为通过振动乘车人员离开车辆时需接触的车辆部位的方式对其进行提醒。

可选地，在收集车辆内的信息之前，还可以收集车辆的一个或者多个状态参数，状态参数与乘车人员离开车辆的意图相关；其中，根据收集到的状态参数判断乘车人员是否有离开车辆的意图，当判断乘车人员具有离开车辆的意图时，收集车辆内的图像信息。其中，状态参数与乘车人员离开车辆的意图相关，包括车辆内的任一座椅的使用状态、车辆的车门钥匙插孔的使用状态、车辆的引擎的使用状态或车辆的车内电源的使用状态。

例如，在一个示例中，当人员离开座椅后，座椅受到的压力值会瞬间变为零，因此可以判断该座椅处于空闲状态。当全部的座椅均处于空闲状态时，判断车辆状态为车上的乘车人员具有离开车辆的意图。在另一个示例中，当车辆的引擎的熄灭或车辆的车内电源熄灭后，可以判断车辆状态为车上的乘车人员具有离开车辆的意图。在其他实施例中，当车门的钥匙插孔内的压力产生瞬间变化的压力值，判断车辆状态为车上的乘车人员具有离开车辆的意图。具体地，可以设定为当接收瞬间增加的压力值或者瞬间减小的压力值时，判断车辆状态为车上的乘车人员具有离开车辆的意图。当根据上述的方法判断车辆状态为车上的乘车人员具有离开车辆的意图后，收集车内的图像信息。

可选地，在判断出车辆内存在遗留物品时，还能同时确定该遗留物品所属的种类，并且能够将遗留物品所属的种类与预设的分类信息进行比较，以判断是否需要向乘车人员发出提醒。例如，分类信息可设置为：将纸张、书本、绳子等可以设置为无需提醒的一类，而将手机、钱包、背包、钥匙等可以设置为需要提醒的一类。当最终确定该遗留物品的具体类别后，可以根据分类信息对该遗留物品所属的种类进行分类，从而判断是否需要向乘车人员发出提醒。

可选地，在判断车辆内存在遗留物品时，乘车人员可发出是否使该遗留物品留存在车辆内的指令，并设置下次检测到该遗留物品时是否向乘车人员发出提醒。

本发明所描述和说明的实施例对于本发明所保护的内容是说明性的而非限制性的，因此应当理解为，上述实施例仅示出和描述了本发明的优选方案，在权利要求书所限定的范围内的所有修改例和等同配置均属于本发明所保护的内容。

Claims (12)

1.一种用于车辆的防遗忘提醒系统，包括：

图像获取装置，包括一个或者多个摄像单元，并且能够通过所述摄像单元来收集车辆内的图像信息；

控制装置，所述控制装置预先存储多个物品模型；能够根据收集到的所述图像信息提取至少一个物品信息；并且能够计算所述至少一个物品信息与所述多个物品模型的相似度，所述控制装置根据所述相似度确定遗留物品并发出提醒。

2.根据权利要求1所述的防遗忘提醒系统，所述物品模型由多个特征表示，所述控制装置能够从所述物品信息提取与所述物品模型的多个特征相应的多个特征。

3.根据权利要求2所述的防遗忘提醒系统，所述控制装置能够计算所述物品模型的所述多个特征与所述物品信息的所述相应的多个特征的相似度，根据相似度最高的物品模型确定物品。

4.根据权利要求2或3所述的防遗忘提醒系统，所述多个特征包括轮廓特征、颜色特征和纹理特征。

5.根据权利要求1所述的防遗忘提醒系统，还包括车辆状态检测装置，所述车辆状态检测装置包括一个或者多个传感器，并且能够通过所述传感器来收集车辆的一个或者多个状态参数，所述状态参数与乘车人员离开车辆的意图相关；

其中，所述控制装置根据收集到的所述状态参数判断所述乘车人员是否有离开车辆的意图，当判断所述乘车人员具有离开车辆的意图时，所述控制装置触发所述图像获取装置收集所述图像信息。

6.根据权利要求5所述的防遗忘提醒系统，其中，所述传感器包括下列中的至少一种：

设置于所述车辆内的任一座椅下的第一压力传感器，用以检测所述座椅的使用状态；

设置于所述车辆的车门钥匙插孔内的第二压力传感器，用以检测所述车门钥匙插孔的使用状态；

与所述车辆的引擎连接的第一监控装置，用于检测所述车辆的引擎的使用状态；

与所述车辆的车内电源连接的第二监控装置，用于检测所述车辆的车内电源的使用状态。

7.根据权利要求1所述的防遗忘提醒系统，其中，所述控制装置还能够确定所述遗留物品的种类，并且能将所述遗留物品所属的种类与预设的分类信息进行比较，以判断是否需要向所述乘车人员发出提醒。

8.根据权利要求1所述的防遗忘提醒系统，其中，所述提醒包括视觉提醒、声音提醒或触觉提醒中的至少一种。

9.根据权利要求8所述的防遗忘提醒系统，其中，所述视觉提醒为通过设置于所述车辆内的显示装置示出带有所述遗留物品的信息。

10.根据权利要求1所述的防遗忘提醒系统，其中，还包括确认装置，在判断所述车辆内存在所述遗留物品时，可通过所述确认装置向所述控制装置发出指令，并设置下次检测到该遗留物品时是否发出提醒。

11.一种车辆，包括：根据权利要求1至10中任一项所述的防遗忘提醒系统。

12.一种用于车辆的防遗忘提醒方法，包括：

收集车辆内的图像信息；

根据收集到的所述图像信息提取至少一个物品信息；

计算所述至少一个物品信息与所述多个物品模型的相似度；并且，

根据所述相似度确定遗留物品并发出提醒。