CN113449605A - 一种基于多维度的路侧车辆违停判断方法及系统 - Google Patents

Abstract

本发明公开一种基于多维度的路侧车辆违停判断方法及系统，涉及智能路侧违停管理领域，包括：首先根据车辆的位置信息和违停区域的位置信息判断车辆是否为疑似违停目标，然后再根据违停区域监控图像获取车辆特征部件的状态信息、驾驶员的位置变化信息、以及车辆的轨迹信息，并基于驶入泊位的车辆特征部件的状态信息、驾驶员的位置变化信息、以及车辆的轨迹信息多个维度信息进行车辆是否停稳的判断，提升了车辆静止状态判定的可靠性和置信度，进而保证车辆在违停区域上停留时间的准确获取，从而提升了车辆违停判断的可靠性和置信度。同时由于本发明还采集了车主的行为信息以及车辆特征部件的状态信息作为违停的判断依据，丰富了违停判定的证据链。

Description

一种基于多维度的路侧车辆违停判断方法及系统

技术领域

本发明涉及智能路侧违停管理领域，特别涉及一种基于多维度的路侧车辆违停判断方法及系统。

背景技术

近年来，随着城市现代化进程的快速推进与我国经济的持续快速发展，人们的出行方式正在发生转变，私家车的数量逐年快速增长，城市停车位缺口超过50％。由于停车泊位严重不足，经常出现大量机动车无序滞留在道路两侧，造成交通拥堵的问题异常严重，极大地阻碍人们正常的交通出行。为了避免大量机动车无序滞留在道路两侧，特意划出若干违停区域作为车辆禁停区域，然而，由于违停区域空间不封闭、违停区域环境复杂，针对路侧违停事件的判断存在一些不足，但是路侧违停的判断又与后续的违停扣费管理息息相关，因此对路侧违停的判断的准确性、可靠性、置信度要求较为苛刻，如果路侧违停的判断存在不足，将会造成后续较大的计费管理问题。

目前路侧车辆违停的判断，通常是根据违停区域车辆图像获取的车辆行驶轨迹或者根据违停区域图像识别违停区域上是否有车辆驶入以及该车辆在违停区域上停留的时间判断该区域是否存在违停事件；而现有违停判定的起始时间是从违停区域车辆停稳时开始计时，而现有车辆是否停稳只是单纯依据车辆轨迹进行判定的；然而由于路侧周围环境较为复杂，采集的车辆图像会受到周围行驶的车辆、行人、非机动车的遮挡干扰，此时采集的违停区域图像中位于该违停区域上的车辆目标图像所占的面积比例较小，同时违停区域附近还一直存在其他运动目标的运动干扰和光影变化干扰，例如违停区域附近经常有行人、电动车、其他车辆等运动目标不停在违停附近区域移动，泊位周围的树叶、树枝等绿植不停运动使得违停区域光影不停变化，导致基于图像的车辆目标锁定跟踪和车辆轨迹获取的干扰因素较多，车辆目标锁定和车辆轨迹获取的准确度和可靠性难以保证，此时如果单纯依据车辆轨迹进行车辆是否停稳的判定，会导致车辆停稳判定的可靠性和置信度不足，进而导致车辆违停时间的计算出现偏差，从而导致车辆违停判断的可靠性和置信度不足。

发明内容

为解决上述技术问题，本发明提供一种基于多维度的路侧车辆违停判断方法及系统，可以解决现有车辆违停判断的可靠性和置信度不足的问题。

为实现上述目的，一方面，本发明一种基于多维度的路侧车辆违停判断方法，所述方法包括：

获取违停区域监控图像；

根据违停区域监控图像获取违停区域监控图像中车辆的位置信息；

根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标；

若是，则根据违停区域监控图像获取所述车辆特征部件的状态信息、所述车辆对应的驾驶员的位置变化信息、以及所述车辆的轨迹信息；

根据所述车辆特征部件的状态信息、和/或所述驾驶员的位置变化信息、和/或所述车辆的轨迹信息确定所述车辆在所述违停区域上是否为静止状态；

若是，则获取所述车辆在所述违停区域上处于静止状态的时间；

若所述车辆在所述违停区域上处于静止状态的时间大于或等于预设违停时长，则确认所述车辆为违停车辆。

进一步地，所述根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标的步骤包括：

若根据所述车辆的坐标信息和违停区域的坐标信息判断所述车辆部分或者全部位于所述违停区域内，则确认所述车辆是为疑似违停目标。

进一步地，所述根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标的步骤之前，所述方法还包括：

从所述违停区域监控图像中识别颜色信息和/或图形符号与预设条件匹配的区域作为违停区域并获取所述违停区域的位置信息。

进一步地，所述根据违停区域监控图像获取所述车辆对应的驾驶员的位置变化信息的步骤包括：

从所述违停区域监控图像中识别提取所述驾驶员目标区域图像，并根据驾驶员目标区域图像获取所述驾驶员的位置变化信息；

所述根据所述驾驶员的位置变化信息确定所述车辆是否为静止状态的步骤包括：

若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外时，则确定所述车辆为静止状态。

进一步地，所述根据所述驾驶员的位置变化信息和所述车辆的轨迹信息确定所述车辆是否为静止状态的步骤包括：若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外，且根据所述车辆图像确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态。

进一步地，所述根据违停区域监控图像获取所述车辆特征部件的状态信息的步骤包括：

当所述车辆特征部件为车门时，从所述违停区域监控图像中识别提取所述车辆目标区域图像，并根据车辆目标区域图像检测所述车辆车门是否存在开启过程和/或开启状态；

所述根据所述车辆特征部件的状态信息确定所述车辆是否为静止状态的步骤包括：

若车门存在开启过程和/或开启状态，则确定所述车辆为静止状态。

进一步地，所述根据违停区域监控图像获取所述车辆特征部件的状态信息的步骤包括：

当所述车辆特征部件为反光镜时，从所述违停区域监控图像中识别提取所述车辆目标区域图像，并根据车辆目标区域图像检测所述车辆反光镜是否处于闭合过程和/或闭合状态；

所述根据所述车辆特征部件的状态信息确定所述车辆是否为静止状态的步骤包括：

若所述车辆反光镜处于闭合过程和/或闭合状态，则确定所述车辆为静止状态。

进一步地，所述根据所述车辆特征部件的状态信息和所述车辆的轨迹信息确定所述车辆是否为静止状态的步骤包括：

当所述车辆特征部件为车门时，若根据所述车辆目标区域图像识别到所述车门存在开启过程和/或开启状态，并且确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态；或者

当所述车辆特征部件为反光镜时，若根据所述车辆目标区域图像识别到所述反光镜处于闭合过程和/或闭合状态且确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态。

进一步地，所述根据所述车辆特征部件的状态信息、和/或所述驾驶员的位置变化信息、和/或所述车辆的轨迹信息确定所述车辆是否为静止状态的步骤包括：

若识别到所述车辆特征部件的状态信息满足预设条件并且所述车辆在所述违停区域未发生位置变化并且识别到所述驾驶员从所述车辆内位移到所述车辆外时，则确定所述车辆为静止状态。

另一方面，本发明提供一种基于多维度的路侧车辆违停判断系统，所述系统包括：获取模块、判断模块、确定模块；

获取模块，用于获取违停区域监控图像；

所述获取模块，还用于根据违停区域监控图像获取违停区域监控图像中车辆的位置信息；

判断模块，用于根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标；

所述获取模块，还用于若是，则根据违停区域监控图像获取所述车辆特征部件的状态信息、所述车辆对应的驾驶员的位置变化信息、以及所述车辆的轨迹信息；

所述确定模块，用于根据所述车辆特征部件的状态信息、和/或所述驾驶员的位置变化信息、和/或所述车辆的轨迹信息确定所述车辆在所述违停区域上是否为静止状态；

所述获取模块，还用于若是，则获取所述车辆在所述违停区域上处于静止状态的时间；

所述确定模块，还用于若所述车辆在所述违停区域上处于静止状态的时间大于或等于预设违停时长，则确认所述车辆为违停车辆。

进一步地，所述判断模块，具体用于若根据所述车辆的坐标信息和违停区域的坐标信息判断所述车辆部分或者全部位于所述违停区域内，则确认所述车辆是为疑似违停目标。

进一步地，所述获取模块，还用于从所述违停区域监控图像中识别颜色信息和/或图形符号与预设条件匹配的区域作为违停区域并获取所述违停区域的位置信息。

进一步地，所述获取模块，具体用于从所述违停区域监控图像中识别提取所述驾驶员目标区域图像，并根据驾驶员目标区域图像获取所述驾驶员的位置变化信息；

所述确定模块，具体用于若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外时，则确定所述车辆为静止状态。

进一步地，所述确定模块，具体用于若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外，且根据所述车辆图像确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态。

进一步地，所述获取模块，用于当所述车辆特征部件为车门时，从所述违停区域监控图像中识别提取所述车辆目标区域图像，并根据车辆目标区域图像检测所述车辆车门是否存在开启过程和/或开启状态；

所述确定模块，具体还用于若车门存在开启过程和/或开启状态，则确定所述车辆为静止状态。

进一步地，所述获取模块，具体还用于当所述车辆特征部件为反光镜时，从所述违停区域监控图像中识别提取所述车辆目标区域图像，并根据车辆目标区域图像检测所述车辆反光镜是否处于闭合过程和/或闭合状态；

所述确定模块，具体还用于若所述车辆反光镜处于闭合过程和/或闭合状态，则确定所述车辆为静止状态。

进一步地，所述确定模块，具体还用于当所述车辆特征部件为车门时，若根据所述车辆目标区域图像识别到所述车门存在开启过程和/或开启状态，并且确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态；或者

当所述车辆特征部件为反光镜时，若根据所述车辆目标区域图像识别到所述反光镜处于闭合过程和/或闭合状态且确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态。

进一步地，所述确定模块，具体还用于若识别到所述车辆特征部件的状态信息满足预设条件并且所述车辆在所述违停区域未发生位置变化并且识别到所述驾驶员从所述车辆内位移到所述车辆外时，则确定所述车辆为静止状态。

本发明提供的一种基于多维度的路侧车辆违停判断方法及系统，首先根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标，然后再根据违停区域监控图像获取车辆特征部件的状态信息、驾驶员的位置变化信息、以及所述车辆的轨迹信息，并基于驶入泊位的车辆特征部件的状态信息、驾驶员的位置变化信息、以及所述车辆的轨迹信息多个维度信息进行车辆是否停稳的判断和车辆停稳时长的获取，提升了车辆静止状态判定的可靠性和置信度，进而保证车辆在违停区域上停留时间的准确获取，从而提升了车辆违停判断的可靠性和置信度，同时由于本发明不光获取车辆目标的行驶情况，还采集了车主的行为信息以及车辆特征部件的状态信息作为违停的判断依据，从而进一步丰富了违停判定的证据链。

附图说明

图1是本发明提供的一种基于多维度的路侧车辆违停判断方法的流程图一；

图2是本发明提供的一种基于多维度的路侧车辆违停判断系统的结构示意图；

图3是本发明提供的一种基于多维度的路侧车辆违停判断方法的流程图二；

图4是本发明提供的一种基于多维度的路侧车辆违停判断方法的流程图三；

图5是本发明提供的一种基于多维度的路侧车辆违停判断方法的流程图四；

图6是本发明提供的一种基于多维度的路侧车辆违停判断方法的流程图五。

具体实施方式

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

如图1所示，本发明实施例提供的一种基于多维度的路侧车辆违停判断方法，包括如下步骤：

101、获取违停区域监控图像。

其中，所述违停区域监控图像可以通过一个或多个摄像机进行采集，所述违停区域监控图像可以为违停区域及扩展至违停区域周围一定区域的图像。

102、根据违停区域监控图像获取违停区域监控图像中车辆的位置信息。

对于本发明实施例，具体可以通过预置车辆跟踪算法对违停区域监控图像中的车辆目标进行跟踪得到车辆行驶轨迹，根据车辆行驶轨迹判断车辆部分或者完全进入违停区域。

103、根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标。

对于本发明实施例，步骤103具体可以包括：若根据所述车辆的坐标信息和违停区域的坐标信息判断所述车辆部分或者全部位于所述违停区域内，则确认所述车辆是为疑似违停目标。其中，车辆的坐标信息和违停区域的坐标信息与监控区域图像的像素信息相匹配，因此通过像素信息可以映射出来相应的位置坐标信息。

对于本发明实施例，步骤103还可以包括：从所述违停区域监控图像中识别颜色信息和/或图形符号与预设条件匹配的区域作为违停区域并获取所述违停区域的位置信息。例如，通常违停区域会用黄色实线在地面上进行喷涂出来，并且会用差子、网格等图形进行标识，同时也会在对应的路侧树立禁停的指示牌，因此当从违停区域监控图像中识别到上述相关颜色特征或者图像符号特征时，便可识别出来相应区域为违停区域。

104、若是，则根据违停区域监控图像获取所述车辆特征部件的状态信息、所述车辆对应的驾驶员的位置变化信息、以及所述车辆的轨迹信息

对于本发明实施例，车辆特征部件可以为车辆的车门、车辆的反光镜等能够明确反映车辆停止特征的车辆部件。具体地，当所述车辆特征部件为车门时，所述根据违停区域监控图像获取所述车辆特征部件的状态信息的步骤包括：从所述违停区域监控图像中识别提取所述车辆目标区域图像，并根据车辆目标区域图像检测所述车辆车门是否存在开启过程和/或开启状态。

其中，车门状态获取方法具体可以包括：获取若干帧连续的车辆目标区域图像，将若干帧车辆目标区域图像中相邻车辆目标区域图像进行帧差处理，得到差帧图像序列，其中，差帧图像序列包括多帧连续的差帧图像。差帧图像序列体现了车门在动作时的像素级变化，若差帧图像序列中的差帧图像中像素级变化较大，则表示车辆的车门状态存在变化；然后提取多帧连续的差帧图像的车门特征；基于获取的多帧连续的差帧图像，将含有时序信息的多帧连续差帧图像输入卷积神经网络中，提取多帧连续的差帧图像的车门特征；最后基于获取的多帧连续的差帧图像的车门特征，识别车门状态。其中，识别装置可利用分类器识别车门状态。具体地，识别装置将获取的多帧连续的差帧图像的车门特征输入分类器中，以使分类器根据车门特征变化情况识别车辆车门状态。

对于本发明实施例，当所述车辆特征部件为反光镜时，所述根据违停区域监控图像获取所述车辆特征部件的状态信息的步骤包括：从所述违停区域监控图像中识别提取所述车辆目标区域图像，并根据车辆目标区域图像检测所述车辆反光镜是否处于闭合过程和/或闭合状态。

对于本发明实施例，所述根据违停区域监控图像获取所述车辆对应的驾驶员的位置变化信息的步骤包括：从所述违停区域监控图像中识别提取所述驾驶员目标区域图像，并根据驾驶员目标区域图像获取所述驾驶员的位置变化信息。其中，驾驶员的位置变化信息获取方法具体可以包括：利用人头点定位和关节点信息的单相机多目标跟踪方法，首先构建人头点定位深度学习网络模型；然后根据人头点定位深度学习网络，从所述违停区域监控图像中进行人头点定位，得到每帧图像中驾驶员头部的位置，同时，通过目标检测算法得到驾驶员目标区域包围框，利用人头点位置优化行驾驶员目标区域，得到最终驾驶员目标区域结果；根据驾驶员目标区域，提取驾驶员表观特征和关节点信息；最后根据监视员的表观特征和关节点信息，对驾驶员进行轨迹关联，获取驾驶员轨迹信息。

105、根据所述车辆特征部件的状态信息、和/或所述驾驶员的位置变化信息、和/或所述车辆的轨迹信息确定所述车辆在所述违停区域上是否为静止状态。

对于本发明实施例，所述根据所述车辆特征部件的状态信息确定所述车辆在所述违停区域上是否为静止状态的步骤包括：如图3所示，105a、若车门存在开启过程和/或开启状态，则确定车辆在所述违停区域上为静止状态；或者105b、若所述车辆反光镜处于闭合过程和/或闭合状态，则确定车辆在所述违停区域上为静止状态。此处需要说明的是，当车门从关闭到开启再倒关闭时，可以明确反映驾驶员下车关闭车辆的过程，说明此时车辆必然处于静止状态；同理，当车辆的反光镜从开启变为闭合状态时，也是车辆关闭的一个明显特征，说明此时车辆必然处于静止状态。

对于本发明实施例，所述根据所述车辆特征部件的状态信息和所述车辆在所述泊位上的停留时间确定车辆在所述违停区域上是否为静止状态的步骤包括：如图4所示，105c、当所述车辆特征部件为车门时，若根据所述车辆目标区域图像识别到所述车门存在开启过程和/或开启状态，并且确认所述车辆在所述违停区域未发生位置变化，则确定车辆在所述违停区域上为静止状态；或者105d、当所述车辆特征部件为反光镜时，若根据所述车辆目标区域图像识别到所述反光镜处于闭合过程和/或闭合状态且所述车辆在所述违停区域未发生位置变化，则确定车辆在所述违停区域上为静止状态。其中，所述预设静止时长可以相应的设置的较短一些，如10s、15s、30s等，由于结合了车辆特征部件的状态信息进行车辆在所述违停区域上为静止状态的判断，与单一根据停车时长进行车辆在所述违停区域上为静止状态的判断相比，可以进一步提升车辆静止状态的判断的准确率。

对于本发明实施例，所述根据所述驾驶员的位置变化信息确定车辆在所述违停区域上是否为静止状态的步骤包括：如图5所示，105e、若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外时，则确定车辆在所述违停区域上为静止状态。需要说明的是，驾驶员从所述车辆内移动到所述车辆外时，可以明确反映驾驶员下车关闭车辆的过程，说明此时车辆必然处于静止关闭状态。

对于本发明实施例，所述根据所述驾驶员的位置变化信息和所述车辆在所述泊位上的停留时间确定车辆在所述违停区域上是否为静止状态的步骤包括：如图5所示，105f、若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外，且根据所述车辆图像确认所述车辆在所述违停区域未发生位置变化，则确定车辆在所述违停区域上为静止状态。其中，所述预设静止时长可以相应的设置的较短一些，如10s、15s、30s等，由于结合了驾驶员的位置变化信息进行判断，与单一根据停车时长进行判断相比，可以进一步提升车辆在所述违停区域上为静止状态判断的准确率。

对于本发明实施例，还可以结合车辆特征部件的状态信息、驾驶员的位置变化信息、车辆在所述泊位上的停留时间三个维度确定车辆在所述违停区域上是否为静止状态，具体包括：如图6所示，105g、若识别到所述车辆特征部件的状态信息满足预设条件并且所述车辆在所述违停区域未发生位置变化并且识别到所述驾驶员从所述车辆内位移到所述车辆外时，则确定车辆在所述违停区域上为静止状态。由于结合了驾驶员的位置变化信息以及车辆特征部件的状态信息进行判断，与单一根据停车时长进行车辆判断相比，可以进一步提升车辆在所述违停区域上是否为静止状态判断的准确率。其中，预设条件可以为车门是否存在开关变化、车辆反光镜是否存在张开闭合变化等，本发明实施例不做限定。

106、若是，则获取所述车辆在所述违停区域上处于静止状态的时间。

107、若所述车辆在所述违停区域上处于静止状态的时间大于或等于预设违停时长，则确认所述车辆为违停车辆。

其中，所述预设违停时长通常设置为15分钟、20分钟等，本发明实施例不做限定。

本发明提供的一种基于多维度的路侧车辆违停判断方法，首先根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标，然后再根据违停区域监控图像获取车辆特征部件的状态信息、驾驶员的位置变化信息、以及所述车辆的轨迹信息，并基于驶入泊位的车辆特征部件的状态信息、驾驶员的位置变化信息、以及所述车辆的轨迹信息多个维度信息进行车辆是否停稳的判断和车辆停稳时长的获取，提升了车辆静止状态判定的可靠性和置信度，进而保证车辆在违停区域上停留时间的准确获取，从而提升了车辆违停判断的可靠性和置信度，同时由于本发明不光获取车辆目标的行驶情况，还采集了车主的行为信息以及车辆特征部件的状态信息作为违停的判断依据，从而进一步丰富了违停判定的证据链。

为实现本发明实施例提供的方法，本发明实施例提供一种基于多维度的路侧车辆违停判断系统，如图2所示，该系统包括：获取模块21、判断模块22、确定模块23。

获取模块21，可以用于获取违停区域监控图像。

其中，所述违停区域监控图像可以通过一个或多个摄像机进行采集，所述泊位区域图像可以为泊位及扩展至泊位周围一定区域的图像。

所述获取模块21，还用于根据违停区域监控图像获取违停区域监控图像中车辆的位置信息。

判断模块22，可以用于根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标。

对于本发明实施例，具体可以通过预置车辆跟踪算法对违停区域监控图像中的车辆目标进行跟踪得到车辆行驶轨迹，根据车辆行驶轨迹判断车辆是否驶入违停区域。

所述获取模块21，还用于若是，则根据违停区域监控图像获取所述车辆特征部件的状态信息、所述车辆对应的驾驶员的位置变化信息、以及所述车辆的轨迹信息。

对于本发明实施例，车辆特征部件可以为车辆的车门、车辆的反光镜等能够明确反映车辆停止特征的车辆部件。

确定模块23，可以用于根据所述车辆特征部件的状态信息、和/或所述驾驶员的位置变化信息、和/或所述车辆的轨迹信息确定所述车辆在所述违停区域上是否为静止状态。

所述获取模块21，还用于若是，则获取所述车辆在所述违停区域上处于静止状态的时间。

所述确定模块23，还用于若所述车辆在所述违停区域上处于静止状态的时间大于或等于预设违停时长，则确认所述车辆为违停车辆。

进一步地，所述判断模块22，具体用于若根据所述车辆的坐标信息和违停区域的坐标信息判断所述车辆部分或者全部位于所述违停区域内，则确认所述车辆是为疑似违停目标。

进一步地，所述获取模块21，还用于从所述违停区域监控图像中识别颜色信息和/或图形符号与预设条件匹配的区域作为违停区域并获取所述违停区域的位置信息。

进一步地，所述获取模块21，具体用于从所述违停区域监控图像中识别提取所述驾驶员目标区域图像，并根据驾驶员目标区域图像获取所述驾驶员的位置变化信息；所述确定模块23，具体用于若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外时，则确定所述车辆为静止状态。

进一步地，所述获取模块21，具体还用于当所述车辆特征部件为反光镜时，从所述违停区域监控图像中识别提取所述车辆目标区域图像，并根据车辆目标区域图像检测所述车辆反光镜是否处于闭合过程和/或闭合状态；所述确定模块23，具体还用于若所述车辆反光镜处于闭合过程和/或闭合状态，则确定所述车辆为静止状态。述车辆反光镜处于闭合过程和/或闭合状态，则确定所述泊位存在入场事件。

此处需要说明的是，当车门从关闭到开启再倒关闭时，可以明确反映驾驶员下车关闭车辆的过程，说明此时车辆必然处于静止状态；同理，当车辆的反光镜从开启变为闭合状态时，也是车辆关闭的一个明显特征，说明此时车辆必然处于静止状态。

进一步地，所述确定模块23，具体还用于具体还用于当所述车辆特征部件为车门时，若根据所述车辆目标区域图像识别到所述车门存在开启过程和/或开启状态，并且确认所述车辆未发生位置变化，则确定所述车辆为静止状态；或者当所述车辆特征部件为反光镜时，若根据所述车辆目标区域图像识别到所述反光镜处于闭合过程和/或闭合状态且确认所述车辆未发生位置变化，则确定所述车辆为静止状态。

其中，所述预设静止时长可以相应的设置的较短一些，如10s、15s、30s等，由于结合了车辆特征部件的状态信息进行车辆静止状态的判断，与单一根据车辆轨迹进行车辆入场事件判断相比，可以进一步提升车辆违停判断的准确率。

进一步地，所述获取模块21，具体用于从所述违停区域监控图像中识别提取所述驾驶员目标区域图像，并根据驾驶员目标区域图像获取所述驾驶员的位置变化信息；所述确定模块23，具体用于若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外时，则确定所述车辆为静止状态。需要说明的是，驾驶员从所述车辆内移动到所述车辆外时，可以明确反映驾驶员下车关闭车辆的过程，说明此时车辆必然处于静止关闭状态。

进一步地，所述确定模块23，具体用于若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外，且根据所述车辆图像确认所述车辆位置未发生变化，则确定所述车辆为静止状态。

其中，所述预设静止时长可以相应的设置的较短一些，如10s、15s、30s等。

进一步地，所述确定模块23，具体还用于若识别到所述车辆特征部件的状态信息满足预设条件并且所述车辆未发生位置变化并且识别到所述驾驶员从所述车辆内位移到所述车辆外时，则确定所述车辆为静止状态。由于结合了驾驶员的位置变化信息以及车辆特征部件的状态信息进行车辆是否静止的判断，与单一根据车辆轨迹信息进行车辆是否静止判断相比，可以进一步车辆是否静止判断的准确率。其中，预设条件可以为车门是否存在开关变化、车辆反光镜是否存在张开闭合变化等，本发明实施例不做限定。

本发明提供的一种基于多维度的路侧车辆违停判断系统，首先根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标，然后再根据违停区域监控图像获取车辆特征部件的状态信息、驾驶员的位置变化信息、以及所述车辆的轨迹信息，并基于驶入泊位的车辆特征部件的状态信息、驾驶员的位置变化信息、以及所述车辆的轨迹信息多个维度信息进行车辆是否停稳的判断和车辆停稳时长的获取，提升了车辆静止状态判定的可靠性和置信度，进而保证车辆在违停区域上停留时间的准确获取，从而提升了车辆违停判断的可靠性和置信度，同时由于本发明不光获取车辆目标的行驶情况，还采集了车主的行为信息以及车辆特征部件的状态信息作为违停的判断依据，从而进一步丰富了违停判定的证据链。

应该明白，公开的过程中的步骤的特定顺序或层次是示例性方法的实例。基于设计偏好，应该理解，过程中的步骤的特定顺序或层次可以在不脱离本公开的保护范围的情况下得到重新安排。所附的方法权利要求以示例性的顺序给出了各种步骤的要素，并且不是要限于所述的特定顺序或层次。

在上述的详细描述中，各种特征一起组合在单个的实施方案中，以简化本公开。不应该将这种公开方法解释为反映了这样的意图，即，所要求保护的主题的实施方案需要比清楚地在每个权利要求中所陈述的特征更多的特征。相反，如所附的权利要求书所反映的那样，本发明处于比所公开的单个实施方案的全部特征少的状态。因此，所附的权利要求书特此清楚地被并入详细描述中，其中每项权利要求独自作为本发明单独的优选实施方案。

为使本领域内的任何技术人员能够实现或者使用本发明，上面对所公开实施例进行了描述。对于本领域技术人员来说；这些实施例的各种修改方式都是显而易见的，并且本文定义的一般原理也可以在不脱离本公开的精神和保护范围的基础上适用于其它实施例。因此，本公开并不限于本文给出的实施例，而是与本申请公开的原理和新颖性特征的最广范围相一致。

上文的描述包括一个或多个实施例的举例。当然，为了描述上述实施例而描述部件或方法的所有可能的结合是不可能的，但是本领域普通技术人员应该认识到，各个实施例可以做进一步的组合和排列。因此，本文中描述的实施例旨在涵盖落入所附权利要求书的保护范围内的所有这样的改变、修改和变型。此外，就说明书或权利要求书中使用的术语“包含”，该词的涵盖方式类似于术语“包括”，就如同“包括，”在权利要求中用作衔接词所解释的那样。此外，使用在权利要求书的说明书中的任何一个术语“或者”是要表示“非排它性的或者”。

本领域技术人员还可以了解到本发明实施例列出的各种说明性逻辑块(illustrative logical block)，单元，和步骤可以通过电子硬件、电脑软件，或两者的结合进行实现。为清楚展示硬件和软件的可替换性(interchangeability)，上述的各种说明性部件(illustrative components)，单元和步骤已经通用地描述了它们的功能。这样的功能是通过硬件还是软件来实现取决于特定的应用和整个系统的设计要求。本领域技术人员可以对于每种特定的应用，可以使用各种方法实现所述的功能，但这种实现不应被理解为超出本发明实施例保护的范围。

本发明实施例中所描述的各种说明性的逻辑块，或单元都可以通过通用处理器，数字信号处理器，专用集成电路(ASIC)，现场可编程门阵列或其它可编程逻辑装置，离散门或晶体管逻辑，离散硬件部件，或上述任何组合的设计来实现或操作所描述的功能。通用处理器可以为微处理器，可选地，该通用处理器也可以为任何传统的处理器、控制器、微控制器或状态机。处理器也可以通过计算装置的组合来实现，例如数字信号处理器和微处理器，多个微处理器，一个或多个微处理器联合一个数字信号处理器核，或任何其它类似的配置来实现。

本发明实施例中所描述的方法或算法的步骤可以直接嵌入硬件、处理器执行的软件模块、或者这两者的结合。软件模块可以存储于RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动磁盘、CD-ROM或本领域中其它任意形式的存储媒介中。示例性地，存储媒介可以与处理器连接，以使得处理器可以从存储媒介中读取信息，并可以向存储媒介存写信息。可选地，存储媒介还可以集成到处理器中。处理器和存储媒介可以设置于ASIC中，ASIC可以设置于用户终端中。可选地，处理器和存储媒介也可以设置于用户终端中的不同的部件中。

在一个或多个示例性的设计中，本发明实施例所描述的上述功能可以在硬件、软件、固件或这三者的任意组合来实现。如果在软件中实现，这些功能可以存储与电脑可读的媒介上，或以一个或多个指令或代码形式传输于电脑可读的媒介上。电脑可读媒介包括电脑存储媒介和便于使得让电脑程序从一个地方转移到其它地方的通信媒介。存储媒介可以是任何通用或特殊电脑可以接入访问的可用媒体。例如，这样的电脑可读媒体可以包括但不限于RAM、ROM、EEPROM、CD-ROM或其它光盘存储、磁盘存储或其它磁性存储装置，或其它任何可以用于承载或存储以指令或数据结构和其它可被通用或特殊电脑、或通用或特殊处理器读取形式的程序代码的媒介。此外，任何连接都可以被适当地定义为电脑可读媒介，例如，如果软件是从一个网站站点、服务器或其它远程资源通过一个同轴电缆、光纤电缆、双绞线、数字用户线(DSL)或以例如红外、无线和微波等无线方式传输的也被包含在所定义的电脑可读媒介中。所述的碟片(disk)和磁盘(disc)包括压缩磁盘、镭射盘、光盘、DVD、软盘和蓝光光盘，磁盘通常以磁性复制数据，而碟片通常以激光进行光学复制数据。上述的组合也可以包含在电脑可读媒介中。

以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。。

Claims (18)

1.一种基于多维度的路侧车辆违停判断方法，其特征在于，所述方法包括：

获取违停区域监控图像；

根据违停区域监控图像获取违停区域监控图像中车辆的位置信息；

根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标；

若是，则根据违停区域监控图像获取所述车辆特征部件的状态信息、所述车辆对应的驾驶员的位置变化信息、以及所述车辆的轨迹信息；

根据所述车辆特征部件的状态信息、和/或所述驾驶员的位置变化信息、和/或所述车辆的轨迹信息确定所述车辆在所述违停区域上是否为静止状态；

若是，则获取所述车辆在所述违停区域上处于静止状态的时间；

若所述车辆在所述违停区域上处于静止状态的时间大于或等于预设违停时长，则确认所述车辆为违停车辆。

2.根据权利要求1所述的一种基于多维度的路侧车辆违停判断方法，其特征在于，所述根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标的步骤包括：

若根据所述车辆的坐标信息和违停区域的坐标信息判断所述车辆部分或者全部位于所述违停区域内，则确认所述车辆是为疑似违停目标。

3.根据权利要求1或2所述的一种基于多维度的路侧车辆违停判断方法，其特征在于，所述根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标的步骤之前，所述方法还包括：

从所述违停区域监控图像中识别颜色信息和/或图形符号与预设条件匹配的区域作为违停区域并获取所述违停区域的位置信息。

4.根据权利要求1所述的一种基于多维度的路侧车辆违停判断方法，其特征在于，所述根据违停区域监控图像获取所述车辆对应的驾驶员的位置变化信息的步骤包括：

从所述违停区域监控图像中识别提取所述驾驶员目标区域图像，并根据驾驶员目标区域图像获取所述驾驶员的位置变化信息；

所述根据所述驾驶员的位置变化信息确定所述车辆是否为静止状态的步骤包括：

若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外时，则确定所述车辆为静止状态。

5.根据权利要求4所述的一种基于多维度的路侧车辆违停判断方法，其特征在于，所述根据所述驾驶员的位置变化信息和所述车辆的轨迹信息确定所述车辆是否为静止状态的步骤包括：

若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外，且根据所述车辆的轨迹信息确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态。

6.根据权利要求1所述的一种基于多维度的路侧车辆违停判断方法，其特征在于，所述根据违停区域监控图像获取所述车辆特征部件的状态信息的步骤包括：

当所述车辆特征部件为车门时，从所述违停区域监控图像中识别提取所述车辆目标区域图像，并根据车辆目标区域图像检测所述车辆车门是否存在开启过程和/或开启状态；

所述根据所述车辆特征部件的状态信息确定所述车辆是否为静止状态的步骤包括：

若车门存在开启过程和/或开启状态，则确定所述车辆为静止状态。

7.根据权利要求1所述的一种基于多维度的路侧车辆违停判断方法，其特征在于，所述根据违停区域监控图像获取所述车辆特征部件的状态信息的步骤包括：当所述车辆特征部件为反光镜时，从所述违停区域监控图像中识别提取所述车辆目标区域图像，并根据车辆目标区域图像检测所述车辆反光镜是否处于闭合过程和/或闭合状态；

所述根据所述车辆特征部件的状态信息确定所述车辆是否为静止状态的步骤包括：

若所述车辆反光镜处于闭合过程和/或闭合状态，则确定所述车辆为静止状态。

8.根据权利要求6或7所述的一种基于多维度的路侧车辆违停判断方法，其特征在于，所述根据所述车辆特征部件的状态信息和所述车辆的轨迹信息确定所述车辆是否为静止状态的步骤包括：

当所述车辆特征部件为车门时，若根据所述车辆目标区域图像识别到所述车门存在开启过程和/或开启状态，并且根据所述车辆的轨迹信息确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态；或者

当所述车辆特征部件为反光镜时，若根据所述车辆目标区域图像识别到所述反光镜处于闭合过程和/或闭合状态且根据所述车辆的轨迹信息确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态。

9.根据权利要求1所述的一种基于多维度的路侧车辆违停判断方法，其特征在于，所述根据所述车辆特征部件的状态信息、和/或所述驾驶员的位置变化信息、和/或所述车辆的轨迹信息确定所述车辆是否为静止状态的步骤包括：

若识别到所述车辆特征部件的状态信息满足预设条件并且所述车辆在所述违停区域未发生位置变化并且识别到所述驾驶员从所述车辆内位移到所述车辆外时，则确定所述车辆为静止状态。

10.一种基于多维度的路侧车辆违停判断系统，其特征在于，所述系统包括：获取模块、判断模块、确定模块；

获取模块，用于获取违停区域监控图像；

所述获取模块，还用于根据违停区域监控图像获取违停区域监控图像中车辆的位置信息；

判断模块，用于根据所述车辆的位置信息和违停区域的位置信息判断所述车辆是否为疑似违停目标；

所述获取模块，还用于若是，则根据违停区域监控图像获取所述车辆特征部件的状态信息、所述车辆对应的驾驶员的位置变化信息、以及所述车辆的轨迹信息；

所述确定模块，用于根据所述车辆特征部件的状态信息、和/或所述驾驶员的位置变化信息、和/或所述车辆的轨迹信息确定所述车辆在所述违停区域上是否为静止状态；

所述获取模块，还用于若是，则获取所述车辆在所述违停区域上处于静止状态的时间；

所述确定模块，还用于若所述车辆在所述违停区域上处于静止状态的时间大于或等于预设违停时长，则确认所述车辆为违停车辆。

11.根据权利要求10所述的一种基于多维度的路侧车辆违停判断系统，其特征在于，所述判断模块，具体用于若根据所述车辆的坐标信息和违停区域的坐标信息判断所述车辆部分或者全部位于所述违停区域内，则确认所述车辆是为疑似违停目标。

12.根据权利要求10或11所述的一种基于多维度的路侧车辆违停判断系统，其特征在于，所述获取模块，还用于从所述违停区域监控图像中识别颜色信息和/或图形符号与预设条件匹配的区域作为违停区域并获取所述违停区域的位置信息。

13.根据权利要求10所述的一种基于多维度的路侧车辆违停判断系统，其特征在于，所述获取模块，具体用于从所述违停区域监控图像中识别提取所述驾驶员目标区域图像，并根据驾驶员目标区域图像获取所述驾驶员的位置变化信息；

所述确定模块，具体用于若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外时，则确定所述车辆为静止状态。

14.根据权利要求10所述的一种基于多维度的路侧车辆违停判断系统，所述确定模块，具体用于若根据所述驾驶员的位置变化信息识别到所述驾驶员从所述车辆内移动到所述车辆外，且根据所述车辆的轨迹信息确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态。

15.根据权利要求10所述的一种基于多维度的路侧车辆违停判断系统，其特征在于，所述获取模块，用于当所述车辆特征部件为车门时，从所述违停区域监控图像中识别提取所述车辆目标区域图像，并根据车辆目标区域图像检测所述车辆车门是否存在开启过程和/或开启状态；

所述确定模块，具体还用于若车门存在开启过程和/或开启状态，则确定所述车辆为静止状态。

16.根据权利要求10所述的一种基于多维度的路侧车辆违停判断方法，其特征在于，所述获取模块，具体还用于当所述车辆特征部件为反光镜时，从所述违停区域监控图像中识别提取所述车辆目标区域图像，并根据车辆目标区域图像检测所述车辆反光镜是否处于闭合过程和/或闭合状态；

所述确定模块，具体还用于若所述车辆反光镜处于闭合过程和/或闭合状态，则确定所述车辆为静止状态。

17.根据权利要求15或16所述的一种基于多维度的路侧车辆违停判断方法，其特征在于，

所述确定模块，具体还用于当所述车辆特征部件为车门时，若根据所述车辆目标区域图像识别到所述车门存在开启过程和/或开启状态，并且根据所述车辆的轨迹信息确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态；或者

当所述车辆特征部件为反光镜时，若根据所述车辆目标区域图像识别到所述反光镜处于闭合过程和/或闭合状态且根据所述车辆的轨迹信息确认所述车辆在所述违停区域未发生位置变化，则确定所述车辆为静止状态。

18.根据权利要求10所述的一种基于多维度的路侧车辆违停判断方法，其特征在于，

所述确定模块，具体还用于若识别到所述车辆特征部件的状态信息满足预设条件并且所述车辆在所述违停区域未发生位置变化并且识别到所述驾驶员从所述车辆内位移到所述车辆外时，则确定所述车辆为静止状态。

Images