CN111767851A - 突发事件的监控方法、装置、电子设备和介质 - Google Patents

突发事件的监控方法、装置、电子设备和介质 Download PDF

Info

Publication number
CN111767851A
CN111767851A CN202010607410.8A CN202010607410A CN111767851A CN 111767851 A CN111767851 A CN 111767851A CN 202010607410 A CN202010607410 A CN 202010607410A CN 111767851 A CN111767851 A CN 111767851A
Authority
CN
China
Prior art keywords
speed
acceleration
target monitoring
monitoring object
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010607410.8A
Other languages
English (en)
Inventor
刘博�
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apollo Intelligent Connectivity Beijing Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN202010607410.8A priority Critical patent/CN111767851A/zh
Publication of CN111767851A publication Critical patent/CN111767851A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/54Surveillance or monitoring of activities, e.g. for recognising suspicious objects of traffic, e.g. cars on the road, trains or boats
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/25Determination of region of interest [ROI] or a volume of interest [VOI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/44Event detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Alarm Systems (AREA)

Abstract

本公开提供了一种突发事件的监控方法,涉及智能交通领域,该方法包括:获取关于预设区域的监控视频,基于监控视频,确定预设区域内的目标监控对象的速度信息和加速度信息,基于加速度信息,确定目标监控对象的加速度是否满足过程条件,基于速度信息,确定目标监控对象的速度变化是否满足结果条件,以及在目标监控对象的加速度满足过程条件且目标监控对象的速度变化满足结果条件的情况下,确定目标监控对象发生突发事件,并向目标监控对象周围预设范围内的其他对象发送预警信息。

Description

突发事件的监控方法、装置、电子设备和介质
技术领域
本公开涉及智能交通领域,更具体地,涉及一种突发事件的监控方法、装置、电子设备和计算机可读介质。
背景技术
随着车辆技术和电子技术的快速发展,自动驾驶车辆越来越多地出现在人们的生活中。自动驾驶车辆可以通过各种传感器获得车辆所在的交通场景的信息,并根据交通场景信息确定合适的自动驾驶策略,以实现车辆的自动驾驶。例如,自动驾驶车辆在行驶过程中,需要确定周围的车辆是否发生突发事件,例如,急刹事件或者急加速事件等,以及时执行相应的操作避免事故发生。
在相关技术中,自动驾驶车辆在行驶过程中会检测自身的减速度,在减速度大于阈值时,确定自动驾驶车辆正在执行急刹操作,进而将自身的位置上报至服务器。服务器在接收到自动驾驶车辆的位置时,可以向该自动驾驶车辆周围的其他车辆广播该急刹车辆的位置,以使其他车辆可以确定周围存在急刹车辆。
在实现本公开构思的过程中,发明人发现相关技术中至少存在如下问题:由急刹的自动驾驶车辆在自主上报自身的位置,再通过服务器通知其他车辆该急刹车辆的时延大,且使用覆盖率小。
发明内容
有鉴于此,本公开提供了一种突发事件的监控方法、装置、电子设备和计算机可读介质。
本公开的一个方面提供了一种突发事件的监控方法,包括:获取关于预设区域的监控视频,基于所述监控视频,确定所述预设区域内的目标监控对象的速度信息和加速度信息,基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件,基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,以及在所述目标监控对象的加速度满足过程条件且所述目标监控对象的速度变化满足结果条件的情况下,确定所述目标监控对象发生突发事件,并向所述目标监控对象周围预设范围内的其他对象发送预警信息。
根据本公开的实施例,所述监控视频包括多个视频帧,所述基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件,包括:获取所述目标监控对象在多个连续帧中分别对应的多个加速度,在所述多个加速度满足以下至少一个判断条件时,确定所述目标监控对象的加速度满足急刹过程条件:所述多个加速度的均值小于第一加速度阈值、所述多个加速度的方差小于第一方差阈值、所述多个连续帧中最后一帧所对应的加速度小于所述第一加速度阈值、以及所述多个加速度中小于所述第一加速度阈值的加速度的数量大于累计次数阈值。
根据本公开的实施例,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:获取所述目标监控对象在多个连续帧中分别对应的多个速度,在所述多个速度满足以下至少一个判断条件时,确定所述目标监控对象的速度变化满足急刹结果条件:所述多个速度中的最大速度与所述多个连续帧中最后一帧所对应的速度之间的比例大于第一比例阈值、以及所述多个连续帧中最后一帧所对应的速度小于第一速度阈值。
根据本公开的实施例,所述监控视频包括多个视频帧,所述基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件,包括:获取所述目标监控对象在多个连续帧中分别对应的多个加速度,在所述多个加速度满足以下至少一个判断条件时,确定所述目标监控对象的加速度满足急加速过程条件:所述多个加速度的均值大于第二加速度阈值、所述多个加速度的方差小于第二方差阈值、所述多个连续帧中最后一帧所对应的加速度大于所述第二加速度阈值、以及所述多个加速度中大于所述第二加速度阈值的加速度的数量大于累计次数阈值。
根据本公开的实施例,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:获取所述目标监控对象在多个连续帧中分别对应的多个速度,在所述多个速度满足以下至少一个判断条件时,确定所述目标监控对象的速度变化满足急加速结果条件:所述多个连续帧中最后一帧所对应的速度与所述多个速度中的最小速度之间的比例大于第二比例阈值、以及所述多个连续帧中最后一帧所对应的速度大于第二速度阈值。
根据本公开的实施例,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:获取多个速度集合,其中,所述多个速度集合中的每个速度集合均包含所述目标监控对象在多个连续帧中分别对应的多个速度,每个速度集合包括至少一个与其他速度集合不同的视频帧所对应的速度,在所述多个速度集合均表征所述目标监控对象的速度变化满足结果条件的情况下,确定所述目标监控对象的速度变化满足结果条件。
根据本公开的实施例,所述监控视频包括多个视频帧,用于确定所述目标监控对象的加速度是否满足过程条件的加速度信息对应第一视频帧集合,用于确定所述目标监控对象的速度变化满足结果条件的速度信息对应第二视频帧集合,所述确定所述目标监控对象发生突发事件,包括:在所述第一视频帧集合和所述第二视频帧集合包括至少部分相同的视频帧或者在所述第一视频帧集合和所述第二视频帧集合之间的视频帧少于间隔帧阈值的情况下,确定所述目标监控对象发生突发事件。
根据本公开的实施例,所述方法还包括:记录或更新所述目标监控对象与所述突发事件之间的关联关系。
根据本公开的实施例,所述目标监控对象包括:所述预设区域内处于运动状态的对象、或者所述预设区域内处于运动状态且运动速度大于速度阈值的对象、或者所述预设区域内处于道路车道线内的车辆。
根据本公开的实施例,所述获取关于预设区域的监控视频,包括:通过道路上设置的监控摄像头获取所述监控摄像头采集区域内的监控视频。
本公开的另一个方面提供了一种突发事件的监控装置,该监控装置包括获取模块、第一确定模块、第二确定模块、第三确定模块和预警模块。其中,获取模块用于获取关于预设区域的监控视频。第一确定模块用于基于所述监控视频,确定所述预设区域内的目标监控对象的速度信息和加速度信息。第二确定模块用于基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件。第三确定模块用于基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件。预警模块用于在所述目标监控对象的加速度满足过程条件且所述目标监控对象的速度变化满足结果条件的情况下,确定所述目标监控对象发生突发事件,并向所述目标监控对象周围预设范围内的其他对象发送预警信息。
本公开的另一方面提供了一种电子设备,包括:一个或多个处理器,存储装置,用于存储一个或多个程序,其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器执行如上所述的方法。
本公开的另一方面提供了一种计算机可读存储介质,存储有计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
本公开的另一方面提供了一种计算机程序,所述计算机程序包括计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
附图说明
通过以下参照附图对本公开实施例的描述,本公开的上述以及其他目的、特征和优点将更为清楚,在附图中:
图1示意性示出了根据本公开实施例的突发事件监控方法的应用场景;
图2示意性示出了根据本公开实施例的突发事件的监控方法的流程图;
图3A示意性示出了根据本公开实施例的确定速度信息和加速度信息的示意图;
图3B~3D示意性示出了根据本公开实施例的多种情况下的急刹事件的速度示意图;
图4示意性示出了根据本公开的实施例的突发事件监控装置的框图;以及
图5示意性示出了根据本公开实施例电子设备的框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。
在相关技术中,自动驾驶车辆在检测自身的减速度大于阈值时,确定车辆为急刹车辆,则可以向服务器上报自身的位置以及急刹事件,进而由服务器通知其他车辆该急刹车辆的位置。可以理解,急刹事件即为执行急刹操作。
通常自动驾驶车辆检测自身的减速度的方式可以包括:1)通过速度传感器检测自动驾驶车辆的速度,通过速度的变化确定减速度;2)通过自动驾驶车辆的定位,根据车辆的位置的变化确定减速度。其中,1)中确定减速度的方式需要在自动驾驶车辆的底盘上加装传感器,很多自动驾驶车辆上并未设置该传感器;2)中确定减速度的方式需要自动驾驶车辆实时定位,依赖于定位精度,在一些不存在定位信号的地点无法进行定位,进而导致无法获取自身的减速度。
另外,上述两种方式中,均是通过自动驾驶车辆主动上报急刹事件的方式,通过服务器转发不仅存在较大的时延。另外,当前并非所有的自动驾驶车辆上均设置车载单元(Onboard Unit,OBU),进而影响该种方式的普适性。可以理解,OBU设置在车上,可以路边架没路侧单元(Road Side Unit,RSU),相互之间通过微波进行通讯,该OBU表征自动驾驶车辆的身份。
有鉴于此,本公开提供了一种突发事件的监控方法,通过道路上设置的摄像头获取其采集区域内的监控视频,基于该监控视频,确定采集区域内的目标监控对象的速度信息和加速度信息。然后,基于加速度信息,确定目标监控对象的加速度是否满足过程条件,并基于速度信息,确定目标监控对象的速度变化是否满足结果条件。在目标监控对象的加速度满足过程条件且目标监控对象的速度变化满足结果条件的情况下,确定该目标监控对象发生突发事件,并向目标监控对象周围预设范围内的其他对象发送预警信息。可以理解,目前路上通常设置有大批量的摄像头,本公开提供的监控方法避免了自动驾驶车辆主动上报急刹事件引起的上述问题,减小了预警延迟问题,且普适性高。
图1示意性示出了根据本公开实施例的突发事件监控方法的应用场景100。
需要注意的是,图1所示仅为可以应用本公开实施例的应用场景的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
如图1所示,根据该实施例的应用场景100可以包括摄像头110和服务器120。服务器120可以和摄像头110通过网络进行交互,例如,可以通过各种连接类型的网络实现交互,例如有线、无线通信链路或者光纤电缆等等。
摄像头110例如可以是道路上安装的监控摄像头。摄像头110可以用于获取其采集范围内的监控视频。监控视频中例如可以包括监控对象,监控对象例如可以是自动驾驶车辆、非自动驾驶车辆、行人、非机动车等等。
服务器120可以是提供各种服务的服务器。例如,服务器120可以接收来自摄像头110采集的监控视频,对监控视频进行分析处理,并反馈处理结果。
需要说明的是,本公开实施例所提供的突发事件监控方法一般可以由服务器120执行。相应地,本公开实施例所提供的突发事件监控装置一般可以设置于服务器120中。
例如,摄像头110可以获取其采集范围的监控视频,并将监控视频上传给服务器120。服务器120可以基于获得的监控视频确定目标监控对象的加速度信息和速度信息,并根据加速度信息和速度信息确定目标监控对象是否发生突发事件。若发生,服务器120可以向目标监控对象周围预设范围内的其他对象发送预警信息,以使其他对象可以及时执行相应的操作避免事故发生。
应该理解,图1中的摄像头和服务器的数目仅仅是示意性的。根据实际需要,可以具有任意数目的摄像头和服务器。
图2示意性示出了根据本公开实施例的突发事件的监控方法的流程图。
如图2所示,该方法包括操作S201~S205。
在操作S201,获取关于预设区域的监控视频。
根据本公开实施例,可以通过道路上设置的监控摄像头获取监控摄像头采集区域内的监控视频。
在本公开实施例中,预设区域例如可以是监控摄像头的采集区域,或者也可以是监控摄像头采集区域内的感兴趣区域(Region Of Interest,简称ROI)。
根据本公开实施例,可以实时获取监控视频。例如,监控摄像头可以实时地采集道路的监控视频,并将采集的监控视频实时上传至服务器。监控视频中可以包括道路上行驶的车辆、路上行走的行人等。
在操作S202,基于监控视频,确定预设区域内的目标监控对象的速度信息和加速度信息。
根据本公开实施例,目标监控对象可以是预设区域内的所有对象,也可以是预设区域内的机动车辆。
在本公开一实施例中,目标监控对象例如可以是预设区域内处于运动状态的对象。例如,可以基于监控视频中的一个或几个视频帧来确定各对象的轮廓信息。例如,可以通过实例分割的方法获取视频帧中的每个对象的轮廓信息。例如,可以采用基于神经网络的分割方法,其中,分割的背景为对象之外的物体(例如,马路、天空等),分割的前景为各对象(例如,人、机动车、非机动车等)。然后,可以基于监控视频中的多个视频帧来确定视频帧中的运动区域和非运动区域。例如,可以通过背景建模的方法确定视频帧中的运动区域和非运动区域。例如,可以使用混合高斯模型或者Vibe(Visual Background Extractor)算法,其中,背景模型输出0值所对应的区域可以为非运动的背景区域,输出1值所对应的区域可以为运动的前景区域。以及,基于针对某一视频帧得到的各对象的轮廓信息和该视频帧中的运动区域和非运动区域,对于每一个对象,确定其轮廓内属于运动区域的部分是否超过阈值(例如,50%),如果超过,则将该对象确定为处于运动状态的目标监控对象。
在本公开另一实施例中,目标监控对象也可以是预设区域内处于运动状态且运动速度大于速度阈值的对象。可以理解,运动速度过低的对象几乎不会发生严重的急刹事件,并且在低速时,由于跟踪算法的惯性会导致其在低速时会产生一定的速度波动。有鉴于此,本公开实施例可以滤掉低速运动的对象,减少计算量,提高响应速度。
在本公开又一实施例中,目标监控对象还可以是预设区域内处于道路车道线内的车辆。例如,可以将行驶在机动车道上的机动车作为目标监控对象。
本公开实施例对目标监控对象不做限定,本领域技术人员可以根据实际需要进行设定。
根据本公开实施例,在确定了需要关注的目标监控对象之后,可以在监控视频中跟踪目标监控对象,以确定各目标监控对象的速度信息和加速度信息。
在本公开实施例中,可以基于监控视频,获取目标对象的位置变化信息,基于目标监控对象的位置变化信息,以及与位置变化信息对应的时长信息,确定目标监控对象的速度信息和加速度信息。例如,可以在图像中获取目标监控对象周围的一静止物体(例如,固定在道路上的监控摄像头等),以在监控视频中获取目标监控对象相对于该静止物体的相对位置的变化。
根据本公开实施例,还可以通过卡尔曼滤波器对各视频帧中的目标监控对象的位置进行滤波处理,以去除噪声影响。
在本公开实施例中,监控视频可以包括N个视频帧,可以获取目标监控对象在监控视频的第i个视频帧中的位置和第i-n个视频帧中的位置之间的位移信息,以及基于该位移信息,以及第i个视频帧和第i-n个视频帧之间的时间差值,确定目标监控对象关于第i个视频帧的速度信息和加速度信息,其中,N为大于1的整数,i为大于等于2且小于等于N的整数,n为大于1且小于i的整数。
例如,图3A示意性示出了根据本公开实施例的确定速度信息和加速度信息的示意图。
如图3A所示,监控视频可以包括多个视频帧。例如,可以获取当前帧第k帧至第k-j帧之间的监控视频,其中,k为大于等于2的整数,j为大于1且小于j的整数。监控摄像头例如可以实时获取监控视频,例如,每间隔预设时间获取一帧当前视频帧,并上传至服务器。
在本公开一实施例中,可以基于视频帧之间的位移信息和时间差值确定目标监控对象的速度信息。例如,可以通过对位移信息进行关于时间差值的一阶求导,得到目标监控对象的速度信息。例如,可以取相邻视频帧计算目标监控对象的速度信息。例如,可以获取目标监控对象在第k帧和第k-1帧之间的位移信息ΔSk,以及第k帧和第k-1帧之间的时间差值Δtk,基于ΔSk和Δtk确定关于第k帧的速度vk。或者,也可以取不相邻的视频帧计算目标监控对象的速度信息。例如,可以获取目标监控对象在第k帧和第k-2帧之间的位移信息(ΔSk+ΔSk-1),以及第k帧和第k-2帧之间的时间差值(Δtk+Δtk-1),基于(ΔSk+ΔSk-1)和(Δtk+Δtk-1)确定关于第k帧的速度vk
在本公开另一实施例中,可以基于视频帧之间的位移信息和时间差值确定目标监控对象的加速度信息。例如,可以通过对位移信息进行关于时间差值的二阶求导,得到目标监控对象的速度信息。例如,可以取相邻视频帧计算目标监控对象的加速度信息。例如,可以获取目标监控对象在第k帧和第k-1帧之间的位移信息ΔSk,以及第k帧和第k-1帧之间的时间差值Δtk,基于ΔSk和Δtk确定关于第k帧的速度ak。或者,也可以取不相邻的视频帧计算目标监控对象的加速度信息。例如,可以获取目标监控对象在第k帧和第k-2帧之间的位移信息(ΔSk+ΔSk-1),以及第k帧和第k-2帧之间的时间差值(Δtk+Δtk-1),基于(ΔSk+ΔSk-1)和(Δtk+Δtk-1)确定关于第k帧的速度ak
或者,也可以基于视频帧之间的速度变化信息和时间差值确定目标监控对象的加速度信息。例如,可以通过对速度变化信息进行关于时间差值的一阶求导,得到目标监控对象的加速度信息。例如,可以获取目标监控对象在第k帧和第k-1帧之间的速度变化信息(vk-vk-1),以及第k帧和第k-1帧之间的时间差值Δtk,基于(vk-vk-1)和Δtk确定关于第k帧的速度ak
在本公开实施例中,获取目标监控对象在监控视频的第i个视频帧中的位置和第i-n个视频帧中的位置之间的位移信息可以包括:获取目标监控对象在第i个视频帧和第i-n个视频中的像素坐标,基于像素坐标和世界坐标之间的转换关系,确定目标监控对象在世界坐标系下的位移信息。例如,如图3A所示,以先通过目标监控对象在第k帧和第k-1帧中的像素坐标,确定目标监控对象在第k帧和第k-1帧中分别对应的世界坐标,并基于目标监控对象在第k帧和第k-1帧中分别对应的世界坐标确定目标监控对象的在第k帧和第k-1帧之间的位移ΔSk
根据本公开实施例,可以根据实例分割得到的每个目标监控对象的轮廓信息,确定各目标监控对象的中心位置,该中心位置可以作为该目标监控对象在像素坐标中的位置或者在世界坐标中的位置。
在本公开实施例中,可以通过对位移信息进行关于时间差值的二阶求导,得到目标监控对象的加速度信息。例如,可以通过ΔS=a*Δt2来计算加速度。本公开实施例通过ΔS=a*Δt2来计算加速度,相比于通过速度计算加速度的方法而言,可以起到天然滤波的作用,可以过滤掉目标监控对象突然的前后抖动,同样的抖动在加速度上的表现更为平滑,并且加速度的计算量也会下降。
在操作S203,基于加速度信息,确定目标监控对象的加速度是否满足过程条件。
根据本公开实施例,过程条件例如可以包括对应于急刹事件的急刹过程条件,即,目标监控对象发生紧急制动操作时其加速度满足的急刹过程条件。过程条件还可以包括对应于急加速事件的急加速过程条件,即,目标监控对象发生突然加速操作时其加速度满足的急加速过程条件。可以理解,车辆急刹时,很容易出现后车追尾事件,或者当司机不熟练误判油门和刹车时,车辆紧急加速,也容易出现交通事故。有鉴于此,本公开实施例可以基于各目标监控对象的加速度信息,确定是否有目标监控对象的加速度满足突发事件的过程条件。
在本公开一实施例中,获取目标监控对象在多个连续帧中分别对应的多个加速度,在多个加速度满足以下至少一个判断条件时,确定目标监控对象的加速度满足急刹过程条件:多个加速度的均值小于第一加速度阈值、多个加速度的方差小于第一方差阈值、多个连续帧中最后一帧所对应的加速度小于第一加速度阈值和多个加速度中小于第一加速度阈值的加速度的数量大于累计次数阈值。
例如,如图3A所示,可以获取第k帧、第k-1帧、第k-2帧和第k-3帧对应的加速度ak、ak-1、ak-2和ak-3,本公开不限定多个加速度的数量,本领域技术人员可以根据实际判断需要进行设定。当ak、ak-1、ak-2和ak-3的均值小于第一加速度阈值(第一加速度阈值可以为负值,以确定该次事件为急刹事件)且方差小于第一方差阈值且ak也小于第一加速度阈值且ak、ak-1、ak-2和ak-3中小于第一加速度阈值的数量大于累计次数阈值(例如,加速度数量的50%),可以确定该目标监控对象发生急刹事件。
在本公开另一实施例中,获取目标监控对象在多个连续帧中分别对应的多个加速度,在多个加速度满足以下至少一个判断条件时,确定目标监控对象的加速度满足急加速过程条件:多个加速度的均值大于第二加速度阈值、多个加速度的方差小于第二方差阈值、多个连续帧中最后一帧所对应的加速度大于第二加速度阈值和多个加速度中大于第二加速度阈值的加速度的数量大于累计次数阈值。
例如,如图3A所示,可以获取第k帧、第k-1帧、第k-2帧和第k-3帧对应的加速度ak、ak-1、ak-2和ak-3,本公开不限定多个加速度的数量,本领域技术人员可以根据实际判断需要进行设定。当ak、ak-1、ak-2和ak-3的均值大于第二加速度阈值(第二加速度阈值可以为正值,以确定该次事件为突然加速事件)且方差小于第二方差阈值且ak也大于第二加速度阈值且ak、ak-1、ak-2和ak-3中大于第二加速度阈值的数量大于累计次数阈值(例如,加速度数量的50%),可以确定该目标监控对象发生突然加速事件。
可以理解,本实施例中的加速度阈值、方差阈值和累计次数阈值均可以为预先设置的,上述阈值可以通过经验、仿真实验等确定。
在本公开实施例中,可以针对车辆行驶的不同的场景,在获取车辆的加速度的准确性低的场景下,可以设置更为严格的突发事件的判断条件,进而能够提高获取车辆为急刹车辆的准确性。
根据本公开实施例,可以建立加速度向量,加速度向量的长度可以为固定长度。例如,加速度向量的长度可以为5,则该加速度向量中可以包括包含当前帧在内的连续5帧的视频帧所对应的加速度信息。当有新的视频帧进入时,可以将新视频帧对应的加速度加入到加速度向量的最后一位,并将加速度向量中的第一位剔除。例如,加速度向量可以是一个长度为5的先进先出队列,每当获取到新的视频帧,可以将该帧对应的加速度加入到队列中,并将队列中最早加入的加速度剔除。
例如,如图3A所示,加速度向量320的长度可以为5,加速度向量320中可以包括当前第k帧、第k-1帧、第k-2帧、第k-3帧和第k-4帧所对应的加速度{ak-4,ak-3,ak-2,ak-1,ak}。加速度向量320的初始值可以为{0,0,0,0,0},当得到第一个加速度信息时,可以更新加速度向量为{0,0,0,0,a1},当得到第二个加速度信息时,可以更新加速度向量为{0,0,0,a1,a2},以此类推。
本公开实施例可以在有新的加速度加入到加速度向量时,计算该加速度是否满足上述急刹或者急加速过程条件。例如,当前加速度向量为{ak-4,ak-3,ak-2,ak-1,ak},则可以计算ak是否满足急刹或者急加速过程条件。例如,可以通过ak、ak-1、ak-2和ak-3来确定ak是否满足急刹或者急加速过程条件。若满足,则将需报出突发事件数量累加1,其中,关于每个目标监控对象的需报出突发事件数量的初始值为0。即,在本公开实施例中,可以获取关于某目标监控对象的需报出突发事件数量的当前值,若当前值非零,则表示该目标监控对象存在需要上报的突发事件。
在操作S204,基于速度信息,确定目标监控对象的速度变化是否满足结果条件。
根据本公开实施例,结果条件例如可以包括对应于急刹事件的急刹结果条件,即,目标监控对象发生紧急制动操作时其速度满足的急刹结果条件。结果条件还可以包括对应于急加速事件的急加速结果条件,即,目标监控对象发生突然加速操作时其速度满足的急加速结果条件。
在本公开一实施例中,获取目标监控对象在多个连续帧中分别对应的多个速度,在多个速度满足以下至少一个判断条件时,确定目标监控对象的速度变化满足急刹结果条件:多个速度中的最大速度与多个连续帧中最后一帧所对应的速度之间的比例大于第一比例阈值以及多个连续帧中最后一帧所对应的速度小于第一速度阈值。
例如,如图3A所示,可以获取第k帧至第k-7帧对应的加速度vk、vk-1、vk-2、vk-3、vk-4、vk-5、vk-6、vk-7,本公开不限定多个速度的数量,本领域技术人员可以根据实际判断需要进行设定。当vk、vk-1、vk-2、vk-3、vk-4、vk-5、vk-6、vk-7的最大值与vk的比例大于第一比例阈值(第一比例阈值例如可以为大于1的数值,例如,可以是5)或者vk的值小于第一速度阈值(例如,2m/s),则可以认为速度vk满足急刹结果条件。
在本公开另一实施例中,获取目标监控对象在多个连续帧中分别对应的多个速度,在多个速度满足以下至少一个判断条件时,确定目标监控对象的速度变化满足急加速结果条件:多个连续帧中最后一帧所对应的速度与多个速度中的最小速度之间的比例大于第二比例阈值以及多个连续帧中最后一帧所对应的速度大于第二速度阈值。
例如,如图3A所示,可以获取第k帧至第k-7帧对应的加速度vk、vk-1、vk-2、vk-3、vk-4、vk-5、vk-6、vk-7,本公开不限定多个速度的数量,本领域技术人员可以根据实际判断需要进行设定。当vk与vk、vk-1、vk-2、vk-3、vk-4、vk-5、vk-6、vk-7中的最小值的比例大于第二比例阈值或者vk的值大于第二速度阈值(例如,150km/h),则可以认为速度vk满足急加速结果条件。
可以理解,本实施例中的速度阈值、和比例阈值均可以为预先设置的,上述阈值可以通过经验、仿真实验等确定。
在本公开实施例中,可以针对车辆行驶的不同的场景,在获取车辆的速度的准确性低的场景下,可以设置更为严格的是否满足结果条件的判断条件,进而能够提高获取车辆为急刹车辆的准确性。
例如,可以获取多个速度集合,多个速度集合中的每个速度集合均包含目标监控对象在多个连续帧中分别对应的多个速度,每个速度集合包括至少一个与其他速度集合不同的视频帧所对应的速度,在多个速度集合均表征目标监控对象的速度变化满足结果条件的情况下,确定目标监控对象的速度变化满足结果条件,从而可以降低误报的风险。
根据本公开实施例,可以建立速度向量,速度向量的长度可以为固定长度。例如,速度向量的长度可以为8,则该速度向量中可以包括包含当前帧在内的连续8帧的视频帧所对应的速度信息。当有新的视频帧进入时,可以将新视频帧对应的速度加入到速度向量的最后一位,并将速度向量中的第一位剔除。例如,速度向量可以是一个长度为8的先进先出队列,每当获取到新的视频帧,可以将该帧对应的速度加入到队列中,并将队列中最早加入的速度剔除。
例如,如图3A所示,速度向量310的长度可以为8,速度向量310中可以包括当前第k帧至第k-7帧8个连续视频帧所对应的速度{vk-7,vk-6,vk-5,vk-4,vk-3,vk-2,vk-1,vk}。速度向量310的初始值可以为{0,0,0,0,0,0,0,0},当得到第一个速度信息时,可以更新速度向量为{0,0,0,0,0,0,0,v1},当得到第二个速度信息时,可以更新速度向量为{0,0,0,0,0,0,v1,v2},以此类推。
本公开实施例中,还可以设置可报出突发事件记录向量,可报出突发事件记录向量的长度可以为固定长度。例如,可报出突发事件记录向量的长度可以为4,则该可报出突发事件记录向量中可以包括包含当前帧在内的连续4帧的视频帧所对应的速度变化是否满足结果条件的记录信息。当有新的视频帧进入时,可以将新视频帧对应的速度变化是否满足结果条件的记录信息加入到可报出突发事件记录向量的最后一位,并将可报出突发事件记录向量中的第一位剔除。
例如,如图3A所示,可报出突发事件记录向量330的长度可以为4,可报出突发事件记录向量330中可以为{False,True,True,True}。其中,False可以表示vk-3不满足结果条件,三个Ture可以分别表示vk-2,vk-1,vk均满足结果条件。可报出突发事件记录向量330的初始值可以为{False,False,False,False}。若可报出突发事件记录向量的所有值均为Ture,则可以确定目标监控对象的速度变化满足结果条件。
本公开实施例可以在有新的速度加入到速度向量时,可以计算该速度是否满足上述急刹或者急加速结果条件。例如,当当前帧的速度vk加入到速度向量{vk-7,vk-6,vk-5,vk-4,vk-3,vk-2,vk-1,vk},则可以计算vk是否满足急刹或者急加速结果条件,若满足则可以更新可报出突发事件记录向量,将Ture加入到可报出突发事件记录向量的最后一位,否则,将False加入到可报出突发事件记录向量的最后一位,并剔除可报出突发事件记录向量的第一位。在本公开实施例中,可以获取可报出突发事件记录向量,当可报出突发事件记录向量的所有值均为Ture时,则表示该目标监控对象存在可报出的突然事件,可以确定目标监控对象的速度变化满足结果条件。
在操作S205,在目标监控对象的加速度满足过程条件且目标监控对象的速度变化满足结果条件的情况下,确定目标监控对象发生突发事件,并向目标监控对象周围预设范围内的其他对象发送预警信息。
在本公开一实施例中,在目标监控对象的加速度满足急刹过程条件且目标监控对象的速度变化满足急刹结果条件的情况下(即,需报出突发事件数量的当前值非零,且可报出突发事件记录向量的所有值均为Ture),确定目标监控对象发生急刹事件,可以向目标监控对象周围预设范围内的其他对象发送关于该急刹事件的预警信息。
在本公开另一实施例中,在目标监控对象的加速度满足急加速过程条件且目标监控对象的速度变化满足急加速结果条件的情况下,确定目标监控对象发生急加速事件,可以向目标监控对象周围预设范围内的其他对象发送关于该急加速事件的预警信息。
根据本公开实施例,若确定目标监控对象发生突发事件,可以将该目标监控对象的位置发送给其周围的其他对象,以警示其他对象该目标监控对象在该位置处发生突发事件。
在本公开实施例中,若确定目标监控对象发生急刹事件,可以向该目标监控对象后方预设范围内的其他对象发送预警信息。若确定目标监控对象发生突然加速事件,可以像该目标监控对象前方预设范围内的其他对象发送预警信息。
根据本公开实施例,监控视频包括多个视频帧,用于确定目标监控对象的加速度是否满足过程条件的加速度信息对应第一视频帧集合,用于确定目标监控对象的速度变化满足结果条件的速度信息对应第二视频帧集合,确定所述目标监控对象发生突发事件,包括:在第一视频帧集合和第二视频帧集合包括至少部分相同的视频帧或者在第一视频帧集合和第二视频帧集合之间的视频帧少于间隔帧阈值的情况下,确定所述目标监控对象发生突发事件。
例如,如图3A所示,速度满足结果条件的速度向量310所对应的视频帧与加速度满足过程条件的加速度向量320所对应的视频帧应至少部分重叠或者之间间隔的视频帧少于10帧,从而可以确定满足结果条件的速度信息和满足过程条件的加速度信息为一次突发事件产生的信息。
根据本公开实施例,还可以记录突发事件与目标监控对象之间的对应关系。若本地已存储该目标监控对象的信息,则可以响应于确定该目标监控对象发生突发事件,将关于该目标监控对象信息的关联关系更新为此次突发事件。若本地未存储该目标监控对象的信息,则可以记录该目标监控对象的信息,并记录其与此次突发事件的关联关系。
可以理解,当目标监控对象距离摄像头距离过远时,算法对于目标监控对象的定位精度会增大,进而导致算出的速度、加速度误差变大,从而位置、速度在远处的不稳定会导致突发事件的误报。例如,在监控超速场景的过程中,处于超速状态的车辆的速度会很高,在这种情况下,同样是5%的速度波动,速度波动的绝对值会很大,进而出现一个高的加速度,容易造成误报。
有鉴于此,本公开实施例从突发事件全流程的角度出发,考虑突发事件的多种情况。例如,图3B~3D示意性示出了根据本公开实施例的多种情况下的急刹事件的速度示意图。其中,图3B示出了车辆在启动加速的过程中进行急刹的速度变化示意图。图3C示出了车辆在正常行驶的过程中进行急刹的速度变化示意图。图3D示出了车辆在进行了紧急制动之后又马上加速的速度变化示意图。
在如图3B和3C所示的情况下,车辆紧急制动之后以低速行驶一段时间,确定周围满足继续行车的条件之后再加速行驶,因此会有一段时间车辆的速度较低。
在如图3D所示的情况下,车辆在进行制动之后又马上加速,但是人的驾驶行为需要一定的反应时间,因此还是存在一定时间车辆行驶速度较低。
在本公开实施例的其他一些情况中,车辆本身处于较高的速度状态,经过制动之后速度大幅降低满足急刹的定义,但是却没有减速到0。针对这种情况,可以将当前帧的速度与前若干帧速度的均值进行比较,若连续若干帧小于前若干帧速度的均值,则检测出了在紧急制动后又马上加速的中间状态。
针对上述各种情况下的突发事件,本公开全面考虑目标监控对象的速度信息和加速度信息,只有速度信息和加速度信息均满足条件的情况下,才上报突发事件,降低了误报的可能性,提高预警准确率。
本公开实施例通过判断速度是否降到了阈值之下以及速度是否下降了多倍来判断速度变化信息是否满足结果条件,充分考虑了上述各种可能的突发情况,进一步提高预警的准确率,尽可能减少误报或者漏报现象。
本公开实施例可以根据监控视频中每个视频帧中目标监控对象的位置,确定目标监控对象的位置变化,进而根据目标监控对象的位置变化和目标监控对象的行驶时长确定目标监控对象的速度信息和加速度信息,并响应于确定目标监控对象发生突发事件,向当前处于目标监控对象周围预设范围内的其他对象发送预警信息。可以理解,目前路上通常设置有大批量的摄像头,本公开提供的监控方法避免了自动驾驶车辆主动上报急刹事件引起的上述问题,减小了预警延迟问题,且普适性高。
图4示意性示出了根据本公开的实施例的突发事件监控装置400的框图。
如图4所示,装置400包括获取模块410、第一确定模块420、第二确定模块430、第三确定模块440和预警模块450。
获取模块410用于获取关于预设区域的监控视频。根据本公开实施例,获取模块410例如可以执行上文参考图2描述的操作S201,在此不再赘述。
第一确定模块420用于基于监控视频,确定预设区域内的目标监控对象的速度信息和加速度信息。根据本公开实施例,第一确定模块420例如可以执行上文参考图2描述的操作S202,在此不再赘述。
第二确定模块430用于基于加速度信息,确定目标监控对象的加速度是否满足过程条件。根据本公开实施例,第二确定模块430例如可以执行上文参考图2描述的操作S203,在此不再赘述。
第三确定模块440用于基于速度信息,确定目标监控对象的速度变化是否满足结果条件。根据本公开实施例,第三确定模块440例如可以执行上文参考图2描述的操作S204,在此不再赘述。
预警模块450用于在目标监控对象的加速度满足过程条件且目标监控对象的速度变化满足结果条件的情况下,确定目标监控对象发生突发事件,并向目标监控对象周围预设范围内的其他对象发送预警信息。根据本公开实施例,预警模块450例如可以执行上文参考图2描述的操作S205,在此不再赘述。
根据本公开的实施例,监控视频包括多个视频帧,所述基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件,包括:获取所述目标监控对象在多个连续帧中分别对应的多个加速度,在所述多个加速度满足以下至少一个判断条件时,确定所述目标监控对象的加速度满足急刹过程条件:所述多个加速度的均值小于第一加速度阈值、所述多个加速度的方差小于第一方差阈值、所述多个连续帧中最后一帧所对应的加速度小于所述第一加速度阈值、以及所述多个加速度中小于所述第一加速度阈值的加速度的数量大于累计次数阈值。
根据本公开的实施例,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:获取所述目标监控对象在多个连续帧中分别对应的多个速度,在所述多个速度满足以下至少一个判断条件时,确定所述目标监控对象的速度变化满足急刹结果条件:所述多个速度中的最大速度与所述多个连续帧中最后一帧所对应的速度之间的比例大于第一比例阈值、以及所述多个连续帧中最后一帧所对应的速度小于第一速度阈值。
根据本公开的实施例,所述监控视频包括多个视频帧,所述基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件,包括:获取所述目标监控对象在多个连续帧中分别对应的多个加速度,在所述多个加速度满足以下至少一个判断条件时,确定所述目标监控对象的加速度满足急加速过程条件:所述多个加速度的均值大于第二加速度阈值、所述多个加速度的方差小于第二方差阈值、所述多个连续帧中最后一帧所对应的加速度大于所述第二加速度阈值、以及所述多个加速度中大于所述第二加速度阈值的加速度的数量大于累计次数阈值。
根据本公开的实施例,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:获取所述目标监控对象在多个连续帧中分别对应的多个速度,在所述多个速度满足以下至少一个判断条件时,确定所述目标监控对象的速度变化满足急加速结果条件:所述多个连续帧中最后一帧所对应的速度与所述多个速度中的最小速度之间的比例大于第二比例阈值、以及所述多个连续帧中最后一帧所对应的速度大于第二速度阈值。
根据本公开的实施例,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:获取多个速度集合,其中,所述多个速度集合中的每个速度集合均包含所述目标监控对象在多个连续帧中分别对应的多个速度,每个速度集合包括至少一个与其他速度集合不同的视频帧所对应的速度,在所述多个速度集合均表征所述目标监控对象的速度变化满足结果条件的情况下,确定所述目标监控对象的速度变化满足结果条件。
根据本公开的实施例,所述监控视频包括多个视频帧,用于确定所述目标监控对象的加速度是否满足过程条件的加速度信息对应第一视频帧集合,用于确定所述目标监控对象的速度变化满足结果条件的速度信息对应第二视频帧集合,所述确定所述目标监控对象发生突发事件,包括:在所述第一视频帧集合和所述第二视频帧集合包括至少部分相同的视频帧或者在所述第一视频帧集合和所述第二视频帧集合之间的视频帧少于间隔帧阈值的情况下,确定所述目标监控对象发生突发事件。
根据本公开的实施例,所述装置还包括:记录模块,用于记录或更新所述目标监控对象与所述突发事件之间的关联关系。
根据本公开的实施例,所述目标监控对象包括:所述预设区域内处于运动状态的对象、或者所述预设区域内处于运动状态且运动速度大于速度阈值的对象、或者所述预设区域内处于道路车道线内的车辆。
根据本公开的实施例,所述获取关于预设区域的监控视频,包括:通过道路上设置的监控摄像头获取所述监控摄像头采集区域内的监控视频。
根据本公开的实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,根据本公开实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
例如,获取模块410、第一确定模块420、第二确定模块430、第三确定模块440和预警模块450中的任意多个可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本公开的实施例,获取模块410、第一确定模块420、第二确定模块430、第三确定模块440和预警模块450中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,获取模块410、第一确定模块420、第二确定模块430、第三确定模块440和预警模块450中的至少一个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
图5示意性示出了根据本公开实施例的适于实现上文描述的方法的电子设备的方框图。图5示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图5所示,根据本公开实施例的电子设备500包括处理器501,其可以根据存储在只读存储器(ROM)502中的程序或者从存储部分508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。处理器501例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器501还可以包括用于缓存用途的板载存储器。处理器501可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
在RAM 503中,存储有电子设备500操作所需的各种程序和数据。处理器501、ROM502以及RAM 503通过总线504彼此相连。处理器501通过执行ROM 502和/或RAM 503中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意,所述程序也可以存储在除ROM 502和RAM 503以外的一个或多个存储器中。处理器501也可以通过执行存储在所述一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。
根据本公开的实施例,电子设备500还可以包括输入/输出(I/O)接口505,输入/输出(I/O)接口505也连接至总线504。电子设备500还可以包括连接至I/O接口505的以下部件中的一项或多项:包括键盘、鼠标等的输入部分506;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分507;包括硬盘等的存储部分508;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分509。通信部分509经由诸如因特网的网络执行通信处理。驱动器510也根据需要连接至I/O接口505。可拆卸介质511,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器510上,以便于从其上读出的计算机程序根据需要被安装入存储部分508。
根据本公开的实施例,根据本公开实施例的方法流程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读存储介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分509从网络上被下载和安装,和/或从可拆卸介质511被安装。在该计算机程序被处理器501执行时,执行本公开实施例的系统中限定的上述功能。根据本公开的实施例,上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。
本公开还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现根据本公开实施例的方法。
根据本公开的实施例,计算机可读存储介质可以是非易失性的计算机可读存储介质,例如可以包括但不限于:便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。例如,根据本公开的实施例,计算机可读存储介质可以包括上文描述的ROM 502和/或RAM 503和/或ROM 502和RAM 503以外的一个或多个存储器。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合或/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
以上对本公开的实施例进行了描述。但是,这些实施例仅仅是为了说明的目的,而并非为了限制本公开的范围。尽管在以上分别描述了各实施例,但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围,本领域技术人员可以做出多种替代和修改,这些替代和修改都应落在本公开的范围之内。

Claims (22)

1.一种突发事件的监控方法,包括:
获取关于预设区域的监控视频;
基于所述监控视频,确定所述预设区域内的目标监控对象的速度信息和加速度信息;
基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件;
基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件;以及
在所述目标监控对象的加速度满足过程条件且所述目标监控对象的速度变化满足结果条件的情况下,确定所述目标监控对象发生突发事件,并向所述目标监控对象周围预设范围内的其他对象发送预警信息。
2.根据权利要求1所述的方法,其中,所述监控视频包括多个视频帧,所述基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件,包括:
获取所述目标监控对象在多个连续帧中分别对应的多个加速度;
在所述多个加速度满足以下至少一个判断条件时,确定所述目标监控对象的加速度满足急刹过程条件:
所述多个加速度的均值小于第一加速度阈值;
所述多个加速度的方差小于第一方差阈值;
所述多个连续帧中最后一帧所对应的加速度小于所述第一加速度阈值;以及
所述多个加速度中小于所述第一加速度阈值的加速度的数量大于累计次数阈值。
3.根据权利要求1所述的方法,其中,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:
获取所述目标监控对象在多个连续帧中分别对应的多个速度;
在所述多个速度满足以下至少一个判断条件时,确定所述目标监控对象的速度变化满足急刹结果条件:
所述多个速度中的最大速度与所述多个连续帧中最后一帧所对应的速度之间的比例大于第一比例阈值;以及
所述多个连续帧中最后一帧所对应的速度小于第一速度阈值。
4.根据权利要求1所述的方法,其中,所述监控视频包括多个视频帧,所述基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件,包括:
获取所述目标监控对象在多个连续帧中分别对应的多个加速度;
在所述多个加速度满足以下至少一个判断条件时,确定所述目标监控对象的加速度满足急加速过程条件:
所述多个加速度的均值大于第二加速度阈值;
所述多个加速度的方差小于第二方差阈值;
所述多个连续帧中最后一帧所对应的加速度大于所述第二加速度阈值;以及
所述多个加速度中大于所述第二加速度阈值的加速度的数量大于累计次数阈值。
5.根据权利要求1所述的方法,其中,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:
获取所述目标监控对象在多个连续帧中分别对应的多个速度;
在所述多个速度满足以下至少一个判断条件时,确定所述目标监控对象的速度变化满足急加速结果条件:
所述多个连续帧中最后一帧所对应的速度与所述多个速度中的最小速度之间的比例大于第二比例阈值;以及
所述多个连续帧中最后一帧所对应的速度大于第二速度阈值。
6.根据权利要求3或5所述的方法,其中,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:
获取多个速度集合,其中,所述多个速度集合中的每个速度集合均包含所述目标监控对象在多个连续帧中分别对应的多个速度,每个速度集合包括至少一个与其他速度集合不同的视频帧所对应的速度;
在所述多个速度集合均表征所述目标监控对象的速度变化满足结果条件的情况下,确定所述目标监控对象的速度变化满足结果条件。
7.根据权利要求1所述的方法,其中,所述监控视频包括多个视频帧,用于确定所述目标监控对象的加速度是否满足过程条件的加速度信息对应第一视频帧集合,用于确定所述目标监控对象的速度变化满足结果条件的速度信息对应第二视频帧集合,所述确定所述目标监控对象发生突发事件,包括:
在所述第一视频帧集合和所述第二视频帧集合包括至少部分相同的视频帧或者在所述第一视频帧集合和所述第二视频帧集合之间的视频帧少于间隔帧阈值的情况下,确定所述目标监控对象发生突发事件。
8.根据权利要求1所述的方法,还包括:
记录或更新所述目标监控对象与所述突发事件之间的关联关系。
9.根据权利要求1所述的方法,其中,所述目标监控对象包括:
所述预设区域内处于运动状态的对象;或者
所述预设区域内处于运动状态且运动速度大于速度阈值的对象;或者
所述预设区域内处于道路车道线内的车辆。
10.根据权利要求1所述的方法,其中,所述获取关于预设区域的监控视频,包括:
通过道路上设置的监控摄像头获取所述监控摄像头采集区域内的监控视频。
11.一种突发事件的监控装置,包括:
获取模块,用于获取关于预设区域的监控视频;
第一确定模块,用于基于所述监控视频,确定所述预设区域内的目标监控对象的速度信息和加速度信息;
第二确定模块,用于基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件;
第三确定模块,用于基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件;以及
预警模块,用于在所述目标监控对象的加速度满足过程条件且所述目标监控对象的速度变化满足结果条件的情况下,确定所述目标监控对象发生突发事件,并向所述目标监控对象周围预设范围内的其他对象发送预警信息。
12.根据权利要求11所述的装置,其中,所述监控视频包括多个视频帧,所述基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件,包括:
获取所述目标监控对象在多个连续帧中分别对应的多个加速度;
在所述多个加速度满足以下至少一个判断条件时,确定所述目标监控对象的加速度满足急刹过程条件:
所述多个加速度的均值小于第一加速度阈值;
所述多个加速度的方差小于第一方差阈值;
所述多个连续帧中最后一帧所对应的加速度小于所述第一加速度阈值;以及
所述多个加速度中小于所述第一加速度阈值的加速度的数量大于累计次数阈值。
13.根据权利要求11所述的装置,其中,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:
获取所述目标监控对象在多个连续帧中分别对应的多个速度;
在所述多个速度满足以下至少一个判断条件时,确定所述目标监控对象的速度变化满足急刹结果条件:
所述多个速度中的最大速度与所述多个连续帧中最后一帧所对应的速度之间的比例大于第一比例阈值;以及
所述多个连续帧中最后一帧所对应的速度小于第一速度阈值。
14.根据权利要求11所述的装置,其中,所述监控视频包括多个视频帧,所述基于所述加速度信息,确定所述目标监控对象的加速度是否满足过程条件,包括:
获取所述目标监控对象在多个连续帧中分别对应的多个加速度;
在所述多个加速度满足以下至少一个判断条件时,确定所述目标监控对象的加速度满足急加速过程条件:
所述多个加速度的均值大于第二加速度阈值;
所述多个加速度的方差小于第二方差阈值;
所述多个连续帧中最后一帧所对应的加速度大于所述第二加速度阈值;以及
所述多个加速度中大于所述第二加速度阈值的加速度的数量大于累计次数阈值。
15.根据权利要求11所述的装置,其中,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:
获取所述目标监控对象在多个连续帧中分别对应的多个速度;
在所述多个速度满足以下至少一个判断条件时,确定所述目标监控对象的速度变化满足急加速结果条件:
所述多个连续帧中最后一帧所对应的速度与所述多个速度中的最小速度之间的比例大于第二比例阈值;以及
所述多个连续帧中最后一帧所对应的速度大于第二速度阈值。
16.根据权利要求13或15所述的装置,其中,所述基于所述速度信息,确定所述目标监控对象的速度变化是否满足结果条件,包括:
获取多个速度集合,其中,所述多个速度集合中的每个速度集合均包含所述目标监控对象在多个连续帧中分别对应的多个速度,每个速度集合包括至少一个与其他速度集合不同的视频帧所对应的速度;
在所述多个速度集合均表征所述目标监控对象的速度变化满足结果条件的情况下,确定所述目标监控对象的速度变化满足结果条件。
17.根据权利要求11所述的装置,其中,所述监控视频包括多个视频帧,用于确定所述目标监控对象的加速度是否满足过程条件的加速度信息对应第一视频帧集合,用于确定所述目标监控对象的速度变化满足结果条件的速度信息对应第二视频帧集合,所述确定所述目标监控对象发生突发事件,包括:
在所述第一视频帧集合和所述第二视频帧集合包括至少部分相同的视频帧或者在所述第一视频帧集合和所述第二视频帧集合之间的视频帧少于间隔帧阈值的情况下,确定所述目标监控对象发生突发事件。
18.根据权利要求11所述的装置,还包括:
记录模块,用于记录或更新所述目标监控对象与所述突发事件之间的关联关系。
19.根据权利要求11所述的装置,其中,所述目标监控对象包括:
所述预设区域内处于运动状态的对象;或者
所述预设区域内处于运动状态且运动速度大于速度阈值的对象;或者
所述预设区域内处于道路车道线内的车辆。
20.根据权利要求11所述的装置,其中,所述获取关于预设区域的监控视频,包括:
通过道路上设置的监控摄像头获取所述监控摄像头采集区域内的监控视频。
21.一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器执行根据权利要求1~10中任一项所述的方法。
22.一种计算机可读介质,其上存储有可执行指令,该指令被处理器执行时使处理器执行根据权利要求1~10中任一项所述的方法。
CN202010607410.8A 2020-06-29 2020-06-29 突发事件的监控方法、装置、电子设备和介质 Pending CN111767851A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010607410.8A CN111767851A (zh) 2020-06-29 2020-06-29 突发事件的监控方法、装置、电子设备和介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010607410.8A CN111767851A (zh) 2020-06-29 2020-06-29 突发事件的监控方法、装置、电子设备和介质

Publications (1)

Publication Number Publication Date
CN111767851A true CN111767851A (zh) 2020-10-13

Family

ID=72723166

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010607410.8A Pending CN111767851A (zh) 2020-06-29 2020-06-29 突发事件的监控方法、装置、电子设备和介质

Country Status (1)

Country Link
CN (1) CN111767851A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112185131A (zh) * 2020-10-14 2021-01-05 深圳壹账通智能科技有限公司 车辆行使状态判断方法、装置、计算机设备及存储介质
CN112406767A (zh) * 2020-11-11 2021-02-26 广州小鹏汽车科技有限公司 车辆陷坑事故的监控方法、监控装置、服务器和存储介质
CN112991290A (zh) * 2021-03-10 2021-06-18 北京百度网讯科技有限公司 图像稳像方法、装置、路侧设备、云控平台
EP3893221A1 (en) * 2020-09-16 2021-10-13 Beijing Baidu Netcom Science And Technology Co. Ltd. Event detection method and apparatus for cloud control platform, device, and storage medium
CN114022819A (zh) * 2021-11-05 2022-02-08 深圳壹账通智能科技有限公司 基于图像识别的追尾车辆的检测方法、装置、设备及介质
CN115222571A (zh) * 2022-07-18 2022-10-21 来安县交通运输综合行政执法大队 一种基于人脸识别的源头治超数据分析方法

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006172012A (ja) * 2004-12-14 2006-06-29 Nissan Motor Co Ltd 不安感検出装置および不安感検出方法
CN102363417A (zh) * 2011-06-27 2012-02-29 广州汽车集团股份有限公司 紧急刹车报警系统和紧急刹车报警方法
US20130093895A1 (en) * 2011-10-17 2013-04-18 Samuel David Palmer System for collision prediction and traffic violation detection
CN103337179A (zh) * 2013-07-01 2013-10-02 深圳市凯维特信息技术有限公司 车辆不良驾驶行为提醒系统及方法
CN105261086A (zh) * 2015-09-28 2016-01-20 张培 带酒精检测功能的行车记录仪
CN105631969A (zh) * 2015-12-21 2016-06-01 联想(北京)有限公司 一种信息处理方法及电子设备
CN105959920A (zh) * 2016-07-21 2016-09-21 广东欧珀移动通信有限公司 一种移动数据的处理方法、装置及移动终端
CN107025704A (zh) * 2017-03-14 2017-08-08 上海小蚁科技有限公司 基于加速度传感器的驾驶行为检测方法及装置、行车记录仪和汽车
CN109345835A (zh) * 2018-09-05 2019-02-15 华北电力大学扬中智能电气研究中心 一种基于车车通信的前向预警方法及装置
CN109808596A (zh) * 2019-03-29 2019-05-28 深圳市元征科技股份有限公司 一种汽车预警提示方法、装置、介质及设备
CN110466519A (zh) * 2019-08-15 2019-11-19 广州小鹏汽车科技有限公司 基于碰撞检测的车辆控制方法及车辆控制系统
CN111242015A (zh) * 2020-01-10 2020-06-05 同济大学 一种基于运动轮廓语义图预测行车危险场景的方法

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006172012A (ja) * 2004-12-14 2006-06-29 Nissan Motor Co Ltd 不安感検出装置および不安感検出方法
CN102363417A (zh) * 2011-06-27 2012-02-29 广州汽车集团股份有限公司 紧急刹车报警系统和紧急刹车报警方法
US20130093895A1 (en) * 2011-10-17 2013-04-18 Samuel David Palmer System for collision prediction and traffic violation detection
CN103337179A (zh) * 2013-07-01 2013-10-02 深圳市凯维特信息技术有限公司 车辆不良驾驶行为提醒系统及方法
CN105261086A (zh) * 2015-09-28 2016-01-20 张培 带酒精检测功能的行车记录仪
CN105631969A (zh) * 2015-12-21 2016-06-01 联想(北京)有限公司 一种信息处理方法及电子设备
CN105959920A (zh) * 2016-07-21 2016-09-21 广东欧珀移动通信有限公司 一种移动数据的处理方法、装置及移动终端
CN107025704A (zh) * 2017-03-14 2017-08-08 上海小蚁科技有限公司 基于加速度传感器的驾驶行为检测方法及装置、行车记录仪和汽车
CN109345835A (zh) * 2018-09-05 2019-02-15 华北电力大学扬中智能电气研究中心 一种基于车车通信的前向预警方法及装置
CN109808596A (zh) * 2019-03-29 2019-05-28 深圳市元征科技股份有限公司 一种汽车预警提示方法、装置、介质及设备
CN110466519A (zh) * 2019-08-15 2019-11-19 广州小鹏汽车科技有限公司 基于碰撞检测的车辆控制方法及车辆控制系统
CN111242015A (zh) * 2020-01-10 2020-06-05 同济大学 一种基于运动轮廓语义图预测行车危险场景的方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
宋海娜;: "基于加速度计的智能网联汽车驾驶行为建模方法", 移动通信, no. 04, pages 85 - 88 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3893221A1 (en) * 2020-09-16 2021-10-13 Beijing Baidu Netcom Science And Technology Co. Ltd. Event detection method and apparatus for cloud control platform, device, and storage medium
CN112185131A (zh) * 2020-10-14 2021-01-05 深圳壹账通智能科技有限公司 车辆行使状态判断方法、装置、计算机设备及存储介质
CN112406767A (zh) * 2020-11-11 2021-02-26 广州小鹏汽车科技有限公司 车辆陷坑事故的监控方法、监控装置、服务器和存储介质
CN112406767B (zh) * 2020-11-11 2022-08-16 广州小鹏汽车科技有限公司 车辆陷坑事故的监控方法、监控装置、服务器和存储介质
CN112991290A (zh) * 2021-03-10 2021-06-18 北京百度网讯科技有限公司 图像稳像方法、装置、路侧设备、云控平台
CN112991290B (zh) * 2021-03-10 2023-12-05 阿波罗智联(北京)科技有限公司 图像稳像方法、装置、路侧设备、云控平台
CN114022819A (zh) * 2021-11-05 2022-02-08 深圳壹账通智能科技有限公司 基于图像识别的追尾车辆的检测方法、装置、设备及介质
CN115222571A (zh) * 2022-07-18 2022-10-21 来安县交通运输综合行政执法大队 一种基于人脸识别的源头治超数据分析方法
CN115222571B (zh) * 2022-07-18 2023-11-03 安徽鑫汇杰建设工程有限公司 一种基于人脸识别的源头治超数据分析方法

Similar Documents

Publication Publication Date Title
JP7499256B2 (ja) ドライバの挙動を分類するためのシステムおよび方法
CN111767851A (zh) 突发事件的监控方法、装置、电子设备和介质
US12106661B2 (en) Determining causation of traffic events and encouraging good driving behavior
US10782654B2 (en) Detection of driving actions that mitigate risk
US11024165B2 (en) Driver behavior monitoring
US20240290201A1 (en) Driver behavior monitoring
US10166934B2 (en) Capturing driving risk based on vehicle state and automatic detection of a state of a location
JP6234063B2 (ja) 通路の交差点上の静止物体の検出(方法、システム、および、プログラム)
US20170330455A1 (en) Driving determination device and detection device
US11823564B1 (en) Adaptive data collection based on fleet-wide intelligence
CN111767850A (zh) 突发事件的监控方法、装置、电子设备和介质
CN112053563A (zh) 用于云控平台的事件检测方法、装置、设备和存储介质
CN105825711A (zh) 一种车辆障碍物的预警方法及装置
WO2021260839A1 (ja) 情報処理装置、情報処理方法、およびプログラム
US10977882B1 (en) Driver health profile
CA3056611A1 (fr) Systeme de generation automatique d'alertes destinees aux usagers d'une route
CN112528711B (zh) 用于处理信息的方法和装置
US20220028258A1 (en) Warning presentation control device, warning presentation control system, method of controlling warning presentation, and recording medium storing warning presentation control program
Sahu Automated vehicle detection and tracking using Raspberry-Pi
JP2022027305A (ja) 危険運転検出装置、危険運転検出システム、及び危険運転検出プログラム
CN111598009A (zh) 监控急刹车辆的方法、装置、电子设备和存储介质
WO2024150369A1 (ja) 監視システム、情報処理装置、方法及び非一時的なコンピュータ記録媒体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20211012

Address after: 100176 101, floor 1, building 1, yard 7, Ruihe West 2nd Road, Beijing Economic and Technological Development Zone, Daxing District, Beijing

Applicant after: Apollo Intelligent Connectivity (Beijing) Technology Co., Ltd.

Address before: 2 / F, baidu building, 10 Shangdi 10th Street, Haidian District, Beijing 100085

Applicant before: BEIJING BAIDU NETCOM SCIENCE AND TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20201013

WD01 Invention patent application deemed withdrawn after publication