CN107786837A - 扶梯危险状态检测方法及装置 - Google Patents

扶梯危险状态检测方法及装置 Download PDF

Info

Publication number
CN107786837A
CN107786837A CN201610726350.5A CN201610726350A CN107786837A CN 107786837 A CN107786837 A CN 107786837A CN 201610726350 A CN201610726350 A CN 201610726350A CN 107786837 A CN107786837 A CN 107786837A
Authority
CN
China
Prior art keywords
video
frame
staircase
optical flow
agglomerate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610726350.5A
Other languages
English (en)
Other versions
CN107786837B (zh
Inventor
许可
许朝斌
任烨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN201610726350.5A priority Critical patent/CN107786837B/zh
Publication of CN107786837A publication Critical patent/CN107786837A/zh
Application granted granted Critical
Publication of CN107786837B publication Critical patent/CN107786837B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供了扶梯危险状态检测方法及装置,该方法包括:在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧,其中,所述第一类视频帧的获得时刻与采集时刻之间的时间差低于预设阈值;确定所获得的所述第一类视频帧所对应的第一稠密光流,其中,所述第一稠密光流为:所述第一类视频帧中的扶梯区域的稠密光流;根据所述第一稠密光流,确定所述扶梯的当前运行方向;判断所述当前运行方向与所述扶梯的初始运行方向是否相同,如果否,确定所述扶梯逆行。本发明中,通过计算稠密光流的方式,确定扶梯的当前运行方向,并在当前运行方向与扶梯的初始运行方向不同时,确定扶梯逆行,实现对扶梯逆行的扶梯危险状态的检测。

Description

扶梯危险状态检测方法及装置
技术领域
本发明涉及视频监控技术领域,特别是涉及扶梯危险状态检测方法及装置。
背景技术
扶梯是一种以传输带方式运送行人的运输工具,扶梯一般是斜置的,行人在扶梯的一端站上扶梯行走的梯级,便会自动被带到扶梯的另一端,其中,在运行的途中,梯级会一直保持水平,且扶梯是向着一个固定的方向运行。由于扶梯的快速性,使得扶梯在公共场所的使用越来越普及,例如:在轨道交通或商场中广泛使用的扶梯。
而在具体应用场景中,在扶梯运行过程中存在一些危险状态,如:有时扶梯发生故障使得扶梯逆行,如果不及时发现扶梯逆行并采取措施将有可能导致事故的发生;或者,在扶梯正常运行的情况下,如果人们在扶梯上逆行也是较为危险的行为,需要被及时制止。因此,如何对监控场景下的扶梯进行危险状态检测是一个亟待解决的问题。
发明内容
本发明实施例的目的在于提供扶梯危险状态检测方法及装置,以对监控场景下的扶梯进行危险状态的检测。具体技术方案如下:
第一方面,本发明实施例所提供的扶梯危险状态检测方法,所述方法包括:
在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧,其中,所述第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
确定所获得的所述第一类视频帧所对应的第一稠密光流,其中,所述第一稠密光流为:所述第一类视频帧中的扶梯区域的稠密光流;
根据所述第一稠密光流,确定所述扶梯的当前运行方向;
判断所述当前运行方向与所述扶梯的初始运行方向是否相同,如果否,确定所述扶梯逆行。
可选的,所述根据所述第一稠密光流,确定所述扶梯的当前运行方向,包括:
从所述第一稠密光流中,提取第一预定数量的目标光流点,其中,所述目标光流点为方向符合扶梯运行方向的光流点;
统计所有目标光流点的方向的分布状态;
基于所述分布状态,将所包含目标光流点最多的方向,确定为所述扶梯的当前运行方向。
可选的,所述获得视频监控设备所采集的第一类视频帧,包括:
持续获得所述视频监控设备所采集的视频帧,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
可选的,所述获得视频监控设备所采集的第一类视频帧,包括:
定时获得视频监控设备所采集的视频帧,其中,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
将所获得的视频帧确定为第一类视频帧。
可选的,判断所述当前运行方向与所述扶梯的初始运行方向是否相同之前,所述方法还包括:
从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧;
确定所述第二类视频帧所对应的第二稠密光流,其中,所述第二稠密光流为:所述第二类视频帧中扶梯区域的稠密光流;
根据所述第二稠密光流,确定所述扶梯的初始运行方向。
可选的,所述从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,包括:
从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
将所述目标视频帧确定为第二类视频帧。
可选的,所述从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,包括:
计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
确定连续第二预定数量视频帧的稠密光流的光流点数量变化趋势;
将变化趋势为由少变多趋势的连续第二预定数量视频帧作为第二类视频帧。
可选的,本发明提供的扶梯危险状态检测方法还包括:
当确定所述扶梯逆行后,输出报警信息。
第二方面,本发明实施例所提供的扶梯危险状态检测装置,所述装置包括:
第一获得模块,用于在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧,其中,所述第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第一确定模块,用于确定所获得的所述第一类视频帧所对应的第一稠密光流,其中,所述第一稠密光流为:所述第一类视频帧中的扶梯区域的稠密光流;
第二确定模块,用于根据所述第一稠密光流,确定所述扶梯的当前运行方向;
判断模块,用于判断所述当前运行方向与所述扶梯的初始运行方向是否相同,如果否,确定所述扶梯逆行。
可选的,所述第二确定模块,包括:
第一提取单元,用于从所述第一稠密光流中,提取第一预定数量的目标光流点,其中,所述目标光流点为方向符合扶梯运行方向的光流点;
统计单元,用于统计所有目标光流点的方向的分布状态;
当前运行方向确定单元,用于基于所述分布状态,将所包含目标光流点最多的方向,确定为所述扶梯的当前运行方向。
可选的,所述第一获得模块,包括:
第一获得单元,用于在对扶梯场景进行视频监控过程中,持续获得所述视频监控设备所采集的视频帧,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第一筛选单元,用于按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
可选的,所述第一获得模块,包括:
第二获得单元,用于定时获得视频监控设备所采集的视频帧,其中,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第一确定单元,用于将所获得的视频帧确定为第一类视频帧。
可选的,本发明提供的扶梯危险状态检测装置还包括:
第一筛选模块,用于判断所述当前运行方向与所述扶梯的初始运行方向是否相同之前,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧;
第三确定模块,用于确定所述第二类视频帧所对应的第二稠密光流,其中,所述第二稠密光流为:所述第二类视频帧中扶梯区域的稠密光流;
第四确定模块,用于根据所述第二稠密光流,确定所述扶梯的初始运行方向。
可选的,所述第一筛选模块,包括:
第二确定单元,用于从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
第三确定单元,用于将所述目标视频帧确定为第二类视频帧。
可选的,所述第一筛选模块,包括:
第一计算单元,用于计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
第一变化趋势确定单元,用于确定连续第二预定数量视频帧的稠密光流的光流点数量变化趋势;
第四确定单元,用于将变化趋势为由少变多趋势的连续第二预定数量视频帧作为第二类视频帧。
可选的,本发明提供的扶梯危险状态检测装置还包括:
第一输出模块,用于当确定所述扶梯逆行后,输出报警信息。
第三方面,本发明实施例所提供的扶梯危险状态检测方法,所述方法包括:
在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧,其中,所述第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
确定所获得的所述第一类视频帧所对应的第一稠密光流,其中,所述第一稠密光流为:所述第一类视频帧中的扶梯区域的稠密光流;
确定所述第一稠密光流中的目标光流点所组成的光流前景,其中,所述目标光流点为:方向与所述扶梯的初始运行方向相反的光流点;
根据所述光流前景,确定所述扶梯上是否存在行人逆行。
可选的,所述根据所述光流前景,确定所述扶梯上是否存在行人逆行,包括:
分别提取各个第一类视频帧所对应光流前景中的逆行团块;其中,所述逆行团块由多个目标光流点积聚而成;
基于所述逆行团块,生成各个第一类视频帧所对应的逆行团块列表,其中,所述逆行团块列表中记录有相对应第一类视频帧的逆行团块的数量信息;
分别将每一第一类视频帧与前一第一类视频帧中的逆行团块进行匹配,根据匹配结果修改该每一第一类视频帧的逆行团块列表;
在修改完毕后,分别判断各个逆行团块列表中是否存在超过第二预设阈值的数量信息,如果是,确定所述扶梯上存在行人逆行,如果否,确定所述扶梯上未存在行人逆行。
可选的,所述根据匹配结果修改该每一第一类视频帧的逆行团块列表,包括:
对于每一第一类视频帧:
如果该第一类视频帧与前一第一类视频帧存在匹配的逆行团块,将该第一类视频帧的逆行团块列表中的第一数量信息增加第一预设值,第二数量信息减少第一预设值,其中,所述第一数量信息为相匹配的逆行团块所对应的数量信息,所述第二数量信息为不匹配的逆行团块对应的数量信息;
如果该第一类视频帧与前一第一类视频帧不存在匹配的逆行团块,在所述该第一类视频帧的逆行团块列表中,增加该前一第一类视频帧的逆行团块的数量信息。
可选的,所述获得视频监控设备所采集的第一类视频帧,包括:
持续获得所述视频监控设备所采集的视频帧,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
可选的,所述获得视频监控设备所采集的第一类视频帧,包括:
定时获得视频监控设备所采集的视频帧,其中,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
将所获得的视频帧确定为第一类视频帧。
可选的,所述确定所述第一稠密光流中的目标光流点所组成的光流前景之前,所述方法还包括:
从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧;
确定所述第二类视频帧所对应的第二稠密光流,其中,所述第二稠密光流为:所述第二类视频帧中扶梯区域的稠密光流;
根据所述第二稠密光流,确定所述扶梯的初始运行方向。
可选的,所述从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,包括:
从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
将所述目标视频帧确定为第二类视频帧。
可选的,所述从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,包括:
计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
确定连续第三预定数量视频帧的稠密光流的光流点数量变化趋势;
将变化趋势为由少变多趋势的连续第三预定数量视频帧作为第二类视频帧。
可选的,本发明提供的扶梯危险状态检测方法还包括:
当确定所述扶梯上存在行人逆行时,输出报警信息。
第四方面,本发明实施例所提供的扶梯危险状态检测装置,所述装置包括:
第二获得模块,用于在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧,其中,所述第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第五确定模块,用于确定所获得的所述第一类视频帧所对应的第一稠密光流,其中,所述第一稠密光流为:所述第一类视频帧中的扶梯区域的稠密光流;
第六确定模块,用于确定所述第一稠密光流中的目标光流点所组成的光流前景,其中,所述目标光流点为:方向与所述扶梯的初始运行方向相反的光流点;
行人逆行确定模块,用于根据所述光流前景,确定所述扶梯上是否存在行人逆行。
可选的,所述行人逆行确定模块,包括:
第二提取单元,用于分别提取各个第一类视频帧所对应光流前景中的逆行团块;其中,所述逆行团块由多个目标光流点积聚而成;
生成单元,用于基于所述逆行团块,生成各个第一类视频帧所对应的逆行团块列表,其中,所述逆行团块列表中记录有相对应第一类视频帧的逆行团块的数量信息;
匹配单元,用于分别将每一第一类视频帧与前一第一类视频帧中的逆行团块进行匹配,根据匹配结果修改该每一第一类视频帧的逆行团块列表;
判断单元,用于在修改完毕后,分别判断各个逆行团块列表中是否存在超过第二预设阈值的数量信息,如果是,确定所述扶梯上存在行人逆行,如果否,确定所述扶梯上未存在行人逆行。
可选的,所述匹配单元,具体用于:
对于每一第一类视频帧:
如果该第一类视频帧与前一第一类视频帧存在匹配的逆行团块,将该第一类视频帧的逆行团块列表中的第一数量信息增加第一预设值,第二数量信息减少第一预设值,其中,所述第一数量信息为相匹配的逆行团块所对应的数量信息,所述第二数量信息为不匹配的逆行团块对应的数量信息;
如果该第一类视频帧与前一第一类视频帧不存在匹配的逆行团块,在所述该第一类视频帧的逆行团块列表中,增加该前一第一类视频帧的逆行团块的数量信息。
可选的,所述第二获得模块,包括:
第三获得单元,用于在对扶梯场景进行视频监控过程中,持续获得所述视频监控设备所采集的视频帧,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第二筛选单元,用于按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
可选的,所述第二获得模块,包括:
第四获得单元,用于定时获得视频监控设备所采集的视频帧,其中,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第五确定单元,用于将所获得的视频帧确定为第一类视频帧。
可选的,本发明提供的扶梯危险状态检测装置还包括:
第二筛选模块,用于确定所述第一稠密光流中的目标光流点所组成的光流前景之前,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧;
第七确定模块,用于确定所述第二类视频帧所对应的第二稠密光流,其中,所述第二稠密光流为:所述第二类视频帧中扶梯区域的稠密光流;
第八确定模块,用于根据所述第二稠密光流,确定所述扶梯的初始运行方向。
可选的,所述第二筛选模块,包括:
第六确定单元,用于从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
第七确定单元,用于将所述目标视频帧确定为第二类视频帧。
可选的,所述第二筛选模块,包括:
第二计算单元,用于计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
第二变化趋势确定单元,用于确定连续第三预定数量视频帧的稠密光流的光流点数量变化趋势;
第八确定单元,用于将变化趋势为由少变多趋势的连续第三预定数量视频帧作为第二类视频帧。
可选的,本发明提供的扶梯危险状态检测装置还包括:
第二输出模块,用于当确定所述扶梯上存在行人逆行时,输出报警信息。
本发明实施例中,通过计算稠密光流的方式,确定扶梯的当前运行方向,并在当前运行方向与扶梯的初始运行方向不同时,确定扶梯逆行,实现对扶梯逆行的扶梯危险状态的检测。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的扶梯危险状态检测方法的第一种流程示意图;
图2为本发明实施例提供的扶梯危险状态检测方法的第二种流程示意图;
图3为本发明实施例提供的扶梯危险状态检测方法的第三种流程示意图;
图4为本发明实施例提供的扶梯危险状态检测方法的第四种流程示意图;
图5为本发明实施例提供的扶梯危险状态检测方法的第五种流程示意图;
图6为本发明实施例提供的扶梯危险状态检测装置的第一种结构示意图;
图7为本发明实施例提供的扶梯危险状态检测装置的第二种结构示意图;
图8为本发明实施例提供的扶梯危险状态检测装置的第三种结构示意图;
图9为本发明实施例提供的扶梯危险状态检测装置的第四种结构示意图;
图10为本发明实施例提供的扶梯危险状态检测装置的第五种结构示意图;
图11为本发明实施例提供的扶梯危险状态检测方法的第六种流程示意图;
图12为本发明实施例提供的扶梯危险状态检测方法的第七种流程示意图;
图13为本发明实施例提供的扶梯危险状态检测方法的第八种流程示意图;
图14为本发明实施例提供的扶梯危险状态检测方法的第九种流程示意图;
图15为本发明实施例提供的扶梯危险状态检测方法的第十种流程示意图;
图16为本发明实施例提供的扶梯危险状态检测装置的第六种结构示意图;
图17为本发明实施例提供的扶梯危险状态检测装置的第七种结构示意图;
图18为本发明实施例提供的扶梯危险状态检测装置的第八种结构示意图;
图19为本发明实施例提供的扶梯危险状态检测装置的第九种结构示意图;
图20为本发明实施例提供的扶梯危险状态检测装置的第十种结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为了解决现有技术问题,从扶梯逆行的角度,本发明实施例提供了一种扶梯危险状态检测方法及装置。
下面首先对本发明实施例所提供的针对扶梯逆行的一种扶梯危险状态检测方法进行介绍。
需要说明的是,本发明实施例从扶梯逆行的角度所提供的扶梯危险状态检测方法可以应用于服务器也可以应用于视频监控设备。在实际应用中,该视频监控设备可以为摄像机,为了清晰的拍摄到扶梯的运行,可以将摄像机架设在扶梯入口处,还根据实际的扶梯场景的光线情况,架设相应的辅助设备,例如:当扶梯场景的光线较暗时,可以架设补光设备,以对扶梯区域进行补光。
如图1所示,本发明实施例提供的一种扶梯危险状态检测方法,可以包括:
S101:在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧。
其中,第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值。并且,该第一预设阈值可以根据实际情况进行设定,可以理解的是,第一预设阈值越低,检测及时性越高。
在对扶梯场景进行视频监控过程中,当视频监控设备为执行主体时,在采集到第一类视频帧时,可实时获得该第一类视频帧,即第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;当服务器为执行主体时,在视频监控设备采集到第一类视频帧时,可实时接收视频监控设备发送的第一类视频帧,由此,获得该第一类视频帧,且第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值。
需要强调的是,第一类视频帧为视频监控设备所采集的视频帧,并且,获得视频监控设备所采集的第一类视频帧的具体实现方式存在多种,也就是,哪些视频帧作为第一类视频帧的确定方式存在多种,为了方案清楚且布局清晰,后续对获得视频监控设备所采集的第一类视频帧的具体实现方式进行举例介绍。
另外,本发明实施例的“第一类视频帧”中的“第一”仅仅用于从命名上区分能够作为扶梯运行方向的确定依据的视频帧,并不具有任何限定意义。
S102:确定所获得的第一类视频帧所对应的第一稠密光流。
其中,第一稠密光流为:第一类视频帧中的扶梯区域的稠密光流。
在获得第一类视频帧后,框选出第一类视频帧中的扶梯所在区域框作为ROI(Region of interest,感兴趣区域),即框选框所在的区域即为扶梯区域,然后计算该第一类视频帧中的扶梯区域的稠密光流,将该稠密光流作为第一类视频帧所对应的第一稠密光流。需要强调的是,可以通过人工方式框选出第一类视频帧中的扶梯所在区域框,当然,也可以利用现有技术自动方式分析出扶梯所在区域,这都是合理的。
具体的,可以在每获得一帧第一类视频帧后,便计算该第一类视频帧的第一稠密光流。当然,理论上,也可以在获得预定帧数的第一类视频帧后,统一计算该预定帧数的第一类视频帧的第一稠密光流,以及后续的S103以及S104,可以理解的是,为了保证危险状态检测的及时性,预定帧数不宜过多,举例而言:该预定帧数可以为两帧或三帧。
本领域技术人员可以理解的是,由于光流可以表达图像的变化,包含目标运动的信息,可以用来确定目标的运动,而稠密光流是一种针对图像进行逐点匹配的图像配准方法,可以用于运动检测,且对运动检测的准确率较高,因此,本发明通过计算稠密光流来检测扶梯的运动。由于计算稠密光流的方法为现有技术,在此不再赘述。
S103:根据第一稠密光流,确定扶梯的当前运行方向。
在获得第一类视频帧的第一稠密光流后,可以根据第一稠密光流,确定扶梯的当前运行方向。
具体的,在一种具体实现方式中,根据第一稠密光流,确定扶梯的当前运行方向,可以包括:
从第一稠密光流中,提取第一预定数量的目标光流点,其中,目标光流点为方向符合扶梯运行方向的光流点;
统计所有目标光流点的方向的分布状态;
基于分布状态,将所包含目标光流点最多的方向,确定为扶梯的当前运行方向。
在计算第一稠密光流后,得到第一类视频帧中的扶梯区域所包含的多个光流点,其中,光流点具有方向。
为了确定扶梯的当前运行方向,从多个光流点中,提取第一预设数量的方向符合扶梯运行方向的光流点,统计该第一预设数量的光流点的方向的分布状态。
其中,提取第一预设数量的方向符合扶梯运行方向的光流点的具体方式有多种,在一种实现方式中,可以通过队列的方式提取预设数量的方向符合扶梯运行方向的光流点,具体为:
将第一稠密光流中方向符合扶梯运行方向的光流点放入队列中,当该队列的长度到达预设阈值时,提取该队列中的所有光流点。
由于在扶梯运行过程中,一般第一类视频帧中的扶梯区域所包含的光流点的方向均为扶梯的运行方向,但是有时也会出现第一类视频中的扶梯区域中存在与扶梯的运行方向不同的光流点的情况,例如:在第一类视频帧中,存在行人走过电梯口的情况,由于行人的运动方向与扶梯的运行方向不同,因此第一类视频中的扶梯区域中会存在与扶梯的运行方向不同的光流点。因此,基于分布状态,可以将所包含目标光流点最多的方向,确定为扶梯的当前运行方向。
另外,由于扶梯运行方向通常具有上行、下行、左行或右行等固定方向属性,因此,根据扶梯的设置方式,即可确定当前扶梯的固定方向属性,当光流点的方向符合该固定方向属性时,可以表明该光流点方向符合扶梯运行方向。
例如:商场中的扶梯一般为上下设置,此时,确定当前扶梯的固定方向属性为上行或下行,因此,当光流点的方向符合上行或下行时,可以表明该光流点方向符合扶梯运行方向。
S104:判断当前运行方向与扶梯的初始运行方向是否相同,如果否,确定扶梯逆行。
在确定扶梯的当前运行方向后,即可与扶梯的初始运行方向进行对比,其中,扶梯的初始运行方向可以为预先设置的,由于扶梯只存在两种运行方向,因此,如果当前的运行方向与扶梯的初始运行方向不同,则确定扶梯逆行。
例如:扶梯的初始运行方向为上行,确定扶梯的当前运行方向为下行,则确定扶梯逆行。
本发明中,通过计算稠密光流的方式,确定扶梯的当前运行方向,并在当前运行方向与扶梯的初始运行方向不同时,确定扶梯逆行,实现对扶梯逆行的扶梯危险状态的检测。
需要说明的是,在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧的具体实现方式存在多种,下面进行举例介绍。
在一种实现方式中,如图2所示,在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧(S101),可以包括:
S1011:在对扶梯场景进行视频监控过程中,持续获得视频监控设备所采集的视频帧,视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值。
为了更精准的确定扶梯的运行方向,在对扶梯场景进行视频监控过程中,实时获得视频监控设备所采集的每一个视频帧,即持续获得视频监控设备所采集的视频帧,视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值。
S1012:按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
在获得的每一个视频帧中,根据预定筛选规则,筛选得到第一类视频帧,其中,预定筛选规则可以为每隔一个视频帧获得一个视频帧。
例如:预定筛选规则为每隔一个视频帧获得一个视频帧,在对扶梯场景进行视频监控过程中,持续获得视频监控设备所采集的视频帧A、视频帧B、视频帧C和视频帧D,按照预定筛选规则,筛选得到第一类视频帧A和第一类视频帧C。
在另一种实现方式中,如图3所示,在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧(S101),可以包括:
S1013:在对扶梯场景进行视频监控过程中,定时获得视频监控设备所采集的视频帧。
其中,视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值。
为了减少计算量,提高计算速度,在对扶梯场景进行视频监控过程中,无需获得视频监控设备所采集的每一个视频帧,可以定时获得视频监控设备所采集的视频帧。
S1014:将所获得的视频帧确定为第一类视频帧。
例如:在对扶梯场景进行视频监控过程中,假设视频监控设备每秒钟采集一个视频帧,采集了视频帧A、视频帧B、视频帧C和视频帧D,定时为每两秒钟获得一个视频帧,则定时获得视频监控设备所采集的视频帧C,将视频帧C确定为第一类视频帧。
在图2所示方法的基础上,如图4所示,本发明实施例提供的一种扶梯危险状态检测方法,还可以包括:
S105:从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧。
步骤S105-步骤S107在步骤S104之前执行即可。
在扶梯的初始运行方向不为预先设置的情况下,可以从所获得的视频监控设备所采集的视频帧中,筛选得到用于确定扶梯初始运行方向的第二类视频帧。
需要说明的是,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧的具体实现方式存在多种,下面进行举例介绍。
在一种实现方式中,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,可以包括:
从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
将目标视频帧确定为第二类视频帧。
由于扶梯的初始运行方向一般为视频监控设备开始对扶梯区域进行监控时的扶梯运行方向,由于视频监控设备采集的每一个视频帧对应一个时间戳,因此,可以将时间戳排列在预设位数之前的视频帧确定为第二类视频帧。
例如:假设预设位数为3,视频监控设备8:00开始对扶梯区域进行监控,获得视频监控设备所采集的视频帧A、视频帧B、视频帧C、视频帧D……,其中,视频帧A对应的时间戳为8:00,视频帧B对应的时间戳为8:01,视频帧C对应的时间戳为8:02,视频帧D对应的时间戳为8:03;
所获得视频帧按照时间戳的早晚顺序排列为:视频帧A、视频帧B、视频帧C、视频帧D……,确定时间戳排列在3位之前的目标视频帧为视频帧A和视频帧B,将视频帧A和视频帧B确定为第二类视频帧。
在另一种实现方式中,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,可以包括:
计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
确定连续第二预定数量视频帧的稠密光流的光流点数量变化趋势;
将变化趋势为由少变多趋势的连续第二预定数量视频帧作为第二类视频帧。
由于在扶梯运行过程中,会出现扶梯中途停止运行的情况,当扶梯再次运行时,此时的扶梯初始运行方向可能与扶梯停止运行之前的扶梯初始运行方向不同,因此,在扶梯停止运行后,需要再次确定扶梯的初始运行方向。
在扶梯停止运行时,由于扶梯不再运动,使得所获得的视频监控设备所采集的视频帧中的光流点数量变少,当扶梯再次运行时,所获得的视频监控设备所采集的视频帧中的光流点数量变多,因此,可以将变化趋势为由少变多趋势的连续第二预定数量视频帧作为第二类视频帧。
另外,本发明实施例的“第二类视频帧”中的“第二”仅仅用于从命名上区分能够作为扶梯初始运行方向的确定依据的视频帧,并不具有任何限定意义。
S106:确定第二类视频帧所对应的第二稠密光流。
其中,第二稠密光流为:第二类视频帧中扶梯区域的稠密光流。
在筛选得到第二类视频帧后,计算第二类视频帧中扶梯区域的稠密光流,将该稠密光流确定为第二类视频帧对应的第二稠密光流。
S107:根据第二稠密光流,确定扶梯的初始运行方向。
在获得第二类视频帧的第二稠密光流后,可以根据第二稠密光流,确定扶梯的初始运行方向。
具体的,在一种具体实现方式中,根据第二稠密光流,确定扶梯的初始运行方向,可以包括:
从第二稠密光流中,提取第四预定数量的第一光流点,其中,第一光流点为方向符合扶梯运行方向的光流点;
统计所有第一光流点的方向的分布状态;
基于分布状态,将所包含第一光流点最多的方向,确定为扶梯的初始运行方向。
本发明中,通过计算稠密光流的方式,确定扶梯的初始运行方向,无需手动设置扶梯的初始运行方向。需要强调的是,自动确定初始运行方向方式可以应用于持续从视频监控设备获得视频帧的场景中,以保证自动确定初始运行方向的可行性。
在图1所示方法的基础上,如图5所示,本发明实施例提供的一种扶梯危险状态检测方法,还可以包括:
S108:当确定扶梯逆行后,输出报警信息。
在确定扶梯逆行后,即可输出报警信息,通知相关人员及时处理。其中,报警信息的具体输出形式包括但不局限于弹框形式、短信形式、语音形式等等。
本发明中,在确定扶梯逆行后,通过输出报警信息的方式,通知相关人员及时处理,避免了事故的发生。
相对于上述方法实施例,本发明实施例还提供了一种扶梯危险状态检测装置,如图6所示,该装置可以包括:
第一获得模块201,用于在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧,其中,所述第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第一确定模块202,用于确定所获得的所述第一类视频帧所对应的第一稠密光流,其中,所述第一稠密光流为:所述第一类视频帧中的扶梯区域的稠密光流;
第二确定模块203,用于根据所述第一稠密光流,确定所述扶梯的当前运行方向;
判断模块204,用于判断所述当前运行方向与所述扶梯的初始运行方向是否相同,如果否,确定所述扶梯逆行。
本发明中,通过计算稠密光流的方式,确定扶梯的当前运行方向,并在当前运行方向与扶梯的初始运行方向不同时,确定扶梯逆行,实现对扶梯逆行的扶梯危险状态的检测。
具体的,所述第二确定模块203,可以包括:
第一提取单元,用于从所述第一稠密光流中,提取第一预定数量的目标光流点,其中,所述目标光流点为方向符合扶梯运行方向的光流点;
统计单元,用于统计所有目标光流点的方向的分布状态;
当前运行方向确定单元,用于基于所述分布状态,将所包含目标光流点最多的方向,确定为所述扶梯的当前运行方向。
具体的,如图7所示,所述第一获得模块201,可以包括:
第一获得单元2011,用于在对扶梯场景进行视频监控过程中,持续获得所述视频监控设备所采集的视频帧,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第一筛选单元2012,用于按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
具体的,如图8所示,所述第一获得模块201,可以包括:
第二获得单元2013,用于定时获得视频监控设备所采集的视频帧,其中,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第一确定单元2014,用于将所获得的视频帧确定为第一类视频帧。
在图7所示装置的基础上,如图9所示,本发明实施例提供的一种扶梯危险状态检测装置,还可以包括:
第一筛选模块205,用于判断所述当前运行方向与所述扶梯的初始运行方向是否相同之前,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧;
第三确定模块206,用于确定所述第二类视频帧所对应的第二稠密光流,其中,所述第二稠密光流为:所述第二类视频帧中扶梯区域的稠密光流;
第四确定模块207,用于根据所述第二稠密光流,确定所述扶梯的初始运行方向。
本发明中,通过计算稠密光流的方式,确定扶梯的初始运行方向,无需手动设置扶梯的初始运行方向。
具体的,所述第一筛选模块205,可以包括:
第二确定单元,用于从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
第三确定单元,用于将所述目标视频帧确定为第二类视频帧。
具体的,所述第一筛选模块205,可以包括:
第一计算单元,用于计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
第一变化趋势确定单元,用于确定连续第二预定数量视频帧的稠密光流的光流点数量变化趋势;
第四确定单元,用于将变化趋势为由少变多趋势的连续第二预定数量视频帧作为第二类视频帧。
在图6所示装置的基础上,如图10所示,本发明实施例提供的一种扶梯危险状态检测装置,还可以包括:
第一输出模块208,用于当确定所述扶梯逆行后,输出报警信息。
本发明中,在确定扶梯逆行后,通过输出报警信息的方式,通知相关人员及时处理,避免了事故的发生。
为了解决现有技术问题,从行人逆行的角度,本发明实施例还提供了一种扶梯危险状态检测方法及装置。
下面对本发明实施例所提供的针对扶梯上行人逆行的一种扶梯危险状态检测方法进行介绍。
需要说明的是,本发明实施例从行人逆行的角度所提供的扶梯危险状态检测方法可以应用于服务器也可以应用于视频监控设备。在实际应用中,该视频监控设备可以为摄像机,为了清晰的拍摄到扶梯的运行,可以将摄像机架设在扶梯入口处,还根据实际的扶梯场景的光线情况,架设相应的辅助设备,例如:当扶梯场景的光线较暗时,可以架设补光设备,以对扶梯区域进行补光。如图11所示,本发明实施例提供的一种扶梯危险状态检测方法,可以包括:
S301:在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧。
其中,第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值。并且,该第一预设阈值可以根据实际情况进行设定,可以理解的是,第一预设阈值越低,检测及时性越高。
在对扶梯场景进行视频监控过程中,当视频监控设备为执行主体时,在采集到第一类视频帧时,可实时获得该第一类视频帧,即第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;当服务器为执行主体时,在视频监控设备采集到第一类视频帧时,可实时接收视频监控设备发送的第一类视频帧,由此,获得该第一类视频帧,且第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值。
需要强调的是,第一类视频帧为视频监控设备所采集的视频帧,并且,获得视频监控设备所采集的第一类视频帧的具体实现方式存在多种,也就是,哪些视频帧作为第一类视频帧的确定方式存在多种,为了方案清楚且布局清晰,后续对获得视频监控设备所采集的第一类视频帧的具体实现方式进行举例介绍。
另外,本发明实施例的“第一类视频帧”中的“第一”仅仅用于从命名上区分能够作为扶梯运行方向的确定依据的视频帧,并不具有任何限定意义。
S302:确定所获得的第一类视频帧所对应的第一稠密光流。
其中,第一稠密光流为:第一类视频帧中的扶梯区域的稠密光流。
在获得第一类视频帧后,框选出第一类视频帧中的扶梯所在区域框作为感ROI,即框选框所在的区域即为扶梯区域,然后计算该第一类视频帧中的扶梯区域的稠密光流,将该稠密光流作为第一类视频帧所对应的第一稠密光流。需要强调的是,可以通过人工方式框选出第一类视频帧中的扶梯所在区域框,当然,也可以利用现有技术自动方式分析出扶梯所在区域,这都是合理的。
具体的,可以在每获得一帧第一类视频帧后,便计算该第一类视频帧的第一稠密光流。当然,理论上,也可以在获得预定帧数的第一类视频帧后,统一计算该预定帧数的第一类视频帧的第一稠密光流,以及后续的S303以及S304,可以理解的是,为了保证危险状态检测的及时性,预定帧数不宜过多,举例而言:该预定帧数可以为两帧或三帧。
本领域技术人员可以理解的是,由于光流可以表达图像的变化,包含目标运动的信息,可以用来确定目标的运动,而稠密光流是一种针对图像进行逐点匹配的图像配准方法,可以用于运动检测,且对运动检测的准确率较高,因此,本发明通过计算稠密光流来检测扶梯的运动。由于计算稠密光流的方法为现有技术,在此不再赘述。
S303:确定第一稠密光流中的目标光流点所组成的光流前景。
其中,目标光流点为:方向与扶梯的初始运行方向相反的光流点。
由于在扶梯运行过程中,一般第一类视频帧中的扶梯区域所包含的光流点的方向均为扶梯的初始运行方向,但是有时也会出现第一类视频中的扶梯区域中存在与扶梯的初始运行方向相反的光流点的情况,例如:在第一类视频帧中,存在动物沿扶梯初始运行的相反的方向运动,因此第一类视频中的扶梯区域中会存在与扶梯的初始运行方向相反的目标光流点,将该目标光流点组成光流前景。
具体的,扶梯的初始运行方向可以为预先设置的。
S304:根据光流前景,确定扶梯上是否存在行人逆行。
在确定光流前景后,可以根据光流前景,确定扶梯上是否存在行人逆行。
具体的,在一种具体实现方式中,根据光流前景,确定扶梯上是否存在行人逆行,可以包括:
分别提取各个第一类视频帧所对应光流前景中的逆行团块;其中,逆行团块由多个目标光流点积聚而成;
基于逆行团块,生成各个第一类视频帧所对应的逆行团块列表,其中,逆行团块列表中记录有相对应第一类视频帧的逆行团块的数量信息;
分别将每一第一类视频帧与前一第一类视频帧中的逆行团块进行匹配,根据匹配结果修改该每一第一类视频帧的逆行团块列表;
在修改完毕后,分别判断各个逆行团块列表中是否存在超过第二预设阈值的数量信息,如果是,确定扶梯上存在行人逆行,如果否,确定扶梯上未存在行人逆行。
当光流前景某一区域中的目标光流点数量较多时,该多个目标光流点积聚形成一个逆行团块,因此,在光流前景中可以存在多个逆行团块和多个分散分布的目标光流点。
针对每一个第一类视频帧,当光流前景中存在多个逆行团块时,提取该多个逆行团块,生成该第一类视频帧所对应的逆行团块列表,该逆行团块列表中还记录逆行团块的数量信息。
例如:第一类视频帧O所对应光流前景中存在3个逆行团块:H逆行团块、I逆行团块和J逆行团块,提取该第一类视频帧O所对应光流前景中的逆行团块,基于逆行团块,生成该第一类视频帧O所对应的逆行团块列表:
团块 数量
H逆行团块 1
I逆行团块 1
J逆行团块 1
在生成各个第一类视频帧所对应的逆行团块列表后,由于逆行团块是由多个目标光流点积聚而成,且目标光流点为:方向与扶梯的初始运行方向相反的光流点,因此,当某一个逆行团块的数量达到第二预设阈值时,说明该逆行团块所在的区域中存在与扶梯初始运行方向相反的运动物体,而在扶梯区域上必然为扶梯上的行人,因此,分别将每一第一类视频帧与前一第一类视频帧中的逆行团块进行匹配,根据匹配结果修改该每一第一类视频帧的逆行团块列表,在修改完毕后,分别判断各个逆行团块列表中是否存在超过第二预设阈值的数量信息,如果是,确定扶梯上存在行人逆行,如果否,确定扶梯上未存在行人逆行。
具体的,根据匹配结果修改该每一第一类视频帧的逆行团块列表,可以包括:
对于每一第一类视频帧:
如果该第一类视频帧与前一第一类视频帧存在匹配的逆行团块,将该第一类视频帧的逆行团块列表中的第一数量信息增加第一预设值,第二数量信息减少第一预设值,其中,第一数量信息为相匹配的逆行团块所对应的数量信息,第二数量信息为不匹配的逆行团块对应的数量信息;
如果该第一类视频帧与前一第一类视频帧不存在匹配的逆行团块,在该第一类视频帧的逆行团块列表中,增加该前一第一类视频帧的逆行团块的数量信息。
例如:第一种情况:假设第一类视频帧O和第一类视频帧P为相邻的两个视频帧,第二预设阈值为1.5,第一预设值为1;
第一类视频帧O所对应光流前景中存在2个逆行团块:H逆行团块和I逆行团块,提取该第一类视频帧O所对应光流前景中的逆行团块,基于逆行团块,生成该第一类视频帧O所对应的逆行团块列表:
团块 数量
H逆行团块 1
I逆行团块 1
第一类视频帧P所对应光流前景中存在3个逆行团块:H逆行团块、I逆行团块和J逆行团块,提取该第一类视频帧P所对应光流前景中的逆行团块,基于逆行团块,生成该第一类视频帧P所对应的逆行团块列表:
团块 数量
H逆行团块 1
I逆行团块 1
J逆行团块 1
将第一类视频帧P与前一第一类视频帧O中的逆行团块进行匹配,存在匹配的逆行团块:H逆行团块和I逆行团块,存在未匹配的逆行团块:J逆行团块,将第一类视频帧P的逆行团块列表中的H逆行团块对应的数量信息增加第一预设值,和I逆行团块对应的数量信息增加第一预设值,将未匹配的J逆行团块对应的数量信息减少第一预设值,则匹配后的第一类视频帧P的逆行团块列表为:
团块 数量
H逆行团块 1+1=2
I逆行团块 1+1=2
J逆行团块 1-1=0
判断第一类视频帧P的逆行团块列表中是否存在超过第二预设阈值的数量信息,由于存在逆行团块列表中记录的数量信息超过第二预设阈值1.5的数量信息:H逆行团块对应的数量信息和I逆行团块对应的数量信息,因此,确定扶梯上存在行人逆行;
第二种情况:假设第一类视频帧O和第一类视频帧P为相邻的两个视频帧,第二预设阈值为1.5,第一预设值为1;
第一类视频帧O所对应光流前景中存在1个逆行团块:K逆行团块,提取该第一类视频帧O所对应光流前景中的逆行团块,基于逆行团块,生成该第一类视频帧O所对应的逆行团块列表:
团块 数量
K逆行团块 1
第一类视频帧P所对应光流前景中存在3个逆行团块:H逆行团块、I逆行团块和J逆行团块,提取该第一类视频帧P所对应光流前景中的逆行团块,基于逆行团块,生成该第一类视频帧P所对应的逆行团块列表:
将第一类视频帧P与前一第一类视频帧O中的逆行团块进行匹配,不存在匹配的逆行团块;在第一类视频帧P的逆行团块列表中,增加前一第一类视频帧O的逆行团块K的数量信息,则匹配后的第一类视频帧P的逆行团块列表为:
团块 数量
H逆行团块 1
I逆行团块 1
J逆行团块 1
K逆行团块 1
判断第一类视频帧P的逆行团块列表中是否存在超过第二预设阈值的数量信息,由于未存在逆行团块列表中记录的数量信息超过第二预设阈值1.5的数量信息,因此,确定扶梯上未存在行人逆行。
本发明中,通过计算稠密光流的方式,确定第一稠密光流中的方向与扶梯的初始运行方向相反的光流点所组成的光流前景,并根据光流前景,确定扶梯上是否存在行人逆行,实现对扶梯上行人逆行的扶梯危险状态的检测。
需要说明的是,在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧的具体实现方式存在多种,下面进行举例介绍。
在一种实现方式中,如图12所示,在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧(S301),可以包括:
S3011:在对扶梯场景进行视频监控过程中,持续获得视频监控设备所采集的视频帧,视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值。
为了更精准的确定光流前景,在对扶梯场景进行视频监控过程中,实时获得视频监控设备所采集的每一个视频帧,即持续获得视频监控设备所采集的视频帧,视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值。
S3012:按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
在获得的每一个视频帧中,根据预定筛选规则,筛选得到第一类视频帧,其中,预定筛选规则可以为每隔一个视频帧获得一个视频帧。
在另一种实现方式中,如图13所示,在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧(S301),可以包括:
S3013:在对扶梯场景进行视频监控过程中,定时获得视频监控设备所采集的视频帧。
其中,视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值。
为了减少计算量,提高计算速度,在对扶梯场景进行视频监控过程中,无需获得视频监控设备所采集的每一个视频帧,可以定时获得视频监控设备所采集的视频帧。
S3014:将所获得的视频帧确定为第一类视频帧。
将定时获得的视频监控设备所采集的视频帧确定为第一类视频帧。
在图12所示方法的基础上,如图14所示,本发明实施例提供的一种扶梯危险状态检测方法,还可以包括:
S305:从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧。
步骤S305-步骤S307在步骤S303之前执行即可。
在扶梯的初始运行方向不为预先设置的情况下,可以从所获得的视频监控设备所采集的视频帧中,筛选得到用于确定扶梯初始运行方向的第二类视频帧。
需要说明的是,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧的具体实现方式存在多种,下面进行举例介绍。
在一种实现方式中,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,可以包括:
从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
将目标视频帧确定为第二类视频帧。
由于扶梯的初始运行方向一般为视频监控设备开始对扶梯区域进行监控时的扶梯运行方向,由于视频监控设备采集的每一个视频帧对应一个时间戳,因此,可以将时间戳排列在预设位数之前的视频帧确定为第二类视频帧。
在另一种实现方式中,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,可以包括:
计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
确定连续第三预定数量视频帧的稠密光流的光流点数量变化趋势;
将变化趋势为由少变多趋势的连续第三预定数量视频帧作为第二类视频帧。
由于在扶梯运行过程中,会出现扶梯中途停止运行的情况,当扶梯再次运行时,此时的扶梯初始运行方向可能与扶梯停止运行之前的扶梯初始运行方向不同,因此,在扶梯停止运行后,需要再次确定扶梯的初始运行方向。
在扶梯停止运行时,由于扶梯不再运动,使得所获得的视频监控设备所采集的视频帧中的光流点数量变少,当扶梯再次运行时,所获得的视频监控设备所采集的视频帧中的光流点数量变多,因此,可以将变化趋势为由少变多趋势的连续第三预定数量视频帧作为第二类视频帧。
另外,本发明实施例的“第二类视频帧”中的“第二”仅仅用于从命名上区分能够作为扶梯初始运行方向的确定依据的视频帧,并不具有任何限定意义。
S306:确定第二类视频帧所对应的第二稠密光流。
其中,第二稠密光流为:第二类视频帧中扶梯区域的稠密光流.
在筛选得到第二类视频帧后,计算第二类视频帧中扶梯区域的稠密光流,将该稠密光流确定为第二类视频帧对应的第二稠密光流。
S307:根据第二稠密光流,确定扶梯的初始运行方向。
在获得第二类视频帧的第二稠密光流后,可以根据第二稠密光流,确定扶梯的初始运行方向。
具体的,在一种具体实现方式中,根据第二稠密光流,确定扶梯的初始运行方向,可以包括:
从第二稠密光流中,提取第五预定数量的第二光流点,其中,第二光流点为方向符合扶梯运行方向的光流点;
统计所有第二光流点的方向的分布状态;
基于分布状态,将所包含第一光流点最多的方向,确定为扶梯的初始运行方向。
本发明中,通过计算稠密光流的方式,确定扶梯的初始运行方向,无需手动设置扶梯的初始运行方向。需要强调的是,自动确定初始运行方向方式可以应用于持续从视频监控设备获得视频帧的场景中,以保证自动确定初始运行方向的可行性。
在图11所示方法的基础上,如图15所示,本发明实施例提供的一种扶梯危险状态检测方法,还可以包括:
S308:当确定扶梯上存在行人逆行时,输出报警信息。
在确定扶梯上存在行人逆行后,即可输出报警信息,通知相关人员及时处理。其中,报警信息的具体输出形式包括但不局限于弹框形式、短信形式、语音形式等等。
本发明中,在确定扶梯上存在行人逆行后,通过输出报警信息的方式,通知相关人员及时处理,避免了事故的发生。
相对于上述方法实施例,本发明实施例还提供了一种扶梯危险状态检测装置,如图16所示,该装置可以包括:
第二获得模块401,用于在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧,其中,所述第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第五确定模块402,用于确定所获得的所述第一类视频帧所对应的第一稠密光流,其中,所述第一稠密光流为:所述第一类视频帧中的扶梯区域的稠密光流;
第六确定模块403,用于确定所述第一稠密光流中的目标光流点所组成的光流前景,其中,所述目标光流点为:方向与所述扶梯的初始运行方向相反的光流点;
行人逆行确定模块404,用于根据所述光流前景,确定所述扶梯上是否存在行人逆行。
本发明中,通过计算稠密光流的方式,确定第一稠密光流中的方向与扶梯的初始运行方向相反的光流点所组成的光流前景,并根据光流前景,确定扶梯上是否存在行人逆行,实现对扶梯上行人逆行的扶梯危险状态的检测。
具体的,所述行人逆行确定模块404,可以包括:
第二提取单元,用于分别提取各个第一类视频帧所对应光流前景中的逆行团块;其中,所述逆行团块由多个目标光流点积聚而成;
生成单元,用于基于所述逆行团块,生成各个第一类视频帧所对应的逆行团块列表,其中,所述逆行团块列表中记录有相对应第一类视频帧的逆行团块的数量信息;
匹配单元,用于分别将每一第一类视频帧与前一第一类视频帧中的逆行团块进行匹配,根据匹配结果修改该每一第一类视频帧的逆行团块列表;
判断单元,用于在修改完毕后,分别判断各个逆行团块列表中是否存在超过第二预设阈值的数量信息,如果是,确定所述扶梯上存在行人逆行,如果否,确定所述扶梯上未存在行人逆行。
具体的,所述匹配单元,具体用于:
对于每一第一类视频帧:
如果该第一类视频帧与前一第一类视频帧存在匹配的逆行团块,将该第一类视频帧的逆行团块列表中的第一数量信息增加第一预设值,第二数量信息减少第一预设值,其中,所述第一数量信息为相匹配的逆行团块所对应的数量信息,所述第二数量信息为不匹配的逆行团块对应的数量信息;
如果该第一类视频帧与前一第一类视频帧不存在匹配的逆行团块,在所述该第一类视频帧的逆行团块列表中,增加该前一第一类视频帧的逆行团块的数量信息。
具体的,如图17所示,所述第二获得模块401,可以包括:
第三获得单元4011,用于在对扶梯场景进行视频监控过程中,持续获得所述视频监控设备所采集的视频帧,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第二筛选单元4012,用于按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
具体的,如图18所示,所述第二获得模块401,可以包括:
第四获得单元4013,用于定时获得视频监控设备所采集的视频帧,其中,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第五确定单元4014,用于将所获得的视频帧确定为第一类视频帧。
在图17所示装置的基础上,如图19所示,本发明实施例提供的一种扶梯危险状态检测装置,还可以包括:
第二筛选模块405,用于确定所述第一稠密光流中的目标光流点所组成的光流前景之前,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧;
第七确定模块406,用于确定所述第二类视频帧所对应的第二稠密光流,其中,所述第二稠密光流为:所述第二类视频帧中扶梯区域的稠密光流;
第八确定模块407,用于根据所述第二稠密光流,确定所述扶梯的初始运行方向。
本发明中,通过计算稠密光流的方式,确定扶梯的初始运行方向,无需手动设置扶梯的初始运行方向。
具体的,所述第二筛选模块405,可以包括:
第六确定单元,用于从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
第七确定单元,用于将所述目标视频帧确定为第二类视频帧。
具体的,所述第二筛选模块405,可以包括:
第二计算单元,用于计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
第二变化趋势确定单元,用于确定连续第三预定数量视频帧的稠密光流的光流点数量变化趋势;
第八确定单元,用于将变化趋势为由少变多趋势的连续第三预定数量视频帧作为第二类视频帧。
在图16所示装置的基础上,如图20所示,本发明实施例提供的一种扶梯危险状态检测装置,还可以包括:
第二输出模块408,用于当确定所述扶梯上存在行人逆行时,输出报警信息。
本发明中,在确定扶梯上存在行人逆行后,通过输出报警信息的方式,通知相关人员及时处理,避免了事故的发生。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (34)

1.一种扶梯危险状态检测方法,其特征在于,所述方法包括:
在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧,其中,所述第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
确定所获得的所述第一类视频帧所对应的第一稠密光流,其中,所述第一稠密光流为:所述第一类视频帧中的扶梯区域的稠密光流;
根据所述第一稠密光流,确定所述扶梯的当前运行方向;
判断所述当前运行方向与所述扶梯的初始运行方向是否相同,如果否,确定所述扶梯逆行。
2.根据权利要求1所述的方法,其特征在于,所述根据所述第一稠密光流,确定所述扶梯的当前运行方向,包括:
从所述第一稠密光流中,提取第一预定数量的目标光流点,其中,所述目标光流点为方向符合扶梯运行方向的光流点;
统计所有目标光流点的方向的分布状态;
基于所述分布状态,将所包含目标光流点最多的方向,确定为所述扶梯的当前运行方向。
3.根据权利要求1所述的方法,其特征在于,所述获得视频监控设备所采集的第一类视频帧,包括:
持续获得所述视频监控设备所采集的视频帧,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
4.根据权利要求1所述的方法,其特征在于,所述获得视频监控设备所采集的第一类视频帧,包括:
定时获得视频监控设备所采集的视频帧,其中,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
将所获得的视频帧确定为第一类视频帧。
5.根据权利要求3所述的方法,其特征在于,判断所述当前运行方向与所述扶梯的初始运行方向是否相同之前,所述方法还包括:
从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧;
确定所述第二类视频帧所对应的第二稠密光流,其中,所述第二稠密光流为:所述第二类视频帧中扶梯区域的稠密光流;
根据所述第二稠密光流,确定所述扶梯的初始运行方向。
6.根据权利要求5所述的方法,其特征在于,所述从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,包括:
从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
将所述目标视频帧确定为第二类视频帧。
7.根据权利要求5所述的方法,其特征在于,所述从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,包括:
计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
确定连续第二预定数量视频帧的稠密光流的光流点数量变化趋势;
将变化趋势为由少变多趋势的连续第二预定数量视频帧作为第二类视频帧。
8.根据权利要求1所述的方法,其特征在于,还包括:
当确定所述扶梯逆行后,输出报警信息。
9.一种扶梯危险状态检测装置,其特征在于,所述装置包括:
第一获得模块,用于在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧,其中,所述第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第一确定模块,用于确定所获得的所述第一类视频帧所对应的第一稠密光流,其中,所述第一稠密光流为:所述第一类视频帧中的扶梯区域的稠密光流;
第二确定模块,用于根据所述第一稠密光流,确定所述扶梯的当前运行方向;
判断模块,用于判断所述当前运行方向与所述扶梯的初始运行方向是否相同,如果否,确定所述扶梯逆行。
10.根据权利要求9所述的装置,其特征在于,所述第二确定模块,包括:
第一提取单元,用于从所述第一稠密光流中,提取第一预定数量的目标光流点,其中,所述目标光流点为方向符合扶梯运行方向的光流点;
统计单元,用于统计所有目标光流点的方向的分布状态;
当前运行方向确定单元,用于基于所述分布状态,将所包含目标光流点最多的方向,确定为所述扶梯的当前运行方向。
11.根据权利要求9所述的装置,其特征在于,所述第一获得模块,包括:
第一获得单元,用于在对扶梯场景进行视频监控过程中,持续获得所述视频监控设备所采集的视频帧,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第一筛选单元,用于按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
12.根据权利要求9所述的装置,其特征在于,所述第一获得模块,包括:
第二获得单元,用于定时获得视频监控设备所采集的视频帧,其中,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第一确定单元,用于将所获得的视频帧确定为第一类视频帧。
13.根据权利要求11所述的装置,其特征在于,还包括:
第一筛选模块,用于判断所述当前运行方向与所述扶梯的初始运行方向是否相同之前,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧;
第三确定模块,用于确定所述第二类视频帧所对应的第二稠密光流,其中,所述第二稠密光流为:所述第二类视频帧中扶梯区域的稠密光流;
第四确定模块,用于根据所述第二稠密光流,确定所述扶梯的初始运行方向。
14.根据权利要求13所述的装置,其特征在于,所述第一筛选模块,包括:
第二确定单元,用于从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
第三确定单元,用于将所述目标视频帧确定为第二类视频帧。
15.根据权利要求13所述的装置,其特征在于,所述第一筛选模块,包括:
第一计算单元,用于计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
第一变化趋势确定单元,用于确定连续第二预定数量视频帧的稠密光流的光流点数量变化趋势;
第四确定单元,用于将变化趋势为由少变多趋势的连续第二预定数量视频帧作为第二类视频帧。
16.根据权利要求9所述的装置,其特征在于,还包括:
第一输出模块,用于当确定所述扶梯逆行后,输出报警信息。
17.一种扶梯危险状态检测方法,其特征在于,所述方法包括:
在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧,其中,所述第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
确定所获得的所述第一类视频帧所对应的第一稠密光流,其中,所述第一稠密光流为:所述第一类视频帧中的扶梯区域的稠密光流;
确定所述第一稠密光流中的目标光流点所组成的光流前景,其中,所述目标光流点为:方向与所述扶梯的初始运行方向相反的光流点;
根据所述光流前景,确定所述扶梯上是否存在行人逆行。
18.根据权利要求17所述的方法,其特征在于,所述根据所述光流前景,确定所述扶梯上是否存在行人逆行,包括:
分别提取各个第一类视频帧所对应光流前景中的逆行团块;其中,所述逆行团块由多个目标光流点积聚而成;
基于所述逆行团块,生成各个第一类视频帧所对应的逆行团块列表,其中,所述逆行团块列表中记录有相对应第一类视频帧的逆行团块的数量信息;
分别将每一第一类视频帧与前一第一类视频帧中的逆行团块进行匹配,根据匹配结果修改该每一第一类视频帧的逆行团块列表;
在修改完毕后,分别判断各个逆行团块列表中是否存在超过第二预设阈值的数量信息,如果是,确定所述扶梯上存在行人逆行,如果否,确定所述扶梯上未存在行人逆行。
19.根据权利要求18所述的方法,其特征在于,所述根据匹配结果修改该每一第一类视频帧的逆行团块列表,包括:
对于每一第一类视频帧:
如果该第一类视频帧与前一第一类视频帧存在匹配的逆行团块,将该第一类视频帧的逆行团块列表中的第一数量信息增加第一预设值,第二数量信息减少第一预设值,其中,所述第一数量信息为相匹配的逆行团块所对应的数量信息,所述第二数量信息为不匹配的逆行团块对应的数量信息;
如果该第一类视频帧与前一第一类视频帧不存在匹配的逆行团块,在所述该第一类视频帧的逆行团块列表中,增加该前一第一类视频帧的逆行团块的数量信息。
20.根据权利要求17所述的方法,其特征在于,所述获得视频监控设备所采集的第一类视频帧,包括:
持续获得所述视频监控设备所采集的视频帧,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
21.根据权利要求17所述的方法,其特征在于,所述获得视频监控设备所采集的第一类视频帧,包括:
定时获得视频监控设备所采集的视频帧,其中,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
将所获得的视频帧确定为第一类视频帧。
22.根据权利要求20所述的方法,其特征在于,所述确定所述第一稠密光流中的目标光流点所组成的光流前景之前,所述方法还包括:
从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧;
确定所述第二类视频帧所对应的第二稠密光流,其中,所述第二稠密光流为:所述第二类视频帧中扶梯区域的稠密光流;
根据所述第二稠密光流,确定所述扶梯的初始运行方向。
23.根据权利要求22所述的方法,其特征在于,所述从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,包括:
从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
将所述目标视频帧确定为第二类视频帧。
24.根据权利要求22所述的方法,其特征在于,所述从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧,包括:
计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
确定连续第三预定数量视频帧的稠密光流的光流点数量变化趋势;
将变化趋势为由少变多趋势的连续第三预定数量视频帧作为第二类视频帧。
25.根据权利要求17所述的方法,其特征在于,还包括:
当确定所述扶梯上存在行人逆行时,输出报警信息。
26.一种扶梯危险状态检测装置,其特征在于,所述装置包括:
第二获得模块,用于在对扶梯场景进行视频监控过程中,获得视频监控设备所采集的第一类视频帧,其中,所述第一类视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第五确定模块,用于确定所获得的所述第一类视频帧所对应的第一稠密光流,其中,所述第一稠密光流为:所述第一类视频帧中的扶梯区域的稠密光流;
第六确定模块,用于确定所述第一稠密光流中的目标光流点所组成的光流前景,其中,所述目标光流点为:方向与所述扶梯的初始运行方向相反的光流点;
行人逆行确定模块,用于根据所述光流前景,确定所述扶梯上是否存在行人逆行。
27.根据权利要求26所述的装置,其特征在于,所述行人逆行确定模块,包括:
第二提取单元,用于分别提取各个第一类视频帧所对应光流前景中的逆行团块;其中,所述逆行团块由多个目标光流点积聚而成;
生成单元,用于基于所述逆行团块,生成各个第一类视频帧所对应的逆行团块列表,其中,所述逆行团块列表中记录有相对应第一类视频帧的逆行团块的数量信息;
匹配单元,用于分别将每一第一类视频帧与前一第一类视频帧中的逆行团块进行匹配,根据匹配结果修改该每一第一类视频帧的逆行团块列表;
判断单元,用于在修改完毕后,分别判断各个逆行团块列表中是否存在超过第二预设阈值的数量信息,如果是,确定所述扶梯上存在行人逆行,如果否,确定所述扶梯上未存在行人逆行。
28.根据权利要求27所述的装置,其特征在于,所述匹配单元,具体用于:
对于每一第一类视频帧:
如果该第一类视频帧与前一第一类视频帧存在匹配的逆行团块,将该第一类视频帧的逆行团块列表中的第一数量信息增加第一预设值,第二数量信息减少第一预设值,其中,所述第一数量信息为相匹配的逆行团块所对应的数量信息,所述第二数量信息为不匹配的逆行团块对应的数量信息;
如果该第一类视频帧与前一第一类视频帧不存在匹配的逆行团块,在所述该第一类视频帧的逆行团块列表中,增加该前一第一类视频帧的逆行团块的数量信息。
29.根据权利要求26所述的装置,其特征在于,所述第二获得模块,包括:
第三获得单元,用于在对扶梯场景进行视频监控过程中,持续获得所述视频监控设备所采集的视频帧,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第二筛选单元,用于按照预定筛选规则,从所获得的视频帧中,筛选得到第一类视频帧。
30.根据权利要求26所述的装置,其特征在于,所述第二获得模块,包括:
第四获得单元,用于定时获得视频监控设备所采集的视频帧,其中,所述视频帧的获得时刻与采集时刻之间的时间差低于第一预设阈值;
第五确定单元,用于将所获得的视频帧确定为第一类视频帧。
31.根据权利要求29所述的装置,其特征在于,还包括:
第二筛选模块,用于确定所述第一稠密光流中的目标光流点所组成的光流前景之前,从所获得的视频监控设备所采集的视频帧中,筛选得到满足触发初始化扶梯运行方向条件的第二类视频帧;
第七确定模块,用于确定所述第二类视频帧所对应的第二稠密光流,其中,所述第二稠密光流为:所述第二类视频帧中扶梯区域的稠密光流;
第八确定模块,用于根据所述第二稠密光流,确定所述扶梯的初始运行方向。
32.根据权利要求31所述的装置,其特征在于,所述第二筛选模块,包括:
第六确定单元,用于从所获得的视频监控设备所采集的视频帧中,确定时间戳排列在预设位数之前的目标视频帧,其中,所获得视频帧按照时间戳的早晚顺序排列;
第七确定单元,用于将所述目标视频帧确定为第二类视频帧。
33.根据权利要求31所述的装置,其特征在于,所述第二筛选模块,包括:
第二计算单元,用于计算所获得的视频监控设备所采集的视频帧中的扶梯区域的稠密光流;
第二变化趋势确定单元,用于确定连续第三预定数量视频帧的稠密光流的光流点数量变化趋势;
第八确定单元,用于将变化趋势为由少变多趋势的连续第三预定数量视频帧作为第二类视频帧。
34.根据权利要求26所述的装置,其特征在于,还包括:
第二输出模块,用于当确定所述扶梯上存在行人逆行时,输出报警信息。
CN201610726350.5A 2016-08-24 2016-08-24 扶梯危险状态检测方法及装置 Active CN107786837B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610726350.5A CN107786837B (zh) 2016-08-24 2016-08-24 扶梯危险状态检测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610726350.5A CN107786837B (zh) 2016-08-24 2016-08-24 扶梯危险状态检测方法及装置

Publications (2)

Publication Number Publication Date
CN107786837A true CN107786837A (zh) 2018-03-09
CN107786837B CN107786837B (zh) 2021-06-04

Family

ID=61438811

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610726350.5A Active CN107786837B (zh) 2016-08-24 2016-08-24 扶梯危险状态检测方法及装置

Country Status (1)

Country Link
CN (1) CN107786837B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112875481A (zh) * 2021-01-13 2021-06-01 深圳英飞拓科技股份有限公司 一种扶梯的运行控制方法、装置、终端设备和介质
CN113570546A (zh) * 2021-06-16 2021-10-29 北京农业信息技术研究中心 一种风机运行状态检测方法及装置
WO2022183663A1 (zh) * 2021-03-03 2022-09-09 上海商汤智能科技有限公司 事件检测方法、装置、电子设备、存储介质及程序产品

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102324016A (zh) * 2011-05-27 2012-01-18 郝红卫 一种高密度人群流量统计方法
CN103699878A (zh) * 2013-12-09 2014-04-02 安维思电子科技(广州)有限公司 一种识别电动扶梯异常运行状况的方法和系统
CN104200490A (zh) * 2014-08-14 2014-12-10 华南理工大学 一种复杂环境下的快速逆行检测跟踪监控方法
CN105224905A (zh) * 2014-05-26 2016-01-06 中兴通讯股份有限公司 一种多目标逆向违规检测方法、装置及系统
JP2016023060A (ja) * 2014-07-23 2016-02-08 フジテック株式会社 エスカレータ

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102324016A (zh) * 2011-05-27 2012-01-18 郝红卫 一种高密度人群流量统计方法
CN103699878A (zh) * 2013-12-09 2014-04-02 安维思电子科技(广州)有限公司 一种识别电动扶梯异常运行状况的方法和系统
CN105224905A (zh) * 2014-05-26 2016-01-06 中兴通讯股份有限公司 一种多目标逆向违规检测方法、装置及系统
JP2016023060A (ja) * 2014-07-23 2016-02-08 フジテック株式会社 エスカレータ
CN104200490A (zh) * 2014-08-14 2014-12-10 华南理工大学 一种复杂环境下的快速逆行检测跟踪监控方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112875481A (zh) * 2021-01-13 2021-06-01 深圳英飞拓科技股份有限公司 一种扶梯的运行控制方法、装置、终端设备和介质
WO2022183663A1 (zh) * 2021-03-03 2022-09-09 上海商汤智能科技有限公司 事件检测方法、装置、电子设备、存储介质及程序产品
CN113570546A (zh) * 2021-06-16 2021-10-29 北京农业信息技术研究中心 一种风机运行状态检测方法及装置
CN113570546B (zh) * 2021-06-16 2023-12-05 北京农业信息技术研究中心 一种风机运行状态检测方法及装置

Also Published As

Publication number Publication date
CN107786837B (zh) 2021-06-04

Similar Documents

Publication Publication Date Title
CN110188644B (zh) 一种基于视觉分析的扶梯乘客危险行为监控系统及方法
CN107316312A (zh) 一种视频图像遮挡检测方法及系统
CN106874863A (zh) 基于深度卷积神经网络的车辆违停逆行检测方法
CN107786837A (zh) 扶梯危险状态检测方法及装置
CN105117683B (zh) 一种公共场所密集人群检测及预警方法
CN108012202B (zh) 视频浓缩方法、设备、计算机可读存储介质及计算机装置
CN106845424A (zh) 基于深度卷积网络的路面遗留物检测方法
CN102413356B (zh) 视频清晰度检测系统及其检测方法
CN109191738B (zh) 一种基于动态人流量监测的智能疏散方法和系统
CN104581140B (zh) 一种会议电视的视频质量评估方法
CN103279800A (zh) 基于博弈论的大规模人群疏散最优逃生路线生成方法
CN106570449B (zh) 一种基于区域定义的人流量与人气指数检测方法及检测系统
CN115527158B (zh) 一种基于视频监控的人员异常行为检测方法及装置
CN110769195A (zh) 输电线路施工现场违章智能监控识别系统
WO2020114116A1 (zh) 一种基于密集人群的行人检测方法、存储介质及处理器
CN106034237A (zh) 一种基于编码切换的混合编码方法和系统
CN108012117A (zh) 一种基于背景建模的城市摆摊设点检测方法
CN105704434A (zh) 基于智能视频识别的体育场馆人群监控方法及系统
CN109801421A (zh) 一种地铁智能安全检测系统及方法
CN103984937A (zh) 基于光流法的行人计数方法
CN109867186A (zh) 一种基于智能视频分析技术的电梯困人检测方法及系统
CN109345531B (zh) 一种基于图片识别用户拍摄距离的方法及系统
CN104837008B (zh) 一种基于网络丢包损伤的比特流层视频感知质量评价方法
CN101998115A (zh) 具有客流统计功能的嵌入式网络摄像机及客流计数方法
CN104794896B (zh) 基于升降式限高架的高架桥拥堵空间热点自动提取方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant