CN101607668A - 嵌入式计算机视觉自动扶梯人流监察警报装置 - Google Patents

嵌入式计算机视觉自动扶梯人流监察警报装置 Download PDF

Info

Publication number
CN101607668A
CN101607668A CNA2008100390346A CN200810039034A CN101607668A CN 101607668 A CN101607668 A CN 101607668A CN A2008100390346 A CNA2008100390346 A CN A2008100390346A CN 200810039034 A CN200810039034 A CN 200810039034A CN 101607668 A CN101607668 A CN 101607668A
Authority
CN
China
Prior art keywords
escalator
submodule
computer vision
alarm
embedded computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2008100390346A
Other languages
English (en)
Other versions
CN101607668B (zh
Inventor
刘汉光
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AAIYI INTELLIGENT CONTROL SYSTEM Co Ltd SHANGHAI
Original Assignee
AAIYI INTELLIGENT CONTROL SYSTEM Co Ltd SHANGHAI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AAIYI INTELLIGENT CONTROL SYSTEM Co Ltd SHANGHAI filed Critical AAIYI INTELLIGENT CONTROL SYSTEM Co Ltd SHANGHAI
Priority to CN2008100390346A priority Critical patent/CN101607668B/zh
Priority to PCT/CN2009/072310 priority patent/WO2009152766A1/zh
Publication of CN101607668A publication Critical patent/CN101607668A/zh
Application granted granted Critical
Publication of CN101607668B publication Critical patent/CN101607668B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66BELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B29/00Safety devices of escalators or moving walkways
    • B66B29/005Applications of security monitors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Escalators And Moving Walkways (AREA)

Abstract

本发明公开了一种嵌入式计算机视觉自动扶梯人流监察警报装置,对自动扶梯人流进行监控报警,保障了自动扶梯上的乘客安全。其技术方案为:装置包括:图像采集设备,摄取自动扶梯处的图像;嵌入式计算机视觉自动扶梯人流监察警报系统,包括:计算机视觉监控模块包括:图像采集子模块,采集自动扶梯上乘客的图像;储存子模块,其内设的视觉录像存储数据库存储采集到的录像;分析子模块,对采集到的图像进行分析;比对引擎,将分析值与预设的安全范围进行对比;警报运行模块,将得出的异常行为结论向乘客发出警示信号;警报设备,进行警示动作。本发明应用于自动扶梯安全监察设备的领域。

Description

嵌入式计算机视觉自动扶梯人流监察警报装置
技术领域
本发明涉及一种监察警报装置,尤其涉及一种应用在自动扶梯安全管理中的借助嵌入式计算机实现的自动扶梯人流监察警报装置。
背景技术
自动扶梯在现今的社会广泛频繁地使用,再加上现代生活节奏加快,人们的时间观念都非常强,在商场扶梯、地铁入口等公共场合争先恐后的情况特别严重,重大事故发生的机会大大增加。
事故频发的原因主要是乘客急速向上或向下冲和推挤在自动扶梯进出口。例如在地铁车站里,乘客在地铁车门快要关上或正在关上的时候还赶着跑进车厢内,导致车门不能关闭甚至乘客被车门夹伤。如果乘客在自动扶梯上知道列车已到达月台,更可能会立刻跑下来,冲进车厢内。另外,列车刚到达月台,车门一开,乘客就会争先恐后乘搭自动扶梯,希望可以尽快冲上地面离开车站。这类状况均会增加人们乘搭自动扶梯时的危险系数,容易跌伤或碰伤。另一种安全事故发生于乘客推挤进自动扶梯的入口处,由于自动扶梯入口是瓶颈位置,大量乘客人流同时推挤进时甚至会造成人踩人的情况。在节假日或平时乘客人流高峰时段,这些情况也会在其它人流密集场所,例如商场、电影院的自动扶梯上发生。
自动扶梯意外事故调查和研究很多,但改善方法却缺乏。以香港情况为例,2007年消费者委员会报告非常关注自动扶梯相关的意外,自动扶梯的总数在香港从2003年5,749增长到2006年6,778。根据香港机电工程处,从2003年自动扶梯意外事故的统计从600个个案(或平均每天1.6个案)上升至2006年1,092个案(或平均每天2.99个案)。在国内,例如06年上海莘庄地铁站的自动扶梯两次因为过于拥挤,载重量太大,在上行途中突然翻转下行,造成十余人受伤。另外自动扶梯两端如果过于拥挤,人群不能立即疏散,也容易导致扶梯上人越来越多,导致挤伤。此外,07年7月15日,上海地铁1号线上体馆站发生地铁屏蔽门挤死乘客的事件,引起极大的争议。事发时该乘客从自动扶梯上冲下,欲抢在屏蔽门关闭之前强行冲入列车,结果被夹在列车车门与屏蔽门之间,在列车启动后被活生生地挤死。除了考虑屏蔽门的安全因素外,我们似乎也可以在乘客搭乘自动扶梯的时候即采取预警应对措施,防止类似的“屏蔽门”事件发生。
多数事故的起因都归究于乘客们在自动扶梯上做出一些危险的动作或不规范行为,这显示提醒乘客在自动扶梯上保持安全态度的重要性。因此我们需要及时警告和防止在自动扶梯做出不适当行为的乘客,从而减少自动扶梯事故发生率。现今的管理方法主要利用安全管理大使人员在旁监看,并提醒和维持秩序,亦有为自动扶梯增加简单的感应和发声装置,但这些做法仍然很被动,管理效率亦难于改善。并且这些传统监视设备不但花费成本高,有时还会因人为疏忽而失去其功效。且一旦发生事故时不一定有任何录像或视觉记录,这样便潜在着大量的争议及责任认定的问题。为了搜寻事件发生时所录下的影像数据,常花费过多的时间及成本,而延误案情。其实,这些大量的数据必须长时间地被储存下来,以备未来查询之用。
发明内容
本发明的目的在于解决上述问题,提供了一种嵌入式计算机视觉自动扶梯人流监察警报装置,可以对自动扶梯人流进行监控和报警,有效保障了自动扶梯上的乘客安全。
本发明的技术方案为:本发明揭示了一种嵌入式计算机视觉自动扶梯人流监察警报装置,包括:
图像采集设备,摄取自动扶梯处的视觉图像;
嵌入式计算机视觉自动扶梯人流监察警报系统,包括:
计算机视觉监控模块,包括:
图像采集子模块,采集自动扶梯上乘客的视觉图像;
储存子模块,其内设的视觉录像存储数据库存储采集到的视觉录像;
分析子模块,对采集到的视觉图像进行分析;
比对引擎,将该分析子模块的分析值与预设的安全范围进行对比;
警报运行模块,将该比对引擎做出的异常行为结论向乘客发出警示信号;
警报设备,根据该警示信号进行警示的动作。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该嵌入式计算机视觉自动扶梯人流监察警报系统还包括:
模块监视引擎,对装置内的各个模块的运行状态进行监控。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该模块监视引擎中进一步设置:
模块运行状态汇报子模块,该模块向装置内的各个模块提取其当前的运行状态,建立故障日志,并把故障状态的信息发送出去。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该模块监视引擎中进一步设置:
自动修复子模块,根据预测到的不当运行,在不干扰系统应用程序或业务程序的情况下对出错的模块进行修复。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该嵌入式计算机视觉自动扶梯人流监察警报系统还包括:
嵌入式WEB服务模块,通过局域网向远程外设提供装置获得的信息。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该嵌入式计算机视觉自动扶梯人流监察警报系统还包括:
嵌入式蓝牙无线网络联系模块,以无线方式传送装置获得的信息。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该存储子模块还包括:
自动运行重写覆盖子模块,根据设定用新的乘客人流视频图像覆盖旧的图像。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该分析子模块还包括:
智能选择模块,自动覆盖非自动扶梯图像,并根据自动扶梯图像判断自动扶梯的坡度、类型,自动选择相应的预设安全范围参数。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该分析子模块还包括:
图像区域设定模块,自由选择或定义一个特定监控场景范围的图像区域。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该分析子模块还包括:
自动扶梯速度及运行方向分析子模块,检测自动扶梯的实时速度和运行方向。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该分析子模块还包括:
个体乘客速度、运动轨迹及方向分析子模块,分析出乘客的相对运动速度及运动轨迹。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该分析子模块还包括:
客流阻塞、拥挤率分析子模块,分析出单位时间内通过选定区域的客流量和客流密度。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该分析子模块还包括:
测定子模块,持续对所分析的图像数据进行测验,修正图像扭曲和像差。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该比对引擎将该个体乘客速度、运动轨迹及方向分析子模块分析所得的个体乘客速度、运动轨迹与预设的安全范围参数进行比对,如果分析所得的参数偏离安全范围参数,则发送警报命令给该警报运行模块。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该比对引擎将该客流阻塞、拥挤率分析子模块分析所得的单位时间的客流量、客流密度与预设的安全范围参数进行比对,如果分析所得参数偏离安全范围参数,则发送警报命令给该警报运行模块。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该警报运行模块进一步包括语音报警控制子模块,以语音信号的方式警示乘客;该警报设备进一步包括语音报警器,接收到该语音报警控制子模块的警示信号后进行语音报警动作。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该警报运行模块进一步包括闪光报警控制子模块,以光信号的方式警示乘客;该警报设备进一步包括闪光报警器,接收到该闪光报警控制子模块的警示信号后进行闪光报警动作。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该嵌入式WEB服务模块进一步包括:
汇报子模块,向远程外设发送比对结果。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该嵌入式WEB服务模块进一步包括:
参数设定子模块,供管理人员输入装置内各个模块的相关参数。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该嵌入式WEB服务模块进一步包括:
升级子模块,通过本地端口或远程网络升级固件和软件。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该嵌入式WEB服务模块进一步包括:
提取下载数据子模块,提取下载数据,自动建立相关的数据下载链接。
上述的嵌入式计算机视觉自动扶梯人流监察警报装置,其中,该图像采集设备还包括光源设备。
本发明对比现有技术有如下的有益效果:本发明通过采集自动扶梯上乘客的视觉图像,对这些视觉图像(录像)进行存储和分析,并通过比对引擎将图像的分析值与预设的安全范围进行比对,对超出安全范围的值所对应的异常行为向乘客发出警示信号,同时可与远程外设进行交互。相较于现有技术的人工处理模式,本发明的监察警报装置做到了自动化,在效率、成本和可靠性上大大提升。
附图说明
图1是本发明的嵌入式计算机视觉扶梯人流监察警报装置的较佳实施例的结构图。
图2是本发明的嵌入式计算机视觉扶梯人流监察警报系统的较佳实施例的原理图。
图3是上行的自动扶梯入口处拥堵的示意图。
图4是下行的自动扶梯入口处拥堵的示意图。
图5是乘客在上行的自动扶梯上向上奔跑的示意图。
图6是乘客在下行的自动扶梯上向下奔跑的示意图。
图7是乘客在下行的自动扶梯上向上逆行的示意图。
图8是乘客在上行的自动扶梯上向下逆行的示意图。
图9是管理人员对做出异常行为的乘客进行指导的示意图。
图10是有本装置监控下的上行扶手电梯运行示意图。
图11是有本装置监控下的下行扶手电梯运行示意图。
图12是本发明的嵌入式计算机视觉自动扶梯人流监察警报装置的启动初始化的流程图。
图13是本发明的智能选择模块遮盖非扶梯图像部分的流程图。
图14是本发明的客流阻塞、拥挤率分析子模块计算客流密度的流程图。
图15是本发明的个体乘客速度、运动轨迹及方向分析子模块对个体乘客图像进行处理以及计算移动向量数的流程图。
具体实施方式
下面结合附图和实施例对本发明作进一步的描述。
图1示出了本发明的嵌入式计算机视觉自动扶梯人流监察警报装置的产品结构。请参见图1,本发明的监察警报装置是一个独立安装的安全管理控制装置,配有标准的活动式支架,安装人员可以根据需要便捷地调整装置的位置和拍摄角度。嵌入式计算机视觉自动扶梯人流监察警报装置11包括嵌入式控制及处理器15、图像采集设备12、语音报警器13、闪光报警器14、远程外设18及嵌入式自动扶梯计算机视觉人流监察警报系统19。其中监察警报系统19通过嵌入式控制及处理器15运行。图像采集设备12包括一活动式摄像头,用作人脸追踪,根据目标的移动情况,自动调用相应的程序,并进行运算,做出相对精确的旋转位移以适应目标的位置,摄像头内装有光学滤镜,用以滤除可见光。同时在摄像头周围安装一圈主动光源,其感应器通过量度所捕捉图像的每个像素的深度,并通过发放主动光源的光束到摄像头前面的对象,获取图像数据,也可套用辅助照明设备,所采用的设备可使用可见光或近红外光,提供主动正面照明可以提高采集图像的质量,从而提高嵌入式自动扶梯视觉人流监察警报系统19的运算准确性和效率。
嵌入式自动扶梯视觉人流监察警报系统19主要用于分析、比对图像采集设备12所采集到的图像,并向语音报警器13和闪光报警器14发送报警信号。同时其内嵌的嵌入式WEB服务模块6,及时更新异常和故障信息,远程外设18可通过局域网络17提取相关信息和数据。嵌入式蓝牙无线网络联系模块7同时以无线方式传送相关异常或故障信息和数据。
图2示出了嵌入式计算机视觉自动扶梯人流监察警报系统的原理。请参见图2,图像采集子模块20借助图像采集设备12采集到自动扶梯上乘客的视觉图像之后,将所有视觉录像存储于存储子模块22的视觉录像存储数据库220中,在一定时限内可从存储子模块22中提出警报日志与相应的视频数据记录。这些记录不但可作研究事故分析确立长远改善策略之用,并且在发生事故时可及时储存其录像及视觉记录,避免事故发生后引起争议及责任认定的问题。存储子模块22又包括自动运行重写覆盖子模块222,根据设定用新的乘客人流视频图像覆盖旧的图像,避免了存储子模块22因为空间已满或打开文件过多而导致系统出现异常、停止运行的问题。同时自动运行重写覆盖子模块222按照比对引擎3的分析结果储存需要的备份。
分析子模块24从存储子模块22中提取图像,其中的智能选择模块241自动覆盖非自动扶梯图像。智能选择模块241遮盖非扶梯图像部分的算法请参见图13所示。智能选择模块241主要是通过获得两采集图像(如N-2,N-1)结果差值间的绝对值,并把该绝对值加到另一个从图像(如N-1,N)中出来的绝对值,便可找出遮盖非扶梯图像部分,同时利用背景维护算法产生二值化的输出,去除图像杂色,累加器更新遮盖非自动扶梯图像用于清除背景振动像素,对消除虚假异常报警具有良好的通用性、实用性和稳健性。
智能选择模块241根据自动扶梯图像判断自动扶梯的坡度、类型,自动选择相应的预设安全范围参数,提高系统的准确性和运算效率。由于不同的自动扶梯有不同的运行速度、运行方向、坡度及不同的安装设定的工作参数,如果由前台工作人员来完成这项工作,则需要重复输入工作参数以获得最佳值,需要耗费很大的人力,而智能选择模块241可根据检测出的自动扶梯的坡度和类型自动找出最佳工作参数。
随后,图像区域设定模块242可自由的选择或定义一个特定监控场景范围的图像区域,借助局部检测区域可减少各分析模块的计算量,以实现快速的图像分析。此模块亦可减低周边环境对图像像素的影响,比如光度、对比度、分析特征等都会影响其分析结果,同时管理人员可调整阈值来减少多余的特征产生的多余的移动向量。
分析子模块24是基于动态兴趣区域提取算法、计算机视觉算法来检测自动扶梯的运行速度、电梯上乘客运动速度和方向、以及人流密度。个体乘客速度、运动轨迹及方向分析子模块243通过计算机视觉图像处理以及移动向量数算法得到个体乘客的速度和运动轨迹参数。算法的具体流程请参见图15所示,个体乘客速度、运动轨迹及方向分析子模块243的分析参数是移动向量数组,是代表活动图像当前帧与一参考帧被分成多个处理组,每个处理组具有P×Q个像素,并且这P×Q个像素中包括位于每个处理组中心的中心像素,利用移动向量数组来显示物体移动向量及计算运动速度和加速度,根据运动速度检测当前帧中乘客的相对运动速度。采用定点算法对实际视频图像中的运动目标进行运动检测,该方法不仅能检测运动轨迹,还可判断个体乘客的运动方向。
客流阻塞、拥挤率分析子模块244通过计算机视觉图像比对处理算法得到客流阻塞和拥挤度参数。乘客密度算法的具体流程请参见图14所示。客流阻塞、拥挤率分析子模块244还可以运用计算机视觉图像比对处理算法从背景中分离出目标,并可计算出目标的数量、位置、形状、方向和大小,并提供人像的拓扑结构。
分析子模块24中的测定子模块245持续对所分析的图像数据进行测验,来修正图像扭曲、像差问题。
比对引擎3将分析子模块24分析所得的参数和实时的人像拓扑结构图,与预设的安全范围和预设的人像拓扑结构图进行比对,判断电梯上行人的速度、运动轨迹及人流密度是否偏离预设安全范围值。如果偏离则将警报信号发送值警报运行模块5,同时储存相关图像信息至储存子模块22,并建立警报日志。
模块监视引擎4包括模块运行状态汇报子模块40和自动修复子模块42。模块运行状态汇报子模块40不断向计算机视觉监视模块2、比对引擎3、警报运行模块5、嵌入式WEB服务模块6及嵌入式蓝牙无线网络联系模块7提取当前的运行状态。如遇故障,则建立故障日志,并把故障状态的信息发送给管理人员。自动修复子模块42根据检测到的不当运行,在不干扰系统应用程序或业务程序的情况下启动修正操作,确保整套系统不会因为数据流失或损毁而影响整套系统的稳定及准确性。
警报运行模块5收到比对引擎3发送的报警信号,通过语音报警控制子模块50发送语音控制信号至语音报警器13,以语音广播的形式告诉乘客慢行,不要逆向行走,转搭其它电梯等。同时通过闪光报警控制子模块52发送闪光控制信号至闪光报警器14,透过高亮度发光二极管组成的报警灯组对乘客发出强烈警示。
嵌入式WEB服务模块6包括汇报子模块62,向远程外设18发出比对结果和模块监视引擎4做出的故障结论,这样可掌握第一时间发送警报的时机,减少监控人力负担。当然管理人员也可用远程外设18通过局域网络17来访问WEB服务器,了解异常和故障信息。嵌入式WEB服务模块6又包括升级子模块60,借本地端或远程网络对设备的固件和软件进行升级和更新。嵌入式WEB服务模块6中的参数设定子模块64供管理人员根据需要输入计算机视觉监视模块2、模块监视引擎4、比对引擎3以及警报运行模块5等相关的数据。此外,提取下载数据子模块66提供一界面,可随时从数据库中提取下载有关的乘客人流图像。嵌入式蓝牙无线网络联系模块7以无线方式向远程外设18传送相关异常行为信息和模块报错信息。
整个嵌入式自动扶梯计算机视觉人流监察警报系统的启动初始化流程请参见图12所示,在网络17接通和图像采集设备12启动的情况下,依次启动图像采集子模块20、分析子模块24、比对引擎3、警报运行模块5和嵌入式WEB服务模块6,然后判断模块监视引擎4是否接收相关启动,如果接收相关启动则表明系统全部启动。
请参见图3~图8,这些都是本发明的装置所警告的多种情况:乘客的客流密度过大、乘客在电梯上快速奔跑、或者在电梯上逆向行走。
图3示出了上行的自动扶梯入口处的拥堵示意情况,图4示出了下行的自动扶梯入口处的拥堵示意情况。图像采集子模块20采集到乘客拥堵图,储存图像在存储子模块22的数据库220中,智能选择模块241遮盖非电梯部分,再选定图像区域,由客流阻塞、拥挤率分析子模块244运用计算机视觉图像比对算法计算出单位时间内的客流量,再由比对引擎3将所得到的客流量和人流密度与预设的安全范围对比,得出客流密度过大,警报运行模块5据此发出警报信息。嵌入式WEB服务模块6和嵌入式蓝牙无线网络联系模块7通过有线和无线的方式,向管理人员发出异常信息,嵌入式WEB服务模块6同时提供相关视像资料的下载。
图5示出了乘客在上行的自动扶梯上向上奔跑的示意情况,图6示出了乘客在下行的自动扶梯上向下奔跑的示意情况。图像采集子模块20采集电梯上个体乘客的运动图像,储存图像在存储子模块22的数据库220中。智能选择模块241遮盖非电梯部分,再选定图像区域,由个体乘客速度、运动轨迹及方向分析子模块243通过计算机视觉个体乘客图像处理及移动向量数算法得到个体乘客的速度,再由比对引擎3将所得个体乘客速度和预设的安全范围对比,得出个体乘客运动速度过快。警报运行模块5据此发出警报信息。嵌入式WEB服务模块6和嵌入式蓝牙无线网络联系模块7通过有线和无线的方式,向管理人员发出异常信息,嵌入式WEB服务模块6同时提供相关视像资料的下载。
图7示出了乘客在下行的自动扶梯上向上逆行的示意情况,图8示出了乘客在上行的自动扶梯上向下逆行的示意情况。图像采集子模块20采集电梯上个体乘客的运动图像,储存图像在存储子模块22的数据库220中。智能选择模块241遮盖非电梯部分,再选定图像区域。由个体乘客速度、运动轨迹及方向分析子模块243通过计算机视觉个体乘客图像处理及移动向量数算法得到个体乘客的运动轨迹和方向,再由比对引擎3将所得的个体乘客运动轨迹与预设安全轨迹进行比对,得出个体乘客运动轨迹和方向偏离预设安全轨迹和方向。警报运行模块5据此发出警报信息。嵌入式WEB服务模块6和嵌入式蓝牙无线网络联系模块7通过有线和无线的方式,向管理人员发出异常信息,嵌入式WEB服务模块6同时提供相关视像资料的下载。
如图9所示,在必要的时候,管理人员使用远程外设18通过局域网络17提取异常情况信息,亲自到现场给予行为指导。
如图10和图11所示,在本嵌入式自动扶梯监控装置的监控下,上下行的扶手电梯有序运行,乘客的行为和举动都在监控装置的监控范围内。
上述实施例是提供给本领域普通技术人员来实现或使用本发明的,本领域普通技术人员可在不脱离本发明的发明思想的情况下,对上述实施例做出种种修改或变化,因而本发明的保护范围并不被上述实施例所限,而应该是符合权利要求书提到的创新性特征的最大范围。

Claims (22)

1、一种嵌入式计算机视觉自动扶梯人流监察警报装置,包括:
图像采集设备,摄取自动扶梯处的视觉图像;
嵌入式计算机视觉自动扶梯人流监察警报系统,包括:
计算机视觉监控模块,包括:
图像采集子模块,采集自动扶梯上乘客的视觉图像;
储存子模块,其内设的视觉录像存储数据库存储采集到的视觉录像;
分析子模块,对采集到的视觉图像进行分析;
比对引擎,将该分析子模块的分析值与预设的安全范围进行对比;
警报运行模块,将该比对引擎做出的异常行为结论向乘客发出警示信号;
警报设备,根据该警示信号进行警示的动作。
2、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该嵌入式计算机视觉自动扶梯人流监察警报系统还包括:
模块监视引擎,对装置内的各个模块的运行状态进行监控。
3、根据权利要求2所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该模块监视引擎中进一步设置:
模块运行状态汇报子模块,该模块向装置内的各个模块提取其当前的运行状态,建立故障日志,并把故障状态的信息发送出去。
4、根据权利要求2所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该模块监视引擎中进一步设置:
自动修复子模块,根据预测到的不当运行,在不干扰系统应用程序或业务程序的情况下对出错的模块进行修复。
5、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该嵌入式计算机视觉自动扶梯人流监察警报系统还包括:
嵌入式WEB服务模块,通过局域网向远程外设提供装置获得的信息。
6、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该嵌入式计算机视觉自动扶梯人流监察警报系统还包括:
嵌入式蓝牙无线网络联系模块,以无线方式传送装置获得的信息。
7、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该存储子模块还包括:
自动运行重写覆盖子模块,根据设定用新的乘客人流视频图像覆盖旧的图像。
8、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该分析子模块还包括:
智能选择模块,自动覆盖非自动扶梯图像,并根据自动扶梯图像判断自动扶梯的坡度、类型,自动选择相应的预设安全范围参数。
9、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该分析子模块还包括:
图像区域设定模块,自由选择或定义一个特定监控场景范围的图像区域。
10、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该分析子模块还包括:
自动扶梯速度及运行方向分析子模块,检测自动扶梯的实时速度和运行方向。
11、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该分析子模块还包括:
个体乘客速度、运动轨迹及方向分析子模块,分析出乘客的相对运动速度及运动轨迹。
12、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该分析子模块还包括:
客流阻塞、拥挤率分析子模块,分析出单位时间内通过选定区域的客流量和客流密度。
13、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该分析子模块还包括:
测定子模块,持续对所分析的图像数据进行测验,修正图像扭曲和像差。
14、根据权利要求1或11所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该比对引擎将该个体乘客速度、运动轨迹及方向分析子模块分析所得的个体乘客速度、运动轨迹与预设的安全范围参数进行比对,如果分析所得的参数偏离安全范围参数,则发送警报命令给该警报运行模块。
15、根据权利要求1或12所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该比对引擎将该客流阻塞、拥挤率分析子模块分析所得的单位时间的客流量、客流密度与预设的安全范围参数进行比对,如果分析所得参数偏离安全范围参数,则发送警报命令给该警报运行模块。
16、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该警报运行模块进一步包括语音报警控制子模块,以语音信号的方式警示乘客;该警报设备进一步包括语音报警器,接收到该语音报警控制子模块的警示信号后进行语音报警动作。
17、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该警报运行模块进一步包括闪光报警控制子模块,以光信号的方式警示乘客;该警报设备进一步包括闪光报警器,接收到该闪光报警控制子模块的警示信号后进行闪光报警动作。
18、根据权利要求5所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该嵌入式WEB服务模块进一步包括:
汇报子模块,向远程外设发送比对结果。
19、根据权利要求5所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该嵌入式WEB服务模块进一步包括:
参数设定子模块,供管理人员输入装置内各个模块的相关参数。
20、根据权利要求5所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该嵌入式WEB服务模块进一步包括:
升级子模块,通过本地端口或远程网络升级固件和软件。
21、根据权利要求5所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该嵌入式WEB服务模块进一步包括:
提取下载数据子模块,提取下载数据,自动建立相关的数据下载链接。
22、根据权利要求1所述的嵌入式计算机视觉自动扶梯人流监察警报装置,其特征在于,该图像采集设备还包括光源设备。
CN2008100390346A 2008-06-17 2008-06-17 嵌入式计算机视觉自动扶梯人流监察警报装置 Expired - Fee Related CN101607668B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN2008100390346A CN101607668B (zh) 2008-06-17 2008-06-17 嵌入式计算机视觉自动扶梯人流监察警报装置
PCT/CN2009/072310 WO2009152766A1 (zh) 2008-06-17 2009-06-17 嵌入式计算机视觉自动扶梯人流监察警报装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2008100390346A CN101607668B (zh) 2008-06-17 2008-06-17 嵌入式计算机视觉自动扶梯人流监察警报装置

Publications (2)

Publication Number Publication Date
CN101607668A true CN101607668A (zh) 2009-12-23
CN101607668B CN101607668B (zh) 2012-06-27

Family

ID=41433704

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008100390346A Expired - Fee Related CN101607668B (zh) 2008-06-17 2008-06-17 嵌入式计算机视觉自动扶梯人流监察警报装置

Country Status (2)

Country Link
CN (1) CN101607668B (zh)
WO (1) WO2009152766A1 (zh)

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101759090A (zh) * 2010-01-08 2010-06-30 日立电梯(中国)有限公司 具有紧急疏散功能的乘客输送安全系统
CN102254401A (zh) * 2011-05-11 2011-11-23 北京城市系统工程研究中心 一种客流运动智能分析方法
CN102515020A (zh) * 2011-12-21 2012-06-27 江苏美佳电梯有限公司 电梯部件故障识别反馈通知方法
CN102657403A (zh) * 2012-05-28 2012-09-12 上海海事大学 一种电子安全帽系统及场地安全的监测方法
CN102682321A (zh) * 2011-12-06 2012-09-19 江苏美佳电梯有限公司 一种给电梯零部件编码并进行识别的方法
CN103318739A (zh) * 2013-07-03 2013-09-25 北京北安时代电梯安装工程有限公司 自动扶梯和自动人行道人流量统计分析预警监测管理系统
CN103863934A (zh) * 2014-04-02 2014-06-18 日立电梯(广州)自动扶梯有限公司 自动扶梯安全检测装置和方法
WO2015121751A3 (en) * 2014-02-16 2015-10-08 Ghadamossoltani Amir Hussein Intelligent escalator emergency stop system (ie2s2)
CN105096406A (zh) * 2014-04-30 2015-11-25 开利公司 用于建筑能耗设备的视频分析系统和智能楼宇管理系统
CN105446351A (zh) * 2015-11-16 2016-03-30 杭州码全信息科技有限公司 一种能够锁定目标区域瞭望基于自主导航的无人飞艇系统
WO2016147202A1 (en) * 2015-03-13 2016-09-22 Kumaravelu Varadharajan System and method for implementing emergency response platform
CN105989691A (zh) * 2015-02-13 2016-10-05 上海期安智能科技有限公司 一种防踩踏监控装置及方法
CN106127148A (zh) * 2016-06-21 2016-11-16 华南理工大学 一种基于机器视觉的手扶电梯乘客异常行为检测算法
CN106371437A (zh) * 2016-08-30 2017-02-01 尚艳燕 一种平衡车在狭窄空间的自动驻车方法和装置
CN106534779A (zh) * 2016-10-28 2017-03-22 安徽三实信息技术服务有限公司 一种景区安全预警智能监控系统
CN106548158A (zh) * 2016-11-07 2017-03-29 华南理工大学 基于机器视觉的人群密度智能监测系统及方法
CN107662867A (zh) * 2016-07-29 2018-02-06 奥的斯电梯公司 乘客运输机的梯级滚轮监测和维修操作人员监测
CN107844741A (zh) * 2017-09-11 2018-03-27 浙江新再灵科技股份有限公司 自动扶梯上儿童逆行的检测报警系统及方法
US10035685B2 (en) 2016-07-11 2018-07-31 Otis Elevator Company Monitoring system for a passenger conveyor
CN109081210A (zh) * 2017-06-14 2018-12-25 通力股份公司 电梯、扶梯和自动门的自动故障清除
CN109191801A (zh) * 2018-11-02 2019-01-11 北京首钢股份有限公司 一种极限状态监测方法和装置
CN109250616A (zh) * 2018-09-28 2019-01-22 绍兴市特种设备检测院 一种扶梯出入口拥堵检测系统与方法
US10351392B1 (en) 2018-10-23 2019-07-16 Otis Elevator Company Escalator and moving walkway system with safety sensor
CN110263623A (zh) * 2019-05-07 2019-09-20 平安科技(深圳)有限公司 列车攀爬监测方法、装置、终端及存储介质
CN112573336A (zh) * 2019-09-30 2021-03-30 上海申通地铁集团有限公司 自动扶梯的自动启动控制系统和方法
CN113011291A (zh) * 2021-03-03 2021-06-22 上海商汤智能科技有限公司 事件检测方法及装置、电子设备和存储介质
CN114639222A (zh) * 2022-03-22 2022-06-17 广西高重厚泽科技有限公司 一种电扶梯运行安全自动检测报警系统

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2009243442B2 (en) 2009-11-30 2013-06-13 Canon Kabushiki Kaisha Detection of abnormal behaviour in video objects
KR101387042B1 (ko) 2010-08-20 2014-04-29 오티스 엘리베이터 컴파니 원격으로 제어되는 승객 수송기 및 승객 수송기를 원격으로 제어하는 방법
CN103377108A (zh) * 2012-04-28 2013-10-30 鸿富锦精密工业(武汉)有限公司 异常报警系统及方法
CN117864918A (zh) 2016-07-29 2024-04-12 奥的斯电梯公司 乘客运输装置的监测系统、乘客运输装置及其监测方法
CN109977759A (zh) * 2019-01-30 2019-07-05 长视科技股份有限公司 一种面向智慧商超的客流统计监控系统
CN111611938B (zh) * 2020-05-22 2023-08-29 浙江大华技术股份有限公司 一种逆行方向确定方法及装置
WO2021240046A1 (en) * 2020-05-27 2021-12-02 Kone Corporation People mover and people mover arrangement
CN112163774B (zh) * 2020-10-09 2024-03-26 北京海冬青机电设备有限公司 手扶梯人流量评估模型建立方法、人流量分析方法及装置
CN112836667B (zh) * 2021-02-20 2022-11-15 上海吉盛网络技术有限公司 一种用于判断上行扶梯乘客摔倒逆行的方法
CN112919296A (zh) * 2021-04-06 2021-06-08 通力电梯有限公司 用于人员运输装置的自动控制系统及人员运输装置
WO2023036699A1 (de) * 2021-09-10 2023-03-16 Inventio Ag Verfahren und vorrichtung zur überwachung des fahrbetriebes einer personenförderanlage
TWI817311B (zh) * 2022-01-07 2023-10-01 宏碁股份有限公司 電扶梯設備警示方法與電扶梯設備警示系統
CN114871126B (zh) * 2022-05-06 2024-06-11 苏州诚朴智能科技有限公司 外壳尺寸检测装置
GB2622198A (en) * 2022-09-02 2024-03-13 Hack Partners Ltd System and method for managing incoming users of an escalator
CN116101874B (zh) * 2023-04-11 2023-06-06 菱王电梯有限公司 自动扶梯的控制方法、装置、自动扶梯及存储介质

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2875429B2 (ja) * 1992-05-13 1999-03-31 三菱電機株式会社 マンコンベアの乗客異常検出装置
JP3400669B2 (ja) * 1997-02-26 2003-04-28 三菱電機ビルテクノサービス株式会社 遠隔監視システム
CN1194232A (zh) * 1997-03-25 1998-09-30 株式会社日立制作所 自动扶梯的控制装置
CN1291164A (zh) * 1998-02-25 2001-04-11 株式会社日立制作所 乘客输送设备
JPH11278784A (ja) * 1998-03-25 1999-10-12 Hitachi Ltd マンコンベアの制御装置
JP2000007264A (ja) * 1998-06-17 2000-01-11 Hitachi Ltd マンコンベア装置
JP5048912B2 (ja) * 2002-11-06 2012-10-17 インベンテイオ・アクテイエンゲゼルシヤフト エスカレータ及び動く歩道のビデオカメラ監視
JP2004244183A (ja) * 2003-02-14 2004-09-02 Toshiba Elevator Co Ltd エスカレータ装置
CN1919711A (zh) * 2006-09-20 2007-02-28 浙江工业大学 基于图像、语音识别技术的电梯内防暴力装置
JP2008081298A (ja) * 2006-09-28 2008-04-10 Toshiba Elevator Co Ltd 機能可変型遠隔監視システム、機能可変型情報処理装置、機能可変型遠隔監視方法および機能可変型遠隔監視プログラム

Cited By (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101759090A (zh) * 2010-01-08 2010-06-30 日立电梯(中国)有限公司 具有紧急疏散功能的乘客输送安全系统
CN102254401A (zh) * 2011-05-11 2011-11-23 北京城市系统工程研究中心 一种客流运动智能分析方法
CN102682321A (zh) * 2011-12-06 2012-09-19 江苏美佳电梯有限公司 一种给电梯零部件编码并进行识别的方法
CN102515020A (zh) * 2011-12-21 2012-06-27 江苏美佳电梯有限公司 电梯部件故障识别反馈通知方法
CN102657403A (zh) * 2012-05-28 2012-09-12 上海海事大学 一种电子安全帽系统及场地安全的监测方法
CN103318739A (zh) * 2013-07-03 2013-09-25 北京北安时代电梯安装工程有限公司 自动扶梯和自动人行道人流量统计分析预警监测管理系统
CN103318739B (zh) * 2013-07-03 2014-11-19 北京北安时代电梯安装工程有限公司 自动扶梯和自动人行道人流量统计分析预警监测管理系统
WO2015121751A3 (en) * 2014-02-16 2015-10-08 Ghadamossoltani Amir Hussein Intelligent escalator emergency stop system (ie2s2)
CN103863934B (zh) * 2014-04-02 2016-02-03 日立电梯(广州)自动扶梯有限公司 自动扶梯安全检测装置和方法
CN103863934A (zh) * 2014-04-02 2014-06-18 日立电梯(广州)自动扶梯有限公司 自动扶梯安全检测装置和方法
CN105096406A (zh) * 2014-04-30 2015-11-25 开利公司 用于建筑能耗设备的视频分析系统和智能楼宇管理系统
US10176381B2 (en) 2014-04-30 2019-01-08 Carrier Corporation Video analysis system for energy-consuming building equipment and intelligent building management system
CN105989691A (zh) * 2015-02-13 2016-10-05 上海期安智能科技有限公司 一种防踩踏监控装置及方法
WO2016147202A1 (en) * 2015-03-13 2016-09-22 Kumaravelu Varadharajan System and method for implementing emergency response platform
CN105446351A (zh) * 2015-11-16 2016-03-30 杭州码全信息科技有限公司 一种能够锁定目标区域瞭望基于自主导航的无人飞艇系统
CN106127148A (zh) * 2016-06-21 2016-11-16 华南理工大学 一种基于机器视觉的手扶电梯乘客异常行为检测算法
US10035685B2 (en) 2016-07-11 2018-07-31 Otis Elevator Company Monitoring system for a passenger conveyor
CN107662867A (zh) * 2016-07-29 2018-02-06 奥的斯电梯公司 乘客运输机的梯级滚轮监测和维修操作人员监测
CN106371437A (zh) * 2016-08-30 2017-02-01 尚艳燕 一种平衡车在狭窄空间的自动驻车方法和装置
CN106371437B (zh) * 2016-08-30 2020-02-11 尚艳燕 一种平衡车在狭窄空间的自动驻车方法和装置
CN106534779A (zh) * 2016-10-28 2017-03-22 安徽三实信息技术服务有限公司 一种景区安全预警智能监控系统
CN106548158A (zh) * 2016-11-07 2017-03-29 华南理工大学 基于机器视觉的人群密度智能监测系统及方法
CN109081210A (zh) * 2017-06-14 2018-12-25 通力股份公司 电梯、扶梯和自动门的自动故障清除
CN107844741A (zh) * 2017-09-11 2018-03-27 浙江新再灵科技股份有限公司 自动扶梯上儿童逆行的检测报警系统及方法
CN109250616A (zh) * 2018-09-28 2019-01-22 绍兴市特种设备检测院 一种扶梯出入口拥堵检测系统与方法
CN109250616B (zh) * 2018-09-28 2020-05-19 绍兴市特种设备检测院 一种扶梯出入口拥堵检测系统与方法
US10351392B1 (en) 2018-10-23 2019-07-16 Otis Elevator Company Escalator and moving walkway system with safety sensor
CN109191801A (zh) * 2018-11-02 2019-01-11 北京首钢股份有限公司 一种极限状态监测方法和装置
CN110263623A (zh) * 2019-05-07 2019-09-20 平安科技(深圳)有限公司 列车攀爬监测方法、装置、终端及存储介质
CN110263623B (zh) * 2019-05-07 2024-05-28 平安科技(深圳)有限公司 列车攀爬监测方法、装置、终端及存储介质
CN112573336A (zh) * 2019-09-30 2021-03-30 上海申通地铁集团有限公司 自动扶梯的自动启动控制系统和方法
CN113011291A (zh) * 2021-03-03 2021-06-22 上海商汤智能科技有限公司 事件检测方法及装置、电子设备和存储介质
CN114639222A (zh) * 2022-03-22 2022-06-17 广西高重厚泽科技有限公司 一种电扶梯运行安全自动检测报警系统

Also Published As

Publication number Publication date
CN101607668B (zh) 2012-06-27
WO2009152766A1 (zh) 2009-12-23

Similar Documents

Publication Publication Date Title
CN101607668B (zh) 嵌入式计算机视觉自动扶梯人流监察警报装置
KR101942491B1 (ko) 도로교통 상황 모니터링 관제·실시간 교통정보 분석·교통신호제어로 이루어진 인공지능형 cctv통합관제중개제어모듈을 갖는 cctv통합관제센터시스템
WO2021253961A1 (zh) 一种智能视觉感知系统
CN112785798B (zh) 面向电力变电站工程建设项目施工人员的行为分析方法
KR101095528B1 (ko) 연속류도로 사고 및 돌발 자동판별 검지시스템 및 그 방법
CN107331097A (zh) 基于目标位置信息融合的周界防入侵装置与方法
CN113256924A (zh) 一种轨道列车的监控系统,监控方法及监控装置
CN207164939U (zh) 基于目标位置信息融合的周界防入侵装置
JP2019041207A (ja) 監視システム及び監視方法
KR102554662B1 (ko) 이동식 무인탐지장치를 이용한 인공지능 기반 안전관리 시스템
US20150201165A1 (en) Surveillance of a railway track
CN104123544A (zh) 基于视频分析的异常行为检测方法及系统
KR101514696B1 (ko) 교량 안전사고 관리시스템
CN102081844A (zh) 一种交通视频行为分析与报警服务器
KR101036947B1 (ko) 컴퓨터 영상 분석기술을 이용한 범죄 및 사고예방 자동경비 시스템
CN107818312A (zh) 一种基于异常行为识别的嵌入式系统
CN112623919B (zh) 一种基于计算机视觉的自动扶梯智能监控管理系统
CN112112629A (zh) 一种钻井作业过程中的安全业务管理系统和方法
CN109191829A (zh) 道路安全监控方法及系统、计算机可读存储介质
KR20090118582A (ko) 돌발상황 감시 시스템
CN113542690B (zh) 一种建筑施工安全监控系统及方法
KR20100135947A (ko) 서비스의 질을 개선하는 로드 네트워크 용 운영 보조 시스템
CN108557603A (zh) 一种电梯运行实时在线监测数据采集预警报警系统
CN112541439A (zh) 一种电厂智能视频监控方法与系统
CN211630273U (zh) 用于铁路环境的图像智能识别装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120627

Termination date: 20180617