CN102030232A - 电梯监视装置、电梯监视方法以及电梯远程监视系统 - Google Patents

电梯监视装置、电梯监视方法以及电梯远程监视系统 Download PDF

Info

Publication number
CN102030232A
CN102030232A CN201010282171XA CN201010282171A CN102030232A CN 102030232 A CN102030232 A CN 102030232A CN 201010282171X A CN201010282171X A CN 201010282171XA CN 201010282171 A CN201010282171 A CN 201010282171A CN 102030232 A CN102030232 A CN 102030232A
Authority
CN
China
Prior art keywords
image
unit
elevator
car
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201010282171XA
Other languages
English (en)
Inventor
关口真吾
河村洋光
田中正巳
甲斐智史
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Elevator and Building Systems Corp
Original Assignee
Toshiba Elevator Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Elevator Co Ltd filed Critical Toshiba Elevator Co Ltd
Publication of CN102030232A publication Critical patent/CN102030232A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Indicating And Signalling Devices For Elevators (AREA)
  • Maintenance And Inspection Apparatuses For Elevators (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明提供一种电梯监视装置、电梯监视方法以及电梯远程监视系统。该电梯监视装置包括:第一存储单元(27),其存储由设在电梯的轿厢上的拍摄装置以规定时间间隔连续拍摄的图像列所构成的监视对象图像;检测单元(28),其根据所述第一存储单元(27)所存储的所述监视对象图像的图像列检测轿厢室照明的熄灯期间的开始时刻;和提取单元(30),其从所述第一存储单元(27)的所述监视对象图像中提取所述检测单元(28)所检测到的所述开始时刻的规定时间之前的图像。本发明能够根据多个电梯的轿厢的拍摄装置的监视对象图像通过图像处理检测轿厢室内的滞留、污渍以及镜头弄脏等的异常,不再需要将每个电梯的基准图像手动登记在服务器装置中。

Description

电梯监视装置、电梯监视方法以及电梯远程监视系统
技术领域
本发明涉及一种电梯监视装置、电梯监视方法以及电梯远程监视系统。
背景技术
在基于来自监视拍摄装置的图像对电梯的轿厢室内的状况进行远程监视的系统中,是通过图像处理进行事件拍摄装置的自动检测。监视中心通过通信线路从多个电梯收集监视拍摄装置所拍摄到的图像,监视中心内的服务器的软件进行图像处理后对异常进行检测。所谓异常检测是指,暴力检测、逗留检测或者被关在电梯里的检测、乘客恶作剧在拍摄装置的镜头上粘贴口香糖、或用油性记号笔或油漆在镜头上乱写乱画等情形。
监视中心内存储装置中,依次存储有多个电梯的轿厢室内的图像。由于异常的产生是很少有的,因此存储装置的存储区域构成环形缓冲区。服务器软件的图像处理单元对每个电梯所设定的轿厢内监视区域的现在图像和基准图像进行比较,通过图像解析等对异常进行检测。在该图像处理中,需要在存储装置中预先设定每个电梯的基准图像。
以往,已知有使用图像处理进行轿厢内的被困检测、暴力检测、滞留检测的方法。关于被困检测,已知有这样的电梯的轿厢内监视装置:根据利用拍摄装置拍摄电梯的轿厢内所得到的图像中的轿厢地板部的图像检测有无乘客,根据轿厢门的可动部的最上方部的图像检测门的开闭,在乘客和关门都被检测到的状态继续了一定时间时就进行通报(参照专利文献1)。
又,还提案有这样的电梯的被困监视装置:利用监视拍摄装置对电梯室内的地面进行拍摄,算出所拍摄的图像的一部分区域的辉度的平均值,根据该平均值从多个基准图像数据中选择一个图像数据,比较被选择的基准图像数据和所拍摄的输入图像数据,对轿厢内是否存在物体进行判定。(参照专利文献2)。
现有技术文献
专利文献
专利文献1:日本专利第3698584号说明书
专利文献2:日本专利特开2003-40541号公报
发明内容
发明要解决的问题:
但是,就多个电梯的每一个都选定适当的基准图像是困难的。电梯间存在着各种尺寸或形状的差异。由于轿厢室内的内部装饰的不同,其照度也会发生变化。轿厢室内的明亮或形状的特征因每个电梯而不同。
选择适当的基准图像、将所选择的基准图像设定在存储装置中、以及变更基准图像都需要人的手动操作。对于数千个监视拍摄装置,通过手动操作将各基准图像分别设定在装置或终端中的作业在现实中是无法进行的。
专利文献1中所述的轿厢内监视装置为了拍摄作为基准的背景图像,需要检测有无乘用者或检测门的开闭,这就需要确定地板部分以及确定门的最上部等的处理。需要用来从轿厢内向监视中心发报的新的传输线。尤其在对已设的电梯附加该发报功能的情况下,重新增加配置传输线需要费事的施工。
在专利文献1中,在轿厢内监视装置通过图像处理识别出门的开闭的情况下,门的开闭方法也会因电梯的种类而不同,或者图像上的门的位置有时会发生改变。对于轿厢内监视装置,通过手动操作对每个电梯的门的位置进行一一设定是很费事的。又,为了检测有无乘用者,轿厢内监视装置进行从图像中切除地板图像面积等的处理,但是要进行切除处理,就需要对每个电梯设定地面面积计算区域。在更换了拍摄装置的情况下,对轿厢内监视装置再次设定等的再调整也是很费事的。在中央监视中心监视多个电梯的情况下,随着电梯数量的增大,工作量也大大增加。
专利文献2所述的电梯的被困监视装置,对作为基准储存在存储器内的辉度平均值以及图像数据进行设定。由于对多个区域中的每一个都设定辉度,对于被困监视装置,对多个拍摄装置的每一个分别设定区域需要花费不少功夫。在更换了拍摄装置的情况下,还需要进行再调整。电梯的数量增大的话,操作就变得非常麻烦。
如上所述,在现有技术中,需要进行布线施工。由于需要通过手动将基准图像登记在服务器上,因此为了进行调整或设定,操作上比较费事,不得不确保操作人员。布线施工或基准图像的手动设定导致成本提高这样的问题。
因此,本发明鉴于上述课题,其目的在于提供这样一种电梯监视装置、电梯监视方法以及电梯远程监视系统,其能够根据多个电梯的轿厢的拍摄装置的监视对象图像,通过图像处理自动地检测轿厢室内的滞留或污渍、以及拍摄装置镜头污渍等的异常,不需要将每个电梯的基准图像手动登记在服务器装置的工序。
解决问题的手段
为了解决上述课题,根据本发明的一实施形态,提供一种电梯监视装置,其特征在于,包括:第一存储单元,其存储由设在电梯的轿厢上的拍摄装置以规定时间间隔连续拍摄的图像列所构成的监视对象图像;检测单元,其根据所述第一存储单元所存储的所述监视对象图像的图像列检测轿厢室照明的熄灯期间的开始时刻;和提取单元,其从所述第一存储单元的所述监视对象图像中提取所述检测单元所检测到的所述开始时刻的规定时间之前的图像。
又,根据本发明的另一实施形态,提供一种电梯监视装置,其特征在于,包括:第一存储单元,其存储由设在电梯的轿厢上的拍摄装置以规定时间间隔连续拍摄的图像列所构成的监视对象图像;检测单元,其根据所述第一存储单元所存储的所述监视对象图像的图像列检测轿厢室照明的熄灯期间结束的亮灯时刻;提取单元,其从所述第一存储单元的所述监视对象图像中提取确认期间内的多个图像,所述确认期间将所述检测单元所检测到的所述亮灯时刻的规定时间之后作为开始,将从该开始经过了一定期间的时刻作为结束;和比较单元,其运算所述提取单元所提取的所述多个图像中的两个之间的差分、或者所述多个图像中的某图像与所述熄灯期间的开始时刻的规定时间之前的图像之间的差分,比较该差分的变化量是否在预先存储的阈值以下,以检测所述轿厢内有无异常。
又,根据本发明的另一实施形态,提供一种电梯监视方法,其特征在于,与电梯的终端装置之间授受信息的监视中心侧的控制单元,接收设在该电梯的轿厢中的拍摄装置以规定时间间隔拍摄的监视对象物的图像,设置在对所述控制单元接收到的图像进行处理的图像处理单元中的取得单元将由连续的图像列构成的监视对象图像取入第一存储单元,设在所述图像处理单元中的检测单元根据所述监视对象图像的图像列对轿厢室照明的熄灯期间的开始时刻进行检测,设在所述图像处理单元中的提取单元从所述第一存储单元的所述监视对象图像中提取被检测到的所述开始时刻的规定时间之前的图像。
又,根据本发明的另一实施形态,提供一种电梯监视方法,其特征在于,与电梯的终端装置之间授受信息的监视中心侧的控制单元,接收设在该电梯的轿厢中的拍摄装置以规定时间间隔拍摄的监视对象物的图像,设置在对所述控制单元接收到的图像进行处理的图像处理单元中的取得单元将由连续的图像列构成的监视对象图像取入第一存储单元,设在所述图像处理单元中的检测单元根据所述监视对象图像的图像列对轿厢室照明的熄灯期间结束的亮灯时刻进行检测,设在所述图像处理单元中的提取单元,从所述监视对象图像中提取确认期间内的多个图像,所述确认期间将所述亮灯时刻的规定时间之后作为开始,将从该开始经过了一定期间的时刻作为结束,设在所述图像处理单元中的比较单元,运算被提取的所述多个图像中的两个之间的差分、或者所述多个图像中的某个图像与所述熄灯期间的开始时刻的规定时间之前的图像之间的差分,比较该差分的变化量是否在预先存储的阈值以下,以检测所述轿厢内有无异常。
又,根据本发明的另一实施形态,提供一种电梯监视远程监视系统,其特征在于,包括:分别具有轿厢以及终端装置的多个电梯,所述轿厢中设有对监视对象物进行拍摄的拍摄装置;通过通信线路与这些电梯的各个终端装置之间授受信息的监视中心的服务器装置,所述服务器装置包括:第一存储单元,其存储监视对象图像,所述监视对象图像由所述多个电梯的各拍摄装置以规定时间间隔拍摄的各轿厢内的连续的图像列所构成;检测单元,其根据所述第一存储单元所存储的所述监视对象图像的图像列检测各轿厢室照明的熄灯期间的开始时刻;和提取单元,从所述第一存储单元的所述监视对象图像中提取所述检测单元所检测的所述开始时刻的规定时间之前的图像。
又,根据本发明的另一实施形态,提供一种电梯监视远程监视系统,其特征在于,分别具有轿厢以及终端装置的多个电梯,所述轿厢中设有对监视对象物进行拍摄的拍摄装置;和通过通信线路与这些电梯的各个终端装置之间授受信息的监视中心的服务器装置,所述服务器装置包括:第一存储单元,其存储监视对象图像,所述监视对象图像由所述多个电梯的各拍摄装置以规定时间间隔拍摄的各轿厢内的连续的图像列所构成;检测单元,其根据所述第一存储单元所存储的所述监视对象图像的图像列检测各轿厢室照明的熄灯期间结束的亮灯时刻;提取单元,从所述第一存储单元的所述监视对象图像中提取确认期间内的多个图像,所述确认期间将所述检测单元所检测到的所述亮灯时刻的规定时间之后作为开始,将从该开始经过了一定期间的时刻作为结束;和比较单元,运算所述提取单元所提取的所述多个图像中的两个之间的差分、或者所述多个图像中的某图像与所述熄灯期间的开始时刻的规定时间之前的图像之间的差分,比较该差分的变化量是否在预先存储的阈值以下,以检测各所述轿厢内有无异常。
发明的效果
采用本发明,服务器装置能够根据多个电梯的轿厢的拍摄装置的监视对象图像,通过图像处理自动地检测轿厢室内的滞留或污渍、以及拍摄装置镜头污渍等的异常。由此可以省略手动登记每个电梯的基准图像或详细设定轿厢门的位置等的工序。
附图说明
图1是本发明的第1实施形态的电梯远程监视系统的构成图。
图2是电梯的构成图。
图3是拍摄装置所拍摄的图像的一个实例的图。
图4是本发明的第1实施形态的电梯监视装置的构成图。
图5是服务器的功能框图。
图6是图像处理单元的功能框图。
图7是用来说明本发明的第1实施形态的电梯监视方法的流程图。
图8是用来说明轿厢内熄灯、亮灯检测单元的熄灯时刻提取处理的图。
图9是服务器内的图像处理单元的功能框图。
图10是用来说明本发明的第2实施形态的电梯监视方法的流程图。
图11的(a)是示出多个熄灯期间和基准图像之间的关系的图,图11的(b)是示出多个熄灯期间和基准图像之间的其他关系的图。
图12的(a)是用来说明比较单元的比较处理的图,图12(b)是用来说明比较单元的其他比较处理的图。
图13是用来说明本发明的第3实施形态的电梯监视方法的流程图。
图14是以时序示出注目期间和熄灯期间之间关系的图。
图15是用来说明本发明的第4实施形态的电梯监视方法的流程图。
图16的(a)是用来说明比较单元根据框架间差别检测变化的处理的图,图16的(b)是对基准图像和移动确认期间用的图像之间的比较处理进行说明的图。
图17是示出本发明的第5实施形态的电梯监视装置所使用的图像中的监视区域的图。
具体实施方式
以下,参照图1至图18对本发明的实施形态的电梯监视装置、电梯监视方法以及电梯远程监视系统进行说明。另外,在各图中对同一部位标记相同的符号,并省略其重复说明。
(第1实施形态)
图1是本发明的第1实施形态的电梯远程监视系统的构成图。电梯远程监视系统1是设置有对所有电梯轿厢的内部进行拍摄的拍摄装置、通过各拍摄装置所拍摄的图像对轿厢内进行监视的系统,其包括:对所有的电梯5的运行状况进行一元化管理的监视中心2,监视中心2内的电梯监视装置3、和分别具有拍摄装置且能够通过通信线路4与该电梯监视装置3通信的多个电梯5。
电梯监视装置3对于各电梯5生成呼叫信号,取得应答该呼叫信号而从各电梯5发送的运行状况数据,对各电梯5的运行状况进行监视。电梯监视装置3具有终端、显示器以及服务器。电梯监视装置3接收各轿厢室内的图像并储存这些图像,通过进行图像比较对某一电梯5中是否发生异常进行监视。所谓异常是指,拍摄装置15的镜头弄脏、镜头上粘有异物、有人被困在轿厢室内、人或者物体在轿厢室内滞留规定时间以上、以及轿厢室的内墙或地面弄脏等情形。在程序检测到异常的情况下,或者人通过目视确认异常并进行了所赋予的操作的情况下,输出警报。
多个电梯5设于建筑物6a、6b、6c……中。电梯5相对于监视中心2分散在包含远距离的地域的较广范围。例如建筑物6a、6b、以及6c中分别设有一部电梯5、两部电梯5、以及三部电梯5。
图2是电梯5的构成图。在该图中,具有与上述符号相同的符号的要素表示与这些要素相同的要素。电梯5具有:设在建筑物6a中的升降通道7、设在升降通道7的上部的带滑轮的卷扬机8、绕卷在该卷扬机8的滑轮上的缆索9、安装在该缆索9的一端的轿厢10、安装在缆索9的另一端的平衡锤11、和进行电梯5的运行控制的控制盘12。卷扬机8根据控制盘12输出的控制信号使滑轮旋转。通过驱动该卷扬机8,轿厢10和平衡锤11介由缆索9在升降通道7内进行吊桶式的移动。轿厢10和控制盘12通过授受数据用的尾线13相连接。控制盘12具有卷扬机8的驱动控制、电梯5整体的控制、以及通信线路4上的数据的通信控制等各种功能。控制盘12具有搭载了CPU、ROM、RAM等的电路基板。
在轿厢10的轿厢室天花板安装有荧光灯等照明器材14。轿厢10的轿厢室内设有监视用的拍摄装置15。在轿厢10的轿厢顶,设有电梯终端装置16,该电梯终端装置16经由通信线路4将拍摄装置15所拍摄的图像数据发送给电梯监视装置3。电梯终端装置16存储电梯5的动作状态信息,将动作状态信息发送给电梯监视装置3。
拍摄装置15以一帧期间间隔连续地对监视区域进行拍摄,生成图像数据。所谓一帧期间是指电梯监视装置3内的显示器显示某一帧的图像到显示下一帧的图像之间的期间。图像数据是指静止图像数据。一个图像数据是在显示器上显示一帧期间,在下一帧期间开始时被下一个图像数据更新。根据帧期间的长度,被播放的图像由人识别出是静止图像、动画像或者低速拍摄的动画像。拍摄装置15能够进行广角拍摄,其以拍摄视角朝向轿厢门的状态安装在轿厢室的一角部的上部。例如如图3所示,拍摄装置15被固定在轿厢室,使得轿厢门全部关闭时的2块门板的门抵接部(戸当たり部)的上下与监视器图像的上下基本一致。
电梯终端装置16在来自拍摄装置15的图像数据上添加电梯监视装置3的接收目的地信息等之后,变换为传输用信号,将信号发送给控制盘12。控制盘12通过电缆17将数据信号发送给通信线路4。电梯监视装置3保存拍摄装置15所拍摄的各图像,根据所保存的图像中的某两幅图像的辉度变化提取熄灯的时刻以及亮灯的时刻。
设在建筑物6b、6c…中的电梯5的构造与设在建筑物6a中的电梯的构造相同。
图4是电梯监视装置3的构成图。图中,与前述的符号相同的符号表示与它们相同的要素。电梯监视装置3包括:与通信线路4之间收发数据的服务器18(服务器装置)、在某一电梯5产生了异常的情况下分别从服务器18通知确定电梯5的信息的多个监视台19、连接这些监视台19和服务器18的LAN20、以及图像存储装置21,该图像存储装置21与LAN20连接,且存储有通过服务器18从各电梯5接收的图像数据中的各拍摄装置15的一定时间的图像数据。
服务器18、各监视台19使用的是个人计算机。图像存储装置21具有多个存储区域,将分别来自各拍摄装置15的图像数据与拍摄装置ID相对应地进行储存。图像存储装置21采用了多个硬盘驱动器。各存储区域具有环形缓冲区结构。各存储区域中的写有最旧的图像数据的存储区域被开放,后面接受的图像数据覆盖该存储区域,图像数据向环形缓冲区的写入轮上一遍。
图5是服务器18的功能框图。服务器18具有:存储建筑物6a等的位置信息和最大楼层数量等的数据库22、控制单元24和图像处理单元25,该控制手段24具有该数据库22的检索功能以及通过输入输出接口部23在多个监视台19以及各电梯终端装置16之间收发信息的功能,该图像处理单元25对该控制单元24所取得的图像进行图像处理以及图像比较。
控制单元24使得各电梯终端装置16向各照明器材14通知亮灯/熄灯的指示信号。
如果一定时间T1内没有呼叫操作,则电梯5将轿厢内照明熄灭后处于待机状态。若收到某一层登记呼叫时,电梯5打开照明,移动至呼叫楼层后开门。控制单元24在接收来自电梯5侧的熄灯信号或亮灯信号的时刻,对轿厢室的亮灯或者熄灯进行检测。控制单元24具有RAM,在该RAM中存储有图像比较处理或控制处理所需的各种设定值。控制单元24以通用的CPU计时器实现时钟功能或者对图像的帧数量进行计数的计数功能。控制单元24通过该通用的计数单元对自动熄灯的时间T1进行计数。
本实施形态的电梯监视装置3中,在应用软件等通过监视员的操作向电梯监视装置3发出指令时,控制单元24抽取出熄灯时刻之前30秒等过去T2时间前的图像。该电梯监视装置3中,图像处理单元25检测到熄灯时,控制单元24提取熄灯时刻的时间T2之前的时间或者帧的储存图像将该所提取的图像作为基准图像用于图像比较。与人选择基准图像将其预先登记在服务器中的现有技术不同的是,电梯监视装置3将熄灯时刻前T2时间的图像疑似地决定为基准图像。电梯监视装置3在录像之后,以监视员的指示为契机在储存图像中进行检索,决定基准图像。
图像处理单元25通过控制单元24读取存储在图像存储装置21中的图像,对图像间的辉度的差分进行运算。图6是图像处理单元25的功能框图。与前述的符号相同的符号表示与它们相同的要素。图像处理单元25具有以下功能:从监视区域的图像中提取轿厢室内部的照明熄灯的时间或者帧,且提取从检测到熄灯的时候开始某一定时间T2前的图像。
图像处理单元25包括:图像取得单元26(取得单元),从图像存储装置21中取得过去T3时间(例如1分钟)的帧数量的图像数据;第一图像存储单元27(第一存储单元),具有至少过去T3时间的图像数据的存储容量;轿厢内熄灯、亮灯检测单元28(检测单元),根据图像取得单元26所取得的图像数据对电梯5的轿厢10内熄灯或者亮灯进行判定。图像取得单元26输出存储在图像存储装置21中的每帧的监视图像数据。图像处理单元25中使用CPU、ROM、RAM等。
轿厢内熄灯、亮灯检测单元28对2帧或者3帧以上的图像间进行比较。在轿厢内熄灯、亮灯检测单元28比较两帧的情况下,轿厢内熄灯、亮灯检测单元28对在时间上分开的两帧或者相邻的两帧进行比较。该轿厢内熄灯、亮灯检测单元28比较多个例如2帧的图像数据间的像素辉度,在辉度的差比由控制单元24预先设定的阈值大的情况下,对照明器材14的熄灯或者亮灯进行判定。轿厢内熄灯、亮灯检测单元28在照明器材14初始时为亮灯时,在前后2帧图像中后面的图像的辉度与前面的图像的辉度大致相等的情况下,判定为照明器材14正亮灯,又,在后面的图像的辉度比前面的图像的辉度充分小的情况下,判定为照明器材14已熄灯。轿厢内熄灯、亮灯检测单元28将检测出熄灯或者亮灯时的图像数据的帧编号或者时间作为时刻信号(タイミンゲ信号)输出。
图像处理单元25还包括:第二图像存储单元29(第二存储单元);图像提取单元30(提取单元),根据轿厢内熄灯、亮灯检测单元28所通知的时刻信号从存储在图像存储单元27中的图像数据中将确定的图像数据读出给第二图像存储单元29;图像转换器31,将图像数据从图像取得单元26以及第二图像存储单元29中的某一方输出给监视器32(显示单元)。监视器32是监视台19的显示器,服务器18的显示器、指示器等。
图像提取单元30接收到熄灯的时刻信号时,从存储在第一图像存储单元27中的过去1分钟的图像数据中提取T2(例如30秒钟)前的图像数据。图像转换器31是硬件开关、某显示器上的触摸屏、或者个人计算机的输入操作设备等。通过目视监视器32的人的操作赋予图像转换器31转换指令。
由此,拍摄装置15对包含轿厢室出入口的轿厢室内前方的监视区域进行拍摄。轿厢室内的图像常时地从拍摄装置15发送到监视中心2内的图像存储装置21。
作为一个实例,安装在服务器18上的应用软件显示对话画面。监视员对应用软件输入确定电梯5的电梯识别信息和检索从熄灯时开始30秒之前的各图像的指令。
图7是用来说明本实施形态的电梯监视方法的流程图。在图像处理单元25的图像比较处理的初期状态下,第1帧的图像数据被写入第一图像存储单元27。
在步骤A1,图像取得单元26取得轿厢室内图像,将该图像作为第2帧的图像数据存储到第一图像存储单元27中。
在步骤A2中,轿厢内熄灯、亮灯检测单元28计算第1帧以及第2帧之间的差分图像G(2)-G(1),对该差分图像的辉度和阈值进行比较。轿厢内熄灯、亮灯检测单元28与比较处理平行地将所取得的图像数据逐次分别在第一图像存储单元27中存储T3时间(1分钟等)。
在步骤A3中,轿厢内熄灯、亮灯检测单元28判定辉度的差是否超过了阈值。轿厢内消灯、亮灯检测单元28计算第2帧的图像G(2)与第1帧的图像G(1)的差分图像。照明器材14的初始状态是亮灯状态。辉度的差小于阈值时,则轿厢内熄灯、亮灯检测单元28判定轿厢室内的光亮没有变化,照明处于亮灯中的状态,通过“否”路径,轿厢内熄灯、亮灯检测单元28在步骤A4中反复增加变量i,返回到步骤A1的处理。步骤A3的照明的打开或者关闭的判定中,轿厢内熄灯、亮灯检测单元28还可以增加对辉度的差超过阈值的次数进行计数的处理。
在步骤A3中,如果辉度的差超过阈值,轿厢内熄灯、亮灯检测单元28检测出照明器材14已熄灯。此时,轿厢内熄灯、亮灯检测单元28输出熄灯时的图像数据的帧编号。在步骤A3中通过“是”路径,在步骤A5中,图像提取单元30从第一图像存储单元27中分别读取熄灯时刻的T2时间之前(例如30秒前)的帧的图像数据,将所读取的各图像数据存储在第二图像储存单元29中。
图8是用来说明轿厢内熄灯、亮灯检测单元28的熄灯时刻的提取处理的图。该图的一块表示被输入到轿厢内熄灯、亮灯检测单元28中的一个图像,多个图像沿着时间轴以帧期间间隔排列。在一帧期间中,相同图像被图像处理或者被连续显示。轿厢室内的熄灯以及亮灯被反复多次,本实施形态的电梯监视装置3中,每次从亮灯检测单元28通知熄灯时,图像提取单元30赋予连续的编号j(j=1、2……),该编号j表示该熄灯是从一日的开始时刻起的第几次的熄灯。在第j次的熄灯中,从第j次的熄灯的开始熄灯起T2时间之前的帧的图像作为图像Gt2(j)被提取出。
轿厢内熄灯、亮灯检测单元28提取图像Gt2(1)、Gt2(2)、Gt2(3)(附加标记t2表示T2时间前),将提取图像存储在图像存储单元29中。提取出即将熄灯之前的轿厢室内正亮灯时的图像。例如第二次熄灯,在熄灯时刻之前30秒的轿厢室正亮灯时拍摄的帧的图像被提取为Gt2(2)并被存储。
又,也可以将熄灯的T2之前的图像的前后附近的图像平均化后再使用,以此来替代该熄灯的T2之前的图像。但是,一定时间T3以及T2具有T2≤T3的关系,可以以所拍摄的帧数来替代。
图7的步骤A6以后,监视器32开始播放图像Gt2(j)。第二图像存储单元29中,依次播放图像Gt2(j)之后的图像。监视员目视监视器32,图像被依次显示。由于可以追溯存储在第二图像存储单元29中的图像履历,因此人可以找到照明熄灯了时的场面、或者即将熄灯之前或熄灯之后的场面。
这样,通过服务器18内的差分运算能够模拟地生成多个基准图像Gt2(j),从而得到这些Gt2(j)。人依次对这些Gt2(j)进行画面显示的话,能够检测遗忘物放置在轿厢10中的时刻、或在拍摄装置15上粘附口香糖的时刻。在一日中例如产生10次熄灯时,会得到10幅模拟基准图像。可知在第四次和第五次之间将口香糖粘附在拍摄装置15上等。可知在哪个时刻产生了异常。能够检测人或纸板的滞留。监视员从常时监视的劳力中解放出来。
上述说明是1部电梯5的处理的实例。监视中心2内的图像存储装置21中,从多个电梯5的拍摄装置15常时写入各个轿厢室内的图像。服务器18对各个电梯5进行相同处理。所希望的电梯5的轿厢室熄灯前的时间的图像被提供给监视员。
在监视员发现了异常产生时刻的情况下,监视员不需要追溯并播放过去24小时的图像。服务器18自动地从存储装置的存储图像中检索熄灯时的时刻,依次将熄灯发生时的30秒之前的图像一帧接一帧(コマ送り)地播放,因此可以容易地圈定放置遗忘物的时间带。监视员可以把握可疑物品实在什么时候放置在轿厢内的。
通常,从节能的观点考虑,如果一定时间T1没有操作,电梯5熄灭轿厢内照明而处于待机状态,当从某一楼层发出呼叫时,电梯5移动至呼叫楼层并打开门。因此,轿厢内熄灯的一定时间T2(<T1)之前,轿厢10内基本的上是关门的,处于无人的状态,因此,本实施形态的电梯监视可以将轿厢内熄灯起一定时间T2之前的时刻作为模拟的基准图像来使用。
一般地,服务器18的处理中,被困检测、暴力检测等图像处理的计算量较大,对于处理器来说,处理比较繁重。在电梯远程监视系统1中,应作为输出警报的契机的事件可分为应实时监视的事件、和虽然没有进行实时监视的紧迫性但仍需要检测的事件。口香糖粘附在拍摄装置的镜头上的事件、或拍摄装置的镜头被乱涂乱画的事件最好能够进行实时检测,但并不没有要求实时检测该事件的紧迫性。采用本实施形态的电梯监视方法,能够以简便的软件结构对无需实时监视的事件进行检测,因此可以降低成本。
在现在有技术中,能够将所拍摄的原始图像显示在监视器32上来进行监视,但是人难以监视数百、或数千个电梯5的轿厢室。又,在电梯5的电梯终端装置16上单独安装图像处理功能,监视对于拍摄装置15等的恶作剧,由于单独设定基准图案比较费事,因此这样操作比较困难。本实施形态的电梯监视方法中,一个服务器18可以将所有电梯5的异常一并地全部检测出来,因此能够容易地监视困于轿厢10内、或遗忘物等情况。轿厢室内发生异常的几率非常低,任一电梯5都正常运行的情况还是压倒性地多。熄灯以及亮灯能够通过软件处理比较宏观地检测出,无论是哪个图像,一律明亮或黑暗的状态都被容易地辨别出来。电梯5的拥挤程度发生变动,每个电梯的轿厢室内的照度或内部装饰都不同,对应于数百或数千数量的电梯5分别适当地设定基准图像需要花费人大量的劳力。
相对于此,电梯远程监视系统1能够自动地且高精度地提取能用作为基准图像的图像,减轻监视员的监视负荷。
(第2实施形态)
本发明的第2实施形态的电梯监视装置是在第1实施形态的电梯监视装置3中设置了自动检测轿厢室内的异常发生的功能的装置。本实施形态的电梯监视装置将从熄灯开始一定时间T2之前的图像作为基准图像预先设定在内部存储器中,通过对该基准图像和来自拍摄装置15的现在图像进行比较,来检测异常。该比较处理中,对于每个电梯5进行以下判定:测量轿厢10内的乘客人数,判定轿厢10内是否有乘客被困;判定有无人或物的滞留、或判定轿厢室内有无污渍;以及判定拍摄装置15的镜头或盖子上是否粘有口香糖等或者是否被乱写乱画等弄脏。
包含本实施形态的电梯监视装置的电梯远程监视系统与第1实施形态的电梯远程监视系统1相同。本实施形态的电梯的监视方法如下:被安装在本実施形態的电梯监视装置中的控制程序通过比较从电梯5接收的图像,检测乘客恶作剧在拍摄装置15的镜头或盖子上粘贴口香糖的情况、用油性记号笔或油漆在镜头或盖子上乱写乱画的情形、人在轿厢室内滞留规定时间以上的情形,或者轿厢室的内壁或地面弄脏的情形等。服务器18检测到上述情况时,将其作为电梯5的异常通知给监视台19。
图9是服务器18内的图像处理单元的功能框图。与前述的符号相同的符号表示与它们相同的要素。图像处理单元33具有提取熄灯时的帧且提取检测到熄灯时某一定时间之前的图像的功能、乘客人数测量功能、和异常发生的检测功能。
未图示的控制单元24被输入从图像处理单元33输出的图像比较的结果,在图像处理单元33检测到异常发生的情况下,将警报输出给监视台19以及产生异常的电梯终端装置16。
图像处理单元33具有比较单元34和判定单元35,所述比较单元34对存储在第二图像存储单元29中的基准图像的辉度和图像取得单元26所取得的现在图像Gi的辉度之间的差分进行运算,所述判定单元35判定比较单元34所运算的差分值与预先保存的阈值的大小。轿厢内熄灯、亮灯检测单元28检测亮灯中的轿厢室熄灯的情况,和熄灯中的轿厢室亮灯的情况。比较单元34以及图像处理单元33中使用CPU、ROM、RAM等。
多个电梯5分别将轿厢室内的图像常时发送给这样的构造的本实施形态的电梯监视装置。图像处理单元33对每一部电梯5进行图像比较处理。
图10是用来说明本实施形态的电梯监视方法的流程图,步骤A1至步骤A4的处理与图7的例子相同。图像取得单元26取得轿厢室内图像(步骤A1),将该图像存储到第一图像存储单元27中。轿厢内熄灯、亮灯检测单元28根据存储在该第一图像存储单元中的图像,计算前后两帧之间的差分图像,比较该差分图像的辉度与阈值(步骤A2)。轿厢内熄灯、亮灯检测单元28判定辉度的差是否超过阈值(步骤A3)。辉度的差小于阈值时,轿厢内熄灯、亮灯检测单元28通过“否”路径,对下一个帧进行处理(步骤A4、步骤A1)。
在本实施形态中,在步骤A3,辉度的差超过阈值时,通过“是”路径,在步骤A10中,比较单元34将存储在第二图像存储单元29中的熄灯前的图像Gt2(j)作为基准图像(背景图像)模拟地读取到RAM中。熄灯开始T2时间(例如30秒)之前的图像被读取。
图11(a)是示出多个熄灯期间与基准图像Gt2(j)之间的关系的图。该图中示出,第1个(j=1)熄灯期间、第2个(j=2)熄灯期间、……、第n个(j=n)熄灯期间、以及第(n+1)个(j=n+1)熄灯期间。Gi是表示来自图像取得单元26的现在图像。最初的提取图像Gt2(1)被选择作为基准图像。示出了成为与Gt2(1)比较的对象的现在图像Gi随时间一起变更的情形。
比较单元34的处理是从第二图像存储单元29中提取位于第1个熄灯期间开始之前30秒的帧36的图像Gt2(1)。比较单元34将该图像Gt2(1)作为比较对照用的基准图像暂时读取到RAM上。与人通过手动操作将基准图像预先登记设定在服务器18中的现有技术相比不同的是,本实施形态中,比较单元34设定模拟基准图像。
在步骤A11(图10)中,比较单元34进行模拟基准图像Gt2(1)与来自图像取得单元26的现在图像Gi之间的差分运算,比较运算结果和阈值。现在图像Gi、Gi+1、……被持续输入到比较单元34中。在亮灯期间中,比较单元34依次逐个比较模拟基准图像Gt2(1)和输入图像。
在步骤A12,判定单元35判定被依次运算输出的比较结果和阈值的大小,在辉度的差产生阈值以上的变化的情况下,判断为发生了异常。在步骤A12中,通过“是”路径,在步骤A13中,图像处理单元33检测异常。图像处理单元33输出警报,向监视台19等通知异常发生。例如检测到在拍摄装置的镜头或盖子上粘附有异物等的情形。发出警报,通知检测到了因恶作剧而在镜头或盖子上粘附口香糖的情形、或用油性记号笔在镜头或盖子上乱写乱画的情形等。在步骤A12中,在辉度的差产生阈值以上的变化的情况下,通过“否”路径,判定单元35进行步骤A4的处理等。
由于第一次最初提取的图像作为模拟基准图像Gt2(1)固定在存储器上,因此一个模拟基准图像Gt2(1)的辉度和现在图像的辉度之差示出轿厢内产生的现象或拍摄装置拍摄条件的变化。如果发生在拍摄装置的镜头上粘口香糖这样的恶作剧时,比较运算的结果表示大值的期间持续。因此,判定单元35能够检测出异常。其他的电梯5的图像比较处理也与该实例同样。
图11(a)是最初提取基准图像的情形的实例,但比较单元34也可以进行在每次熄灯时变更基准图像的处理,以此来替代持续使用最初的基准图像Gt2(1)。
图11(b)是示出多个熄灯期间与基准图像Gt2(j)之间的其他关系的图。基准图像在每次熄灯时更新。相对于被更新的基准图像,与该基准图像比较的对象图像Gi也随着时间的变化而变化。具体地说,图像提取单元30提取位于第1个熄灯期间开始之前30秒的帧37的图像Gt2(1)。接下来,图像提取单元30提取位于第2个熄灯期间开始之前30秒的帧38的图像Gt2(2),将图像Gt2(2)设定为基准图像。以后,同样地,图像提取单元30重新设置基准图像。在每次熄灯时重设基准图像,重设之后,基准图像被再次设定在RAM上。图像提取单元30将基准图定期地更新为像帧39的图像Gt2(n)、帧40的图像Gt2(n+1)等。其后的比较步骤与图11(a)的实例相同。
轿厢内照明的熄灯和亮灯的差异能够利用拍摄图像整体的辉度差容易地检测出来,因此采用本实施形态的电梯监视装置以及电梯监视方法,不需要人手动设定拍摄装置15的监视区域。
(第3实施形态)
第2实施形态中的异常检测处理中,比较单元34暂时将熄灯前图像Gt2(j)作为基准画像存储,依次比较该熄灯前图像Gt2(j)和所接收的现在图像Gi。
第3实施形态的异常检测处理中,比较单元34比较熄灯前图像Gt2(j)、(j=1、2、3、4、……)。
本发明的第3实施形态的电梯监视装置的构造和第2实施形态的电梯监视装置的构造相同。包含本实施形态的电梯监视装置的电梯远程监视系统也与第2实施形态的电梯远程监视系统1相同。
拍摄装置15的图像数据从1部电梯5发送到这样的构造的本实施形态的电梯监视装置。在图像处理单元33中,图像取得单元26取得来自电梯5的图像数据,图像提取单元30对多次熄灯发生时的熄灯前图像进行提取。第二图像存储单元29中存储有熄灯前图像Gt2(1)、Gt2(2)、……、Gt2(k)、Gt2(k+1)。
图12(a)是用来说明比较单元34的比较处理的图。熄灯前图像Gt2(j)的比较方法是将图像Gt2(1)作为基准,依次将该图像Gt2(1)和Gt2(j)(j=2、3、4、……)进行比较。
图13是用来说明本实施形态的电梯监视方法的流程图。比较单元34反复将变量j设定为2,在步骤B1中比较Gt2(1)和Gt2(2),计算差分Δ。在步骤B2中,比较单元34判定差分Δ是否在预先设定的阈值A以上。差分Δ为0或小于A的小值时,通过“否”路径,比较单元34在步骤B3中进行变量增加处理,进行步骤B1的处理。接下来,比较单元34在步骤B1、步骤B2中,比较Gt2(1)与Gt2(3)的差分Δ和阈值A。接着,逐次比较单元34比较Gt2(1)和Gt2(j)并取得差分。
在步骤B2的处理中j=k时,差分Δ在A以上的情况下,通过“是”路径,在步骤B4中,比较单元34确定此时的k的熄灯前图像Gt2(k)。判定单元35判定在图12(a)的图像Gt2(k)被拍摄的时间和图像Gt2(k+1)被拍摄的时间之间发生某事件而发生了异常。检测出在这两个图像被拍摄之间,发生了轿厢室内有人滞留的情形、轿厢室内因乱写乱画而弄脏的情形、或者拍摄装置的镜头或盖子上粘有口香糖而被弄脏的情形等异常。或者检测出照明器材14或电源系统发生了问题等情况。其他的电梯5的图像比较处理也与该实例同样。
这样,由于依次求出熄灯前图像Gt2(j)间的差分Δ,因此可以确定在哪个时刻发生可异常。本来希望差分Δ的值最好不是0以外的值,但是如果检测到0以外的值时,可以容易地检测得知在第k个熄灯期间和第k+1个熄灯期间之间发生了异常。
在判明熄灯期间时,判定单元35将所确定的熄灯期间信息通知给服务器18内的控制单元24,服务器18将异常的发生通知给监视台19。自动地检验熄灯期间内的图像。通过图像比较处理检测口香糖粘在拍摄装置的镜头上的事件,以此来替代对该事件进行实时监视。在作为监视对象的电梯5的数量多的情况下,不使服务器18具有常时实时监视恶作剧的功能,也能够检测异常本身。可以不对服务器18增加负担地进行异常检测。
又,在多个熄灯前图像Gt2(j)之间进行图像比较的方法中,可以对在时间上连续的两个熄灯前图像Gt2(j)、Gt2(j+1)(但j=1、2、3、4、……)进行比较,来替代将Gt2(1)固定地用作为基准图像。
图12(b)是用来说明比较单元34的其他比较处理的图。比较单元34将图像Gt2(1)选择为基准图像,对该图像Gt2(1)和图像Gt2(2)进行比较。接下来,比较单元34将图像Gt2(2)选择为基准图像,对该图像Gt2(2)和图像Gt2(3)进行比较。以后,比较单元34依次变更基准图像,进行比较处理。比较差分Δ是在A以上还是为0或小于A的小值的处理、以及确定得到差分Δ>=A时的熄灯前图像Gt2(k)的处理与图13的实例相同。
这样,发生熄灯之后,基准图像被更新,因此如果相互比较基准图像的话,在此之间粘上了口香糖的事件能够被检测出。
因此,作为比较单元34所使用的比较处理的形态,可以采用图12(a)以及图12(b)中的任一个。例如根据电梯远程监视系统1应该检测哪些事件来选择性地安装其中某一个。可以根据要检测的事件的类别或检测目的等变更比较处理的形态。
又,采用图12(a)以及图12(b)中的某一个比较处理时,在确定了检测到异常的熄灯期间后,通过更加细致对该熄灯期间内的存储图像进行图像比较,可以进一步提高异常发生时刻的检测精度。例如可以采用图11(a)、图11(b)的实例的处理,确定异常发生时间。
(第4实施形态)
在上述第1实施形态到第3实施形态中,都是对轿厢室内的照明器材14的熄灯的时刻进行检测,将熄灯之前T2时间的图像作为基准图像并将该基准图像用作比较处理。本发明的第4实施形态的电梯监视装置中,图像处理单元检测轿厢室照明的亮灯时刻,采用亮灯后的图像。图像处理单元提取亮灯后一定期间内的多个图像,通过检测这些图像之间的变化量,进行拍摄装置的镜头污染等检测。
本实施形态的电梯监视装置的构造和第2实施形态的电梯监视装置的构造相同。包含本实施形态的电梯监视装置的电梯远程监视系统设置有对轿厢室内部进行监视的监视用拍摄装置15,是通过该图像对轿厢内进行监视的系统。本实施形态的电梯远程监视系统具有监视中心2、监视中心2内的电梯监视装置3和多个电梯5。本实施形态的电梯监视方法是本实施形态的电梯监视装置的控制程序通过接收图像的解析对拍摄装置的镜头污染等进行检测的方法。
图14是按时序示出注目期间Gt4(j,k)和熄灯期间之间关系的图。所谓注目期间Gt4(j,k)是指通过进行帧之间差分运算确认是否发生了正常动作的期间(附加标记t4表示T4时间后)。轿厢室内的熄灯以及亮灯反复多次,对熄灯期间赋予连续编号j(j=1、2、3、4、……)。图像Gt2(1)、Gt2(2)、Gt2(3)分别表示在第1、2、3次熄灯开始之前T2时间的帧的图像。在本实施形态中,图像提取单元30以被检测到的亮灯时刻之后T4时间的图像为开头,提取该图像至T5时间的各帧的图像。亮灯后,经过一定时间后,轿厢门一定打开。图像处理单元33在亮灯后空出T4时间,在从此经过T5时间当中,通过图像的辉度变化检测轿厢门必定打开的情况。
时间T4是用来去除亮灯后荧光灯的闪烁所引起的图像辉度变动对图像检测造成影响的时间。照明器材14的照度因闪烁而摇晃,因此空出T4时间以使检测处理稳定进行。
时间T5是,从通过对电梯厅操作盘的操作对电梯5登记呼叫,至轿厢15停靠在发出了呼叫登记的电梯厅的地面并打开门为止所需要的时间。假设第10层发生电梯厅呼叫,而此时轿厢15停止在1层且熄灯。轿厢15从第1层上升到第10层,停靠后,至开门为止需要数十秒~1分钟左右。在例如构成图像处理单元33的一部分的RAM中预先设置查找表格区域,使楼层与脉冲数相对应地预先存储在该区域中。如果从1层停靠到10层要花1分钟,则使10层这一信息与加上1分钟(一分間プラスアルフア)的时间相对应,预先写入在RAM中。判定单元35在处理时参照该对应关系,在例如进行2分钟图像比较的监视时差分值没有变动的情况下,判定产生了异常。这些T4、T5的值由图像处理单元33预先重新设定。T4、T5的值通过实地试验或模拟实验等来决定。
来自所有拍摄装置15的图像数据被发送到这样的构造的本实施形态的电梯监视装置。对1部电梯的电梯监视装置的图像比较处理进行说明。轿厢室的初始状态是熄灯状态。
图15是用来说明本实施形态的电梯监视方法的流程图。
在步骤C1中,轿厢内熄灯、亮灯检测单元28从第一图像存储单元27读取所取得的轿厢室内图像,判定轿厢室是否已亮灯。该判定处理通过以下操作来进行:例如轿厢内熄灯、亮灯检测单元28计算时间上前后两帧之间的差分图像,在差分图像的辉度超过预先決定的阈值的情况下,检测出轿厢室内已亮灯。
在步骤C2中,图像提取单元30等待T4时间。
在步骤C3中,图像提取单元30,提取出依次存储在第一图像存储单元27中的图像数据中的,从亮灯时刻开始空出T4时间后从该T4时间结束的时刻开始的T5时间内的图像Gt4(1,1)、Gt4(1,2)、Gt4(1,3)、Gt4(1,4)、……、Gt4(1,Kt5)。
在步骤C4中,比较单元34在亮灯后经过一定时间T4之后,对T5的期间的图像Gt4(j,k)(k=1~Kt5)依次运算帧间差分。
图16(a)是用来说明比较单元34通过帧间差分检测变化的处理的图。该图的Gt4(j,k)表示移动确认期间的图像。比较单元34计算Gt4(1,1)以及Gt4(1,2)间的帧间差分,判定差分值是否在一定值以下。差分值在一定值以下的情况下,比较单元34错开所运算的帧后,进行相同的运算。对于时间T5内的多个帧间差分中的任一个,在得到差分值只表示某一定值以下的变化的结果之前的期间,比较单元34如Gt4(1,2)以及Gt4(1,3)之间的帧间差分、Gt(1,3)以及Gt4(1,4)之间的帧间差分那样依次重复。
在图15的步骤C5中,比较单元34在各差分运算中判定差分是否比预先存储的阈值小。差分比阈值小的情况下,通过“是”路径,比较单元34重复步骤C6增加变量后,返回到步骤C5的处理。在步骤C5中,差分具有某一定以上变化的情况下,判定差分比阈值大,通过“否”路径,在步骤C8中判定单元35判断为正常。T5的期间的总的差分小于阈值时,判断为异常(步骤C7)。检测到异常时,图像处理单元33输出警报,将异常发生通知给监视台19。其他的电梯5的图像比较处理也与该实例同样。
在拍摄装置的镜头的状态为正常状态时,通过运算帧间差分,在开门时辉度的差分出现大的变动。另一方面,在镜头上粘有口香糖、或镜头污染的状态下,即便运算帧间差分,在多个运算结果之间差分值没有变化,或差分值极小。
在正常动作时,检测出在轿厢门全部打开时的图像的辉度和轿厢门全部关闭时的图像的辉度之间具有一定差分值。从轿厢室的亮灯的开始一定时间内轿厢门必定是打开的,因此通过连续运算差分值确认有无轿厢门的移动,由此可以确认拍摄装置16上未粘有口香糖等情况。在亮灯后某一定时间后,如果通过图像比较没有检测出开门的移动的话,则比较奇怪,因此在该实施形态中要观察亮灯后的时间。
在拍摄装置的镜头整个面被异物等覆盖了时等,图像处理中,有时不能检测出轿厢内照明的熄灯或亮灯,但在该情况下,判定单元35判断为熄灯并输出,由此管理人能够容易地判断为拍摄装置异常。监视业务能够没有问题地继续进行。
时间T4的长度能够进行各种变更。照明器材14是LED等设备的情况下,可以不空出时间T4就进行帧间运算。时间T5的长度能够进行各种变更。例如最高层是30层的情况下,要考虑从30层下降到1层时所需要的时间来决定时间T5的长度。这样,采用该实施形态的电梯监视装置以及电梯监视方法,能够判断拍摄装置15没有正常运行。
(第4实施形态的变形例)
在第4实施形态中,依次错开相比较的两帧后计算这些帧之间的差分图像,但是相比较的两帧可以将熄灯前提取图像Gt2(j)作为基准图像,依次比较该基准图像和移动确认期间用的图像Gt4(j,k)(k=1~Kt5)。
图16(b)是用来说明将Gt2(j)作为基准图像后对基准图像和移动确认期间用的图像Gt4(j,k)进行的比较处理的图。图像提取单元30从第一图像存储单元27提取出Gt2(j)作为模拟的基准图像,依次对所提取出的模拟基准图像和图像Gt4(j,k)进行比较。
又,在本实施形态中,可以采用未图示的移动矢量检测单元等来替代单元34,判断从时间T4到时间T5之间图像内是否有移动。移动矢量检测单元推定帧(t-1)的图像上的测量点移动到了帧(t)的图像的哪个位置。移动矢量检测单元采用现在的图像、1帧前的图像、2帧前的图像这样至少3个以上的图像,求出测量点(图像中作为处理对象的点)的移动数据。移动数据是指“速度”、“加速度”、“角速度”、“相关值”等。通过采用至少3个以上的图像算出包含“加速度”的移动数据,可以对正挥舞着某物体等的暴力行为进行暴力检测。
(第5实施形态)
本发明的第5实施形态的电梯监视装置构成为,第4实施形态及其变形例的电梯监视装置尤其关注图像中央附近,对图像进行比较、或者算出移动矢量。
图17是示出本发明的第5实施形态的电梯监视装置所使用的图像中的监视区域的图。如图17那样,图像中央部中含有被最关注的电梯5的门部分,因此本实施形态的电梯监视装置划定了关注部分。
拍摄装置15具有:安装在天花板或壁面上的未图示的壳体、收容在壳体中的拍摄装置主体、安装在该拍摄装置主体上的镜头单元、分别设在拍摄装置主体内的多个拍摄元件、和被输入来自这些拍摄元件的拍摄信号的电路基板,来自镜头单元的光被引导至拍摄元件上。
镜头中心部被口香糖等异物或者乱写乱画覆盖了的状态下,光也能通过在粘附有异物的镜头中心部和嵌入拍摄装置主体中的镜头周缘部之间出现的透镜表面进入拍摄元件。监视器画面中没有映出两块门板的门抵接部,但是有时会映出轿厢出入口的上部、左右的内壁面或操作盘、下方的地面。
轿厢内熄灯、亮灯检测单元28使用去除了图像中的门抵接部的部分的辉度来辨别轿厢室内的亮灯或者熄灯。即便在得不到图像的中央部的辉度的情况下,轿厢内熄灯、亮灯检测单元28也能根据其他的天花板等的辉度信息对轿厢室内的明暗进行判定。
仅实现了明暗的判定功能但不能检测异常的发生这样的情形就意味着不能确认异常发生部分。本实施形态的电梯监视装置构成为,在亮灯后经过规定时间之后,在没有观测到辉度变化时,对异常进行检测。由此,能够对镜头污染这样的基本事件进行检测。该实施形态的电梯监视方法中,在因帧间差分而应产生变化的时刻没有产生变化时,判定为异常,由此即使根据图像检测出室内是明亮的,也认为其不是在正常的状态下拍摄的图像。没有异物粘附镜头、或没有镜头污染这样最基本的性能得到最低限度的确保。对于监视中心2侧来说,要保证能够信赖的图像常时地从拍摄装置15传送到。
另外,安装拍摄装置15的位置是顶面中的轿厢室进深侧的一角,但也可以在轿厢室进深侧的两个角部分别安装拍摄装置15。这时,服务器18对2系统的图像进行处理。又,拍摄装置15还可以安装在顶面中轿厢室进深侧中央部。这时,视角包含轿厢出入口的广角镜头被安装在拍摄装置主体上。
采用该实施形态的电梯监视装置,关注图像中央附近,进行图像比较处理或移动矢量的算出处理,因此可以进行拍摄装置镜头污渍等的检测。通过圈定关注部分,感度更好,可以得到与在第4实施形态中得到的效果同等的效果。
(总结)
如上所述,本发明的第1实施形态至第3实施形态的电梯监视装置组合了对轿厢内照明的熄灯、亮灯时刻检测用的简便的轿厢内熄灯、亮灯检测单元28,和如第一图像存储单元27、第二图像存储单元29以及比较单元34那样能够比较容易地构成的通用的单元。由此,可以省略预先拍摄、登记用来判断轿厢10内的异常的基准图像(背景图像)那样的操作。由此,对于不是分散监视而是集中监视多台监视拍摄装置图像那样的系统,也可以比较容易地适用自动监视。
又,在从熄灯前拍摄装置部上粘有口香糖等而不能拍摄对象图像的情况下,第1实施形态至第3实施形态的实例有时不能有效地发挥作用。考虑到该情况,第4实施形态的电梯监视装置利用了从亮灯开始一定时间内轿厢门必定打开这一情况。只要能够如正常动作时那样根据来自拍摄装置15的图像确认移动即可,但在像异常发生时那样不能确认移动的情况下,也能够确认拍摄装置部上粘有口香糖等而无法拍摄对象图像这样的情形。
又,如第5实施形态那样,在第4实施形态中,也可进行尤其关注图像中央附近的图像处理,由于图像中央附近通常含有最被关注的电梯门部分,因此在检测移动时没有什么问题。不仅如此,在第5实施形态中,由于可以削减比较图像、或算出移动矢量的处理区域,因此可以实现计算成本的削减。
另外,本发明并不限定于所述各实施形态,可以在实施阶段,在不脱离其要旨的范围内,变形其构件使其具体化。T2、T3、T4、T5的值都能够进行各种变更。
而且,可以通过恰当的组合所述实施形态所公开的多个构件,形成各种发明。例如,可以从实施形态所示的所有构成要素中删除几个构成要素。进一步地,也可以跨越不同实施形态恰当的组合构件。

Claims (14)

1.一种电梯监视装置,其特征在于,包括:
第一存储单元,其存储由设在电梯的轿厢上的拍摄装置以规定时间间隔连续拍摄的图像列所构成的监视对象图像;
检测单元,其根据所述第一存储单元所存储的所述监视对象图像的图像列检测轿厢室照明的熄灯期间的开始时刻;和
提取单元,其从所述第一存储单元的所述监视对象图像中提取所述检测单元所检测到的所述开始时刻的规定时间之前的图像。
2.如权利要求1所述的电梯监视装置,其特征在于,包括:
从所述拍摄装置取得现在的图像的取得单元;和
第二存储单元,其将所述提取单元所提取的所述图像作为基准图像进行存储;
比较单元,其运算存储在所述第二存储单元中的所述基准图像和所述取得单元所取得的所述现在的图像的差分,比较该差分以及预先存储的阈值,以检测所述轿厢内有无异常。
3.如权利要求2所述的电梯监视装置,其特征在于,所述第二存储单元存储有多个基准图像,所述基准图像是在所述轿厢室照明多次熄灯时的各熄灯期间的开始时刻各自的所述规定时间之前的各时刻提取的,所述比较单元比较这些基准图像,来检测所述异常。
4.如权利要求1所述的电梯监视装置,其特征在于,还包括监测显示所述提取单元所提取的所述图像的显示单元,
所述第二存储单元存储有多个基准图像,所述基准图像是在所述轿厢室照明多次熄灯时的各熄灯期间的开始时刻各自的所述规定时间之前的各时刻提取的,所述显示单元依次监测显示这些基准图像。
5.一种电梯监视装置,其特征在于,包括:
第一存储单元,其存储由设在电梯的轿厢上的拍摄装置以规定时间间隔连续拍摄的图像列所构成的监视对象图像;
检测单元,其根据所述第一存储单元所存储的所述监视对象图像的图像列检测轿厢室照明的熄灯期间结束的亮灯时刻;
提取单元,其从所述第一存储单元的所述监视对象图像中提取确认期间内的多个图像,所述确认期间将所述检测单元所检测到的所述亮灯时刻的规定时间之后作为开始,将从该开始经过了一定期间的时刻作为结束;和
比较单元,其运算所述提取单元所提取的所述多个图像中的两个之间的差分、或者所述多个图像中的某图像与所述熄灯期间的开始时刻的规定时间之前的图像之间的差分,比较该差分的变化量是否在预先存储的阈值以下,以检测所述轿厢内有无异常。
6.如权利要求5所述的电梯监视装置,其特征在于,所述比较单元所进行的所述差分的运算,将所述提取单元所提取的各图像中含有的轿厢门部分或所述各图像的图像中央部分作为比较的对象。
7.一种电梯监视方法,其特征在于,
与电梯的终端装置之间授受信息的监视中心侧的控制单元,接收设在该电梯的轿厢中的拍摄装置以规定时间间隔拍摄的监视对象物的图像,
设置在对所述控制单元接收到的图像进行处理的图像处理单元中的取得单元将由连续的图像列构成的监视对象图像取入第一存储单元,
设在所述图像处理单元中的检测单元根据所述监视对象图像的图像列对轿厢室照明的熄灯期间的开始时刻进行检测,
设在所述图像处理单元中的提取单元从所述第一存储单元的所述监视对象图像中提取被检测到的所述开始时刻的规定时间之前的图像。
8.如权利要求7所述的电梯监视方法,其特征在于,
所述取得单元从所述拍摄装置取得现在的图像,
将所述提取单元所提取的所述图像作为基准图像存储在第二存储单元中,
设在所述图像处理单元中的比较单元运算所述基准图像和所述现在的图像的差分,比较该差分以及预先存储的阈值,以检测所述轿厢内有无异常。
9.如权利要求8所述的电梯监视方法,其特征在于,所述第二存储单元存储有多个基准图像,所述基准图像是在所述轿厢室照明多次熄灯时的各熄灯期间的开始时刻各自的所述规定时间之前的各时刻提取的,所述比较单元相互比较这些基准图像,来检测所述异常。
10.如权利要求8所述的电梯监视方法,其特征在于,所述第二存储单元存储多个基准图像,所述基准图像是在所述轿厢内照明多次熄灯时的各熄灯期间的开始时刻各自的所述规定时间之前的各时刻提取的,所述显示单元依次监测显示这些基准图像。
11.一种电梯监视方法,其特征在于,
与电梯的终端装置之间授受信息的监视中心侧的控制单元,接收设在该电梯的轿厢中的拍摄装置以规定时间间隔拍摄的监视对象物的图像,
设置在对所述控制单元接收到的图像进行处理的图像处理单元中的取得单元将由连续的图像列构成的监视对象图像取入第一存储单元,
设在所述图像处理单元中的检测单元根据所述监视对象图像的图像列对轿厢室照明的熄灯期间结束的亮灯时刻进行检测,
设在所述图像处理单元中的提取单元,从所述监视对象图像中提取确认期间内的多个图像,所述确认期间将所述亮灯时刻的规定时间之后作为开始,将从该开始经过了一定期间的时刻作为结束,
设在所述图像处理单元中的比较单元,运算被提取的所述多个图像中的两个之间的差分、或者所述多个图像中的某个图像与所述熄灯期间的开始时刻的规定时间之前的图像之间的差分,比较该差分的变化量是否在预先存储的阈值以下,以检测所述轿厢内有无异常。
12.如权利要求11所述的电梯监视方法,其特征在于,所述比较单元所进行的所述差分的运算,将所述提取单元所提取的各图像中含有的轿厢门部分或所述各图像的图像中央部分作为比较的对象。
13.一种电梯监视远程监视系统,其特征在于,包括:
分别具有轿厢以及终端装置的多个电梯,所述轿厢中设有对监视对象物进行拍摄的拍摄装置;
通过通信线路与这些电梯的各个终端装置之间授受信息的监视中心的服务器装置,
所述服务器装置包括:
第一存储单元,其存储监视对象图像,所述监视对象图像由所述多个电梯的各拍摄装置以规定时间间隔拍摄的各轿厢内的连续的图像列所构成;
检测单元,其根据所述第一存储单元所存储的所述监视对象图像的图像列检测各轿厢室照明的熄灯期间的开始时刻;和
提取单元,从所述第一存储单元的所述监视对象图像中提取所述检测单元所检测的所述开始时刻的规定时间之前的图像。
14.一种电梯监视远程监视系统,其特征在于,包括:
分别具有轿厢以及终端装置的多个电梯,所述轿厢中设有对监视对象物进行拍摄的拍摄装置;和
通过通信线路与这些电梯的各个终端装置之间授受信息的监视中心的服务器装置,
所述服务器装置包括:
第一存储单元,其存储监视对象图像,所述监视对象图像由所述多个电梯的各拍摄装置以规定时间间隔拍摄的各轿厢内的连续的图像列所构成;
检测单元,其根据所述第一存储单元所存储的所述监视对象图像的图像列检测各轿厢室照明的熄灯期间结束的亮灯时刻;
提取单元,从所述第一存储单元的所述监视对象图像中提取确认期间内的多个图像,所述确认期间将所述检测单元所检测到的所述亮灯时刻的规定时间之后作为开始,将从该开始经过了一定期间的时刻作为结束;和
比较单元,运算所述提取单元所提取的所述多个图像中的两个之间的差分、或者所述多个图像中的某图像与所述熄灯期间的开始时刻的规定时间之前的图像之间的差分,比较该差分的变化量是否在预先存储的阈值以下,以检测各所述轿厢内有无异常。
CN201010282171XA 2009-09-24 2010-09-08 电梯监视装置、电梯监视方法以及电梯远程监视系统 Pending CN102030232A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009219605A JP2011068440A (ja) 2009-09-24 2009-09-24 エレベータ監視装置、エレベータ監視方法及びエレベータ遠隔監視システム
JP2009-219605 2009-09-24

Publications (1)

Publication Number Publication Date
CN102030232A true CN102030232A (zh) 2011-04-27

Family

ID=43883762

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201010282171XA Pending CN102030232A (zh) 2009-09-24 2010-09-08 电梯监视装置、电梯监视方法以及电梯远程监视系统

Country Status (2)

Country Link
JP (1) JP2011068440A (zh)
CN (1) CN102030232A (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102730509A (zh) * 2012-04-28 2012-10-17 中山市卓梅尼控制技术有限公司 电梯轿厢灯检测系统
CN103552891A (zh) * 2013-09-29 2014-02-05 西安祥泰软件设备系统有限责任公司 一种电梯远程监控方法及装置
CN104811690A (zh) * 2015-04-01 2015-07-29 广东欧珀移动通信有限公司 一种消息提示方法及装置
CN105916262A (zh) * 2015-02-25 2016-08-31 Lg电子株式会社 数字装置及其驾驶员监控方法
CN106467259A (zh) * 2015-08-20 2017-03-01 东芝电梯株式会社 电梯安防监视系统
CN106778901A (zh) * 2016-12-30 2017-05-31 广州视源电子科技股份有限公司 室内物品遗落提示方法及装置
CN107954290A (zh) * 2017-11-16 2018-04-24 东莞市联洲知识产权运营管理有限公司 一种电梯轿厢内异常状况的检测装置
CN108033329A (zh) * 2017-11-16 2018-05-15 浙江新再灵科技股份有限公司 一种电梯遗落物的自动检测系统及检测方法
CN110015600A (zh) * 2018-01-02 2019-07-16 奥的斯电梯公司 使用相机预置的自动排序的电梯检查
CN111170100A (zh) * 2018-11-09 2020-05-19 奥的斯电梯公司 输运系统视频分析
CN111699677A (zh) * 2018-02-16 2020-09-22 三菱电机株式会社 异常检测装置和异常检测方法
CN113955598A (zh) * 2021-10-22 2022-01-21 上海三菱电梯有限公司 电梯显示装置监测系统

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102650876B (zh) * 2012-02-17 2016-04-13 深圳新基点智能股份有限公司 一种智能建筑实时节能联动控制装置及方法
JP5612168B1 (ja) * 2013-06-11 2014-10-22 東芝エレベータ株式会社 エレベータの監視システム
JP6295191B2 (ja) * 2014-12-15 2018-03-14 株式会社日立ビルシステム エレベータ乗りかごの画像監視装置
JP6068690B1 (ja) * 2016-01-04 2017-01-25 東芝エレベータ株式会社 エレベータシステム
JP6583094B2 (ja) * 2016-03-29 2019-10-02 三菱電機ビルテクノサービス株式会社 録画装置
JP6722408B2 (ja) * 2017-02-02 2020-07-15 フジテック株式会社 エレベータの利用者サポートシステム
CN108529367A (zh) * 2017-11-21 2018-09-14 江苏鸿山鸿锦物联技术有限公司 一种基于视频图像的电梯门状态色块检测方法
CN108584586A (zh) * 2017-11-21 2018-09-28 江苏鸿山鸿锦物联技术有限公司 一种基于视频图像的电梯门状态直线检测方法
US10870556B2 (en) 2017-12-12 2020-12-22 Otis Elevator Company Method and system for detecting elevator car operating panel condition
JP6581260B1 (ja) * 2018-07-30 2019-09-25 東芝エレベータ株式会社 エレベータの注意喚起システム
CN113015685B (zh) * 2018-12-11 2023-08-11 三菱电机楼宇解决方案株式会社 用于检测电梯的防范摄像机的污染的监视装置、判定装置和电梯系统
JP6977200B2 (ja) * 2019-06-11 2021-12-08 三菱電機ビルテクノサービス株式会社 画像処理装置、画像処理方法及びプログラム
WO2021106053A1 (ja) * 2019-11-25 2021-06-03 ジャパンエレベーターサービスホールディングス株式会社 防犯カメラ装置および防犯カメラ装置制御プログラム
JP6864129B1 (ja) * 2020-02-04 2021-04-28 東芝エレベータ株式会社 撮影状態診断方法、画像処理装置および遠隔監視プログラム
WO2023165688A1 (en) * 2022-03-02 2023-09-07 Kone Corporation A solution for detecting an entrapment situation inside an elevator car

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1045749A (zh) * 1989-03-20 1990-10-03 株式会社日立制作所 电梯控制系统
EP0889452A2 (en) * 1997-07-02 1999-01-07 Matsushita Electric Industrial Co., Ltd. Remote monitoring system and method
JP2000351546A (ja) * 1999-06-08 2000-12-19 Mitsubishi Electric Corp エレベーター監視装置
CN101061049A (zh) * 2005-03-02 2007-10-24 三菱电机株式会社 电梯图像监视装置
CN101357726A (zh) * 2007-08-01 2009-02-04 株式会社日立建筑系统 电梯轿厢内的异常监视装置
CN101528580A (zh) * 2007-03-13 2009-09-09 三菱电机株式会社 电梯装置
CN101801831A (zh) * 2007-10-11 2010-08-11 三菱电机株式会社 电梯安全系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1045749A (zh) * 1989-03-20 1990-10-03 株式会社日立制作所 电梯控制系统
EP0889452A2 (en) * 1997-07-02 1999-01-07 Matsushita Electric Industrial Co., Ltd. Remote monitoring system and method
JP2000351546A (ja) * 1999-06-08 2000-12-19 Mitsubishi Electric Corp エレベーター監視装置
CN101061049A (zh) * 2005-03-02 2007-10-24 三菱电机株式会社 电梯图像监视装置
CN101528580A (zh) * 2007-03-13 2009-09-09 三菱电机株式会社 电梯装置
CN101357726A (zh) * 2007-08-01 2009-02-04 株式会社日立建筑系统 电梯轿厢内的异常监视装置
CN101801831A (zh) * 2007-10-11 2010-08-11 三菱电机株式会社 电梯安全系统

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102730509B (zh) * 2012-04-28 2015-04-01 中山市卓梅尼控制技术有限公司 电梯轿厢灯检测系统
CN102730509A (zh) * 2012-04-28 2012-10-17 中山市卓梅尼控制技术有限公司 电梯轿厢灯检测系统
CN103552891B (zh) * 2013-09-29 2017-01-04 西安祥泰软件设备系统有限责任公司 一种电梯远程监控方法及装置
CN103552891A (zh) * 2013-09-29 2014-02-05 西安祥泰软件设备系统有限责任公司 一种电梯远程监控方法及装置
US10015411B2 (en) 2015-02-25 2018-07-03 Lg Electronics Inc. Digital device and driver monitoring method thereof
CN105916262A (zh) * 2015-02-25 2016-08-31 Lg电子株式会社 数字装置及其驾驶员监控方法
CN105916262B (zh) * 2015-02-25 2019-01-04 Lg电子株式会社 数字装置及其驾驶员监控方法
CN104811690A (zh) * 2015-04-01 2015-07-29 广东欧珀移动通信有限公司 一种消息提示方法及装置
CN106467259A (zh) * 2015-08-20 2017-03-01 东芝电梯株式会社 电梯安防监视系统
CN106778901A (zh) * 2016-12-30 2017-05-31 广州视源电子科技股份有限公司 室内物品遗落提示方法及装置
CN107954290A (zh) * 2017-11-16 2018-04-24 东莞市联洲知识产权运营管理有限公司 一种电梯轿厢内异常状况的检测装置
CN108033329A (zh) * 2017-11-16 2018-05-15 浙江新再灵科技股份有限公司 一种电梯遗落物的自动检测系统及检测方法
CN110015600A (zh) * 2018-01-02 2019-07-16 奥的斯电梯公司 使用相机预置的自动排序的电梯检查
CN110015600B (zh) * 2018-01-02 2022-04-01 奥的斯电梯公司 使用相机预置的自动排序的电梯检查
CN111699677A (zh) * 2018-02-16 2020-09-22 三菱电机株式会社 异常检测装置和异常检测方法
US11146784B2 (en) 2018-02-16 2021-10-12 Mitsubishi Electric Corporation Abnormality detection device and abnormality detection method
CN111699677B (zh) * 2018-02-16 2022-04-19 三菱电机株式会社 异常检测装置和异常检测方法
CN111170100A (zh) * 2018-11-09 2020-05-19 奥的斯电梯公司 输运系统视频分析
US11312594B2 (en) 2018-11-09 2022-04-26 Otis Elevator Company Conveyance system video analytics
CN113955598A (zh) * 2021-10-22 2022-01-21 上海三菱电梯有限公司 电梯显示装置监测系统

Also Published As

Publication number Publication date
JP2011068440A (ja) 2011-04-07

Similar Documents

Publication Publication Date Title
CN102030232A (zh) 电梯监视装置、电梯监视方法以及电梯远程监视系统
CN101607668B (zh) 嵌入式计算机视觉自动扶梯人流监察警报装置
CN101801831B (zh) 电梯安全系统
CN101025825B (zh) 异常行为探测装置
CN102241349B (zh) 电梯轿厢内异常通报系统
CN101434363B (zh) 自动扶梯的控制设备
CN111354121B (zh) 一种智能检查站人车混合核验系统和方法
WO2017074005A1 (ko) Cctv 자동선별 모니터링 시스템, cctv 자동선별 모니터링 관리서버 및 관리방법
CN109146914B (zh) 一种高速公路基于视频分析的醉酒驾驶行为预警方法
CN112623919B (zh) 一种基于计算机视觉的自动扶梯智能监控管理系统
JP2008001494A (ja) エレベータの地震時復旧装置
JP2013124189A (ja) エレベータのかご内監視装置
CN101016132B (zh) 电梯控制装置
KR102315371B1 (ko) 스마트 cctv 관제 및 경보 시스템
KR102327807B1 (ko) 인공지능 기반 승강기 위험상황 자동 예측판단시스템
JP2008087898A (ja) エレベータの機能可変型遠隔監視システム及び遠隔監視方法
CN207799910U (zh) 一种警灯控制装置
JP6449425B1 (ja) エレベータのカメラ装置の撮影状態診断方法、遠隔診断システム、および遠隔診断プログラム
JP2011240866A (ja) 走行体に備えられた車側灯の検出方法、及びこの検出方法を用いて可動柵に備えられたドアの開閉を行う可動柵制御装置。
KR101407952B1 (ko) 엘리베이터 방범시스템 및 방법
KR101238788B1 (ko) 엘리베이터 방범시스템 및 방법
CN110407052A (zh) 一种电梯内剧烈运动行为检测方法及系统
JP7322250B1 (ja) エレベータシステム
JPH0460880A (ja) 動体識別解析管理システム
CN113420626A (zh) 一种施工现场安全行为判别方法和存储设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20110427