CN111717738B - 电梯系统 - Google Patents
电梯系统 Download PDFInfo
- Publication number
- CN111717738B CN111717738B CN201911167951.7A CN201911167951A CN111717738B CN 111717738 B CN111717738 B CN 111717738B CN 201911167951 A CN201911167951 A CN 201911167951A CN 111717738 B CN111717738 B CN 111717738B
- Authority
- CN
- China
- Prior art keywords
- camera
- image
- car
- mark
- elevator system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B1/00—Control systems of elevators in general
- B66B1/02—Control systems without regulation, i.e. without retroactive action
- B66B1/06—Control systems without regulation, i.e. without retroactive action electric
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B1/00—Control systems of elevators in general
- B66B1/34—Details, e.g. call counting devices, data transmission from car to control system, devices giving information to the control system
- B66B1/3415—Control system configuration and the data transmission or communication within the control system
- B66B1/3423—Control system configuration, i.e. lay-out
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B1/00—Control systems of elevators in general
- B66B1/34—Details, e.g. call counting devices, data transmission from car to control system, devices giving information to the control system
- B66B1/3415—Control system configuration and the data transmission or communication within the control system
- B66B1/3446—Data transmission or communication within the control system
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
- B66B5/0006—Monitoring devices or performance analysers
- B66B5/0012—Devices monitoring the users of the elevator system
Abstract
本发明的课题在于检测摄像机的安装位置的偏移。根据一实施方式,电梯系统包括:图像处理装置,其为了检测轿厢的门附近的使用者,执行对由摄像机拍摄的包含轿厢内以及候梯厅的图像的图像处理;以及管理者终端,其与图像处理装置连接,能够由管理者操作。电梯系统从摄像机获取在设置有能够与轿厢的地板面以及所述候梯厅的地板面区分开的标记的状态下拍摄到的图像,从获取到的图像中识别标记,显示识别结果,根据管理者对所显示的识别结果的操作,确定识别出的标记的位置,根据所确定的标记的位置,检测摄像机的安装位置的偏移。
Description
本申请以日本专利申请2019-053670(申请日:3/20/2019)为基础,基于该申请而享受优先权。本申请通过参照该申请,包括该申请的全部内容。
技术领域
本发明的实施方式涉及一种电梯系统。
背景技术
近年来,为了防止人、物体被电梯的轿厢门夹住,提出了各种技术。例如,提出了如下技术:使用摄像机检测正朝向电梯移动的使用者,延长该电梯的门的开门时间。
在这样的技术中,需要根据由摄像机拍摄的图像,高精度地检测正朝向电梯移动的使用者。但是,在摄像机的安装位置产生了偏移的情况下,由摄像机拍摄的图像会旋转,或者在左右方向上偏移,因此有可能使上述使用者的检测精度降低。
因此,期望实现能够检测摄像机的安装位置的偏移的新技术。
发明内容
本发明的实施方式要解决的问题是提供一种能够检测摄像机的安装位置的偏移的电梯系统。
根据一实施方式,电梯系统包括:图像处理装置,其能够使用由摄像机拍摄的包含轿厢内以及候梯厅的图像,来检测轿厢的门附近的使用者;以及管理者终端,其与所述图像处理装置连接,能够由管理者操作。所述电梯系统具备获取部、识别部、显示部、确定部、以及检测部。所述获取部从所述摄像机获取在设置有能够与所述轿厢的地板面以及所述候梯厅的地板面区分开的标记的状态下拍摄到的图像。所述识别部从获取到的所述图像中识别所述标记。所述显示部显示所述识别部的识别结果。所述确定部根据管理者对由所述显示部显示的所述识别结果的操作来确定所识别出的所述标记的位置。所述检测部根据所述所确定的标记的位置,来检测所述摄像机的安装位置的偏移。
附图说明
图1是表示实施方式的电梯系统的概略构成例的图。
图2是表示电梯系统所包含的图像处理装置的硬件构成例的图。
图3是表示在摄像机的安装位置没有偏移的情况下所拍摄的图像的图。
图4是表示在摄像机的安装位置存在偏移的情况下所拍摄的图像的图。
图5是表示设置在摄像机的拍摄范围内的标记的一例的图。
图6是表示图像处理装置的功能构成例的框图。
图7是表示校准功能中的电梯系统的处理顺序的一例的流程图。
图8是用于补充说明图7所示的流程图的图,是表示摄像机的拍摄图像的图。
图9是用于说明作为校准功能的一个功能的误识别抑制功能的图,是表示确认图像的一例的图。
图10是用于说明作为校准功能的一个功能的误识别抑制功能的图,是表示在管理者终端上显示的显示画面的一例的图。
图11是用于说明作为校准功能的一个功能的误识别抑制功能的图,是表示返回图像的一例的图。
图12是用于说明作为校准功能的一个功能的误识别抑制功能的图,是表示与图9不同的确认图像的一例的图。
图13是用于说明作为校准功能的一个功能的误识别抑制功能的图,是表示与图9及图12不同的确认图像的一例的图。
具体实施方式
以下,参照附图对实施方式进行说明。公开的仅仅是一个例子,本发明不受以下实施方式中记载的内容的限定。本领域技术人员能够容易想到的变形当然包含在公开的范围内。为了使说明更加清楚,在附图中,有时将各部分的尺寸、形状等相对于实际的实施方式进行变更而示意性地表示。在多个附图中,对对应的要素标注相同的参照数字,有时省略详细的说明。
图1是表示实施方式的电梯系统的概略构成例的图。
在轿厢11的出入口上部设置有摄像机12。具体而言,在覆盖轿厢11的出入口上部的门楣板11a中,朝向轿厢11内以及候梯厅15都拍摄到的方向设置摄像机12的镜头部分。摄像机12是例如车载摄像机等小型监视用摄像机,具有广角镜头,在1秒钟内连续拍摄数帧(例如30帧/秒)的图像。
摄像机12可以始终开启,始终进行拍摄,也可以在规定的时刻开启,开始拍摄,在规定的时刻关闭,结束拍摄。例如,摄像机12也可以在轿厢11的移动速度小于规定值时开启,在轿厢11的移动速度为规定值以上时关闭。在该情况下,在轿厢11为了停止在规定楼层而开始减速,移动速度小于规定值时,摄像机12开启而开始拍摄,在轿厢11为了朝向与该规定楼层不同的楼层而开始加速,移动速度为规定值以上时摄像机12关闭而结束拍摄。即,摄像机12的拍摄从轿厢11为了停止在规定楼层而开始减速,移动速度小于规定值起,也包括轿厢11停止在该规定楼层的期间,到轿厢11为了从该规定楼层朝向其他楼层而开始加速,移动速度为规定值以上为止持续进行。
摄像机12的拍摄范围被设定为L1+L2(L1≥L2)。L1是候梯厅15侧的拍摄范围,从轿厢门13朝向候梯厅15设定。L2是轿厢11侧的拍摄范围,从轿厢门13朝向轿厢背面设定。此外,L1、L2是进深方向的范围,宽度方向(与进深方向正交的方向)的范围至少比轿厢11的横宽大。
在各层的候梯厅15中,在轿厢11的到达口开闭自如地设置有候梯厅门14。候梯厅门14在轿厢11到达时与轿厢门13卡合而进行开闭动作。此外,动力源(门机)位于轿厢11侧,候梯厅门14仅是跟随着轿厢门13进行开闭。在以下的说明中,假定轿厢门13打开时候梯厅门14也打开,关闭轿厢门13时候梯厅门14也关闭。
由摄像机12连续拍摄的各图像(影像)由图像处理装置20实时地进行图像处理。具体而言,图像处理装置20根据预先设定的区域(以下,记为检测区域)中的图像的亮度值的变化,检测离轿厢门13最近的使用者(的运动),进行检测到的使用者是否具有乘坐轿厢11的意图的判定、检测到的使用者的手、手臂是否有被拉进门暗箱中的可能性的判定等。图像处理装置20的图像处理的结果根据需要反映在电梯控制装置30的控制处理(主要是门开闭控制处理)中。
电梯控制装置30控制轿厢11到达候梯厅15时的轿厢门13的门开闭。详细而言,电梯控制装置30在轿厢11到达候梯厅15时打开轿厢门13,在经过规定时间后关门。
但是,在由图像处理装置20检测到具有乘坐轿厢11的意图的使用者的情况下,电梯控制装置30禁止轿厢门13的关门动作,维持开门状态(延长轿厢门13的开门时间)。另外,在由图像处理装置20检测到手、手臂有可能被拉进门暗箱中的使用者的情况下,电梯控制装置30禁止轿厢门13的开门动作或者使轿厢门13的开门速度比通常时慢,或者在轿厢11内播放催促从轿厢门13离开的消息等,并向该使用者通知手、手臂有被拉进门暗箱中的可能性。
管理者终端40是由监视电梯系统的运用状态等的监视中心的管理者、进行电梯系统的维护检查的维护人员所保持的终端装置,与图像处理装置20连接。管理者终端40既可以通过无线与图像处理装置20连接,也可以通过有线与图像处理装置20连接。管理者终端40包括例如智能手机、平板终端、以及个人计算机(PC)等。
此外,在图1中,为了方便,将图像处理装置20从轿厢11中取出来进行表示,但实际上图像处理装置20与摄像机12一起被收纳在门楣板11a中。另外,在图1中,例示了摄像机12和图像处理装置20分别设置的情况,但摄像机12和图像处理装置20也可以作为一个装置一体化地设置。进一步地,在图1中,例示了图像处理装置20和电梯控制装置30分别设置的情况,但图像处理装置20的功能也可以搭载在电梯控制装置30中。在该情况下,管理者终端40与电梯控制装置30连接。
图2是表示图像处理装置20的硬件构成的一例的图。
如图2所示,在图像处理装置20中,总线21上连接有非易失性存储器22、CPU23、主存储器24、以及通信设备25等。
非易失性存储器22存储包括例如操作系统(OS)等的各种程序。此外,存储在非易失性存储器22中的程序包括用于执行上述图像处理(更具体来说为后述的使用者检测处理)的程序、用于实现后述的校准功能的程序(以下,记为校准程序)。
CPU23例如是执行存储在非易失性存储器22中的各种程序的处理器。此外,CPU23执行图像处理装置20整体的控制。
主存储器24例如被用作CPU23执行各种程序时所需的工作区域等。
通信设备25具有对通过有线或无线与例如摄像机12、电梯控制装置30、管理者终端40等外部装置执行的通信(信号的收发)进行控制的功能。
这里,如上所述,图像处理装置20根据预先设定的检测区域中的图像的亮度值的变化,执行检测距离轿厢门13最近的使用者的使用者检测处理。在该使用者检测处理中,为了关注预先设定的检测区域中的图像的亮度值的变化,需要将该检测区域始终设定在图像上的决定好的位置。
但是,在电梯系统的运用中,例如如果摄像机12的安装位置(安装角度)由于对轿厢11、摄像机12的冲击等而产生偏移,则上述检测区域也产生偏移,因此图像处理装置20会关注与实际想要关注的区域不同的区域的图像的亮度值的变化,其结果,有可能无法检测本来需要检测的使用者(物体),或者误检测本来不需要检测的使用者(物体)等。
图3表示在摄像机12的安装位置没有偏移的情况下拍摄到的图像的一例。另外,虽然在图1中未示出,但在轿厢11侧设置有用于引导轿厢门13的开闭的门槛(门坎)(以下,记为轿厢门槛)13a。同样,在候梯厅15侧设置有用于引导候梯厅门14的开闭的门槛(以下,记为候梯厅门槛)14a。另外,图3中的斜线部分表示在图像上设定的检测区域e1。在此,作为一例,假定为了检测处于候梯厅15的使用者,检测区域e1被设定成从长方形的轿厢门槛13a的长边中的轿厢11侧的长边起朝向候梯厅15侧具有规定的范围。此外,为了抑制手、手臂被拉进门暗箱中,检测区域可以设定在轿厢11侧,也可以在候梯厅15侧及轿厢11侧的双方设定多个。
另一方面,图4表示在摄像机12的安装位置存在偏移的情况下拍摄到的图像的一例。另外,图4中的斜线部分与图3同样地表示在图像上设定的检测区域e1。
如图4所示,当摄像机12的安装位置存在偏移时,由摄像机12拍摄到的图像与图3所示的情况相比,例如成为旋转后的图像(倾斜的图像)。但是,由于检测区域e1与图3同样地被设定在图像上的决定好的位置上,因此本来如图3所示,被设定成从长方形的轿厢门槛13a的长边中的轿厢11侧的长边起朝向候梯厅15侧具有规定的范围,但却如图4所示,被设定成从与长方形的轿厢门槛13a的长边完全没有关系的位置起具有规定的范围。由此,如上所述,有可能无法检测到本来需要检测的使用者,或者误检测到不需要检测的使用者。此外,在图4中,例示了因摄像机12的安装位置的偏移而导致图像旋转的情况,但在因摄像机12的安装位置的偏移而导致图像在左右方向上偏移的情况下,也有同样的可能性。
因此,本实施方式的图像处理装置20具有校准功能,该校准功能检测摄像机12的安装位置是否产生了偏移,在产生了偏移的情况下,能够与该偏移对应地在适当的位置设定检测区域。以下,对该校准功能进行详细说明。
此外,在实现校准功能时,例如需要将图5所示的标记m设置在摄像机12的拍摄范围内。标记m例如由进行电梯系统的维护检查的维护人员设置。在此,标记m为正方形状,包含4个黑色圆形记号作为图案,但标记m只要是4个角全部为直角的四边形,包含能够与摄像机12的拍摄范围内所包含的其他物体(例如,轿厢11、候梯厅15的地板面)区分开的图案的标记,就可以是任意的标记。
图6是表示本实施方式的图像处理装置20的功能构成的一例的框图。这里,主要说明与上述校准功能相关的功能构成。
如图6所示,图像处理装置20包括存储部201、图像获取部202、偏移检测部203、设定处理部204、以及通知处理部205等。如图6所示,偏移检测部203还包括识别处理部231、算出处理部232、以及检测处理部233等。
在本实施方式中,对这些各部202~205例如通过图2所示的CPU23(即,图像处理装置20的计算机)执行存储在非易失性存储器22中的校准程序(即,软件)来实现进行了说明,但上述各部202~205既可以通过硬件来实现,也可以通过软件及硬件的组合来实现。另外,在本实施方式中,存储部201例如由图2所示的非易失性存储器22或其他存储装置等构成。
在存储部201中存储有与校准功能相关的设定值。与校准功能相关的设定值包括表示标记相对于基准点的相对位置的值(以下,记为第1设定值)。基准点是指成为用于检测摄像机12的安装位置是否发生了偏移的指标的位置,例如,长方形的轿厢门槛13a的长边中的轿厢11侧的长边的中央相当于该基准点。此外,基准点也可以不是上述长方形的轿厢门槛13a的长边中的轿厢11侧的长边的中央,只要是在摄像机12的安装位置没有产生偏移的情况下包含在该摄像机12的拍摄范围内的位置,则可以将任意的位置设定为基准点。
另外,与校准相关的设定值包括表示摄像机12相对于包含在摄像机12的安装位置未产生偏移的情况下的图像(基准图像)中的基准点的相对位置的值(以下,记为第2设定值)。
进一步地,与校准相关的设定值包含表示轿厢门槛13a的各顶点(四角)相对于基准点的相对位置的值(以下,记为第3设定值)。此外,在本实施方式中,由于假定检测区域被设定成从长方形的轿厢门槛13a的长边中的轿厢11侧的长边起朝向候梯厅15侧具有规定的范围的情况,因此作为上述的第3设定值,包含表示轿厢门槛13a的各顶点相对于基准点的相对位置的值,但不限于此,第3设定值中设定有与应设定检测区域的区域对应的值。例如,在以抑制手、手臂被拉进门暗箱中为目的而将检测区域设定在门暗箱附近的情况下,作为第3设定值,也可以包含表示门暗箱的各特征点相对于基准点的相对位置的值。
另外,与校准相关的设定值包括表示从轿厢11的地板面到摄像机12为止的高度和该摄像机12的视场角(焦距)的值(以下,记为摄像机设定值)。
此外,存储部201中也可以存储有在摄像机12的安装位置没有偏移的情况下拍摄到的图像(基准图像)。
图像获取部202获取在轿厢11内的地板面上设置有多个标记m的状态下由摄像机12拍摄到的图像(以下,记为拍摄图像)。此外,在本实施方式中,虽然假定多个标记m分别沿着长方形的轿厢门槛13a的长边中的轿厢11侧的长边的两端部而设置在轿厢11内的地板面上(以下,仅记为设置在轿厢门槛13a的两端部)的情况,但只要多个标记m是能够确定与基准点(在本实施方式的情况下为轿厢门槛13a的中央)的相对位置的位置,则也可以设置在候梯厅15侧的地板面上,也可以设置在轿厢门槛13a、候梯厅门槛14a上。
偏移检测部203对由图像获取部202获取到的拍摄图像执行识别处理,识别(提取)该拍摄图像中包含的多个标记m。拍摄图像中包含的标记m的识别例如可以通过预先设定将标记m中包含的图案、在本实施方式的情况下是将包含正方形中含有的4个黑色圆形记号作为图案的物体识别为标记m来实现,也可以使用其他公知的图像识别技术来实现。
此外,在本实施方式中,所谓识别多个标记m,包括算出多个标记m在拍摄图像上的坐标值。在本实施方式中,假定如下情况:将通过连结被识别为标记m的物体中包含的4个黑色圆形记号的中心点而形成的四边形的中心点(重心)视为标记m,来算出多个标记m在拍摄图像上的坐标值。此外,在此,虽然将通过连结被识别为标记m的物体中包含的4个黑色圆形记号的中心点而形成的四边形的重心视为标记m,但也可以任意地设定将被识别为标记m的物体的哪个部分视为标记m。
偏移检测部203将上述识别处理的结果发送给管理者终端40。识别结果包含在拍摄图像上重叠了表示识别出的多个标记m(的位置)的图标的图像。另外,该识别结果的发送经由通信设备25进行。
在管理者终端40中,根据发送自图像处理装置20(偏移检测部203)的图像,确定该图像中包含的多个标记m(的位置),其详情在下文叙述。偏移检测部203根据由管理者终端40确定的多个标记m,检测摄像机12的安装位置的偏移。另外,关于偏移检测部203所包含的识别处理部231、算出处理部232以及检测处理部233的功能,将与流程图的说明一起在下文进行说明,因此在此省略它们的详细说明。
在由偏移检测部203检测到摄像机12的安装位置发生了偏移的情况下,设定处理部204在由图像获取部202获取到的拍摄图像中的与该偏移对应的适当的位置上设定检测区域。由此,在拍摄图像上设定考虑了摄像机12的安装位置的偏移的检测区域。此外,也可以将与偏移对应地设定在适当的位置上的检测区域的坐标值存储在存储部201中。
在由偏移检测部203检测到摄像机12的安装位置发生了偏移的情况下,通知处理部205对监视电梯系统的运用状态等的监视中心(的管理者)、设置标记m以进行电梯系统的维护检查的维护人员(所持的终端)通知摄像机12的安装位置发生偏移的情况(发生异常的情况)。此外,该通知例如经由通信设备25来进行。
接着,参照图7的流程图,对本实施方式中的校准功能中的电梯系统的处理顺序进行说明。此外,图7所示的一系列处理除了例如在定期维护时执行以外,也可以在电梯系统的运用前等执行。
首先,图像处理装置20的图像获取部202从摄像机12获取在轿厢11内的地板面上设置有多个标记m的状态下拍摄到的图像(拍摄图像)(步骤S1)。这里,作为一例,假定由图像获取部202获取到图8所示的拍摄图像i1的情况。在拍摄图像i1中,如图8所示,包含设置在轿厢门槛13a的两端部的两个标记m1、m2。此外,详细情况将在下文叙述,但在拍摄图像i1中,如图8所示,还包含标记m1的镜像m’。
接着,偏移检测部203所包含的识别处理部231对由图像获取部202获取到的拍摄图像执行识别处理,识别(提取)该拍摄图像中包含的多个标记m(步骤S2)。
此外,在本实施方式中,如上所述,多个标记m设置在轿厢门槛13a的两端部。由此,在从拍摄图像中识别多个标记m时,可能产生如下这样的问题。
一般来说,轿厢门槛13a附近的出入口柱由铝、不锈钢等具有光泽性的金属材料(具有镜面反射特性的材料)形成的情况较多。另外,近年来,以提高外观性为目的,不限于上述的出入口柱,采用具有光泽性的金属材料来形成轿厢11内的侧壁,并实施镜面加工等的情况也较多。因此,如上所述,在多个标记m设置在轿厢门槛13a的两端部等、多个标记m设置在由具有光泽性的金属材料形成的部分附近的情况下,如图8所示,这些标记m的镜像m’(在图8的情况下为标记m1的镜像m’)有可能映入由具有光泽性的金属材料形成的部分(在图8的情况下为轿厢11内的侧壁)。此外,在图8中,例示了1个镜像m’映入轿厢11内的侧壁的情况,但也有多个镜像m’映入多处的可能性。
由此,识别处理部231有可能将映入到由具有光泽性的金属材料形成的部分的镜像m’误识别为标记m。如果镜像m’被误识别为标记m,则无法正确地算出摄像机12相对于后述的基准点的相对位置,进而,可能会产生无法检测出摄像机12的安装位置是否产生偏移的问题。
因此,本实施方式的识别处理部231具有误识别抑制功能作为上述校准功能中的一个功能,该误识别抑制功能向管理者终端40发送在拍摄图像上重叠了表示在上述步骤S2中识别出的多个标记m的位置的图标的图像,从而能够经由该管理者终端40确认是否将镜像m’误识别为标记m。
具体而言,如图9所示,识别处理部231生成在拍摄图像上重叠了表示在上述步骤S2中识别出的多个标记m的位置的图标(例如,连结4个黑色圆形记号而得的×标记的图标)的图像(以下,记为确认图像),并将其发送到管理者终端40。在本实施方式中,例示了图标的形状为×标记的情况,但图标的形状只要是能够唯一确定标记m的位置的形状,则也可以是任意的形状。
此外,在以下的说明中,假设将图8所示的拍摄图像i1中的、(包含)标记m1的图中左侧的2个黑色圆形记号和镜像m’的图中右侧的2个黑色圆形记号(的物体)、以及(包含)标记m2中包含的4个黑色圆形记号(的物体)识别为标记m的情况。
再次返回图7的说明。当在上述步骤S2中识别出多个标记m时,识别处理部231生成在拍摄图像上重叠了表示该识别出的多个标记m的位置的图标的确认图像,并将其发送到管理者终端40(步骤S3)。这里,作为一例,假设生成图9所示的确认图像i2,并发送到管理者终端40的情况。在确认图像i2中,如图9所示,包含有连结由识别处理部231识别为标记m的标记m1及镜像m’中包含的4个黑色圆形记号而得的×标记的图标ic1、和连结标记m2中包含的4个黑色圆形记号而得的×标记的图标ic2。
管理者终端40在接收到由图像处理装置20的识别处理部231发送来的确认图像时,使包含该接收到的确认图像的显示画面显示在管理者终端40的显示器上(步骤S4)。如上所述,在步骤S3中发送了确认图像i2的情况下,如图10所示,在管理者终端40上显示包含确认图像i2的显示画面d1。在显示画面d1中,如图10所示,包含有确认图像i2、在变更确认图像i2中包含的图标ic1、ic2的位置的情况下由管理者按下的按钮b1(NG按钮)、在不变更确认图像i2中包含的图标ic1、ic2的位置的情况下由管理者按下的按钮b2(OK按钮)。
接着,管理者终端40根据管理者对所显示的显示画面的操作,生成返回给图像处理装置20的图像(以下,记为返回图像),并将其发送到图像处理装置20(步骤S5)。管理者对显示画面的操作包括:按下包含在图10所示的显示画面d1中的按钮b1,以变更包含在确认图像i2中的图标ic1、ic2的位置的操作;按下包含在图10所示的显示画面d1中的按钮b2的操作等。此外,在管理者终端40是具备触摸屏显示器的终端的情况下,可以触摸该触摸屏显示器来进行这些操作,在管理者终端40是PC的情况下,也可以经由鼠标、键盘等输入装置来进行这些操作。
这里,作为一例,假设按下显示画面d1中包含的按钮b1,进行变更确认图像i2中包含的图标ic1的位置的操作(具体而言,将连结标记m1及镜像m’中包含的4个黑色圆形记号而得的×标记的图标ic1的位置变更为连结标记m1中包含的4个黑色圆形记号的位置的操作),并生成图11所示的返回图像i3的情况。
此外,在按下了显示画面d1中包含的按钮b2的情况下,即,在不变更确认图像i2中包含的图标ic1、ic2的位置的情况下,管理者终端40不生成上述的返回图像,将该确认图像i2作为返回图像发送到图像处理装置20即可。
接着,图像处理装置20的识别处理部231在接收到由管理者终端40发送来的返回图像时,根据该接收到的返回图像(重叠在该返回图像上的图标的位置),确定拍摄图像中包含的多个标记m的位置(步骤S6)。然后,识别处理部231根据作为设定值存储在存储部201中的摄像机设定值(摄像机12的高度和摄像机12的视场角),算出摄像机12相对于在步骤S6中确定的多个标记m的各相对位置和摄像机12的3轴的角度(摄像机12的安装角度)(步骤S7)。如上所述,在步骤S5中发送了返回图像i3的情况下,识别处理部231根据该返回图像i3(重叠在该返回图像i3上的图标ic1、ic2的位置)确定拍摄图像i1中包含的标记m1、m2的位置,并分别算出摄像机12相对于标记m1的相对位置和摄像机12相对于标记m2的相对位置作为摄像机12相对于多个标记m的相对位置。此外,图8的拍摄图像i1中的点p1相当于被视为标记m1的部分,点p2相当于被视为标记m2的部分。
偏移检测部203所包含的算出处理部232根据由识别处理部231算出的摄像机12相对于多个标记m的各相对位置、和作为设定值存储在存储部201中的第1设定值,算出摄像机12相对于基准点的相对位置(步骤S8)。
如上所述,在步骤S7中算出摄像机12相对于标记m1、m2的相对位置的情况下,算出处理部232通过合成摄像机12相对于标记m1的相对位置、和作为第1设定值的标记m1相对于基准点的相对位置,来算出摄像机12相对于基准点的相对位置。同样地,算出处理部232通过合成摄像机12相对于标记m2的相对位置、和作为第1设定值的标记m2相对于基准点的相对位置,来算出摄像机12相对于基准点的相对位置。此外,图8的拍摄图像i1中的点p3相当于基准点。
接着,偏移检测部203所包含的检测处理部233根据由算出处理部232算出的摄像机12相对于基准点的相对位置和作为设定值存储在存储部201中的第2设定值,来判定摄像机12的安装位置是否产生偏移(步骤S9)。具体而言,检测处理部233判定由算出处理部232算出的摄像机12相对于基准点的相对位置与作为第2设定值的摄像机12相对于基准点的相对位置是否一致,来检测摄像机12的安装位置是否产生偏移。
在判定为摄像机12相对于基准点的相对位置一致、摄像机12的安装位置没有产生偏移的情况下(步骤S9的“是”),检测处理部233判定为摄像机12的安装位置没有偏移、不需要重新设定检测区域,结束这里的一系列处理。
另一方面,在判定为摄像机12相对于基准点的相对位置不一致、摄像机12的安装位置产生了偏移的情况下(步骤S9的“否”),设定处理部204根据由算出处理部232算出的摄像机12相对于基准点的相对位置、作为设定值存储在存储部201中的第3设定值以及摄像机设定值,在由图像获取部202获取到的拍摄图像中的与摄像机12的安装位置的偏移对应的适当的位置上设定检测区域(步骤S10)。
在本实施方式中,由于假定的是设定从轿厢门槛13a向候梯厅15侧具有规定的范围的检测区域的情况,因此,首先,设定处理部204通过合成由算出处理部232算出的摄像机12相对于基准点的相对位置、和作为第3设定值的轿厢门槛13a的各顶点相对于基准点的相对位置,来算出轿厢门槛13a的各顶点相对于摄像机12的相对位置。此外,图8的拍摄图像i1中的点p4~点p7相当于轿厢门槛13a的各顶点。
之后,设定处理部204根据算出的轿厢门槛13a的各顶点相对于摄像机12的相对位置、由识别处理部231算出的摄像机12的3轴的角度、作为摄像机设定值存储在存储部201中的摄像机12的视场角,来设定检测区域。
由此,在由图像获取部202获取到的拍摄图像i1中,如图8的斜线部分所示,设定与摄像机12的安装位置的偏移对应的检测区域e1,即,设定从轿厢门槛13a的长边中的轿厢11侧的长边朝向候梯厅15侧具有规定的范围的检测区域e1。
然后,通知处理部205经由通信设备25向监视中心(的管理者)或维护人员(的终端)通知摄像机12的安装位置发生了偏移的情况(步骤S11),结束这里的一系列处理。
此外,在图7所示的步骤S3中,在图像处理装置20侧,使表示多个标记m的位置的图标重叠在拍摄图像上而生成确认图像,但确认图像也可以不在图像处理装置20侧,而在管理者终端40侧生成。在该情况下,图像处理装置20的识别处理部231执行将拍摄图像和在步骤S2中识别出的多个标记m在拍摄图像上的坐标值作为识别结果发送到管理者终端40的处理,来代替上述的步骤S3即可。在该情况下,管理者终端40如果接收到从图像处理装置20的识别处理部231发送来的拍摄图像和上述的坐标值,则代替上述的步骤S4,执行以下处理即可:根据该接收到的拍摄图像及坐标值生成确认图像,然后,使包含该生成的确认图像的显示画面显示在显示器上。
另外,在图7所示的步骤S5中,在管理者终端40侧生成确定了多个标记m的位置的返回图像,但返回图像也可以不在管理者终端40侧生成,而在图像处理装置20侧生成。在该情况下,管理者终端40执行将通过管理者对显示画面的操作而确定的多个标记m在拍摄图像上(确认图像上)的坐标值发送到图像处理装置20的处理,来代替上述的步骤S5即可。在该情况下,图像处理装置20在接收到从管理者终端40发送的上述坐标值时,执行根据该接收到的坐标值和拍摄图像来确定多个标记m的位置的处理,来代替上述步骤S6即可。
进一步地,在图7所示的步骤S9中,根据摄像机12相对于拍摄图像中包含的基准点的相对位置、和摄像机12相对于基准图像中包含的基准点的相对位置是否一致,来判定(检测)摄像机12的安装位置是否产生了偏移,但也可以是如下构成:即使在摄像机12的安装位置产生了偏移的情况下,只要该偏移是不会对上述使用者检测处理的精度造成影响的程度,就不进行检测区域的重新设定。即,也可以根据摄像机12相对于拍摄图像中包含的基准点的相对位置与摄像机12相对于基准图像中包含的基准点的相对位置之差(偏离度)是否在预先设定的范围内,来执行步骤S9的处理,在该偏离度不在预先设定的范围内的情况下,判定为摄像机12的安装位置产生了偏移。
另外,本实施方式中的检测区域的设定是指已设定的检测区域的重新设定的情况,检测区域的设定也可以表现为检测区域的校正。在该情况下,摄像机12相对于基准点的相对位置与上述摄像机12的3轴的角度均是为了实现检测区域的校正而需要的值,因此也可以表现为校正值。
在本实施方式中,例示了在图像处理装置20侧算出上述的校正值的情况,但也可以在管理者终端40侧计算该校正值。在该情况下,在管理者终端40中,存储有存储在图像处理装置20的存储部201中的各种设定值(例如,第1设定值以及摄像机设定值),并且,搭载有相当于图像处理装置20的识别处理部231以及算出处理部232的功能(具体而言,是用于执行上述步骤S7、S8的处理的功能)。
另外,在本实施方式中,如图9所示,在确认图像上,重叠(包含)了表示多个标记m的位置的图标(在图9的情况下为图标ic1、ic2),但是,例如如图12所示,在确认图像上,也可以进一步重叠(包含)框线f1、f2,该框线f1、f2包围能够也包含镜像m’地映入多个标记m的区域(以下,记为关注区域(ROI:Region Of Interest))。由此,在包含确认图像i2的显示画面d1中也同样地显示包围关注区域的框线f1、f2,因此,管理者在确定多个标记m的位置时能够一目了然地把握应该关注哪里。即,对于管理者而言,能够提高便利性。
进一步地,在本实施方式中,确认图像是通过在拍摄图像上重叠表示识别出的多个标记m的位置的图标而生成的,但确认图像也可以不是基于拍摄图像而生成的。确认图像例如如图13所示,只要是至少能够把握拍摄图像中包含的标记m的图案(在该情况下为黑色圆形记号)与被识别为标记m的图案(在该情况下为4个黑色圆形记号)的位置的关系的方式,则可以是任意的方式。即使在这样的情况下,管理者也能够根据标记m的图案和被识别为标记m的图案的位置(图标ic1、ic2的位置)的关系,在某种程度上把握(推测)镜像m’是否被误识别为标记m。
在本实施方式中,电梯系统从摄像机12获取在设置有能够与轿厢11的地板面以及候梯厅15的地板面区分开的标记m的状态下拍摄到的图像,从获取到的图像中识别标记m,根据识别出的标记m检测摄像机12的安装位置的偏移,在检测到摄像机12的安装位置的偏移的情况下,设定与图像处理(使用者检测处理)相关的设定值。与该图像处理相关的设定值包括对拍摄图像设定的用于检测离轿厢门13最近的使用者的检测区域(的坐标值)。
根据这样的构成,即使在摄像机12的安装位置产生偏移的情况下,也能够对由该摄像机12拍摄的图像(例如旋转后的图像、在左右方向上偏移的图像)设定适当的检测区域,因此能够抑制使用者的检测精度的降低。
进一步地,在本实施方式中,电梯系统从拍摄图像中识别标记m,将该识别结果显示给管理者,在该识别结果有错误的情况下,根据该管理者的操作变更该识别结果(例如,使表示标记m的位置的图标移动),确定标记m的位置。根据这样的构成,即使标记m设置在由具有光泽性的金属材料形成的部分附近,也能够抑制将映入由具有光泽性的金属材料形成的部分的镜像m’误识别为标记m。
根据以上说明的一实施方式,能够提供一种能够检测摄像机12的安装位置的偏移的电梯系统。
此外,虽然对本发明的几个实施方式进行了说明,但这些实施方式是作为例子而提示的,并不意图限定发明的范围。这些新的实施方式能够以其他各种方式实施,在不脱离发明的主旨的范围内,能够进行各种省略、替换、变更。这些实施方式、其变形包含在发明的范围、主旨内,并且包含在权利要求书所记载的发明及其等同的范围内。
Claims (7)
1.一种电梯系统,其包括:图像处理装置,其能够使用由摄像机拍摄的包含轿厢内以及候梯厅的图像,来检测轿厢的门附近的使用者;以及管理者终端,其与所述图像处理装置连接,能够由管理者操作,所述电梯系统的特征在于,具备:
获取部,其从所述摄像机获取在如下状态下拍摄到的图像,即能够与所述轿厢的地板面及所述候梯厅的地板面区分开的标记沿着用于引导所述轿厢的门的开闭的门槛的两端部,在所述轿厢内的地板面上设置有多个的状态;
识别部,其从获取到的所述图像中识别所述标记;
显示部,其显示表示所述识别部的识别结果的确认图像;
确定部,其根据所述管理者对由所述显示部显示的所述确认图像的操作,来确定所述标记的位置;以及
检测部,其根据所确定的所述标记的位置,来检测所述摄像机的安装位置的偏移,
所述确认图像包含第一图标和第二图标中的至少一方,所述第一图标表示识别出的所述标记的位置,所述第二图标表示被误识别为所述标记的标记的镜像的位置,
在所述确认图像中包含有所述第二图标的情况下,所述确定部根据基于使所述第二图标移动的所述管理者的操作而生成的图像,来确定所述标记的位置。
2.根据权利要求1所述的电梯系统,其特征在于,
所述确认图像根据获取到的所述图像和识别出的所述标记在获取到的所述图像上的坐标值,使表示所述标记的位置的第一图标或者第二图标重叠地生成在获取到的所述图像上的由该坐标值表示的位置上。
3.根据权利要求1所述的电梯系统,其特征在于,
所述确认图像还示出能够映入所述标记以及所述标记的镜像的关注区域。
4.根据权利要求1所述的电梯系统,其特征在于,
还具备设定部,在检测到所述摄像机的安装位置的偏移的情况下,所述设定部设定与图像处理相关的设定值,所述图像处理是为了检测所述轿厢的门附近的使用者而由所述图像处理装置执行的处理。
5.根据权利要求4所述的电梯系统,其特征在于,
所述检测部根据所确定的所述标记的位置,算出所述摄像机相对于获取到的所述图像中包含的基准点的相对位置和所述摄像机的安装角度,
在所算出摄像机相对于的基准点的所述相对位置与摄像机相对于在所述摄像机的安装位置没有偏移的情况下的基准图像中包含的基准点的相对位置不一致的情况下,检测所述摄像机的安装位置的偏移,
在检测到所述摄像机的安装位置的偏移的情况下,所述设定部根据所算出的摄像机相对于基准点的所述相对位置、和所算出的所述摄像机的安装角度,来设定与所述图像处理相关的设定值。
6.根据权利要求4所述的电梯系统,其特征在于,
与所述图像处理相关的设定值包括对由所述摄像机拍摄的图像设定的用于检测所述使用者的区域。
7.根据权利要求1所述的电梯系统,其特征在于,
还具备通知部,在检测到所述摄像机的安装位置的偏移的情况下,所述通知部对管理者通知发生了异常的情况。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019-053670 | 2019-03-20 | ||
JP2019053670A JP6673618B1 (ja) | 2019-03-20 | 2019-03-20 | エレベータシステム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111717738A CN111717738A (zh) | 2020-09-29 |
CN111717738B true CN111717738B (zh) | 2022-11-15 |
Family
ID=70000890
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911167951.7A Active CN111717738B (zh) | 2019-03-20 | 2019-11-25 | 电梯系统 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6673618B1 (zh) |
CN (1) | CN111717738B (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5182776A (en) * | 1990-03-02 | 1993-01-26 | Hitachi, Ltd. | Image processing apparatus having apparatus for correcting the image processing |
JP2004083158A (ja) * | 2002-08-23 | 2004-03-18 | Mitsubishi Electric Corp | エレベータの遠隔救出運転制御装置 |
JP2009214964A (ja) * | 2008-03-07 | 2009-09-24 | Toshiba Elevator Co Ltd | 昇降機の保守管理システム |
WO2012124068A1 (ja) * | 2011-03-16 | 2012-09-20 | 三菱電機株式会社 | エレベーターの制御装置 |
JP5996725B1 (ja) * | 2015-06-04 | 2016-09-21 | 東芝エレベータ株式会社 | エレベータ用操作盤 |
JP6068694B1 (ja) * | 2016-01-13 | 2017-01-25 | 東芝エレベータ株式会社 | エレベータの乗車検知システム |
JP2018158842A (ja) * | 2018-05-29 | 2018-10-11 | 東芝エレベータ株式会社 | 画像解析装置及びエレベータシステム |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000272863A (ja) * | 1999-03-24 | 2000-10-03 | Hitachi Ltd | 乗客コンベアの監視装置 |
JP2002232874A (ja) * | 2001-02-07 | 2002-08-16 | Nissan Motor Co Ltd | 車両用カメラの撮像方向のずれ検出方法および装置 |
JP4238663B2 (ja) * | 2003-08-29 | 2009-03-18 | トヨタ自動車株式会社 | 車載カメラのキャリブレーション方法及びキャリブレーション装置 |
WO2005052842A2 (en) * | 2003-10-31 | 2005-06-09 | Otis Elevator Company | Rf id and low resolution ccd sensor based positioning system |
JP5396096B2 (ja) * | 2009-02-16 | 2014-01-22 | 本田技研工業株式会社 | 軸調整用ターゲット装置 |
JP4636346B2 (ja) * | 2009-03-31 | 2011-02-23 | アイシン精機株式会社 | 車載カメラの校正装置、方法、及びプログラム |
JP5325251B2 (ja) * | 2011-03-28 | 2013-10-23 | 株式会社日立製作所 | カメラ設置支援方法、画像認識方法 |
JP5784099B2 (ja) * | 2013-12-16 | 2015-09-24 | ニチユ三菱フォークリフト株式会社 | 無人フォークリフト |
JP6046286B1 (ja) * | 2016-01-13 | 2016-12-14 | 東芝エレベータ株式会社 | 画像処理装置 |
JP6092433B1 (ja) * | 2016-01-13 | 2017-03-08 | 東芝エレベータ株式会社 | エレベータの乗車検知システム |
JP6377795B1 (ja) * | 2017-03-24 | 2018-08-22 | 東芝エレベータ株式会社 | エレベータの乗車検知システム |
-
2019
- 2019-03-20 JP JP2019053670A patent/JP6673618B1/ja active Active
- 2019-11-25 CN CN201911167951.7A patent/CN111717738B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5182776A (en) * | 1990-03-02 | 1993-01-26 | Hitachi, Ltd. | Image processing apparatus having apparatus for correcting the image processing |
JP2004083158A (ja) * | 2002-08-23 | 2004-03-18 | Mitsubishi Electric Corp | エレベータの遠隔救出運転制御装置 |
JP2009214964A (ja) * | 2008-03-07 | 2009-09-24 | Toshiba Elevator Co Ltd | 昇降機の保守管理システム |
WO2012124068A1 (ja) * | 2011-03-16 | 2012-09-20 | 三菱電機株式会社 | エレベーターの制御装置 |
JP5996725B1 (ja) * | 2015-06-04 | 2016-09-21 | 東芝エレベータ株式会社 | エレベータ用操作盤 |
JP6068694B1 (ja) * | 2016-01-13 | 2017-01-25 | 東芝エレベータ株式会社 | エレベータの乗車検知システム |
JP2018158842A (ja) * | 2018-05-29 | 2018-10-11 | 東芝エレベータ株式会社 | 画像解析装置及びエレベータシステム |
Also Published As
Publication number | Publication date |
---|---|
CN111717738A (zh) | 2020-09-29 |
JP6673618B1 (ja) | 2020-03-25 |
JP2020152547A (ja) | 2020-09-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10196241B2 (en) | Elevator system | |
CN108622777B (zh) | 电梯的乘梯探测系统 | |
JP6317004B1 (ja) | エレベータシステム | |
JP6693627B1 (ja) | 画像処理装置 | |
JP6377795B1 (ja) | エレベータの乗車検知システム | |
JP6713837B2 (ja) | 輸送機器制御システム、及び、輸送機器制御方法 | |
CN111717768B (zh) | 图像处理装置 | |
CN112340577B (zh) | 电梯的使用者探测系统 | |
JP2019167187A (ja) | 利用者検知システム | |
CN111717738B (zh) | 电梯系统 | |
CN112429609B (zh) | 电梯的使用者探测系统 | |
CN111689324B (zh) | 图像处理装置及图像处理方法 | |
CN111960206B (zh) | 图像处理装置及标记 | |
CN112340560B (zh) | 电梯的使用者探测系统 | |
JP6781291B2 (ja) | 画像処理装置 | |
JP2011175405A (ja) | 表示装置および表示装置における操作可能範囲表示方法 | |
JP6843935B2 (ja) | エレベータの利用者検知システム | |
CN115108425B (zh) | 电梯的使用者检测系统 | |
CN112441497B (zh) | 电梯的使用者探测系统 | |
WO2012077511A1 (ja) | プラットホームドアの安全装置 | |
JP6729980B1 (ja) | エレベータの利用者検知システム | |
TWI762822B (zh) | 影像處理系統、對講機系統、影像處理方法及影像處理程式 | |
JP2023027492A (ja) | パネル型入力装置、及びこれを使用したエレベーター | |
CN113911868A (zh) | 电梯的使用者检测系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |