CN111717768B - 图像处理装置 - Google Patents
图像处理装置 Download PDFInfo
- Publication number
- CN111717768B CN111717768B CN201911181935.3A CN201911181935A CN111717768B CN 111717768 B CN111717768 B CN 111717768B CN 201911181935 A CN201911181935 A CN 201911181935A CN 111717768 B CN111717768 B CN 111717768B
- Authority
- CN
- China
- Prior art keywords
- camera
- marks
- image processing
- car
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B13/00—Doors, gates, or other apparatus controlling access to, or exit from, cages or lift well landings
- B66B13/24—Safety devices in passenger lifts, not otherwise provided for, for preventing trapping of passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
- B66B5/0006—Monitoring devices or performance analysers
- B66B5/0012—Devices monitoring the users of the elevator system
Landscapes
- Indicating And Signalling Devices For Elevators (AREA)
- Elevator Door Apparatuses (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明的图像处理装置提高摄像机的安装位置的偏移的检测精度。根据一实施方式,图像处理装置设置于轿厢的门附近,对拍摄包含轿厢内以及候梯厅的图像的摄像机的安装位置的偏移进行检测。图像处理装置具备获取部和第1检测部。获取部从摄像机获取在设置有多个能够与轿厢的地板面以及候梯厅的地板面进行区分的标记的状态下拍摄到的图像。第1检测部从获取到的图像识别多个标记,在识别出的多个标记间的距离符合预先设定的条件的情况下,基于识别出的多个标记,来检测摄像机的安装位置的偏移。
Description
本申请以日本专利申请2019-053669(申请日:3/20/2019)为基础,基于本申请享有优先权。本申请通过参考本申请而包含该申请的全部内容。
技术领域
本发明的实施方式涉及一种图像处理装置。
背景技术
近年来,为了防止人、物被电梯的轿厢门夹到,考虑了各种技术。例如,考虑了使用摄像机来检测朝向电梯移动的使用者,延长该电梯的门的开门时间的技术。
在这样的技术中,需要从由摄像机拍摄到的图像中精度良好地检测朝向电梯移动的使用者。然而,当在摄像机的安装位置产生偏移的情况下,由摄像机拍摄到的图像旋转,或者向左右方向偏移,所以存在使上述使用者的检测精度下降的可能性。
因此,当在摄像机的安装位置产生偏移的情况下能够检测该偏移的技术被开发,期望提高该技术的精度。
发明内容
本发明的实施方式想要解决的课题在于提供能够提高摄像机的安装位置的偏移的检测精度的图像处理装置。
根据一实施方式,图像处理装置设置于轿厢的门附近,检测拍摄包含轿厢内以及候梯厅的图像的摄像机的安装位置的偏移。所述图像处理装置具备获取部和第1检测部。所述获取部从所述摄像机获取在设置有多个能够与所述轿厢的地板面以及所述候梯厅的地板面进行区分的标记的状态下拍摄到的图像。所述第1检测部从所述获取到的图像识别所述多个标记,在所述识别出的多个标记间的距离符合预先设定的条件的情况下,基于所述识别出的多个标记,检测所述摄像机的安装位置的偏移。
附图说明
图1为表示实施方式的电梯系统的概略构成例的图。
图2为表示电梯系统所包含的图像处理装置的硬件构成例的图。
图3为表示在摄像机的安装位置处没有偏移的情况下拍摄到的图像的图。
图4为表示在摄像机的安装位置处存在偏移的情况下拍摄到的图像的图。
图5为表示设置于摄像机的拍摄范围内的标记的一个例子的图。
图6为表示图像处理装置的功能构成例的框图。
图7为表示校准功能中的图像处理装置的处理次序的一个例子的流程图。
图8为用于补充性地说明图7所示的流程图的图,为表示由摄像机拍摄到的图像的图。
图9为用于说明作为校准功能的一个功能的误识别抑制功能的图。
图10为用于说明作为校准功能的一个功能的误识别抑制功能的另一图。
具体实施方式
以下,参考附图,对实施方式进行说明。公开的仅仅是一个例子,发明并不被以下的实施方式所记载的内容限定。本领域技术人员能够容易地想到的变形当然包含于公开的范围。为了使说明更加明确,在附图中,有时将各部分的尺寸、形状等相对于实际的实施方案进行变更而示意地表示。在多个附图中,对对应的要素附加相同的参考数字,有时省略详细的说明。
图1为表示实施方式的电梯系统的概略构成例的图。
在轿厢11的出入口上部设置有摄像机12。具体而言,在覆盖轿厢11的出入口上部的门楣板11a之中,朝向轿厢11内以及候梯厅15都拍摄到的方向设置有摄像机12的镜头部分。摄像机12例如为车载摄像机等小型的监视用摄像机,具有广角镜头,在1秒钟内连续地拍摄几帧(例如,30帧/秒)的图像。
摄像机12既可以始终为开启,始终进行拍摄,也可以在规定的时刻成为开启,开始拍摄,在规定的时刻成为关闭,结束拍摄。例如,摄像机12也可以在轿厢11的移动速度小于规定值时成为开启,在轿厢11的移动速度为规定值以上时成为关闭。在该情况下,在轿厢11为了在规定楼层停止而开始减速,移动速度小于规定值时,摄像机12成为开启,开始拍摄,在轿厢11为了前往与该规定楼层不同的楼层而开始加速,移动速度为规定值以上时,摄像机12成为关闭,结束拍摄。也就是说,摄像机12的拍摄从轿厢11为了在规定楼层停止而开始减速,移动速度小于规定值起,轿厢11在该规定楼层停止的期间中也包括在内,到轿厢11为了从该规定楼层前往其它楼层而开始加速,移动速度为规定值以上为止持续进行。
摄像机12的拍摄范围被设定为L1+L2(L1≥L2)。L1为候梯厅15侧的拍摄范围,从轿厢门13朝向候梯厅15地设定。L1为轿厢11侧的拍摄范围,从轿厢门13朝向轿厢背面地设定。此外,L1、L2为进深方向的范围,关于宽度方向(与进深方向正交的方向)的范围,设为至少比轿厢11的横宽大。
在各楼层的候梯厅15中,在轿厢11的抵达口处开闭自如地设置有候梯厅门14。候梯厅门14在轿厢11抵达时与轿厢门13卡合而进行开闭动作。此外,动力源(门机)处于轿厢11侧,候梯厅门14只是追随于轿厢门13而开闭。在以下的说明中,在轿厢门13开门时,候梯厅门14也开门,在对轿厢门13进行关门时,候梯厅门14也关门。
由摄像机12连续拍摄到的各图像(影像)由图像处理装置20实时地进行图像处理。具体而言,图像处理装置20基于预先设定的区域(以下,记载为检测区域)中的图像的亮度值的变化,检测离轿厢门13最近的使用者(的运动),进行检测到的使用者是否具有乘坐轿厢11的意图的判定、是否存在检测到的使用者的手、手臂被拉进门暗箱中的可能性的判定等。图像处理装置20的图像处理的结果根据需要而反映在由电梯控制装置30进行的控制处理(主要为门开闭控制处理)中。
电梯控制装置30控制轿厢11抵达候梯厅15时的轿厢门13的门开闭。详细而言,电梯控制装置30在轿厢11抵达候梯厅15时对轿厢门13进行开门,在经过规定时间后关门。
但是,在由图像处理装置20检测到具有乘坐轿厢11的意图的使用者的情况下,电梯控制装置30禁止轿厢门13的关门动作,维持开门状态(延长轿厢门13的开门时间)。另外,在由图像处理装置20检测到存在手、手臂被拉进门暗箱的可能性的使用者的情况下,电梯控制装置30禁止轿厢门13的开门动作或者使轿厢门13的开门速度比通常慢,或者在轿厢11内播放催促远离轿厢门13的的消息等,并对该使用者通知存在手、手臂有被拉进门暗箱的可能性这一情况。
此外,在图1中为方便起见,从轿厢11取出图像处理装置20而加以展示,但实际上图像处理装置20与摄像机12一并收纳于门楣板11a之中。另外,在图1中,例示出摄像机12与图像处理装置20分开设置的情况,但摄像机12和图像处理装置20也可以作为一个装置而一体化地设置。进而,在图1中,例示出图像处理装置20与电梯控制装置30分开设置的情况,但图像处理装置20的功能也可以搭载于电梯控制装置30中。
图2为表示图像处理装置20的硬件构成的一个例子的图。
如图2所示,在图像处理装置20中,总线21上连接有非易失性存储器22、CPU23、主存储器24、以及通信设备25等。
非易失性存储器22例如存储包括操作系统(OS)等的各种程序。此外,在存储于非易失性存储器22的程序中,包括用于执行上述图像处理(更详细而言为后述的使用者检测处理)的程序、用于实现后述的校准功能的程序(以下,记载为校准程序)。
CPU23例如为执行存储于非易失性存储器22的各种程序的处理器。此外,CPU23执行图像处理装置20整体的控制。
主存储器24例如被用作在CPU23执行各种程序时所需的工作区域等。
通信设备25具有对通过有线或者无线来与例如摄像机12、电梯控制装置30等外部装置执行的通信(信号的收发)进行控制的功能。
在此,如上所述,图像处理装置20执行基于预先设定的检测区域中的图像的亮度值的变化来检测最靠近轿厢门13的使用者的使用者检测处理。在该使用者检测处理中,为了关注预先设定的检测区域中的图像的亮度值的变化,需要将该检测区域始终设定于图像上的决定好的位置。
然而,在电梯系统的运用过程中,例如当由于针对轿厢11、摄像机12的冲击等而在摄像机12的安装位置(安装角度)处产生偏移时,在上述检测区域也产生偏移,所以图像处理装置20会关注与实际想要关注的区域不同的区域的图像的亮度值的变化,其结果是存在无法检测本来需要检测的使用者(或物体),或者误检测本来无需检测的使用者(或物体)等的可能性。
图3表示当在摄像机12的安装位置处没有偏移的情况下拍摄到的图像的一个例子。此外,虽然在图1中未表示,但在轿厢11侧设置有用于引导轿厢门13的开闭的门槛(门坎)(以下,记载为轿厢门槛)13a。同样地,在候梯厅15侧设置有用于引导候梯厅门14的开闭的门槛(以下,记载为候梯厅门槛)14a。另外,图3中的斜线部分表示设定于图像上的检测区域e1。在此,作为一个例子,假定为了检测处于候梯厅15的使用者,检测区域e1被设定为从长方形形状的轿厢门槛13a的长边中的轿厢11侧的长边起朝向候梯厅15侧具有规定的范围。此外,为了抑制手、手臂被拉进门暗箱中,检测区域被设定于轿厢11侧,也可以在候梯厅15侧以及轿厢11侧这双方设定有多个。
另一方面,图4表示当在摄像机12的安装位置处存在偏移的情况下拍摄到的图像的一个例子。此外,图4中的斜线部分与图3同样地表示设定于图像上的检测区域e1。
如图4所示,当在摄像机12的安装位置处存在偏移时,由摄像机12拍摄到的图像与图3所示的情况相比,例如成为旋转的图像(倾斜的图像)。然而,由于检测区域e1与图3同样地,设定于图像上的决定好的位置,所以本来如图3所示,被设定为从长方形形状的轿厢门槛13a的长边中的轿厢11侧的长边朝向候梯厅15侧具有规定的范围,但却会如图4所示,被设定为从与长方形形状的轿厢门槛13a的长边完全没有关系的位置起具有规定的范围。据此,如上所述,存在未能检测本来需要检测的使用者,或者误检测无需检测的使用者的可能性。此外,在图4中,例示出起因于摄像机12的安装位置的偏移而导致图像旋转的情况,但起因于摄像机12的安装位置的偏移而图像向左右方向偏移的情况也存在同样的可能性。
因而,本实施方式的图像处理装置20具有校准功能,该校准功能检测在摄像机12的安装位置处是否产生偏移,在产生了偏移的情况下,能够与该偏移相对应地在适当的位置处设定检测区域。以下,对该校准功能详细地进行说明。
此外,当实现校准功能时,例如需要将图5所示的标记m设置于摄像机12的拍摄范围内。标记m例如由进行电梯系统的保养检查的维护人员设置。在此,标记m为正方形形状,作为图案而包含4个黑色的圆形符号,但只要标记m为4个角全部为直角的四边形,包含能够与摄像机12的拍摄范围内所包含的其它物体(例如,轿厢11、候梯厅15的地板面)进行区分的图案,就可以是任意的。
图6为表示本实施方式的图像处理装置20的功能构成的一个例子的框图。在此,主要对与上述校准功能有关的功能结构进行说明。
如图6所示,图像处理装置20包括存储部201、图像获取部202、偏移检测部203、设定处理部204以及通知处理部205等。如图6所示,偏移检测部203还包括识别处理部231、算出处理部232以及检测处理部233等。
在本实施方式中,设为这些各部202~205例如通过由图2所示的CPU23(也就是说,图像处理装置20的计算机)执行存储于非易失性存储器22中的校准程序(也就是说,软件)而实现来进行说明,但上述各部202~205既可以由硬件实现,也可以由软件以及硬件的组合实现。另外,在本实施方式中,存储部201例如由图2所示的非易失性存储器22或者其它存储装置等构成。
存储部201中存储有与校准功能有关的设定值。与校准功能有关的设定值包含表示标记相对于基准点的相对位置的值(以下,记载为第1设定值)。基准点是指成为用于检测在摄像机12的安装位置处是否产生了偏移的指标的位置,例如,长方形形状的轿厢门槛13a的长边中的轿厢11侧的长边的中央相当于该基准点。此外,基准点也可以不设定为上述长方形形状的轿厢门槛13a的长边中的轿厢11侧的长边的中央,只要为当在摄像机12的安装位置处未产生偏移的情况下包含于该摄像机12的拍摄范围内的位置,就可以将任意的位置设定为基准点。
另外,与校准相关的设定值包括表示摄像机12相对于包含在摄像机12的安装位置未产生偏移的情况下的图像(基准图像)中的基准点的相对位置的值(以下,记为第2设定值)。
进而,在与校准有关的设定值中,包含表示轿厢门槛13a的各顶点(四个角)相对于基准点的相对位置的值(以下,记载为第3设定值)。此外,在本实施方式中,由于假定检测区域被设定为从长方形形状的轿厢门槛13a的长边中的轿厢11侧的长边起朝向候梯厅15侧具有规定的范围的情况,所以作为上述第3设定值,包含表示轿厢门槛13a的各顶点相对于基准点的相对位置的值,但不限定于此,第3设定值中设定有与应设定检测区域的区域相对应的值。例如,在以抑制手、手臂被拉进门暗箱中为目的而将检测区域设定于门暗箱附近的情况下,作为第3设定值,也可以包含表示门暗箱的各特征点相对于基准点的相对位置的值。
另外,在与校准有关的设定值中,包含表示从轿厢11的地板面至摄像机12为止的高度和该摄像机12的视场角(焦距)的值(以下,记载为摄像机设定值)。
进而,在与校准有关的设定值中,包含针对多个标记m间的距离而设定的上限值(阈值)。
此外,也可以在存储部201中存储当在摄像机12的安装位置处没有偏移的情况下拍摄到的图像(基准图像)。
图像获取部202获取在轿厢11内的地板面设置有多个标记m的状态下由摄像机12拍摄到的图像(以下,记载为拍摄图像)。此外,在本实施方式中,假定以使多个标记m分别沿着长方形形状的轿厢门槛13a的长边中的轿厢11侧的长边的两端部的方式,设置于轿厢11内的地板面(以下,简记为设置于轿厢门槛13a的两端部)的情况,但多个标记m只要为能够确定与基准点(在本实施方式的情况下,为轿厢门槛13a的中央)的相对位置的位置,就既可以设置于候梯厅15侧的地板面,也可以设置于轿厢门槛13a、候梯厅门槛14a上。
偏移检测部203对由图像获取部202获取到的拍摄图像执行识别处理,识别(提取)该拍摄图像所包含的多个标记m。拍摄图像所包含的标记m的识别例如既可以通过预先设定成将如下物体作为标记m而加以识别来实现,也可以使用其它公知的图像识别技术来实现,上述物体包含标记m所包含的图案、在本实施方式的情况下正方形之中所包含的4个黑色的圆形符号图案来作为图案。
此外,在本实施方式中,识别多个标记m的情况包括计算多个标记m的拍摄图像上的坐标值的情况。在本实施方式中,假定将通过将作为标记m而识别出的物体所包含的4个黑色的圆形符号的中心点进行连结而形成的四边形的中心点(重心)视为标记m,计算多个标记m的拍摄图像上的坐标值的情况。此外,在此,将通过将作为标记m而识别出的物体所包含的4个黑色的圆形符号的中心点进行连结而形成的四边形的重心视为标记m,但也可以任意地设定将作为标记m而识别出的物体的哪个部分视为标记m。
偏移检测部203基于识别出的多个标记m,检测摄像机12的安装位置的偏移。此外,关于偏移检测部203所包含的识别处理部231、算出处理部232以及检测处理部233的功能,将与流程图的说明一并在下文叙述,所以在此省略它们的详细的说明。
在由偏移检测部203检测到在摄像机12的安装位置处产生了偏移这一情形的情况下,设定处理部204在由图像获取部202获取到的拍摄图像中的与该偏移相匹配的适当的位置上设定检测区域。据此,在拍摄图像上设定考虑了摄像机12的安装位置的偏移的检测区域。此外,也可以将与偏移对应地设定于适当的位置的检测区域的坐标值存储于存储部201中。
在由偏移检测部203检测到在摄像机12的安装位置处产生了偏移这一情形的情况下,通知处理部205对监视电梯系统的运用状态等的监视中心(的管理员)、设置标记m来进行电梯系统的保养检查的维护人员(携带的终端)通知在摄像机12的安装位置处产生偏移这一情况(产生异常这一情况)。此外,该通知例如经由通信设备25进行。
接下来,参考图7的流程图,对本实施方式中的校准功能中的图像处理装置20的处理次序进行说明。此外,图7所示的一连串的处理例如也可以除了在定期维修时执行之外,还在电梯系统的运用前等执行。
首先,图像获取部202从摄像机12获取当在轿厢11内的地板面设置有多个标记m的状态下拍摄到的图像(拍摄图像)(步骤S1)。在此,作为一个例子,假定由图像获取部202获取到图8所示的拍摄图像i1的情况。在拍摄图像i1中,如图8所示,包含设置于轿厢门槛13a的两端部的两个标记m1、m2。此外,关于详细内容将在下文叙述,但在拍摄图像i1中,如图8所示,还包含标记m1的镜像m’。
接着,偏移检测部203所包含的识别处理部231对由图像获取部202获取到的拍摄图像执行识别处理,识别(提取)该拍摄图像所包含的多个标记m(步骤S2)。
此外,在本实施方式中,如上所述,多个标记m设置于轿厢门槛13a的两端部。据此,在从拍摄图像识别多个标记m时,可能产生如下问题。
一般而言,轿厢门槛13a附近的出入口柱由铝、不锈钢等具有光泽性的金属材料(具有镜面反射特性的材料)形成的情况较多。另外近年来,以提高美观性为目的,不限于上述出入口柱,由具有光泽性的金属材料形成轿厢11内的侧壁,实施镜面加工等的情况也较多。因此,在如上所述那样多个标记m设置于轿厢门槛13a的两端部等、多个标记m设置于由具有光泽性的金属材料形成的部分附近的情况下,存在如图8所示,这些标记m的镜像m’(在为图8的情况下,标记m1的镜像m’)映入至由具有光泽性的金属材料形成的部分(在为图8的情况下,轿厢11内的侧壁)的可能性。
据此,存在识别处理部231将映入至由具有光泽性的金属材料形成的部分的镜像m’误识别成标记m的可能性。若镜像m’被误识别成标记m,则无法准确地计算后述的摄像机12相对于基准点的相对位置,甚至可能产生无法检测在摄像机12的安装位置处是否产生偏移这样的问题。
因而,本实施方式的识别处理部231以作为上述校准功能中的一个功能的方式而具有判定在上述步骤S2中识别出的多个标记m是否包含镜像m’的误识别抑制功能。
具体而言,识别处理部231基于关于在上述步骤S2中识别出的多个标记m间的距离而预先设定的条件,判定在该识别出的多个标记m中是否包含镜像m’。关于详细内容将在下文叙述,但在本实施方式中,假定关于上述多个标记m间的距离而预先设定的条件为作为设定值而存储于存储部201的多个标记m间的距离的上限值(阈值)的情况。
在此,参考图9以及图10,对在作为上述步骤S2的识别结果而得到的多个标记m中未包含镜像m’的情况和在作为上述步骤S2的识别结果而得到的多个标记m中包含镜像m’的情况进行说明。
图9为用于说明在作为识别结果而得到的多个标记m中未包含镜像m’的情况的图。在图9中,用实线表示标记m,用虚线表示镜像m’。另外,在图9中,假定作为标记m而识别出标记m1所包含的4个黑色的圆形符号(包含该圆形符号的物体)和标记m2所包含的4个黑色的圆形符号(包含该圆形符号的物体)的情况。进而,在此,在存储部201中,作为设定值而存储有多个标记m间的距离的上限值dmax,在图9中,假定标记m与识别出的两个标记m(在该情况下,标记m1、m2)间的距离dm为上限值dmax以下的情况。
在图9所示的情况、也就是说标记m与识别出的多个标记m间的距离dm为作为设定值而存储于存储部201的上限值dmax以下的情况下,识别处理部231判定为在该识别出的多个标记m中未包含镜像m’。
另一方面,图10为用于说明在作为识别结果而得到的多个标记m中包含镜像m’的情况的图。在图10中,与图9同样地,用实线表示标记m,用虚线表示镜像m’。另外,在图10中,假定作为标记m而识别出标记m1的图中左侧的两个黑色的圆形符号和镜像m’的图中右侧的两个黑色的圆形符号(包括该圆形符号的物体)、以及标记m2所包含的4个黑色的圆形符号(包括该圆形符号的物体)的情况。进而,在此,在存储部201中,作为设定值而存储有多个标记m间的距离的上限值dmax,在图10中,假定标记m与识别出的两个标记m(在该情况下,由标记m1和镜像m’构成的标记m以及标记m2)间的距离dm超过上限值dmax的情况。
在图10所示的情况、也就是说标记m与识别出的多个标记m间的距离dm超过作为设定值而存储于存储部201的上限值dmax的情况下,识别处理部231判定为在该识别出的多个标记m中包含镜像m’。
再次返回至图7的说明。当在上述步骤S2中识别出多个标记m时,识别处理部231利用上述误识别抑制功能,基于该识别出的多个标记m的坐标值,计算多个标记m间的距离(两点间的距离),判定该计算出的多个标记m间的距离是否为作为设定值而存储于存储部201的上限值以下(步骤S3)。此外,在本实施方式中,假定多个标记m设置于轿厢门槛13a的两端部的情况,所以上限值例如基于轿厢门13的宽度来设定。
在被判定为多个标记m间的距离超过上限值的情况(步骤S3的否)下,识别处理部231判定为在步骤S2中识别出的多个标记m中包含镜像m’,判定为未能正常地识别多个标记m(步骤S4)。之后,识别处理部231经由通信设备25将未能正常地识别多个标记m这一情况通知给监视中心(的管理员)、维护人员(的终端)(步骤S5),使在此的一连串的处理结束。
此外,接受了步骤S5的通知的管理员、维护人员进行轿厢11内的照明度调整、摄像机12的曝光调整等,在标记m难以映入至由具有光泽性的金属材料形成的部分之后,再次执行一连串的处理。
另一方面,在被判定为多个标记m间的距离为上限值以下的情况(步骤S3的是)下,识别处理部231判定为在步骤S2中识别出的多个标记m中未包含镜像m’,判定为正常地识别出多个标记m(步骤S6)。
此外,在以下的说明中,假定通过上述步骤S2~S6的处理,从步骤S1中获取到的拍摄图像i1中标记m1、m2以不包含镜像m’的多个标记m的形式而被正常地识别出的情况。
接下来,识别处理部231基于作为设定值而存储于存储部201的摄像机设定值(摄像机12的高度以及摄像机12的视场角),计算摄像机12相对于在步骤S6中正常地识别出的多个标记m的各相对位置、和摄像机12的3轴的角度(摄像机12的安装角度)(步骤S7)。如上所述,当在步骤S6中以不包含镜像m’的多个标记m的形式而正常地识别出标记m1、m2的情况下,识别处理部231分别计算摄像机12相对于标记m1的相对位置、以及摄像机12相对于标记m2的相对位置,作为摄像机12相对于多个标记m的相对位置。此外,在图8中,点p1相当于被视为标记m1的部分,点p2相当于被视为标记m2的部分。
偏移检测部203所包含的算出处理部232基于由识别处理部231计算出的摄像机12相对于多个标记m的各相对位置、以及作为设定值而存储于存储部201的第1设定值,计算摄像机12相对于基准点的相对位置(步骤S8)。
如上所述,当在步骤S7中计算出摄像机12相对于标记m1、m2的相对位置的情况下,算出处理部232通过合成摄像机12相对于标记m1的相对位置、和作为第1设定值的标记m1相对于基准点的相对位置,来计算摄像机12相对于基准点的相对位置。同样地,算出处理部232通过合成摄像机12相对于标记m2的相对位置、和作为第1设定值的标记m2相对于基准点的相对位置,来计算摄像机12相对于基准点的相对位置。此外,在图8中,点p3相当于基准点。
接着,偏移检测部203所包含的检测处理部233基于由算出处理部232计算出的摄像机12相对于基准点的相对位置和作为设定值而存储于存储部201的第2设定值,判定在摄像机12的安装位置处是否产生偏移(步骤S9)。具体而言,检测处理部233判定由算出处理部232计算出的摄像机12相对于基准点的相对位置与作为第2设定值的摄像机12相对于基准点的相对位置是否一致,来检测在摄像机12的安装位置处是否产生偏移。
在被判定为摄像机12相对于基准点的相对位置一致,在摄像机12的安装位置处未产生偏移的情况(步骤S9的是)下,检测处理部233判定为在摄像机12的安装位置处没有偏移,无需再次设定检测区域,使在此的一连串的处理结束。
另一方面,在被判定为摄像机12相对于基准点的相对位置不一致、在摄像机12的安装位置处产生偏移的情况(步骤S9的否)下,设定处理部204基于由算出处理部232计算出的摄像机12相对于基准点的相对位置和作为设定值而存储于存储部201的第3设定值以及摄像机设定值,在与由图像获取部202获取到的拍摄图像中的摄像机12的安装位置的偏移相匹配的适当的位置设定检测区域(步骤S10)。
在本实施方式中,由于假定的是设定从轿厢门槛13a向候梯厅15侧具有规定的范围的检测区域的情况,所以首先,设定处理部204通过合成由算出处理部232计算出的摄像机12相对于基准点的相对位置、和作为第3设定值的轿厢门槛13a的各顶点相对于基准点的相对位置,来计算轿厢门槛13a的各顶点相对于摄像机12的相对位置。此外,在图8中,点p4~点p7相当于轿厢门槛13a的各顶点。
之后,设定处理部204基于计算出的轿厢门槛13a的各顶点相对于摄像机12的相对位置、由识别处理部231计算出的摄像机12的3轴的角度、以及作为摄像机设定值而存储于存储部201的摄像机12的视场角,来设定检测区域。
据此,在由图像获取部202获取到的拍摄图像i1中,如图8的斜线部分所示,设定与摄像机12的安装位置的偏移相匹配的检测区域e1,即,设定从轿厢门槛13a的长边中的轿厢11侧的长边朝向候梯厅15侧具有规定的范围的检测区域e1。
之后,通知处理部205经由通信设备25将在摄像机12的安装位置处产生偏移这一情况通知给监视中心(的管理员)(步骤S11),使在此的一连串的处理结束。
此外,在图7所示的步骤S2中,从拍摄图像识别1组多个标记m,以该1组多个标记m为对象,执行基于上述误识别抑制功能的各种处理,但也可以从拍摄图像识别多组多个标记m,针对识别出的标记的每个组而执行基于上述误识别抑制功能的各种处理。在该情况下,关于所有的标记的组,依次判定在识别出的多个标记m中是否包含镜像m’,仅在其结果是被判定为在所有的标记的组中、在识别出的多个标记m中包含镜像m’的情况下,执行上述步骤S5的处理即可。
另外,也可以关于所有的标记的组,依次判定在识别出的多个标记m中是否包含镜像m’,在其结果是被判定为在多个标记的组中、在识别出的多个标记m中未包含镜像m’的情况下,选择与在被判定为未包含镜像m’时计算出的多个标记m间的距离中的、最接近上限值(或者,最接近与上限值分开地设定的比上限值小的规定值)的距离对应的标记的组所表示的多个标记m,来作为正常地识别出的多个标记m。
此外,在图7所示的步骤S9中,根据摄像机12相对于拍摄图像所包含的基准点的相对位置与摄像机12相对于基准图像所包含的基准点的相对位置是否一致,判定(检测)在摄像机12的安装位置处是否产生偏移,但也可以为如下结构:即使当在摄像机12的安装位置处产生偏移的情况下,只要该偏移为不会对上述使用者检测处理的精度造成影响的程度,就不进行检测区域的再次设定。即,也可以基于摄像机12相对于拍摄图像所包含的基准点的相对位置与摄像机12相对于基准图像所包含的基准点的相对位置之差(偏移度)是否为预先设定的范围内,来执行步骤S9的处理,在该偏移度不处于预先设定的范围内的情况下,判定为在摄像机12的安装位置处产生偏移。
在本实施方式中,作为针对多个标记m间的距离而设定的设定值,上限值(阈值)存储于存储部201,但作为针对多个标记m间的距离而设定的设定值,也可以存储具有规定的范围的范围值(也就是说,根据下限值和上限值来规定范围的范围值)。在该情况下,识别处理部231基于作为识别结果而得到的多个标记m间的距离是否包含于上述范围值,判定在该多个标记m中是否包含镜像m’即可。
另外,在本实施方式中的检测区域的设定是指已经设定的检测区域的再次设定的情况下,检测区域的设定也可以变现为检测区域的校正。在该情况下,摄像机12相对于基准点的相对位置与上述摄像机12的3轴的角度均是为了实现检测区域的校正而所需的值,所以也可以变现为校正值。
在本实施方式中,图像处理装置20从摄像机12获取在设置有多个能够与轿厢11的地板面以及候梯厅15的地板面进行区分的标记m的状态下拍摄到的图像,从获取到的图像识别多个标记m,基于识别出的多个标记m,检测摄像机12的安装位置的偏移,在检测到摄像机12的安装位置的偏移的情况下,设定与图像处理(使用者检测处理)有关的设定值。与该图像处理有关的设定值包含针对拍摄图像而设定的用于检测最靠近轿厢门13的使用者的检测区域(的坐标值)。
根据这样的构成,即使当在摄像机12的安装位置处产生偏移的情况下,也能够对由该摄像机12拍摄到的图像(例如,旋转的图像、向左右方向偏移的图像)设定适当的检测区域,所以能够抑制使用者的检测精度的下降。
进而,在本实施方式中,图像处理装置20当从拍摄图像识别出多个标记m时,计算该识别出的多个标记m间的距离,判定该计算出的多个标记m间的距离是否在作为设定值而存储的上限值以下,判定在该识别出的多个标记m中是否包含镜像’。在识别出的多个标记m间的距离超过上限值的情况下,图像处理装置20判定为在该识别出的多个标记m中包含镜像m’,在识别出的多个标记m间的距离为上限值以下的情况下,图像处理装置20判定为在该识别出的多个标记m中未包含镜像m’。
根据这样的结构,即使多个标记m设置于由具有光泽性的金属材料形成的部分附近,也能够抑制将映入至由具有光泽性的金属材料形成的部分的镜像m’误识别成标记m这一情况,所以能够提高摄像机12的安装位置的偏移的检测精度。
此外,虽然说明了本发明的几个实施方式,但这些实施方式是作为例子而提示的,未意图限定发明的范围。这些新的实施方式能够以其它各种方式被实施,在不脱离发明的要旨的范围能够进行各种省略、置换、变更。这些实施方式及其变形包含于发明的范围、要旨,并且包含于专利权利要求书所记载的发明及与其均等的范围。
Claims (9)
1.一种图像处理装置,其设置于轿厢的门附近,能够对拍摄包含轿厢内以及候梯厅的图像的摄像机的安装位置的偏移进行检测,该图像处理装置的特征在于,具备:
获取部,其从所述摄像机获取在设置有多个能够与所述轿厢的地板面以及所述候梯厅的地板面进行区分的标记的状态下拍摄到的图像;以及
第1检测部,其从获取到的所述图像中识别多个所述标记,在识别出的多个所述标记间的距离在预先设定的阈值以下的情况下,基于识别出的多个所述标记,来检测所述摄像机的安装位置的偏移,
所述第1检测部在从获取到的所述图像中识别出多个由多个标记构成的标记的组的情况下,针对每个识别出的所述标记的组,判定多个所述标记间的距离是否在所述阈值以下,
基于由识别出的多个所述标记的组中的、被判定为多个所述标记间的距离在所述阈值以下的标记的组表示的多个所述标记,检测所述摄像机的安装位置的偏移。
2.根据权利要求1所述的图像处理装置,其特征在于,
所述图像处理装置还具备第1通知部,其在多个所述标记间的距离不在所述阈值以下的情况下,对管理员通知未能正常地识别多个所述标记这一情况。
3.根据权利要求1所述的图像处理装置,其特征在于,
多个所述标记被设置于能够确定与用于引导所述轿厢的门的开闭的门槛的相对位置的位置。
4.根据权利要求3所述的图像处理装置,其特征在于,
多个所述标记以沿着所述门槛的两端部的方式分别设置于所述轿厢内的地板面。
5.根据权利要求4所述的图像处理装置,其特征在于,
在以使多个所述标记沿着所述门槛的两端部的方式设置于所述轿厢内的地板面的情况下,所述阈值基于所述轿厢的门的宽度来设定。
6.根据权利要求1所述的图像处理装置,其特征在于,还具备:
第2检测部,其执行针对获取到的所述图像的图像处理,检测所述轿厢的门附近的使用者;以及
设定部,其在检测到所述摄像机的安装位置的偏移的情况下,设定与所述图像处理有关的设定值。
7.根据权利要求6所述的图像处理装置,其特征在于,
所述第1检测部基于识别出的多个所述标记,算出摄像机相对于获取到的所述图像中包含的基准点的相对位置、以及所述摄像机的安装角度,
在算出的摄像机相对于基准点的所述相对位置与在所述摄像机的安装位置处没有偏移的情况下的摄像机相对于基准图像中包含的基准点的相对位置不一致的情况下,检测所述摄像机的安装位置的偏移,
所述设定部在检测到所述摄像机的安装位置的偏移的情况下,基于算出的摄像机相对于基准点的所述相对位置和算出的所述摄像机的安装角度,设定与所述图像处理有关的设定值。
8.根据权利要求6所述的图像处理装置,其特征在于,
与所述图像处理有关的设定值包含针对由所述摄像机拍摄到的图像而设定的用于检测所述使用者的区域。
9.根据权利要求1所述的图像处理装置,其特征在于,
所述图像处理装置还具备第2通知部,其在检测到所述摄像机的安装位置的偏移的情况下,对管理员通知产生异常这一情况。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019053669A JP6772324B2 (ja) | 2019-03-20 | 2019-03-20 | 画像処理装置 |
JP2019-053669 | 2019-03-20 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111717768A CN111717768A (zh) | 2020-09-29 |
CN111717768B true CN111717768B (zh) | 2023-02-24 |
Family
ID=72557608
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911181935.3A Active CN111717768B (zh) | 2019-03-20 | 2019-11-27 | 图像处理装置 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6772324B2 (zh) |
CN (1) | CN111717768B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022227020A1 (zh) * | 2021-04-30 | 2022-11-03 | 华为技术有限公司 | 一种图像处理方法以及装置 |
CN113247745B (zh) * | 2021-07-12 | 2021-09-28 | 深圳市爱深盈通信息技术有限公司 | 基于图像的电梯门控制方法及防夹检测模组 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008083451A (ja) * | 2006-09-28 | 2008-04-10 | Brother Ind Ltd | 画像認識装置、複写装置及び画像認識方法 |
JP2011195227A (ja) * | 2010-03-17 | 2011-10-06 | Toshiba Elevator Co Ltd | エレベータの防犯用追尾撮影システム |
CN102710894A (zh) * | 2011-03-28 | 2012-10-03 | 株式会社日立制作所 | 摄像机设置支援方法、图像识别方法 |
CN103150721A (zh) * | 2013-01-10 | 2013-06-12 | 杭州先临三维科技股份有限公司 | 扫描仪标定板图像的误识别点去除方法及标定板 |
CN104159787A (zh) * | 2012-02-24 | 2014-11-19 | 京瓷株式会社 | 摄像机设备,摄像机系统和摄像机校正方法 |
CN104718750A (zh) * | 2012-10-02 | 2015-06-17 | 株式会社电装 | 校准方法及校准装置 |
CN106395528A (zh) * | 2015-07-27 | 2017-02-15 | 株式会社日立制作所 | 距离图像传感器的参数调整方法、参数调整装置及电梯系统 |
CN107055238A (zh) * | 2016-01-13 | 2017-08-18 | 东芝电梯株式会社 | 图像处理装置 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2001042120A1 (en) * | 1999-12-08 | 2001-06-14 | Shemanske Kenneth J Ii | Elevator door control device |
JP2002008043A (ja) * | 2000-06-16 | 2002-01-11 | Matsushita Electric Ind Co Ltd | 動作解析装置及び動作解析方法 |
JP2004173037A (ja) * | 2002-11-21 | 2004-06-17 | Kyocera Corp | 車載カメラの光軸ずれ検出装置 |
JP2004361222A (ja) * | 2003-06-04 | 2004-12-24 | Mitsubishi Electric Corp | 三次元位置計測システムおよび方法 |
JP4550768B2 (ja) * | 2006-05-09 | 2010-09-22 | 日本電信電話株式会社 | 画像検出方法および画像検出装置 |
JP2013171390A (ja) * | 2012-02-20 | 2013-09-02 | Toyota Motor Corp | 運転支援装置 |
JP6377796B1 (ja) * | 2017-03-24 | 2018-08-22 | 東芝エレベータ株式会社 | エレベータの乗車検知システム |
-
2019
- 2019-03-20 JP JP2019053669A patent/JP6772324B2/ja active Active
- 2019-11-27 CN CN201911181935.3A patent/CN111717768B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008083451A (ja) * | 2006-09-28 | 2008-04-10 | Brother Ind Ltd | 画像認識装置、複写装置及び画像認識方法 |
JP2011195227A (ja) * | 2010-03-17 | 2011-10-06 | Toshiba Elevator Co Ltd | エレベータの防犯用追尾撮影システム |
CN102710894A (zh) * | 2011-03-28 | 2012-10-03 | 株式会社日立制作所 | 摄像机设置支援方法、图像识别方法 |
CN104159787A (zh) * | 2012-02-24 | 2014-11-19 | 京瓷株式会社 | 摄像机设备,摄像机系统和摄像机校正方法 |
CN104718750A (zh) * | 2012-10-02 | 2015-06-17 | 株式会社电装 | 校准方法及校准装置 |
CN103150721A (zh) * | 2013-01-10 | 2013-06-12 | 杭州先临三维科技股份有限公司 | 扫描仪标定板图像的误识别点去除方法及标定板 |
CN106395528A (zh) * | 2015-07-27 | 2017-02-15 | 株式会社日立制作所 | 距离图像传感器的参数调整方法、参数调整装置及电梯系统 |
CN107055238A (zh) * | 2016-01-13 | 2017-08-18 | 东芝电梯株式会社 | 图像处理装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2020152546A (ja) | 2020-09-24 |
CN111717768A (zh) | 2020-09-29 |
JP6772324B2 (ja) | 2020-10-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108622777B (zh) | 电梯的乘梯探测系统 | |
CN108622776B (zh) | 电梯的乘梯探测系统 | |
US10196241B2 (en) | Elevator system | |
CN109928290B (zh) | 利用者检测系统 | |
JP6317004B1 (ja) | エレベータシステム | |
CN111717768B (zh) | 图像处理装置 | |
CN111942981A (zh) | 图像处理装置 | |
JP6377795B1 (ja) | エレベータの乗車検知システム | |
CN110294391B (zh) | 使用者检测系统 | |
CN111960206B (zh) | 图像处理装置及标记 | |
CN111689324B (zh) | 图像处理装置及图像处理方法 | |
JP6270948B1 (ja) | エレベータの利用者検出システム | |
CN111717738B (zh) | 电梯系统 | |
CN111717742B (zh) | 图像处理装置 | |
CN111717748B (zh) | 电梯的使用者检测系统 | |
CN112551292B (zh) | 电梯的使用者探测系统 | |
CN112441497B (zh) | 电梯的使用者探测系统 | |
CN111453588B (zh) | 电梯系统 | |
CN115108425B (zh) | 电梯的使用者检测系统 | |
CN112456287B (zh) | 电梯的使用者探测系统 | |
CN113874309A (zh) | 电梯的乘客检测装置以及电梯系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |