CN110745675B - 一种基于tof相机的电梯保护方法 - Google Patents
一种基于tof相机的电梯保护方法 Download PDFInfo
- Publication number
- CN110745675B CN110745675B CN201910989971.6A CN201910989971A CN110745675B CN 110745675 B CN110745675 B CN 110745675B CN 201910989971 A CN201910989971 A CN 201910989971A CN 110745675 B CN110745675 B CN 110745675B
- Authority
- CN
- China
- Prior art keywords
- elevator
- door
- obstacle
- value
- points
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B13/00—Doors, gates, or other apparatus controlling access to, or exit from, cages or lift well landings
- B66B13/24—Safety devices in passenger lifts, not otherwise provided for, for preventing trapping of passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
Landscapes
- Indicating And Signalling Devices For Elevators (AREA)
- Elevator Door Apparatuses (AREA)
Abstract
本申请公开了一种基于TOF相机的电梯保护方法，TOF相机安装在电梯门的正上方，通过设TOF相机采集的图像，分别对厅门与轿门处、靠近电梯轿门、电梯轿门处采用不同的算法，对电梯门附近是否存在障碍物进行判断，根据判断结果进行相应动作，实现对电梯的安全运行控制，防止事故的发生，保护人或动物的安全。
Description
技术领域
本发明涉及电梯控制技术领域，尤其是涉及一种基于TOF相机的电梯保护方法。
背景技术
目前实际生活中应用的电梯光幕都是基于红外光二极管发射和接收的2D平面，保护范围仅仅为电梯门平面，存在以下方面的问题：
(1)在关门过程中，人或物体靠近电梯门，不能提供反向开门动作，特别是婴儿推车、行动不便者、轮椅、手术病床，叉车，载货小车等，可能造成“夹带”或“冲撞”等风险；
(2)对细小物体，比如狗绳的检测效果很差；
(3)传统光幕无法检测透明物体；
(4)在没有人员等候的楼层，电梯停靠后，延时时间长，电梯运行效率低；
(5)光幕具有与电梯门高度一样的长度，安装过程麻烦，安装运输效率低。
(6)厅门与轿门处无法保护。
(7)无法判断物体是否靠近的运动趋势。
基于以上电梯保护存在的问题，对电梯的保护进行改进是目前亟待解决的问题。
发明内容
本发明的目的是提供一种基于TOF相机的电梯保护方法，通过设TOF相机采集的图像，分别对厅门与轿门处、靠近电梯轿门、电梯轿门处采用不同的算法，对电梯门附近是否存在障碍物进行判断，根据判断结果进行相应动作，实现对电梯的安全运行控制，防止事故的发生，保护人或动物的安全。
本发明的上述发明目的通过以下技术方案得以实现：
一种基于TOF相机的电梯保护方法，TOF相机安装在电梯门的正上方，在电梯门边形成一锥形的拍摄范围，对进入锥形拍摄范围内的障碍物进行保护，包括对电梯核心区域、电梯门边及对靠近电梯门边的障碍物的保护，其中，对电梯核心区域存在障碍物的保护，包括以下步骤：
S1、对深度图像进行校正；
S2、将校正后的深度图像转换为灰度图像；
S3、从灰度图像中提取厅门与轿门之间的缝隙线；
S4、检测缝隙线上的变化，并记录变化值；
S5、判断缝隙线的变化是否超过第一设定值，若是，进入下一步，若否，转S7；
S6、判定为有障碍物，进行相应动作保护；
S7、判定为无障碍物，继续检测。
本发明进一步设置为：对电梯门边是否存在障碍物的保护，包括以下步骤：
A1、采集监测区域内的图像；
A2、以电梯两门边之间的连线为X轴，并设置零点，对每个门边沿高度方向的Z轴进行均等分；
A3、在每个等分段内选取一定数量的点，求取同一门边各等分段内选取的所有点，相对X轴零点的距离的均值；
A4、计算同一门边相邻两等分段内均值的差值；
A5、判断差值是否大于等于第二设定值，若否，转A7，若是，进入下一步；
A6、判定为有障碍物，进行相应动作保护；
A7、判定为无障碍物，继续检测。
本发明进一步设置为：步骤A1中，将拍摄的图像从中截取门边的图像部分，从截取的图像中提取监测内的点云图。
本发明进一步设置为：步骤A2中，对电梯的两个门边进行相同数值的等分，以电梯两门边之间的连线的中点为X轴的零点。
本发明进一步设置为：步骤A3中，所选取的点距离X轴零点最近，并去除离群点；分别计算各区段内选取点对X轴零点的距离，并计算所有点的距离的均值。
本发明进一步设置为：步骤A5至步骤A7中，当无障碍物时，每个门边相邻区段的均值相近，其差值为零或近似为零，当有障碍物时，其中一个区段内的均值会接近零点，与相邻门边区段均值的差值远大于零，从而判定为有障碍物。
本发明进一步设置为：对靠近电梯门边的障碍物的保护，包括以下步骤：
B1、选取电梯门前的判定范围，对进入所述判定范围内的障碍物进行判定；
B2、以垂直于电梯门为Y轴，选取第一时刻图像上一定数量的点；
B3、计算各点与X轴零点的距离，并计算所有点的距离均值；
B4、延时一设定时间，再次选取第二时刻图像上一定数量的点，并计算所有点的距离均值；
B5、计算两个时刻的距离均值的差值；
B6、判断差值是否大于等于第三设定值，若否，转B8，若是，进入下一步；
B7、有障碍物靠近电梯门，进行相应保护动作；
B8、无障碍物靠近电梯门，继续检测。
本发明进一步设置为：步骤B2、B4中，选取一定数量的点的原则是，所选点的Y坐标值相对最小。
本发明进一步设置为：当以第一时刻的距离均值减去第二时刻的距离均值时，差值为负表示障碍物靠近电梯门；差值为正，表示障碍物远离电梯门；差值接近零时，表示障碍物沿电梯门平行方向移动。
本发明进一步设置为：以电梯门前的一个正方形区域为判定范围。
与现有技术相比，本发明的有益技术效果为：
1.本申请通过采用TOF相机，实现了对电梯轿门多维度的检测，从而为电梯轿门多维度的保护提供依据；
2.进一步地，本申请对电梯轿门附近分区域进行分别处理，基于TOF相机采集到数据的不同，对不同区域采用不同算法，实现了电梯轿门的多维度保护；
3.进一步地，本申请通过对进入电梯保护范围的障碍物运动趋势的判断，并进而采取相应措施进行保护，实现了对电梯的保护。
附图说明
图1是本发明的一个具体实施例的监测保护流程示意图；
图2是本发明的又一个具体实施例的监测保护流程示意图；
图3是本发明的又一个具体实施例的监测保护流程示意图。
具体实施方式
以下结合附图对本发明作进一步详细说明。
本发明的一种基于TOF相机的电梯保护方法，TOF相机安装在电梯门的正上方，在电梯门边形成一锥形的拍摄范围，对进入锥形拍摄范围内的障碍物进行保护，包括对电梯核心区域、电梯门边及对靠近电梯门边的障碍物的保护。
具体地，TOF(飞行时间Time Of Flight)相机采集到的图像是深度图像与点云图像。
在本申请的一个具体实施例中，电梯核心区域为厅门与电梯轿门处的区域，当电梯门关闭到一定程度直至最终关闭时，TOF相机采集到的图像已经不能反映电梯轿门处是否存在障碍物，因而对此区域内，要采用核心区域算法进行保护，如图1所示，包括以下步骤：
S1、对深度图像进行校正；
S2、将校正后的深度图像转换为灰度图像；
S3、从灰度图像中提取厅门与轿门之间的缝隙线；
S4、检测缝隙线上的变化，并记录变化值；
S5、判断缝隙线的变化是否超过第一设定值，若是，进入下一步，若否，转S7；
S6、判定为有障碍物，进行相应动作保护；
S7、判定为无障碍物，继续检测。
对TOF相机采集到的深度图像进行处理，考虑到因TOF相机的位置原因会引起偏移，对深度图像进行校正，使厅门与轿门之间的缝隙线为水平线，以便于对图像进行分析。
当无障碍物时，缝隙线的灰度图为一条黑色的直线，旁边的门槛为白色的梯形结构；当有障碍物时，缝隙线会发生变化，缝隙线的某一位置会被截断，求取缝隙线的变化值，并与第一设定值进行比较，当变化值大于等于第一设定值时，说明有障碍物存在，正处于关闭状态的电梯门停止关闭，或反向打开，进行相应保护；当变化值小于第一设定值时，说明无障碍物存在，电梯继续原来动作，正处于关闭状态的电梯门继续关闭。
在本申请的一个具体实施例中，电梯门边包括电梯轿门门边与厅门门边区域，在电梯门打开的时候，TOF相机能够采集到电梯轿门与厅门外一定区域的图像，在这一状态中，采用点云图进行分析，更有利于对电梯门边的状态的判断，对电梯门边是否存在障碍物的保护，如图2所示，包括以下步骤：
A1、采集监测区域内的图像；
A2、以电梯两门边之间的连线为X轴，并设置零点，对每个门边沿高度方向的Z轴进行均等分；
A3、在每个等分段内选取一定数量的点，求取同一门边各等分段内选取的所有点，相对X轴零点的距离的均值；
A4、计算同一门边相邻两等分段内均值的差值；
A5、判断差值是否大于等于第二设定值，若否，转A7，若是，进入下一步；
A6、判定为有障碍物，进行相应动作保护；
A7、判定为无障碍物，继续检测。
具体地，此监测范围选取与厅门相对平行的一个区域，主要用于监测门边是否有障碍物，如手、脚等。
步骤A1中，从拍摄的图像中截取门边的图像部分，再从截取的图像中提取监测内的点云图。
步骤A2中，以电梯两门边之间的连线的中点为X轴的零点。这样，当电梯门边有障碍物时，相对于中点，障碍物与中点的距离最小。
对电梯的两个门边进行相同数值的等分，以下以左边门为例进行说明，右边门的计算以此类推。
将左边门沿门高度方向的Y轴等分为10等分，每一段内选取一定数量的点N，设左边门内所有的点数量为M，则
电梯门上的点在X轴有一定的分布，选取的N个点中的任意一个点用Pi表示，M中除N点外的任意一个点用Qj表示，则点N的选取需要满足以下条件：点Pi到零点的距离小于点Qj到零点的距离。
鉴于TOF相机的精度，偶尔会用偏离比较大的点存在，对于这些离群点也需要进行去除。离群点Tk符合以下条件：点Tk到零点的距离小于点Pi到零点的距离。
求取所有点Pi到零点的距离，并对所有点的距离求取均值，每段的均值分别表示为SP1、SP2、……SPN。
计算相邻两段均值的差值，S1＝SP1-SP2；S2＝SP2-SP3；……SN＝SPN-1-SPN；
将S1、S2、……SN分别与第一设定值进行比较，若有一个差值大于等于第一设定值，则认为有障碍物，如果所有的差值都小于第一设定值，则认为无障碍物。
当无障碍物时，每个门边相邻区段的均值相近，其差值为零或近似为零，当有障碍物时，其中一个区段内的均值会接近零点，与相邻门边区段均值的差值远大于零，从而判定为有障碍物。
当然，也可以选取X轴上的任意一点为零点。
在本申请的一个具体实施例中，对靠近电梯门边的障碍物的保护，如图3所示，包括以下步骤：
B1、选取电梯门前的判定范围，对进入所述判定范围内的障碍物进行判定；
B2、以垂直于电梯门为Y轴，选取第一时刻图像上一定数量的点；
B3、计算各点与Y轴零点的距离，并计算所有点的距离均值；
B4、延时一设定时间，再次选取第二时刻图像上一定数量的点，并计算所有点的距离均值；
B5、计算两个时刻的距离均值的差值；
B6、判断差值是否大于等于第三设定值，若否，转B8，若是，进入下一步；
B7、有障碍物靠近电梯门，进行相应保护动作；
B8、无障碍物靠近电梯门，继续检测。
以电梯门前的一个正方形区域为判定范围，该正方形区域与TOF相机的拍摄区域形成锥形空间。如0.5平方米的正方形区域。
以垂直于电梯门为Y轴。
当判定区域内有障碍物进入时，在锥体空间内会有大量的点云出现。
选取第一时刻图像上一定数量的点，对于所有的点，其Y轴坐标大于零，选取锥形空间中的点，选取的条件是，选中的点的Y坐标值相对最小，当然，也要去除掉离群点，不再赘述。
当障碍物离电梯门越近时，Y坐标值越小，反之，离电梯门越远，Y坐标值越大。
相应地，计算各点与Y轴零点的距离，并计算所有点的第一距离均值。
延时一设定时间，选取第二时刻图像上一定数量的点，同样地，求取所有点的第二距离均值。
计算第一距离均值与第二距离均值的差值，如果差值大于等于第三设定值，则认为有障碍物靠近电梯门；如果差值小于第三设定值，则认为无障碍物靠近电梯门。
当以第一时刻的距离均值减去第二时刻的距离均值时，差值为负表示障碍物靠近电梯门；差值为正，表示障碍物远离电梯门；差值接近零时，表示障碍物沿电梯门平行方向移动。
根据比较结果，电梯门进行相应动作，实现保护。
本具体实施方式的实施例均为本发明的较佳实施例，并非依此限制本发明的保护范围，故：凡依本发明的结构、形状、原理所做的等效变化，均应涵盖于本发明的保护范围之内。
Claims (9)
1.一种基于TOF相机的电梯保护方法，其特征在于：TOF相机安装在电梯门的正上方，在电梯门边形成一锥形的拍摄范围，对进入锥形拍摄范围内的障碍物进行保护，包括对电梯核心区域、电梯门边及对靠近电梯门边的障碍物的保护，其中，对电梯核心区域存在障碍物的保护，包括以下步骤：
S1、对深度图像进行校正, 使厅门与轿门之间的缝隙线为水平线；
S2、将校正后的深度图像转换为灰度图像；
S3、从灰度图像中提取厅门与轿门之间的缝隙线；
S4、检测缝隙线是否被截断，并记录缝隙线的变化值；
S5、判断缝隙线的变化值是否超过第一设定值，若是，进入下一步，若否，转S7；
S6、判定为有障碍物，进行相应动作保护；
S7、判定为无障碍物，继续检测；其中，
对电梯门边是否存在障碍物的保护，包括以下步骤：
A1、采集监测区域内的图像；
A2、以电梯两门边之间的连线为X轴，并设置零点，对每个门边沿高度方向的Z轴进行均等分；
A3、在每个等分段内选取一定数量的点，求取同一门边各等分段内选取的所有点，相对X轴零点的距离的均值；
A4、计算同一门边相邻两等分段内均值的差值；
A5、判断差值是否大于等于第二设定值，若否，转A7，若是，进入下一步；
A6、判定为有障碍物，进行相应动作保护；
A7、判定为无障碍物，继续检测。
2.根据权利要求1所述的电梯保护方法，其特征在于：步骤A1中，将拍摄的图像从中截取门边的图像部分，从截取的图像中提取监测内的点云图。
3.根据权利要求1所述的电梯保护方法，其特征在于：步骤A2中，对电梯的两个门边进行相同数值的等分，以电梯两门边之间的连线的中点为X轴的零点。
4.根据权利要求1所述的电梯保护方法，其特征在于：步骤A3中，所选取的点距离X轴零点最近，并去除离群点；分别计算各区段内选取点对X轴零点的距离，并计算所有点的距离的均值。
5.根据权利要求1所述的电梯保护方法，其特征在于：步骤A5至步骤A7中，当无障碍物时，每个门边相邻区段的均值相近，其差值为零或近似为零，当有障碍物时，其中一个区段内的均值会接近零点，与相邻门边区段均值的差值远大于零，从而判定为有障碍物。
6.根据权利要求1所述的电梯保护方法，其特征在于：对靠近电梯门边的障碍物的保护，包括以下步骤：
B1、选取电梯门前的判定范围，对进入所述判定范围内的障碍物进行判定；
B2、以垂直于电梯门为Y轴，选取第一时刻图像上一定数量的点；
B3、计算各点与Y轴零点的距离，并计算所有点的距离均值；
B4、延时一设定时间，再次选取第二时刻图像上一定数量的点，并计算所有点的距离均值；
B5、计算两个时刻的距离均值的差值；
B6、判断差值是否大于等于第三设定值，若否，转B8，若是，进入下一步；
B7、有障碍物靠近电梯门，进行相应保护动作；
B8、无障碍物靠近电梯门，继续检测。
7.根据权利要求6所述的电梯保护方法，其特征在于：步骤B2、B4中，选取一定数量的点的原则是，所选点的Y坐标值相对最小。
8.根据权利要求6所述的电梯保护方法，其特征在于：当以第一时刻的距离均值减去第二时刻的距离均值时，差值为负表示障碍物靠近电梯门；差值为正，表示障碍物远离电梯门；差值接近零时，表示障碍物沿电梯门平行方向移动。
9.根据权利要求1所述的电梯保护方法，其特征在于：以电梯门前的一个正方形区域为判定范围。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910989971.6A CN110745675B (zh) | 2019-10-17 | 2019-10-17 | 一种基于tof相机的电梯保护方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910989971.6A CN110745675B (zh) | 2019-10-17 | 2019-10-17 | 一种基于tof相机的电梯保护方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110745675A CN110745675A (zh) | 2020-02-04 |
| CN110745675B true CN110745675B (zh) | 2022-07-08 |
Family
ID=69278803
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910989971.6A Active CN110745675B (zh) | 2019-10-17 | 2019-10-17 | 一种基于tof相机的电梯保护方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110745675B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111646349B (zh) * | 2020-06-10 | 2022-05-06 | 浙江德亚光电有限公司 | 一种基于tof图像的电梯保护方法及装置 |
| CN114735559B (zh) * | 2022-04-19 | 2023-10-31 | 中国人民解放军63811部队 | 一种基于图像识别的电梯监控系统及方法 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH10152277A (ja) * | 1996-11-21 | 1998-06-09 | Mitsubishi Electric Corp | エレベータ扉の開閉装置 |
| WO2007138688A1 (ja) * | 2006-05-31 | 2007-12-06 | Mitsubishi Electric Corporation | スライドドア装置及びエレベータ |
| JP5369175B2 (ja) * | 2008-05-22 | 2013-12-18 | オーチス エレベータ カンパニー | 映像によるエレベータドアの検出装置および検出方法 |
| JP5069672B2 (ja) * | 2008-12-24 | 2012-11-07 | 株式会社日立製作所 | エレベーターの安全装置 |
| JP5690504B2 (ja) * | 2010-05-14 | 2015-03-25 | 株式会社日立製作所 | 安全エレベータ |
| CN104340827B (zh) * | 2013-07-26 | 2016-01-27 | 上海三菱电梯有限公司 | 滑动门装置的防夹检测方法及检测装置 |
| CN106081776B (zh) * | 2016-08-22 | 2018-09-21 | 日立楼宇技术（广州）有限公司 | 电梯安全监控的方法、装置及系统 |
| CN207078888U (zh) * | 2017-06-23 | 2018-03-09 | 快意电梯股份有限公司 | 电梯关门控制装置 |
| CN107285173B (zh) * | 2017-07-13 | 2020-01-31 | 日立楼宇技术（广州）有限公司 | 电梯门控制方法、装置和系统 |
| CN109508667B (zh) * | 2018-11-09 | 2023-05-16 | 莱茵德尔菲电梯有限公司 | 一种电梯视频防夹方法及电梯视频监控装置 |
-
2019
- 2019-10-17 CN CN201910989971.6A patent/CN110745675B/zh active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN110745675A (zh) | 2020-02-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6134641B2 (ja) | 画像認識機能を備えたエレベータ | |
| CN110745675B (zh) | 一种基于tof相机的电梯保护方法 | |
| JP6474687B2 (ja) | 画像認識機能を備えたエレベータ | |
| EP2300949B1 (en) | Video-based system and method of elevator door detection | |
| EP3192762B1 (en) | Elevator system | |
| CN109508667B (zh) | 一种电梯视频防夹方法及电梯视频监控装置 | |
| CN109997148B (zh) | 信息处理装置、成像装置、设备控制系统、移动对象、信息处理方法和计算机可读记录介质 | |
| CN117902441A (zh) | 乘客运输装置的监测系统、乘客运输装置及其监测方法 | |
| US20050093697A1 (en) | Method and system for enhanced portal security through stereoscopy | |
| CN114582132B (zh) | 一种基于机器视觉的车辆碰撞检测预警系统及方法 | |
| CN110874551A (zh) | 用于门禁闸机通行逻辑控制的图像处理方法 | |
| CN112230245B (zh) | 一种基于激光雷达的隧道内列车主动障碍物检测系统及方法 | |
| JP2009249157A (ja) | 人数検知装置 | |
| CN111984008A (zh) | 一种机器人控制方法、装置、终端和存储介质 | |
| CN107285173A (zh) | 电梯门控制方法、装置和系统 | |
| JP6604821B2 (ja) | 駅監視カメラシステム | |
| CN110678409B (zh) | 电梯装置 | |
| Nishida et al. | Development of intelligent automatic door system | |
| CN113128322A (zh) | 一种电梯地坎检测方法 | |
| CN112850436A (zh) | 一种电梯智能光幕的行人趋势检测方法及系统 | |
| DE102007000449A1 (de) | Vorrichtung und Verfahren zur automatischen Zaehlung von Objekten auf beweglichem oder bewegtem Untergrund | |
| JP2013052738A (ja) | 駆け込み乗車検知装置 | |
| CN110759211A (zh) | 一种基于图像处理的电梯防夹方法及系统 | |
| US20140226018A1 (en) | Access Control System | |
| KR101531313B1 (ko) | 차량 하부의 물체 탐지장치 및 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP02 | Change in the address of a patent holder | ||
| CP02 | Change in the address of a patent holder |
Address after: 315800 No.1, building 1, 88 daqihulin Road, Beilun District, Ningbo City, Zhejiang Province Patentee after: NINGBO WECO OPTOELECTRONICS CO.,LTD. Address before: 315800 No.1, building 1, No.51 Longtanshan Road, Daqi, Beilun District, Ningbo City, Zhejiang Province Patentee before: NINGBO WECO OPTOELECTRONICS CO.,LTD. |