CN108569606B - 基于边框特征的施工电梯安全门转角识别方法 - Google Patents

基于边框特征的施工电梯安全门转角识别方法 Download PDF

Info

Publication number
CN108569606B
CN108569606B CN201810620526.8A CN201810620526A CN108569606B CN 108569606 B CN108569606 B CN 108569606B CN 201810620526 A CN201810620526 A CN 201810620526A CN 108569606 B CN108569606 B CN 108569606B
Authority
CN
China
Prior art keywords
safety door
elevator safety
elevator
frame
theta
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810620526.8A
Other languages
English (en)
Other versions
CN108569606A (zh
Inventor
杨静
王宇佳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian University of Technology
Original Assignee
Xian University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian University of Technology filed Critical Xian University of Technology
Priority to CN201810620526.8A priority Critical patent/CN108569606B/zh
Publication of CN108569606A publication Critical patent/CN108569606A/zh
Application granted granted Critical
Publication of CN108569606B publication Critical patent/CN108569606B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66BELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B5/00Applications of checking, fault-correcting, or safety devices in elevators
    • B66B5/0006Monitoring devices or performance analysers
    • B66B5/0018Devices monitoring the operating condition of the elevator system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66BELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B13/00Doors, gates, or other apparatus controlling access to, or exit from, cages or lift well landings
    • B66B13/02Door or gate operation
    • B66B13/14Control systems or devices
    • B66B13/143Control systems or devices electrical
    • B66B13/146Control systems or devices electrical method or algorithm for controlling doors

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Elevator Door Apparatuses (AREA)

Abstract

本发明公开了一种基于边框特征的施工电梯安全门转角识别方法,步骤包括:步骤1、提取电梯安全门的边框图像;步骤2、采用霍夫变换检测线段;步骤3、对边框线筛选,得到下边框线的A、B两点坐标;步骤4、利用端点求得电梯安全门的算法识别角;步骤5、设置安全门报警角γmax,当电梯安全门的算法识别角α≥γmax,说明电梯安全门目前处于未关闭状态,系统发出报警;当电梯安全门的算法识别角α≤γmax,说明电梯安全门目前处于关闭状态,系统不报警。本发明方法的算法处理实时性好,可以较准确得识别电梯安全门的算法识别角,实现升降机电梯安全门的视频监控,避免由于电梯安全门未正常关闭导致的临边洞口安全事故。

Description

基于边框特征的施工电梯安全门转角识别方法
技术领域
本发明属于视觉识别技术领域,涉及一种基于边框特征的施工电梯安全门转角识别方法。
背景技术
施工升降机(又称施工电梯)是施工现场重要的垂直运输设备,它是通过轿厢沿垂直导架上下运动,将施工工作人员、建筑材料和工具运送到建筑物不同楼层。根据施工升降机工作原理,在施工电梯与建筑物之间有一个人员、货物进出升降机的临时施工电梯通道,见图1,这个通道开在建筑物中,形成一个临边洞口,是施工现场重要的危险源之一。为了避免施工电梯的临边洞口导致的人员物体坠落,施工现场会设置电梯安全门。目前,电梯安全门的控制完全由升降机司机负责,没有任何安全监控措施,难免出现操作失误、漏关、虚掩电梯安全门的情况,使得高空坠落的潜在风险非常大,因此对电梯安全门状态监测具有重要意义。
电梯安全门状态监测可以采用电子式监控,采用双稳态开关、安全触点、接近开关检测门状态。但在施工现场,纵列上施工升降机与电梯安全门之间是一对多模式,且施工现场电梯安全门数量大,使用频繁,电子监控成本较高;且电梯安全门暴露于室外,工作环境恶劣,又存在冲击,易对电路产生振动和磁场干扰,影响系统稳定性,可靠性差。
发明内容
本发明的目的是提供一种基于边框特征的施工电梯安全门转角识别方法,解决了现有技术电梯安全门的视频监控,图像稳定性差,由于电梯安全门未正常关闭容易导致临边洞口安全事故的问题。
本发明所采用的技术方案是,一种基于边框特征的施工电梯安全门转角识别方法,按照以下步骤实施:
步骤1、提取电梯安全门的边框图像;
步骤2、采用霍夫变换检测线段;
步骤3、对边框线筛选,得到下边框线的A、B两点坐标;
步骤4、利用端点求得电梯安全门的算法识别角;
得到下边框线的A、B两点坐标后,由式(1)求得不同旋转角度下电梯安全门下边框线的线段AB与初始位置下边框线的向量夹角θ,即得到电梯安全门的算法识别角α;
Figure BDA0001697901580000021
其中,ABi是视觉图像中安全门下边框线段,AB1是初始位置下边框线;
步骤5、电梯安全门的状态报警,
设置安全门报警角γmax,当电梯安全门的算法识别角α≥γmax,说明电梯安全门目前处于未关闭状态,系统发出报警;当电梯安全门的算法识别角α≤γmax,说明电梯安全门目前处于关闭状态,系统不报警。
本发明的有益效果是,采用电梯安全门边框特征,实现监控电梯安全门的算法识别角的智能视觉识别,针对现场施工升降机与电梯安全门一对多的实际情况,采用1台摄像机监控一个纵列的电梯安全门,将摄像机安装在施工升降机上,随施工升降机移动监测对应电梯安全门状态;视觉监控不易受工作环境影响,能够更加经济的解决稳定性差的问题,本发明方法实现了对施工现场环境下,电梯安全门的算法识别角的视觉识别,图像识别算法速度快,满足现场监控要求。
附图说明
图1是本发明方法中监控摄像机安装位置示意图;
图2是本发明方法中摄像机光轴线垂直与电梯安全门的算法识别角轴线;
图3是本发明方法中的不同旋转角度门边框特征示意图;
图4是本发明方法中的ρ-θ平面边缘线θ值示意图;
图5是本发明方法通过滤波提取的电梯安全门边框线灰度图;
图6是本发明方法霍夫变换得到的升降机电梯安全门不同角度下的门边框连线。
图中,1.摄像机,2.电梯安全门,3.升降机标准节,4.升降机轿厢。
具体实施方式
下面结合附图和具体实施方式对本发明的算法进行详细说明。
参照图1,是视觉监控系统的摄像机安装位置。根据施工升降机工作原理,为了实现电梯安全门2一对多的视觉识别,摄像机1安装在升降机轿厢4的外侧,正对电梯安全门2,升降机轿厢4通过升降机标准节3上下移动,即摄像机1随升降机一体上下运动。考虑视场利用效率,即尽量让整个监控区域布满摄像机视场,或尽可能让监控区域覆盖大部分视场,减少图像冗余信息,摄像1机应该安装在水平方向的中线上,避免监控区域图像的边缘效应问题。
图2是基于上述安装方式,摄像机1的光轴线垂直于电梯安全门2的回转轴线,在这种安装方式下,由于透视变换,电梯安全门2的旋转角度不能简单处理为平面问题,该旋转角度的机器视觉测量是一个技术难题。
参照图3,为电梯安全门旋转到不同开度下门边框图像。图中AB1C1D是电梯安全门不发生旋转初始位置的图像矩形边框;AB2C2D、AB3C3D以及AB4C4D分别为不同开度下的边框,由图3可见,电梯安全门实际的任意旋转角度γ可通过计算视觉图像中安全门下边框线段ABi与初始位置下边框线AB1的算法识别角α得到;视频图像中电梯安全门不同位置图像中下边框线ABi相对AB1的算法识别角α的计算为:
Figure BDA0001697901580000041
基于上述的工作原理,本发明的方法,按照以下步骤实施:
步骤1、提取电梯安全门的边框图像
1.1)生成电梯安全门的灰度图像,
待检测图像为已经截取的电梯安全门,像素大小为120*160的RGB彩色图像,将RGB彩色图像转换为灰度图像,表达式如下:
I(i,j)=0.299*R(i,j)+0.587*G(i,j)+0.114*B(i,j) (2)
式(2)中,R(i,j)、G(i,j)、B(i,j)分别为彩色图像红、绿、蓝三个彩色通道分量,每个均为120*160大小的矩阵,乘以相应系数之后,三个矩阵插值成一个120*160的电梯安全门灰度矩阵I(i,j);
1.2)采用滤波器算法提取电梯安全门的边框图像,
用Roberts算子对得到的电梯安全门灰度矩阵I(i,j)加权,像素点中心灰度加权值为:
Figure BDA0001697901580000042
Roberts算子的2×2窗口函数表达式为:
Figure BDA0001697901580000051
用灰度加权公式求解窗口函数划过的加权灰度值代替窗口中心灰度值,最终得到新的灰度矩阵Inew(i,j),判断灰度矩阵Inew(i,j)上每个位置的值与预设阈值T大小,大于阈值T的部分置为1,反之置为0,得到一个120*160的二值矩阵,又称为电梯安全门边框梯度的二值图像,即为边框检测的图像。
步骤2、采用霍夫变换(Hough)检测线段,
霍夫变化算法是将二值化图像映射到霍夫空间,然后取局部极大值,设定阈值,过滤干扰直线。
本步骤的算法输入像素大小为120*160的二值矩阵,令二值矩阵中的坐标A(i,j)的单元位置累加器值为A(i,j),设A(i,j)初始值为零;遍历图像二值矩阵上所有非零点(非背景点)(xi,yi),通过公式xicosθ+yisinθ=ρ解出相应ρ值,将得到的ρ值四舍五入为最接近ρ轴上的允许单元值,相应累加器增加一个量;该值即对应ρ-θ空间坐标(ρij)的单元值,经过上述过程,完成霍夫空间的映射。
本步骤是要检测门边框的4条线段,因此取前4个累加值最大的图像霍夫空间位置(ρ,θ),并找出该4个位置方向上所有非零点,分别求每个方向上两两非零点之间的距离,找出距离小于设定值20的两点之间的线段,并合并为一条线段,合并后线段长度若小于给定值100,则认为这些点为干扰,舍弃这些点连接的线段;直到找到4个方向上非零点连接距离大于100,即认为是电梯安全门的边框线。
步骤3、对边框线筛选,
经过上述霍夫线段连接后,得到ρ-θ空间电梯安全门的边框线,见图4,其中四边形ABCD是电梯安全门的边框线,本步骤是要获取电梯安全门边框线的下边框线(线段AB)的角度特征,需要剔除图中无用的线段;
利用图像投影的关系,线段AD、BC与θ轴平行,电梯安全门在任意旋转角度下,图像中线段AD与线段BC的平行关系都成立,则有θAD=θBC=0°;图像中线段AB、线段CD与θ轴有夹角,且随电梯安全门的算法识别角发生线性变化,根据图像的投影关系以及运动特点有AB、CD与θ轴的夹角θDC≥90°;θAB≤90°,电梯安全门旋转角度越大θDC会越来越大,而θAB会越来越小。
为了从上述所有线段中准确提取边框线的线段AB,利用边框线与θ轴的夹角范围,剔除图像中竖直边框的线段AD、线段BC,及角度小于90度的线段CD;根据电梯安全门的角度,在此设定下边框的线段AB与θ轴的夹角范围为5°≤θAB≤90°,经过约束条件提纯,最终得到下边框线的线段AB以及A、B两点坐标。
步骤4、利用端点求得电梯安全门的算法识别角
得到下边框线的A、B两点坐标后,由式(1)求得不同旋转角度下电梯安全门下边框线的线段AB与初始位置下边框线的向量夹角θ,即得到电梯安全门的算法识别角α。
步骤5、电梯安全门的状态报警
根据步骤4得到的电梯安全门的算法识别角α,来判断电梯安全门目前的状态,根据现场情况,设置安全门报警角γmax
当电梯安全门的算法识别角α≥γmax,说明电梯安全门目前处于未关闭状态,系统发出报警;当电梯安全门的算法识别角α≤γmax,说明电梯安全门目前处于关闭状态,系统不报警。
实施例
某施工现场,采用单目广角彩色摄像机对升降机电梯安全门进行视觉监控。摄像机每秒30帧;镜头参数为:焦距f为1.5mm,规格为1/3inch,光圈F1.6,视角为120度,百万像素。
图5为现场常用的电梯安全门经滤波提取的电梯安全门灰度图,图6为电梯安全门每转5度,采用霍夫变换得到的电梯安全门不同角度下的边框连线,通过边框线筛选、端点求解,得到本发明视觉识别算法的电梯安全门算法识别角α。表1为算法识别角α与电梯安全门的算法识别角γ的比较。
表1、识别转角α与真实转角γ比较(单位:度)
安全门转角γ 5 10 15 20 25 30 35 40 45
算法识别角α 1 1 4 8 12 15 20 26 31
安全门转角γ 50 55 60 65 70 75 80 85 90
算法识别角α 33 39 44 49 54 58 58 58 58
由此可见,当电梯安全门的算法识别角在[10,75]度时,本发明方法得到的算法识别角α与电梯安全门的真实转角γ值存在线性关系,即电梯安全门在[10,75]度转角范围内,能够通过本发明方法更加准确地估计出来。同时,本发明方法的识别算法平均耗时400ms,满足施工现场的应用。

Claims (1)

1.一种基于边框特征的施工电梯安全门转角识别方法,将摄像机(1)安装在升降机轿厢(4)的外侧,正对电梯安全门(2),升降机轿厢(4)通过升降机标准节(3)上下移动,即摄像机(1)随升降机一体上下运动,实现电梯安全门(2)一对多的视觉识别,
其特征在于,按照以下步骤实施:
步骤1、提取电梯安全门的边框图像,具体步骤是:
1.1)生成电梯安全门的灰度图像,
待检测图像为已经截取的电梯安全门,像素大小为120*160的RGB彩色图像,将RGB彩色图像转换为灰度图像,表达式如下:
I(i,j)=0.299*R(i,j)+0.587*G(i,j)+0.114*B(i,j) (2)
式(2)中,R(i,j)、G(i,j)、B(i,j)分别为RGB彩色图像中红、绿、蓝三个彩色通道分量,每个均为120*160大小的矩阵,乘以相应系数之后,三个矩阵插值成一个120*160的电梯安全门的灰度矩阵I(i,j);
1.2)采用滤波器算法提取电梯安全门的边框图像,
用Roberts算子对得到的电梯安全门的灰度矩阵I(i,j)加权,I(i,j)中每个像素点灰度加权值为:
Figure FDA0002393168180000011
式中P(i,j)为电梯安全门的灰度矩阵I(i,j)的像素点;
Roberts算子的2×2窗口函数表达式为:
Figure FDA0002393168180000012
用灰度加权公式(3)求窗口函数(4)划过的电梯安全门的灰度矩阵I(i,j)的像素点灰度加权值,最终得到新灰度矩阵Inew(i,j),判断该新灰度矩阵Inew(i,j)上每个位置的值与预设阈值T大小,大于预设阈值T的部分置为1,反之置为0,得到一个120*160的二值矩阵,即为电梯安全门的边框图像;
步骤2、采用霍夫变换检测电梯安全门的边框线,具体步骤是:
算法输入像素大小为120*160的二值矩阵,令该二值矩阵中坐标为(i,j)的单元位置累加器值为A(i,j),设A(i,j)初始值为零;遍历该二值矩阵上所有非零点(xi,yi),通过公式xicosθ+yisinθ=ρ解出整数θ值对应ρ值,将得到的ρ值四舍五入为最接近的整数值,然后将非零点(xi,yi)对应的单元位置(i,j)的单元位置累加器值A(i,j)加1;最终得到的单元位置累加器值A(i,j)即对应霍夫空间坐标(ρij)的值,经过上述过程,完成霍夫空间的映射;
取单元位置累加器值A(i,j)中最大的前4个值对应的霍夫空间位置(ρ,θ),找出该4个霍夫空间位置上所有非零点,分别求每个位置上两两非零点之间的距离,找出距离小于20的两点之间的线段,并合并为一条线段,合并后线段长度若小于100,则认为这些非零点为干扰,舍弃这些点连接的线段;直到找到4个位置上非零点连接距离大于100,即认为是电梯安全门的边框线;
步骤3、对电梯安全门的边框线进行筛选,得到电梯安全门的边框线AB的A、B两点坐标,具体步骤是:
利用图像投影的关系,电梯安全门的边框线AD、BC与θ轴平行,电梯安全门在任意旋转角度下,电梯安全门的边框线AD与BC的平行关系都成立,则有θAD=θBC=0°;电梯安全门的边框线AB、CD与θ轴有夹角,根据图像的投影关系以及运动特点有边框线AB与θ轴的夹角θAB≤90°,边框线CD与θ轴的夹角θDC≥90°,电梯安全门旋转角度越大θDC会越来越大,而θAB会越来越小,
为了准确提取电梯安全门的边框线AB,利用电梯安全门的边框线与θ轴的夹角范围,剔除竖直的电梯安全门的边框线AD、BC,及与θ轴夹角小于90度的电梯安全门的边框线CD;
根据电梯安全门的工作,电梯安全门的边框线AB与θ轴的夹角范围为5°≤θAB≤90°,经过约束条件提纯,得到电梯安全门的边框线AB以及A、B两点坐标;
步骤4、利用边框线AB的端点A,B求得电梯安全门的算法识别角α;
得到电梯安全门的边框线AB的端点A、B坐标后,由式(1)求得电梯安全门在不同旋转角度下,电梯安全门的边框线AB与θ轴的夹角,即电梯安全门的算法识别角α;
Figure FDA0002393168180000031
其中,ABi是当前图像中电梯安全门的边框线AB,AB1是电梯安全门转角0度时图像中电梯安全门的边框线AB;
步骤5、电梯安全门的状态报警,
设置电梯安全门报警角为γmax,当电梯安全门的算法识别角α≥γmax,说明电梯安全门目前处于未关闭状态,系统发出报警;当电梯安全门的算法识别角α≤γmax,说明电梯安全门目前处于关闭状态,系统不报警。
CN201810620526.8A 2018-06-15 2018-06-15 基于边框特征的施工电梯安全门转角识别方法 Active CN108569606B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810620526.8A CN108569606B (zh) 2018-06-15 2018-06-15 基于边框特征的施工电梯安全门转角识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810620526.8A CN108569606B (zh) 2018-06-15 2018-06-15 基于边框特征的施工电梯安全门转角识别方法

Publications (2)

Publication Number Publication Date
CN108569606A CN108569606A (zh) 2018-09-25
CN108569606B true CN108569606B (zh) 2020-05-22

Family

ID=63573256

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810620526.8A Active CN108569606B (zh) 2018-06-15 2018-06-15 基于边框特征的施工电梯安全门转角识别方法

Country Status (1)

Country Link
CN (1) CN108569606B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112258471B (zh) * 2020-10-20 2023-07-14 成都云盯科技有限公司 一种卷帘门状态检测方法和系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009140793A1 (en) * 2008-05-22 2009-11-26 Otis Elevator Company Video-based system and method of elevator door detection
CN202953676U (zh) * 2012-11-29 2013-05-29 广州市京龙工程机械有限公司 一种升降机自动开关门控制系统
CN203835221U (zh) * 2014-05-16 2014-09-17 深圳市汇达通建筑工程有限公司 一种电梯井防护门
CN107491730A (zh) * 2017-07-14 2017-12-19 浙江大学 一种基于图像处理的化验单识别方法

Also Published As

Publication number Publication date
CN108569606A (zh) 2018-09-25

Similar Documents

Publication Publication Date Title
CN107662872B (zh) 乘客运输机的监测系统及其监测方法
CN109484935B (zh) 一种电梯轿厢监控方法、装置及系统
WO2022011828A1 (zh) 出入电梯物件检测系统及方法、物件检测系统、电梯光幕以及电梯设备
US7400744B2 (en) Stereo door sensor
CN105893940B (zh) 基于边缘检测的集装箱起吊防撞定准系统的实现方法
CN109878552A (zh) 基于机器视觉的轨道交通站台门与列车间异物监测装置
CN103771207A (zh) 电梯轿厢人员检测系统及方法
CN103986906A (zh) 基于监控视频的开关门检测方法
CN113435278A (zh) 一种基于yolo的行吊安全检测方法及系统
CN109508667A (zh) 一种电梯视频防夹方法及电梯视频监控装置
CN108569606B (zh) 基于边框特征的施工电梯安全门转角识别方法
CN115527158A (zh) 一种基于视频监控的人员异常行为检测方法及装置
CN112348837B (zh) 一种点线检测融合的物体边缘检测方法及系统
KR102113489B1 (ko) 카메라 입력 영상을 딥러닝 활용한 행동 감지 시스템 및 방법
Wilson et al. A comprehensive study on fire detection
CN111726532B (zh) 一种开窗报警检测系统及方法
KR101398684B1 (ko) 승강기 도어 개폐 감지 방법 및 장치
CN110745675B (zh) 一种基于tof相机的电梯保护方法
CN112347830A (zh) 一种工厂防疫管理方法以及防疫管理系统
Wateosot et al. Top-view based people counting using mixture of depth and color information
CN114940428B (zh) 一种基于tof图像的电梯保护方法及装置
CN114387665A (zh) 一种基于便携布控球的登高无人扶梯识别系统
KR20030018487A (ko) 영상을 이용한 출입 이동 물체 계수 방법 및 장치
CN114387542A (zh) 一种基于便携布控球的视频采集单元异常识别系统
Kumbhare et al. Indoor surveillance system in dynamic environment

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant