CN117645221B - 一种电梯危险区域识别及越界报警方法及装置 - Google Patents
一种电梯危险区域识别及越界报警方法及装置 Download PDFInfo
- Publication number
- CN117645221B CN117645221B CN202410116350.8A CN202410116350A CN117645221B CN 117645221 B CN117645221 B CN 117645221B CN 202410116350 A CN202410116350 A CN 202410116350A CN 117645221 B CN117645221 B CN 117645221B
- Authority
- CN
- China
- Prior art keywords
- elevator
- dangerous area
- pedestrian
- training
- recognition model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000001514 detection method Methods 0.000 claims abstract description 38
- 238000012549 training Methods 0.000 claims description 88
- 238000012795 verification Methods 0.000 claims description 33
- 238000002372 labelling Methods 0.000 claims description 17
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000012545 processing Methods 0.000 claims description 4
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000010200 validation analysis Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
- B66B5/0006—Monitoring devices or performance analysers
- B66B5/0012—Devices monitoring the users of the elevator system
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
- B66B5/0006—Monitoring devices or performance analysers
- B66B5/0018—Devices monitoring the operating condition of the elevator system
- B66B5/0031—Devices monitoring the operating condition of the elevator system for safety reasons
Landscapes
- Image Analysis (AREA)
Abstract
本发明提供了一种电梯危险区域识别及越界报警方法及装置,属于电梯技术领域。本发明利用电梯危险区域识别模型能够根据不同场景、不同状态采集的图像自动生成危险区域范围,无需人工介入;另一方面,其可实现对电梯危险区域附近出现人员的自动识别,将利用行人检测框信息确定行人身体上方点的坐标和行人身体下方点的坐标,取这两点中与电梯危险区域的边界距离较短的点为最终的行人越界判定点,准确判定行人是否越界,当行人越界时,及时通知越界人员和管理人员,提高安全性。
Description
技术领域
本发明属于电梯技术领域,尤其涉及一种电梯危险区域识别及越界报警方法及装置。
背景技术
随着高层建筑的不断增多,电梯成为了人们日常生活中不可或缺的交通工具。然而,电梯事故也时有发生,其中一些事故是由于乘客或工作人员越过危险区域引起的。因此,电梯危险区域的自动确定和区域内人员越界识别对保障乘客和工作人员的安全具有十分重要的意义。
电梯危险区域的识别与越界报警面临诸多挑战。首先,电梯工作环境复杂多变,包括不同的楼层、电梯门、楼层按钮等区域都有可能成为危险区域,同时原安全区域在不同情况下可能变为危险区域,如电梯轿厢门在电梯正常运行时是安全区域,但在维保时轿厢并一定在当前楼层,轿厢门后是空的井道,此时会变为危险区域;其次,人员行为的不确定性也是一大挑战。乘客可能会因为各种原因越过危险区域,例如误操作、紧急逃生等情况。因此,电梯危险区域的识别与越界报警需要较高的准确性和实时性,以应对各种突发情况。
发明内容
针对上述现有技术中存在的问题,本发明提供了一种电梯危险区域识别及越界报警方法及装置,本发明要解决的技术问题是如何准确识别电梯危险区别并在行人越界时及时报警,保证行人安全。
为解决上述技术问题,本发明提供了一种电梯危险区域识别及越界报警方法,包括如下步骤:
步骤S1:构建电梯危险区域识别模型,并利用电梯危险区域图像集训练电梯危险区域识别模型;
步骤S2:根据实时采集的图像,利用所述电梯危险区域识别模型识别电梯危险区域;
步骤S3:构建并训练行人识别模型,根据实时采集的图像利用所述行人识别模型输出行人检测框信息,所述检测框信息包括位置坐标、宽和高;
步骤S4:根据行人检测框信息确定行人身体越界判定点;
步骤S5:当行人身体越界判定点处于所述电梯危险区域内部时,则判定行人越界,发出报警提醒。
优选地,步骤S1具体包括如下步骤:
S11:采集不少于预设图像数量M张包含预设电梯危险区域类型N类的电梯危险区域图像,并对电梯危险区域图像中的电梯危险区域位置进行标注,构建电梯危险区域数据集;
S12:将电梯危险区域数据集划分为用于电梯危险区域识别模型训练的训练集和用于电梯危险区域识别模型参数调节的验证集;
S13:在所述用于电梯危险区域识别模型训练的训练集上利用YOLOv8模型对电梯危险区域识别模型进行训练,训练停止条件为达到设定电梯危险区域识别模型迭代次数或者在用于电梯危险区域识别模型参数调节的验证集上的准确率达到预设电梯危险区域识别准确率阈值,保留在用于电梯危险区域识别模型参数调节的验证集上准确率最高的电梯危险区域识别模型用于后续步骤。
优选地,步骤S11中,电梯危险区域的图像采集应保证每类电梯危险区域的图像数量在预设范围内。
优选地,步骤S11中,根据经验使用边界框图像标注工具LabelImg进行电梯危险区域的标注,标注信息为(x,y,w,h,m);
其中,x,y,w,h,m分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高以及电梯危险区域类型。
优选地,标注完成生成XML标注文件并保存,同时保存原电梯危险区域图像。
优选地,步骤S2中,所述电梯危险区域由电梯危险区域识别模型识别出的相对横坐标、相对纵坐标、相对宽、相对高确定。
优选地,所述电梯危险区域为将四个坐标点(x,y),(x+w,y),(x,y+h),(x+w,y+h)用线段两两连接,最终形成的四边形,其中x,y,w,h分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高。
优选地,步骤S3中利用CrowdHuman数据集对行人识别模型进行训练。
CrowdHuman数据集是旷世发布的用于行人检测的数据集,图片数据大多来自于google搜索。CrowdHuman 数据集数据量比较大,训练集15000张,测试集5000张,验证集4370张。训练集和验证集中共有 470K 个实例,约每张图片包含23个人,同时存在各种各样的遮挡。每个人类实例都用头部边界框、人类可见区域边界框和人体全身边界框注释。
优选地,步骤S3具体包括如下步骤:
S31:对CrowdHuman数据集进行标签处理;
S32:将CrowdHuman数据集划分为用于训练行人识别模型的训练集和用于行人识别模型参数调节的验证集;
S33:在用于训练行人识别模型的训练集上利用YOLOv8模型对所述行人识别模型进行训练,训练停止条件为达到设定行人识别模型迭代次数或者在用于行人识别模型参数调节的验证集上的准确率达到预设行人识别准确率阈值,保留在用于行人识别模型参数调节的验证集上准确率最高的行人识别模型用于后续步骤。
优选地,步骤S4具体为:利用行人检测框信息确定行人身体上方点的坐标(x+0.5×w,y)和行人身体下方点的坐标(x+0.5×w,y+h),分别计算这两点与所述电梯危险区域的边界的最短距离,取这两点中与所述电梯危险区域的边界距离较短的点为最终的行人越界判定点,其中,x,y,w,h分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高。
优选地,行人身体某点()与电梯危险区域的边界的最短距离计算方法为:将电梯危险区域的边界按照w/10和h/10的步长分为若干点,计算行人身体某点与电梯危险区域的边界上的某点(/>)的欧式距离/>,遍历电梯危险区域的边界上的所有点,并将其中最小的欧氏距离确定为行人身体某点与电梯危险区域的边界的最短距离。
本发明提供了一种电梯危险区域识别及越界报警装置,包括处理器,所述处理器执行上述的电梯危险区域识别及越界报警方法的步骤。
本发明一种电梯危险区域识别及越界报警方法及装置,可利用电梯危险区域识别模型根据不同场景、不同状态采集的图像自动生成危险区域范围,无需人工介入;另一方面,其可实现对电梯危险区域附近出现人员的自动识别,将利用行人检测框信息确定行人身体上方点的坐标和行人身体下方点的坐标,取这两点中与所述电梯危险区域的边界距离较短的点为最终的行人越界判定点,准确判定行人是否越界,当行人越界时,及时通知越界人员和管理人员,提高安全性。
附图说明
图1是本发明一种电梯危险区域识别及越界报警方法的实施例示意图。
具体实施方式
为使本发明实施方式的目的、技术方案和优点更加清楚,下面将结合本发明实施方式中的附图,对本发明实施方式中的技术方案进行清楚、完整地描述,显然,所描述的实施方式是本发明一部分实施方式,而不是全部的实施方式。基于本发明中的实施方式,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式,都属于本发明保护的范围。
因此,以下对在附图中提供的本发明的实施方式的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施方式。基于本发明中的实施方式,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式,都属于本发明保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
在本发明中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或成一体;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
为了更好地了解本发明的目的、结构及功能,下面结合附图,对本发明作进一步详细描述。
实施例1
根据本发明的一个具体实施方式,下面对本发明的电梯危险区域识别及越界报警方法进行详细说明。
本发明提供了一种电梯危险区域识别及越界报警方法,包括如下步骤:
步骤S1:构建电梯危险区域识别模型,并利用电梯危险区域图像集训练电梯危险区域识别模型;
步骤S2:根据实时采集的图像,利用所述电梯危险区域识别模型识别电梯危险区域;
步骤S3:构建并训练行人识别模型,根据实时采集的图像利用所述行人识别模型输出行人检测框信息,所述检测框信息包括位置坐标、宽和高;
步骤S4:根据行人检测框信息确定行人身体越界判定点;
步骤S5:当行人身体越界判定点处于所述电梯危险区域内部时,则判定行人越界,发出报警提醒。
实施例2
根据本发明的一个具体实施方式,下面对本发明的电梯危险区域识别及越界报警方法进行详细说明。
本发明提供了一种电梯危险区域识别及越界报警方法,包括如下步骤:
步骤S1:构建电梯危险区域识别模型,并利用电梯危险区域图像集训练电梯危险区域识别模型;
步骤S2:根据实时采集的图像,利用所述电梯危险区域识别模型识别电梯危险区域;
步骤S3:构建并训练行人识别模型,根据实时采集的图像利用所述行人识别模型输出行人检测框信息,所述检测框信息包括位置坐标、宽和高;
步骤S4:根据行人检测框信息确定行人身体越界判定点;
步骤S5:当行人身体越界判定点处于所述电梯危险区域内部时,则判定行人越界,发出报警提醒。
其中,步骤S1具体包括如下步骤:
S11:采集不少于预设图像数量M张包含预设电梯危险区域类型N类的电梯危险区域图像,并对电梯危险区域图像中的电梯危险区域位置进行标注,构建电梯危险区域数据集;
S12:将电梯危险区域数据集划分为用于电梯危险区域识别模型训练的训练集和用于电梯危险区域识别模型参数调节的验证集;
S13:在所述用于电梯危险区域识别模型训练的训练集上利用YOLOv8模型对电梯危险区域识别模型进行训练,训练停止条件为达到设定电梯危险区域识别模型迭代次数或者在用于电梯危险区域识别模型参数调节的验证集上的准确率达到预设电梯危险区域识别准确率阈值,保留在用于电梯危险区域识别模型参数调节的验证集上准确率最高的电梯危险区域识别模型用于后续步骤。
实施例3:
根据本发明的一个具体实施方式,下面对本发明的电梯危险区域识别及越界报警方法进行详细说明。
本发明提供了一种电梯危险区域识别及越界报警方法,包括如下步骤:
步骤S1:构建电梯危险区域识别模型,并利用电梯危险区域图像集训练电梯危险区域识别模型;
步骤S2:根据实时采集的图像,利用所述电梯危险区域识别模型识别电梯危险区域;
步骤S3:构建并训练行人识别模型,根据实时采集的图像利用所述行人识别模型输出行人检测框信息,所述检测框信息包括位置坐标、宽和高;
步骤S4:根据行人检测框信息确定行人身体越界判定点;
步骤S5:当行人身体越界判定点处于所述电梯危险区域内部时,则判定行人越界,发出报警提醒。
其中,步骤S1具体包括如下步骤:
S11:采集不少于预设图像数量M张包含预设电梯危险区域类型N类的电梯危险区域图像,并对电梯危险区域图像中的电梯危险区域位置进行标注,构建电梯危险区域数据集;
S12:将电梯危险区域数据集划分为用于电梯危险区域识别模型训练的训练集和用于电梯危险区域识别模型参数调节的验证集;
S13:在所述用于电梯危险区域识别模型训练的训练集上利用YOLOv8模型对电梯危险区域识别模型进行训练,训练停止条件为达到设定电梯危险区域识别模型迭代次数或者在用于电梯危险区域识别模型参数调节的验证集上的准确率达到预设电梯危险区域识别准确率阈值,保留在用于电梯危险区域识别模型参数调节的验证集上准确率最高的电梯危险区域识别模型用于后续步骤。
其中,步骤S11中,电梯危险区域的图像采集应保证每类电梯危险区域的图像数量在预设范围内。
其中,步骤S11中,根据经验使用边界框图像标注工具LabelImg进行电梯危险区域的标注,标注信息为(x,y,w,h,m);其中,x,y,w,h,m分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高以及电梯危险区域类型。
其中,标注完成生成XML标注文件并保存,同时保存原电梯危险区域图像。
实施例4
根据本发明的一个具体实施方式,下面对本发明的电梯危险区域识别及越界报警方法进行详细说明。
本发明提供了一种电梯危险区域识别及越界报警方法,包括如下步骤:
步骤S1:构建电梯危险区域识别模型,并利用电梯危险区域图像集训练电梯危险区域识别模型;
步骤S2:根据实时采集的图像,利用所述电梯危险区域识别模型识别电梯危险区域;
步骤S3:构建并训练行人识别模型,根据实时采集的图像利用所述行人识别模型输出行人检测框信息,所述检测框信息包括位置坐标、宽和高;
步骤S4:根据行人检测框信息确定行人身体越界判定点;
步骤S5:当行人身体越界判定点处于所述电梯危险区域内部时,则判定行人越界,发出报警提醒。
其中,步骤S2中,所述电梯危险区域由电梯危险区域识别模型识别出的相对横坐标、相对纵坐标、相对宽、相对高确定。
实施例5
根据本发明的一个具体实施方式,下面对本发明的电梯危险区域识别及越界报警方法进行详细说明。
本发明提供了一种电梯危险区域识别及越界报警方法,包括如下步骤:
步骤S1:构建电梯危险区域识别模型,并利用电梯危险区域图像集训练电梯危险区域识别模型;
步骤S2:根据实时采集的图像,利用所述电梯危险区域识别模型识别电梯危险区域;
步骤S3:构建并训练行人识别模型,根据实时采集的图像利用所述行人识别模型输出行人检测框信息,所述检测框信息包括位置坐标、宽和高;
步骤S4:根据行人检测框信息确定行人身体越界判定点;
步骤S5:当行人身体越界判定点处于所述电梯危险区域内部时,则判定行人越界,发出报警提醒。
其中,步骤S2中,所述电梯危险区域由电梯危险区域识别模型识别出的相对横坐标、相对纵坐标、相对宽、相对高确定。
其中,所述电梯危险区域为将四个坐标点(x,y),(x+w,y),(x,y+h),(x+w,y+h)用线段两两连接,最终形成的四边形,其中x,y,w,h分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高。
实施例6
根据本发明的一个具体实施方式,下面对本发明的电梯危险区域识别及越界报警方法进行详细说明。
本发明提供了一种电梯危险区域识别及越界报警方法,包括如下步骤:
步骤S1:构建电梯危险区域识别模型,并利用电梯危险区域图像集训练电梯危险区域识别模型;
步骤S2:根据实时采集的图像,利用所述电梯危险区域识别模型识别电梯危险区域;
步骤S3:构建并训练行人识别模型,根据实时采集的图像利用所述行人识别模型输出行人检测框信息,所述检测框信息包括位置坐标、宽和高;
步骤S4:根据行人检测框信息确定行人身体越界判定点;
步骤S5:当行人身体越界判定点处于所述电梯危险区域内部时,则判定行人越界,发出报警提醒。
其中,步骤S3中利用CrowdHuman数据集对行人识别模型进行训练。
其中,步骤S3具体包括如下步骤:
S31:对CrowdHuman数据集进行标签处理;
S32:将CrowdHuman数据集划分为用于训练行人识别模型的训练集和用于行人识别模型参数调节的验证集;
S33:在用于训练行人识别模型的训练集上利用YOLOv8模型对所述行人识别模型进行训练,训练停止条件为达到设定行人识别模型迭代次数或者在用于行人识别模型参数调节的验证集上的准确率达到预设行人识别准确率阈值,保留在用于行人识别模型参数调节的验证集上准确率最高的行人识别模型用于后续步骤。
实施例7
根据本发明的一个具体实施方式,下面对本发明的电梯危险区域识别及越界报警方法进行详细说明。
本发明提供了一种电梯危险区域识别及越界报警方法,包括如下步骤:
步骤S1:构建电梯危险区域识别模型,并利用电梯危险区域图像集训练电梯危险区域识别模型;
步骤S2:根据实时采集的图像,利用所述电梯危险区域识别模型识别电梯危险区域;
步骤S3:构建并训练行人识别模型,根据实时采集的图像利用所述行人识别模型输出行人检测框信息,所述检测框信息包括位置坐标、宽和高;
步骤S4:根据行人检测框信息确定行人身体越界判定点;
步骤S5:当行人身体越界判定点处于所述电梯危险区域内部时,则判定行人越界,发出报警提醒。
其中,步骤S4具体为:利用行人检测框信息确定行人身体上方点的坐标(x+0.5×w,y)和行人身体下方点的坐标(x+0.5×w,y+h),分别计算这两点与所述电梯危险区域的边界的最短距离,取这两点中与所述电梯危险区域的边界距离较短的点为最终的行人越界判定点,其中,x,y,w,h分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高。
其中,行人身体某点()与电梯危险区域的边界的最短距离计算方法为:将电梯危险区域的边界按照w/10和h/10的步长分为若干点,计算行人身体某点与电梯危险区域的边界上的某点(/>)的欧式距离/>,遍历电梯危险区域的边界上的所有点,并将其中最小的欧氏距离确定为行人身体某点与电梯危险区域的边界的最短距离。
实施例8
根据本发明的一个具体实施方式,下面对本发明的电梯危险区域识别及越界报警方法进行详细说明。
本发明提供了一种电梯危险区域识别及越界报警方法,包括如下步骤:
步骤S1:构建电梯危险区域识别模型,并利用电梯危险区域图像集训练电梯危险区域识别模型;
步骤S2:根据实时采集的图像,利用所述电梯危险区域识别模型识别电梯危险区域;
步骤S3:构建并训练行人识别模型,根据实时采集的图像利用所述行人识别模型输出行人检测框信息,所述检测框信息包括位置坐标、宽和高;
步骤S4:根据行人检测框信息确定行人身体越界判定点;
步骤S5:当行人身体越界判定点处于所述电梯危险区域内部时,则判定行人越界,发出报警提醒。
其中,步骤S1具体包括如下步骤:
S11:采集不少于预设图像数量M张包含预设电梯危险区域类型N类的电梯危险区域图像,并对电梯危险区域图像中的电梯危险区域位置进行标注,构建电梯危险区域数据集;本实施例中M优选为5000,N优选为25。
S12:将电梯危险区域数据集划分为用于电梯危险区域识别模型训练的训练集和用于电梯危险区域识别模型参数调节的验证集;本实施例中,用于电梯危险区域识别模型训练的训练集和用于电梯危险区域识别模型参数调节的验证集的比例取7:3,当然,也可以取其他比例,但通常训练集数量要远大于验证集数量。
S13:在所述用于电梯危险区域识别模型训练的训练集上利用YOLOv8模型对电梯危险区域识别模型进行训练,训练停止条件为达到设定电梯危险区域识别模型迭代次数或者在用于电梯危险区域识别模型参数调节的验证集上的准确率达到预设电梯危险区域识别准确率阈值,保留在用于电梯危险区域识别模型参数调节的验证集上准确率最高的电梯危险区域识别模型用于后续步骤。
其中,步骤S11中,电梯危险区域的图像采集应保证每类电梯危险区域的图像数量在预设范围内。电梯危险区域的图像采集应保证每类危险区域的图像数量较为均匀,本实施例中,5000张图像包含25类电梯危险区域,那么应尽量保证每类电梯危险区域的图像数量在150-250之间。
其中,步骤S11中,根据经验使用边界框图像标注工具LabelImg进行电梯危险区域的标注,标注信息为(x,y,w,h,m);
其中,x,y,w,h,m分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高以及电梯危险区域类型,m的取值为1,2,…,M。
其中,标注完成生成XML标注文件并保存,同时保存原电梯危险区域图像。
其中,步骤S2中,所述电梯危险区域由电梯危险区域识别模型识别出的相对横坐标、相对纵坐标、相对宽、相对高确定。
其中,所述电梯危险区域为将四个坐标点(x,y),(x+w,y),(x,y+h),(x+w,y+h)用线段两两连接,最终形成的四边形,其中x,y,w,h分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高。
其中,步骤S3中利用CrowdHuman数据集对行人识别模型进行训练。
CrowdHuman数据集是旷世发布的用于行人检测的数据集,图片数据大多来自于google搜索。CrowdHuman 数据集数据量比较大,训练集15000张,测试集5000张,验证集4370张。训练集和验证集中共有 470K 个实例,约每张图片包含23个人,同时存在各种各样的遮挡。每个人类实例都用头部边界框、人类可见区域边界框和人体全身边界框注释。
其中,步骤S3具体包括如下步骤:
S31:对CrowdHuman数据集进行标签处理;
S32:将CrowdHuman数据集划分为用于训练行人识别模型的训练集和用于行人识别模型参数调节的验证集;本实施例中用于训练行人识别模型的训练集和用于行人识别模型参数调节的验证集的比例为7:3,当然,也可以取其他比例,但通常训练集数量要远大于验证集数量;
S33:在用于训练行人识别模型的训练集上利用YOLOv8模型对所述行人识别模型进行训练,训练停止条件为达到设定行人识别模型迭代次数或者在用于行人识别模型参数调节的验证集上的准确率达到预设行人识别准确率阈值,保留在用于行人识别模型参数调节的验证集上准确率最高的行人识别模型用于后续步骤。
其中,步骤S4具体为:利用行人检测框信息确定行人身体上方点的坐标(x+0.5×w,y)和行人身体下方点的坐标(x+0.5×w,y+h),分别计算这两点与所述电梯危险区域的边界的最短距离,取这两点中与所述电梯危险区域的边界距离较短的点为最终的行人越界判定点,其中,x,y,w,h分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高。
其中,行人身体某点()与电梯危险区域的边界的最短距离计算方法为:将电梯危险区域的边界按照w/10和h/10的步长分为若干点,计算行人身体某点与电梯危险区域的边界上的某点(/>)的欧式距离/>,遍历电梯危险区域的边界上的所有点,并将其中最小的欧氏距离确定为行人身体某点与电梯危险区域的边界的最短距离。
其中,报警提醒包括:通过外设的蜂鸣器等设备提醒越界人员;通过有线网络或无线网络发送警报文字或声音信息给电梯监控室提醒电梯管理人员。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均包含在本发明的保护范围之内。
Claims (11)
1.一种电梯危险区域识别及越界报警方法,其特征在于,包括如下步骤:
步骤S1:构建电梯危险区域识别模型,并利用电梯危险区域图像集训练电梯危险区域识别模型;
步骤S2:根据实时采集的图像,利用所述电梯危险区域识别模型识别电梯危险区域;
步骤S3:构建并训练行人识别模型,根据实时采集的图像利用所述行人识别模型输出行人检测框信息,所述检测框信息包括位置坐标、宽和高;
步骤S4:根据行人检测框信息确定行人身体越界判定点;
步骤S5:当行人身体越界判定点处于所述电梯危险区域内部时,则判定行人越界,发出报警提醒;
其中,步骤S1具体包括如下步骤:
S11:采集不少于预设图像数量M张包含预设电梯危险区域类型N类的电梯危险区域图像,并对电梯危险区域图像中的电梯危险区域位置进行标注,构建电梯危险区域数据集;
S12:将电梯危险区域数据集划分为用于电梯危险区域识别模型训练的训练集和用于电梯危险区域识别模型参数调节的验证集;
S13:在所述用于电梯危险区域识别模型训练的训练集上利用YOLOv8模型对电梯危险区域识别模型进行训练,训练停止条件为达到设定电梯危险区域识别模型迭代次数或者在用于电梯危险区域识别模型参数调节的验证集上的准确率达到预设电梯危险区域识别准确率阈值,保留在用于电梯危险区域识别模型参数调节的验证集上准确率最高的电梯危险区域识别模型用于后续步骤。
2.根据权利要求1所述的电梯危险区域识别及越界报警方法,其特征在于,步骤S11中,电梯危险区域的图像采集应保证每类电梯危险区域的图像数量在预设范围内。
3.根据权利要求1所述的电梯危险区域识别及越界报警方法,其特征在于,步骤S11中,根据经验使用边界框图像标注工具LabelImg进行电梯危险区域的标注,标注信息为(x,y,w,h,m);
其中,x,y,w,h,m分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高以及电梯危险区域类型。
4.根据权利要求3所述的电梯危险区域识别及越界报警方法,其特征在于,标注完成生成XML标注文件并保存,同时保存原电梯危险区域图像。
5.根据权利要求1所述的电梯危险区域识别及越界报警方法,其特征在于,步骤S2中,所述电梯危险区域由电梯危险区域识别模型识别出的相对横坐标、相对纵坐标、相对宽、相对高确定。
6.根据权利要求5所述的电梯危险区域识别及越界报警方法,其特征在于,所述电梯危险区域为将四个坐标点(x,y),(x+w,y),(x,y+h),(x+w,y+h)用线段两两连接,最终形成的四边形,其中x,y,w,h分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高。
7.根据权利要求1所述的电梯危险区域识别及越界报警方法,其特征在于,步骤S3中利用CrowdHuman数据集对行人识别模型进行训练。
8.根据权利要求7所述的电梯危险区域识别及越界报警方法,其特征在于,步骤S3具体包括如下步骤:
S31:对CrowdHuman数据集进行标签处理;
S32:将CrowdHuman数据集划分为用于训练行人识别模型的训练集和用于行人识别模型参数调节的验证集;
S33:在用于训练行人识别模型的训练集上利用YOLOv8模型对所述行人识别模型进行训练,训练停止条件为达到设定行人识别模型迭代次数或者在用于行人识别模型参数调节的验证集上的准确率达到预设行人识别准确率阈值,保留在用于行人识别模型参数调节的验证集上准确率最高的行人识别模型用于后续步骤。
9.根据权利要求1所述的电梯危险区域识别及越界报警方法,其特征在于,步骤S4具体为:利用行人检测框信息确定行人身体上方点的坐标(x+0.5×w,y)和行人身体下方点的坐标(x+0.5×w,y+h),分别计算这两点与电梯危险区域的边界的最短距离,取这两点中与所述电梯危险区域的边界距离较短的点为最终的行人越界判定点,其中,x,y,w,h分别代表电梯危险区域在电梯危险区域图像中的相对横坐标、相对纵坐标、相对宽、相对高。
10.根据权利要求9所述的电梯危险区域识别及越界报警方法,其特征在于,行人身体某点()与电梯危险区域的边界的最短距离计算方法为:将电梯危险区域的边界按照w/10和h/10的步长分为若干点,计算行人身体某点与电梯危险区域的边界上的某点(/>)的欧式距离/>,遍历电梯危险区域的边界上的所有点,并将其中最小的欧氏距离确定为行人身体某点与电梯危险区域的边界的最短距离。
11.一种电梯危险区域识别及越界报警装置,其特征在于,包括处理器,所述处理器执行权利要求1-10任一项所述的电梯危险区域识别及越界报警方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410116350.8A CN117645221B (zh) | 2024-01-29 | 2024-01-29 | 一种电梯危险区域识别及越界报警方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410116350.8A CN117645221B (zh) | 2024-01-29 | 2024-01-29 | 一种电梯危险区域识别及越界报警方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117645221A CN117645221A (zh) | 2024-03-05 |
CN117645221B true CN117645221B (zh) | 2024-04-16 |
Family
ID=90046285
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410116350.8A Active CN117645221B (zh) | 2024-01-29 | 2024-01-29 | 一种电梯危险区域识别及越界报警方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117645221B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108275524A (zh) * | 2018-01-12 | 2018-07-13 | 东北大学 | 一种基于第一视角视频序列操作评估的电梯维保操作监测与指导装置 |
CN109558675A (zh) * | 2018-11-28 | 2019-04-02 | 广东铃木电梯有限公司 | 基于图像识别的电梯井道设计方法与系统 |
CN113688251A (zh) * | 2021-07-27 | 2021-11-23 | 广东师大维智信息科技有限公司 | 一种室内体育赛事安保领域的知识图谱构建方法与系统 |
CN113688459A (zh) * | 2021-08-31 | 2021-11-23 | 中国建筑第七工程局有限公司 | 基于bim与ai的施工现场安全管理系统 |
-
2024
- 2024-01-29 CN CN202410116350.8A patent/CN117645221B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108275524A (zh) * | 2018-01-12 | 2018-07-13 | 东北大学 | 一种基于第一视角视频序列操作评估的电梯维保操作监测与指导装置 |
CN109558675A (zh) * | 2018-11-28 | 2019-04-02 | 广东铃木电梯有限公司 | 基于图像识别的电梯井道设计方法与系统 |
CN113688251A (zh) * | 2021-07-27 | 2021-11-23 | 广东师大维智信息科技有限公司 | 一种室内体育赛事安保领域的知识图谱构建方法与系统 |
CN113688459A (zh) * | 2021-08-31 | 2021-11-23 | 中国建筑第七工程局有限公司 | 基于bim与ai的施工现场安全管理系统 |
Also Published As
Publication number | Publication date |
---|---|
CN117645221A (zh) | 2024-03-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3115326A2 (en) | Elevator system capable of monitoring children use and control method thereof | |
CN111488799B (zh) | 一种基于图像识别的坠落物识别方法及系统 | |
KR100916960B1 (ko) | 승강장 모니터링 시스템 | |
CN108840192A (zh) | 一种电梯的监控方法、装置、电子设备及存储介质 | |
KR100750347B1 (ko) | 스테레오비디오 카메라를 이용한 지하철 승강장 모니터링시스템 | |
CN111461080B (zh) | 一种基于图像的智能围栏搭建和识别方法 | |
CN110889339A (zh) | 基于头肩检测的危险区域分级预警方法与系统 | |
WO2022244747A1 (ja) | 作業現場管理システム、作業現場管理方法、及び作業現場管理プログラム | |
CN117645221B (zh) | 一种电梯危险区域识别及越界报警方法及装置 | |
CN108256035A (zh) | 一种工业场所危险行为识别系统 | |
CN114092875A (zh) | 基于机器学习的作业现场安全监管方法及装置 | |
CN110809137A (zh) | 一种校园安全防踩踏监控系统及方法 | |
CN113554364A (zh) | 灾害应急管理方法、装置、设备及计算机存储介质 | |
CN110203787A (zh) | 一种电梯轿厢中人员异常受困的检测方法及系统 | |
CN111797759B (zh) | 一种自动扶梯危险乘梯行为主动干预监测方法 | |
CN117789403A (zh) | 行车作业危险区域人员入侵实时检测方法及系统 | |
CN111591846B (zh) | 一种管理坐倒梯行为的方法、装置和系统 | |
CN113254736A (zh) | 基于bim技术的铁路fas报警三维图形显示方法 | |
CN111464645A (zh) | 基于物联网的升降机操作状态展示方法和设备 | |
CN116246016A (zh) | 变电站高处作业坠物伤害风险监测方法、装置及相关设备 | |
CN112047057A (zh) | 物料传送设备的安全监控方法及系统 | |
CN115504345A (zh) | 基于实时状态监测的震后电梯风险识别与评估方法 | |
CN116129343A (zh) | 消防通道占用检测方法、装置及电子设备 | |
CN113286117B (zh) | 一种吊装作业风险管控系统 | |
CN114463911A (zh) | 一种应用于高铁站台的安全防护系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |