CN113233273B - 电梯故障监测方法、装置、存储介质、电子设备及电梯 - Google Patents

Abstract

本申请提供一种电梯故障监测方法、装置、存储介质、电子设备及电梯，方法包括：获取电梯的加速度参数、所述电梯的轿厢内部的监控图像，其中，所述监控图像中包含所述轿厢的轿厢门；根据所述加速度参数，确定出所述电梯的运行状态，其中，所述运行状态包括静止和运行；根据所述监控图像和预设图像，确定出所述轿厢门的开闭状态，其中，所述预设图像中的所述轿厢门处于关闭状态；根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测。这样可以监测到电梯的绝大多数故障问题，能够有效提升电梯监测的质量和效率。而通过监控图像和预设图像，可以准确地确定出电梯的轿厢门的开闭状态，从而进一步保证电梯故障监测的准确率。

Description

电梯故障监测方法、装置、存储介质、电子设备及电梯

技术领域

本申请涉及设备监测领域，具体而言，涉及一种电梯故障监测方法、装置、存储介质、电子设备及电梯。

背景技术

电梯监控是保障人们生活安全的一个重要因素，通常通过安装在电梯轿厢内部的监控摄像头拍摄监控图像，由小区物业乘客通过电梯的监控图像查看电梯内的情况，查看是否有突发情况，比如电梯困人、开门行梯等。但现在一般小区都有几十部甚至上百部电梯，小区监视电梯的物业乘客可能只有一两个人，难以做到实时监视到突发情况，且这样监视电梯突发情况的方式的质量和效率不高。

发明内容

本申请实施例的目的在于提供一种电梯故障监测方法、装置、存储介质、电子设备及电梯，以提高电梯监视的质量和效率。

为了实现上述目的，本申请的实施例通过如下方式实现：

第一方面，本申请实施例提供一种电梯故障监测方法，包括：获取电梯的加速度参数、所述电梯的轿厢内部的监控图像，其中，所述监控图像中包含所述轿厢的轿厢门；根据所述加速度参数，确定出所述电梯的运行状态，其中，所述运行状态包括静止和运行；根据所述监控图像和预设图像，确定出所述轿厢门的开闭状态，其中，所述预设图像中的所述轿厢门处于关闭状态；根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测。

在本申请实施例中，通过根据电梯的加速度参数确定出电梯的运行状态，根据监控图像和预设图像确定出电梯的轿厢门的开闭状态，以进一步对电梯进行故障监测，可以监测到电梯的绝大多数故障问题，能够有效提升电梯监测的质量和效率。而通过监控图像和预设图像，可以准确地确定出电梯的轿厢门的开闭状态，从而进一步保证电梯故障监测的准确率。

结合第一方面，在第一方面的第一种可能的实现方式中，所述根据所述监控图像和预设图像，确定出所述轿厢门的开闭状态，包括：检测所述监控图像中的竖直边缘直线，并对所述竖直边缘直线进行聚类；计算每类所述竖直边缘直线的中心，并根据其中心将所述监控图像分割为多个部分；将每个部分与所述预设图像的对应部分进行相似度计算，以得到每个部分对应的相似度值；根据每个部分对应的相似度值，确定出所述轿厢门的开闭状态。

在该实现方式中，通过竖直边缘直线检测并进行聚类，以便将监控图像分割为多个部分，计算每个部分与预设图像中对应部分的相似度，从而准确判断轿厢门的开闭状态，有利于对电梯的故障监测。

结合第一方面的第一种可能的实现方式，在第一方面的第二种可能的实现方式中，所述根据每个部分对应的相似度值，确定出所述轿厢门的开闭状态，包括：确定出多个所述相似度值中的最小相似度值；在所述最小相似度值低于相似度阈值时，判断所述最小相似度值对应的部分在所述监控图像中的区域面积是否大于面积阈值；在所述区域面积大于所述面积阈值时，确定所述轿厢门处于开启状态。

在该实现方式中，通过在计算每个部分与预设图像中对应部分的相似度，得到多个相似度，获取相似度值最小区域的区域面积，对其进行判断，在该区域面积大于面积阈值时，说明轿厢门此时的状态与预设图像中关闭轿厢门时的状态可能有很大不同，造成这种情况的原因，通常是由于轿厢门开启时，监控图像中对应轿厢门的目标区域的图像为电梯外的图像，从而确定轿厢门处于开启状态。这样可以准确地确定出轿厢门的开闭状态，从而有利于对电梯故障的有效监测。

结合第一方面，在第一方面的第三种可能的实现方式中，在处于关闭状态的所述轿厢门上具有门缝时，所述根据所述监控图像和预设图像，确定出所述轿厢门的开闭状态，包括：对所述监控图像进行边缘检测，确定出所述轿厢门的轮廓在所述监控图像中对应的目标区域，其中，所述轿厢门的轮廓不受所述轿厢门的开闭状态的影响；获取所述预设图像中轿厢门所在的预设区域，并从所述预设区域中确定出所述门缝所在的参考位置；确定出所述目标区域内与所述参考位置匹配的目标位置；检测所述目标位置上是否存在达到预设长度的直线；若所述目标位置上存在达到预设长度的直线，确定所述轿厢门为关闭状态。

在该实现方式中，处于关闭状态的轿厢门上具有门缝，而从预设图像的轿厢门所在的预设区域中确定出门缝所在的参考位置，对应检测目标区域内与参考位置匹配的目标位置中是否存在达到预设长度的直线，以此确定轿厢门是否为关闭状态。这样的方式可以尽可能减小电梯里的乘客对轿厢门遮挡时产生的干扰，从而提升对轿厢门开闭状态判断的准确性，有利于提升电梯故障监测的准确性。

结合第一方面，在第一方面的第四种可能的实现方式中，所述根据所述监控图像和预设图像，确定出所述轿厢门的开闭状态，包括：对所述监控图像进行边缘检测，确定出所述轿厢门的轮廓在所述监控图像中对应的目标区域，其中，所述轿厢门的轮廓不受所述轿厢门的开闭状态的影响；从所述目标区域中确定出判定区域，其中，所述判定区域为所述轿厢门顶部区域在所述监控图像中对应的区域；计算所述判定区域与所述预设图像中的参考区域的区域相似度，并在所述区域相似度高于相似度阈值时，确定所述轿厢门为关闭状态，其中，所述参考区域在所述预设图像中的位置与所述判定区域在所述监控图像中的位置一致。

在该实现方式中，通过确定出轿厢门的轮廓在监控图像中对应的目标区域，进一步确定出判定区域(轿厢门顶部区域在监控图像中对应的区域)，与预设图像中的参考区域进行相似度计算，以确定轿厢门的开闭状态。由于轿厢门顶部区域通常极少被遮挡，这样可以尽可能减小电梯里的乘客对轿厢门遮挡时产生的干扰，从而提升对轿厢门开闭状态判断的准确性，有利于提升电梯故障监测的准确性。

结合第一方面，在第一方面的第五种可能的实现方式中，所述根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测，包括：在所述电梯的运行状态为运行，且所述轿厢门为开启状态时，确定所述电梯出现故障。

在该实现方式中，通过在电梯的运行状态为运行，且轿厢门为开启状态时，存在较大的安全隐患，这种情况可以确定电梯运行出现故障，有利于及时提示工作人员对电梯进行检修，排除安全隐患。

结合第一方面，在第一方面的第六种可能的实现方式中，在所述获取电梯的加速度参数、所述电梯的轿厢内部的监控图像之后，所述方法还包括：检测所述监控图像中是否存在乘客；对应的，所述根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测，包括：在所述轿厢内存在乘客，而所述电梯处于静止状态，且所述轿厢门处于关闭状态的时长超出预设时长时，确定所述电梯处于故障状态。

在该实现方式中，通过在轿厢内存在乘客，而电梯处于静止状态，且轿厢门处于关闭状态的时长超出预设时长时，可以确定电梯处于故障状态。因为轿厢内有乘客，而电梯长时间处于静止状态，且轿厢门处于关闭状态，说明电梯极有可能因为轿厢门无法打开而处于故障状态。这样对电梯进行故障监测，可以及时通知工作人员对电梯进行检修，及时解救乘客，从而提升电梯的安全性。

结合第一方面，在第一方面的第七种可能的实现方式中，所述监控图像中还包括所述电梯的操作面板，在所述获取电梯的加速度参数、所述电梯的轿厢内部的监控图像之后，所述方法还包括：从所述监控图像中检测出所述操作面板对应的面板区域，并对所述面板区域中的显示区域进行识别，确定出所述电梯所在的当前楼层；对应的，所述根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测，包括：在所述电梯处于静止状态超出预设的静止时长时，检测除所述当前楼层之外的其他楼层是否存在激活的上行按键和/或下行按键，若存在，确定所述电梯处于故障状态，其中，激活的所述上行按键和激活的所述下行按键均用于调用所述电梯。

在该实现方式中，通过检测电梯所在的当前楼层，在电梯处于静止状态超出预设的静止时长时，检测除当前楼层之外的其他楼层是否存在激活的上行按键和/或下行按键，以判断电梯是否处于故障状态，可以准确地确定出电梯是否故障，从而有利于提升电梯故障监测的质量。

第二方面，本申请实施例提供一种电梯故障监测装置，包括：电梯参数获取模块，用于获取电梯的加速度参数、所述电梯的轿厢内部的监控图像，其中，所述监控图像中包含所述轿厢的轿厢门；运行状态确定模块，用于根据所述加速度参数，确定出所述电梯的运行状态，其中，所述运行状态包括静止和运行；开闭状态确定模块，用于根据所述监控图像和预设图像，确定出所述轿厢门的开闭状态，其中，所述预设图像中的所述轿厢门处于关闭状态；电梯故障监测模块，用于根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测。

第三方面，本申请实施例提供一种存储介质，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如第一方面或第一方面可能的实现方式中任一项所述的电梯故障监测方法。

第四方面，本申请实施例提供一种电子设备，包括存储器和处理器，所述存储器用于存储包括程序指令的信息，所述处理器用于控制程序指令的执行，所述程序指令被处理器加载并执行时实现第一方面或第一方面可能的实现方式中任一项所述的电梯故障监测方法。

第五方面，本申请实施例提供一种电梯，包括轿厢、摄像机构、加速度传感器和主控模块，所述加速度传感器设置在所述轿厢上，用于获取电梯的加速度参数并发送给所述主控模块；所述摄像机构设置在所述轿厢内，用于拍摄所述轿厢内的监控图像并发送给所述主控模块，其中，所述摄像机构的监控范围中包含所述轿厢的轿厢门所在的区域；所述主控模块，用于执行第一方面或第一方面可能的实现方式中任一项所述的电梯故障监测方法。

为使本申请的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对本申请实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本申请实施例提供的一种电梯故障监测系统的示意图。

图2为本申请实施例提供的一种电梯的结构示意图。

图3为本申请实施例提供的一种电子设备的结构示意图。

图4为本申请实施例提供的一种电梯故障监测方法的流程图。

图5为本申请实施例提供的一种电梯故障监测装置的结构框图。

图标：10-电梯故障监测系统；11-电梯；111-轿厢；112-操作面板；1121-显示区域；1122-按键；113-加速度传感器；114-摄像机构；115-主控模块；12-电子设备；121-存储器；122-通信模块；123-总线；124-处理器；20-电梯故障监测装置；21-电梯参数获取模块；22-运行状态确定模块；23-开闭状态确定模块；24-电梯故障监测模块。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行描述。

请参阅图1，图1为本申请实施例提供的一种电梯故障监测系统10的示意图。在本实施例中，电梯故障监测系统10可以包括：电梯11和电子设备12。当然，电梯故障监测系统10也可以不包括电子设备12，此处先将对不包括电子设备12的电梯故障监测系统10的情况进行说明。

请参阅图2，图2为本申请实施例提供的一种电梯的结构示意图。

示例性的，电梯11可以包括轿厢111、操作面板112、加速度传感器113、摄像机构114、主控模块115。

轿厢111为具有可以容纳乘客、货物的空间的工具，轿厢111具有轿厢门，通常轿厢门设置在轿厢111的一个侧面上。传统的轿厢门可以为单开式的(轿厢门关闭时中间可以没有门缝)、双开式的(轿厢门关闭时中间具有门缝)、多开式的等。

在本实施例中，在轿厢111内壁上通常设有操作面板112，供乘客操作电梯。操作面板112上有显示区域1121，可以显示电梯当前楼层、电梯的上行或者下行等信息。操作面板112上还设有按键1122(可以为实体按键或者虚拟按键)，供用户输入楼层、开门、关门等操作信息。

在本实施例中，加速度传感器113可以设置在轿厢111上，用于检测轿厢111的加速度信息。示例性的，加速度传感器113可以为三轴加速度传感器。

在本实施例中，摄像机构114可以设置在轿厢111内部，例如，设置在轿厢111内部的顶部、顶部角落等区域。摄像机构114可以实时获取轿厢111内部的监控图像，并且，摄像机构114的监控范围包括轿厢门，从而，在摄像机构114获取的监控图像中可以包含轿厢111的轿厢门。摄像机构114可以为网络摄像头、高清摄像头、监控摄像头等，此处不作限定。另外，在一些可实现的方式中，摄像机构114可以旋转、水平或垂直调整其镜头的位置，以获取更合适的监控图像，此处不作限定。

在本实施例中，主控模块115则可以设置在电梯轿厢的墙体内，与操作面板112、加速度传感器113、摄像机构114等连接，实现操作面板112、加速度传感器113、摄像机构114等与主控模块115的数据通信。

在电梯故障监测系统10不包括电子设备12时，主控系统115可以为本申请实施例提供的电梯故障监测方法的执行主体，实现对电梯11的故障监测。

在电梯故障监测系统10包括电梯和电子设备12时，电梯11可以为一个或多个，且均与电子设备12连接，实现电子设备12与电梯11的通信。而此种情况下，电梯11的结构可以参阅前文中介绍的电梯11的结构，不同的是，电子设备12为本申请实施例提供的电梯故障监测方法的执行主体，以实现对电梯11的故障监测。

请参阅图3，图3为本申请实施例提供的一种电子设备的结构示意图。

在本实施例中，电子设备10可以为终端，例如个人电脑、平板电脑等，此处不作限定；电子设备也12可以为服务器，例如网络服务器、云服务器、服务器集群等，此处不作限定。

示例性的，电子设备12可以包括：通过网络与外界连接的通信模块122、用于执行程序指令的一个或多个处理器124、总线123、不同形式的存储器121，例如，磁盘、ROM(Read-Only Memory，只读存储器)、RAM(Random Access Memory，随机存取存储器)，或其任意组合。其中，存储器121、通信模块122和处理器124之间通过总线123连接。

示例性的，存储器121中存储有程序。处理器124可以从存储器121调用并运行这些程序，从而便可以通过运行程序而执行电梯故障监测方法，以高效实现对电梯的故障监测。

以下，将对本申请实施例提供的电梯故障监测方法(电梯故障监测方法的执行主体可以为电梯或电子设备，以下将以执行主体为电子设备为例进行介绍，但不应视为对本申请的限定)进行介绍。

请参阅图4，图4为本申请实施例提供的一种电梯故障监测方法的流程图。在本实施例中，电梯故障监测方法可以包括：步骤S10、步骤S20、步骤S30和步骤S40。

为实现对电梯的故障监测，可以执行步骤S10。

步骤S10：获取电梯的加速度参数、所述电梯的轿厢内部的监控图像，其中，所述监控图像中包含所述轿厢的轿厢门。

在本实施例中，电子设备可以获取加速度传感器检测电梯得到的加速度参数，以及，电子设备可以获取摄像机构拍摄的包含轿厢门的监控图像(可以是视频、图片等)，其中，监控图像中还可以包含操作面板、轿厢内的乘客等。

获得电梯的加速度参数后，电子设备可以执行步骤S20。

步骤S20：根据所述加速度参数，确定出所述电梯的运行状态，其中，所述运行状态包括静止和运行。

在本实施例中，电子设备可以根据加速度传感器检测到的加速度参数，确定出电梯当前的运行状态。示例性的，在电梯的加速度值为0，且持续的时间大于一定的时间阈值(例如1秒)，则判断电梯处于静止，否则确定电梯处于运行。或者，在加速度参数大于一个预设的阈值(例如0.1m/s2)，且持续时间大于时间阈值(例如1秒)时，确定电梯当前的运行状态为运行，否则，确定电梯当前的运行状态为静止。当然，在一些可实现的方式中，电子设备还可以确定出根据加速度参数确定出电梯运行的方向，本实施例中以确定出电梯的运行状态为运行或者静止即可，但不应视为对本申请的限定。

获得电梯的监控图像后，电子设备可以执行步骤S30。

步骤S30：根据所述监控图像和预设图像，确定出所述轿厢门的开闭状态，其中，所述预设图像中的所述轿厢门处于关闭状态。

在本实施例中，电子设备可以根据监控图像，以及预设图像(预设图像可以为电梯的轿厢门处于关闭状态，轿厢内无乘客时的监控图像，但不限定于此，电梯的轿厢门还可以处于开启状态，或者，轿厢内有乘客等，当然，对于轿厢门处于开启状态的情况，可以调整判断的逻辑；本实施例中以轿厢门处于关闭状态的预设图像为例进行说明)，确定出轿厢门的开闭状态。

示例性的，电子设备可以检测监控图像中的竖直边缘直线，并对竖直边缘直线进行聚类；计算每类竖直边缘直线的中心，并根据其中心将监控图像分割为多个部分；将每个部分与预设图像的对应部分进行相似度计算，以得到每个部分对应的相似度值；根据每个部分对应的相似度值，确定出轿厢门的开闭状态。其中，在根据每个部分对应的相似度值，确定出轿厢门的开闭状态是，可以确定出多个相似度值中的最小相似度值，在最小相似度值低于相似度阈值时，判断最小相似度值对应的部分在监控图像中的区域面积是否大于面积阈值，在区域面积大于面积阈值时，确定轿厢门处于开启状态。

例如，可以取处于运行时的图像(此时轿厢门关闭，有乘客或者无乘客)，作为预设图像。电子设备可以利用当前获取的监控图像(例如为视频)与预设图像对比的方式，判断轿厢门的开闭状态。具体的，电子设备可以读取一帧监控图像，检测图像中的竖直边缘直线，并对竖直边缘直线进行聚类，计算每类边缘直线的中心，进一步根据每类边缘直线的中心把图像分割为n部分，大于等于2。再将每部分图像与预设图像的对应区域做相似度计算，得到n个相似度值。确定出其中的最小相似度值，判断该最小相似度值是否小于某阈值(例如30％，50％等)，若小于该阈值(例如30％，50％等)，则继续判断最小相似度值对应区域的区域面积是否大于某阈值(例如200*200像素，或者对应10平方分米的区域面积)，并在最小相似度值对应区域的区域面积大于该阈值(例如200*200像素，或者对应10平方分米的区域面积)时，判定轿厢门处于为开启状态。否则(最小相似度值大于对应阈值，或者最小相似度值对应区域的区域面积小于对应阈值)，则判定轿厢门处于为关闭状态。

通过在计算每个部分与预设图像中对应部分的相似度，得到多个相似度，获取相似度值最小区域的区域面积，对其进行判断，在该区域面积大于面积阈值时，说明轿厢门此时的状态与预设图像中关闭轿厢门时的状态可能有很大不同，造成这种情况的原因，通常是由于轿厢门开启时，监控图像中对应轿厢门的目标区域的图像为电梯外的图像，从而确定轿厢门处于开启状态。这样可以准确地确定出轿厢门的开闭状态，从而有利于对电梯故障的有效监测。

判断轿厢门的开闭状态的方式，不限定于上述方式，还可以为其他方式。

示例性的，由于电梯的轿厢门通常采用收入式的，不会对轿厢门的轮廓造成遮挡，因此，在监控图像中，轿厢门的轮廓不受轿厢门的开闭状态的影响。而在处于关闭状态的轿厢门上具有门缝时(例如双开式的轿厢门，多开式的轿厢门，部分单开式的轿厢门等，此处以双开式的轿厢门为例)，电子设备可以对监控图像进行边缘检测，确定出轿厢门的轮廓在监控图像中对应的目标区域。以及，电子设备可以获取预设图像中轿厢门所在的预设区域，并从预设区域中确定出轿厢门关闭时门缝所在的参考位置，并进一步确定出目标区域内与参考位置匹配的目标位置。确定出目标位置后，电子设备可以检测目标位置上是否存在达到预设长度(例如500像素长度，或者对应3分米长度)的直线。在目标位置上存在达到预设长度的直线时，电子设备可以确定轿厢门为关闭状态。在目标位置上不存在达到预设长度的直线时，电子设备可以确定轿厢门为关闭状态；或者，暂不确定轿厢门的开闭状态，通过其他方式(例如，通过计算目标区域与预设区域的相似度的方式)辅助确定轿厢门的开闭状态。

处于关闭状态的轿厢门上具有门缝，而从预设图像的轿厢门所在的预设区域中确定出门缝所在的参考位置，对应检测目标区域内与参考位置匹配的目标位置中是否存在达到预设长度的直线，以此确定轿厢门是否为关闭状态。这样的方式可以尽可能减小电梯里的乘客对轿厢门遮挡时产生的干扰，从而提升对轿厢门开闭状态判断的准确性，有利于提升电梯故障监测的准确性。

示例性的，由于电梯的轿厢门通常采用收入式的，不会对轿厢门的轮廓造成遮挡，因此，在监控图像中，轿厢门的轮廓不受轿厢门的开闭状态的影响。因此，判断轿厢门的开闭状态的方式，还可以为：

电子设备对监控图像进行边缘检测，确定出轿厢门的轮廓在监控图像中对应的目标区域。以及，从目标区域中确定出判定区域(例如轿厢门顶部区域在监控图像中对应的区域)。进一步的，电子设备可以计算判定区域与预设图像中的参考区域(与判定区域的位置对应，同样为轿厢门顶部区域在预设图像中对应的区域)的区域相似度，并在区域相似度高于相似度阈值时，确定轿厢门为关闭状态；否则，确定轿厢门为开启状态。

通过确定出轿厢门的轮廓在监控图像中对应的目标区域，进一步确定出判定区域(轿厢门顶部区域在监控图像中对应的区域)，与预设图像中的参考区域进行相似度计算，以确定轿厢门的开闭状态。由于轿厢门顶部区域通常极少被遮挡，这样可以尽可能减小电梯里的乘客对轿厢门遮挡时产生的干扰，从而提升对轿厢门开闭状态判断的准确性，有利于提升电梯故障监测的准确性。

需要说明的是，在本实施例中，介绍的步骤S20和步骤S30，其执行顺序不作限定，可以先执行步骤S20后执行步骤S30，也可以先执行步骤S30后执行步骤S20，还可以同时执行步骤S20和步骤S30。

在确定出电梯的运行状态和轿厢门的开闭状态后，电子设备可以执行步骤S40。

步骤S40：根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测。

在本实施例中，电子设备可以根据电梯的运行状态和轿厢门的开闭状态，对电梯进行故障监测。

示例性的，在电梯的运行状态为运行，且轿厢门为打开状态时，电子设备可以确定电梯出现故障，这是属于开门行梯的状况，即，在电梯门未关闭的情况下运行，具有很高的安全隐患。

为了对电梯运行时更多种类的故障状况进行监测，在执行步骤S40之前，电子设备还可以检测监控图像中是否存在乘客。示例性的，电子设备可以根据监控图像，判断电梯内的乘客数量。例如，通过训练SSD(Single Shot MultiBox Detector，通用物体检测)模型，得到用于检测电梯内的乘客的检测模型，通过矩形框标记出电梯内人员的头部，并计算数量，以确定出监控图像中的乘客数量。

确定出监控图像中是否存在乘客(或者，确定出乘客的数量)后，电子设备可以根据轿厢内存在乘客的情况，结合电梯的运行状态和轿厢门的开闭状态，对电梯进行故障监测。

例如，在轿厢内存在乘客、电梯处于静止状态，且轿厢门处于关闭状态的时长超出预设时长(例如60秒)时，电子设备可以确定电梯处于故障状态。

在轿厢内存在乘客，而电梯处于静止状态，且轿厢门处于关闭状态的时长超出预设时长时，可以确定电梯处于故障状态。因为轿厢内有乘客，而电梯长时间处于静止状态，且轿厢门处于关闭状态，说明电梯极有可能因为轿厢门无法打开而处于故障状态。这样对电梯进行故障监测，可以在电梯出现此类状况时，及时通知工作人员(例如，通过向工作人员的通信设备发送消息)对电梯进行检修，及时解救乘客，从而提升电梯的安全性。

为了对电梯运行时更多种类的故障状况进行监测，在执行步骤S10之后，及执行步骤S40之前，电子设备还可以从监控图像中检测出操作面板对应的面板区域，并对面板区域中的显示区域进行识别，确定出电梯所在的当前楼层。

示例性的，电子设备可以把楼层号和上下行标识符号所在的区域(即面板区域中的显示区域)用矩形框框出，此处可以通过tiny-yolov3模型实现。而后，电子设备可以将检测到矩形框(显示区域)中的符号分割开，此处可以通过OpenCV实现。为了进一步提升识别的准确率，可以排除非目标符号(例如操作面板中的按键)的干扰。以及，电子设备可以对分割开的符号进行识别，此处可以通过模型MobileNetV2和VGG16实现，从而实现对电梯所在的当前楼层(及电梯上下行)的识别。

确定出电梯所在的当前楼层(及电梯上下行)后，电子设备可以结合电梯所在的当前楼层(及电梯上下行)，以及电梯的运行状态，对电梯进行故障监测。

例如，在电梯处于静止状态超出预设的静止时长(例如120秒)时，电子设备可以检测除当前楼层之外的其他楼层是否存在激活的上行按键和/或下行按键(激活的上行按键和激活的下行按键均用于调用电梯)，若存在，可以确定电梯处于故障状态。

通过检测电梯所在的当前楼层，在电梯处于静止状态超出预设的静止时长时，检测除当前楼层之外的其他楼层是否存在激活的上行按键和/或下行按键，以判断电梯是否处于故障状态，可以准确地确定出电梯是否故障，从而有利于提升电梯故障监测的质量。

当然，电子设备还可以对电梯可能存在的其他故障状态进行监测，例如，在电梯的轿厢门处于持续开启状态的时间超出一定的时间(例如300秒)时，电子设备可以根据轿厢内乘客的存在情况，结合判断电梯是否处于故障状态。因此，对电梯的故障监测，并不限定于所列举的方式，其他一些可通过本申请实施例提供的电梯故障监测方法实现的情况，也在本申请的保护范围内。

请参阅图5，图5为本申请实施例提供的一种电梯故障监测装置20的结构框图。基于同一发明构思，本申请实施例中还提供一种电梯故障监测装置20，包括：

电梯参数获取模块21，用于获取电梯的加速度参数、所述电梯的轿厢内部的监控图像，其中，所述监控图像中包含所述轿厢的轿厢门。

运行状态确定模块22，用于根据所述加速度参数，确定出所述电梯的运行状态，其中，所述运行状态包括静止和运行。

开闭状态确定模块23，用于根据所述监控图像和预设图像，确定出所述轿厢门的开闭状态，其中，所述预设图像中的所述轿厢门处于关闭状态。

电梯故障监测模块24，用于根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测。

在本实施例中，所述开闭状态确定模块23，具体用于检测所述监控图像中的竖直边缘直线，并对所述竖直边缘直线进行聚类；计算每类所述竖直边缘直线的中心，并根据其中心将所述监控图像分割为多个部分；将每个部分与所述预设图像的对应部分进行相似度计算，以得到每个部分对应的相似度值；根据每个部分对应的相似度值，确定出所述轿厢门的开闭状态。

在本实施例中，所述开闭状态确定模块23，具体用于确定出多个所述相似度值中的最小相似度值；在所述最小相似度值低于相似度阈值时，判断所述最小相似度值对应的部分在所述监控图像中的区域面积是否大于面积阈值；在所述区域面积大于所述面积阈值时，确定所述轿厢门处于开启状态。

在本实施例中，在处于关闭状态的所述轿厢门上具有门缝时，所述开闭状态确定模块23，具体用于对所述监控图像进行边缘检测，确定出所述轿厢门的轮廓在所述监控图像中对应的目标区域，其中，所述轿厢门的轮廓不受所述轿厢门的开闭状态的影响；获取所述预设图像中轿厢门所在的预设区域，并从所述预设区域中确定出所述门缝所在的参考位置；确定出所述目标区域内与所述参考位置匹配的目标位置；检测所述目标位置上是否存在达到预设长度的直线；若所述目标位置上存在达到预设长度的直线，确定所述轿厢门为关闭状态。

在本实施例中，所述开闭状态确定模块23，具体用于对所述监控图像进行边缘检测，确定出所述轿厢门的轮廓在所述监控图像中对应的目标区域，其中，所述轿厢门的轮廓不受所述轿厢门的开闭状态的影响；从所述目标区域中确定出判定区域，其中，所述判定区域为所述轿厢门顶部区域在所述监控图像中对应的区域；计算所述判定区域与所述预设图像中的参考区域的区域相似度，并在所述区域相似度高于相似度阈值时，确定所述轿厢门为关闭状态，其中，所述参考区域在所述预设图像中的位置与所述判定区域在所述监控图像中的位置一致。

在本实施例中，所述电梯故障监测模块24，具体用于在所述电梯的运行状态为运行，且所述轿厢门为开启状态时，确定所述电梯出现故障。

在本实施例中，所述电梯故障监测模块24，在所述电梯参数获取模块21获取电梯的加速度参数、所述电梯的轿厢内部的监控图像之后，检测所述监控图像中是否存在乘客；以及，在所述轿厢内存在乘客，而所述电梯处于静止状态，且所述轿厢门处于关闭状态的时长超出预设时长时，确定所述电梯处于故障状态。

在本实施例中，所述监控图像中还包括所述电梯的操作面板，所述电梯故障监测模块24，具体用于在所述电梯参数获取模块21获取电梯的加速度参数、所述电梯的轿厢内部的监控图像之后，从所述监控图像中检测出所述操作面板对应的面板区域，并对所述面板区域中的显示区域进行识别，确定出所述电梯所在的当前楼层；在所述电梯处于静止状态超出预设的静止时长时，检测除所述当前楼层之外的其他楼层是否存在激活的上行按键和/或下行按键，若存在，确定所述电梯处于故障状态，其中，激活的所述上行按键和激活的所述下行按键均用于调用所述电梯。

本申请实施例还提供一种存储介质，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现本申请实施例提供的电梯故障监测方法。

综上所述，本申请实施例提供一种电梯故障监测方法、装置、存储介质、电子设备及电梯，通过根据电梯的加速度参数确定出电梯的运行状态，根据监控图像和预设图像确定出电梯的轿厢门的开闭状态，以进一步对电梯进行故障监测，可以监测到电梯的绝大多数故障问题，能够有效提升电梯监测的质量和效率。而通过监控图像和预设图像，可以准确地确定出电梯的轿厢门的开闭状态，从而进一步保证电梯故障监测的准确率。

在本申请所提供的实施例中，应该理解到，所揭露装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个模块或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置的间接耦合或通信连接，可以是电性，机械或其它的形式。

再者，在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。

在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。

以上所述仅为本申请的实施例而已，并不用于限制本申请的保护范围，对于本领域的技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (7)

1.一种电梯故障监测方法，其特征在于，包括：

获取电梯的加速度参数、所述电梯的轿厢内部的监控图像，其中，所述监控图像中包含所述轿厢的轿厢门；

根据所述加速度参数，确定出所述电梯的运行状态，其中，所述运行状态包括静止和运行；

根据所述监控图像和预设图像，确定出所述轿厢门的开闭状态，其中，所述预设图像中的所述轿厢门处于关闭状态；

根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测；

其中，所述根据所述监控图像和预设图像，确定出所述轿厢门的开闭状态，包括：

检测所述监控图像中的竖直边缘直线，并对所述竖直边缘直线进行聚类；计算每类所述竖直边缘直线的中心，并根据其中心将所述监控图像分割为多个部分；将每个部分与所述预设图像的对应部分进行相似度计算，以得到每个部分对应的相似度值；确定出多个所述相似度值中的最小相似度值；在所述最小相似度值低于相似度阈值时，判断所述最小相似度值对应的部分在所述监控图像中的区域面积是否大于面积阈值；在所述区域面积大于所述面积阈值时，确定所述轿厢门处于开启状态；

其中，所述监控图像中还包括所述电梯的操作面板，在所述获取电梯的加速度参数、所述电梯的轿厢内部的监控图像之后，所述方法还包括：

从所述监控图像中检测出所述操作面板对应的面板区域，并对所述面板区域中的显示区域进行识别，确定出所述电梯所在的当前楼层；

对应的，所述根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测，包括：

在所述电梯处于静止状态超出预设的静止时长时，检测除所述当前楼层之外的其他楼层是否存在激活的上行按键和/或下行按键，若存在，确定所述电梯处于故障状态，其中，激活的所述上行按键和激活的所述下行按键均用于调用所述电梯。

2.根据权利要求1所述的电梯故障监测方法，其特征在于，所述根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测，包括：

在所述电梯的运行状态为运行，且所述轿厢门为开启状态时，确定所述电梯出现故障。

3.根据权利要求1所述的电梯故障监测方法，其特征在于，在所述获取电梯的加速度参数、所述电梯的轿厢内部的监控图像之后，所述方法还包括：

检测所述监控图像中是否存在乘客；

对应的，所述根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测，包括：

在所述轿厢内存在乘客，而所述电梯处于静止状态，且所述轿厢门处于关闭状态的时长超出预设时长时，确定所述电梯处于故障状态。

4.一种电梯故障监测装置，其特征在于，包括：

电梯参数获取模块，用于获取电梯的加速度参数、所述电梯的轿厢内部的监控图像，其中，所述监控图像中包含所述轿厢的轿厢门；

运行状态确定模块，用于根据所述加速度参数，确定出所述电梯的运行状态，其中，所述运行状态包括静止和运行；

开闭状态确定模块，用于根据所述监控图像和预设图像，确定出所述轿厢门的开闭状态，其中，所述预设图像中的所述轿厢门处于关闭状态；

电梯故障监测模块，用于根据所述电梯的运行状态和所述轿厢门的开闭状态，对所述电梯进行故障监测；

其中，所述开闭状态确定模块，具体用于检测所述监控图像中的竖直边缘直线，并对所述竖直边缘直线进行聚类；计算每类所述竖直边缘直线的中心，并根据其中心将所述监控图像分割为多个部分；将每个部分与所述预设图像的对应部分进行相似度计算，以得到每个部分对应的相似度值；确定出多个所述相似度值中的最小相似度值；在所述最小相似度值低于相似度阈值时，判断所述最小相似度值对应的部分在所述监控图像中的区域面积是否大于面积阈值；在所述区域面积大于所述面积阈值时，确定所述轿厢门处于开启状态；

其中，所述监控图像中还包括所述电梯的操作面板，所述电梯故障监测模块，具体用于在所述电梯参数获取模块获取电梯的加速度参数、所述电梯的轿厢内部的监控图像之后，从所述监控图像中检测出所述操作面板对应的面板区域，并对所述面板区域中的显示区域进行识别，确定出所述电梯所在的当前楼层；在所述电梯处于静止状态超出预设的静止时长时，检测除所述当前楼层之外的其他楼层是否存在激活的上行按键和/或下行按键，若存在，确定所述电梯处于故障状态，其中，激活的所述上行按键和激活的所述下行按键均用于调用所述电梯。

5.一种存储介质，其特征在于，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如权利要求1至3中任一项所述的电梯故障监测方法。

6.一种电子设备，包括存储器和处理器，所述存储器用于存储包括程序指令的信息，所述处理器用于控制程序指令的执行，其特征在于：所述程序指令被处理器加载并执行时实现权利要求1至3中任一项所述的电梯故障监测方法。

7.一种电梯，其特征在于，包括轿厢、摄像机构、加速度传感器和主控模块，

所述加速度传感器设置在所述轿厢上，用于获取电梯的加速度参数并发送给所述主控模块；

所述摄像机构设置在所述轿厢内，用于拍摄所述轿厢内的监控图像并发送给所述主控模块，其中，所述摄像机构的监控范围中包含所述轿厢的轿厢门所在的区域；

所述主控模块，用于执行权利要求1至3中任一项所述的电梯故障监测方法。