CN113879925B - 电梯控制方法、装置、设备及存储介质 - Google Patents
电梯控制方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN113879925B CN113879925B CN202111063161.1A CN202111063161A CN113879925B CN 113879925 B CN113879925 B CN 113879925B CN 202111063161 A CN202111063161 A CN 202111063161A CN 113879925 B CN113879925 B CN 113879925B
- Authority
- CN
- China
- Prior art keywords
- objects
- elevator
- controlled
- associated object
- controlled elevator
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B1/00—Control systems of elevators in general
- B66B1/02—Control systems without regulation, i.e. without retroactive action
- B66B1/06—Control systems without regulation, i.e. without retroactive action electric
- B66B1/14—Control systems without regulation, i.e. without retroactive action electric with devices, e.g. push-buttons, for indirect control of movements
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B1/00—Control systems of elevators in general
- B66B1/34—Details, e.g. call counting devices, data transmission from car to control system, devices giving information to the control system
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
- B66B5/0006—Monitoring devices or performance analysers
- B66B5/0012—Devices monitoring the users of the elevator system
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B50/00—Energy efficient technologies in elevators, escalators and moving walkways, e.g. energy saving or recuperation technologies
Abstract
本申请公开了电梯控制方法、装置、设备及存储介质,属于计算机技术领域。方法包括:获取监控图像的对象识别结果;当对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,获取第一对象以及关联对象的相对位置;基于第一对象和关联对象的相对位置,确定第一对象与关联对象的搭乘情况;当第一对象与关联对象的搭乘情况不一致,发送电梯控制指令,电梯控制指令用于控制被控电梯打开,直至第一对象与关联对象的搭乘情况一致。本申请识别第一对象和第一对象的关联对象,并确定第一对象和第一对象的关联对象的搭乘情况,可以确保第一对象与第一对象的关联对象搭乘情况不一致时,控制被控电梯打开,使被控电梯满足控制需求,提高安全性。
Description
技术领域
本申请实施例涉及计算机技术领域,特别涉及一种电梯控制方法、装置、设备及存储介质。
背景技术
目前的高层建筑基本都配置有电梯,电梯在为人们的生活带来便利的同时,也可能发生一些危险的事故,因此,有必要提供一种电梯控制方法,以避免发生安全事故。
在相关技术中,可以通过视觉识别的方法识别电梯内的儿童,且当识别出电梯内只有儿童时,电梯门被控制使其保持打开,确保儿童不能独自搭乘电梯。
虽然相关技术提供的电梯控制方法可以确保儿童不能独自搭乘电梯,但是仍然在某些场景下无法满足控制需求,导致该种电梯控制方法的安全性不高。
发明内容
本申请实施例提供了一种电梯控制方法、装置、设备及存储介质,可用于解决相关技术中的问题。技术方案如下:
一方面,本申请实施例提供了一种电梯控制方法,方法包括:
获取监控图像的对象识别结果,监控图像包括被控电梯内的监控图像以及被控电梯外的监控图像;
当对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,获取第一对象以及关联对象的相对位置;
基于第一对象和关联对象的相对位置,确定第一对象与关联对象的搭乘情况;
当第一对象与关联对象的搭乘情况不一致,发送电梯控制指令,电梯控制指令用于控制被控电梯打开,直至第一对象与关联对象的搭乘情况一致。
在一种可能的实现方式中,对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,获取监控图像的对象识别结果,包括:
获取被控电梯内的监控图像以及被控电梯外的监控图像;
当识别到被控电梯内的监控图像和/或被控电梯外的监控图像中包括第一对象,在被控电梯内的监控图像以及被控电梯外的监控图像中确定参考数量个第二对象;
对第二对象与第一对象的目标交互行为进行识别,根据目标交互行为的识别结果在参考数量个第二对象中识别出第一对象的关联对象。
在一种可能的实现方式中,在被控电梯内的监控图像以及被控电梯外的监控图像中确定参考数量个第二对象,包括:
在被控电梯内的监控图像以及被控电梯外的监控图像中确定位于第一对象所在位置的参考范围内的第三对象,从第三对象中筛选出参考数量个第三对象作为第二对象。
在一种可能的实现方式中,根据目标交互行为的识别结果在参考数量个第二对象中识别出第一对象的关联对象,包括:
将参考数量个第二对象中,与第一对象的目标交互行为计数达到要求数量的第二对象作为识别出的第一对象的关联对象。
在一种可能的实现方式中,根据目标交互行为的识别结果在参考数量个第二对象中识别出第一对象的关联对象,包括:
将参考数量个第二对象中,在参考时间段内与第一对象持续存在目标交互行为的第二对象作为识别出的第一对象的关联对象。
在一种可能的实现方式中,被控电梯内的监控图像和/或被控电梯外的监控图像中包括的第一对象通过对象识别模型从监控图像中识别得到,对象识别模型基于标注了对象的训练样本进行训练得到。
在一种可能的实现方式中,对第二对象与第一对象的目标交互行为进行识别,包括:
通过交互识别模型对第二对象与第一对象的目标交互行为进行识别,得到目标交互行为的识别结果,交互识别模型基于标注了目标交互行为的样本训练得到。
在一种可能的实现方式中,获取第一对象以及关联对象的相对位置,包括:
获取对第一对象及关联对象的实时监控图像;
在实时监控图像中识别出第一对象及关联对象之后,确定第一对象及关联对象的实时位置,通过实时位置确定第一对象以及关联对象的相对位置。
在一种可能的实现方式中,基于第一对象和关联对象的相对位置,确定第一对象与关联对象的搭乘情况,包括:
如果第一对象和关联对象的相对位置指示第一对象与关联对象均位于被控电梯内或均位于被控电梯外,则第一对象与关联对象的搭乘情况一致;
如果第一对象和关联对象的相对位置指示第一对象与关联对象分别位于被控电梯内和被控电梯外,则第一对象与关联对象的搭乘情况不一致。
另一方面,提供了一种电梯控制装置,装置包括:
第一获取模块,用于获取监控图像的对象识别结果,监控图像包括被控电梯内的监控图像以及被控电梯外的监控图像;
第二获取模块,用于当对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,获取第一对象以及关联对象的相对位置;
确定模块,用于基于第一对象和关联对象的相对位置,确定第一对象与关联对象的搭乘情况;
控制模块,用于当第一对象与关联对象的搭乘情况不一致,发送电梯控制指令,电梯控制指令用于控制被控电梯打开,直至第一对象与关联对象的搭乘情况一致。
在一种可能的实现方式中,对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,第一获取模块,包括:
获取单元,用于获取被控电梯内的监控图像以及被控电梯外的监控图像;
确定单元,用于当识别到被控电梯内的监控图像和/或被控电梯外的监控图像中包括第一对象,在被控电梯内的监控图像以及被控电梯外的监控图像中确定参考数量个第二对象;
识别单元,用于对第二对象与第一对象的目标交互行为进行识别,根据目标交互行为的识别结果在参考数量个第二对象中识别出第一对象的关联对象。
在一种可能的实现方式中,确定单元,用于在被控电梯内的监控图像以及被控电梯外的监控图像中确定位于第一对象所在位置的参考范围内的第三对象,从第三对象中筛选出参考数量个第三对象作为第二对象。
在一种可能的实现方式中,识别单元,用于将参考数量个第二对象中,与第一对象的目标交互行为计数达到要求数量的第二对象作为识别出的第一对象的关联对象。
在一种可能的实现方式中,识别单元,用于将参考数量个第二对象中,在参考时间段内与第一对象持续存在目标交互行为的第二对象作为识别出的第一对象的关联对象。
在一种可能的实现方式中,被控电梯内的监控图像和/或被控电梯外的监控图像中包括的第一对象通过对象识别模型从监控图像中识别得到,对象识别模型基于标注了对象的训练样本进行训练得到。
在一种可能的实现方式中,识别单元,用于通过交互识别模型对第二对象与第一对象的目标交互行为进行识别,得到目标交互行为的识别结果,交互识别模型基于标注了目标交互行为的样本训练得到。
在一种可能的实现方式中,第二获取模块,用于获取对第一对象及关联对象的实时监控图像;在实时监控图像中识别出第一对象及关联对象之后,确定第一对象及关联对象的实时位置,通过实时位置确定第一对象以及关联对象的相对位置。
在一种可能的实现方式中,确定模块,用于如果第一对象和关联对象的相对位置指示第一对象与关联对象均位于被控电梯内或均位于被控电梯外,则第一对象与关联对象的搭乘情况一致;如果第一对象和关联对象的相对位置指示第一对象与关联对象分别位于被控电梯内和被控电梯外,则第一对象与关联对象的搭乘情况不一致。
另一方面,提供了一种电梯控制系统,系统包括:摄像设备、对象识别系统、电梯监控平台和电梯控制系统;
摄像设备用于获取监控图像,监控图像包括被控电梯内的监控图像以及被控电梯外的监控图像,将监控图像发送给对象识别系统;
对象识别系统用于获取监控图像的对象识别结果,将对象识别结果发送给电梯监控平台;
电梯监控平台用于获取监控图像的对象识别结果;当对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,获取第一对象以及关联对象的相对位置;基于第一对象和关联对象的相对位置,确定第一对象与关联对象的搭乘情况;当第一对象与关联对象的搭乘情况不一致,通过电梯控制系统发送电梯控制指令,电梯控制指令用于控制被控电梯打开,直至第一对象与关联对象的搭乘情况一致;
电梯控制系统用于接收电梯控制指令,根据该电梯控制指令控制被控电梯打开。
在一种可能的实现方式中,对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,摄像设备用于获取被控电梯内的监控图像和/或被控电梯外的监控图像,将监控图像发送给对象识别系统;
对象识别系统用于当识别到被控电梯内的监控图像和/或被控电梯外的监控图像中包括第一对象,在被控电梯内的监控图像以及被控电梯外的监控图像中确定参考数量个第二对象;对第二对象与第一对象的目标交互行为进行识别,根据目标交互行为的识别结果在参考数量个第二对象中识别出第一对象的关联对象。
在一种可能的实现方式中,对象识别系统用于在被控电梯内的监控图像以及被控电梯外的监控图像中确定位于第一对象所在位置的参考范围内的第三对象,从第三对象中筛选出参考数量个第三对象作为第二对象。
在一种可能的实现方式中,对象识别系统用于将参考数量个第二对象中,与第一对象的目标交互行为计数达到要求数量的第二对象作为识别出的第一对象的关联对象。
在一种可能的实现方式中,对象识别系统用于将参考数量个第二对象中,在参考时间段内与第一对象持续存在目标交互行为的第二对象作为识别出的第一对象的关联对象。
在一种可能的实现方式中,被控电梯内的监控图像和/或被控电梯外的监控图像中包括的第一对象通过对象识别模型从监控图像中识别得到,对象识别模型基于标注了对象的训练样本进行训练得到。
在一种可能的实现方式中,对象识别系统用于通过交互识别模型对第二对象与第一对象的目标交互行为进行识别,得到目标交互行为的识别结果,交互识别模型基于标注了目标交互行为的样本训练得到。
在一种可能的实现方式中,电梯监控平台用于获取对第一对象及关联对象的实时监控图像;在实时监控图像中识别出第一对象及关联对象之后,确定第一对象及关联对象的实时位置,通过实时位置确定第一对象以及关联对象的相对位置。
在一种可能的实现方式中,电梯监控平台用于如果第一对象和关联对象的相对位置指示第一对象与关联对象均位于被控电梯内或均位于被控电梯外,则第一对象与关联对象的搭乘情况一致;如果第一对象和关联对象的相对位置指示第一对象与关联对象分别位于被控电梯内和被控电梯外,则第一对象与关联对象的搭乘情况不一致。
另一方面,提供了一种计算机设备,计算机设备包括处理器和存储器,存储器中存储有至少一条计算机程序,至少一条计算机程序由处理器加载并执行,以使计算机设备实现上述任一的电梯控制方法。
另一方面,还提供了一种计算机可读存储介质,计算机可读存储介质中存储有至少一条计算机程序,至少一条计算机程序由处理器加载并执行,以使计算机实现上述任一的电梯控制方法。
另一方面,还提供了一种计算机程序产品或计算机程序,计算机程序产品或计算机程序包括计算机指令,计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取计算机指令,处理器执行计算机指令,使得计算机设备执行上述任一的电梯控制方法。
本申请实施例提供的技术方案至少带来如下有益效果:
本申请实施例提供的技术方案,在监控图像的对象识别结果指示监控图像中包括第一对象和第一对象的关联对象时,基于第一对象以及关联对象的相对位置确定第一对象与关联对象的搭乘情况,从而通过二者的搭乘情况来控制被控电梯,可以确保第一对象与第一对象的关联对象搭乘情况不一致时,控制被控电梯打开,使被控电梯满足控制需求,提高安全性。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种实施环境的示意图;
图2是本申请实施例提供的一种电梯控制方法流程图;
图3是本申请实施例提供的一种识别关联对象的结果示意图;
图4是本申请实施例提供的一种电梯控制情况示意图;
图5是本申请实施例提供的一种电梯控制装置示意图;
图6是本申请实施例提供的一种计算机设备的结构示意图;
图7是本申请实施例提供的一种计算机设备的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
需要说明的是,本申请的说明书和权利要求书中的术语“第一”、“第二”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
本申请实施例提供了一种电梯控制方法,请参考图1,其示出了本申请实施例提供的方法实施环境的示意图,该实施环境为电梯控制系统。例如,该电梯控制系统包括:摄像设备11、对象识别系统12、电梯监控平台13和电梯控制系统14。
其中,摄像设备11可用于获取监控图像,监控图像包括被控电梯内的监控图像以及被控电梯外的监控图像,将监控图像发送给对象识别系统12。对象识别系统12可应用本申请实施例提供的方法获取监控图像的对象识别结果,将对象识别结果发送给电梯监控平台13。电梯监控平台13用于获取监控图像的对象识别结果;当对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,获取第一对象以及关联对象的相对位置;基于第一对象和关联对象的相对位置,确定第一对象与关联对象的搭乘情况;当第一对象与关联对象的搭乘情况不一致,向电梯控制系统14发送电梯控制指令,该电梯控制指令用于通过电梯控制系统14控制被控电梯打开,直至第一对象与关联对象的搭乘情况一致。电梯控制系统14用于在电梯监控平台13的控制下,控制被控电梯打开。
可选地,摄像设备11可以是诸如摄像机等的摄像设备,本申请实施例不对摄像设备的型号进行限定。可选地,对象识别系统12、电梯监控平台13、电梯控制系统14均可以是任何一种可与用户通过键盘、触摸板、触摸屏、遥控器、语音交互或手写设备等一种或多种方式进行人机交互的电子产品,例如PC(Personal Computer,个人计算机)、手机、智能手机、PDA(Personal Digital Assistant,个人数字助手)、可穿戴设备、PPC(Pocket PC,掌上电脑)、平板电脑、智能车机、智能电视、智能音箱等。摄像设备11、对象识别系统12、电梯监控平台13与电梯控制系统14通过有线或无线网络建立通信连接。
本领域技术人员应能理解上述摄像设备11、对象识别系统12、电梯监控平台13与电梯控制系统14仅为举例,其他现有的或今后可能出现的应用上述方法的电子产品均可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
此外,需要说明的是,以上图1仅是将摄像设备11、对象识别系统12、电梯监控平台13与电梯控制系统14作为独立的设备为例进行说明,但并不用于限制本申请,本申请实施例提供的方法除了可应用于上述图1所示的电梯控制系统外,也可由单独的一个或者两个设备独立完成。例如本申请实施例提供的方法可由具有摄像、对象识别以及电梯控制功能的设备实现。
基于上述图1所示的实施环境,本申请实施例提供一种电梯控制方法,如图2所示,本申请实施例提供的方法可以包括如下步骤:
步骤201,获取监控图像的对象识别结果,监控图像包括被控电梯内的监控图像以及被控电梯外的监控图像。
其中,被控电梯可以是电梯控制方法的应用场景中任一需要控制的电梯,该被控电梯可以是具有电梯门的电梯。本申请实施例不对电梯控制的方法的应用场景进行限定,也不对被控电梯进行限定。例如,该电梯控制方法的应用场景为居民楼,则被控电梯是居民楼中的住户所搭乘的电梯。又例如,该电梯控制方法的应用场景为商场,则被控电梯是商场内的购物电梯。
无论是哪个应用场景,为了后续能够进行有效控制,可获取被控电梯内的监控图像和被控电梯外的监控图像。例如,在被控电梯内、外布局摄像设备,例如摄像机等。在电梯范围外布局至少一个摄像设备,电梯范围外布局的摄像设备应保证可拍摄到在电梯范围外一定距离内等待搭乘电梯的人员。在电梯范围内布局至少一个摄像设备,电梯范围内布局的摄像设备应保证可拍摄到全部搭乘电梯的人员。通过摄像设备采集被控电梯内的监控图像和被控电梯外的监控图像。之后,采用图像识别的方法对该监控图像进行对象识别,得到对象识别结果。
以将该电梯控制的方法应用于对儿童搭乘电梯进行安全控制的应用为例,由于儿童独自搭乘电梯容易发生危险,本申请实施例提供的方法在控制被控电梯时,不光要检测儿童是否单独搭乘电梯,也要检测儿童是否有监护人陪同,在儿童有监护人陪同的情况下,再控制被控电梯运行。因此,在本申请实施例中,可将儿童作为第一对象,将儿童的监护人作为第一对象的关联对象。获取到被控电梯内的监控图像和被控电梯外的监控图像之后,可对监控图像进行对象识别,得到对象识别结果,也即识别监控图像中包括第一对象和第一对象的关联对象。
可选地,对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,获取监控图像的对象识别结果,包括:获取被控电梯内的监控图像以及被控电梯外的监控图像;当识别到被控电梯内的监控图像和/或被控电梯外的监控图像中包括第一对象,在被控电梯内的监控图像以及被控电梯外的监控图像中确定参考数量个第二对象;对第二对象与第一对象的目标交互行为进行识别,根据目标交互行为的识别结果在参考数量个第二对象中识别出第一对象的关联对象。
其中,在被控电梯内的监控图像以及被控电梯外的监控图像中确定参考数量个第二对象,包括但不限于:在被控电梯内的监控图像以及被控电梯外的监控图像中确定位于第一对象所在位置的参考范围内的第三对象,从第三对象中筛选出参考数量个第三对象作为第二对象。
本申请实施例不对第一对象所在位置的参考范围进行限定,第一对象所在位置的参考范围可根据应用场景或者经验进行设置。例如,将儿童作为第一对象,儿童所在位置的参考范围可以设定为以该儿童所在位置为圆心,半径为5米的圆。首先,在被控电梯内的监控图像以及被控电梯外的监控图像中确定位于以该儿童所在位置为圆心,半径为5米的圆的参考范围内的成人作为第三对象,再从第三对象中筛选出参考数量个第三对象作为第二对象。
本申请实施例不对从第三对象中筛选出参考数量个第三对象作为第二对象的方式进行限定,也不对参考数量的值进行限定,可基于应用场景和经验设置。示例性地,以在第三对象中按照距离第一对象位置由近至远的顺序,从第三对象中筛选出参考数量个第三对象作为第二对象。例如,参考数量为5,第一对象为儿童,第三对象为成人为例,确定出第三对象后,在第三对象中按照距离该儿童的位置由近至远的顺序筛选出5个成人作为第二对象。
可选地,根据目标交互行为的识别结果在参考数量个第二对象中识别出第一对象的关联对象,包括:将参考数量个第二对象中,与第一对象的目标交互行为计数达到要求数量的第二对象作为识别出的第一对象的关联对象。例如,如果目标交互行为发起人是第二对象之一,目标交互行为接受人是第一对象,则对该第二对象进行一次行为的累计,一段时间内累计次数达到要求数量的第二对象即可作为第一对象的关联对象。本申请实施例不对要求数量进行限定,例如,可以将累计次数最多的一个或几个第二对象确定为第一对象的关联对象。
在一种可能的实现方式中,还可以指定时间段来约束确定的关联对象。示例性地,根据目标交互行为的识别结果在参考数量个第二对象中识别出第一对象的关联对象,包括:将参考数量个第二对象中,在参考时间段内与第一对象持续存在目标交互行为的第二对象作为识别出的第一对象的关联对象。
其中,参考时间段可基于应用场景或者经验设置,本申请实施例不对参考时间段的长短进行限定。例如,如果目标交互行为发起人是第二对象之一,目标交互行为接受人是第一对象,参考时间段设置为3分钟,则可以将在3分钟内与第一对象持续存在目标交互行为的第二对象作为识别出的第一对象的关联对象。
此外,本申请实施例提供的方法还需要应用图像算法来判断目标交互行为发起人和目标交互行为接受人分别是对象识别结果中的哪个对象。本申请实施例不对该图像算法进行限定,例如,在一个图像算法中,每个识别对象都有一个矩形位置框,每距离一段时间间隔获取一张监控图像,位于两张监控图像的两个矩形框可能会有并集和交集。当两个矩形框有并集和交集时,计算IoU(Intersection over Union,重叠度)值,IoU记为交集和并集的比值,用于衡量两个矩形框重叠情况。根据IoU的取值,获取两个矩形框重叠情况,IoU比设定阈值大,证明两个矩形框对应的是同一个识别对象。本申请实施例对上述时间间隔、设定阈值与计算IoU的方式均不进行具体限定,时间间隔与设定阈值均可根据实际应用场景进行设定,或者基于经验设置。
本申请实施例不对目标交互行为进行限定。例如,当第一对象是儿童,第二对象是经筛选确定的成人,第一对象的关联对象是该儿童的监护人时,目标交互行为可以是有面部转动动作的语言行为或抚摸、拉扯、拥抱等肢体接触行为。
此外,本申请实施例也不对识别监控图像中的对象的方式进行限定,可基于图像识别算法实现。可选地,被控电梯内的监控图像和/或被控电梯外的监控图像中包括的第一对象通过对象识别模型从监控图像中识别得到,对象识别模型基于标注了对象的训练样本进行训练得到。
本申请实施例不对标注了对象的训练样本进行限定,例如,当第一对象是儿童,第二对象是经筛选确定的成人,第一对象的关联对象是该儿童的监护人时,标注了对象的训练样本可以是标注了对象的摄像设备预先获取的被控电梯内外的监控图像,对象包括儿童与成人。通过采用该标注了对象的训练样本对对象识别模型进行训练,使得对象识别模型的对象识别准确性满足要求,再采用该对象识别模型来识别监控图像中包括的第一对象和第二对象。本申请实施例也不对对象识别模型的类型进行限定,可以是具有对象识别功能的任一神经网络模型。
可选地,对第二对象与第一对象的目标交互行为进行识别,包括:通过交互识别模型对第二对象与第一对象的目标交互行为进行识别,得到目标交互行为的识别结果,交互识别模型基于标注了目标交互行为的样本训练得到。
本申请实施例不对标注了目标交互行为的样本进行限定,例如,当第一对象是儿童,第二对象是经筛选确定的成人,第一对象的关联对象是该儿童的监护人时,标注了目标交互行为的样本可以是标注了目标交互行为、交互行为发起人、交互行为接受人的摄像设备预先获取的被控电梯内的监控图像、被控电梯外的监控图像或视频数据。例如,目标交互行为包括有儿童与成人之间的面部转动动作的语言行为以及抚摸、拉扯、拥抱等肢体接触行为。
在一种可能的实现方式中,以图1所示的电梯控制系统实现该方法为例,可以使用摄像设备获取被控电梯内的监控图像和被控电梯外的监控图像,由摄像设备将监控图像发送给对象识别系统。当对象识别系统识别到被控电梯内的监控图像和/或被控电梯外的监控图像中包括第一对象,对象识别系统在监控图像中确定参考数量个第二对象,第二对象位于第一对象所在位置的参考范围内。之后,对象识别系统对第二对象与第一对象的目标交互行为进行识别,根据目标交互行为的识别结果在参考数量个第二对象中识别出第一对象的关联对象。
在一种可能的实现方式中,对象识别系统可以部署在云端服务器,通过互联网进行连接,获取本地视频图像信息,在云端进行处理。电梯监控平台通过本地代理网络访问对象识别系统。对象识别系统部署在云端的情况适用于本地可以连接互联网的情况,云端部署计算能力强,能够部署计算量大但准确度高的模型。
在一种可能的实现方式中,对象识别系统可以部署在本地服务器、嵌入式设备或移动设备中,可以通过局域网或其他硬件接口进行数据传送,并在本地计算处理。电梯监控平台可以使用本地局域网与对象识别系统连接,这种情况下对电梯监控平台能否连接互联网没有特殊要求,部署在本地的对象识别系统没有网络延迟,具有更好的实时性。
在一种可能的实现方式中,对象识别系统可以部分部署在云端,部分部署在本地,进行混合部署。可选地,可以在本地部署一些算力要求不高,但需要持续运行的服务,在云端部署一些算力要求较高,不需要持续运行的服务。例如可以将需要检测到第一对象后才需要开启的交互识别模型部署在云端,从而获得更好的识别性能。将对实时性要求较高或需要持续运行的对象识别模型部署在本地,加快计算速度并减轻网络传输视频图像数据的负担。通过云端和本地结合,来实现对象识别系统的功能。
步骤202,当对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,获取第一对象以及关联对象的相对位置。
在识别出监控图像中包括第一对象和第一对象的关联对象后,可继续获取监控图像,以实现对第一对象及关联对象的跟踪,以确定二者后续是否发生分开的情况。对此,本申请实施例提供的方法在获取到监控图像后,可获取第一对象及关联对象的相对位置,基于相对位置进行二者是否分开的判断。本申请实施例不对获取第一对象以及关联对象的相对位置的方式进行限定。
可选地,获取第一对象以及关联对象的相对位置,包括:获取对第一对象及关联对象的实时监控图像;在实时监控图像中识别出第一对象及关联对象之后,确定第一对象及关联对象的实时位置,通过实时位置确定第一对象以及关联对象的相对位置。
在一种可能的实现方式中,使用图像跟踪算法获取第一对象以及关联对象的实时位置,图像跟踪算法可以包括光流法、卡尔曼滤波等算法。确定第一对象以及关联对象的实时位置后,便可以确定二者相对参照物的相对位置。
本申请实施例不对第一对象及关联对象的相对位置进行限定,示例性地,当第一对象是儿童,第一对象的关联对象是该儿童的监护人时,以参照物为电梯门为例,第一对象及关联对象的相对位置是儿童及该儿童的监护人相对电梯门的位置。
例如,在图1所示的实施环境中,当对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,可以通过电梯监控平台获取第一对象以及关联对象的相对位置。
步骤203,基于第一对象和关联对象的相对位置,确定第一对象与关联对象的搭乘情况。
基于上述202确定出第一对象和关联对象的相对位置后,可基于二者的相对位置确定二者的搭乘情况。例如,通过儿童及监护人相对电梯门的位置,能够确定儿童及监护人在电梯门的同侧还是不同侧。根据二者在电梯门的同侧来确定搭乘情况是否一致。可选地,基于第一对象和关联对象的相对位置,确定第一对象与关联对象的搭乘情况,包括:如果第一对象和关联对象的相对位置指示第一对象与关联对象均位于被控电梯内或均位于被控电梯外,则第一对象与关联对象的搭乘情况一致;如果第一对象和关联对象的相对位置指示第一对象与关联对象分别位于被控电梯内和被控电梯外,则第一对象与关联对象的搭乘情况不一致。
例如,当第一对象是儿童,第一对象的关联对象是该儿童的监护人,并基于儿童及该儿童的监护人相对电梯门的位置作为儿童及该儿童的监护人的相对位置时,如果儿童和该儿童的监护人的相对位置指示儿童与该儿童的监护人均位于被控电梯内或均位于被控电梯外,则儿童与该儿童的监护人的搭乘情况一致;
如果儿童和该儿童的监护人的相对位置指示儿童与该儿童的监护人分别位于被控电梯内和被控电梯外,则儿童与该儿童的监护人的搭乘情况不一致。
例如,在图1所示的实施环境中,可以通过电梯监控平台基于第一对象和关联对象的位置,确定第一对象与关联对象的搭乘情况。
步骤204,当第一对象与关联对象的搭乘情况不一致,发送电梯控制指令,电梯控制指令用于控制被控电梯打开,直至第一对象与关联对象的搭乘情况一致。
由于第一对象与关联对象的搭乘情况不一致,不满足搭乘条件,则发送电梯控制指令控制被控电梯打开,直至二者搭乘情况一致后,再控制被控电梯正常运行,例如关闭电梯门并运行。例如,当第一对象是儿童,第一对象的关联对象是该儿童的监护人,二者的搭乘情况不一致,儿童单独搭乘电梯容易发生危险,因而控制被控电梯打开,确保二者搭乘情况一致再控制被控电梯运行,进一步确保安全性。
例如,在图1所示的实施环境中,当儿童与该儿童的监护人的搭乘情况不一致,可以通过电梯监控平台向电梯控制平台发送电梯控制指令,电梯控制平台基于该电梯控制指令控制被控电梯打开,直至儿童与该儿童的监护人的搭乘情况一致。
本申请实施例提供的技术方案,在监控图像的对象识别结果指示监控图像中包括第一对象和第一对象的关联对象时,基于第一对象以及关联对象的相对位置确定第一对象与关联对象的搭乘情况,从而通过二者的搭乘情况来控制被控电梯,可以确保第一对象与第一对象的关联对象搭乘情况不一致时,控制被控电梯打开,使被控电梯满足控制需求,提高安全性。
参见图3,本申请实施例提供了一种识别关联对象的方法,当第一对象是儿童,第二对象是经筛选确定的成人,第一对象的关联对象是该儿童的监护人时,识别关联对象的方法如图3所示。
可选地,步骤2011,获取被控电梯内的监控图像和被控电梯外的监控图像。
该步骤2011的实现方式可参见上述步骤201,此处不再赘述。
步骤2012,基于被控电梯内的监控图像和被控电梯外的监控图像识别儿童以及成人。
该步骤202的实现方式可参见上述步骤201,此处不再赘述。
步骤2013,识别位于儿童所在位置的参考范围内的成人。
该步骤2013的实现方式可参见上述步骤201,此处不再赘述。
步骤2014,在参考范围内的成人中识别位于儿童所在位置的参考范围内的成人与该儿童的目标交互行为。
该步骤的实现方式可参见上述步骤201,此处不再赘述。
步骤2015,基于目标交互行为识别该儿童的监护人。
该步骤2015的实现方式可参见上述步骤201,此处不再赘述。
参见图4,本申请实施例提供了一种电梯控制情况示意图,当第一对象是儿童,第二对象是经筛选确定的成人,第一对象的关联对象是该儿童的监护人时,电梯控制情况如图4所示。
如图4左上的附图所示,当儿童与该儿童的监护人均在被控电梯外,则儿童与该儿童的监护人的搭乘情况一致,控制被控电梯正常运行;
如图4右上的附图所示,当儿童与该儿童的监护人均在被控电梯内,则儿童与该儿童的监护人的搭乘情况一致,控制被控电梯正常运行;
如图4左下的附图所示,如果儿童在被控电梯内,该儿童的监护人在被控电梯外,则儿童与该儿童的监护人的搭乘情况不一致,控制被控电梯打开;
如图4右下的附图所示,如果儿童在被控电梯外,该儿童的监护人在被控电梯内,则儿童与该儿童的监护人的搭乘情况不一致,控制被控电梯打开。
参见图5,本申请实施例提供了一种电梯控制装置,该装置包括:
第一获取模块301,用于获取监控图像的对象识别结果,监控图像包括被控电梯内的监控图像以及被控电梯外的监控图像;
第二获取模块302,用于当对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,获取第一对象以及关联对象的相对位置;
确定模块303,用于基于第一对象和关联对象的相对位置,确定第一对象与关联对象的搭乘情况;
控制模块304,用于当第一对象与关联对象的搭乘情况不一致,发送电梯控制指令,电梯控制指令用于控制被控电梯打开,直至第一对象与关联对象的搭乘情况一致。
可选地,对象识别结果指示监控图像中包括第一对象和第一对象的关联对象,第一获取模块301,包括:
获取单元,用于获取被控电梯内的监控图像以及被控电梯外的监控图像;
确定单元,用于当识别到被控电梯内的监控图像和/或被控电梯外的监控图像中包括第一对象,在被控电梯内的监控图像以及被控电梯外的监控图像中确定参考数量个第二对象;
识别单元,用于对第二对象与第一对象的目标交互行为进行识别,根据目标交互行为的识别结果在参考数量个第二对象中识别出第一对象的关联对象。
在一种可能的实现方式中,确定单元,用于在被控电梯内的监控图像以及被控电梯外的监控图像中确定位于第一对象所在位置的参考范围内的第三对象,从第三对象中筛选出参考数量个第三对象作为第二对象。
可选地,识别单元,用于将参考数量个第二对象中,与第一对象的目标交互行为计数达到要求数量的第二对象作为识别出的第一对象的关联对象。
可选地,识别单元,用于将参考数量个第二对象中,在参考时间段内与第一对象持续存在目标交互行为的第二对象作为识别出的第一对象的关联对象。
可选地,被控电梯内的监控图像和/或被控电梯外的监控图像中包括的第一对象通过对象识别模型从监控图像中识别得到,对象识别模型基于标注了对象的训练样本进行训练得到。
可选地,识别单元,用于通过交互识别模型对第二对象与第一对象的目标交互行为进行识别,得到目标交互行为的识别结果,交互识别模型基于标注了目标交互行为的样本训练得到。
可选地,第二获取模块302,用于获取对第一对象及关联对象的实时监控图像;在实时监控图像中识别出第一对象及关联对象之后,确定第一对象及关联对象的实时位置,通过实时位置确定第一对象以及关联对象的相对位置。
可选地,确定模块303,用于如果第一对象和关联对象的相对位置指示第一对象与关联对象均位于被控电梯内或均位于被控电梯外,则第一对象与关联对象的搭乘情况一致;如果第一对象和关联对象的相对位置指示第一对象与关联对象分别位于被控电梯内和被控电梯外,则第一对象与关联对象的搭乘情况不一致。
需要说明的是,上述实施例提供的装置在实现其功能时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的装置与方法实施例属于同一构思,其具体实现过程详见方法实施例,这里不再赘述。
图6是本申请实施例提供的一种计算机设备的结构示意图,该服务器可因配置或性能不同而产生比较大的差异,可以包括一个或多个处理器(Central Processing Units,CPU)401和一个或多个存储器402,其中,该一个或多个存储器402中存储有至少一条计算机程序,该至少一条计算机程序由该一个或多个处理器401加载并执行,以使该服务器实现上述各个方法实施例提供的电梯控制方法。当然,该服务器还可以具有有线或无线网络接口、键盘以及输入输出接口等部件,以便进行输入输出,该服务器还可以包括其他用于实现设备功能的部件,在此不做赘述。
图7是本申请实施例提供的一种计算机设备的结构示意图。该设备可以为终端,例如可以是:智能手机、平板电脑、MP3(Moving Picture Experts Group Audio Layer III,动态影像专家压缩标准音频层面3)播放器、MP4(Moving Picture Experts Group AudioLayer IV,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常,终端包括有:处理器501和存储器502。
处理器501可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器501可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器501也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器501可以集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器501还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器502可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器502还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器502中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器501所执行,以使该终端实现本申请中方法实施例提供的电梯控制方法。
在一些实施例中,终端还可选包括有:外围设备接口503和至少一个外围设备。处理器501、存储器502和外围设备接口503之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口503相连。具体地,外围设备包括:射频电路504、显示屏505、摄像头组件506、音频电路507、定位组件508和电源509中的至少一种。
外围设备接口503可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器501和存储器502。在一些实施例中,处理器501、存储器502和外围设备接口503被集成在同一芯片或电路板上;在一些其他实施例中,处理器501、存储器502和外围设备接口503中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路504用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路504通过电磁信号与通信网络以及其他通信设备进行通信。射频电路504将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路504包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路504可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:城域网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路504还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏505用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏505是触摸显示屏时,显示屏505还具有采集在显示屏505的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器501进行处理。此时,显示屏505还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏505可以为一个,设置在终端的前面板;在另一些实施例中,显示屏505可以为至少两个,分别设置在终端的不同表面或呈折叠设计;在另一些实施例中,显示屏505可以是柔性显示屏,设置在终端的弯曲表面上或折叠面上。甚至,显示屏505还可以设置成非矩形的不规则图形,也即异形屏。显示屏505可以采用LCD(LiquidCrystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。
摄像头组件506用于采集图像或视频。可选地,摄像头组件506包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件506还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路507可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器501进行处理,或者输入至射频电路504以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器501或射频电路504的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路507还可以包括耳机插孔。
定位组件508用于定位终端的当前地理位置,以实现导航或LBS(Location BasedService,基于位置的服务)。定位组件508可以是基于美国的GPS(Global PositioningSystem,全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。
电源509用于为终端中的各个组件进行供电。电源509可以是交流电、直流电、一次性电池或可充电电池。当电源509包括可充电电池时,该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。
在一些实施例中,终端还包括有一个或多个传感器510。该一个或多个传感器510包括但不限于:加速度传感器511、陀螺仪传感器512、压力传感器513、指纹传感器514、光学传感器515以及接近传感器516。
加速度传感器511可以检测以终端建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器511可以用于检测重力加速度在三个坐标轴上的分量。处理器501可以根据加速度传感器511采集的重力加速度信号,控制显示屏505以横向视图或纵向视图进行用户界面的显示。加速度传感器511还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器512可以检测终端的机体方向及转动角度,陀螺仪传感器512可以与加速度传感器511协同采集用户对终端的3D动作。处理器501根据陀螺仪传感器512采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器513可以设置在终端的侧边框和/或显示屏505的下层。当压力传感器513设置在终端的侧边框时,可以检测用户对终端的握持信号,由处理器501根据压力传感器513采集的握持信号进行左右手识别或快捷操作。当压力传感器513设置在显示屏505的下层时,由处理器501根据用户对显示屏505的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器514用于采集用户的指纹,由处理器501根据指纹传感器514采集到的指纹识别用户的身份,或者,由指纹传感器514根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器501授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器514可以被设置在终端的正面、背面或侧面。当终端上设置有物理按键或厂商Logo(商标)时,指纹传感器514可以与物理按键或厂商Logo集成在一起。
光学传感器515用于采集环境光强度。在一个实施例中,处理器501可以根据光学传感器515采集的环境光强度,控制显示屏505的显示亮度。具体地,当环境光强度较高时,调高显示屏505的显示亮度;当环境光强度较低时,调低显示屏505的显示亮度。在另一个实施例中,处理器501还可以根据光学传感器515采集的环境光强度,动态调整摄像头组件506的拍摄参数。
接近传感器516,也称距离传感器,通常设置在终端的前面板。接近传感器516用于采集用户与终端的正面之间的距离。在一个实施例中,当接近传感器516检测到用户与终端的正面之间的距离逐渐变小时,由处理器501控制显示屏505从亮屏状态切换为息屏状态;当接近传感器516检测到用户与终端的正面之间的距离逐渐变大时,由处理器501控制显示屏505从息屏状态切换为亮屏状态。
本领域技术人员可以理解,图7中示出的结构并不构成对终端的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
在示例性实施例中,还提供了一种计算机设备,该计算机设备包括处理器和存储器,该存储器中存储有至少一条计算机程序。该至少一条计算机程序由一个或者一个以上处理器加载并执行,以使该计算机设备实现上述任一种电梯控制方法。
在示例性实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有至少一条计算机程序,该至少一条计算机程序由计算机设备的处理器加载并执行,以使计算机实现上述任一种电梯控制方法。
在一种可能实现方式中,上述计算机可读存储介质可以是只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、只读光盘(Compact DiscRead-Only Memory,CD-ROM)、磁带、软盘和光数据存储设备等。
在示例性实施例中,还提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述任一种电梯控制方法。
应当理解的是,在本文中提及的“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。以上所述仅为本申请的示例性实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (7)
1.一种电梯控制方法,其特征在于,所述方法包括:
获取被控电梯内的监控图像以及所述被控电梯外的监控图像;
当识别到所述被控电梯内的监控图像和/或所述被控电梯外的监控图像中包括第一对象,在所述被控电梯内的监控图像以及所述被控电梯外的监控图像中确定参考数量个第二对象;
通过交互识别模型对所述第二对象与所述第一对象的目标交互行为进行识别,将所述参考数量个第二对象中,与所述第一对象的目标交互行为计数达到要求数量的第二对象作为识别出的所述第一对象的关联对象,或者,将所述参考数量个第二对象中,在参考时间段内与所述第一对象持续存在目标交互行为的第二对象作为识别出的所述第一对象的关联对象,所述交互识别模型基于标注了所述目标交互行为的样本训练得到;
获取所述第一对象以及所述关联对象的相对位置;
基于所述第一对象和所述关联对象的相对位置,确定所述第一对象与所述关联对象的搭乘情况;
当所述第一对象与所述关联对象的搭乘情况不一致,发送电梯控制指令,所述电梯控制指令用于控制所述被控电梯打开,直至所述第一对象与所述关联对象的搭乘情况一致。
2.根据权利要求1所述的方法,其特征在于,所述在所述被控电梯内的监控图像以及所述被控电梯外的监控图像中确定参考数量个第二对象,包括:
在所述被控电梯内的监控图像以及所述被控电梯外的监控图像中确定位于所述第一对象所在位置的参考范围内的第三对象,从所述第三对象中筛选出所述参考数量个第三对象作为第二对象。
3.根据权利要求1或2所述的方法,其特征在于,所述获取所述第一对象以及所述关联对象的相对位置,包括:
获取对所述第一对象及所述关联对象的实时监控图像;
在所述实时监控图像中识别出所述第一对象及所述关联对象之后,确定所述第一对象及所述关联对象的实时位置,通过所述实时位置确定所述第一对象以及所述关联对象的相对位置。
4.根据权利要求1或2所述的方法,其特征在于,所述基于所述第一对象和所述关联对象的相对位置,确定所述第一对象与所述关联对象的搭乘情况,包括:
如果所述第一对象和所述关联对象的相对位置指示所述第一对象与所述关联对象均位于所述被控电梯内或均位于所述被控电梯外,则所述第一对象与所述关联对象的搭乘情况一致;
如果所述第一对象和所述关联对象的相对位置指示所述第一对象与所述关联对象分别位于所述被控电梯内和所述被控电梯外,则所述第一对象与所述关联对象的搭乘情况不一致。
5.一种电梯控制装置,其特征在于,所述装置包括:
第一获取模块包括获取单元、确定单元、识别单元,
所述获取单元,用于获取被控电梯内的监控图像以及所述被控电梯外的监控图像;
所述确定单元,用于当识别到所述被控电梯内的监控图像和/或所述被控电梯外的监控图像中包括第一对象,在所述被控电梯内的监控图像以及所述被控电梯外的监控图像中确定参考数量个第二对象;
所述识别单元,用于通过交互识别模型对所述第二对象与所述第一对象的目标交互行为进行识别,将所述参考数量个第二对象中,与所述第一对象的目标交互行为计数达到要求数量的第二对象作为识别出的所述第一对象的关联对象,或者,将所述参考数量个第二对象中,在参考时间段内与所述第一对象持续存在目标交互行为的第二对象作为识别出的所述第一对象的关联对象,所述交互识别模型基于标注了所述目标交互行为的样本训练得到;
第二获取模块,用于获取所述第一对象以及所述关联对象的相对位置;
确定模块,用于基于所述第一对象和所述关联对象的相对位置,确定所述第一对象与所述关联对象的搭乘情况;
控制模块,用于当所述第一对象与所述关联对象的搭乘情况不一致,发送电梯控制指令,所述电梯控制指令用于控制所述被控电梯打开,直至所述第一对象与所述关联对象的搭乘情况一致。
6.一种计算机设备,其特征在于,所述计算机设备包括处理器和存储器,所述存储器中存储有至少一条计算机程序,所述至少一条计算机程序由所述处理器加载并执行,以使所述计算机设备实现如权利要求1至4任一所述的电梯控制方法。
7.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有至少一条计算机程序,所述至少一条计算机程序由处理器加载并执行,以使计算机实现如权利要求1至4任一所述的电梯控制方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111063161.1A CN113879925B (zh) | 2021-09-10 | 2021-09-10 | 电梯控制方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111063161.1A CN113879925B (zh) | 2021-09-10 | 2021-09-10 | 电梯控制方法、装置、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113879925A CN113879925A (zh) | 2022-01-04 |
CN113879925B true CN113879925B (zh) | 2023-05-23 |
Family
ID=79008879
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111063161.1A Active CN113879925B (zh) | 2021-09-10 | 2021-09-10 | 电梯控制方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113879925B (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05278977A (ja) * | 1992-04-01 | 1993-10-26 | Mitsubishi Electric Corp | エレベータ制御装置 |
CN109319618A (zh) * | 2018-07-18 | 2019-02-12 | 揭阳市聆讯软件有限公司 | 用户出入电梯的监控方法、装置、智能设备及存储介质 |
CN109987468A (zh) * | 2017-12-29 | 2019-07-09 | 郑州灵珑信息科技有限公司 | 基于图像识别的小区电梯轿厢儿童识别控制系统 |
CN110713101A (zh) * | 2018-07-11 | 2020-01-21 | 株式会社日立制作所 | 乘客传送设备及乘客传送设备的控制方法 |
CN111429905A (zh) * | 2020-03-23 | 2020-07-17 | 北京声智科技有限公司 | 语音信号处理方法、装置、语音智能电梯、介质和设备 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009190847A (ja) * | 2008-02-15 | 2009-08-27 | Mitsubishi Electric Building Techno Service Co Ltd | エレベータかご室内確認装置 |
CN106315324B (zh) * | 2015-06-16 | 2020-04-14 | 奥的斯电梯公司 | 一种能够监测儿童使用的电梯系统及其控制方法 |
CN106315316A (zh) * | 2015-06-16 | 2017-01-11 | 奥的斯电梯公司 | 一种电梯系统及其控制方法 |
CN107473030A (zh) * | 2017-10-16 | 2017-12-15 | 济南浪潮高新科技投资发展有限公司 | 一种基于机器学习的电梯内儿童识别方法 |
CN112119029B (zh) * | 2018-05-25 | 2022-07-12 | 三菱电机株式会社 | 电梯控制装置 |
CN109110590A (zh) * | 2018-08-21 | 2019-01-01 | 深圳市赛亿科技开发有限公司 | 电梯使用控制方法及装置、电子设备、存储介质 |
CN109516334B (zh) * | 2018-11-21 | 2021-02-02 | 日立楼宇技术(广州)有限公司 | 一种乘梯保护方法、装置、系统、设备和存储介质 |
-
2021
- 2021-09-10 CN CN202111063161.1A patent/CN113879925B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05278977A (ja) * | 1992-04-01 | 1993-10-26 | Mitsubishi Electric Corp | エレベータ制御装置 |
CN109987468A (zh) * | 2017-12-29 | 2019-07-09 | 郑州灵珑信息科技有限公司 | 基于图像识别的小区电梯轿厢儿童识别控制系统 |
CN110713101A (zh) * | 2018-07-11 | 2020-01-21 | 株式会社日立制作所 | 乘客传送设备及乘客传送设备的控制方法 |
CN109319618A (zh) * | 2018-07-18 | 2019-02-12 | 揭阳市聆讯软件有限公司 | 用户出入电梯的监控方法、装置、智能设备及存储介质 |
CN111429905A (zh) * | 2020-03-23 | 2020-07-17 | 北京声智科技有限公司 | 语音信号处理方法、装置、语音智能电梯、介质和设备 |
Also Published As
Publication number | Publication date |
---|---|
CN113879925A (zh) | 2022-01-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108363982B (zh) | 确定对象数量的方法及装置 | |
CN111127509B (zh) | 目标跟踪方法、装置和计算机可读存储介质 | |
CN111477225B (zh) | 语音控制方法、装置、电子设备及存储介质 | |
CN111027490B (zh) | 人脸属性识别方法及装置、存储介质 | |
CN109241832B (zh) | 一种人脸活体检测的方法及终端设备 | |
CN110956580B (zh) | 图像换脸的方法、装置、计算机设备以及存储介质 | |
CN111613213B (zh) | 音频分类的方法、装置、设备以及存储介质 | |
CN111931712B (zh) | 人脸识别方法、装置、抓拍机及系统 | |
CN112990038A (zh) | 扶梯安全提醒方法、装置及计算机存储介质 | |
CN110152309B (zh) | 语音通信方法、装置、电子设备及存储介质 | |
CN113879923B (zh) | 电梯控制方法、系统、装置、电子设备和存储介质 | |
CN111158575A (zh) | 终端执行处理的方法、装置、设备以及存储介质 | |
CN113879925B (zh) | 电梯控制方法、装置、设备及存储介质 | |
CN112214115B (zh) | 输入方式的识别方法、装置、电子设备及存储介质 | |
CN114594885A (zh) | 应用图标的管理方法、装置、设备及计算机可读存储介质 | |
CN111325083B (zh) | 记录考勤信息的方法和装置 | |
CN114595019A (zh) | 应用程序的主题设置方法、装置、设备及存储介质 | |
CN115035187A (zh) | 声源方向确定方法、装置、终端、存储介质及产品 | |
CN111179628B (zh) | 自动驾驶车辆的定位方法、装置、电子设备及存储介质 | |
CN111723615B (zh) | 对检测物图像进行检测物匹配判定的方法和装置 | |
CN112132472A (zh) | 资源管理方法、装置、电子设备及计算机可读存储介质 | |
CN112395921A (zh) | 异常行为检测方法、装置及系统 | |
CN112990424B (zh) | 神经网络模型训练的方法和装置 | |
CN111135571B (zh) | 游戏识别方法、装置、终端、服务器及可读存储介质 | |
CN113205069B (zh) | 虚假车牌检测方法、装置及计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |