CN115611126A - 一种扶梯乘客行为引导的方法、装置、设备及存储介质 - Google Patents
一种扶梯乘客行为引导的方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN115611126A CN115611126A CN202211254730.5A CN202211254730A CN115611126A CN 115611126 A CN115611126 A CN 115611126A CN 202211254730 A CN202211254730 A CN 202211254730A CN 115611126 A CN115611126 A CN 115611126A
- Authority
- CN
- China
- Prior art keywords
- passenger
- escalator
- behavior
- image information
- passengers
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B29/00—Safety devices of escalators or moving walkways
- B66B29/005—Applications of security monitors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Escalators And Moving Walkways (AREA)
Abstract
本发明公开一种扶梯乘客行为引导的方法、装置、设备及存储介质,该方法包括:实时获取扶梯的图像信息,基于图像信息,判断扶梯上是否存在行为异常乘客,若存在行为异常乘客,则获取行为异常乘客的乘客特征;基于乘客特征确定行为异常乘客所在的梯级,作为目标梯级,其中,扶梯的各梯级配置告警设备,向目标梯级配置的告警设备发送控制指令,以使告警设备向行为异常乘客发出行为引导提示,可以直观、直接、有针对性地对行为异常乘客进行提醒,实现有效的行为引导。
Description
技术领域
本发明属于扶梯安全警示的技术领域,尤其涉及一种扶梯乘客行为引导的方法、装置、设备及存储介质。
背景技术
随着时代的发展,现在自动扶梯大量应用于商场、机场、地铁站等众多场所,同时,随着视频识别技术的发展,也越来越多视频识别应用在扶梯,以进行扶梯乘客行为识别,在识别出扶梯上存在行为异常的乘客时,即使做出提醒,防止安全事故的发生。但目前的扶梯乘客行为引导方式,仅通过扶梯上部或下部的固定语音装置或声光装置进行提醒,这样的行为引导方式容易被扶梯乘客忽视,行为引导效果差。
发明内容
本发明提供了一种扶梯乘客行为引导的方法、装置、设备及存储介质,以解决当前对扶梯乘客的行为引导效果不佳的问题。
根据本发明的一方面,提供了一种扶梯乘客行为引导的方法,所述方法包括:
实时获取扶梯的图像信息;
基于所述图像信息,判断所述扶梯上是否存在行为异常乘客;
若存在所述行为异常乘客,则获取所述行为异常乘客的乘客特征;
基于所述乘客特征确定所述行为异常乘客所在的梯级,作为目标梯级,其中,所述扶梯的各梯级配置告警设备;
向所述目标梯级配置的告警设备发送控制指令,以使所述告警设备向所述行为异常乘客发出行为引导提示。
根据本发明的一方面,提供了一种扶梯乘客行为引导的装置,所述装置包括:
图像信息获取模块,用于实时获取扶梯的图像信息;
判断模块,用于基于所述图像信息,判断所述扶梯上是否存在行为异常乘客;
乘客特征获取模块,用于当存在所述行为异常乘客,则获取所述行为异常乘客的乘客特征;
目标梯级确定模块,用于基于所述乘客特征确定所述行为异常乘客所在的梯级,作为目标梯级,其中,所述扶梯的各梯级配置告警设备;
控制指令发送模块,用于向所述目标梯级配置的告警设备发送控制指令,以使所述告警设备向所述行为异常乘客发出行为引导提示。
根据本发明的另一方面,提供了一种电子设备,所述电子设备包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的一种扶梯乘客行为引导的方法。
根据本发明的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明任一实施例所述的一种扶梯乘客行为引导的方法。
本发明实施例的技术方案提供了一种扶梯乘客行为引导的方法,该方法包括:实时获取扶梯的图像信息,基于图像信息,判断扶梯上是否存在行为异常乘客,若存在行为异常乘客,则获取行为异常乘客的乘客特征,基于乘客特征确定行为异常乘客所在的梯级,作为目标梯级,其中,扶梯的各梯级配置告警设备,向目标梯级配置的告警设备发送控制指令,以使告警设备向行为异常乘客发出行为引导提示,可以直观、直接、有针对性地对行为异常乘客进行提醒,实现更有效的行为引导。
应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明实施例一提供的一种扶梯乘客行为引导的方法流程图;
图2是根据本发明实施例一提供的一种扶梯配置装置的示意图;
图3是根据本发明实施例一提供的一种梯级告警设备示意图;
图4是根据本发明实施例二提供的一种扶梯乘客行为引导的装置的结构示意图;
图5是实现本发明实施例的一种扶梯乘客行为引导的方法的电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例一
图1为本发明实施例一提供的一种扶梯乘客行为引导的方法流程图。
为了可以更有效地提醒异常行为的乘客,可以通过对乘客所在的梯级上的告警设备针对性发出告警,提醒乘客调整站位位置,即在识别出行为异常的扶梯乘客的同时,可以确定行为异常乘客所在的梯级,直接在行为异常乘客所在的梯级上进行行为引导的提示,可以最大程度地对扶梯乘客进行行为引导,避免了只在固定的位置发出提示,容易被行为异常乘客护栏,达不到行为引导的效果。
该方法可以由一种扶梯乘客行为引导的装置来执行,该用于扶梯乘客行为引导的装置可以采用硬件和/或软件的形式实现。
如图1所示,该方法包括如下步骤:
S110,实时获取扶梯的图像信息。
在实现扶梯乘客行为引导时,除了现有技术中常用的红外传感器、称重传感器、声波传感器等分析是否存在扶梯乘客以及获取扶梯乘客的相关信息以外,还可以通过配置图像采集装置来采集图像信息,例如配置摄像头。
参考图2的一种扶梯配置装置的示意图,由于扶梯的结构特性,可以在扶梯的顶部以及底部分别配置摄像头,如图2中的A以及B,摄像头A以及摄像头B可以共同把整个扶梯范围拍摄在内,还可以很好地避免了部分位置会被遮挡等情况。
在具体实现中,在获取扶梯的图像信息时,可以在所有摄像头采集的图像信息中仅选择图像中存在扶梯乘客的图像信息进行后续分析,还可以为了防止图像变形,扶梯的某些部分对应的图像信息取自特定的摄像头,例如扶梯下半部分图像采用摄像头A采集到的,扶梯的上半部分图像采用摄像头B采集到的。
在一种实施例中,在S110之后,还包括如下步骤:
根据图像信息确定是否存在进入扶梯的新乘客;
若存在新乘客,则基于图像信息获取新乘客的乘客特征,以及,将当前图像信息的获取时间作为新乘客的上梯时间;
获取各梯级到达乘客上梯端的到达时间,其中,各梯级具有梯级标识;
将到达时间为上梯时间的梯级,确定为新乘客所在的梯级,并将乘客特征与新乘客所在梯级的梯级标识进行绑定。
可以根据每一帧的图像信息,对扶梯上的扶梯乘客进行人体识别,实时确定出当前对应的扶梯乘客人数以及各人体在扶梯上的位置。可以根据人数的变化、各人体在扶梯上的位置情况等确定出是否存在进入扶梯的新乘客。示例性的,如果人体的人数增加,则明显地,存在新乘客,又或者即使人数不变或者人数减少,但是上一帧图像信息中部分人体的所在位置是靠近出梯端,而当前帧识别出了靠近上梯端的人体而原来的靠近出梯端的人体已经不存在,则可以确定为存在新乘客。
当检测出扶梯存在新乘客后,可以通过图像信息,提取出新乘客的乘客特征,乘客特征可以是乘客的头肩宽度比、头部投影形状、头发颜色、衣服颜色、身高等众多信息中的一个或多个的组合。
各梯级到达乘客上梯端的到达时间,可以通过在各梯级以及扶梯出入口的裙板处安装感应器。示例性的,感应器可以是NFC感应标签。参考图2,扶梯的裙板上可以安装NFC感应标签C以及NFC感应标签D,可以根据具体的扶梯运行方向确定进行工作的感应标签,也可以利用扶梯两端的感应标签,确定各扶梯沿运动方向开始进入扶梯表面的到达时间,以及结束在扶梯表面运动的结束时间。
各梯级具有梯级标识,可以是安装在各梯级上,与NFC感应标签实现通信的通信装置的编码,例如,可以对梯级上的通信装置进行编码为S1、S2、S3…Sn,当梯级运动至上下端的NFC感应标签时,通信装置可以感应NFC感应标签并确定感应时间,将感应时间和通信装置的编码进行对应的记录。其中,通信装置的通信方式可以是采用WIFI、蓝牙、UWB信号(Ultra Wideband,一种无载波通信技术)等,具备双向收发数据功能,通过通信装置采集相应的数据信息。
可以将到达时间为上梯时间的梯级,确定为新乘客所在的梯级,即在检测到存在新乘客的瞬间,经过乘客上梯端的NFC感应标签的梯级即可认为是新乘客所在的梯级。可以将新乘客的乘客特征与新乘客所在梯级的梯级标识进行绑定,以便后续若检测出该乘客行为异常时,可以直接针对该梯级进行告警,对该乘客进行更有效的行为引导。
在一种实施例中,根据图像信息确定是否存在进入扶梯的新乘客,包括如下步骤:
从图像信息中识别出预先设定的起始线;
判断指定方向上是否存在距离起始线在阈值范围内的扶梯乘客;
若存在,则判定为存在进入扶梯的新乘客;
否则,判定为不存在进入扶梯的新乘客。
预先设定的起始线可以是乘客上梯端的楼层板与梯级的交界处,指定方向则可以是扶梯的运动方向。对于乘客上梯端的楼层板与梯级的交界处,在扶梯的运动方向上,存在距离起始线距离在阈值范围内的扶梯乘客,则可以认为是有人体越过了起始线,成为新乘客。
S120,基于图像信息,判断扶梯上是否存在行为异常乘客。
可以通过图像识别算法对图像信息进行处理,具体的,图像识别算法可以是帧间差分法、边缘提取法等,可以通过确定各乘客的人体轮廓的移动情况、所占空间大小的变化情况等来判断是否勋在行为异常乘客。示例性的,某个扶梯乘客一开始获取的乘客特征中表明身高为170厘米,在某帧图像信息中,获取到其实时身高为120厘米,即实时身高比乘客特征的身高要少并且超出一定的范围,可以判定此时该扶梯乘客是在弯腰或者蹲下,则可以判定其为行为异常乘客。
在一种实施例中,S120包括如下步骤:
S120-1,基于图像信息,检测是否存在扶梯乘客;
S120-2,若存在扶梯乘客,则将图像信息输入至预先设定的行为匹配模型中;
S120-3,接收行为匹配模型输出的行为结果,并基于行为结果判断是否存在行为异常乘客。
基于图像信息经常是否存在人体是目前较为成熟的技术,可以是通过提取人体轮廓确定,也可以是通过预先设定的模型进行图像匹配从而确定是否存在人体,本实施例对检测是否存在扶梯乘客的具体方式不进行限制。
在确定存在扶梯乘客后,可以将存在扶梯乘客的图像信息通过深度学习的方式进行行为的确定。例如,将图像信息输入至行为匹配模型中,如Cascade CNN、Faceness-Net、MTCNN多任务级联卷积神经网络等。可以提前在对行为匹配模型进行训练,预先确定在扶梯中乘客可以出现的各种姿态、行为,然后通过与图像信息中的人体姿态进行匹配,输出行为结果。
行为结果可以是直接输出正常乘客或异常乘客的结论,也可以是输出对当前扶梯乘客的动作描述,然后基于动作描述确定是合格的行为还是异常的行为。例如,接收到的行为结果为手或头部伸出扶梯外,则可以判定该扶梯乘客为行为异常乘客。
当同一个图像信息里面存在多个扶梯乘客时,行为匹配模型可以输出多个行为结果,并且可以将行为结果与乘客特征、梯级标识一同进行绑定,以确定某个行为结果是归属的扶梯乘客。
S130,若存在行为异常乘客,则获取行为异常乘客的乘客特征。
当确定了存在行为异常乘客后,则可以在图像信息中针对行为异常乘客,获取其乘客特征,具体的获取乘客特征方式可以采用前述的方式,提取出行为异常乘客的乘客特征,异常乘客的乘客特征可以是根据新乘客的乘客特征的具体信息来确定。
S140,基于乘客特征确定行为异常乘客所在的梯级,作为目标梯级,其中,扶梯的各梯级配置告警设备。
在获取了行为异常乘客的乘客特征后,可以根据行为异常乘客的乘客特征对行为异常乘客在图像信息中的位置进行确定,在一种实现中,可以在处理图像信息时,对扶梯各部分位置设置基准线,通过行为异常乘客的位置与基准线之间的位置关系,从而确定行为异常乘客所在的梯级,即目标梯级。
在一种实施例中,S140包括如下步骤:
S140-1,确定与行为异常乘客的乘客特征绑定的梯级标识;
S140-2,将梯级标识对应的梯级确定为目标梯级。
可以在获取行为异常乘客的乘客特征后,与在检测到新乘客时获取的乘客特征进行匹配,可以将与匹配成功的新乘客是获取的乘客特征绑定的梯级标识,认为是与行为异常乘客的乘客特征绑定的梯级标识,即确定该行为异常乘客在作为新乘客时所在的梯级,作为目标梯级。
S150,向目标梯级配置的告警设备发送控制指令,以使告警设备向行为异常乘客发出行为引导提示。
告警设备可以是能发出声音提示、灯光提示等用于对扶梯乘客进行行为引导的设备。参考图3的一种梯级告警设备示意图,图中的E可以是LED模组,用于发出灯光提示,图中的F可以是梯级,也就是各梯级上均配置LED模组。示例性的,扶梯乘客在梯级上无异常行为时,梯级的LED模组可以显示为白色,当出现行为异常乘客时,可以通过向LED模组发送控制指令,使得梯级LED模组显示为红色,以提醒行为异常乘客纠正自身的当前行为。在另一种实现中,告警设备可以是声音播放器,可以发送控制指令以使声音播放器发出语音提示,其中,还可以结合扶梯乘客的乘客特征进行语音内容的组合,例如行为异常乘客穿着红色短袖衣服,为了可以更有效、更有针对性地达到行为引导的目的,语音内容可以是:穿着红色短袖衣服的乘客请注意乘梯安全。
另外,告警可以在梯级进入或离开时显示相关的提示信息,如扶梯进入部分多个梯级为绿色向白色渐变提醒,如离开部分为多个梯级白色向绿色渐色提醒。具体的,在乘客未出现异常行为前,扶梯入口段梯级左右两侧LDE屏幕由入口向中部显示渐变引导信息,如颜色由绿色向白色渐变,并在梯级中部LED屏幕显示动态箭头;在扶梯出口段梯级左右两侧LED屏幕由中部向出口显示渐变引导信息,如颜色由白色向绿色渐变,并在梯级中部LED屏幕显示动态箭头。
可以实现多梯级联动显示,动态引导扶梯乘客乘坐扶梯,在不同位置显示不同引导信息。
在一种实施例中,行为结果包括多种不同类型的异常行为,告警设备包括视觉设备以及听觉设备;在S150之前还包括如下步骤:
根据接收到的异常行为的类型,确定视觉设备的展示内容以及听觉设备的播放内容;
基于展示内容以及播放内容生成控制指令。
异常行为的类型可以是用户手未握紧扶手带、手或头部伸出扶梯外、用户跌倒、大件行李滞留、用户反向进入扶梯等异常行为。可以预先根据不同的异常行为类型设定好视觉设备的展示内容以及听觉设备的播放内容。在确定了异常行为的类型后,可以从预先设定好的内容匹配出与异常行为的类型对应的展示内容以及播放内容,使得目标梯级的告警设备进行告警,完成对乘客的行为引导。
另外,除了可以仅针对目标梯级进行行为引导,还可以使得扶梯的所有梯级进行联动,以使所有梯级的告警设备共同完成行为引导。即可以分别确定各梯级的告警设备的展示内容,向不同梯级的告警设备发送不同的控制指令,使得扶梯的所有告警设备共同完成行为引导。
示例性的,异常行为的类型为未握紧扶手,则控制指令可以确定视觉设备的展示内容以及听觉设备的播放内容分别为:扶梯梯级的四周LED屏幕显示浅黄色,中部LED模组显示握紧扶手带动态图案,并播放内容为“请握紧扶手带”;
异常行为的类型为乘客手或头部伸出扶梯外,则控制指令可以确定视觉设备的展示内容以及听觉设备的播放内容分别为:扶梯梯级的四周LED屏幕显示橙色,中部LED屏幕显示手或头伸出扶梯动态图案,并播放内容为“请不要将身体伸出扶梯”;
异常行为的类型为用户跌倒、大件行李滞留等,则控制指令可以确定视觉设备的展示内容以及听觉设备的播放内容分别为:扶梯梯级的四周LED屏幕显示红色并播放内容为“请注意人员跌倒”或“请注意行李滞留”,与目标梯级的相邻梯级四周LED屏幕改变为由红色向橙色的渐变色,中部LED屏幕显示为用户跌倒、大件行李滞留动态图案;
异常行为的类型为乘客反向进入,则控制指令可以确定视觉设备的展示内容以及听觉设备的播放内容分别为:梯级四周LED屏幕改变为红色,本梯级中部LED屏幕显示红色动态箭头图案,并改变后续梯级四周LED屏幕为红色向橙色渐变,播放内容为“请不要逆行”。
在一种实施例中,还包括如下步骤:
获取扶梯的运行速度以及梯级的宽度;
根据连续多帧的图像信息确定各扶梯乘客实时的移动速度;
将运行速度与各移动速度进行比较;
当运行速度与移动速度不一致,则获取移动速度与运行速度不一致的扶梯乘客的乘客特征;
基于运行速度、移动速度以及宽度,实时更新与乘客特征绑定的梯级标识。
乘客在乘坐扶梯时,会出现在扶梯上行走的情况,可以根据图像信息确定出乘客的运动情况,实时改变乘客当前所在的梯级,即实时改变乘客特征绑定的梯级标识。
在具体实现时,在确定扶梯乘客是否有出现行走的情况,可以通过确定乘客的移动速度,然后将移动速度与扶梯的运行速度进行比较,若扶梯乘客没有出现行走的情况,扶梯乘客会与梯级保持相对静止,也就是运行速度与移动速度相同。
可以获取连续多帧图像信息,对于t1和t2两个时间点,可以通过图像信息确定出乘客分别位于的位置PLt1和PLt2,可以根据Vp1=(PLt2-PLt1)/(t2-t1)的运动学公式,确定出乘客的移动速度Vp1。
梯级的宽度Ss以及扶梯的运行速度Vs可以预先获取得到。另外,在一种具体实现中,扶梯的运行速度还可以通过NFC感应相邻梯级之间的时间TNFCS1、TNFCS2,可以根据运动学公式Vs=Ss/(TNFCS2-TNFCS1)计算出扶梯的运行速度Vs。
当乘客的移动速度与梯级的运行速度一致时,乘客与梯级的绑定关系无变动。当乘客的移动速度比梯级的运行速度快时,可以根据运动学公式PScount=(Vp1-Vs)*(t2-t1)/Ss,根据PScount将乘客与梯级的位置向前变动PScount个梯级。同理,当人员速度比梯级速度慢时,根据同样的计算方法,将人员与梯级的位置向后变动,完成乘客特征与梯级标识的实时绑定。
本发明实施例提出一种扶梯乘客行为引导的方法,该方法包括:实时获取扶梯的图像信息,基于图像信息,判断扶梯上是否存在行为异常乘客,若存在行为异常乘客,则获取行为异常乘客的乘客特征,基于乘客特征确定行为异常乘客所在的梯级,作为目标梯级,其中,扶梯的各梯级配置告警设备,向目标梯级配置的告警设备发送控制指令,以使告警设备向行为异常乘客发出行为引导提示,可以直观、直接、有针对性地对行为异常乘客进行提醒,实现更有效的行为引导。
实施例二
图4为本发明实施例二提供的一种扶梯乘客行为引导的装置结构示意图,所述装置包括:
图像信息获取模块410,用于实时获取扶梯的图像信息;
判断模块420,用于基于所述图像信息,判断所述扶梯上是否存在行为异常乘客;
乘客特征获取模块430,用于当存在所述行为异常乘客,则获取所述行为异常乘客的乘客特征;
目标梯级确定模块440,用于基于所述乘客特征确定所述行为异常乘客所在的梯级,作为目标梯级,其中,所述扶梯的各梯级配置告警设备;
控制指令发送模块450,用于向所述目标梯级配置的告警设备发送控制指令,以使所述告警设备向所述行为异常乘客发出行为引导提示。
在一种实施例中,所述装置还包括如下模块:
新乘客确定模块,用于根据所述图像信息确定是否存在进入所述扶梯的新乘客;
执行模块,用于当存在所述新乘客,则基于所述图像信息获取所述新乘客的乘客特征,以及,将当前所述图像信息的获取时间作为所述新乘客的上梯时间;
到达时间获取模块,用于获取各梯级到达乘客上梯端的到达时间,其中,各所述梯级具有梯级标识;
绑定模块,用于将所述到达时间为所述上梯时间的梯级,确定为所述新乘客所在的梯级,并将所述乘客特征与所述新乘客所在梯级的梯级标识进行绑定。
在一种实施例中,所述新乘客确定模块,包括如下子模块:
识别子模块,用于从所述图像信息中识别出预先设定的起始线;
判断子模块,用于判断指定方向上是否存在距离所述起始线在阈值范围内的扶梯乘客;
执行子模块,用于当指定方向上存在距离起始线在阈值范围内的扶梯乘客,则判定为存在进入所述扶梯的新乘客,否则,判定为不存在进入扶梯的新乘客。
在一种实施例中,目标梯级确定模块440,包括如下子模块:
梯级标识确定子模块,用于确定与所述行为异常乘客的所述乘客特征绑定的梯级标识;
目标梯级确定子模块,用于将所述梯级标识对应的梯级确定为目标梯级。
在一种实施例中,判断模块420,包括如下子模块:
检测子模块,用于基于所述图像信息,检测是否存在扶梯乘客;
输入子模块,用于当存在所述扶梯乘客,则将所述图像信息输入至预先设定的行为匹配模型中;
接收子模块,用于接收所述行为匹配模型输出的行为结果,并基于所述行为结果判断是否存在行为异常乘客。
在一种实施例中,所述行为结果包括多种不同类型的异常行为,所述告警设备包括视觉设备以及听觉设备,所述装置还包括如下模块:
内容确定模块,用于根据接收到的所述异常行为的类型,确定所述视觉设备的展示内容以及所述听觉设备的播放内容;
控制指令生成模块,用于基于所述展示内容以及所述播放内容生成控制指令。
在一种实施例中,所述装置还包括如下模块:
第一获取模块,用于获取所述扶梯的运行速度以及所述梯级的宽度;
移动速度确定模块,用于根据连续多帧的所述图像信息确定各所述扶梯乘客实时的移动速度;
比较模块,用于将所述运行速度与各所述移动速度进行比较;
第二获取模块,用于当所述运行速度与所述移动速度不一致,则获取所述移动速度与所述运行速度不一致的扶梯乘客的乘客特征;
更新模块,用于基于所述运行速度、所述移动速度以及所述宽度,实时更新与所述乘客特征绑定的所述梯级标识。
本发明实施例所提供的一种扶梯乘客行为引导的装置可实现本发明实施例一所提供的一种扶梯乘客行为引导的方法,具备执行方法相应的功能模块和有益效果。
实施例三
图5示出了可以用来实施本发明的实施例的电子设备10的结构示意图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本发明的实现。
如图5所示,电子设备10包括至少一个处理器11,以及与至少一个处理器11通信连接的存储器,如只读存储器(ROM)12、随机访问存储器(RAM)13等,其中,存储器存储有可被至少一个处理器执行的计算机程序,处理器11可以根据存储在只读存储器(ROM)12中的计算机程序或者从存储单元18加载到随机访问存储器(RAM)13中的计算机程序,来执行各种适当的动作和处理。在RAM13中,还可存储电子设备10操作所需的各种程序和数据。处理器11、ROM12以及RAM13通过总线14彼此相连。输入/输出(I/O)接口15也连接至总线14。
电子设备10中的多个部件连接至I/O接口15,包括:输入单元16,例如键盘、鼠标等;输出单元17,例如各种类型的显示器、扬声器等;存储单元18,例如磁盘、光盘等;以及通信单元19,例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理,例如一种扶梯乘客行为引导的方法。
在一些实施例中,一种扶梯乘客行为引导的方法可被实现为计算机程序,其被有形地包含于计算机可读存储介质,例如存储单元18。在一些实施例中,计算机程序的部分或者全部可以经由ROM12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到RAM13并由处理器11执行时,可以执行上文描述的一种扶梯乘客行为引导的方法的一个或多个步骤。备选地,在其他实施例中,处理器11可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行一种扶梯乘客行为引导的方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本发明的上下文中,计算机可读存储介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。备选地,计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互,可以在电子设备上实施此处描述的系统和技术,该电子设备具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、区块链网络和互联网。
计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务中,存在的管理难度大,业务扩展性弱的缺陷。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本发明的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。
Claims (10)
1.一种扶梯乘客行为引导的方法,其特征在于,所述方法包括:
实时获取扶梯的图像信息;
基于所述图像信息,判断所述扶梯上是否存在行为异常乘客;
若存在所述行为异常乘客,则获取所述行为异常乘客的乘客特征;
基于所述乘客特征确定所述行为异常乘客所在的梯级,作为目标梯级,其中,所述扶梯的各梯级配置告警设备;
向所述目标梯级配置的告警设备发送控制指令,以使所述告警设备向所述行为异常乘客发出行为引导提示。
2.根据权利要求1所述的方法,其特征在于,在所述实时获取扶梯的图像信息之后,还包括:
根据所述图像信息确定是否存在进入所述扶梯的新乘客;
若存在所述新乘客,则基于所述图像信息获取所述新乘客的乘客特征,以及,将当前所述图像信息的获取时间作为所述新乘客的上梯时间;
获取各梯级到达乘客上梯端的到达时间,其中,各所述梯级具有梯级标识;
将所述到达时间为所述上梯时间的梯级,确定为所述新乘客所在的梯级,并将所述乘客特征与所述新乘客所在梯级的梯级标识进行绑定。
3.根据权利要求2所述的方法,其特征在于,所述根据所述图像信息确定是否存在进入所述扶梯的新乘客,包括:
从所述图像信息中识别出预先设定的起始线;
判断指定方向上是否存在距离所述起始线在阈值范围内的扶梯乘客;
若存在,则判定为存在进入所述扶梯的新乘客;
否则,判定为不存在进入所述扶梯的新乘客。
4.根据权利要求2或3所述的方法,其特征在于,所述基于所述乘客特征确定所述行为异常乘客所在的梯级,作为目标梯级,包括:
确定与所述行为异常乘客的所述乘客特征绑定的梯级标识;
将所述梯级标识对应的梯级确定为目标梯级。
5.根据权利要求1-3任一所述的方法,其特征在于,所述基于所述图像信息,判断所述扶梯上是否存在行为异常乘客,包括:
基于所述图像信息,检测是否存在扶梯乘客;
若存在所述扶梯乘客,则将所述图像信息输入至预先设定的行为匹配模型中;
接收所述行为匹配模型输出的行为结果,并基于所述行为结果判断是否存在行为异常乘客。
6.根据权利要求5所述的方法,其特征在于,所述行为结果包括多种不同类型的异常行为,所述告警设备包括视觉设备以及听觉设备;
在所述向所述目标梯级配置的告警设备发送控制指令之前,还包括:
根据接收到的所述异常行为的类型,确定所述视觉设备的展示内容以及所述听觉设备的播放内容;
基于所述展示内容以及所述播放内容生成控制指令。
7.根据权利要求2或3所述的方法,其特征在于,所述方法还包括:
获取所述扶梯的运行速度以及所述梯级的宽度;
根据连续多帧的所述图像信息确定各所述扶梯乘客实时的移动速度;
将所述运行速度与各所述移动速度进行比较;
当所述运行速度与所述移动速度不一致,则获取所述移动速度与所述运行速度不一致的扶梯乘客的乘客特征;
基于所述运行速度、所述移动速度以及所述宽度,实时更新与所述乘客特征绑定的所述梯级标识。
8.一种扶梯乘客行为引导的装置,其特征在于,所述装置包括:
图像信息获取模块,用于实时获取扶梯的图像信息;
判断模块,用于基于所述图像信息,判断所述扶梯上是否存在行为异常乘客;
乘客特征获取模块,用于当存在所述行为异常乘客,则获取所述行为异常乘客的乘客特征;
目标梯级确定模块,用于基于所述乘客特征确定所述行为异常乘客所在的梯级,作为目标梯级,其中,所述扶梯的各梯级配置告警设备;
控制指令发送模块,用于向所述目标梯级配置的告警设备发送控制指令,以使所述告警设备向所述行为异常乘客发出行为引导提示。
9.一种电子设备,其特征在于,所述电子设备包括:
至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-7中所述的一种扶梯乘客行为引导的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-7中所述的一种扶梯乘客行为引导的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211254730.5A CN115611126A (zh) | 2022-10-13 | 2022-10-13 | 一种扶梯乘客行为引导的方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211254730.5A CN115611126A (zh) | 2022-10-13 | 2022-10-13 | 一种扶梯乘客行为引导的方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115611126A true CN115611126A (zh) | 2023-01-17 |
Family
ID=84862176
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211254730.5A Pending CN115611126A (zh) | 2022-10-13 | 2022-10-13 | 一种扶梯乘客行为引导的方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115611126A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116434145A (zh) * | 2023-04-21 | 2023-07-14 | 北京日立电梯工程有限公司 | 一种基于图像识别的电扶梯乘客危险行为分析监控系统 |
-
2022
- 2022-10-13 CN CN202211254730.5A patent/CN115611126A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116434145A (zh) * | 2023-04-21 | 2023-07-14 | 北京日立电梯工程有限公司 | 一种基于图像识别的电扶梯乘客危险行为分析监控系统 |
CN116434145B (zh) * | 2023-04-21 | 2024-04-16 | 北京日立电梯工程有限公司 | 一种基于图像识别的电扶梯乘客危险行为分析监控系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10776627B2 (en) | Human flow analysis method, human flow analysis apparatus, and human flow analysis system | |
CN111144247B (zh) | 一种基于深度学习的自动扶梯乘客逆行检测方法 | |
CN107289949B (zh) | 一种基于人脸识别技术的室内导识装置及方法 | |
US9104242B2 (en) | Palm gesture recognition method and device as well as human-machine interaction method and apparatus | |
CN110861983B (zh) | 电梯的运行控制方法及装置 | |
CN108241844B (zh) | 一种公交客流统计方法、装置及电子设备 | |
CN109292579B (zh) | 电梯系统、图像识别方法和运行控制方法 | |
US10296860B2 (en) | Management of aircraft in-cabin activities occuring during turnaround using video analytics | |
US20190002234A1 (en) | Elevator control apparatus and elevator control method | |
CN110738135B (zh) | 一种工人作业工步规范视觉识别判定与指导方法及系统 | |
CN107103279B (zh) | 一种在垂直视角下基于深度学习的客流计数方法 | |
US10102431B2 (en) | Visual monitoring of queues using auxillary devices | |
CN107416629B (zh) | 电梯安全运行的控制方法和系统 | |
KR20140029223A (ko) | 제스처 인식 장치, 그 제어 방법, 표시 기기, 및 제어 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체 | |
JP2013173595A (ja) | エレベータ到着時間推定装置、エレベータシステム | |
CN115611126A (zh) | 一种扶梯乘客行为引导的方法、装置、设备及存储介质 | |
CN110705349A (zh) | 基于微表情的客户满意度识别方法、装置、终端及介质 | |
CN110009650B (zh) | 一种扶梯扶手边界区域越界检测方法与系统 | |
CN111517204A (zh) | 一种自动扶梯安全监控方法、装置、设备及可读存储介质 | |
CN102592113A (zh) | 一种基于表观特征的静态手势快速识别法 | |
JP4883415B2 (ja) | 監視装置及びプログラム | |
US20220277471A1 (en) | Information processing apparatus, information processing method, guide system, and guide method | |
CN104766332B (zh) | 一种图像处理方法及电子设备 | |
CN110713082A (zh) | 一种电梯控制方法、系统、装置和存储介质 | |
CN111062238A (zh) | 基于人体骨架信息及多目标跟踪的扶梯流量监测方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |