CN105347127B - 电梯轿厢内异常情况的监控系统及监控方法 - Google Patents
电梯轿厢内异常情况的监控系统及监控方法 Download PDFInfo
- Publication number
- CN105347127B CN105347127B CN201410408748.5A CN201410408748A CN105347127B CN 105347127 B CN105347127 B CN 105347127B CN 201410408748 A CN201410408748 A CN 201410408748A CN 105347127 B CN105347127 B CN 105347127B
- Authority
- CN
- China
- Prior art keywords
- passenger
- signal processing
- processing apparatus
- elevator
- lift car
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Maintenance And Inspection Apparatuses For Elevators (AREA)
- Indicating And Signalling Devices For Elevators (AREA)
Abstract
本发明公开了一种电梯轿厢内异常情况的监控系统，包括设置于电梯轿厢内的至少一个3D体感摄影装置，3D体感摄影装置将所采集的原始感测数据流发送给信号处理装置；信号处理装置判断乘客的行为动态是否异常或者乘客是否处于危险状态；当信号处理装置判定乘客的行为动态异常或者乘客处于危险状态，向应急处理装置发送指示信号。本发明基于3D体感摄影技术，既可使发生意外的乘客得到及时救援，又可降低被困人员的救援难度，同时可以降低、防止电梯轿厢内的乘客间暴力事件的发生。本发明还公开了一种电梯轿厢内异常情况的监控方法。
Description
技术领域
本发明涉及一种电梯的监控系统，具体涉及一种电梯轿厢内异常情况的监控系统。本发明还涉及一种电梯轿厢内异常情况的监控方法。
背景技术
第六次人口普查数据显示，截止2013年底，中国60周岁及以上人口20243万人，占总人口的14.9％；65周岁及以上人口13161万人，占总人口的9.7％。中国正在进入老龄化社会，呈现出老年人口基数大、增速快、高龄化、失能化、空巢化趋势明显的态势。中国现有老龄人口已超过1.6亿，且每年以近800万的速度增加，有关专家预测，到2050年，中国老龄人口将达到总人口的三分之一，临终无子女的老年人将达到7900万左右，独居和空巢老年人将占54％以上。而老年人的机体生理在不断的老化、精神活动能力减弱，使其生活中出现很多安全隐患，易出现摔倒、突发疾病等伤害。因此，如何在电梯等较为封闭空间内及时检测出中老年人摔倒、突发疾病等异常行为，第一时间通知家人和医院，保障电梯乘客的安全，是值得关注和解决的重要课题。
电梯等处于密室状态的独立空间可能因为停电、地震或自身故障等因素停止运行，此时乘客等受困者往往仅能通过电梯内部的紧急报警按钮对外求援，而手机等诸多通讯设备在电梯内常常无法良好地接收外界信号。同时，现有的电梯紧急报警装置均需要受困者自行启动，才可对外呼救。一旦出现单独乘客摔倒、晕厥、突发疾病等无意识情况时，就无法启动紧急通报，将导致无人观察电梯内的异常情况而延误黄金救援时机。
随着无线传输技术、视频技术的不断成熟，市场上的几个较大的电梯厂商均开设电梯远程监控系统，但该系统均仅监控电梯本身的运行和使用状态，并未对轿内乘客的状态进行相应的监控和保护。虽然一些楼宇由第三方安装了摄像监控设备，也仅拍摄存储电梯各处的运行状态，并未根据电梯内乘客的状态做相应的判断分析处理。
中国专利文献CN102219139A公开了一种电梯安全监控系统及方法，其电梯安全监控系统仅在电梯自身故障且需要电梯停止运行时才开始工作，并仅起一个影像传递功能。其中电梯内是否乘客被困的判断机理，该项一般由电梯的称量装置进行判断，此处影像也仅取一个再次确认的效果。然而通常情况下，一台保养良好的电梯很少会出现因自身故障而停止运行的情况。而电梯内各类乘客却很可能因为自身问题在轿厢内出现意外情况，如晕倒、互殴，此时电梯依然处于正常运行状态，该电梯安全监控系统并未被启动而产生相应的作用。
随着近年来图形图像识别技术的发展，人脸识别技术已经开始运用到各类摄像装置中，并且人体动态捕捉技术也日趋成熟。个别厂家和科研单位基于此类图形和语音识别技术提出电梯轿厢防暴力监控装置，通过不断拍摄轿内乘客图文信息，确定每帧图像中乘客像素的连续变化差异阈值进行判定乘客之间的行为，或配备有语音辅助系统，确认乘客的情绪状态，以判断多名乘客之间是否发生了暴力行为，如中国专利文献CN103708314A公开的一种电梯异常监控装置。
此类监控系统虽然在一定程度上可以降低轿厢内暴力行为的发生，但是仅能够进行乘客间的暴力犯罪探测，并且需要判定电梯内有两名乘客时才启动该监控设备。当单独乘客发生突发疾病倚靠、晕倒等意外情况时，此类监控系统却不启动监控工作，由此便会延误乘客的救援时间。
同时由于此类监控系统采用单帧图像像素点的比较，仅能判断出物体整体的相互移动的行为，虽然有语音、负载等传感器辅助判断，但依然很难探测出乘客持刀威胁或几个本就相互贴近的乘客间的打斗、暴力威胁行为，同时却很容易将乘客(儿童)之间的嬉戏打闹、乘客搬运货物的行为误认为暴力行为，大大降低了监控系统的可靠性。
发明内容
本发明所要解决的技术问题是提供一种电梯轿厢内异常情况的监控系统，它可以准确监控电梯轿厢内乘客突发的异常行为，避免轿厢内单独乘客出现晕厥而无人施救、多名乘客互施暴力的情况发生。
为解决上述技术问题，本发明电梯轿厢内异常情况的监控系统的技术解决方案为：
包括设置于电梯轿厢内的至少一个3D体感摄影装置，3D体感摄影装置采集人体的视频影像、脸部信息、语音信息，并将视频影像转化为骨架影像，提供原始感测数据流；3D体感摄影装置将所采集的原始感测数据流发送给信号处理装置；信号处理装置包括3D模型建立及行为状态分析模块、脸部分析模块、语音分析模块、异常状态量化模块；3D模型建立及行为状态分析模块对3D体感摄影装置提供的原始感测数据流进行过滤分析，追踪乘客的骨架影像，并以此建立乘客的动态3D模型，实时追踪乘客的行为，并将乘客的动态3D模型与数据库中已有的乘客各种行为的人体3D模型进行比较，确定乘客的具体肢体动作；脸部分析模块对3D体感摄影装置提供的原始感测数据流中的脸部信息进行乘客脸部识别分析，确定乘客的脸部表情；语音分析模块对3D体感摄影装置提供的原始感测数据流中的语音信息进行乘客语音识别分析，确定乘客的语音状况；3D模型建立及行为状态分析模块、脸部分析模块、语音分析模块分别将分析结果发送给异常状态量化模块；异常状态量化模块判断乘客的行为动态是否异常或者乘客是否处于危险状态；当信号处理装置的异常状态量化模块判定乘客的行为动态异常或者乘客处于危险状态，向应急处理装置发送指示信号。
所述3D体感摄影装置具有用于识别面部表情和动作的彩色摄像头、深度传感器、红外追踪装置和用于语音识别的多点阵列麦克风。
所述3D体感摄影装置将所采集的原始感测数据流还发送给视频图像传输模块，视频图像传输模块将原始感测数据流中的视频影像信息发送给电梯监控中心进行显示。
所述3D体感摄影装置还采集人体的生理健康信息；所述信号处理装置04还包括生理健康分析模块；生理健康分析模块对3D体感摄影装置03提供的原始感测数据流中的生理健康信息进行生理健康状态分析，确定乘客的生理健康状况，并将分析结果发送给异常状态量化模块；异常状态量化模块根据乘客的具体肢体动作、脸部表情、语音状况、生理健康状况，判断乘客的行为动态是否异常或者乘客是否处于危险状态。
所述应急处理装置包括指示信号处理模块，指示信号处理模块接收信号处理装置的异常状态量化模块发送的指示信号，并将指示信号分别发送给远程报警呼救模块、电梯运行控制模块；远程报警呼救模块根据指示信号发出报警呼救信号并发送给电梯监控中心；电梯监控中心将报警呼救信号发送给救援机构和/或通知乘客家属；电梯运行控制模块控制电梯轿厢的运行，使电梯轿厢停靠至最近楼层或基站，同时电梯运行控制模块指示设置于电梯轿厢内的语音播报机构发出语音播报信号。
所述信号处理装置连接电梯故障监控设备；电梯故障监控设备将故障报警信号发送给信号处理装置，信号处理装置根据3D体感摄影装置将所采集的原始感测数据流判断电梯轿厢内是否有乘客；如果有乘客，信号处理装置向应急处理装置发送指示信号。
所述电梯轿厢、3D体感摄影装置、信号处理装置、应急处理装置、电梯故障监控设备连接可充电的蓄电池。
本发明还提供一种电梯轿厢内异常情况的监控方法，其技术解决方案为，包括以下步骤：
第一步，当电梯被召唤，3D体感摄影装置开始进行摄像拍照，实时追踪获取电梯轿厢内乘客的视频影像、脸部信息、语音信息和生理健康信息，并将视频影像转化为骨架影像；
第二步，3D体感摄影装置将实时采集的上述信息连续不断地发送给信号处理装置；信号处理装置根据实时骨架影像信息建立乘客的动态3D模型，以确定乘客的行为动态，并不断将乘客的行为与数据库中的乘客各种动作的人体3D模型作对比，确定乘客的具体肢体动作；信号处理装置根据实时脸部信息判断乘客的脸部表情；信号处理装置根据实时语音信息判断乘客的语音状况；信号处理装置根据实时生理健康信息判断乘客的生理健康状况；从而实现实时监控乘客的行为；
第三步，信号处理装置根据乘客的具体肢体动作、脸部表情、语音状况以及生理健康状况，判断乘客的行为动态是否异常或者乘客是否处于危险状态；
所述信号处理装置的判定方法如下：
信号处理装置根据乘客的具体肢体动作，分析单独乘客是否处于“倚靠轿厢不断拍抚胸部”、“蹲着”、“坐靠于轿厢内”、“卧倒于地”等肢体异常状态，并将各种肢体异常状态的危险值量化为K-T1-1…K-T1-N…；
信号处理装置根据乘客的脸部表情，分析乘客是否处于“闭眼”、“异常痛苦状态”，并将乘客的各种脸部状态的危险值量化为K-T2-1…K-T2-N…；
信号处理装置根据乘客的语音状况，分析乘客是否发出“求救呼喊”、“尖叫”或其他求救声，并将乘客语音信息的危险值量化为K-T3-1…K-T3-N…；
信号处理装置根据乘客的生理健康状况，分析乘客是否处于“过低”或“过高”，并将乘客语音信息的危险值量化为K-T4-1…K-T4-N…；
根据电梯的不同使用场合，设定以上四类异常状况判定的权重值α、β、γ、δ，采用累计贡献法判定乘客的危险程度；即当乘客处于某一状态时，将乘客的各类异常值累加得到∑K＝α*[K-T1-N]+β*[K-T2-N]+γ*[K-T3-N]+δ*[K-T4-N]，当乘客的异常状态值∑K大于危险状态设定值D∑K时，信号处理装置04判定乘客的行为动态异常或者乘客处于危险状态；
或者，信号处理装置根据乘客的具体肢体动作，分析多名乘客是否处于“互殴”、“抢劫”、“劫色”等异常状态，并将各种肢体异常状态的危险值量化为K-Q1-1…K-Q1-N…；
信号处理装置根据乘客的脸部表情，分析乘客是否处于“异常痛苦”、“异常兴奋”等特殊表情，并将乘客的各种脸部状态的危险值量化为K-Q2-1…K-Q2-N…；
信号处理装置根据乘客的语音状况，分析乘客是否发出“求救呼喊”、“尖叫”“谩骂”，并将乘客语音信息的危险值量化为K-Q3-1…K-Q3-N…；
根据电梯的不同使用场合，设定以上三类异常状况判定的权重值α、β、γ，采用累计贡献法判定乘客的危险程度；即当乘客处于某一状态时，将乘客的各类异常值累加得到∑K＝α*[K-Q1-N]+β*[K-Q2-N]+γ*[K-Q3-N]，当乘客的异常状态值∑K大于危险状态设定值D∑K时，信号处理装置判定乘客的行为动态异常或者乘客处于危险状态。
第四步，如果信号处理装置在一段时间内连续判定乘客的行为动态异常或者乘客处于危险状态，信号处理装置向应急处理装置发送指示信号；
如果信号处理装置判定乘客的行为动态正常或者乘客未处于危险状态，但乘客在电梯轿厢内启动报警按钮或者3D体感摄影装置所采集的视频影像显示乘客长时间未离开电梯轿厢且电梯轿厢未收到开门指令，信号处理装置向应急处理装置发送指示信号；
如果乘客按下电梯轿厢内的紧急报警按钮，信号处理装置向应急处理装置发送指示信号；
如果信号处理装置接收到电梯故障监控设备发送的电梯故障信号，信号处理装置根据3D体感摄影装置将所采集的原始感测数据流判断电梯轿厢内是否有乘客；如果有乘客，信号处理装置向应急处理装置发送指示信号。
所述信号处理装置向应急处理装置发送指示信号之后，应急处理装置发出报警呼救信号并发送给电梯监控中心；电梯监控中心将报警呼救信号发送给救援机构和/或通知乘客家属；应急处理装置控制电梯轿厢的运行，使电梯轿厢停靠至最近楼层或基站，同时指示设置于电梯轿厢内的语音播报机构发出语音播报信号。
本发明可以达到的技术效果是：
本发明基于3D体感摄影技术，可以对单个人的晕厥、多人间的暴力行为、电梯困人等诸类异常行为，特别是老年人、病弱群体单独乘坐电梯时发生摔倒、突发疾病等作出报警等相应处理，既可使发生意外的乘客得到及时救援，又可降低被困人员的救援难度，同时可以降低、防止电梯轿厢内的乘客间暴力事件的发生。
本发明通过对一段时间内乘客的脸部表情和乘客的语音状况进行对比分析，能够防止对乘客是否进入危险状态发生错误判断。
本发明可以良好地监控电梯轿厢，及时准确判断乘客的异常行为、状态；同时对各类乘客的各种危险状态做出及时的反馈，能够充分起到电梯轿厢内异常情况的监控作用。
本发明能够实时工作，不间断地监控轿厢内各种异常情况。
本发明能够准确迅速地探测轿厢内单独乘客的异常行为状态，大大减少了独居老弱乘客在轿厢内摔倒、晕厥而无人发现救助的情况。
本发明采用3D体感摄影技术，可以对乘客具体的肢体动作的确定、面部表情的分析、乘客语音的识别、乘客心率的确定，通过以上各类信息的综合判定，可以更加精确的判断乘客行为和状态；同时可以通过不断填充完善的人体动态3D模型数据库，更加迅速、精准的确认探测出乘客处于危险异常状态。本发明通过3D体感摄影装置提供的各类信息进行综合判断，能够较好的避免上述问题的无法探测原本就相贴近的乘客间暴力威胁，又或误报儿童乘客嬉戏打闹的情况产生。
附图说明
下面结合附图和具体实施方式对本发明作进一步详细的说明：
图1是本发明电梯轿厢内异常情况的监控系统的示意图；
图2是本发明电梯轿厢内异常情况的监控方法的流程示意图。
图中附图标记说明：
01为电梯轿厢， 03为3D体感摄影装置，
04为信号处理装置， 05为应急处理装置，
06为电梯监控中心。
具体实施方式
如图1所示，本发明电梯轿厢内异常情况的监控系统，包括设置于电梯轿厢01内的至少一个3D体感摄影装置03，3D体感摄影装置03具有用于识别面部表情和动作的彩色摄像头、深度传感器、红外追踪装置和用于语音识别的多点阵列麦克风，3D体感摄影装置03采集人体的视频影像、脸部信息、语音信息和呼吸心率脉搏等生理健康信息，并将视频影像转化为骨架影像，以提供用于即时动态捕捉、影像抓拍辨识、语音辨识、呼吸心率监测的原始感测数据流；
3D体感摄影装置03将所采集的原始感测数据流发送给信号处理装置04和视频图像传输模块；视频图像传输模块将原始感测数据流中的视频影像信息发送给电梯监控中心06进行显示；
信号处理装置04包括3D模型建立及行为状态分析模块、脸部分析模块、语音分析模块、生理健康分析模块、异常状态量化模块；状态分析模块、脸部分析模块、语音分析模块、生理健康分析模块中可以事先采集乘客行为动作的3D模型数据、脸部表情、乘客音频数据，用以分析比较，以便更准确的判断出乘客的行为状态，还可以事先采集和存储整个楼宇的住户乘客ID信息；
3D模型建立及行为状态分析模块对3D体感摄影装置03提供的原始感测数据流进行过滤分析，追踪乘客的骨架影像，并以此建立乘客的动态3D模型，实时追踪乘客的行为，并将乘客的动态3D模型与数据库中已有的乘客各种行为的人体3D模型进行比较，确定乘客的具体肢体动作；
脸部分析模块对3D体感摄影装置03提供的原始感测数据流中的脸部信息进行乘客脸部识别分析，确定乘客的脸部表情；
语音分析模块对3D体感摄影装置03提供的原始感测数据流中的语音信息进行乘客语音识别分析，确定乘客的语音状况；
生理健康分析模块对3D体感摄影装置03提供的原始感测数据流中的生理健康信息进行生理健康状态分析，确定乘客的生理健康状况；
3D模型建立及行为状态分析模块、脸部分析模块、语音分析模块、生理健康分析模块分别将分析结果发送给异常状态量化模块；异常状态量化模块根据乘客的具体肢体动作、脸部表情、语音状况、生理健康状况，判断乘客的行为动态是否异常或者乘客是否处于危险状态；
当信号处理装置04的异常状态量化模块判定乘客的行为动态异常或者乘客处于危险状态，向应急处理装置05发送指示信号；
应急处理装置05包括指示信号处理模块，指示信号处理模块接收信号处理装置04的异常状态量化模块发送的指示信号，并将指示信号分别发送给远程报警呼救模块、电梯运行控制模块；远程报警呼救模块根据指示信号发出报警呼救信号并发送给电梯监控中心06；电梯监控中心06将报警呼救信号发送给救援机构和/或通知乘客家属；电梯运行控制模块控制电梯轿厢的运行，使电梯轿厢停靠至最近楼层或基站，同时电梯运行控制模块指示设置于电梯轿厢内的语音播报机构发出语音播报信号。
还可以使信号处理装置连接各类电梯故障监控设备；电梯故障监控设备可以设置于电梯轿厢01内，也可以设置于电梯机房或井道内；电梯故障监控设备将故障报警信号发送给信号处理装置04，信号处理装置04根据3D体感摄影装置03将所采集的原始感测数据流判断电梯轿厢内是否有乘客；如果有乘客，信号处理装置04向应急处理装置05发送指示信号；应急处理装置05发出报警呼救信号并发送给电梯监控中心06；电梯监控中心06将报警呼救信号发送给救援机构和/或通知乘客家属；应急处理装置05控制电梯轿厢的运行，使电梯轿厢停靠至最近楼层或基站，同时指示设置于电梯轿厢内的语音播报机构发出语音播报信号。
电梯轿厢01、3D体感摄影装置03、信号处理装置04、应急处理装置05、电梯故障监控设备可以连接可充电的蓄电池，当外接电源断电时，蓄电池可以提供临时供电。
如图2所示，本发明电梯轿厢内异常情况的监控方法，包括以下步骤：
第一步，当电梯被召唤，3D体感摄影装置03开始进行摄像拍照，实时追踪获取电梯轿厢内乘客的视频影像、脸部信息、语音信息和生理健康信息，并将视频影像转化为骨架影像；
第二步，3D体感摄影装置03将实时采集的上述信息连续不断地发送给信号处理装置04；信号处理装置04根据实时骨架影像信息建立乘客的动态3D模型，以确定乘客的行为动态，并不断将乘客的行为与数据库中的乘客各种动作的人体3D模型作对比，确定乘客的具体肢体动作；信号处理装置04根据实时脸部信息判断乘客的脸部表情；信号处理装置04根据实时语音信息判断乘客的语音状况；信号处理装置04根据实时生理健康信息判断乘客的生理健康状况；从而实现实时监控乘客的行为；
第三步，信号处理装置04根据乘客的具体肢体动作、脸部表情、语音状况以及生理健康状况，判断乘客的行为动态是否异常或者乘客是否处于危险状态；
信号处理装置04(即信号处理装置04的异常状态量化模块)的判定方法如下：
1、信号处理装置04根据乘客的具体肢体动作，分析单独乘客是否处于“倚靠轿厢不断拍抚胸部”、“蹲着”、“坐靠于轿厢内”、“卧倒于地”等肢体异常状态，并将各种肢体异常状态的危险值量化为K-T1-1…K-T1-N…；
信号处理装置04根据乘客的脸部表情，分析乘客是否处于“闭眼”、“异常痛苦状态”，并将乘客的各种脸部状态的危险值量化为K-T2-1…K-T2-N…；
信号处理装置04根据乘客的语音状况，分析乘客是否发出“求救呼喊”、“尖叫”或其他求救声，并将乘客语音信息的危险值量化为K-T3-1…K-T3-N…；
信号处理装置04根据乘客的生理健康状况，分析乘客是否处于“过低”或“过高”，并将乘客语音信息的危险值量化为K-T4-1…K-T4-N…；
根据电梯的不同使用场合，设定以上四类异常状况判定的权重值α、β、γ、δ，采用累计贡献法判定乘客的危险程度；即当乘客处于某一状态(即某一时刻)时，将乘客的各类异常值累加得到∑K＝α*[K-T1-N]+β*[K-T2-N]+γ*[K-T3-N]+δ*[K-T4-N]，当乘客的异常状态值∑K大于危险状态设定值D∑K时，信号处理装置04判定乘客的行为动态异常或者乘客处于危险状态；其中，危险状态触发值D∑K是根据实际实验和调整后的一个设定值，可以根据电梯使用的不同场合进行调整修改；
2、信号处理装置04根据乘客的具体肢体动作，分析多名乘客是否处于“互殴”、“抢劫”、“劫色”等异常状态，并将各种肢体异常状态的危险值量化为K-Q1-1…K-Q1-N…；
信号处理装置04根据乘客的脸部表情，分析乘客是否处于“异常痛苦”、“异常兴奋”等特殊表情，并将乘客的各种脸部状态的危险值量化为K-Q2-1…K-Q2-N…；
信号处理装置04根据乘客的语音状况，分析乘客是否发出“求救呼喊”、“尖叫”“谩骂”，并将乘客语音信息的危险值量化为K-Q3-1…K-Q3-N…；
根据电梯的不同使用场合，设定以上三类异常状况判定的权重值α、β、γ，采用累计贡献法判定乘客的危险程度；即当乘客处于某一状态时，将乘客的各类异常值累加得到∑K＝α*[K-Q1-N]+β*[K-Q2-N]+γ*[K-Q3-N]，当乘客的异常状态值∑K大于危险状态设定值D∑K时，信号处理装置04判定乘客的行为动态异常或者乘客处于危险状态；
上述各类异常状态的量化值和权重值，均需要通过实验测试和实际使用检测来进行确定和调整，并可以根据电梯的具体使用情况进行修正。
第四步，如果信号处理装置04在一段时间内(如15秒以上的时间段)连续判定乘客的行为动态异常或者乘客处于危险状态，信号处理装置04向应急处理装置05发送指示信号；应急处理装置05发出报警呼救信号并发送给电梯监控中心06；电梯监控中心06将报警呼救信号发送给救援机构和/或通知乘客家属；应急处理装置05控制电梯轿厢的运行，使电梯轿厢停靠至最近楼层或基站，同时指示设置于电梯轿厢内的语音播报机构发出语音播报信号；
如果信号处理装置04判定乘客的行为动态正常或者乘客未处于危险状态，但乘客在电梯轿厢内启动报警按钮或者3D体感摄影装置03所采集的视频影像显示乘客长时间(如180秒以上)未离开电梯轿厢且电梯轿厢未收到开门指令，信号处理装置04向应急处理装置05发送指示信号；应急处理装置05发出报警呼救信号并发送给电梯监控中心06；电梯监控中心06将报警呼救信号发送给救援机构和/或通知乘客家属；应急处理装置05控制电梯轿厢的运行，使电梯轿厢停靠至最近楼层或基站，同时指示设置于电梯轿厢内的语音播报机构发出语音播报信号；
如果乘客按下电梯轿厢内的紧急报警按钮，信号处理装置04向应急处理装置05发送指示信号；应急处理装置05发出报警呼救信号并发送给电梯监控中心06；电梯监控中心06将报警呼救信号发送给救援机构和/或通知乘客家属；应急处理装置05控制电梯轿厢的运行，使电梯轿厢停靠至最近楼层或基站，同时指示设置于电梯轿厢内的语音播报机构发出语音播报信号；
如果信号处理装置04接收到电梯故障监控设备发送的电梯故障信号，信号处理装置04根据3D体感摄影装置03将所采集的原始感测数据流判断电梯轿厢内是否有乘客；如果有乘客，信号处理装置04向应急处理装置05发送指示信号；应急处理装置05发出报警呼救信号并发送给电梯监控中心06；电梯监控中心06将报警呼救信号发送给救援机构和/或通知乘客家属；应急处理装置05控制电梯轿厢的运行，使电梯轿厢停靠至最近楼层或基站，同时指示设置于电梯轿厢内的语音播报机构发出语音播报信号。
本发明虽然已较佳实施例公开如上，但其并不是用来限定本发明，任何本领域技术人员在不脱离本发明的精神和范围内，都可以做出可能的变动和修改。因此，凡是为脱离本发明技术方案的内容，依据本发明的技术实质对以上实施例所作的任何修改、等同变化及修饰，均落入本发明权利要求所界定的保护范围内。
Claims (7)
1.一种电梯轿厢内异常情况的监控系统，其特征在于：包括设置于电梯轿厢内的至少一个3D体感摄影装置，3D体感摄影装置采集人体的视频影像、脸部信息、语音信息，并将视频影像转化为骨架影像，提供原始感测数据流；3D体感摄影装置将所采集的原始感测数据流发送给信号处理装置；
信号处理装置包括3D模型建立及行为状态分析模块、脸部分析模块、语音分析模块、异常状态量化模块；
3D模型建立及行为状态分析模块对3D体感摄影装置提供的原始感测数据流进行过滤分析，追踪乘客的骨架影像，并以此建立乘客的动态3D模型，实时追踪乘客的行为，并将乘客的动态3D模型与数据库中已有的乘客各种行为的人体3D模型进行比较，确定乘客的具体肢体动作；
脸部分析模块对3D体感摄影装置提供的原始感测数据流中的脸部信息进行乘客脸部识别分析，确定乘客的脸部表情；
语音分析模块对3D体感摄影装置提供的原始感测数据流中的语音信息进行乘客语音识别分析，确定乘客的语音状况；
3D模型建立及行为状态分析模块、脸部分析模块、语音分析模块分别将分析结果发送给异常状态量化模块；异常状态量化模块判断乘客的行为动态是否异常或者乘客是否处于危险状态；
当信号处理装置的异常状态量化模块判定乘客的行为动态异常或者乘客处于危险状态，向应急处理装置发送指示信号；
所述3D体感摄影装置还采集人体的生理健康信息；所述信号处理装置还包括生理健康分析模块；生理健康分析模块对3D体感摄影装置提供的原始感测数据流中的生理健康信息进行生理健康状态分析，确定乘客的生理健康状况，并将分析结果发送给异常状态量化模块；异常状态量化模块根据乘客的具体肢体动作、脸部表情、语音状况、生理健康状况，判断乘客的行为动态是否异常或者乘客是否处于危险状态；
所述信号处理装置连接电梯故障监控设备；电梯故障监控设备将故障报警信号发送给信号处理装置，信号处理装置根据3D体感摄影装置将所采集的原始感测数据流判断电梯轿厢内是否有乘客；如果有乘客，信号处理装置向应急处理装置发送指示信号。
2.根据权利要求1所述的电梯轿厢内异常情况的监控系统，其特征在于：所述3D体感摄影装置具有用于识别面部表情和动作的彩色摄像头、深度传感器、红外追踪装置和用于语音识别的多点阵列麦克风。
3.根据权利要求1所述的电梯轿厢内异常情况的监控系统，其特征在于：所述3D体感摄影装置将所采集的原始感测数据流还发送给视频图像传输模块，视频图像传输模块将原始感测数据流中的视频影像信息发送给电梯监控中心进行显示。
4.根据权利要求1所述的电梯轿厢内异常情况的监控系统，其特征在于：所述应急处理装置包括指示信号处理模块，指示信号处理模块接收信号处理装置的异常状态量化模块发送的指示信号，并将指示信号分别发送给远程报警呼救模块、电梯运行控制模块；远程报警呼救模块根据指示信号发出报警呼救信号并发送给电梯监控中心；电梯监控中心将报警呼救信号发送给救援机构和/或通知乘客家属；电梯运行控制模块控制电梯轿厢的运行，使电梯轿厢停靠至最近楼层或基站，同时电梯运行控制模块指示设置于电梯轿厢内的语音播报机构发出语音播报信号。
5.根据权利要求1所述的电梯轿厢内异常情况的监控系统，其特征在于：所述电梯轿厢、3D体感摄影装置、信号处理装置、应急处理装置、电梯故障监控设备连接可充电的蓄电池。
6.一种电梯轿厢内异常情况的监控方法，其特征在于，包括以下步骤：
第一步，当电梯被召唤，3D体感摄影装置开始进行摄像拍照，实时追踪获取电梯轿厢内乘客的视频影像、脸部信息、语音信息和生理健康信息，并将视频影像转化为骨架影像；
第二步，3D体感摄影装置将实时采集的上述信息连续不断地发送给信号处理装置；信号处理装置根据实时骨架影像信息建立乘客的动态3D模型，以确定乘客的行为动态，并不断将乘客的行为与数据库中的乘客各种动作的人体3D模型作对比，确定乘客的具体肢体动作；信号处理装置根据实时脸部信息判断乘客的脸部表情；信号处理装置根据实时语音信息判断乘客的语音状况；信号处理装置根据实时生理健康信息判断乘客的生理健康状况；从而实现实时监控乘客的行为；
第三步，信号处理装置根据乘客的具体肢体动作、脸部表情、语音状况以及生理健康状况，判断乘客的行为动态是否异常或者乘客是否处于危险状态；
第四步，如果信号处理装置在一段时间内连续判定乘客的行为动态异常或者乘客处于危险状态，信号处理装置向应急处理装置发送指示信号；
如果信号处理装置判定乘客的行为动态正常或者乘客未处于危险状态，但乘客在电梯轿厢内启动报警按钮或者3D体感摄影装置所采集的视频影像显示乘客长时间未离开电梯轿厢且电梯轿厢未收到开门指令，信号处理装置向应急处理装置发送指示信号；
如果乘客按下电梯轿厢内的紧急报警按钮，信号处理装置向应急处理装置发送指示信号；
如果信号处理装置接收到电梯故障监控设备发送的电梯故障信号，信号处理装置根据3D体感摄影装置将所采集的原始感测数据流判断电梯轿厢内是否有乘客；如果有乘客，信号处理装置向应急处理装置发送指示信号。
7.根据权利要求6所述的电梯轿厢内异常情况的监控方法，其特征在于：所述第四步中信号处理装置向应急处理装置发送指示信号之后，应急处理装置发出报警呼救信号并发送给电梯监控中心；电梯监控中心将报警呼救信号发送给救援机构和/或通知乘客家属；应急处理装置控制电梯轿厢的运行，使电梯轿厢停靠至最近楼层或基站，同时指示设置于电梯轿厢内的语音播报机构发出语音播报信号。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410408748.5A CN105347127B (zh) | 2014-08-19 | 2014-08-19 | 电梯轿厢内异常情况的监控系统及监控方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410408748.5A CN105347127B (zh) | 2014-08-19 | 2014-08-19 | 电梯轿厢内异常情况的监控系统及监控方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105347127A CN105347127A (zh) | 2016-02-24 |
| CN105347127B true CN105347127B (zh) | 2018-06-19 |
Family
ID=55323233
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410408748.5A Active CN105347127B (zh) | 2014-08-19 | 2014-08-19 | 电梯轿厢内异常情况的监控系统及监控方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105347127B (zh) |
Families Citing this family (57)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107000981B (zh) | 2014-11-26 | 2020-05-05 | 奥的斯电梯公司 | 基于乘客移动的电梯安全和控制系统 |
| CN106096831A (zh) * | 2016-06-08 | 2016-11-09 | 山西万立科技有限公司 | 高速公路文明服务综合评价系统 |
| DE102017209585A1 (de) * | 2016-06-08 | 2017-12-14 | Ford Global Technologies, Llc | System und verfahren zur selektiven verstärkung eines akustischen signals |
| CN106241534B (zh) * | 2016-06-28 | 2018-12-07 | 西安特种设备检验检测院 | 多人乘梯异常活动智能监控方法 |
| CN106241533B (zh) * | 2016-06-28 | 2018-10-30 | 西安特种设备检验检测院 | 基于机器视觉的电梯乘员综合安全智能监控方法 |
| CN106006266B (zh) * | 2016-06-28 | 2019-01-25 | 西安特种设备检验检测院 | 一种应用于电梯安全监控的机器视觉建立方法 |
| CN105967018A (zh) * | 2016-07-19 | 2016-09-28 | 宁夏电通物联网科技股份有限公司 | 电梯故障困人报警系统及方法 |
| CN106248415A (zh) * | 2016-08-16 | 2016-12-21 | 珠海格力电器股份有限公司 | 设备故障监控方法、装置及系统 |
| CN106600289A (zh) * | 2016-12-01 | 2017-04-26 | 合肥大多数信息科技有限公司 | 一种基于情感计算的智能坐席系统及其现实方法 |
| CN107117519A (zh) * | 2017-05-12 | 2017-09-01 | 长沙慧联智能科技有限公司 | 一种电梯及其运行状态监测方法 |
| CN107085717A (zh) * | 2017-05-24 | 2017-08-22 | 努比亚技术有限公司 | 一种家庭监控方法、服务端及计算机可读存储介质 |
| CN107055228A (zh) * | 2017-06-05 | 2017-08-18 | 合肥市闵葵电力工程有限公司 | 一种用于电梯的声控系统 |
| CN107244599A (zh) * | 2017-06-26 | 2017-10-13 | 广东工匠特种设备有限公司 | 一种多功能电梯 |
| CN107311002A (zh) * | 2017-06-26 | 2017-11-03 | 广东工匠特种设备有限公司 | 一种电梯 |
| CN109775501B (zh) * | 2017-11-10 | 2020-10-27 | 广东工匠特种设备有限公司 | 一种应用于电梯的投影触控物联网救援系统 |
| CN107758454A (zh) * | 2017-11-24 | 2018-03-06 | 安徽奥里奥克科技股份有限公司 | 基于智能终端的人梯信息交互系统 |
| CN108109338B (zh) * | 2017-12-27 | 2020-12-04 | 南京地平线机器人技术有限公司 | 异常报警方法、异常报警装置、和电子设备 |
| CN108483172A (zh) * | 2018-02-28 | 2018-09-04 | 武汉大学 | 一种智能化电梯轿厢安全监测与评估系统 |
| CN108382940B (zh) * | 2018-03-16 | 2020-04-03 | 深圳市敢为特种设备物联网技术有限公司 | 电梯运行安全监控方法、设备及可读存储介质 |
| CN108545557A (zh) * | 2018-05-30 | 2018-09-18 | 彭祥风 | 一种智能的升降电梯 |
| CN108675066A (zh) * | 2018-05-30 | 2018-10-19 | 彭祥风 | 一种升降电梯 |
| CN108750842A (zh) * | 2018-05-30 | 2018-11-06 | 彭祥风 | 一种基于乘客健康数据的升降电梯 |
| CN110767214A (zh) * | 2018-07-27 | 2020-02-07 | 杭州海康威视数字技术股份有限公司 | 语音识别方法及其装置和语音识别系统 |
| CN109165578A (zh) * | 2018-08-08 | 2019-01-08 | 盎锐（上海）信息科技有限公司 | 基于拍摄装置的表情检测装置及数据处理方法 |
| CN108840192A (zh) * | 2018-08-14 | 2018-11-20 | 北京瑞特森传感科技有限公司 | 一种电梯的监控方法、装置、电子设备及存储介质 |
| CN109052093A (zh) * | 2018-09-29 | 2018-12-21 | 浙江云安达物联信息技术有限公司 | 一种预警不当乘梯行为风险的方法及系统 |
| CN109326082B (zh) * | 2018-09-30 | 2021-05-07 | 珠海格力电器股份有限公司 | 安防监控方法、装置、系统、服务器和空调 |
| CN111273232B (zh) * | 2018-12-05 | 2023-05-19 | 杭州海康威视系统技术有限公司 | 一种室内异常情况判断方法及系统 |
| CN109607345A (zh) * | 2018-12-21 | 2019-04-12 | 北京联合大学 | 一种电梯反恐运行方法及系统 |
| CN109987469A (zh) * | 2019-04-13 | 2019-07-09 | 广东联合富士电梯有限公司 | 电梯乘客成像系统智能控制方案 |
| CN110083093A (zh) * | 2019-04-16 | 2019-08-02 | 上海新储集成电路有限公司 | 一种微型仿生机器人的控制系统及方法 |
| CN110002309A (zh) * | 2019-04-16 | 2019-07-12 | 杭州再灵云梯信息科技有限公司 | 电梯监控视频分析异常的诊断方法 |
| CN110092251A (zh) * | 2019-04-16 | 2019-08-06 | 杭州再灵云梯信息科技有限公司 | 电梯内多传感器信息融合方法 |
| CN110002310B (zh) * | 2019-04-24 | 2021-02-09 | 江苏中联智能工程有限公司 | 一种基于物联网的智能监控器 |
| CN110027956B (zh) * | 2019-04-29 | 2023-06-06 | 上海三菱电梯有限公司 | 乘客输送设备监控系统 |
| CN110334669B (zh) * | 2019-07-10 | 2021-06-08 | 深圳市华腾物联科技有限公司 | 一种形态特征识别的方法和设备 |
| CN110304513B (zh) * | 2019-07-11 | 2021-04-30 | 日立楼宇技术（广州）有限公司 | 一种避险方法、装置、终端设备及存储介质 |
| CN110414406A (zh) * | 2019-07-23 | 2019-11-05 | 广汽蔚来新能源汽车科技有限公司 | 车内对象监管方法、装置、系统、车载终端和存储介质 |
| CN110532951B (zh) * | 2019-08-30 | 2020-05-26 | 江苏航天大为科技股份有限公司 | 一种基于区间位移的地铁乘客异常行为分析方法 |
| CN110790102A (zh) * | 2019-10-12 | 2020-02-14 | 虏克电梯有限公司 | 一种在电梯内监测猥亵行为的方法 |
| CN110861988A (zh) * | 2019-12-23 | 2020-03-06 | 江苏省特种设备安全监督检验研究院 | 一种电梯异常的声纹识别及故障诊断监控报警系统 |
| CN111311466B (zh) * | 2020-01-23 | 2024-03-19 | 深圳市大拿科技有限公司 | 安全控制方法及装置 |
| CN111348512A (zh) * | 2020-03-10 | 2020-06-30 | 上海富士电梯有限公司 | 基于图像识别的电梯智能控制系统 |
| CN111285216A (zh) * | 2020-03-17 | 2020-06-16 | 苏州默顿快速电梯有限公司 | 一种电梯智能报警系统及其作用流程 |
| CN111591847B (zh) * | 2020-03-27 | 2024-04-30 | 重庆厚齐科技有限公司 | 一种电梯安全多媒体警示互动系统以及监测方法 |
| CN111559682B (zh) * | 2020-05-27 | 2021-06-04 | 江苏省特种设备安全监督检验研究院 | 一种特定情况下电梯困人远程救援系统及其方法与电梯 |
| CN111807170A (zh) * | 2020-06-22 | 2020-10-23 | Oppo（重庆）智能科技有限公司 | 电梯控制方法及电梯控制系统、电梯预约方法及移动终端 |
| CN112777445A (zh) * | 2020-12-29 | 2021-05-11 | 广州绰立科技有限公司 | 电梯响应救援方法及系统 |
| CN112530543B (zh) * | 2021-01-27 | 2021-11-02 | 张强 | 药品管理系统 |
| CN115367578A (zh) * | 2021-05-19 | 2022-11-22 | 成都鼎桥通信技术有限公司 | 电梯运行监控方法、装置、设备、存储介质及程序 |
| CN113353755B (zh) * | 2021-06-09 | 2023-02-03 | 揭阳市聆讯软件有限公司 | 一种电梯物联网应急救援智慧值守方法 |
| CN113830639B (zh) * | 2021-10-29 | 2023-03-28 | 杭州赛翔科技有限公司 | 别墅电梯乘客自动识别救援系统 |
| CN114148850B (zh) * | 2021-12-30 | 2023-05-16 | 重庆天智慧启科技有限公司 | 一种电梯智能管理系统及方法 |
| CN114538233B (zh) * | 2022-03-10 | 2022-10-25 | 阿特拉斯智能工程(南通)有限公司 | 一种基于大数据的仪表制造用检测系统 |
| CN114751274A (zh) * | 2022-05-07 | 2022-07-15 | 广东华凯电梯有限公司 | 用于电梯上主动预防乘客安全行为的监控方法 |
| CN115231398A (zh) * | 2022-07-05 | 2022-10-25 | 北京北投智慧城市科技有限公司 | 一种基于ai手势、语音识别的方法及系统 |
| CN116177337B (zh) * | 2022-12-07 | 2023-12-29 | 河南省特种设备安全检测研究院 | 一种多点分布式乘客异常行为电梯监测系统及方法 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11228046A (ja) * | 1998-02-16 | 1999-08-24 | Hitachi Ltd | エレベータの遠隔監視装置 |
| CN1754815A (zh) * | 2004-09-27 | 2006-04-05 | 东芝电梯株式会社 | 电梯的远程监视系统 |
| CN1919711A (zh) * | 2006-09-20 | 2007-02-28 | 浙江工业大学 | 基于图像、语音识别技术的电梯内防暴力装置 |
| JP4982072B2 (ja) * | 2005-11-09 | 2012-07-25 | 株式会社日立ビルシステム | エレベータのかご内監視装置、及び監視プログラム |
| CN103708314A (zh) * | 2012-10-05 | 2014-04-09 | 株式会社日立建筑系统 | 电梯异常监控装置 |
-
2014
- 2014-08-19 CN CN201410408748.5A patent/CN105347127B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11228046A (ja) * | 1998-02-16 | 1999-08-24 | Hitachi Ltd | エレベータの遠隔監視装置 |
| CN1754815A (zh) * | 2004-09-27 | 2006-04-05 | 东芝电梯株式会社 | 电梯的远程监视系统 |
| JP4982072B2 (ja) * | 2005-11-09 | 2012-07-25 | 株式会社日立ビルシステム | エレベータのかご内監視装置、及び監視プログラム |
| CN1919711A (zh) * | 2006-09-20 | 2007-02-28 | 浙江工业大学 | 基于图像、语音识别技术的电梯内防暴力装置 |
| CN103708314A (zh) * | 2012-10-05 | 2014-04-09 | 株式会社日立建筑系统 | 电梯异常监控装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105347127A (zh) | 2016-02-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105347127B (zh) | 电梯轿厢内异常情况的监控系统及监控方法 | |
| CN108382940B (zh) | 电梯运行安全监控方法、设备及可读存储介质 | |
| CN106241533B (zh) | 基于机器视觉的电梯乘员综合安全智能监控方法 | |
| US8044772B1 (en) | Expert system assistance for persons in danger | |
| CN111739256A (zh) | 在家发病或意外情况下紧急求救、快速救助方法和系统 | |
| CN112489368A (zh) | 智能跌倒识别与检测报警方法及系统 | |
| CN109887238A (zh) | 一种基于视觉和人工智能的跌倒检测系统及检测报警方法 | |
| CN111899466A (zh) | 一种在求助者周边就近求助救援的系统及方法 | |
| CN111382719A (zh) | 用于疫情防控的直梯乘梯人员佩戴口罩监测方法 | |
| CN112102585A (zh) | 一种应用于养老场所的智能行为分析系统 | |
| CN111285216A (zh) | 一种电梯智能报警系统及其作用流程 | |
| CN106205050A (zh) | 一种室内不活动感知报警系统及方法 | |
| CN113225363A (zh) | 一种智能养老系统及方法 | |
| CN212933288U (zh) | 一种用于智能电梯的安全管控平台系统 | |
| CN218220185U (zh) | 动脉硬化评估及心脏骤停应急培训一体化工作站 | |
| KR101629219B1 (ko) | 얼굴인식을 통해 이용을 제한하는 엘리베이터 감시장치 | |
| CN110002309A (zh) | 电梯监控视频分析异常的诊断方法 | |
| CN110711332A (zh) | 一种基于人工智能的消防预警灭火系统及方法 | |
| CN109815828A (zh) | 实现主动报警或求助行为检测控制的系统及方法 | |
| EP4019448A1 (en) | Passenger emergency detection system | |
| CN109264523A (zh) | 一种电梯的自动救援方法及系统 | |
| CN109300537A (zh) | 一种基于深度学习的独居老人异常表情识别及自动求助系统 | |
| CN113628413A (zh) | 穿脱防护服出现意外的自动报警求救技术 | |
| RU2673108C1 (ru) | Территориальная система экстренной кардиологической помощи | |
| KR102704269B1 (ko) | 인공지능(ai)를 이용한 수영장 안전관리 시스템 및 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |