CN107000982B - 与电梯交替交互的系统和方法 - Google Patents

与电梯交替交互的系统和方法 Download PDF

Info

Publication number
CN107000982B
CN107000982B CN201580065098.1A CN201580065098A CN107000982B CN 107000982 B CN107000982 B CN 107000982B CN 201580065098 A CN201580065098 A CN 201580065098A CN 107000982 B CN107000982 B CN 107000982B
Authority
CN
China
Prior art keywords
elevator
computer
car
elevator car
emotions
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580065098.1A
Other languages
English (en)
Other versions
CN107000982A (zh
Inventor
伯诺伊特·雷格雷特
马丁·海勒布兰特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inventio AG
Original Assignee
Inventio AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inventio AG filed Critical Inventio AG
Publication of CN107000982A publication Critical patent/CN107000982A/zh
Application granted granted Critical
Publication of CN107000982B publication Critical patent/CN107000982B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66BELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B1/00Control systems of elevators in general
    • B66B1/24Control systems with regulation, i.e. with retroactive action, for influencing travelling speed, acceleration, or deceleration
    • B66B1/2408Control systems with regulation, i.e. with retroactive action, for influencing travelling speed, acceleration, or deceleration where the allocation of a call to an elevator car is of importance, i.e. by means of a supervisory or group controller
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66BELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B1/00Control systems of elevators in general
    • B66B1/34Details, e.g. call counting devices, data transmission from car to control system, devices giving information to the control system
    • B66B1/46Adaptations of switches or switchgear
    • B66B1/468Call registering systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66BELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B5/00Applications of checking, fault-correcting, or safety devices in elevators
    • B66B5/0006Monitoring devices or performance analysers
    • B66B5/0012Devices monitoring the users of the elevator system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66BELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B5/00Applications of checking, fault-correcting, or safety devices in elevators
    • B66B5/02Applications of checking, fault-correcting, or safety devices in elevators responsive to abnormal operating conditions
    • B66B5/021Applications of checking, fault-correcting, or safety devices in elevators responsive to abnormal operating conditions the abnormal operating conditions being independent of the system
    • B66B5/025Applications of checking, fault-correcting, or safety devices in elevators responsive to abnormal operating conditions the abnormal operating conditions being independent of the system where the abnormal operating condition is caused by human behaviour or misbehaviour, e.g. forcing the doors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66BELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B2201/00Aspects of control systems of elevators
    • B66B2201/40Details of the change of control mode
    • B66B2201/405Details of the change of control mode by input of special passenger or passenger group
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B66HOISTING; LIFTING; HAULING
    • B66BELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B2201/00Aspects of control systems of elevators
    • B66B2201/40Details of the change of control mode
    • B66B2201/46Switches or switchgear
    • B66B2201/4607Call registering systems
    • B66B2201/4676Call registering systems for checking authorization of the passengers

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Indicating And Signalling Devices For Elevators (AREA)
  • Elevator Control (AREA)

Abstract

一种电气或机电设备(1),包括用于控制电气或机电设备(1)的操作的中央处理器(12);通信联接到中央处理器(12)以将控制信号输出到中央处理器(12)的计算机(8);和通信联接到计算机(8)以将图像信号输出到计算机(8)的第一摄像机(4,6)。计算机(8)具有存储器(28),存储计算机指令(28)以根据包括在图像信号中的人脸数据来确定面部特征,将面部特征分类为预定情绪类别中的至少一个,并且生成对应于预定情绪类别中的至少一个的控制信号。中央控制器(12)根据多种操作模式之一操作电气或机电设备(1),其中根据控制信号选择多个操作模式中的一种。

Description

与电梯交替交互的系统和方法
技术领域
本文描述的各种实施例通常涉及需要与人交互的机电或电气设备,例如电梯设备。更具体地,这里描述的各种实施例涉及机电或电气设备以及用于操作具有改进的人机交互的机电或电气设备的方法。
背景技术
在机电或电气设备中,用户通常经由人机界面(例如,具有按键或按钮的操作面板或触摸屏)与设备进行交互。例如,在电梯设备中,电梯用户经由操作终端(也称为固定装置)与电梯交互。操作终端可以位于电梯轿厢内以进行轿厢呼叫(即,进入目的地楼层),另一个操作终端则位于每个楼层以输入大厅呼叫(即,通过按“向上”或“向下”按钮呼叫轿厢)。相比之下,在具有目的地控制系统的设备中,在进入电梯轿厢之前,目的地楼层已经进入楼层终端。不管在电梯设备中实施什么样的控制,通常经由固定装置/操作面板发生电梯用户与电梯之间的交互,即使使用RFID卡来呼叫电梯时也是如此。
用户与机电或电气设备之间的交互与机电或电气设备的专用目的有关。例如,在电梯设备中,专用目的是将用户从一个楼层运送到另一楼层。某些设备在专用目的基础上扩张以提供额外的交互。例如,US 8,260,042公开了一种电梯设备用于安全跟踪的匿名乘客索引系统,其中的视频处理器使用每个乘客的颜色指数分析来匿名监视乘客。根据每个乘客的被监视位置,对位置、方向、速度和预计到达时间等数据参数进行计算。电梯控制器根据数据参数控制电梯调度、门操作和安全功能。
此外,US 7,298,256描述了一种危机监视系统,其通过从人的话语中识别人的情绪来检测危机。记录单元记录情绪属性信息,其包括音频信号(即,人的语音)中的特定情绪的特征,并且控制单元通过分析情绪属性信息来确定人的情绪。当所确定的情绪指示危机情况时,执行包括提醒控制中心或安全公司的紧急程序。
在WO 2009/116030中的访问控制系统的背景下也公开了分析语音输入以确定人的心理状态或情绪。系统在检查站询问一个人以确定该人的身份并决定是否准许出现在检查点的人访问。
鉴于这些系统,需要一种提供额外交互的技术。
发明内容
因此,这种替代技术的方面涉及一种操作电气或机电设备的方法。在计算机上接收来自摄像机的图像信号,并且使用计算机确定图像信号中包含的人脸数据的面部特征。使用计算机将面部特征分类为预定情绪类别中的至少一个,并且由计算机生成与预定情绪类别中的至少一个相对应的控制信号。根据多种操作模式之一,中央控制器操作电气或机电设备,其中根据控制信号选择多个操作模式中的一种。
另一方面涉及电气或机电设备,其具有用于控制电气或机电设备的操作的中央处理器,通信联接到中央处理器以将控制信号输出到中央处理器的计算机,以及通信联接到计算机以将图像信号输出到计算机的第一视频摄像机。计算机包括存储计算机指令的存储器,用于根据包括在图像信号中的人脸数据确定面部特征,以便将面部特征分类为预定情绪类别中的至少一个,并且产生对应于预定情绪类别中的至少一个的控制信号。中央控制器根据多种操作模式之一操作电气或机电设备,其中根据控制信号选择多个操作模式中的一种。
简而言之,本文描述的技术提供了与人交互的替代方式。这种交互可以在没有人积极参与交互时发生。因此,该人的面部表情可能是真实的,并反映了该人的实际情绪状态。确定情绪状态可以调整设备的操作模式以适应于某些情况。在一个实施例中,该人是电梯设备的电梯轿厢中的乘客。从心理的角度来看,使用电梯对一些乘客而言因轿厢的狭窄空间和与其它乘客的靠近而具有挑战性。如果这些乘客及其情绪状态被识别,可以调整操作模式,使电梯的使用更加愉快。此外,可以尽早辨别和解决由于例如具有侵略行为的愤怒乘客而引起的潜在风险。例如,这样的乘客可被特殊对待,例如,加快服务而不停止,或者被发现有安全风险时被禁止使用电梯。
附图说明
下面的权利要求中阐述改进的技术特征的新颖属性和方法步骤。然而,可通过参考以下结合附图阅读的详细描述最好地理解改进的技术本身以及其它特征和优点,在附图中:
图1示出了作为电气或机电设备的一个示例的电梯设备的示意图;
图2是在图1的电气或机电设备中使用的计算机的一个实施例的示意图;和
图3是示出操作电气或机电设备的一个实施例的示例性流程图。
具体实施方式
图1示出了作为电气或机电设备的一个示例的电梯设备1的一个实施例。本文中参考允许用户交互以提供在建筑物2的楼层L1、L2、L3之间的运输的电梯设备1描述了改进技术的多个实施例。然而,预期该技术可以应用于通常需要用户交互的其它电气或机电设备,例如建筑物访问系统,公共交通系统或安全/监控系统。
如本文所使用的,用户交互意味着用户与电气或机电设备之间的任何交互,无论是有意的还是无意的,有意识的还是无意识的。有意的交互的例子是在人机界面处输入命令,例如通过按下按钮、触摸传感器、出示信息载体(例如具有条形码或RFID应答器的装置)或说出命令。相比之下,被公共场所(包括电梯厅)中的摄像机观察可能是无意的,有意识的或无意识的。这种交互可能导致由电气或机电设备执行某动作(例如报警,操作改变)。
在图1中,建筑物用户和乘客可以使用电梯设备1到达建筑物2的各个楼层L1、L2、L3。根据建筑物2的特定配置,楼层L1可以是办公楼或酒店的大厅。在所示实施例中,电梯系统1包括电梯轿厢10和中央控制器12(也称为电梯控制器12(EC)),其作用在驱动器14上以移动电梯轿厢10,例如由电梯井18中的一个或多个张紧构件16悬挂,从楼层L1、L2、L3中的一个移动到另一个。张紧构件16可以是具有圆形横截面的钢丝绳或具有例如矩形的非圆形横截面的嵌入合成材料中的一组(钢或非金属)绳索。
电梯设备1的一般物理结构对应于常规电梯设备的物理结构。在一个实施例中,物理结构除了所提到的元件(中央控制器12,驱动器14和张紧构件16)之外还包括配重、用于电梯轿厢10和配重的导轨、诸如用于门机构的制动器和安全电路的安全设备等。为了说明的目的,这些元件未示出。可以想到,根据电梯设备1的具体实施例,这些元件在井18中的配置和布置可以变化。例如,驱动器14可以布置在单独的机房中,或者直接设置在(“没有机房的电梯”)井18的顶部,如图所示,或井18的底部。这种电梯设备1的操作对于本领域技术人员是已知的,因此这里不再描述。
图1的电梯设备1包括用于捕获用户的至少一个参数的系统。在一个实施例中,这样的用户参数捕获系统基于数字视频技术来产生对应于单个图像或图像序列(帧)的图像信号,即视频序列。为此,可以使用摄像机4,其可以被操作以产生单独的图像或视频序列。可以实时地处理图像信号。图像或视频序列可以存储在摄像机4的内部存储介质上或被发送到外部存储介质。
摄像机4可以安装在每个楼层L1、L2、L3上,如图1所示。然而,在另一实施例中,楼层L1、L2、L3中的一些可能不配备摄像机4。在某些建筑物2中,只在例如楼层L1的大厅中具有摄像机4就足够了。附加的摄像机6可以位于电梯轿厢10内,如图1所示。在这样的实施例中,指示器6b可以位于电梯轿厢10的内部,以便当摄像机6正在记录时通知乘客。视频摄像机4、6通信联接到计算机8,计算机8控制摄像机4、6的操作并从它们接收传送的视频信息(即,图像信号)。如下面更详细地描述的,计算机8处理该视频信息并在特定情况下产生用于电梯控制器12的控制信号。为此,计算机8通信联接到电梯控制器12。
本文所使用的通信连接或联接是直接或间接连接,其实现两个实体之间的单向或双向通信。通过这种连接或联接,以本领域技术人员已知的方式传输数据信号和/或控制信号。连接或联接可以通过电气布线系统(作为点到点连接的系统或作为电气总线系统,其中连接到总线系统的实体可以被寻址)、无线电系统或者无线电系统与电气布线系统的组合来实现。图1示出了通过线20、22的示例性通信联接,其中线20在计算机8和电梯轿厢10之间延伸,并且线22在计算机8和摄像机4之间延伸。在一个实施例中,线22是连接摄像机4的总线系统。
本领域技术人员认识到,计算机8或其控制摄像机4、6并执行专用软件程序的功能可以例如在电梯控制器12或建筑物2的另一电气部件中实现,例如,在控制对建筑物2的楼层L1、L2、L2和/或房间的访问的访问控制系统中实现。在这种情况下,图1中可以省略单独示出的计算机8。根据具体实施例,通信连接或联接的实施相应地改变。原则上,图1因此被视为示例性实施例。还可以设想,视频监视器(未示出)可存在于建筑物2内或一远程位置,显示全部或所选择的视频记录(例如,来自建筑物2以允许安全人员监视建筑物2)。
图1还示出了通信联接到电梯控制器12和计算机8的输入装置5、7。在每个楼层L1、L2、L3上,输入装置5被定位成允许人与电梯设备1交互,例如用于呼叫电梯。输入装置7位于电梯轿厢10的内部,并且可实施为容纳摄像机6指示器6b和输入装置7的操作面板的一部分。操作面板存在各种设计选项;它可以具有玻璃的正面,其后面布置有摄像机6、指示器6b和输入装置7的一些或全部部件。如果玻璃正面从轿厢地板延伸到轿厢天花板,则摄像机6可以位于操作面板的上端,使得摄像机6具有对电梯轿厢10内部的优化视角。在该情况下,摄像机6位于靠近天花板的位置,以从升高的位置提供视频记录。在这种情况下,摄像机的视野被电梯轿厢10内的乘客阻挡得最少。靠近天花板的摄像机6可能接触不到,从而降低了破坏的风险。覆盖摄像机6或将其放置在玻璃正面的后方进一步降低了损坏的风险。预期对安装在楼层L1、L2、L3处的摄像机4给予相同的位置和保护方面的考虑。
在一个实施例中,输入装置7可包括允许乘客输入轿厢呼叫的键盘,即,在进入电梯轿厢10之后,乘客可以经由键盘输入目的地楼层。在这样的实施例中,楼层L1、L2、L3上的输入装置5可以具有上/下按钮以允许等待的乘客呼叫电梯。在另一个实施例中,电梯设备1可以配备有目的地呼叫控制系统。这样的系统允许人登上电梯轿厢10之前经由已经处于楼层L1、L2、L3上的输入装置5输入目的地楼层。
输入装置5或输入装置7或两者可以配置成从人/乘客携带的信息载体读取信息。为此,相应的输入装置5、7配备有读取器,用于当将信息载体被出示给读取器时从该信息载体读取数据。读取的数据可以表示授权操作输入装置5、7或目的地呼叫,或两者兼有。在一个实施例中,信息载体具有对应于信用卡或员工装置的形式因素。根据特定配置,信息载体包括通向信息载体表面的嵌入式存储器芯片、与存储芯片相连的嵌入式RFID应答器、表面上的光学代码(例如,条形码或QR码)、或这些技术的组合。在替代方案中,信息载体的功能可以在便携式电子设备(例如,移动电话、智能电话或平板PC)中实现。这些设备可以显示光学代码,并且还可以允许使用诸如蓝牙或NFC(近场通信)之类的已知技术的其它电子设备进行无线电通信。可以设想,读取器与信息载体使用的一种或多种技术兼容。
图2示出了可以与本文公开的一种或多种技术一起使用的计算机8(例如,访问控制系统控制单元的一部分、电梯控制器12的一部分、读取器的一部分、数据库的一部分)的示例性实施例的框图。计算机8包括一个或多个处理器24。处理器24联接到存储器26,存储器26包括存储软件指令28和数据库的一个或多个计算机可读存储介质。计算机可读存储介质可以包括例如光盘、易失性存储器组件(例如DRAM或SRAM)或非易失性存储器组件(例如硬盘、闪存RAM或ROM)中的一个或多个。
当由处理器24执行时,软件指令28使处理器24执行本文公开的一个或多个方法步骤。计算机8的其它实施例可以包括一个或多个附加部件。计算机8可以通过输入/输出部件(接口)30连接到一个或多个其它计算机或电子装置。在至少一些实施例中,计算机8可以通过网络连接到其它计算机或电子装置。在特定实施例中,计算机8与可位于本地、远程或二者兼有的一个或多个其它计算机一起工作。因此可以使用分布式计算系统来执行一个或多个所公开的方法。
通过理解结合图1和图2描述的电梯设备1的结构及其部件的功能,图3描述了操作电梯设备1的方法的各种实施例。该图描述了操作电梯设备1的方法的示例性流程图。
参见图3,该方法在步骤S1开始,并在步骤S7结束。在步骤S2,接收图像信号。在一个实施例中,计算机8从其中一个楼层L1、L2、L3上的摄像机4之一接收图像信号。图像信号表示一个图像或一系列视频图像(例如,视频帧序列)。视频摄像机4、6可以无论电梯设备1的实际操作状态如何而一直运行。在另一个实施例中,摄像机4、6可通过特定事件触发而被激活。例如,当在楼层L1、L2、L3或电梯轿厢10中检测到移动时,或者根据(例如,通过安全人员)命令来激活摄像机4、6。
在步骤S3中,从图像信号中包含的人脸数据确定面部特征。面部特征是使用存储在计算机8的存储器28中的计算机指令28和数据库从人的面部表情得出的。例如,在Shichuan Du等人于2014年3月31日在线发表在www.pnas.org/cgi/doi/10.1073/pnas.1322355111,E1454-E1462页的“Compound Facial Expressions of Emotion”中描述了情绪的面部表情的计算机辅助分析。该出版物描述了一种计算机模型,允许识别21种不同的情绪的面部表情,包括快乐、愉快地惊讶、愉快地厌恶、惊讶、悲伤、恐惧、悲伤地恐惧、恐惧地愤怒、恐惧地惊讶、愤怒、悲伤地愤怒、仇恨、厌恶、惊骇和敬畏。为此,出版物使用由一组动作单元给出的面部动作编码系统。每个动作单元编写通常在产生情绪的面部表情时看到的个体或群体肌肉的基本动作。作为该模型的潜在应用,该出版物提到了精神疾病(如精神分裂症)、认知障碍(例如自闭症)和疼痛研究的诊断和治疗。计算机8基于该计算机模型执行人的面部表情的分析。
根据特定的软件配置,计算机8的计算机指令28和数据库可以首先对所接收的图像信号进行分析,以确定人脸部在图像中的位置。例如,在US 8,494,231B2中描述了使用计算机来定位视频图像中的面部。在识别视频中的面孔的情况下,US 8,494,231描述了通过具有执行面部检测、面部跟踪、面部分组和面部识别以产生面库的集成模块的处理管线来运行按需输入视频。在更理论的层面上,用于检测图像中脸部位置的算法在J.Huang 等人的“Automatic Face and Gesture Recognition”,第248-252页,Proceedings of theSecond International Conference on Automated Face and Gesture Recognition,14-16 Oct 1996中有所描述。一旦脸部被定位,可通过计算机8分析该人的面部表情。
在一个实施例中,针对电梯设备1中的具体应用对各种面部表情和相关情绪进行分类。这是基于以下假设:某些情绪可能或多或少地涉及该特定电梯应用。例如,一个快乐的人可能不会造成任何担忧,但一个愤怒的人在必须与电梯轿厢10中的几个乘客同行时可能造成担忧。
进行步骤S4,评估确定的面部特征以确定它们是否适合于所定义的情绪类别之一。如果面部特征适合,则该方法沿着YES分支进行到步骤S5。在步骤S5中,计算机8生成与面部特征适合的类别相关联的控制信号。
在某些情况下,所确定的面部特征可能不适于所定义的类别之一。例如,因为人将脸部转离摄像机4、6或者因为现场的不良照明而使图像信号不允许对脸部进行明确的检测时可能会发生这种情况。为了避免由现场不良照明造成不能明确检测的情况,由摄像机4、6观察的区域应被充分照明。在这种情况下,在一个实施例中,计算机8设置为不向人员分配面部特征;这在此处被看作是“不适合”。在这种情况下,该方法通过NO分支返回到步骤S3。
在一个实施例中,电梯设备1可以根据多个操作模式之一来操作。每个操作模式与特定的控制信号相关联。在步骤S5中产生的控制信号确定要选择哪个操作模式,以便根据控制信号选择操作模式。进入步骤S6,中央控制器12根据所选择的操作模式操作电气或机电设备1。
对于电梯设备1的每个操作模式,限定具体的设定或参数来确定乘客的情绪状态。示例性设定和参数在下表(表格1)中列出。然而,可以设想,可以根据特定实施例(例如在繁忙的办公楼中,高峰时间,单个设定如温度可能不合适)来实施其它措施。此外,可以设想限定其它类别和/或面部特征。
Figure BDA0001309201280000081
Figure BDA0001309201280000091
表格1
在表1的非限制性示例中,示出了四种情绪类别。第一类被定义为中性,包括例如快乐、愉快地惊讶、愉快地厌恶和惊讶的情绪。当面部特征适合于第一情绪类别时,选择第一操作模式。在第一操作模式中,中央控制器12根据预定的第一操作设定操作电气或机电设备1,其中第一操作设定对应于预定义的正常操作设定。第一类中的情绪被视为不需要特定的设置或参数,因此设备1根据其正常设定来运行。例如,显示第一类别的情绪的乘客可被分配任一可用轿厢10而不考虑影响性能(例如,服务时间、占用度)或环境(例如,电梯轿厢10内的照明/光、声音(音乐)、音频/视频(多媒体)或温度)的设置或参数。
第二类包括悲伤和恐惧的情绪,包括悲伤地恐惧、恐惧地愤怒和恐惧地惊讶的情绪。当面部特征适合于第二情感类别时,选择第二操作模式。在第二操作模式中,中央控制器12根据修改电气或机电设备1的环境参数的预定的第二操作设定来操作电气或机电设备1。例如,显示第二类情绪的乘客可能比显示第一类情绪的乘客需要更多关注以使电梯旅行更愉快和享受。可能影响乘客情绪的环境参数包括电梯轿厢10内的光、声音(音乐)、音频/视频(多媒体)或温度。
第三类包括愤怒和仇恨情绪,其中包括类似悲伤地愤怒的情绪。当面部特征适合第三情感类别时,选择第三种操作模式。在第三操作模式中,中央控制器12根据影响电气或机电设备1的性能的预定的第三操作设定操作电气或机电设备1。例如,愤怒或仇恨的乘客可能在拥挤的电梯轿厢10内显示出攻击性行为车10并影响其他乘客。为了避免这种情况,可通过将空轿厢10分配给该乘客来为其更好地服务。替代地,除了以前的措施之外,还可以首先处理愤怒乘客的呼叫,以减少该乘客的等待时间。此外,可以提供中间不停的行程。整体考虑设备1,这些措施影响其性能。在某些情况下,性能下降,因为其他乘客由于中间不停的行程而必须等待更长时间。
第四类包括厌恶和惊骇的情绪,包括类似敬畏的情绪。当面部特征符合第四情感类别时,选择第四种操作模式。在第四操作模式中,中央控制器12根据修改电气或机电设备1的环境参数的预定的第四操作设定操作电气或机电设备1。环境参数可以是结合第二操作模式所描述的那些环境参数。
在一个非限制性示例中,电梯设备1配备有目的地控制系统,并且具有可用于处理运输量的多个电梯轿厢10。在这样的环境中,一个人接近安装有摄像机4的停在楼层L1、L2、L3上的电梯。用户向位于该楼层L1、L2、L3上的输入装置5的读取器出示电子卡(RFTD卡)。读卡器从卡上读取凭证信息(在这种情况下,是与该人及目的地楼层相关联的识别号码),并将该信息发送到电梯控制器12。电梯控制器12使用该信息来确定该人被授权使用电梯,并分配电梯轿厢10来服务于该人的呼叫。
当该人在等待时,计算机8执行计算机指令28,确定该人的面部特征,将其分配到一个类别,并选择用于该类别的最合适的操作模式。例如,如果该人愤怒或似乎是仇恨(第三类),这可能引起压力,则计算机8产生设定第三操作模式的控制信号。该模式被设置为优化提出呼叫与到达目的地楼层之间的电梯运行时间。该时间可以称为电梯行程的“服务时间”。在一个实施例中,该模式需要中间不停地立即服务,以使(愤怒的,有压力的)人被尽快地运送到目的地楼层。
在另一个非限制性示例中,电梯轿厢10可能例如在楼层L1、L2、L3之间的行程过程中停止,而不打开门。在这种情况下,通常需要一段时间,直到服务人员到达现场才能解决问题。虽然电梯轿厢10中的每个人都知道援助马上就到,但是一个人可能无法容忍被卡在这种狭窄空间内,无论是独自一人还是与陌生人一起。在摄像机6处于工作状态时,计算机8可以确定一个人是否将要失控,例如变得愤怒(第三类)或恐惧(第二类)。如果早期检测到这种情况,则计算机8可以产生设置最合适的操作模式的控制信号。例如,关于第二和第三类别和相应的操作模式,计算机8可以启动与轿厢10内部的沟通,诸如提供具有指令和/或信息的通知。例如,可以提供关于服务技术人员何时到达的信息,或者如果电梯轿厢10内有多媒体系统可用,则可以在地图上示出服务技术人员的位置。有这样的信息可能会安慰和/或分散乘客的注意力。
虽然本文公开的各种方法的一些实施例被描述为包括一定数量的方法步骤,但是给定方法的其它实施例可以包括比本文明确公开的更多或更少的方法步骤。在附加实施例中,方法步骤以除了本文所公开的顺序以外的顺序执行。在某些情况下,两个或多个方法步骤可以组合成一个方法步骤。在某些情况下,一个方法步骤可以分为两个或多个方法步骤。
已经说明和描述了所公开的技术的原理,对于本领域技术人员显而易见的是,在不脱离这些原理的情况下,所公开的实施例可以在布置和细节上进行修改。鉴于可应用所公开技术的原理的许多可能的实施例,应当认识到,所示实施例仅是技术的示例,并且不应被认为是对本发明的范围的限制。相反,本发明的范围由所附权利要求及其等同物限定。因此,我声明在这些权利要求的范围中的全部都属于我的发明。

Claims (10)

1.一种运行电梯设备(1)的方法,包括:
在计算机(8)处从摄像机(4,6)接收图像信号;
使用所述计算机(8)从所述图像信号中包含的人脸数据确定面部特征;
使用所述计算机(8)从所述面部特征识别出包括愤怒和仇恨情绪的情绪类别;
由所述计算机(8)产生对应于所述包括愤怒和仇恨情绪的情绪类别的控制信号;和
由电梯控制器(12)运行所述电梯设备(1),其中根据所述控制信号选择以下操作模式:
使得具有愤怒和仇恨情绪的乘客被分配给空轿厢、或首先处理所述乘客的呼叫请求、或给所述乘客提供中间不停的行程、或禁止所述乘客使用电梯设备(1)。
2.根据权利要求1所述的方法,其中,所述电梯控制器(12)控制电梯设备(1)的电梯轿厢(10)的操作,其中,所述电梯轿厢(10)可在建筑物(2)的楼层(L1,L2,L3)之间移动。
3.根据权利要求2所述的方法,其中,为所述电梯轿厢(10)限定关于所述电梯轿厢(10)内的温度、照明、声音和多媒体中的至少一个的环境参数。
4.根据权利要求2或3所述的方法,其中,所述电梯设备(1)的性能参数包括电梯行程的服务时间和所述电梯轿厢(10)的占用率中的至少一个。
5.一种使用权利要求1所述的方法的电梯设备(1),包括:
用于控制电梯设备(1)的运行的电梯控制器(12);
通信联接到电梯控制器(12)以将控制信号输出到电梯控制器(12)的计算机(8);
通信联接到计算机(8)以将图像信号输出到计算机(8)的第一摄像机(4,6);
其中,所述计算机(8)包括存储器(28),所述存储器(28)存储计算机指令(28)以由所述图像信号中包含的人脸数据来确定面部特征,从所述面部特征识别出包括愤怒和仇恨情绪的情绪类别,并且生成对应于所述包括愤怒和仇恨情绪的情绪类别的控制信号;并且
其中,所述电梯控制器(12)运行电梯设备(1),其中根据所述控制信号选择以下操作模式:
使得具有愤怒和仇恨情绪的乘客被分配给空轿厢、或首先处理所述乘客的呼叫请求、或给所述乘客提供中间不停的行程、或禁止所述乘客使用电梯设备(1)。
6.根据权利要求5所述的设备,包括定位在电梯井中以在建筑物(2)的楼层(L1、L2、L3)之间行进的电梯轿厢(10),其中,所述第一摄像机(4,6)位于电梯轿厢(10)的内部。
7.根据权利要求5所述的设备,包括定位在电梯井中以在建筑物(2)的楼层(L1、L2、L3)之间行进的电梯轿厢(10),其中,所述第一摄像机(4,6)位于楼层(L1、L2、L3)上电梯轿厢(10)的外部。
8.根据权利要求5所述的设备,包括定位在电梯井中以在建筑物(2)的楼层(L1、L2、L3)之间行进的电梯轿厢(10)和第二摄像机(4,6),其中,第一摄像机(6)位于电梯轿厢(10)的内部,并且其中,第二摄像机(4)位于楼层(L1,L2,L3)上电梯轿厢(10)的外部。
9.根据权利要求6至8中任一项所述的设备,其中,所述电梯控制器(12)控制为电梯轿厢(10)限定的关于所述电梯轿厢(10)内的温度、照明、声音和多媒体中的至少一个的环境参数。
10.根据权利要求7或8中任一项所述的设备,其中,所述电梯控制器(12)控制包括电梯行程的服务时间和所述电梯轿厢(10)的占用率中的至少一个的性能参数。
CN201580065098.1A 2014-12-03 2015-12-03 与电梯交替交互的系统和方法 Active CN107000982B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP14196092 2014-12-03
EP14196092.2 2014-12-03
PCT/EP2015/078441 WO2016087557A1 (en) 2014-12-03 2015-12-03 System and method for alternatively interacting with elevators

Publications (2)

Publication Number Publication Date
CN107000982A CN107000982A (zh) 2017-08-01
CN107000982B true CN107000982B (zh) 2020-06-09

Family

ID=52011042

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580065098.1A Active CN107000982B (zh) 2014-12-03 2015-12-03 与电梯交替交互的系统和方法

Country Status (6)

Country Link
US (1) US10457521B2 (zh)
EP (1) EP3227828B1 (zh)
CN (1) CN107000982B (zh)
AU (3) AU2015357147A1 (zh)
CA (1) CA2967723C (zh)
WO (1) WO2016087557A1 (zh)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2015263303A1 (en) * 2014-05-23 2016-12-15 Inventio Ag Configuring terminal devices
EP3227828B1 (en) * 2014-12-03 2023-10-04 Inventio Ag System and method for alternatively interacting with elevators
EP3299326A1 (en) 2016-08-24 2018-03-28 Otis Elevator Company Communication with a trapped passenger in a transportation system
WO2018075463A1 (en) * 2016-10-17 2018-04-26 Otis Elevator Company Elevator systems and methods of controlling elevators responsive to detected passenger states
US10544007B2 (en) * 2017-03-23 2020-01-28 International Business Machines Corporation Risk-aware management of elevator operations
MX2019012159A (es) * 2017-04-10 2019-11-21 Inventio Ag Sistema de control de acceso teniendo reconocimiento por radio y facial.
CN111212802B (zh) * 2017-10-30 2021-06-29 株式会社日立制作所 电梯使用日志输出系统以及电梯使用日志输出方法
US10961082B2 (en) * 2018-01-02 2021-03-30 Otis Elevator Company Elevator inspection using automated sequencing of camera presets
US11040851B2 (en) * 2018-04-26 2021-06-22 Otis Elevator Company Elevator system passenger frustration reduction
CN110526058B (zh) * 2018-05-23 2022-06-03 奥的斯电梯公司 电梯门监控系统、电梯系统和电梯门监控方法
CN109711299A (zh) * 2018-12-17 2019-05-03 北京百度网讯科技有限公司 车辆客流统计方法、装置、设备及存储介质
CN110738777A (zh) * 2019-09-27 2020-01-31 恒大智慧科技有限公司 物业管理方法和系统、存储介质
CN111232788B (zh) * 2020-02-13 2021-07-20 江苏弘冉智能科技有限公司 一种电梯全要素健康及安全监控系统
CN115427335A (zh) * 2020-04-29 2022-12-02 通力股份公司 一种生成非接触式电梯呼叫的方案
CN111960226B (zh) * 2020-08-14 2021-11-16 安徽迅立达电梯有限公司 一种基于数据采集的电梯内部环境调节系统
WO2022038303A1 (en) * 2020-08-19 2022-02-24 Kone Corporation Controlling audio-visual stimuli inside an elevator car
CN114074864A (zh) * 2020-08-20 2022-02-22 通力电梯有限公司 电梯控制方法、电梯控制系统和电梯系统
CN112950413A (zh) * 2021-03-18 2021-06-11 浙江三锁实业有限公司 一种楼宇智能管理方法、装置、智能终端及存储介质
CN113968529B (zh) * 2021-10-13 2023-04-14 上海梯之星信息科技有限公司 电梯安全提醒方法及装置

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002056251A1 (fr) * 2000-12-27 2002-07-18 Mitsubishi Denki Kabushiki Kaisha Dispositif de traitement d'images et ascenseur sur lequel il est monte
WO2004012142A1 (ja) * 2002-07-26 2004-02-05 Mitsubishi Denki Kabushiki Kaisha 画像処理装置
JP4627152B2 (ja) * 2004-06-01 2011-02-09 三星電子株式会社 危機監視システム
KR101171032B1 (ko) 2006-08-25 2012-08-03 오티스 엘리베이터 컴파니 목적지 입력 급송 작동들에서의 보안 추적을 위한 익명 승객 인덱싱 시스템
JP4906490B2 (ja) * 2006-12-13 2012-03-28 株式会社日立製作所 エレベーター情報表示装置
IL190232A (en) 2008-03-17 2013-05-30 Fst21 Ltd Automatic / Semi-automatic incoming sorting system and method
CN101853623A (zh) * 2009-04-03 2010-10-06 鸿富锦精密工业(深圳)有限公司 影像监控系统及具有该系统的资讯显示系统
CN101734527A (zh) 2009-12-31 2010-06-16 上海杰远环保科技有限公司 一种人脸识别电梯预定系统及其实现方法
CN102741146B (zh) * 2010-02-23 2015-06-10 三菱电机株式会社 电梯装置
TWI411978B (zh) * 2010-04-14 2013-10-11 Hon Hai Prec Ind Co Ltd 電梯安全監控系統及方法
CN102858670B (zh) 2010-04-20 2014-08-13 三菱电机株式会社 电梯呼梯登记装置
US8494231B2 (en) 2010-11-01 2013-07-23 Microsoft Corporation Face recognition in video content
TW201220216A (en) * 2010-11-15 2012-05-16 Hon Hai Prec Ind Co Ltd System and method for detecting human emotion and appeasing human emotion
JP5806916B2 (ja) * 2011-11-22 2015-11-10 株式会社日立製作所 エレベーターのセキュリティシステム
US20150054616A1 (en) 2012-02-14 2015-02-26 Fst21 Ltd. System and method for entrance control to secured premises
JP5877135B2 (ja) * 2012-07-20 2016-03-02 株式会社日立製作所 画像認識装置及びエレベータ装置
CN103896141A (zh) * 2012-12-30 2014-07-02 天津联一科技有限公司 基于图像处理技术的电梯门系统新型系统
EP3227828B1 (en) * 2014-12-03 2023-10-04 Inventio Ag System and method for alternatively interacting with elevators
US9610510B2 (en) 2015-07-21 2017-04-04 Disney Enterprises, Inc. Sensing and managing vehicle behavior based on occupant awareness

Also Published As

Publication number Publication date
EP3227828B1 (en) 2023-10-04
CA2967723A1 (en) 2016-06-09
WO2016087557A1 (en) 2016-06-09
AU2015357147A1 (en) 2017-06-29
AU2018282280A1 (en) 2019-01-17
US10457521B2 (en) 2019-10-29
CN107000982A (zh) 2017-08-01
US20170362054A1 (en) 2017-12-21
CA2967723C (en) 2023-05-23
EP3227828A1 (en) 2017-10-11
AU2021200009A1 (en) 2021-02-25
AU2021200009B2 (en) 2022-01-27

Similar Documents

Publication Publication Date Title
CN107000982B (zh) 与电梯交替交互的系统和方法
EP3424856B1 (en) Elevator control apparatus and elevator control method
EP3041775B1 (en) Elevator dispatch using facial recognition
US10189677B2 (en) Elevator control system with facial recognition and authorized floor destination verification
CN109292579B (zh) 电梯系统、图像识别方法和运行控制方法
TWI469910B (zh) 簡單節點式運輸系統之控制方法與裝置
JP6529669B2 (ja) エレベータ運行管理装置
EP3060508B1 (en) Elevator dispatch using fingerprint recognition
JP2005306584A (ja) エレベータ自動運転システム及びプログラム
EP3560871B1 (en) Elevator system passenger frustration reduction
JP2011057322A (ja) エレベータシステム
JP2012056653A (ja) エレベータシステム
CN112551287A (zh) 电梯控制装置,电梯系统和电梯控制方法
EP1849740B1 (en) Monitoring device and method for monitoring a lift system
JP6567074B2 (ja) エレベータの群管理制御装置および群管理制御方法
JP2013234050A (ja) エレベータ制御装置およびエレベータ制御方法
JP6364366B2 (ja) エレベーター装置
EP3800151A1 (en) Elevator system
EP3416909B1 (en) Elevator access control system
JP5208386B2 (ja) エレベータ管理システム
JP2017132634A (ja) エレベータシステム
CN115397757A (zh) 通行控制系统、电梯系统和用于控制通行控制系统的方法
WO2023053372A1 (ja) エレベータ制御装置、エレベータ制御方法、エレベータ制御システム、及びコンピュータ可読媒体
KR20240003842A (ko) 장애인 호기를 포함하는 로봇 연동 엘리베이터 군관리 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1235380

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant