CN115231398A - 一种基于ai手势、语音识别的方法及系统 - Google Patents

一种基于ai手势、语音识别的方法及系统 Download PDF

Info

Publication number
CN115231398A
CN115231398A CN202210780923.8A CN202210780923A CN115231398A CN 115231398 A CN115231398 A CN 115231398A CN 202210780923 A CN202210780923 A CN 202210780923A CN 115231398 A CN115231398 A CN 115231398A
Authority
CN
China
Prior art keywords
elevator
gesture
elevator door
emergency opening
opening signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210780923.8A
Other languages
English (en)
Inventor
刘春凤
平晓林
何国苗
白琳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Beitou Smart City Technology Co ltd
Original Assignee
Beijing Beitou Smart City Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Beitou Smart City Technology Co ltd filed Critical Beijing Beitou Smart City Technology Co ltd
Priority to CN202210780923.8A priority Critical patent/CN115231398A/zh
Publication of CN115231398A publication Critical patent/CN115231398A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B1/00—Control systems of elevators in general
    • B66B1/02—Control systems without regulation, i.e. without retroactive action
    • B66B1/06—Control systems without regulation, i.e. without retroactive action electric
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B1/00—Control systems of elevators in general
    • B66B1/34—Details, e.g. call counting devices, data transmission from car to control system, devices giving information to the control system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B1/00—Control systems of elevators in general
    • B66B1/34—Details, e.g. call counting devices, data transmission from car to control system, devices giving information to the control system
    • B66B1/3415—Control system configuration and the data transmission or communication within the control system
    • B66B1/3423—Control system configuration, i.e. lay-out
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B1/00—Control systems of elevators in general
    • B66B1/34—Details, e.g. call counting devices, data transmission from car to control system, devices giving information to the control system
    • B66B1/3415—Control system configuration and the data transmission or communication within the control system
    • B66B1/3446—Data transmission or communication within the control system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B1/00—Control systems of elevators in general
    • B66B1/34—Details, e.g. call counting devices, data transmission from car to control system, devices giving information to the control system
    • B66B1/3492—Position or motion detectors or driving means for the detector
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B1/00—Control systems of elevators in general
    • B66B1/34—Details, e.g. call counting devices, data transmission from car to control system, devices giving information to the control system
    • B66B1/36—Means for stopping the cars, cages, or skips at predetermined levels
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B1/00—Control systems of elevators in general
    • B66B1/34—Details, e.g. call counting devices, data transmission from car to control system, devices giving information to the control system
    • B66B1/46—Adaptations of switches or switchgear
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
    • B66B5/0006—Monitoring devices or performance analysers
    • B66B5/0012—Devices monitoring the users of the elevator system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
    • B66B5/02—Applications of checking, fault-correcting, or safety devices in elevators responsive to abnormal operating conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B66—HOISTING; LIFTING; HAULING
    • B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
    • B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
    • B66B5/02—Applications of checking, fault-correcting, or safety devices in elevators responsive to abnormal operating conditions
    • B66B5/021—Applications of checking, fault-correcting, or safety devices in elevators responsive to abnormal operating conditions the abnormal operating conditions being independent of the system
    • B66B5/025—Applications of checking, fault-correcting, or safety devices in elevators responsive to abnormal operating conditions the abnormal operating conditions being independent of the system where the abnormal operating condition is caused by human behaviour or misbehaviour, e.g. forcing the doors
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/005—Language recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Indicating And Signalling Devices For Elevators (AREA)

Abstract

本申请公开了一种基于AI手势、语音识别的方法及系统。所述基于AI手势、语音识别的方法包括：获取电梯内的摄像装置所拍摄的预设时间内的图像信息；获取经过训练的危险行为分类器；提取所述预设时间内的各个图像信息的图像特征；将所述图像特征输入至所述危险行为分类器，从而获取分类标签；若分类标签为暴力行为分类标签，则获取电梯状态；若所述电梯状态为楼层停靠状态，则生成电梯门紧急打开信号并传递给电梯控制系统。本申请的基于AI手势、语音识别的方法通过识别危险从而控制电梯门打开，从而能够在出现危险时尽量让受害者有逃跑的机会，并且打开电梯门后，声音也容易在楼道内传开，引起别人注意，从而救援受害者。

Description

一种基于AI手势、语音识别的方法及系统
技术领域
本申请涉及楼宇电梯安全技术领域，具体涉及一种基于AI手势、语音识别的方法、基于AI手势、语音识别的装置以及基于AI手势、语音识别的系统。
背景技术
现有技术中，经常会出现电梯内出现打架、性骚扰等事件出现，有时候，受害者想逃离电梯，但是电梯门关闭并且被加害者把持电梯的控制，此时，容易使危险扩大。
因此，希望有一种技术方案来解决或至少减轻现有技术的上述不足。
发明内容
本发明的目的在于提供一种基于AI手势、语音识别的方法来至少解决上述的一个技术问题。
本发明的一个方面，提供一种基于AI手势、语音识别的方法，所述基于AI手势、语音识别的方法包括：
获取电梯内的摄像装置所拍摄的预设时间内的图像信息；
获取经过训练的危险行为分类器；
提取所述预设时间内的各个图像信息的图像特征；
将所述图像特征输入至所述危险行为分类器，从而获取分类标签，所述分类标签包括暴力行为分类标签；
若所述分类标签为暴力行为分类标签，则获取电梯状态；
若所述电梯状态为楼层停靠状态，则生成电梯门紧急打开信号并传递给电梯控制系统。
可选地，所述基于AI手势、语音识别的方法进一步包括：
若所述电梯状态为楼层间运行状态，则控制电梯在最近的一层楼停靠并生成电梯门紧急打开信号并传递给电梯控制系统。
可选地，所述基于AI手势、语音识别的方法进一步包括：
在生成电梯门紧急打开信号并传递给电梯控制系统后，生成电梯人工控制失效信号并传递给电梯控制系统，以使电梯控制系统不再接受人为控制。
可选地，所述基于AI手势、语音识别的方法进一步包括：
在生成所述电梯门紧急打开信号后，生成报警信号并传递给中控台或直接通过楼宇功放系统播放。
可选地，所述基于AI手势、语音识别的方法进一步包括：
在生成所述电梯门紧急打开信号后，电梯内的摄像装置存储电梯门紧急打开信号后直至电梯门再次关闭之前的影像信息。
可选地，所述摄像装置包括正常存储空间以及非正常存储空间，所述正常存储空间用于存储电梯正常运行时的电梯内的影像信息；
所述非正常存储空间用于存储生成电梯门紧急打开信号后，电梯内的摄像装置存储电梯门紧急打开信号后直至电梯门再次关闭之前的影像信息。
可选地，所述基于AI手势、语音识别的方法进一步包括：
生成语音询问信息；
获取电梯内乘客根据所述语音询问信息所反馈的语音回答信息；
识别所述语音回答信息，若所述语音回答信息中具有求救语义，则
生成短信报警信息并发送给公安系统进行短信报警。
可选地，所述基于AI手势、语音识别的方法进一步包括：
通过摄像装置获取使用者的手势信息；
获取手势数据库，所述手势数据库包括预设手势以及预设手势所对应的预设动作；
识别所述手势信息，判断所述手势信息是否与一个预设手势相似度大于阈值，若是，则
获取该预设手势所对应的预设动作；
根据获取的预设手势所对应的预设动作生成动作信号。
可选地，所述短信报警信息至少包括地理位置信息。
本申请还提供了一种基于AI手势、语音识别的装置，所述基于AI手势、语音识别的装置包括：
图像信息获取模块，所述图像信息获取模块用于获取电梯内的摄像装置所拍摄的预设时间内的图像信息；
危险行为分类器获取模块，所述危险行为分类器获取模块用于获取经过训练的危险行为分类器；
特征提取模块，所述特征提取模块用于提取所述预设时间内的各个图像信息的图像特征；
分类模块，所述分类模块用于将所述图像特征输入至所述危险行为分类器，从而获取分类标签，所述分类标签包括暴力行为分类标签；
电梯状态获取模块，所述电梯状态获取模块用于在所述分类标签为暴力行为分类标签，则获取电梯状态；
信号生成模块，所述信号生成模块用于在所述电梯状态为楼层停靠状态，则生成电梯门紧急打开信号并传递给电梯控制系统。
本申请还提供了一种基于AI手势、语音识别的系统，所述基于AI手势、语音识别的系统包括：
电梯系统，所述电梯系统包括电梯门控制系统以及如上所述的基于AI手势、语音识别的装置；
摄像装置，所述摄像装置设置在所述电梯系统内，所述摄像装置与所述基于AI手势的基于AI手势、语音识别的装置连接；其中，
所述基于AI手势的基于AI手势、语音识别的装置用于采用如上所述的基于AI手势、语音识别的方法。
有益效果
本申请的基于AI手势、语音识别的方法通过识别危险从而控制电梯门打开，从而能够在出现危险时尽量让受害者有逃跑的机会，并且打开电梯门后，声音也容易在楼道内传开，引起别人注意，从而救援受害者。
附图说明
图1是本申请一实施例的基于AI手势、语音识别的方法的流程示意图；
图2是本申请一实施例的能够实现本申请的基于AI手势、语音识别的方法的电子设备示意图。
具体实施方式
为使本申请实施的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行更加详细的描述。在附图中，自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。所描述的实施例是本申请一部分实施例，而不是全部的实施例。下面通过参考附图描述的实施例是示例性的，旨在用于解释本申请，而不能理解为对本申请的限制。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。下面结合附图对本申请的实施例进行详细说明。
图1是本申请一实施例的基于AI手势、语音识别的方法的流程示意图。
如图1所示的基于AI手势、语音识别的方法包括：
步骤1：获取电梯内的摄像装置所拍摄的预设时间内的图像信息；
步骤2：获取经过训练的危险行为分类器；
步骤3：提取所述预设时间内的各个图像信息的图像特征；
步骤4：将所述图像特征输入至所述危险行为分类器，从而获取分类标签，所述分类标签包括暴力行为分类标签；
步骤5：若所述分类标签为暴力行为分类标签，则获取电梯状态；
步骤6：若所述电梯状态为楼层停靠状态，则生成电梯门紧急打开信号并传递给电梯控制系统。
本申请的基于AI手势、语音识别的方法通过识别危险从而控制电梯门打开，从而能够在出现危险时尽量让受害者有逃跑的机会，并且打开电梯门后，声音也容易在楼道内传开，引起别人注意，从而救援受害者。
在本实施例中，分类器可以通过大量的动作训练集以及动作测试集进行训练以及测试，例如，假设两个人的位置为一个人压在另一个人身上，则认为是暴力行为分类标签，又例如，假设识别出管制刀具，则认为是暴力行为分类标签等。
在本实施例中，所述基于AI手势、语音识别的方法进一步包括：
若所述电梯状态为楼层间运行状态，则控制电梯在最近的一层楼停靠并生成电梯门紧急打开信号并传递给电梯控制系统。
在本实施例中，所述基于AI手势、语音识别的方法进一步包括：
在生成电梯门紧急打开信号并传递给电梯控制系统后，生成电梯人工控制失效信号并传递给电梯控制系统，以使电梯控制系统不再接受人为控制。
在有些情况下，施暴者可能会将被害者拖入电梯并关上电梯门，为了防止这种情况发生，因此，应当控制电梯门在这段时间内不受人为控制。
在本实施例中，所述基于AI手势、语音识别的方法进一步包括：
在生成所述电梯门紧急打开信号后，生成报警信号并传递给中控台或直接通过楼宇功放系统播放。
通过报警信号给远程中控台，例如警卫值班室等，可以让警卫注意到这个情况，另外，也可以直接以大喇叭的形式进行播放，让楼内的人注意到这个情况，以实现救援。
在本实施例中，所述基于AI手势、语音识别的方法进一步包括：
在生成所述电梯门紧急打开信号后，电梯内的摄像装置存储电梯门紧急打开信号后直至电梯门再次关闭之前的影像信息。
在本实施例中，所述摄像装置包括正常存储空间以及非正常存储空间，所述正常存储空间用于存储电梯正常运行时的电梯内的影像信息；
所述非正常存储空间用于存储生成电梯门紧急打开信号后，电梯内的摄像装置存储电梯门紧急打开信号后直至电梯门再次关闭之前的影像信息。
通常电梯内的摄像装置会自动进行迭代更新，又或者会一直录比较长一个时间段，例如24小时内的录像，这样一方面如果在事发之后较长一段时间不去看时，可能已经被自动删除，另一方面也不方便调取观看，因此，为特殊情况单独设置一个存储空间，一方面不会由于后续的录像所覆盖，另一方面还方便调取观看，尤其是，如果遇到黑警等情况，可能会去删除录像，但是并不清楚有其他存储地址，因此可以躲过黑警的删除。
在本实施例中，所述基于AI手势、语音识别的方法进一步包括：
生成语音询问信息；
获取电梯内乘客根据所述语音询问信息所反馈的语音回答信息；
识别所述语音回答信息，若所述语音回答信息中具有求救语义，则
生成短信报警信息并发送给公安系统进行短信报警。
当出现危险情况时，可以通过语音方式询问被害者，此时，如果被害者能够说话，则可以及时的报警，另外，也可以通过这种方式震慑加害者，让加害者因为慌张而逃跑，从而防止持续加害被害者。
在本实施例中，所述短信报警信息至少包括地理位置信息。
在本实施例中，短信报警连接到当地的报警系统属于现有技术，在此不再赘述。
在一个实施例中，所述基于AI手势、语音识别的方法进一步包括：
通过摄像装置获取使用者的手势信息；
获取手势数据库，所述手势数据库包括预设手势以及预设手势所对应的预设动作；
识别所述手势信息，判断所述手势信息是否与一个预设手势相似度大于阈值，若是，则
获取该预设手势所对应的预设动作；
根据获取的预设手势所对应的预设动作生成动作信号。
一些情况下，受害者无法说话（例如被卡脖子），但是可以比划手势，此时，可以根据比划的手势进行动作，例如，受害者比划出110的手势，则进行报警动作，若受害者比划出120的动作，则进行急救报警，若受害者双手乱挥，此时也会有对应的预设手势，这种预设手势所对应的动作为可能出现特殊情况，此时可以同时进行110报警以及120报警，并且通知楼宇管理者。
本申请还提供了一种基于AI手势、语音识别的装置，所述基于AI手势、语音识别的装置包括图像信息获取模块、危险行为分类器获取模块、特征提取模块、分类模块、电梯状态获取模块以及信号生成模块，图像信息获取模块用于获取电梯内的摄像装置所拍摄的预设时间内的图像信息；危险行为分类器获取模块用于获取经过训练的危险行为分类器；特征提取模块用于提取所述预设时间内的各个图像信息的图像特征；分类模块用于将所述图像特征输入至所述危险行为分类器，从而获取分类标签，所述分类标签包括暴力行为分类标签；电梯状态获取模块用于在所述分类标签为暴力行为分类标签，则获取电梯状态；信号生成模块用于在所述电梯状态为楼层停靠状态，则生成电梯门紧急打开信号并传递给电梯控制系统。
本申请还提供了一种基于AI手势、语音识别的系统，所述基于AI手势、语音识别的系统包括电梯系统以及摄像装置，电梯系统包括电梯门控制系统以及如上所述的基于AI手势、语音识别的装置；摄像装置设置在所述电梯系统内，所述摄像装置与所述基于AI手势、语音识别的装置连接；其中，基于AI手势、语音识别的装置用于采用如上所述的基于AI手势、语音识别的方法。
可以理解的是，上述对方法的描述，也同样适用于对装置的描述。
本申请还提供了一种电子设备，包括存储器、处理器以及存储在存储器中并能够在处理器上运行的计算机程序，处理器执行计算机程序时实现如上的基于AI手势、语音识别的方法。
本申请还提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，计算机程序被处理器执行时能够实现如上的基于AI手势、语音识别的方法。
图2是能够实现根据本申请一个实施例提供的基于AI手势、语音识别的方法的电子设备的示例性结构图。
如图2所示，电子设备包括输入设备501、输入接口502、中央处理器503、存储器504、输出接口505以及输出设备506。其中，输入接口502、中央处理器503、存储器504以及输出接口505通过总线507相互连接，输入设备501和输出设备506分别通过输入接口502和输出接口505与总线507连接，进而与电子设备的其他组件连接。具体地，输入设备504接收来自外部的输入信息，并通过输入接口502将输入信息传送到中央处理器503；中央处理器503基于存储器504中存储的计算机可执行指令对输入信息进行处理以生成输出信息，将输出信息临时或者永久地存储在存储器504中，然后通过输出接口505将输出信息传送到输出设备506；输出设备506将输出信息输出到电子设备的外部供用户使用。
也就是说，图2所示的电子设备也可以被实现为包括：存储有计算机可执行指令的存储器；以及一个或多个处理器，该一个或多个处理器在执行计算机可执行指令时可以实现结合图1描述的基于AI手势、语音识别的方法。
在一个实施例中，图2所示的电子设备可以被实现为包括：存储器504，被配置为存储可执行程序代码；一个或多个处理器503，被配置为运行存储器504中存储的可执行程序代码，以执行上述实施例中的基于AI手势、语音识别的方法。
在一个典型的配置中，计算设备包括一个或多个处理器（CPU）、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器（RAM）和/或非易失性内存等形式，如只读存储器（ROM）或闪存（flash RAM）。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动，媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器（SRAM）、动态随机存取存储器（DRAM）、其他类型的随机存取存储器（RAM）、只读存储器（ROM）、电可擦除可编程只读存储器（EEPROM）、快闪记忆体或其他内存技术、只读光盘只读存储器（CD-ROM）、数据多功能光盘（DVD）或其他光学存储、磁盒式磁带、磁带磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。
本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。
此外，显然“包括”一词不排除其他单元或步骤。装置权利要求中陈述的多个单元、模块或装置也可以由一个单元或总装置通过软件或硬件来实现。
附图中的流程图和框图，图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，模块、程序段、或代码的一部分包括一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地标识的方框实际上可以基本并行地执行，他们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或总流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
在本实施例中所称处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器 (Digital Signal Processor，DSP)、专用集成电路 (Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA) 或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器可用于存储计算机程序和/或模块，处理器通过运行或执行存储在存储器内的计算机程序和/或模块，以及调用存储在存储器内的数据，实现装置/终端设备的各种功能。存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序（比如声音播放功能、图像播放功能等）等；存储数据区可存储根据手机的使用所创建的数据（比如音频数据、电话本等）等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡（Smart Media Card, SMC），安全数字（Secure Digital, SD）卡，闪存卡（Flash Card）、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
在本实施例中，装置/终端设备集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，计算机程序包括计算机程序代码，计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质可以包括：能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器（ROM，Read-Only Memory）、随机存取存储器（RAM，Random Access Memory）、电载波信号、电信信号以及软件分发介质等。需要说明的是，计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减。本申请虽然以较佳实施例公开如上，但其实并不是用来限定本申请，任何本领域技术人员在不脱离本申请的精神和范围内，都可以做出可能的变动和修改，因此，本申请的保护范围应当以本申请权利要求所界定的范围为准。
本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。
此外，显然“包括”一词不排除其他单元或步骤。装置权利要求中陈述的多个单元、模块或装置也可以由一个单元或总装置通过软件或硬件来实现。
虽然，上文中已经用一般性说明及具体实施方案对本发明作了详尽的描述，但在本发明基础上，可以对之作一些修改或改进，这对本领域技术人员而言是显而易见的。因此，在不偏离本发明精神的基础上所做的这些修改或改进，均属于本发明要求保护的范围。

Claims (10)

1.一种基于AI手势、语音识别的方法，用于楼宇电梯出现危险情况时的电梯控制，其特征在于，所述基于AI手势、语音识别的方法包括：
获取电梯内的摄像装置所拍摄的预设时间内的图像信息；
获取经过训练的危险行为分类器；
提取所述预设时间内的各个图像信息的图像特征；
将所述图像特征输入至所述危险行为分类器，从而获取分类标签，所述分类标签包括暴力行为分类标签；
若所述分类标签为暴力行为分类标签，则获取电梯状态；
若所述电梯状态为楼层停靠状态，则生成电梯门紧急打开信号并传递给电梯控制系统。
2.如权利要求1所述的基于AI手势、语音识别的方法，其特征在于，所述基于AI手势、语音识别的方法进一步包括：
若所述电梯状态为楼层间运行状态，则控制电梯在最近的一层楼停靠并生成电梯门紧急打开信号并传递给电梯控制系统。
3.如权利要求2所述的基于AI手势、语音识别的方法，其特征在于，所述基于AI手势、语音识别的方法进一步包括：
在生成电梯门紧急打开信号并传递给电梯控制系统后，生成电梯人工控制失效信号并传递给电梯控制系统，以使电梯控制系统不再接受人为控制。
4.如权利要求3所述的基于AI手势、语音识别的方法，其特征在于，所述基于AI手势、语音识别的方法进一步包括：
在生成所述电梯门紧急打开信号后，生成报警信号并传递给中控台或直接通过楼宇功放系统播放。
5.如权利要求4所述的基于AI手势、语音识别的方法，其特征在于，所述基于AI手势、语音识别的方法进一步包括：
在生成所述电梯门紧急打开信号后，电梯内的摄像装置存储电梯门紧急打开信号后直至电梯门再次关闭之前的影像信息。
6.如权利要求5所述的基于AI手势、语音识别的方法，其特征在于，所述摄像装置包括正常存储空间以及非正常存储空间，所述正常存储空间用于存储电梯正常运行时的电梯内的影像信息；
所述非正常存储空间用于存储生成电梯门紧急打开信号后，电梯内的摄像装置存储电梯门紧急打开信号后直至电梯门再次关闭之前的影像信息。
7.如权利要求6所述的基于AI手势、语音识别的方法，其特征在于，所述基于AI手势、语音识别的方法进一步包括：
生成语音询问信息；
获取电梯内乘客根据所述语音询问信息所反馈的语音回答信息；
识别所述语音回答信息，若所述语音回答信息中具有求救语义，则
生成短信报警信息并发送给公安系统进行短信报警。
8.如权利要求7所述的基于AI手势、语音识别的方法，其特征在于，所述基于AI手势、语音识别的方法进一步包括：
通过摄像装置获取使用者的手势信息；
获取手势数据库，所述手势数据库包括预设手势以及预设手势所对应的预设动作；
识别所述手势信息，判断所述手势信息是否与一个预设手势相似度大于阈值，若是，则
获取该预设手势所对应的预设动作；
根据获取的预设手势所对应的预设动作生成动作信号。
9.一种基于AI手势、语音识别的装置，其特征在于，所述基于AI手势、语音识别的装置包括：
图像信息获取模块，所述图像信息获取模块用于获取电梯内的摄像装置所拍摄的预设时间内的图像信息；
危险行为分类器获取模块，所述危险行为分类器获取模块用于获取经过训练的危险行为分类器；
特征提取模块，所述特征提取模块用于提取所述预设时间内的各个图像信息的图像特征；
分类模块，所述分类模块用于将所述图像特征输入至所述危险行为分类器，从而获取分类标签，所述分类标签包括暴力行为分类标签；
电梯状态获取模块，所述电梯状态获取模块用于在所述分类标签为暴力行为分类标签，则获取电梯状态；
信号生成模块，所述信号生成模块用于在所述电梯状态为楼层停靠状态，则生成电梯门紧急打开信号并传递给电梯控制系统。
10.一种基于AI手势、语音识别的系统，其特征在于，所述基于AI手势、语音识别的系统包括：
电梯系统，所述电梯系统包括电梯门控制系统以及如权利要求9所述的基于AI手势、语音识别的装置；
摄像装置，所述摄像装置设置在所述电梯系统内，所述摄像装置与所述基于AI手势、语音识别的装置连接；其中，
所述基于AI手势、语音识别的装置用于采用如权利要求1至8中任意一项所述的基于AI手势、语音识别的方法。
CN202210780923.8A 2022-07-05 2022-07-05 一种基于ai手势、语音识别的方法及系统 Pending CN115231398A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210780923.8A CN115231398A (zh) 2022-07-05 2022-07-05 一种基于ai手势、语音识别的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210780923.8A CN115231398A (zh) 2022-07-05 2022-07-05 一种基于ai手势、语音识别的方法及系统

Publications (1)

Publication Number Publication Date
CN115231398A true CN115231398A (zh) 2022-10-25

Family

ID=83672212

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210780923.8A Pending CN115231398A (zh) 2022-07-05 2022-07-05 一种基于ai手势、语音识别的方法及系统

Country Status (1)

Country Link
CN (1) CN115231398A (zh)

Citations (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000118900A (ja) * 1998-10-19 2000-04-25 Toshiba Fa Syst Eng Corp エレベータ監視装置
CN1919711A (zh) * 2006-09-20 2007-02-28 浙江工业大学 基于图像、语音识别技术的电梯内防暴力装置
US20070151808A1 (en) * 2005-03-02 2007-07-05 Mitsubsihi Electric Corporation Image monitoring device for elevator
CN101723216A (zh) * 2008-10-22 2010-06-09 株式会社日立制作所 电梯的操作输入装置以及操作输入方法
KR20100091500A (ko) * 2009-02-10 2010-08-19 신광엘리베이터(주) 위험상태 인지 기능을 갖는 엘리베이터 시스템 및 이의 운용 시스템
JP2011178516A (ja) * 2010-03-01 2011-09-15 Mitsubishi Electric Corp 音声認識装置、音声認識方法及びエレベータ管理システム
KR20130015083A (ko) * 2011-08-02 2013-02-13 오티스 엘리베이터 컴파니 엘리베이터 방범시스템 및 방법
CN105016163A (zh) * 2015-08-02 2015-11-04 何国梁 基于无线通信的电梯内角落危情报警平台
CN105347127A (zh) * 2014-08-19 2016-02-24 三菱电机上海机电电梯有限公司 电梯轿厢内异常情况的监控系统及监控方法
CN107809416A (zh) * 2017-09-19 2018-03-16 周美琳 智能楼宇安全控制系统及控制方法
CN107911663A (zh) * 2017-11-27 2018-04-13 江苏理工学院 一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统
CN208980108U (zh) * 2018-11-01 2019-06-14 山东浪潮人工智能研究院有限公司 一种基于卷积神经网络的安全电梯系统
KR102189338B1 (ko) * 2020-05-21 2020-12-11 (주)영진엘리베이터 엘리베이터 범죄 방지 시스템 및 그 방법
CN213231084U (zh) * 2020-09-04 2021-05-18 上海市特种设备监督检验技术研究院 一种电梯智能监控分级警示装置
CN113419445A (zh) * 2021-06-08 2021-09-21 合肥云通物联科技有限公司 基于物联网+ai的智能梯控控制系统及控制方法
CN113936245A (zh) * 2021-08-14 2022-01-14 青岛海纳云科技控股有限公司 一种电梯控制方法及控制装置
CN113989924A (zh) * 2021-10-22 2022-01-28 北京明略软件系统有限公司 一种暴力行为的预警方法及装置
CN114014111A (zh) * 2021-10-12 2022-02-08 北京交通大学 一种无接触式的智能电梯控制系统和方法
CN114564102A (zh) * 2022-01-24 2022-05-31 中国第一汽车股份有限公司 一种汽车座舱交互方法、装置及车辆
CN114666546A (zh) * 2022-03-24 2022-06-24 中国铁塔股份有限公司江苏省分公司 一种通信铁塔用监控方法、装置及通信铁塔

Patent Citations (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000118900A (ja) * 1998-10-19 2000-04-25 Toshiba Fa Syst Eng Corp エレベータ監視装置
US20070151808A1 (en) * 2005-03-02 2007-07-05 Mitsubsihi Electric Corporation Image monitoring device for elevator
CN1919711A (zh) * 2006-09-20 2007-02-28 浙江工业大学 基于图像、语音识别技术的电梯内防暴力装置
CN101723216A (zh) * 2008-10-22 2010-06-09 株式会社日立制作所 电梯的操作输入装置以及操作输入方法
KR20100091500A (ko) * 2009-02-10 2010-08-19 신광엘리베이터(주) 위험상태 인지 기능을 갖는 엘리베이터 시스템 및 이의 운용 시스템
JP2011178516A (ja) * 2010-03-01 2011-09-15 Mitsubishi Electric Corp 音声認識装置、音声認識方法及びエレベータ管理システム
KR20130015083A (ko) * 2011-08-02 2013-02-13 오티스 엘리베이터 컴파니 엘리베이터 방범시스템 및 방법
CN105347127A (zh) * 2014-08-19 2016-02-24 三菱电机上海机电电梯有限公司 电梯轿厢内异常情况的监控系统及监控方法
CN105016163A (zh) * 2015-08-02 2015-11-04 何国梁 基于无线通信的电梯内角落危情报警平台
CN107809416A (zh) * 2017-09-19 2018-03-16 周美琳 智能楼宇安全控制系统及控制方法
CN107911663A (zh) * 2017-11-27 2018-04-13 江苏理工学院 一种基于计算机视觉检测的电梯乘客危险行为智能识别预警系统
CN208980108U (zh) * 2018-11-01 2019-06-14 山东浪潮人工智能研究院有限公司 一种基于卷积神经网络的安全电梯系统
KR102189338B1 (ko) * 2020-05-21 2020-12-11 (주)영진엘리베이터 엘리베이터 범죄 방지 시스템 및 그 방법
CN213231084U (zh) * 2020-09-04 2021-05-18 上海市特种设备监督检验技术研究院 一种电梯智能监控分级警示装置
CN113419445A (zh) * 2021-06-08 2021-09-21 合肥云通物联科技有限公司 基于物联网+ai的智能梯控控制系统及控制方法
CN113936245A (zh) * 2021-08-14 2022-01-14 青岛海纳云科技控股有限公司 一种电梯控制方法及控制装置
CN114014111A (zh) * 2021-10-12 2022-02-08 北京交通大学 一种无接触式的智能电梯控制系统和方法
CN113989924A (zh) * 2021-10-22 2022-01-28 北京明略软件系统有限公司 一种暴力行为的预警方法及装置
CN114564102A (zh) * 2022-01-24 2022-05-31 中国第一汽车股份有限公司 一种汽车座舱交互方法、装置及车辆
CN114666546A (zh) * 2022-03-24 2022-06-24 中国铁塔股份有限公司江苏省分公司 一种通信铁塔用监控方法、装置及通信铁塔

Similar Documents

Publication Publication Date Title
US10810510B2 (en) Conversation and context aware fraud and abuse prevention agent
WO2020029406A1 (zh) 人脸情绪识别方法、装置、计算机设备及存储介质
CN109697827A (zh) 智能报警方法、装置、设备及存储介质
US20070299671A1 (en) Method and apparatus for analysing sound- converting sound into information
US20180285068A1 (en) Processing method of audio control and electronic device thereof
CN112447170B (zh) 一种基于声音信息的安防方法、装置及电子设备
KR20210042860A (ko) 정보 출력 방법, 장치 및 시스템
CN106231052B (zh) 电子设备及其呼救方法
CN111784971B (zh) 报警处理方法和系统、计算机可读存储介质和电子设备
CN112820072A (zh) 危险驾驶预警方法、装置、计算机设备及存储介质
CN109634554B (zh) 用于输出信息的方法和装置
CN115231398A (zh) 一种基于ai手势、语音识别的方法及系统
US11100784B2 (en) Method and system for detecting and notifying actionable events during surveillance
CN110059619B (zh) 基于图像识别自动报警的方法和装置
CN113345210B (zh) 一种基于音视频智能判断呼救的方法及装置
US10388286B1 (en) Systems and methods of sound-based fraud protection
CN111179969A (zh) 一种基于音频信息的报警方法、装置、系统及存储介质
US20190295343A1 (en) Virtual Doors, Locks, Umbras, and Penumbras of Physical Access Control Systems and Methods of Operation
US20180108345A1 (en) Device and method for audio frame processing
CN112489656A (zh) 一种报警方法、装置、电子设备及存储介质
CN112061065B (zh) 一种车内行为识别报警方法、设备、电子设备及存储介质
KR20220059397A (ko) 긴급상황 조기분석 및 허위신고 판단 방법 및 장치
CN108286387B (zh) 一种防暴力开门的方法及装置
CN111717754A (zh) 基于安全警报语的轿厢式电梯的控制方法
CN112688951A (zh) 访客管理方法及相关装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination