CN109761126B - 电梯轿厢内乘客对话的语音识别及内容显示的方法 - Google Patents

电梯轿厢内乘客对话的语音识别及内容显示的方法 Download PDF

Info

Publication number
CN109761126B
CN109761126B CN201910096005.1A CN201910096005A CN109761126B CN 109761126 B CN109761126 B CN 109761126B CN 201910096005 A CN201910096005 A CN 201910096005A CN 109761126 B CN109761126 B CN 109761126B
Authority
CN
China
Prior art keywords
voice
information
audio
elevator car
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910096005.1A
Other languages
English (en)
Other versions
CN109761126A (zh
Inventor
张云超
王延鹏
李泽群
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Airbridge Software Technologies Co ltd
Shenzhen Airbridge Telecommunication Technologies Co ltd
Original Assignee
Qingdao Airbridge Software Technologies Co ltd
Shenzhen Airbridge Telecommunication Technologies Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Airbridge Software Technologies Co ltd, Shenzhen Airbridge Telecommunication Technologies Co ltd filed Critical Qingdao Airbridge Software Technologies Co ltd
Priority to CN201910096005.1A priority Critical patent/CN109761126B/zh
Publication of CN109761126A publication Critical patent/CN109761126A/zh
Application granted granted Critical
Publication of CN109761126B publication Critical patent/CN109761126B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B50/00—Energy efficient technologies in elevators, escalators and moving walkways, e.g. energy saving or recuperation technologies

Landscapes

  • Indicating And Signalling Devices For Elevators (AREA)
  • Maintenance And Inspection Apparatuses For Elevators (AREA)

Abstract

本发明涉及一种电梯轿厢内乘客对话的语音识别及内容显示的方法，属于电梯控制技术领域。本发明包括如下步骤:在电梯轿厢内搭建信息播放装置，信息播放装置包括用于播放视频的显示屏、用于播放音频的扬声器、及与网络传输装置连接用于接收信息的通信模块；在远程端搭建云端服务器、应急平台和维保客户端，应急平台包括与云端服务器相连用于与电梯轿厢音视频对话的采集和播放装置，应急平台与维保客户端通过云端服务器与网络传输装置相连；电梯轿厢、应急平台和维保客户端输入的语音信号，分别经过语音库的识别同步转换成文字；识别出的文字与同时采集到的音视频信号通过云端服务器交互传输到三方的信息播放装置、应急平台和维保客户端上。

Description

电梯轿厢内乘客对话的语音识别及内容显示的方法
技术领域
本发明涉及一种电梯轿厢内乘客对话的语音识别及内容显示的方法，属于电梯控制技术领域。
背景技术
目前在电梯中安装有报警装置，通过报警装置报警时，被困乘客只能通过扬声器和麦克风与应急平台、维保客户端进行音频沟通。一方面，应急平台虽然可以看到被困乘客的视频信息，但是被困乘客无法看到应急平台的情况；另一方面，被困乘客、应急平台、维保客户端三方的语言出现不一致时，尤其是出现方言时，极易造成沟通问题，继而出现以下问题：(1)乘客的情绪无法得到有效地安抚；(2)维保救援的效率低下。
发明内容
针对现有技术存在的上述缺陷，本发明提出了一种电梯轿厢内乘客对话的语音识别及内容显示的方法，通过构建三方视频对讲和同步语音转文字，极大提高沟通效率，不仅可以安抚被困乘客情绪，还可以提高救援效率。
本发明所述的电梯轿厢内乘客对话的语音识别及内容显示的方法，包括如下步骤：
步骤一：搭建对话和显示系统：包括如下小步：
第一步：搭建信息播放装置：在电梯轿厢内搭建信息播放装置，信息播放装置包括用于播放视频的显示屏、用于播放音频的扬声器、及与网络传输装置连接用于接收信息的通信模块；
第二步：搭建远程平台：在远程端搭建云端服务器、应急平台和维保客户端，应急平台包括与云端服务器相连用于与电梯轿厢音视频对话的采集和播放装置，应急平台与维保客户端通过云端服务器与网络传输装置相连；
步骤二：语音识别及内容显示：包括如下小步：
第一步：同步语音识别：电梯轿厢、应急平台和维保客户端输入的语音信号，分别经过语音库的识别同步转换成文字；
第二步：同步内容显示：识别出的文字与同时采集到的音视频信号通过云端服务器交互传输到三方的信息播放装置、应急平台和维保客户端上。
进一步地，所述步骤一第一步中，电梯轿厢的信息播放装置的播放模块包括播放音频的扬声器、播放视频的显示屏；信息播放装置还与用于推送信息的云端服务器、用于接收电梯故障的急救模块相连。
进一步地，所述步骤一第二步中，应急平台包括与信息播放装置双向音视频对讲的音视频采集装置、音视频播放装置。
进一步地，所述步骤一第二步中，网络传输装置接收到的信息包括电梯运行、报警及故障信息、轿厢音视频信息、应急平台音视频信息。
进一步地，所述步骤二第一步中，语音库搭建有方言语言数据库，建立所有方言的识别区，设定需要翻译的方言类别，语音库对输入的语音进行识别处理，语音库对接收的语音进行方言的对照翻译，输出系统对翻译出的方言进行输出。
进一步地，所述步骤二第一步中，语音库调用与电梯轿厢所在区域的方言语言数据库，查找对应该方言语言数据库的普通话特征库，完成应急平台、维保客户端与电梯轿厢的语音交互。
进一步地，所述步骤二第一步中，语音库通过网络传输装置更新方言语言数据库，并允许通过信息播放装置、应急平台和维保客户端进行评分和校准。
进一步地，所述步骤二第二步中，云端服务器存储三方的音视频信息，以及同步转换成的文字；云端服务器通过反馈回的评分和校准数据优化语音库，完善本地最佳方言语言数据库的配置。
本发明的有益效果是：本发明所述的电梯轿厢内乘客对话的语音识别及内容显示的方法，通过在电梯轿厢、应急平台与维保客户端的语音库，同步将三方的语音同步转换为文字，通过三方的播放装置与音视频信号同步播放；极大提高沟通效率，不仅可以安抚被困乘客情绪，还可以提高救援效率。
附图说明
图1是本发明的原理连接框图。
图2是三方语音识别及内容显示结构示意图。
图中：1、电梯轿厢；2、网络传输装置；3、云端服务器；4、应急平台；5、维保客户端。
具体实施方式
为了使本发明目的、技术方案更加清楚明白，下面结合实施例，对本发明作进一步详细说明。
如图1所示，本发明所述的电梯轿厢内乘客对话的语音识别及内容显示的方法，包括如下步骤：
步骤一：搭建对话和显示系统：包括如下小步：
第一步：搭建信息播放装置：在电梯轿厢1内搭建信息播放装置，信息播放装置包括用于播放视频的显示屏、用于播放音频的扬声器、及与网络传输装置2连接用于接收信息的通信模块；
第二步：搭建远程平台：在远程端搭建云端服务器3、应急平台4和维保客户端5，应急平台4包括与云端服务器3相连用于与电梯轿厢1音视频对话的采集和播放装置，应急平台4与维保客户端5通过云端服务器3与网络传输装置2相连；
步骤二：语音识别及内容显示：包括如下小步：
第一步：同步语音识别：电梯轿厢1、应急平台4和维保客户端5输入的语音信号，分别经过语音库的识别同步转换成文字；
第二步：同步内容显示：识别出的文字与同时采集到的音视频信号通过云端服务器3交互传输到三方的信息播放装置、应急平台4和维保客户端5上。
如图2所示，所述步骤一第一步中，电梯轿厢1的信息播放装置的播放模块包括播放音频的扬声器、播放视频的显示屏；信息播放装置还与用于推送信息的云端服务器3、用于接收电梯故障的急救模块相连。
进一步地，所述步骤一第二步中，应急平台4包括与信息播放装置双向音视频对讲的音视频采集装置、音视频播放装置。
进一步地，所述步骤一第二步中，网络传输装置2接收到的信息包括电梯运行、报警及故障信息、轿厢音视频信息、应急平台4音视频信息。
进一步地，所述步骤二第一步中，语音库搭建有方言语言数据库，建立所有方言的识别区，设定需要翻译的方言类别，语音库对输入的语音进行识别处理，语音库对接收的语音进行方言的对照翻译，输出系统对翻译出的方言进行输出。
进一步地，所述步骤二第一步中，语音库调用与电梯轿厢1所在区域的方言语言数据库，查找对应该方言语言数据库的普通话特征库，完成应急平台4、维保客户端5与电梯轿厢1的语音交互。
进一步地，所述步骤二第一步中，语音库通过网络传输装置2更新方言语言数据库，并允许通过信息播放装置、应急平台4和维保客户端5进行评分和校准。
进一步地，所述步骤二第二步中，云端服务器3存储三方的音视频信息，以及同步转换成的文字；云端服务器3通过反馈回的评分和校准数据优化语音库，完善本地最佳方言语言数据库的配置。
本发明的有益效果是：本发明所述的电梯轿厢内乘客对话的语音识别及内容显示的方法，通过在电梯轿厢1、应急平台4与维保客户端5的语音库，同步将三方的语音同步转换为文字，通过三方的播放装置与音视频信号同步播放；极大提高沟通效率，不仅可以安抚被困乘客情绪，还可以提高救援效率。
本发明可广泛运用于各种家用、商用、工业用电梯控制场合。
以上所述仅为本发明的较佳实施例而己，并不以本发明为限制，凡在本发明的精神和原则之内所作的均等修改、等同替换和改进等，均应包含在本发明的专利涵盖范围内。

Claims (1)

1.一种电梯轿厢内乘客对话的语音识别及内容显示的方法，其特征在于，包括如下步骤：
步骤一：搭建对话和显示系统：包括如下小步：
第一步：搭建信息播放装置：在电梯轿厢(1)内搭建信息播放装置，信息播放装置包括用于播放视频的显示屏、用于播放音频的扬声器、及与网络传输装置(2)连接用于接收信息的通信模块；电梯轿厢(1)的信息播放装置的播放模块包括播放音频的扬声器、播放视频的显示屏；信息播放装置还与用于推送信息的云端服务器(3)、用于接收电梯故障的急救模块相连；
第二步：搭建远程平台：在远程端搭建云端服务器(3)、应急平台(4)和维保客户端(5)，应急平台(4)包括与云端服务器(3)相连用于与电梯轿厢(1)音视频对话的采集和播放装置，应急平台(4)与维保客户端(5)通过云端服务器(3)与网络传输装置(2)相连；应急平台(4)包括与信息播放装置双向音视频对讲的音视频采集装置、音视频播放装置；网络传输装置(2)接收到的信息包括电梯运行、报警及故障信息、轿厢音视频信息、应急平台(4)音视频信息；
步骤二：语音识别及内容显示：包括如下小步：
第一步：同步语音识别：电梯轿厢(1)、应急平台(4)和维保客户端(5)输入的语音信号，分别经过语音库的识别同步转换成文字；语音库搭建有方言语言数据库，建立所有方言的识别区，设定需要翻译的方言类别，语音库对输入的语音进行识别处理，语音库对接收的语音进行方言的对照翻译，输出系统对翻译出的方言进行输出；语音库调用与电梯轿厢(1)所在区域的方言语言数据库，查找对应该方言语言数据库的普通话特征库，完成应急平台(4)、维保客户端(5)与电梯轿厢(1)的语音交互；语音库通过网络传输装置(2)更新方言语言数据库，并允许通过信息播放装置、应急平台(4)和维保客户端(5)进行评分和校准；
第二步：同步内容显示：识别出的文字与同时采集到的音视频信号通过云端服务器(3)交互传输到三方的信息播放装置、应急平台(4)和维保客户端(5)上；云端服务器(3)存储三方的音视频信息，以及同步转换成的文字；云端服务器(3)通过反馈回的评分和校准数据优化语音库，完善本地最佳方言语言数据库的配置；
通过在电梯轿厢(1)、应急平台(4)与维保客户端(5)的语音库，同步将三方的语音同步转换为文字，通过三方的播放装置与音视频信号同步播放，提高沟通效率。
CN201910096005.1A 2019-01-31 2019-01-31 电梯轿厢内乘客对话的语音识别及内容显示的方法 Active CN109761126B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910096005.1A CN109761126B (zh) 2019-01-31 2019-01-31 电梯轿厢内乘客对话的语音识别及内容显示的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910096005.1A CN109761126B (zh) 2019-01-31 2019-01-31 电梯轿厢内乘客对话的语音识别及内容显示的方法

Publications (2)

Publication Number Publication Date
CN109761126A CN109761126A (zh) 2019-05-17
CN109761126B true CN109761126B (zh) 2023-06-30

Family

ID=66455844

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910096005.1A Active CN109761126B (zh) 2019-01-31 2019-01-31 电梯轿厢内乘客对话的语音识别及内容显示的方法

Country Status (1)

Country Link
CN (1) CN109761126B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102663927A (zh) * 2012-05-14 2012-09-12 长春大学 基于视频与三维路径规划的中国手语标准化训练学习方法
CN103601053A (zh) * 2013-12-03 2014-02-26 天津市安维康家科技发展有限公司 一种电梯故障应急单元及控制方法
CN106956985A (zh) * 2017-04-21 2017-07-18 联盟电梯（苏州）有限公司 一种电梯预警语音安抚系统及其控制方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201494977U (zh) * 2009-09-11 2010-06-02 南京市特种设备安全监督检验研究院 一种电梯监控安抚系统
CN101808047A (zh) * 2010-02-10 2010-08-18 深圳先进技术研究院 即时通讯伴侣机器人及具有通讯伴侣的即时通讯方法
CN102802044A (zh) * 2012-06-29 2012-11-28 华为终端有限公司 视频处理方法、终端及字幕服务器
CN103640944B (zh) * 2013-12-03 2016-06-01 天津市安维康家科技发展有限公司 一种智能化电梯故障远程自动报警系统
CN104192657A (zh) * 2014-07-30 2014-12-10 深圳市云特科技有限公司 电梯中乘客被困远程救援通信装置
CN105016157A (zh) * 2015-07-24 2015-11-04 济南智嵌测控技术有限公司 一种新型的电梯事故现场状态参数传输装置
CN106210597A (zh) * 2016-07-20 2016-12-07 尼森科技（湖北）有限公司 一种电梯应急救援视频通话安抚系统
CN206751132U (zh) * 2017-05-15 2017-12-15 福建环奥电梯科技股份有限公司 电梯物联网管理系统
CN107902517B (zh) * 2017-10-19 2019-11-26 上海新时达电气股份有限公司 一种电梯呼救安抚装置及系统
CN108750858A (zh) * 2018-06-14 2018-11-06 辽宁华盾安全技术股份有限公司 基于物联网的电梯多媒体可视化救援系统及方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102663927A (zh) * 2012-05-14 2012-09-12 长春大学 基于视频与三维路径规划的中国手语标准化训练学习方法
CN103601053A (zh) * 2013-12-03 2014-02-26 天津市安维康家科技发展有限公司 一种电梯故障应急单元及控制方法
CN106956985A (zh) * 2017-04-21 2017-07-18 联盟电梯（苏州）有限公司 一种电梯预警语音安抚系统及其控制方法

Also Published As

Publication number Publication date
CN109761126A (zh) 2019-05-17

Similar Documents

Publication Publication Date Title
CN110049270B (zh) 多人会议语音转写方法、装置、系统、设备及存储介质
US9672812B1 (en) Qualifying trigger expressions in speech-based systems
WO2021051506A1 (zh) 语音交互方法、装置、计算机设备及存储介质
CN110392913A (zh) 在共用的启用语音的装置上处理呼叫
CN108777751A (zh) 一种呼叫中心系统及其语音交互方法、装置和设备
CN109559754B (zh) 一种针对摔倒识别的语音救援方法及系统
CN111489765A (zh) 一种基于智能语音技术的话务服务质检方法
CN109036467A (zh) 基于tf-lstm的cffd提取方法、语音情感识别方法及系统
CN102760431A (zh) 智能化的语音识别系统
CN109729228A (zh) 人工智能呼叫系统
CN111883135A (zh) 语音转写方法、装置和电子设备
CN110119514A (zh) 信息的即时翻译方法、装置和系统
CN111210821A (zh) 一种基于互联网应用的智能语音识别系统
CN209328511U (zh) 一种便携式ai语音交互控制系统
JPWO2009104332A1 (ja) 発話分割システム、発話分割方法および発話分割プログラム
CN114449105A (zh) 基于语音的电力客户服务话务质检系统
CN111696576A (zh) 一种智能语音机器人话术测试系统
JP2667408B2 (ja) 翻訳通信システム
JP2019153099A (ja) 会議支援システム及び会議支援プログラム
CN103095927A (zh) 基于移动通讯终端及眼镜的显示及语音输出方法及系统
CN110931016A (zh) 一种离线质检用语音识别方法及系统
CN109761126B (zh) 电梯轿厢内乘客对话的语音识别及内容显示的方法
JP2016045253A (ja) データ構造、音声対話装置及び電子機器
CN113763925A (zh) 语音识别方法、装置、计算机设备及存储介质
CN113299309A (zh) 语音翻译方法及装置、计算机可读介质和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant