CN114584535A - 一种实现双向通话的电梯监控摄像机接入呼叫中心系统 - Google Patents
一种实现双向通话的电梯监控摄像机接入呼叫中心系统 Download PDFInfo
- Publication number
- CN114584535A CN114584535A CN202210097509.7A CN202210097509A CN114584535A CN 114584535 A CN114584535 A CN 114584535A CN 202210097509 A CN202210097509 A CN 202210097509A CN 114584535 A CN114584535 A CN 114584535A
- Authority
- CN
- China
- Prior art keywords
- data
- terminal
- audio
- audio data
- call center
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 37
- 238000004891 communication Methods 0.000 claims abstract description 79
- 230000005540 biological transmission Effects 0.000 claims abstract description 76
- 238000012545 processing Methods 0.000 claims abstract description 61
- 230000011664 signaling Effects 0.000 claims abstract description 39
- 230000006978 adaptation Effects 0.000 claims abstract description 19
- 238000012216 screening Methods 0.000 claims description 9
- 238000004458 analytical method Methods 0.000 claims description 8
- 238000002407 reforming Methods 0.000 claims description 7
- 230000004927 fusion Effects 0.000 claims description 3
- 230000002457 bidirectional effect Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 19
- 230000009286 beneficial effect Effects 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 10
- 238000000034 method Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 4
- 238000005070 sampling Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000012423 maintenance Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012856 packing Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 210000001503 joint Anatomy 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000001012 protector Effects 0.000 description 1
- 238000003908 quality control method Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B3/00—Applications of devices for indicating or signalling operating conditions of elevators
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
- B66B5/02—Applications of checking, fault-correcting, or safety devices in elevators responsive to abnormal operating conditions
- B66B5/021—Applications of checking, fault-correcting, or safety devices in elevators responsive to abnormal operating conditions the abnormal operating conditions being independent of the system
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1069—Session establishment or de-establishment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明提供了一种实现双向通话的电梯监控摄像机接入呼叫中心系统,包括:接收端,用于基于摄像头获取电梯内部的音频数据并接收报警信号;注册端,用于当接收到所述报警信号时,将所述目标摄像头端对应的目标音频数据传输至所述FreeSwitch网关,并进行适配处理获得对应的标准目标音频数据;传输端,用于将所述标准目标音频数据从所述FreeSwitch网关传输至所述呼叫中心,并基于流媒体网关和外呼接口将所述目标音频数据传输至所述第三方通信端和第三方音频服务商;反馈端,用于将从所述第三方通信端和所述第三方音频服务商接收的反馈音频数据反馈至所述目标摄像头端;实现了摄像机与呼叫中心的sip信令和音频数据的相互转发,从而建立双向音频会话通道。
Description
技术领域
本发明涉及电梯救援和音频通话融合技术领域,特别涉及一种实现双向通话的电梯监控摄像机接入呼叫中心系统。
背景技术
目前,随着我国经济建设的迅猛发展,人民物质文化生活水平的迅速提高,电梯已不仅是一种生产环节中的重要设备,更是工作和生活中的必需设备。随着电梯的普及,电梯事故也时有发生。一旦发生电梯事故,将会给人民群众的生命财产安全造成极大危害。电梯已作为特种设备之一纳入国家监管。随着社会经济的发展,电梯已广泛使用在各行各业,保有量越来越大,且每年都在迅猛增长,随着电梯的频繁使用,电梯困人、夹人等故障时有发生。那么如何正确实施电梯故障救援,最大限度地减少人员伤亡和财产损失,已成为目前摆在质监部门面前的一个重要课题。
当电梯发生故障后,被困人员惊慌失措,有可能擅自采取逃生动作,在没有电梯专业人员的指导下,可能给自身造成二次伤害。现实状况下老旧电梯,电梯报警按键失灵,传统的视频监控由于自身封闭,很难将数据上报到互联网,因此报警监控不能及时发送给救援人员,被困人员也很难得到及时救助。
现有的安防监控摄像机本身不存在和呼叫中心的连通性,本身也是通过国标GB28181协议通过SIP信令和音视频数据走网络流量,完成实时音视频通话和对讲,而FreeSwitch网关本身也是存在自身的SIP信令和音视频数据,只是两者的SIP信令不同,只有做好SIP信令的兼容,才能打通音视频数据相互转发。
因此,本发明提出一种实现双向通话的电梯监控摄像机接入呼叫中心系统。
发明内容
本发明提供一种实现双向通话的电梯监控摄像机接入呼叫中心系统,用以基于传统视频监控进行了改进,实现了摄像机与呼叫中心的sip信令和音频数据的相互转发,建立会话通道,替换了原有落后的监控模式。
本发明提供一种实现双向通话的电梯监控摄像机接入呼叫中心系统,包括:
接收端,用于基于摄像头获取电梯内部的音频数据,同时,从电梯运行现场接收报警信号;
注册端,用于当接收到所述报警信号时,基于第一SIP信令将所述目标摄像头端对应的目标音频数据传输至所述FreeSwitch网关,并对所述目标音频数据进行适配处理获得对应的标准目标音频数据;
传输端,用于基于第二SIP信令将所述标准目标音频数据从所述FreeSwitch网关传输至所述呼叫中心,并基于流媒体网关和外呼接口将所述目标音频数据传输至所述第三方通信端和第三方音频服务商;
反馈端,用于将从所述第三方通信端和所述第三方音频服务商接收的反馈音频数据反馈至所述目标摄像头端。
优选的,所述接收端,包括:
第一音频接收模块,用于基于设置在电梯内部的摄像头获取对应电梯内部的音频数据;
信号接收模块,用于基于设置在对应电梯运行现场的报警设备,接收报警信号。
优选的,所述注册端,包括:
第一确定模块,用于当接收到所述报警信号时,则基于所述报警信号确定出目标摄像头端的终端号码和第三方通信端列表;
第二确定模块,用于基于所述终端号码和预先配置在所述目标摄像头端的FreeSwitch网关相关信息,确定出对应的第一SIP信令和第一传输协议;
注册模块,用于基于所述第一SIP信令将所述目标摄像头端注册至FreeSwitch网关;
第一传输模块,用于基于所述第一传输协议将所述目标摄像头端对应的目标音频数据传输至所述FreeSwitch网关中;
适配处理模块,用于对目标音频数据进行适配处理,获得对应的标准目标音频数据。
优选的,所述第一传输模块,包括:
判断单元,用于判断所述FreeSwitch网关是否同时接收到多个来源终端的目标音频数据,若是,则对所有目标音频数据进行抓包分析差异,获得对应的差异数据集;
适配单元,用于基于所述差异数据集对所述目标音频数据进行适配处理,获得对应的标准目标音频数据。
优选的,所述传输端,包括:
第二传输模块,用于基于第二SIP信令将所述标准目标音频数据从所述FreeSwitch网关传输至所述呼叫中心;
接口调用模块,用于基于所述报警信号调用所述呼叫中心的外呼接口;
第三传输模块,用于基于流媒体网关和所述外呼接口将所述标准目标音频数据传输至所述第三方通信端和第三方音频服务商。
优选的,所述接口调用模块,包括:
信号解析单元,用于当接收到所述报警信号时,解析所述报警信号获得对应的报警信息,基于所述报警信息确定对应的第三方通信端列表;
接口调用单元,用于基于所述第三方通信列表调用所述呼叫中心的外呼接口。
优选的,所述第三传输模块,包括:
请求接收单元,用于接收来自所述第三方通信列表中的通信端的第一通话请求,同时,接收来自所述第三方音频服务商的服务终端的第二通话请求;
第一传输单元,用于当接收到所述第一通话请求时,则基于所述第一通话请求和所述外呼接口将所述标准目标音频数据从所述呼叫中心传输至对应的通信端;
第二传输单元,用于当接收到所述第二通话请求时,则基于所述第二通话请求和所述流媒体网关将所述标准目标音频数据从所述呼叫中心传输至第三方音频服务商中对应的服务终端。
优选的,所述反馈端,包括:
语音接收模块,用于当接收到所述第一通话请求时,则接收从对应的通信端输入的第一反馈语音数据;
第二音频接收模块,用于当接收到所述第二通话请求时,则接收从对应的服务终端输入的第一反馈音频数据;
第四传输模块,用于基于所述外呼接口将所述第一反馈语音数据传输至所述呼叫中心,同时,基于所述流媒体网关将所述第一反馈音频数据传输至所述呼叫中心;
数据划分模块,用于将所述第一反馈音频数据划分获得第一子反馈视频数据和第一子反馈语音数据;
数据重整模块,用于将所述第一子反馈语音数据和所述第一反馈语音数据进行混音处理,获得对应的最终反馈语音数据,将所述最终反馈语音数据和所述第一子反馈视频数据进行混屏处理,获得对应的最终反馈音频数据;
终端汇总模块,用于将所述第一通话请求对应的通信端和所述第二通话请求对应的服务终端汇总,生成对应的音频通话端汇总列表;
终端筛选模块,用于从所述音频通话端汇总列表中筛选出可以接收音频数据的第一终端,同时,从所述音频通话端汇总列表中筛选出只可以接收语音数据的第二终端;
第五传输模块,用于基于所述外呼接口和所述流媒体网关将所述最终反馈语音数据从所述呼叫中心传输至所述第一终端;
第六传输模块,用于基于所述外呼接口和所述流媒体网关将所述最终反馈音频数据从所述呼叫中心传输至所述第二终端;
第七传输模块,用于基于所述FreeSwitch网关将所述最终反馈语音数据从所述呼叫中心传输至所述摄像头端。
优选的,所述数据重整模块,包括:
数据汇总模块,用于将所述第一子反馈语音数据和所述第一反馈语音数据以及所述第一子反馈视频数据进行汇总获得对应的待混数据;
来源确定单元,用于基于来源终端将所述待混数据划分成多个子数据包,并确定出每个子据包的来源终端;
媒介确定单元,用于基于所述来源终端确定出对应的第一子传输协议和对应的第一应用程序编程接口;
解包处理单元,用于基于所述来源终端判断对应子数据包是否需要进行解包处理,若是,则基于所述第一子传输协议对对应的子数据包进行解包处理,获得对应的编程数据,否则,基于对应的第一应用程序编程接口和对应的第一子传输协议获得对应的编程数据;
解码处理单元,用于判断所述编程数据是否需要解码,若是,则判断所述编程数据是否为语音数据,若是,则对所述编程数据进行语音解码获得对应的脉冲编码调制音频帧集合,否则,对所述编程数据进行视频解码获得对应的YUV图像集合;
所述解码处理单元,还用于当判定所述编程数据不需要解码时,则基于对应的第一应用程序编程接口直接获得对应的脉冲编码调制音频帧或YUV图像集合;
混音处理单元,用于将所有脉冲编码调制音频帧进行混音处理,获得对应的最终反馈语音数据;
混屏处理单元,用于将所有YUV图像集合进行混屏处理,获得对应的最终反馈视频数据;
数据融合单元,用于将所述最终反馈语音数据和所述最终反馈视频数据进行融合,获得对应的最终反馈音频数据。
优选的,所述第五传输模块,包括:
终端确定单元,用于确定所述第一终端对应的终端类型,基于所述终端类型确定对应的第二子传输协议和对应的第二应用程序编程接口;
编码处理单元,用于基于所述终端类型判断所述最终反馈语音数据是否需要编码,若是,则对最终反馈语音数据进行编码获得对应的编码数据,否则,基于对应的第二应用程序编程接口和对应的第二子传输协议以及所述外呼接口和所述流媒体网关将所述最终反馈语音数据直接传输至对应的第一终端;
封包处理单元,用于基于所述终端类型判断所述编码数据是否需要进行封包处理,若是,则对所述编码数据进行封包处理,获得对应的封包数据,否则,基于对应的第二应用程序编程接口和所述第二子传输协议以及所述外呼接口和所述流媒体网关将所述编码数据直接传输至对应的第一终端;
第三传输单元,用于基于对应的第二子传输协议和所述流媒体网关以及所述外呼接口,将所述封包数据传输至对应的第一终端。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例中一种实现双向通话的电梯监控摄像机接入呼叫中心系统示意图;
图2为本发明实施例中一种接收端示意图;
图3为本发明实施例中一种注册段示意图;
图4为本发明实施例中一种第一传输模块示意图;
图5为本发明实施例中一种传输端示意图;
图6为本发明实施例中一种接口调用模块示意图;
图7为本发明实施例中一种第三传输模块示意图;
图8为本发明实施例中一种反馈端示意图;
图9为本发明实施例中一种数据重整模块示意图;
图10为本发明实施例中一种第五传输模块示意图;
图11为本发明实施例中一种实时音视频通话服务器示意图;
图12为本发明实施例中一种实时音频通话流程示意图;
图13为本发明实施例中一种实时视频通话流程示意图;
图14为本发明实施例中一种摄像机与Agora SDK互通示意图;
图15为本发明实施例中一种摄像机注册流程示意图;
图16为本发明实施例中一种呼叫流程示意图;
图17为本发明实施例中一种摄像机实时音视频通话示意图;
图18为本发明实施例中一种数据库设置设备的外显号码示意图;
图19为本发明实施例中一种trtc代码支持示意图;
图20为本发明实施例中一种摄像机GB28181配置示意图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
实施例1:
本发明提供了一种实现双向通话的电梯监控摄像机接入呼叫中心系统,参考图1、11、16、17,包括:
接收端,用于基于摄像头获取电梯内部的音频数据,同时,从电梯运行现场接收报警信号;
注册端,用于当接收到所述报警信号时,基于第一SIP信令将所述目标摄像头端对应的目标音频数据传输至所述FreeSwitch网关,并对所述目标音频数据进行适配处理获得对应的标准目标音频数据;
传输端,用于基于第二SIP信令将所述标准目标音频数据从所述FreeSwitch网关传输至所述呼叫中心,并基于流媒体网关和外呼接口将所述目标音频数据传输至所述第三方通信端和第三方音频服务商;
反馈端,用于将从所述第三方通信端和所述第三方音频服务商接收的反馈音频数据反馈至所述目标摄像头端。
该实施例中,一种实现双向通话的电梯监控摄像机接入呼叫中心系统的实施步骤包括:
(1)部署FreeSwitch及开发的GB28181兼容模块:
cd/voc/
tar xf freeswitch_src.tar.gz
cd freeswitch
make
(2)修改默认密码:
nano/voc/opt/freeswitch2/etc/freeswitch/vars.xml
<X-PRE-PROCESS cmd=“set”data=“default_password=center_123456”/>
(3)启动freeswitch
./voc/opt/freeswitch/bin/freeswitch-nonat-nc
(4)Mysql部署:
sudo dnf--enablerepo=mysql57-community install mysql-community-server
systemctl enable--now mysqld.service
(5)Sip用户帐号添加:
/voc/opt/freeswitch/sbin/opensipsctl add 9776101center_123456
/voc/opt/freeswitch/sbin/opensipsctl add 9776102center_123456
/voc/opt/freeswitch/sbin/opensipsctl add 9776103center_123456
/voc/opt/freeswitch/sbin/opensipsctl add 9776104center_123456
/voc/opt/freeswitch/sbin/opensipsctl add 9776105center_123456
/voc/opt/freeswitch/sbin/opensipsctl add 9776106center_123456
/voc/opt/freeswitch/sbin/opensipsctl add 9776107center_123456
/voc/opt/freeswitch/sbin/opensipsctl add 9776108center_123456
/voc/opt/freeswitch/sbin/opensipsctl add 9776109center_123456
/voc/opt/freeswitch/sbin/opensipsctl add 9776110center_123456
(6)数据库设置设备的外显号码,参考图18;
(7)Gb28181代码支持:
camera_gb28181/switch_rtp.c
(8)trtc代码支持,参考图19;
(9)摄像机GB28181配置,参考图20;
(10)摄像机触发报警输入;
(11)电梯平台接收到报警输入http请求开始调呼叫中心外呼接口,接口调通,手机和摄像机正常通话;
(12)手机端向摄像机设备发起实时音视频通话;
(13)电梯平台接收到对此摄像头设备的音视频通话请求,调用FreeSwitch的http接口,传递摄像机设备号,房间号,手机端用户id等信息,建立音视频通话房间。等待摄像机和手机端音视频数据进入trtc房间。完成摄像机和手机端实时音视频通话,手机端也可以单独发对讲音频给到摄像机。
该实施例中,摄像头时可以同时获取摄像范围内的语音数据以及视频数据的。
该实施例中,音频数据即为基于摄像头获取的电梯内部的声音数据和视频数据。
该实施例中,报警信号即为通过设置在电梯内部的按键输入的报警信号,可以体现故障电梯的具体位置。
该实施例中,第一SIP信令即为实现FreeSwitch网关和摄像头端之间的音频通话功能的SIP信令。
该实施例中,目标摄像头即为接收到的报警信号对应的电梯内的摄像头。
该实施例中,目标音频数据即为目标摄像头获取的对应电梯内部的音频数据。
该实施例中,除了SIP信令兼容,音视频数据包也需要兼容,比如音频ptime(多重时间习惯)各不一,呼叫系统需要的ptime为20ms,而且各摄像机厂商实现GB28181协议有差异都会导致呼叫失败,所以兼容的FreeSwitch网关需要适配各种情况,每对接一家安防摄像机遇到问题,需要在网关端抓包分析差异,并作相应的适配。当所有兼容和适配做完后,摄像机和手机通话效果就和普通手机之间通话效果一致;标准目标音频数据即为将目标音频护具进行适配处理后获得的音频数据。
该实施例中,第二SIP信令即为实现FreeSwitch网关和呼叫中心之间的音频通话功能的SIP信令。
该实施例中,流媒体网关即为可管理、可运营的视频监控系统中的一个重要的组成部分,它的两个主要功能是视频分发和网络地址转换(NAT)功能。
该实施例中,外呼接口即为用于实现呼叫中心向其他通信端(即救援人员)进行呼叫的呼叫中心的接口。
该实施例中,第三方通信端即救援人员电话。
该实施例中,第三方音频服务商即为浏览器、Android、iOS等移动、办公设备以及TRTC、Agora、Zego等常用第三方实时音视频传输协议设备,实时音视频通话服务器,将摄像机的实时音视频数据转发给第三方音视频服务商(TRTC、Agora、Zego),第三方音视频服务商能提供PC Web端、移动端、微信小程序提供SDK,帮助电梯平台实现观看摄像机的实时画面、及与摄像机交互对讲。
该实施例中,反馈音频数据即为从第三方通信端和第三方音频服务商接收的音频数据。
该实施例中,本发明基于传统视频监控进行了改进,完全可以替换原有落后的监控模式,实现安防摄像机通过电梯按键输入报警事件,系统接收到报警事件后,将系统预设的救援人员电话,和分配给摄像机的软终端号码,通过接口向呼叫中心发起外呼,呼叫中心会拉通救援人员电话和摄像机进行多人通话,同时救援人员也可以通过小程序或APP打开摄像机音视频,查看电梯内视频。
该实施例中,此摄像机,需要基于国标GB28181协议的安防视频监控IPC摄像机,在摄像机端配置好系统兼容的国标GB28181协议的FreeSwitch网关IP、域、帐号等信息。摄像机会通过SIP信令注册到网关上,网关再和呼叫中心的网关通过SIP信令交换,完成摄像机到呼叫中心的SIP信令传递。
该实施例中,安防监控摄像机本身不存在和呼叫中心的连通性,本身也是通过国标GB28181协议通过SIP信令和音视频数据走网络流量,完成实时音视频通话和对讲,而FreeSwitch网关本身也是存在自身的SIP信令和音视频数据,只是两者的SIP信令不同,只要做好SIP信令的兼容,才能打通音视频数据相互转发。这样就能把音视频数据给到FreeSwitch,FreeSwitch把音频给到呼叫中心,就可以完成摄像机和电话的音频呼通,同时FreeSwitch也可以把音视频数据给到流媒体服务器,这样也可以通过流媒体服务器转发RTC音视频数据包,流媒体服务器可以转码出WebRTC、RTMP,HTTP-FLV实时音视频流给web,app,小程序观看。
以上技术的有益效果为:基于传统视频监控进行了改进,实现了摄像机与呼叫中心的sip信令和音频数据的相互转发,建立会话通道,替换了原有落后的监控模式,实现安防摄像机通过电梯按键输入报警事件,一旦监控摄像机附加了本发明的这套FreeSwitch兼容网关功能,此摄像机就不仅仅是一套监控设备,它可以进入物联网或者智慧城市领域,做出完全不一样的商业模式和生态,使得电梯利益相关方都能各取所需;并且对电梯乘客来说能得到及时救援,确保其人身安全;物业使用方能及时查看报警或视频监控;电梯维保方能按需维保及时采取救援措施;保险方能根据报警事件,维保记录合理制定保险产品;市场监督管理局能有效监督和管理电梯;在电梯的安全性、乘客安全、维保及时性、有效监管等方面得到了很大的提升,社会效益也大大提高。
实施例2:
在实施例1的基础上,所述接收端,参考图2,包括:
第一音频接收模块,用于基于设置在电梯内部的摄像头获取对应电梯内部的音频数据;
信号接收模块,用于基于设置在对应电梯运行现场的报警设备,接收报警信号。
该实施例中,报警设备即为设置在电梯内部的报警按键,当电梯出现故障情况时,被困人员可以通过该报警按键进行报警,这样电梯物联网平台即可收到对应的报警信号。
以上技术的有益效果为:通过设置在电梯内部的摄像头和报警设备可以在电梯发生故障时触发报警信号,同时,获取电梯内部的音频数据,使得电梯物联网平台可以收到对应的报警信号,进而进行音频通话和救援工作。
实施例3:
在实施例1的基础上,所述注册端,参考图3、11、16、17、18,包括:
第一确定模块,用于当接收到所述报警信号时,则基于所述报警信号确定出目标摄像头端的终端号码和第三方通信端列表;
第二确定模块,用于基于所述终端号码和预先配置在所述目标摄像头端的FreeSwitch网关相关信息,确定出对应的第一SIP信令和第一传输协议;
注册模块,用于基于所述第一SIP信令将所述目标摄像头端注册至FreeSwitch网关;
第一传输模块,用于基于所述第一传输协议将所述目标摄像头端对应的目标音频数据传输至所述FreeSwitch网关中;
适配处理模块,用于对目标音频数据进行适配处理,获得对应的标准目标音频数据。
该实施例中,参考图18,终端号码即为每个摄像头对应的识别号码。
该实施例中,第三方通信端列表即为基于报警信号确定出发生故障的目标电梯,基于目标电梯确定出对应的救援人员通话列表。
该实施例中,预先配置在所述目标摄像头端的FreeSwitch网关相关信息即为在摄像机端配置好系统兼容的国标GB28181协议的FreeSwitch网关IP、域、帐号等信息。
该实施例中,第一传输协议即为实现摄像头端和FreeSwitch网关之间音频数据传输的传输协议,参考图11,本方案主要实现实时音视频通话服务器,建议摄像机、SIP-PSTN网关、webrtc以及一些私有协议等各类不同协议设备之间的实时音视频对讲的互联互通。本方案支持通过GB28181协议建立与摄像机间的会话通道,支持通过SIP协议建立与SIP-PSTN网关之间的会话通道,支持通过webrtc协议建立与浏览器、Android、iOS等移动、办公设备之间的会话通道,同时支持TRTC、Agora、Zego等常用第三方实时音视频传输协议设备之间的会话通道。由于GB28181和SIP、WebRTC都是标准协议,不再赘述三种协议间的互联互通;而TRTC、Agora等第三方实时通话SDK提供了enterRoom等接口实现协议对接。
该实施例中,基于所述第一SIP信令将所述目标摄像头端注册至FreeSwitch网关的步骤具体参考图15,既为,基于GB28181协议在FreeSwitch网关注册心跳,基于第一SIP信令传输至呼叫中心。
该实施例中,基于所述第一传输协议将所述目标摄像头端对应的目标音频数据传输至所述FreeSwitch网关中具体参考图16和17,即为基于Invite/Message将目标音频数据传输至FreeSwitch网关中。
以上技术的有益效果为:基于报警信号确定出目标摄像头端的终端号码和第三方通信端列表,进一步基于预先配置在所述目标摄像头端的FreeSwitch网关相关信息生成对应的SIP信令和传输协议,从而实现将目标摄像机注册至FreeSwitch网关,实现将目标音频数据传输至呼叫中心,为实现摄像头和呼叫中心之间的音频对话提供了基础。
实施例4:
在实施例3的基础上,所述第一传输模块,参考图4,包括:
判断单元,用于判断所述FreeSwitch网关是否同时接收到多个来源终端的目标音频数据,若是,则对所有目标音频数据进行抓包分析差异,获得对应的差异数据集;
适配单元,用于基于所述差异数据集对所述目标音频数据进行适配处理,获得对应的标准目标音频数据。
该实施例中,来源终端即为目标摄像头。
该实施例中,判断所述FreeSwitch网关是否同时接收到多个来源终端的目标音频数据即为判断FreeSwitch网关是否同时接收到多个目标摄像头输入的目标音频数据。
该实施例中,差异数据集即为对所有目标音频数据进行抓包分析差异获得的数据集。
该实施例中,对所有目标音频数据进行抓包分析差异,获得对应的差异数据集,包括:
将目标音频数据中的语音数据和视频数据划分开,获得对应的目标语音数据和目标视频数据;
确定出每个目标语音数据对应的比特率bt1、响度xd、强度qd、采样率cyl、信道带宽xddk、多重时间习惯ptime,基于比特率bt1、响度xd、强度qd、采样率cyl、信道带宽xddk多重时间习惯ptime生成对应的目标语音数据参数集合(bt1,xd,qd,cyl,xddk,ptime);
基于每个目标语音数据对应的目标语音数据参数集合,计算出每个目标语音数据对应的目标语音数据差异集合:
例如,为10,为10,为10,为10,为10,为10,且当前计算的目标语音数据对应的目标语音数据参数集合为(11,13,14,13,15,16),则对应的目标语音数据差异集合为(1,3,4,3,5,6);
确定出每个目标视频数据对应的比特率bt2、采样频率cypl、量化步长lhbc,基于比特率bt2、采样频率cypl、量化步长lhbc生成对应的目标视频数据参数集合(bt2,cypl,lhbc);
基于每个目标视频数据对应的目标视频数据参数集合,计算出每个目标视频数据对应的目标视频数据差异集合:
该实施例中,基于所述差异数据集对所述目标音频数据进行适配处理,获得对应的标准目标音频数据,即为:基于目标语音数据差异集合包含的对应参数的差异值设置目标语音数据中的对应参数,同时,基于目标视频数据差异集合包含的对应参数的差异值设置目标视频数据中的对应参数即可。
基于所有目标音频数据中包含的目标语音数据,计算出每个目标语音数据对应的差异值
以上技术的有益效果为:实现从FreeSwitch网关对接收到的来自多个摄像头的音视频数据的兼容,避免因各摄像机厂商实现GB28181协议有差异导致呼叫失败,实现摄像机和手机通话效果和普通手机之间通话效果一致。
实施例5:
在实施例4的基础上,所述传输端,参考图5,包括:
第二传输模块,用于基于第二SIP信令将所述标准目标音频数据从所述FreeSwitch网关传输至所述呼叫中心;
接口调用模块,用于基于所述报警信号调用所述呼叫中心的外呼接口;
第三传输模块,用于基于流媒体网关和所述外呼接口将所述标准目标音频数据传输至所述第三方通信端和第三方音频服务商。
以上技术的有益效果为:基于FreeSwitch网关和呼叫中心之间的SIP信令将标准目标音频数据从FreeSwitch网关传输至呼叫中心,然后基于流媒体网关和外呼接口将标准目标音频数据传输至救援人员的手机端以及其他第三方web,app,小程序供救援人员查看,实现将电梯内的音频数据传输至救援人员电话和摄像机进行多人通话,同时救援人员也可以通过小程序或APP打开摄像机音视频查看电梯内视频。
实施例6:
在实施例5的基础上,所述接口调用模块,参考图6,包括:
信号解析单元,用于当接收到所述报警信号时,解析所述报警信号获得对应的报警信息,基于所述报警信息确定对应的第三方通信端列表;
接口调用单元,用于基于所述第三方通信列表调用所述呼叫中心的外呼接口。
该实施例中,报警信息即为解析报警信号获得的信息,具体包括:故障电梯的位置等于相关信息。
以上技术的有益效果为:基于报警信息确定出对应的救援人员电话列表,可以针对故障电梯的位置以及危险发生的情况针对性地生成对应的救援人员电话列表,既保证了救援效率,也避免了传输资源的浪费,以及提高了救援进度的传输效率。
实施例7:
在实施例6的基础上,所述第三传输模块,参考图7,包括:
请求接收单元,用于接收来自所述第三方通信列表中的通信端的第一通话请求,同时,接收来自所述第三方音频服务商的服务终端的第二通话请求;
第一传输单元,用于当接收到所述第一通话请求时,则基于所述第一通话请求和所述外呼接口将所述标准目标音频数据从所述呼叫中心传输至对应的通信端;
第二传输单元,用于当接收到所述第二通话请求时,则基于所述第二通话请求和所述流媒体网关将所述标准目标音频数据从所述呼叫中心传输至第三方音频服务商中对应的服务终端。
该实施例中,第一通话请求即为来自第三方通信列表中包含的通信端的通话请求。
该实施例中,第二通话请求即为来自第三方音频服务商的服务终端的通话请求。
以上技术的有益效果为:可以基于救援人员的通信端或服务终端发起的通话请求进入通话房间,并针对通话请求转发标准目标音频数据,保证了音频通话建立的效率和准确性。
实施例8:
在实施例7的基础上,所述反馈端,参考图8,包括:
语音接收模块,用于当接收到所述第一通话请求时,则接收从对应的通信端输入的第一反馈语音数据;
第二音频接收模块,用于当接收到所述第二通话请求时,则接收从对应的服务终端输入的第一反馈音频数据;
第四传输模块,用于基于所述外呼接口将所述第一反馈语音数据传输至所述呼叫中心,同时,基于所述流媒体网关将所述第一反馈音频数据传输至所述呼叫中心;
数据划分模块,用于将所述第一反馈音频数据划分获得第一子反馈视频数据和第一子反馈语音数据;
数据重整模块,用于将所述第一子反馈语音数据和所述第一反馈语音数据进行混音处理,获得对应的最终反馈语音数据,将所述最终反馈语音数据和所述第一子反馈视频数据进行混屏处理,获得对应的最终反馈音频数据;
终端汇总模块,用于将所述第一通话请求对应的通信端和所述第二通话请求对应的服务终端汇总,生成对应的音频通话端汇总列表;
终端筛选模块,用于从所述音频通话端汇总列表中筛选出可以接收音频数据的第一终端,同时,从所述音频通话端汇总列表中筛选出只可以接收语音数据的第二终端;
第五传输模块,用于基于所述外呼接口和所述流媒体网关将所述最终反馈语音数据从所述呼叫中心传输至所述第一终端;
第六传输模块,用于基于所述外呼接口和所述流媒体网关将所述最终反馈音频数据从所述呼叫中心传输至所述第二终端;
第七传输模块,用于基于所述FreeSwitch网关将所述最终反馈语音数据从所述呼叫中心传输至所述摄像头端。
该实施例中,第一反馈语音数据即为从发起第一通话请求的通信端输入的语音数据。
该实施例中,第一反馈音频数据即为从发起第二通话请求的服务终端输入的音频数据。
该实施例中,第一子反馈视频数据即为第一反馈音频数据中划分出的视频数据。
该实施例中,第一子反馈语音数据即为第一反馈音频数据中划分出的音频数据。
该实施例中,基于将所述第一子反馈语音数据和所述第一反馈语音数据进行混音处理的具体步骤参考图12.
该实施例中,最终反馈语音数据即为将第一子反馈语音数据和第一反馈语音数据进行混音处理后获得的语音数据。
该实施例中,最终反馈音频数据即为将最终反馈语音数据和第一子反馈视频数据进行混屏处理后获得的音频数据。
该实施例中,音频通话端汇总列表即为将第一通话请求对应的通信端和第二通话请求对应的服务终端汇总后生成对应的列表。
该实施例中,第一终端即为从音频通话端汇总列表中筛选出的可以接收音频数据的终端。
该实施例中,第二终端即为从音频通话端汇总列表中筛选出的只可以接收语音数据的终端。
以上技术的有益效果为:通过对从发起通话请求的通信端和服务终端接收对应的反馈语音数据进行划分、混音、混屏处理,实现将加入多人音频通话的终端或服务终端输入的反馈音频数据中的语音数据传输到只可以接收语音数据的通信端或服务终端,同时,将加入多人音频通话的终端或服务终端输入的反馈音频数据中的所有音频数据传输到可以接收音频数据的通信端或服务终端。
实施例9:
在实施例8的基础上,所述数据重整模块,参考图9,包括:
数据汇总模块,用于将所述第一子反馈语音数据和所述第一反馈语音数据以及所述第一子反馈视频数据进行汇总获得对应的待混数据;
来源确定单元,用于基于来源终端将所述待混数据划分成多个子数据包,并确定出每个子据包的来源终端;
媒介确定单元,用于基于所述来源终端确定出对应的第一子传输协议和对应的第一应用程序编程接口;
解包处理单元,用于基于所述来源终端判断对应子数据包是否需要进行解包处理,若是,则基于所述第一子传输协议对对应的子数据包进行解包处理,获得对应的编程数据,否则,基于对应的第一应用程序编程接口和对应的第一子传输协议获得对应的编程数据;
解码处理单元,用于判断所述编程数据是否需要解码,若是,则判断所述编程数据是否为语音数据,若是,则对所述编程数据进行语音解码获得对应的脉冲编码调制音频帧集合,否则,对所述编程数据进行视频解码获得对应的YUV图像集合;
所述解码处理单元,还用于当判定所述编程数据不需要解码时,则基于对应的第一应用程序编程接口直接获得对应的脉冲编码调制音频帧或YUV图像集合;
混音处理单元,用于将所有脉冲编码调制音频帧进行混音处理,获得对应的最终反馈语音数据;
混屏处理单元,用于将所有YUV图像集合进行混屏处理,获得对应的最终反馈视频数据;
数据融合单元,用于将所述最终反馈语音数据和所述最终反馈视频数据进行融合,获得对应的最终反馈音频数据。
该实施例中,待混数据即为将第一子反馈语音数据和第一反馈语音数据以及第一子反馈视频数据进行汇总后获得的数据。
该实施例中,子数据包即为基于来源终端将待混数据划分后获得的多个数据包。
该实施例中,基于所述来源终端确定出对应的第一子传输协议和对应的第一应用程序编程接口即为:本方案在实时音视频通话服务器侧实现UDP/RTP、TCP/RTP、QUIC以及一些私有传输协议的音视频码流的解包、混音和封包,从而实现各类音视频传输方式的互联互通;具体参考图12和图13中,摄像机、SIP-PSTN网关均采用UDP/RTP传输协议,WebRTC浏览器则采用UDP/SRTP传输协议。而TRTC SDK提供了API(应用程序编程接口)可以拉取或推送PCM(脉冲编码调制)音频帧。Agora SDK提供了API可以拉取或推送编码或的音频码流;由于摄像机不支持显示视频,因此无需推送视频码流到摄像机端。SIP-PSTN网关仅支持语音通话,不能拉取或推送视频码流。TRTC SDK提供了API可以拉取或推送YUV图像。Agora SDK则提供了API可以拉取或推送编码后的视频码流,由于Agora SDK提供了API推送编码后的视频码流,因此当业务场景中只存在摄像机和Agora SDK时,不需要进行性能开销极大的视频编码处理。
该实施例中,基于所述来源终端判断对应子数据包是否需要进行解包处理,参考图2和13可知:来源终端为SIP-PSTN网关、WebRTC浏览器的子数据包需要进行解包处理,而来源终端为TRTC SDK、Agora SDK的子数据包不需要进行解包处理。
该实施例中,编程数据即为对对应子数据包进行接报处理后获得的数据或基于对应子数据包基于对应的第一应用程序编程接口和对应的第一子传输协议变成获得的数据。
该实施例中,基于对应的第一应用程序编程接口和对应的第一子传输协议获得对应的编程数据,参考图2和13可知:来源终端为TRTC SDK和Agora SDK的子数据包直接基于对应的第一应用程序编程接口和对应的第一子传输协议获得对应的编程数据。
该实施例中,判断所述编程数据是否需要解码,参考图2和13可知:来源终端为参考图2和13可知:SIP-PSTN网关、WebRTC浏览器、Agora SDK的编程数据需要解码,而TRTCSDK的编程数据无需解码。
该实施例中,判断所述编程数据是否为语音数据,若是,则实现实时音频通话流程的流程参考图12,否则,参考图13。
该实施例中,脉冲编码调制音频帧(PCM)集合即为:人耳听到的是模拟信号,PCM是把声音从模拟信号转化为数字信号获得的音频帧,脉冲编码调制音频帧(PCM)集合即为脉冲编码调制音频帧构成的集合。
该实施例中,YUV图像集合即为YUV图像构成的集合。
以上技术的有益效果为:实现了对接收的反馈语音数据和反馈音频数据进行解包解码处理后获得最终反馈音频数据、最终反馈语音数据,该实施例9与实施例10结合实施,实时了在实时音视频通话服务器侧实现UDP/RTP、TCP/RTP、QUIC以及一些私有传输协议的音视频码流的解包、混音和封包,从而实现各类音视频传输方式的互联互通。
实施例10:
在实施例9的基础上,所述第五传输模块,参考图10,包括:
终端确定单元,用于确定所述第一终端对应的终端类型,基于所述终端类型确定对应的第二子传输协议和对应的第二应用程序编程接口;
编码处理单元,用于基于所述终端类型判断所述最终反馈语音数据是否需要编码,若是,则对最终反馈语音数据进行编码获得对应的编码数据,否则,基于对应的第二应用程序编程接口和对应的第二子传输协议以及所述外呼接口和所述流媒体网关将所述最终反馈语音数据直接传输至对应的第一终端;
封包处理单元,用于基于所述终端类型判断所述编码数据是否需要进行封包处理,若是,则对所述编码数据进行封包处理,获得对应的封包数据,否则,基于对应的第二应用程序编程接口和所述第二子传输协议以及所述外呼接口和所述流媒体网关将所述编码数据直接传输至对应的第一终端;
第三传输单元,用于基于对应的第二子传输协议和所述流媒体网关以及所述外呼接口,将所述封包数据传输至对应的第一终端。
该实施例中,参考图12,13终端类型即包括:SIP-PSTN网关、WebRTC浏览器、AgoraSDK、摄像机、TRTC SDK。
该实施例中,第二子传输协议即为:摄像机、SIP-PSTN网关均采用UDP/RTP传输协议,WebRTC浏览器则采用UDP/SRTP传输协议,TRTC SDK提供了API(应用程序编程接口)可以拉取或推送PCM(脉冲编码调制)音频帧。Agora SDK提供了API可以拉取或推送编码或的音频码流。
该实施例中,第二应用程序编程接口即为TRTC SDK和Agora SDK对应的API(应用程序编程接口)。
该实施例中,基于所述终端类型判断所述最终反馈语音数据是否需要编码,即为:参考图2和13可知:终端类型为SIP-PSTN网关、WebRTC浏览器、Agora SDK接收的最终反馈语音数据需要编码,而TRTC SDK接收的最终反馈语音数据无需编码。
该实施例中,编码数据即为对最终反馈语音数据进行编码获得的数据。
该实施例中,基于对应的第二应用程序编程接口和对应的第二子传输协议以及所述外呼接口和所述流媒体网关将所述最终反馈语音数据直接传输至对应的第一终端,参考图2和13可知,TRTC SDK接收的最终反馈语音数据基于对应的第二应用程序编程接口和对应的第二子传输协议以及所述外呼接口和所述流媒体网关直接传输至对应的第一终端。
该实施例中,基于所述终端类型判断所述编码数据是否需要进行封包处理,参考图2和13可知,摄像头、SIP-PSTN网关、WebRTC浏览器接收的编码数据需要进行封包处理,而TRTC SDK、Agora SDK接收的编码数据或最终反馈语音数据无需封包处理。
该实施例中,封包数据即为对所述编码数据进行封包处理过后获得的数据。
该实施例中,基于对应的第二应用程序编程接口和所述第二子传输协议以及所述外呼接口和所述流媒体网关将所述编码数据直接传输至对应的第一终端,即为:TRTC SDK接收的编码数据基于对应的第二应用程序编程接口和所述第二子传输协议以及所述外呼接口和所述流媒体网关直接传输至对应的第一终端。
该实施例中,基于对应的第二子传输协议和所述流媒体网关以及所述外呼接口,将所述封包数据传输至对应的第一终端,即为:摄像头、SIP-PSTN网关、WebRTC浏览器接收的封包数据基于对应的第二子传输协议和所述流媒体网关以及所述外呼接口传输至对应的第一终端。
以上技术的有益效果为:实现了对解包解码处理后获得的最终反馈语音数据和最终反馈音频数据的编码封包并传输至对应的第一终端,该实施例10与实施例9结合实施,实时了在实时音视频通话服务器侧实现UDP/RTP、TCP/RTP、QUIC以及一些私有传输协议的音视频码流的解包、混音和封包,从而实现各类音视频传输方式的互联互通。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种实现双向通话的电梯监控摄像机接入呼叫中心系统,其特征在于,包括:
接收端,用于基于摄像头获取电梯内部的音频数据,同时,从电梯运行现场接收报警信号;
注册端,用于当接收到所述报警信号时,基于第一SIP信令将所述目标摄像头端对应的目标音频数据传输至所述FreeSwitch网关,并对所述目标音频数据进行适配处理获得对应的标准目标音频数据;
传输端,用于基于第二SIP信令将所述标准目标音频数据从所述FreeSwitch网关传输至所述呼叫中心,并基于流媒体网关和外呼接口将所述目标音频数据传输至所述第三方通信端和第三方音频服务商;
反馈端,用于将从所述第三方通信端和所述第三方音频服务商接收的反馈音频数据反馈至所述目标摄像头端。
2.根据权利要求1所述的一种实现双向通话的电梯监控摄像机接入呼叫中心系统,其特征在于,所述接收端,包括:
第一音频接收模块,用于基于设置在电梯内部的摄像头获取对应电梯内部的音频数据;
信号接收模块,用于基于设置在对应电梯运行现场的报警设备,接收报警信号。
3.根据权利要求1所述的一种实现双向通话的电梯监控摄像机接入呼叫中心系统,其特征在于,所述注册端,包括:
第一确定模块,用于当接收到所述报警信号时,则基于所述报警信号确定出目标摄像头端的终端号码和第三方通信端列表;
第二确定模块,用于基于所述终端号码和预先配置在所述目标摄像头端的FreeSwitch网关相关信息,确定出对应的第一SIP信令和第一传输协议;
注册模块,用于基于所述第一SIP信令将所述目标摄像头端注册至FreeSwitch网关;
第一传输模块,用于基于所述第一传输协议将所述目标摄像头端对应的目标音频数据传输至所述FreeSwitch网关中;
适配处理模块,用于对目标音频数据进行适配处理,获得对应的标准目标音频数据。
4.根据权利要求3所述的一种实现双向通话的电梯监控摄像机接入呼叫中心系统,其特征在于,所述第一传输模块,包括:
判断单元,用于判断所述FreeSwitch网关是否同时接收到多个来源终端的目标音频数据,若是,则对所有目标音频数据进行抓包分析差异,获得对应的差异数据集;
适配单元,用于基于所述差异数据集对所述目标音频数据进行适配处理,获得对应的标准目标音频数据。
5.根据权利要求4所述的一种实现双向通话的电梯监控摄像机接入呼叫中心系统,其特征在于,所述传输端,包括:
第二传输模块,用于基于第二SIP信令将所述标准目标音频数据从所述FreeSwitch网关传输至所述呼叫中心;
接口调用模块,用于基于所述报警信号调用所述呼叫中心的外呼接口;
第三传输模块,用于基于流媒体网关和所述外呼接口将所述标准目标音频数据传输至所述第三方通信端和第三方音频服务商。
6.根据权利要求5所述的一种实现双向通话的电梯监控摄像机接入呼叫中心系统,其特征在于,所述接口调用模块,包括:
信号解析单元,用于当接收到所述报警信号时,解析所述报警信号获得对应的报警信息,基于所述报警信息确定对应的第三方通信端列表;
接口调用单元,用于基于所述第三方通信列表调用所述呼叫中心的外呼接口。
7.根据权利要求6所述的一种实现双向通话的电梯监控摄像机接入呼叫中心系统,其特征在于,所述第三传输模块,包括:
请求接收单元,用于接收来自所述第三方通信列表中的通信端的第一通话请求,同时,接收来自所述第三方音频服务商的服务终端的第二通话请求;
第一传输单元,用于当接收到所述第一通话请求时,则基于所述第一通话请求和所述外呼接口将所述标准目标音频数据从所述呼叫中心传输至对应的通信端;
第二传输单元,用于当接收到所述第二通话请求时,则基于所述第二通话请求和所述流媒体网关将所述标准目标音频数据从所述呼叫中心传输至第三方音频服务商中对应的服务终端。
8.根据权利要求7所述的一种实现双向通话的电梯监控摄像机接入呼叫中心系统,其特征在于,所述反馈端,包括:
语音接收模块,用于当接收到所述第一通话请求时,则接收从对应的通信端输入的第一反馈语音数据;
第二音频接收模块,用于当接收到所述第二通话请求时,则接收从对应的服务终端输入的第一反馈音频数据;
第四传输模块,用于基于所述外呼接口将所述第一反馈语音数据传输至所述呼叫中心,同时,基于所述流媒体网关将所述第一反馈音频数据传输至所述呼叫中心;
数据划分模块,用于将所述第一反馈音频数据划分获得第一子反馈视频数据和第一子反馈语音数据;
数据重整模块,用于将所述第一子反馈语音数据和所述第一反馈语音数据进行混音处理,获得对应的最终反馈语音数据,将所述最终反馈语音数据和所述第一子反馈视频数据进行混屏处理,获得对应的最终反馈音频数据;
终端汇总模块,用于将所述第一通话请求对应的通信端和所述第二通话请求对应的服务终端汇总,生成对应的音频通话端汇总列表;
终端筛选模块,用于从所述音频通话端汇总列表中筛选出可以接收音频数据的第一终端,同时,从所述音频通话端汇总列表中筛选出只可以接收语音数据的第二终端;
第五传输模块,用于基于所述外呼接口和所述流媒体网关将所述最终反馈语音数据从所述呼叫中心传输至所述第一终端;
第六传输模块,用于基于所述外呼接口和所述流媒体网关将所述最终反馈音频数据从所述呼叫中心传输至所述第二终端;
第七传输模块,用于基于所述FreeSwitch网关将所述最终反馈语音数据从所述呼叫中心传输至所述摄像头端。
9.根据权利要求8所述的一种实现双向通话的电梯监控摄像机接入呼叫中心系统,其特征在于,所述数据重整模块,包括:
数据汇总模块,用于将所述第一子反馈语音数据和所述第一反馈语音数据以及所述第一子反馈视频数据进行汇总获得对应的待混数据;
来源确定单元,用于基于来源终端将所述待混数据划分成多个子数据包,并确定出每个子据包的来源终端;
媒介确定单元,用于基于所述来源终端确定出对应的第一子传输协议和对应的第一应用程序编程接口;
解包处理单元,用于基于所述来源终端判断对应子数据包是否需要进行解包处理,若是,则基于所述第一子传输协议对对应的子数据包进行解包处理,获得对应的编程数据,否则,基于对应的第一应用程序编程接口和对应的第一子传输协议获得对应的编程数据;
解码处理单元,用于判断所述编程数据是否需要解码,若是,则判断所述编程数据是否为语音数据,若是,则对所述编程数据进行语音解码获得对应的脉冲编码调制音频帧集合,否则,对所述编程数据进行视频解码获得对应的YUV图像集合;
所述解码处理单元,还用于当判定所述编程数据不需要解码时,则基于对应的第一应用程序编程接口直接获得对应的脉冲编码调制音频帧或YUV图像集合;
混音处理单元,用于将所有脉冲编码调制音频帧进行混音处理,获得对应的最终反馈语音数据;
混屏处理单元,用于将所有YUV图像集合进行混屏处理,获得对应的最终反馈视频数据;
数据融合单元,用于将所述最终反馈语音数据和所述最终反馈视频数据进行融合,获得对应的最终反馈音频数据。
10.根据权利要求9所述的一种实现双向通话的电梯监控摄像机接入呼叫中心系统,其特征在于,所述第五传输模块,包括:
终端确定单元,用于确定所述第一终端对应的终端类型,基于所述终端类型确定对应的第二子传输协议和对应的第二应用程序编程接口;
编码处理单元,用于基于所述终端类型判断所述最终反馈语音数据是否需要编码,若是,则对最终反馈语音数据进行编码获得对应的编码数据,否则,基于对应的第二应用程序编程接口和对应的第二子传输协议以及所述外呼接口和所述流媒体网关将所述最终反馈语音数据直接传输至对应的第一终端;
封包处理单元,用于基于所述终端类型判断所述编码数据是否需要进行封包处理,若是,则对所述编码数据进行封包处理,获得对应的封包数据,否则,基于对应的第二应用程序编程接口和所述第二子传输协议以及所述外呼接口和所述流媒体网关将所述编码数据直接传输至对应的第一终端;
第三传输单元,用于基于对应的第二子传输协议和所述流媒体网关以及所述外呼接口,将所述封包数据传输至对应的第一终端。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210097509.7A CN114584535B (zh) | 2022-01-27 | 2022-01-27 | 一种实现双向通话的电梯监控摄像机接入呼叫中心系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210097509.7A CN114584535B (zh) | 2022-01-27 | 2022-01-27 | 一种实现双向通话的电梯监控摄像机接入呼叫中心系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114584535A true CN114584535A (zh) | 2022-06-03 |
CN114584535B CN114584535B (zh) | 2024-03-12 |
Family
ID=81772168
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210097509.7A Active CN114584535B (zh) | 2022-01-27 | 2022-01-27 | 一种实现双向通话的电梯监控摄像机接入呼叫中心系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114584535B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101362536B1 (ko) * | 2012-11-02 | 2014-02-13 | 윤상호 | Sip를 이용한 엘리베이터 비상 통화 교환 시스템 및 방법 |
CN103588059A (zh) * | 2013-11-13 | 2014-02-19 | 潍坊菱业电梯空调有限公司 | 基于呼叫中心及定位服务的电梯急修方法及系统 |
CN205855655U (zh) * | 2016-07-20 | 2017-01-04 | 宁波弘讯软件开发有限公司 | 一种智能呼梯系统 |
CN106303347A (zh) * | 2015-05-20 | 2017-01-04 | 江苏逐焱信息科技有限公司 | 一种数字可视对讲室内智能网关分机控制系统 |
CN106488342A (zh) * | 2016-11-07 | 2017-03-08 | 广州日滨科技发展有限公司 | 一种电梯电话桥接的方法及系统 |
CN107046578A (zh) * | 2017-04-28 | 2017-08-15 | 浙江海邦伟业智能科技股份有限公司 | 一种综合安防管理平台 |
CN207671477U (zh) * | 2017-12-26 | 2018-07-31 | 杭州西奥电梯有限公司 | 一种基于物联网的电梯对讲系统 |
JP2019057821A (ja) * | 2017-09-21 | 2019-04-11 | 株式会社日立ビルシステム | エレベーター通話システム |
CN111147677A (zh) * | 2018-11-05 | 2020-05-12 | 马上消费金融股份有限公司 | 一种呼叫中心系统 |
-
2022
- 2022-01-27 CN CN202210097509.7A patent/CN114584535B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101362536B1 (ko) * | 2012-11-02 | 2014-02-13 | 윤상호 | Sip를 이용한 엘리베이터 비상 통화 교환 시스템 및 방법 |
CN103588059A (zh) * | 2013-11-13 | 2014-02-19 | 潍坊菱业电梯空调有限公司 | 基于呼叫中心及定位服务的电梯急修方法及系统 |
CN106303347A (zh) * | 2015-05-20 | 2017-01-04 | 江苏逐焱信息科技有限公司 | 一种数字可视对讲室内智能网关分机控制系统 |
CN205855655U (zh) * | 2016-07-20 | 2017-01-04 | 宁波弘讯软件开发有限公司 | 一种智能呼梯系统 |
CN106488342A (zh) * | 2016-11-07 | 2017-03-08 | 广州日滨科技发展有限公司 | 一种电梯电话桥接的方法及系统 |
CN107046578A (zh) * | 2017-04-28 | 2017-08-15 | 浙江海邦伟业智能科技股份有限公司 | 一种综合安防管理平台 |
JP2019057821A (ja) * | 2017-09-21 | 2019-04-11 | 株式会社日立ビルシステム | エレベーター通話システム |
CN207671477U (zh) * | 2017-12-26 | 2018-07-31 | 杭州西奥电梯有限公司 | 一种基于物联网的电梯对讲系统 |
CN111147677A (zh) * | 2018-11-05 | 2020-05-12 | 马上消费金融股份有限公司 | 一种呼叫中心系统 |
Non-Patent Citations (2)
Title |
---|
AKIO NOMURA; HIROKI MATSUTANI; TADAHIRO KURODA; JUNICHIRO KADOMOTO; YUSUKE MATSUSHITA; HIDEHARU AMANO: "Vertical Packet Switching Elevator Network Using Inductive Coupling ThruChip Interface", IEEE, 19 January 2017 (2017-01-19) * |
刘宇辉;: "楼宇智能化系统网络融合性能剖析之视频监控", 智能建筑与城市信息, no. 04, 25 April 2013 (2013-04-25) * |
Also Published As
Publication number | Publication date |
---|---|
CN114584535B (zh) | 2024-03-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1819097B1 (en) | A system for monitoring video call | |
CN102905165B (zh) | 视频联网服务前置机 | |
KR101295707B1 (ko) | 광대역 음성 인터넷 전화 서비스를 제공하는 셋탑박스 및 이를 이용한 광대역 음성 인터넷 전화 서비스 제공방법 | |
KR101119662B1 (ko) | 멀티미디어 서비스 품질측정 시스템 및 그 동작 방법 | |
CN108366056A (zh) | 一种将视频监控系统接入视频会议系统的方法 | |
US20160127457A1 (en) | Machine-To-Machine (M2M) Autonomous Media Delivery | |
CN114979133B (zh) | 一种融合通信云平台的部署方法及装置 | |
JP5242683B2 (ja) | インターネットプロトコル(ip)ドメインでの監視における又はこれに関連する改良 | |
TWI510025B (zh) | Communication systems and methods and programs | |
CN109429108A (zh) | 一种iOS移动端基于Socket.IO和WebRTC的观看端视频连麦架构 | |
CN114584535B (zh) | 一种实现双向通话的电梯监控摄像机接入呼叫中心系统 | |
EP2903224B1 (en) | Method for transmitting audio information and packet communication system | |
CN114024787B (zh) | 智能家居的远程控制方法、装置、设备和存储介质 | |
CN112887497B (zh) | 通信方法、装置和计算机存储介质 | |
JP2019057821A (ja) | エレベーター通話システム | |
TWI275989B (en) | A network device and a method for detecting voice quality and a communication system using the same | |
CN105141894A (zh) | 一种无线监控系统及其无线监控设备、中心服务器 | |
US10298521B2 (en) | Systems and methods for connecting legacy products via an analog telephone adapter (ATA) | |
CN100463438C (zh) | 用于公共安全统一通信网络的ip视频终端设备 | |
KR100854883B1 (ko) | 통신 단말기 및 통신 단말기의 발신자 표시 방법 | |
TWM393936U (en) | System for detecting disability on packets | |
CN115118909A (zh) | 对讲机的双向对讲音视频的nvr录制方法、设备及介质 | |
Chandrasekaran et al. | Socio-technical aspects of remote media control for a NG9-1-1 system | |
US9363366B1 (en) | System and method for improved lawful interceptions for calls involving in-band DTMF signaling | |
KR100924125B1 (ko) | 영상 구난 관리 시스템 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |