CN114173213A - 基于websocket的语音质量优化方法及对讲终端 - Google Patents
基于websocket的语音质量优化方法及对讲终端 Download PDFInfo
- Publication number
- CN114173213A CN114173213A CN202111510274.1A CN202111510274A CN114173213A CN 114173213 A CN114173213 A CN 114173213A CN 202111510274 A CN202111510274 A CN 202111510274A CN 114173213 A CN114173213 A CN 114173213A
- Authority
- CN
- China
- Prior art keywords
- voice
- talkback
- talkback voice
- unit
- real time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 28
- 238000005457 optimization Methods 0.000 title claims description 15
- 238000012544 monitoring process Methods 0.000 claims abstract description 21
- 230000003111 delayed effect Effects 0.000 claims abstract description 8
- 238000013500 data storage Methods 0.000 claims description 8
- 238000009825 accumulation Methods 0.000 claims description 2
- 230000005540 biological transmission Effects 0.000 abstract description 3
- 238000012545 processing Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000005538 encapsulation Methods 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q5/00—Selecting arrangements wherein two or more subscriber stations are connected by the same line to the exchange
- H04Q5/24—Selecting arrangements wherein two or more subscriber stations are connected by the same line to the exchange for two-party-line systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Telephonic Communication Services (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
基于websocket的语音质量优化方法及对讲终端，所述的方法是在对讲终端实时接收基于websocket协议的网络服务器转发的语音报文信息的过程中实现的，关键是在对讲终端中增加对讲语音缓存单元、对讲语音监测单元和对讲语音播报控制单元，对讲语音缓存单元实时接收网络服务器转发的对讲语音报文；对讲语音监测单元实时监测对讲语音缓存单元中每相邻两个对讲语音报文的间隔时间，当间隔时间超过设定的间隔阈值后，对讲语音播报控制单元将相邻两个对讲语音报文中的前一个对讲语音报文延时发送。通过对对讲语音缓存单元的实时动态调整，来达到语音质量优化的目的，通过本方法，可以实现语音的连续性，同时能够保证语音传输的及时性。
Description
技术领域
本发明属于对讲通讯技术领域，涉及到一种对讲通讯的语音优化方法，特别是基于websocket协议中的通讯语音质量的优化方法以及对讲终端的结构。
背景技术
随着科学技术的进步以及通讯技术的发展，在浏览器中与对讲终端之间实现语音对讲已成为现实，如专利申请号202011611625.3申请的一种WEB端实时对讲系统及对讲方法，通过web端与服务端建立socket信道进行数据交互，最终实现音频数据的采集与转发过程。但是众所周知，音频报文的封装分为TCP和UDP两种封装格式，在对讲语音领域中，语音的实时性与完整性都是非常重要的，如果采用websocket协议进行对讲语音，那么必然要面临着以上两种报文封装格式的优劣势。采用UDP格式封装对讲语音报文，优点是语音延时率低，但劣势是很容易丢包，而采用TCP格式封装对讲语音报文，虽然丢包率降低了，但很容易造成语音延时严重的问题。怎样才能在websocket协议的互联公网中，既能避免丢包问题，又能降低语音延时率的出现，一直困扰着本领域技术人员。
发明内容
本发明的目的是为了避免语音丢包同时降低语音延时率的技术问题，设计了一种基于websocket的语音质量优化方法及对讲终端，通过对对讲终端的改进实现了优化语音数据传输的过程。
本发明采用的技术方案是，基于websocket的语音质量优化方法，所述的方法是在对讲终端实时接收基于websocket协议的网络服务器转发的语音报文信息的过程中实现的，关键是在对讲终端中增加对讲语音缓存单元、对讲语音监测单元和对讲语音播报控制单元，在此基础上，所述的方法步骤如下：
a、对讲语音缓存单元实时接收网络服务器转发的对讲语音报文；
b、对讲语音监测单元实时监测对讲语音缓存单元中每相邻两个对讲语音报文的间隔时间，当间隔时间超过设定的间隔阈值后，对讲语音播报控制单元将相邻两个对讲语音报文中的前一个对讲语音报文延时发送。
所述的方法步骤还包括：
c、对讲语音监测单元实时监测对讲语音缓存单元中的数据存储量，当对讲语音缓存单元中的数据存储量累积达到存储阈值时，对讲语音播报控制单元控制对讲语音缓存单元中的所有对讲语音报文进行倍速发送。
所述的间隔阈值设定为200～500毫秒，对应的前一个对讲语音报文延时200～500毫秒发送。
所述的存储阈值为对讲语音缓存单元存储量的60～80％。
所述的倍速选择范围为1.25～2倍。
本发明还涉及一种对讲终端，所述的对讲终端包括对讲语音缓存单元、对讲语音监测单元和对讲语音播报控制单元，
对讲语音缓存单元，用于实时接收网络服务器转发的对讲语音报文，
对讲语音监测单元，用于实时监测对讲语音缓存单元中的数据存储量，
对讲语音播报控制单元，用于将相邻两个对讲语音报文中的前一个对讲语音报文延时发送。
所述的对讲语音监测单元还用于实时监测对讲语音缓存单元中的数据存储量，对应的对讲语音播报控制单元还用于控制对讲语音缓存单元中的所有对讲语音报文进行倍速发送。
本发明的有益效果是，通过对对讲语音缓存单元的实时动态调整，来达到语音质量优化的目的，采用TCP/IP传输对讲语音，不可避免地因网络问题而发生阻塞、停顿、卡顿等现象，通过本方法，可以实现语音的连续性，同时能够保证语音传输的及时性。
具体实施方式
本发明在具体实施时，由于采用TCP/IP传输对讲语音，网络的延时问题是解决不了的，那么我们能够保证的是语音的连续性，避免每个语音词语之间形成卡顿延时现象。关键的核心是先在对对讲语音缓存单元对网络服务器转发的语音进行处理，如果出现延时卡顿现象，在保证语音连续的情况下，将整个语句进行延时播报，这样虽然时间延后了一些，但语音是连续的。例如将间隔阈值设定为200毫秒，当对讲语音监测单元发现前一句语音和后一句语音之间间隔200毫秒以上时，将前一句语音播报时间延后200毫秒，这样两句话就连贯起来了，但整个语音延后了200毫秒。
另外由于多次发生语音延后时，整体的对讲语音缓存单元的缓存数据容量是有限的，当达到容量的60％时，如果还一直缓存延时数据，那么之后的语音则会出现无法优化的错误，此时对讲语音播报控制单元将之前所有缓存的语音报文进行倍速播报，虽然加倍速度播报会让语音接收者听起来语速有点快，但这样能够处理大量的缓存数据，保证后面语音报文的优化处理过程。
因此如果想实现这种方法，那么对讲终端中就需要增加对讲语音缓存单元、对讲语音监测单元和对讲语音播报控制单元，其中对讲语音缓存单元的设立起到了承上启下的作用，在发送端到接收端的中间进行语音优化的处理。而对讲语音监测单元则是起到判断对讲语音缓存单元中的语音是否需要优化的作用，如果网络状态良好，延时很低，则无需进行优化，立刻将缓存单元中的报文数据发送给接收者进行收听；如果网络状态不好，那么才进行优化处理。对讲语音播报控制单元是语音处理的执行单元，具体表现在进行延后的时间处理以及倍速的加快播报转发处理中。
通过本发明的方案，可以优化现有技术中以websocket协议中传输语音对讲的过程，由于是基于TCP格式封装对讲语音报文，一般不会发生丢包现象，也解决了语音传输延时的问题。同时，本方法是在对讲终端中设立与实现，对服务器要求并不高，因此运行成本较低。
Claims (7)
1.基于websocket的语音质量优化方法，所述的方法是在对讲终端实时接收基于websocket协议的网络服务器转发的语音报文信息的过程中实现的，其特征在于：在对讲终端中增加对讲语音缓存单元、对讲语音监测单元和对讲语音播报控制单元，在此基础上，所述的方法步骤如下：
a、对讲语音缓存单元实时接收网络服务器转发的对讲语音报文；
b、对讲语音监测单元实时监测对讲语音缓存单元中每相邻两个对讲语音报文的间隔时间，当间隔时间超过设定的间隔阈值后，对讲语音播报控制单元将相邻两个对讲语音报文中的前一个对讲语音报文延时发送。
2.根据权利要求1所述的基于websocket的语音质量优化方法，其特征在于：所述的方法步骤还包括：
c、对讲语音监测单元实时监测对讲语音缓存单元中的数据存储量，当对讲语音缓存单元中的数据存储量累积达到存储阈值时，对讲语音播报控制单元控制对讲语音缓存单元中的所有对讲语音报文进行倍速发送。
3.根据权利要求1所述的基于websocket的语音质量优化方法，其特征在于：所述的间隔阈值设定为200～500毫秒，对应的前一个对讲语音报文延时200～500毫秒发送。
4.根据权利要求2所述的基于websocket的语音质量优化方法，其特征在于：所述的存储阈值为对讲语音缓存单元存储量的60～80％。
5.根据权利要求2所述的基于websocket的语音质量优化方法，其特征在于：所述的倍速选择范围为1.25～2倍。
6.一种对讲终端，其特征在于：所述的对讲终端包括对讲语音缓存单元、对讲语音监测单元和对讲语音播报控制单元，
对讲语音缓存单元，用于实时接收网络服务器转发的对讲语音报文，
对讲语音监测单元，用于实时监测对讲语音缓存单元中的数据存储量，
对讲语音播报控制单元，用于将相邻两个对讲语音报文中的前一个对讲语音报文延时发送。
7.根据权利要求6所述的对讲终端，其特征在于：所述的对讲语音监测单元还用于实时监测对讲语音缓存单元中的数据存储量，对应的对讲语音播报控制单元还用于控制对讲语音缓存单元中的所有对讲语音报文进行倍速发送。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111510274.1A CN114173213A (zh) | 2021-12-10 | 2021-12-10 | 基于websocket的语音质量优化方法及对讲终端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111510274.1A CN114173213A (zh) | 2021-12-10 | 2021-12-10 | 基于websocket的语音质量优化方法及对讲终端 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114173213A true CN114173213A (zh) | 2022-03-11 |
Family
ID=80485521
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111510274.1A Pending CN114173213A (zh) | 2021-12-10 | 2021-12-10 | 基于websocket的语音质量优化方法及对讲终端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114173213A (zh) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070171830A1 (en) * | 2006-01-26 | 2007-07-26 | Nokia Corporation | Apparatus, method and computer program product providing radio network controller internal dynamic HSDPA flow control using one of fixed or calculated scaling factors |
| US20180234393A1 (en) * | 2017-02-16 | 2018-08-16 | Charles Andrew Gram | Secure time communication system |
| CN109660568A (zh) * | 2019-02-25 | 2019-04-19 | 华侨大学 | 基于srtp实现网络对讲安全机制的方法、设备及系统 |
| CN110166367A (zh) * | 2018-02-14 | 2019-08-23 | 华为技术有限公司 | 一种分组网络中控制流量的方法及装置 |
| CN112637703A (zh) * | 2020-12-30 | 2021-04-09 | 上海数果科技有限公司 | 一种web端实时对讲系统及对讲方法 |
| CN112929702A (zh) * | 2021-04-01 | 2021-06-08 | 北京百家视联科技有限公司 | 一种数据流发送方法、装置、电子设备和存储介质 |
| CN113162812A (zh) * | 2020-01-07 | 2021-07-23 | 阿里巴巴集团控股有限公司 | 语音处理方法、直播的语音播放方法、装置、设备及系统 |
-
2021
- 2021-12-10 CN CN202111510274.1A patent/CN114173213A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070171830A1 (en) * | 2006-01-26 | 2007-07-26 | Nokia Corporation | Apparatus, method and computer program product providing radio network controller internal dynamic HSDPA flow control using one of fixed or calculated scaling factors |
| US20180234393A1 (en) * | 2017-02-16 | 2018-08-16 | Charles Andrew Gram | Secure time communication system |
| CN110166367A (zh) * | 2018-02-14 | 2019-08-23 | 华为技术有限公司 | 一种分组网络中控制流量的方法及装置 |
| CN109660568A (zh) * | 2019-02-25 | 2019-04-19 | 华侨大学 | 基于srtp实现网络对讲安全机制的方法、设备及系统 |
| CN113162812A (zh) * | 2020-01-07 | 2021-07-23 | 阿里巴巴集团控股有限公司 | 语音处理方法、直播的语音播放方法、装置、设备及系统 |
| CN112637703A (zh) * | 2020-12-30 | 2021-04-09 | 上海数果科技有限公司 | 一种web端实时对讲系统及对讲方法 |
| CN112929702A (zh) * | 2021-04-01 | 2021-06-08 | 北京百家视联科技有限公司 | 一种数据流发送方法、装置、电子设备和存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20220109713A1 (en) | Content distribution server and method | |
| CN103079234A (zh) | 多网络自适应选择切换传输方法及无线视频传输系统 | |
| US8135031B2 (en) | Method and device for wireless transmissions of internet protocol TV | |
| CN101854286B (zh) | 基于用户数据报协议的数据流发送、接收方法及装置 | |
| WO2011000200A1 (zh) | 一种高效的流媒体传输方法 | |
| RU2350046C2 (ru) | Способ, схема сети связи, сервер сети связи, терминал и программное средство для выбора и изменения режимов работы для голосового соединения с коммутацией пакетов | |
| JP2000216815A (ja) | マルチリンク通信装置 | |
| WO2009106015A1 (zh) | 动态码率分配方法、分组域流媒体服务器 | |
| WO2002005575A3 (en) | Method and apparatus for carrying packetized voice and data in wireless communication networks | |
| US20130176847A1 (en) | Communication processing method, apparatus and gateway device | |
| CN112261633B (zh) | 一种用于智能耳机的音频录音及转换方法 | |
| GB2423219A (en) | A proxy device interposed between a server and a wireless client controls a characteristic of the server depending on the quality of the link to the client | |
| US20040044720A1 (en) | Method and apparatus for dynamically controlling a real-time multimedia data generation rate | |
| CN114980175B (zh) | 无线通信模式自适应修正平台 | |
| CN110602568B (zh) | 一种基于rtp的视频流传输丢包重传方法、设备及存储设备 | |
| CN114173213A (zh) | 基于websocket的语音质量优化方法及对讲终端 | |
| KR100780396B1 (ko) | Ｉｐｔｖ 방송 서비스의 트래픽 제어 방법 | |
| CN1075039A (zh) | 用减少时延增加语言交错 | |
| US20030043788A1 (en) | Packet repeater in asymmetrical transmissions | |
| KR101625663B1 (ko) | 콘텐트를 수신하기 위한 방법 및 장치 | |
| CN101340604A (zh) | 一种视频监控中实现语音对讲的方法及系统 | |
| US20020131372A1 (en) | Interference reduction within a communication system | |
| CN116489473A (zh) | 一种针对音视频传输优化的动态补偿系统及方法 | |
| KR20050078300A (ko) | 무선 네트워크망을 통해 통신하는 서버 시스템 | |
| CN113794752B (zh) | 一种基于quic优化mqtt的方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |