CN115334273A - 一种协议转换音视频通信方法及系统 - Google Patents

一种协议转换音视频通信方法及系统 Download PDF

Info

Publication number
CN115334273A
CN115334273A CN202210969475.6A CN202210969475A CN115334273A CN 115334273 A CN115334273 A CN 115334273A CN 202210969475 A CN202210969475 A CN 202210969475A CN 115334273 A CN115334273 A CN 115334273A
Authority
CN
China
Prior art keywords
sip
protocol
signaling
server
websocket
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210969475.6A
Other languages
English (en)
Inventor
姜树明
刘骏
杨国立
刘能武
魏志强
李凤娇
张莹莹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qilu University of Technology
Original Assignee
Qilu University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qilu University of Technology filed Critical Qilu University of Technology
Priority to CN202210969475.6A priority Critical patent/CN115334273A/zh
Publication of CN115334273A publication Critical patent/CN115334273A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/08—Protocols for interworking; Protocol conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本公开提供了一种协议转换音视频通信方法及系统，涉及多媒体通信技术领域，包括通过SIP over WebSocket协议向SIP代理转换服务器中的WebSocket信令服务器呼叫请求GB/T 28181设备终端的实时媒体流；SIP代理转换服务器的信令转换模块将SIP over WebSocket协议转换成GB/T 28181标准的SIP协议，然后向SIP信令服务器转发请求媒体流的消息，接收请求消息后，通过GB/T28181标准的SIP协议呼叫请求GB/T 28181设备终端发送媒体流；返回响应消息，接收到响应消息后将GB/T 28181标准的SIP协议转换成SIP over WebSocket协议进行多重转发；实现WebRTC的信令交换方式和GB/T 28181的信令交换方式的衔接，解决了GB/T 28181协议与WebRTC协议之间的互通问题。

Description

一种协议转换音视频通信方法及系统
技术领域
本公开涉及多媒体通信技术领域，具体涉及一种协议转换音视频通信方法及系统。
背景技术
本部分的陈述仅仅是提供了与本公开相关的背景技术信息，不必然构成在先技术。
近年来，随着网络多媒体技术迅速发展，网络通信协议日益呈现多样化，协议间的通信愈加困难，多媒体通信协议间的互通融合迅速成为目前一个研究热点。对于GB/T28181协议和WebRTC协议作为使用最广泛的实时音视频通信协议，它们之间的互通同样存在这样的问题。目前GB/T 28181协议虽然提供了统一的信令接口、视音频编解码接口供厂商使用，简化了不同厂商之间的互联对接工作，但在音视频通信应用中对于延时、对讲、回音等问题并没有提供有效的解决方式，而综合WebRTC的特点和优势，正好弥补了这些不足，所以，可以将GB/T 28181协议和WebRTC协议进行互通，但是现有中并没有有效的方式实现它们之间的互通。
发明内容
本公开为了解决上述问题，提出了一种协议转换音视频通信方法及系统，设计一种融合GB/T 28181协议和WebRTC协议的音视频通信协议栈，约定了GB/T 28181协议和WebRTC协议之间通信的规则，然后基于此协议栈，设计一种WebSocket传输的信令协议和UDP/TCP传输的SIP协议之间双向转换的SIP代理转换服务器，利用GB/T 28181和WebRTC转换音视频通信的方法，解决GB/T 28181协议与WebRTC协议之间的互通问题。
根据一些实施例，本公开采用如下技术方案：
一种协议转换音视频通信方法，GB/T 28181信令和WebRTC信令之间的转换包括：
分别通过GB/T28181标准SIP协议以及SIP over WebSocket协议向SIP信令服务器以及SIP代理转换服务器中的WebSocket信令服务器发送注册请求消息进行注册认证；
通过SIP over WebSocket协议向SIP代理转换服务器中的WebSocket信令服务器呼叫请求GB/T 28181设备终端的实时媒体流；
SIP代理转换服务器中的WebSocket信令服务器接收到请求后，通过SIP代理转换服务器的信令转换模块将SIP over WebSocket协议转换成GB/T 28181标准的SIP协议，然后向SIP信令服务器转发请求媒体流的消息，接收请求消息后，通过GB/T 28181标准的SIP协议呼叫请求GB/T 28181设备终端发送媒体流；
返回响应消息，接收到响应消息后将GB/T 28181标准的SIP协议转换成SIP overWebSocket协议进行多重转发。
根据另一些实施例，本公开采用如下技术方案：
一种协议转换音视频通信系统，包括：
WebSocket信令服务器：负责完成与WebRTC客户端的交互处理，并完成WebRTC客户端终端的注册认证；
信令转换模块：具有GB/T 28181信令与WebRTC信令的转换功能，实现GB/T 28181设备终端和WebRTC客户端之间的双向交互。
进一步的，包括协议栈：
所述协议栈包括：
会话通道：主要用于在设备之间建立会话和传输系统控制命令；控制信令基于SIP协议，通过SDP进行媒体协商，使用WebSocket传输信令协议，并使用经过TLS协议来加密后的TCP进行传输，保证了数据的安全性和完整性；
媒体流通道：主要用于传输音视频数据。视频压缩采用MPEG-4/H.264/VP8/VP9编码算法，音频压缩采用G.711/MP3/MP4算法，媒体流数据传输采用SRTP/SRTCP协议进行传输，并使用经过DTLS协议加密后的UDP进行传输；支持ICE技术、STUN以及TURN技术来建立和维护UDP端到端的连接。
与现有技术相比，本公开的有益效果为：
本公开在基于GB/T 28181协议栈和WebRTC协议栈的基础上进行改进，首先设计了一种融合GB/T 28181协议和WebRTC协议的音视频通信协议栈，约定了GB/T 28181协议和WebRTC协议之间通信的规则；然后基于此协议栈进行开发，设计了一种WebSocket传输的信令协议和基于UDP/TCP传输的SIP协议之间双向转换的SIP代理转换服务器，实现了WebRTC的信令交换方式和GB/T 28181的信令交换方式的衔接；最后，提供了一种GB/T 28181和WebRTC协议转换音视频通信的方法，解决了GB/T 28181协议与WebRTC协议之间的互通问题。
附图说明
构成本公开的一部分的说明书附图用来提供对本公开的进一步理解，本公开的示意性实施例及其说明用于解释本公开，并不构成对本公开的不当限定。
图1为本公开提供的一种融合GB/T 28181协议和WebRTC协议的音视频通信协议栈示意图；
图2为本公开提供的一种SIP代理转换服务器的结构示意图；
图3为本公开提供的一种SIP代理转换服务器的工作流程示意图；
图4为本公开提供的一种SIP代理转换服务器的信令转换流程示意图；
图5为本公开提供的一种GB/T 28181和WebRTC协议转换音视频通信的方法的信令交互流程示意图。
具体实施方式：
下面结合附图与实施例对本公开作进一步说明。
应该指出，以下详细说明都是例示性的，旨在对本公开提供进一步的说明。除非另有指明，本文使用的所有技术和科学术语具有与本公开所属技术领域的普通技术人员通常理解的相同含义。
需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本公开的示例性实施方式。如在这里所使用的，除非上下文另外明确指出，否则单数形式也意图包括复数形式，此外，还应当理解的是，当在本说明书中使用术语“包含”和/或“包括”时，其指明存在特征、步骤、操作、器件、组件和/或它们的组合。
术语解释：
GB/T 28181协议：指的是国家标准GB/T 28181—2016《公共安全视频监控联网系统信息传输、交换、控制技术要求》。该标准以SIP协议为基准，规定了公共安全视频监控联网系统的互联结构，传输、交换、控制的基本要求和安全性要求，以及控制、传输流程和协议接口等技术要求，是视频监控领域的国家标准。
WebRTC协议：即网页实时通信，是一个支持网页浏览器进行实时音视频通话的技术。
WebRTC客户端：指支持WebRTC技术的Web客户端和移动终端APP等，主要负责接收和播放音视频数据。
SIP：会话初始协议(Session Initiation Protocol)，由互联网工程任务组制定的，用于多方多媒体通信的框架协议。
注：它是一个基于文本的应用层控制协议，独立于底层传输协议，用于建立、修改和终止IP网络上的双方或多方多媒体会话。
SDP：会话描述协议(Session Description Protocol)，主要用于两个会话实体之间的媒体协商。
媒体协商：是指通信双方协商出各自支持的媒体参数进行会话，如音频编码、视频编码、传输地址等。
SIP客户端：具有注册登记、建立/终止会话连接、接收和播放视音频流等功能,主要包括用户界面、用户代理(UA)、媒体解码模块和媒体通信模块。
SIP设备：具有注册、建立/终止会话连接和控制、采集/编解码以及传送视音频流等的功能实体,主要包括用户代理(UA)、媒体采集/编解码模块和媒体通信模块。
SIP信令服务器：具有向SIP客户端、SIP设备、流媒体服务器和网关提供注册、路由选择以及逻辑控制功能,并且提供接口与应用服务器通信。是负责核心SIP信令应用处理的SIP信令服务器。
WebSocket信令服务器：是WebRTC的一种信令服务器，是基于WebSocket协议传输信令的服务器，主要负责让通信双方交换数据信息，包括IP地址、端口号等。
流媒体服务器：提供实时媒体流的转发服务,提供媒体的存储、历史媒体信息的检索和点播服务。流媒体服务器接收来自SIP设备、网关或其他媒体服务器等设备的媒体数据,并根据指令,将这些数据转发到其他单个或者多个SIP客户端和流媒体服务器。
GB/T 28181设备终端：支持GB/T 28181标准的视音频采集设备，包括IP摄像头、硬盘录像机(DVR)、网络视频录像机(NVR)等。
SIP over WebSocket协议：作为消息堆栈，它与WebSocket协议类似，只是将SIP搭建在Websocket上。
PS：节目流(Program Stream)。
RTCP:实时传输控制协议(Real-time Transport Control Protocol)。
RTP:实时传输协议(Real–time Transport Protocol)。
RTSP:实时流传输协议(Real-time Streaming Protocol)。
SRTCP：安全实时传输控制协议(Secure Real-time Transport ControlProtocol)。
SRTP：安全实时传输协议(Secure Real–time Transport Protocol)。
TCP：传输控制协议(Transmission Control Protocol)。
UDP：用户数据报协议(User Datagram Protocol)。
TLS：传输层安全性协议(Transport Layer Security)。
实施例1
本公开的一种实施例中提供了一种协议转换音视频通信方法，GB/T 28181信令和WebRTC信令之间的转换包括：
S101：分别通过GB/T28181标准SIP协议以及SIP over WebSocket协议向SIP信令服务器以及WebSocket信令服务器发送注册请求消息进行注册认证；
S102：通过SIP over WebSocket协议向SIP代理转换服务器中的WebSocket信令服务器呼叫请求GB/T 28181设备终端的实时媒体流；
S103：SIP代理转换服务器中的WebSocket信令服务器接收请求后，通过SIP代理转换服务器的信令转换模块将SIP over WebSocket协议转换成GB/T 28181标准的SIP协议，然后向SIP信令服务器转发请求媒体流的消息，接收请求消息后，通过GB/T 28181标准的SIP协议呼叫请求GB/T 28181设备终端发送媒体流；
S104：返回响应消息，接收到响应消息后将GB/T 28181标准的SIP协议转换成SIPover WebSocket协议进行多重转发。
具体的，GB/T 28181信令和WebRTC信令之间的转换如图3、图4所示，包括以下步骤：
GB/T 28181设备终端通过GB/T 28181标准SIP协议向SIP信令服务器发送注册请求消息进行注册认证；WebRTC客户端通过SIP over WebSocket协议向SIP代理转换服务器中的WebSocket信令服务器发送注册请求消息进行注册认证；
WebRTC客户端通过SIP over WebSocket协议向SIP代理转换服务器中的WebSocket信令服务器呼叫请求GB/T 28181设备终端的实时媒体流；
SIP代理转换服务器中的WebSocket信令服务器接收到请求后，通过SIP代理转换服务器的信令转换模块将SIP over WebSocket转换成GB/T 28181标准的SIP协议，然后向SIP信令服务器转发请求媒体流的消息；
SIP信令服务器接收到请求消息后，通过GB/T 28181标准的SIP协议呼叫请求GB/T28181设备终端发送媒体流；
若请求媒体流成功，则GB/T 28181设备终端向SIP信令服务器返回响应成功消息，若请求失败，返回响应失败消息；
SIP信令服务器接收到响应消息后通过GB/T 28181标准的SIP协议将响应消息发送给信令转换模块，通过信令转换模块将GB/T 28181标准的SIP协议转换成SIP overWebSocket协议转发给SIP代理转换服务器中的WebSocket信令服务器；
SIP代理转换服务器中的WebSocket信令服务器接收到响应消息后，转发给WebRTC客户端，至此会话过程全部结束。
作为一种实施例，一种融合GB/T 28181协议和WebRTC协议的音视频通信协议栈如图1所示，包括：
会话通道：主要用于在设备之间建立会话和传输系统控制命令。控制信令基于SIP协议，通过SDP进行媒体协商，使用WebSocket传输信令协议，并使用经过TLS协议来加密后的TCP进行传输，保证了数据的安全性和完整性。
媒体流通道：主要用于传输音视频数据。视频压缩采用MPEG-4/H.264/VP8/VP9等编码算法，音频压缩采用G.711/MP3/MP4等常见算法，媒体流数据传输采用SRTP/SRTCP协议进行传输，并使用经过DTLS协议加密后的UDP进行传输；支持ICE技术、STUN以及TURN技术来建立和维护UDP端到端的连接。
作为一种实施例，WebSocket传输的信令协议和UDP/TCP传输的SIP协议之间双向转换的SIP代理转换服务器如图2所示，包括：
(1)WebSocket信令服务器：即WebRTC信令模块，负责完成与WebRTC客户端的交互处理，并完成WebRTC客户端终端的注册认证。其实现的方案有两种：
①使用C/C++、Java等编程语言从零开始开发一个信令服务器。这种方式的实现成本较高，需要花费大量时间编写很多代码，并且还需要对编写的代码进行大量的测试。
②利用现成的Web服务器进行开发，例如以Apache、Nginx、NodeJS来实现信令服务器，这种方案编写的代码较少，只需将socket.io库引入即可，而且稳定性高。
(2)信令转换模块：具有GB/T 28181信令与WebRTC信令的转换功能，实现GB/T28181设备终端和WebRTC客户端之间的双向交互。包括：
1)业务处理：主要负责处理整个信令转换模块的业务。包括控制Proxy模块同SIP信令服务器和WebSocket信令服务器的连接；维护SIP代理转换服务器与流媒体服务器之间的会话通信；
2)会话管理：主要负责对会话相关数据和操作的封装。包括解析SIP代理转换服务器与流媒体服务器之间的信令，根据信令内容创建会话实例并依据会话ID管理会话；接收流媒体服务器发来的消息，解析并生成表示会话建立失败的信令，传递给WebRTC Proxy和SIP Proxy，由它们生成结束会话的信令消息发给相应的终端。
3)协议转换：信令转换模块的核心部分，主要功能是解析各个协议模块发来的信令消息，获取信令消息中的关键信息生成信令消息，并根据信令消息中的目的地址，将生成的信令消息发送至相关协议模块。根据信令的转换方向，该模块可分为两个部分：
SIP-WebSocket方向信令转换：完成从GB/T 28181设备终端和WebRTC客户端的控制信令转换过程。即接收GB/T 28181设备终端发送的GB/T 28181标准的SIP请求消息，将其转换为相应的SIP over WebSocket协议的请求消息，并发送给WebRTC客户端；接收WebRTC客户端通过SIP over WebSocket协议返回的响应消息，将其转换为相应的GB/T 28181标准的SIP响应消息，并发送给GB/T 28181设备终端。
WebSocket-SIP方向信令转换：接收WebRTC客户端发送的SIP over WebSocket协议请求消息，将其转换为相应的GB/T 28181标准的SIP请求消息，并发送给GB/T 28181设备终端；接收GB/T 28181设备终端通过GB/T 28181标准的SIP协议返回的响应消息，将其转换为相应的SIP over WebSocket协议的响应消息，并发送给WebRTC客户端。
4)Proxy：包括WebRTC Proxy和SIP Proxy，主要用于与SIP信令服务器和WebSocket信令服务器建立通信，收发信令消息。
5)SMC(Signaling Media Communicator)：主要用于SIP代理转换服务器与流媒体服务器之间的会话通信，同时还负责接收流媒体服务器发来的消息并转发给业务处理进行处理。
作为一种实施例，GB/T 28181和WebRTC协议转换音视频通信的方法如图5所示，包括以下步骤：
S1：WebRTC客户端向SIP代理转换服务器中的WebSocket信令服务器发送join请求，在WebSocket信令服务器收到消息后，返回joined消息，表明已经建立好会话连接；
S2：WebRTC客户端向已注册的GB/T 28181设备终端发送message消息，通过offer信令进行媒体协商，获取WebRTC客户端所需要的IP、端口、音视频流和相关支持的一些编解码参数等信息；
S3：SIP代理转换服务器的信令转换模块将WebRTC客户端发送的offer信令转换成INVITE请求，转发给SIP信令服务器；
S4：SIP信令服务器在接收到INVITE请求后，暂时保存请求消息的标识，再将请求信息转发给流媒体服务器，此请求不携带SDP消息体；
S5：流媒体服务器接收到请求后，根据自己的负载能力对请求做相应的处理。如果此时流媒体服务器没有能力处理此次请求，则返回错误消息，SIP信令服务器会做出下一步的处理；否则回复200OK响应，携带自己的SDP消息体，其中包含了流媒体服务器自身接收媒体流的IP、端口、媒体格式等内容；
S6：SIP信令服务器端接收到流媒体服务器的200OK响应后，向GB/T 28181设备终端发送INVITE请求，请求中携带流媒体服务器的消息体信息；
S7：GB/T 28181设备终端接收到SIP信令服务器的请求后，回复200OK应答，并携带自己的SDP消息体，消息体中描述了媒体流发送者发送媒体流的IP、端口、媒体格式、SSRC字段等内容。
S8：SIP信令服务器端收到GB/T 28181设备终端返回的200OK应答后，会向流媒体服务器发送ACK确认应答，并携带S7中GB/T 28181设备终端的SDP消息体，完成与流媒体服务器的INVITE会话建立过程。
S9：SIP信令服务器收到GB/T 28181设备终端返回的200OK响应后，向GB/T 28181设备终端发送ACK确认应答，完成与GB/T 28181设备终端的INVITE会话建立过程。此时GB/T28181设备终端可以向流媒体服务器发送实时媒体流。
S10：完成GB/T 28181设备终端与流媒体服务器之间的信令流程后，SIP信令服务器需要建立流媒体服务器和GB/T 28181设备终端之间的媒体连接。SIP信令服务器将INVITE请求消息转发给流媒体服务器。
S11：流媒体服务器接收到INVITE消息后，回复200OK应答，携带包含自己媒体参数的SDP消息体。
S12：SIP信令服务器将消息S11中的响应消息进行转发给SIP代理转换服务器，通过信令转换模块将200OK消息转换成answer消息并发送给WebRTC客户端。
S13：WebRTC客户端收到响应消息后，完成与SIP信令服务器的会话建立过程。
S14：在会话建立完成之后，SIP信令服务器向流媒体服务器发送ACK消息，表明完成与流媒体服务器的INVITE会话建立过程。此时，流媒体服务器可以将媒体流转发给WebRTC客户端。
S15：流媒体服务器开始转发实时视音频流至WebRTC客户端，WebRTC接入代理服务接收视音频流并进行转码发送至WebRTC客户端；
S16：流媒体服务器将接收到的GB/T 28181RTP媒体流依次进行RTP解析、PS解封装、ES解码、ES二次编码以及RTP二次封装，重新编码成目标码率和视频分辨率的WebRTC媒体流，并根据SIP over WebSocket协议中携带的SDP信息转发至WebRTC客户端；
S17：如果媒体流接收完成，WebRTC客户端不想继续接收媒体流时，就需要向SIP代理转换服务器中的WebSocket信令服务器发送leave消息，WebSocket信令服务器接收到消息后返回left消息，同时，还会向GB/T 28181设备终端发送bye消息；
S18：SIP代理转换服务器的信令转换模块将bye消息转换成BYE消息发送给SIP信令服务器，SIP信令服务器接收到消息后，向SIP代理转换服务器返回200OK消息，此时SIP代理转换服务器与SIP信令服务器之间的会话连接断开；
S19：SIP信令服务器端收到BYE消息后向流媒体服务器发送BYE请求，流媒体服务器收到BYE消息后回复200OK响应，此时SIP信令服务器与流媒体服务器之间的会话连接断开。
S20：SIP信令服务器向GB/T 28181设备终端发送BYE消息，GB/T 28181设备终端收到消息后，向SIP信令服务器返回200OK响应消息，此时SIP信令服务器与GB/T 28181设备终端之间的会话连接也会断开，至此，信令交互过程全部完成。
实施例2
本公开的一种实施例中提供了一种协议转换音视频通信系统，包括：
WebSocket信令服务器：负责完成与WebRTC客户端的交互处理，并完成WebRTC客户端终端的注册认证；
信令转换模块：具有GB/T 28181信令与WebRTC信令的转换功能，实现GB/T 28181设备终端和WebRTC客户端之间的双向交互。
进一步的，包括协议栈：
所述协议栈包括：
会话通道：主要用于在设备之间建立会话和传输系统控制命令；控制信令基于SIP协议，通过SDP进行媒体协商，使用WebSocket传输信令协议，并使用经过TLS协议来加密后的TCP进行传输，保证了数据的安全性和完整性；
媒体流通道：主要用于传输音视频数据。视频压缩采用MPEG-4/H.264/VP8/VP9编码算法，音频压缩采用G.711/MP3/MP4算法，媒体流数据传输采用SRTP/SRTCP协议进行传输，并使用经过DTLS协议加密后的UDP进行传输；支持ICE技术、STUN以及TURN技术来建立和维护UDP端到端的连接。
本公开的一种协议转换音视频通信系统执行上述实施例1中的方法的各个步骤，在此不再详细说明。
本公开是参照根据本公开实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
上述虽然结合附图对本公开的具体实施方式进行了描述，但并非对本公开保护范围的限制，所属领域技术人员应该明白，在本公开的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本公开的保护范围以内。

Claims (10)

1.一种协议转换音视频通信方法，其特征在于，GB/T 28181信令和WebRTC信令之间的转换包括：
分别通过GB/T 28181标准SIP协议以及SIP over WebSocket协议向SIP信令服务器以及以及SIP代理转换服务器中的WebSocket信令服务器发送注册请求消息进行注册认证；
通过SIP over WebSocket协议向SIP代理转换服务器中的WebSocket信令服务器呼叫请求GB/T 28181设备终端的实时媒体流；
SIP代理转换服务器中的WebSocket信令服务器接收请求后，通过SIP代理转换服务器的信令转换模块将SIP over WebSocket协议转换成GB/T 28181标准的SIP协议，然后向SIP信令服务器转发请求媒体流的消息，接收请求消息后，通过GB/T 28181标准的SIP协议呼叫请求GB/T 28181设备终端发送媒体流；
返回响应消息，接收到响应消息后将GB/T 28181标准的SIP协议转换成SIP overWebSocket协议进行多重转发。
2.如权利要求1所述的一种协议转换音视频通信方法，其特征在于，SIP-WebSocket方向信令转换，完成从GB/T 28181设备终端和WebRTC客户端的控制信令转换过程。
3.如权利要求2所述的一种协议转换音视频通信方法，其特征在于，信令转换过程为：
接收GB/T 28181设备终端发送的GB/T 28181标准的SIP请求消息，将其转换为相应的SIP over WebSocket协议的请求消息，并发送给WebRTC客户端；接收WebRTC客户端通过SIPover WebSocket协议返回的响应消息，将其转换为相应的GB/T 28181标准的SIP响应消息，并发送给GB/T 28181设备终端。
4.如权利要求1所述的一种协议转换音视频通信方法，其特征在于，WebSocket-SIP方向信令转换，接收WebRTC客户端发送的SIP over WebSocket协议请求消息，将其转换为相应的GB/T 28181标准的SIP请求消息，并发送给GB/T 28181设备终端；接收GB/T 28181设备终端通过GB/T 28181标准的SIP协议返回的响应消息，将其转换为相应的SIP overWebSocket协议的响应消息，并发送给WebRTC客户端。
5.如权利要求1所述的一种协议转换音视频通信方法，其特征在于，WebRTC客户端通过SIP over WebSocket协议向SIP代理转换服务器中的信WebSocket信令服务器呼叫请求GB/T 28181设备终端的实时媒体流；
SIP代理转换服务器中的WebSocket信令服务器接收到请求后，通过信令转换模块将SIP over WebSocket转换成GB/T 28181标准的SIP协议，然后向SIP信令服务器转发请求媒体流的消息。
6.如权利要求5所述的一种协议转换音视频通信方法，其特征在于，SIP信令服务器接收到请求消息后，通过GB/T 28181标准的SIP协议呼叫请求GB/T28181设备终端发送媒体流。
7.如权利要求1所述的一种协议转换音视频通信方法，其特征在于，返回响应消息具体为：若请求媒体流成功，则GB/T 28181设备终端向SIP信令服务器返回响应成功消息，若请求失败，返回响应失败消息。
8.如权利要求7所述的一种协议转换音视频通信方法，其特征在于，SIP信令服务器接收到响应消息后通过GB/T 28181标准的SIP协议将响应消息发送给信令转换模块，通过信令转换模块将GB/T 28181标准的SIP协议转换成SIP over WebSocket协议转发给SIP代理转换服务器中的WebSocket信令服务器。
9.一种协议转换音视频通信系统，其特征在于，包括：
WebSocket信令服务器：负责完成与WebRTC客户端的交互处理，并完成WebRTC客户端终端的注册认证；
信令转换模块：具有GB/T 28181信令与WebRTC信令的转换功能，实现GB/T 28181设备终端和WebRTC客户端之间的双向交互。
10.如权利要求9所述的一种协议转换音视频通信系统，其特征在于，包括协议栈：
所述协议栈包括：
会话通道：主要用于在设备之间建立会话和传输系统控制命令；控制信令基于SIP协议，通过SDP进行媒体协商，使用WebSocket传输信令协议，并使用经过TLS协议来加密后的TCP进行传输，保证了数据的安全性和完整性；
媒体流通道：主要用于传输音视频数据。视频压缩采用MPEG-4/H.264/VP8/VP9编码算法，音频压缩采用G.711/MP3/MP4算法，媒体流数据传输采用SRTP/SRTCP协议进行传输，并使用经过DTLS协议加密后的UDP进行传输；支持ICE技术、STUN以及TURN技术来建立和维护UDP端到端的连接。
CN202210969475.6A 2022-08-12 2022-08-12 一种协议转换音视频通信方法及系统 Pending CN115334273A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210969475.6A CN115334273A (zh) 2022-08-12 2022-08-12 一种协议转换音视频通信方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210969475.6A CN115334273A (zh) 2022-08-12 2022-08-12 一种协议转换音视频通信方法及系统

Publications (1)

Publication Number Publication Date
CN115334273A true CN115334273A (zh) 2022-11-11

Family

ID=83923562

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210969475.6A Pending CN115334273A (zh) 2022-08-12 2022-08-12 一种协议转换音视频通信方法及系统

Country Status (1)

Country Link
CN (1) CN115334273A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116016459A (zh) * 2022-12-28 2023-04-25 中国联合网络通信集团有限公司 音视频会议通话方法、系统及存储介质
CN117294746A (zh) * 2023-09-07 2023-12-26 视昀科技(深圳)有限公司 融合通信方法、装置、终端设备及存储介质
CN117440186A (zh) * 2023-12-22 2024-01-23 深圳星网信通科技股份有限公司 视频服务集成方法、视频集成设备和计算机可读存储介质
CN117938822A (zh) * 2024-03-21 2024-04-26 四川广飞视信息技术有限公司 一种基于wasm的实时语音通信方法、终端及摄像头
CN117938822B (zh) * 2024-03-21 2024-06-04 四川广飞视信息技术有限公司 一种基于wasm的实时语音通信方法、终端及摄像头

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116016459A (zh) * 2022-12-28 2023-04-25 中国联合网络通信集团有限公司 音视频会议通话方法、系统及存储介质
CN117294746A (zh) * 2023-09-07 2023-12-26 视昀科技(深圳)有限公司 融合通信方法、装置、终端设备及存储介质
CN117440186A (zh) * 2023-12-22 2024-01-23 深圳星网信通科技股份有限公司 视频服务集成方法、视频集成设备和计算机可读存储介质
CN117440186B (zh) * 2023-12-22 2024-05-28 深圳星网信通科技股份有限公司 视频服务集成方法、视频集成设备和计算机可读存储介质
CN117938822A (zh) * 2024-03-21 2024-04-26 四川广飞视信息技术有限公司 一种基于wasm的实时语音通信方法、终端及摄像头
CN117938822B (zh) * 2024-03-21 2024-06-04 四川广飞视信息技术有限公司 一种基于wasm的实时语音通信方法、终端及摄像头

Similar Documents

Publication Publication Date Title
CN115334273A (zh) 一种协议转换音视频通信方法及系统
CN103227788B (zh) 实现网页应用程序与sip设备进行通信的方法和系统
CN106850399B (zh) 一种基于WebRTC技术即时消息的通信方法
US20150006610A1 (en) Virtual web real-time communications (webrtc) gateways, and related methods, systems, and computer-readable media
US20040240399A1 (en) Transcoding arrangement in a session initiation
EP2160031A1 (en) A program network recording method, a media processing server and a network recording system
CN101026616A (zh) 基于ip多媒体子系统的交互式媒体会话建立系统和方法
CN102045537A (zh) 连接视频会议系统和视频监控系统的方法和装置
CN104980395A (zh) 第一系统与第二系统媒体互通的方法和系统以及媒体网关
CN105227418B (zh) 数据通道建立方法和通信设备
CN101674228B (zh) 实现流媒体通信的方法、装置及系统
EP2211507B1 (en) Method, device and system for processing real time streaming protocol
WO2021073155A1 (zh) 视频会议方法、装置、设备及存储介质
CN109788072A (zh) 一种将标准Webrtc客户端接入现有系统的方法
US20090144438A1 (en) Standards enabled media streaming
CN109361671A (zh) 一种基于sip协议的流媒体传输架构方法
CN106713308B (zh) 媒体流实时传输的方法和装置
WO2013189430A2 (zh) 一种自动语音识别业务的实现方法、系统和媒体服务器
WO2012174908A1 (zh) 实现从文本到语音的音频转码方法、装置及系统
US20120219130A1 (en) Method, device and system for media session negotiation
WO2023071656A1 (zh) 信息传输方法及装置
WO2017152566A1 (zh) 一种协商媒体编解码的方法，及一种终端设备
EP3051805B1 (en) Endpoint information interaction processing method, apparatus and telepresence endpoint
CN111193941B (zh) 一种媒体数据的传输方法、装置、设备及存储介质
CN102088447A (zh) Ims系统中的媒体控制方法及其系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination