CN112422583A - 多协议视频应用融合互通的方法和系统 - Google Patents

多协议视频应用融合互通的方法和系统 Download PDF

Info

Publication number
CN112422583A
CN112422583A CN202011396764.9A CN202011396764A CN112422583A CN 112422583 A CN112422583 A CN 112422583A CN 202011396764 A CN202011396764 A CN 202011396764A CN 112422583 A CN112422583 A CN 112422583A
Authority
CN
China
Prior art keywords
protocol
server
video application
terminal
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011396764.9A
Other languages
English (en)
Inventor
王永生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Deheng Information Technology Co ltd
Original Assignee
Guangzhou Deheng Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Deheng Information Technology Co ltd filed Critical Guangzhou Deheng Information Technology Co ltd
Priority to CN202011396764.9A priority Critical patent/CN112422583A/zh
Publication of CN112422583A publication Critical patent/CN112422583A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/18—Multiprotocol handlers, e.g. single devices capable of handling multiple protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H04L65/1104—Session initiation protocol [SIP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/141—Setup of application sessions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/08—Protocols for interworking; Protocol conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/55—Push-based network services

Abstract

本发明公开一种多协议视频应用融合互通的方法及系统，该方法包括部署第一服务器，并将第一服务器配置为能够基于WEBRTC协议与调度台终端之间实现双向通信；在第一服务器和第一视频应用终端之间部署第二服务器，将第二服务器配置为能够基于第一视频应用终端自身的通信协议与第一视频应用终端进行通信，并能够基于RTSP或RTMP协议实现与第一服务器的双向通信。本发明采用多协议融合的方案，以实现不同视频系统之间的互联、互通和信息共享，从而使用户能够方便快捷地使用不同的视频应用系统进行交互，减少重复建设成本。

Description

多协议视频应用融合互通的方法和系统
技术领域
本发明涉及通信技术领域，特别是一种多协议视频应用融合互通的方法和系统。
背景技术
随着近些年来视频系统的不断发展，以及对各行各业的不断渗透和定制，很多企事业单位、公司内部也已经实现这些系统和网络的建设。目前的视频信息应用系统中，视频资源包含的信息量大、细节充分，在日常工作和管理中占有重要的地位，应用也相当广泛。但是，由于早期系统建设标准的不一致，各个业务体系之间彼此独立，体系内也存在信息种类多样、品牌杂、厂商多、协议乱、非标化、烟筒多、管理难的问题，不仅不能在各体系间实现资源的互联、互通和信息共享，而且还导致视频资源重复建设等问题。
发明内容
为了解决上述问题，本发明采用多协议融合的方案，以期实现不同视频系统之间的互联、互通和信息共享，从而使用户能够方便快捷地使用不同的视频应用系统进行交互，减少重复建设成本。
基于此，根据本发明的第一个方面，提供了一种多协议视频应用融合互通的方法，其包括
部署第一服务器，并将第一服务器配置为能够基于WEBRTC协议与调度台终端之间实现双向通信；
在第一服务器和第一视频应用终端之间部署第二服务器，将第二服务器配置为能够基于第一视频应用终端自身的通信协议与第一视频应用终端进行通信，并能够基于RTSP或RTMP协议实现与第一服务器的双向通信。
根据本发明的第二个方面，提供了一种多协议视频应用融合互通的系统，其包括调度台终端、第一视频应用终端、第一服务器和第二服务器，其中，
第一服务器配置为能够基于WEBRTC协议与调度台终端之间实现双向通信；
第二服务器配置为能够基于第一视频应用终端自身的通信协议与第一视频应用终端进行通信，并能够基于RTSP或RTMP协议实现与第一服务器的双向通信。
本发明实施例提供的方案，通过部署第一服务器和第二服务器，使得调度台终端和不同协议的视频应用终端都能够进行通信，实现了对不同协议的视频应用终端的视频融合互通，减少了视频应用系统的重复建设成本。并且，根据本发明实施例的方案，视频应用终端能够基于自身协议与第一服务器进行交互，并最终与调度台终端进行交互，应用范围广泛，可扩展性强。
附图说明
图1为本发明一实施方式的多协议视频应用融合互通的方法流程图；
图2为本发明另一种实施方式的多协议视频应用融合互通的方法流程图；
图3为本发明一实施方式的第一服务器基于WEBRTC协议在第二视频应用终端和调度台终端之间实现双向通信的实现方法流程图；
图4为本发明一实施方式的多协议视频应用融合互通的系统的框架结构示意图；
图5为本发明另一实施方式的多协议视频应用融合互通的系统的框架结构图。
具体实施方式
下面结合附图对本发明作进一步详细的说明。
图1示意性地显示了本发明一种实施方式的多协议视频应用融合互通的方法，如图1所示，该方法包括：
步骤S101：部署第一服务器，并将第一服务器配置为能够基于WEBRTC协议与调度台终端之间实现双向通信。
步骤S102：在第一服务器和第一视频应用终端之间部署第二服务器，将第二服务器配置为能够基于第一视频应用终端自身的通信协议与第一视频应用终端进行通信，并能够基于RTSP或RTMP协议实现与第一服务器的双向通信。
在步骤S101中，第一服务器通过响应调度台终端的连接请求，来建立与调度台终端的通信连接。其中，调度台终端通过调用WEBREC协议中的API来请求与第一服务器建立通信连接。示例性地，调度台终端通过调用RTCPeerConnection接口请求建立与第一服务器的通信连接。第一服务器在接收到调度台终端的连接请求后，即根据RTCPeerConnection接口的协商机制，建立两者之间的通信连接，该通信连接是基于WEBRTC协议的长连接，通过建立起该通信连接第一服务器和调度台终端之间就可以随时进行数据传输(包括主动发送数据和接收数据)。
在步骤S102中，第一视频应用终端根据自身的通信协议与第二服务器进行通信。第二服务器在接收到第一视频应用终端的通信数据后，首先进行协议转换，以基于RTSP或RTMP协议将第一视频应用终端的数据传输至第一服务器，而第一服务器则将第一视频应用终端的数据通过建立的通信连接发送至调度台终端进行播放，由此以实现对不同协议的视频应用终端的兼容融合，并使得多个不同协议的视频应用终端能够在调度台终端进行融合互通。其中，第一视频应用终端是指采用自身已有的通信协议，通过音视频数据进行交互的设备终端，示例性地，第一视频应用终端可以是采用GB28181协议的视频应用终端、采用H323协议的视频应用终端、或采用SIP协议的视频应用终端中的至少一种。
对于第一视频应用终端与第二服务器之间的通信数据，以采用GB28181协议的视频应用终端为例，其一般会将获取到的视频流以PS(Pack start code，包起始码字段，其值一般为0x000001BA的位串，用来标志一个包的开始)封装的RTP数据包的形式进行传输，这样，通过将第二服务器与采用GB28181协议的视频应用终端进行通信，就可以从GB28181协议的视频应用终端获取到视频应用端发送的RTP数据包，第二服务器在接收到RTP数据包后首先对RTP数据包进行再编码，其中，该再编码是基于RTSP/RTMP协议进行的，由此来实现协议转换。之后，第二服务器将再编码后的数据包通过RTSP/RTMP网络协议传输给第一服务器。而采用SIP/H323协议的视频应用终端(如视频会议终端)在通过SIP/H323协议做信令传输、拨号、挂断等操作，播号播通后，一般会将产生的数据拆包成RTP流进行传输，这样，通过将第二服务器与采用SIP/H323协议的视频应用终端进行通信，就可以从SIP/H323协议的视频应用终端获取到RTP流数据包，第二服务器在接收到RTP数据包后首先对RTP数据包进行再编码，其中，该再编码是基于RTSP/RTMP协议进行的，由此来实现协议转换。之后，第二服务器将再编码后的数据包通过RTSP/RTMP网络协议传输给第一服务器。而第一服务器在通过RTSP/RTMP网络协议接收到第二服务器发送的解码后的视频流后，就会通过步骤S101中建立的基于WEBREC协议的通信连接将视频流推送给调度台终端进行播放。具体地，第二服务器是基于WEBREC协议的RTCDataChannel调用接口将基于RTSP/RTMP网络协议接收到的视频流推送给调度台终端进行播放的。通过RTCDataChannel调用接口，第二服务器实现了将RTSP/RTMP网络协议的数据包解码拆分成RTP视频流，并通过H5前端页面推送给调度台终端。示例性地，本发明实施例中的调度台终端是通过第一服务器的H5服务直接用浏览器video标签实现对第一服务器推送的视频内容的播放和预览的。
其中，RTSP(Real Time Streaming Protocol)和RTMP(Real-Time MessagingProtocol)网络协议均是用于传输音视频流的实时传输协议，RTSP协议定义了一对多应用程序如何有效地通过IP网络传送多媒体数据，其在体系结构上位于RTP和RTCP之上，使用TCP或RTP完成数据传输。RTMP通过一种自定义的协议，来完成对指定直播流的播放和相关的操作。WEBRTC则是一个安全框架，其使用安全实时传输协议(Secure Real-timeTransport Protocol，SRTP)对RTP数据进行加密、消息认证和完整性以及重播攻击保护，通过加密RTP负载和支持原始认证来提供机密性。因而，本发明实施例通过部署第二服务器来对第二视频应用终端传输的RTP数据包进行再编码之后，就能够通过RTSP/RTMP网络协议来直接传输再编码后的音视频流，而通过部署第一服务器，本发明实施例还使得第二服务器传输的音视频流能够基于WEBRTC协议被直接推送到调度台终端进行播放，实现了不同协议之间的视频互通。在其他优选实施例中，根据实际应用需求，第一视频应用终端还可能包括采用RTSP协议的视频应用终端。对于第一视频应用终端是采用RTSP协议的情况，第二服务器就可以不经过协议转换处理，如上述提及的对RTP数据包进行的再编码处理，直接将接收到的第一视频应用终端的视频流通过RTSP协议或RTMP协议发送至第一服务器。而第一服务器则直接将第二服务器传输的视频流基于WEBRTC协议进行RTSP/RTMP协议解码拆分后，以RTP视频流的方式通过H5服务推送到调度台终端进行播放。
优选地，为了实现与采用SIP/H323协议的视频应用终端(如视频会议终端)的通信，即能够实现与采用SIP/H323协议的视频应用终端的呼叫播号的互通响应，本发明实施例在第一服务器上通过H5服务提供可供浏览器预览和操作的拨号选项，如通过在可访问的浏览器页面地址上设置拨号按钮来实现拨号，在接收到拨号请求后，第一服务器将该拨号请求通过HTTP协议发送给第二服务器。同时，本发明实施例还在第二服务器配置基于H323/SIP标准协议的客户端模块(也称软终端)，以使得第二服务器能够通过作为主叫或被叫端来提供呼叫服务。示例性地，通过在第二服务器上基于H323/SIP标准协议来配置软终端，第二服务器能够作为被叫端，接收采用H323/SIP协议的第一视频应用终端的直接呼叫，并响应于第一视频应用终端的呼叫，在呼通后通过H323/SIP协议呼叫对方MCU或者H323/SIP终端实现双方视频通话回传，或者第二服务器能够作为主叫方，通过H323/SIP协议呼叫对方MCU或者H323/SIP终端实现双方视频通话回传，以将视频直接回传给其他所需的第三方。
图2示意性地显示了本发明另一种实施方式的多协议视频应用融合互通的方法，如图2所示，该方法包括：
步骤S201：部署第一服务器，并将第一服务器配置为能够基于WEBRTC协议在第二视频应用终端和调度台终端之间实现双向通信。
步骤S202：在第一服务器和第一视频应用终端之间部署第二服务器，将第二服务器配置为能够基于第一视频应用终端自身的通信协议与第一视频应用终端进行通信，并能够基于RTSP或RTMP协议实现与第一服务器的双向通信。
在步骤S201中，本发明实施例通过在第一服务器上通过执行图3所示的方法过程，实现将第一服务器配置为能够基于WEBRTC协议在第二视频应用终端和调度台终端之间实现双向通信。具体地，如图3所示，该以第一服务器作为执行主体，该方法过程包括如下步骤：
步骤S201A：响应于调度台终端或第二视频应用终端基于WEBRTC协议的连接请求，建立与连接请求方的通信连接。
步骤S201B：通过与连接请求方的通信连接接收连接请求方发送的音视频信息。
步骤S201C：基于WEBRTC协议将音视频信息发送至连接请求方的对端。
其中，调度台终端或第二视频应用终端通过调用WEBREC协议中的API来实现与第一服务器的通信。示例性地，调度台终端和第二视频应用终端通过调用RTCPeerConnection接口请求建立与第一服务器的通信连接。第一服务器在接收到调度台终端或第二视频应用终端的连接请求后，即根据RTCPeerConnection接口的协商机制，建立与连接请求方之间的通信连接，该通信连接是基于WEBRTC协议的长连接。
在建立了与连接请求方的通信连接之后，调度台终端和第二视频应用终端通过调用WEBREC协议中的MediaStream(又称getUserMedia)接口来获取音视频信息(包括音频信息和/或视频信息)，并通过调用WEBREC协议中的RTCDataChannel接口将获取的音视频信息经由建立的通信连接传输给第一服务器。第一服务器根据RTCDataChannel接口中的参数信息，将接收到的音视频信息转发给对端。在本发明实施例中，对端是与连接请求方相对而言的，是连接请求方的交互对象，示例性地，在调度台终端为连接请求方时，其对端为第二视频应用终端，在第二视频应用终端为连接请求方时，其对端为调度台终端。由此，通过对第一服务器的部署和配置，就能够在调度台终端和第二视频应用终端之间基于WEBREC协议进行视频交互。
示例性地，在具体实现中，上述第一视频应用终端可以实现为4G布控球、摄像机、视频会议MCU、H323/SIP视频终端中的至少一种或者二者以上的组合，上述第二视频应用终端可以为单兵图传设备。
在其他优选实现例中，在第一服务器上通过H5服务提供可供浏览器预览第一视频应用终端和第二视频应用终端的工作状态，第一视频应用终端和第二视频应用终端的工作状态是指视频应用终端的可呼叫状态，其包括在线、占线和离线状态，如果终端占线或者离线就是不可呼状态，如果终端在线则是可呼状态，可以根据终端是否能够及时响应来确定其工作状态，并将其通过H5页面在调度台终端进行展示。这样，当终端处于不可呼状态时，工作人员就能够立即采用备用呼叫通道进行呼叫，由此可以进一步实现应急业务的及时调度处理。
优选地，在本发明实施例中，采用GB28181协议的第一视频应用终端通过在第二服务器上进行终端注册来建立其与第二服务器的通信连接，而采用其他协议的第一视频应用终端与第二服务器、第二视频应用终端与第一服务器、第一服务器与第二服务器之间的通信连接则均通过TCP/UDP连接的方式实现。具体地，在第二服务器上进行采用GB28181协议的第一视频应用终端的注册的具体实现过程可以是包括如下流程：
1)采用GB28181协议的第一视频应用终端通过SIP代理向第二服务器发送Register请求；
2)第二服务器向SIP代理发送响应“401”，并在响应的消息头WWW_Authenticate字段中给出适合SIP代理的认证体制和参数；
3)SIP代理重新向第二服务器发送Register请求，在请求的Authorization字段给出信任书，信任书中包含认证信息；
4)第二服务器对请求进行验证，如果检查出SIP代理身份合法，向SIP代理发送成功响应“200OK”，如果身份不合法则发送拒绝服务应答。
图4示意性地显示了本发明实施例一种实施方式的多协议视频应用融合互通的系统，如图4所示，该系统包括调度台终端1、第一视频应用终端2、第一服务器3和第二服务器4，其中，
第一服务器3配置为能够基于WEBRTC协议与调度台终端1之间实现双向通信；
第二服务器4配置为能够基于第一视频应用终端2自身的通信协议与第一视频应用终端2进行通信，并能够基于RTSP或RTMP协议实现与第一服务器3的双向通信。
其中，第二服务器通过对从第一视频应用终端2接收的数据进行协议转换处理，来实现将基于第一视频应用终端2自身通信协议的数据包转换为基于RTSP或RTMP协议的音视频流，并基于RTSP或RTMP协议实现与第一服务器3的双向通信，从而实现将不同协议的视频应用终端的音视频数据信息传输至调度台终端1进行播放，以实现不同协议的视频应用终端之间的视频融合互通。
具体地，第一视频应用终端2可以是包括采用GB28181协议的视频应用终端、采用H323协议的视频应用终端、采用RTSP协议的视频应用终端、和采用SIP协议的视频应用终端中的至少一种。对于采用GB28181协议的视频应用终端、采用H323协议的视频应用终端和采用SIP协议的视频应用终端，其一般通过RTP数据包进行数据传输，因而可以在第二服务器4上通过基于RTSP协议或RTMP协议的再编码处理来实现协议转换，而对于采用RTSP协议的视频应用终端，第二服务器4可以不经过协议转换处理，直接进行音视频数据信息的转发。
具体地，如图4所示，第二服务器4实现为包括
再编码模块40，用于采用RTSP协议或RTMP协议对接收到的第一视频应用终端的RTP数据包进行再编码，并将再编码后的视频流通过RTSP协议或RTMP协议发送至第一服务器；和
流媒体模块41，用于将接收到的第一视频应用终端的基于RTSP协议的视频流直接通过RTSP协议或RTMP协议发送至第一服务器。
相应地，第一服务器3配置为包括推送模块30，用于基于WEBRTC协议将第二服务器通过RTSP协议或RTMP协议发送的视频流直接通过建立的基于WEBRTC协议的通信连接推送至调度台终端1进行播放。示例性地，推送模块通过WEBREC协议的RTCDataChannel调用接口将基于RTSP/RTMP网络协议接收到的视频流推送给调度台终端进行播放。
图5示意性地显示了本发明实施例另一种实施方式的多协议视频应用融合互通的系统，如图5所示，系统还包括第二视频应用终端5。
在该实施例中，第一服务器3还配置为能够基于WEBRTC协议与在第二视频应用终端5和调度台终端1之间实现双向通信。
具体地，第一服务器还配置为包括
连接建立模块31，用于响应于第一视频应用终端或调度台终端的基于WEBRTC协议的连接请求，与连接请求方建立基于WEBRTC协议的通信连接；
信息获取模块32，用于通过建立的基于WEBRTC协议的通信连接接收连接请求方发送的音视频信息；和
转发模块33，用于基于WEBRTC协议将所述音视频信息发送至连接请求方的对端，其中，在调度台终端为连接请求方时，其对端为第二视频应用终端，在第二视频应用终端为连接请求方时，其对端为调度台终端。
示例性地，本发明上述实施例中的第一视频应用终端包括4G布控球、摄像机、视频会议MCU、H323/SIP视频终端中的至少一种，第一视频应用终端为单兵图传设备。
在其他优选实现例中，为了方便实现基于H323/SIP协议的终端呼叫业务，在第一服务器上还配置有呼叫模块，其通过H5服务提供可供浏览器预览和操作的拨号选项，如通过在可访问的浏览器页面地址上设置拨号按钮来接收拨号请求，并在接收到拨号请求后，将该拨号请求通过HTTP协议发送给第二服务器。相应地，第二服务器上还配置有基于H323/SIP标准协议的客户端模块(也称软终端)，以使得第二服务器能够通过作为主叫或被叫端来提供呼叫服务。示例性地，通过在第二服务器上基于H323/SIP标准协议来配置软终端，第二服务器能够作为被叫端，接收采用H323/SIP协议的第一视频应用终端的直接呼叫，并响应于第一视频应用终端的呼叫，在呼通后通过H323/SIP协议呼叫对方MCU或者H323/SIP终端实现双方视频通话回传，或者第二服务器能够作为主叫方，通过H323/SIP协议呼叫对方MCU或者H323/SIP终端实现双方视频通话回传，以将视频直接回传给其他所需的第三方。
在另一优选实现例中，第一服务器还配置有终端状态显示模块，其通过H5服务提供可供浏览器预览的第一视频应用终端或第二视频应用终端的工作状态。在将上述方法或系统应用到应急业务场景的实现例中，还可以在第一服务器的呼叫模块和第二服务器上分别为各视频应用终端配置备用呼叫通道入口及备用呼叫通道，以使得工作人员能够结合终端的工作状态，来实现备用应急呼叫。
本发明上述系统实施例中的各个模块的具体实现可以参照前文方法部分叙述，故在此不再赘述。需要说明的是，上文是以视频应用终端向调度台终端发送音视频数据信息的交互过程作为对象进行详细说明的，可以理解的是，在通过调度台终端向第一视频应用终端发送音视频数据时，基于相同的技术构思，只需要沿反向进行处理即可，如调度台终端通过WEBRTC协议向第一服务器发送视频流，第一服务器通过RTSP协议或RTMP协议将视频流发送给第二服务器，第二服务器根据交互的第一视频应用终端采用的协议，直接将视频流发送给第一视频应用终端(如第一视频应用终端是RTSP协议的情况下)，或进行协议转换后将数据包(如第一视频应用终端是H323/SIP协议的情况下，进行解码处理后将STP数据包)发送给第一视频应用终端。
通过本发明实施例的多协议视频应用融合互通的系统，使得基于不同协议的视频应用终端(可以为通信设备)之间能够实现融合互通，使得用户能够快捷方便地使用不同的视频应用终端进行通信，减少重复建设成本。由此，事发现场工作人员可以通过配发的带有拍照功能或摄像功能的视频应用终端进行拍摄，与指挥中心进行数据传输和收发，使信息时效性加强，为处理应急事件赢得时间。本发明上述实施例的方法和系统可以应用在应急救援、网络直播、网络教育、消防监控、监狱监控等的指挥调度中，视频应用终端可以实现为包括移动单兵、车载视频、无人机视频、固定监控等，由此，指挥中心就可以利用本发明实施例的方案对不同协议的终端进行融合，达到及时召开视频会议，并将现场图像实时接入到视频会议系统，供指挥中心专家领导了解现场的实时动态，提供科学精准的研判依据等目的，且通过多协议视频的融合互通，还能进一步满足将各类视频等媒体数据推送至其他视频会议系统，如市政府、各委办局会议系统，满足多部门会商对现场视频的需求。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对相关技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (10)

1.多协议视频应用融合互通的方法，其特征在于，包括
部署第一服务器，并将所述第一服务器配置为能够基于WEBRTC协议与调度台终端之间实现双向通信；
在所述第一服务器和第一视频应用终端之间部署第二服务器，将所述第二服务器配置为能够基于第一视频应用终端自身的通信协议与所述第一视频应用终端进行通信，并能够基于RTSP或RTMP协议实现与所述第一服务器的双向通信。
2.根据权利要求1所述的方法，其特征在于，还将所述第一服务器配置为能够基于WEBRTC协议在第二视频应用终端和调度台终端之间实现双向通信。
3.根据权利要求2所述的方法，其特征在于，所述将所述第一服务器配置为能够基于WEBRTC协议在第二视频应用终端和调度台终端之间实现双向通信实现为包括：
响应于调度台终端或第二视频应用终端基于WEBRTC协议的连接请求，建立与连接请求方的通信连接；
通过与连接请求方的通信连接接收所述连接请求方发送的音视频信息；
通过基于WEBRTC协议建立的通信连接将所述音视频信息发送至连接请求方的对端，其中，在调度台终端为连接请求方时，其对端为第二视频应用终端，在第二视频应用终端为连接请求方时，其对端为调度台终端。
4.根据权利要求1至3任一项所述的方法，其中，所述第一视频应用终端包括采用GB28181协议的视频应用终端、采用H323协议的视频应用终端、和采用SIP协议的视频应用终端中的至少一种；
所述第二服务器配置为基于RTSP协议或RTMP协议对接收到的第一视频应用终端的数据包进行再编码，并将再编码后的视频流通过RTSP协议或RTMP协议发送至所述第一服务器；
所述第一服务器基于WEBRTC协议将所述第二服务器通过RTSP协议或RTMP协议发送的视频流发送至所述调度台终端进行播放。
5.根据权利要求4所述的方法，其特征在于，所述第一视频应用终端还包括采用RTSP协议的视频应用终端；
所述第二服务器还配置为直接将接收到的第一视频应用终端的基于RTSP协议的视频流通过RTSP协议或RTMP协议发送至所述第一服务器。
6.根据权利要求5所述的方法，其特征在于，所述第一视频应用终端包括4G布控球、摄像机、视频会议MCU、H323/SIP视频终端中的至少一种，所述第二视频应用终端为单兵图传设备。
7.多协议视频应用融合互通的系统，其特征在于，包括
调度台终端、第一视频应用终端、第一服务器和第二服务器，其中，
所述第一服务器配置为能够基于WEBRTC协议与所述调度台终端之间实现双向通信；
所述第二服务器配置为能够基于第一视频应用终端自身的通信协议与所述第一视频应用终端进行通信，并能够基于RTSP或RTMP协议实现与第一服务器的双向通信。
8.根据权利要求7所述的系统，其特征在于，所述第一视频应用终端包括采用GB28181协议的视频应用终端、采用H323协议的视频应用终端、采用RTSP协议的视频应用终端、和采用SIP协议的视频应用终端中的至少一种；
所述第二服务器包括
再编码模块，用于利用RTSP协议或RTMP协议对接收到的第一视频应用终端的RTP数据包进行再编码，并将再编码后的视频流通过RTSP协议或RTMP协议发送至所述第一服务器；和
流媒体模块，用于将接收到的第一视频应用终端的视频流通过RTSP协议或RTMP协议发送至所述第一服务器；
所述第一服务器包括
推送模块，用于通过基于WEBRTC协议将所述第二服务器通过RTSP协议或RTMP协议发送的视频流发送至所述调度台终端进行播放。
9.根据权利要求8所述的系统，其特征在于，所述系统还包括第二视频应用终端，所述第一服务器配置为能够基于WEBRTC协议与在所述第二视频应用终端和所述调度台终端之间实现双向通信；
所述第一服务器还包括连接建立模块，用于响应于第一视频应用终端或调度台终端的基于WEBRTC协议的连接请求，与连接请求方建立基于WEBRTC协议的通信连接；
信息获取模块，用于通过建立的基于WEBRTC协议的通信连接接收所述连接请求方发送的音视频信息；和
转发模块，用于通过基于WEBRTC协议的通信连接将所述音视频信息发送至连接请求方的对端，其中，在调度台终端为连接请求方时，其对端为第二视频应用终端，在第二视频应用终端为连接请求方时，其对端为调度台终端。
10.根据权利要求9所述的系统，其特征在于，所述第一视频应用终端包括4G布控球、摄像机、视频会议MCU、H323/SIP视频终端中的至少一种，所述第一视频应用终端为单兵图传设备。
CN202011396764.9A 2020-12-01 2020-12-01 多协议视频应用融合互通的方法和系统 Pending CN112422583A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011396764.9A CN112422583A (zh) 2020-12-01 2020-12-01 多协议视频应用融合互通的方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011396764.9A CN112422583A (zh) 2020-12-01 2020-12-01 多协议视频应用融合互通的方法和系统

Publications (1)

Publication Number Publication Date
CN112422583A true CN112422583A (zh) 2021-02-26

Family

ID=74829227

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011396764.9A Pending CN112422583A (zh) 2020-12-01 2020-12-01 多协议视频应用融合互通的方法和系统

Country Status (1)

Country Link
CN (1) CN112422583A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112995674A (zh) * 2021-05-20 2021-06-18 武汉中科通达高新技术股份有限公司 一种媒体信息传输方法、系统及存储介质
CN113726895A (zh) * 2021-08-31 2021-11-30 广州艾美网络科技有限公司 文件传输方法、装置及网络ktv系统
CN113938469A (zh) * 2021-08-27 2022-01-14 上海云翌通信科技有限公司 非sip协议终端和sip协议终端通话方法，网关及sip服务器
CN115086782A (zh) * 2022-05-10 2022-09-20 南方电网深圳数字电网研究院有限公司 媒体数据传输方法及装置
CN117440186A (zh) * 2023-12-22 2024-01-23 深圳星网信通科技股份有限公司 视频服务集成方法、视频集成设备和计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105025327A (zh) * 2015-07-14 2015-11-04 福建富士通信息软件有限公司 一种移动终端现场直播的方法及系统
US20180063556A1 (en) * 2016-08-29 2018-03-01 YouNow, Inc. Systems and methods for providing guest broadcasting on a live stream video platform
CN107995187A (zh) * 2017-11-30 2018-05-04 上海哔哩哔哩科技有限公司 基于html5浏览器的视频主播、直播方法、终端和系统
CN111107396A (zh) * 2019-12-31 2020-05-05 斑马网络技术有限公司 基于硬件的车机音频远程输出方法、装置及系统
CN111541875A (zh) * 2020-05-14 2020-08-14 深圳市康拓普信息技术有限公司 一种电力视频监控视联网平台

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105025327A (zh) * 2015-07-14 2015-11-04 福建富士通信息软件有限公司 一种移动终端现场直播的方法及系统
US20180063556A1 (en) * 2016-08-29 2018-03-01 YouNow, Inc. Systems and methods for providing guest broadcasting on a live stream video platform
CN107995187A (zh) * 2017-11-30 2018-05-04 上海哔哩哔哩科技有限公司 基于html5浏览器的视频主播、直播方法、终端和系统
CN111107396A (zh) * 2019-12-31 2020-05-05 斑马网络技术有限公司 基于硬件的车机音频远程输出方法、装置及系统
CN111541875A (zh) * 2020-05-14 2020-08-14 深圳市康拓普信息技术有限公司 一种电力视频监控视联网平台

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
朱秀昌等: "《数字图像处理与图像信息》", 31 August 2016 *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112995674A (zh) * 2021-05-20 2021-06-18 武汉中科通达高新技术股份有限公司 一种媒体信息传输方法、系统及存储介质
CN112995674B (zh) * 2021-05-20 2021-08-03 武汉中科通达高新技术股份有限公司 一种媒体信息传输方法、系统及存储介质
CN113938469A (zh) * 2021-08-27 2022-01-14 上海云翌通信科技有限公司 非sip协议终端和sip协议终端通话方法，网关及sip服务器
CN113726895A (zh) * 2021-08-31 2021-11-30 广州艾美网络科技有限公司 文件传输方法、装置及网络ktv系统
CN113726895B (zh) * 2021-08-31 2023-08-25 广州艾美网络科技有限公司 文件传输方法、装置及网络ktv系统
CN115086782A (zh) * 2022-05-10 2022-09-20 南方电网深圳数字电网研究院有限公司 媒体数据传输方法及装置
CN115086782B (zh) * 2022-05-10 2023-11-03 南方电网数字平台科技(广东)有限公司 媒体数据传输方法及装置
CN117440186A (zh) * 2023-12-22 2024-01-23 深圳星网信通科技股份有限公司 视频服务集成方法、视频集成设备和计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN106331581B (zh) 一种移动终端与视联网终端通信的方法和装置
CN112422583A (zh) 多协议视频应用融合互通的方法和系统
CN110213652B (zh) 一种音视频数据传输方法、装置及存储介质
CN102045537A (zh) 连接视频会议系统和视频监控系统的方法和装置
US20090254960A1 (en) Method for a clustered centralized streaming system
CN106375261B (zh) 一种跨网络数据传输方法和系统
US20110225238A1 (en) System and method for providing data channel management in a network environment
EP2448364B1 (en) Method for realizing radio videoconference, system and terminal thereof
WO2009129718A1 (zh) 一种音视频会议中实现文件共享的方法、装置及系统
WO2011140739A1 (zh) 远程文档共享方法、系统以及远程文档共享服务器
CN110062191B (zh) 一种基于视联网的多方组会方法和服务器
CN110475094B (zh) 视频会议处理方法、装置及可读存储介质
CN110191304B (zh) 数据处理方法、装置及存储介质
CN108881149B (zh) 一种可视电话设备的接入方法和系统
CN112637546B (zh) 对接视频监控平台的视频会议系统、网关及会议控制方法
CN111147789B (zh) 一种音视频流录制的方法、装置、设备以及存储介质
CN111614927A (zh) 视频会话建立法、装置、电子设备及存储介质
CN109617961B (zh) 一种在互联网中下载视联网视频录像的方法和装置
CN108810475A (zh) 一种基于Onvif标准及Sip协议的Android视频监控装置
CN101977306B (zh) 双向视频监控的方法及系统
CN115665111B (zh) 基于执法记录仪的实时通信系统
CN109889755B (zh) 通信连接方法和视联网终端
EP4131892A1 (en) A communication system for enabling multimedia streaming between devices
US8643693B2 (en) System and method for providing television video conferencing using a computing device
CN110784678B (zh) 一种会议数据录制方法、装置和可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210226

RJ01 Rejection of invention patent application after publication