CN110830777B - 基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法 - Google Patents

基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法 Download PDF

Info

Publication number
CN110830777B
CN110830777B CN201911203239.8A CN201911203239A CN110830777B CN 110830777 B CN110830777 B CN 110830777B CN 201911203239 A CN201911203239 A CN 201911203239A CN 110830777 B CN110830777 B CN 110830777B
Authority
CN
China
Prior art keywords
video
webrtc
sip
protocol
standard
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911203239.8A
Other languages
English (en)
Other versions
CN110830777A (zh
Inventor
孟卿卿
王建勇
刘玉梅
崔云红
孙琼芳
王冰洋
王德敏
孙丽丽
王健
邢旭
汪红刚
柴源
任晏江
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
First Research Institute of Ministry of Public Security
Original Assignee
First Research Institute of Ministry of Public Security
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by First Research Institute of Ministry of Public Security filed Critical First Research Institute of Ministry of Public Security
Priority to CN201911203239.8A priority Critical patent/CN110830777B/zh
Publication of CN110830777A publication Critical patent/CN110830777A/zh
Application granted granted Critical
Publication of CN110830777B publication Critical patent/CN110830777B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/10—Architectures or entities
    • H04L65/1045—Proxies, e.g. for session initiation protocol [SIP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1073—Registration or de-registration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H04L65/1104—Session initiation protocol [SIP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/765—Media network packet handling intermediate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/565—Conversion or adaptation of application format or content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/08—Protocols for interworking; Protocol conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/161—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
    • H04L69/162—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields involving adaptations of sockets based mechanisms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4782—Web browsing, e.g. WebTV
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明公开了一种基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法，可在保证视频监控点播实时性要求的前提下，将GB/T28181标准的软件应用适配环境拓展至windows和andorid等多操作系统平台及Chrome和Firefox等多浏览器环境；同时也实现了标准端到端WebRTC视音频直播场景下对GB/T 28181协议的兼容以及大并发音频点播请求媒体流功能。本发明方法可以使GB/T28181标准视频监控点播实时性得以保证的同时，让基于GB/T28181标准的软件应用环境使用环境更广、对环境兼容性更强。

Description

基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的 方法
技术领域
本发明涉及监控技术领域，具体涉及一种基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法。
背景技术
GB/T28181标准是国内安防行业使用范围最广、影响最大的视频监控联网国家标准，由于跨操作系统平台(包括windows、linux、mac以及android等)、跨浏览器(包括Chrome、Firefox以及Internet Explorer等)的协议兼容性问题，基于该标准实现的应用系统的软件终端展现形式主要为windows等多操作系统平台的桌面应用或基于InternetExplorer浏览器的ActiveX插件应用。
WebRTC协议是互联网视频行业最为主流的、跨平台跨浏览器支持能力最好、实时性最强的协议标准之一，基于该标准实现的应用系统可广泛适配windows等多平台的桌面应用或Chrome以及Firefox等浏览器环境。
中国专利申请(CN107809683A，公开日为2018-03-16)公开了一种基于浏览器无插件的直播系统及方法，系统包括了主播端、观众端、媒体服务器，STUN服务器和TURN服务器。主播端和观众端通过STUN确认身份，优先使用默认连接方式；如果默认连接方式不可用，双方将查询TURN服务器并将TURN作为中继服务器使用。连接成功后，信令服务器、STUN服务器和TURN服务器再相互传输交换SDP数据，建立为WebRTC准备的RTCPeerConnection连接。最后，主播端和观众端之间触发一系列事件，主播端得以向观众端传输音视频数据。该发明的优点在于采用了WebRTC技术和一系列协议方式，该发明的直播系统无需在本地系统上安装插件或客户端即可使用。
该技术方案主要针对点到点的WebRTC视音频直播场景，主播端(视音频源端)推送媒体流和观众端(视音频终端)接收媒体流都是基于浏览器WebRTC协议。但是该技术方案无法兼容基于GB/T 28181协议实现的监控视频源，包括GB/T 28181视音频采集设备以及GB/T28181视频监控联网平台等，也无法实现多观众端(视音频终端)并发点播请求媒体流的业务场景。
发明内容
针对现有技术的不足，本发明旨在提供一种基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法，在GB/T 28181标准协议主体框架下通过兼容WebRTC技术协议，将GB/T 28181标准的软件应用适配范围拓展至windows和andorid等多操作系统平台及Chrome和Firefox等多浏览器环境，解决在保证视频监控点播实时性要求的前提下采用GB/T28181标准的软件应用无法有效适配windows和andorid等多操作系统平台及Chrome和Firefox等多浏览器环境的问题；同时也解决了标准端到端WebRTC视音频直播场景下无法兼容GB/T 28181协议以及无法实现大并发音频点播请求媒体流的问题。
为了实现上述目的，本发明采用如下技术方案：
基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法，包括如下步骤：
S1、GB/T 28181视音频采集设备通过GB/T 28181标准SIP协议向GB/T视频监控联网平台的SIP信令服务器注册；
WebRTC接入代理服务的SIP代理转换服务器通过GB/T 28181标准SIP协议向GB/T视频监控联网平台的SIP信令服务器注册；
WebRTC终端设备通过HTTP协议注册或登录GB/T视频监控联网平台的WEB业务服务器，GB/T视频监控联网平台的WEB业务服务器根据管理的一个或多个WebRTC接入代理服务的负载为WebRTC终端设备动态分配WebRTC接入代理服务的入口；同时WebRTC终端设备从GB/T视频监控联网平台的WEB业务服务器获取GB/T 28181视音频采集设备的列表信息；
WebRTC终端设备通过Sip over WebSocket协议向WebRTC接入代理服务的SIP代理转换服务器进行注册；
S2、WebRTC终端设备通过Sip over WebSocket协议向WebRTC接入代理服务的SIP代理转换服务器呼叫请求目标GB/T 28181视音频采集设备的实时视音频流；
S3、WebRTC接入代理服务的SIP代理转换服务器将Sip over WebSocket协议转换为GB/T 28181标准SIP协议，然后向GB/T视频监控联网平台的SIP信令服务器呼叫请求目标GB/T 28181视音频采集设备的实时视音频流；
S4、GB/T视频监控联网平台的SIP信令服务器通过GB/T 28181标准SIP协议呼叫GB/T视频监控联网平台的流媒体服务器以及目标GB/T 28181视音频采集设备；
S5、目标GB/T 28181视音频采集设备如不支持呼叫参数则通过GB/T 28181标准SIP协议返回呼叫失败结果信息，如支持呼叫参数则通过GB/T 28181标准SIP协议返回呼叫成功结果信息；
S6、GB/T视频监控联网平台的SIP信令服务器通过GB/T 28181标准SIP协议向WebRTC接入代理服务的SIP代理转换服务器返回呼叫结果；WebRTC接入代理服务的SIP代理转换服务器将接收到的呼叫结果由GB/T 28181标准SIP协议转换为Sip over WebSocket协议后转发至WebRTC终端设备；
如果是呼叫成功，则目标GB/T 28181视音频采集设备根据GB/T28181标准SIP协议中携带的SDP信息向目标GB/T视频监控联网平台的流媒体服务器发送GB/T 28181RTP媒体流；
S7、GB/T视频监控联网平台的流媒体服务器将收到的GB/T 28181RTP媒体流根据GB/T 28181标准SIP协议中携带的SDP信息转发至目标WebRTC接入代理服务的流媒体代理转换服务器；
S8、WebRTC接入代理服务的流媒体代理转换服务器将接收到的GB/T 28181RTP媒体流依次进行RTP解析、PS解封装、ES解码、ES二次编码以及RTP二次封装，重新编码成目标码率和视频分辨率的WebRTC媒体流，并根据Sip over WebSocket协议中携带的SDP信息转发至WebRTC终端设备；
S9、WebRTC终端设备将接收到的WebRTC媒体流进行解码播放，实现目标视音频预览GB/T 28181视音频采集设备的监控视频的预览。
进一步地，所述WebRTC终端设备包括4G/5G移动终端的APP或WEB。
进一步地，所述WebRTC终端设备包括台式PC终端的EXE或WEB。
本发明的有益效果在于：
本发明方法可在保证视频监控点播实时性要求的前提下，将GB/T28181标准的软件应用适配环境拓展至windows和andorid等多操作系统平台及Chrome和Firefox等多浏览器环境；同时也实现了标准端到端WebRTC视音频直播场景下对GB/T 28181协议的兼容以及大并发音频点播请求媒体流功能。本发明方法可以使GB/T28181标准视频监控点播实时性得以保证的同时，让基于GB/T28181标准的软件应用环境使用环境更广、对环境兼容性更强。
附图说明
图1为本发明实施例1方法的网络架构示意图；
图2为本发明实施例2方法的网络架构示意图；
图3为本发明实施例3方法的网络架构示意图。
具体实施方式
以下将结合附图对本发明作进一步的描述，需要说明的是，本实施例以本技术方案为前提，给出了详细的实施方式和具体的操作过程，但本发明的保护范围并不限于本实施例。
以下先对一些术语作简单的解释：
(1)WebRTC协议：Web Real-Time Communication，通过浏览器提供简单的javascript达到实时通讯能力，WebRTC提供了视音频交互的核心技术(包括音视频的采集、编解码、网络传输以及显示等功能)，并且支持跨平台(包括windows、linux、mac以及android)。WebRTC于2011年6月1日开源并在Google、Mozilla以及Opera等厂商支持下被纳入万维网联盟的W3C推荐标准；
(2)GB/T 28181标准：规定了城市监控报警联网系统中信息传输、交换、控制的互联结构、通信协议结构，传输、交换、控制的基本要求和安全性要求，以及控制、传输流程和协议接口等技术要求。该标准于2011年发布并被海康威视、浙江大华以及中兴力维等众多安防厂商接受并广泛应用于安防视频监控设备接入以及平台间互联等业务范围。
(3)跨操作系统平台(包括windows、linux、mac以及android等)：软件等支持在windows、linux、mac以及android等多种类型的操作系统环境中部署运行。
(4)跨浏览器(包括Chrome、Firefox以及Internet Explorer等)：软件等支持在Chrome、Firefox以及Internet Explorer等多种类型的浏览器环境中部署运行。
(5)桌面应用：可直接通过鼠标双击等操作启动运行的应用程序，例如：Windows操作系统环境下为exe可执行程序，android操作系统环境下为APP可执行程序。
(6)ActiveX插件：Microsoft的ActiveX技术的一部分。ActiveX控件是可以在应用程序和网络中计算机上重复使用的程序对象。创建它的主要技术是Microsoft的ActiveX技术，其中主要是组件对象模型(COM)。
(7)GB/T28181视频监控联网平台：符合GB/T28181国家标准，对联网系统内的视频、音频、报警等各种信息资源进行集成及处理，对联网系统的设备、用户、网络、安全、业务等进行综合管理，实现联网系统所规定相关功能的平台系统。通常情况下，GB/T28181视频监控联网平台包括WEB业务服务器、SIP信令服务器以流媒体服务器等核心服务器。
(8)GB/T 28181视音频采集设备：系统中安装于监控现场的、符合GB/T28181国家标准的、对视音频数据信息进行采集、编码、存储以及传输的设备。
(9)WebRTC接入代理服务：作为GB/T 28181视频监控联网平台的扩展接入服务，实现GB/T 28181国标协议与WebRTC协议的双向转换与转发。
(10)4G/5G移动终端：可承载运行支持WebRTC协议的桌面APP应用或Web应用、能够通过4G或5G移动网络接入访问GB/T28181视频监控联网平台以及WebRTC接入代理服务的移动终端设备。
(11)台式PC终端：可承载运行支持WebRTC协议的桌面应用或Web应用、能够通过有线固定网络或WIFI无线网络等接入访问GB/T28181视频监控联网平台以及WebRTC接入代理服务的PC终端设备。
实施例1
本实施例提供一种基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法，如图1所示，包括如下步骤：
S1、GB/T 28181视音频采集设备通过GB/T 28181标准SIP协议向GB/T视频监控联网平台的SIP信令服务器注册；
WebRTC接入代理服务的SIP代理转换服务器通过GB/T 28181标准SIP协议向GB/T视频监控联网平台的SIP信令服务器注册；
WebRTC终端设备通过HTTP协议注册或登录GB/T视频监控联网平台的WEB业务服务器，GB/T视频监控联网平台的WEB业务服务器根据管理的一个或多个WebRTC接入代理服务的负载为WebRTC终端设备动态分配WebRTC接入代理服务的入口；同时WebRTC终端设备从GB/T视频监控联网平台的WEB业务服务器获取GB/T 28181视音频采集设备的列表信息；
WebRTC终端设备通过Sip over WebSocket协议向WebRTC接入代理服务的SIP代理转换服务器进行注册；
S2、WebRTC终端设备通过Sip over WebSocket协议向WebRTC接入代理服务的SIP代理转换服务器呼叫请求目标GB/T 28181视音频采集设备的实时视音频流；
S3、WebRTC接入代理服务的SIP代理转换服务器将Sip over WebSocket协议转换为GB/T 28181标准SIP协议，然后向GB/T视频监控联网平台的SIP信令服务器呼叫请求目标GB/T 28181视音频采集设备的实时视音频流；
S4、GB/T视频监控联网平台的SIP信令服务器通过GB/T 28181标准SIP协议呼叫GB/T视频监控联网平台的流媒体服务器以及目标GB/T 28181视音频采集设备；
S5、目标GB/T 28181视音频采集设备如不支持呼叫参数则通过GB/T 28181标准SIP协议返回呼叫失败结果信息，如支持呼叫参数则通过GB/T 28181标准SIP协议返回呼叫成功结果信息；
S6、GB/T视频监控联网平台的SIP信令服务器通过GB/T 28181标准SIP协议向WebRTC接入代理服务的SIP代理转换服务器返回呼叫结果；WebRTC接入代理服务的SIP代理转换服务器将接收到的呼叫结果由GB/T 28181标准SIP协议转换为Sip over WebSocket协议后转发至WebRTC终端设备；
如果是呼叫成功，则目标GB/T 28181视音频采集设备根据GB/T28181标准SIP协议中携带的SDP信息向目标GB/T视频监控联网平台的流媒体服务器(指定IP地址和端口号)发送GB/T 28181RTP媒体流；
S7、GB/T视频监控联网平台的流媒体服务器将收到的GB/T 28181RTP媒体流根据GB/T 28181标准SIP协议中携带的SDP信息转发至目标WebRTC接入代理服务的流媒体代理转换服务器；
S8、WebRTC接入代理服务的流媒体代理转换服务器将接收到的GB/T 28181RTP媒体流依次进行RTP解析、PS解封装、ES解码、ES二次编码以及RTP二次封装，重新编码成目标码率和视频分辨率的WebRTC媒体流，并根据Sip over WebSocket协议中携带的SDP信息转发至WebRTC终端设备；
S9、WebRTC终端设备将接收到的WebRTC媒体流进行解码播放，实现目标视音频预览GB/T 28181视音频采集设备的监控视频的预览。
进一步地，所述WebRTC终端设备包括4G/5G移动终端的APP或WEB。
进一步地，所述WebRTC终端设备包括台式PC终端的EXE或WEB。
实施例2
本实施例给出将实施例1方法应用实施于互联网公网环境的实例，依托互联网公网网络实现GB/T 28181视音频采集设备的媒体流的汇聚及WebRTC端播放预览。
本实施例中各主要软硬件节点运行环境参数如下，如图2所示：
(1)GB/T视频监控联网平台流媒体服务器、WEB业务服务器以及SIP信令服务器等主要核心服务器运行于华为、浪潮以及曙光等厂商的通用硬件服务器上，操作系统为CentOS6.5及以上版本，通过网线连接至中国联通及中国电信等运行商提供的运营商网络实现接入互联网公网，并绑定由电信运行商提供的互联网公网可寻址的IP地址；
(2)WebRTC接入代理服务的SIP代理转换服务器以及流媒体代理转换服务器等主要核心服务器运行于华为、浪潮以及曙光等厂商的通用硬件服务器上，操作系统为CentOS6.5及以上版本，通过网线连接至中国联通及中国电信等运行商提供的运营商网络实现接入互联网公网，并绑定由电信运行商提供的互联网公网可寻址的IP地址；
(3)GB/T 28181视音频采集设备为海康、大华以及中盾等主流安防视频监控设备厂商生产的支持GB/T 28181标准的监控摄像机IPC及DVR等监控设备，通过网线连接至路由器接入至中国联通及中国电信等运行商提供的运营商网络，实现接入互联网公网，GB/T28181视音频采集设备的IP地址可由路由器自动分配；
(4)4G/5G移动终端APP/WEB等WebRTC终端设备为华为以及小米等主流移动通信设备制造商生产的支持WebRTC协议的移动通信设备(如华为荣耀/Mate系列手机等)，操作系统Android/iOS，运行支持WebRTC协议的APP/WEB软件，通过中国联通及中国移动等运行商提供的4G/5G无线接入网络接入互联网公网，4G/5G移动终端APP/WEB等WebRTC终端设备的IP地址可由运行商自动分配。
主要运行实施步骤如下：
(1)GB/T 28181视音频采集设备通过GB/T 28181标准SIP协议向GB/T视频监控联网平台的SIP信令服务器注册；
(2)WebRTC接入代理服务的SIP代理转换服务器通过GB/T 28181标准SIP协议向GB/T视频监控联网平台的SIP信令服务器注册；
(3)4G/5G移动终端APP/WEB通过HTTP协议注册或登录GB/T视频监控联网平台WEB业务服务器，GB/T视频监控联网平台WEB业务服务器根据管理的一个或多个WebRTC接入代理服务的负载等情况为4G/5G移动终端APP/WEB动态分配WebRTC接入代理服务入口；同时4G/5G移动终端APP/WEB从GB/T视频监控联网平台的WEB业务服务器获取GB/T 28181视音频采集设备列表信息；
(4)4G/5G移动终端APP/WEB通过Sip over WebSocket协议向WebRTC接入代理服务的SIP代理转换服务器进行注册；
(5)4G/5G移动终端APP/WEB通过Sip over WebSocket协议向WebRTC接入代理服务的SIP代理转换服务器呼叫请求目标GB/T28181视音频采集设备实时视音频流；
(6)WebRTC接入代理服务的SIP代理转换服务器将Sip over WebSocket协议转换为GB/T 28181标准SIP协议后向GB/T视频监控联网平台SIP信令服务器呼叫请求目标GB/T28181视音频采集设备实时视音频流；
(7)GB/T视频监控联网平台的SIP信令服务器通过GB/T 28181标准SIP协议呼叫GB/T视频监控联网平台的流媒体服务器以及目标GB/T 28181视音频采集设备；
(8)目标GB/T 28181视音频采集设备如不支持呼叫参数则通过GB/T 28181标准SIP协议返回呼叫失败结果信息，如支持呼叫参数则通过GB/T 28181标准SIP协议返回呼叫成功信息；
(9)GB/T视频监控联网平台的SIP信令服务器通过GB/T 28181标准SIP协议向WebRTC接入代理服务的SIP代理转换服务器返回呼叫结果；
(10)WebRTC接入代理服务的SIP代理转换服务器将接收到的呼叫结果由GB/T28181标准SIP协议转换为Sip over WebSocket协议后转发至源4G/5G移动终端APP/WEB；
(11)如果步骤(8)呼叫成功，则目标GB/T 28181视音频采集设备根据GB/T 28181标准SIP协议中携带的SDP信息向目标GB/T视频监控联网平台流媒体服务器(指定IP地址和端口号)发送GB/T 28181RTP媒体流；
(12)GB/T视频监控联网平台的流媒体服务器将收到的GB/T28181RTP媒体流根据GB/T 28181标准SIP协议中携带的SDP信息转发至目标WebRTC接入代理服务的流媒体代理转换服务器；
(13)WebRTC接入代理服务的流媒体代理转换服务器将接收到的GB/T 28181RTP媒体流进行RTP解析、PS解封装、ES解码、ES二次编码以及RTP二次封装等转码处理，重新编码成目标码率和视频分辨率的WebRTC媒体流，并根据Sip over WebSocket协议中携带的SDP信息转发至目标4G/5G移动终端APP/WEB；
(14)4G/5G移动终端APP/WEB将接收到的WebRTC媒体流进行解码播放，实现目标视音频预览GB/T 28181视音频采集设备的监控视频的预览。
实施例3
本实施例给出将实施例1方法应用实施于非互联网公网的行业视频专网环境的实例，依托视频专网网络实现GB/T 28181视音频采集设备的媒体流的汇聚及WebRTC端播放预览。
本实施例中各主要软硬件节点运行环境参数如下，如图3所示：
(1)GB/T视频监控联网平台流媒体服务器、WEB业务服务器以及SIP信令服务器等主要核心服务器运行于华为、浪潮以及曙光等厂商的通用硬件服务器上，操作系统为CentOS6.5及以上版本，通过万兆光纤连接至视频专网交换机，并绑定由视频专网运营商提供的视频专网全网可寻址的IP地址；
(2)WebRTC接入代理服务的SIP代理转换服务器以及流媒体代理转换服务器等主要核心服务器运行于华为、浪潮以及曙光等厂商的通用硬件服务器上，操作系统为CentOS6.5及以上版本，通过万兆光纤连接至视频专网交换机，并绑定由视频专网运营商提供的视频专网全网可寻址的IP地址；
(3)GB/T 28181视音频采集设备为海康、大华以及中盾等主流安防视频监控设备厂商生产的支持GB/T 28181标准的监控摄像机IPC及DVR等监控设备或搭载于汽车/机器人/无人机等设备上的支持GB/T 28181标准的监控摄像机设备，通过WIFI无线网络连接至WIFI无线路由器实现连接至视频专网交换机，GB/T 28181视音频采集设备的IP地址可由WIFI无线路由器自动分配；
(4)台式EXE/WEB PC终端等WebRTC终端设备为联想以及惠普等主流计算机设备制造商生产的PC计算机设备(如联想Thinkpad个人笔记本计算机等)，操作系统Windwos7及以上版本，运行支持WebRTC协议的EXE/WEB软件，通过WIFI无线网络连接至WIFI无线路由器实现连接至视频专网交换机，台式EXE/WEB PC终端等WebRTC终端设备的IP地址可由WIFI无线路由器自动分配。
主要运行实施步骤如下：
(1)GB/T 28181视音频采集设备通过GB/T 28181标准SIP协议向GB/T视频监控联网平台的SIP信令服务器注册；
(2)WebRTC接入代理服务的SIP代理转换服务器通过GB/T 28181标准SIP协议向GB/T视频监控联网平台的SIP信令服务器注册；
(3)台式EXE/WEB PC终端通过HTTP协议注册/登录GB/T视频监控联网平台WEB业务服务器，GB/T视频监控联网平台WEB业务服务器根据管理的一个或多个WebRTC接入代理服务的负载等情况为台式EXE/WEB PC终端动态分配入口WebRTC接入代理服务；同时台式EXE/WEB PC终端从GB/T视频监控联网平台的WEB业务服务器获取GB/T 28181视音频采集设备列表信息；
(4)台式EXE/WEB PC终端通过Sip over WebSocket协议向WebRTC接入代理服务的SIP代理转换服务器进行注册；
(5)台式EXE/WEB PC终端通过Sip over WebSocket协议向WebRTC接入代理服务的SIP代理转换服务器呼叫请求目标GB/T28181视音频采集设备实时视音频流；
(6)WebRTC接入代理服务的SIP代理转换服务器将Sip over WebSocket协议转换为GB/T 28181标准SIP协议后向GB/T视频监控联网平台的SIP信令服务器呼叫请求目标GB/T 28181视音频采集设备实时视音频流；
(7)GB/T视频监控联网平台的SIP信令服务器通过GB/T 28181标准SIP协议呼叫GB/T视频监控联网平台的流媒体服务器以及目标GB/T 28181视音频采集设备；
(8)目标GB/T 28181视音频采集设备如不支持呼叫参数则通过GB/T 28181标准SIP协议返回呼叫失败结果信息，如支持呼叫参数则通过GB/T 28181标准SIP协议返回呼叫成功结果信息；
(9)GB/T视频监控联网平台的SIP信令服务器通过GB/T 28181标准SIP协议向WebRTC接入代理服务的SIP代理转换服务器返回呼叫结果；
(10)WebRTC接入代理服务的SIP代理转换服务器将接收到的呼叫结果由GB/T28181标准SIP协议转换为Sip over WebSocket协议后转发至台式EXE/WEB PC终端；
(11)如果步骤(8)呼叫成功，则目标GB/T 28181视音频采集设备根据GB/T 28181标准SIP协议中携带的SDP信息向目标GB/T视频监控联网平台的流媒体服务器(指定IP地址和端口号)发送GB/T 28181 RTP媒体流；
(12)GB/T视频监控联网平台的流媒体服务器将收到的GB/T 28181 RTP媒体流根据GB/T 28181标准SIP协议中携带的SDP信息转发至目标WebRTC接入代理服务的流媒体代理转换服务器；
(13)WebRTC接入代理服务的流媒体代理转换服务器将接收到的GB/T 28181 RTP媒体流进行RTP解析、PS解封装、ES解码、ES二次编码以及RTP二次封装等转码处理，重新编码成目标码率和视频分辨率的WebRTC媒体流，并根据Sip over WebSocket协议中携带的SDP信息转发至目标台式EXE/WEB PC终端；
(14)台式EXE/WEB PC终端将接收到的WebRTC媒体流进行解码播放，实现目标视音频预览GB/T 28181视音频采集设备的监控视频的预览。
对于本领域的技术人员来说，可以根据以上的技术方案和构思，给出各种相应的改变和变形，而所有的这些改变和变形，都应该包括在本发明权利要求的保护范围之内。

Claims (3)

1.基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法，其特征在于，包括如下步骤：
S1、GB/T 28181视音频采集设备通过GB/T 28181标准SIP协议向GB/T视频监控联网平台的SIP信令服务器注册；
WebRTC接入代理服务的SIP代理转换服务器通过GB/T 28181标准SIP协议向GB/T视频监控联网平台的SIP信令服务器注册；
WebRTC终端设备通过HTTP协议注册或登录GB/T视频监控联网平台的WEB业务服务器，GB/T视频监控联网平台的WEB业务服务器根据管理的一个或多个WebRTC接入代理服务的负载为WebRTC终端设备动态分配WebRTC接入代理服务的入口；同时WebRTC终端设备从GB/T视频监控联网平台的WEB业务服务器获取GB/T 28181视音频采集设备的列表信息；
WebRTC终端设备通过Sip over WebSocket协议向WebRTC接入代理服务的SIP代理转换服务器进行注册；
S2、WebRTC终端设备通过Sip over WebSocket协议向WebRTC接入代理服务的SIP代理转换服务器呼叫请求目标GB/T 28181视音频采集设备的实时视音频流；
S3、WebRTC接入代理服务的SIP代理转换服务器将Sip over WebSocket协议转换为GB/T 28181标准SIP协议，然后向GB/T视频监控联网平台的SIP信令服务器呼叫请求目标GB/T28181视音频采集设备的实时视音频流；
S4、GB/T视频监控联网平台的SIP信令服务器通过GB/T 28181标准SIP协议呼叫GB/T视频监控联网平台的流媒体服务器以及目标GB/T 28181视音频采集设备；
S5、目标GB/T 28181视音频采集设备如不支持呼叫参数则通过GB/T 28181标准SIP协议返回呼叫失败结果信息，如支持呼叫参数则通过GB/T 28181标准SIP协议返回呼叫成功结果信息；
S6、GB/T视频监控联网平台的SIP信令服务器通过GB/T 28181标准SIP协议向WebRTC接入代理服务的SIP代理转换服务器返回呼叫结果；WebRTC接入代理服务的SIP代理转换服务器将接收到的呼叫结果由GB/T 28181标准SIP协议转换为Sip over WebSocket协议后转发至WebRTC终端设备；
如果是呼叫成功，则目标GB/T 28181视音频采集设备根据GB/T28181标准SIP协议中携带的SDP信息向目标GB/T视频监控联网平台的流媒体服务器发送GB/T 28181RTP媒体流；
S7、GB/T视频监控联网平台的流媒体服务器将收到的GB/T 28181RTP媒体流根据GB/T28181标准SIP协议中携带的SDP信息转发至目标WebRTC接入代理服务的流媒体代理转换服务器；
S8、WebRTC接入代理服务的流媒体代理转换服务器将接收到的GB/T 28181RTP媒体流依次进行RTP解析、PS解封装、ES解码、ES二次编码以及RTP二次封装，重新编码成目标码率和视频分辨率的WebRTC媒体流，并根据Sip over WebSocket协议中携带的SDP信息转发至WebRTC终端设备；
S9、WebRTC终端设备将接收到的WebRTC媒体流进行解码播放，实现目标视音频预览GB/T 28181视音频采集设备的监控视频的预览。
2.根据权利要求1所述的基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法，其特征在于，所述WebRTC终端设备包括4G/5G移动终端的APP或WEB。
3.根据权利要求1所述的基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法，其特征在于，所述WebRTC终端设备包括台式PC终端的EXE或WEB。
CN201911203239.8A 2019-11-29 2019-11-29 基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法 Active CN110830777B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911203239.8A CN110830777B (zh) 2019-11-29 2019-11-29 基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911203239.8A CN110830777B (zh) 2019-11-29 2019-11-29 基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法

Publications (2)

Publication Number Publication Date
CN110830777A CN110830777A (zh) 2020-02-21
CN110830777B true CN110830777B (zh) 2020-11-17

Family

ID=69543300

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911203239.8A Active CN110830777B (zh) 2019-11-29 2019-11-29 基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法

Country Status (1)

Country Link
CN (1) CN110830777B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113839910A (zh) * 2020-06-23 2021-12-24 京东方科技集团股份有限公司 视频会议的实现方法、终端和sip网关
CN112118255B (zh) * 2020-09-17 2023-04-14 北京四方继保工程技术有限公司 一种基于sip协议的多级视频监控子系统的级联方法
CN112135104A (zh) * 2020-09-24 2020-12-25 智洋创新科技股份有限公司 基于多场景融合的视频综合监控系统及方法
CN112202786B (zh) * 2020-09-30 2022-05-20 武汉中科通达高新技术股份有限公司 一种违法数据识别方法及装置、电子设备
CN112188227A (zh) * 2020-09-30 2021-01-05 武汉中科通达高新技术股份有限公司 一种流媒体数据分发方法和装置
CN111935463B (zh) * 2020-10-16 2020-12-22 融智通科技（北京）股份有限公司 一种通过网页无控件低延迟查看实时监控视频的方法
CN112584194A (zh) * 2020-11-13 2021-03-30 深圳市捷视飞通科技股份有限公司 视频码流的推送方法、装置、计算机设备和存储介质
CN112511805B (zh) * 2020-11-27 2022-07-08 成都鼎安华智慧物联网股份有限公司 一种网络跨域传输的音视频监控系统及其通信方法
CN112653700B (zh) * 2020-12-23 2022-11-01 武汉烽火众智数字技术有限责任公司 一种基于webrtc网页视频通信的方法
CN112995674B (zh) * 2021-05-20 2021-08-03 武汉中科通达高新技术股份有限公司 一种媒体信息传输方法、系统及存储介质
CN113038090B (zh) * 2021-05-24 2021-09-07 武汉中科通达高新技术股份有限公司 一种传输链路管理方法和系统
CN112995239B (zh) * 2021-05-24 2021-08-03 武汉中科通达高新技术股份有限公司 一种数据处理方法和装置
CN113596396B (zh) * 2021-07-27 2024-05-14 上海悠络客电子科技股份有限公司 一种基于gb28181的目标跟踪系统
CN113747191A (zh) * 2021-09-10 2021-12-03 深圳市道通智能航空技术股份有限公司 基于无人机的视频直播方法、系统、设备及存储介质
CN114205647A (zh) * 2021-12-02 2022-03-18 云知声智能科技股份有限公司 基于视频监控的报警方法、装置、电子设备和存储介质
CN114339445B (zh) * 2021-12-16 2023-09-05 以萨技术股份有限公司 实时视频流自适应协调系统及方法
CN114172872A (zh) * 2021-12-18 2022-03-11 杭州视洞科技有限公司 一种实现终端向多个安防摄像头喊话的方法
CN114296809B (zh) * 2021-12-24 2023-05-05 深圳航天科技创新研究院 一种基于操作系统的对象模型构建方法及其系统调用接口

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103227788A (zh) * 2013-04-17 2013-07-31 广州市和声信息技术有限公司 实现网页应用程序与sip设备进行通信的方法和系统
CN105359487A (zh) * 2013-08-20 2016-02-24 华为技术有限公司 通过网络浏览器中的uri去引用监控nat行为
EP3007401A1 (en) * 2014-10-08 2016-04-13 Deutsche Telekom AG Integration of WebRTC based clients into IMS without SIP Registration
CN107453955A (zh) * 2017-09-14 2017-12-08 国网山东省电力公司信息通信公司 一种电话交换网互通性智能监测方法及系统
CN109981607A (zh) * 2019-03-07 2019-07-05 深圳市商汤科技有限公司 媒体流处理方法及装置、电子设备和存储介质
CN110572640A (zh) * 2019-09-30 2019-12-13 公安部第一研究所 一种基于gb35114标准的视频签名验签测评工具及方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10284755B2 (en) * 2016-03-16 2019-05-07 Auglle, Llc Nodal monitoring device and system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103227788A (zh) * 2013-04-17 2013-07-31 广州市和声信息技术有限公司 实现网页应用程序与sip设备进行通信的方法和系统
CN105359487A (zh) * 2013-08-20 2016-02-24 华为技术有限公司 通过网络浏览器中的uri去引用监控nat行为
EP3007401A1 (en) * 2014-10-08 2016-04-13 Deutsche Telekom AG Integration of WebRTC based clients into IMS without SIP Registration
CN107453955A (zh) * 2017-09-14 2017-12-08 国网山东省电力公司信息通信公司 一种电话交换网互通性智能监测方法及系统
CN109981607A (zh) * 2019-03-07 2019-07-05 深圳市商汤科技有限公司 媒体流处理方法及装置、电子设备和存储介质
CN110572640A (zh) * 2019-09-30 2019-12-13 公安部第一研究所 一种基于gb35114标准的视频签名验签测评工具及方法

Also Published As

Publication number Publication date
CN110830777A (zh) 2020-02-21

Similar Documents

Publication Publication Date Title
CN110830777B (zh) 基于WebRTC协议的跨浏览器预览GB/T28181标准监控视频的方法
EP3229476B1 (en) Method and apparatus for playing media stream on web browser
CN108259542B (zh) 资源的传输方法和装置
KR102110698B1 (ko) 단말기 상호 연결 방법, 장치 및 저장 매체
JP6199407B2 (ja) リアルタイム通信におけるブラウザ緊急呼び出し方法、システムおよび移動装置
US20160359927A1 (en) Method and device for establishing channel
CN104270662A (zh) 一种终端设备通过浏览器对智能电视进行控制的系统
US20140344437A1 (en) Method and system for implementing a transparent proxy of an ios system
KR20120030192A (ko) 위젯 환경 구축 방법 및 그 장치
CN111787399A (zh) 一种视频播放方法、装置和系统
CN106572382A (zh) 多屏互动方法及系统、可扩展通讯和表示协议系统
CN114900719B (zh) 一种基于html5播放监控设备实时视频的方法及系统
US9164816B2 (en) System and method for exchanging information in a multimedia terminal
CN107276990B (zh) 一种流媒体直播方法及装置
CN106933623B (zh) 免安装应用的运行方法、装置及系统
CN108235111B (zh) 信息共享方法及智能机顶盒
JP6088632B1 (ja) 音声映像通信システム、サーバ、仮想クライアント、音声映像通信方法、および音声映像通信プログラム
CN116489307B (zh) 网络监控系统、网络监控方法、装置及相关设备
CN116800765A (zh) P2p点对点数据节流加速实现方法、装置和存储介质
CN109100944B (zh) 一种基于ims的数据采集与处理系统
CN106791992A (zh) 信号源推送方法和系统
CN113746851B (zh) 一种支持实时解析grpc请求的代理系统和方法
CN107508701B (zh) 基于osgi框架的pon设备实现终端设备流量推送控制的方法
CN111885223A (zh) 一种分布式云手机及系统
CN111064916A (zh) 一种视频通话的方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant