WO2012068940A1 - 通过ip网络监控终端的方法及mcu - Google Patents

通过ip网络监控终端的方法及mcu Download PDF

Info

Publication number
WO2012068940A1
WO2012068940A1 PCT/CN2011/081289 CN2011081289W WO2012068940A1 WO 2012068940 A1 WO2012068940 A1 WO 2012068940A1 CN 2011081289 W CN2011081289 W CN 2011081289W WO 2012068940 A1 WO2012068940 A1 WO 2012068940A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
terminal
acquired
video
video data
Prior art date
Application number
PCT/CN2011/081289
Other languages
English (en)
French (fr)
Inventor
汪远
Original Assignee
中兴通讯股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中兴通讯股份有限公司 filed Critical 中兴通讯股份有限公司
Priority to EP11843770.6A priority Critical patent/EP2645710A4/en
Publication of WO2012068940A1 publication Critical patent/WO2012068940A1/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/152—Multipoint control units therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2381—Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2665—Gathering content from different sources, e.g. Internet and satellite
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/64322—IP
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/148—Interfacing a video terminal to a particular transmission medium, e.g. ISDN

Definitions

  • the present invention relates to the field of communications, and in particular to a method for monitoring a terminal over an IP network and a Multipoint Control Unit (MCU).
  • MCU Multipoint Control Unit
  • the conference television system realizes a virtual communication scene where participants can talk freely, and can switch the speaker and the video source at any time during the conference, and fully realize the interaction.
  • a technical means is needed to centrally monitor each terminal in the conference.
  • the first category monitoring with dedicated image station equipment; A general-purpose PC monitors.
  • the system architecture of these two types of monitoring methods is described below in conjunction with FIG. 1 and FIG. 2, respectively.
  • FIG. 1 is a system architecture diagram of a related art using a dedicated image station device monitoring mode.
  • a dedicated receiving device television set, set-top box, etc.
  • a data link form a video wall, and receive data of the terminal in the conference for monitoring. This method monitors the presentation effect well.
  • IP terminal, E1 terminal, 4 ⁇ 1 terminal IP terminal, E1 terminal, 4 ⁇ 1 terminal
  • FIG. 2 is a system architecture diagram of a general-purpose PC monitoring mode in the related art. As shown in FIG.
  • the general-purpose PC monitors the data of the receiving terminal through the widely existing IP network, and can simultaneously receive the plurality of terminals by installing the media receiving module (WEB monitoring plug-in) on the general-purpose PC. The data is played out. There is no way to monitor the rendering effect in this way.
  • the general-purpose PC needs to be configured, so the cost is low, and the monitoring location is flexible. As long as there is an IP network and a PC, the monitoring can be realized.
  • the use of a general-purpose PC for monitoring has the following problems: (1) Due to the limitation of the IP network, only the IP terminal can be monitored, and the E1 terminal and the 4xEl terminal cannot be monitored.
  • a general-purpose PC can only monitor an IP terminal, and cannot monitor an E1 terminal, a 4.1 terminal, and the like.
  • the present invention provides a method and an MCU for monitoring a terminal through an IP network, to solve at least the above problems.
  • a method of monitoring a terminal over an IP network is provided.
  • the method for monitoring a terminal by using an IP network according to the present invention is applied to a video conference system, including: acquiring data from each terminal, where the terminal includes at least one of the following: an E1 terminal, a 4 ⁇ 1 terminal; converting the acquired data into an IP address. Data in protocol format; The converted data is packaged and sent to the monitoring device via the IP network.
  • converting the acquired data into the IP protocol format data includes: debinding the acquired data; and transmitting the unbound data.
  • converting the acquired data into an IP protocol format data includes: demultiplexing the acquired data; and composing the demultiplexed data One frame of image and packed.
  • the method before the converted data is sent to the monitoring device, the method further includes: converting a code rate or a media format to the acquired data.
  • the acquired data is video data
  • the converted data rate or media format of the obtained data includes: forming the acquired data into one frame image, and performing decoding processing; encoding and processing the decoded data and packaging.
  • the monitoring device is a PC.
  • an MCU is provided.
  • the MCU according to the present invention is applied to a video conference system, and includes: an obtaining module, configured to acquire data from each terminal, where the terminal includes at least one of the following: an E1 terminal, a 4 ⁇ 1 terminal, and a protocol conversion module, configured to acquire The data acquired by the module is converted into data in an IP protocol format; the sending module is configured to package the converted data and send it to the monitoring device via the IP network.
  • the protocol conversion module includes: an unbinding unit configured to perform debinding processing on the acquired video data from the 4 ⁇ 1 terminal; the first demultiplexing unit is set as a de-binding unit The unbound video data is subjected to transport stream TS demultiplexing processing.
  • the protocol conversion module includes: a second demultiplexing unit configured to perform demultiplexing processing on the acquired video data from the E1 terminal; and a generating unit configured to be subjected to the second demultiplexing
  • the unit demultiplexed video data is composed of one frame of image and packed.
  • the multipoint control unit further includes: a media conversion module configured to convert a code rate or a media format to the acquired data.
  • the media conversion module includes: a decoding unit configured to perform decoding processing after the acquired video data is composed into one frame image; and an encoding unit configured to encode and process the video data output by the decoding unit .
  • the acquired data of the E1 terminal and/or the 4 ⁇ 1 terminal is converted into data of the IP protocol format, and the converted data is packaged and sent to the monitoring device via the IP network, which solves the problem that the general-purpose PC cannot monitor the E1 in the related art.
  • Terminals, 4 ⁇ 1 terminals and other issues in turn, can convert different types of video and audio data into a unified format and send them to the PC, realizing the need for the monitoring system to support multiple types of audio and video data.
  • FIG. 1 is a system architecture diagram of a dedicated image station device monitoring mode in the related art
  • FIG. 2 is a system architecture diagram of a related art using a general PC monitoring mode
  • FIG. 3 is a diagram of a system according to an embodiment of the present invention.
  • FIG. 4 is a system architecture diagram of a general PC monitoring mode according to a preferred embodiment of the present invention
  • FIG. 5 is a video data for a terminal from a 4.1 terminal according to a preferred embodiment of the present invention.
  • Figure 6 is a flow diagram of communication protocol conversion for video data from an E1 terminal in accordance with a preferred embodiment of the present invention.
  • Figure 7 is a flow diagram of audio media conversion in accordance with a preferred embodiment of the present invention;
  • 8 is a general flowchart of a method of monitoring a terminal over an IP network in accordance with a preferred embodiment of the present invention;
  • 9 is a structural block diagram of an MCU according to an embodiment of the present invention;
  • FIG. 10 is a structural block diagram of an MCU according to a preferred embodiment of the present invention.
  • Step S302 Acquire data from each terminal, where the terminal includes at least one of the following: an E1 terminal, a 4 ⁇ 1 terminal;
  • Step S304 Convert the acquired data into an IP protocol. Formatted data;
  • Step S306 The converted data is packaged and sent to the monitoring device via the IP network.
  • the above method is used to convert the acquired data of the E1 terminal and/or the 4 ⁇ 1 terminal into data of the IP protocol format, and the converted data is packaged and sent to the monitoring device via the IP network, which solves the problem that the general-purpose PC cannot monitor the related art in the related art.
  • Terminals, 4 ⁇ 1 terminals and other issues can convert different types of video and audio data into a unified format and send them to the PC, realizing the need for the monitoring system to support multiple types of audio and video data.
  • a monitoring conversion device may be added to the multipoint control unit for converting data acquired by the MCU into data in an IP protocol format. See Figure 4 for details.
  • the data acquired from the terminal includes: audio data and video data.
  • the conference television office system can convert the protocol format of the data when accessing,
  • the protocol format of the data can be converted by the newly added monitoring conversion device before transmission.
  • the scheme of the audio data conversion protocol format refer to the prior art, and details are not described herein again.
  • the foregoing step S304 may include the following processing:
  • Step S502 Receive video data from a 4-1 terminal
  • Step S504 Perform unbinding processing on the data
  • Step S506 Perform TS resolving on the bound data
  • Step S508 Generate a Real-time Transport Protocol (RTP) packet by using the TS demultiplexed data
  • Step S510 Send the generated RTP packet to the monitoring device through the IP network (for example, Universal PC).
  • the foregoing step S304 may include the following processing:
  • FIG. 6 is a flow diagram of a communication protocol conversion for video data from an E1 terminal in accordance with a preferred embodiment of the present invention. As shown in Figure 6, the process mainly includes the following processing:
  • the generated RTP packet is sent to the monitoring device (for example, a general-purpose PC) through the IP network.
  • the following processing may be further included: converting the code rate or the media format of the acquired data (ie, performing media conversion on the acquired data).
  • the data acquired by the MCU may be high-definition data in order to reduce the performance consumption of the monitoring device (for example, a PC).
  • the data can be converted (ie, reduced in code rate) before the converted data is transmitted.
  • the obtained data is video data, and the converted data rate of the obtained data may include the following processes: (1) forming a frame image of the acquired data, and performing decoding processing;
  • Step S702 Receive audio data from an IP terminal, an E1 terminal, and/or a 4 ⁇ 1 terminal
  • Step S704 Determine, according to actual conditions, whether the audio data needs to be performed.
  • step S706 perform decoding processing on the audio data
  • step S708 perform sample rate conversion on the decoded data; in the specific implementation process, in order to reduce the monitoring device
  • the performance consumption during decoding can reduce the sampling rate for the decoded data.
  • Step S710 After converting the sampling rate to the decoded data, performing an encoding process
  • Step S712 Generate an audio data packet by using the encoded data.
  • 8 is a general flow diagram of monitoring a terminal image over an IP network in accordance with a preferred embodiment of the present invention.
  • the foregoing terminal includes an IP terminal, an E1 terminal, and a 4.1 terminal. As shown in FIG.
  • Step S802 Acquire video data from each terminal, and determine whether the data includes: IP terminal data, 4 ⁇ 1 terminal data, and E1 terminal data; IP terminal data, step S808 is performed, if there is 4> ⁇ E1 terminal data, step S804 is performed, if there is E1 terminal data, step S806 is performed; step S804: protocol conversion processing is performed on the terminal data of 4 ⁇ 1, which can be specifically referred to FIG. Step S806: Perform protocol conversion processing on the E1 terminal data. For details, refer to FIG. 6 , and details are not described herein. Step S808: Determine whether media conversion is performed.
  • FIG. 9 is a structural block diagram of an MCU according to an embodiment of the present invention. As shown in FIG. 9, the MCU includes: an obtaining module 90, a protocol converting module 92, and a sending module 94.
  • the obtaining module 90 is configured to acquire data from each terminal, where the terminal includes at least one of the following: an E1 terminal, a 4-1 terminal, and a protocol conversion module 92, configured to convert data acquired by the acquiring module into data in an IP protocol format;
  • the sending module 94 is configured to package the converted data and send it to the monitoring device via the IP network.
  • the protocol conversion module 92 may further include: an unbinding unit 920 configured to perform debinding processing on the acquired video data from the terminal 112; the first demultiplexing unit 922, setting Demultiplexing the unbound video data.
  • the protocol conversion module 92 may further include: an unbinding unit 920 configured to perform debinding processing on the acquired video data from the terminal 112; the first demultiplexing unit 922, setting Demultiplexing the unbound video data.
  • the protocol conversion module 92 may further include: the protocol conversion module includes: a second demultiplexing unit 924, configured to perform demultiplexing processing on the acquired video data from the E1 terminal; 926, configured to compose video data demultiplexed by the second demultiplexing unit into one frame image and package.
  • the multipoint control unit may further include: a media conversion module 96 configured to convert a code rate or a media format to the acquired data.
  • the media conversion module 96 includes: a decoding unit 960 configured to perform a decoding process after the acquired video data is composed into one frame image; and an encoding unit 964 configured to perform video data output by the decoding unit. Encoding and packaging.
  • the method for monitoring a terminal through an IP network using a PC mainly includes the following steps: Step 1: The MCU holds a video conference; Step 2: The E1 terminal accesses the conference television central office device (ie, the above MCU) through the E1 access device, and the 4 ⁇ 1 terminal passes the El The access device accesses the conference television central office device (ie, the above MCU), and the IP terminal accesses the conference television central office device (ie, the above MCU) through the IP access device, and monitors the same.
  • Step 3 The monitoring and converting device in the conference television central office equipment acquires the terminal data from the E1 access device and the IP access device, converts the H.320 ⁇ 1, 4 ⁇ 1 communication protocol into the H.323 IP protocol, and determines whether according to the demand. Perform media conversion.
  • Step 4 The monitoring conversion device sends the converted terminal data to the monitoring PC.
  • Step 5 The universal monitoring PC calls the media receiving module to decode the received data.
  • the video, audio data format and rate of the terminal can be converted according to requirements, and the converted data is sent to the media receiving module (installed on the PC) to adapt to the requirements of the media receiving module.
  • the higher quality video data can be converted into lower quality video data and sent to the media receiving module on the PC without affecting the monitoring effect, thereby reducing the performance consumption of the PC, so as to monitor more terminals.
  • different types of video and audio data can be converted into a unified type and sent to the media receiving module on the PC to support multiple types of audio and video data.
  • modules or steps of the present invention can be implemented by a general-purpose computing device, which can be concentrated on a single computing device or distributed over a network composed of multiple computing devices. Alternatively, they may be implemented by program code executable by the computing device, such that they may be stored in the storage device by the computing device and, in some cases, may be different from the order herein.
  • the steps shown or described are performed, or they are separately fabricated into individual integrated circuit modules, or a plurality of modules or steps are fabricated as a single integrated circuit module.
  • the invention is not limited to any specific combination of hardware and software.
  • the above is only the preferred embodiment of the present invention, and is not intended to limit the present invention, and various modifications and changes can be made to the present invention. Any modifications, equivalent substitutions, improvements, etc. made within the spirit and scope of the present invention are intended to be included within the scope of the present invention.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Astronomy & Astrophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明公开了一种通过IP网络监控终端的方法及MCU，应用于视频会议系统，上述方法包括：获取来自于各个终端的数据，其中，终端包括以下至少之一：E1终端、4×E1终端；将获取的数据转换为IP协议格式的数据；将转换的数据打包并经由IP网络发送至监控装置。根据本发明提供的技术方案，可以把不同类型的视频和音频数据转换成统一的格式发送给PC机，实现了监控系统支持多种类型的音视频数据的需求。

Description

通过 IP网络监控终端的方法及 MCU 技术领域 本发明涉及通信领域， 具体而言， 涉及一种通过 IP网络监控终端的方法及多点控 制单元 （Multipoint Control Unit, 简称为 MCU)。 背景技术 会议电视系统实现了与会人员虚拟的相聚一堂、 畅所欲言的交流场景， 在会议中 可以随时切换发言人和视频源， 充分实现了互动。 为了对会议进行集中管理和监控， 需要一种技术手段能够集中监控会议中的每一 个终端， 目前实现集中监控有两类方式： 第一类： 采用专用图像台设备进行监控； 第 二类： 采用通用 PC机进行监控。 以下结合图 1和图 2分别描述这两类监控方式的系 统架构。 图 1为相关技术中采用专用图像台设备监控方式的系统架构图。 如图 1所示， 在 该系统中， 专用接收设备 （电视机、 机顶盒等） 和数据链路组成一个电视墙， 接收会 议中终端的数据进行实现监控。 该方式监控呈现效果好， 但是， 由于采用专用接收设 备和数据链路可以监控不同类型的终端 （IP终端、 E1终端、 4χΕ1终端） 和不同类型 的音视频数据， 因此费用较高。 图 2为相关技术中采用通用 PC机监控方式的系统架构图。 如图 2所示， 在该系 统中， 通用 PC机通过广泛存在的 IP网络， 接收终端的数据进行监控， 通过在通用 PC 机上安装媒体接收模块 （WEB监控插件）， 可以同时接收多个终端的数据播放呈现出 来。 该方式监控呈现效果没有方式 1好， 但是， 只需要配置一台通用 PC机， 因此消 耗费用低， 并且监控场所灵活， 只要有 IP网络和 PC机的地方， 就可以实现监控。 然而， 采用通用 PC机进行监控， 存在以下几个问题： （1 ) 由于受限于 IP网络， 所以只能监控 IP终端， 不能监控 E1终端、 4xEl终端。 （2) 由于解码终端的视频数据 需要消耗较大的性能， 所以监控终端的数量受到 PC机性能以及终端视频质量的限制。 (3 ) 终端的视频、 音频类型繁多， PC机上的媒体接收模块难以全部支持。 发明内容 针对相关技术中通用 PC机仅能监控 IP终端， 不能监控 E1终端、 4χΕ1终端等问 题， 本发明提供了一种通过 IP网络监控终端的方法及 MCU， 以解决上述问题至少之
根据本发明的一个方面， 提供了一种通过 IP网络监控终端的方法。 根据本发明的通过 IP网络监控终端的方法， 应用于视频会议系统， 包括： 获取来 自于各个终端的数据， 其中， 终端包括以下至少之一： E1 终端、 4χΕ1 终端； 将获取 的数据转换为 IP协议格式的数据； 将转换的数据打包并经由 IP网络发送至监控装置。 在上述方法中， 在终端为 4χΕ1 终端且获取的数据为视频数据时， 将获取的数据 转换为 IP协议格式的数据包括： 对获取的数据进行解绑定处理； 对解绑定的数据进行 传输码流 （TS) 解复用处理。 在上述方法中， 在终端为 E1 终端且获取的数据为视频数据时， 将获取的数据转 换为 IP协议格式的数据包括： 对获取的数据进行解复用处理； 将经过解复用的数据组 成一帧图像并打包。 在上述方法中， 在将转换的数据发送至监控装置之前， 还包括： 对获取的数据转 换码率或媒体格式。 在上述方法中， 获取的数据为视频数据，对获取的数据转换码率或媒体格式包括: 将获取的数据组成一帧图像， 并进行解码处理； 对解码后的数据进行编码处理并打包。 在上述方法中， 监控装置为 PC机。 根据本发明的另一方面， 提供了一种 MCU。 根据本发明的 MCU， 应用于视频会议系统， 包括： 获取模块， 设置为获取来自于 各个终端的数据， 其中， 终端包括以下至少之一： E1 终端、 4χΕ1 终端； 协议转换模 块， 设置为将获取模块获取的数据转换为 IP协议格式的数据； 发送模块， 设置为将转 换的数据打包并经由 IP网络发送至监控装置。 在上述多点控制单元中， 协议转换模块包括： 解绑定单元， 设置为对获取的来自 于 4χΕ1 终端的视频数据进行解绑定处理； 第一解复用单元， 设置为对解绑定单元解 绑定的视频数据进行传输码流 TS解复用处理。 在上述多点控制单元中， 协议转换模块包括： 第二解复用单元， 设置为对获取的 来自于 E1 终端的视频数据进行解复用处理； 生成单元， 设置为将经过第二解复用单 元解复用的视频数据组成一帧图像并打包。 在上述多点控制单元中， 多点控制单元还包括： 媒体转换模块， 设置为对获取的 数据转换码率或媒体格式。 在上述多点控制单元中， 媒体转换模块包括： 解码单元， 设置为对获取的视频数 据组成一帧图像后， 进行解码处理； 编码单元， 设置为对解码单元输出的视频数据进 行编码处理并打包。 通过本发明， 将获取到的 E1终端和 /或 4χΕ1终端的数据转换为 IP协议格式的数 据， 将转换的数据打包并经由 IP网络发送至监控装置， 解决了相关技术中通用 PC机 不能监控 E1终端、 4χΕ1终端等问题， 进而还可以把不同类型的视频和音频数据转换 成统一的格式发送给 PC机， 实现了监控系统支持多种类型的音视频数据的需求。 附图说明 此处所说明的附图用来提供对本发明的进一步理解， 构成本申请的一部分， 本发 明的示意性实施例及其说明用于解释本发明， 并不构成对本发明的不当限定。 在附图 中： 图 1为相关技术中采用专用图像台设备监控方式的系统架构图； 图 2为相关技术中采用通用 PC机监控方式的系统架构图； 图 3为根据本发明实施例的通过 IP网络监控终端的方法的流程图； 图 4为根据本发明优选实施例的采用通用 PC机监控方式的系统架构图； 图 5为根据本发明优选实施例的对于来自于 4χΕ1终端的视频数据的通信协议转 换的流程图； 图 6为根据本发明优选实施例的对于来自于 E1终端的视频数据的通信协议转换 的流程图； 图 7为根据本发明优选实施例的音频媒体转换的流程图； 图 8为根据本发明优选实施例的通过 IP网络监控终端的方法的总流程图； 图 9为根据本发明实施例的 MCU的结构框图; 图 10为根据本发明优选实施例的 MCU的结构框图。 具体实施方式 下文中将参考附图并结合实施例来详细说明本发明。 需要说明的是， 在不冲突的 情况下， 本申请中的实施例及实施例中的特征可以相互组合。 图 3为根据本发明实施例的通过 IP网络监控终端的方法的流程图。 如图 3所示， 该方法主要包括以下处理： 步骤 S302: 获取来自于各个终端的数据， 其中， 终端包括以下至少之一： E1 终 端、 4χΕ1终端； 步骤 S304: 将获取的数据转换为 IP协议格式的数据； 步骤 S306: 将转换的数据打包并经由 IP网络发送至监控装置。 采用上述方法， 将获取到的 E1终端和 /或 4χΕ1终端的数据转换为 IP协议格式的 数据， 将转换的数据打包并经由 IP网络发送至监控装置， 解决了相关技术中通用 PC 机不能监控 El终端、 4χΕ1终端等问题， 进而可以把不同类型的视频和音频数据转换 成统一的格式发给 PC机， 实现了监控系统支持多种类型的音视频数据的需求。 在具体实施过程中，可以在多点控制单元中增加一个监控转换设备，用于将 MCU 获取的数据转换为 IP协议格式的数据。 具体可以参见图 4。 进一步地， 从终端获取的数据包括： 音频数据和视频数据， 对于来自于 IP、 El 和 4χΕ1 终端的音频数据， 会议电视局端系统在接入时可以对该数据的协议格式进行 了转换， 也可以在发送之前， 通过上述新增加的监控转换设备对该数据的协议格式进 行转换。 对音频数据转换协议格式的方案可以参见现有技术， 此处不再赘述。 优选地， 在终端为 4χΕ1终端， 且获取的数据为视频数据时， 上述步骤 S304可以 包括以下处理：
( 1 ) 对获取的数据进行解绑定处理；
(2) 对解绑定的数据进行 TS解复用处理。 以下结合图 5描述上述优选实施方式。 图 5为根据本发明优选实施例的对于来自于 4χΕ1终端的视频数据的通信协议转 换的流程图。 如图 5所示， 该流程主要包括以下处理： 步骤 S502: 接收来自于 4χΕ1终端的视频数据； 步骤 S504: 对上述数据进行解绑定处理； 步骤 S506: 对接绑定后的数据进行 TS解复用处理； 步骤 S508: 将经过 TS解复用处理的数据生成实时传送协议 （Real-time Transport Protocol, 简称为 RTP) 包； 步骤 S510: 将生成的 RTP包通过 IP网络发送给监控装置 （例如， 通用 PC机）。 优选地， 在终端为 E1终端， 且获取的数据为视频数据时， 上述步骤 S304可以包 括以下处理：
( 1 ) 对获取的数据进行解复用处理；
(2) 将经过解复用的数据组成一帧图像并打包。 以下结合图 6描述上述优选实施方式。 图 6为根据本发明优选实施例的对于来自于 E1终端的视频数据的通信协议转换 的流程图。 如图 6所示， 该流程主要包括以下处理： 牛鹏
少 S602: 接收来自于 E1终端的视频数据； 牛鹏
少 S604: 对上述数据进行 H221解复用处理； 牛鹏
少 S606: 对将经过解复用的数据组成一帧图像； 牛鹏
少 S608: 对上述一帧图像进行打包处理； 牛鹏
少 S610: 将打包后的数据生成 RTP包； 牛鹏
少 S612: 将生成的 RTP包通过 IP网络发送给监控装置 （例如， 通用 PC机）。 优选地， 在将转换的数据发送至监控装置之前， 还可以包括以下处理： 对获取的 数据转换码率或媒体格式 （即对获取的数据进行媒体转换）。 在具体实施过程中， MCU获取的数据可能是高清数据，为了降低监控装置（例如， PC机） 的性能消耗。 在将转换后的数据发送之前， 可以对数据进行媒体转换（即降低 码率）。 其中， 获取的数据为视频数据， 上述对获取的数据转换码率可以包括以下处理： ( 1 ) 对获取的数据组成一帧图像， 并进行解码处理；
(2) 对解码后的数据进行编码处理并打包。 在具体实施过程中， 如果上述获取的数据为视频数据是音频数据， 还需要在解码 后进行采样率转换， 之后再进行编码处理， 详细处理过程可以参见现有技术， 此处不 再赘述。 通过上述处理， 把较高质量的视频数据转换成较低质量的视频数据后发给 PC机， 可以降低 PC机的性能消耗， 以达到监控更多终端的目的。 其中， 媒体转换分为音频数据转换和视频数据转换。 对于音频数据转换而言， 可 以把 G711A、 G711U、 G722、 G723、 G728、 G729、 ZTE_BA、 AAC等格式转换成统 一的 G711A格式。 在具体实施过程中， 对于来自于 ΙΡ、 Ε1、 4χΕ1 终端的音频数据， 音频转换过程 基本相同。 以下结合图 7进行描述。 图 7为根据本发明优选实施例的音频媒体转换方法的流程图。 如图 7所示， 该音 频媒体转换方法包括以下处理： 步骤 S702: 接收来自于 IP终端、 E1终端、 和 /或 4χΕ1终端的音频数据； 步骤 S704: 根据实际情况判断是否需要对上述音频数据进行媒体转换； 如果是， 执行步骤 S706, 否则， 执行步骤 S712; 步骤 S706: 对音频数据进行解码处理； 步骤 S708: 对解码后的数据进行采样率转换； 在具体实施过程中， 为了降低监控装置的解码时的性能消耗， 可以对解码后的数 据降低采样率。 步骤 S710: 对解码后的数据转换采样率之后， 进行编码处理； 步骤 S712: 将编码后的数据生成音频数据包。 图 8为根据本发明优选实施例的通过 IP网络监控终端图像的总流程图。其中， 上 述终端包括 IP终端、 E1终端和 4χΕ1终端。 如图 8所示， 通过 IP网络监控终端的方 法主要包括以下处理： 步骤 S802:获取来自于各个终端的视频数据，判断该数据是否包括： IP终端数据， 4χΕ1终端数据和 E1终端数据； 如果有 IP终端数据， 执行步骤 S808, 如果有 4><E1终 端数据， 执行步骤 S804, 如果有 E1终端数据， 执行步骤 S806; 步骤 S804: 对 4χΕ1终端数据进行协议转换处理， 具体可以参见图 5， 此处不再 赘述； 步骤 S806: 对 E1终端数据进行协议转换处理， 具体可以参见图 6， 此处不再赘 述； 步骤 S808: 判断是否进行媒体转换； 如果否， 执行步骤 S818， 如果是， 执行步 骤 S810; 步骤 S810: 对于媒体转换后的视频数据， 需要组成一帧图像； 步骤 S812: 进行解码处理； 步骤 S814: 进行编码处理； 需要注意的是， 如果是音频数据， 在解码后编码前， 还需要对音频数据的采样率 进行转换； 步骤 S816: 将一帧图像打包； 步骤 S818: 生成视频包。 图 9为根据本发明实施例的 MCU的结构框图。如图 9所示， 该 MCU包括： 获取 模块 90、 协议转换模块 92及发送模块 94。 获取模块 90，设置为获取来自于各个终端的数据，其中，终端包括以下至少之一: E1终端、 4χΕ1终端； 协议转换模块 92， 设置为将获取模块获取的数据转换为 IP协议格式的数据； 发送模块 94， 设置为将转换的数据打包并经由 IP网络发送至监控装置。 优选地， 如图 10所示， 协议转换模块 92可以进一步包括： 解绑定单元 920， 设 置为对获取的来自于 4χΕ1终端的视频数据进行解绑定处理； 第一解复用单元 922， 设 置为对解绑定的视频数据进行解复用处理。 优选地， 如图 10所示， 协议转换模块 92可以进一步包括： 协议转换模块包括： 第二解复用单元 924， 设置为对获取的来自于 E1终端的视频数据进行解复用处理； 生 成单元 926， 设置为将经过第二解复用单元解复用的视频数据组成一帧图像并打包。 优选地， 如图 10所示， 多点控制单元还可以包括： 媒体转换模块 96， 设置为对 获取的数据转换码率或媒体格式。 优选地， 如图 10所示， 媒体转换模块 96包括： 解码单元 960， 设置为对获取的 视频数据组成一帧图像后， 进行解码处理； 编码单元 964， 设置为对解码单元输出的 视频数据进行编码处理并打包。 上述协议转换模块 92和媒体转换模块 96均可以设置在如图 4所示的 MCU中新 增加的监控转换设备中。 以下结合图 4以一个实例描述上述优选实施方式。 采用 PC机通过 IP网络监控终端的方法主要包括以下步骤： 步骤 1 : MCU召开视频会议； 步骤 2: E1终端通过 E1接入设备接入会议电视局端设备 （即上述 MCU)、 4χΕ1 终端通过 El接入设备接入会议电视局端设备 （即上述 MCU)、 IP终端通过 IP接入设 备接入会议电视局端设备 （即上述 MCU)， 并对其进行监控。 步骤 3 : 会议电视局端设备中监控转换设备从 E1接入设备、 IP接入设备获取终端 数据， 把 H.320的 Ε1、 4χΕ1通信协议转换成 H.323的 IP协议， 并根据需求决定是否 进行媒体转换。 步骤 4: 监控转换设备把转换后的终端数据发给监控 PC机。 步骤 5: 通用监控 PC机调用媒体接收模块， 把接收到的数据解码呈现出来。 综上所述， 借助本发明提供的上述实施例， 实现了通用 PC机通过 IP网络监控 IP 终端、 E1终端、 和 4χΕ1终端的目的。 并且可以根据需要， 转换终端的视频、 音频数 据格式和速率， 把转换后的数据发给媒体接收模块 （安装在 PC机上）， 以适应媒体接 收模块的需求。 这样可以在不影响监控效果的前提下， 把较高质量的视频数据转换成 较低质量的视频数据后发给 PC机上的媒体接收模块， 降低 PC机的性能消耗， 以达到 监控更多终端的目的。 同时也可以把不同类型的视频、 音频数据转换成统一的类型发 给 PC机上的媒体接收模块， 以实现支持多种类型的音视频数据。 显然， 本领域的技术人员应该明白， 上述的本发明的各模块或各步骤可以用通用 的计算装置来实现， 它们可以集中在单个的计算装置上， 或者分布在多个计算装置所 组成的网络上， 可选地， 它们可以用计算装置可执行的程序代码来实现， 从而， 可以 将它们存储在存储装置中由计算装置来执行， 并且在某些情况下， 可以以不同于此处 的顺序执行所示出或描述的步骤， 或者将它们分别制作成各个集成电路模块， 或者将 它们中的多个模块或步骤制作成单个集成电路模块来实现。 这样， 本发明不限制于任 何特定的硬件和软件结合。 以上所述仅为本发明的优选实施例而已， 并不用于限制本发明， 对于本领域的技 术人员来说， 本发明可以有各种更改和变化。 凡在本发明的精神和原则之内， 所作的 任何修改、 等同替换、 改进等， 均应包含在本发明的保护范围之内。

Claims

权 利 要 求 书
1. 一种通过 IP网络监控终端的方法， 应用于视频会议系统， 包括：
获取来自于各个终端的数据，其中，所述终端包括以下至少之一： E1终端、 4χΕ1终端； 将所述获取的数据转换为 IP协议格式的数据；
将所述转换的数据打包并经由 IP网络发送至监控装置。
2. 根据权利要求 1所述的方法， 其中， 在所述终端为 4χΕ1终端且所述获取的数 据为视频数据时， 所述将所述获取的数据转换为 IP协议格式的数据包括： 对所述获取的数据进行解绑定处理；
对所述解绑定的数据进行传输码流 TS解复用处理。
3. 根据权利要求 1所述的方法， 其中， 在所述终端为 E1终端且所述获取的数据 为视频数据时， 所述将所述获取的数据转换为 IP协议格式的数据包括：
对所述获取的数据进行解复用处理；
将所述经过解复用的数据组成一帧图像并打包。
4. 根据权利要求 1所述的方法，其中，在将所述转换的数据发送至监控装置之前， 还包括：
对所述获取的数据转换码率或媒体格式。
5. 根据权利要求 4所述的方法， 其中， 所述获取的数据为视频数据， 所述对所述 获取的数据转换码率或媒体格式包括：
将所述获取的数据组成一帧图像， 并进行解码处理；
对解码后的数据进行编码处理并打包。
6. 根据权利要求 1至 5中任一项所述的方法， 其中， 所述监控装置为 PC机。
7. 一种多点控制单元 MCU， 应用于视频会议系统， 包括：
获取模块， 设置为获取来自于各个终端的数据， 其中， 所述终端包括以下 至少之一： E1终端、 4χΕ1终端； 协议转换模块，设置为将所述获取模块获取的数据转换为 IP协议格式的数 据；
发送模块， 设置为将所述转换的数据打包并经由 IP网络发送至监控装置。
8. 根据权利要求 7所述的多点控制单元， 其中， 所述协议转换模块包括：
解绑定单元， 设置为对获取的来自于所述 4χΕ1 终端的视频数据进行解绑 定处理；
第一解复用单元， 设置为对所述解绑定单元解绑定的视频数据进行传输码 流 TS解复用处理。
9. 根据权利要求 7所述的多点控制单元， 其中， 所述协议转换模块包括：
第二解复用单元， 设置为对获取的来自于所述 E1 终端的视频数据进行解 复用处理；
生成单元， 设置为将经过所述第二解复用单元解复用的视频数据组成一帧 图像并打包。
10. 根据权利要求 7所述的多点控制单元， 其中， 所述多点控制单元还包括： 媒体转换模块， 设置为对所述获取的数据转换码率或媒体格式。
11. 根据权利要求 10所述的多点控制单元， 其中， 所述媒体转换模块包括：
解码单元，设置为对所述获取的视频数据组成一帧图像后，进行解码处理; 编码单元， 设置为对所述解码单元输出的视频数据进行编码处理并打包。
PCT/CN2011/081289 2010-11-24 2011-10-25 通过ip网络监控终端的方法及mcu WO2012068940A1 (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
EP11843770.6A EP2645710A4 (en) 2010-11-24 2011-10-25 METHOD FOR MONITORING A DEVICE THROUGH AN IP NETWORK AND MCU

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201010560070.4 2010-11-24
CN2010105600704A CN102006452A (zh) 2010-11-24 2010-11-24 通过ip网络监控终端的方法及mcu

Publications (1)

Publication Number Publication Date
WO2012068940A1 true WO2012068940A1 (zh) 2012-05-31

Family

ID=43813472

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2011/081289 WO2012068940A1 (zh) 2010-11-24 2011-10-25 通过ip网络监控终端的方法及mcu

Country Status (3)

Country Link
EP (1) EP2645710A4 (zh)
CN (1) CN102006452A (zh)
WO (1) WO2012068940A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102006452A (zh) * 2010-11-24 2011-04-06 中兴通讯股份有限公司 通过ip网络监控终端的方法及mcu
CN106162040A (zh) * 2015-03-30 2016-11-23 北京视联动力国际信息技术有限公司 视频会议多方接入的方法及设备
CN106612268A (zh) * 2015-10-27 2017-05-03 三亚中兴软件有限责任公司 系统间融合方法及装置
CN108206922A (zh) * 2016-12-16 2018-06-26 展讯通信（上海）有限公司 多方视频通话的控制方法、装置及多通终端
CN108040218A (zh) * 2017-12-20 2018-05-15 苏州科达科技股份有限公司 一种视频会议的通讯方法及通讯设备
CN110636244B (zh) * 2018-06-25 2022-03-29 中兴通讯股份有限公司 一种视频会议服务器、系统、控制方法及存储介质
CN109495709B (zh) * 2018-10-16 2020-05-26 视联动力信息技术股份有限公司 一种视联网管理系统和方法
CN117596442A (zh) * 2024-01-16 2024-02-23 深圳星网信通科技股份有限公司 融合通信方法及平台

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1487716A (zh) * 2002-10-01 2004-04-07 华为技术有限公司 数据与话音综合通信系统
CN1832569A (zh) * 2005-03-08 2006-09-13 华为技术有限公司 一种会议电视系统及会议电视实现方法
US20080002738A1 (en) * 2006-06-30 2008-01-03 Juergen Beck Method and apparatus for circuit emulation services over cell and packet networks
CN101212654A (zh) * 2007-12-24 2008-07-02 深圳市同洲电子股份有限公司 一种网络视频监控系统及其数据获取方法
CN102006452A (zh) * 2010-11-24 2011-04-06 中兴通讯股份有限公司 通过ip网络监控终端的方法及mcu

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6606112B1 (en) * 2000-03-16 2003-08-12 Tandberg Telecom As Composite-video generation from different-rate constituents
WO2004043074A1 (en) * 2002-11-04 2004-05-21 Tandberg Telecom As Inter-network and inter-protocol video conference privacy method, apparatus and computer program product
US7474326B2 (en) * 2002-11-04 2009-01-06 Tandberg Telecom As Inter-network and inter-protocol video conference privacy method, apparatus, and computer program product
CN1260973C (zh) * 2003-07-28 2006-06-21 中兴通讯股份有限公司 同时支持多种协议的会议电视终端及其方法
CN1798139A (zh) * 2004-12-28 2006-07-05 上海贝尔阿尔卡特股份有限公司 为不同网络终端提供多媒体服务的设备和方法
CN101193263B (zh) * 2006-11-30 2010-06-16 中兴通讯股份有限公司 E1专线会议电视系统中的主叫和被叫实现的方法
CN100559866C (zh) * 2007-07-23 2009-11-11 杭州华三通信技术有限公司 一种视频终端的切换方法及多点控制单元
CN101742219A (zh) * 2008-11-17 2010-06-16 中兴通讯股份有限公司 一种会议电视图像台设备及其实现系统、方法
CN101873240B (zh) * 2010-05-10 2013-01-02 煤炭科学研究总院重庆研究院 多RF矿用多功能无线Mesh网关装置及其控制系统
CN101867771B (zh) * 2010-06-04 2013-08-07 中兴通讯股份有限公司 会议级联方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1487716A (zh) * 2002-10-01 2004-04-07 华为技术有限公司 数据与话音综合通信系统
CN1832569A (zh) * 2005-03-08 2006-09-13 华为技术有限公司 一种会议电视系统及会议电视实现方法
US20080002738A1 (en) * 2006-06-30 2008-01-03 Juergen Beck Method and apparatus for circuit emulation services over cell and packet networks
CN101212654A (zh) * 2007-12-24 2008-07-02 深圳市同洲电子股份有限公司 一种网络视频监控系统及其数据获取方法
CN102006452A (zh) * 2010-11-24 2011-04-06 中兴通讯股份有限公司 通过ip网络监控终端的方法及mcu

Also Published As

Publication number Publication date
EP2645710A1 (en) 2013-10-02
CN102006452A (zh) 2011-04-06
EP2645710A4 (en) 2016-11-16

Similar Documents

Publication Publication Date Title
WO2012068940A1 (zh) 通过ip网络监控终端的方法及mcu
JP6219310B2 (ja) ワイヤレスディスプレイのためのユーザ入力バックチャネルを介した双方向トンネリング
US8988486B2 (en) Adaptive video communication channel
WO2015053530A1 (en) Method and apparatus for content delivery
WO2012041117A1 (zh) 一种对视频会议终端集中监控的方法和系统及相关装置
WO2014161402A2 (zh) 分布式视频会议实现方法、系统、终端、音视频一体化设备
CN105610824B (zh) 一种基于屏幕镜像及rtsp流媒体框架的屏幕共享方法
KR20070103051A (ko) 멀티 포인트 화상회의 시스템 및 해당 미디어 프로세싱방법
WO2015074445A1 (zh) 多路无线显示方法及装置
WO2010083737A1 (zh) 一种语音信号的处理方法、语音信号的发送方法及装置
JP2018117259A (ja) オーディオビデオ同期取込によって一対多オーディオビデオストリーミングを行う方法
CN107659835A (zh) 屏幕共享方法、设备及系统
KR101821124B1 (ko) 웹브라우저 상에서 미디어 스트림을 재생하는 방법 및 장치
CN108574816B (zh) 一种视联网终端以及基于视联网终端的通信方法、装置
CN110830750A (zh) 一种基于视联网的数据传输方法和装置
CN111614927A (zh) 视频会话建立法、装置、电子设备及存储介质
CN110769179B (zh) 一种音视频数据流的处理方法和系统
CN111131743A (zh) 基于浏览器的视频通话方法、装置、电子设备及存储介质
WO2012062153A1 (zh) 在级联会议中实现多画面的方法、系统及mcu
CN110519331B (zh) 一种视联网资源处理方法及装置
JP6166692B2 (ja) Ｉｐベースの映像伝送装置および放送システム
US11265357B2 (en) AV1 codec for real-time video communication
CN110719435B (zh) 一种进行终端会议的方法和系统
CN110087020B (zh) 一种iOS设备进行视联网会议的实现方法及系统
WO2017103963A1 (ja) Ｉｐベースの映像伝送装置および放送システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11843770

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2011843770

Country of ref document: EP