CN112911336A - 用于云视频平台的视频解码压缩网络动态调整系统及方法 - Google Patents
用于云视频平台的视频解码压缩网络动态调整系统及方法 Download PDFInfo
- Publication number
- CN112911336A CN112911336A CN202110057703.8A CN202110057703A CN112911336A CN 112911336 A CN112911336 A CN 112911336A CN 202110057703 A CN202110057703 A CN 202110057703A CN 112911336 A CN112911336 A CN 112911336A
- Authority
- CN
- China
- Prior art keywords
- video
- video platform
- audio
- encoder
- decoder
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000006835 compression Effects 0.000 title claims abstract description 38
- 238000007906 compression Methods 0.000 title claims abstract description 38
- 238000000034 method Methods 0.000 title claims abstract description 20
- 230000002159 abnormal effect Effects 0.000 claims description 5
- 238000012544 monitoring process Methods 0.000 claims description 5
- 230000005540 biological transmission Effects 0.000 description 11
- 238000011161 development Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
- H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明提供一种用于云视频平台的视频解码压缩网络动态调整系统及方法，包括编码器、压缩库、解码器以及解码终端，所述编码器、压缩库、解码器以及解码终端均处于同一音视频平台域，本发明在解码器解码过程中通过对解码后的视频数据从YUV数据压缩成JPEG图片数据的处理，有效的解决视频解码数据过大导致WebSocket协议吞吐量达不到传输需求的问题。
Description
技术领域
本发明涉及视频编解码技术领域，尤其涉及一种用于云视频平台的视频解码压缩网络动态调整系统及方法。
背景技术
传统视频监控、视频会议、视频指挥、视频调度等音视频平台都是基于C/S架构(客户端服务器)来开发和使用，数据传输使用udp协议，传输速度很快然而性能较低维护成本高，随着Internet技术的兴起，B/S架构(浏览器和服务器)已相当成熟，在这种架构下，用户工作界面是通过浏览器来实现，然而在音视频开发领域，由于视频解码后的数据量非常大，在本地将解码数据传输到Web端时很容易超过WebSocket传输协议的瓶颈，从而影响项目的正常开发和使用。
本发明的目的是通过将解码后的视频YUV数据压缩成JPEG图片数据，来解决视频解码数据的传输使用网络高的问题。在B/S架构的音视频平台开展视频呼叫、视频会议、视频指挥等任意视频业务过程中，由于WebSocket协议传输吞吐量限制，而解码后的视频原始数据量非常巨大，每帧可达到数MB的大小，且视频不卡屏的最小帧数为每秒25帧，若直接对原始数据进行传输，传输很容易就超过WebSocket协议性能的瓶颈，从而使视频播放卡顿达不到业务需求。
发明内容
有鉴于此，本发明目的是提供一种用于云视频平台的视频解码压缩网络动态调整系统及方法。
一种用于云视频平台的视频解码压缩网络动态调整系统，包括编码器、压缩库、解码器以及解码终端，所述编码器、压缩库、解码器以及解码终端均处于同一音视频平台域。
一种用于云视频平台的视频解码压缩网络动态调整方法，应用于所述的一种用于云视频平台的视频解码压缩网络动态调整系统，包括以下步骤：
步骤1：进行系统部署，将解码器、编码器以及解码终端部署在同一个音视频平台域，在解码器传输解码数据前增加压缩库对解码数据进行压缩；
步骤2：设置编码器视频采集设备为桌面采集，设置采集帧率为25帧，输出帧率为25帧，输出分辨率为1080p，设置压缩库的压缩率为原来的60％；
步骤3：启动音视频平台A，检测音视频平台与编解码器的连接正常后，启动任务管理器并监控音视频平台A对应的进程信息，点播本地编码器设备；
步骤4：本地设备正常播放，查看任务管理器，音视频平台A进程信息无大幅度波动，持续播放10分钟，操作系统及音视频平台A无异常。
本发明提供的技术方案带来的有益效果是：有效解决了视频解码数据过大导致WebSocket协议吞吐量达不到传输需求的问题。
附图说明
图1是本发明一种用于云视频平台的视频解码压缩网络动态调整系统及方法的网络部署图；
图2是与图1作对比的网络部署图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地描述。
请参考图1，本发明提供了一种用于云视频平台的视频解码压缩网络动态调整系统及方法，一种用于云视频平台的视频解码压缩网络动态调整系统，包括编码器、压缩库、解码器以及解码终端，所述编码器、压缩库、解码器以及解码终端均处于同一音视频平台域。
一种用于云视频平台的视频解码压缩网络动态调整方法，应用于所述的一种用于云视频平台的视频解码压缩网络动态调整系统，包括以下步骤：
步骤1：进行系统部署，将解码器、编码器以及解码终端部署在同一个音视频平台域，在解码器传输解码数据前增加压缩库对解码数据进行压缩；部署的解码器为系统内置解码器，部署的编码器为系统本地编码器；
步骤2：设置编码器视频采集设备为桌面采集，设置采集帧率为25帧，输出帧率为25帧，输出分辨率为1080p，设置压缩库的压缩率为原来的60％；
步骤3：启动音视频平台A，检测音视频平台与编解码器的连接正常后，启动任务管理器并监控音视频平台A对应的进程信息，点播本地编码器设备；
步骤4：本地设备正常播放，查看任务管理器，音视频平台A进程信息无大幅度波动，持续播放10分钟，操作系统及音视频平台A无异常；
计算此时解码器与音视频平台通过WebSocket协议传输的本地回环流量：压缩后的1080pYUV视频原始数据每帧大小为1920*1080*1.5*60％个字节，大约为1.78MB；由于视频输出帧率为每秒25帧，所以每秒解码传输的本地回环流量为44.55MB。
为了更好地对比出本发明的网络动态调整的效果，如图2进行系统部署，设置编码器视频采集设备为桌面采集，设置采集帧率为15帧，采集分辨率为1080p，设置输出帧率为15帧，输出分辨率为1080p，启动音视频平台A，检测音视频平台与编解码器的连接正常后，启动任务管理器并监控音视频平台A对应的进程信息，点播本地编码器设备；
本地设备正常播放，查看任务管理器，音视频平台A进程信息无大幅度波动，持续播放10分钟，操作系统及音视频平台A无异常，计算此时解码设备与音视频平台通过WebSocket协议传输的本地回环流量：1080pYUV视频原始数据每帧大小为1920*1080*1.5个字节，大约为2.97MB；由于视频输出帧率为每秒15帧，所以每秒解码传输的本地回环流量为44.55MB。
保持编码器采集分辨率不变，设置采集帧率为25帧、输出帧率也为25帧、输出分辨率为1080p，重新启动音视频平台A，检测音视频平台与编解码器的连接正常后，启动任务管理器并监控音视频平台A对应的进程信息，点播本地编码器设备。
现象：本地设备目前正常播放，查看任务管理器，音视频平台A进程信息中内存占用持续增加，在本地设备正常播放约1分钟后，视频播放开始卡顿，在本地设备播放约2分钟时，音视频平台A崩溃无响应。
计算此时解码设备与音视频平台通过WebSocket协议传输的本地回环流量：1080pYUV视频原始数据每帧大小为1920*1080*1.5个字节，大约为2.97MB；由于视频输出帧率为每秒25帧，所以每秒解码传输的本地回环流量为74.25MB。
由此可知，当传输流量速度超过44.55MB/s时，接收消息端的WebSocket协议会出现数据处理延时的现象，导致接受消息的队列不断增大，内存占用持续增加，最后导致平台崩溃。
而本发明在解码库传输解码数据前增加压缩库对解码数据进行压缩之后，通过控制压缩库的压缩率使解码库的传输速率小于44.55MB/s，可以避免由WebSocket协议本身引起的点播异常等相关问题。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (3)
1.一种用于云视频平台的视频解码压缩网络动态调整系统，其特征在于，包括编码器、压缩库、解码器以及解码终端，所述编码器、压缩库、解码器以及解码终端均处于同一音视频平台域。
2.一种用于云视频平台的视频解码压缩网络动态调整方法，应用于权利要求1所述的一种用于云视频平台的视频解码压缩网络动态调整系统，其特征在于，包括以下步骤：
步骤1：进行系统部署，将解码器、编码器以及解码终端部署在同一个音视频平台域，在解码器传输解码数据前增加压缩库对解码数据进行压缩；
步骤2：设置编码器视频采集设备为桌面采集，设置采集帧率为25帧，输出帧率为25帧，输出分辨率为1080p，设置压缩库的压缩率为原来的60％；
步骤3：启动音视频平台A，检测音视频平台与编解码器的连接正常后，启动任务管理器并监控音视频平台A对应的进程信息，点播本地编码器设备；
步骤4：本地设备正常播放，查看任务管理器，音视频平台A进程信息无大幅度波动，持续播放10分钟，操作系统及音视频平台A无异常。
3.根据权利要求2所述的一种用于云视频平台的视频解码压缩网络动态调整方法，其特征在于，所述部署的解码器为系统内置解码器，部署的编码器为系统本地编码器。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110057703.8A CN112911336A (zh) | 2021-01-15 | 2021-01-15 | 用于云视频平台的视频解码压缩网络动态调整系统及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110057703.8A CN112911336A (zh) | 2021-01-15 | 2021-01-15 | 用于云视频平台的视频解码压缩网络动态调整系统及方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112911336A true CN112911336A (zh) | 2021-06-04 |
Family
ID=76113874
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110057703.8A Pending CN112911336A (zh) | 2021-01-15 | 2021-01-15 | 用于云视频平台的视频解码压缩网络动态调整系统及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112911336A (zh) |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103428529A (zh) * | 2013-08-30 | 2013-12-04 | 武汉眸博科技有限公司 | 一种媒体云中视频数据编码传输方法 |
| US20150237373A1 (en) * | 2009-01-29 | 2015-08-20 | Dolby Laboratories Licensing Corporation | Coding and Decoding of Interleaved Image Data |
| CN107071356A (zh) * | 2017-04-17 | 2017-08-18 | 上海增容数据科技有限公司 | 一种多媒体优化服务器及其视频信息处理方法 |
| CN107659843A (zh) * | 2017-09-29 | 2018-02-02 | 北京优教互动教育科技有限公司 | 一种基于转码器的音视频采集播放系统及其工作方法 |
| CN108111904A (zh) * | 2016-11-24 | 2018-06-01 | 厦门脉视数字技术有限公司 | 一种基于Web的视频播放系统及方法 |
| CN110958415A (zh) * | 2019-11-28 | 2020-04-03 | 武汉兴图新科电子股份有限公司 | 基于单平台网络监测动态调整媒体传输的方法 |
-
2021
- 2021-01-15 CN CN202110057703.8A patent/CN112911336A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150237373A1 (en) * | 2009-01-29 | 2015-08-20 | Dolby Laboratories Licensing Corporation | Coding and Decoding of Interleaved Image Data |
| CN103428529A (zh) * | 2013-08-30 | 2013-12-04 | 武汉眸博科技有限公司 | 一种媒体云中视频数据编码传输方法 |
| CN108111904A (zh) * | 2016-11-24 | 2018-06-01 | 厦门脉视数字技术有限公司 | 一种基于Web的视频播放系统及方法 |
| CN107071356A (zh) * | 2017-04-17 | 2017-08-18 | 上海增容数据科技有限公司 | 一种多媒体优化服务器及其视频信息处理方法 |
| CN107659843A (zh) * | 2017-09-29 | 2018-02-02 | 北京优教互动教育科技有限公司 | 一种基于转码器的音视频采集播放系统及其工作方法 |
| CN110958415A (zh) * | 2019-11-28 | 2020-04-03 | 武汉兴图新科电子股份有限公司 | 基于单平台网络监测动态调整媒体传输的方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111399964B (zh) | 一种基于视频串流技术的云桌面平台 | |
| CN110430441B (zh) | 一种云手机视频采集方法、系统、装置及存储介质 | |
| CN110662114B (zh) | 视频处理方法、装置、电子设备及存储介质 | |
| JP2003524909A (ja) | マルチメディアネットワーク・インタフェースを達成する方法及び装置 | |
| CN110662100A (zh) | 一种信息处理方法、装置、系统和计算机可读存储介质 | |
| WO2021129830A1 (zh) | 视频传输方法、装置、设备和系统 | |
| TWI637631B (zh) | 影像處理裝置、影視子系統與影視處理電路 | |
| US20170142029A1 (en) | Method for data rate adaption in online media services, electronic device, and non-transitory computer-readable storage medium | |
| CN101345862B (zh) | 一种网络监控系统实时抓拍的图像传输方法 | |
| CN111083450A (zh) | 车机端图像远程输出方法、装置及系统 | |
| CN110730364B (zh) | 一种云手机数据传输方法、装置及存储介质 | |
| CN103929682B (zh) | 一种在视频直播系统中设置关键帧的方法及装置 | |
| CN201805504U (zh) | 一种远程音视频监控系统 | |
| CN113114978B (zh) | 一种多设备视频协商传输方法、系统及相关装置 | |
| CN113596112A (zh) | 一种面向视频监控的传输方法 | |
| CN113973224A (zh) | 媒体信息的传输方法、计算设备及存储介质 | |
| CN112911336A (zh) | 用于云视频平台的视频解码压缩网络动态调整系统及方法 | |
| CN112543374A (zh) | 一种转码控制方法、装置及电子设备 | |
| CN114666561B (zh) | 视频融合方法、装置和系统 | |
| CN111093091A (zh) | 视频处理方法、服务器及系统 | |
| CN1867072A (zh) | 可适性视频信号编码的方法及应用其的信号编码装置 | |
| CN112533029B (zh) | 一种视频分时传输方法、摄像装置、系统和存储介质 | |
| JPH07170292A (ja) | 送信装置 | |
| CN108924088A (zh) | 一种4k网络摄像机传输实现方法 | |
| CN101686382A (zh) | 视讯处理方法及视讯系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210604 |
|
| RJ01 | Rejection of invention patent application after publication |