CN103647980B - 一种低码率视频流复合高清图解数据及其带宽分配方法 - Google Patents
一种低码率视频流复合高清图解数据及其带宽分配方法 Download PDFInfo
- Publication number
- CN103647980B CN103647980B CN201310715948.0A CN201310715948A CN103647980B CN 103647980 B CN103647980 B CN 103647980B CN 201310715948 A CN201310715948 A CN 201310715948A CN 103647980 B CN103647980 B CN 103647980B
- Authority
- CN
- China
- Prior art keywords
- high definition
- rate video
- low bit
- bit
- rate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Abstract
本发明涉及一种低码率视频流复合高清图解数据及其带宽分配方法，在低码率条件下，传输通过分配带宽完成，音频互动优先级最高，低码率视频流传输优先级其次，复合高清图解数据传输优先级最低，复合高清图解数据的每一帧，按照时间戳标识对应低码率视频流的指定帧，并从该帧开始保持两路数据的同步,展现复合高清图解数据的每一帧，则通过分块、编码压缩、传输、展现，每个分块根据位置信息，在完成传输后，覆盖保持同步的低码率视频帧经过放大显示所对应的位置，使复合过程越来越清晰的还原成高清图像。本发明低带宽条件下保障语音互动和低码率视频基础上，并实现同步传输高清图解数据的方法。
Description
技术领域
本发明涉及一种低码率视频流复合高清图解数据的传输方法，尤其涉及一种在低码率中带宽分配传输方法。
背景技术
当前，广泛使用INMARSAT第四代卫星的Explorer700系统，接收信号强度最佳时，带宽可达128kbps，带宽范围在16kbps～128kbps水平。海事卫星通信过程中，为了保持稳定的天线接收信号强度，常常采用静中通方式，即天线对准卫星获得好的信号强度后，固定不动。天线与单兵之间以近距离无线方式连接。如：Explorer 700，在静中通方式下信号强度可达到54～57dBHZ，数据流带宽可达64～128kbps，这为音频互动和低码率视频传输提供足够的带宽。但是无法进行高清视频的传输。
基于海事卫星通信的应用，非实时性要求的应用，主要是WEB、Email等基于互联网的服务，实时性要求的应用主要用于语音互动和传输低码率视频。在传输低码率视频方面，为了提高低码率视频的清晰度和稳定性，已经有不少成果和专利，在传输高清视频方面，理论计算就不可行，依托宽带海事卫星通信业务的发展，大约需要15～20年。在现有带宽条件下是无法实现高清视频传输。低码率视频的局限性，极大的制约了基于海事卫星通信的应用功能和应用效果。
发明内容
本发明针对现有技术的不足，提供了一种在保障语音互动和低码率视频帧率降低到可接受的帧率范围前提下，将多余的带宽用于传输高清图解数据，用于清晰的展现低码率视频中看不清的场景。
本发明是通过以下技术方案实现的：
在低码率条件下，同时完成音频互动、低码率视频传输和复合高清图解数据传输。传输过程是通过合理分配带宽完成的，音频互动优先级最高，带宽控制在4kbps～16kbps水平，低码率视频流传输优先级其次，帧率控制在25fps以下，复合高清图解数据传输优先级最低，帧率控制在0.01～1fps水平。
复合高清图解数据的每一帧，按照时间戳标识对应低码率视频流的指定帧，并从该帧开始保持两类数据的同步。展现复合高清图解数据的每一帧，则通过分块、编码压缩、传输、展现，每个分块根据位置信息，在完成传输后，覆盖保持同步的低码率视频帧经过放大显示所对应的位置，使复合过程越来越清晰的还原成高清图像。
带宽自适应性方法设计，低码率视频流支持QCIF和CIF两种规格，高清图解数据为1080p规格，按照低带宽在32kbps～128kbps范围自动调整规格，并支持人工控制传输规格。
采集模块将接收的音频数据以I2S音频解码输出，将接收的高清视频数据以YUV高清视频解码输出；处理模块将YUV高清视频解码数据，按两路压缩处理，一路处理成QCIF或CIF低码率视频，一路按照时间戳获取指定低码率视频帧对应的高清视频帧，处理成1080p高清图解数据，并通过编码标识同步特征信息，再等分成M*N块，并将每块进行压缩。音频数据和两路视频数据均发送到传输缓冲区，各自再打包成更小的有利于传输和重传的数据包，传输时音频数据优先，其次低码率视频，最后是复合高清图解数据。
低码率视频采用H.264编码。编码前，对原始图像进行色彩空间压缩，从而使编码后的码流变得更小，相应的占用的传输带宽就会更少。具体压缩方式为：低码率数据按照H.264进行压缩编码。对于H.264编码，为了减小原始图片大小，可以采用灰度图像进行编码；即将原始的YUV码流扔掉UV色彩分量以后，直接转换为只有Y分量的灰度数据送给H.264编码器，这样原始图像占用的存储空间就减少了一倍，编码后的码流大小也会大大减少。同时，对过降低帧率使码流数据包更少。
两路视频数据无论码率为多少，都必须保持同步。基于实用性考虑，实际低码率视频帧率限定在5～25fps。自适应调整过程必兼顾帧率及质量来调整码流大小。动态调整以调节低码率视频流及高清图解数据的帧率来进行，而音频码流是不会调整的。以0.2fps为高清图解数据基准帧率，以15fps为低码率数据基准帧率，调节周期以5秒一次为宜。具体方法如下：
当检测到带宽低于基准时，如果侧重于观察高清图解数据，则优先下调低码率视频的码率，具体方法是将低码率视频流码率降低为上一次码率的60%～80%。如果侧重于观察低码率视频，则保持最低码率在15fps水平后，不再降低，此时高清图解数据，按照不限定时间要求传输，如果低于最低设计值0.01fps，则按超时处理。当检测到带宽充足时，升高码率。低码率视频每次提高为上一次码率的105%，直到25fps。如果侧重于观察高清图解数据，则优先提高高清图解数据码率，而将低码率视频保持在较低的水平。
本发明提供了一种在低带宽条件下保障语音互动和低码率视频基础上，同步传输高清图解数据的方法。在应急指挥系统中，使用该方法，高清图解数据就象播放高清动画片一样，能够帮助后端有间隔但不间断的看清现场状况，并与持续性的低码率视频相同步，相辅相承，大大提高了专家对现场进行分析、诊断和领导决策的准确性，具有很高的实用价值。
具体实施方式
在低码率条件下，同时完成音频互动、低码率视频传输和复合高清图解数据传输。传输过程是通过合理分配带宽完成的，音频互动优先级最高，带宽控制在4kbps～16kbps水平，低码率视频流传输优先级其次，帧率控制在25fps以下，复合高清图解数据传输优先级最低，帧率控制在0.01～1fps水平。复合高清图解数据的每一帧，按照时间戳标识对应低码率视频流的指定帧，并从该帧开始保持两类数据的同步。展现复合高清图解数据的每一帧，则通过分块、编码压缩、传输、展现，每个分块根据位置信息，在完成传输后，覆盖保持同步的低码率视频帧经过放大显示所对应的位置，使复合过程越来越清晰的还原成高清图像。带宽自适应性方法设计，低码率视频流支持QCIF和CIF两种规格，高清图解数据为1080p规格，按照低带宽在32kbps～128kbps范围自动调整规格，并支持人工控制传输规格。采集模块将接收的音频数据以I2S音频解码输出，将接收的高清视频数据以YUV高清视频解码输出；处理模块将YUV高清视频解码数据，按两路压缩处理，一路处理成QCIF或CIF低码率视频，一路按照时间戳获取指定低码率视频帧对应的高清视频帧，处理成1080p高清图解数据，并通过编码标识同步特征信息，再等分成M*N块，并将每块进行压缩。音频数据和两路视频数据均发送到传输缓冲区，各自再打包成更小的有利于传输和重传的数据包，传输时音频数据优先，其次低码率视频，最后是复合高清图解数据。低码率视频采用H.264编码。编码前，对原始图像进行色彩空间压缩，从而使编码后的码流变得更小，相应的占用的传输带宽就会更少。具体压缩方式为：低码率数据按照H.264进行压缩编码。对于H.264编码，为了减小原始图片大小，可以采用灰度图像进行编码；即将原始的YUV码流扔掉UV色彩分量以后，直接转换为只有Y分量的灰度数据送给H.264编码器，这样原始图像占用的存储空间就减少了一倍，编码后的码流大小也会大大减少。同时，对过降低帧率使码流数据包更少。两路视频数据无论码率为多少，都必须保持同步。基于实用性考虑，实际低码率视频帧率限定在5～25fps。自适应调整过程必兼顾帧率及质量来调整码流大小。动态调整以调节低码率视频流及高清图解数据的帧率来进行，而音频码流是不会调整的。以0.2fps为高清图解数据基准帧率，以15fps为低码率数据基准帧率，调节周期以5秒一次为宜。具体方法如下：当检测到带宽低于基准时，如果侧重于观察高清图解数据，则优先下调低码率视频的码率，具体方法是将低码率视频流码率降低为上一次码率的60%～80%。如果侧重于观察低码率视频，则保持最低码率在15fps水平后，不再降低，此时高清图解数据，按照不限定时间要求传输，如果低于最低设计值0.01fps，则按超时处理。当检测到带宽充足时，升高码率。低码率视频每次提高为上一次码率的105%，直到25fps。如果侧重于观察高清图解数据，则优先提高高清图解数据码率，而将低码率视频保持在较低的水平。
本发明提供了一种在低带宽条件下保障语音互动和低码率视频基础上，同步传输高清图解数据的方法。在应急指挥系统中，使用该方法，高清图解数据就象播放高清动画片一样，能够帮助后端有间隔但不间断的看清现场状况，并与持续性的低码率视频相同步，相辅相承，大大提高了专家对现场进行分析、诊断和领导决策的准确性，具有很高的实用价值。
Claims (1)
1.一种低码率视频流复合高清图解数据及其带宽分配方法，采集模块将接收的音频数据以I2S音频解码输出，将接收的高清视频数据以YUV高清视频解码输出；处理模块将YUV高清视频解码数据，按两路压缩处理，一路处理成QCIF或CIF低码率视频，一路按照时间戳获取指定低码率视频帧对应的高清视频帧，处理成1080p高清图解数据，并通过编码标识同步特征信息，再等分成M*N块，并将每块进行压缩；音频数据和两路视频数据均发送到传输缓冲区，各自再打包成更小的有利于传输和重传的数据包，传输时音频数据优先，其次低码率视频，最后是复合高清图解数据；复合高清图解数据的每一帧，按照时间戳标识对应低码率视频流的指定帧，并从该帧开始保持两路数据的同步；在低码率条件下，传输通过分配带宽完成，音频互动带宽控制在4kbps～16kbps水平，低码率视频流传输帧率控制在25fps以下，其特征在于：复合高清图解数据传输帧率控制在0.01～1fps水平，低码率视频帧率限定在5～25fps，自适应调整过程兼顾帧率及质量来调整码流大小，动态调整通过调节低码率视频流及高清图解数据的帧率来进行，音频码流则不调整，以0.2fps为高清图解数据基准帧率，以15fps为低码率数据基准帧率，调节周期以5秒一次，具体方法如下：
当检测到带宽低于基准时，如果侧重于观察高清图解数据，则首先下调低码率视频的码率，具体方法是将低码率视频流码率降低为上一次码率的60％～80％；如果侧重于观察低码率视频，则保持最低码率在15fps水平后，不再降低，此时高清图解数据，按照不限定时间要求传输，如果低于最低设计值0.01fps，则按超时处理；
当检测到带宽充足时，升高码率，低码率视频每次提高为上一次码率的105％，直到25fps；如果侧重于观察高清图解数据，则首先提高高清图解数据帧率，而将低码率视频保持在较低的水平。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310715948.0A CN103647980B (zh) | 2013-12-23 | 2013-12-23 | 一种低码率视频流复合高清图解数据及其带宽分配方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310715948.0A CN103647980B (zh) | 2013-12-23 | 2013-12-23 | 一种低码率视频流复合高清图解数据及其带宽分配方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103647980A CN103647980A (zh) | 2014-03-19 |
| CN103647980B true CN103647980B (zh) | 2017-02-15 |
Family
ID=50253121
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310715948.0A Expired - Fee Related CN103647980B (zh) | 2013-12-23 | 2013-12-23 | 一种低码率视频流复合高清图解数据及其带宽分配方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103647980B (zh) |
Families Citing this family (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3145200A1 (en) | 2007-01-12 | 2017-03-22 | ActiveVideo Networks, Inc. | Mpeg objects and systems and methods for using mpeg objects |
| US9826197B2 (en) | 2007-01-12 | 2017-11-21 | Activevideo Networks, Inc. | Providing television broadcasts over a managed network and interactive content over an unmanaged network to a client device |
| WO2013106390A1 (en) | 2012-01-09 | 2013-07-18 | Activevideo Networks, Inc. | Rendering of an interactive lean-backward user interface on a television |
| US9800945B2 (en) | 2012-04-03 | 2017-10-24 | Activevideo Networks, Inc. | Class-based intelligent multiplexing over unmanaged networks |
| WO2014145921A1 (en) | 2013-03-15 | 2014-09-18 | Activevideo Networks, Inc. | A multiple-mode system and method for providing user selectable video content |
| US9326047B2 (en) | 2013-06-06 | 2016-04-26 | Activevideo Networks, Inc. | Overlay rendering of user interface onto source video |
| US9219922B2 (en) | 2013-06-06 | 2015-12-22 | Activevideo Networks, Inc. | System and method for exploiting scene graph information in construction of an encoded video sequence |
| US9294785B2 (en) | 2013-06-06 | 2016-03-22 | Activevideo Networks, Inc. | System and method for exploiting scene graph information in construction of an encoded video sequence |
| CN104853226A (zh) * | 2014-02-17 | 2015-08-19 | 华为技术有限公司 | 多媒体数据的处理方法、装置、设备及系统 |
| US9788029B2 (en) | 2014-04-25 | 2017-10-10 | Activevideo Networks, Inc. | Intelligent multiplexing using class-based, multi-dimensioned decision logic for managed networks |
| CN107277528A (zh) * | 2017-05-12 | 2017-10-20 | 慧影医疗科技（北京）有限公司 | 大影像传输优化显示方法 |
| CN109068169A (zh) * | 2018-08-06 | 2018-12-21 | 青岛海信传媒网络技术有限公司 | 一种视频播放方法及装置 |
| CN110989840B (zh) * | 2019-12-03 | 2023-07-25 | 成都纵横自动化技术股份有限公司 | 数据处理方法、前端设备、后端设备及地理信息系统 |
| CN111343455B (zh) * | 2020-02-25 | 2022-11-29 | 西安万像电子科技有限公司 | 编码方式确定方法及装置 |
| CN111586350B (zh) * | 2020-04-19 | 2021-11-09 | 国网辽宁省电力有限公司电力科学研究院 | 基于带宽、优先级和无操作时间调节码率的方法 |
| CN113709524B (zh) * | 2021-08-25 | 2023-12-19 | 三星电子（中国）研发中心 | 选择音视频流的比特率的方法及其装置 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5386239A (en) * | 1993-05-03 | 1995-01-31 | Thomson Consumer Electronics, Inc. | Multiple QAM digital television signal decoder |
| CN101180831A (zh) * | 2005-05-24 | 2008-05-14 | 诺基亚公司 | 用于数字广播中分级传输/接收的方法和装置 |
| CN103237206A (zh) * | 2013-03-27 | 2013-08-07 | 北京奇虎科技有限公司 | 远程图像显示方法、处理装置以及显示系统 |
-
2013
- 2013-12-23 CN CN201310715948.0A patent/CN103647980B/zh not_active Expired - Fee Related
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5386239A (en) * | 1993-05-03 | 1995-01-31 | Thomson Consumer Electronics, Inc. | Multiple QAM digital television signal decoder |
| CN101180831A (zh) * | 2005-05-24 | 2008-05-14 | 诺基亚公司 | 用于数字广播中分级传输/接收的方法和装置 |
| CN103237206A (zh) * | 2013-03-27 | 2013-08-07 | 北京奇虎科技有限公司 | 远程图像显示方法、处理装置以及显示系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103647980A (zh) | 2014-03-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103647980B (zh) | 一种低码率视频流复合高清图解数据及其带宽分配方法 | |
| WO2017129090A1 (zh) | 移动终端的数据传输方法和装置 | |
| TWI311424B (zh) | ||
| CN101262604A (zh) | 一种感兴趣区优先传输的可伸缩视频编码方法 | |
| WO2017219652A1 (zh) | 一种头戴显示器、视频输出设备和视频处理方法、系统 | |
| US20100027663A1 (en) | Intellegent frame skipping in video coding based on similarity metric in compressed domain | |
| US9848193B2 (en) | System and method for selecting quantization parameter (QP) in display stream compression (DSC) | |
| US9936203B2 (en) | Complex region detection for display stream compression | |
| JP2008529317A (ja) | 携帯端末 | |
| CN104219509A (zh) | 车载智能终端及其数据传输方法 | |
| CN106162257B (zh) | 一种实时视频的自适应网络传输优化方法 | |
| WO2010144488A2 (en) | Dual-mode compression of images and videos for reliable real-time transmission | |
| CN104243994A (zh) | 一种实时运动感知图像增强的方法 | |
| CN107659843A (zh) | 一种基于转码器的音视频采集播放系统及其工作方法 | |
| CN105635620A (zh) | 一种支持音频透传sdi输出的装置和方法 | |
| CN101686382B (zh) | 视讯处理方法及视讯系统 | |
| CN102427529B (zh) | 视频编码压缩方法 | |
| KR101164365B1 (ko) | 차량용 영상 모니터링 장치의 4채널 화면 분할 방법 | |
| CN211267010U (zh) | 基于无线信道信噪比调整码流速率的系统 | |
| CN101990082B (zh) | 一种实现可视电话的方法及装置 | |
| CN101188768A (zh) | 基于rgb编解码器发送和接收运动图像的方法和设备 | |
| CN105472304A (zh) | 电网应急通信视频编解码动态适配方法和系统 | |
| CN111669532B (zh) | 一种高动态范围视频端到端实现方法 | |
| Cho et al. | Super-resolution based video coding scheme | |
| Choi | Super-Resolution Based Video Coding Scheme |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20170215 Termination date: 20191223 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |