CN110139129B

CN110139129B - 图像传输方法及装置

Info

Publication number: CN110139129B
Application number: CN201910239498.XA
Authority: CN
Inventors: 李聪聪; 李燎原; 范志刚; 周毅
Original assignee: Xian Wanxiang Electronics Technology Co Ltd
Current assignee: Shanghai Jingxiang Microelectronics Co.,Ltd.
Priority date: 2019-03-27
Filing date: 2019-03-27
Publication date: 2021-09-17
Anticipated expiration: 2039-03-27
Also published as: CN110139129A

Abstract

本公开提供一种图像传输方法及装置，涉及图像传输技术领域，能够解决目前图像传输中渐进式编码方案浪费计算资源的问题。具体技术方案为：根据A_n确定前m层图像编码数据流所需带宽B_m；其中，m＝1,2,3,…,n，n为图像分层的层数且为正整数；A_n表示传输第n个图层对应所需带宽；根据B_m、有效传输带宽B以及预设算法确定m的数值；根据确定的m的数值编码前m层图像数据并传输。本公开用于图像传输中降低计算资源的浪费。

Description

图像传输方法及装置

技术领域

本公开涉及图像传输技术领域，尤其涉及图像传输方法及装置。

背景技术

图像是人们获取信息的主要渠道，随着技术的发展，图像的传输方式也在不断演进，对于图像的传输，也越来越重视用户体验，目前图像传输越来越多的开始采用渐进式编码的方式传输，可以有效降低用户的体验时延。渐进式编码是一种为了在带宽有限的情况而尽量保证用户体验的一种编码方式，由于带宽有限，且处于动态变化之中，因此每帧需要发送几层需要根据实际情况来动态调整。

目前，渐进式编码的方案中对图像进行分层后，分别将前m(m＝1,2,3,…,n,n为图层的总数)层编码即将1层、1-2层、1-3层、1-m层、…、1-n层都编码共形成n个编码数据之后，选取与带宽匹配的第m个编码数据流进行传输，其余的丢弃，这样对计算资源是很大的浪费。

发明内容

本公开实施例提供一种图像传输方法及装置，能够解决目前图像传输中渐进式编码方案浪费计算资源的问题。所述技术方案如下：

根据本公开实施例的第一方面，提供一种图像传输方法，该方法包括：

根据A_n确定前m层图像编码数据流所需带宽B_m；其中，m＝1,2,3,…,n，n为图像分层的层数且为正整数；A_n表示传输第n个图层对应所需带宽；

根据B_m、有效传输带宽B以及预设算法确定m的数值；

根据确定的m的数值编码前m层图像数据并传输。

可选的，根据B_m、有效传输带宽B以及预设算法确定m的数值，包括：

根据公式一计算确定m的数值；其中，公式一：B-B_m>H且B-B_m+1<H，H为预设阈值。

可选的，该方法之前还包括：

根据图像传输模式以及场景仿真算法获取A_n的初始值；或，

根据图像传输模式以及历史数据获取A_n的初始值。

可选的，该方法还包括：

根据前m层的图像数据进行编码所需的传输带宽C_m更新A_n的数值。

可选的，根据前m层的图像数据进行编码所需的传输带宽C_m更新A_n的数值，包括：

根据C_m、A_n、B_m以及公式二计算得到A_n更新后的数值A’_n；

其中，公式二：A’_n＝A_n*(C_m/B_m)。

可选的，根据A_n确定前m层图像编码数据流所需带宽B_m，包括：

将A₁、A₂、…、A_m累加求和得到B_m，其中m≤n。

根据本公开实施例的第二方面，提供一种图像传输装置，其特征在于，该装置包括：

第一确定模块，用于根据A_n确定前m层图像编码数据流所需带宽B_m；其中，m＝1,2,3,…,n，n为图像分层的层数且为正整数；A_n表示传输第n个图层对应所需带宽；

第二确定模块，用于根据B_m、有效传输带宽B以及预设算法确定m的数值；

传输模块，用于根据确定的m的数值编码前m层图像数据并传输。

可选的，第二确定模块具体用于：

可选的，该装置还包括：

获取模块，用于根据图像传输模式以及场景仿真算法获取A_n的初始值；或，根据图像传输模式以及历史数据获取A_n的初始值。

可选的，该装置还包括：

更新模块，用于根据前m层的图像数据进行编码所需的传输带宽C_m更新A_n的数值。

可选的，更新模块具体用于：

根据C_m、A_n、B_m以及公式二计算得到A_n更新后的数值A’_n；

其中，公式二：A’_n＝A_n*(C_m/B_m)。

可选的，第一确定模块具体用于：将A₁、A₂、…、A_m累加求和得到B_m，其中m≤n。

本公开实施例提供的图像传输方法和装置，不再需要再像现有技术方案中传输前花费大量计算资源编码出n个编码数据流以确定其中某个编码数据流与带宽最匹配，而是直接选取和带宽匹配的对应的编码数据流进行传输，从而有效节约了计算资源。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1是本公开实施例提供的一种图像传输方法的流程示意图一；

图2是本公开实施例提供的一种图像传输方法的流程示意图二；

图3是本公开实施例提供的一种图像传输装置的结构示意图一。

图4是本公开实施例提供的一种图像传输装置的结构示意图二。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

本公开实施例提供一种图像传输方法，如图1所示，图1是本公开实施例提供的一种图像传输方法的流程图，该图像传输方法包括以下步骤：

101、根据A_n确定前m层图像编码数据流所需带宽B_m。

具体的，按照渐进式编码传输的要求，需要对图像进行分层，图像可以是单幅图片也可以是视频中的图像内容帧，为方便说明，一般将图像分为n个图层，n为图像分层的层数且为正整数，m＝1,2,3,…,n，A_n表示传输第n个图层对应所需带宽，例如A₂＝0.6Mbit表示传输第2个图像对应需要0.6Mbit的带宽，此处带宽单位Mbit仅为一般性的示例说明，实际中也可选取其他的单位。

在一个实施例中，如图2所示，在步骤101之前，该方法还可以包括：

100a、根据图像传输模式以及场景仿真算法获取A_n的初始值。或，

100b、根据图像传输模式以及历史数据获取A_n的初始值。

值得一提的是，本公开实施例中的图像传输模式对应于用户模式，例如，用户模式可以包括：网页模式传输、WORD模式传输(文字内容传输)、PPT模式传输(图文内容传输)、视频模式传输(动态视频内容)等。

具体的，对于步骤100a，实施本公开实施例提供的图像传输方法时，将图像分为n层后，需要为每个图层预设一个初始带宽值A_n，则可以预先通过场景仿真算法计算各种用户模式的场景中图像分层后的各个图层传输所需带宽值作为初始带宽值A_n，例如利用matalab将大量的网页作为输入源，将图层分成8层，编码后得到每个图层编码数据流并确定传输所需带宽，重复迭代这个过程，得到每个图层编码数据流所需传输带宽的平均值。

对于步骤100b，则可以通过对实际中各种用户模式下图像传输时的历史数据的统计分析结合当前图像模式对应的用户模式进行匹配后确定初始带宽值初始带宽值A_n。

在一个实施例中，根据A_n确定前m层图像编码数据流所需带宽B_m，具体可以包括：

将A₁、A₂、…、A_m累加求和得到B_m，其中m≤n。

示例性的，假设图像传输模式为网页传输模式，图像已被分层为8层，根据网页传输模式以及场景仿真算法确定A₁、A₂、…、A_n分别为1Mbit，1.2Mbit，0.7Mbit,0.9Mbit，0.8Mbit,0.9Mbit,1.1Mbit,0.7Mbit，m取4时，

B₄＝A₁+A₂+A₃+A₄＝3.8Mbit。

102、根据B_m、有效传输带宽B以及预设算法确定m的数值。

其中，有效传输带宽B的数值通常处于动态变化中，但是可以获取到当前传输时可用的数值(可以是确定值也可以是预测值)，获取当前有效传输带宽B的方式本领域技术人员参照现有技术方案理解即可，此处不做详细阐述。

具体的，获取到当前传输图像时可用的有效传输带宽B后，利用当前有效传输带宽B、步骤101获取的B_m以及预设算法确定出m的数值也即能够高效利用有效传输带宽B的B_m，预设算法可以是一个/组限定条件。

在一个实施例中，预设算法可以是公式一：B-B_m>H且B-B_m+1<H，其中，H为预设阈值，则根据B_m、有效传输带宽B以及预设算法确定m的数值，具体可以包括：将确定的B的数值、B_m的各个数值以及H的数值代入公式一即可求解出m的具体数值。其中，设置阈值H是用于来缓冲预测带宽和实际带宽的差异，H取值可以大于0，以便编码数据流大小不会超过带宽，当然，H的取值也可以等于0或者小于0，具体取值视方案实施实际情况而定。

示例性的，假设B＝10Mbit，H＝1Mbit，B₅＝8Mbit，B₆＝9.5Mbit满足上述公式一，则可推算出m取值为5。

103、根据确定的m的数值编码前m层图像数据并传输。

示例性的，假设n＝8，确定m＝5，则编码前5层(1-5)图像数据并传输即可，无需1,1-2,1-3,1-4,1-6,1-7,1-8都进行编码，从而有效节约计算资源。

本公开实施例提供的图像传输方法，相对于渐进式编码传输图像的现有技术方案，通过预测每个图层传输所需带宽从而确定出1层、1-2层、1-3层、1-m层、…、1-n层的n个编码数据流的所需带宽，不再需要再像现有技术方案中传输前花费大量计算资源编码出前述n个编码数据流以确定其中某个编码数据流与带宽最匹配，而是直接选取和带宽匹配的对应的编码数据流进行传输，从而有效节约了计算资源。

在一个实施例中，如图2所示，在步骤103之后，该方法还可以包括：

104、根据前m层的图像数据进行编码所需的传输带宽C_m更新A_n的数值。

在一个实施例中，根据前m层的图像数据进行编码所需的传输带宽C_m更新A_n的数值，具体可以包括：

根据C_m、A_n、B_m以及公式二计算得到A_n更新后的数值A’_n；

其中，公式二：A’_n＝A_n*(C_m/B_m)。

需要说明的是，C_m是实际对前m层图像编码后确定得到的带宽值，B_m是预测值。

值得一提的时，利用C_m反馈更新A_n的数值得到A’_n后利用A’_n执行步骤101，可以动态更新B_m，从而在有效节约计算资源的情况下不断提高图像传输效率。

基于上述图1或图2对应的实施例中所描述的图像传输方法，下述为本公开装置实施例，可以用于执行上述本公开方法实施例。

本公开实施例提供一种图像传输装置，如图3所示，该图像传输装置30包括：

第一确定模块301，用于根据A_n确定前m层图像编码数据流所需带宽B_m；其中，m＝1,2,3,…,n，n为图像分层的层数且为正整数；A_n表示传输第n个图层对应所需带宽；

第二确定模块302，用于根据B_m、有效传输带宽B以及预设算法确定m的数值；

传输模块303，用于根据确定的m的数值编码前m层图像数据并传输。

在一个实施例中，第二确定模块302具体用于：

在一个实施例中，如图4所示，该图像传输装置30还可以包括：

获取模块300，用于根据图像传输模式以及场景仿真算法获取A_n的初始值；或，根据图像传输模式以及历史数据获取A_n的初始值。

更新模块304，用于根据前m层的图像数据进行编码所需的传输带宽C_m更新A_n的数值。

在一个实施例中，更新模块204具体用于：

根据C_m、A_n、B_m以及公式二计算得到A_n更新后的数值A’_n；

其中，公式二：A’_n＝A_n*(C_m/B_m)。

在一个实施例中，第一确定模块201具体用于：将A₁、A₂、…、A_m累加求和得到B_m，其中m≤n。

本公开实施例提供的图像传输装置，不再需要再像现有技术方案中传输前花费大量计算资源编码出n个编码数据流以确定其中某个编码数据流与带宽最匹配，而是直接选取和带宽匹配的对应的编码数据流进行传输，从而有效节约了计算资源。

基于上述图1对应的实施例中所描述的图像传输方法，本公开实施例还提供一种计算机可读存储介质，例如，非临时性计算机可读存储介质可以是只读存储器(英文：ReadOnly Memory，ROM)、随机存取存储器(英文：Random Access Memory，RAM)、CD-ROM、磁带、软盘和光数据存储装置等。该存储介质上存储有计算机指令，用于执行上述图1对应的实施例中所描述的图像传输方法，此处不再赘述。

本领域技术人员在考虑说明书及实践这里公开的公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

Claims

1.一种图像传输方法，其特征在于，所述方法包括：

根据B_m、有效传输带宽B以及预设算法确定m的数值；

根据所述确定的m的数值编码前m层图像数据并传输；

其中，所述根据A_n确定前m层图像编码数据流所需带宽B_m包括：将A₁、A₂、…、A_m累加求和得到B_m，其中m≤n。

2.根据权利要求1所述的方法，其特征在于，所述根据B_m、有效传输带宽B以及预设算法确定m的数值，包括：

3.根据权利要求1所述的方法，其特征在于，所述方法之前还包括：

根据图像传输模式以及场景仿真算法获取A_n的初始值；或，

根据图像传输模式以及历史数据获取A_n的初始值。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

根据所述前m层图像数据进行编码后确定得到的带宽值C_m更新A_n的数值。

5.根据权利要求4所述的方法，其特征在于，所述根据所述前m层图像数据进行编码后确定得到的带宽值C_m更新A_n的数值，包括：

根据C_m、A_n、B_m以及公式二计算得到A_n更新后的数值A’_n；

其中，公式二：A’_n＝A_n*(C_m/B_m)。

6.一种图像传输装置，其特征在于，所述装置包括：

第一确定模块，用于根据A_n确定前m层图像编码数据流所需带宽B_m；其中，m＝1,2,3,…,n，n为图像分层的层数且为正整数；A_n表示传输第n个图层对应所需带宽；所述根据A_n确定前m层图像编码数据流所需带宽B_m包括：将A₁、A₂、…、A_m累加求和得到B_m，其中m≤n；

传输模块，用于根据所述确定的m的数值编码前m层图像数据并传输。

7.根据权利要求6所述的装置，其特征在于，所述第二确定模块具体用于：

8.根据权利要求6或7所述的装置，其特征在于，所述装置还包括：

9.根据权利要求6所述的装置，其特征在于，所述装置还包括：

更新模块，用于根据前m层图像数据进行编码后确定得到的带宽C_m更新A_n的数值，具体包括：

根据C_m、A_n、B_m以及公式二计算得到A_n更新后的数值A’_n；

其中，公式二：A’_n＝A_n*(C_m/B_m)。