CN111464811A - 图像的处理方法、装置和系统 - Google Patents
图像的处理方法、装置和系统 Download PDFInfo
- Publication number
- CN111464811A CN111464811A CN202010276274.9A CN202010276274A CN111464811A CN 111464811 A CN111464811 A CN 111464811A CN 202010276274 A CN202010276274 A CN 202010276274A CN 111464811 A CN111464811 A CN 111464811A
- Authority
- CN
- China
- Prior art keywords
- data
- residual
- image
- target
- layer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/167—Position within a video image, e.g. region of interest [ROI]
Abstract
本发明公开了一种图像的处理方法、装置和系统。其中,该方法包括:获取图像的基本层数据和残差层数据;基于当前网络带宽,确定残差层数据中待传输的残差目标区域;分别对基本层数据和残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据。本发明解决了相关技术中在网络带宽有限的的情况下,无法有效提升网络传输的图像质量的技术问题。
Description
技术领域
本发明涉及图像处理技术领域,具体而言,涉及一种图像的处理方法、装置和系统。
背景技术
随着人们对显示画面的质量要求越来越高,网络带宽与图像质量的矛盾日益突出。如何在网络带宽有限的情况下提升网络传输的图像质量,是亟待解决的问题。
针对上述的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种图像的处理方法、装置和系统,以至少解决相关技术中在网络带宽有限的的情况下,无法有效提升网络传输的图像质量的技术问题。
根据本发明实施例的一个方面,提供了一种图像的处理方法,包括:获取所述图像的基本层数据和残差层数据;基于当前网络带宽,确定所述残差层数据中待传输的残差目标区域;分别对所述基本层数据和所述残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据。
可选地,在获取所述图像的残差层数据之前,包括:获取所述图像的原始图像数据和解码后的还原图像数据;根据所述原始图像数据和所述还原图像数据,确定所述残差层数据。
可选地,基于当前网络带宽,确定所述残差层数据中待传输的残差目标区域包括:根据所述当前网络带宽,确定可传输的编码数据总量;根据所述编码数据总量和基本层编码数据的数据量,确定可传输的残差层编码数据的数据量;根据所述残差层编码数据的数据量,确定待传输的所述残差目标区域。
可选地,感兴趣区域包括所述图像中视觉最为敏感的区域,根据所述残差层编码数据的数据量,确定待传输的所述残差目标区域包括:在所述残差层编码数据的数据量小于或等于所述感兴趣区域对应的残差层编码数据的数据量的情况下,则所述残差目标区域为部分的所述感兴趣区域;在所述残差层编码数据的数据量大于所述感兴趣区域对应的残差层编码数据的数据量的情况下,则所述残差目标区域包括全部的所述感兴趣区域,以及图像区域除所述感兴趣区域以外的部分区域;在所述残差层编码数据的数据量大于图像对应的残差层编码数据的数据量,则所述残差目标区域包括全部的所述图像区域。
可选地,对所述残差目标区域对应的目标残差层数据进行编码,得到目标残差层编码数据包括:将所述残差目标区域以外的所述残差层数据的像素值设置为预定值,得到所述目标残差层数据;对所述目标残差层数据进行压缩,生成所述目标残差层编码数据。
根据本发明实施例的另一方面,还提供了一种图像的处理方法,包括:获取所述图像的基本层编码数据和目标残差层编码数据;分别对所述基本层编码数据和所述目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;将所述基本层数据和所述目标残差层数据进行叠加,还原所述图像。
根据本发明实施例的另一方面,还提供了一种图像的处理装置,包括:第一获取模块,用于获取所述图像的基本层数据和残差层数据;第一确定模块,用于基于当前网络带宽,确定所述残差层数据中待传输的残差目标区域;编码模块,用于分别对所述基本层数据和所述残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据。
根据本发明实施例的另一方面,还提供了一种图像的处理装置,包括:第二获取模块,用于获取所述图像的基本层编码数据和目标残差层编码数据;解码模块,用于分别对所述基本层编码数据和所述目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;还原模块,用于将所述基本层数据和所述目标残差层数据进行叠加,还原所述图像。
根据本发明实施例的另一方面,还提供了一种图像的处理系统,包括:编码端和解码端,其中,编码端用于获取所述图像的基本层数据、残差层数据;基于当前网络带宽,确定所述残差层数据中待传输的残差目标区域;分别对所述基本层数据和所述残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据;所述解码端用于获取所述图像的基本层编码数据和目标残差层编码数据;分别对所述基本层编码数据和所述目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;将所述基本层数据和所述目标残差层数据进行叠加,还原所述图像。
根据本发明实施例的另一方面,还提供了一种存储介质,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行上述中任意一项所述的图像的处理方法。
根据本发明实施例的另一方面,还提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行上述中任意一项所述的图像的处理方法。
在本发明实施例中,采用获取所述图像的基本层数据和残差层数据;基于当前网络带宽,确定所述残差层数据中待传输的残差目标区域;分别对所述基本层数据和所述残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据的方式,通过利用当前网络带宽,确定图像的残差层数据中待传输的残差目标区域,进而分别对图像的基本层数据和残差目标区域对应的目标残差层数据进行编码,从而得到基本层编码数据和目标残差层编码数据,达到了提升图像质量的目的,从而实现了在传输码流较小的前提下,最大程度的提升残差目标区域的图像质量,提升用户的观看体验的技术效果,进而解决了相关技术中在网络带宽有限的的情况下,无法有效提升网络传输的图像质量的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种图像的处理方法的流程图;
图2是根据本发明实施例的原始图像、原始图像的基本层和原始图像的残差层的示意图;
图3是根据本发明实施例的图像的残差目标区域的示意图;
图4是根据本发明实施例的另一种图像的处理方法的流程图;
图5是根据本发明实施例的一种图像的处理装置的示意图;
图6是根据本发明实施例的另一种图像的处理装置的示意图;
图7是根据本发明实施例的图像的处理系统的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例1
根据本发明实施例,提供了一种图像的处理方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种图像的处理方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,获取图像的基本层数据和残差层数据;
步骤S104,基于当前网络带宽,确定残差层数据中待传输的残差目标区域;
上述残差目标区域包括但不限于部分或者全部的感兴趣区域,部分或者全部的图像区域。
需要说明的是,感兴趣区域包括图像中视觉最为敏感的区域,是影响用户体验的关键点。例如,电影画面中,由于大部分人对字幕部分比较关注,感兴趣区域可以包括字幕部分;医学图像中,由于整个图都对医生判断病情有帮助,因此,感兴趣区域可以包括整个图像。
另外,可以通过多种方式识别图像中用户感兴趣的区域,例如,可以通过主流的ROI算法在图像中识别感兴趣区域。
步骤S106,分别对基本层数据和残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据。
其中,在对基本层数据进行编码,得到基本层编码数据过程中,为了控制传输的图像数据量,编码压缩比较高。也就是,由于压缩比较高,整体图像质量不高。具体的,可以使用JPEG、H264等编码方法,通过调低量化参数,降低整体码流。
通过上述步骤,可以实现通过利用当前网络带宽,确定图像的残差层数据中待传输的残差目标区域,进而分别对图像的基本层数据和残差目标区域对应的目标残差层数据进行编码,从而得到基本层编码数据和目标残差层编码数据,达到了提升图像质量的目的,从而实现了在传输码流较小的前提下,最大程度的提升残差目标区域的图像质量,提升用户的观看体验的技术效果,进而解决了相关技术中在网络带宽有限的的情况下,无法有效提升网络传输的图像质量的技术问题。
需要说明的是,上述方法适用于网络带宽受限的场景,可以应用于编码端,其中,在得到基本层编码数据和目标残差层编码数据之后,还包括:将基本层编码数据和目标残差层编码数据发送到解码端。而解码端可以基于基本层编码数据和目标残差层编码数据进行解码和还原图像。
作为一种可选的实施例,可以先计算图像的残差层数据,基本层数据,以及识别图像的感兴趣区域;接下来,可以根据解码端的当前网络带宽,在残差层数据中确定待传输的残差目标区域,其中,残差目标区域可以包括全部感兴趣区域或部分感兴趣区域,或者包括整个图像区域;然后,将基本层编码数据和残差目标区域经编码后生成的目标残差层编码数据一同发送给解码端;最后,解码端基于基本层编码数据和目标残差层编码数据还原出图像。
由于感兴趣区域是图像中人眼最为关注的区域,受限于网络带宽,可以将包括部分或全部感兴趣区域对应的目标残差层编码数据,与基本层数据一起传输到解码端,这样,能够在传输码流较小的前提下,最大程度的提升解码端的感兴趣区域的图像质量,提升用户的观看体验。
需要说明的是,可以将图像分为残差层和基本层,图2是根据本发明实施例的原始图像、原始图像的基本层和原始图像的残差层的示意图,如图2所示,图2(a)为原始图像,图2(b)为图2(a)的原始图像的基本层,图2(c)为图2(a)的原始图像的残差层。由此可见,基本层的图像质量较差,基本层和残差层叠加能够得到与原始图像较为接近的还原图像。
可选地,在获取图像的残差层数据之前,包括:获取图像的原始图像数据和解码后的还原图像数据;根据原始图像数据和还原图像数据,确定残差层数据。
在具体实施过程中,可以将图像的原始图像数据减去解码后的还原图像数据,进而得到该图像的残差层数据;进一步地,还可以对图像的残差层数据进行压缩处理,得到残差层编码数据。
可选地,基于当前网络带宽,确定残差层数据中待传输的残差目标区域包括:根据当前网络带宽,确定可传输的编码数据总量;根据编码数据总量和基本层编码数据的数据量,确定可传输的残差层编码数据的数据量;根据残差层编码数据的数据量,确定待传输的残差目标区域。
在具体实施过程中,首先,获取当前网络带宽,确定图像的可传输的编码数据总量。比如,当前网络带宽为200.1M,那么,图像的可传输的编码数据总量可以为200M。然后,从可传输的编码数据总量中减去基本层编码数据的数据量,得到可传输的残差层编码数据的数据量。比如,基本层编码数据的数据量为100M,那么,可传输的残差层编码数据的数据量为200-100=100M。接下来,根据可传输的残差层编码数据的数据量,确定待传输的图像的残差目标区域。
可选地,感兴趣区域包括图像中视觉最为敏感的区域,根据残差层编码数据的数据量,确定待传输的残差目标区域包括:在残差层编码数据的数据量小于或等于感兴趣区域对应的残差层编码数据的数据量的情况下,则残差目标区域为部分的感兴趣区域;在残差层编码数据的数据量大于感兴趣区域对应的残差层编码数据的数据量的情况下,则残差目标区域包括全部的感兴趣区域,以及图像区域除感兴趣区域以外的部分区域;在残差层编码数据的数据量大于图像对应的残差层编码数据的数据量,则残差目标区域包括全部的图像区域。
在具体实施过程中,比如,可传输的残差层编码数据的数据量为100M,感兴趣区域对应的残差层编码数据的数据量为150M,那么,只能将感兴趣区域中的三分之二作为残差目标区域。
又比如,可传输的残差层编码数据的数据量为100M,感兴趣区域对应的残差层编码数据的数据量为50M,那么,残差目标区域包括全部的感兴趣区域,以及除感兴趣区域以外的其他区域,可以理解的,其他区域对应的残差编码数据的数据量为50M。
需要说明的是,残差目标区域可能包括多个小区域。具体的,可以将感兴趣区域中均匀分布的多个小区域确定为残差目标区域。这样能够在最大程度上提高感兴趣区域的图像质量。
图3是根据本发明实施例的图像的残差目标区域的示意图,如图3所示,大矩形框为当前帧,斜杠填充的长矩形框为感兴趣区域,残差目标区域为斜杠填充的长矩形框中的橙色小矩形框。进一步地,图3中的残差目标区域为多个小区域块组成。
当然,可以根据实际情况,在可传输的残差层编码数据的数据量,小于或等于感兴趣区域对应的残差层编码数据的数据量的场景下,在感兴趣区域中确定残差目标区域。
可选地,对残差目标区域对应的目标残差层数据进行编码,得到目标残差层编码数据包括:将残差目标区域以外的残差层数据的像素值设置为预定值,得到目标残差层数据;对目标残差层数据进行压缩,生成目标残差层编码数据。
可选地,上述预定值为0。在具体实施过程中,可以将图像的残差层数据中,除残差目标区域以外的像素值都置0,得到目标残差层数据;进而对该目标残差层数据进行压缩,生成目标残差层编码数据。
可选地,在图像的残差层数据中确定目标残差目标区域;进而对目标残差层数据进行压缩,生成目标残差层编码数据。
需要说明的是,为了与有限的网络带宽匹配,目标残差层数据的数据量小于图像的残差层数据的数据量。
当然,在网络带宽非常充裕的情况下,残差目标区域包括整个图像的残差,那么,目标残差层数据的数据量也就等于整个图像的残差层数据的数据量。
可选地,上述残差层的压缩(编码)可采用JPEG或者PNG等有损或者无损压缩算法。
实施例2
根据本发明实施例的另一方面,还提供了另一种图像的处理方法,图4是根据本发明实施例的另一种图像的处理方法的流程图,如图4所示,该方法包括如下步骤:
步骤S402,获取图像的基本层编码数据和目标残差层编码数据;
步骤S404,分别对基本层编码数据和目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;
步骤S406,将基本层数据和目标残差层数据进行叠加,还原图像。
通过上述步骤,可以实现分别对获取的图像的基本层编码数据和目标残差层编码数据进行解码,得到对应的基本层数据和目标残差层数据,进而将基本层数据和目标残差层数据进行叠加,还原图像,达到了提升图像质量的目的,从而实现了在传输码流较小的前提下,最大程度的提升残差目标区域的图像质量,提升用户的观看体验的技术效果,进而解决了相关技术中在网络带宽有限的的情况下,无法有效提升网络传输的图像质量的技术问题。
需要说明的是,上述方法可以应用于解码端,用于对编码端发送的基本层编码数据和目标残差层编码数据进行解码以及还原图像,这样,能够在传输码流较小的前提下,最大程度的提升解码端的感兴趣区域的图像质量,提升用户的观看体验。
实施例3
根据本发明实施例的另外一个方面,还提供了一种图像的处理装置,图5是根据本发明实施例的一种图像的处理装置的示意图,如图5所示,该图像的处理装置包括:第一获取模块52,第一确定模块54以及编码模块56。下面对该图像的处理装置进行详细说明。
第一获取模块52,用于获取图像的基本层数据和残差层数据;第一确定模块54,连接至上述第一获取模块52,用于基于当前网络带宽,确定残差层数据中待传输的残差目标区域;编码模块56,连接至上述第一确定模块54,用于分别对基本层数据和残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,例如,对于后者,可以通过以下方式实现:上述各个模块可以位于同一处理器中;或者,上述各个模块以任意组合的方式位于不同的处理器中。
此处需要说明的是,上述第一获取模块52,第一确定模块54以及编码模块56对应于实施例1中的步骤S102至S106,上述模块与对应的步骤所实现的示例和应用场景相同,但不限于上述实施例1所公开的内容。需要说明的是,上述模块作为装置的一部分可以在诸如一组计算机可执行指令的计算机系统中执行。
由上可知,在本申请上述实施例中,可以通过利用当前网络带宽,确定图像的残差层数据中待传输的残差目标区域,进而分别对图像的基本层数据和残差目标区域对应的目标残差层数据进行编码,从而得到基本层编码数据和目标残差层编码数据,达到了提升图像质量的目的,从而实现了在传输码流较小的前提下,最大程度的提升残差目标区域的图像质量,提升用户的观看体验的技术效果,进而解决了相关技术中在网络带宽有限的的情况下,无法有效提升网络传输的图像质量的技术问题。
可选地,在获取图像的残差层数据之前,上述装置包括:第三获取模块,用于获取图像的原始图像数据和解码后的还原图像数据;第二确定模块,用于根据原始图像数据和还原图像数据,确定残差层数据。
可选地,上述第一获取模块52包括:第一确定单元,用于根据当前网络带宽,确定可传输的编码数据总量;第二确定单元,用于根据编码数据总量和基本层编码数据的数据量,确定可传输的残差层编码数据的数据量;第三确定单元,用于根据残差层编码数据的数据量,确定待传输的残差目标区域。
可选地,感兴趣区域包括图像中视觉最为敏感的区域,上述第三确定单元包括:第一判断子单元,用于在残差层编码数据的数据量小于或等于感兴趣区域对应的残差层编码数据的数据量的情况下,则残差目标区域为部分的感兴趣区域;第二判断子单元,用于在残差层编码数据的数据量大于感兴趣区域对应的残差层编码数据的数据量的情况下,则残差目标区域包括全部的感兴趣区域,以及图像区域除感兴趣区域以外的部分区域;第三判断子单元,用于在残差层编码数据的数据量大于图像对应的残差层编码数据的数据量,则残差目标区域包括全部的图像区域。
可选地,上述编码模块包括:得到单元,用于将残差目标区域以外的残差层数据的像素值设置为预定值,得到目标残差层数据;生成单元,用于对目标残差层数据进行压缩,生成目标残差层编码数据。
实施例4
根据本发明实施例的另外一个方面,还提供了另一种图像的处理装置,图6是根据本发明实施例的另一种图像的处理装置的示意图,如图6所示,该图像的处理装置包括:第二获取模块62,解码模块64以及还原模块66。下面对该图像的处理装置进行详细说明。
第二获取模块62,用于获取图像的基本层编码数据和目标残差层编码数据;解码模块64,连接至上述第二获取模块62,用于分别对基本层编码数据和目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;还原模块66,连接至上述解码模块64,用于将基本层数据和目标残差层数据进行叠加,还原图像。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,例如,对于后者,可以通过以下方式实现:上述各个模块可以位于同一处理器中;或者,上述各个模块以任意组合的方式位于不同的处理器中。
此处需要说明的是,上述第二获取模块62,解码模块64以及还原模块66对应于实施例2中的步骤S402至S406,上述模块与对应的步骤所实现的示例和应用场景相同,但不限于上述实施例2所公开的内容。需要说明的是,上述模块作为装置的一部分可以在诸如一组计算机可执行指令的计算机系统中执行。
由上可知,在本申请上述实施例中,可以实现分别对获取的图像的基本层编码数据和目标残差层编码数据进行解码,得到对应的基本层数据和目标残差层数据,进而将基本层数据和目标残差层数据进行叠加,还原图像,达到了提升图像质量的目的,从而实现了在传输码流较小的前提下,最大程度的提升残差目标区域的图像质量,提升用户的观看体验的技术效果,进而解决了相关技术中在网络带宽有限的的情况下,无法有效提升网络传输的图像质量的技术问题。
实施例5
根据本发明实施例的另一方面,还提供了一种图像的处理系统,图7是根据本发明实施例的图像的处理系统的示意图,如图7所示,该图像的处理系统70包括:编码端72和解码端74,其中,编码端72用于获取图像的基本层数据、残差层数据;基于当前网络带宽,确定残差层数据中待传输的残差目标区域;分别对基本层数据和残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据;解码端74用于获取图像的基本层编码数据和目标残差层编码数据;分别对基本层编码数据和目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;将基本层数据和目标残差层数据进行叠加,还原图像。
实施例6
根据本发明实施例的另一方面,还提供了一种存储介质,存储介质包括存储的程序,其中,在程序运行时控制存储介质所在设备执行上述中任意一项的图像的处理方法。
可选地,在本实施例中,上述存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中,或者位于移动终端群中的任意一个移动终端中,上述存储介质包括存储的程序。
可选地,在程序运行时控制存储介质所在设备执行以下功能:获取图像的基本层数据和残差层数据;基于当前网络带宽,确定残差层数据中待传输的残差目标区域;分别对基本层数据和残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据;和/或,获取图像的基本层编码数据和目标残差层编码数据;分别对基本层编码数据和目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;将基本层数据和目标残差层数据进行叠加,还原图像。
实施例7
根据本发明实施例的另一方面,还提供了一种处理器,处理器用于运行程序,其中,程序运行时执行上述中任意一项的图像的处理方法。
本申请实施例提供了一种设备,设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序,处理器执行程序时实现以下步骤:获取图像的基本层数据和残差层数据;基于当前网络带宽,确定残差层数据中待传输的残差目标区域;分别对基本层数据和残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据;和/或,获取图像的基本层编码数据和目标残差层编码数据;分别对基本层编码数据和目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;将基本层数据和目标残差层数据进行叠加,还原图像。
本申请还提供了一种计算机程序产品,当在数据处理设备上执行时,适于执行初始化有如下方法步骤的程序:获取图像的基本层数据和残差层数据;基于当前网络带宽,确定残差层数据中待传输的残差目标区域;分别对基本层数据和残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据;和/或,获取图像的基本层编码数据和目标残差层编码数据;分别对基本层编码数据和目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;将基本层数据和目标残差层数据进行叠加,还原图像。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (11)
1.一种图像的处理方法,其特征在于,包括:
获取所述图像的基本层数据和残差层数据;
基于当前网络带宽,确定所述残差层数据中待传输的残差目标区域;
分别对所述基本层数据和所述残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据。
2.根据权利要求1所述的方法,其特征在于,在获取所述图像的残差层数据之前,包括:
获取所述图像的原始图像数据和解码后的还原图像数据;
根据所述原始图像数据和所述还原图像数据,确定所述残差层数据。
3.根据权利要求1所述的方法,其特征在于,基于当前网络带宽,确定所述残差层数据中待传输的残差目标区域包括:
根据所述当前网络带宽,确定可传输的编码数据总量;
根据所述编码数据总量和基本层编码数据的数据量,确定可传输的残差层编码数据的数据量;
根据所述残差层编码数据的数据量,确定待传输的所述残差目标区域。
4.根据权利要求3所述的方法,其特征在于,感兴趣区域包括所述图像中视觉最为敏感的区域,根据所述残差层编码数据的数据量,确定待传输的所述残差目标区域包括:
在所述残差层编码数据的数据量小于或等于所述感兴趣区域对应的残差层编码数据的数据量的情况下,则所述残差目标区域为部分的所述感兴趣区域;
在所述残差层编码数据的数据量大于所述感兴趣区域对应的残差层编码数据的数据量的情况下,则所述残差目标区域包括全部的所述感兴趣区域,以及图像区域除所述感兴趣区域以外的部分区域;
在所述残差层编码数据的数据量大于图像对应的残差层编码数据的数据量,则所述残差目标区域包括全部的所述图像区域。
5.根据权利要求1至4中任一项所述的方法,其特征在于,对所述残差目标区域对应的目标残差层数据进行编码,得到目标残差层编码数据包括:
将所述残差目标区域以外的所述残差层数据的像素值设置为预定值,得到所述目标残差层数据;
对所述目标残差层数据进行压缩,生成所述目标残差层编码数据。
6.一种图像的处理方法,其特征在于,包括:
获取所述图像的基本层编码数据和目标残差层编码数据;
分别对所述基本层编码数据和所述目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;
将所述基本层数据和所述目标残差层数据进行叠加,还原所述图像。
7.一种图像的处理装置,其特征在于,包括:
第一获取模块,用于获取所述图像的基本层数据和残差层数据;
第一确定模块,用于基于当前网络带宽,确定所述残差层数据中待传输的残差目标区域;
编码模块,用于分别对所述基本层数据和所述残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据。
8.一种图像的处理装置,其特征在于,包括:
第二获取模块,用于获取所述图像的基本层编码数据和目标残差层编码数据;
解码模块,用于分别对所述基本层编码数据和所述目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;
还原模块,用于将所述基本层数据和所述目标残差层数据进行叠加,还原所述图像。
9.一种图像的处理系统,其特征在于,包括:编码端和解码端,其中,
编码端用于获取所述图像的基本层数据、残差层数据;基于当前网络带宽,确定所述残差层数据中待传输的残差目标区域;分别对所述基本层数据和所述残差目标区域对应的目标残差层数据进行编码,得到基本层编码数据和目标残差层编码数据;
所述解码端用于获取所述图像的基本层编码数据和目标残差层编码数据;分别对所述基本层编码数据和所述目标残差层编码数据进行解码,得到基本层数据和目标残差层数据;将所述基本层数据和所述目标残差层数据进行叠加,还原所述图像。
10.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行权利要求1至6中任意一项所述的图像的处理方法。
11.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行权利要求1至6中任意一项所述的图像的处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010276274.9A CN111464811A (zh) | 2020-04-09 | 2020-04-09 | 图像的处理方法、装置和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010276274.9A CN111464811A (zh) | 2020-04-09 | 2020-04-09 | 图像的处理方法、装置和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111464811A true CN111464811A (zh) | 2020-07-28 |
Family
ID=71681450
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010276274.9A Pending CN111464811A (zh) | 2020-04-09 | 2020-04-09 | 图像的处理方法、装置和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111464811A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112104872A (zh) * | 2020-08-17 | 2020-12-18 | 西安万像电子科技有限公司 | 图像传输方法及装置 |
CN112351282A (zh) * | 2020-10-28 | 2021-02-09 | 西安万像电子科技有限公司 | 图像数据的传输方法及装置、非易失性存储介质及处理器 |
CN113422960A (zh) * | 2021-06-15 | 2021-09-21 | 上海辰珅信息科技有限公司 | 图像的传输方法及装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101163241A (zh) * | 2007-09-06 | 2008-04-16 | 武汉大学 | 一种视频序列编解码体系结构 |
CN101262604A (zh) * | 2008-04-23 | 2008-09-10 | 哈尔滨工程大学 | 一种感兴趣区优先传输的可伸缩视频编码方法 |
CN101478671A (zh) * | 2008-01-02 | 2009-07-08 | 中兴通讯股份有限公司 | 应用于视频监控的视频编码装置及其视频编码方法 |
CN105306945A (zh) * | 2014-07-10 | 2016-02-03 | 北京创鑫汇智科技发展有限责任公司 | 一种监控视频的可伸缩浓缩编码方法和装置 |
WO2018236050A1 (ko) * | 2017-06-20 | 2018-12-27 | 가천대학교 산학협력단 | 모바일 vr을 위한 타일 기반 비디오 스트리밍 |
-
2020
- 2020-04-09 CN CN202010276274.9A patent/CN111464811A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101163241A (zh) * | 2007-09-06 | 2008-04-16 | 武汉大学 | 一种视频序列编解码体系结构 |
CN101478671A (zh) * | 2008-01-02 | 2009-07-08 | 中兴通讯股份有限公司 | 应用于视频监控的视频编码装置及其视频编码方法 |
CN101262604A (zh) * | 2008-04-23 | 2008-09-10 | 哈尔滨工程大学 | 一种感兴趣区优先传输的可伸缩视频编码方法 |
CN105306945A (zh) * | 2014-07-10 | 2016-02-03 | 北京创鑫汇智科技发展有限责任公司 | 一种监控视频的可伸缩浓缩编码方法和装置 |
WO2018236050A1 (ko) * | 2017-06-20 | 2018-12-27 | 가천대학교 산학협력단 | 모바일 vr을 위한 타일 기반 비디오 스트리밍 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112104872A (zh) * | 2020-08-17 | 2020-12-18 | 西安万像电子科技有限公司 | 图像传输方法及装置 |
CN112351282A (zh) * | 2020-10-28 | 2021-02-09 | 西安万像电子科技有限公司 | 图像数据的传输方法及装置、非易失性存储介质及处理器 |
CN113422960A (zh) * | 2021-06-15 | 2021-09-21 | 上海辰珅信息科技有限公司 | 图像的传输方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3633995B1 (en) | Method and device for chroma prediction | |
CN111464811A (zh) | 图像的处理方法、装置和系统 | |
CN112053408B (zh) | 基于深度学习的人脸图像压缩方法及装置 | |
KR100612691B1 (ko) | 동영상 화질 평가시스템 및 방법 | |
CN102308582B (zh) | 用于对图像进行分割编码的方法 | |
CN112884641A (zh) | 图像显示处理的方法、装置和系统 | |
US8681860B2 (en) | Moving picture compression apparatus and method of controlling operation of same | |
CN116668741A (zh) | 云桌面的显示方法、图像显示方法、设备和存储介质 | |
CN110740316A (zh) | 数据编码方法及装置 | |
CN115643406A (zh) | 视频解码方法、视频编码方法、装置、存储介质及设备 | |
Bradley | Can region of interest coding improve overall perceived image quality? | |
CN114222127A (zh) | 一种视频编码方法、视频解码方法及装置 | |
US20020051489A1 (en) | Image matching method, and image processing apparatus and method using the same | |
CN110582022B (zh) | 视频编解码方法和装置及存储介质 | |
CN113207040A (zh) | 一种视频远程快速回放的数据处理方法、装置及系统 | |
CN111491166A (zh) | 基于内容分析的动态压缩系统及方法 | |
CN111212288A (zh) | 视频数据的编解码方法、装置、计算机设备和存储介质 | |
KR101251879B1 (ko) | 멀티미디어 클라우드 시스템에서 화면변화에 따른 광고영상 출력 장치 및 방법 | |
WO2023051705A1 (zh) | 视频通讯方法及装置、电子设备、计算机可读介质 | |
KR102323113B1 (ko) | 화질 개선 영상 기반의 원본 영상 저장장치 및 그를 위한 어플리케이션 | |
CN108632612B (zh) | 编码压缩的方法和装置 | |
CN115499664A (zh) | 视频编码方法、视频解码方法以及编码端或/和解码端 | |
WO2005109749A1 (en) | Methods and systems of monitoring images using mobile communication terminals | |
KR20180021945A (ko) | 인지 화질 향상을 위한 주관적 율 제어 방법 및 장치 | |
KR20180057788A (ko) | 장면 전환에 따른 주관적 율 제어 방법 및 부호화 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200728 |
|
RJ01 | Rejection of invention patent application after publication |