CN108184118A - 云桌面内容编码与解码方法及装置、系统 - Google Patents

云桌面内容编码与解码方法及装置、系统 Download PDF

Info

Publication number
CN108184118A
CN108184118A CN201611125592.5A CN201611125592A CN108184118A CN 108184118 A CN108184118 A CN 108184118A CN 201611125592 A CN201611125592 A CN 201611125592A CN 108184118 A CN108184118 A CN 108184118A
Authority
CN
China
Prior art keywords
macro block
image data
coding
type
cloud desktop
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611125592.5A
Other languages
English (en)
Inventor
吴迪
崔振峰
朱海涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201611125592.5A priority Critical patent/CN108184118A/zh
Priority to PCT/CN2017/113626 priority patent/WO2018103568A1/zh
Publication of CN108184118A publication Critical patent/CN108184118A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H04N19/21Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding with binary alpha-plane coding for video objects, e.g. context-based arithmetic encoding [CAE]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

本发明公开了一种云桌面内容编码与解码方法,方法为:将云桌面的桌面图像按照预设的方式划分为多个宏块,并分别确定每个宏块对应的宏块类型,将文字类或图形类的宏块进行无损压缩编码,将图像类的宏块进行有损压缩编码,并将压缩编码后的图像数据以及所述图像数据对应的宏块类型发送至客户端,客户端根据接收到的宏块类型分别对所述图像数据进行解码。本发明还公开了一种云桌面内容编码与解码装置、系统。本发明通过将云桌面的桌面图像划分为多个宏块,并根据宏块类型对各个宏块进行相应的压缩编码与解码,解决了桌面图像发送到客户端后文字或图形显示模糊的问题,提升了用户的使用体验。

Description

云桌面内容编码与解码方法及装置、系统
技术领域
本发明涉及图像压缩编码与解码技术领域,尤其涉及一种云桌面内容编码与解码方法及装置、系统。
背景技术
随着移动互联网的迅猛发展,云桌面这项应用已经被越来越多的人们所使用。利用云桌面这项应用,用户可以通过PC、笔记本、上网本、Pad、手机等一切可以连接网络的终端设备来进行办公,进入移动办公新时代。
包含云桌面内容的桌面图像是一种混合图像,其中包含了一部分非连续色调变化区域,如文字,图标,图形,还包含了一部分连续色调变化区域,如自然图像,视频等。标准的H.264编码器在对连续色调变化的图像序列进行编码,会有较好的编码效果,但是在对文字或图形区域进行编码时,由于会引入编码损失,使解码后的文字或图形显示有边缘毛刺,失真等现象。H.264编码器能利用空域时域的相关性,提升压缩效率,但是如果直接对桌面图像进行编码的话,会导致解码后的文字或图形显示模糊或失真,影响用户的使用体验。
发明内容
本发明的主要目的在于提出一种云桌面内容编码与解码方法及装置、系统,旨在解决现有技术中对包含云桌面内容的桌面图像进行压缩编码与解码后,会导致文字或图形显示模糊的技术问题,提高用户的使用体验。
为实现上述目的,本发明提供一种云桌面内容编码方法,所述方法包括:
将云桌面的桌面图像按照预设的方式划分为多个宏块,并确定所述多个宏块分别对应的宏块类型;
在所述宏块类型为第一类型的情况下,对所述宏块进行无损压缩编码,在所述宏块类型为第二类型的情况下,对所述宏块进行有损压缩编码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类;
将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端。
优选地,对所述宏块进行无损压缩编码的步骤包括:
对所述宏块进行帧内预测和帧间预测得到预测残差;
将所述预测残差按照预设的压缩方法进行变换,并将变换后的预测残差重新排序后进行基于上下文的自适应二进制算术CABAC熵编码。
优选地,对所述宏块进行无损压缩编码之后还包括:
若编码得到的图像数据的字节bit数大于预设的阈值,则丢弃得到的图像数据,并将所述宏块的编码类型设置为脉冲编码调制PCM类;
若编码得到的图像数据的字节bit数小于或等于预设的阈值,则保留得到的图像数据。
优选地,在将所述宏块的编码类型设置为PCM类之后还包括:
将所述PCM类的宏块按照Zip格式进行压缩编码,得到对应的图像数据。
优选地,对所述宏块进行有损压缩编码的步骤包括:
对所述宏块进行帧内预测和帧间预测得到预测残差;
将所述预测残差进行整数DCT变换,得到频域残差数据,并将所述频域残差数据量化后进行所述CABAC熵编码。
优选地,将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端之前还包括:
检测所述桌面图像是否为参考图像,若是,则对有损压缩编码所得到的图像数据进行去块效应滤波。
此外,为实现上述目的,本发明还提供一种云桌面内容解码方法,所述方法包括:
接收由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型;
在所述图像数据对应的宏块类型为第一类型的情况下,对所述图像数据按照无损压缩编码对应的解码方式进行解码,在所述图像数据对应的宏块类型为第二类型的情况下,对所述图像数据按照有损压缩编码对应的解码方式进行解码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类。
优选地,所述接收由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型之后还包括:
在所述图像数据对应的宏块类型为PCM类的情况下,对所述图像数据按照Zip格式进行解码。
优选地,所述云桌面内容解码方法还包括:
在对接收到的图像数据进行解码后,检测解码后产生的宏块所构成的桌面图像是否为参考图像,若是,则对产生的所述宏块进行去块效应滤波。
此外,为实现上述目的,本发明还提供一种云桌面内容编码装置,所述装置包括:
分类模块,用于将云桌面的桌面图像按照预设的方式划分为多个宏块,并确定所述多个宏块分别对应的宏块类型;
编码模块,用于在所述宏块类型为第一类型的情况下,对所述宏块进行无损压缩编码,在所述宏块类型为第二类型的情况下,对所述宏块进行有损压缩编码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类;
传输模块,用于将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端。
优选地,所述编码模块包括:
无损压缩编码单元,用于对所述宏块进行帧内预测和帧间预测得到预测残差;以及将所述预测残差按照预设的压缩方法进行变换,并将变换后的预测残差重新排序后进行基于上下文的自适应二进制算术CABAC熵编码。
优选地,所述无损压缩编码单元还用于:
若编码得到的图像数据的字节bit数大于预设的阈值,则丢弃得到的图像数据,并将所述宏块的编码类型设置为脉冲编码调制PCM类;
若编码得到的图像数据的字节bit数小于或等于预设的阈值,则保留得到的图像数据。
优选地,所述编码模块包括还包括:
Zip压缩编码单元,用于将所述PCM类的宏块按照Zip格式进行压缩编码,得到对应的图像数据。
优选地,所述编码模块还包括:
有损压缩编码单元,用于对所述宏块进行帧内预测和帧间预测得到预测残差;以及将所述预测残差进行整数DCT变换,得到频域残差数据,并将所述频域残差数据量化后进行所述CABAC熵编码。
优选地,所述云桌面内容编码装置还包括:
第一去块效应滤波模块,用于将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端之前,检测所述桌面图像是否为参考图像,若是,则对有损压缩编码所得到的图像数据进行去块效应滤波。
此外,为实现上述目的,本发明还提供一种云桌面内容解码装置,所述装置包括:
接收模块,用于接收由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型;
解码模块,用于在所述图像数据对应的宏块类型为第一类型的情况下,对所述图像数据按照无损压缩编码对应的解码方式进行解码,在所述图像数据对应的宏块类型为第二类型的情况下,对所述图像数据按照有损压缩编码对应的解码方式进行解码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类。
优选地,所述解码模块还用于:
在所述图像数据对应的宏块类型为PCM类的情况下,对所述图像数据按照Zip格式进行解码。
优选地,所述云桌面内容解码装置还包括:
第二去块效应滤波模块,用于在对接收到的图像数据进行解码后,检测解码后产生的宏块所构成的桌面图像是否为参考图像,若是,则对产生的所述宏块进行去块效应滤波。
此外,为实现上述目的,本发明还提供一种云桌面内容编码与解码系统,所述系统包括云桌面内容编码装置与云桌面内容解码装置,其中,所述云桌面内容编码装置为上述云桌面内容编码装置,所述云桌面内容解码装置为上述云桌面内容解码装置。
本发明所提出的云桌面内容编码与解码方法及装置、系统,通过将云桌面的桌面图像划分为多个宏块,然后对文字类或图形类的宏块进行无损压缩编码,对图像类的宏块进行有损压缩编码,并将编码后的图像数据及所述图像数据对应的宏块类型发送至客户端;另外,客户端在接收到所述图像数据及所述图像数据对应的宏块类型后,对文字类或图形类的宏块压缩编码后的图像数据按照无损压缩编码对应的解码方法进行解码,对图像类的宏块压缩编码后的图像数据按照有损压缩编码对应的解码方法进行解码。本发明在对云桌面的桌面图像进行编码与解码的过程中,由于对文字类或图形类的宏块采用的是无损压缩编码及无损压缩编码对应的解码方式,故客户端将所述文字类或图形类的宏块对应的图像数据进行解码后,可完全恢复原始数据而不引起任何失真,解决了现有技术中云桌面的桌面图像发送到客户端后文字或图形显示模糊的技术问题,提升了用户使用体验。
附图说明
图1是本发明云桌面内容编码方法第一实施例的流程示意图;
图2是本发明云桌面内容编码方法图1所示步骤S120的细化步骤示意图;
图3是本发明云桌面内容编码方法图1所示步骤S120的另一细化步骤示意图;
图4是本发明云桌面内容编码方法第二实施例的流程示意图;
图5是本发明云桌面内容解码方法第一实施例的流程示意图;
图6是本发明云桌面内容解码方法第二实施例的流程示意图;
图7是本发明云桌面内容编码装置第一实施例的模块示意图;
图8是本发明云桌面内容编码装置图7所示编码模块120的细化模块示意图;
图9是本发明云桌面内容编码装置图7所示编码模块120的另一细化模块示意图;
图10是本发明云桌面内容编码装置第二实施例的模块示意图;
图11是本发明云桌面内容解码装置第一实施例的模块示意图;
图12是本发明云桌面内容解码装置第二实施例的模块示意图;
图13是本发明云桌面内容编码与解码系统的结构示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
以下结合说明书附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明,并且在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互组合。
参照图1,图1是本发明云桌面内容编码方法第一实施例的流程示意图。本实施例中,所述云桌面内容编码方法包括:
步骤S110,将云桌面的桌面图像按照预设的方式划分为多个宏块,并确定所述多个宏块分别对应的宏块类型。
本实施例中,所述云桌面的内容是指用户在云服务器请求获取的内容,例如文字、图形、图像或视频等,且云桌面的内容一般是由许多幅桌面图像构成的。为了提高传输速率,云服务器在将云桌面的内容发送至客户端之前需要将所述云桌面的内容进行压缩编码。本步骤中,在将所述云桌面的内容进行压缩编码之前,先将每一幅桌面图像划分为多个宏块,每个宏块包括16×16个像素,然后确定每个宏块分别对应的宏块类型,所述宏块主要可以分为文字类、图形类、图像类。
步骤S120,在所述宏块类型为第一类型的情况下,对所述宏块进行无损压缩编码,在所述宏块类型为第二类型的情况下,对所述宏块进行有损压缩编码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类。
本实施例中,对文字类或图形类的宏块进行无损压缩编码,对图像类的宏块进行有损压缩编码。其中,无损压缩编码是利用数据的冗余进行压缩,可完全恢复原始数据而不引起任何失真,比较适合文字类或图形类的宏块。有损压缩编码是利用了人类对图像中的某些频率成分不敏感的特性,允许压缩过程中损失一定的信息,虽然不能完全恢复原始数据,但是所损失的部分对理解原始图像的影响较小,且压缩比较高,比较适合于图像类的宏块。
其中,上述有损压缩编码及无损压缩编码均可基于H.264压缩编码标准。
步骤S130,将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端。
本实施例中,在对所述多个宏块压缩编码完成以后,将所述多个宏块压缩编码后的图像数据及所述图像数据分别对应的宏块类型同时发送至客户端。
本实施例所述的云桌面内容编码方法,通过将云桌面的桌面图像划分为多个宏块,然后对文字类或图形类的宏块进行无损压缩编码,对图像类的宏块进行有损压缩编码,并将编码后的图像数据及所述图像数据对应的宏块类型发送至客户端,由于在对云桌面的桌面图像进行编码时,对文字类或图形类的宏块采用的是无损压缩编码,故客户端将所述文字类或图形类的宏块对应的图像数据进行解码后,可完全恢复原始数据而不引起任何失真,解决了现有技术中云桌面的桌面图像发送到客户端后文字或图形显示模糊的技术问题,提升了用户使用体验。
进一步地,参照图2,图2是本发明云桌面内容编码方法图1所示步骤S120的细化步骤示意图。基于上述图1所述的实施例,本实施例中,上述步骤S120中对所述宏块进行无损压缩编码的步骤包括:
步骤S121,对所述宏块进行帧内预测和帧间预测得到预测残差;
步骤S122,将所述预测残差按照预设的压缩方法进行变换,并将变换后的预测残差重新排序后进行基于上下文的自适应二进制算术CABAC熵编码。
其中,在所述宏块类型为第一类型的情况下,对所述第一类型的宏块进行帧内预测和帧间预测得到预测残差,然后可采用Transform_bypass类型的变换方式对所述预测残差进行变换,且不对所述预测参差进行频域的变换和量化,从而避免造成编码损失。将变换后的预测残差重新排序后进行基于上下文的自适应二进制算术编码,即CABAC(Context-based Adaptive Binary Arithmetic Coding)熵编码,得到所述第一类型的宏块压缩编码后的图像数据。
进一步地,在对所述宏块进行无损压缩编码之后还包括:
若编码得到的图像数据的字节bit数大于预设的阈值,则丢弃得到的图像数据,并将所述宏块的编码类型设置为脉冲编码调制PCM类;若编码得到的图像数据的字节bit数小于或等于预设的阈值,则保留得到的图像数据。
其中,在对所述宏块进行无损压缩编码之后,判断编码得到的图像数据的字节bit数是否大于预设的阈值,若大于,则放弃得到的图像数据,并将所述宏块的编码类型设置为PCM类,相当于对字节bit数大于预设阈值的图像数据添加一个编码标签;若编码得到的图像数据的bit数小于或等于预设的阈值,则保留得到的图像数据。
本实施例中,在将云桌面的桌面图像按照预设的方式划分为多个宏块后,创建一个大小与所述多个宏块的个数相同的数组mb_is_pcm。在对所述多个宏块进行压缩编码前,数组mb_is_pcm中的所有元素会被初始化为0。在所述宏块类型为第一类型的情况下,若对所述宏块进行无损压缩编码后的得到的图像数据的字节bit数大于预设的阈值,则放弃得到的图像数据,并将所述宏块的编码类型设置为PCM类,以及将数组mb_is_pcm[mb_xy]设置为1,其中,“mb_xy”为所述编码类型为PCM类的宏块的索引信息。若编码得到的图像数据的字节bit数小于或等于预设的阈值,则保留得到的图像数据,数组mb_is_pcm保持不变。
进一步地,参照图3,图3是本发明云桌面内容编码方法图1所示步骤S120的另一细化步骤示意图。基于上述图1所述的实施例,本实施例中,上述步骤S120中对所述宏块进行有损压缩编码的步骤包括:
步骤S123,对所述宏块进行帧内预测和帧间预测得到预测残差;
步骤S124,将所述预测残差进行整数DCT变换,得到频域残差数据,并将所述频域残差数据量化后进行所述CABAC熵编码。
其中,在所述宏块类型为第二类型的情况下,对所述宏块进行帧内预测和帧间预测得到预测残差后,将预测残差进行整数DCT变换,得到频域残差数据,根据码率控制得到的量化系数对所述频域残差数据进行量化,并且对量化后的数据重新排序后进行基于上下文的自适应二进制算术编码,即CABAC熵编码,得到所述宏块压缩编码后的图像数据。
本实施例所述的云桌面内容编码方法,通过对文字类或图形类的宏块进行无损压缩编码,对图像类的宏块进行有损压缩编码,且在对文字类或图形类的宏块进行无损压缩编码后,若编码得到的图像数据的字节bit数大于预设的阈值,则放弃得到的图像数据,并将所述文字类或图形类的宏块的编码类型设置为PCM类,既能够让文字类或图形类的宏块在压缩编码后不会造成数据损失,又可以提高压缩编码的速率。
进一步地,基于上述图1与图2所述的实施例,本实施例中,在将所述宏块的编码类型设置为PCM类之后还包括:
将所述PCM类的宏块按照Zip格式进行压缩编码,得到对应的图像数据。
其中,在对所有的宏块进行压缩编码之后,检测是否存在编码类型为PCM类的宏块,若存在,则将所述PCM类的宏块按照Zip格式进行压缩编码,得到所述PCM类的宏块对应的图像数据。
具体的,在对所有的宏块进行压缩编码之后,根据数组mb_is_pcm的值,判断是否存在编码类型为PCM类的宏块,若存在,则将所述PCM类的宏块按照Zip格式进行压缩编码。例如,在对所有的宏块进行压缩编码之后,检测到数组mb_is_pcm中包含2个值为1的元素,分别为mb_is_pcm[mb_x1y1]、mb_is_pcm[mb_x2y2],则将mb_is_pcm[mb_x1y1]、mb_is_pcm[mb_x2y2]对应的宏块按照Zip格式进行压缩编码,得到所述PCM类的宏块对应的图像数据。并且将得到的所述PCM类的宏块对应的图像数据封装成符合H.264压缩编码标准的NAL包。
另外,本实施例中,也可以在将所述宏块的编码类型设置为PCM类之后,便将所述PCM类的宏块按照Zip格式进行压缩编码,得到对应的图像数据。
本实施例所述的云桌面内容编码方法,在对所有的宏块进行压缩编码之后,检测是否存在编码类型为PCM类的宏块,若存在,则将所述PCM类的宏块按照Zip格式进行压缩编码,得到所述PCM类的宏块对应的图像数据。即本实施例中,在对文字类或图形类的宏块进行压缩编码时,若编码得到的图像数据的字节bit数大于预设的阈值,则放弃得到的图像数据,而采用Zip格式的编码方式,使得该宏块能够以较高的压缩率和压缩速度进行压缩编码,能够有效提高云桌面内容的编码效率。
进一步地,参照图4,图4是本发明云桌面内容编码方法第二实施例的流程示意图。基于上述图1所述的实施例,本实施例中,本发明云桌面内容编码方法还包括:
步骤S140,检测所述桌面图像是否为参考图像,若是,则对有损压缩编码所得到的图像数据进行去块效应滤波。
本实施例中,在将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端之前,检测所述桌面图像是否为参考图像,若是,则对有损压缩编码所得到的图像数据进行去块效应滤波。
其中,标准的H.264编码方法中是会对所有的宏块压缩编码后的图像数据进行去块效应滤波的,但是对于非连续色调区域的文字类或图形类的宏块压缩编码后的图像数据进行去块效应滤波反而会造成明显的失真,所以本实施例中对文字类或图形类的宏块压缩编码后的图像数据不进行去块效应滤波。
具体的,对得到的图像数据进行竖直方向的去块效应滤波处理时,若当前宏块的左边相邻的宏块属于文字类或图形类的宏块,则不对当前宏块与所述文字类或图形类的宏块相邻的竖直边界进行去块效应滤波。对得到的图像数据进行水平方向的去块效应滤波处理时,若当前宏块的上边相邻的宏块属于文字类或图形类的宏块,则不对当前宏块与所述文字类或图形类的宏块相邻的水平边界进行去块效应滤波。
本实施例所述的云桌面内容编码方法,将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端之前,检测桌面图像是否为参考图像,若是,则对有损压缩编码所得到的图像数据进行去块效应滤波,有效避免了在所述图像数据进行解码之后,得到的桌面图像出现方块效应的问题。
参照图5,图5是本发明云桌面内容解码方法第一实施例的流程示意图。本实施例中,所述云桌面内容解码方法包括:
步骤S210,接收由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型。
本实施例中,客户端在向云服务器发送获取请求后,同时接收云服务器发送的由多个宏块经过压缩编码后的图像数据以及所述图像数据对应的宏块类型。
步骤S220,在所述图像数据对应的宏块类型为第一类型的情况下,对所述图像数据按照无损压缩编码对应的解码方式进行解码,在所述图像数据对应的宏块类型为第二类型的情况下,对所述图像数据按照有损压缩编码对应的解码方式进行解码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类。
本实施例中,根据所述图像数据对应的宏块类型分别对所述图像数据进行解码,具体的,在所述图像数据对应的宏块类型为文字类或图形类时,对所述图像数据按照无损压缩编码对应的解码方式进行解码,在所述图像数据对应的宏块类型为图像类时,对所述图像数据按照有损压缩编码对应的解码方式进行解码。
其中,在对所述图像数据进行解码之后,将由所述图像数据解码后产生的宏块所构成的桌面图像在客户端进行显示。
进一步地,本实施例中,客户端在接收到由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型之后还包括:
在所述图像数据对应的宏块类型为PCM类的情况下,对所述图像数据按照Zip格式进行解码。
其中,客户端在接收到由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型之后,判断所述图像数据中是否存在由PCM类的宏块压缩编码后的图像数据,若存在,则将所述由PCM类的宏块压缩编码后的图像数据按照Zip格式进行解码。
其中,在对所述图像数据进行解码时,若遇到由第一类型的宏块压缩编码后的图像数据,则确定所述宏块的编码类型是否为PCM类;若为非PCM类,则将所述图像数据按照无损压缩编码对应的解码方法进行解码;若确定所述宏块的编码类型为PCM类,则不对所述图像数据按照无损压缩编码对应的解码方法进行解码,跳至对下一个宏块压缩编码后的图像数据进行解码。当对最后一个宏块压缩编码后的图像数据进行解码之后,判断所述图像数据中是否存在由PCM类的宏块压缩编码后的图像数据,若存在,则将所述由PCM类的宏块压缩编码后的图像数据按照Zip格式进行解码。
另外,在对所述图像数据进行解码时,还可以在遇到由第一类型的宏块压缩编码后的图像数据时,判断所述宏块的编码类型是否为PCM类;若为非PCM类,则将所述图像数据按照无损压缩编码对应的解码方法进行解码;若确定所述宏块的编码类型为PCM类,则将所述图像数据按照Zip格式进行解码。
本实施例所述的云桌面内容解码方法,客户端在接收到由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型后,对文字类或图形类的宏块压缩编码后的图像数据按照无损压缩编码对应的解码方法进行解码,对图像类的宏块压缩编码后的图像数据按照有损压缩编码对应的解码方法进行解码。本发明在对云桌面的桌面图像进行解码的过程中,由于对文字类或图形类的宏块采用的是无损压缩编码对应的解码方式,故客户端将所述文字类或图形类的宏块对应的图像数据进行解码后,可完全恢复原始数据而不引起任何失真,解决了现有技术中云桌面的桌面图像发送到客户端后文字或图形显示模糊的技术问题,提升了用户使用体验。
进一步地,参照图6,图6是本发明云桌面内容解码方法第二实施例的流程示意图。基于上述图5所述的实施例,本实施例中,所述云桌面内容解码方法还包括:
步骤S230,在对接收到的图像数据进行解码后,检测解码后产生的宏块所构成的桌面图像是否为参考图像,若是,则对产生的所述宏块进行去块效应滤波。
其中,在对接收到的图像数据进行解码后,若检测到解码后产生的宏块所构成的桌面图像为参考图像时,则仅对图像类的宏块对应的图像数据解码后产生的宏块进行去块效应滤波。其中,对所述宏块进行竖直方向的去块效应滤波处理时,若当前宏块的左边相邻的宏块属于文字类或图形类的宏块,则不对当前宏块与所述文字类或图形类的宏块相邻的竖直边界进行去块效应滤波。对图像类的宏块对应的图像数据解码后产生的宏块进行水平方向的去块效应滤波处理时,若当前宏块的上边相邻的宏块属于文字类或图形类的宏块,则不对当前宏块与所述文字类或图形类的宏块相邻的水平边界进行去块效应滤波。
本实施例所述的云桌面内容解码方法,在对接收到的由多个宏块压缩编码后的图像数据进行解码后,若检测到所述图像数据解码后产生的宏块所构成的桌面图像为参考图像,对图像类的宏块对应的图像数据解码后所产生的宏块进行去块效应滤波处理,有效避免了在对所述图像数据进行解码之后,得到的桌面图像出现方块效应的问题。
参照图7,图7是本发明云桌面内容编码装置第一实施例的模块示意图。本实施例中,所述云桌面内容编码装置100包括:
分类模块110,用于将云桌面的桌面图像按照预设的方式划分为多个宏块,并确定所述多个宏块分别对应的宏块类型。
本实施例中,所述云桌面的内容是指用户在云服务器请求获取的内容,例如文字、图形、图像或视频等,且云桌面的内容一般是由许多幅桌面图像构成的。为了提高传输速率,云服务器在将云桌面的内容发送至客户端之前需要将所述云桌面的内容进行压缩编码。本步骤中,在将所述云桌面的内容进行压缩编码之前,先将每一幅桌面图像划分为多个宏块,每个宏块包括16×16个像素,然后确定每个宏块分别对应的宏块类型,所述宏块主要可以分为文字类、图形类、图像类。
编码模块120,用于在所述宏块类型为第一类型的情况下,对所述宏块进行无损压缩编码,在所述宏块类型为第二类型的情况下,对所述宏块进行有损压缩编码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类。
本实施例中,对文字类或图形类的宏块进行无损压缩编码,对图像类的宏块进行有损压缩编码。其中,无损压缩编码是利用数据的冗余进行压缩,可完全恢复原始数据而不引起任何失真,比较适合文字类或图形类的宏块。有损压缩编码是利用了人类对图像中的某些频率成分不敏感的特性,允许压缩过程中损失一定的信息,虽然不能完全恢复原始数据,但是所损失的部分对理解原始图像的影响较小,且压缩比较高,比较适合于图像类的宏块。
其中,上述有损压缩编码及无损压缩编码均可基于H.264压缩编码标准。
传输模块130,用于将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端。
本实施例中,在对所述多个宏块压缩编码完成以后,将所述多个宏块压缩编码后的图像数据及所述图像数据分别对应的宏块类型发送至客户端。
本实施例所述的云桌面内容编码装置,通过将云桌面的桌面图像划分为多个宏块,然后对文字类或图形类的宏块进行无损压缩编码,对图像类的宏块进行有损压缩编码,并将编码后的图像数据及所述图像数据对应的宏块类型发送至客户端,由于在对云桌面的桌面图像进行编码时,对文字类或图形类的宏块采用的是无损压缩编码,故客户端将所述文字类或图形类的宏块对应的图像数据进行解码后,可完全恢复原始数据而不引起任何失真,解决了现有技术中云桌面的桌面图像发送到客户端后文字或图形显示模糊的技术问题,提升了用户使用体验。
进一步地,参照图8,图8是本发明云桌面内容编码装置图7所示编码模块120的细化模块示意图。基于上述图7所述的实施例,本实施例中,上述编码模块120包括:
无损压缩编码单元121,用于对所述宏块进行帧内预测和帧间预测得到预测残差;以及将所述预测残差按照预设的压缩方法进行变换,并将变换后的预测残差重新排序后进行基于上下文的自适应二进制算术CABAC熵编码。
其中,在所述宏块类型为第一类型的情况下,对所述第一类型的宏块进行帧内预测和帧间预测得到预测残差,然后可采用Transform_bypass类型的变换方式对所述预测残差进行变换,且不对所述预测参差进行频域的变换和量化,从而避免造成编码损失。将变换后的预测残差重新排序后进行基于上下文的自适应二进制算术编码,即CABAC(Context-based Adaptive Binary Arithmetic Coding)熵编码,得到所述第一类型的宏块压缩编码后的图像数据。
进一步地,上述无损压缩编码单元121还用于:
若编码得到的图像数据的字节bit数大于预设的阈值,则丢弃得到的图像数据,并将所述宏块的编码类型设置为脉冲编码调制PCM类;若编码得到的图像数据的字节bit数小于或等于预设的阈值,则保留得到的图像数据。
其中,在对所述宏块进行无损压缩编码之后,判断编码得到的图像数据的字节bit数是否大于预设的阈值,若大于,则放弃得到的图像数据,并将所述宏块的编码类型设置为PCM类,相当于对字节bit数大于预设阈值的图像数据添加一个编码标签;若编码得到的图像数据的bit数小于或等于预设的阈值,则保留得到的图像数据。
本实施例中,在将云桌面的桌面图像按照预设的方式划分为多个宏块后,创建一个大小与所述多个宏块的个数相同的数组mb_is_pcm。在对所述多个宏块进行压缩编码前,数组mb_is_pcm中的所有元素会被初始化为0。在所述宏块类型为第一类型的情况下,若对所述宏块进行无损压缩编码后的得到的图像数据的字节bit数大于预设的阈值,则放弃得到的图像数据,并将所述宏块的编码类型设置为PCM类,以及将数组mb_is_pcm[mb_xy]设置为1,其中,“mb_xy”为所述编码类型为PCM类的宏块的索引信息。若编码得到的图像数据的字节bit数小于或等于预设的阈值,则保留得到的图像数据,数组mb_is_pcm保持不变。
进一步地,上述编码模块120还包括:
有损压缩编码单元122,用于对所述宏块进行帧内预测和帧间预测得到预测残差;以及将所述预测残差进行整数DCT变换,得到频域残差数据,并将所述频域残差数据量化后进行所述CABAC熵编码。
其中,在所述宏块类型为第二类型的情况下,对所述宏块进行帧内预测和帧间预测得到预测残差后,将预测残差进行整数DCT变换,得到频域残差数据,根据码率控制得到的量化系数对所述频域残差数据进行量化,并且对量化后的数据重新排序后进行基于上下文的自适应二进制算术编码,即CABAC熵编码,得到所述宏块压缩编码后的图像数据。
本实施例所述的云桌面内容编码装置,通过对文字类或图形类的宏块进行无损压缩编码,对图像类的宏块进行有损压缩编码,且在对文字类或图形类的宏块进行无损压缩编码后,若编码得到的图像数据的字节bit数大于预设的阈值,则放弃得到的图像数据,并将所述文字类或图形类的宏块的编码类型设置为PCM类,既能够让文字类或图形类的宏块在压缩编码后不会造成数据损失,又可以提高压缩编码的速率。
进一步地,参照图9,图9是本发明云桌面内容编码装置图7所示编码模块120的另一细化模块示意图,基于上述图7所述的实施例,本实施例中,所述编码模块120还包括:
Zip压缩编码单元123,用于将所述PCM类的宏块按照Zip格式进行压缩编码,得到对应的图像数据。
其中,在对所有的宏块进行压缩编码之后,检测是否存在编码类型为PCM类的宏块,若存在,则将所述PCM类的宏块按照Zip格式进行压缩编码,得到所述PCM类的宏块对应的图像数据。
具体的,在对所有的宏块进行压缩编码之后,根据数组mb_is_pcm的值,判断是否存在编码类型为PCM类的宏块,若存在,则将所述PCM类的宏块按照Zip格式进行压缩编码。例如,在对所有的宏块进行压缩编码之后,检测到数组mb_is_pcm中包含2个值为1的元素,分别为mb_is_pcm[mb_x1y1]、mb_is_pcm[mb_x2y2],则将mb_is_pcm[mb_x1y1]、mb_is_pcm[mb_x2y2]对应的宏块按照Zip格式进行压缩编码,得到所述PCM类的宏块对应的图像数据。并且将得到的所述PCM类的宏块对应的图像数据封装成符合H.264压缩编码标准的NAL包。
另外,本实施例中,也可以在将所述宏块的编码类型设置为PCM类之后,便将所述PCM类的宏块按照Zip格式进行压缩编码,得到对应的图像数据。
本实施例所述的云桌面内容编码装置,在对所有的宏块进行压缩编码之后,检测是否存在编码类型为PCM类的宏块,若存在,则将所述PCM类的宏块按照Zip格式进行压缩编码,得到所述PCM类的宏块对应的图像数据。即本实施例中,在对文字类或图形类的宏块进行压缩编码时,若编码得到的图像数据的字节bit数大于预设的阈值,则放弃得到的图像数据,而采用Zip格式的编码方式,使得该宏块能够以较高的压缩率和压缩速度进行压缩编码,能够有效提高云桌面内容的编码效率。
进一步地,参照图10,图10是本发明云桌面内容编码装置第二实施例的模块示意图。基于上述图7所述的实施例,本实施例中,本发明云桌面内容编码装置100还包括:
第一去块效应滤波模块140,用于将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端之前,检测所述桌面图像是否为参考图像,若是,则对有损压缩编码所得到的图像数据进行去块效应滤波。
本实施例中,在将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端之前,检测所述桌面图像是否为参考图像,若是,则对有损压缩编码所得到的图像数据进行去块效应滤波。
其中,标准的H.264编码方法中是会对所有的宏块压缩编码后的图像数据进行去块效应滤波的,但是对于非连续色调区域的文字类或图形类的宏块压缩编码后的图像数据进行去块效应滤波反而会造成明显的失真,所以本实施例中对文字类或图形类的宏块压缩编码后的图像数据不进行去块效应滤波。
具体的,对得到的图像数据进行竖直方向的去块效应滤波处理时,若当前宏块的左边相邻的宏块属于文字类或图形类的宏块,则不对当前宏块与所述文字类或图形类的宏块相邻的竖直边界进行去块效应滤波。对得到的图像数据进行水平方向的去块效应滤波处理时,若当前宏块的上边相邻的宏块属于文字类或图形类的宏块,则不对当前宏块与所述文字类或图形类的宏块相邻的水平边界进行去块效应滤波。
本实施例所述的云桌面内容编码装置,将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端之前,检测桌面图像是否为参考图像,若是,则对有损压缩编码所得到的图像数据进行去块效应滤波,有效避免了在所述图像数据进行解码之后,得到的桌面图像出现方块效应的问题。
参照图11,图11是本发明云桌面内容解码装置第一实施例的模块示意图。本实施例中,所述云桌面内容解码装置200包括:
接收模块210,用于接收由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型。
本实施例中,客户端在向云服务器发送获取请求后,同时接收云服务器发送的由多个宏块经过压缩编码后的图像数据以及所述图像数据对应的宏块类型。
解码模块220,用于在所述图像数据对应的宏块类型为第一类型的情况下,对所述图像数据按照无损压缩编码对应的解码方式进行解码,在所述图像数据对应的宏块类型为第二类型的情况下,对所述图像数据按照有损压缩编码对应的解码方式进行解码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类。
本实施例中,根据所述图像数据对应的宏块类型分别对所述图像数据进行解码,具体的,在所述图像数据对应的宏块类型为文字类或图形类时,对所述图像数据按照无损压缩编码对应的解码方式进行解码,在所述图像数据对应的宏块类型为图像类时,对所述图像数据按照有损压缩编码对应的解码方式进行解码。
其中,在对所述图像数据进行解码之后,将由所述图像数据解码后产生的宏块所构成的桌面图像在客户端进行显示。
进一步地,本实施例中,所述解码模块220还用于:
在所述图像数据对应的宏块类型为PCM类的情况下,对所述图像数据按照Zip格式进行解码。
其中,客户端在接收到由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型之后,判断所述图像数据中是否存在由PCM类的宏块压缩编码后的图像数据,若存在,则将所述由PCM类的宏块压缩编码后的图像数据按照Zip格式进行解码。
其中,在对所述图像数据进行解码时,若遇到由第一类型的宏块压缩编码后的图像数据,则确定所述宏块的编码类型是否为PCM类;若为非PCM类,则将所述图像数据按照无损压缩编码对应的解码方法进行解码;若确定所述宏块的编码类型为PCM类,则不对所述图像数据按照无损压缩编码对应的解码方法进行解码,跳至对下一个宏块压缩编码后的图像数据进行解码。当对最后一个宏块压缩编码后的图像数据进行解码之后,判断所述图像数据中是否存在由PCM类的宏块压缩编码后的图像数据,若存在,则将所述由PCM类的宏块压缩编码后的图像数据按照Zip格式进行解码。
另外,在对所述图像数据进行解码时,还可以在遇到由第一类型的宏块压缩编码后的图像数据时,判断所述宏块的编码类型是否为PCM类;若为非PCM类,则将所述图像数据按照无损压缩编码对应的解码方法进行解码;若确定所述宏块的编码类型为PCM类,则将所述图像数据按照Zip格式进行解码。
本实施例所述的云桌面内容解码装置,客户端在接收到由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型后,对文字类或图形类的宏块压缩编码后的图像数据按照无损压缩编码对应的解码方法进行解码,对图像类的宏块压缩编码后的图像数据按照有损压缩编码对应的解码方法进行解码。本发明在对云桌面的桌面图像进行解码的过程中,由于对文字类或图形类的宏块采用的是无损压缩编码对应的解码方式,故客户端将所述文字类或图形类的宏块对应的图像数据进行解码后,可完全恢复原始数据而不引起任何失真,解决了现有技术中云桌面的桌面图像发送到客户端后文字或图形显示模糊的技术问题,提升了用户使用体验。
进一步地,参照图12,图12是本发明云桌面内容解码装置第二实施例的模块示意图。基于上述图11所述的实施例,本实施例中,所述云桌面内容解码装置还包括:
第二去块效应滤波模块230,用于在对接收到的图像数据进行解码后,检测解码后产生的宏块所构成的桌面图像是否为参考图像,若是,则对产生的所述宏块进行去块效应滤波。
其中,在对接收到的图像数据进行解码后,若检测到解码后产生的宏块所构成的桌面图像为参考图像时,则仅对图像类的宏块对应的图像数据解码后产生的宏块进行去块效应滤波。其中,对所述宏块进行竖直方向的去块效应滤波处理时,若当前宏块的左边相邻的宏块属于文字类或图形类的宏块,则不对当前宏块与所述文字类或图形类的宏块相邻的竖直边界进行去块效应滤波。对图像类的宏块对应的图像数据解码后产生的宏块进行水平方向的去块效应滤波处理时,若当前宏块的上边相邻的宏块属于文字类或图形类的宏块,则不对当前宏块与所述文字类或图形类的宏块相邻的水平边界进行去块效应滤波。
本实施例所述的云桌面内容解码装置,在对接收到的由多个宏块压缩编码后的图像数据进行解码后,若检测到所述图像数据解码后产生的宏块所构成的桌面图像为参考图像,对图像类的宏块对应的图像数据解码后所产生的宏块进行去块效应滤波处理,有效避免了在对所述图像数据进行解码之后,得到的桌面图像出现方块效应的问题。
进一步地,参照图13,图13是本发明云桌面内容编码与解码系统的结构示意图。本实施例中,所述云桌面内容编码与解码系统包括云桌面内容编码装置与云桌面内容解码装置,其中,所述云桌面内容编码装置为上述云桌面内容编码装置100;所述云桌面内容解码装置为上述云桌面内容解码装置200,在此不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台终端设备执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (19)

1.一种云桌面内容编码方法,其特征在于,所述方法包括:
将云桌面的桌面图像按照预设的方式划分为多个宏块,并确定所述多个宏块分别对应的宏块类型;
在所述宏块类型为第一类型的情况下,对所述宏块进行无损压缩编码,在所述宏块类型为第二类型的情况下,对所述宏块进行有损压缩编码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类;
将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端。
2.根据权利要求1所述的云桌面内容编码方法,其特征在于,对所述宏块进行无损压缩编码的步骤包括:
对所述宏块进行帧内预测和帧间预测得到预测残差;
将所述预测残差按照预设的压缩方法进行变换,并将变换后的预测残差重新排序后进行基于上下文的自适应二进制算术CABAC熵编码。
3.根据权利要求2所述的云桌面内容编码方法,其特征在于,对所述宏块进行无损压缩编码之后还包括:
若编码得到的图像数据的字节bit数大于预设的阈值,则丢弃得到的图像数据,并将所述宏块的编码类型设置为脉冲编码调制PCM类;
若编码得到的图像数据的字节bit数小于或等于预设的阈值,则保留得到的图像数据。
4.根据权利要求3所述的云桌面内容编码方法,其特征在于,在将所述宏块的编码类型设置为PCM类之后还包括:
将所述PCM类的宏块按照Zip格式进行压缩编码,得到对应的图像数据。
5.根据权利要求1所述的云桌面内容编码方法,其特征在于,对所述宏块进行有损压缩编码的步骤包括:
对所述宏块进行帧内预测和帧间预测得到预测残差;
将所述预测残差进行整数DCT变换,得到频域残差数据,并将所述频域残差数据量化后进行所述CABAC熵编码。
6.根据权利要求1至5任意一项所述的云桌面内容编码方法,其特征在于,将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端之前还包括:
检测所述桌面图像是否为参考图像,若是,则对有损压缩编码所得到的图像数据进行去块效应滤波。
7.一种云桌面内容解码方法,其特征在于,所述方法包括:
接收由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型;
在所述图像数据对应的宏块类型为第一类型的情况下,对所述图像数据按照无损压缩编码对应的解码方式进行解码,在所述图像数据对应的宏块类型为第二类型的情况下,对所述图像数据按照有损压缩编码对应的解码方式进行解码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类。
8.根据权利要求7所述的云桌面内容解码方法,其特征在于,所述接收由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型之后还包括:
在所述图像数据对应的宏块类型为PCM类的情况下,对所述图像数据按照Zip格式进行解码。
9.根据权利要求7或8任意一项所述的云桌面内容解码方法,其特征在于,所述云桌面内容解码方法还包括:
在对接收到的图像数据进行解码后,检测解码后产生的宏块所构成的桌面图像是否为参考图像,若是,则对产生的所述宏块进行去块效应滤波。
10.一种云桌面内容编码装置,其特征在于,所述装置包括:
分类模块,用于将云桌面的桌面图像按照预设的方式划分为多个宏块,并确定所述多个宏块分别对应的宏块类型;
编码模块,用于在所述宏块类型为第一类型的情况下,对所述宏块进行无损压缩编码,在所述宏块类型为第二类型的情况下,对所述宏块进行有损压缩编码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类;
传输模块,用于将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端。
11.根据权利要求10所述的云桌面内容编码装置,其特征在于,所述编码模块包括:
无损压缩编码单元,用于对所述宏块进行帧内预测和帧间预测得到预测残差;以及将所述预测残差按照预设的压缩方法进行变换,并将变换后的预测残差重新排序后进行基于上下文的自适应二进制算术CABAC熵编码。
12.根据权利要求11所述的云桌面内容编码装置,其特征在于,所述无损压缩编码单元还用于:
若编码得到的图像数据的字节bit数大于预设的阈值,则丢弃得到的图像数据,并将所述宏块的编码类型设置为脉冲编码调制PCM类;
若编码得到的图像数据的字节bit数小于或等于预设的阈值,则保留得到的图像数据。
13.根据权利要求12所述的云桌面内容编码装置,其特征在于,所述编码模块包括还包括:
Zip压缩编码单元,用于将所述PCM类的宏块按照Zip格式进行压缩编码,得到对应的图像数据。
14.根据权利要求10所述的云桌面内容编码装置,其特征在于,所述编码模块还包括:
有损压缩编码单元,用于对所述宏块进行帧内预测和帧间预测得到预测残差;以及将所述预测残差进行整数DCT变换,得到频域残差数据,并将所述频域残差数据量化后进行所述CABAC熵编码。
15.根据权利要求10至14任意一项所述的云桌面内容编码装置,其特征在于,所述云桌面内容编码装置还包括:
第一去块效应滤波模块,用于将编码得到的图像数据及所述图像数据对应的宏块类型发送至客户端之前,检测所述桌面图像是否为参考图像,若是,则对有损压缩编码所得到的图像数据进行去块效应滤波。
16.一种云桌面内容解码装置,其特征在于,所述装置包括:
接收模块,用于接收由云桌面的桌面图像划分的多个宏块压缩编码后的图像数据,以及所述图像数据对应的宏块类型;
解码模块,用于在所述图像数据对应的宏块类型为第一类型的情况下,对所述图像数据按照无损压缩编码对应的解码方式进行解码,在所述图像数据对应的宏块类型为第二类型的情况下,对所述图像数据按照有损压缩编码对应的解码方式进行解码,其中,所述第一类型包括文字类或图形类,所述第二类型包括图像类。
17.根据权利要求16所述的云桌面内容解码装置,其特征在于,所述解码模块还用于:
在所述图像数据对应的宏块类型为PCM类的情况下,对所述图像数据按照Zip格式进行解码。
18.根据权利要求16或17任意一项所述的云桌面内容解码装置,其特征在于,所述云桌面内容解码装置还包括:
第二去块效应滤波模块,用于在对接收到的图像数据进行解码后,检测解码后产生的宏块所构成的桌面图像是否为参考图像,若是,则对产生的所述宏块进行去块效应滤波。
19.一种云桌面内容编码与解码系统,其特征在于,所述系统包括云桌面内容编码装置与云桌面内容解码装置,其中,所述云桌面内容编码装置为如权利要求10至15任意一项所述的云桌面内容编码装置,所述云桌面内容解码装置为如权利要求16至18任意一项所述的云桌面内容解码装置。
CN201611125592.5A 2016-12-08 2016-12-08 云桌面内容编码与解码方法及装置、系统 Pending CN108184118A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201611125592.5A CN108184118A (zh) 2016-12-08 2016-12-08 云桌面内容编码与解码方法及装置、系统
PCT/CN2017/113626 WO2018103568A1 (zh) 2016-12-08 2017-11-29 云桌面内容编码与解码方法及装置、系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611125592.5A CN108184118A (zh) 2016-12-08 2016-12-08 云桌面内容编码与解码方法及装置、系统

Publications (1)

Publication Number Publication Date
CN108184118A true CN108184118A (zh) 2018-06-19

Family

ID=62490690

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611125592.5A Pending CN108184118A (zh) 2016-12-08 2016-12-08 云桌面内容编码与解码方法及装置、系统

Country Status (2)

Country Link
CN (1) CN108184118A (zh)
WO (1) WO2018103568A1 (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109168006A (zh) * 2018-09-05 2019-01-08 高新兴科技集团股份有限公司 一种图形和图像共存的视频编解码方法
WO2020135357A1 (zh) * 2018-12-29 2020-07-02 中兴通讯股份有限公司 数据压缩方法及装置、数据编码/解码方法及装置
CN111447452A (zh) * 2020-03-30 2020-07-24 西安万像电子科技有限公司 数据编码方法及系统
CN111464812A (zh) * 2020-04-17 2020-07-28 西安万像电子科技有限公司 编码解码的方法、系统、装置、存储介质及处理器
CN111506374A (zh) * 2020-04-12 2020-08-07 北京华如科技股份有限公司 基于不同对象的云应用ui交互方法及装置
CN111526364A (zh) * 2020-05-09 2020-08-11 西安万像电子科技有限公司 图像处理的方法、装置和系统
CN112839226A (zh) * 2019-11-25 2021-05-25 深信服科技股份有限公司 一种图像编码、解码方法、相关装置及存储介质
CN113573059A (zh) * 2021-09-23 2021-10-29 中兴通讯股份有限公司 图像显示方法、装置、存储介质及电子装置
CN116781906A (zh) * 2023-07-03 2023-09-19 深圳市青葡萄科技有限公司 一种图文清晰度优化方法、设备及存储介质
WO2024094077A1 (zh) * 2022-11-02 2024-05-10 杭州阿里云飞天信息技术有限公司 云桌面图像的处理方法和图像处理方法、设备及存储介质

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112087660A (zh) * 2019-06-14 2020-12-15 华为技术有限公司 视频处理方法、装置及设备
CN110913017B (zh) * 2019-12-19 2023-01-17 深圳市原创科技有限公司 一种基于云桌面的文件压缩传输方法
CN113157226A (zh) * 2020-01-22 2021-07-23 阿里巴巴集团控股有限公司 远程数据的显示方法、装置、设备及机器可读存储介质
US11917072B2 (en) * 2020-12-03 2024-02-27 International Business Machines Corporation Implementing opportunistic authentication of encrypted data
CN116708800A (zh) * 2023-08-01 2023-09-05 天津卓朗昆仑云软件技术有限公司 图像编码与解码方法、装置及系统

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101087408A (zh) * 2006-06-09 2007-12-12 松下电器产业株式会社 图像编码记录装置及其图像编码记录方法
CN101217668A (zh) * 2008-01-14 2008-07-09 浙江大学 基于块分类的混合图像压缩方法
CN101933331A (zh) * 2007-09-06 2010-12-29 日本电气株式会社 视频编码装置、视频解码装置、视频编码方法、视频解码方法、视频编码或解码程序
CN103402091A (zh) * 2013-07-31 2013-11-20 上海通途半导体科技有限公司 云桌面图像分类与编码方法
CN103412701A (zh) * 2012-11-01 2013-11-27 华为技术有限公司 远程桌面图像处理方法及装置
CN103747077A (zh) * 2013-12-31 2014-04-23 华为技术有限公司 一种传输机制调整方法和服务端、客户端
WO2014079036A1 (zh) * 2012-11-23 2014-05-30 华为技术有限公司 图像压缩方法及图像处理装置
US8873872B1 (en) * 2012-04-18 2014-10-28 Matrox Graphics Inc. Division of entropy coding in codecs
US9025898B2 (en) * 2009-04-06 2015-05-05 Red Hat Israel, Ltd. Dynamically selecting compression method for graphics remoting
CN105681791A (zh) * 2016-01-18 2016-06-15 武汉理工大学 自适应远程桌面传输方法与系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8189661B2 (en) * 2009-03-09 2012-05-29 Microsoft Corporation Remote desktop protocol (RDP) tile image classification for improving compression efficiency and quality

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101087408A (zh) * 2006-06-09 2007-12-12 松下电器产业株式会社 图像编码记录装置及其图像编码记录方法
CN101933331A (zh) * 2007-09-06 2010-12-29 日本电气株式会社 视频编码装置、视频解码装置、视频编码方法、视频解码方法、视频编码或解码程序
CN101217668A (zh) * 2008-01-14 2008-07-09 浙江大学 基于块分类的混合图像压缩方法
US9025898B2 (en) * 2009-04-06 2015-05-05 Red Hat Israel, Ltd. Dynamically selecting compression method for graphics remoting
US8873872B1 (en) * 2012-04-18 2014-10-28 Matrox Graphics Inc. Division of entropy coding in codecs
CN103412701A (zh) * 2012-11-01 2013-11-27 华为技术有限公司 远程桌面图像处理方法及装置
WO2014079036A1 (zh) * 2012-11-23 2014-05-30 华为技术有限公司 图像压缩方法及图像处理装置
CN103402091A (zh) * 2013-07-31 2013-11-20 上海通途半导体科技有限公司 云桌面图像分类与编码方法
CN103747077A (zh) * 2013-12-31 2014-04-23 华为技术有限公司 一种传输机制调整方法和服务端、客户端
CN105681791A (zh) * 2016-01-18 2016-06-15 武汉理工大学 自适应远程桌面传输方法与系统

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109168006A (zh) * 2018-09-05 2019-01-08 高新兴科技集团股份有限公司 一种图形和图像共存的视频编解码方法
WO2020135357A1 (zh) * 2018-12-29 2020-07-02 中兴通讯股份有限公司 数据压缩方法及装置、数据编码/解码方法及装置
CN112839226A (zh) * 2019-11-25 2021-05-25 深信服科技股份有限公司 一种图像编码、解码方法、相关装置及存储介质
CN112839226B (zh) * 2019-11-25 2024-02-23 深信服科技股份有限公司 一种图像编码、解码方法、相关装置及存储介质
CN111447452A (zh) * 2020-03-30 2020-07-24 西安万像电子科技有限公司 数据编码方法及系统
CN111506374A (zh) * 2020-04-12 2020-08-07 北京华如科技股份有限公司 基于不同对象的云应用ui交互方法及装置
CN111464812A (zh) * 2020-04-17 2020-07-28 西安万像电子科技有限公司 编码解码的方法、系统、装置、存储介质及处理器
CN111464812B (zh) * 2020-04-17 2022-06-10 重庆京像微电子有限公司 编码解码的方法、系统、装置、存储介质及处理器
CN111526364A (zh) * 2020-05-09 2020-08-11 西安万像电子科技有限公司 图像处理的方法、装置和系统
CN113573059A (zh) * 2021-09-23 2021-10-29 中兴通讯股份有限公司 图像显示方法、装置、存储介质及电子装置
WO2024094077A1 (zh) * 2022-11-02 2024-05-10 杭州阿里云飞天信息技术有限公司 云桌面图像的处理方法和图像处理方法、设备及存储介质
CN116781906A (zh) * 2023-07-03 2023-09-19 深圳市青葡萄科技有限公司 一种图文清晰度优化方法、设备及存储介质

Also Published As

Publication number Publication date
WO2018103568A1 (zh) 2018-06-14

Similar Documents

Publication Publication Date Title
CN108184118A (zh) 云桌面内容编码与解码方法及装置、系统
CN107566848B (zh) 编解码的方法及装置
JP6199311B2 (ja) 映像コード化における係数のコード化
CN107197260A (zh) 基于卷积神经网络的视频编码后置滤波方法
US9386319B2 (en) Post-process filter for decompressed screen content
CN101742294B (zh) 一种提高监控视频压缩率的方法和设备
US20130114687A1 (en) Fixed intra run-level mode for cavlc in hevc
CN104025589A (zh) 基于图像细化的视频编码和解码
KR101724555B1 (ko) 부호화 방법 및 장치와 복호화 방법 및 장치
CN104581177A (zh) 一种结合块匹配和串匹配的图像压缩方法和装置
CN104270641A (zh) 变换系数的处理方法和装置
US20130114684A1 (en) Electronic devices for selective run-level coding and decoding
CN117480778A (zh) 残差编码和视频编码方法、装置、设备和系统
US10021398B2 (en) Adaptive tile data size coding for video and image compression
CN114640857B (zh) 基于改进哈夫曼编码的图像压缩方法、3d降噪方法
Kabir et al. Edge-based transformation and entropy coding for lossless image compression
WO2024078066A1 (zh) 视频解码方法、视频编码方法、装置、存储介质及设备
CN112001854A (zh) 一种编码图像的修复方法及相关系统和装置
CN115086670B (zh) 一种面向高清显微视频的低码率编解码方法及系统
KR20060127344A (ko) 컴퓨터 스크린 이미지 압축 장치 및 그 방법
CN109561312A (zh) 一种带宽压缩中自适应分割的像素值差异预测方法
CN116708793B (zh) 视频的传输方法、装置、设备及存储介质
WO2023231775A1 (zh) 滤波方法、滤波模型训练方法及相关装置
CN116760976B (zh) 仿射预测决策方法、装置、设备及存储介质
EP4354861A1 (en) Video decoding and coding method, device and storage medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180619

RJ01 Rejection of invention patent application after publication