CN110392259A - 影像压缩系统及利用影像压缩系统以压缩影像画面的方法 - Google Patents

影像压缩系统及利用影像压缩系统以压缩影像画面的方法 Download PDF

Info

Publication number
CN110392259A
CN110392259A CN201810338141.2A CN201810338141A CN110392259A CN 110392259 A CN110392259 A CN 110392259A CN 201810338141 A CN201810338141 A CN 201810338141A CN 110392259 A CN110392259 A CN 110392259A
Authority
CN
China
Prior art keywords
block
post
image
image block
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810338141.2A
Other languages
English (en)
Inventor
黄奕勤
童怡新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MStar Semiconductor Inc Taiwan
Original Assignee
MStar Semiconductor Inc Taiwan
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MStar Semiconductor Inc Taiwan filed Critical MStar Semiconductor Inc Taiwan
Priority to CN201810338141.2A priority Critical patent/CN110392259A/zh
Publication of CN110392259A publication Critical patent/CN110392259A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H04N19/426Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression

Abstract

本发明涉及影像压缩系统及利用该影像压缩系统以压缩影像画面的方法,该方法包含将影像画面的多个影像区块的显示数据依逐列扫描的次序传送至后处理单元,及当后处理单元接收到影像区块的显示数据时,后处理单元自缓冲存储器中读取对应于影像区块的缓冲区块的待处理数据,根据影像区块的显示数据及缓冲区块的待处理数据对缓冲区块的待处理数据及影像区块中的主要子区块的显示数据进行后处理程序以产生后处理影像区块的后处理数据,及将影像区块中的待处理子区块的待处理数据储存至缓冲存储器。压缩单元将后处理影像区块的后处理数据压缩成后处理影像区块的压缩数据。

Description

影像压缩系统及利用影像压缩系统以压缩影像画面的方法
技术领域
本发明有关于一种影像压缩系统,特别是一种能够减少缓冲存储器大小的影像压缩系统。
背景技术
在已有技术中,为了减少储存影像所需的存储器空间及频宽,可透过各式不同的影像编码演算法对影像进行压缩,而在许多常见的编码演算法中,例如视频编码标准H.264、高效率视频编码(High Efficiency Video Coding,HEVC)及由Google所提出的VP8影像压缩格式,都会先将待压缩的影像画面分割成多个影像区块,并对每一个影像区块进行压缩。而在解压缩的过程中,也会对逐个影像区块进行解压缩。在影像区块被解压缩还原之后,并要存入外部存储器之前,为了减少解压缩芯片与外部存储器之间所需的频宽,有部分已有技术会先对影像区块进行压缩,再进行储存。
图1为先前技术在将影像画面IMG0存入外部存储器之前,待压缩影像画面IMG0的示意图,在图1中待压缩影像画面IMG0包含多个影像区块BLK(1,1)至BLK(X,Y)。其中X及Y为大于1的正整数。在先前技术的编码演算法中,待压缩影像画面IMG0的多个影像区块BLK(1,1)至BLK(X,Y)会以逐列扫描(raster scan)的顺序依序进行压缩。也就是说,先前技术的编码演算法会先对第一列影像区块BLK(1,1)、BLK(1,2)至BLK(1,Y)依序进行压缩,接着在对第二列影像区块BLK(2,1)、BLK(2,2)至BLK(2,Y)依序进行压缩,并依此类推。
此外,在对每一个影像区块进行压缩之前,为避免在各个影像区块之间的边界上产生缺陷,还会先对每一个影像区块进行后处理程序,在后处理程序中,常会根据每一个影像区块以及与其相邻的影像区块的显示数据来进行运算。举例来说,在上述的视频编码标准H.264、高效率视频编码及VP8影像压缩格式中,其后处理程序皆包含了在后处理程序中进行去区块滤波(deblocking filtering)的步骤。
在对图1的影像区块BLK(2,1)进行后处理程序时,除了影像区块BLK(2,1)的子区块A(2,1)可在不参考其他影像区块的显示数据的情况下完成后处理程序之外,当对影像区块BLK(2,1)中的子区块S(2,1)进行后处理程序时,则除了需要影像区块BLK(2,1)的显示数据之外,还需要位于影像区块BLK(2,1)右侧之的像区块BLK(2,2)的子区块S'(2,2)的显示数据才能进行去区块滤波的步骤。相似地,当欲对影像区块BLK(2,1)中的子区块C(2,1)进行后处理程序时,除了需要影像区块BLK(2,1)的显示数据之外,还需要位于影像区块BLK(2,1)下方的影像区块BLK(3,1)的子区块C'(3,1)的显示数据才能进行去区块滤波的步骤。
然而根据逐列扫描的顺序,影像区块BLK(3,1)的显示数据会在陆续接收了影像区块BLK(2,2)至影像区块BLK(2,Y)之后才接收。因此,为了能够完成编码演算法所需的后处理程序,在先前技术的影像压缩过程中,会先将影像区块BLK(2,1)的显示数据暂时储存到缓冲存储器中,并在接收到影像区块BLK(3,1)后,才能完成后处理程序。否则,若在对影像区块BLK(2,1)完成压缩并存入外部存储器之后,即无法单独读出影像区块BLK(2,1)中的子区块C(2,1)的显示数据,而需要将整块影像区块BLK(2,1)读出还原再重新写入。不仅如此,在重新写入时,由于所需的存储器空间可能会较原先所使用的存储器空间增加或减少,导致多余的数据必须写入其他的存储器或者在原先使用的存储器空间中留下未被利用的空间,造成外部存储器的浪费。
同样地,为了完成影像区块BLK(2,2)的后处理程序,会先将影像区块BLK(2,2)的显示数据暂时储存到缓冲存储器中,并在接收到影像区块BLK(3,2)后,才能完成后处理程序。
如此一来,虽然先前技术能够完成后处理程序,然而其需要利用大量的缓冲存储器来存放影像区块的显示数据,例如一整列影像区块的显示数据。此外,每个影像区块中其实有部分子区块的显示数据其实并不需要参考其他影像区块的显示数据即能够完成后处理程序,然而先前技术仍会将整块影像区块的显示数据都存入存储器中。对于影像压缩系统而言,如此大的存储器不仅造成额外的硬体负担,同时也增加整体系统的耗电及所需频宽。因此如何更有效的压缩影像亟成为有待解决的问题。
发明内容
本发明的一实施例提供一种利用影像压缩系统以压缩影像画面的方法,影像压缩系统包含后处理单元、压缩单元、缓冲存储器,方法包含将影像画面的多个影像区块的显示数据依逐列扫描(raster scan)的次序传送至后处理单元。每一影像区块包含N列像素,N为大于1的正整数。
当后处理单元接收到第一影像区块的显示数据,且第一影像区块并非影像画面中位于第一列且并非影像画面中位于最后一列的影像区块时,后处理单元自缓冲存储器中读取对应于第一影像区块的第一缓冲区块的待处理数据,并根据至少第一影像区块的显示数据及第一缓冲区块的待处理数据对第一缓冲区块的待处理数据及第一影像区块中的第一主要子区块的显示数据进行编码演算法之后处理程序以产生第一后处理影像区块的后处理数据。后处理单元将第一影像区块中不属于第一主要子区块的第一待处理子区块的待处理数据储存至缓冲存储器。压缩单元将第一后处理影像区块的后处理数据压缩成第一后处理影像区块的压缩数据。
第一待处理子区块为第一影像区块中最末n列的像素,第一主要子区块为第一影像区块中最前(N-n)列的像素,n为小于N的正整数。
本发明的另一实施例提供一种影像压缩系统,影像压缩系统包含后处理单元、压缩单元、缓冲存储器。后处理单元耦接于缓冲存储器及压缩单元。
压缩单元根据编码演算法压缩影像数据。后处理单元依逐列扫描的次序接收影像画面的多个影像区块的显示数据,其中每一影像区块包含N列像素,N为大于1的正整数。
当后处理单元接收到第一影像区块的显示数据,且第一影像区块并非影像画面中位于第一列且并非影像画面中位于最后一列的影像区块时,后处理单元自缓冲存储器中读取对应于第一影像区块的第一缓冲区块的待处理数据,根据至少第一影像区块的显示数据及第一缓冲区块的待处理数据对第一缓冲区块的待处理数据及第一影像区块中的第一主要子区块的显示数据进行编码演算法之后处理程序以产生第一后处理影像区块的后处理数据,及将第一影像区块中不属于第一主要子区块的第一待处理子区块的待处理数据储存至缓冲存储器。压缩单元则另将第一后处理影像区块的后处理数据压缩成第一后处理影像区块的压缩数据。
第一待处理子区块为第一影像区块中最末n列的像素,第一主要子区块为第一影像区块中最前(N-n)列的像素,n为小于N的正整数。
附图说明
图1为已有技术的待压缩影像画面的示意图
图2为本发明一实施例的影像压缩系统的示意图。
图3为利用图2的影像压缩系统对影像画面进行压缩时所对应的影像区块示意图。
图4和5为本发明一实施例的利用影像压缩系统压缩影像画面的方法的流程图。
符号说明
IMG0 影像画面
BLK(1,1)至BLK(X,Y) 影像区块
C(1,1)至C(X,Y)、C'(3,1)、S(2,1)、子区块
S'(2,2)、A(1,1)至A(X,Y)、B(1,1)至B(X,Y)
100 影像压缩系统
110 压缩单元
120 缓冲存储器
130 后处理单元
EMEM 外部存储器
M(1,1)至M(X,Y)主要子区块
BUF(2,1)至BUF(X,Y)后处理影像区块
PBLK(1,1)至PBLK(X,Y)后处理影像区块
PBLK'(X,1)至PBLK'(X,Y)附带后处理影像区块
Dn(1,1)至Dn(1,Y)、n列冗余像素
DNn(X,1)至DNn(X,Y)、N-n列冗余像素
200 方法
S210至S260 步骤
具体实施方式
图2为本发明一实施例的影像压缩系统100的示意图。影像压缩系统100包含压缩单元110、缓冲存储器120及后处理单元130。后处理单元130耦接于缓冲存储器120及压缩单元110。
影像压缩系统100可在将影像画面储存至外部存储器EMEM之前,透过压缩单元110先将影像画面压缩之后,再存入外部存储器EMEM,以减少系统所需的频宽。在本发明的部分实施例中,压缩单元110可选择已知的无失真编码演算法来压缩影像数据。
图3为利用影像压缩系统100对影像画面IMG0进行压缩时所对应的影像区块示意图。当利用影像压缩系统100对影像画面IMG0进行影像压缩时,影像画面IMG0会被分割成多个影像区块BLK(1,1)至BLK(X,Y),而后处理单元130会依逐列扫描的次序接收影像画面IMG0的多个影像区块BLK(1,1)至BLK(X,Y)的显示数据。
每一影像区块BLK(1,1)至BLK(X,Y)包含N列像素,N为大于1的正整数,且根据不同的编码演算法,N的数值也可能有所差异,举例来说视频编码标准H.264设定每个影像区块包含16列的像素,亦即N为16;而高效率视频编码则设定每个影像区块包含64列的像素,亦即N为64。每一影像区块BLK(1,1)至BLK(X,Y)的显示数据即包含每一影像区块BLK(1,1)至BLK(X,Y)中各个像素的显示数据。举例来说,影像区块BLK(1,1)的显示数据可包含影像区块BLK(1,1)中各个像素以亮度(luminance)及色度(chrominance)定义出的YCbCr值,或是以其他种类的色彩空间所定义的显示值。
在本发明的部分实施例中,由于在对每一个影像区块进行影像压的后处理程序时,其影像区块中可能仅有部分子区块的像素需要参考其他影像区块的显示数据才能够进行影像压缩的后处理程序,而仍有部分子区块的像素无须参考其他影像区块的显示数据就能够进行影像压缩的后处理程序。为了减少缓冲存储器120的大小,影像压缩系统100可将需在取得其他影像区块的显示数据后才能够进行后处理程序的子区块储存至缓冲存储器120,而不会将整个影像区块的显示数据都储存至缓冲存储器120。如此一来,就能够大大降低缓冲存储器120的大小。
举例来说,影像区块BLK(2,1)中的子区块A(2,1)可在不参考其他影像区块的情况下,直接进行后处理程序;影像区块BLK(2,1)中的子区块B(2,1)会需要影像区块(2,2)的部分显示数据来进行后处理程序,而影像区块BLK(2,1)中的子区块C(2,1)则会需要影像区块(3,1)及(2,2)的部分显示数据来进行后处理程序。
在此情况下,后处理单元130可在接收到影像区块BLK(2,1)及BLK(2,2)时,优先对影像区块BLK(2,1)中的子区块A(2,1)及B(2,1)以及缓冲存储器120中对应的子区块进行后处理程序,并将影像区块BLK(2,1)中的待处理的子区块C(2,1)的待处理数据储存至缓冲存储器120。
换言之,当后处理单元130接收到影像区块BLK(2,1)及影像区块BLK(2,2)的显示数据时,后处理单元130可自缓冲存储器120中读取对应于影像区块BLK(2,1)的缓冲区块BUF(2,1)的待处理数据,并根据影像区块BLK(2,1)及影像区块BLK(2,2)的显示数据及缓冲区块BUF(2,1)的待处理数据对影像区块BLK(2,1)中的主要子区块M(2,1)的显示数据,亦即子区块A(2,1)及B(2,1)的显示数据,并对缓冲区块BUF(2,1)的待处理数据进行编码演算法之后处理程序以产生后处理影像区块PBLK(2,1)的后处理数据。此外,后处理单元130会将影像区块BLK(2,1)中不属于主要子区块M(2,1)的待处理子区块C(2,1)的待处理数据储存至缓冲存储器120。
在本发明的部分实施例中,缓冲存储器120可为后影像压缩系统100内部的静态随机存取存储器(Static Random Access Memory,SRAM)。然而,在本发明的其他实施例中,缓冲存储器120也可为影像压缩系统100外部的存储器。在缓冲存储器120位于影像压缩系统100外部的情况下,后处理单元130可进一步对将存入缓冲存储器120的档案进行压缩,并在读取时解压缩还原,以减少存取缓冲存储器120时所需的频宽。
在本发明的部分实施例中,待处理子区块C(2,1)为影像区块BLK(2,1)中最末n列的像素,而影像区块BLK(2,1)的主要子区块M(2,1)则可包含影像区块BLK(2,1)的子区块A(2,1)及B(2,1),亦即影像区块BLK(2,1)中最前(N-n)列的像素,n为小于N的正整数。此外,根据编码演算法的不同,n的值也可能随之改变。因此在本发明的部分实施例中,后处理单元130也可根据编码演算法的种类设定n的数值。
在上述的说明中,对应于影像区块BLK(2,1)的缓冲区块BUF(2,1)即是在影像画面IMG0中,与影像区块BLK(2,1)位于同一行,且位于影像区块BLK(2,1)前一列的影像区块BLK(1,1)的待处理子区块C(1,1)。也就是说,经过编码演算法之后处理程序所产生之后处理影像区块PBLK(2,1)会对应到影像区块BLK(2,1)中主要区块M(2,1)以及影像区块BLK(1,1)的子区块C(1,1),而压缩单元110即可将后处理影像区块PBLK(2,1)的后处理数据压缩成后处理影像区块PBLK(2,1)的压缩数据。
在本发明的部分实施例中,由于影像区块BLK(2,1)的子区块C(2,1)也可能会需要影像区块BLK(2,1)及BLK(2,2)的显示数据来进行后处理程序,因此后处理单元130可以先根据影像区块BLK(2,1)及BLK(2,2)的显示数据对待处理子区块C(2,1)的显示数据进行编码演算法之后处理程序以产生待处理子区块C(2,1)的待处理数据。如此一来,当后处理单元130接收到影像区块BLK(3,1)时,就可以自缓冲存储器120中读取对应于影像区块BLK(3,1)的缓冲区块BUF(3,1)的待处理数据,亦即影像区块BLK(2,1)的子区块C(2,1)的待处理数据,来继续完成后处理程序。
另外,在本发明的部分实施例中,根据影像编码演算法的不同,影像画面IMG0中也可能有部分的影像区块无须参考其右侧的影像区块的显示数据即能够完成后处理程序。举例来说,在图1中,由于影像区块(2,Y)位于影像画面IMG0的右侧边界上,亦即影像区块(2,Y)是位于同一列影像区块中最后一行的影像区块,此时若参考下一个接收到的影像区块(3,1)的显示数据来进行后处理程序,则可能会因为两个影像区块在影像画面IMG0上空间不相连,而导致后处理程序的效果不佳,甚至引入杂讯。在此情况下,当后处理单元130接收到影像区块(2,Y)时,可自缓冲存储器120中读取对应于影像区块BLK(2,Y)的缓冲区块BUF(2,Y)的待处理数据,并根据影像区块BLK(2,Y)的显示数据及缓冲区块BUF(2,Y)的待处理数据对缓冲区块BUF(2,Y)的待处理数据,亦即影像区块BLK(1,Y)的子区块C(1,Y)的待处理数据,以及对影像区块BLK(2,Y)中的主要子区块M(2,Y)的显示数据,亦即子区块A(2,Y)及B(2,Y)的显示数据,进行编码演算法之后处理程序以产生后处理影像区块PBLK(2,Y)的后处理数据。此外,后处理单元130仍会将影像区块BLK(2,Y)中不属于主要子区块M(2,Y)的待处理子区块C(2,Y)的待处理数据储存至缓冲存储器120。
在上述的说明中,影像区块BLK(2,1)及影像区块BLK(2,Y)皆非影像画面IMG0中位于第一列的影像区块,且亦非影像画面IMG0中位于最后一列的影像区块。对于影像画面IMG0中位于第一列的影像区块BLK(1,1)至BLK(1,Y)来说,由于并影像画面IMG0中并无位于其前列的影像区块,亦即在缓冲存储器120中,可能并未存有对应的缓冲区块,因此能够直接对其影像区块中的主要子区块进行后处理程序,并将需要参考其他影像区块的待处理子区块存入缓冲存储器120中。然而若在后处理程序完成后,若仅对影像区块的主要子区块的后处理数据进行压缩,则将导致位于影像画面IMG0的第一列的影像区块经压缩后的压缩数据所对应到的区块大小与影像画面IMG0中并非位于第一列的影像区块经压缩后所对应到的区块大小相异的情况,而可能会增加之后在解压缩还原时的程序复杂度。
同理,对影像画面IMG0中位于最后一列的影像区块BLK(X,1)至BLK(X,Y)而言,亦同样会增加之后在解压缩还原时的程序复杂度。
在本发明的部分实施例中,为了避免在解压缩还原的过程中,因为每笔压缩数据所对应的区块大小相异,而增加操作程序的复杂度,后处理单元130在接收到影像画面ING0的第一列或最后一列的影像区块时,还可以另外建立冗余像素的显示数据以避免增加之后解压缩还原过程的复杂度。
举例来说,当后处理单元130接收到位于影像画面IMG0的第一列的影像区块BLK(1,1)及BLK(1,2)的显示数据时,后处理单元130可根据影像区块BLK(1,1)及BLK(1,2)的显示数据对影像区块BLK(1,1)中主要子区块M(1,1)的显示数据进行编码演算法之后处理程序以产生主要子区块M(1,1)的后处理数据,并将影像区块BLK(1,1)中不属于主要子区块M(1,1)的待处理子区块C(1,1)的待处理数据储存至缓冲存储器120。
此外,后处理单元130还可建立n列冗余像素的显示数据,而压缩单元110则可将主要子区块M(1,1)的后处理数据及后处理单元130所建立的n列冗余像素Dn(1,1)的显示数据压缩成后处理影像区块PBLK(1,1)的压缩数据。如此一来,后处理影像区块PBLK(1,1)的区块大小仍会与后处理影像区块PBLK(2,1)相同,而都会包含N列像素。
在本发明的部分实施例中,为了提高压缩率,后处理单元130可复制影像区块BLK(1,1)的第一列像素的显示数据以建立n列冗余像素Dn(1,1)的显示数据。也就是说,后处理单元130所建立的n列冗余像素Dn(1,1)的显示数据会与影像区块BLK(1,1)的第一列像素的显示数据相同,亦即提高了待压缩数据之间的相依性,因此能够提高压缩单元110的压缩率。
此外,在本发明的其他实施例中,由于冗余像素的数量应为预先设定好的固定值,因此也可将冗余像素Dn(1,1)的显示数据以预定的数值表示,使得压缩单元110在辨识出预定数值时,可直接忽略冗余像素Dn(1,1),而无须进行压缩,如此即可进一步简化压缩流程及减少存储器使用量。
相似地,位于第一列的其他影像区块BLK(1,2)至BLK(1,Y)中的主要子区块M(1,2)至M(1,Y)也会分别与后处理单元130所建立的冗余像素Dn(1,2)至Dn(1,Y)合并为后处理影像区块PBLK(1,2)至PBLK(1,Y),并由压缩单元110进行压缩。
同理,在另一个维度上,当后处理单元130接收到位于影像画面IMG0的最后一列的影像区块BLK(X,Y)的显示数据时,亦可进行类似的处理,于此不再赘述。
在本发明的部分实施例中,为了提高压缩率,后处理单元130可复制影像区块BLK(X,Y)的最后一列像素的显示数据以建立N-n列冗余像素DNn(X,Y)的显示数据。也就是说,后处理单元130所建立之N-n列冗余像素DNn(X,Y)的显示数据会与影像区块BLK(X,Y)的最后一列像素的显示数据相同,亦即提高了待压缩数据之间的相依性,因此能够提高压缩单元110的压缩率。
相似地,位于最后一列的其他影像区块BLK(X,1)至BLK(X,Y-1)中的子区块C(X,1)至C(X,Y-1)也会分别与后处理单元130所建立的冗余像素DNn(X,1)至DNn(X,Y-1)合并为附带后处理影像区块PBLK'(X,1)至PBLK'(X,Y-1),并由压缩单元110进行压缩。
同样地,在本发明的其他实施例中,由于冗余像素的数量应为预先设定好的固定值,因此也可将冗余像素DNn(X,1)至DNn(X,Y)的显示数据以预定的数值表示,使得压缩单元110在辨识出预定数值时,可直接忽略冗余像素DNn(X,1)至DNn(X,Y),而无须进行压缩,如此即可进一步简化压缩流程及减少存储器使用量。
由于影像压缩系统100可以透过后处理单元130优先处理每个影像区块中的主要子区块,而仅将每个影像区块中的待处理子区块储存至缓冲存储器120中,因此能够减少缓冲存储器120所需的容量。
举例来说,视频编码标准H.264中的每个影像区块包含16列的像素,而其中有4列像素需要下一列影像区块来完成后处理程序,亦即N为16,而n为4。因此对先前技术而言,其存储器需要完整储存每个影像区块中的16列像素,相较之下,影像压缩系统100的缓冲存储器120则仅需要储存每个影像区块中的4列像素,因此缓冲存储器120的容量大为降低。而若以高效率视频编码为例,其每个影像区块包含64列的像素,亦即N为64,而其中亦仅有4列像素需要下一列影像区块来完成后处理程序,亦即n为4。在此情况下,影像压缩系统100所需的缓冲存储器120的容量即约为先前技术所需的存储器的容量的1/16倍,其减小的幅度更为显著。
换言之,为了让每个影像区块能够读取位于其上一列的对应的待处理子区块,缓冲存储器120仅需要能够储存一整列影像区块的待处理子区块的数据,相较于先前技术中,需要储存一整列影像区块的显示数据的缓冲存储器,缓冲存储器120的所需容量能够显著的缩小,因而能够避免增加额外的硬体资源,同时也减少整体系统的耗电及所需频宽,并且能够减少外部存储器的使用量。再者,由于后处理单元130在接收到第一列的影像区块或最后一列的影像区块时,能够建立对应数量的冗余像素的显示数据,因此能使压缩单元110所压缩的影像区块大小一致,进而避免增加解压缩还原过程的复杂度。
图4和5为本发明一实施例的利用影像压缩系统压缩影像画面IMG0的方法200的流程图。方法200可应用于影像压缩系统100,其操作流程可包含步骤S210至S260,但不限于图4和5所示的顺序。
S210:后处理单元130接收影像画面IMG0的影像区块的显示数据;
S220:若接收到的影像区块位于影像画面IMG0中的第一列,则进入步骤S230,若是位于影像画面IMG0中的最后一列,则进入步骤S250,否则进入步骤S240;
S230:后处理单元130建立n列冗余像素的显示数据;
S232:后处理单元130根据影像区块的显示数据对影像区块中的主要子区块的显示数据进行编码演算法之后处理程序以产生其主要子区块的后处理数据;
S234:后处理单元130将影像区块中不属于主要子区块的待处理子区块的待处理数据储存至缓冲存储器120;
S236:压缩单元110将主要子区块的后处理数据及n列冗余像素的显示数据压缩成后处理影像区块的压缩数据;跳至步骤S210;
S240:后处理单元130自缓冲存储器120中读取对应于影像区块的缓冲区块的待处理数据;
S242:后处理单元130根据影像区块的显示数据及对应的缓冲区块的待处理数据对影像区块中的主要子区块的显示数据及对应的缓冲区块的待处理数据进行编码演算法之后处理程序以产生后处理影像区块的后处理数据;
S244:后处理单元130根据影像区块的显示数据对待处理子区块的显示数据进行编码演算法之后处理程序以产生待处理子区块的待处理数据;
S246:后处理单元130将影像区块中不属于主要子区块的待处理子区块的待处理数据储存至缓冲存储器120;
S248:压缩单元110将后处理影像区块的后处理数据压缩成后处理影像区块的压缩数据;跳至步骤S210;
S250:后处理单元130自缓冲存储器120中读取对应于影像区块的缓冲区块的待处理数据;
S252:后处理单元130根据影像区块的显示数据及对应的缓冲区块的待处理数据对影像区块中的主要子区块的显示数据及对应的缓冲区块的待处理数据进行编码演算法之后处理程序以产生后处理影像区块的后处理数据;
S254:后处理单元130建立N-n列冗余像素的显示数据;
S256:后处理单元130根据影像区块的显示数据对影像区块中不属于主要子区块的待处理子区块的显示数据进行编码演算法之后处理程序以产生待处理子区块的后处理数据;
S258:压缩单元110将后处理影像区块的后处理数据压缩成后处理影像区块的压缩数据;
S260:压缩单元110将待处理子区块的后处理数据及N-n列冗余像素的显示数据压缩成附带后处理影像区块的压缩数据;跳至步骤S210。
方法200中各步骤的细节已于前述对依据本发明的一实施例的压缩系统操作的说明中阐述,于此不再赘述。
综上所述,本发明的实施利所提供的影像压缩系统及利用影像压缩系统压缩影像画面的方法能够透过后处理单元优先处理每个影像区块中的主要子区块,而仅将每个影像区块中的待处理子区块储存至缓冲存储器中,因此能够减少缓冲存储器所需的容量,同时也减少整体系统的耗电及所需频宽。
以上所述仅为本发明的较佳实施例,凡依本发明申请专利范围所做的均等变化与修饰,皆应属本发明的涵盖范围。

Claims (16)

1.一种利用影像压缩系统以压缩影像画面的方法,该影像压缩系统包含一后处理单元、一压缩单元、一缓冲存储器,该方法包含:
将该影像画面的多个影像区块的显示数据依逐列扫描的次序传送至该后处理单元,其中每一影像区块包含N列像素,N为大于1的正整数;
当该后处理单元接收到一第一影像区块的显示数据,且该第一影像区块并非该影像画面中位于一第一列且并非该影像画面中位于一最后一列的影像区块时:
该后处理单元自该缓冲存储器中读取对应于该第一影像区块的一第一缓冲区块的待处理数据;
该后处理单元根据至少该第一影像区块的显示数据及该第一缓冲区块的待处理数据对该第一缓冲区块的待处理数据及该第一影像区块中的一第一主要子区块的显示数据进行一编码演算法的一后处理程序以产生一第一后处理影像区块的后处理数据;及
该后处理单元将该第一影像区块的一第一待处理子区块的待处理数据储存至该缓冲存储器,该第一待处理子区块为该第一影像区块中不属于该第一主要子区块的部分;及
该压缩单元将该第一后处理影像区块的后处理数据压缩成该第一后处理影像区块的压缩数据;
其中:
该第一待处理子区块为该第一影像区块中最末n列的像素,该第一主要子区块为该第一影像区块中最前(N-n)列的像素,n为小于N的正整数。
2.如权利要求1所述的方法,其特征在于,对应于该第一影像区块的该第一缓冲区块是在该影像画面中,与该第一影像区块位于同一行,且位于该第一影像区块前一列的一影像区块的一待处理子区块。
3.如权利要求1所述的方法,其特征在于,该后处理单元根据至少该第一影像区块的显示数据及该第一缓冲区块的待处理数据对该第一缓冲区块的待处理数据及该第一影像区块中的该第一主要子区块的显示数据进行该编码演算法的该后处理程序以产生该第一后处理影像区块的后处理数据,当该后处理单元在接收到该第一影像区块后,接续地接收到与该第一影像区块位于同一列的一第二影像区块时,该后处理单元根据该第一影像区块及该第二影像区块的显示数据及该第一缓冲区块的待处理数据对该第一缓冲区块的待处理数据及该第一影像区块中的该第一主要子区块的显示数据进行该编码演算法的该后处理程序以产生该第一后处理影像区块的后处理数据。
4.如权利要求1所述的方法,其特征在于,还包含当该后处理单元接收到该第一影像区块的显示数据时,该后处理单元根据至少该第一影像区块的显示数据对该第一待处理子区块的显示数据进行该编码演算法的该后处理程序以产生该第一待处理子区块的待处理数据。
5.如权利要求1所述的方法,其特征在于,还包含:
当该后处理单元接收到位于该影像画面的该第一列的一第三影像区块的显示数据时:
该后处理单元建立n列冗余像素的显示数据;
该后处理单元根据至少该第三影像区块的显示数据对该第三影像区块中的一第三主要子区块的显示数据进行该编码演算法的该后处理程序以产生该第三主要子区块的后处理数据;及
该后处理单元将该第三影像区块中不属于该第三主要子区块的一第三待处理子区块的待处理数据储存至该缓冲存储器;及
该压缩单元将该第三主要子区块的后处理数据及该n列冗余像素的显示数据压缩成一第三后处理影像区块的压缩数据。
6.如权利要求5所述的方法,其特征在于,该后处理单元建立该n列冗余像素的显示数据,是该后处理单元复制该第三影像区块的一第一列像素的显示数据以建立该n列冗余像素的显示数据。
7.如权利要求1所述的方法,其特征在于,还包含:
当该后处理单元接收到位于该影像画面的该最后一列的一第四影像区块的显示数据时:
该后处理单元自该缓冲存储器中读取对应于该第四影像区块的一第四缓冲区块的待处理数据;
该后处理单元根据至少该第四影像区块的显示数据及该第四缓冲区块的待处理数据对该第四缓冲区块的待处理数据及该第四影像区块中的一第四主要子区块的显示数据进行该编码演算法的该后处理程序以产生一第四后处理影像区块的后处理数据;
该后处理单元建立N-n列冗余像素的显示数据;及
该后处理单元根据至少该第四影像区块的显示数据对该第四影像区块中不属于该第四主要子区块的一第四待处理子区块的显示数据进行该编码演算法的该后处理程序以产生该第四待处理子区块的后处理数据;
该压缩单元将该第四后处理影像区块的后处理数据压缩成该第四后处理影像区块的压缩数据;及
该压缩单元将该第四待处理子区块的后处理数据及该N-n列冗余像素的显示数据压缩成一附带后处理影像区块的压缩数据。
8.如权利要求7所述的方法,其特征在于,该后处理单元建立该N-n列冗余像素的显示数据,是该后处理单元复制该第四影像区块的一最后一列像素的显示数据以建立该N-n列冗余像素的显示数据。
9.一种影像压缩系统,包含:
一压缩单元,用以根据一编码演算法压缩影像数据;
一缓冲存储器;及
一后处理单元,耦接于该缓冲存储器及该压缩单元,用以:
依逐列扫描的次序接收一影像画面的多个影像区块的显示数据,其中每一影像区块包含N列像素,N为大于1的正整数;
当接收到一第一影像区块的显示数据,且该第一影像区块并非该影像画面中位于一第一列且并非该影像画面中位于一最后一列的影像区块时:
自该缓冲存储器中读取对应于该第一影像区块的一第一缓冲区块的待处理数据;
根据至少该第一影像区块的显示数据及该第一缓冲区块的待处理数据对该第一缓冲区块的待处理数据及该第一影像区块中的一第一主要子区块的显示数据进行该编码演算法的一后处理程序以产生一第一后处理影像区块的后处理数据;及
将该第一影像区块中不属于该第一主要子区块的一第一待处理子区块的待处理数据储存至该缓冲存储器;
其中:
该压缩单元另用以将该第一后处理影像区块的后处理数据压缩成该第一后处理影像区块的压缩数据;及
该第一待处理子区块为该第一影像区块中最末n列的像素,该第一主要子区块为该第一影像区块中最前(N-n)列的像素,n为小于N的正整数。
10.如权利要求9所述的影像压缩系统,其特征在于,对应于该第一影像区块的该第一缓冲区块是在该影像画面中,与该第一影像区块位于同一行,且位于该第一影像区块前一列的一影像区块的一待处理子区块。
11.如权利要求9所述的影像压缩系统,其特征在于,该后处理单元根据至少该第一影像区块的显示数据及该第一缓冲区块的待处理数据对该第一缓冲区块的待处理数据及该第一影像区块中的该第一主要子区块的显示数据进行该编码演算法的该后处理程序以产生该第一后处理影像区块的后处理数据,是当该后处理单元在接收到该第一影像区块后,接续地接收到与该第一影像区块位于同一列的一第二影像区块时,该后处理单元根据该第一影像区块及该第二影像区块的显示数据及该第一缓冲区块的待处理数据对该第一缓冲区块的待处理数据及该第一影像区块中的该第一主要子区块的显示数据进行该编码演算法的该后处理程序以产生该第一后处理影像区块的后处理数据。
12.如权利要求9所述的影像压缩系统,其特征在于,该后处理单元另用以当接收到该第一影像区块的显示数据时,根据至少该第一影像区块的显示数据对该第一待处理子区块的显示数据进行该编码演算法的该后处理程序以产生该第一待处理子区块的待处理数据。
13.如权利要求9所述的影像压缩系统,其特征在于,该后处理单元单元另用以:
当接收到位于该影像画面的该第一列的一第三影像区块的显示数据时:
建立n列冗余像素的显示数据;
根据至少该第三影像区块的显示数据对该第三影像区块中的一第三主要子区块的显示数据进行该编码演算法的该后处理程序以产生该第三主要子区块的后处理数据;及
将该第三影像区块中不属于该第三主要子区块的一第三待处理子区块的待处理数据储存至该缓冲存储器;
其中该压缩单元另用以将该第三主要子区块的后处理数据及该n列冗余像素的显示数据压缩成一第三后处理影像区块的压缩数据。
14.如权利要求13所述的影像压缩系统,其特征在于,该后处理单元复制该第三影像区块的一第一列像素的显示数据以建立该n列冗余像素的显示数据。
15.如权利要求9所述的影像压缩系统,其特征在于,该后处理单元单元另用以:
当接收到位于该影像画面的该最后一列的一第四影像区块的显示数据时:
自该缓冲存储器中读取对应于该第四影像区块的一第四缓冲区块的待处理数据;
根据至少该第四影像区块的显示数据及该第四缓冲区块的待处理数据对该第四缓冲区块的待处理数据及该第四影像区块中的一第四主要子区块的显示数据进行该编码演算法的该后处理程序以产生一第四后处理影像区块的后处理数据;
建立N-n列冗余像素的显示数据;及
根据至少该第四影像区块的显示数据对该第四影像区块中不属于该第四主要子区块的一第四待处理子区块的显示数据进行该编码演算法之的后处理程序以产生该第四待处理子区块的后处理数据;
其中该压缩单元另用以:
将该第四后处理影像区块的后处理数据压缩成该第四后处理影像区块的压缩数据;及
将该第四待处理子区块的后处理数据及该N-n列冗余像素的显示数据压缩成一附带后处理影像区块的压缩数据。
16.如权利要求15所述的影像压缩系统,其特征在于,该后处理单元复制该第四影像区块的一最后一列像素的显示数据以建立该N-n列冗余像素的显示数据。
CN201810338141.2A 2018-04-16 2018-04-16 影像压缩系统及利用影像压缩系统以压缩影像画面的方法 Pending CN110392259A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810338141.2A CN110392259A (zh) 2018-04-16 2018-04-16 影像压缩系统及利用影像压缩系统以压缩影像画面的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810338141.2A CN110392259A (zh) 2018-04-16 2018-04-16 影像压缩系统及利用影像压缩系统以压缩影像画面的方法

Publications (1)

Publication Number Publication Date
CN110392259A true CN110392259A (zh) 2019-10-29

Family

ID=68282812

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810338141.2A Pending CN110392259A (zh) 2018-04-16 2018-04-16 影像压缩系统及利用影像压缩系统以压缩影像画面的方法

Country Status (1)

Country Link
CN (1) CN110392259A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114339255A (zh) * 2020-09-30 2022-04-12 瑞昱半导体股份有限公司 用以将影像帧储存于存储器中的方法及相关影像处理器

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200811750A (en) * 2006-08-17 2008-03-01 Samsung Electronics Co Ltd Deblocking filtering methods and image processing devices using the deblocking filtering
TW201037626A (en) * 2009-04-01 2010-10-16 Novatek Microelectronics Corp Method for accessing image data and related apparatus
KR20120089404A (ko) * 2010-12-07 2012-08-10 전자부품연구원 매크로블록 기반의 2단계 디블록킹 필터링 장치 및 방법
CN103051892A (zh) * 2011-10-14 2013-04-17 联发科技股份有限公司 内嵌式回路滤波方法以及内嵌式回路滤波装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200811750A (en) * 2006-08-17 2008-03-01 Samsung Electronics Co Ltd Deblocking filtering methods and image processing devices using the deblocking filtering
TW201037626A (en) * 2009-04-01 2010-10-16 Novatek Microelectronics Corp Method for accessing image data and related apparatus
KR20120089404A (ko) * 2010-12-07 2012-08-10 전자부품연구원 매크로블록 기반의 2단계 디블록킹 필터링 장치 및 방법
CN103051892A (zh) * 2011-10-14 2013-04-17 联发科技股份有限公司 内嵌式回路滤波方法以及内嵌式回路滤波装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ZHAN MA: "Frame buffer compression for low-power video coding", 《2011 18TH IEEE INTERNATIONAL CONFERENCE ON IMAGE PROCESSING》 *
王鑫等: "应用于LCD控制器帧缓冲器中图像映射编码算法的研究", 《计算机与数字工程》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114339255A (zh) * 2020-09-30 2022-04-12 瑞昱半导体股份有限公司 用以将影像帧储存于存储器中的方法及相关影像处理器

Similar Documents

Publication Publication Date Title
US20100128797A1 (en) Encoding Of An Image Frame As Independent Regions
US9300984B1 (en) Independent processing of data streams in codec
US9894371B2 (en) Video decoder memory bandwidth compression
US20070091378A1 (en) Universal fixed-pixel-size ISP scheme
CN103188495A (zh) 译码视频数据的方法
US9509992B2 (en) Video image compression/decompression device
JPH11154228A (ja) 画像処理装置および方法
US20180242023A1 (en) Image Coding and Decoding Method and Device
US20070195888A1 (en) Intra-Frame Prediction Processing
US8953220B2 (en) Image processing for rotation of compressed image data
KR20170063384A (ko) 반도체 장치, 데이터 처리 시스템 및 반도체 장치의 제어 방법
JP4514169B2 (ja) デジタル信号変換装置及び方法
CN110392259A (zh) 影像压缩系统及利用影像压缩系统以压缩影像画面的方法
US20190289300A1 (en) Image compression system and image compression method using image compression system
US6954207B2 (en) Method and apparatus for processing pixels based on segments
US20060002475A1 (en) Caching data for video edge filtering
EP1523170A1 (en) Image conversion device, image conversion method, and recording medium
CN113115041A (zh) 支持alpha通道的无损图片压缩方法、装置及介质
US6205251B1 (en) Device and method for decompressing compressed video image
JP2000232587A (ja) 画像処理装置および画像処理方法
US6681051B1 (en) Arrangement for transforming picture data
US20110291866A1 (en) Variable-length decoding device
JP5731816B2 (ja) 画像処理装置、画像処理方法
JP2000261647A (ja) 画像処理装置
JP3382358B2 (ja) 画像処理装置及びその方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20191029

WD01 Invention patent application deemed withdrawn after publication