CN104704825A - 分段图像数据的无损压缩 - Google Patents

分段图像数据的无损压缩 Download PDF

Info

Publication number
CN104704825A
CN104704825A CN201380054188.1A CN201380054188A CN104704825A CN 104704825 A CN104704825 A CN 104704825A CN 201380054188 A CN201380054188 A CN 201380054188A CN 104704825 A CN104704825 A CN 104704825A
Authority
CN
China
Prior art keywords
channel
vlc
data element
variable
length code
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380054188.1A
Other languages
English (en)
Other versions
CN104704825B (zh
Inventor
M.查里卡
D.拉马克里什南
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
EMC Inc
EMC Corp
Original Assignee
EMC Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by EMC Inc filed Critical EMC Inc
Priority to CN201910711880.6A priority Critical patent/CN110460851B/zh
Publication of CN104704825A publication Critical patent/CN104704825A/zh
Application granted granted Critical
Publication of CN104704825B publication Critical patent/CN104704825B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/005Statistical coding, e.g. Huffman, run length coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/88Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving rearrangement of data among different coding units, e.g. shuffling, interleaving, scrambling or permutation of pixel data or permutation of transform coefficient data among different blocks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

公开分段图像数据的无损压缩。在一些实施例中,接收信息流,其中信息流包括元组序列并且其中元组中的每个包括对应于多个输入信道中的一个的数据元素。采用信道变换器来将数据元素重新布置成对于输出流的多个输出信道,其中输出信道具有比输入信道更高的可压缩性。存储被压缩的输出流。

Description

分段图像数据的无损压缩
对其他申请的交叉引用
该申请要求于2012年8月21日提交的题为LOSSLESS COMPRESSION OF FRAGMENTED INTEGER IMAGE DATA(分段整数图像数据的无损压缩)的美国临时专利申请号61/691,735的权益,其为了所有目的通过引用合并于此。
背景技术
计算、存储和通信介质必须应对越来越大量的数字数据。数据量的增加导致对高速传输、高容量和高吞吐量存储以及数据归档的极大需求。为了适应该数据增长,高效压缩技术已变得越来越重要。
附图说明
本发明的各种实施例在下列详细描述和附图中公开。
图1图示如何将二维图像分成多个一维片段的实施例。
图2图示如何将图像放在盘上的实施例并且图示片段和片段界限。
图3图示包括元组并且示出信道(其包括在这些元组内的某些坐标)的输入序列的实施例。
图4图示信道变换的实施例。
图5图示将像素值映射成(水平,值)形式的实施例。
图6图示阈值选择算法的实施例。
图7图示压缩过程的实施例。
图8图示1阶霍夫曼码的实施例。
图9图示执行2阶霍夫曼码的过程的实施例。
图10图示利用压缩的归档存储系统的实施例。
图11图示在硬件中实现的片段压缩算法的实施例。
具体实施方式
本发明可以采用许多方式实现,包括作为:过程;设备;系统;物质组成;计算机可读存储介质上包含的计算机程序产品;和/或处理器,例如配置成执行存储在存储器(其耦合于处理器)上和/或由该存储器提供的指令的处理器。在该说明书中,这些实现或本发明可采取的任何其他形式可称为技术。一般,公开的过程的步骤的顺序可在本发明的范围内更改。除非另外规定,例如描述为配置成执行任务的处理器或存储器等部件可实现为暂时配置成在指定时间执行任务的通用部件或被制造来执行任务的特定部件。如本文使用的,术语‘处理器’指一个或多个装置、电路和/或处理核,其配置成处理例如计算机程序指令等数据。
本发明的一个或多个实施例的详细描述在下文连同图示本发明的原理的附图一起提供。本发明连同这样的实施例描述,但本发明不限于任一个实施例。本发明的范围仅由权利要求限制并且本发明包含许多备选、修改和等同物。在下列描述中阐述许多具体细节以便提供本发明的全面理解。为了示例目的提供这些细节,并且本发明可根据权利要求实践而没有这些具体细节中的一些或全部。为了清楚起见,在与本发明有关的技术领域中已知的技术材料未被详细描述使得不会不必要地掩盖本发明。
在本文描述整数值序列的无损压缩的技术。在一些实施例中,整数值序列可代表任意图像或传感器数据的片段。
图像数据已变成主导数据类型,并且它是在数字信息世界中由各种源产生的数据的最快增长段之一。尽管例如JPEG等有损压缩技术具有许多用例,它们无法满足若干重要应用的要求,其包括医学影像(例如CT扫描图像、MRI图像等)和高清晰度电影图像。这些应用需要压缩它们的图像并且采用无损方式存储它们,这意指可以对压缩版本解压以完整地恢复原始图像而没有任何数据损失。
在数据传输和数据存储系统采用压缩方法来减少网络带宽和数据存储占用空间时,它们通常需要将数据分成片段。例如,数据传输协议通常需要将数据流分成片段以便一次传输数据包。去除重复文件系统通常需要将数据存储在相对小的单元中,例如大小固定的块或大小可变的段。
因为图像可以很大,具有可以快速压缩图像的小的片段并且实现高压缩比和更简单的硬件压缩实现的无损压缩方法,这是非常可取的。此外,片段可以使用多个计算元件(或核)或多个软件元件(或线程)或这两者来独立压缩和解压。
图1图示如何将二维图像分成多个一维片段fi的实施例。每个片段可包括一个或多个行的一部分。图2图示如何将图像放在盘上的实施例并且图示片段和片段界限。
本文公开的无损压缩技术可用于采用无损方式高效压缩每个片段并且还可用于扩展压缩片段而不参考其他片段或元数据。
压缩算法
综览
在各种实施例中,到压缩算法的输入是k个元组的整数值序列,其源于图像或传感器数据片段。包括每个元组的第i个坐标的该值序列称为信道;可存在k个这样的信道。例如,在图像数据的情况下,每个元组可与单个像素关联。每个信道在这里是颜色分量(例如,红、绿和蓝),其中一个元组的坐标代表像素处的颜色信息。在各种实施例中,本文描述的压缩算法可用于通过利用信道内和跨信道的连续性性质而无损地对输入编码。在一些实施例中,利用连续性性质通过至少执行变换来消除信道内和跨信道的冗余并且基于数据的统计信息对所得的序列无损地编码而执行。在一些实施例中,使用可以适应于数据性质但同时需要非常少的空间来代表它所依赖的数据的性质的灵活编码方案。
图3图示包括元组并且示出信道的输入序列的实施例,所述信道包括元组内的某些坐标。例如,对于序列的第一元组,A1、B1和C1中的每个对应于信道并且每个表示为整数值。例如,信道1的整数值(A1、A2、…An)可与红色分量关联,信道2的整数值(B1、B2、…Bn)可与绿色分量关联,并且信道3的整数值(C1、C2、…Cn)可与蓝色分量关联。
数据变换
在一些实施例中,在执行压缩之前执行若干变换作为预处理。一般,这些变换的目的是利用数值的冗余和连续性性质并且将它们转换成较小的值,其可以被更高效压缩。在各种实施例中,变换是可逆的,使得值的原始序列可从变换序列获得。
逐点信道变换
在一些实施例中,在逐点信道变换中,跨信道的冗余通过对单个像素的信道值应用可逆变换而消除,其中独立地对每个像素应用该变换。为了便于压缩,可选地,制成新的信道集的信道可凭借可逆变换而变换,使得该新的信道集比原始集可压缩得更好。可使用的变换的示例包括(可逆)线性变换以及位重组操作。作为后者的示例,几个信道的MSB(最高有效字节)可以分组在一起来产生新的信道以实现更高效编码。
图4图示信道变换的实施例。如在给出示例中示出的,每个整数包括两个字节,其中一个字节是最高有效字节而另一个是最低有效字节。每个原始信道可包括与相同颜色分量关联的整数。如在示例中示出的,顶部原始信道包括与红色关联的两个字节整数,中间原始信道包括与绿色关联的两个字节整数,并且底部原始信道包括与蓝色关联的两个字节整数。原始信道可被变换使得顶部变换信道包括来自原始红色信道和原始绿色信道的一系列最高有效字节,中间变换信道包括来自原始红色信道和原始绿色信道的一系列最低有效字节,而底部变换信道仍然与原始蓝色信道相同(具有它的交替最高有效字节和最低有效字节)。
在一些实施例中,潜在信道变换通过估计它们所产生的新的信道的可压缩性来评估。为了评估潜在信道变换,选择合适的函数e(x),其估计对数值x编码所需要的位的数量。例如,                                               可用作对x编码所需要的位的数量的估计。
空间数据变换
在一些实施例中,在空间数据变换中,消除冗余并且信道内的连续性通过对连续像素的特定信道的值应用可逆变换而利用。
让A成为期望被压缩的特定片段中的特定(变换或未变换)信道(即,数值序列)。然后Ai代表信道A的第i个元素。
让X代表在变换后获得的序列。可以使用下列变换。
微分变换:在这里从它前面的元素扣除每个元素。从而,
对于
对于
XOR变换:在这里取每个元素和它前面的元素的XOR。从而:
对于
对于
在一些实施例中,可考虑额外变换,例如应用差分变换(二次)和其他这样的变化。
将变换值序列映射成(水平,值)对
应用各种变换,接着在每个变换信道中对值序列执行压缩。在一些实施例中,值序列(对于单个变换信道)称为“输入序列”。为了压缩输入序列,使用适应于要表示的值的统计信息的可变长度码。然后,在各种实施例中,序列的编码将包括统计信息(可变长度码可以通过解码器从其重建)的合适表示、后跟值自身的编码。然而,因为可能值的空间非常大,选择在设计可变长度码中使用的统计信息应被选择使得统计信息自身的表示未占用很多空间。为了这样做,在一些实施例中,算法使用量化方法来对数值分组。每个数值由两个分量规定:水平和值位。在一些实施例中,水平规定高阶位并且值规定低阶位。后来,在一些实施例中,算法计算序列中的水平的频率并且这用于设计可变长度码用于对水平编码。在一些实施例中,在没有编码的情况下逐字表示值位。
图5图示将像素值映射成(水平,值)形式的实施例。在给出示例中,水平是2i,并且图示对于7和13的水平和值的计算。
在一些实施例中,方案采用下列方式实现以允许将值分区成水平和值分量的灵活性和适应于不同数据源特性的能力。
挑选阈值序列
在一些实施例中,选择阈值序列:0=t0<t1<t2<t3<…ti<ti+1<…,并且将非负整数分区成不相交区间的集合:[t0, t1)、[t1, t2)、[t2, t3)…[ti, ti+1)…。在各种实施例中,水平分量规定值位于哪个区间[ti, ti+1),并且值分量规定区间中的特定整数。此特殊情况是选择阈值使得(ti+1- ti)对于所有i都是2的幂的时候。在该情况下,数值v通过指示v位于的区间[ti, ti+1)(由水平规定)并且进一步指示差v-ti而编码。更具体地,为了规定非负值v,要找到唯一i,使得ti≤v<ti+1。认为v在水平i处。现在假设。则对于v的值位通过将v-ti表示为b位整数而获得。注意v-ti是在范围[0, 2b-1]中的整数。该方案的另外的特殊情况是连续阈值具有的形式的时候。在该情况下,对于区间[ti, ti+1)中的数字的值位简单地是b个最低有效位。注意在该特殊情况下,不一定是这样的:b的相同值适用于所有连续阈值。取下列示例:t0=0,t1=1,t2=2,t3=3,t4=4,t5=6,t6=8,t7=12…。考虑连续阈值t3,t4:t3=3.20,t4=4.20;在这里b=0。考虑连续阈值t4,t5:t4=2.21,t5=3.21;在这里b=1。考虑连续阈值t5,t6:t5=3.21,t6=4.21;在这里b=1。考虑连续阈值t6,t7:t6=2.22,t7=3.22;在这里b=2。
阈值序列:0=t0<t1<t2<t3<…ti<ti+1<…适应于数据。我们可以确定对于特定种类的图像或传感器数据的这些阈值并且将该预定序列应用于该种类的所有数据(数据型自适应),或我们可以自适应地确定对于我们所必须压缩的每个图像片段的阈值序列(数据实例自适应)。在前面的情况下,在样本数据上应用阈值确定算法来获得固定序列,其用于该种类的所有数据。在后面的情况下,阈值确定算法独立应用于每个片段来产生阈值以供在对该特定片段编码中使用。在这里,还必须表示为每个片段挑选的阈值序列连同片段的编码。
在一些实施例中,阈值确定算法选择阈值使得(i)每个区间[ti, ti+1)中值的观察分布大致上是均匀的,并且(ii)每个区间[ti, ti+1)中值的总观察频率是至少某一规定最小值。后面的性质确保所选的阈值的数量是相对小的,这进而控制编码成本。注意可不可能同时实现这些目标,因此可使用一些松弛。
图6图示阈值选择算法的实施例。该算法另外确保连续阈值具有形式。到阈值选择算法中的输入包括数值序列、深度d和频率阈值ft。算法以所有阈值设置成2的幂而开始。接着,考虑区间[2i, 2i+1)。每个区间分成具有相等长度的两个“子”区间(也是2的幂),其对应于在阈值2i、2i+1的中间添加新的阈值。产生的新区间将是[2*2i-1, 3*2i-1)和[3*2i-1, 4*2i-1)。这些区间每个进一步分成两个子区间。实施这样的划分的次数由深度d(到算法的输入)指示或直到获得具有长度1的区间。典型地,深度设置成3或4。注意如果深度太高,区间变得越来越小,并且将落入每个区间的输入序列中的数值的数量将逐步变得更小。接着,分析数值序列的样本并且对落入每个区间内的值的数量计数,从而在区间上产生频率分布。在一些情况下,期望每个区间的频率大致上相同并且此外每个区间内的元素分布大致上均匀。因为计算对于所有较小区间的频率分布,对于所有较大区间(从其创建较小区间)的频率可以通过简单地对频率求和而容易计算。消除具有非常低频率的区间可是可取的(因为它是低效的)。如果指定区间的频率低于某一阈值ft(到算法的另一个输入),则区间与它的兄弟区间合并,使得所得的区间是它们的父代。在图6的示例中,我们以区间[2i, 2i+1)开始。该父代区间分成两个子代。第一子代以再次被划分而结束,但第二子代被划分并且合并回去使得最后示出的所有区间的频率大致上相同。
输入序列的(无符号)元素使用由上文的算法确定的阈值而转换成水平。今后,描述的编码方案规定对于水平的编码。独立传送值位(通常没有编码)。
用于序列压缩的基本算法
图7图示压缩过程700的实施例。让X成为对应于特定片段中的变换信道(通过数据变换步骤获得,例如在702处)的值的序列。在704处执行阈值选择算法来为压缩算法选择阈值。X中的条目的绝对值如上文描述的那样在706处转换成水平,来产生序列XL。将独立传送变换数组中的条目的符号。在708处使用霍夫曼码来执行XL的编码。
对于霍夫曼码的创建存在多个可能性。一个示例技术是具有1阶码,其是使用该特定序列中的水平频率的水平上的最佳霍夫曼码。图8图示1阶霍夫曼码的实施例。
另一个方法是创建2阶霍夫曼码,其由这样的码组成,其中每个水平使用关于序列中之前的水平的信息来表示。这必须仔细进行来确保代表额外统计信息(解码器重建2阶霍夫曼码所需要的)所需要的空间未掩盖通过使用这样的码所实现的空间效益。为了在表示空间开销与改进的码的编码大小之间实现平滑权衡(以及便于找到对于该权衡的甜点),在一些实施例中,水平的集分成少量组并且对这些组中的每个创建独立霍夫曼码。进行水平的分组使得每个组中的元素的总频率大致上相等。图9图示执行2阶霍夫曼码的过程的实施例。对于前面提到的权衡的甜点通过对组数量的若干不同选择计算总编码成本(其包括表示空间开销)而找到。在一些实施例中,对于组数量的最佳值可基于要编码的值的特定序列而确定或可基于输入的代表性样本而确定。
对水平的序列编码
传送对于变换序列的水平信息所需要的编码位基于霍夫曼码而确定。
对值的序列编码
一旦已经对水平编码,在一些实施例中,逐字传送值位本身。也就是说,未对这些位进行额外编码,并且可直接传送它们(因为假设这些低阶位是随机的,这是合理的)。
对位编码来代表符号
元素的符号可必须根据变换的选择而传送。在一些实施例中,符号可以通过使它们与水平(在该情况下,如果A是可能水平,则-A也将是可能水平)组合或使用每非零符号元素一个位地独立传送它们而传送。
应用
下面是对于公开的压缩技术的应用的示例。然而,在该情景中没有什么应解释为对上文描述的实施例的限制。
存储系统
存储系统可以通过压缩它们的数据段或块而减少它们的存储占用空间。例如,文件系统典型地将具有多个数据段或数据块的每个文件存储在存储介质上以便便于存储分配和回收来减少存储分段。为了在相同物理存储容量上存储更多的数据,一些文件系统在将数据段存储在存储介质上之前压缩它们。例如GZIP或LZ等无损压缩算法可在将数据段存储到存储介质之前在它们上应用并且在从存储介质检索数据段后应用对应的解压算法。
本文描述的压缩技术可在任何存储层(例如,主、辅、备份和归档)中采用。图10图示利用这样的压缩的归档存储系统的实施例。
硬件加速器
硬件加速器(有时叫作知识产权(IP)核)指用于实现软件算法的特殊硬件支持。硬件加速器与在通用中央处理单元(CPU)上运行它们的算法相比可以实现高得多的性能和更低功耗。
对于硬件加速器的理想算法是简单且并行的,并且需要相对小的缓冲器或存储。因为每个片段需要小的数据缓冲器(例如,几千字节),描述的用于压缩的技术可高效地在硬件加速器中实现,即使图像可以很大(数百万或数十亿字节)也如此。
硬件加速器可设计成并行压缩多个片段。设计者具有在加速器中或在主CPU上运行的软件中实现多个片段的并行压缩的协调的选项。
图11图示在硬件中实现的片段压缩算法的实施例。
媒体和娱乐
在媒体和娱乐行业中,高分辨率拍摄装置用于捕捉静止和运动图片。对于在该行业中编辑、生产和渲染软件中的许多的共同设置高速缓存来自贮存(其中所有帧在个体文件中)的个体帧(在工作站中多达几千)。每个帧被有效地视为静止图像并且可以如此处理。视频捕捉的一个趋势是高清晰度捕捉。交付不一定与采集格式相同,但想法是捕捉尽可能高的分辨率并且在后期生产中下采样。视频捕捉的另一个趋势是高帧率。
在采集格式和帧率可能是最好的时,它给予多得多的自由度以在后期生产中根据需要编辑。从而,存在对于支持高分辨率和高帧率的拍摄装置的需要。通过使用原始传感器数据输出,记录介质的数据吞吐量和存储容量可以是限制因子。因此,存在以减少的吞吐量输出原始传感器数据的期望。一个技术方案是在帧上使用某一形式的无损压缩。用于上文描述的压缩的技术使得它们很好地满足以高吞吐量无损压缩个体帧的所有这些要求,并且拍摄装置或芯片制造商可以容易地以足够处理元件来创建芯片以应对非常高的数据速率。例如,压缩算法可采用与在图11中描述的相似的方式在拍摄装置芯片上实现。
高效地后处理图像和视频内容的能力对于媒体和娱乐行业是非常重要的特征。通常是这样的:图像在后处理阶段中必须经历局部编辑。然而,整个图像必须被解压以便执行这些编辑。但因为本文描述的压缩技术对图像片段而不是整个图像起作用,在未对压缩数据进行全局改变的情况下启用局部编辑。对于该特征的一些应用是剪切图像、突显图像的一部分、图片内的图片和各种其他这样的效应。本发明的另外的实施例在超过一个维度中利用数据的连续性质在若干重复步骤中处理图像,从而提高压缩。
对于本文描述的压缩的技术也可在应用的组合中使用。例如,后处理电影编辑软件系统可以在通过网络发送图像以用于备份之前压缩它们,并且备份装置可以在未来时间在不使用原始软件的情况下对图像解压。
尽管前面的实施例已经为了清楚理解的目的而相当详细地描述,本发明不限于提供的细节。存在实现本发明的许多备选方式。公开的实施例是说明性而非限制性的。

Claims (40)

1. 一种用于存储信息的系统,包括:
接口,其接收信息流,其中所述信息流包括元组序列并且其中所述元组中的每个包括对应于多个输入信道中的一个的数据元素;
信道变换器,其将所述数据元素重新布置成对于输出流的多个输出信道,其中所述输出信道具有比所述输入信道更高的可压缩性;以及
存储器,其存储所述输出流。
2. 如权利要求1所述的系统,其中所述信道变换器执行可逆变换。
3. 如权利要求1所述的系统,其中所述信道变换器执行无损变换。
4. 如权利要求1所述的系统,进一步包括生成所述信息流的医学成像装置。
5. 如权利要求1所述的系统,其中所述信道变换器执行线性变换。
6. 如权利要求1所述的系统,其中所述信道变换器执行位重组操作。
7. 如权利要求1所述的系统,其中所述信道变换器将信道分组在一起来产生新的信道。
8. 如权利要求1所述的系统,其中估计函数估计对信道编码所需要的位的数量。
9. 如权利要求1所述的系统,其中所述信道变换器生成多个重新布置并且基于可压缩性来选择优选的重新布置。
10. 如权利要求1所述的系统,进一步包括有差别地对所述输出流编码的编码器。
11. 如权利要求1所述的系统,进一步包括使用XOR变换来对所述输出流编码的编码器。
12. 一种用于存储信息的方法,包括:
接收信息流,其中所述信息流包括元组序列并且其中所述元组中的每个包括对应于多个输入信道中的一个的数据元素;
使用信道变换器来将所述数据元素重新布置成对于输出流的多个输出信道,其中所述输出信道具有比所述输入信道更高的可压缩性;以及
存储所述输出流。
13. 如权利要求12所述的方法,其中所述信道变换器执行可逆变换。
14. 如权利要求12所述的方法,其中所述信道变换器执行无损变换。
15. 如权利要求12所述的方法,其中所述信道变换器执行线性变换。
16. 如权利要求12所述的方法,其中所述信道变换器执行位重组操作。
17. 如权利要求12所述的方法,其中所述信道变换器将信道分组在一起来产生新的信道。
18. 如权利要求12所述的方法,其中所述信道变换器生成多个重新布置并且基于可压缩性来选择优选的重新布置。
19. 如权利要求12所述的方法,其中估计函数估计对信道编码所需要的位的数量。
20. 一种计算机程序产品,其包含在有形计算机可读存储介质中并且包括计算机指令用于:
接收信息流,其中所述信息流包括元组序列并且其中所述元组中的每个包括对应于多个输入信道中的一个的数据元素;
将所述数据元素变换成对于输出流的多个输出信道,其中所述输出信道具有比所述输入信道更高的可压缩性;以及
存储所述输出流。
21. 一种用于存储信息的系统,包括:
接口,其接收信息流,其中所述信息流包括具有统计特性的数据元素;
编码器,其包括数据压缩器,所述数据压缩器实现可变长度码,其适应于所述数据元素的统计特性来产生编码输出;以及
存储器,其存储所述编码输出和从其能够得出所述可变长度码的信息。
22. 如权利要求21所述的系统,其中所述可变长度码是数据型自适应。
23. 如权利要求21所述的系统,其中所述可变长度码是数据实例自适应。
24. 如权利要求21所述的系统,其中所述可变长度码使用水平和值位来对每个数据元素编码。
25. 如权利要求21所述的系统,其中所述可变长度码使用水平和值位来对每个数据元素编码并且其中值的观察频率至少是规定的最小值。
26. 如权利要求21所述的系统,其中所述可变长度码使用水平和值位来对每个数据元素编码并且其中所述水平被压缩。
27. 如权利要求21所述的系统,其中所述可变长度码使用水平和值位来对每个数据元素编码并且其中所述值位未被压缩。
28. 如权利要求21所述的系统,其中所述可变长度码使用水平和值位来对每个数据元素编码并且其中所述值位使用这样的码来压缩,所述码以比不常出现的值更少的位来对经常出现的值编码。
29. 如权利要求21所述的系统,其中所述可变长度码使用水平和值位来对每个数据元素编码并且其中所述值位使用二阶霍夫曼码来压缩。
30. 如权利要求21所述的系统,其中所述可变长度码使用水平和值位来对每个数据元素编码并且其中所述值位使用霍夫曼码来压缩。
31. 如权利要求21所述的系统,其中所述信息流包括信道。
32. 如权利要求21所述的系统,其中所述信息流包括已经被变换来增加可压缩性的信道。
33. 如权利要求21所述的系统,其中所述数据压缩器执行无损压缩。
34. 一种用于存储信息的方法,包括:
接收信息流,其中所述信息流包括具有统计特性的数据元素;
选择可变长度码,其适应于所述数据元素的统计特性来产生压缩且编码的输出;以及
存储所述输出和从其能够得出所述可变长度码的信息。
35. 如权利要求34所述的方法,其中所述可变长度码是数据型自适应。
36. 如权利要求34所述的方法,其中所述可变长度码是数据实例自适应。
37. 如权利要求34所述的方法,其中所述可变长度码使用水平和值位来对每个数据元素编码。
38. 如权利要求34所述的方法,其中所述可变长度码使用水平和值位来对每个数据元素编码并且其中所述水平被压缩。
39. 如权利要求34所述的方法,其中所述可变长度码使用水平和值位来对每个数据元素编码并且其中所述值位未被压缩。
40. 一种计算机程序产品,其包含在有形计算机可读存储介质中并且包括计算机指令用于:
接收信息流,其中所述信息流包括具有统计特性的数据元素;
选择可变长度码,其适应于所述数据元素的统计特性来产生压缩且编码的输出;以及
存储所述输出和从其能够得出所述可变长度码的信息。
CN201380054188.1A 2012-08-21 2013-06-30 分段图像数据的无损压缩 Active CN104704825B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910711880.6A CN110460851B (zh) 2012-08-21 2013-06-30 分段图像数据的无损压缩系统、方法及存储介质

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261691735P 2012-08-21 2012-08-21
US61/691735 2012-08-21
PCT/US2013/048840 WO2014031240A2 (en) 2012-08-21 2013-06-30 Lossless compression of fragmented image data

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910711880.6A Division CN110460851B (zh) 2012-08-21 2013-06-30 分段图像数据的无损压缩系统、方法及存储介质

Publications (2)

Publication Number Publication Date
CN104704825A true CN104704825A (zh) 2015-06-10
CN104704825B CN104704825B (zh) 2019-08-30

Family

ID=50148045

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910711880.6A Active CN110460851B (zh) 2012-08-21 2013-06-30 分段图像数据的无损压缩系统、方法及存储介质
CN201380054188.1A Active CN104704825B (zh) 2012-08-21 2013-06-30 分段图像数据的无损压缩

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910711880.6A Active CN110460851B (zh) 2012-08-21 2013-06-30 分段图像数据的无损压缩系统、方法及存储介质

Country Status (4)

Country Link
US (6) US9558566B2 (zh)
EP (1) EP2888882A4 (zh)
CN (2) CN110460851B (zh)
WO (1) WO2014031240A2 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014031240A2 (en) 2012-08-21 2014-02-27 Emc Corporation Lossless compression of fragmented image data
CN105046633B (zh) * 2015-06-30 2018-05-11 合肥高维数据技术有限公司 一种图像无损变换方法
US10465504B2 (en) 2015-07-28 2019-11-05 Halliburton Energy Services, Inc. Sensor data compression for downhole telemetry applications
US10127625B2 (en) * 2016-05-27 2018-11-13 Intel Corporation Bandwidth-efficient lossless fragment color compression of multi-sample pixels
US10719447B2 (en) 2016-09-26 2020-07-21 Intel Corporation Cache and compression interoperability in a graphics processor pipeline
US11394397B2 (en) * 2020-10-27 2022-07-19 EMC IP Holding Company LLC System and method for selecting a lossless compression algorithm for a data object based on performance objectives and performance metrics of a set of compression algorithms
US11641212B2 (en) 2021-03-12 2023-05-02 EMC IP Holding Company LLC Probabilistic model for file-specific compression selection under SLA-constraints
US11637565B2 (en) 2021-06-30 2023-04-25 EMC IP Holding Company LLC Probabilistic model for file-specific compression selection under SLA-constraints
US11647103B1 (en) 2022-01-14 2023-05-09 Dell Products L.P. Compression-as-a-service for data transmissions
US11770434B1 (en) 2022-10-18 2023-09-26 Dell Products L.P. Compression on-demand in a stream data platform

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6320986B1 (en) * 1995-08-18 2001-11-20 International Business Machines Corporation Preprocessing multiple bit per pixel sampled data for Lempel-Ziv compression
US20020176632A1 (en) * 2001-03-15 2002-11-28 Christos Chrysafis JADE-JPEG based adaptive document compression engine
US20040217956A1 (en) * 2002-02-28 2004-11-04 Paul Besl Method and system for processing, compressing, streaming, and interactive rendering of 3D color image data
CN1805547A (zh) * 2004-12-17 2006-07-19 微软公司 用于高效无损数据压缩的可逆重叠算子
CN101160725A (zh) * 2005-04-13 2008-04-09 弗劳恩霍夫应用研究促进协会 确保最大比特率的无损信息编码
CN101371447A (zh) * 2006-01-20 2009-02-18 微软公司 使用扩展带频率编码的复变换信道编码
US7733396B2 (en) * 2002-10-29 2010-06-08 Stmicroelectronics S.R.L. Process and system for processing signals arranged in a bayer pattern
WO2012078280A1 (en) * 2010-11-05 2012-06-14 Sonocine, Inc. Elastography imaging system
CN104718706A (zh) * 2012-08-21 2015-06-17 Emc公司 分段图像数据的格式识别

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2862022B2 (ja) * 1990-10-31 1999-02-24 松下電工株式会社 画像符号化方式
US5627534A (en) 1995-03-23 1997-05-06 International Business Machines Corporation Dual stage compression of bit mapped image data using refined run length and LZ compression
US6356660B1 (en) * 1997-10-15 2002-03-12 Hewlett-Packard Co. Method for compressing raster data
TW391129B (en) * 1998-04-30 2000-05-21 Hyundai Electronics Ind Apparatus and method for compressing image data outputted from image semsor having bayer pattern
US7111094B1 (en) 1999-08-02 2006-09-19 Shin-Ping Liu System, method and algorithm for the optimization of entropy for lossless compression
WO2001010038A1 (en) 1999-08-02 2001-02-08 The V.E. Group, Llc System, method and algorithm for the optimization of entropy for lossless compression
US6744929B1 (en) * 1999-11-18 2004-06-01 Nikon Corporation Image data compression method image data compression apparatus and recording medium and data signal for providing image data compression program
EP1289308B1 (en) * 2001-08-29 2006-04-26 STMicroelectronics S.r.l. Image generating system
US8284844B2 (en) * 2002-04-01 2012-10-09 Broadcom Corporation Video decoding system supporting multiple standards
US7373005B2 (en) 2003-04-10 2008-05-13 Micron Technology, Inc. Compression system for integrated sensor devices
US7454431B2 (en) 2003-07-17 2008-11-18 At&T Corp. Method and apparatus for window matching in delta compressors
US7596632B1 (en) 2004-10-05 2009-09-29 At&T Intellectual Property Ii, L.P. Windowing by prefix matching
US7991610B2 (en) * 2005-04-13 2011-08-02 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Adaptive grouping of parameters for enhanced coding efficiency
US20060235683A1 (en) * 2005-04-13 2006-10-19 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Lossless encoding of information with guaranteed maximum bitrate
KR100818268B1 (ko) 2005-04-14 2008-04-02 삼성전자주식회사 오디오 데이터 부호화 및 복호화 장치와 방법
US7430560B1 (en) * 2005-07-22 2008-09-30 X-Engines, Inc. Multi-level compressed lock-up tables formed by logical operations to compress selected index bits
TW200723847A (en) 2005-12-07 2007-06-16 Pixart Imaging Inc Wireless image capture apparatus
WO2007069190A2 (en) * 2005-12-14 2007-06-21 Nxp B.V. On-chip estimation of key-extraction parameters for physical tokens
US8116371B2 (en) * 2006-03-08 2012-02-14 Texas Instruments Incorporated VLC technique for layered video coding using distinct element grouping
US7961960B2 (en) * 2006-08-24 2011-06-14 Dell Products L.P. Methods and apparatus for reducing storage size
CN101193285A (zh) * 2006-11-22 2008-06-04 乐金电子(昆山)电脑有限公司 影像压缩编码及解码的方法和装置
US8711926B2 (en) * 2007-02-08 2014-04-29 Qualcomm Incorporated Distortion estimation for quantized data
JP2008312193A (ja) * 2007-05-16 2008-12-25 Olympus Imaging Corp 画像データ圧縮装置、画像データ圧縮方法およびプログラム
CN101184221A (zh) * 2007-12-06 2008-05-21 上海大学 基于视觉关注度的视频编码方法
US8238677B2 (en) * 2008-03-07 2012-08-07 International Business Machines Corporation Adaptive lossless data compression method for compression of color image data
US7827187B2 (en) 2008-04-04 2010-11-02 International Business Machines Corporation Frequency partitioning: entropy compression with fixed size fields
US7683809B2 (en) * 2008-04-11 2010-03-23 Aceurity, Inc. Advanced lossless bit coding
US8934543B2 (en) * 2009-02-13 2015-01-13 Blackberry Limited Adaptive quantization with balanced pixel-domain distortion distribution in image processing
CN102271251B (zh) * 2010-06-02 2013-01-16 华晶科技股份有限公司 无失真的图像压缩方法
CN103119990A (zh) 2010-07-26 2013-05-22 惠普发展公司,有限责任合伙企业 用于基于比特位置压缩比特平面的方法和系统
US8442988B2 (en) * 2010-11-04 2013-05-14 International Business Machines Corporation Adaptive cell-specific dictionaries for frequency-partitioned multi-dimensional data
WO2014031240A2 (en) * 2012-08-21 2014-02-27 Emc Corporation Lossless compression of fragmented image data

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6320986B1 (en) * 1995-08-18 2001-11-20 International Business Machines Corporation Preprocessing multiple bit per pixel sampled data for Lempel-Ziv compression
US20020176632A1 (en) * 2001-03-15 2002-11-28 Christos Chrysafis JADE-JPEG based adaptive document compression engine
US20040217956A1 (en) * 2002-02-28 2004-11-04 Paul Besl Method and system for processing, compressing, streaming, and interactive rendering of 3D color image data
US7733396B2 (en) * 2002-10-29 2010-06-08 Stmicroelectronics S.R.L. Process and system for processing signals arranged in a bayer pattern
CN1805547A (zh) * 2004-12-17 2006-07-19 微软公司 用于高效无损数据压缩的可逆重叠算子
CN101160725A (zh) * 2005-04-13 2008-04-09 弗劳恩霍夫应用研究促进协会 确保最大比特率的无损信息编码
CN101371447A (zh) * 2006-01-20 2009-02-18 微软公司 使用扩展带频率编码的复变换信道编码
CN102708868A (zh) * 2006-01-20 2012-10-03 微软公司 使用扩展带频率编码的复变换信道编码
WO2012078280A1 (en) * 2010-11-05 2012-06-14 Sonocine, Inc. Elastography imaging system
CN104718706A (zh) * 2012-08-21 2015-06-17 Emc公司 分段图像数据的格式识别

Also Published As

Publication number Publication date
US20190213758A1 (en) 2019-07-11
US20140056533A1 (en) 2014-02-27
US20170256074A1 (en) 2017-09-07
US10249059B2 (en) 2019-04-02
US9684974B2 (en) 2017-06-20
WO2014031240A2 (en) 2014-02-27
EP2888882A2 (en) 2015-07-01
US10282863B2 (en) 2019-05-07
WO2014031240A3 (en) 2014-05-08
US20140056532A1 (en) 2014-02-27
US11074723B2 (en) 2021-07-27
EP2888882A4 (en) 2016-07-27
CN110460851B (zh) 2022-03-08
US20190180478A1 (en) 2019-06-13
CN110460851A (zh) 2019-11-15
US9558566B2 (en) 2017-01-31
US20170104999A1 (en) 2017-04-13
CN104704825B (zh) 2019-08-30
US11049283B2 (en) 2021-06-29

Similar Documents

Publication Publication Date Title
US20230188736A1 (en) Methods and apparatuses for hierarchically encoding and decoding a bytestream
CN104704825A (zh) 分段图像数据的无损压缩
US20170257628A1 (en) Remote viewing of large image files
Di et al. Efficient lossy compression for scientific data based on pointwise relative error bound
CN114222129A (zh) 图像压缩编码方法、装置、计算机设备和存储介质
CN112449191B (zh) 压缩多个图像的方法、解压缩图像的方法和装置
Huilgol et al. Lossless Image Compression using Proposed Equations and JPEG-LS Prediction
WO2023179464A1 (zh) 一种图像压缩方法,图像解压方法和图像处理装置
Alkhalayleh et al. A new lossless method of image compression by decomposing the tree of Huffman technique
Thangavelu et al. Lossless color medical image compression using adaptive block‐based encoding for human computed tomographic images
CN117097905A (zh) 一种无损图像分块压缩方法、设备、存储介质
Jain Data Compression-LZW

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant