CN104541502B - 用于视频编码和解码的基于直方图分段的局部自适应滤波器 - Google Patents

用于视频编码和解码的基于直方图分段的局部自适应滤波器 Download PDF

Info

Publication number
CN104541502B
CN104541502B CN201280075373.4A CN201280075373A CN104541502B CN 104541502 B CN104541502 B CN 104541502B CN 201280075373 A CN201280075373 A CN 201280075373A CN 104541502 B CN104541502 B CN 104541502B
Authority
CN
China
Prior art keywords
area
histogram
pixel
value
divided
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201280075373.4A
Other languages
English (en)
Other versions
CN104541502A (zh
Inventor
徐理东
邱怡仁
张文豪
江宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Priority to CN201710513805.XA priority Critical patent/CN107517380B/zh
Publication of CN104541502A publication Critical patent/CN104541502A/zh
Application granted granted Critical
Publication of CN104541502B publication Critical patent/CN104541502B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)

Abstract

用于视频编解码器系统的经重构的图片质量可以通过利用直方图分段将经重构的像素分类到不同的直方图组区中并且然后在不同的组区上应用不同的滤波器而改善。直方图分段可以通过将直方图平均地划分成M个组区或者基于直方图特性将直方图自适应地划分成N个组区而执行。在此，M和N可以是预定义的、固定的非负整数值或者处于编码器侧的自适应生成值且可以通过经编码的比特流而被发送到解码器。

Description

用于视频编码和解码的基于直方图分段的局部自适应滤波器
背景技术
本文涉及视频压缩。
在有损视频编码中，变换系数的量化将向经重构的图片引入质量降级。较大的量化步长引入较大的图片质量损失。
为了改善经重构的图片质量并且改善视频压缩增益，可以应用自适应滤波器作为环外视频处理工具或者作为核心视频编码管线中的环内模块的一部分，以部分补偿图片质量损失。
附图说明
关于以下附图描述一些实施例：
图1示出在应用多个直方图分段方法时用于滤波决定的编码流程的一个示例。
图2示出对应的解码器流程。
图3示出一个实施例的系统描绘。
图4是一个实施例的主立面视图。
具体实施方式
考虑到全局维纳（Wiener）滤波器可能损失对一些局部像素信息的适配，可以在自适应选择的像素上局部应用维纳滤波器，使用直方图分段方案来帮助选择像素以用于滤波。但是，维纳滤波器可能缺乏处置直方图组区（bin）内的恒定质量损失的能力。因此，具有偏移的经修改的维纳滤波器可以用于对直方图组区进行自适应滤波。
可以通过利用直方图分段将经重构的像素分类到不同的直方图组区中并且然后在不同的组区上应用不同的滤波器来改善用于视频编解码器系统的经重构的图片质量。可以通过将直方图均等地划分成M个组区或者基于直方图特性将直方图自适应地划分成N个组区来执行直方图分段。例如，如果像素值范围是0-255，则将直方图均等地划分成M个组区意味着每一个组区具有256/M个像素值的区间。在此，M和N可以是预定义的、固定的非负整数值或者处于编码器侧的自适应生成值，且可以通过经编码的比特流而被发送到解码器。直方图特性牵涉像素值的分布。存在介绍直方图分段和/或分区的方法的许多公开文件。
可以通过应用多个可用直方图分段方案并且在编码器侧基于率失真优化（RDO）准则确定用于滤波的最佳分段方案且然后向解码器发送标志以指示确定结果来针对视频编解码器系统改善经重构的图片质量。可以通过基于RDO准则在经分段的直方图组区上自适应地应用滤波器且然后经由经编码的比特流发送标志以指示应当对哪些直方图组区进行滤波来改善用于视频编解码器系统的经重构的图片质量。
自适应维纳滤波器可以被有偏移地应用于直方图组区。可以在编码器侧自适应地生成用于直方图组区的维纳滤波器系数和偏移值，并且然后，通过经编码的比特流将系数和偏移值发送到解码器。将具有偏移的维纳滤波器应用在直方图组区中的经重构的像素P （x,y）上以得到用于该组区的经滤波的像素值P'（x,y）。然后，可以通过最小化经滤波的像素值P'（x,y）与原始输入像素值Q（x,y）之间的绝对差和（SSD）来计算维纳滤波器系数和偏移值，如图1中在编码器侧所示，并且然后，通过经编码的比特流将系数和偏移值发送到解码器。在一些实施例中，可以迫使偏移值为零，并且仅维纳滤波器系数需要在编码器侧生成且然后被发送到解码器。
在一些实施例中，将偏移值仅应用到直方图组区而不应用维纳滤波器。在这种情况中，仅偏移值需要针对直方图组区在编码器侧生成且然后被发送到解码器。
在一些实施例中，可以迫使一些维纳滤波器系数为零以节约传输带宽，并且然后，这些系数不需要被发送到解码器。
可以通过在编码器侧基于RDO准则自适应地选择全局滤波或基于直方图分段的局部滤波且然后向解码器发送标志以指示选择结果来改善用于视频编解码器系统的经重构的图片质量。全局滤波事实上是基于直方图分段的局部滤波的特殊情况。如果整个直方图被视为单个组区（无分段），则局部滤波事实上是图片中的所有像素上的全局滤波。在图1中，对于这种情况，一个直方图分段方法可以被设置成“不分段”。
可以通过在编码器侧基于RDO准则自适应地确定要滤波（或者不要滤波）的帧且然后向解码器发送标志以指示确定结果来改善用于视频编解码器系统的经重构的图片质量。
在视频编解码器中，自适应维纳滤波器旨在最小化两个输入图片或图片区之间的差异和需要被传输到解码器侧的滤波器系数。令Q（x,y）标示在位置（x,y）处编码器输入像素的值，并且P（x,y）标示在位置（x,y）处经重构的滤波前像素的值。具有偏移的自适应维纳滤波如所指示的等式（1）那样在P（x,y）上执行以得到滤波后像素值P'（x,y）：
其中C m,n 标示自适应滤波系数，并且Offset标示被添加到对应直方图组区的偏移值。是用于控制维纳滤波器抽头的数目的参数。利用变量的以下列表中的不同设置，滤波器可以是对称滤波器或非对称滤波器、1-D滤波器或2-D滤波器。参数可以被设置成预定义的固定值。这些固定值可以在视频编码标准规范中给出，使得编码器和解码器二者可以使用相同值。可替换地，可以具有若干预定义的候选值。然后，编码器可以基于RDO准则来选择最佳候选，且然后向解码器发送标志以指示要使用哪个候选。
可以在编码器侧自适应地生成系数C m,n 和偏移值Offset，且然后可以将其编码到比特流中以用于解码。一种用于生成C m,n 和Offset值的方法是：最小化Q（x,y）与P'（x,y）之间的平方失真之和。
以下提供滤波器抽头的求导。为了容易描述，可以将2D滤波器抽头Cmn映射到1D滤波器抽头Ci，并将2D像素索引（x,y）映射到1D像素索引（i）。考虑维纳滤波器的输入像素Q （k）和由滤波器支持{S}中的经重构经映射像素P（k）构成的输出P'（k），大小为L+1，具有权重C i 。自适应（维纳）滤波器函数为
输入像素Q（i）与经维纳滤波的像素P'（i）之间的残差信号被定义为
通过针对滤波器抽头最小化均方误差{C i }，维纳滤波器是最优的
其中E[]是针对感兴趣的像素的残差信号的平方的期望，所述感兴趣的像素可以是来自图片序列、图片或者图片内的某个区域的像素。
为了找到的最小值，关于C i 取导数。可以通过令导数等于零来导出滤波器抽头，
以下等式[7]标示P（k）的自相关函数并且以下等式[8]标示P（k）和Q（k）之间的互相关函数。
可以以矩阵形式重写等式[5]
因此，维纳滤波器抽头集合{C}可以以矩阵格式导出
其中是等式[9]中的自相关矩阵的逆矩阵。
在获得Ci之后，它可以被映射回到Cmn。然后，可以通过来计算偏移，其中N是直方图组区中像素的数目。
等式[7]和[10]中的自相关函数的集合可以在视频解码器侧获得，但是等式[8]和[10]中的互相关由于输入{x}的需要仅在视频编码器侧可用而必须在视频编码器侧导出。因此，我们需要从视频编码器向视频解码器传输在等式[10]中导出的滤波器抽头。
互相关函数而不是所导出的滤波器抽头的传输在一些情况中是足够的，因为视频解码器可以利用互相关函数的接收外加在其自身手里的经解码经解块的数据{y}来导出滤波器抽头。
在一些情况中可以进一步通过跳过接近于图片边界的像素来获得更精确的统计信息以改善编码效率。等式[10]的右手侧是该跳过的表达式。
可以分别导出每亮度和每色度通道的滤波器抽头。基于利用仅色度像素导出的滤波器抽头来针对色度图片实现更好的编码效率。一些场景使用Cb和Cr通道二者共享的一个色度表，或者，可以将两个个体表分别用于Cb和Cr。
该方法是可缩放的，并且它可以被扩展成包括除经自适应滤波的图片外的经解块的图片，以充当用于运动估计的阶段的参考图片。这使参考图片的量加倍以改善运动估计的精度，而不从视频编码器侧发送额外信息，因为经解块的图片在视频解码器侧总是可访问的。
在一些场景中，自适应滤波器的编码效率优于仅应用解块滤波器的情况。也就是说，可以应用自适应滤波器，但从核心编码回路移除解块滤波器。
当利用全局维纳滤波器对图片进行滤波时，利用图片中的所有像素来训练滤波器系数。在这种情况中，滤波将减少一些像素的失真，但它也将增加其它像素的失真。因此，可以通过仅执行图片中的像素的一部分上的维纳滤波来获得更多编码增益。
一种方法是：利用直方图分段将像素分类成组且然后在每一个直方图组区上自适应地（取决于RDO准则）执行维纳滤波。直方图分段将像素值划分成多个组区，其中一个组区是其值落到组区中的像素组。假定直方图被划分成N个组区（利用任何种类的直方图分段方法，包括均匀或非均匀方法）。然后，编码器可以决定对哪些组区进行滤波并生成用于那些要滤波的组区的滤波参数（即，系数C m,n 和Offset），且然后向解码器传输有关信息。
当应用多个直方图分段方法时，编码器可以确定哪个RDO准则被用于对当前图片进行滤波且然后向解码器发送确定结果。编码器可以进行多任务编码（一遍用于一个分段方法）并计算每一遍的率失真（RD）成本。然后具有最小RD成本的那遍将被用于最终编码。
参考图1，在位置（x,y）处经重构的滤波前像素的值P（x,y）可以被馈送到直方图分段方法12a-k。在这种情况中，应用多个直方图分段方法，并且每一方法对值进行操作。这产生被提供到自适应滤波器决定14a-14k的输出。同样被应用到自适应滤波器决定14a-k的是在位置（x,y）处编码器输入像素的值Q（x,y）。基于这些输入，自适应滤波器决定将值输出到直方图分段方法决定16，其然后产生所期望的结果。自适应滤波器决定包括具有偏移的自适应维纳滤波器。
参考涉及与编码器侧相对的解码器的图2，向利用所接收到的方法块的直方图分段18应用值P（x,y）。当定义了多个直方图分段方法时，解码器将从编码器接收指示编码器选择了哪个分段方法的标志。在已经接收到该方法标志之后，解码器可以利用所接收到的方法在P（x,y）上进行直方图分段。将其输出提供到具有所接收到的滤波器参数的直方图组区上的自适应滤波器20以输出滤波后像素值P'（x,y）。
图3图示了系统700的实施例。在实施例中，系统700可以是媒体系统，尽管系统700不限于该上下文。例如，系统700可以被合并到个人计算机（PC）、膝上型计算机、超膝上型计算机、平板、触摸板、便携式计算机、手持式计算机、掌上计算机、个人数字助理（PDA）、蜂窝电话、组合蜂窝电话/PDA、电视、智能设备（例如智能电话、智能平板或智能电视）、移动互联网设备（MID）、消息传递设备、数据通信设备等中。
在实施例中，系统700包括耦合到显示器720的平台702。平台702可以从诸如（一个或多个）内容服务设备730或（一个或多个）内容递送设备740之类的内容设备或者其它类似内容源接收内容。包括一个或多个导航特征的导航控制器750可以用于与例如平台702和/或显示器720交互。以下更加详细地描述这些组件中的每一个。
在实施例中，平台702可以包括芯片集705、处理器710、存储器712、储存器714、图形子系统715、应用716、全球定位系统（GPS）721、相机723和/或无线电设备718的任何组合。芯片集705可以提供处理器710、存储器712、储存器714、图形子系统715、应用716和/或无线电设备718之间的相互通信。例如，芯片集705可以包括能够提供与储存器714的相互通信的存储适配器（未描绘）。
此外，平台702可以包括操作系统770。到处理器772的接口可以将操作系统和处理器710对接。
可以提供固件790以实现诸如启动序列之类的功能。可以提供使固件能够从平台702外部更新的更新模块。例如，更新模块可以包括用于执行下述操作的代码：确定是否更新的尝试是真实的并且标识固件790的最后更新以促进对何时需要升级的确定。
在一些实施例中，平台702可以由外部电力供给来供电。在一些情况中，平台702还可以包括内部电池780，其充当不适配于外部电力供给的实施例中或允许源自电池的电力或源自外部的电力的实施例中的电力源。
举几个例子，图1和2中所示的序列可以通过将它们合并在储存器714内或者处理器710或图形子系统715内的存储器内而实现在软件和固件实施例中。图形子系统715可以包括图形处理单元并且处理器710在一个实施例中可以是中央处理单元。
处理器710可以被实现为复杂指令集计算机（CISC）或精简指令集计算机（RISC）处理器、x86指令集兼容处理器、多核或任何其它的微处理器或中央处理单元（CPU）。在实施例中，处理器710可以包括（一个或多个）双核处理器、（一个或多个）双核移动处理器等等。
存储器712可以被实现为易失性存储器设备，诸如但不限于随机存取存储器（RAM）、动态随机存取存储器（DRAM）或静态RAM（SRAM）。
储存器714可以被实现为非易失性存储设备，诸如但不限于磁盘驱动器、光盘驱动器、带驱动器、内部存储设备、附接存储设备、闪速存储器、备有电池的SDRAM（同步DRAM）和/或网络可访问存储设备。在实施例中，储存器714可以包括用于当例如包括多个硬盘驱动器时增加针对有价值数字媒体的存储性能增强保护的技术。
图形子系统715可以执行诸如静止图像之类的图像或视频的处理以用于显示。图形子系统715可以是例如图形处理单元（GPU）或视觉处理单元（VPU）。模拟或数字接口可以用于通信耦合图形子系统715和显示器720。例如，接口可以是高清晰度多媒体接口、显示端口、无线HDMI和/或无线HD顺从技术中的任一个。图形子系统715可以被集成到处理器710或芯片集705中。图形子系统715可以是通信耦合到芯片集705的独立卡。
本文描述的图形和/或视频处理技术可以被实现在各种硬件架构中。例如，图形和/或视频功能可以被集成在芯片集内。可替换地，可以使用分立的图形和/或视频处理器。作为又一实施例，图形和/或视频功能可以由包括多核处理器的通用处理器来实现。在另一实施例中，功能可以被实现在消费电子设备中。
无线电设备718可以包括能够使用各种适合的无线通信技术发射和接收信号的一个或多个无线电设备。这样的技术可以涉及跨一个或多个无线网络的通信。示例性无线网络包括（但不限于）无线局域网（WLAN）、无线个域网（WPAN）、无线城域网（WMAN）、蜂窝网络和卫星网络。在跨这样的网络进行通信时，无线电设备718可以依照以任何版本出现的一个或多个适用标准进行操作。
在实施例中，显示器720可以包括任何电视类型监视器或显示器。显示器720可以包括例如计算机显示屏、触摸屏显示器、视频监视器、电视类设备和/或电视。显示器720可以是数字和/或模拟的。在实施例中，显示器720可以是全息显示器。显示器720还可以是可接收视觉投影的透明表面。这样的投影可以传达各种形式的信息、图像和/或对象。例如，这样的投影可以是用于移动增强现实（MAR）应用的视觉叠加。在一个或多个软件应用716的控制之下，平台702可以在显示器720上显示用户界面722。
在实施例中，（一个或多个）内容服务设备730可以由任何国家、国际和/或独立服务来托管且因此经由例如因特网而对平台702来说可访问。（一个或多个）内容服务设备730可以耦合到平台702和/或显示器720。平台702和/或（一个或多个）内容服务设备730可以耦合到网络760以向网络760和从网络760传送（例如发送和/或接收）媒体信息。（一个或多个）内容递送设备740也可以耦合到平台702和/或显示器720。
在实施例中，（一个或多个）内容服务设备730可以包括有线电视盒、个人计算机、网络、电话、能够递送数字信息和/或内容的支持因特网的设备或器具、以及能够在内容提供商与平台702和/或显示器720之间经由网络760或直接地单向或双向传送内容的任何其它类似设备。将领会到，内容可以经由网络760而被单向和/或双向地传送到系统700中的任一个组件和内容提供商以及从其传送。内容的示例可以包括任何媒体信息，包括例如视频、音乐、医疗和游戏信息等等。
（一个或多个）内容服务设备730接收包括媒体信息、数字信息和/或其它内容的诸如有线电视节目之类的内容。内容提供商的示例可以包括任何有线或卫星电视或者无线电或因特网内容提供商。所提供的示例并不意在限制本发明的实施例。
在实施例中，平台702可以从具有一个或多个导航特征的导航控制器750接收控制信号。控制器750的导航特征可以被用于例如与用户界面722交互。在实施例中，导航控制器750可以是指点设备，其可以是允许用户将空间（例如连续且多维的）数据输入到计算机中的计算机硬件组件（特别地，人类接口设备）。诸如图形用户界面（GUI）之类的许多系统以及电视和监视器允许用户使用身体姿势控制数据并向计算机或电视提供数据。
控制器750的导航特征的移动可以通过在显示器上显示的指针、光标、聚焦环或其它视觉指示器的移动而被回送在显示器（例如显示器720）上。例如，在软件应用716的控制之下，位于导航控制器750上的导航特征可以被映射到在例如用户界面722上显示的虚拟导航特征。在实施例中，控制器750可能不是分离的组件，而是被集成到平台702和/或显示器720中。然而，实施例不限于本文示出或描述的元素或者不被限制在本文示出或描述的上下文中。
在实施例中，驱动器（未示出）可以包括使用户能够例如在初始启动之后（在被启用时）利用按钮触摸来即时开启和关闭像电视之类的平台702的技术。当平台被“关闭”时，程序逻辑可以允许平台702将内容流送到媒体适配器或（一个或多个）其它内容服务设备730或（一个或多个）内容递送设备740。此外，芯片集705可以包括针对例如5.1环绕声音频和/或高清晰度7.1环绕声音频的硬件和/或软件支持。驱动器可以包括用于集成图形平台的图形驱动器。在实施例中，图形驱动器可以包括高速外围组件互连（PCI）图形卡。
在各种实施例中，可以集成系统700中示出的任何一个或多个组件。例如，可以集成平台702和（一个或多个）内容服务设备730，或者可以集成平台702和（一个或多个）内容递送设备740，或者例如可以集成平台702、（一个或多个）内容服务设备730和（一个或多个）内容递送设备740。在各种实施例中，平台702和显示器720可以是集成单元。例如，可以集成显示器720和（一个或多个）内容服务设备730，或者可以集成显示器720和（一个或多个）内容递送设备740。这些示例不意在限制本发明。
在各种实施例中，系统700可以被实现为无线系统、有线系统或这二者的组合。当被实现为无线系统时，系统700可以包括适于通过无线共享介质进行通信的组件和接口，诸如一个或多个天线、发射器、接收器、收发器、放大器、滤波器、控制逻辑等等。无线共享介质的示例可以包括无线频谱的部分，诸如RF频谱等等。当被实现为有线系统时，系统700可以包括适于通过有线通信介质进行通信的组件和接口（诸如输入/输出（I/O）适配器）、将I/O适配器与对应的有线通信介质连接的物理连接器、网络接口卡（NIC）、盘控制器、视频控制器、音频控制器等等。有线通信介质的示例可以包括导线、线缆、金属引线、印刷电路板（PCB）、背板、开关结构、半导体材料、双绞线、同轴线缆、光纤等等。
平台702可以建立一个或多个逻辑或物理信道来传送信息。信息可以包括媒体信息和控制信息。媒体信息可以指代表示意在针对用户的内容的任何数据。内容的示例可以包括例如来自语音对话的数据、视频会议、流送视频、电子邮件（“电邮”）消息、语音邮件消息、字母数字符号、图形、图像、视频、文本等等。来自语音对话的数据可以是例如话音信息、静默时段、背景噪声、舒适噪声、音调等等。控制信息可以指代表示意在针对自动化系统的命令、指令或控制字的任何数据。例如，控制信息可以被用于将媒体信息路由通过系统或者指示节点以预定的方式处理媒体信息。然而，实施例不限于图3中示出或描述的元素或者不被限制在图3中示出或描述的上下文中。
如以上所描述的，系统700可以以变化的物理样式或形状因子体现。图4图示了其中可体现系统700的小形状因子设备800的实施例。在实施例中，例如，设备800可以被实现为具有无线能力的移动计算设备。例如，移动计算设备可以指代具有处理系统和诸如一个或多个电池之类的移动电力源或供给的任何设备。
如以上所描述的，移动计算设备的示例可以包括个人计算机（PC）、膝上型计算机、超膝上型计算机、平板、触摸板、便携式计算机、手持式计算机、掌上计算机、个人数字助理（PDA）、蜂窝电话、组合蜂窝电话/PDA、电视、智能设备（例如智能电话、智能平板或智能电视）、移动互联网设备（MID）、消息传递设备、数据通信设备等等。
移动计算设备的示例还可以包括被布置成由人穿戴的计算机，诸如手腕计算机、手指计算机、戒指计算机、眼镜计算机、腰带扣计算机、臂章计算机、鞋子计算机、衣物计算机以及其它可穿戴计算机。在实施例中，例如，移动计算设备可以被实现为能够执行计算机应用以及语音通信和/或数据通信的智能电话。尽管一些实施例可以通过作为示例而被实现为智能电话的移动计算设备加以描述，但是可以领会到，也可以使用其它无线移动计算设备来实现其它实施例。实施例在该上下文中不受限。
如图4中所示，设备800可以包括外壳802、显示器804、输入/输出（I/O）设备806以及天线808。设备800还可以包括导航特征812。显示器804可以包括用于显示适于移动计算设备的信息的任何适合的显示单元。I/O设备806可以包括用于将信息录入到移动计算设备中的任何适合的I/O设备。I/O设备806的示例可以包括字母数字键盘、数字键区、触摸板、输入键、按钮、开关、摇臂开关、麦克风、扬声器、语音识别设备和软件等等。还可以通过麦克风将信息录入到设备800中。这样的信息可以被语音识别设备数字化。实施例在该上下文中不受限。
可以使用硬件元件、软件元件或这二者的组合来实现各种实施例。硬件元件的示例可以包括处理器、微处理器、电路、电路元件（例如晶体管、电阻器、电容器、电感器等等）、集成电路、专用集成电路（ASIC）、可编程逻辑器件（PLD）、数字信号处理器（DSP）、现场可编程门阵列（FPGA）、逻辑门、寄存器、半导体器件、芯片、微芯片、芯片集等等。软件的示例可以包括软件组件、程序、应用、计算机程序、应用程序、系统程序、机器程序、操作系统软件、中间件、固件、软件模块、例程、子例程、函数、方法、过程、软件接口、应用程序接口（API）、指令集、计算代码、计算机代码、代码段、计算机代码段、字、值、符号或其任何组合。确定是否使用硬件元件和/或软件元件来实现实施例可以依照任何数目的因素而变化，诸如期望的计算速率、功率水平、耐热性、处理循环预算、输入数据速率、输出数据速率、存储器资源、数据总线速度和其它设计或性能约束。
至少一个实施例的一个或多个方面可以通过存储在机器可读介质上的代表指令实现，其表示处理器内的各种逻辑，该逻辑当被机器读取时使该机器构造用于执行本文所描述的技术的逻辑。称作“IP核”的这样的表示可以存储在有形、机器可读介质上且供给到各种客户或制造设施以加载到实际上制作逻辑或处理器的构造机器中。
可以使用硬件元件、软件元件或这二者的组合来实现各种实施例。硬件元件的示例可以包括处理器、微处理器、电路、电路元件（例如晶体管、电阻器、电容器、电感器等等）、集成电路、专用集成电路（ASIC）、可编程逻辑器件（PLD）、数字信号处理器（DSP）、现场可编程门阵列（FPGA）、逻辑门、寄存器、半导体器件、芯片、微芯片、芯片集等等。软件的示例可以包括软件组件、程序、应用、计算机程序、应用程序、系统程序、机器程序、操作系统软件、中间件、固件、软件模块、例程、子例程、函数、方法、过程、软件接口、应用程序接口（API）、指令集、计算代码、计算机代码、代码段、计算机代码段、字、值、符号或其任何组合。确定是否使用硬件元件和/或软件元件来实现实施例可以依照任何数目的因素而变化，诸如期望的计算速率、功率水平、耐热性、处理循环预算、输入数据速率、输出数据速率、存储器资源、数据总线速度和其它设计或性能约束。
至少一个实施例的一个或多个方面可以由存储在机器可读介质上的代表指令实现，其表示处理器内的各种逻辑，该逻辑当被机器读取时使该机器构造用于执行本文所描述的技术的逻辑。称作“IP核”的这样的表示可以存储在有形、机器可读介质上且供给到各种客户或制造设施以加载到实际上制作逻辑或处理器的构造机器中。
本文描述的图形处理技术可以被实现在各种硬件架构中。例如，图形功能可以被集成在芯片集内。可替换地，可以使用分立的图形处理器。作为又一实施例，图形功能可以由包括多核处理器的通用处理器实现。
以下条款和/或示例关于另外的实施例：
一个示例实施例可以是一种使用具有偏移的维纳滤波器对直方图组区进行自适应滤波以用于视频编码的方法。另一示例实施例可以使用多个组区分段方法。该方法还可以包括将直方图均等地划分成组区。该方法还可以包括将直方图自适应地划分成组区。该方法可以包括从编码器向解码器发送组区的数目。该方法可以包括基于率失真优化准则识别分段方法。该方法还可以包括通过最小化一位置处的输入像素的值与该位置处的滤波后像素值之间的平方失真之和来生成自适应滤波器系数。
另一示例实施例可以是至少一个或多个计算机可读介质，其包括存储由计算机执行的下述指令：使用具有偏移的维纳滤波器来对直方图组区进行自适应滤波以用于视频编码。一个示例实施例还可以存储使用多个组区分段方法的指令。该介质还可以存储将直方图划分成组区的指令。该介质还可以存储将直方图自适应地划分成组区的指令。该介质还可以存储从编码器向解码器发送组区的数目的指令。该介质还可以存储基于率失真优化准则识别分段方法的指令。该介质还可以存储通过最小化一位置处的输入像素的值与该位置处的滤波后像素值之间的平方失真之和来生成自适应滤波器系数的指令。
另一示例实施例可以是一种装置，其包括：具有偏移的维纳滤波器；以及耦合到所述滤波器以使用所述滤波器对直方图组区进行自适应滤波的处理器。该装置可以使用多个组区分段。该装置可以将直方图均等地划分成组区。该装置可以将直方图自适应地划分成组区。该装置可以包括编码器和耦合到所述编码器的解码器，所述处理器从编码器向解码器发送组区的数目。该装置还可以包括处理器以基于率失真优化准则识别分段方法。该装置可以包括所述处理器以通过最小化一位置处的输入像素的值与该位置处的后像素值之间的平方失真之和来生成自适应滤波器系数。该装置还可以包括操作系统、电池和固件以及更新所述固件的模块。
本文描述的图形处理技术可以被实现在各种硬件架构中。例如，图形功能可以被集成在芯片集内。可替换地，可以使用分立的图形处理器。作为又一实施例，图形功能可以由包括多核处理器的通用处理器实现。
遍及本说明书对“一个实施例”或“一实施例”的引用意味着结合该实施例描述的特定特征、结构或特性被包括在本发明内涵盖的至少一个实现中。因此，短语“一个实施例”或“在一实施例中”的出现不一定都指代相同的实施例。另外，特定特征、结构或特性可以以除所说明的特定实施例外的其它适合形式制定，并且所有这样的形式可以被涵盖在本申请的权利要求内。
虽然已经关于有限数目的实施例描述了本发明，但是本领域技术人员将从中领会到大量修改和变型。意图在于，随附权利要求覆盖如落在本发明的真实精神和范围内的所有这样的修改和变型。

Claims (27)

1.一种方法，包括：
使用多个组区分段方法；
使用具有适应于每个所述组区的偏移的维纳滤波器，就每个所述分段方法单独地对直方图组区进行自适应滤波以用于视频编码；以及
将所述偏移设置为从维纳滤波器输出的经滤波的值和输入到所述维纳滤波器的原始输入像素值之间的差的总和除以一直方图组区中像素的数目。
2.权利要求1的方法，包括将直方图均等地划分成组区。
3.权利要求1的方法，包括将直方图自适应地划分成组区。
4.权利要求1的方法，包括从编码器向解码器发送组区的数目。
5.权利要求1的方法，包括基于率失真优化准则识别分段方法。
6.权利要求1的方法，包括通过最小化一位置处的输入像素的值与该位置处的滤波后像素值之间的平方失真之和来生成自适应滤波器系数。
7.一种计算机可读介质，其存储由计算机执行的指令，以执行包括下述步骤的方法：
使用多个组区分段方法；
使用具有适应于每个所述组区的偏移的维纳滤波器，就每个所述分段方法单独地对直方图组区进行自适应滤波以用于视频编码；以及
将所述偏移设置为从维纳滤波器输出的经滤波的值和输入到所述维纳滤波器的原始输入像素值之间的差的总和除以一直方图组区中像素的数目。
8.权利要求7的介质，还存储将直方图划分成组区的指令。
9.权利要求7的介质，还存储将直方图自适应地划分成组区的指令。
10.权利要求9的介质，还存储从编码器向解码器发送组区的数目的指令。
11.权利要求10的介质，还存储基于率失真优化准则识别分段方法的指令。
12.权利要求9的介质，还存储通过最小化一位置处的输入像素的值与该位置处的滤波后像素值之间的平方失真之和来生成自适应滤波器系数的指令。
13.一种装置，包括：
具有偏移的维纳滤波器；以及
耦合到所述滤波器的处理器，以使用多个组区分段方法，使用所述滤波器对每个所述分段方法单独地对直方图组区进行自适应滤波，并用于将所述偏移设置为从维纳滤波器输出的经滤波的值和输入到所述维纳滤波器的原始输入像素值之间的差的总和除以一直方图组区中像素的数目，其中所述滤波器的偏移适应于每个所述组区。
14.权利要求13的装置，所述处理器将直方图均等地划分成组区。
15.权利要求13的装置，所述处理器将直方图自适应地划分成组区。
16.权利要求13的装置，包括编码器和耦合到所述编码器的解码器，所述处理器从编码器向解码器发送组区的数目。
17.权利要求13的装置，所述处理器基于率失真优化准则识别分段方法。
18.权利要求13的装置，所述处理器通过最小化一位置处的输入像素的值与该位置处的后像素值之间的平方失真之和来生成自适应滤波器系数。
19.权利要求13的装置，包括操作系统。
20.权利要求13的装置，包括电池。
21.权利要求13的装置，包括固件以及更新所述固件的模块。
22.一种装置，包括：
用于使用多个组区分段方法的部件；
用于使用具有适应于每个所述组区的偏移的维纳滤波器，对每个所述分段方法单独地对直方图组区进行自适应滤波以用于视频编码的部件；以及
用于将所述偏移设置为从维纳滤波器输出的经滤波的值和输入到所述维纳滤波器的原始输入像素值之间的差的总和除以一直方图组区中像素的数目的部件。
23.权利要求22的装置，包括用于将直方图均等地划分成组区的部件。
24.权利要求22的装置，包括用于将直方图自适应地划分成组区的部件。
25.权利要求22的装置，包括用于从编码器向解码器发送组区的数目的部件。
26.权利要求22的装置，包括用于基于率失真优化准则识别分段方法的部件。
27.权利要求22的装置，包括用于通过最小化一位置处的输入像素的值与该位置处的滤波后像素值之间的平方失真之和来生成自适应滤波器系数的部件。
CN201280075373.4A 2012-09-24 2012-09-24 用于视频编码和解码的基于直方图分段的局部自适应滤波器 Active CN104541502B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710513805.XA CN107517380B (zh) 2012-09-24 2012-09-24 用于视频编码和解码的基于直方图分段的局部自适应滤波器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2012/081812 WO2014043906A1 (en) 2012-09-24 2012-09-24 Histogram segmentation based local adaptive filter for video encoding and decoding

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201710513805.XA Division CN107517380B (zh) 2012-09-24 2012-09-24 用于视频编码和解码的基于直方图分段的局部自适应滤波器

Publications (2)

Publication Number Publication Date
CN104541502A CN104541502A (zh) 2015-04-22
CN104541502B true CN104541502B (zh) 2018-01-26

Family

ID=50338835

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201710513805.XA Active CN107517380B (zh) 2012-09-24 2012-09-24 用于视频编码和解码的基于直方图分段的局部自适应滤波器
CN201280075373.4A Active CN104541502B (zh) 2012-09-24 2012-09-24 用于视频编码和解码的基于直方图分段的局部自适应滤波器

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201710513805.XA Active CN107517380B (zh) 2012-09-24 2012-09-24 用于视频编码和解码的基于直方图分段的局部自适应滤波器

Country Status (5)

Country Link
US (1) US9661322B2 (zh)
EP (2) EP3242476B1 (zh)
JP (1) JP6005292B2 (zh)
CN (2) CN107517380B (zh)
WO (1) WO2014043906A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3454557A1 (en) * 2016-05-02 2019-03-13 Sony Corporation Image processing device, and image processing method
CN108073884A (zh) * 2016-11-17 2018-05-25 浙江工商大学 一种用于车道线检测的图像预处理方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102640497A (zh) * 2009-11-30 2012-08-15 日本电气株式会社 视频编码设备和视频解码设备

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7617099B2 (en) * 2001-02-12 2009-11-10 FortMedia Inc. Noise suppression by two-channel tandem spectrum modification for speech signal in an automobile
US9451932B2 (en) * 2004-12-30 2016-09-27 Crystalview Medical Imaging Limited Clutter suppression in ultrasonic imaging systems
US7885443B2 (en) * 2005-11-14 2011-02-08 Hologic, Inc. Facilitating temporal comparison of medical images
KR100887183B1 (ko) * 2007-03-21 2009-03-10 한국과학기술원 얼굴인식 전처리장치 및 방법과 이를 이용한얼굴인식시스템
EP2196017B1 (en) * 2007-09-28 2016-06-08 OCE-Technologies B.V. Method, apparatus and computer program for adaptive black point compensation
US8195001B2 (en) 2008-04-09 2012-06-05 Intel Corporation In-loop adaptive wiener filter for video coding and decoding
WO2009138996A2 (en) * 2008-05-16 2009-11-19 Department Of Biotechnology A medical image enhancement technique based on image transform resonance
US8446531B2 (en) * 2008-07-09 2013-05-21 Texas Instruments Incorporated System and method for clock offset detection
CN101452575B (zh) * 2008-12-12 2010-07-28 北京航空航天大学 一种基于神经网络的图像自适应增强方法
US8761268B2 (en) * 2009-04-06 2014-06-24 Intel Corporation Selective local adaptive wiener filter for video coding and decoding
TWI407777B (zh) * 2009-07-20 2013-09-01 Silicon Integrated Sys Corp 以影像特徵為基礎之動態對比強化裝置及其方法
CN101625869B (zh) * 2009-08-11 2012-05-30 中国人民解放军第四军医大学 一种基于小波包能量的非空气传导语音增强方法
JPWO2011039931A1 (ja) * 2009-09-30 2013-02-21 三菱電機株式会社 画像符号化装置、画像復号装置、画像符号化方法及び画像復号方法
US9313514B2 (en) * 2010-10-01 2016-04-12 Sharp Kabushiki Kaisha Methods and systems for entropy coder initialization
CN102629371A (zh) 2012-02-22 2012-08-08 中国科学院光电技术研究所 基于实时盲图像复原技术的视频像质改善系统

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102640497A (zh) * 2009-11-30 2012-08-15 日本电气株式会社 视频编码设备和视频解码设备

Also Published As

Publication number Publication date
US9661322B2 (en) 2017-05-23
EP3242476B1 (en) 2020-10-21
EP2898672B1 (en) 2018-04-11
CN104541502A (zh) 2015-04-22
CN107517380A (zh) 2017-12-26
WO2014043906A1 (en) 2014-03-27
JP6005292B2 (ja) 2016-10-12
EP2898672A1 (en) 2015-07-29
JP2015533037A (ja) 2015-11-16
CN107517380B (zh) 2020-12-22
EP3242476A1 (en) 2017-11-08
US20140086304A1 (en) 2014-03-27
EP2898672A4 (en) 2016-04-13

Similar Documents

Publication Publication Date Title
CN103581665B (zh) 转码视频数据
CN106170979B (zh) 一种用于视频编码的计算机实现的方法、系统、机器可读介质及设备
CN103577269B (zh) 媒体工作负荷调度器
CN104885467B (zh) 用于下一代视频编码的内容自适应参数变换
CN102521235B (zh) 连拍模式图像压缩和解压
CN104782124B (zh) 利用编码器硬件对视频内容进行预处理
CN104335587B (zh) 对于三维视频译码的视图间滤波器参数重复使用
EP3834137A1 (en) Committed information rate variational autoencoders
CN104584552B (zh) Svc中重复使用层间sao参数的方法、设备、系统及机器可读存储介质
CN104321970B (zh) 层间编码单元四叉树模式预测
CN106664412A (zh) 包括目标比特率的视频编码速率控制和质量控制
CN108352059A (zh) 用于将高动态范围（hdr）内容转换成标准动态范围（sdr）内容的视频色调映射
CN106663425A (zh) 用于自动语音识别的使用外推的跳帧和按需输出的神经网络
CN107529098A (zh) 实时视频摘要
CN103501439B (zh) 使用运动估计失真的帧级率控制
CN106663314A (zh) 实时皮肤平滑图像增强滤波器
CN104937932B (zh) 可适性视频编码的增强参考区域利用
CN107005697A (zh) 用于视频译码的使用基于查找表的概率更新的熵译码的方法与系统
CN107005701A (zh) 使用减少数量的角模式来降低帧内预测复杂度及其后续改进
CN106664409A (zh) 视频编码中的黄金帧选择
CN115088257A (zh) 一种图像处理方法以及相关设备
CN103929640B (zh) 用于管理视频流播的技术
CN107925777A (zh) 用于视频译码的帧重新排序的方法和系统
CN104798373A (zh) 包括在多个独立编码流之间的共享运动估计的视频编码
CN104584544A (zh) 使用一般化平面编码的随机深度缓冲器压缩

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant