CN101006463A - 包括锐度增强器的视频处理器 - Google Patents

包括锐度增强器的视频处理器 Download PDF

Info

Publication number
CN101006463A
CN101006463A CNA2005800282261A CN200580028226A CN101006463A CN 101006463 A CN101006463 A CN 101006463A CN A2005800282261 A CNA2005800282261 A CN A2005800282261A CN 200580028226 A CN200580028226 A CN 200580028226A CN 101006463 A CN101006463 A CN 101006463A
Authority
CN
China
Prior art keywords
pixel
video processor
pixels
filter window
enh
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2005800282261A
Other languages
English (en)
Inventor
A·乔利
E·勒塞利尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN101006463A publication Critical patent/CN101006463A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/14Coding unit complexity, e.g. amount of activity or edge presence estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/20Circuitry for controlling amplitude response
    • H04N5/205Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic
    • H04N5/208Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic for compensating for attenuation of high frequency components, e.g. crispening, aperture distortion correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20004Adaptive image processing
    • G06T2207/20012Locally adaptive
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20021Dividing image into blocks, subimages or windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Picture Signal Circuits (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

一种视频处理器处理包括像素块的图像。该视频处理器包括锐度增强器(ENH)。该锐度增强器基于自适应滤波器窗口内的各输入像素(Yi)来确定输出像素(Yo)。该自适应滤波器窗口排他地包括形成同一像素块的一部分的各输入像素。

Description

包括锐度增强器的视频处理器
发明领域
本发明涉及一种包括锐度增强器的视频处理器。该视频处理器例如可以以适当编程的多用途计算机的形式来实现。本发明的其他方面涉及一种图像处理方法、一种用于视频处理器的计算机程序以及一种视频呈现设备。该视频呈现设备例如可以是蜂窝电话或个人数字助理(PDA)。
发明背景
美国专利号4,571,635描述了一种增强图像的方法。利用逻辑阵列中的连续像素对图像进行逐点记录。所述像素的标准偏差被确定。此外,确定一个有效中心像素值。使用所确定的中心像素值来显示或者记录图像。该图像将展现出相对于原始图像得到增强的细节。
发明概要
根据本发明的一个方面,一种视频处理器具有以下特性。该视频处理器处理包括像素块的图像。该视频处理器包括锐度增强器。该锐度增强器基于一个自适应滤波器窗口内的多个输入像素来确定输出像素。该自适应滤波器窗口排他地包括形成同一像素块的一部分的输入像素。
本发明考虑到以下各方面。图像的逐块的组成对于许多视频编码技术来说是很典型的。MPEG2和MPEG4就是例子。在编码端,把将被编码的图像划分成像素块。这些块当中的每一个被单独编码。每一个编码步骤将引入特定的编码误差。结果,所述编码误差在各块之间可能有所不同。两个相邻块可能具有不同的编码误差。如果各个编码误差之间的差异程度较高,则可能会出现块效应。在被显示在显示器上的已解码图像中可能会出现可见程度足够高的块。这样就降低了主观图像质量。
锐度增强器一般会增强特定像素与相邻像素之间的差异。这种差异例如可能源自由摄影机捕获的原始图像。然而,这种差异也可能是由于上文所述的编码伪像而造成的。锐度增强器可能使得诸如块效应之类的编码伪像变得更为可见。例如,假设使用上文提到的锐度增强器来增强MPEG2或MPEG4已解码图像。其中存在以下严重风险:与未经增强的已解码图像相比,经过增强的图像可能会被感知为具有较差的质量。打一个通俗的比方,就好像有病吃了药反而比原来病得更厉害。当应用高视频压缩率时尤其会出现这种情况,因为此时编码误差将相当显著。
根据本发明的上述方面,所述锐度增强器基于一个自适应滤波器窗口内的多个输入像素来确定输出像素,该自适应滤波器窗口排他地包括形成同一像素块的一部分的输入像素。
相应地,本发明防止放大可能存在于一个像素块和相邻像素块之间的差异。如上文所解释的那样,这种差异一般是由于编码误差造成的。因此,本发明防止编码误差被放大,并且防止其降低由人类所感知的图像质量。然而,本发明允许放大同一块内的特定像素和相邻像素之间的差异。这种差异通常源自原始图像。因此,根据本发明的锐度增强器通常将增强来自原始图像的细节,而不增强编码伪像。出于这些原因,本发明允许改进图像质量,特别是在应用了高视频压缩率的情况下尤其如此。
下面将参照附图更详细地描述本发明的这些和其他方面。
附图简述
图1是示出便携式视频设备的方框图。
图2是示出视频处理器的方框图。
图3是示出所述视频处理器所执行的操作的功能图。
图4是示出包括像素块的图像的图示。
图5是示出形成所述视频处理器的一部分的锐度增强器的功能图。
图6是示出形成所述锐度增强器的一部分的峰化滤波器的功能图。
图7是示出对应于经过高通滤波的输入像素的限幅操作的曲线图。
图8A、8B和8C是示出对应于与块边界距离相对较远的像素的滤波操作的图示。
图9A、9B和9C是示出对应于形成垂直块边界的一部分的像素的滤波操作的图示。
图10A、10B和10C是示出对应于形成水平块边界的一部分的像素的滤波操作的图示。
具体描述
图1示出了便携式视频设备PVA,其例如可以是蜂窝电话。该便携式视频设备PVA包括接收器REC、视频处理器VPR和显示装置DPL。该接收器REC从所接收的输入信号INP中取回已编码视频信号VC。该已编码视频信号VC是由在发送端对图像序列执行的编码步骤产生的。该已编码视频信号VC还可以来自对于单个图像(即所谓的静止画面)的编码步骤。该已编码视频信号例如可以是MPEG4传输流。该视频处理器VPR从由该接收器REC提供的已编码视频信号VC中取回视频信号VID。该显示装置DPL显示该视频信号VID。
图2示出了视频处理器VPR。该视频处理器VPR包括输入缓冲器IBU、处理电路CPU、程序存储器PMEM、数据存储器DMEM、输出缓冲器OBU以及将前述各元件彼此耦合的总线BS。该视频处理器VPR执行各种不同操作。该程序存储器PMEM包括一组指令(即软件),其使得处理电路CPU实施所述各种不同操作。该数据存储器DMEM存储所述操作的中间结果。一个操作可以由诸如子例程的软件模块定义。
图3是视频处理器VPR的功能图,其示出了该视频处理器VPR所执行的操作。在图3中,所述操作或者功能被表示为块。因此,一个块可以对应于具有子例程形式的软件模块。为了便于描述,下文中将把各个块作为功能实体来描述。
图3示出的视频处理器VPR包括下面的功能实体:视频解码器DEC,解码后处理器DPP,锐度增强器ENH,以及视频驱动器DRV。视频解码器DEC解码所述已编码视频信号VC,以便获得已解码视频信号VD。该视频解码器DEC例如可以与MPEG4标准兼容,以便解码前述的MPEG4传输流。
该解码后处理器DPP处理该已解码视频信号VD,以便衰减特定伪像,其中所述伪像与借之获得已编码视频信号VC的视频编码技术相关。例如,在MPEG4视频编码的情况下,这种伪像可能包括所谓的块状效应或者振铃效应,其降低由人类感知的图像质量。该解码后处理器DPP提供经过后处理的已解码视频信号VDP,其中这种块状效应和振铃效应被衰减。
所述锐度增强器ENH处理所述经过后处理的已解码视频信号VDP以便增强由所述已编码视频信号VC所代表的图像的锐度。因此,所述解码后处理器DPP和锐度增强器ENH改进了在图1所示的显示装置DPL上所显示的图像的主观质量。所述视频驱动器DRV从锐度增强器ENH接收增强后的、经过后处理的已解码视频信号VDPE并且处理该信号,以便提供视频信号VID,以用于显示在所述显示装置DPL上。该处理例如可以包括:视频格式转换,放大,以及对比度、亮度和颜色调节。
图4示出了用于在显示装置DPL上进行显示的视频信号VID中的图像IM。该图像由多个像素块B形成。一个块可以被看作包括64个像素的矩阵,该矩阵具有8行和8列。该逐块的图像组成对于许多视频编码技术而言是很典型的。MPEG2和MPEG4就是例子。在编码端,把将被编码的图像划分成像素块。这些像素块当中的每一个被单独编码。
在图3中所示的所述视频处理器VPR中,已解码视频信号VD可以被看作像素块的流。这一点对于所述经过后处理的已解码视频信号VDP和增强后的、经过后处理的已解码视频信号VDPE同样适用。所述解码后处理器DPP例如可以包括一个存储器,该存储器用于暂时存储一个像素块和与之相邻的像素块。该存储器将物理地形成图2所示的数据存储器DMEM的一部分。该数据存储器DMEM内的由地址定义的一组存储器位置被静态地或者动态地分配给解码后处理器DPP。
图5示出了锐度增强器ENH。该锐度增强器ENH包括视频分析器ANAL、输入复用器MUXI、峰化滤波器PKF、平滑滤波器SMF和输出复用器MUXO。该锐度增强器ENH在逐像素的基础上处理一个块内的各像素。也就是说,该锐度增强器ENH对于每个输入像素Yi确定一个输出像素Yo。该输出像素Yo可以是经峰化的像素Yp、经平滑的像素Ys,或者该输出像素Yo可以与输入像素Yi完全相同。该峰化滤波器PKF提供经峰化的像素Yp。该平滑滤波器提供经平滑的像素Ys。该峰化滤波器PKF可以与高通滤波器相关,而该平滑滤波器SMF可以与低通滤波器相关。
所述视频分析器ANAL控制所述输入和输出复用器MUXI和MUXO。相应地,该视频分析器ANAL确定对输入像素Yi施加那种处理:峰化滤波器PKF,平滑滤波器SMF,或者仅仅是直线(其表示输出像素Yo与输入像素Yi完全相同)。该视频分析器ANAL还可以控制所述峰化滤波器PKF和平滑滤波器SMF。
该视频分析器ANAL计算一个像素区域的方差,其中所述输入像素Yi形成该像素区域的一部分。该像素区域例如可以是3×3像素的窗口,该输入像素Yi典型地是中心像素。所述方差表示该像素区域内的各像素是否相关。如果所述方差的值较低,则所述像素相关。在这种情况下,该像素区域包括相对较少的细节,其中所述输入像素Yi形成该像素区域的一部分。换句话说,该像素区域较平滑。反之,如果所述方差的值较高,则所述像素较不相关。在这种情况下,该像素区域包括相对较多的细节,其中所述输入像素Yi形成该像素区域的一部分。相应地,该视频分析器ANAL确定每一个输入像素Yi的方差。
假设所述视频分析器ANAL确定对应于输入像素Yi的方差的值较高。在这种情况下,该视频分析器ANAL使得所述峰化滤波器PKF来处理该输入像素Yi。由该处理产生的经峰化的像素Yp构成锐度增强器ENH的输出像素Yo。反之,如果输入像素Yi的值较低,则该视频分析器ANAL可以使得所述平滑滤波器SMF来处理该输入像素Yi。或者,该视频分析器还可以使得输出像素Yo与输入像素Yi完全相同。该视频分析器ANAL还可以作为所述方差的函数来调节所述峰化滤波器PKF和平滑滤波器SMF的特性。
图6示出了形成图5所示的锐度增强器ENH的一部分的峰化滤波器PKF。该峰化滤波器PKF包括高通滤波器HPF、限幅器CLP、缩放器SCL和加法器ADD。该高通滤波器HPF接收位于滤波器窗口内的像素。该滤波器窗口包括输入像素Yi和相邻像素。下面将更详细地描述该滤波器窗口。
该高通滤波器HPF提供经过高通滤波的像素L。经过高通滤波的像素L是位于所述滤波器窗口内的各像素的加权和。所述限幅器CLP提供经限幅的、经高通滤波的像素Lc。所述缩放器SCL对所述经限幅的、经高通滤波的像素Lc进行缩放,以便获得经过限幅及缩放的、经高通滤波的像素KpLc。所述加法器ADD把经过限幅及缩放的、经高通滤波的像素KpLc与输入像素Yi相加。从而获得经峰化的像素Yp。所述经高通滤波的像素L的负值将导致经峰化的像素Yp比输入像素Yi更暗。这可以被看作暗偏移。反之,经高通滤波的像素L的正值将导致经峰化的像素Yp比输入像素Yi更亮。这对应于亮偏移。
图7示出了限幅器CLP的转移函数。水平轴表示该限幅器CLP所接收到的经高通滤波的像素L的值。垂直轴表示该限幅器CLP所提供的所述经限幅的、经高通滤波的像素Lc的值。图7示出所述限幅器CLP定义了对应于所述经高通滤波的像素L的所需值范围。该所需范围位于负限幅值NCL和正限幅值PCL之间。该限幅器CLP提供经限幅的、经高通滤波的像素Lc,如果所述经高通滤波的像素L的值位于所述所需范围内,则该像素Lc的值就等于所述经高通滤波的像素L的值。如果所述经高通滤波的像素L的值低于或等于所述负限幅值NCL,则所述经限幅的、经高通滤波的像素Lc就具有该负限幅值NCL。这样限制了所述暗偏移。反之,如果所述经高通滤波的像素L的值高于或等于所述正限幅值PCL,则所述经限幅的、经高通滤波的像素Lc就具有该正限幅值PCL。这样限制了所述亮偏移。过多的暗偏移或者过多的亮偏移或者二者可能导致图像感觉起来不自然。限制了所述暗偏移和亮偏移的限幅器CLP解决了这一问题。
图7示出所述正限幅值PCL的大小要小于所述负限幅值NCL。该转移函数关于零不对称。经验证明,人类视觉对于亮偏移比起对于暗偏移要更敏感。过多的亮偏移可能使得图像感觉起来不自然。这种风险在暗偏移的情况下要略低。具有如图7所示的非对称转移函数的限幅器CLP解决了这一问题。
图8A-8C、9A-9C以及10A-10C示出了图6中所示的高通滤波器HPF确定所述经高通滤波的像素L的方式。上述附图当中的每一幅示出了一个8×8像素块。所述像素的行和列被从0到7编号。这样的编号允许通过坐标来标识每个单独的输入像素Yi。例如,行号为5并且列号为2的输入像素Yi被表示为Yi(5,2)。
如上所述,高通滤波器HPF对位于所述滤波器窗口内的各像素进行加权组合。该滤波器窗口包括水平滤波器窗口Wh和垂直滤波器窗口Wv。图8A、9A和10A示出了水平滤波器窗口Wh。图8B、9B和10B示出了垂直滤波器窗口Wv。图8C、9C和10C示出了滤波器窗口W,该窗口得自水平滤波器窗口Wh和垂直滤波器窗口Wv的组合。在附图中,在相应的滤波器窗口中存在数值,这些数值代表滤波器系数。
水平滤波器窗口Wh包括中心像素、左相邻像素和右相邻像素。对应于中心像素的滤波器系数是2。对应于左相邻像素和右相邻像素的滤波器系数是-1。垂直滤波器窗口Wv包括中心像素、上相邻像素和下相邻像素。对应于中心像素的滤波器系数是2。对应于上相邻像素和下相邻像素的滤波器系数是-1。
图8A、8B和8C示出了高通滤波器HPF确定对应于输入像素Yi(5,2)的经高通滤波的像素L(5,2)的方式。图8A示出了水平滤波器窗口Wh。水平滤波器窗口Wh的中心像素与输入像素Yi(5,2)重合。图8B示出了垂直滤波器窗口Wv。垂直滤波器窗口Wv的中心像素也与输入像素Yi(5,2)重合。图8C示出了对应于输入像素Yi(5,2)的滤波器窗口。该滤波器窗口是水平滤波器窗口Wh和垂直滤波器窗口Wv的组合。水平滤波器窗口Wh和垂直滤波器窗口Wv只有输入像素Yi(5,2)相同,该输入像素是这两个滤波器窗口当中的每一个的中心像素。水平滤波器窗口Wh和垂直滤波器窗口Wv的相应的滤波器系数被相加。因此,在图8C中示出的滤波器窗口W中的中心像素的滤波器系数为2+2=4。
图9A、9B和9C示出了高通滤波器HPF确定对应于输入像素Yi(0,3)的经高通滤波的像素L(0,3)的方式。输入像素Yi(0,3)形成所述像素块的垂直边界的一部分。图9A示出了水平滤波器窗口Wh。该水平滤波器窗口Wh的中心像素不与输入像素Yi(0,3)重合。否则,该水平滤波器窗口Wh将包括左边的相邻像素块的一个像素,这种情况应当被防止。该水平滤波器窗口Wh被定位成使得其仅包括属于同一像素块的输入像素,其中输入像素Yi(0,3)形成该同一像素块的一部分。可以说,该水平滤波器窗口Wh停在所述像素块的左垂直边界上。同样地,水平滤波器窗口Wh将停在该像素块的右垂直边界上。应当注意到,图9A中示出的水平滤波器窗口Wh的位置与用于确定对应于输入像素Yi(1,3)的经高通滤波的像素L(1,3)的位置相同。
图9B示出了垂直滤波器窗口Wv。该垂直滤波器窗口Wv的中心像素与输入像素Yi(0,3)重合。
图9C示出了对应于输入像素Yi(0,3)的滤波器窗口W。该滤波器窗口W是水平滤波器窗口Wh和垂直滤波器窗口Wv的组合。水平滤波器窗口Wh和垂直滤波器窗口Wv仅有输入像素Yi(0,3)相同,该输入像素Yi(0,3)是水平滤波器窗口Wh的左相邻像素,并且是垂直滤波器窗口Wv的中心像素。水平滤波器窗口Wh和垂直滤波器窗口Wv的相应的滤波器系数被相加。因此,图8C中所示的滤波器窗口W的中心像素的左相邻像素的滤波器系数为2-1=1。
图10A、10B和10C示出了高通滤波器HPF确定对应于输入像素Yi(4,7)的经高通滤波的像素L(4,7)的方式。输入像素Yi(4,7)形成所述像素块的水平边界的一部分。图10A示出水平滤波器窗口Wh。该水平滤波器窗口Wh的中心像素与输入像素Yi(4,7)重合。
图10B示出了垂直滤波器窗口Wv。该垂直滤波器窗口Wv的中心像素不与输入像素Yi(4,7)重合。否则,该垂直滤波器窗口Wv将包括下边的相邻像素块的一个像素,这种情况应当被防止。该垂直滤波器窗口Wv被定位成使得其仅包括属于同一像素块的输入像素,其中输入像素Yi(4,7)形成该同一像素块的一部分。可以说,该垂直滤波器窗口Wv停在所述像素块的下水平边界上。同样地,垂直滤波器窗口Wv将停在该像素块的上水平边界上。应当注意到,图10B中示出的垂直滤波器窗口Wv的位置与用于确定对应于输入像素Yi(4,6)的经高通滤波的像素L(4,6)的位置相同。
图10C示出了对应于输入像素Yi(4,7)的滤波器窗口W。该滤波器窗口W是水平滤波器窗口Wh和垂直滤波器窗口Wv的组合。水平滤波器窗口Wh和垂直滤波器窗口Wv仅有输入像素Yi(4,7)相同,该输入像素Yi(4,7)是水平滤波器窗口Wh的中心像素,并且是垂直滤波器窗口Wv的下相邻像素。水平滤波器窗口Wh和垂直滤波器窗口Wv的相应的滤波器系数被相加。因此,图8C中所示的滤波器窗口W的中心像素的下相邻像素的滤波器系数为2-1=1。
结论
参照附图进行的上面的详细描述说明了下面的特性。视频处理器(VPR)处理包括各像素块(如图4所示)的图像(包括至少一个图像的已编码视频信号VC)。该视频处理器包括锐度增强器(ENH),该锐度增强器基于一个自适应滤波器窗口(W)内的各输入像素(Yi)来确定输出像素(Yo),该自适应滤波器窗口排他地包括形成同一像素块的一部分的各输入像素(图8A-8C、9A-9C和10A-10C说明了这一点:在块边界处对于输入像素Yi适配滤波器窗口W,使得该窗口W保持在该像素块内部)。
上面的详细描述还说明了以下的可选特性。所述自适应窗口(W)由水平滤波器窗口(Wh)和垂直滤波器窗口(Wv)的组合形成。所述锐度增强器(ENH)在所涉及的像素块的垂直边界处停止所示水平滤波器窗口(图9A-9C说明了这一点)。所述锐度增强器(ENH)还在该像素块的水平边界处停止所述垂直滤波器窗口(图10A-10C说明了这一点)。这些特性允许利用了相对简单的硬件或软件或二者的实现方式。因此,这些特性更为经济。
上面的详细描述还说明了以下的可选特性。解码后处理器(DPP)衰减图像(其被包括在所述已编码视频信号VC中)内的块状伪像。所述锐度增强器(ENH)从该解码后处理器接收输入像素(Yi)。这些特性还有助于实现令人满意的图像质量。
上面的详细描述还说明了以下的可选特性。所述锐度增强器(ENH)包括视频分析器(ANAL),该视频分析器计算包括对应于输出像素(Yo)的输入像素(Yi)的像素区域内的方差。该锐度增强器(ENH)以多种方式当中的一种确定该输出像素(该输出像素Yo可以是由峰化滤波器PKF提供的经峰化的像素Yp,或者是由平滑滤波器SMF提供的经平滑的像素Ys,或者该输出像素Yo可以与输入像素Yi完全相同)。该输出像素被确定的方式取决于所述方差(该视频分析器ANAL控制复用器MUXI、MUXO)。这些特性也有助于实现令人满意的图像质量。
上面的详细描述还说明了以下的可选特性。所述锐度增强器(ENH)包括限幅器(CLP),该限幅器具有非对称的转移函数(如图7所示)。相应地,该限幅器(CLP)把输出像素(Yo)的暗偏移限制到高于该输出像素的亮偏移的程度。这些特性也有助于实现令人满意的图像质量。
上述特性可以以多种不同方式实现。为了说明这一点,简要地提出一些替换方案。
可以有多种不同方式来实现根据本发明的锐度增强器。例如,图5所示的锐度增强器ENH可以被如下修改。除了峰化滤波器PKF保留外,其他元件都被省略。这是锐度增强器的基本实现方式的一个例子。另一个例子涉及下面的修改。图5所示的输出复用器MUXO由这样一个元件替代,该元件对所述经峰化的像素Yp、经平滑的像素Ys和所述输入像素进行加权组合,从而获得输出像素Yo。所述视频分析器ANAL可以调节加权因数。所述解码后处理器DPP和锐度增强器ENH可以被组合。
可以有多种不同方式来实现峰化滤波器。例如,图6所示的峰化滤波器可以被如下修改。除了高通滤波器HPF之外,所有其他元件被省略。这是该高通滤波器的基本实现方式的一个例子。在另一种实现方式中,图6所示的限幅器CLP可以具有这样一个转移函数,该转移函数提供所谓的软限幅而不是图7所示的硬限幅。
可以有多种不同的提供令人满意的锐度增强的滤波器窗口。例如,一个滤波器窗口可以提供2×2像素或2×3像素或者任何其他尺寸。该滤波器窗口可以以多种不同方式适配。例如,根据本发明的锐度增强器可以包括对应于一个块中的每个像素的定义适当滤波器窗口和其中的系数的表。对应于块边界处的像素的滤波器窗口可以不同于对应于其他像素的滤波器窗口。
可以有多种借助于硬件项或软件项或者二者来实现功能的方式。在这方面,附图是非常示意性的,其中的每一个只代表本发明的一个可能实施例。因此,尽管附图把不同的功能显示为不同的块,但是这绝不排除由单个硬件项或软件项来实施几种功能。也不排除由硬件项或软件项或者二者的组件来执行一个功能。
上面的陈述表明这里参照附图进行的详细描述是为了说明而不是限制本发明。可以有多种落在所附权利要求书的范围内的替换方案。权利要求中的任何附图标记不应被解释成限制该权利要求。“包括”一次并不排除未在权利要求中列出的其他元件或步骤的存在。元件或步骤前面的“一个”并不排除多个这种元件或步骤的存在。

Claims (9)

1、一种用于处理包括各像素块(B)的图像(VC)的视频处理器(VPR),该视频处理器包括锐度增强器(ENH),该锐度增强器基于自适应滤波器窗口(W)内的各输入像素(Yi)来确定输出像素(Yo),该自适应滤波器窗口排他地包括形成同一像素块(B)的一部分的各输入像素。
2、如权利要求1所述的视频处理器,其中,所述自适应窗口(W)由水平滤波器窗口(Wh)和垂直滤波器窗口(Wv)的组合形成,所述锐度增强器(ENH)在所述同一像素块(B)的垂直边界处停止所示水平滤波器窗口,并且在所述同一像素块(B)的水平边界处停止所述垂直滤波器窗口。
3、如权利要求1所述的视频处理器,还包括解码后处理器(DPP),该解码后处理器衰减所述图像(VC)内的块状伪像,所述锐度增强器(ENH)被耦合成从该解码后处理器接收输入像素(Yi)。
4、如权利要求1所述的视频处理器,其中,所述锐度增强器(ENH)包括视频分析器(ANAL),该视频分析器计算包括对应于所述输出像素(Yo)的输入像素(Yi)的像素区域内的方差,该锐度增强器以多种不同方式(PKF,SMF)确定该输出像素,该输出像素被确定的方式取决于所述方差。
5、如权利要求1所述的视频处理器,其中,所述锐度增强器(ENH)包括限幅器(CLP),该限幅器具有非对称的转移函数,从而使得该限幅器限制所述输出像素(Yo)的亮偏移的程度高于其限制该输出像素的暗偏移的程度。
6、如权利要求5所述的视频处理器,其中,所述限幅器(CLP)把所述输出像素(Yo)的暗偏移限制到复限幅值(NCL),并且把该输出像素的亮偏移限制到正限幅值(PCL),其中该负限幅值大于该正限幅值。
7、一种处理包括各像素块(B)的图像(VC)的处理方法,该方法包括锐度增强步骤(ENH),其中基于自适应滤波器窗口(W)内的各输入像素(Yi)来确定输出像素(Yo),该自适应滤波器窗口排他地包括形成同一像素块(B)的一部分的各输入像素。
8、一种用于视频处理器(VPR)的计算机程序产品,该视频处理器用于处理包括各像素块(B)的图像(VC),该计算机程序产品包括一组指令,当所述指令被加载到该视频处理器中时,所述指令使得该视频处理器执行锐度增强步骤(ENH),其中基于自适应滤波器窗口(W)内的各输入像素(Yi)来确定输出像素(Yo),该自适应滤波器窗口排他地包括形成同一像素块(B)的一部分的各输入像素。
9、一种图像呈现设备(PVA),其包括如权利要求1所述的视频处理器(VPR)以及用于呈现由该视频处理器处理过的图像(VID)的图像呈现装置(DPL)。
CNA2005800282261A 2004-08-16 2005-08-09 包括锐度增强器的视频处理器 Pending CN101006463A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP04300543.8 2004-08-16
EP04300543 2004-08-16

Publications (1)

Publication Number Publication Date
CN101006463A true CN101006463A (zh) 2007-07-25

Family

ID=35376544

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2005800282261A Pending CN101006463A (zh) 2004-08-16 2005-08-09 包括锐度增强器的视频处理器

Country Status (6)

Country Link
US (1) US20080013849A1 (zh)
EP (1) EP1782383A1 (zh)
JP (1) JP2008510410A (zh)
KR (1) KR20070040393A (zh)
CN (1) CN101006463A (zh)
WO (1) WO2006018789A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113826389A (zh) * 2019-05-21 2021-12-21 高通股份有限公司 对自适应环路滤波器的削波值计算的简化

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1840821A1 (en) 2006-03-27 2007-10-03 Sony Deutschland Gmbh Method for sharpness enhanging an image
EP2190139B1 (en) * 2007-09-12 2013-09-11 Sharp Kabushiki Kaisha Radio communication method, radio communication system, and radio transmission apparatus
FR2924254B1 (fr) * 2007-11-23 2010-01-01 Gen Electric Procede de traitement d'images en radioscopie interventionnelle
US20130022288A1 (en) * 2011-07-20 2013-01-24 Sony Corporation Image processing apparatus and method for reducing edge-induced artefacts
KR102091136B1 (ko) * 2013-07-02 2020-03-19 삼성전자주식회사 영상 화질 개선 방법, 장치 및 기록 매체
WO2016146158A1 (en) * 2015-03-16 2016-09-22 Telefonaktiebolaget Lm Ericsson (Publ) Adaptive clipping in filtering
JP2021135734A (ja) * 2020-02-27 2021-09-13 京セラドキュメントソリューションズ株式会社 画像形成システム、画像形成装置、モバイル端末装置、およびプレビュー支援プログラム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4337479A (en) * 1979-09-13 1982-06-29 Matsushita Electric Industrial Co., Ltd. Color resolution compensator
US4571635A (en) 1984-02-17 1986-02-18 Minnesota Mining And Manufacturing Company Method of image enhancement by raster scanning
EP1469680B1 (en) * 1996-05-14 2008-06-18 Daewoo Electronics Corporation Method and apparatus for removing blocking effects in a motion picture decoder

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113826389A (zh) * 2019-05-21 2021-12-21 高通股份有限公司 对自适应环路滤波器的削波值计算的简化

Also Published As

Publication number Publication date
EP1782383A1 (en) 2007-05-09
WO2006018789A1 (en) 2006-02-23
JP2008510410A (ja) 2008-04-03
US20080013849A1 (en) 2008-01-17
KR20070040393A (ko) 2007-04-16

Similar Documents

Publication Publication Date Title
CN101006463A (zh) 包括锐度增强器的视频处理器
CN107278314B (zh) 用于非局部均值图像去噪的装置、移动计算平台和方法
US10863204B2 (en) Method and apparatus for adaptively reducing artifacts in block-coded video
US7003173B2 (en) Filter for combined de-ringing and edge sharpening
US8780996B2 (en) System and method for encoding and decoding video data
CN109640167B (zh) 视频处理方法、装置、电子设备及存储介质
US20020191701A1 (en) Correction system and method for enhancing digital video
CN111292269B (zh) 图像色调映射方法、计算机装置及计算机可读存储介质
CN105450923A (zh) 图像处理方法、图像处理装置以及电子设备
CN105991982B (zh) 用于成像系统的颜色匹配
CN110910333B (zh) 图像处理方法和图像处理设备
CN104717509B (zh) 一种视频解码方法及装置
CN103517046A (zh) 用于捕获视频内容的方法、装置和计算机程序产品
CN108520493A (zh) 图像替换的处理方法、装置、存储介质及电子设备
DE102020200310A1 (de) Verfahren und System zur Dunstreduzierung für die Bildverarbeitung
US20100061650A1 (en) Method And Apparatus For Providing A Variable Filter Size For Providing Image Effects
US8532424B2 (en) Method and system for filtering image data
US20080219582A1 (en) Apparatus for Filtering an Image Obtained by Block Based Image Decompression
CN110838088A (zh) 一种基于深度学习的多帧降噪方法、装置及终端设备
CN101453544B (zh) 灰度变换处理装置
CN113132703B (zh) 图像处理方法和设备
CN117522742B (zh) 图像处理方法、架构、装置和计算机设备
US20080310751A1 (en) Method And Apparatus For Providing A Variable Blur
CN110930292B (zh) 一种图像处理的方法、装置、计算机存储介质及终端
CN106254811A (zh) 移动终端及其视频通话的控制方法和系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication