CN1241161C - 用于处理视频图像的方法和设备 - Google Patents

用于处理视频图像的方法和设备 Download PDF

Info

Publication number
CN1241161C
CN1241161C CNB018186815A CN01818681A CN1241161C CN 1241161 C CN1241161 C CN 1241161C CN B018186815 A CNB018186815 A CN B018186815A CN 01818681 A CN01818681 A CN 01818681A CN 1241161 C CN1241161 C CN 1241161C
Authority
CN
China
Prior art keywords
pixel
motion vector
sub
video image
code word
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
CNB018186815A
Other languages
English (en)
Other versions
CN1475006A (zh
Inventor
塞巴斯蒂安·魏特布鲁赫
卡洛斯·科雷亚
赖纳·茨温格
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
International Digital Madison Patent Holding SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN1475006A publication Critical patent/CN1475006A/zh
Application granted granted Critical
Publication of CN1241161C publication Critical patent/CN1241161C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/20Circuitry for controlling amplitude response
    • H04N5/205Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic
    • H04N5/208Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic for compensating for attenuation of high frequency components, e.g. crispening, aperture distortion correction
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2007Display of intermediate tones
    • G09G3/2018Display of intermediate tones by time modulation using two or more time intervals
    • G09G3/2022Display of intermediate tones by time modulation using two or more time intervals using sub-frames
    • G09G3/2033Display of intermediate tones by time modulation using two or more time intervals using sub-frames with splitting one or more sub-frames corresponding to the most significant bits into two or more sub-frames
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2007Display of intermediate tones
    • G09G3/2018Display of intermediate tones by time modulation using two or more time intervals
    • G09G3/2022Display of intermediate tones by time modulation using two or more time intervals using sub-frames
    • G09G3/2029Display of intermediate tones by time modulation using two or more time intervals using sub-frames the sub-frames having non-binary weights
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0261Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0266Reduction of sub-frame artefacts
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/10Special adaptations of display systems for operation with variable images
    • G09G2320/106Determination of movement vectors or equivalent parameters within the image
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/28Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using luminous gas-discharge panels, e.g. plasma panels

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Control Of Gas Discharge Display Tubes (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Liquid Crystal Display Device Control (AREA)

Abstract

本发明涉及用于处理视频图像的数据的方法来在如等离子体显示板等显示装置上显示此图像。根据沿着当前象素的运动矢量方向移位子场编码字条目进行假轮廓补偿的现有假轮廓效应补偿方法在物体交叉的情况下在图像中产生假影。在出现区域存在光产生的缺失。本发明通过检查在图像中是否存在当前隐藏但在下一帧中将出现的区域,并提供用于“洞填充”的修正补偿方法来解决这个问题。本发明同样给出了用于根据沿运动矢量方向向当前象素进行子场编码字条目的拖动的改进补偿方法的解决方案。

Description

用于处理视频图像的方法和设备
技术领域
本发明涉及一种用于处理视频图像、特别用于假轮廓效应(falsecontour effect)补偿的方法和设备。更普遍地,本发明尤其涉及一类用于改进显示在诸如等离子体显示板(PDP)之类的矩阵显示器上或在具有数字微镜阵列(DMD)的显示装置上的图像的图像质量的视频处理。
背景技术
尽管已经知道等离子体显示板多年,等离子体显示正在引起来自电视制造商越来越大的兴趣。实际上,这种技术使得获得大尺寸且具有有限深度的、没有视角限制的平面彩色板成为可能。此显示器的尺寸可以比传统的CRT显像管所允许的尺寸大得多。
参照最近一代的欧洲电视机,做了很多工作来改进它的图像质量。因此,有强烈的需求,以如等离子体显示技术等新技术制造的电视机必须提供与旧标准电视技术相同或更好的图像。一方面,等离子体显示技术给出了几乎无限屏幕尺寸以及有吸引力的厚度的可能性,但另一方面,它产生能够降低图像质量的新种类的假影(artifact)。这些假影中的大部分与已知的在传统的CRT彩色显像管上发生的假影不同。由于假影的这种不同已经使它们更易被观众看见,因为观众已经习惯于看见众所周知的旧的电视假影。
在等离子体显示技术领域中,被称为“动态假轮廓效应”的特殊的新假影是大家都知道的,由于它对应于当在矩阵屏幕上的观察点移动时,具有在图像中出现彩色边缘的形式的灰度级和颜色的扰动。当像显示人的皮肤时(如,脸或胳膊的显示等)等图像具有光滑的灰度时,加强了这种假影。此外,在观察者摇动他们的头时,在静态图像上发生相同的问题,以及导出这种缺陷依赖于人的视觉而且发生在眼睛的视网膜上的结论。
已经讨论了两种途径来补偿假轮廓效应。由于假轮廓效应直接与所使用的等离子体技术的子场结构相关,一个途径是对等离子体显示板的子场结构进行最优化。将在以下对子场结构进行更详细的描述,但此刻应当注意它为一种在8个或更多点亮子周期中8位灰度级的分解。这种图像编码的最优化确实将对于假轮廓效应具有积极的效果。然而,这样的解决方案只能轻微减少假轮廓效应幅度,但在任何情况下,这种效应仍将发生而且是可以感觉到的。此外,子场结构不是简单的方案选择。允许越多的子场,等离子显示板将越复杂。所以,子场结构的最优化只能在有限的范围内,而且不能单独消除这种效应。
用于上述问题的解决方案的第二个途径是“脉冲均衡技术”。此技术是比较复杂的技术。它利用在预见灰度级的扰动时,从电视信号中附加或分离的均衡脉冲。此外,由于假轮廓效应是运动相关的事实,我们需要用于每个可能速度的不同脉冲。这将导致需要存储大量用于每个速度的大查找表(LUT)的大存储器,而且需要运动估计器。此外,由于假轮廓效应依赖于子场结构,必须为每个新的子场结构重新计算脉冲。但是,此技术的劣势源于为了补偿出现在视网膜上的缺陷均衡脉冲给图像上增加了缺陷的事实。此外,当在图像中的运动增加时,需要给图像加上更多的脉冲,而在非常快的运动的情况下导致与图像内容的冲突。
本发明处理被称为“出现区域”的特殊的新问题,因为它对应于通过用于补偿动态假轮廓效应从一个象素到另一象素移位的时间周期来用于控制显示的象素的遗漏信息。
在第一种途径中,公开了利用为象素确定运动矢量的运动估计器来补偿假轮廓效应的方法。得到的运动矢量用于重新编码此块的象素,在重新编码步骤中包括移位象素的时间周期的步骤。时间周期确定了激活象素来发光的期间的时间。此时间周期此后也称为“子场”。用于激活象素而如此计算的数据用于代替显示原始象素数据来显示图像。
有块和背景沿不同方向移动的情况,从而用于沿两个不同方向移动的前景物体和移动的背景物体的象素的子场编码字条目的移位产生对出现区域的象素的光脉冲的缺失。
作为结论,正如在文件EP 0 978 817 A1中所公开的那样,子场的移位在特定情况中产生在视频图像中的错误。
发明内容
因此,本发明的目的是公开一种用于处理视频图像的方法和设备,在不影响图像内容的前提下改进图像质量而且易于实现。
按照本发明的解决方案,通过检查在视频图像中是否有当前隐藏但在下一视频图像中出现的区域来获得图像质量的改进。如果检测到这样的区域,则通过利用来自下一视频图像中出现区域的象素的子场编码字条目(entry)来更新来自当前图像中出现区域的象素的子场编码字。从而,为了校正前一视频图像中的象素,本发明使用来自下一视频图像的信息。用这种方法可以改进在交叉物体的边界处的假轮廓补偿的质量。此外,算法避免“黑洞”或在这些位置处的双边缘。此外,它通过与这些边缘的假轮廓补偿相结合的强变换的考虑,全局改进了图像的质量:增强了图像的清晰度。
对于通过沿运动矢量的方向移位子场编码字条目所进行的图像改进的情况,有利的是通过从下一视频图像的出现区域中取得对应象素的子场编码字条目来更新来自当前图像的出现区域的象素的编码字。这对应于在出现区域的“洞填充”。
对于通过从沿运动矢量方向的象素向当前象素拖动子场编码字条目所进行的图像改进的情况,有利的是沿运动矢量方向将下一视频图像中对应象素的子场编码字条目拖动到当前视频图像中的当前象素。这补偿了在物体交叉的边界处的重叠边缘的假影。
为检测图像中的出现区域,有利的是分析对于位于镜上的象素是否指定了与当前象素的运动矢量不具有相似性的当前象素运动矢量的变换运动矢量箭头。这很容易实现,并给出象素是否属于出现区域的可靠信息。
对于根据本发明的设备,有利的是设备包括出现区域检测器,在出现区域检测器中检测在当前图像中是否存在当前隐藏但在下一视频图像中出现的区域,以及设备包括进一步处理单元,其中利用来自下一视频图像中的出现区域的象素的子场编码字条目补偿来自当前图像中的出现区域的象素的子场编码字。
附图说明
在附图中描述了本发明的典型实施例,以及在以下的描述中更详细地解释了本发明的典型实施例。
图1示出用于解释PDP子场结构的例图;
图2示出PDP子场结构的第二示例;
图3示出PDP子场结构的第三示例;
图4示出在其中模拟了假轮廓效应的视频图像;
图5示出用于解释假轮廓效应的例图;
图6描述了当以图3所示的方式进行两个帧的显示时,黑边的出现;
图7示出用于补偿假轮廓效应的子场位移的概念;
图8示出用于在两个反向运动物体的边界处产生能量缺失的子场的子场移位操作的例图;
图9示出具有代替如前面图8所示的移位的运动信息拖动的子场拖动操作的例图;
图10示出根据本发明的假轮廓补偿的例图;
图11示出利用两个连续帧的运动矢量的出现区域检测的例图;
图12以方框图形式示出发明设备的第一实施例,以及
图13示出发明设备的第二实施例。
具体实施方式
等离子体显示板利用只能为开或关的放电单元的矩阵阵列。与在其中通过光发射的模拟控制来表示灰度级的CRT和LCD不同,在PDP中,通过调制每帧光脉冲的数目来控制灰度级。这种时间调制通过对应于眼睛时间响应的时间段由眼睛进行积分(integrate)。当在PDP屏幕上的观察点(眼睛聚焦区域)运动时,眼睛将跟随这种运动。因此,将不再积分来自帧周期的相同单元的光(静态积分),而是积分来自位于运动轨迹上的不同单元的信息。这样,将混合在引起信号信息的错误印象的运动期间的所有光脉冲。现在更详细地解释这种效应。
在数字视频处理领域,由以下8位的组合来代表所有8-位(256)RGB级:
20=1,21=2,22=4,23=8,24=16,25=32,26=64,27=128。
为了使这样的编码能用于PDP技术,帧周期可以分为每个都对应于一位的8个点亮周期(称为子场)。用于位“2”的光脉冲的数目两倍与用于位“1”的…,用这8个子周期,可以通过组合构筑256个灰度级。在图1中示出具有8个子场的可能子场结构。
为了清楚增加了子场周期是帧周期的子周期并由称为寻址周期、保持周期和删除周期的三个阶段组成。在寻址周期期间,用预定的电压写入(预充电)对应子场编码字需要激活的单元。先决条件是在单元中存储的电荷保持特定时间段的稳定。在已经写入所有单元之后,单元进入额外电荷以小脉冲输入单元的保持阶段。这引起先前在寻址周期写入的那些单元发光。在发光期间产生UV辐射,并因此激活荧光材料而输出光。接着是所有单元的删除阶段以将单元转变回中性状态。
没有运动,观察者的眼睛将在大约一个帧周期期间积分这些小光脉冲,并感觉到正确的灰度级/彩色级的印象。
在等离子体视频编码领域,使用多于8个子场来表示256个原始视频电平是非常普遍的。这么做的目标在于减少直接联系到产生假轮廓的最大电平的MSB的电平。图2中示出基于10个子场的这种子场结构的第一示例。图3中示出基于12个子场的这种子场结构的第二示例。在所示示例中有七个具有32个相对时间单位持续时间的时间周期(子场,为了简单只示出保持阶段),一个具有16个单位持续时间的时间周期,一个具有8个单位持续时间的时间周期,一个具有4个单位持续时间的时间周期,一个具有2个单位持续时间的时间周期,以及一个具有1个单位持续时间的时间周期。相对时间单位的和是255。当然,图2和图3中所示的子场结构只是示例,而且子场结构可以进行用于其他实施例的修改。
按照这种子场结构在PDP中的光产生在运动转变的情况下,仍然表现出对应于灰度级和彩色的扰动的图像质量退化。正如已经解释的,定义这些扰动为所谓的动态假轮廓效应,因为当在PDP屏幕上的观察点移动时,它对应于在图像中彩色边缘出现的这一事实。观察者对在像皮肤一样的均匀区域上出现的强烈轮廓有印象。
在图4中示出由于假轮廓效应的假影。例如,在所显示的女人的手臂上显示了两条由这种假轮廓效应引起的暗线。同样在女人的脸上的右侧出现了这样的暗线。
当图像具有平滑的灰度时,以及当光发射周期超过几毫秒时,这种退化被加强。所以,在暗场景中,这种效应不如在具有平均灰度级(如,亮度值从32到223)的场景中扰动强烈。
另外,当观察者摇动他们的头时,在静态图像中发生相同的问题,这导出这种缺陷依赖于人的视觉的结论。
为了更好地理解运动图像的视觉的基本机制,将考虑简单的情况。对于以每视频帧5个象素的速度移动的在亮度级128和127之间的变换进行讨论,而且眼睛跟随这种运动。
图5示出显示帧N和帧N+1的这种情形。同样,对于帧N在右侧示出十二个子场权重。图5只示出显示器的一条象素线的一部分。在图5中,在左侧对应于亮度区域级128示出暗阴影区域,而在右侧对应于亮度区域级127示出浅阴影区域。
这里注意亮度指示仅被示例性的提及。更普遍的说法是说特别意味着RGB彩色分量的信号电平的“信号级”。如前所述,在彩色PDP中有用于每个象素的三个单元。为了产生象素的正确颜色,需要对应于象素的三个单元的三个子场编码字。
在图5中,为了构筑亮度级128和127,使用图3的子场结构。在图5中来自眼睛的三条平行线指示眼睛跟随运动的方向。两条边线示出可以察觉到缺陷信号的区域边界。如在图5底部的眼睛刺激积分曲线中所示的那样,在它们之间眼睛将察觉亮度的缺失。这引起在图6的右图中描述的在对应区域中暗带的出现。
亮度缺失的效应将在所示区域中被察觉是由于当眼睛接收光的点在运动中时,眼睛将不再积分一个象素的所有点亮周期。当点运动时,只有一些光脉冲被积分。因此,存在相应亮度的确实,而且出现暗带。在图6的左侧,示出表示在象素上亮度级的分布的眼睛刺激积分曲线。可以看到,在级128和127之间存在亮度的缺失,亮度级降到级96。图6示出在观察图5所示的运动图像期间眼细胞的反应。具有离水平变换良好距离的眼细胞将积分来自对应象素的足够的光。只有变换附近的眼细胞将不能积分来自相同象素的大量光。在灰度级图像的情况下,这种效应对应于假白边或黑边的出现。在彩色图像的情况下,由于这种效应将单独地在不同颜色分量上发生,将引起在如皮肤一样的均匀区域中彩色边缘的出现。
现在,在本申请人的另一欧洲专利申请,参见EP-A-0 980 059中公开的发明的主要思想是预期图像中的运动,来在眼睛积分的轨迹上放置运动区域的单元的不同的光脉冲。据此,依赖于眼睛的运动,在图像中象素的一些子场的光脉冲被移位到在当前图像帧中的另一象素或多个象素以确保眼睛在它的运动期间的正确时间将接收到正确信息。在图7中描述了这个原理。那里示出所有示出象素的第六和第七子场的光脉冲向右移位一个象素,第八子场的光脉冲向右移动两个象素,以及第九子场的光脉冲向右移动三个象素。所有的象素具有相同的运动矢量,从而它们全部进行移位。子场移位操作可以简单地通过移位子场编码字位来实现。这样的效果是,跟随在图像中的运动的眼睛将积分第六到第九子场的所有光周期,这样引起如在图7底部的眼睛刺激曲线中所示的相应的128亮度值。结果是将察觉不到暗区域。
注意在刺激积分曲线在变换的边界区域是光滑的这方面的描述是理想化的。另一点要注意的是以传统方式定义运动矢量,即,它指示了当前帧的象素在接下来的视频图像中将去哪里。
在一物体隐藏另一物体,而且两物体分别相互运动的情况下,用这种补偿方法出现一个问题。在这样的情况下,在两运动物体之间将出现新区域。在物体交叉的情况下,出现这种现象。如果物体沿相反方向运动,则增强这个问题。显然,在这两个物体之间的边界必须进行补偿以提供良好的清晰度。如上所述,假轮廓效应将强烈降低清晰度。然而,如果我们必须补偿在当前隐藏的另一物体的前部的区域,将出现具有依赖于两个运动物体的运动矢量的外延的模糊区域。
在图8中对此进行了描述。图8示出沿水平向左侧以运动矢量 运动、作为矩形区域以浅灰色示出的运动物体的示例。运动物体在向右侧以运动矢量
Figure C0181868100111
运动、以暗灰色示出的背景上运动。运动矢量代表前景物体的方向和距离,以及背景物体在一帧期间运动。
如果使用上面解释的子场移位的补偿方法,那么我们得到向左侧的运动物体的光脉冲的移位和向右侧的用于背景象素的光脉冲的移位。在示出几个子场周期的图8的中部描述了这种现象。这引起在图像中察觉得到光/能量缺失的区域的出现。这是因为眼睛在这个区域中不能积分足够的光脉冲。出现区域在用于前景物体和背景物体的象素的移位光脉冲之间。由于随着子场数的增加移位也增加的事实,此区域从子场到子场越来越宽。
在图8的底部,描述了观看者的眼睛将观察到什么。在运动的前景物体的左边界将出现清晰的变换。在运动物体的右边界将出现模糊的变换。这有时被称为“黑洞”的出现。
图9示出前景物体向左侧运动而背景物体向右侧运动的相同情形。前景和背景物体的运动以箭头指示。在这种情况下,有差别地计算运动矢量,而且以不同的方式利用它们。在本申请人的另一欧洲专利申请申请号00250230.0中公开了这类运动矢量计算和处理。因此,为了本实施例的公开,表达性地参考这一申请。
按照在另一申请中的解决方案,通过利用在运动估计器中为视频图像中的象素计算的运动矢量,按照获得的运动矢量为当前象素确定当前象素来自先前的视频图像中的哪个位置的方式进行假轮廓效应的补偿。所以,对于当前帧中的每个象素或象素块,唯一的运动矢量定义了此象素在前一视频图像中的源。此外,以不同的方式使用此矢量。换句话说,对于来自当前帧的每个象素,矢量描述了此象素来自前一帧中的什么地方。确信的是在运动估计器自身中,即使对于一个象素有几种可能性,也只有一个矢量被指定给象素。例如在前一视频图像的几个象素向当前图像中的相同位置运动的情况下,可能的矢量可以被结合成一个最终运动矢量。子场不像前一实施例那样从当前象素移位,而是它们被沿着运动矢量的方向从邻近的象素拖动到当前象素。这种拖动在物体交叉的情况下产生不同的假影,以及在图9中进行了描述。由于用于补偿假轮廓效应的信息是从位于运动象素后面的象素获得,这将导致如图9底部所示的变换边界的重复。拖动到运动背景的象素的信息来自浅灰色的前景物体。同样地,拖动到运动的前景物体的象素的信息来自暗灰色的背景物体。
同样在这种情况下,我们看到来自在物体交叉的情况下子场拖动的新的假影。事实上,缺陷再次出现在出现区域中,因为它对应于当前隐藏在图像中的新区域。部分背景被隐藏在是运动物体的浅灰色方块的后面。
为了改进根据子场移位和根据子场拖动的两种补偿方法,发明了本质上在于由具有来自下一帧信息的“洞填充”跟随的“出现区域”检测的新三维处理。首先,详细解释用于子场移位的改进补偿方法。在图10中进行了描述。此图示出帧N和下一帧N+1。将在下一帧N+1中出现的帧N的隐藏区域在帧N中以虚线定界。此区域是出现区域。从帧N+1显然的,出现区域完全由来自背景物体的象素组成。在图10中指示出,从帧N到帧N+1,出现区域同样向右运动。对于在帧N+1中定位出现区域应该考虑这种运动。为了在帧N中精确的“洞填充”,需要利用在帧N+1中的运动后的出现区域的信息。这样,为了洞填充需要利用的来自帧N的运动矢量信息来定位在帧N+1中的象素。根据图10,明显的是对于低子场数,只需要从帧N+1得到一些象素的子场条目,而对于高子场,需要复制巨大数目的象素的子场条目。需要补偿哪个子场哪个象素的信息可以从子场移位计算得到。对于子场移位计算的细节的公开,再次参见文件EP 0 978 817 A1。同样的从计算的子场移位获得为了洞填充需要从在帧N+1的运动后的出现区域中的哪些象素得到子场条目的信息。在图10中以垂直线MB表示了前景物体和背景物体之间的运动后的边界。用于每个子场的子场移位确定为了洞填充需要在这条垂直线MB左侧和右侧获得哪些象素。用这样的改进补偿方法,同样将完全考虑运动物体的正确边界,而且这产生了全局图像清晰度的改进。
关于根据子场拖动的第二种补偿方法,如下的修改是用于补偿图9所示的假影的解决方案。拖动的信息不能从当前帧获得,而需要从下一帧获得。在这种情况下,正如可以在图10中看到的那样,在当前象素后面的正确信息将是可用的。对于在帧FN中边界的背景物体的当前象素,在帧FN+1中的对应象素位于背景物体区域中间,而且这样确保正确信息将被拖动到在两个运动物体边界的象素。
为了改进补偿方法,需要如“出现区域”检测器之类的设备。检测出现区域有多种可能性。在下面,提供了一种执行出现区域的检测的简单方法。假设,我们设置对应于图10的浅灰色长方形的运动的第一运动矢量
Figure C0181868100131
和对应于背景的运动的第二运动矢量 为了检测出现区域,将检查位于给定运动矢量后面的运动矢量是否还指示相似的运动。为了进行检查,如图11所示,将分析由第一和第二矢量的对立面确定的轨迹。在图11上,由第一矢量
Figure C0181868100133
确定的对立面的轨迹仍然在方块中,而且位于那些位置的矢量是相似的:因此,对应的区域不是临界区域。在两个运动物体的边界处的位置(x0,y0)的情况下,位于由
Figure C0181868100134
定义的轨迹上的矢量在长方形的外部,而且它们具有相反的方向。例如对矢量
Figure C0181868100135
相同情况也是成立的。所有具有在其后面的矢量具有相反方向的矢量位置属于出现区域。用这种简单的策略,将容易地发现出现区域的点。公开的出现区域检测器可以用于一种利用子场移位、一种利用子场拖动的两种改进补偿方法。
图12示出按照本发明的设备的第一实施例。在此第一实施例中有至帧存储器2的输入1、运动估计器3和补偿单元4。帧存储器2与运动估计器3和补偿单元4相连。运动估计器3有连接到补偿单元4的第一和第二输出。在输入1,接收帧FN的RGB数据,并转发给帧存储器2、运动估计器3和补偿单元4。除了帧FN,前一帧FN-1也从帧存储器2传送给运动估计器3。请注意,此后前一帧FN-1将被作为当前帧。利用这两帧,运动估计器3计算用于帧FN的运动矢量
Figure C0181868100136
向补偿单元4转发运动矢量
Figure C0181868100137
为了这个目的,用于前一帧FN-1的运动矢量
Figure C0181868100138
存储在运动估计器3中。同样运动估计器3在本实施例中输出为每个象素指示它是否属于帧FN-1中的出现区域的信息APN-1。如以上所解释的那样,出现区域的象素需要用改进补偿方法进行补偿。为了这个目的,将帧FN-1也输入给补偿单元4。在补偿单元4中,进行对帧FN-1的补偿。补偿后的帧FN-1出现在此块的输出5处。如图12所示的补偿系统引入一帧的处理延迟。
可替换的概念是组合标准的运动估计器和独特的出现区域检测器。例如,可以使用上面所公开的出现区域检测器。在图13中示出了这种可以替换的概念。在图13中部分地使用与图12中相同的参考数字。这些参考数字代表与图12中相同的部分。
图13的实施例与图12的实施例的不同在于包括分立的矢量存储器6和分立的出现区域检测器7。运动估计器3得到了简化,而且是为帧FN的象素提供运动矢量的标准运动估计器。矢量存储器6的功能是存储在一个帧周期内来自运动估计器3的运动矢量数据,从而出现区域检测器7得到前一帧FN-1的运动矢量 出现区域检测器7为帧FN-1的每个象素确定它是否属于出现区域,并给出出现区域信号APN-1给补偿单元4。上面已经解释了确定象素是否属于出现区域的方法。
在补偿单元4的输出,出现用于三个颜色分量RGB的补偿过的子场编码字。以已知的方式使用这些子场编码字来驱动显示器。
按照本发明的方法和设备不只应用于假轮廓效应补偿。如,在使用在其中假轮廓效应不再是问题的新的等离子体显示技术的情况下,公开的方法和设备可以用于图像质量的改进,特别是清晰度的改进。

Claims (9)

1、一种用于处理视频图像的方法,视频图像由象素组成,象素由至少一个数字编码字进行数字编码,其中对于数字编码字的每位指定了特定的持续时间,此后称为子场,在其间整个象素或象素的分量被激活,其中为象素计算运动矢量,而且为了图像质量的改进,运动矢量被用于更新象素的至少一个子场编码字,其特征在于在当前图像中检查是否有当前隐藏但在下一视频图像中出现的区域,然后通过利用来自下一视频图像中出现区域的象素的子场编码字条目更新来自当前图像中出现区域的象素的子场编码字。
2、按照权利要求1所述的方法,其特征在于通过依赖于运动矢量为子场编码字条目计算移位坐标来进行根据运动矢量的子场编码字的更新,其中运动矢量被定义为指向在当前视频图像中的象素移动到下一视频图像中的位置,而且移位坐标被用于将当前象素的子场编码字条目移位到沿运动矢量方向的象素。
3、按照权利要求1所述的方法,其特征在于通过依赖于运动矢量为子场编码字条目计算拖动坐标来进行根据它们的运动矢量的对于当前视频图像的象素的子场编码字的更新,其中运动矢量被定义为指向在当前视频图像中的象素移动到下一视频图像中的位置,而且拖动坐标被用于将当前视频图像中象素的子场编码字条目沿运动矢量方向拖动给当前象素。
4、按照权利要求3所述的方法,其特征在于通过将下一视频图像中相应象素的子场编码字条目沿运动矢量方向拖动给当前象素补偿来自当前图像中出现区域的象素的子场编码字。
5、按照权利要求1到4之一所述的方法,其特征在于为了检查当前象素是否属于当前隐藏但在下一视频图像中出现的区域,分析是否为位于当前像素的镜变换运动矢量箭头上的像素指定了与当前象素的运动矢量不具有相似性的运动矢量。
6、一种用于处理视频图像的设备,视频图像由象素组成,象素由至少一个数字编码字进行数字编码,其中对于数字编码字的每位指定了特定的持续时间,此后称为子场,在其间整个象素或象素的分量被激活,所述设备包括运动估计器(3),在其中为象素计算运动矢量,所述设备还包括处理器(4),在其中为了图像质量改进使用运动矢量来更新象素的至少一个子场编码字,其特征在于所述设备还包括出现区域检测器(7),在其中检查在当前图像中是否有当前隐藏但在下一视频图像中出现的区域,以及所述设备包括补偿单元,在其中通过利用来自下一视频图像中出现区域的象素的子场编码字条目补偿来自当前图像中出现区域的象素的子场编码字。
7、按照权利要求6所述的设备,其特征在于出现区域检测器(7)集成在运动估计器(3)中。
8、按照权利要求6所述的设备,其特征在于出现区域检测器(7)是接收作为输入的当前视频图像的运动矢量的分立单元。
9、按照权利要求6到8之一所述的设备,其特征在于所述设备包括诸如等离子体显示器、LCOS显示器或DMD显示器之类的矩阵显示器。
CNB018186815A 2000-11-18 2001-11-09 用于处理视频图像的方法和设备 Expired - Lifetime CN1241161C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP00250390A EP1207510A1 (en) 2000-11-18 2000-11-18 Method and apparatus for processing video pictures
EP00250390.2 2000-11-18

Publications (2)

Publication Number Publication Date
CN1475006A CN1475006A (zh) 2004-02-11
CN1241161C true CN1241161C (zh) 2006-02-08

Family

ID=8172628

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB018186815A Expired - Lifetime CN1241161C (zh) 2000-11-18 2001-11-09 用于处理视频图像的方法和设备

Country Status (7)

Country Link
US (1) US7142253B2 (zh)
EP (2) EP1207510A1 (zh)
JP (1) JP2004514176A (zh)
KR (1) KR100784945B1 (zh)
CN (1) CN1241161C (zh)
AU (1) AU2002217012A1 (zh)
WO (1) WO2002041291A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1376521A1 (en) * 2002-06-28 2004-01-02 Deutsche Thomson Brandt Processing video pictures for improving dynamic false contour effect compensation
US20040207643A1 (en) * 2003-04-18 2004-10-21 Bozidar Janko Attention model enhanced video waveform monitor
KR100739735B1 (ko) 2005-09-16 2007-07-13 삼성전자주식회사 액정 디스플레이 구동 방법 및 이를 적용한 장치
EP1936589A1 (en) * 2006-12-20 2008-06-25 Deutsche Thomson-Brandt Gmbh Method and appartus for processing video pictures
WO2010089956A1 (ja) * 2009-02-04 2010-08-12 パナソニック株式会社 映像処理装置及び映像表示装置
CN102158636B (zh) * 2010-09-30 2013-03-20 四川虹欧显示器件有限公司 图像处理方法及装置
US9536335B2 (en) 2015-03-19 2017-01-03 Sony Corporation Using frequency decomposition for better color consistency in a synthesized region

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0978817A (ja) * 1995-09-08 1997-03-25 Planning Tension:Kk 壁面補修美装工法およびこれに用いられる擬装材
JPH0980059A (ja) * 1995-09-11 1997-03-28 Olympus Optical Co Ltd スキャナーシステム
EP0980059B1 (en) * 1998-08-07 2005-03-30 Deutsche Thomson-Brandt Gmbh Method and apparatus for processing video pictures, especially for false contour effect compensation
EP0978816B1 (en) * 1998-08-07 2002-02-13 Deutsche Thomson-Brandt Gmbh Method and apparatus for processing video pictures, especially for false contour effect compensation
EP0978817A1 (en) * 1998-08-07 2000-02-09 Deutsche Thomson-Brandt Gmbh Method and apparatus for processing video pictures, especially for false contour effect compensation
EP1172765A1 (en) * 2000-07-12 2002-01-16 Deutsche Thomson-Brandt Gmbh Method for processing video pictures and apparatus for processing video pictures

Also Published As

Publication number Publication date
EP1334482B1 (en) 2012-03-28
AU2002217012A1 (en) 2002-05-27
KR20030059221A (ko) 2003-07-07
EP1207510A1 (en) 2002-05-22
US7142253B2 (en) 2006-11-28
CN1475006A (zh) 2004-02-11
WO2002041291A1 (en) 2002-05-23
EP1334482A1 (en) 2003-08-13
KR100784945B1 (ko) 2007-12-14
US20040041949A1 (en) 2004-03-04
JP2004514176A (ja) 2004-05-13

Similar Documents

Publication Publication Date Title
KR100586082B1 (ko) 의사 윤곽 효과 보상을 위해 비디오 화상을 처리하는 방법 및 장치
KR100586083B1 (ko) 의사윤곽 효과 보상을 위해 비디오 화상을 처리하는 방법 및 장치
KR100865084B1 (ko) 비디오 화상을 처리하기 위한 방법 및 디바이스
JP2000036969A (ja) 立体画像表示方法および装置
WO2001071702A2 (en) Method for processing video data for a display device
JP4928662B2 (ja) 表示装置に表示するためにビデオ画像を処理する方法及び装置
CN100511281C (zh) 处理视频图像的方法和处理视频图像的装置
KR20020089521A (ko) 서브-필드에서 이미지를 디스플레이하는 방법 및 유닛
KR100810064B1 (ko) 디스플레이 디바이스를 위한 데이터 처리 방법 및 장치
CN1241161C (zh) 用于处理视频图像的方法和设备
CN1526129A (zh) 以子帧画面显示图像的方法和单元
EP1058229B1 (en) Method and apparatus for processing video signals for display
EP1162571B1 (en) Method and apparatus for processing video pictures for false contour effect compensation
CN1711574B (zh) 图象显示方法及图象显示装置
EP0980059A1 (en) Method and apparatus for processing video pictures, especially for false contour effect compensation
EP1288899A1 (en) Method and device for processing video pictures
WO2012090442A1 (ja) 表示装置、表示方法および集積回路
MXPA00003934A (en) Method and apparatus for processing video signals for display

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP02 Change in the address of a patent holder

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: La France

Patentee before: THOMSON LICENSING

CP02 Change in the address of a patent holder
TR01 Transfer of patent right

Effective date of registration: 20190125

Address after: Paris France

Patentee after: International Digital Madison Patent Holding Co.

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

Effective date of registration: 20190125

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

TR01 Transfer of patent right
CX01 Expiry of patent term

Granted publication date: 20060208

CX01 Expiry of patent term