CN100511281C - 处理视频图像的方法和处理视频图像的装置 - Google Patents

处理视频图像的方法和处理视频图像的装置 Download PDF

Info

Publication number
CN100511281C
CN100511281C CNB011200804A CN01120080A CN100511281C CN 100511281 C CN100511281 C CN 100511281C CN B011200804 A CNB011200804 A CN B011200804A CN 01120080 A CN01120080 A CN 01120080A CN 100511281 C CN100511281 C CN 100511281C
Authority
CN
China
Prior art keywords
pixel
subdomain
current
video image
motion vector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
CNB011200804A
Other languages
English (en)
Other versions
CN1335583A (zh
Inventor
塞巴斯蒂安·魏特布鲁赫
卡洛斯·科尔里
赖纳·茨温
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
International Digital Madison Patent Holding SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN1335583A publication Critical patent/CN1335583A/zh
Application granted granted Critical
Publication of CN100511281C publication Critical patent/CN100511281C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/20Circuitry for controlling amplitude response
    • H04N5/205Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic
    • H04N5/208Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic for compensating for attenuation of high frequency components, e.g. crispening, aperture distortion correction
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2007Display of intermediate tones
    • G09G3/2018Display of intermediate tones by time modulation using two or more time intervals
    • G09G3/2022Display of intermediate tones by time modulation using two or more time intervals using sub-frames
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2007Display of intermediate tones
    • G09G3/2018Display of intermediate tones by time modulation using two or more time intervals
    • G09G3/2022Display of intermediate tones by time modulation using two or more time intervals using sub-frames
    • G09G3/2029Display of intermediate tones by time modulation using two or more time intervals using sub-frames the sub-frames having non-binary weights
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2007Display of intermediate tones
    • G09G3/2018Display of intermediate tones by time modulation using two or more time intervals
    • G09G3/2022Display of intermediate tones by time modulation using two or more time intervals using sub-frames
    • G09G3/2033Display of intermediate tones by time modulation using two or more time intervals using sub-frames with splitting one or more sub-frames corresponding to the most significant bits into two or more sub-frames
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0261Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0266Reduction of sub-frame artefacts
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/10Special adaptations of display systems for operation with variable images
    • G09G2320/106Determination of movement vectors or equivalent parameters within the image
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/28Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using luminous gas-discharge panels, e.g. plasma panels
    • G09G3/2803Display of gradations
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/28Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using luminous gas-discharge panels, e.g. plasma panels
    • G09G3/288Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using luminous gas-discharge panels, e.g. plasma panels using AC panels

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Control Of Gas Discharge Display Tubes (AREA)
  • Liquid Crystal (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Image Analysis (AREA)

Abstract

等离子体显示屏出现的赝像被共同描述为动态虚假轮廓效应,因为当PDP屏幕的观察点移动时,它们对应以图像中彩色边缘的幻像形式的灰度级和色彩的扰动。按照本发明,通过分析图像中的运动,把图像的每一个组分配到对应的运动矢量,并进行重新编码,在该编码中,计算当前像素的子域码字条目。为此目的,确定运动矢量从前面图像的像素指向当前图像的像素。当前像素(P8)的子域码字条目由位于运动矢量轨迹上的像素的拖曳子域条目确定。

Description

处理视频图像的方法和处理视频图像的装置
技术领域
本发明涉及处理视频图像的方法和装置,特别是虚假轮廓效应补偿。
背景技术
具体地说,本发明涉及一种改善图像的图像质量的视频处理,该图像显示在如等离子体显示屏(PDP)、LCOS或具有数字微反射镜阵列(DMD)的显示器件之类的矩阵显示器上。
尽管已经知道等离子体显示屏许多年了,电视机制造商正在对等离子体显示屏产生兴趣。确实,这种技术可以获得大尺寸的平面彩色显示屏并具有有限的厚度而没有任何观看角度限制。显示屏的尺寸可以比曾允许出现过的传统CRT显像管的尺寸大得多。
参考最新型的欧洲电视机,已经作了许多工作改善图像质量。因此,存在强烈的要求,用如等离子体显示技术的新技术制造的电视机必须提供与旧标准电视技术一样或好于旧标准电视技术的图像。一方面,等离子体显示技术给出了几乎无限屏幕尺寸的可能性,同样,给出了有吸引力的厚度,但在另一方面,它产生了损坏图像质量的新的赝像。多数赝像与出现在传统CRT彩色显像管上的已知赝像是不同的。主要的不同是赝像的不同外观,这些赝像使观看者较容易看见,因为观看者习惯看已知的旧电视赝像。
本发明处理特殊的新赝像,该赝像称为“动态虚假轮廓效应”,因为在矩阵屏幕上的观察点移动时,它对应于在图像中以彩色边缘的幻像形式对灰度级和色彩的扰动。当显示人的皮肤时(如显示脸部或臂部等),图像有平滑的灰度时,则加强了这种赝像。此外,当观看者摇动她的头部时,相同的问题出现在静态图像中,这就得出结论,这样的虚像取决于人类视觉感知并发生在眼睛的视网膜上。
已经提出两种方法补偿虚假轮廓效应。当虚假轮廓效应直接涉及到所用等离子体技术的子域结构时,一种方法是最佳化等离子体显示屏的子域结构。下面将详细解释子域结构,但目前应当注意,它是在8个或更多的照明子周期内的8比特灰度级的分解。确实,这种图像编码的最佳化将对虚假轮廓效应有好的影响,然而,这个解决方案只是稍微减小了虚假轮廓效应幅度,但是,在任何情况下,该效应将仍然出现并是可见的。此外,子域结构不是简单的设计选择。允许的子域越多,屏幕能够产生的亮度越小。所以,子域结构的最佳化只是在窄范围内可行,将不能单独消除这种效应。
上述问题的第二种解决方法是“脉冲均衡技术”。这个技术是比较复杂的技术。当预见到灰度级的扰动时,使用增加或与电视信号分离的均衡脉冲。此外,因为虚假轮廓效应是相关运动的事实,所以,对每一个可能的速度需要不同的脉冲。这导致对每一个速度需要一个存储许多大查找表(LUT)的大存储器,此外,因为虚假轮廓效应取决于子域结构,对每一个新子域结构必须重新计算脉冲。然而,这个技术的最大缺点是,为补偿人眼视网膜的虚像,均衡脉冲向图像增加了虚像。此外,当图像中的运动加快时,需要增加更多的脉冲到图像上,这将在快速运动的情况中导致与图像内容冲突。
发明简述
因此,本发明的目的是提供一种实现有效的虚假轮廓效应补偿而不影响图像内容并容易实施的方法和装置。
为实现上述目的,提供一种处理视频图像的方法,视频图像由像素构成,像素用至少一个数字码字进行数字编码,其中,对数字码字的每一个比特,分配某个持续时间,此后,称为子域,在子域期间,激活整个像素或像素的分量,其中,为每个像素计算运动矢量,使用运动矢量重新编码像素的子域码字,运动矢量为当前像素(P8)确定当前像素来自前面视频图像中的哪个位置,其中,重新编码的步骤包括根据计算的运动矢量计算当前像素的一个或多个子域码字比特的拖曳坐标(<xn、<yn),其中,使用拖曳坐标(<xn、<yn)选择视频图像中的像素,并使用选择的像素的子域码字的对应比特确定当前像素(P8)的新子域码字的对应比特。
一种使用前面方法的装置,视频图像由像素构成,像素用至少一个数字码字进行数字编码,其中,对数字码字的每一个比特,分配某个持续时间,此后,称为子域,在子域期间,激活整个像素或像素的分量,其特征在于装置包括:
运动估算器(12),通过把当前视频图像与至少一个前面的视频图像进行比较,为当前视频图像的像素计算运动矢量,定义的运动矢量为当前像素(P8)确定当前像素(P8)来自前面视频图像中的那个位置;
子域重新编码单元,根据计算的运动矢量,为当前像素(P8)的一个或多个子域码字比特计算拖曳坐标(<xn、<yn);
选择单元(13),使用拖曳坐标(<xn、<yn)选择视频图像中的像素,并使用选择的像素的子域码字的对应比特确定当前像素(P8)的新子域码字的对应比特。
使用运动估算器计算的视频图像中的像素的运动矢量进行虚假轮廓效应的补偿,以这种方式,形成的运动矢量为当前的像素确定当前的像素来自前面视频图像的那个位置。所以,对于当前帧中的每一个像素或像素组,唯一的运动矢量在前面帧中确定了这个矢量的源。此外,以不同方式使用该矢量。换句话说,对于来自当前帧的每一个像素,矢量描述了像素来自何处。运动估算器自身应当确保,即使一个像素存在几种可能性,一个矢量只分配到一个像素。例如,如果前一视频图像的几个像素移动到当前图像中的相同位置,可能的矢量可以被组合成一个最后运动矢量。
使用运动矢量重新编码当前像素的子域码字,用于虚假轮廓效应补偿。这对应申请人另一个发明的总体构思(见EP-A-0980059),按照该发明,检测图像中的运动(眼睛聚焦区域的位移),正确的子域照明周期在这个位移上分布,以便确保眼睛将只感觉通过它的运动的正确信息。使用确定当前像素的源的运动矢量的优点是,即使在图像中复杂运动的情况下,如缩放操作或旋转,可以可靠地进行虚假轮廓效应补偿。
例如,如果一个像素组分布在几个不同的方向,由于每一个当前的像素组只有一个确定一个单个源的矢量(没有冲突),特别要避免在图像中出现“黑洞”。如果以常规的方法确定运动矢量,即,矢量指向当前像素移动到下一幅图像中的位置,则会出现冲突。
基于运动估算的虚假轮廓效应补偿的方法具有突出的优点,它不在图像中增加虚假信息,此外,这个解决方案与图像内容无关。另一个优点是当运动矢量是已知时,本发明的方法允许完成虚假轮廓效应的校正。因此,运动估算器对每一个像素提供了一个最好的运动矢量。为此,如果一个像素的信息分布在几个不同方向,则不存在问题。同样,如果来自前面帧的不同像素运动到当前像素位置,则不存在冲突,因为运动估算器只确定代表这个当前像素源的单个运动矢量。
同样,本发明方法不依赖用于等离子体显示屏的定址技术。根据公开的实施例,当定址或子域结构改变时,只需要重新计算子域的不同时间点,但算法没有改变。
另一个重要的优点是图像噪声不影响校正质量。本发明的方法非常容易实施。不需要大容量存储器,因为不需要象脉冲均衡技术的任何种类的LUT。本发明方法和装置的附加实施例公开在各自的从属权利要求中。
附图说明
本发明的实施例显示在附图中,并在下面进行详细解释:
图1显示了模拟虚假轮廓效应的视频图像。
图2解释了PDP的子域结构。
图3是PDP的子域结构的第二个例子。
图4是PDP的子域结构的第三个例子。
图5解释了虚假轮廓效应。
图6表示当显示图3的视频图像顺序时出现的黑边。
图7显示了视频顺序是临界的并导致出现虚假效应的第二个例子。
图8表示当显示图5的视频图像顺序时出现的模糊边缘。
图9显示了图3所示但实施了EP-A-0980059描述的虚假轮廓效应补偿方法。
图10显示EP-A-0980059的子域码字条目移位(entry shifting)的概念。
图11显示了计算像素组的运动矢量在像素组中的图像的分割。
图12显示了子域结构的优选实施例的子域的重心。
图13显示了视频图像中的复杂运动的第一实施例。
图14显示了视频图像中的复杂运动的第二实施例。
图15显示子域拖曳的原理。
图16显示本发明装置的方框图。
典型实施例
由虚假轮廓效应引起的赝像显示在图1。在所示女士的臂上显示了两条由虚假轮廓效应引起的黑线。同样,该女士脸部的黑线出现在右侧。
等离子体显示屏采用只能开关ON或OFF的放电单元的矩阵阵列。对于彩色显示,根据三色构成R、G、B,一个像素需要三个单元。同样,不像CRT或LCD,在CRT或LCD中,灰度级由光发射的模拟控制表达,在PDP中,每一个颜色分量的灰度级由调制每一个视频帧的光脉冲的数量控制。这个时间调制将根据眼睛时间响应在一个周期上由眼睛积分。
在数字视频处理领域内,所有8比特(256)亮度电平由下面的8个比特的组合表示:
20=1,21=2,22=4,23=8,24=16,25=32,26=64,27=128。为了用PDP技术进行这样的编码,帧周期将分成8个照明周期(称为子域),每一个周期对应一个比特。按照8个子周期,比特“2”的光脉冲数量是比特“1”的两倍,通过组合可以建立256个灰度级。图8显示了具有8个子域的可能的子域结构。
附带说明一下,子域周期是帧周期的子周期,由三个阶段构成,即,定址周期、持续时间、删除周期。在定址周期期间,根据子域码字需要激活的单元用确定的电压写入(预充电)。必要条件是单元内存储的电荷在某个时间周期仍然是稳定的。在所有单元被写入后,单元进入持续阶段,以小脉冲把附加电荷装入单元内。这导致事先在定址阶段写入的这些单元的触发,在触发期间产生了UV辐射,单元的荧光材料被激励并输出了光。下面是所有单元的消除阶段,转换单元返回到中性状态。
如果没有运动,观察者的眼睛将在约一帧周期对这些小光脉冲积分,并捕获正确灰度级的表达。
当PDP屏幕上的观察点(眼睛聚焦区)移动时,眼睛将跟随这个移动。因此,眼睛将不在一个帧周期上对来自相同单元的光积分(静态积分),而是对位于运动轨道上的不同单元的信息积分。从而,眼睛将在导致有缺陷信号信息的这个运动期间混合所有光脉冲。下面将详细解释这个效应。
在等离子体视频编码的领域中,使用超过8个子域表示256个原来的视频电平是很普通的。其目的是减小MSB的电平,该电平直接连接到产生的虚假轮廓的最大电平。基于10个子域的这种子域结构的第一个例子显示在图3。基于12个子域的子域结构的第二个例子显示在图4。当然,显示在图3和图4中的子域结构只是作为例子,在其它实施例中可以修改子域结构。
根据子域结构的光发射图形引入对应灰度级和彩色的扰动的图像质量降级的新种类。如早已解释的一样,这些扰动定义为所谓的“动态虚假轮廓效应,当PDP屏幕上的观察点移动时,它们对应图像中彩色边缘的外观。观察者具有在象显示的皮肤这样的均匀区域上出现强轮廓的感觉。当图像具有平滑的层次和光发射周期超过几毫秒时,提高了图像降级。所以,在黑暗场景中,该效应不象在平均灰度级场景中造成那样多的扰动(例如,照明值从32到223)。
此外,当观察者摇头时,相同的问题出现在静态图像中,得出这种虚像取决于人眼视觉感知的结论。
为较好地理解运动图像的视觉感知的基本原理,将讨论简单的例子。假设亮度电平128和127之间的过渡以每个视频帧5个像素的速度移动,眼睛跟随这个移动。
图5显示了对应亮度电平128的较暗阴影区域和对应亮度电平较亮阴影区域。使用图4所示的子域结构构筑亮度电平128和127,其画在图5的右侧。图5中的三条平行线表示眼睛跟随该移动的方向。两条外线显示了虚像信号将被感知的区域边界。在它们之间,眼睛将感知缺乏亮度,该亮度导致出现图6所示的对应区域的黑色边缘。
在所示区域将被感知缺乏亮度的效应是由于当眼睛接收光的点正在移动时,眼睛将不再积分一个像素的所有光周期造成的。当点移动时,只有部分光脉冲被积分。因此,缺乏对应的亮度,黑色边缘将出现。在图6的左侧,显示了一条曲线,在观察图5所示的运动图像时,该曲线表示眼睛单元的特性。与水平过渡具有合适距离的眼睛单元将从对应像素积分足够的光。只是靠近过渡的眼睛单元不能够从相同像素积分许多光。在灰度等级的情况中,这个效应对应不自然的白或黑色边缘的幻像。在彩色图像中,因为这个效应将独立地出现在不同彩色分量中,他将导致如皮肤这样的均匀区域中的彩色边缘的幻像。
下面解释在运动物体边界上对应减少清晰度的模糊边缘的外观:假设以每帧5个像素运动的在电平0和255之间纯黑到白的过渡,眼睛跟随图7所示的这个运动。
如图7所示,我们可以在运动期间跟随眼睛积分的特性。两条倾斜的眼积分线显示虚像感知信号的限制。在它们之间,眼睛将感知增加的亮度,该亮度导致图8中阴影边缘出现。因此,在运动期间将失去纯黑到白的过渡,并导致减小球面图像清晰度的印象。
公开在申请人的另一个欧洲专利申请的主要思想是事先预见图像中的运动(见EP-A-0980059),以便在眼睛积分轨迹上定位运动区域单元的不同光脉冲。根据此原理,根据眼睛移动,图像中像素的某些子域的光脉冲移动到当前视频帧中的另一个像素或一些像素,以便确保在眼睛的移动期间,在正确的时间将接收到正确的信息。图9显示了这个原理。如图9所示,所有所示的像素的第六和第七子域的光脉冲由一个像素移动到右部,第八子域的光脉冲由两个像素移动到右部,第九子域的光脉冲由三个像素移动到右部。所有像素具有相同的运动矢量,所以,它们都是移动的主体。这个效应是跟随图像运动的眼睛将积分第六到第九子域的所有光周期,因此,导致图9底部的眼刺激曲线的128的对应量度值。结果是没有黑暗区域将被感知。
请注意,图表是简化的,刺激积分曲线在过渡的边界区域是平滑的。需要注意的另一点是运动矢量是以常规方法确定的,即,它表明在跟随的视频图像中当前帧的像素到哪去了。
图10显示EP-A-0980059公开的子域移动概念。从这个图像中可以清楚地看到,运动矢量指向远离当前子域,当前像素的光周期远离这个像素被移到沿运动矢量轨迹的另一个像素。图10所示计算了移动坐标。在后面的描述中将解释所有术语。
结果,这个技术的目的是根据运动振幅和方向修改像素的编码。这个技术显示了非常好的结果,当检测到运动时,可以完全除去虚假轮廓效应。在虚假运动估算中,因为没有脉冲加到图像,而是移动图像内容,所以,图像质量没有降低多少。
下面,详细描述算法。常规的运动估算器为像素组确定运动矢量。图11显示了在组B1、B2中的图像的典型分割。组可以有不同的尺寸。在均匀区域,组将有较大的尺寸,在非均匀区域,组的尺寸将较小。当然,组最小也可以有一个像素的尺寸(1*1组)。对于每一个组,将分配单个运动矢量。可以使用其它类型的运动相关的图像分割,因为目的只是在具有已经确定的矢量的基本单元中分解图像。所以,所有运动估算器可以使用在发明中,本发明可以在组中细分图像和为每一个组计算对应的运动矢量。例如,当运动估算器是众所周知的100Hz上转换技术和MPEG编码等,本领域技术人员都了解,所以,在此不需要详细描述它们。作为一个例子,参考W0-A-89/08891,所描述的运动估算器将使用在这个发明中。最好的使用是运动估算器为每一个组精确地给出运动的方向和这个运动的振幅。因为大多数等离子体显示屏工作在红、绿、蓝(RGB)分量数据,对于每一个RGB分量数据来说,获得的收益是当完成分开的运动估算时,组合这三个分量,以至将改善运动估算的效率。在这方面,参考申请人的欧洲专利申请99250346.6,该专利申请详细描述了等离子体显示的运动估算器。与常规运动估算器的区别是运动矢量被不同地确定,即,它从前面帧的位置指向当前视频图像中这个像素移动到的点。因此,它不远离当前像素指向,而是指向当前像素。在此,只需要对常规运动估算器进行稍微的修改。
图像组纪录步骤将跟随运动估算步骤。在所述发明的实施例中,有一些简化的假设:
1)不需要考虑子域内的定址和消除时间周期;
2)使用图4所示的子域结构方案。
首先,进行子域光周期的拖曳坐标的计算。每一个子域对应表示在帧周期内它的位置的重心(子域持续时间的中间的位置)。注意,在此没有考虑定址和消除时间。图12显示了帧周期内的重力位置的中心,其中,帧持续从0到255个相对时间单元。当等离子体显示屏以逐行扫描模式定址时(隔行扫描视频规范要求事先转换),对于50Hz等离子体显示屏技术来说,视频帧持续20ms。对于隔行扫描-逐行扫描转换,已经存在许多种可以使用的解决方案。
对于每一个子域的重心可以容易地根据简单公式计算出来:
G(n)=S(n)+Dur(n)/2
其中,G(n)表示当前子域的重力位置的中心,n表示当前子域数量,S(n)表示当前子域的开始点,Dur(n)表示子域的持续时间。
为了实现动态虚假轮廓补偿,对于帧N中的每一个像素,首先处置描述从帧N-1到帧N的组的移动的矢量VN(VN x;VN y),该矢量是由显示的每一个像素运动估算器提供的。像素可以是一个组的部分,该像素组在帧N-1到帧N的显示上正在改变它的位置。
如前面提到的一样,在标准运动估算器中,这个矢量描述了帧N和帧N+1之间的像素的移动。换句话说,这个矢量确定了当前像素正在去哪。这就引入了图13所示的复杂运动的情况,其中,几个像素正移动到有问题的一个公共像素,因为不是很清楚哪一个子域将移动到公共像素。
同样,在图14所示的情况中,单个像素的所有子域在不同方向移动到不同的像素,按照已知的运动矢量,表示在单个像素上缺乏能量。因此,这种情形将导致图像中的“黑洞”。
按照本发明,对于每一个像素,运动估算器将只确定一个运动矢量,该矢量显示像素的子域正来自前面的帧N-1中的何处。
图15显示了“子域拖曳”的原理,其中,每一个当前像素的子域拖曳坐标是根据它的运动矢量V(Vx;Vy)计算出来的。因此,改变了原来的子域码字。例如,在图15所示的例子中,子域码字的前四个比特从原来的子域码字提取,即,它们没有变化。子域码字的第五和第六比特从原来像素的子域码字直接提取到当前像素的左侧。子域码字的第七到十二比特从沿着图15所示的运动矢量轨迹的其它像素提取。例如,当前像素上的子域12的比特来自位于矢量开始的像素。因此,每一个像素只处理一次,所以没有产生任何冲突。
换句话说,对于当前像素的每一个子域条目,我们将搜索这个子域条目来自何处。这就需要一个帧N运动矢量场的新定义,现在将描述从帧N-1到帧N的运动。在这个新概念中,运动矢量描述了像素来自何处。换句话说,对于帧N的每一个像素,从帧N-1到帧N的专有矢量指向由运动估算器提供。每一个矢量将指向当前像素,并也确定了来自前面帧N-1的这个像素源的运动。很明显,因为每个像素只有一个矢量,所以将没有任何冲突,也不缺乏能量,因为在图14的中心,像素的运动矢量将是零,对于这个像素,子域码字将保持不变。
本发明的算法将定义如下,
位于当前帧N中的(x、y)点的每一个像素P,
    {对于(n=0;n<Nsf;n++),
     {
       P(x、y)[n]=P(x+<xn;y+<yn)[n]
      }
在这个公式中,P(x、y)[n]表示在当前帧N中位于位置(x、y)像素的子域n的条目,<xn和<yn表示子域n的条目来自哪的相对位置。即,他来自位置(x+<xn;y+<yn)上的当前视频帧中的像素的原来子域码字。
在我们的特殊算法中,拖曳坐标按下列公式计算:
<xn=-Vx·G(n)/Dur(N)
V=(Vx、Vy)
<yn=-Vy·G(n)/Dur(N)
已经给出了运动矢量V=(Vx、Vy),需要提取子域条目的位置由下列公式计算:
<xn=-Vx·G(n)/Dur(N)和<yn=-Vy·G(n)/Dur(N)在公式中,Dur(N)表示帧N的完整持续时间。在的例子中,发现具有负号的下面的结果:
 
子域 1 2 3 4 5 6 7 8 9 10 11 12
<<sub>x</sub> 0 0 0 0 -1 -1 -2 -3 -4 -5 -6 -6
<<sub>y</sub> 0 0 0 0 0 0 0 0 0 0 0 0
请注意,在凑整之后,只是结果的整数部分是相关的,因为最小相对位置是一个像素。
不用说,相同的原理将应用于其它的速度振幅和其它的方向。在较复杂运动方向的情况中,子域条目将在水平和垂直两个方向内移动。
如图16所示,新发明的方法不是移动子域照明周期远离当前像素到另一个像素的方法,而是拖曳子域照明周期到当前像素P8。
图15显示了所有拖曳到像素P8的子域12、11、10、9、8、7、5、6,所以,像素P8显示了所有在运动轨迹上的子域6到12,子域1到4停留在像素P8没有移动。按照上述算法,对于显示的所有像素,使用前面计算的拖曳坐标确定哪一个字域被拖曳到该像素。这是补偿方法的一部分,该方法计算子域确实从那来到该像素。子域12、11、10、9、8、7、5、6对图12中定位的像素没有影响。图12只是解释子域拖曳的原理,其显示了像素P8的不同子域来自何处。例如,在这个处理步骤之后,P8处的新第十二子域将是P1处的老的第十二子域。
本发明的装置显示在图16中。装置可以与PDP矩阵显示屏集成在一起。它也可以是与等离子体显示屏连接的单独的盒子。参考标号10表示整个装置。参考标号11表示输入原来视频数据的帧存储器(例如,RGB、YUV、子域数据)。帧存储器11连接到运动估算器12。运动估算器12接收帧N-1的原来视频数据,并也作为下一帧N的原来视频数据的另一个输入。所以,它使用两个接连的帧,以便检测视频图像中的运动。使用不同图像信息的其它装置也可以用来输出运动信息。要点只是为图像的每一个像素提供前面帧的这个像素的源。合成的运动矢量被输出到子域拖曳计算单元13。这个单元将处理标准编码组,如果需要,该编码组转换视频数据到子域数据。在这个单元中,使用子域码字。然后,根据来自单元12的运动信息,重新编码像素,其中,如上面解释的一样,像素的子域(SF)被放置在该组的运动矢量确定的方向内,通过输出14输出了该帧N的对应的新重新编码的子域数据。
在图16中,FN表示当前帧N的原来视频数据,FN-1表示从帧存储器11来的前面帧的原来视频数据。这些数据具有不同的数据类型:RGB、YUV、只有亮度(luminance only)、子域码字等,然后,运动估算器使用这两个帧计算有关帧N的矢量VN
不用说,图16所示的方框可以用适当的计算机程序实现相同的功能。
本发明没有局限于公开的实施例。可以进行各种修改,这些修改落入权利要求的范围。例如,可以使用不同的子域结构。由专利覆盖的实施数值可以不同于所示的数值,特别是所用字域的数量和加权。
特别是本发明可以使用在PDP中。当前,等离子体显示屏被用在消费电子产品中,例如,电视机和计算机的监视器。但是,本发明也适用于矩阵显示,其中,在字域中用小脉冲产生光,即,使用PWM原理控制光输出。

Claims (8)

1.一种处理视频图像的方法,视频图像由像素构成,像素用至少一个数字码字进行数字编码,其中,对数字码字的每一个比特,分配某个持续时间,此后,称为子域,在子域期间,激活整个像素或像素的分量,其中,为每个像素计算运动矢量,使用运动矢量重新编码像素的子域码字,其特征在于,运动矢量为当前像素(P8)确定当前像素来自前面视频图像中的哪个位置,其中,重新编码的步骤包括根据计算的运动矢量计算当前像素的一个或多个子域码字比特的拖曳坐标(<xn、<yn),其中,使用拖曳坐标(<xn、<yn)选择视频图像中的像素,并使用选择的像素的子域码字的对应比特确定当前像素(P8)的新子域码字的对应比特,其中,<xn和<yn表示子域n的条目来自哪的相对位置。
2.按权利要求1所述的方法,其特征在于按照下式计算拖曳坐标(<xn,<yn):
<xn=-Vx·G(n)/Dur(N)和<yn=-Vy·G(n)/Dur(N)其中,<xn表示在像素的x方向中的相对位置,从该位置,需要为当前像素提取子域码字比特;
<yn表示在像素的y方向中的相对位置,从该位置,需要为当前像素提取子域码字比特;
Vx是运动矢量的x分量,Vy是运动矢量的y分量;
G(n)表示帧周期中子域的重力位置的中心;
n是当前子域数量;
Dur(N)是帧的持续时间。
3.按权利要求1所述的方法,其特征在于对一个像素分配三个子域码字,每一个像素一个颜色分量。
4.按权利要求1所述的方法,其特征在于子域是视频帧周期的子周期,视频帧周期由寻址周期、持续周期和消除周期构成。
5.按权利要求2所述的方法,其特征在于按下式计算帧周期中每一个子域的重心:
G(n)=S(n)+Dur(n)/2
其中,G(n)表示帧周期中的重力位置的中心;
n表示当前子域数量;
S(n)表示当前子域的开始位置;
Dur(n)表示当前子域的持续时间。
6.一种处理视频图像的装置,视频图像由像素构成,像素用至少一个数字码字进行数字编码,其中,对数字码字的每一个比特,分配某个持续时间,此后,称为子域,在子域期间,激活整个像素或像素的分量,其特征在于装置包括:
运动估算器(12),通过把当前视频图像与至少一个前面的视频图像进行比较,为当前视频图像的像素计算运动矢量,定义的运动矢量为当前像素(P8)确定当前像素(P8)来自前面视频图像中的哪个位置;
子域重新编码单元,根据计算的运动矢量,为当前像素(P8)的一个或多个子域码字比特计算拖曳坐标(<xn、<yn);
选择单元(13),使用拖曳坐标(<xn、<yn)选择视频图像中的像素,并使用选择的像素的子域码字的对应比特确定当前像素(P8)的新子域码字的对应比特,其中,<xn和<yn表示子域n的条目来自哪的相对位置。
7.按权利要求6所述的装置,其特征在于装置包括矩阵显示屏。
8.根据权利要求7所述的装置,其特征在于所述矩阵显示屏包括等离子体显示屏、半导体液晶LCOS或数字微镜器件DMD显示屏。
CNB011200804A 2000-07-12 2001-07-12 处理视频图像的方法和处理视频图像的装置 Expired - Lifetime CN100511281C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP00250230.0 2000-07-12
EP00250230A EP1172765A1 (en) 2000-07-12 2000-07-12 Method for processing video pictures and apparatus for processing video pictures

Publications (2)

Publication Number Publication Date
CN1335583A CN1335583A (zh) 2002-02-13
CN100511281C true CN100511281C (zh) 2009-07-08

Family

ID=8172610

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB011200804A Expired - Lifetime CN100511281C (zh) 2000-07-12 2001-07-12 处理视频图像的方法和处理视频图像的装置

Country Status (5)

Country Link
US (1) US6961379B2 (zh)
EP (2) EP1172765A1 (zh)
JP (1) JP2002123211A (zh)
KR (1) KR100887678B1 (zh)
CN (1) CN100511281C (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1207510A1 (en) * 2000-11-18 2002-05-22 Deutsche Thomson-Brandt Gmbh Method and apparatus for processing video pictures
CN1606882A (zh) * 2001-12-20 2005-04-13 皇家飞利浦电子股份有限公司 数字图像处理系统中运动矢量的调节
JP4130783B2 (ja) 2002-04-23 2008-08-06 松下電器産業株式会社 動きベクトル符号化方法および動きベクトル復号化方法
EP1376521A1 (en) * 2002-06-28 2004-01-02 Deutsche Thomson Brandt Processing video pictures for improving dynamic false contour effect compensation
US9299284B2 (en) * 2004-11-10 2016-03-29 Thomson Licensing System and method for dark noise reduction in pulse width modulated (PWM) displays
US7873212B2 (en) * 2006-01-24 2011-01-18 Nokia Corporation Compression of images for computer graphics
EP1936589A1 (en) * 2006-12-20 2008-06-25 Deutsche Thomson-Brandt Gmbh Method and appartus for processing video pictures
JP5141043B2 (ja) 2007-02-27 2013-02-13 株式会社日立製作所 画像表示装置および画像表示方法
JP2008261984A (ja) * 2007-04-11 2008-10-30 Hitachi Ltd 画像処理方法及びこれを用いた画像表示装置
CN101887680B (zh) * 2009-12-25 2012-05-30 四川虹欧显示器件有限公司 降低动态伪轮廓的方法及系统
CN101887679B (zh) * 2009-12-31 2012-05-30 四川虹欧显示器件有限公司 降低动态伪轮廓的方法及系统
GB2504141B (en) * 2012-07-20 2020-01-29 Flexenable Ltd Method of reducing artefacts in an electro-optic display by using a null frame
CN107845077B (zh) * 2017-11-01 2021-11-16 中国科学院长春光学精密机械与物理研究所 一种校正dmd微镜元成像非对称形变的方法和存储介质
CN113903297B (zh) * 2021-12-07 2022-02-22 深圳金采科技有限公司 一种led显示屏幕的显示控制方法及系统

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3158904B2 (ja) * 1994-10-19 2001-04-23 株式会社富士通ゼネラル ディスプレイパネルの映像表示方法
KR100235343B1 (ko) * 1994-12-29 1999-12-15 전주범 영역분할 기법을 이용한 동영상신호 부호화기의 움직임 벡터 측정장치
JP3711378B2 (ja) * 1995-02-06 2005-11-02 株式会社日立製作所 中間調表示方法及び中間調表示装置
JPH09138666A (ja) * 1995-11-10 1997-05-27 Fujitsu General Ltd 表示装置の動画補正方法及び動画補正装置
JP3719783B2 (ja) * 1996-07-29 2005-11-24 富士通株式会社 中間調表示方法および表示装置
JP3591217B2 (ja) * 1997-05-20 2004-11-17 松下電器産業株式会社 多階調画像表示装置
US6310918B1 (en) * 1997-07-31 2001-10-30 Lsi Logic Corporation System and method for motion vector extraction and computation meeting 2-frame store and letterboxing requirements
JP2002508090A (ja) * 1998-03-23 2002-03-12 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ディスプレイ駆動
US6100863A (en) * 1998-03-31 2000-08-08 Matsushita Electric Industrial Co., Ltd. Motion pixel distortion reduction for digital display devices using dynamic programming coding
EP0978816B1 (en) * 1998-08-07 2002-02-13 Deutsche Thomson-Brandt Gmbh Method and apparatus for processing video pictures, especially for false contour effect compensation
EP0978817A1 (en) * 1998-08-07 2000-02-09 Deutsche Thomson-Brandt Gmbh Method and apparatus for processing video pictures, especially for false contour effect compensation
KR100289534B1 (ko) * 1998-09-16 2001-05-02 김순택 플라즈마표시패널의계조표시방법및장치
JP2000089711A (ja) * 1998-09-16 2000-03-31 Matsushita Electric Ind Co Ltd ディスプレイ装置の中間調表示方法
JP4206530B2 (ja) * 1998-09-18 2009-01-14 パナソニック株式会社 画像表示装置の動画疑似輪郭低減方法
JP2000163004A (ja) * 1998-11-30 2000-06-16 Matsushita Electric Ind Co Ltd ディスプレイ装置の中間調表示方法
JP2000163013A (ja) * 1998-11-30 2000-06-16 Matsushita Electric Ind Co Ltd ディスプレイ装置の中間調表示方法
EP1049068A1 (en) * 1999-04-28 2000-11-02 THOMSON multimedia S.A. Method and apparatus for processing video signals

Also Published As

Publication number Publication date
US6961379B2 (en) 2005-11-01
EP1174825A1 (en) 2002-01-23
EP1172765A1 (en) 2002-01-16
KR100887678B1 (ko) 2009-03-11
CN1335583A (zh) 2002-02-13
US20020031180A1 (en) 2002-03-14
KR20020006455A (ko) 2002-01-19
EP1174825B1 (en) 2014-05-14
JP2002123211A (ja) 2002-04-26

Similar Documents

Publication Publication Date Title
US6473464B1 (en) Method and apparatus for processing video pictures, especially for false contour effect compensation
KR100586083B1 (ko) 의사윤곽 효과 보상을 위해 비디오 화상을 처리하는 방법 및 장치
CN100511281C (zh) 处理视频图像的方法和处理视频图像的装置
JP2001083926A (ja) 動画偽輪郭補償方法およびその方法を用いた画像表示装置
JP4928662B2 (ja) 表示装置に表示するためにビデオ画像を処理する方法及び装置
JP4991066B2 (ja) ビデオ画像を処理する方法及び装置
US6373477B1 (en) Display driving
KR100784945B1 (ko) 비디오 화상을 처리하기 위한 방법 및 장치
EP0980059B1 (en) Method and apparatus for processing video pictures, especially for false contour effect compensation
Wei et al. A time-split simulation method for dynamic false contours of motion images in color plasma display panel
EP0987675A1 (en) Method and apparatus for processing video pictures, especially for false contour effect compensation
EP1234298A1 (en) Method for processing video pictures for display on a display device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP02 Change in the address of a patent holder
CP02 Change in the address of a patent holder

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: La France

Patentee before: THOMSON LICENSING

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190125

Address after: Paris France

Patentee after: International Digital Madison Patent Holding Co.

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

Effective date of registration: 20190125

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

CX01 Expiry of patent term
CX01 Expiry of patent term

Granted publication date: 20090708