CN1717920A - 运动序列模式的检测 - Google Patents

运动序列模式的检测 Download PDF

Info

Publication number
CN1717920A
CN1717920A CNA2003801040595A CN200380104059A CN1717920A CN 1717920 A CN1717920 A CN 1717920A CN A2003801040595 A CNA2003801040595 A CN A2003801040595A CN 200380104059 A CN200380104059 A CN 200380104059A CN 1717920 A CN1717920 A CN 1717920A
Authority
CN
China
Prior art keywords
sequence
motion
motion detection
detection signal
predetermined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2003801040595A
Other languages
English (en)
Other versions
CN100375501C (zh
Inventor
A·K·里伊曼斯
A·多米斯森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN1717920A publication Critical patent/CN1717920A/zh
Application granted granted Critical
Publication of CN100375501C publication Critical patent/CN100375501C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0112Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard
    • H04N7/0115Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard with details on the detection of a particular field or frame pattern in the incoming video signal, e.g. 3:2 pull-down pattern
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/012Conversion between an interlaced and a progressive signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)
  • Image Analysis (AREA)

Abstract

一种运动序列模式检测器(200,300),用于在连续的视频场(100,102)内检测运动序列的周期性模式,它包括用于通过计算从各成对场的第一和第二场内导出的像素值之间的差值,然后通过将差值与多个预定的像素值差值的阈值进行比较而检测运动的存在的运动检测单元(202),并且基于比较结果输出成对场的运动检测信号;以及模式识别单元(204),用于通过成对场的多个运动检测信号序列与预定序列的比较而检测周期性模式。如果对多个序列之一检测到周期性模式,则生成表明连续的视频场与影片模式相应的最终输出。

Description

运动序列模式的检测
本发明涉及一种用于在连续的视频场中检测运动序列的周期性模式的运动序列模式检测器,包括:
-运动检测单元,用于通过计算从成对场的第一和第二场中导出的像素值之间的差值,继而通过将差值与预定的闽值进行比较,以便在连续的视频场的成对场之间检测运动的存在,并且基于该比较而输出成对场的运动检测信号;以及
-模式识别单元,用于通过将成对场的运动检测信号的序列与预定序列进行比较而检测周期性模式。
本发明进一步涉及一种图像处理设备,包括:
-接收装置,用于接收与连续的视频场相应的信号;
-如上所述的运动序列模式检测器;以及
-图像处理单元,用于基于连续的视频场计算输出图像的序列,该图像处理单元由运动序列模式检测器控制。
本发明进一步涉及一种在连续的视频场中检测运动序列的周期性模式的方法,包括:
-通过计算从成对场的第一和第二场中导出的像素值之间的差值,然后通过将差值与预定阈值进行比较,以便在连续的视频场的成对场之间检测运动的存在,并且基于该比较而输出成对场的运动检测信号;以及
-通过将成对场的运动检测信号的序列与预定序列进行比较而检测周期性模式。
当把注意力集中于图像速率,可以识别三种格式:
-50Hz视频:一种传输标准,通常称为PAL或SECAM,它包括每秒50个隔行场。每一帧包括625行,其中各偶数和奇数行按场交替传输。50Hz视频标准除了日本和北美外在全世界得到了广泛应用。
-60Hz视频:一种传输标准,通常称为NTSC,它包括每秒60个(精确地为59.94个)隔行场。每一帧包括525行,其中各偶数和奇数行按场交替传输。60Hz视频标准在日本和北美应用。
-24Hz影片:影片对应于一种在透明材料的长胶带上记录运动图像的方法。每秒24幅图像的帧速率是在捕获运动的能力和每一时间段内所需的影片量之间的一种折衷。该标准早于视频传输标准。曾经做过努力使帧速率适合于为每秒25和30幅图像,从而与传输标准变得更为兼容。除了某些特例,例如广告片,这些帧速率不能在运动图像产业中找到广泛的支持。因此,24Hz影片仍然作为最为广泛的运动图像的应用标准。
当电视成为一种流行的媒体,这就增长了对于新内容的需求。这就要求格式的转换方法。除了将运动图像转换为电视外,还要在不同的传输标准之间交换电视节目。这种内容同样需要转换。以后,当电视成为主导,还要将视频材料转换为影片,例如在电影院中显示电视广告。因为技术和经济两者的原因,运动图像产业仍然使用同样的过程将影片格式转换为视频格式。
将影片转换为视频的处理称作电视(传送)电影(telecine)处理。这种处理的多种实施方式之一是对电影胶片进行光照并且通过视频摄像机捕获穿过电影胶片的光束并且在视频信号垂直消隐周期内让电影胶片前行。为了将帧速率从24Hz的影片转换为50Hz的视频或60Hz的视频,应用一种称为“下拉(pull-down)”的处理。下拉是一种将影片先前的图像进行重复直到新的图像可以应用为止的方法。这种方法可以方便地以机械方式实施。为了将24Hz的影片转换为50Hz的视频,通过将影片运行得略快一些,使影片的图像速率增加到每秒25幅图像。速度和声音的音调百分之四的增长对一般公众不会认为是烦人的。然后,每一影片图像被扫描两次,形成了两个视频场。这种方法称为2:2下拉。同时请参照图1B。为了将24Hz的影片转换为60Hz的视频,不希望将速度加快到30Hz,因为速度加快并且声音的音调的改变对于一般公众将是不能接受的。因此采用另一种方法,其中将每一偶数影片图像重复三次,而每一奇数影片图像则重复两次。这形成了2.5倍的帧速率的增长,结果形成了60Hz的视频信号。这种方法称为3:2下拉。同时请参照图1C。
图像处理设备,像电视,可以包括图像处理单元,用于从一系列的初始输入图像中计算更大量的输出图像。在那样的情况下,多个输出图像暂时位于连续的各原始输入图像之间。这种计算通常称为图像速率转换。对于图像速率转换,它和所接收的图像捕获源的类型的判定有关。那意味着为了获取良好的图像质量,它不得不对所接收的图像是出自影片摄像机还是出自视频摄像机进行检测,其中影片摄像机以逐行扫描模式并以较低的图像速率捕获图像,而视烦摄像机以视频信号的图像速率捕获图像。基于上述检测,将所接收的视频场合成而形成图像。当所接收的视频场对应于影片时,则两个连续场可以相对方便地合并。当所接收的视频场对应于视频时,则需将视频场的像素值进行内插,这是由图像中所检测到的运动所控制的。把视频模式信号错误地按影片模式处理能引起在输出图像中清晰可见的严重的伪像。这些伪像称为“分叉”、“鼠牙”(mouse teeth)、“梳齿效应”或者“拉链(zippers)”。错误的视频模式的检测不那么严重,但是同样生成伪像。
总之,由图像处理设备接收的信号不包括连续的视频场的捕获源类型的明确的指示。因此,这种信息不得不从视频场本身中导出。通常这是通过检测运动序列模式而完成的。
从美国专利US4,982,280中已知在开篇的段落中所描述的类型的运动序列模式检测器的实施例。这篇专利的说明书公开了一种用来在连续的视频场(例如影片模式或者逐行扫描的扫描模式)中检测运动序列的周期性模式而设计的运动序列模式检测器。运动序列模式检测器包括一个运动检测器,它用于在预定的连续的视频场的增量中检测从增量到增量的运动的存在,并且由此输出每一所述增量的第一运动检测信号。运动检测器计算连续的视频场的像素值之间的差值并且将计算结果与阈值进行比较以降低噪声的影响。运动序列模式检测器进一步包括逻辑电路,它响应于第一运动检测信号以便在连续的视频场内检测运动序列的周期性模式。
通常噪声是难以从视频运动中识别的。因为一场中的噪声不同于下一场中的噪声,所以它经常被识别为视频运动。因此,已知的检测器使用闽值来将噪声从视频运动中识别出来。当像素值的差值(即亮度差值)超过了闽值,那么就假定具有运动。当亮度差值没有超过阈值,那么假定差值由噪声引起。因此,适当的阈值的值的选取至关重要。
本发明的目的是提供一种在开篇的段落中所描述的类型的运动序列模式检测器,它对噪声相对地较为坚强(robust)。
本发明的目的因运动序列模式检测器还被按下列方式安排而得以实现:
-基于一个另外的预定闽值来判定成对场的另外的运动检测信号,其中该另外的预定阈值不同于预定阈值;
-将该另外的运动检测信号的一个另外的序列与预定序列进行比较;以及
-基于该运动检测信号的该序列与该预定序列的比较以及该另外的运动检测信号的该另外序列与预定序列的比较,来检测运动序列的周期性模式。通过应用多个闽值并且将各个运动检测信号的各个序列与预定序列之间的各个比较的多个结果进行组合,可以达到坚强的模式检测。不是调谐到或选择一个可能是不适当的像素值差值的阈值的方式,而是应用多个像素值差值的阈值,其中至少一个是适当的。周期性模式最终的检测至少基于适当的像素值差值的阀值。
根据本发明的运动序列模式检测器的实施倒是这样安排的:基于运动检测信号序列与预定序列的比较以及该另外的运动检测信号的该另外的序列与该预定序列的比较而生成一个模式信号,它表明连续的视频场的特性是影片模式。本运动序列模式检测器是所谓的影片检测器,它被安排成检测连续的视频场是否出自通过逐行的扫描来捕获图像的影片摄像机。如果影片检测器没能检测到与影片相匹配的运动序列模式或者换句话说,如果它检测到与视频模式即在隔行模式所获得相匹配的运动序列模式,那么根据本发明的运动序列模式检测器的实施例安排成生成一个表明连续的视频场的特性为视频模式的模式信号。
根据本发明的运动序列模式检测器的实施例被设置成:如果运动检测信号的序列与预定序列相应或者该另外的运动检测信号的该另外的序列与预定序列相应,那么生成表明连续的视频场的特性为影片模式的模式信号。换句话说,如果基于所应用的像素值差值的阈值之一判定了连续的视频场的特性与影片模式相应,那么最终的结果是:根据本发明的运动序列模式检测器的实施例将生成表明连续的视频场的特性的为影片模式的模式信号。如果运动检测信号的序列不与预定序列相对应并且该另外的运动检测信号的该另外的序列不与预定序列相对应,那么根据本发明的运动序列模式检测器生成表明连续的视频场的特性为视频模式的模式信号。
根据本发明的运动序列模式检测器的实施例包括:
-一个另外的模式识别单元,用于通过将该另外的运动检测信号的该另外的序列与预定序列进行比较而检测周期性模式;以及
-判定单元,用于通过将成对场的运动检测信号的序列与预定序列进行比较的第一结果以及将该另外的运动检测信号的该另外的序列与预定序列进行比较的第二结果进行组合,从而判定周期性模式是否被检测到。根据本发明的这一实施例的优点在于处理的一部分(特别是用于多个像素值差值的阈值的运动测量)是并行地执行的。因而没有引入附加的时间延迟。
在根据本发明的运动序列模式检测器的实施例中,运动检测单元被安排来确定从第一场以及第二场中导出的像素值之间的差值的柱状图,并且运动检测单元被安排成基于属于柱状图的第一柱体(bin)的像素值之间的第一多个的差值来确定第一个运动检测信号,并且基于属于第一柱体的像素值之间的第一多个的差值与属于柱状图的第二柱体的像素值之间的第二多个的差值这二者的总和来确定第一个另外的运动检测信号。根据本发明的这一实施例的优点在于像素值之间的差值只需计算一次,但是被多次使用。因此,优点在于使用有限的计算资源。
本发明的另一目的是提供一种在开篇的段落中所描述的类型的图像处理设备,其中包括能较为坚强地抗噪音的运动序列模式检测器。
本发明的这一目的是通过运动序列模式检测器进一步按如下方式安排而实现的:
-基于一个另外的预定阈值来确定成对场的另外的运动检测信号,其中该另外的预定阈值不同于预定阈值;
-将该另外的运动检测信号的另外的序列与预定序列进行比较;以及
-基于运动检测信号的该序列与预定序列的比较以及该另外的运动检测信号的该另外的序列与预定序列的比较,来检测运动序列的周期性模式。图像处理设备的图像处理单元可以支持一个或多个以下的图像处理类型:
-例如根据MPEG标准的视频压缩,即编码或解码。
-去隔行扫描:隔行扫描是一种常用的用于交替地传送以奇数或偶数编号的图像行的视频广播程序。去隔行扫描试图恢复全部垂直的分辨率,即使得每一图像的奇数和偶数行可以同时获得;
-图像速率转换:从一系列的初始输入图像中计算出更大的输出图像系列。输出图像在时间上位于两个初始输入图像之间;以及
-时间噪声降低。这同样可以包括空间的处理,导致空间时间上的噪声降低。
图像处理设备任选地包括用于显示输出图像的显示装置。图像处理设备任选地包括用于图像存储的存储装置:不管是输入还是输出图像。图像处理设备可以例如为电视机、机顶盒、VCR(录像机)播放器、卫星调谐设备或者DVD(数字通用盘)播放器或记录装置。
本发明的另一目的是提供一种在开篇的段落中所描述的类型的方法,该方法能较坚强地抗噪声。
本发明的目的通过该方法具有下列特征而得以实现:
-基于一个另外的预定阈值确定成对场的另外的运动检测信号,其中该另外的预定阈值不同于预定闽值;
-将该另外的运动检测信号的另外的序列与预定序列进行比较;以及
-基于运动检测信号的该序列与预定序列的比较以及该另外的运动检测信号的另外的序列与预定序列的比较,来检测运动序列的周期性模式。
运动序列模式检测器的改进以及它的变更可能与所描述的方法和图像处理设备的改进或变更相对应。
根据本发明的运动模式检测器、方法以及图像处理设备的这些以及其它方面将通过以下所描述的实施方式和实施例并且参照相关附图被阐述并变得更为清楚,其中:
图1A示意性地显示了一帧的两个场;
图1B示意性地显示了2:2下拉;
图1C示意性地显示了3:2下拉;
图2A示意性地显示了根据本发明的运动序列模式检测器的实施例;
图2B示意性地显示了根据本发明的运动序列模式检测器的运动检测单元的细节;
图3示意性地显示了根据本发明的运动序列模式检测器的实施例,它包括多个模式识别单元;
图4示意性地显示了像素值差值的柱状图,它由联系到图2和图3所描述的运动序列模式检测器所计算并应用;
图5示意性地显示了根据本发明的图像处理设备500的实施例。
相同的附图标记用于表征附图之间相似的部分。
图1A示意性地显示了视频信号的两个连续的场100、102。第一场100包括例如为帧的奇数行的104-112的像素值,第二场102包括例如为帧的偶数行的114-122像素值。例如在相应于第二场102的像素116的帧坐标处在第一场100中不具有直接可用的像素值124。这意味着如果需要像素值124,那么读像素值必须从其它像素值推导。例如,这个要推导的像素值可以通过第一场100的像素值的内插而计算,例如通过基于像素值104-109的内插。可选地,可以考虑更少的像素值。内插同样可能包括规则统计操作,例如中值探作。它也可能包括出自场102的像素或出自场100之前的场(未示出)的像素。
图1B示意性地显示了2:2下拉。具有25Hz的频率的图像130-136的输入流上转换为具有50Hz的频率的视频场138-152的输出流。在视频场138-152之下表明了视频场的不同相位{0,1}。这种影片相位表明在重复模式中的位置并且通常在影片检测器中进行计算。
图1C示意性地显示了3:2下拉。具有24Hz的频率的图像160-164的输入流上转换为具有60Hz的频率的视频场168-182的输出流。在视频场168-182之下表明了视频场的不同相位{0,1,2,3,4}。
图2A示意性地显示了根据本发明的运动序列模式检测器200的实施例。在运动序列模式检测器200的输入连接器208处提供了隔行的亮度信号。该输入可以表征为三维亮度函数 其中
Figure A20038010405900102
矢量包括两个空间坐标x和y而n是与场的编号相对应的时间坐标。因为视频信号是隔行的,所以每一奇数或每一偶数行的像素值未定义。在输出连接器210处提供了一组表明输入的模式和相位的离散的信号。表1列出了不同的模式以及这些模式中的每一个的相位的可能值。
表1模式:
模式 相位
视频模式 {0}
2:2下拉影片模式 {0,1}
3:2下拉影片模式 {0,1,2,3,4}
运动序列模式检测器200包括运动检测单元202以及模式识别单元204。可选地,运动序列模式检测器200包括用于视频场的暂时存储的视频存储器212。可供选择地,视频存储器212是共享存储装置的一部分。运动序列模式检测器200的工作过程如下。给定预定的像素值差值的阈值,运动检测单元202被安排来计算连续的视频场的每一对场的运动量度。换句话说,基予预定的像素值差值的阈值,为每一对视频场确定一个运动值,这个值表明每一对的第一和第二场之间的运动量。该运动值通过计算从成对场的第一和第二场中导出的像素值之间的差值,然后通过将差值与预定的像素值差值的阈值进行比较来确定。如果像素值之间的差值大于预定的像素值差值的阈值,那么就假定对于那一像素(即坐标)存在运动。那样的话,使像素运动的计数器增量。通过对场中所有像素进行测试,像素运动的计数器最终表示具有运动的像素的数目。那意味着像素运动的计数器的表示与正在探查的成对视频场的运动值相对应。需要注意的是可能有可供选择的计算运动值的方法,例如,包括滤波。
很明显的是,通过校正预定的像素值差值的阀值,该对场的运动值的最终值将会改变。如果采用相对较低值的预定的像素值差值的阈值,那么由噪声引起的像素值之间的较小的差值被解释成或看成为运动的概率就高。另一方面,如果采用相对较高值的像素值差值的阈值,那么实际上是由运动引起的大的差值将不被解释成运动的概率就高。为了克服这种两难的问题,针对多个预定的像素值差值的阈值计算对于每一个成对的视频场各自的运动值。这些预定的像素值差值的阈值的值的范围从相对较低到相对较高。通常应用8种不同的预定的像素值差值的阈值。最佳地,这些像素值差值的阈值的值之间的差值不是彼此相等的。例如,如果
Figure A20038010405900111
的不同亮度值的数目等于256,那么预定的像素值差值的阈值的值各自为2、4、6、8、10、14、20以及28。
针对每一预定的像素值差值的阈值计算成对场的一系列运动值。这些运动值作为运动检测信号被提供至模式识别单元204,后者被设计成通过将成对场的运动检测信号的序列与预定序列进行比较而检测周期性模式。可能的周期性模式在表2中列出。
表2周期性模式:
  模式  周期性模式
  视频模式  HHHHHHHHHHHHHH
  2:2下拉影片模式  HLHLHLHLHLHLHLH
  3:2下拉影片模式  HLHLLHLHLLHLHLL
在表2中符号H表示视频场的高运动值,即运动检测信号的实际值为高。符号L表示视频场的低运动值。
根据本发明的运动序列模式检测器200被这样设计,如果针对预定的像素值差值的阈值之一检测到与影片模式相对应的周期性模式,那么在运动序列模式检测器200的输出连接器210处的离散信号表明模式为影片。同时提供影片相位。如果针对任一个预定的像素值差值的闽值都没能检测到与影片模式相对应的周期性模式,那么在运动序列模式检测器200的输出连接器210处的离散信号表明模式为视频。
尽管针对预定的像素值差值的阈值之一检测到与影片模式相应的周期性模式这一事实,但是很可能针对其它的预定的像素值差值的阈值就不能检测到与影片模式相应的周期性模式。那种情况被忽略。假定为预定的像素值差值的阈值采用了不适当的值,那么不能检测到与影片模式相应的周期性模式。那就意味着假定是基于不适当的预定的像素值差值的阈值而计算一系列运动值,那么这些值包括基本上彼此相等的值。换句话说,这样的一系列的运动值与对应于视频:HHHHHHHHH的周期性模式相匹配。因此,同样还假定在预定的像素值差值的闽值为适当的值时就可以检测到对应于影片的周期性模式。
运动检测单元202以及模式识别单元204可以采用一个处理器来实施。通常地,这些功能在软件程序产品的控制下执行。在执行过程中,通常地,软件程序产品被加载到像RAM这样的存储器中,并且由此而执行。程序可以从像ROM、硬盘或者磁和/或光存储器等后援存储器中加裁,或者可以通过网络,例如互联网而加裁。可选地,专用集成电路提供所公开的功能。
图2B示意性地显示了根据本发明的运动序列模式检测器200的模式检测单元202的细节。它表述的是运动检测单元202包括差值操作单元216以及输出单元214,其中输出单元214被安排成针对各个预定的像素值差值的阈值提供多个运动检测信号。这一方面将结合图4得到更为详细地描述。差值操作单元216被安排成计算从第一视频场100中导出的第一像素值124和从第二视频场102中直接取得的第二像素值116之间的差值。利用第一视频场100的像素值106和107以及第二视频场102的像素值116取中值来计算第一像素值124。像素值还可以从先于第一视频场100的第三视频场中导出。这个第三视频场未示出。应用第一124和第二像素值116之间的差值来计算差值的柱状图400的一个样本(同样参照结合图4的描述)。基于这一柱状图400可以确定针对各个预定的像素值差值的闽值的运动检测信号。基于属于柱状图400的第一柱体406的各像素值之间的多个差值而确定第一运动检测信号310。基于属于第一柱体406的像素值之间的第一多个差值以及柱状图400的第二柱体408的各像素值之间的第二多个差值的总和而确定第二运动检测信号310。这意味着第一预定的像素值差值的阈值与第一柱体406的最大值相应,而第二预定的像素值差值的阈值与第二柱体408的最大值相应。
图3示意性地显示了根据本发明的运动序列模式检测器的实施例,它包括多个模式识别单元204和302-306。每一个这样的模式识别单元204和302-306被安排去检测各个运动检测信号310-316是否与周期性模式相匹配。这意味着这些模式识别单元204和302-306被设计成将各个运动检测信号310-316离散值样本的多个组与检测到的表示周期性模式的值的列表进行比较。这些比较结果的中间结果318-324输出至最终判定单元308,这个最终判定单元308被安排成将这些中间结果组合成为表明模式和相位的最终结果。
图4示意性地显示了像素值差值的柱状图400,该图是由结合图2和图3所描述的运动序列检测器所计算并应用的。x轴404表示结合图1A和图1B所描述的相关的像素值之间的差值。y轴表示差别小于预定差值但是大于另一预定差值的像素的数目。柱状图400包括多个柱体406-426。每一柱体对应于像素值之间的差值的某一范围。例如,第一柱体406包括第一和第二视频场的像素值之间的绝对值差值,这些绝对值差值大于零但是小于或等于两个亮度单位,并且第二柱体408包括第一和第二视频场的像素值之间的绝对值差值,这些绝对值差值大于两个但是小于或等于四个亮度单位。在那种情况下,等于两个亮度单位的第一预定像素值差值阀值的运动值与第一柱体406的值相对应,而等于四个亮度单位的第二预定像素值差值阈值的运动值与第一柱体406的值和第二柱体408的值的总和相对应。很清楚,通过一次性地确定柱状图400后,针对不同的预定像素值差值闽值的各种运动值的计算就相对较为简便了。它仅仅是相应的柱体402-406的值的组合。这一示例表明了在预定的像素值差值闽值以及柱状图400的柱体406-426之间存在着相关性。
图5示意性地显示了根据本发明的图像处理设备500的实施例,它包括:
-接收装置502,用于接收包括视频场的表示输入图像的信号。该信号可以是通过天线或电缆接收的广播信号,但也可以是来自于存储装置,像VCR(录像机)或数字通用盘(DVD)的信号。该信号在输入连接器510处提供;
-结合图2A、2B或3中的任一个而描述的运动序列模式检测器508;
-图像处理单元504,用于基于连续的视频场计算输出图像的序列。图像处理单元504由运动序列模式检测器508控制。控制的含义是运动序列模式检测器508的输出影响图像处理单元504。例如,如果图像处理单元504被安排成执行去隔行,那么输出(模式和相位)用于将相应的各视频场组合成图像;以及
-显示装置506,用于显示图像处理单元504的输出图像。显示单元506是可选的。
图像处理设备500可能为例如电视。可供选择地,图像处理设备500不包括可选的显示装置506,而是将输出图像提供到确实包括显示装置506的装置上。那么图像处理设备500可能为例如机顶盒、卫星调谐设备、VCR播放器、DVD播放器或DVD记录装置。可选地,图像处理设备500包括像硬盘这样的存储装置,或存储在像光盘这样的可移动介质上的装置。图像处理设备500同样可以是用于影片摄制室或者广播设备中的系统。
需要注意的是,上面提及的实施例是说明而不是限制本发明,并且所属领域技术人员将能够设计出不脱离所附的权利要求的范围的变换的实施例。在权利要求书中,任一置于括号中的参考符号并不作为为限制本发明而设置。词语“包括”并不排除在权利要求中没有列出的元件或步骤的存在。在元件前面的词语“一”或“一个”并不排除多个所述元件的存在。本发明可以通过包括几个各别元件的硬件以及适当地编程的电子计算机来实施。在单元权利要求中列举了几种装置,这些装置中的几种可以通过同一种硬件而实现。

Claims (11)

1、一种用于在连续的视频场内检测运动序列的周期性模式的运动序列模式检测器,包括:
-运动检测单元,用于通过计算从成对场的第一和第二场中导出的像素值之间的差值,继而通过将差值与预定的阈值进行比较,以便检测连续的视频场的成对场之间运动的存在,并且基于该比较而输出成对场的运动检测信号;以及
-模式识别单元,用于通过将成对场的运动检测信号的序列与预定序列进行比较而检测周期性模式,其特征在于该运动序列模式检测器被进一步设置成:
-基于不同于预定阈值的一个另外的预定阈值来确定成对场的另外的运动检测信号;
-将该另外的运动检测信号的一个另外的序列与该预定序列进行比较;以及
-基于运动检测信号的该序列与预定序列的比较以及该另外的运动检测信号的该另外的序列与预定序列的比较,来检测运动序列的周期性模式。
2、如权利要求1所述的运动序列模式检测器,其特征在于:它被设置成基于运动检测信号的该序列与预定序列的比较以及该另外的运动检测信号的该另外的序列与预定序列的比较,来生成一个表明该连续的视频场的特性为影片模式的模式信号。
3、如权利要求2所述的运动序列模式检测器,其特征在于:它被设置成如果运动检测信号的该序列与预定序列相对应或者该另外的运动检测信号的该另外的序列与预定序列相对应,则生成表明连续的视频场的特性为影片模式的该模式信号。
4、如权利要求3所述的运动序列模式检测器,其特征在于:
-一个另外的模式识别单元,用于通过该另外的运动检测信号的该另外的序列和预定序列的比较来检测周期性的模式;以及
-判定单元,用于通过将成对场的运动检测信号的该序列和预定序列的比较的第一结果以及该另外的运动检测信号的该另外的序列与预定序列的比较的第二结果进行组合来判定是否检测到周期性模式。
5、如权利要求3所述的运动序列模式检测器,其特征在于:运动检测单元被设置成确定从第一场和第二场中导出的像素值之间的差值的柱状图,并且被设置成基于属于柱状图的第一柱体的像素值之间的第一多个差值来确定第一运动检测信号,并且基于属于第一柱体的像素值之间的第一多个差值与属于柱状图的第二柱体的像素值之间的第二多个差值这二者的总和来确定第一个该另外的运动检测信号。
6、一种图像处理设备,包括:
-接收装置,用于接收与连续的视频场相对应的信号;
-如权利要求1所述的运动序列模式检测器,用于检测连续的视频场内运动序列的周期性模式;以及
-图像处理单元,用于基于连续的视频场计算输出图像的序列,图像处理单元由运动序列模式检测器控制。
7、如权利要求6所述的图像处理设备,其特征在于:进一步包括用于显示输出图像的显示装置。
8、如权利要求7所述的图像处理设备,其特征在于:它是一台电视机。
9、如权利要求6所述的图像处理设备,其特征在于:进一步包括用于存储输出图像的存储装置。
10、如权利要求9所述的图像处理设备,其特征在于:它是一台DVD记录装置。
11、一种在连续的视频场内检测运动序列的模式的方法,包括:
-通过计算从成对的场的第一和第二场中导出的像素值之间的差值,继而通过将差值与预定的阈值之间进行比较,以便检测连续的视频场的成对场之间运动的存在,并且基于该比较而输出成对场的运动检测信号;以及
-通过将成对场的运动检测信号序列和预定序列进行比较而检测周期性的模式,其特征在于:
-基于不同于预定阈值的一个另外的预定阈值来确定成对场的另外的运动检测信号;
-将该另外的运动检测信号的一个另外的序列与该预定序列进行比较;以及
-基于运动检测信号的该序列与预定序列的比较以及该另外的运动检测信号的该另外的序列与预定序列的比较,来检测运动序列的周期性模式。
CNB2003801040595A 2002-11-26 2003-10-29 运动序列模式检测器及其方法 Expired - Fee Related CN100375501C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP02079911 2002-11-26
EP02079911.0 2002-11-26

Publications (2)

Publication Number Publication Date
CN1717920A true CN1717920A (zh) 2006-01-04
CN100375501C CN100375501C (zh) 2008-03-12

Family

ID=32338107

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2003801040595A Expired - Fee Related CN100375501C (zh) 2002-11-26 2003-10-29 运动序列模式检测器及其方法

Country Status (7)

Country Link
US (1) US20060209957A1 (zh)
EP (1) EP1568211A1 (zh)
JP (1) JP4290124B2 (zh)
KR (1) KR20050086876A (zh)
CN (1) CN100375501C (zh)
AU (1) AU2003274549A1 (zh)
WO (1) WO2004049698A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101557492B (zh) * 2008-04-11 2011-07-13 佳能株式会社 运动图像处理设备及其控制方法

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8352400B2 (en) 1991-12-23 2013-01-08 Hoffberg Steven M Adaptive pattern recognition based controller apparatus and method and human-factored interface therefore
US7904187B2 (en) 1999-02-01 2011-03-08 Hoffberg Steven M Internet appliance system and method
TWI236283B (en) * 2004-01-20 2005-07-11 Realtek Semiconductor Corp Apparatus and related method for film mode detection using motion estimation
EP1808012A1 (en) * 2004-08-10 2007-07-18 Thomson Licensing Apparatus and method for indicating the detected degree of motion in video
TWI317599B (en) * 2006-02-17 2009-11-21 Novatek Microelectronics Corp Method and apparatus for video mode judgement
GB2438449C (en) 2006-05-24 2018-05-30 Sony Computer Entertainment Europe Ltd Control of data processing
US20070296855A1 (en) * 2006-06-22 2007-12-27 Yunwei Jia Video processing using region-based statistical measurements
JP4936857B2 (ja) 2006-10-31 2012-05-23 株式会社東芝 プルダウン信号検出装置、プルダウン信号検出方法及び順次走査変換装置
US20080165278A1 (en) * 2007-01-04 2008-07-10 Sony Corporation Human visual system based motion detection/estimation for video deinterlacing
WO2009081626A1 (en) * 2007-12-26 2009-07-02 Kabushiki Kaisha Toshiba Interpolation processing apparatus, interpolation processing method, and picture display apparatus
JP2009159321A (ja) * 2007-12-26 2009-07-16 Toshiba Corp 補間処理装置、補間処理方法及び映像表示装置
US20100026783A1 (en) * 2008-08-01 2010-02-04 Real D Method and apparatus to encode and decode stereoscopic video data
FR2939265A1 (fr) * 2008-12-03 2010-06-04 Thomson Licensing Procede de detection de mode film ou mode camera
US7996793B2 (en) * 2009-01-30 2011-08-09 Microsoft Corporation Gesture recognizer system architecture
US20100199231A1 (en) 2009-01-30 2010-08-05 Microsoft Corporation Predictive determination
EP2224739A1 (en) 2009-02-27 2010-09-01 Nxp B.V. Image processing apparatus
KR20100111467A (ko) * 2009-04-07 2010-10-15 삼성전자주식회사 영상 데이터의 타입을 판정하는 영상기기 및 이에 적용되는 영상처리방법
TWI414182B (zh) * 2010-12-01 2013-11-01 Novatek Microelectronics Corp 多媒體裝置及其播放模式偵測方法
JP6058257B2 (ja) * 2011-07-06 2017-01-11 アイキューブド研究所株式会社 画像出力装置、画像出力方法、およびプログラム
TW201332337A (zh) * 2012-01-17 2013-08-01 Da2 Technologies Corp 智慧型3d影像hdmi分配器
US20140257908A1 (en) * 2013-03-07 2014-09-11 Avaya Inc. Viewer pattern analysis
KR102470656B1 (ko) * 2016-04-08 2022-11-25 삼성디스플레이 주식회사 표시 장치 및 이의 구동 방법
TWI650019B (zh) * 2017-09-28 2019-02-01 晶睿通訊股份有限公司 運動偵測方法及其監控攝影設備
CN110392182B (zh) * 2018-04-19 2022-04-26 奇景光电股份有限公司 影像的动作检测方法与电子装置
CN111623810A (zh) * 2019-02-27 2020-09-04 多方科技(广州)有限公司 移动侦测方法及其电路
TWI723383B (zh) * 2019-04-22 2021-04-01 鴻齡科技股份有限公司 圖像識別裝置及方法
CN115035151B (zh) * 2022-08-12 2022-11-15 南京砺算科技有限公司 梳状失真的检测方法、装置、计算机设备及存储介质

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4982280A (en) * 1989-07-18 1991-01-01 Yves C. Faroudja Motion sequence pattern detector for video
US5291280A (en) * 1992-05-05 1994-03-01 Faroudja Y C Motion detection between even and odd fields within 2:1 interlaced television standard
US5563651A (en) * 1994-12-30 1996-10-08 Thomson Consumer Electronics, Inc. Method and apparatus for identifying video fields produced by film sources employing 2-2 and 3-2 pull down sequences
US6014182A (en) * 1997-10-10 2000-01-11 Faroudja Laboratories, Inc. Film source video detection
US6157412A (en) * 1998-03-30 2000-12-05 Sharp Laboratories Of America, Inc. System for identifying video fields generated from film sources
JP2002016944A (ja) * 2000-06-29 2002-01-18 Sony Corp 信号処理装置及び信号処理方法
US7271840B2 (en) * 2001-10-31 2007-09-18 Intel Corporation Method for determining entropy of a pixel of a real time streaming digital video image signal, and applications thereof
US7405766B1 (en) * 2004-12-20 2008-07-29 Kolorific, Inc. Method and apparatus for per-pixel motion adaptive de-interlacing of interlaced video fields

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101557492B (zh) * 2008-04-11 2011-07-13 佳能株式会社 运动图像处理设备及其控制方法

Also Published As

Publication number Publication date
JP2006507747A (ja) 2006-03-02
US20060209957A1 (en) 2006-09-21
KR20050086876A (ko) 2005-08-30
WO2004049698A1 (en) 2004-06-10
JP4290124B2 (ja) 2009-07-01
AU2003274549A1 (en) 2004-06-18
EP1568211A1 (en) 2005-08-31
CN100375501C (zh) 2008-03-12

Similar Documents

Publication Publication Date Title
CN1717920A (zh) 运动序列模式的检测
CN1265633C (zh) 去隔行装置和方法
CN1069480C (zh) 电视录象系中影片画格的识别设备
CN1173571C (zh) 检测一序列视频图象中的静止区域的方法
CN1150772C (zh) 检测数字视频图象序列中的淡变的方法及装置
CN101043609A (zh) 字幕检测设备、字幕检测方法、及降频信号检测设备
CN1044022A (zh) 通过扫描转换改善电视信号垂直分辨率的方法和装置
CN1421098A (zh) 运动及边缘自适应去隔行扫描
CN1874475A (zh) 下拉信号检测装置和方法以及逐行扫描转换装置
CN1116797A (zh) 数字电视的电影-电视形式检测器
CN1291589C (zh) 隔行与逐行视频信号的帧频转换方法
CN1853416A (zh) 运动矢量场的再定时
CN1225918C (zh) 图像信号处理装置以及方法
CN1471323A (zh) 检查输入的图像信号是否在影片模式中的设备和方法
CN1758743A (zh) 使用抖动映射的图像处理设备及其方法
CN1231055C (zh) 电视中传送电影场景的数字检测装置
CN1578479A (zh) 检测电影模式的装置和方法
CN1270527C (zh) 扫描变换装置
CN1758744A (zh) 能够选择场的图像处理装置及其方法
CN1741604A (zh) 将隔行扫描图像转换为逐行扫描图像的装置和方法
CN1561636A (zh) 视频信号处理装置,视频信号处理方法以及视频源判定装置
CN1510907A (zh) 在体育比赛视频中检测精彩片断的方法
CN1167261C (zh) 转换视频数据帧速率的方法及其装置
CN1875633A (zh) 跟踪快速移动的小物体的运动矢量场求精法
CN1694504A (zh) 视频序列的辅助数据的处理

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20080312

Termination date: 20091130