CN1758743B - 使用抖动映射的图像处理设备及其方法 - Google Patents

使用抖动映射的图像处理设备及其方法 Download PDF

Info

Publication number
CN1758743B
CN1758743B CN2005101056202A CN200510105620A CN1758743B CN 1758743 B CN1758743 B CN 1758743B CN 2005101056202 A CN2005101056202 A CN 2005101056202A CN 200510105620 A CN200510105620 A CN 200510105620A CN 1758743 B CN1758743 B CN 1758743B
Authority
CN
China
Prior art keywords
shake
pixel
interpolation
mapping
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2005101056202A
Other languages
English (en)
Other versions
CN1758743A (zh
Inventor
李泳镐
梁承埈
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN1758743A publication Critical patent/CN1758743A/zh
Application granted granted Critical
Publication of CN1758743B publication Critical patent/CN1758743B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0112Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard
    • H04N7/0115Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard with details on the detection of a particular field or frame pattern in the incoming video signal, e.g. 3:2 pull-down pattern
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/21Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/012Conversion between an interlaced and a progressive signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/0147Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes the interpolation using an indication of film mode or an indication of a specific pattern, e.g. 3:2 pull-down pattern
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4884Data services, e.g. news ticker for displaying subtitles

Abstract

本发明公开了一种使用抖动映射的图像处理设备及其方法。该使用抖动映射的图像处理设备包括:场存储块,用于接收包括输入图像的输入隔行视频信号,所述输入图像具有多个连续场;影片检测块,用于从场存储块接收多个连续场并确定输入图像是否是在影片模式下的图像;抖动映射产生块,用于检测在由所述场存储块提供的所述多个连续场中的相邻场的像素或块中产生的抖动以产生抖动映射;图像插补块,如果所述输入图像被确定为在影片模式下的图像,则使用所述抖动映射执行图像插补,产生并输出逐行视频信号。该图像处理设备防止在对其没有应用下拉技术的CGI(计算机图形成像)或字幕中产生抖动。

Description

使用抖动映射的图像处理设备及其方法
技术领域
本发明的总体构思涉及一种图像处理设备及其方法,更具体地讲,涉及一种使用抖动映射(judder-map)以防止没有应用下拉技术的CGI(计算机图形成像)或字幕中的抖动的图像处理设备及其方法。
背景技术
图像显示装置通常在隔行扫描模式或逐行扫描模式下操作。隔行扫描用于传统TV系统,它指的是一种将每个图像帧分为两个场并以奇/偶顺序将行读出的方法。这两个场被称作前/后场、上/下场或奇/偶场。相反,通常在计算机监视器和数字TV中使用的逐行扫描(或非隔行扫描)指的是一种用于在显示屏幕上展示运动图像的方法,在该方法中,每个像素显示在每个帧中并且一次显示一个全帧。
例如,在480行NTSC(国家电视系统委员会)隔行扫描中,单一帧由两个240行的场组成,两个场的每个显示1/60秒,并且每1/30秒被隔行扫描以形成全画面(即,480行图像)。另一方面,逐行扫描每1/60秒显示全画面。因此,逐行扫描图像产生运动目标的锐化、均匀的边缘,然而,隔行扫描图像出现运动目标的边缘上的模糊。
使用逐行扫描的最普通的例子之一是运动画面影片。近年来以DVD发行的大多数电影最初拍摄在胶片上。与NTSC TV不同,胶片以一秒24帧显示。当然,也可以拍摄24原始影片帧或将其直接存储在DVD上。然而,市场中的大多数图像显示装置,例如TV,利用隔行扫描来创建画面。正是因为这种趋势,所以对隔行扫描DVD而不是逐行扫描DVD提出了更高的要求。
因此,逐行格式的24帧影片需要被转换为隔行格式的60个场。这叫做3:2下拉或电视电影转换。采用3:2下拉法,24Hz的两个影片帧被转换为60Hz的五个场。在基于PAL或SECAM系统将运动画面影片转换为视频格式如TV的情况下,每秒25帧被转换为50个场,即,每帧2个场。这种将2个场扫描成一帧的方法通常称作2:2下拉。
图1是解释3:2下拉的视图。参照图1,每秒24帧逐行扫描的图像被转换成60Hz的隔行的图像。换言之,正如从图1中所知,从帧1产生3个场,从帧2产生2个场。总的来说,从每两个帧产生5个场。
近来,利用逐行扫描的图像显示装置已经逐渐增多,因此,已经需要在利用不同扫描系统的显示装置之间交换数据。换言之,需要开发一种将隔行的图像转换成逐行图像的IPC(隔行逐行转换)方法。在IPC过程中,如果将被插补的场是3:2下拉格式图像,则在隔行的场被3:2下拉前组合它们以得到全的逐行格式图像。因此,在IPC之前,需要找出将被插补的场是否为3:2下拉图像。幸运的是,有很多用于检测3:2下拉格式图像的技术。
下面将解释如何检测3:2下拉图像。
假设存在10个场,F1、F2、F3、F4、F5、F6、F7、F8、F9和F10,它们都被3:2下拉。然后,通过利用SAD(绝对差之和)的周期为5这一事实来完成3:2下拉图像的检测。假设两个场被分开一个周期,则F1-F3、F6-F8的SAD变得非常小(如果没有噪声,则SAD几乎为0)。因为从重复场减去原始场,所以SAD变得非常小。基于其规律性,通过按每个像素获得总是分开1/30秒的两个场之间相减的绝对值并将所有像素的绝对值结果求和来完成3:2下拉图像的检测,以产生中间数据。例如,假设|F1-F3|=D1,|F2-F4|=D2,|F3-F5|=D3,...然后,SAD、D1、D6具有非常小的值,然而,其它具有非常大的值。而且,各个SAD为小、大、大、大和大,显示出一些规律性。
然而,当场景被截取时,SAD的规律性可能消失。在那样的情况下,在反相3:2下拉过程中导致抖动。而且,在没有应用3:2下拉技术的情况下,在CGI(计算机图形成像)或字幕中出现抖动。
发明内容
本发明总体构思提供了一种使用抖动映射的图像处理设备及其方法,以防止在没有应用下拉技术的CGI(计算机图形成像)或字幕中出现抖动。
将在接下来的描述中部分阐述本发明总体构思的另一方面,还有一部分通过描述将是清楚的,或者可以经过本发明的实施而得知。
本发明总体构思的前述和/或其它方面通过提供一种使用抖动映射的图像处理设备来实现,该设备包括:场存储块,用于接收包括输入图像的输入隔行视频信号,所述输入图像具有多个连续场;影片检测块,用于从场存储块接收多个连续场并确定输入图像是否是在影片模式下的图像;抖动映射产生块,用于检测在由场存储块提供的多个连续场中的相邻场的像素或块中产生的抖动,并产生抖动映射;图像插补块,如果输入图像被确定为在影片模式下的图像,则使用抖动映射执行图像插补,产生并输出所得的逐行视频信号。
场存储块可包括:当前场存储器,用于存储将被插补的当前场;前一场存储器和下一场存储器,用于分别存储前一场和下一场,所述前一场和后一场从实时观察来看在所述当前场之前和之后。
抖动映射产生块可包括:像素单位抖动检测器,用于确定相邻场的三个连续行像素值是否显示出抖动特性以按照像素为单位检测抖动;和抖动映射存储器,基于由像素单位抖动检测器获得的抖动信息来产生抖动映射并存储产生的抖动映射。
像素单位抖动检测器可包括:中间值计算器,用于计算相邻场中的两个的三个连续行的像素的中间值,所述像素在水平方向位于相同的位置;差计算器,用于计算第i行的像素值和由中间值计算器计算的中间值之间的差,并计算所述差的绝对值;比较器,用于将由差计算器计算的所述差的绝对值与预定的临界值比较,如果所述差的绝对值大于预定的临界值,则确定在第i行(Li)的像素中存在抖动,如果所述差的绝对值不大于预定的临界值,则确定在第i行(Li)的像素中不存在抖动。
所述抖动映射产生块可还包括块单位抖动检测器,用于通过计算在预定大小的块中检测到的抖动伪像的数量来以该预定大小的块为单位检测抖动,并将在该块中检测到的抖动伪像的数量与预定的临界值比较以确定在该块中是否产生抖动。
如果在预定大小的块中检测到的抖动伪像的数量大于预定的临界值,则块单位抖动检测器可确定在所述块中产生抖动,如果在所述块中检测到的抖动伪像的数量不大于所述预定的临界值,则所单位抖动检测器可确定在所述块中没有产生抖动。
块单位抖动检测器可放置在像素单位抖动检测器和抖动映射存储器之间。
抖动映射产生块可还包括抖动区域扩展器,用于当块单位抖动检测器在块中检测到抖动时,通过将在其中检测到抖动的所述块周围的块指定为检测到抖动的块来扩展抖动检测区域。
抖动区域扩展器可放置在块单位抖动检测器和抖动映射存储器之间。
抖动区域扩展器可以按照这样一种方式放置,即抖动映射存储器位于抖动区域扩展器和块单位抖动检测器之间。
如果输入图像是在影片模式下的图像,并在将被插补的场内的像素或块中检测到抖动,则图像插补块可对将被插补的场的像素或块执行空间插补。
如果输入图像是在影片模式下的图像,并且在将被插补的场内的像素或块中没有检测到抖动,则图像插补块可对将被插补的场的像素或块执行时间插补。
如果输入图像不是在影片模式下的图像,则无论是否检测到抖动,图像插补块都可根据预定的IPC(隔行逐行转换)方法来执行时间插补和空间插补。
本发明总体构思的前述和/或其它方面通过提供一种图像处理设备来实现,该设备包括:抖动映射产生单元,用于在输入图像的场的预定区域中检测抖动;影片检测单元,用于确定输入图像是否为影片图像;插补单元,当输入图像是影片图像并且在预定区域中检测到抖动时,对预定区域执行空间插补,当输入图像是影片图像并且在预定区域中没有检测到抖动时,对预定区域执行时间插补,当输入图像不是影片图像时,根据预定的IPC(隔行逐行转换)方法对预定区域执行空间插补和时间插补之一。
本发明总体构思的前述和/或其它方面还通过提供一种将输入隔行图像转换成逐行图像的图像处理设备来实现,该设备包括:抖动映射单元,用于在输入图像中检测抖动,并映射在其中检测到抖动的输入图像的区域;和插补单元,当输入图像是影片图像时,使用空间插补来插补在其中检测到其中的抖动的输入图像的映射出的区域,使用时间插补来插补在其中没有检测到抖动的输入图像的区域。
本发明总体构思的前述和/或其它方面还通过提供一种使用抖动映射的图像处理方法来实现,该方法包括:接收包括具有多个连续场的输入图像的输入隔行视频信号,并存储所述视频信号;检测输入图像是否是在影片模式下的图像,并在多个连续场的相邻场的区域中检测抖动以产生抖动映射;如果所述输入图像是在影片模式下的图像,则参照抖动映射并确定在将被插补的场内的区域中是否检测到抖动;和如果在将被插补的场内的区域中检测到抖动,则对该区域执行空间插补,如果没有检测到在将被插补的场内的区域中的抖动,则对该区域执行时间插补,并输出所得的逐行视频信号。
该方法还包括:如果输入图像不是在影片模式下的图像,则根据预定的IPC方法来执行空间插补和时间插补。
本发明总体构思的前述和/或其它方面还通过提供一种图像处理方法来实现,该方法包括:在输入隔行图像的区域中检测抖动并映射在其中检测到抖动的区域;确定输入隔行图像是否是影片图像;根据输入隔行图像是否被确定为影片图像和映射的在其中检测到抖动的输入隔行图像的区域,使用空间插补和时间插补之一来插补输入隔行图像的每个区域。
附图说明
通过结合附图对实施例进行下面的描述,本发明总体构思的这些和/或其他方面将会变得清楚和更易于理解,其中:
图1是3:2下拉的解释性视图;
图2是示出根据本发明总体构思的实施例的使用抖动映射的图像处理设备的示意性框图;
图3是示出根据本发明总体构思的实施例的图2中的图像处理设备的抖动映射产生块的示意性框图;
图4a至图4c每个是示出根据本发明总体构思的另一实施例的抖动映射产生块的示意性框图;
图5是示出根据本发明总体构思的实施例的使用抖动映射的图像处理方法的流程图。
具体实施方式
现在将详细地描述本发明总体构思的实施例,其例子显示在附图中,其中,相同的标号始终表示同一部件。以下,通过参考附图来描述实施例以解释本发明的总体构思。
图2是示出根据本发明总体构思的使用抖动映射的图像处理设备200的示意性框图。参照图2,图像处理设备200包括:场存储块210、抖动映射产生块230、影片检测块250和图像插补块270。
场存储块210接收输入隔行视频信号,在该信号中输入图像包括多个连续场。以下,将被当前插补的场称作“当前场”,该当前场之前和之后(通过实时观察)的场分别称作“前一场”和“下一场”。前一场和下一场是当前场的参考场。如图2所示,场存储块210包括存储前一场的前一场存储器212、存储当前场的当前场存储器214和存储下一场的下一场存储器216,该下一场紧接在当前场之后被输入。
影片检测块250检测输入图像是通过3:2下拉产生的影片图像还是通过2:2下拉产生的影片图像。影片检测块250包括模式产生器255和识别部分260。模式产生器255计算在多个连续场中的三个连续输入场(即,前一场、当前场和下一场)的像素值之间的差,并将计算的结果与预定的第一临界值(T1)比较,以产生模式。
模式产生器255计算两个连续场如前一场和当前场的像素值之间的差,并且如果计算的结果大于预定的第一临界值(T1),则模式产生器255产生“1”,反之,如果计算的结果不大于预定的第一临界值(T1),则模式产生器255产生“0”。同样地,模式产生器255计算当前场和下一场的像素值之间的差,并将计算的结果与预定的第一临界值(T1)比较,以产生模式。
影片检测块250的识别部分260将由模式产生器255产生的输入图像的模式与预定的影片图像模式相比较,并基于该比较来检测输入图像是否是在影片模式下的图像。随后影片检测块250的检测结果被提供给图像插补块270。影片模式指的是通过3:2下拉或2:2下拉产生的图像。
抖动映射产生块230在某一像素或像素块中检测抖动,该像素或像素块位于输入到场存储块210的连续场中的相邻场(即,前一场、当前场、下一场)中,并且抖动映射产生块230基于检测的结果产生抖动映射。这里,抖动映射是检测到抖动(或运动伪像)的区域的信息记录。
基于通过影片检测块250确定输入图像是否为在影片模式下的图像和由抖动映射产生块230产生的抖动映射,图像插补块270执行图像插补。例如,如果影片检测模块250确定输入图像是在影片模式下的图像,则图像插补块270使用由抖动映射产生块230产生的抖动映射以当前场的像素为单位或块为单位执行图像插补。
图像插补块270包括选择器272、混合器274、空间插补器276和时间插补器278。选择器272控制混合器274以基于影片检测块250的检测结果和由抖动映射产生块230产生的抖动映射来执行图像插补。空间插补器276和时间插补器278对输入图像的当前场的像素或块分别执行空间插补和时间插补,混合器274组合由空间插补器276和时间插补器278插补的像素或块,以形成逐行视频信号。
因此,如果输入图像不是在影片模式下的图像,则图像插补模块270根据预定的IPC过程来执行空间插补和时间插补。即,混合器274根据预定的IPC过程来组合由空间插补器276和时间插补器278插补的当前场的像素或块,以输出逐行视频信号。
另一方面,如果输入图像是在影片模式下的图像,则图像插补块270基于由抖动映射产生块230产生的抖动映射执行图像插补。即,当在当前场的某一像素或块中检测到抖动时,空间插补器276对在其中检测到抖动的所述某一像素或块执行空间插补,并且混合器274在选择器272的控制下输入来自空间插补器276的当前场的空间插补的像素或块。
然而,如果未在像素或在块中检测到抖动,则时间插补器278对在其中未检测到抖动的像素或块执行时间插补,并且混合器274在选择器272的控制下输入来自时间插补器278的与前一场或下一场相应的时间插补的像素或块。混合器274将在空间插补器276和时间插补器278中插补的像素或块混合并输出逐行视频信号。
图3是示出根据本发明总体构思的实施例的抖动映射产生块230的示意性框图。参照图3,根据这个实施例的抖动映射产生块230包括像素单位抖动检测器232,其通过确定相邻场(即,前一场、当前场和下一场)的三个连续行像素值是否显示出运动模糊或抖动来检测像素的抖动,并基于检测到的抖动产生抖动映射。抖动映射产生块230还包括抖动映射存储器240以存储基于由像素单位抖动检测器232检测的抖动的抖动映射。
像素单位抖动检测器232包括中间值计算器234、差计算器236和比较器238。中间值计算器234计算像素的中间值并输出计算的结果,所述像素来自如前一场和当前场的两个相邻场的三个连续行并在水平方向上位于相同的位置。例如,假设存在来自三个连续行并在水平方向上位于相同位置的三个像素,它们的像素值为(10,5,6)。中间值计算器234首先按大小的顺序排列像素值,如(10,6,5),随后计算像素值的中间值。例如,当按大小顺序的像素值为(10,6,5)时,中间值是6。当两个相邻场是前一场和当前场时,三个连续行指的是前一场的第Li-1行、当前场的第Li行和前一场的第Li+1行。
差计算器236计算当前行(Li)的像素值和由中间值计算器234计算的中间值之间的差,取计算的差的绝对值,然后将绝对值输出到比较器238。比较器238接收差的绝对值,该绝对值表示抖动量。
比较器238将从差计算器236接收的差的绝对值与预定的第二临界值(T2)比较,基于该比较产生抖动映射,并将产生的抖动映射输出到抖动映射存储器240。例如,如果差的绝对值大于预定的第二临界值(T2),则比较器238确定在输入图像的像素中存在抖动,反之,如果差的绝对值不大于预定的第二临界值(T2),则比较器238确定在输入图像中不存在抖动。由比较器238确定的这种抖动信息(即,抖动映射)被输入到抖动映射存储器240,抖动映射存储器240存储抖动信息并对图像插补块270提供存储的抖动信息。
图4a至图4c是分别示出根据本发明总体构思的实施例的抖动映射产生块230a至230c的示意性框图。参照图4a,根据图4a中的实施例的抖动映射产生块230a与图3中的实施例的抖动映射产生块230相似,前者还包括置于像素单位抖动检测器232和抖动映射存储器240之间的块单位抖动存储器242。
块单位抖动检测器242通过计算在输入图像的预定大小的块中检测到的抖动伪像的数量并将计算的抖动伪像的数量与预定的第三临界值(T3)比较,来在该块中检测抖动。例如,如果在该块中检测到的抖动伪像的数量大于预定的第三临界值(T3),则块单位抖动检测器242确定在该块中存在抖动,反之,如果在该块中检测到的抖动伪像的数量不大于预定的第三临界值(T3),则块单位抖动检测器242确定在该块中不存在抖动。这里,块的大小由用户或图像处理设备200的制造商来确定。
参照图4b,根据图4b中的实施例的抖动映射产生块230b与图4a中的抖动映射产生块230a相似,前者还包括抖动区域扩展器245,其被置于块单位抖动检测器242和抖动映射存储器240之间。参照图4c,根据图4c中的实施例的抖动映射产生块230c与图4a中的抖动映射产生块230a相似,前者还包括抖动区域扩展器245,该抖动区域扩展器以这样一种方式放置,即抖动映射存储器240在抖动区域存储器245和块单位抖动检测器242之间。抖动区域扩展器245扩展一区域,在该区域中基于抖动并不是分散的而是通常在输入图像的边缘被发现这一事实来检测抖动。
因此,如果通过像素单位抖动检测器232在某一像素中检测到抖动或通过块单位抖动检测器242在某一块中检测到抖动,则抖动区域扩展器245指定在其中检测到抖动的像素或块的周围的四个块(例如,上、下、左和右侧),以扩展其中检测到抖动的像素或块的周围的区域。
图5是示出根据本发明总体构思的实施例的使用抖动映射的图像处理方法的流程图。参照图2和图5,场存储块210接收从外部图像源输入的隔行视频信号(操作S510)。
影片检测块250从场存储块210接收输入隔行视频信号的图像的连续场,并检测该输入图像是否是通过3:2下拉或2:2下拉产生的在影片模式下的图像(操作S520a)。关于输入图像是否是在影片模式下的图像的检测结果被提供给图像插补块270的选择器272。
抖动映射产生块230在输入到场存储块210的连续场中的相邻场中的像素或块中检测抖动,并基于检测的结果产生抖动映射(操作S520b)。抖动映射是检测到抖动(或运动伪像)的区域的信息记录。以上解释了产生抖动映射的方法,因此这里将不再重复对其的详细描述。来自抖动映射产生块230的抖动映射被提供给图像插补块270的选择器272。
如果影片检测块250确定输入图像不是在影片模式下的图像(操作S530),则图像插补块270根据预定的IPC过程执行时间插补和空间插补(操作S540)。
另一方面,如果影片检测块250确定输入图像是在影片模式下的图像(操作S530),则在图像插补块270中的选择器272使用由抖动映射产生块230提供的抖动映射来检查在当前像素或块中是否存在抖动(操作S550)。如上所述,检测到抖动的块可包括周围块,其也被抖动区域扩展器245(见图4b和图4c)指定为检测到抖动的块。
在操作S550,如果在将被插补的场内的像素或块中检测到抖动,则图像插补块270对在其中检测到抖动的像素或块执行空间插补(操作S560)。因此,混合器274在选择器272的控制下输入来自空间插补器276的当前场的空间插补的像素或块,并输出逐行视频信号(操作S580)。
另一方面,在操作S550,如果在将被插补的场内的像素或块中没有检测到抖动,则图像插补块270对在其中没有检测到抖动的像素或块执行时间插补(操作S570)。因此,混合器274在选择器272的控制下输入来自时间插补器278的与前一场或下一场相应的时间插补的像素或块,并输出逐行视频信号(操作S580)。
因此,在CGI(计算机图形成像)或字幕中没有出现抖动,可将隔行视频信号转换成逐行视频信号。
如上所述,根据本发明总体构思的实施例的使用抖动映射的图像处理设备防止在CGI或字幕中产生抖动。
尽管已经示出和描述了本发明总体构思的一些实施例,但是本领域的技术人员应该理解,在不脱离本发明总体构思的原则和精神的情况下,可以对这些实施例进行修改,本发明总体构思的范围由权利要求及其等同物限定。

Claims (23)

1.一种使用抖动映射的图像处理设备,该设备包括:
场存储块,用于接收包括输入图像的输入隔行视频信号,所述输入图像具有多个连续场;
影片检测块,用于从所述场存储块接收所述多个连续场并确定所述输入图像是否是在影片模式下的图像,其中,所述影片模式下的图像指通过3∶2下拉或2∶2下拉产生的图像;
抖动映射产生块,用于检测在由所述场存储块提供的所述多个连续场中的相邻场的像素或块中产生的抖动,并基于检测到的抖动产生抖动映射,其中,所述抖动映射是检测到抖动的区域的信息记录;
图像插补块,如果所述输入图像被确定为在影片模式下的图像,则使用所述抖动映射执行图像插补,产生并输出所得的逐行视频信号,
其中,所述抖动映射产生块包括:
像素单位抖动检测器,用于确定所述相邻场的三个连续行像素值是否显示出抖动特性,以按照像素为单位检测抖动;
抖动映射存储器,基于由所述像素单位抖动检测器获得的抖动信息来产生所述抖动映射并存储所述产生的抖动映射,
其中,像素单位抖动检测器包括:
中间值计算器,用于计算来自两个相邻场的三个连续行并在水平方向上位于相同位置的三个像素的像素值的中间值;
差计算器,用于计算所述三个像素中第i行的像素的像素值和由中间值计算器计算的所述中间值之间的差,并计算所述差的绝对值,其中,第i行是三个连续行中的中间行;
比较器,用于将由所述差计算器计算的所述差的所述绝对值与预定的临界值比较,如果所述差的所述绝对值大于所述预定的临界值,则确定在所述第i行的像素中存在抖动,如果所述差的所述绝对值不大于所述预定的临界值,则确定在所述第i行的像素中不存在抖动。
2.根据权利要求1所述的设备,其中,所述场存储块包括:
当前场存储器,用于存储将被插补的当前场;
前一场存储器和下一场存储器,用于分别存储前一场和下一场,所述前一场和下一场从实时观察来看在所述当前场之前和之后。
3.根据权利要求1所述的设备,其中,所述抖动映射产生块还包括:
块单位抖动检测器,通过计算在预定大小的块中检测到的抖动伪像的数量来以该预定大小的块为单位检测抖动,并将在所述块中检测到的抖动伪像的数量与预定的临界值比较以确定在所述块中是否产生抖动。
4.根据权利要求3所述的设备,其中,如果在所述预定大小的块中检测到的抖动伪像的数量大于预定的临界值,则所述块单位抖动检测器确定在所述块中产生抖动,如果在所述块中检测到的抖动伪像的数量不大于所述预定的临界值,则所述块单位抖动检测器确定在所述块中没有产生抖动。
5.根据权利要求3所述的设备,其中,所述块单位抖动检测器放置在所述像素单位抖动检测器和所述抖动映射存储器之间。
6.根据权利要求3所述的设备,其中,所述抖动映射产生块还包括抖动区域扩展器,用于当所述块单位抖动检测器在块中检测到抖动时,通过将在其中检测到抖动的所述块周围的块指定为检测到抖动的块来扩展抖动检测区域。
7.根据权利要求6所述的设备,其中,所述抖动区域扩展器放置在所述块单位抖动检测器和所述抖动映射存储器之间。
8.根据权利要求6所述的设备,其中,所述抖动区域扩展器以这样一种方式放置,即所述抖动映射存储器位于所述抖动区域扩展器和所述块单位抖动检测器之间。
9.根据权利要求1所述的设备,其中,如果所述输入图像是在所述影片模式下的图像并在将被插补的场内的像素或块中检测到抖动,则所述图像插补块对所述将被插补的场的所述像素或所述块执行空间插补。
10.根据权利要求1所述的设备,其中,如果所述输入图像是在所述影片模式下的所述图像并且在将被插补的场内的像素或块中没有检测到抖动,则所述图像插补块对所述将被插补的场的所述像素或所述块执行时间插补。
11.根据权利要求1所述的设备,其中,如果所述输入图像不是在所述影片模式下的所述图像,则无论是否检测到抖动,所述图像插补块都根据预定的隔行逐行转换方法来执行时间插补和空间插补。
12.一种图像处理设备,包括:
抖动映射产生单元,用于检测在输入图像的多个连续场中的相邻场的预定区域中产生的抖动;
影片检测单元,用于确定所述输入图像是否为影片图像,其中,所述影片图像指通过3∶2下拉或2∶2下拉产生的图像;
插补单元,当所述输入图像是影片图像并且在所述预定区域中检测到抖动时,对所述预定区域执行空间插补,当所述输入图像是影片图像并且在预定区域中没有检测到抖动时,对所述预定区域执行时间插补,当所述输入图像不是影片图像时,根据预定的隔行逐行转换方法对所述预定区域执行空间插补和时间插补之一,
其中,所述抖动映射产生单元包括:
像素单位抖动检测器,用于确定所述相邻场的三个连续行像素值是否显示出抖动特性,以按照像素为单位检测抖动;
抖动映射存储器,基于由所述像素单位抖动检测器获得的抖动信息来产生抖动映射并存储所述产生的抖动映射,其中,所述抖动映射是检测到抖动的区域的信息记录,
其中,像素单位抖动检测器包括:
中间值计算器,用于计算来自两个相邻场的三个连续行并在水平方向上位于相同位置的三个像素的像素值的中间值;
差计算器,用于计算所述三个像素中第i行的像素的像素值和由中间值计算器计算的所述中间值之间的差,并计算所述差的绝对值,其中,第i行是三个连续行中的中间行;
比较器,用于将由所述差计算器计算的所述差的所述绝对值与预定的临界值比较,如果所述差的所述绝对值大于所述预定的临界值,则确定在所述第i行的像素中存在抖动,如果所述差的所述绝对值不大于所述预定的临界值,则确定在所述第i行的像素中不存在抖动。
13.根据权利要求12所述的图像处理设备,其中,所述抖动映射产生单元还包括:
块单位抖动检测器,用于根据由所述像素单位抖动检测器在所述像素中检测到的抖动来在所述输入图像的所述场的像素块中检测抖动。
14.根据权利要求13所述的图像处理设备,其中,所述抖动映射产生单元还包括:
抖动区域扩展器,用于将由所述块单位抖动检测器在其中检测到抖动的像素块周围的区域指定为具有抖动。
15.根据权利要求13所述的图像处理设备,其中,所述插补单元将空间插补的区域和时间插补的区域组合以将所述输入图像转换成逐行图像。
16.根据权利要求12所述的图像处理设备,其中,所述影片检测单元根据所述输入图像的连续场的像素差产生模式,并将所述模式与预定的影片图像模式相比较以确定所述输入图像是否是影片图像。
17.一种将输入隔行图像转换成逐行图像的图像处理设备,包括:
抖动映射单元,用于检测在输入图像的多个连续场中的相邻场的区域中产生的抖动,并映射在其中检测到抖动的所述输入图像的区域;
插补单元,当所述输入图像是影片图像时,使用空间插补来插补在其中检测到抖动的所述输入图像的映射的区域,使用时间插补来插补在其中没有检测到抖动的所述输入图像的区域,其中,所述影片图像指通过3∶2下拉或2∶2下拉产生的图像,
其中,所述抖动映射单元包括:
像素单位抖动检测器,用于确定所述相邻场的三个连续行像素值是否显示出抖动特性,以按照像素为单位检测抖动;
抖动映射存储器,基于由所述像素单位抖动检测器获得的抖动信息来产生抖动映射并存储所述产生的抖动映射,其中,所述抖动映射是检测到抖动的区域的信息记录,
其中,像素单位抖动检测器包括:
中间值计算器,用于计算来自两个相邻场的三个连续行并在水平方向上位于相同位置的三个像素的像素值的中间值;
差计算器,用于计算所述三个像素中第i行的像素的像素值和由中间值计算器计算的所述中间值之间的差,并计算所述差的绝对值,其中,第i行是三个连续行中的中间行;
比较器,用于将由所述差计算器计算的所述差的所述绝对值与预定的临界值比较,如果所述差的所述绝对值大于所述预定的临界值,则确定在所述第i行的像素中存在抖动,如果所述差的所述绝对值不大于所述预定的临界值,则确定在所述第i行的像素中不存在抖动。
18.根据权利要求17所述的图像处理设备,其中,当所述输入图像不是影片图像时,所述插补单元根据预定的隔行逐行转换方法来插补所述输入图像。
19.根据权利要求17所述的图像处理设备,其中,所述插补单元包括:
影片检测单元,用于确定所述输入图像是否是影片图像。
20.一种使用抖动映射的图像处理方法,所述方法包括:
接收包括具有多个连续场的输入图像的输入隔行视频信号,并存储所述视频信号;
检测所述输入图像是否是在影片模式下的图像,其中,所述影片模式下的图像指通过3∶2下拉或2∶2下拉产生的图像;
确定所述多个连续场中的相邻场的三个连续行像素值是否显示出抖动特性,按照像素为单位在所述多个连续场的相邻场的区域中检测抖动以产生抖动映射,其中,所述抖动映射是检测到抖动的区域的信息记录;
如果所述输入图像是在所述影片模式下的图像,则参照所述抖动映射并确定在将被插补的场内的区域中是否检测到抖动;
如果在所述将被插补的场内的区域中检测到抖动,则对所述区域执行空间插补,如果在所述将被插补的场内的区域中没有检测到抖动,则对所述区域执行时间插补,并输出所得的逐行视频信号,
其中,确定所述相邻场的三个连续行像素值是否显示出抖动特性的步骤包括:
计算来自两个相邻场的三个连续行并在水平方向上位于相同位置的三个像素的像素值的中间值;
计算所述三个像素中第i行的像素的像素值和所述中间值之间的差,并计算所述差的绝对值,其中,第i行是三个连续行中的中间行;
将所述差的所述绝对值与预定的临界值比较,如果所述差的所述绝对值大于所述预定的临界值,则确定在所述第i行的像素中存在抖动,如果所述差的所述绝对值不大于所述预定的临界值,则确定在所述第i行的像素中不存在抖动。
21.根据权利要求20所述的方法,还包括:
如果所述输入图像不是在所述影片模式下的图像,则根据预定的隔行逐行转换方法来执行空间插补和时间插补。
22.一种图像处理方法,包括:
确定输入隔行图像的相邻场的三个连续行像素值是否显示出抖动特性,以按照像素为单位在输入隔行图像的区域中检测抖动并映射在其中检测到抖动的区域;
确定所述输入隔行图像是否是影片图像,其中,所述影片图像指通过3∶2下拉或2∶2下拉产生的图像;
当确定所述输入隔行图像不是影片图像时,根据预定的方法使用空间插补和时间插补中的至少一个来插补所述输入隔行图像的所述区域;
当所述输入隔行图像是影片图像时,使用空间插补来插补在其中检测到抖动的所述映射的区域和使用时间插补来插补在其中没有检测到抖动的区域,
其中,确定所述相邻场的三个连续行像素值是否显示出抖动特性的步骤包括:
计算来自两个相邻场的三个连续行并在水平方向上位于相同位置的三个像素的像素值的中间值;
计算所述三个像素中第i行的像素的像素值和所述中间值之间的差,并计算所述差的绝对值,其中,第i行是三个连续行中的中间行;
将所述差的所述绝对值与预定的临界值比较,如果所述差的所述绝对值大于所述预定的临界值,则确定在所述第i行的像素中存在抖动,如果所述差的所述绝对值不大于所述预定的临界值,则确定在所述第i行的像素中不存在抖动。
23.根据权利要求22所述的图像处理方法,还包括:
将所述输入隔行图像的每个插补的区域组合以输出逐行图像。
CN2005101056202A 2004-10-08 2005-09-28 使用抖动映射的图像处理设备及其方法 Active CN1758743B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020040080324 2004-10-08
KR1020040080324A KR100577684B1 (ko) 2004-10-08 2004-10-08 저더-맵을 이용한 영상 처리 장치 및 방법
KR10-2004-0080324 2004-10-08

Publications (2)

Publication Number Publication Date
CN1758743A CN1758743A (zh) 2006-04-12
CN1758743B true CN1758743B (zh) 2012-11-21

Family

ID=36144826

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2005101056202A Active CN1758743B (zh) 2004-10-08 2005-09-28 使用抖动映射的图像处理设备及其方法

Country Status (6)

Country Link
US (1) US7499102B2 (zh)
EP (1) EP1646228B1 (zh)
JP (1) JP4273112B2 (zh)
KR (1) KR100577684B1 (zh)
CN (1) CN1758743B (zh)
DE (1) DE602005003624T2 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4863767B2 (ja) * 2006-05-22 2012-01-25 ソニー株式会社 映像信号処理装置及び画像表示装置
US20070296855A1 (en) * 2006-06-22 2007-12-27 Yunwei Jia Video processing using region-based statistical measurements
KR101109153B1 (ko) * 2007-01-15 2012-02-24 삼성전자주식회사 저더 검출을 이용한 디인터레이싱 방법 및 장치
US8300958B2 (en) * 2007-07-11 2012-10-30 Samsung Electronics Co., Ltd. System and method for detecting scrolling text in mixed mode film and video
JP4388126B1 (ja) * 2008-06-27 2009-12-24 株式会社東芝 プルダウン信号検出装置及びプルダウン信号検出方法、順次走査変換装置
US20110001873A1 (en) * 2008-08-06 2011-01-06 Daniel Doswald Frame rate converter for input frames with video and film content
GB2466044B (en) * 2008-12-09 2014-05-21 Snell Ltd Motion image rendering system
EP3111635B1 (en) * 2014-02-27 2018-06-27 Dolby Laboratories Licensing Corporation Systems and methods to control judder visibility
US20150296101A1 (en) * 2014-04-09 2015-10-15 Tao Han Universal Film mode detection for interlaced video stream
WO2016054076A1 (en) * 2014-10-02 2016-04-07 Dolby Laboratories Licensing Corporation Dual-ended metadata for judder visibility control

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1406437A (zh) * 2000-12-27 2003-03-26 松下电器产业株式会社 静止判断装置及具有该静止判断装置的扫描线插补装置
CN1477870A (zh) * 2002-07-25 2004-02-25 ���ǵ�����ʽ���� 去隔行装置和方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2149703A (en) 1937-02-11 1939-03-07 Pharma Chemical Corp Azo dyes
US4239802A (en) 1979-01-29 1980-12-16 Westinghouse Electric Corp. Anaerobic resin curing system
CA1328394C (en) 1989-04-03 1994-04-12 Bruce E. Banyai Stable biodegradable foam
JP2870565B2 (ja) 1993-01-29 1999-03-17 日本ビクター株式会社 コマ数逆変換装置
DE69510851T2 (de) * 1994-03-30 1999-12-02 Thomson Multimedia Sa Verfahren und Gerät zur Reduzierung von Umwandlungsartefakten
EP0697788A3 (en) * 1994-08-19 1997-03-26 Eastman Kodak Co Adaptive and global motion compensated cancellation of the interlacing of successive video images with post-processing
US6266092B1 (en) * 1998-05-12 2001-07-24 Genesis Microchip Inc. Method and apparatus for video line multiplication with enhanced sharpness
JP4119092B2 (ja) * 1998-06-25 2008-07-16 株式会社日立製作所 画像信号のフレーム数変換方法および装置
EP1183873A1 (en) 2000-02-29 2002-03-06 Koninklijke Philips Electronics N.V. Film source video detection and encoding
US6867814B2 (en) * 2000-04-18 2005-03-15 Silicon Image, Inc. Method, system and article of manufacture for identifying the source type and quality level of a video sequence
US6839094B2 (en) 2000-12-14 2005-01-04 Rgb Systems, Inc. Method and apparatus for eliminating motion artifacts from video
JP4055109B2 (ja) 2001-10-03 2008-03-05 日本ビクター株式会社 インターレース映像信号の動き検出装置及びこれを用いた順次走査変換装置
US6784942B2 (en) 2001-10-05 2004-08-31 Genesis Microchip, Inc. Motion adaptive de-interlacing method and apparatus
US7362375B2 (en) * 2003-06-02 2008-04-22 Samsung Electronics Co., Ltd. Scanning conversion apparatus and method
US7349029B1 (en) * 2005-01-19 2008-03-25 Kolorific, Inc. Method and apparatus for de-interlacing interlaced video fields originating from a progressive video source

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1406437A (zh) * 2000-12-27 2003-03-26 松下电器产业株式会社 静止判断装置及具有该静止判断装置的扫描线插补装置
CN1477870A (zh) * 2002-07-25 2004-02-25 ���ǵ�����ʽ���� 去隔行装置和方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JP特开2003-116109A 2003.04.18

Also Published As

Publication number Publication date
DE602005003624D1 (de) 2008-01-17
JP4273112B2 (ja) 2009-06-03
EP1646228B1 (en) 2007-12-05
KR20060031339A (ko) 2006-04-12
US20060077292A1 (en) 2006-04-13
EP1646228A1 (en) 2006-04-12
DE602005003624T2 (de) 2008-08-07
KR100577684B1 (ko) 2006-05-10
CN1758743A (zh) 2006-04-12
US7499102B2 (en) 2009-03-03
JP2006109491A (ja) 2006-04-20

Similar Documents

Publication Publication Date Title
CN1758743B (zh) 使用抖动映射的图像处理设备及其方法
KR100303728B1 (ko) 격행주사 영상의 디인터레이싱 방법
JP4620163B2 (ja) 静止字幕検出装置、静止字幕を含む画像を表示する映像機器、および静止字幕を含んだ画像の処理方法
US8497937B2 (en) Converting device and converting method of video signals
KR100246088B1 (ko) 화소수변환장치
KR100403364B1 (ko) 영상 신호의 디인터레이스 방법 및 장치
US6975359B2 (en) Method and system for motion and edge-adaptive signal frame rate up-conversion
EP2230857B1 (en) Image signal processing device, three-dimensional image display device, three-dimensional image transmission/display system, and image signal processing method
JP3855761B2 (ja) 画像信号処理装置及び方法
US8134643B2 (en) Synthesized image detection unit
EP1460847B1 (en) Image signal processing apparatus and processing method
KR20040055059A (ko) 영상포맷의 변환장치 및 방법
EP0746154B1 (en) A subpicture signal vertical compression circuit
WO2012157618A1 (ja) 映像信号処理装置および表示装置
KR100943932B1 (ko) 촬상장치
US7268828B2 (en) Television receiver and control method thereof for displaying video signals based on different television modes
US20050270417A1 (en) Deinterlacing video images with slope detection
JP2007288483A (ja) 画像変換装置
KR0164255B1 (ko) 비디오 촬영용 영상신호 변환장치
KR100224860B1 (ko) 영상신호의 수직보간방법 및 장치와 그를 이용한 정지 영상형성방법 및 장치
JP3642187B2 (ja) テレビジョン受像機
KR100213005B1 (ko) 화면 이동 장치
KR0139125B1 (ko) 동시화면표시장치의 라인보상방법 및 그 회로
JPH0951490A (ja) 副画面映像信号垂直圧縮回路
JP2008083146A (ja) 映像表示装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant