CN102893601B - 运动矢量修正装置及方法、以及视频信号处理装置及方法 - Google Patents

运动矢量修正装置及方法、以及视频信号处理装置及方法 Download PDF

Info

Publication number
CN102893601B
CN102893601B CN201180023845.7A CN201180023845A CN102893601B CN 102893601 B CN102893601 B CN 102893601B CN 201180023845 A CN201180023845 A CN 201180023845A CN 102893601 B CN102893601 B CN 102893601B
Authority
CN
China
Prior art keywords
motion vector
size
threshold
value
pixel data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201180023845.7A
Other languages
English (en)
Other versions
CN102893601A (zh
Inventor
宍户智之
野口浩史
相羽英树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Publication of CN102893601A publication Critical patent/CN102893601A/zh
Application granted granted Critical
Publication of CN102893601B publication Critical patent/CN102893601B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/014Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Television Systems (AREA)

Abstract

运动矢量检测部(2)使用所输入的视频信号中的至少两个实际帧内的像素数据,检测在生成用于构成在两个实际帧间内插的插补帧的插补像素数据时所需要的运动矢量(MV1)。运动矢量修正部(4),当运动矢量(MV1)的大小超过预定的阈值时,对其进行修正,使得运动矢量(MV1)的大小衰减,然后作为运动矢量(MV3)输出。

Description

运动矢量修正装置及方法、以及视频信号处理装置及方法
技术领域
本发明涉及可以减轻由于运动矢量的误检测而导致的插补图像的视觉上的不舒适感的运动矢量修正装置及方法、以及视频信号处理装置及方法。
背景技术
当在使用液晶面板的图像显示装置中显示运动图像时容易产生余像。因此,为了减少余像,在视频信号的实际帧之间内插插补帧来使帧数增多,例如将垂直频率60Hz的帧率变换为其2倍即120Hz或更高的垂直频率来进行图像显示。在进行帧率变换的视频信号处理装置中,检测图像的运动矢量并使用运动矢量来生成各插补像素,生成在实际帧之间内插的插补帧。
例如,根据连续两帧这样的有限帧内的有限范围的像素数据生成运动矢量。因此难以完全消除运动矢量的误检测。因此,进行了用于减少运动矢量的误检测的技术改善。作为一例,在专利文献1中记载了具备可以减少运动矢量的误检测的运动矢量检测装置的帧率变换装置。
现有技术文献
专利文献
专利文献1:日本特开2006-331136号公报
发明内容
发明要解决的课题
在具备运动矢量检测装置的视频信号处理装置中,要求减轻由于运动矢量的误检测而导致的插补图像的视觉上的不舒适感。特别是如果当所检测出的运动矢量比较大时发生误检测,则插补图像的视觉上的不舒适感增大而变得明显。
鉴于这种问题而提出本发明,其目的在于提供一种即使在运动矢量比较大时发生了误检测,也能够减轻插补图像的视觉上的不舒适感的运动矢量修正装置及方法、以及视频信号处理装置及方法。
用于解决课题的手段
本发明为了解决上述现有技术的课题,提供一种运动矢量修正装置,其特征在于,具备:运动矢量检测部(2),其使用所输入的视频信号中的至少两个实际帧内的像素数据,检测在生成用于构成在所述两个实际帧间内插的插补帧的插补像素数据时所需要的第一运动矢量;以及运动矢量修正部(4),其当所述第一运动矢量的大小超过第一阈值时,对其进行修正,使得所述第一运动矢量的大小衰减。
在上述结构中,理想的是所述运动矢量修正部具备:运动矢量值抑制部(41),其使超过所述第一阈值的所述第一运动矢量的大小以预定的比例减少,然后作为第二运动矢量来输出;以及运动矢量值变换部(42),其当所述第二运动矢量的大小超过第二阈值时,对其进行衰减,使得所述第二运动矢量的大小不增加,然后作为第三运动矢量来输出。
作为适当的例子,所述运动矢量值抑制部,在将m、n设为m<n的自然数时,通过以下计算式求出所述第二运动矢量,所述第二运动矢量=所述第一运动矢量的大小×m/n+所述第一阈值×(n-m)/n。
理想的是所述运动矢量值变换部,当所述第二运动矢量的大小在从所述第二阈值到比所述第二阈值大的第三阈值的范围内时,使第三运动矢量的大小恒定,在超过所述第三阈值时,使第三运动矢量的大小以预定的比例衰减。
作为适当的例子,所述运动矢量值变换部,当所述第二运动矢量的大小超过所述第三阈值时,通过以下计算式求出所述第三运动矢量,所述第三运动矢量=2×所述第二阈值+(所述第三阈值-所述第二阈值)-所述第二运动矢量的大小。
理想的是,具备判定画面内的所述第一运动矢量的产生状态,生成并输出状态判定值的运动矢量状态判定部(3),所述运动矢量修正部根据所述状态判定值来改变使所述第一运动矢量的大小衰减的衰减特性。
作为适当的例子,所述运动矢量状态判定部生成表示运动矢量的产生量的状态判定值,所述运动矢量的产生量表示在画面内所述第一运动矢量以怎样的程度产生。作为另一适当的例子,所述运动矢量状态判定部生成表示运动矢量的分布状态的状态判定值,所述运动矢量的分布状态表示在画面内所述第一运动矢量的方向整齐或分散的程度。
本发明为了解决上述现有的技术课题,提供一种视频信号处理装置,其特征在于,具备插补像素数据生成部(5),其使用所输入的视频信号中的至少两个实际帧内的像素数据、和通过上述任意一种运动矢量修正装置修正后的运动矢量,生成插补像素数据。
另外,本发明为了解决上述现有的技术课题,提供一种运动矢量修正方法,其特征在于,包含以下步骤:运动矢量检测步骤,使用所输入的视频信号中的至少两个实际帧内的像素数据,检测在生成用于构成在所述两个实际帧间内插的插补帧的插补像素数据时所需要的第一运动矢量;以及运动矢量修正步骤,当所述第一运动矢量的大小超过第一阈值时,对其进行修正,使得所述第一运动矢量的大小衰减。
理想的是,所述运动矢量修正步骤包含:运动矢量值抑制步骤,使超过所述第一阈值的所述第一运动矢量的大小以预定的比例减少,然后作为第二运动矢量来输出;以及运动矢量值变换步骤,当所述第二运动矢量的大小超过第二阈值时,对其进行衰减,使得所述第二运动矢量的大小不增加,然后作为第三运动矢量来输出。
作为适当的例子,所述运动矢量值抑制步骤,在将m、n设为m<n的自然数时,通过以下计算式求出所述第二运动矢量,所述第二运动矢量=所述第一运动矢量的大小×m/n+所述第一阈值×(n-m)/n。
理想的是,所述运动矢量值变换步骤,当所述第二运动矢量的大小在从所述第二阈值到比所述第二阈值大的第三阈值的范围内时,使第三运动矢量的大小恒定,在超过所述第三阈值时,使第三运动矢量的大小以预定的比例衰减。
作为适当的例子,所述运动矢量值变换步骤,当所述第二运动矢量的大小超过所述第三阈值时,通过以下计算式求出所述第三运动矢量,所述第三运动矢量=2×所述第二阈值+(所述第三阈值-所述第二阈值)-所述第二运动矢量的大小。
理想的是,包含判定画面内的所述第一运动矢量的产生状态,生成状态判定值的运动矢量状态判定步骤,所述运动矢量修正步骤根据所述状态判定值来改变使所述第一运动矢量的大小衰减的衰减特性。
作为适当的例子,所述运动矢量状态判定步骤生成表示运动矢量的产生量的状态判定值,所述运动矢量的产生量表示在画面内所述第一运动矢量以怎样的程度产生。作为另一适当的例子,所述运动矢量状态判定步骤生成表示运动矢量的分布状态的状态判定值,所述运动矢量的分布状态表示在画面内所述第一运动矢量的方向整齐或分散的程度。
本发明为了解决上述现有技术的课题,提供一种视频信号处理方法,其特征在于,包含插补像素数据生成步骤,使用所输入的视频信号中的至少两个实际帧内的像素数据、和通过上述任意一种运动矢量修正方法修正后的运动矢量,生成插补像素数据。
发明的效果
根据本发明的运动矢量修正装置及方法、以及视频信号处理装置及方法,即使在运动矢量比较大时发生了误检测,也能够减轻插补图像的视觉上的不舒适感。
附图说明
图1是表示本发明的一个实施方式的框图。
图2是用于说明图1中的运动矢量状态判定部3的动作的第一例的图。
图3是用于说明图1中的运动矢量状态判定部3的动作的第二例的图。
图4是表示图1中的运动矢量修正部4的具体结构例的框图。
图5是用于说明图4中的运动矢量值抑制部41的动作的图。
图6是用于说明图4中的运动矢量值变换部42的动作的图。
图7是用于说明图1中的运动矢量修正部4的动作的第一例的图。
图8是用于说明图1中的运动矢量修正部4的动作的第二例的图。
图9是用于说明图1中的运动矢量修正部4的动作的第三例的图。
具体实施方式
以下,参照附图说明本发明的运动矢量修正装置及方法、以及视频信号处理装置及方法。图1所示的本发明的一个实施方式,作为视频信号处理装置的一例,表示了在视频信号的实际帧之间内插插补帧,将帧率变换为两倍的帧率变换装置。也可以是将帧率变换为3倍以上的帧率变换装置。本发明的视频信号处理装置不限于帧率变换装置,也可以是具备运动矢量检测装置的电影颤动(film judder)去除装置。本发明可应用于具备运动矢量检测装置的任意的视频信号处理装置。
在图1中,具有60Hz的帧频率的视频信号Sin的各像素数据被依次输入帧存储器1、运动矢量检测部2、插补像素数据生成部5、帧频率变换部6。帧存储器1将所输入的像素数据延迟一帧后输出。把所输入的视频信号Sin的当前帧设为F0,把从帧存储器1输出的比当前帧提前1帧的帧设为F1。当前帧F0以及帧F1是实际帧。帧F1的各像素数据被依次输入运动矢量检测部2以及插补像素数据生成部5。
运动矢量检测部2例如使用匹配法检测用于使用当前帧F0和帧F1的像素数据来生成在当前帧F0和帧F1之间内插的插补帧的各插补像素数据的运动矢量MV1。运动矢量MV1可以以像素数据单位检测,也可以以由多个像素数据构成的块单位检测。虽然没有特别图示,但是运动矢量检测部2包含多个线存储器(line memory)和像素延迟器、求像素数据的差分的减法器等而构成。运动矢量MV1被输入运动矢量状态判定部3以及运动矢量修正部4。除了当前帧F0和帧F1以外,还可以使用帧F1之前的帧来检测运动矢量MV1。
运动矢量状态判定部3判定各个帧内的运动矢量的状态,输出判定信号D1。在后面详细说明运动矢量状态判定部3的具体动作。判定信号D1被输入运动矢量修正部4。运动矢量修正部4根据判定信号D1使运动矢量MV1的大小衰减地进行修正,然后输出运动矢量MV3。在后面详细说明运动矢量修正部4的具体结构以及动作。运动矢量MV3被输入插补像素数据生成部5。
虽然未特别图示,但是插补像素数据生成部5具备:使当前帧F0的像素数据在水平方向以及垂直方向上延迟,生成当前帧F0内的预定的水平方向以及垂直方向的范围的像素数据的多个线存储器以及像素延迟器;使帧F1的像素数据在水平方向以及垂直方向上延迟,生成帧F1内的预定的水平方向以及垂直方向的范围的像素数据的多个线存储器以及像素延迟器。另外,插补像素数据生成部5具备平均值化部,该平均值化部根据运动矢量MV3选择当前帧F0内的像素数据和帧F1内的像素数据并进行平均值化,生成插补像素数据。
在本实施方式中,使用两个实际帧内的像素数据生成了插补像素数据,但是也可以使用3个以上实际帧内的像素数据来生成插补像素数据。
在帧频率变换部6中,依次输入帧F0的像素数据和从插补像素数据生成部5输出的插补像素数据。帧频率变换部6可以由时序变换存储器构成。帧频率变换部6根据依次输入的帧F0的像素数据生成作为实际帧的帧F0的图像数据,并且根据从插补像素数据生成部5依次输入的插补像素数据生成作为插补帧的插补帧Fi的图像数据。
然后,帧频率变换部6以频率120Hz交替地选择帧F0的图像数据和插补帧Fi的图像数据,输出具有120Hz的帧频率的视频信号Sout。
然后,说明运动矢量状态判定部3的具体动作。首先使用图2说明运动矢量状态判定部3的动作的第一例。图2概念性地表示了第一例中进行的动作。运动矢量状态判定部3将一帧的画面划分为多个区域。可以适当地设定将1帧的画面分割为多少个区域。图2(A)表示了一个区域AR。在一个区域AR中包含多个像素。一个区域AR中包含的像素的数量根据区域AR的数量而决定。当以像素数据单位来检测运动矢量MV1时,在区域AR内产生像素数量的运动矢量MV1。在以由多个像素数据构成的块单位来检测运动矢量MV1时,在区域AR内产生块数量的运动矢量MV1。
运动矢量状态判定部3,在区域AR内针对运动矢量MV1的每个检测单位判定是否产生了运动矢量MV1,在产生了运动矢量MV1时设定1,在未产生时设定0。然后,运动矢量状态判定部3通过在区域AR内对1进行合计,对产生运动矢量MV1的数量进行计数。而且,运动矢量状态判定部3,当区域AR内产生运动矢量MV1的数量(计数值)超过预定的阈值时,如图2(A)的箭头的右侧所示那样,对于区域AR设定1作为每个区域的判定值,若未超过预定的阈值,则设定0作为每个区域的判定值。例如,将半数作为阈值,若过半数则设定1。
图2(B)表示针对画面内的区域AR00、AR01、AR02、AR03、…、AR10、AR11、AR12、AR13…设定了每个区域的判定值即0或1的状态。运动矢量状态判定部3通过合计画面内的各个区域AR中设定的各区域的判定值,对作为每个区域的判定值而设定了1的区域AR的数量进行计数。然后,运动矢量状态判定部3根据计数值输出作为例如0~7的8级的状态判定值的判定信号D1。
如上所述,在运动矢量状态判定部3的动作的第一例中,生成表示在1帧(画面)内以怎样程度产生了运动矢量MV1的判定信号D1。即,在第一例中不考虑运动矢量MV1的方向地生成表示1帧内的运动矢量MV1的产生量的判定信号D1。运动矢量MV1的产生量越多,状态判定值越大。可以说状况判定值越大,运动矢量MV1越稳定。
接着,使用图3说明运动矢量状态判定部3的动作的第二例。图3概念性地表示了在1帧内针对运动矢量MV1的每个检测单位如何产生运动矢量MV1。黑圈是未检测出运动矢量MV1的状态(运动0),相当于图2(A)的箭头左侧的图的值0。在图3的例子中分别如箭头所示那样产生了向右的运动矢量MV1、向上的运动矢量MV1和向右上方的运动矢量MV1。
运动矢量状态判定部3判定在1帧内运动矢量MV1如何分布。作为一例,将运动矢量MV1以水平方向以及垂直方向的方向分类为如下9种。将水平方向以及垂直方向上没有运动的情况设为[0,0],将向右有运动在垂直方向上没有运动的情况设为[+,0],将向左有运动在垂直方向上没有运动的情况设为[-,0]。将水平方向上没有运动向上有运动的情况设为[0,+],将水平方向上没有运动向下有运动的情况设为[0,-]。将向右以及向上有运动的情况设为[+,+],将向右以及向下有运动的情况设为[+,-],将向左以及向上有运动的情况设为[-,+],将向左以及向下有运动的情况设为[-,-]。
运动矢量状态判定部3将每个检测单位的运动矢量MV1分类为[0,0]~[-,-]的9种中的某一种,并针对每个种类合计数量。由此,运动矢量状态判定部3可以判定1帧内的运动矢量MV1是在比较一致的方向上产生还是在各种不同的方向上产生。运动矢量状态判定部3例如使用每个种类的数量的总和通过预定的函数生成表示在1帧内运动矢量MV1的方向整齐或分散的程度的状态判定值。状态判定值与第一例同样设为0~7的8级,将其作为判定信号D1。即,在第二例中考虑运动矢量MV1的方向来生成表示1帧内的运动矢量MV1的分布状态的判定信号D1。运动矢量MV1的方向越整齐,状态判定值越大。可以说状态判定值越大,运动矢量MV1越稳定。
接着说明运动矢量修正部4的结构以及动作。如图4所示,运动矢量修正部4具备运动矢量值抑制部41和运动矢量值变换部42。在运动矢量值抑制部41以及运动矢量值变换部42中输入判定信号D1。运动矢量值抑制部41,当运动矢量MV1的大小超过预定的值(第一阈值)时,使运动矢量MV1的大小减小,作为运动矢量MV2而输出。
图5表示在运动矢量值抑制部41中抑制运动矢量MV1的大小时的特性。运动矢量值抑制部41,当运动矢量MV1的大小为从0到第一阈值s的范围内时,将运动矢量MV1直接设为运动矢量MV2,当超过第一阈值s时,根据如下的(1)式来生成运动矢量MV2。
MV2=MV1×m/n+s×{(n-m)/n}                (1)
上述(1)式中的m、n是m<n的预定的自然数,值适当地设定即可。第一阈值s即成为使运动矢量MV1衰减的起始点的位置可以固定,但最好根据判定信号D1的状态判定值来改变。最好是状态判定值越大,将值s设为越大的值。
运动矢量MV2被输入运动矢量值变换部42。图6表示在运动矢量值变换部42中变换运动矢量MV2的大小时的特性。运动矢量值变换部42,在运动矢量MV2的大小在从0到第二阈值r的范围内时,将运动矢量MV2直接设为运动矢量MV3。运动矢量值变换部42,在运动矢量MV2的大小在从第二阈值r到第三阈值t的范围h内时,将运动矢量MV3的值保持为恒定值r。而且,运动矢量值变换部42,当运动矢量MV2的大小超过第三阈值t时,根据如下的(2)式生成运动矢量MV3。
MV3=2×r+h-MV2(2)
通过上述的(2)式,当运动矢量MV2的大小超过第三阈值t时,运动矢量MV3的大小以预定的比例衰减后趋向0。上述(2)式中的第二阈值r或范围h可以固定,但最好根据判定信号D1的状态判定值而改变。最好是状态判定值越大将值r设为越大的值,越延长范围h。也可以将范围h固定,状态判定值越大将值r设为越大的值。
图7~图9表示了通过以上说明的运动矢量修正部4中的(1)式以及(2)式的变换处理将运动矢量MV1修正为运动矢量MV3的修正特性。图7是将(1)式中的m、n设为3、4时的修正特性,图8是将m、n设为1、2时的修正特性,图9是将m、n设为1、4时的修正特性。由图7~图9可知,运动矢量MV1的大小超过第一阈值s的部分的、由(1)式的变换特性决定的斜率越小(越使其衰减),超过范围h以后的、由(2)式的变换特性决定的负的斜率变得越平缓(衰减的程度减小)。
通过图7~图9所示的运动矢量修正部4的运动矢量MV1的修正动作,在插补像素数据生成部5中实际使用的运动矢量MV3在运动大时向着相当于静止矢量的0收敛,因此,即使在运动矢量检测部2中发生了运动矢量的误检测的情况下,也可以减轻插补图像的视觉上的不舒适感(插补图像的破绽)。另外,当运动矢量比较小时,不修正运动矢量MV1而直接作为运动矢量MV3,因此,若是通常的运动则可以生成良好的插补图像。
在本实施方式中,作为运动矢量MV3的特性而设置了作为恒定值r的期间h,因此,通过运动矢量修正部4将运动矢量MV1从未被修正的状态平滑地切换到被修正的状态。从而可以减轻插补图像的视觉上的不舒适感。
本发明不限定于以上说明的本实施方式,在不脱离发明的主旨的范围内能够进行各种变更。本发明包含用于使计算机实现本实施方式中说明的装置的功能的程序。这些程序可以从存储介质读取而被计算机取得,也可以通过通信网络传输而被计算机取得。
符号说明
1帧存储器
2运动矢量检测部
3运动矢量状态判定部
4运动矢量修正部
5插补像素数据生成部
6帧频率变换部
41运动矢量值抑制部
42运动矢量值变换部

Claims (14)

1.一种运动矢量修正装置,其特征在于,
具备:
运动矢量检测部,其使用所输入的视频信号中的至少两个实际帧内的像素数据,检测在生成用于构成在所述两个实际帧间内插的插补帧的插补像素数据时所需要的第一运动矢量;以及
运动矢量修正部,其当所述第一运动矢量的大小超过第一阈值时,对其进行修正,使得所述第一运动矢量的大小衰减,
所述运动矢量修正部具备:
运动矢量值抑制部,其使超过所述第一阈值的所述第一运动矢量的大小以预定的比例减少,然后作为第二运动矢量来输出;以及
运动矢量值变换部,其当所述第二运动矢量的大小超过第二阈值时,对其进行衰减,使得所述第二运动矢量的大小不增加,然后作为第三运动矢量来输出,
所述运动矢量值变换部,当所述第二运动矢量的大小在从所述第二阈值到比所述第二阈值大的第三阈值的范围内时,使第三运动矢量的大小恒定,当超过所述第三阈值时,使第三运动矢量的大小以预定的比例衰减。
2.一种运动矢量修正装置,其特征在于,
具备:
运动矢量检测部,其使用所输入的视频信号中的至少两个实际帧内的像素数据,检测在生成用于构成在所述两个实际帧间内插的插补帧的插补像素数据时所需要的第一运动矢量;以及
运动矢量修正部,其当所述第一运动矢量的大小超过第一阈值时,对其进行修正,使得所述第一运动矢量的大小衰减,
所述运动矢量修正部具备:
运动矢量值抑制部,其使超过所述第一阈值的所述第一运动矢量的大小以预定的比例减少,然后作为第二运动矢量来输出;以及
运动矢量值变换部,其当所述第二运动矢量的大小超过第二阈值时,对其进行衰减,使得所述第二运动矢量的大小不增加,然后作为第三运动矢量来输出,
所述运动矢量值抑制部,在将m、n设为m<n的自然数时,通过以下计算式求出所述第二运动矢量,
所述第二运动矢量=所述第一运动矢量的大小×m/n+所述第一阈值×(n-m)/n,
所述运动矢量值变换部,当所述第二运动矢量的大小在从所述第二阈值到比所述第二阈值大的第三阈值的范围内时,使第三运动矢量的大小恒定,当超过所述第三阈值时,使第三运动矢量的大小以预定的比例衰减。
3.根据权利要求1或2所述的运动矢量修正装置,其特征在于,
所述运动矢量值变换部,当所述第二运动矢量的大小超过所述第三阈值时,通过以下计算式求出所述第三运动矢量,
所述第三运动矢量=2×所述第二阈值+(所述第三阈值-所述第二阈值)-所述第二运动矢量的大小。
4.根据权利要求1或2所述的运动矢量修正装置,其特征在于,
具备判定画面内的所述第一运动矢量的产生状态,生成并输出状态判定值的运动矢量状态判定部,
所述运动矢量修正部根据所述状态判定值来改变使所述第一运动矢量的大小衰减的衰减特性。
5.根据权利要求4所述的运动矢量修正装置,其特征在于,
所述运动矢量状态判定部生成表示运动矢量的产生量的状态判定值,所述运动矢量的产生量表示在画面内所述第一运动矢量以怎样的程度产生。
6.根据权利要求4所述的运动矢量修正装置,其特征在于,
所述运动矢量状态判定部生成表示运动矢量的分布状态的状态判定值,所述运动矢量的分布状态表示在画面内所述第一运动矢量的方向整齐或分散的程度。
7.一种视频信号处理装置,其特征在于,
具备插补像素数据生成部,使用所输入的视频信号中的至少两个实际帧内的像素数据,和通过权利要求1或2所述的运动矢量修正装置修正后的运动矢量,生成插补像素数据。
8.一种运动矢量修正方法,其特征在于,
包含以下步骤:
运动矢量检测步骤,使用所输入的视频信号中的至少两个实际帧内的像素数据,检测在生成用于构成在所述两个实际帧间内插的插补帧的插补像素数据时所需要的第一运动矢量;以及
运动矢量修正步骤,当所述第一运动矢量的大小超过第一阈值时,对其进行修正,使得所述第一运动矢量的大小衰减,
所述运动矢量修正步骤包含:
运动矢量值抑制步骤,使超过所述第一阈值的所述第一运动矢量的大小以预定的比例减少,然后作为第二运动矢量来输出;以及
运动矢量值变换步骤,当所述第二运动矢量的大小超过第二阈值时,对其进行衰减,使得所述第二运动矢量的大小不增加,然后作为第三运动矢量来输出,
所述运动矢量值变换步骤,当所述第二运动矢量的大小在从所述第二阈值到比所述第二阈值大的第三阈值的范围内时,使第三运动矢量的大小恒定,当超过所述第三阈值时,使第三运动矢量的大小以预定的比例衰减。
9.一种运动矢量修正方法,其特征在于,
包含以下步骤:
运动矢量检测步骤,使用所输入的视频信号中的至少两个实际帧内的像素数据,检测在生成用于构成在所述两个实际帧间内插的插补帧的插补像素数据时所需要的第一运动矢量;以及
运动矢量修正步骤,当所述第一运动矢量的大小超过第一阈值时,对其进行修正,使得所述第一运动矢量的大小衰减,
所述运动矢量修正步骤包含:
运动矢量值抑制步骤,使超过所述第一阈值的所述第一运动矢量的大小以预定的比例减少,然后作为第二运动矢量来输出;以及
运动矢量值变换步骤,当所述第二运动矢量的大小超过第二阈值时,对其进行衰减,使得所述第二运动矢量的大小不增加,然后作为第三运动矢量来输出,
所述运动矢量值抑制步骤,在将m、n设为m<n的自然数时,通过以下计算式求出所述第二运动矢量,
所述第二运动矢量=所述第一运动矢量的大小×m/n+所述第一阈值×(n-m)/n,
所述运动矢量值变换步骤,当所述第二运动矢量的大小在从所述第二阈值到比所述第二阈值大的第三阈值的范围内时,使第三运动矢量的大小恒定,当超过所述第三阈值时,使第三运动矢量的大小以预定的比例衰减。
10.根据权利要求8或9所述的运动矢量修正方法,其特征在于,
所述运动矢量值变换步骤,当所述第二运动矢量的大小超过所述第三阈值时,通过以下计算式求出所述第三运动矢量,
所述第三运动矢量=2×所述第二阈值+(所述第三阈值-所述第二阈值)-所述第二运动矢量的大小。
11.根据权利要求8或9所述的运动矢量修正方法,其特征在于,
包含判定画面内的所述第一运动矢量的产生状态,生成状态判定值的运动矢量状态判定步骤,
所述运动矢量修正步骤根据所述状态判定值来改变使所述第一运动矢量的大小衰减的衰减特性。
12.根据权利要求11所述的运动矢量修正方法,其特征在于,
所述运动矢量状态判定步骤生成表示运动矢量的产生量的状态判定值,所述运动矢量的产生量表示在画面内所述第一运动矢量以怎样的程度产生。
13.根据权利要求11所述的运动矢量修正方法,其特征在于,
所述运动矢量状态判定步骤生成表示运动矢量的分布状态的状态判定值,所述运动矢量的分布状态表示在画面内所述第一运动矢量的方向整齐或分散的程度。
14.一种视频信号处理方法,其特征在于,
包含插补像素数据生成步骤,使用所输入的视频信号中的至少两个实际帧内的像素数据,和通过权利要求8或9所述的运动矢量修正方法修正后的运动矢量,生成插补像素数据。
CN201180023845.7A 2010-05-13 2011-03-09 运动矢量修正装置及方法、以及视频信号处理装置及方法 Active CN102893601B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010-110962 2010-05-13
JP2010110962A JP4893847B2 (ja) 2010-05-13 2010-05-13 動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法
PCT/JP2011/055520 WO2011142169A1 (ja) 2010-05-13 2011-03-09 動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法

Publications (2)

Publication Number Publication Date
CN102893601A CN102893601A (zh) 2013-01-23
CN102893601B true CN102893601B (zh) 2015-09-16

Family

ID=44914227

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180023845.7A Active CN102893601B (zh) 2010-05-13 2011-03-09 运动矢量修正装置及方法、以及视频信号处理装置及方法

Country Status (6)

Country Link
US (1) US9288432B2 (zh)
EP (1) EP2533523B1 (zh)
JP (1) JP4893847B2 (zh)
KR (1) KR101316612B1 (zh)
CN (1) CN102893601B (zh)
WO (1) WO2011142169A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5381930B2 (ja) * 2010-08-20 2014-01-08 株式会社Jvcケンウッド 映像制御装置および映像制御方法
EP2754131B1 (en) 2011-09-08 2022-10-26 Nautilus, Inc. System and method for visualizing synthetic objects withinreal-world video clip
JP2013201607A (ja) * 2012-03-26 2013-10-03 Jvc Kenwood Corp 動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法
US9131202B1 (en) 2014-05-30 2015-09-08 Paofit Holdings Pte. Ltd. Systems and methods for motion-vector-aided video interpolation using real-time smooth video playback speed variation
US9704298B2 (en) 2015-06-23 2017-07-11 Paofit Holdings Pte Ltd. Systems and methods for generating 360 degree mixed reality environments
CN105306866A (zh) * 2015-10-27 2016-02-03 青岛海信电器股份有限公司 帧率转换方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0395274A2 (en) * 1989-04-27 1990-10-31 Sony Corporation Motion dependent video signal processing
EP1903803A3 (en) * 2006-09-08 2008-07-23 Kabushiki Kaisha Toshiba Frame interpolating circuit, frame interpolating method, and display apparatus
CN101589614A (zh) * 2006-12-27 2009-11-25 夏普株式会社 图像显示装置及方法、图像处理装置及方法
EP2106122B1 (en) * 2008-03-28 2014-01-22 Kabushiki Kaisha Toshiba Motion estimating device

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2252467B (en) * 1991-02-04 1994-11-23 Sony Broadcast & Communication Television standards converters
GB9214218D0 (en) * 1992-07-03 1992-08-12 Snell & Wilcox Ltd Motion compensated video processing
JP2914448B2 (ja) * 1997-06-25 1999-06-28 日本電信電話株式会社 動きベクトル予測符号化方法および動きベクトル復号方法、予測符号化装置および復号装置、並びに、動きベクトルの予測符号化プログラムおよび復号プログラムを記録した記録媒体
JP3974290B2 (ja) * 1999-07-22 2007-09-12 池上通信機株式会社 撮像システム
JP3898606B2 (ja) * 2002-09-12 2007-03-28 株式会社東芝 動きベクトル検出方法及び装置並びにフレーム補間画像作成方法及び装置
EP1422928A3 (en) * 2002-11-22 2009-03-11 Panasonic Corporation Motion compensated interpolation of digital video signals
KR100995398B1 (ko) * 2004-01-20 2010-11-19 삼성전자주식회사 수직 및 수평 방향의 패턴을 고려한 전역 움직임 보상순차주사화 방법
JP2006331136A (ja) 2005-05-27 2006-12-07 Victor Co Of Japan Ltd 動きベクトル検出装置
US8144778B2 (en) 2007-02-22 2012-03-27 Sigma Designs, Inc. Motion compensated frame rate conversion system and method
US8331710B2 (en) * 2007-11-06 2012-12-11 Sony Corporation Image processing apparatus and method, learning apparatus and method, and program
JP4309453B2 (ja) * 2007-12-26 2009-08-05 株式会社東芝 補間フレーム生成装置、補間フレーム生成方法及び放送受信装置
EP2308233A4 (en) * 2008-06-06 2012-10-24 Agency Science Tech & Res METHOD AND ARRANGEMENTS FOR ESTIMATING THE MOVEMENT IN SEVERAL INDIVIDUAL IMAGES

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0395274A2 (en) * 1989-04-27 1990-10-31 Sony Corporation Motion dependent video signal processing
EP1903803A3 (en) * 2006-09-08 2008-07-23 Kabushiki Kaisha Toshiba Frame interpolating circuit, frame interpolating method, and display apparatus
CN101589614A (zh) * 2006-12-27 2009-11-25 夏普株式会社 图像显示装置及方法、图像处理装置及方法
EP2106122B1 (en) * 2008-03-28 2014-01-22 Kabushiki Kaisha Toshiba Motion estimating device

Also Published As

Publication number Publication date
KR20120104317A (ko) 2012-09-20
US20120288005A1 (en) 2012-11-15
EP2533523B1 (en) 2016-02-24
EP2533523A4 (en) 2014-02-19
JP4893847B2 (ja) 2012-03-07
EP2533523A1 (en) 2012-12-12
US9288432B2 (en) 2016-03-15
WO2011142169A1 (ja) 2011-11-17
JP2011239325A (ja) 2011-11-24
CN102893601A (zh) 2013-01-23
KR101316612B1 (ko) 2013-10-15

Similar Documents

Publication Publication Date Title
CN102893601B (zh) 运动矢量修正装置及方法、以及视频信号处理装置及方法
Rukundo et al. Nearest neighbor value interpolation
TWI455588B (zh) 以雙向、局部及全域移動評估為基礎之框率轉換
US8175417B2 (en) Apparatus, method, and computer-readable recording medium for pixel interpolation
CN102292981B (zh) 帧率变换装置及方法
CN102946505B (zh) 一种基于图像分块统计的自适应运动检测方法
CN101674448A (zh) 视频信号处理装置、视频信号处理方法和视频信号处理程序
US8213736B2 (en) Image processing device and image processing method
JP5192087B2 (ja) 画像処理装置及び画像処理方法
CN101616291B (zh) 图像处理设备和方法及其程序
CN102035996B (zh) 图像处理设备及其控制方法
JP2012231303A (ja) 画像処理装置および方法、並びにプログラム
KR20110048252A (ko) 움직임 벡터 공유에 기초한 영상을 변환하는 방법 및 장치
US8013935B2 (en) Picture processing circuit and picture processing method
US8269888B2 (en) Image processing apparatus, image processing method, and computer readable medium having image processing program
CN101281641B (zh) 一种外插法改进的基于eno的图像插值方法
CN102842111A (zh) 放大图像的补偿方法及装置
CN101304531A (zh) 图像变换装置
CN107517356B (zh) 一种去隔行图像处理方法和装置
CN101399951B (zh) 用以处理隔行扫描图像的图像处理装置及方法
JP2001086366A (ja) デジタルフィルタ及びその処理方法
JP4610392B2 (ja) 映像評価装置、映像評価方法および映像評価プログラム
US20230196507A1 (en) Device, method and program for processing image
CN101365093B (zh) 图像处理装置和方法
JP2013074384A (ja) 画像処理装置及び画像処理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant