WO2011142169A1 - 動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法 - Google Patents

動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法 Download PDF

Info

Publication number
WO2011142169A1
WO2011142169A1 PCT/JP2011/055520 JP2011055520W WO2011142169A1 WO 2011142169 A1 WO2011142169 A1 WO 2011142169A1 JP 2011055520 W JP2011055520 W JP 2011055520W WO 2011142169 A1 WO2011142169 A1 WO 2011142169A1
Authority
WO
WIPO (PCT)
Prior art keywords
motion vector
threshold
magnitude
value
state determination
Prior art date
Application number
PCT/JP2011/055520
Other languages
English (en)
French (fr)
Inventor
智之 宍戸
浩史 野口
英樹 相羽
Original Assignee
株式会社Ｊｖｃケンウッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社Ｊｖｃケンウッド filed Critical 株式会社Ｊｖｃケンウッド
Priority to CN201180023845.7A priority Critical patent/CN102893601B/zh
Priority to EP11780426.0A priority patent/EP2533523B1/en
Priority to KR1020127017973A priority patent/KR101316612B1/ko
Priority to US13/521,390 priority patent/US9288432B2/en
Publication of WO2011142169A1 publication Critical patent/WO2011142169A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/014—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level

Definitions

  • the present invention relates to a motion vector correction apparatus and method, and a video signal processing apparatus and method, capable of reducing visual discomfort of an interpolated image due to erroneous detection of a motion vector.
  • an interpolation frame is interpolated between real frames of the video signal to increase the number of frames, for example, a frame rate of 60 Hz of vertical frequency is converted to a vertical frequency of 120 Hz or more which is doubled. It is done to display.
  • a motion vector of an image is detected, each interpolation pixel is generated using the motion vector, and an interpolation frame to be interpolated between real frames is generated.
  • Patent Document 1 describes a frame rate conversion device provided with a motion vector detection device capable of reducing false detection of a motion vector.
  • a motion vector detection device In a video signal processing device provided with a motion vector detection device, it is required to reduce visual discomfort of an interpolated image due to erroneous detection of a motion vector. In particular, when an erroneous detection occurs when the detected motion vector is relatively large, the sense of incongruity of the interpolation image is noticeable.
  • the present invention has been made in view of such problems.
  • a motion vector correction apparatus and method capable of reducing visual discomfort of an interpolated image even when an erroneous detection occurs when the motion vector is relatively large. It is an object of the present invention to provide a video signal processing apparatus and method.
  • the present invention constructs an interpolation frame to be interpolated between the two real frames using pixel data in at least two real frames in the input video signal.
  • a motion vector detection unit (2) for detecting a first motion vector necessary for generating interpolation pixel data; and the first one when the magnitude of the first motion vector exceeds a first threshold.
  • a motion vector correction unit (4) for correcting to attenuate the magnitude of the motion vector.
  • the motion vector correction unit reduces the magnitude of the first motion vector exceeding the first threshold at a predetermined ratio and outputs the reduced value as a second motion vector.
  • a motion which is attenuated and output as a third motion vector so that the magnitude of the second motion vector does not increase when the magnitude of the second motion vector exceeds a second threshold It is preferable to provide a vector value converter (42).
  • the motion vector value suppression unit may set the second motion vector to the size of the first motion vector ⁇ m / n + the first
  • the threshold value of 1 ⁇ (n ⁇ m) / n is obtained by the formula.
  • the motion vector value conversion unit makes the magnitude of the third motion vector constant in the range from the second threshold to the third threshold in which the magnitude of the second motion vector is larger than the second threshold.
  • the magnitude of the third motion vector is attenuated at a predetermined rate when the third threshold is exceeded.
  • the motion vector value conversion unit converts the third motion vector by 2 ⁇ the second threshold + ( The third threshold value-the second threshold value) -the magnitude of the second motion vector is calculated by a formula.
  • the motion vector state determination unit (3) determines the generation state of the first motion vector in the screen and generates a state determination value and outputs the state determination value, and the motion vector correction unit responds to the state determination value.
  • the attenuation characteristic for attenuating the magnitude of the first motion vector is variable.
  • the motion vector state determination unit generates a state determination value indicating an amount of generation of a motion vector indicating how much the first motion vector has occurred in the screen.
  • the motion vector state determination unit generates a state determination value indicating a distribution state of a motion vector indicating a degree of whether the directions of the first motion vector are aligned or dispersed in a screen. .
  • the present invention solves the problems of the above-described prior art, by using pixel data in at least two real frames of an input video signal and a motion vector corrected by any of the above motion vector correction devices.
  • a video signal processing apparatus comprising: an interpolation pixel data generation unit (5) that generates interpolation pixel data using the same.
  • the present invention uses interpolation pixel data between at least two real frames in an input video signal to interpolate between the two real frames.
  • Providing a motion vector correction method including: motion vector correction step of correcting to attenuate the magnitude of the vector.
  • the motion vector value suppressing step may set the second motion vector to the size of the first motion vector ⁇ m / n + the first
  • the threshold value of 1 ⁇ (n ⁇ m) / n is obtained by the formula.
  • the motion vector value conversion step makes the magnitude of the third motion vector constant in a range from the second threshold to a third threshold in which the magnitude of the second motion vector is larger than the second threshold.
  • the magnitude of the third motion vector is attenuated at a predetermined rate when the third threshold is exceeded.
  • the third motion vector is set to 2 ⁇ the second threshold + ( The third threshold value-the second threshold value) -the magnitude of the second motion vector is calculated by a formula.
  • a motion vector state determining step of determining a generation state of the first motion vector in the screen to generate a state determination value is configured to calculate the first motion according to the state determination value It is preferable to vary the attenuation characteristic that attenuates the magnitude of the vector.
  • the motion vector state determination step generates a state determination value indicating an amount of generation of a motion vector indicating how much the first motion vector has occurred in the screen.
  • the motion vector state determination step generates a state determination value indicating a distribution state of a motion vector indicating a degree of whether the first motion vector is aligned or dispersed in a screen. .
  • the present invention solves the problems of the above-described prior art, by using pixel data in at least two actual frames of an input video signal and a motion vector corrected by any of the above motion vector correction methods.
  • a video signal processing method is provided, including an interpolated pixel data generation step of generating interpolated pixel data using the same.
  • the motion vector correction apparatus and method and the video signal processing apparatus and method of the present invention, even when an erroneous detection occurs when the motion vector is relatively large, it is possible to reduce visual discomfort of the interpolated image. .
  • FIG. 1 is a block diagram illustrating an embodiment of the present invention.
  • FIG. 7 is a diagram for explaining a first example of the operation of the motion vector state determination unit 3 in FIG. 1;
  • FIG. 7 is a diagram for describing a second example of the operation of the motion vector state determination unit 3 in FIG. 1.
  • FIG. 5 is a diagram for describing an operation of a motion vector value suppression unit 41 in FIG. 4.
  • FIG. 5 is a diagram for explaining the operation of a motion vector value converter 42 in FIG. 4;
  • FIG. 7 is a diagram for describing a first example of the operation of the motion vector correction unit 4 in FIG. 1;
  • FIG. 7 is a diagram for explaining a second example of the operation of the motion vector correction unit 4 in FIG. 1; It is a figure for demonstrating the 3rd example of operation
  • FIG. 1 shows, as an example of a video signal processing apparatus, a frame rate conversion apparatus which interpolates an interpolation frame between real frames of a video signal to double the frame rate. . It may be a frame rate conversion device that converts a frame rate to 3 times or more.
  • the video signal processing device of the present invention is not limited to the frame rate conversion device, and may be a film judder removal device provided with a motion vector detection device. The present invention is applicable to any video signal processing device provided with a motion vector detection device.
  • each pixel data of a video signal Sin having a frame frequency of 60 Hz is sequentially input to a frame memory 1, a motion vector detector 2, an interpolation pixel data generator 5, and a frame frequency converter 6.
  • the frame memory 1 delays the input pixel data by one frame and outputs it.
  • a current frame of the input video signal Sin is F0, and a frame one frame before the current frame output from the frame memory 1 is F1.
  • the current frame F0 and the frame F1 are real frames.
  • Each pixel data of the frame F1 is sequentially input to the motion vector detection unit 2 and the interpolation pixel data generation unit 5.
  • the motion vector detection unit 2 generates each interpolation pixel data of an interpolation frame to be interpolated between the current frame F0 and the frame F1 using, for example, a matching method and using pixel data of the current frame F0 and the frame F1.
  • the motion vector MV1 of is detected.
  • the motion vector MV1 may be detected in units of pixel data or may be detected in units of blocks composed of a plurality of pixel data.
  • the motion vector detection unit 2 is configured to include a plurality of line memories, a pixel delay unit, a subtractor for obtaining a difference of pixel data, and the like.
  • the motion vector MV1 is input to the motion vector state determination unit 3 and the motion vector correction unit 4.
  • the motion vector MV1 may be detected using a frame that is earlier than the frame F1.
  • the motion vector state determination unit 3 determines the state of the motion vector in each frame and outputs a determination signal D1. The specific operation of the motion vector state determination unit 3 will be described in detail later.
  • the determination signal D 1 is input to the motion vector correction unit 4.
  • the motion vector correction unit 4 corrects so as to attenuate the magnitude of the motion vector MV1 according to the determination signal D1, and outputs a motion vector MV3.
  • the specific configuration and operation of the motion vector correction unit 4 will be described in detail later.
  • the motion vector MV3 is input to the interpolation pixel data generation unit 5.
  • the interpolation pixel data generation unit 5 delays the pixel data of the current frame F0 in the horizontal direction and the vertical direction, and generates a plurality of pixel data of the predetermined horizontal and vertical range in the current frame F0.
  • the interpolation pixel data generation unit 5 selects and averages pixel data in the current frame F0 and pixel data in the frame F1 according to the motion vector MV3 to generate interpolation pixel data. Equipped with
  • interpolation pixel data is generated using pixel data in two real frames in the present embodiment, interpolation pixel data may be generated using pixel data in three or more real frames.
  • the frame frequency converter 6 sequentially receives the pixel data of the frame F 0 and the interpolation pixel data output from the interpolation pixel data generator 5.
  • the frame frequency converter 6 can be configured by a time series conversion memory.
  • the frame frequency conversion unit 6 is an interpolation frame based on the image data of the frame F0 which is a real frame based on the pixel data of the frame F0 sequentially input, and the interpolation pixel data sequentially input from the interpolation pixel data generation unit 5. Image data of a certain interpolation frame Fi is generated.
  • the frame frequency conversion unit 6 alternately selects the image data of the frame F0 and the image data of the interpolation frame Fi at a frequency of 120 Hz, and outputs a video signal Sout having a frame frequency of 120 Hz.
  • FIG. 2 conceptually shows the operation performed in the first example.
  • the motion vector state determination unit 3 divides the screen of one frame into a plurality of areas. The number of areas into which the screen of one frame is divided may be set as appropriate.
  • FIG. 2A shows one area AR.
  • One area AR includes a plurality of pixels. The number of pixels included in one area AR is determined by the number of areas AR.
  • the motion vector MV1 is detected in units of pixel data
  • the motion vector MV1 for the number of pixels is generated in the area AR.
  • the motion vector MV1 is detected in block units of a plurality of pixel data
  • the motion vector MV1 for the number of blocks is generated in the area AR.
  • the motion vector state determination unit 3 determines whether or not the motion vector MV1 is generated for each unit of detection of the motion vector MV1 in the area AR, and sets 1 when the motion vector MV1 is generated, and does not generate 1 Set it to 0. Then, the motion vector state determination unit 3 counts the number of occurrences of the motion vector MV1 by summing 1 in the area AR. Furthermore, when the number (count value) at which motion vector MV1 is generated in area AR exceeds a predetermined threshold value, motion vector state determination unit 3 makes a determination on area AR as shown on the right side of the arrow in FIG. 1 is set as the determination value for each area, and 0 is set as the determination value for each area if the predetermined threshold is not exceeded. For example, if half is a threshold value, 1 is set if it is a majority.
  • FIG. 2B shows a state where 0 or 1, which is the judgment value for each area, is set for the areas AR00, AR01, AR02, AR03,..., AR10, AR11, AR12, AR13.
  • the motion vector state determination unit 3 counts the number of areas AR in which 1 is set as the determination value for each area by summing the determination values for each area set in each area AR in the screen. Then, the motion vector state determination unit 3 outputs a determination signal D1 that is an eight-step state determination value of 0 to 7, for example, according to the count value.
  • the determination signal D1 indicating how much the motion vector MV1 is generated in one frame (screen) is generated. That is, in the first example, the direction of the motion vector MV1 is not considered, and the determination signal D1 indicating the generation amount of the motion vector MV1 in one frame is generated.
  • the state determination value increases as the amount of generation of the motion vector MV1 increases. It can be said that the motion vector MV1 is more stable as the state determination value is larger.
  • FIG. 3 conceptually shows how the motion vector MV1 is generated for each detection unit of the motion vector MV1 in one frame.
  • a black circle is a state in which the motion vector MV1 is not detected (movement 0), and corresponds to the value 0 in the figure on the left side of the arrow in FIG. 2 (A).
  • a motion vector MV1 in the right direction, a motion vector MV1 in the upper direction, and a motion vector MV1 in the upper right direction are generated.
  • the motion vector state determination unit 3 determines how the motion vector MV1 is distributed in one frame.
  • the motion vector MV1 is classified into the following nine types in horizontal and vertical directions. When there is no motion in the horizontal and vertical directions [0, 0], when there is motion in the right direction and there is no motion in the vertical direction [+, 0], motion in the left direction and motion in the vertical direction If there is not, set it as [-, 0]. When there is no movement in the horizontal direction but movement in the upward direction is [0, +], and when there is no movement in the horizontal direction and movement in the downward direction, it is [0,-].
  • the motion vector state determination unit 3 classifies the motion vector MV1 for each detection unit into any one of nine types from [0, 0] to [-,-], and adds up the numbers for each type. Thereby, the motion vector state determination unit 3 can determine whether the motion vector MV1 in one frame is generated in a relatively uniform direction or in a variety of different directions.
  • the motion vector state determination unit 3 generates a state determination value indicating the extent to which the direction of the motion vector MV1 is aligned or dispersed within one frame by using a predetermined function using, for example, the sum of the numbers for each type. As in the first example, the state determination value has eight levels 0 to 7, and this is used as a determination signal D1.
  • the determination signal D1 indicating the distribution state of the motion vector MV1 in one frame is generated in consideration of the direction of the motion vector MV1.
  • the state determination value increases as the direction of the motion vector MV1 is aligned. It can be said that the motion vector MV1 is more stable as the state determination value is larger.
  • the motion vector correction unit 4 includes a motion vector value suppression unit 41 and a motion vector value conversion unit 42.
  • the determination signal D1 is input to the motion vector value suppression unit 41 and the motion vector value conversion unit 42.
  • the motion vector value suppressing unit 41 reduces the magnitude of the motion vector MV1 and outputs the reduced value as a motion vector MV2.
  • FIG. 5 shows the characteristics when the motion vector value suppression unit 41 suppresses the magnitude of the motion vector MV1.
  • the motion vector value suppression unit 41 sets the motion vector MV1 as the motion vector MV2 as it is in the range from 0 to the first threshold value s when the magnitude of the motion vector MV1 exceeds the first threshold value s, the following (1)
  • the motion vector MV2 is generated based on the equation.
  • MV2 MV1 ⁇ m / n + s ⁇ ⁇ (n ⁇ m) / n ⁇ (1)
  • m and n are predetermined natural numbers with m ⁇ n, and the values may be set as appropriate.
  • the first threshold value s that is, the position serving as the start point for attenuating the motion vector MV1 may be fixed, but is preferably varied according to the state determination value of the determination signal D1. It is preferable to set the value s to a larger value as the state determination value increases.
  • the motion vector MV2 is input to the motion vector value conversion unit 42.
  • FIG. 6 shows the characteristics when the motion vector value converter 42 converts the magnitude of the motion vector MV2.
  • the motion vector value conversion unit 42 sets the motion vector MV2 as it is as the motion vector MV3 in the range where the magnitude of the motion vector MV2 is from 0 to the second threshold r.
  • the motion vector value conversion unit 42 holds the value of the motion vector MV3 at a constant value r in the range h where the magnitude of the motion vector MV2 is from the second threshold r to the third threshold t.
  • the motion vector value conversion unit 42 when the magnitude of the motion vector MV2 exceeds the third threshold value t, the motion vector value conversion unit 42 generates a motion vector MV3 based on the following equation (2).
  • the second threshold r and the range h in the equation (2) may be fixed, it is preferable that the second threshold r and the range h be varied according to the state determination value of the determination signal D1. It is preferable to set the value r to a larger value as the state determination value increases and to lengthen the range h.
  • the range h may be fixed, and the value r may be set to a larger value as the state determination value increases.
  • FIGS. 7 to 9 show correction characteristics for correcting the motion vector MV1 into the motion vector MV3 by the conversion processing by the equations (1) and (2) in the motion vector correction unit 4 described above.
  • 7 shows the correction characteristics when m and n in the equation (1) are 3 and 4
  • FIG. 8 shows the correction characteristics when m and n are 1 and 2
  • the negative slope determined by the conversion characteristics of the equation (2) after it is exceeded becomes gentle (the degree of attenuation decreases).
  • the motion vector MV3 actually used by the interpolation pixel data generation unit 5 moves toward 0 corresponding to the still vector when the motion is large. Therefore, even when the motion vector detection unit 2 erroneously detects a motion vector, visual sense of discomfort (breaking of the interpolation image) of the interpolation image can be reduced. Further, when the motion vector is relatively small, the motion vector MV1 is not corrected but becomes the motion vector MV3 as it is, so that it is possible to generate a good interpolated image in the case of a normal motion.
  • the motion vector correcting unit 4 smoothly switches from the state in which the motion vector MV1 is not corrected to the state in which the motion vector MV1 is corrected. Become. Therefore, visual discomfort of the interpolation image can be reduced.
  • the present invention is not limited to the embodiment described above, and various modifications can be made without departing from the scope of the present invention.
  • the present invention includes a program for causing a computer to realize the functions of the apparatus described in the present embodiment. These programs may be read from a recording medium and taken into a computer, or may be transmitted through a communication network and taken into a computer.
  • motion vector value generation unit 1 frame memory 2 motion vector detection unit 3 motion vector state determination unit 4 motion vector correction unit 5 interpolation pixel data generation unit 6 frame frequency conversion unit 41 motion vector value suppression unit 42 motion vector value conversion unit

Abstract

動きベクトル検出部２は、入力された映像信号における少なくとも２つの実フレーム内の画素データを用いて、２つの実フレーム間に内挿する補間フレームを構成する補間画素データを生成する際に必要な動きベクトルＭＶ１を検出する。動きベクトル補正部４は、動きベクトルＭＶ１の大きさが所定の閾値を越えた場合に動きベクトルＭＶ１の大きさを減衰させるよう補正して動きベクトルＭＶ３として出力する。

Description

動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法
　本発明は、動きベクトルの誤検出による補間画像の視覚的な違和感を軽減することができる動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法に関する。
　液晶パネルを用いた画像表示装置で動画像を表示すると残像が生じやすい。そこで、残像を低減させるため、映像信号の実フレーム間に補間フレームを内挿してフレーム数を増大させ、例えば垂直周波数６０Ｈｚのフレームレートを２倍の１２０Ｈｚまたはそれ以上の垂直周波数に変換して画像表示することが行われている。フレームレート変換を行う映像信号処理装置においては、画像の動きベクトルを検出し、動きベクトルを用いて各補間画素を生成し、実フレーム間に内挿する補間フレームを生成する。
　動きベクトルは、例えば連続した２フレームという限られたフレーム内の限られた範囲の画素データに基づいて生成される。従って、動きベクトルの誤検出を完全になくすことは難しい。そこで、動きベクトルの誤検出を低減するための技術改善が行われている。一例として特許文献１には、動きベクトルの誤検出を低減することができる動きベクトル検出装置を備えたフレームレート変換装置が記載されている。
特開２００６－３３１１３６号公報
　動きベクトル検出装置を備えた映像信号処理装置において、動きベクトルの誤検出による補間画像の視覚的な違和感を軽減することが求められる。特に、検出した動きベクトルが比較的大きい場合に誤検出が発生すると、補間画像の視覚的な違和感が大きく目立ってしまう。
　本発明はこのような問題点に鑑みなされたものであり、動きベクトルが比較的大きい場合に誤検出が発生した場合でも補間画像の視覚的な違和感を軽減することができる動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法を提供することを目的とする。
　本発明は、上述した従来の技術の課題を解決するため、入力された映像信号における少なくとも２つの実フレーム内の画素データを用いて、前記２つの実フレーム間に内挿する補間フレームを構成する補間画素データを生成する際に必要な第１の動きベクトルを検出する動きベクトル検出部（２）と、前記第１の動きベクトルの大きさが第１の閾値を越えた場合に前記第１の動きベクトルの大きさを減衰させるよう補正する動きベクトル補正部（４）と、を備えることを特徴とする動きベクトル補正装置を提供する。
　上記の構成において、前記動きベクトル補正部は、前記第１の閾値を越えた前記第１の動きベクトルの大きさを所定の割合で減少させて第２の動きベクトルとして出力する動きベクトル値抑制部（４１）と、前記第２の動きベクトルの大きさが第２の閾値を越えた場合に前記第２の動きベクトルの大きさが増加しないように減衰させて第３の動きベクトルとして出力する動きベクトル値変換部（４２）と、を備えることが好ましい。
　好適な例として、前記動きベクトル値抑制部は、ｍ，ｎをｍ＜ｎである自然数としたとき、前記第２の動きベクトルを、前記第１の動きベクトルの大きさ×ｍ／ｎ＋前記第１の閾値×（ｎ－ｍ）／ｎなる計算式で求める。
　前記動きベクトル値変換部は、前記第２の動きベクトルの大きさが前記第２の閾値から前記第２の閾値より大きい第３の閾値までの範囲では第３の動きベクトルの大きさを一定とし、前記第３の閾値を越えた場合に第３の動きベクトルの大きさを所定の割合で減衰させることが好ましい。
　好適な例として、前記動きベクトル値変換部は、前記第２の動きベクトルの大きさが前記第３の閾値を越えた場合、前記第３の動きベクトルを、２×前記第２の閾値＋（前記第３の閾値－前記第２の閾値）－前記第２の動きベクトルの大きさなる計算式で求める。
　画面内での前記第１の動きベクトルの発生状態を判定して状態判定値を生成して出力する動きベクトル状態判定部（３）を備え、前記動きベクトル補正部は、前記状態判定値に応じて前記第１の動きベクトルの大きさを減衰させる減衰特性を可変することが好ましい。
　好適な例として、前記動きベクトル状態判定部は、画面内で前記第１の動きベクトルがどの程度発生したかを示す動きベクトルの発生量を示す状態判定値を生成する。他の好適な例として、前記動きベクトル状態判定部は、画面内で前記第１の動きベクトルの方向が揃っているかばらついているかの程度を示す動きベクトルの分布状態を示す状態判定値を生成する。
　本発明は、上述した従来の技術の課題を解決するため、入力された映像信号における少なくとも２つの実フレーム内の画素データと、上記のいずれかの動きベクトル補正装置によって補正された動きベクトルとを用いて補間画素データを生成する補間画素データ生成部（５）を備えることを特徴とする映像信号処理装置を提供する。
　また、本発明は、上述した従来の技術の課題を解決するため、入力された映像信号における少なくとも２つの実フレーム内の画素データを用いて、前記２つの実フレーム間に内挿する補間フレームを構成する補間画素データを生成する際に必要な第１の動きベクトルを検出する動きベクトル検出ステップと、前記第１の動きベクトルの大きさが第１の閾値を越えた場合に前記第１の動きベクトルの大きさを減衰させるよう補正する動きベクトル補正ステップと、を含むことを特徴とする動きベクトル補正方法を提供する。
　前記動きベクトル補正ステップは、前記第１の閾値を越えた前記第１の動きベクトルの大きさを所定の割合で減少させて第２の動きベクトルとして出力する動きベクトル値抑制ステップと、前記第２の動きベクトルの大きさが第２の閾値を越えた場合に前記第２の動きベクトルの大きさが増加しないように減衰させて第３の動きベクトルとして出力する動きベクトル値変換ステップと、を含むことが好ましい。
　好適な例として、前記動きベクトル値抑制ステップは、ｍ，ｎをｍ＜ｎである自然数としたとき、前記第２の動きベクトルを、前記第１の動きベクトルの大きさ×ｍ／ｎ＋前記第１の閾値×（ｎ－ｍ）／ｎなる計算式で求める。
　前記動きベクトル値変換ステップは、前記第２の動きベクトルの大きさが前記第２の閾値から前記第２の閾値より大きい第３の閾値までの範囲では第３の動きベクトルの大きさを一定とし、前記第３の閾値を越えた場合に第３の動きベクトルの大きさを所定の割合で減衰させることが好ましい。
　好適な例として、前記動きベクトル値変換ステップは、前記第２の動きベクトルの大きさが前記第３の閾値を越えた場合、前記第３の動きベクトルを、２×前記第２の閾値＋（前記第３の閾値－前記第２の閾値）－前記第２の動きベクトルの大きさなる計算式で求める。
　画面内での前記第１の動きベクトルの発生状態を判定して状態判定値を生成する動きベクトル状態判定ステップを含み、前記動きベクトル補正ステップは、前記状態判定値に応じて前記第１の動きベクトルの大きさを減衰させる減衰特性を可変することが好ましい。
　好適な例として、前記動きベクトル状態判定ステップは、画面内で前記第１の動きベクトルがどの程度発生したかを示す動きベクトルの発生量を示す状態判定値を生成する。他の好適な例として、前記動きベクトル状態判定ステップは、画面内で前記第１の動きベクトルの方向が揃っているかばらついているかの程度を示す動きベクトルの分布状態を示す状態判定値を生成する。
　本発明は、上述した従来の技術の課題を解決するため、入力された映像信号における少なくとも２つの実フレーム内の画素データと、上記のいずれかの動きベクトル補正方法によって補正された動きベクトルとを用いて補間画素データを生成する補間画素データ生成ステップを含むことを特徴とする映像信号処理方法を提供する。
　本発明の動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法によれば、動きベクトルが比較的大きい場合に誤検出が発生した場合でも補間画像の視覚的な違和感を軽減することができる。
本発明の一実施形態を示すブロック図である。 図１における動きベクトル状態判定部３の動作の第１の例を説明するための図である。 図１における動きベクトル状態判定部３の動作の第２の例を説明するための図である。 図１における動きベクトル補正部４の具体的構成例を示すブロック図である。 図４における動きベクトル値抑制部４１の動作を説明するための図である。 図４における動きベクトル値変換部４２の動作を説明するための図である。 図１における動きベクトル補正部４の動作の第１の例を説明するための図である。 図１における動きベクトル補正部４の動作の第２の例を説明するための図である。 図１における動きベクトル補正部４の動作の第３の例を説明するための図である。
　以下、本発明の動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法について、添付図面を参照して説明する。図１に示す本発明の一実施形態は、映像信号処理装置の一例として、映像信号の実フレーム間に補間フレームを内挿して、フレームレートを２倍に変換するフレームレート変換装置を示している。フレームレートを３倍以上に変換するフレームレート変換装置であってもよい。本発明の映像信号処理装置は、フレームレート変換装置に限定されるものではなく、動きベクトル検出装置を備えたフィルムジャダ除去装置であってもよい。本発明は、動きベクトル検出装置を備えた任意の映像信号処理装置に適用可能である。
　図１において、６０Ｈｚのフレーム周波数を有する映像信号Ｓinの各画素データは、フレームメモリ１，動きベクトル検出部２，補間画素データ生成部５，フレーム周波数変換部６に順次入力される。フレームメモリ１は入力された画素データを１フレーム遅延して出力する。入力された映像信号Ｓinの現在フレームをＦ０、フレームメモリ１より出力された現在フレームより１フレーム前のフレームをＦ１とする。現在フレームＦ０及びフレームＦ１は実フレームである。フレームＦ１の各画素データは、動きベクトル検出部２及び補間画素データ生成部５に順次入力される。
　動きベクトル検出部２は、例えばマッチング法を用い、現在フレームＦ０とフレームＦ１の画素データを用いて、現在フレームＦ０とフレームＦ１との間に内挿する補間フレームの各補間画素データを生成するための動きベクトルＭＶ１を検出する。動きベクトルＭＶ１は画素データ単位で検出してもよいし、複数の画素データよりなるブロック単位で検出してもよい。特に図示しないが、動きベクトル検出部２は複数のラインメモリと画素遅延器、画素データの差分を求める減算器等を含んで構成される。動きベクトルＭＶ１は、動きベクトル状態判定部３及び動きベクトル補正部４に入力される。現在フレームＦ０とフレームＦ１に加えて、フレームＦ１よりも過去のフレームを用いて動きベクトルＭＶ１を検出してもよい。
　動きベクトル状態判定部３は、それぞれのフレーム内の動きベクトルの状態を判定して判定信号Ｄ１を出力する。動きベクトル状態判定部３の具体的な動作については後に詳述する。判定信号Ｄ１は動きベクトル補正部４に入力される。動きベクトル補正部４は、判定信号Ｄ１に応じて動きベクトルＭＶ１の大きさを減衰させるよう補正して動きベクトルＭＶ３を出力する。動きベクトル補正部４の具体的な構成及び動作については後に詳述する。動きベクトルＭＶ３は補間画素データ生成部５に入力される。
　特に図示しないが、補間画素データ生成部５は、現在フレームＦ０の画素データを水平方向及び垂直方向に遅延させ、現在フレームＦ０内の所定の水平方向及び垂直方向の範囲の画素データを生成する複数のラインメモリ及び画素遅延器と、フレームＦ１の画素データを水平方向及び垂直方向に遅延させ、フレームＦ１内の所定の水平方向及び垂直方向の範囲の画素データを生成する複数のラインメモリ及び画素遅延器とを備える。また、補間画素データ生成部５は、動きベクトルＭＶ３に応じて、現在フレームＦ０内の画素データとフレームＦ１内の画素データとを選択して平均値化して補間画素データを生成する平均値化部を備える。
　本実施形態では２つの実フレーム内の画素データを用いて補間画素データを生成しているが、３つ以上の実フレーム内の画素データを用いて補間画素データを生成してもよい。
　フレーム周波数変換部６には、フレームＦ０の画素データと補間画素データ生成部５より出力された補間画素データとが順次入力される。フレーム周波数変換部６は時系列変換メモリによって構成することができる。フレーム周波数変換部６は、順次入力されるフレームＦ０の画素データに基づいて実フレームであるフレームＦ０の画像データと、補間画素データ生成部５から順次入力される補間画素データに基づいて補間フレームである補間フレームＦｉの画像データとを生成する。
　そして、フレーム周波数変換部６は、フレームＦ０の画像データと補間フレームＦｉの画像データとを周波数１２０Ｈｚで交互に選択して、１２０Ｈｚのフレーム周波数を有する映像信号Ｓoutを出力する。
　次に、動きベクトル状態判定部３の具体的な動作について説明する。まず、図２を用いて動きベクトル状態判定部３の動作の第１の例について説明する。なお、図２は第１の例で行う動作を概念的に示している。動きベクトル状態判定部３は、１フレームの画面を複数の領域に区切る。１フレームの画面をいくつの領域に分割するかは適宜設定すればよい。図２（Ａ）は１つの領域ＡＲを示している。１つの領域ＡＲには複数の画素が含まれる。１つの領域ＡＲに含まれる画素の数は領域ＡＲの数によって決まる。動きベクトルＭＶ１を画素データ単位で検出する場合、領域ＡＲ内には画素数分の動きベクトルＭＶ１が発生することになる。動きベクトルＭＶ１を複数の画素データよりなるブロック単位で検出する場合、領域ＡＲ内にはブロック数分の動きベクトルＭＶ１が発生することになる。
　動きベクトル状態判定部３は、領域ＡＲ内で動きベクトルＭＶ１の検出単位毎に動きベクトルＭＶ１が発生したか否かを判定して、動きベクトルＭＶ１が発生した場合に１を設定し、発生しなかった場合に０を設定する。そして、動きベクトル状態判定部３は、領域ＡＲ内で１を総和することによって動きベクトルＭＶ１が発生した数をカウントする。さらに、動きベクトル状態判定部３は、領域ＡＲ内で動きベクトルＭＶ１が発生した数（カウント値）が所定の閾値を越えたら、図２（Ａ）の矢印の右側に示すように領域ＡＲに対して領域毎の判定値として１を設定し、所定の閾値を越えなかったら領域毎の判定値として０を設定する。例えば半数を閾値として過半数であれば１を設定する。
　図２（Ｂ）は、画面内の領域ＡＲ00，ＡＲ01，ＡＲ02，ＡＲ03…，ＡＲ10，ＡＲ11，ＡＲ12，ＡＲ13…に対して領域毎の判定値である０または１を設定した状態を示している。動きベクトル状態判定部３は、画面内のそれぞれの領域ＡＲで設定した領域毎の判定値を総和することによって、領域毎の判定値として１を設定した領域ＡＲの数をカウントする。そして、動きベクトル状態判定部３は、カウント値に応じて例えば０～７の８段階の状態判定値である判定信号Ｄ１を出力する。
　以上のように、動きベクトル状態判定部３の動作の第１の例では、１フレーム（画面）内でどの程度動きベクトルＭＶ１が発生したかを示す判定信号Ｄ１を生成する。即ち、第１の例では、動きベクトルＭＶ１の方向は考慮せず、１フレーム内での動きベクトルＭＶ１の発生量を示す判定信号Ｄ１を生成する。動きベクトルＭＶ１の発生量が多いほど状態判定値が大きくなる。状態判定値が大きいほど動きベクトルＭＶ１が安定していると言える。
　引き続き、図３を用いて動きベクトル状態判定部３の動作の第２の例について説明する。図３は、１フレーム内で動きベクトルＭＶ１の検出単位毎に動きベクトルＭＶ１がどのように発生したかを概念的に示している。黒丸は動きベクトルＭＶ１が検出されなかった状態（動き０）であり、図２（Ａ）の矢印左側の図の値０に相当する。図３の例では、それぞれ矢印にて示すように、右方向の動きベクトルＭＶ１と、上方向の動きベクトルＭＶ１と、右上方向の動きベクトルＭＶ１が発生している。
　動きベクトル状態判定部３は、１フレーム内で動きベクトルＭＶ１がどのように分布しているかを判定する。一例として、動きベクトルＭＶ１を水平方向及び垂直方向の向きで次の９種類に分類する。水平方向及び垂直方向に動きがない場合を［０，０］、右方向に動きがあり垂直方向には動きがない場合を［＋，０］、左方向に動きがあり垂直方向には動きがない場合を［－，０］とする。水平方向に動きがなく、上方向に動きがある場合を［０，＋］、水平方向に動きがなく、下方向に動きがある場合を［０，－］とする。右方向及び上方向に動きがある場合を［＋，＋］、右方向及び下方向に動きがある場合を［＋，－］、左方向及び上方向に動きがある場合を［－，＋］、左方向及び下方向に動きがある場合を［－，－］とする。
　動きベクトル状態判定部３は、検出単位毎の動きベクトルＭＶ１を［０，０］～［－，－］の９種類のいずれかに分類し、それぞれの種類毎に数を総和する。これにより、動きベクトル状態判定部３は、１フレーム内の動きベクトルＭＶ１が比較的一様な方向に発生したか種々の異なる方向に発生したかを判定することができる。動きベクトル状態判定部３は、例えば種類毎の数の総和を用いて所定の関数により１フレーム内で動きベクトルＭＶ１の方向が揃っているかばらついているかの程度を示す状態判定値を生成する。状態判定値は第１の例と同様、０～７の８段階とし、これを判定信号Ｄ１とする。即ち、第２の例では、動きベクトルＭＶ１の方向を考慮して、１フレーム内での動きベクトルＭＶ１の分布状態を示す判定信号Ｄ１を生成する。動きベクトルＭＶ１の方向が揃うほど状態判定値が大きくなる。状態判定値が大きいほど動きベクトルＭＶ１が安定していると言える。
　次に、動きベクトル補正部４の構成及び動作について説明する。図４に示すように、動きベクトル補正部４は、動きベクトル値抑制部４１と動きベクトル値変換部４２とを備える。動きベクトル値抑制部４１及び動きベクトル値変換部４２には判定信号Ｄ１が入力される。動きベクトル値抑制部４１は、動きベクトルＭＶ１の大きさが所定の値（第１の閾値）を超えた場合に動きベクトルＭＶ１の大きさを減少させて動きベクトルＭＶ２として出力する。
　図５は、動きベクトル値抑制部４１において動きベクトルＭＶ１の大きさを抑制する際の特性を示している。動きベクトル値抑制部４１は、動きベクトルＭＶ１の大きさが０から第１の閾値ｓまでの範囲では動きベクトルＭＶ１をそのまま動きベクトルＭＶ２とし、第１の閾値ｓを超えると、次の（１）式に基づいて動きベクトルＭＶ２を生成する。
　ＭＶ２＝ＭＶ１×ｍ／ｎ＋ｓ×｛（ｎ－ｍ）／ｎ｝　…（１）
　上記（１）式におけるｍ，ｎはｍ＜ｎである所定の自然数であり、値は適宜設定すればよい。第１の閾値ｓ、即ち、動きベクトルＭＶ１を減衰させる開始点となる位置は固定でもよいが、判定信号Ｄ１の状態判定値に応じて可変させることが好ましい。状態判定値が大きくなるほど値ｓを大きな値とすることが好ましい。
　動きベクトルＭＶ２は動きベクトル値変換部４２に入力される。図６は、動きベクトル値変換部４２において動きベクトルＭＶ２の大きさを変換する際の特性を示している。動きベクトル値変換部４２は、動きベクトルＭＶ２の大きさが０から第２の閾値ｒまでの範囲では動きベクトルＭＶ２をそのまま動きベクトルＭＶ３とする。動きベクトル値変換部４２は、動きベクトルＭＶ２の大きさが第２の閾値ｒから第３の閾値ｔまでの範囲ｈでは動きベクトルＭＶ３の値を一定値ｒに保持させる。さらに動きベクトル値変換部４２は、動きベクトルＭＶ２の大きさが第３の閾値ｔを超えると、次の（２）式に基づいて動きベクトルＭＶ３を生成する。
　ＭＶ３＝２×ｒ＋ｈ－ＭＶ２　…（２）
　上記（２）式により、動きベクトルＭＶ２の大きさが第３の閾値ｔを超えると、動きベクトルＭＶ３の大きさは所定の割合で減衰して０に向かうことになる。上記（２）式における第２の閾値ｒや範囲ｈは固定でもよいが、判定信号Ｄ１の状態判定値に応じて可変させることが好ましい。状態判定値が大きくなるほど値ｒを大きな値とし、範囲ｈを長くすることが好ましい。範囲ｈを固定にして、状態判定値が大きくなるほど値ｒを大きな値としてもよい。
　図７～図９は、以上説明した動きベクトル補正部４における（１）式及び（２）式による変換処理によって、動きベクトルＭＶ１を動きベクトルＭＶ３に補正する補正特性を示している。図７は（１）式におけるｍ，ｎを３，４とした場合の補正特性、図８はｍ，ｎを１，２とした場合の補正特性、図９はｍ，ｎを１，４とした場合の補正特性である。図７～図９より分かるように、動きベクトルＭＶ１の大きさが第１の閾値ｓを超えた部分の（１）式の変換特性によって決まる傾きを小さくするほど（減衰させるほど）、範囲ｈを超えた以降の（２）式の変換特性によって決まる負の傾きが緩やかになる（減衰の程度が小さくなる）。
　図７～図９に示す動きベクトル補正部４による動きベクトルＭＶ１の補正動作によって、補間画素データ生成部５で実際に用いられる動きベクトルＭＶ３は、動きが大きい場合に静止ベクトルに相当する０に向かって収束することになるので、動きベクトル検出部２において動きベクトルの誤検出が発生した場合でも補間画像の視覚的な違和感（補間画像の破綻）を軽減することができる。また、動きベクトルが比較的小さい場合には動きベクトルＭＶ１は補正されずそのまま動きベクトルＭＶ３となるので、通常の動きであれば良好な補間画像を生成することができる。
　本実施形態においては、動きベクトルＭＶ３の特性として一定値ｒとする期間ｈを設けているので、動きベクトル補正部４によって動きベクトルＭＶ１が補正されない状態から補正された状態まで滑らかに切り換わることになる。従って、補間画像の視覚的な違和感を軽減することができる。
　本発明は以上説明した本実施形態に限定されることはなく、本発明の要旨を逸脱しない範囲において種々変更可能である。本発明は本実施形態で説明した装置の機能をコンピュータに実現させるためのプログラムを含むものである。これらのプログラムは、記録媒体から読み取られてコンピュータに取り込まれてもよいし、通信ネットワークを介して伝送されてコンピュータに取り込まれてもよい。
　１　フレームメモリ
　２　動きベクトル検出部
　３　動きベクトル状態判定部
　４　動きベクトル補正部
　５　補間画素データ生成部
　６　フレーム周波数変換部
　４１　動きベクトル値抑制部
　４２　動きベクトル値変換部

Claims (18)

  1. 　入力された映像信号における少なくとも２つの実フレーム内の画素データを用いて、前記２つの実フレーム間に内挿する補間フレームを構成する補間画素データを生成する際に必要な第１の動きベクトルを検出する動きベクトル検出部と、
    　前記第１の動きベクトルの大きさが第１の閾値を越えた場合に前記第１の動きベクトルの大きさを減衰させるよう補正する動きベクトル補正部と、
    　を備えることを特徴とする動きベクトル補正装置。
  2. 　前記動きベクトル補正部は、
    　前記第１の閾値を越えた前記第１の動きベクトルの大きさを所定の割合で減少させて第２の動きベクトルとして出力する動きベクトル値抑制部と、
    　前記第２の動きベクトルの大きさが第２の閾値を越えた場合に前記第２の動きベクトルの大きさが増加しないように減衰させて第３の動きベクトルとして出力する動きベクトル値変換部と、
    　を備えることを特徴とする請求項１記載の動きベクトル補正装置。
  3. 　前記動きベクトル値抑制部は、ｍ，ｎをｍ＜ｎである自然数としたとき、前記第２の動きベクトルを、
    　前記第１の動きベクトルの大きさ×ｍ／ｎ＋前記第１の閾値×（ｎ－ｍ）／ｎ
    なる計算式で求めることを特徴とする請求項２記載の動きベクトル補正装置。
  4. 　前記動きベクトル値変換部は、前記第２の動きベクトルの大きさが前記第２の閾値から前記第２の閾値より大きい第３の閾値までの範囲では第３の動きベクトルの大きさを一定とし、前記第３の閾値を越えた場合に第３の動きベクトルの大きさを所定の割合で減衰させることを特徴とする請求項２または３に記載の動きベクトル補正装置。
  5. 　前記動きベクトル値変換部は、前記第２の動きベクトルの大きさが前記第３の閾値を越えた場合、前記第３の動きベクトルを、
    　２×前記第２の閾値＋（前記第３の閾値－前記第２の閾値）－前記第２の動きベクトルの大きさ
    なる計算式で求めることを特徴とする請求項４記載の動きベクトル補正装置。
  6. 　画面内での前記第１の動きベクトルの発生状態を判定して状態判定値を生成して出力する動きベクトル状態判定部を備え、
    　前記動きベクトル補正部は、前記状態判定値に応じて前記第１の動きベクトルの大きさを減衰させる減衰特性を可変することを特徴とする請求項１～５のいずれか１項に記載の動きベクトル補正装置。
  7. 　前記動きベクトル状態判定部は、画面内で前記第１の動きベクトルがどの程度発生したかを示す動きベクトルの発生量を示す状態判定値を生成することを特徴とする請求項６記載の動きベクトル補正装置。
  8. 　前記動きベクトル状態判定部は、画面内で前記第１の動きベクトルの方向が揃っているかばらついているかの程度を示す動きベクトルの分布状態を示す状態判定値を生成することを特徴とする請求項６記載の動きベクトル補正装置。
  9. 　入力された映像信号における少なくとも２つの実フレーム内の画素データと、請求項１～８のいずれか１項に記載の動きベクトル補正装置によって補正された動きベクトルとを用いて補間画素データを生成する補間画素データ生成部を備えることを特徴とする映像信号処理装置。
  10. 　入力された映像信号における少なくとも２つの実フレーム内の画素データを用いて、前記２つの実フレーム間に内挿する補間フレームを構成する補間画素データを生成する際に必要な第１の動きベクトルを検出する動きベクトル検出ステップと、
    　前記第１の動きベクトルの大きさが第１の閾値を越えた場合に前記第１の動きベクトルの大きさを減衰させるよう補正する動きベクトル補正ステップと、
    　を含むことを特徴とする動きベクトル補正方法。
  11. 　前記動きベクトル補正ステップは、
    　前記第１の閾値を越えた前記第１の動きベクトルの大きさを所定の割合で減少させて第２の動きベクトルとして出力する動きベクトル値抑制ステップと、
    　前記第２の動きベクトルの大きさが第２の閾値を越えた場合に前記第２の動きベクトルの大きさが増加しないように減衰させて第３の動きベクトルとして出力する動きベクトル値変換ステップと、
    　を含むことを特徴とする請求項１０記載の動きベクトル補正方法。
  12. 　前記動きベクトル値抑制ステップは、ｍ，ｎをｍ＜ｎである自然数としたとき、前記第２の動きベクトルを、
    　前記第１の動きベクトルの大きさ×ｍ／ｎ＋前記第１の閾値×（ｎ－ｍ）／ｎ
    なる計算式で求めることを特徴とする請求項１１記載の動きベクトル補正方法。
  13. 　前記動きベクトル値変換ステップは、前記第２の動きベクトルの大きさが前記第２の閾値から前記第２の閾値より大きい第３の閾値までの範囲では第３の動きベクトルの大きさを一定とし、前記第３の閾値を越えた場合に第３の動きベクトルの大きさを所定の割合で減衰させることを特徴とする請求項１１または１２に記載の動きベクトル補正方法。
  14. 　前記動きベクトル値変換ステップは、前記第２の動きベクトルの大きさが前記第３の閾値を越えた場合、前記第３の動きベクトルを、
    　２×前記第２の閾値＋（前記第３の閾値－前記第２の閾値）－前記第２の動きベクトルの大きさ
    なる計算式で求めることを特徴とする請求項１３記載の動きベクトル補正方法。
  15. 　画面内での前記第１の動きベクトルの発生状態を判定して状態判定値を生成する動きベクトル状態判定ステップを含み、
    　前記動きベクトル補正ステップは、前記状態判定値に応じて前記第１の動きベクトルの大きさを減衰させる減衰特性を可変することを特徴とする請求項１０～１４のいずれか１項に記載の動きベクトル補正方法。
  16. 　前記動きベクトル状態判定ステップは、画面内で前記第１の動きベクトルがどの程度発生したかを示す動きベクトルの発生量を示す状態判定値を生成することを特徴とする請求項１５記載の動きベクトル補正方法。
  17. 　前記動きベクトル状態判定ステップは、画面内で前記第１の動きベクトルの方向が揃っているかばらついているかの程度を示す動きベクトルの分布状態を示す状態判定値を生成することを特徴とする請求項１５記載の動きベクトル補正方法。
  18. 　入力された映像信号における少なくとも２つの実フレーム内の画素データと、請求項１０～１７のいずれか１項に記載の動きベクトル補正方法によって補正された動きベクトルとを用いて補間画素データを生成する補間画素データ生成ステップを含むことを特徴とする映像信号処理方法。
PCT/JP2011/055520 2010-05-13 2011-03-09 動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法 WO2011142169A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201180023845.7A CN102893601B (zh) 2010-05-13 2011-03-09 运动矢量修正装置及方法、以及视频信号处理装置及方法
EP11780426.0A EP2533523B1 (en) 2010-05-13 2011-03-09 Motion-vector correction device and method and video-signal processing device and method
KR1020127017973A KR101316612B1 (ko) 2010-05-13 2011-03-09 움직임 벡터 보정 장치 및 방법, 그리고, 영상 신호 처리 장치 및 방법
US13/521,390 US9288432B2 (en) 2010-05-13 2011-03-09 Motion vector correction device and method and video signal processing apparatus and method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010110962A JP4893847B2 (ja) 2010-05-13 2010-05-13 動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法
JP2010-110962 2010-05-13

Publications (1)

Publication Number Publication Date
WO2011142169A1 true WO2011142169A1 (ja) 2011-11-17

Family

ID=44914227

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/055520 WO2011142169A1 (ja) 2010-05-13 2011-03-09 動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法

Country Status (6)

Country Link
US (1) US9288432B2 (ja)
EP (1) EP2533523B1 (ja)
JP (1) JP4893847B2 (ja)
KR (1) KR101316612B1 (ja)
CN (1) CN102893601B (ja)
WO (1) WO2011142169A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5381930B2 (ja) * 2010-08-20 2014-01-08 株式会社Ｊｖｃケンウッド 映像制御装置および映像制御方法
SG11201400429RA (en) 2011-09-08 2014-04-28 Paofit Holdings Pte Ltd System and method for visualizing synthetic objects withinreal-world video clip
JP2013201607A (ja) * 2012-03-26 2013-10-03 Jvc Kenwood Corp 動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法
WO2015183194A1 (en) 2014-05-30 2015-12-03 Paofit Technology Pte Ltd Systems and methods for motion-vector-aided video interpolation using real-time smooth video playback speed variation
US9704298B2 (en) 2015-06-23 2017-07-11 Paofit Holdings Pte Ltd. Systems and methods for generating 360 degree mixed reality environments
CN105306866A (zh) * 2015-10-27 2016-02-03 青岛海信电器股份有限公司 帧率转换方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08508138A (ja) * 1992-07-03 1996-08-27 スネル・アンド・ウィルコックス・リミテッド 動き補正を伴う映像信号処理
JP2914448B2 (ja) * 1997-06-25 1999-06-28 日本電信電話株式会社 動きベクトル予測符号化方法および動きベクトル復号方法、予測符号化装置および復号装置、並びに、動きベクトルの予測符号化プログラムおよび復号プログラムを記録した記録媒体
JP2006331136A (ja) 2005-05-27 2006-12-07 Victor Co Of Japan Ltd 動きベクトル検出装置
JP3974290B2 (ja) * 1999-07-22 2007-09-12 池上通信機株式会社 撮像システム
JP2008067205A (ja) * 2006-09-08 2008-03-21 Toshiba Corp フレーム補間回路、フレーム補間方法、表示装置
JP4384231B2 (ja) * 2008-03-28 2009-12-16 株式会社東芝 動き予測装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2231752B (en) * 1989-04-27 1993-08-04 Sony Corp Motion dependent video signal processing
GB2252467B (en) * 1991-02-04 1994-11-23 Sony Broadcast & Communication Television standards converters
JP3898606B2 (ja) * 2002-09-12 2007-03-28 株式会社東芝 動きベクトル検出方法及び装置並びにフレーム補間画像作成方法及び装置
EP1422928A3 (en) * 2002-11-22 2009-03-11 Panasonic Corporation Motion compensated interpolation of digital video signals
KR100995398B1 (ko) * 2004-01-20 2010-11-19 삼성전자주식회사 수직 및 수평 방향의 패턴을 고려한 전역 움직임 보상순차주사화 방법
JP4615508B2 (ja) * 2006-12-27 2011-01-19 シャープ株式会社 画像表示装置及び方法、画像処理装置及び方法
US8144778B2 (en) 2007-02-22 2012-03-27 Sigma Designs, Inc. Motion compensated frame rate conversion system and method
US8331710B2 (en) * 2007-11-06 2012-12-11 Sony Corporation Image processing apparatus and method, learning apparatus and method, and program
JP4309453B2 (ja) * 2007-12-26 2009-08-05 株式会社東芝 補間フレーム生成装置、補間フレーム生成方法及び放送受信装置
WO2009148412A1 (en) * 2008-06-06 2009-12-10 Agency For Science, Technology And Research Methods and devices for estimating motion in a plurality of frames

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08508138A (ja) * 1992-07-03 1996-08-27 スネル・アンド・ウィルコックス・リミテッド 動き補正を伴う映像信号処理
JP2914448B2 (ja) * 1997-06-25 1999-06-28 日本電信電話株式会社 動きベクトル予測符号化方法および動きベクトル復号方法、予測符号化装置および復号装置、並びに、動きベクトルの予測符号化プログラムおよび復号プログラムを記録した記録媒体
JP3974290B2 (ja) * 1999-07-22 2007-09-12 池上通信機株式会社 撮像システム
JP2006331136A (ja) 2005-05-27 2006-12-07 Victor Co Of Japan Ltd 動きベクトル検出装置
JP2008067205A (ja) * 2006-09-08 2008-03-21 Toshiba Corp フレーム補間回路、フレーム補間方法、表示装置
JP4384231B2 (ja) * 2008-03-28 2009-12-16 株式会社東芝 動き予測装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2533523A4 *

Also Published As

Publication number Publication date
US9288432B2 (en) 2016-03-15
CN102893601B (zh) 2015-09-16
EP2533523A4 (en) 2014-02-19
CN102893601A (zh) 2013-01-23
EP2533523B1 (en) 2016-02-24
KR101316612B1 (ko) 2013-10-15
JP2011239325A (ja) 2011-11-24
US20120288005A1 (en) 2012-11-15
KR20120104317A (ko) 2012-09-20
JP4893847B2 (ja) 2012-03-07
EP2533523A1 (en) 2012-12-12

Similar Documents

Publication Publication Date Title
WO2011142169A1 (ja) 動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法
US8189941B2 (en) Image processing device, display device, image processing method, and program
US8947550B2 (en) Image processing apparatus with frame conversion, and method of controlling same
US20090273707A1 (en) Frame rate conversion apparatus, frame rate conversion method, and computer-readable storage medium
JP5350501B2 (ja) 映像処理装置及び映像処理方法
JP5192087B2 (ja) 画像処理装置及び画像処理方法
JP4273114B2 (ja) ジャダ検出装置及びこれを用いるインターレース解除装置、並びにその方法
KR101069712B1 (ko) 에지 방향성의 가중치를 이용한 필드내 주사선 보간 방법 및 그 장치
WO2014129528A1 (ja) 映像信号処理装置及び方法
JP5123643B2 (ja) 映像処理装置
US9324131B1 (en) Method and apparatus for motion adaptive deinterlacing with reduced artifacts
JP5300607B2 (ja) 映像処理装置及びその制御方法
JP5253077B2 (ja) 映像処理装置およびその方法
JP2010103643A (ja) 画像処理装置および画像表示装置
JP2013201607A (ja) 動きベクトル補正装置及び方法、並びに、映像信号処理装置及び方法
JP2008182476A (ja) 変化予測値算出装置及びｉｐ変換処理装置
JP2010273197A (ja) 走査線補間回路
JP2011097339A (ja) 映像処理装置及びその制御方法
JP5411658B2 (ja) 映像処理装置、映像処理方法、及びプログラム
JP5891913B2 (ja) 映像信号処理装置及び方法
JP4356468B2 (ja) 映像信号処理装置
JP5880119B2 (ja) 映像信号処理装置及び方法
JP2013074384A (ja) 画像処理装置及び画像処理方法
JP2011176664A (ja) プルダウン検出装置
US20040165790A1 (en) Image data processing apparatus

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201180023845.7

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11780426

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 13521390

Country of ref document: US

ENP Entry into the national phase

Ref document number: 20127017973

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 2011780426

Country of ref document: EP

NENP Non-entry into the national phase

Ref country code: DE