JP5212252B2 - Frame rate conversion apparatus and method - Google Patents

Frame rate conversion apparatus and method Download PDF

Info

Publication number
JP5212252B2
JP5212252B2 JP2009113434A JP2009113434A JP5212252B2 JP 5212252 B2 JP5212252 B2 JP 5212252B2 JP 2009113434 A JP2009113434 A JP 2009113434A JP 2009113434 A JP2009113434 A JP 2009113434A JP 5212252 B2 JP5212252 B2 JP 5212252B2
Authority
JP
Japan
Prior art keywords
pixel data
frames
motion vector
frame
interpolation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009113434A
Other languages
Japanese (ja)
Other versions
JP2010263468A (en
Inventor
真季 小泉
英樹 相羽
栄治 松本
智之 宍戸
浩史 野口
篤史 吉田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Priority to JP2009113434A priority Critical patent/JP5212252B2/en
Publication of JP2010263468A publication Critical patent/JP2010263468A/en
Application granted granted Critical
Publication of JP5212252B2 publication Critical patent/JP5212252B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Television Systems (AREA)

Description

本発明は、映像信号の実フレーム間に補間フレームを内挿してフレーム数を増大させ、フレームレート（フレーム周波数）を変換するフレームレート変換装置及び方法に関する。   The present invention relates to a frame rate converting apparatus and method for converting a frame rate (frame frequency) by interpolating interpolation frames between real frames of a video signal to increase the number of frames.

液晶パネルを用いた画像表示装置で動画像を表示すると残像が生じやすい。そこで、残像を低減させるため、映像信号の実フレーム間に補間フレームを内挿してフレーム数を増大させ、例えば６０Ｈｚのフレームレートを２倍の１２０Ｈｚまたはそれ以上の周波数に変換して画像表示することが行われている。フレームレート変換装置においては、画像の動きベクトルを検出し、動きベクトルを用いて各補間画素を生成し、実フレーム間に内挿する補間フレームを生成する。   When a moving image is displayed on an image display device using a liquid crystal panel, an afterimage tends to occur. Therefore, in order to reduce afterimages, interpolation frames are interpolated between real frames of the video signal to increase the number of frames. For example, the frame rate of 60 Hz is doubled to 120 Hz or higher to display an image. Has been done. In the frame rate conversion apparatus, a motion vector of an image is detected, each interpolation pixel is generated using the motion vector, and an interpolation frame to be interpolated between actual frames is generated.

画像表示装置にフレームレート変換装置を搭載した場合、補間フレームを生成する信号処理による遅延時間が発生する。従って、フレームレート変換装置を搭載した画像表示装置においては、映像信号の各フレームが画面に表示されるタイミングは、フレームレート変換装置を搭載しない画像表示装置よりも遅くなる。リアルタイム処理が求められる場合とリアルタイム処理が求められない場合とで、動きベクトルの検出方法を切り換える映像信号処理装置が特許文献１に記載されている。   When a frame rate conversion device is mounted on an image display device, a delay time is generated due to signal processing for generating an interpolation frame. Therefore, in an image display device equipped with a frame rate conversion device, the timing at which each frame of the video signal is displayed on the screen is later than in an image display device not equipped with a frame rate conversion device. Japanese Patent Application Laid-Open No. 2004-228561 describes a video signal processing apparatus that switches a motion vector detection method between when real-time processing is required and when real-time processing is not required.

特開２００６−９２３９９号公報JP 2006-92399 A

近年、画像表示装置における高画質化の要求はますます高まっている。フレームレート変換装置において、動きベクトルの誤検出が発生した場合には補間フレームは誤補間の補間画素を含むことになる。従って、高画質のフレームレート変換画像を得るには、動きベクトルの誤検出を極力少なくすることが必要である。
ところで、画像表示装置にゲーム機器を接続し、画像表示装置にゲーム機器の画像を表示させてゲームを行うことがある。画像表示装置がフレームレート変換装置を搭載する場合、ゲーム機器に対する操作入力の入力タイミングと、その操作入力に対応した画像の表示タイミングとの間には時間的なずれが生じる。 In recent years, there has been an increasing demand for higher image quality in image display devices. In the frame rate conversion apparatus, when an erroneous detection of a motion vector occurs, the interpolation frame includes erroneously interpolated interpolation pixels. Therefore, in order to obtain a high-quality frame rate converted image, it is necessary to minimize false detection of motion vectors as much as possible.
A game may be played by connecting a game device to the image display device and displaying an image of the game device on the image display device. When the image display device is equipped with a frame rate conversion device, a time lag occurs between the input timing of the operation input to the game device and the display timing of the image corresponding to the operation input.

一般的には、高画質のフレームレート変換画像を得ようとすれば動きベクトルの検出精度（画像の補間精度）を上げることが必要となり、映像信号の各フレームが画面に表示されるタイミングの遅延時間が増大する。しかしながら、画像表示装置をゲーム機器の画像を表示させるモニタとして使用する場合には、遅延時間は極力少ない方が好ましい。フレームレート変換画像を高画質にしようとすると遅延時間が大きくなり、遅延時間を少なくしようとすると高画質にしにくいというトレードオフの関係にある。そこで、レスポンスの速さ（少ない遅延時間）を優先する場合と画質を優先する場合との双方に対応することができる画像表示装置が求められる。   In general, to obtain a high-quality frame rate converted image, it is necessary to improve the motion vector detection accuracy (image interpolation accuracy), and the delay in the timing at which each frame of the video signal is displayed on the screen Time increases. However, when the image display device is used as a monitor for displaying an image of a game machine, it is preferable that the delay time is as short as possible. There is a trade-off relationship that the delay time increases when attempting to improve the frame rate converted image, and that it is difficult to achieve high image quality when the delay time is decreased. Therefore, an image display apparatus that can cope with both the case where priority is given to the speed of response (small delay time) and the case where priority is given to image quality is required.

本発明はこのような要望に対応するためになされたものであり、レスポンスの速さ（少ない遅延時間）を優先する場合と画質を優先する場合との双方に対応することができ、両者を選択することができるフレームレート変換装置及び方法を提供することを目的とする。   The present invention has been made to meet such a demand, and can respond to both cases where priority is given to the speed of response (small delay time) and priority to image quality. An object of the present invention is to provide an apparatus and method for converting a frame rate.

本発明は、上述した従来の技術の課題を解決するため、入力映像信号の複数のフレームそれぞれで、補間画素データを生成する際に用いる動きベクトルを検出するための複数の画素データを含む所定の領域が探索範囲として設定され、前記複数のフレームそれぞれの探索範囲に含まれる画素データを生成する画素データ生成部（２〜３６）と、２フレームの探索範囲に含まれる画素データを用いて動きベクトルを検出する第１の検出方法と、前記２フレームよりも時間的に前または後のフレームを含む３フレーム以上の探索範囲に含まれる画素データを用いて動きベクトルを検出する第２の検出方法とのいずれかで動きベクトルを検出する動きベクトル検出部（３７）と、前記第１の検出方法により検出した動きベクトルと、前記２フレームの探索範囲に含まれる画素データとを用いて補間画素データを生成する第１の補間画素データ生成方法と、前記第２の検出方法により検出した動きベクトルと、少なくとも前記２フレームの探索範囲に含まれる画素データとを用いて補間画素データを生成する第２の補間画素データ生成方法とのいずれかで補間画素データを生成する補間画素データ生成部（３８）と、前記第１の補間画素データ生成方法により順次生成した補間画素データによって補間フレームを生成し、前記２フレーム間に内挿して前記入力映像信号が有するフレームレートより高いフレームレートを有する映像信号として出力する第１のフレーム画像生成方法と、前記第２の補間画素データ生成方法により順次生成した補間画素データによって補間フレームを生成し、前記２フレーム間に内挿して前記入力映像信号が有するフレームレートより高いフレームレートを有する映像信号として出力する第２のフレーム画像生成方法とのいずれかでフレーム画像を生成するフレーム画像生成部（３９）と、前記動きベクトル検出部が前記第１の検出方法で動きベクトルを検出し、前記補間画素データ生成部が前記第１の補間画素データ生成方法で補間画素データを生成し、前記フレーム画像生成部が前記第１のフレーム画像生成方法でフレーム画像を生成する第１のモードと、前記動きベクトル検出部が前記第２の検出方法で動きベクトルを検出し、前記補間画素データ生成部が前記第２の補間画素データ生成方法で補間画素データを生成し、前記フレーム画像生成部が前記第２のフレーム画像生成方法でフレーム画像を生成する第２のモードとを選択的に切り換えるモード制御部（４１）とを備えることを特徴とするフレームレート変換装置を提供する。
この構成において、前記モード制御部は、前記第１のモードのとき、前記画素データ生成部における前記２フレームの探索範囲に含まれる画素データ以外の画素データを生成する回路部分を非動作とするよう制御することが好ましい。 In order to solve the above-described problems of the related art, the present invention provides a predetermined data including a plurality of pixel data for detecting a motion vector used for generating interpolation pixel data in each of a plurality of frames of an input video signal. An area is set as a search range, a pixel data generation unit (2 to 36) that generates pixel data included in the search range of each of the plurality of frames, and a motion vector using pixel data included in the search range of two frames A first detection method for detecting a motion vector, and a second detection method for detecting a motion vector using pixel data included in a search range of three or more frames including a frame temporally before or after the two frames. A motion vector detection unit (37) for detecting a motion vector in any of the above, a motion vector detected by the first detection method, and the two frames A first interpolation pixel data generation method for generating interpolation pixel data using pixel data included in the search range, a motion vector detected by the second detection method, and at least the two frames included in the search range An interpolation pixel data generation unit (38) for generating interpolation pixel data in any one of a second interpolation pixel data generation method for generating interpolation pixel data using pixel data, and the first interpolation pixel data generation method A first frame image generation method for generating an interpolation frame from the interpolation pixel data sequentially generated by step (a) and outputting as a video signal having a frame rate higher than that of the input video signal by interpolating between the two frames; An interpolation frame is generated from the interpolation pixel data sequentially generated by the second interpolation pixel data generation method. A frame image generation unit (39) for generating a frame image by any one of the second frame image generation methods for interpolating between two frames and outputting as a video signal having a frame rate higher than that of the input video signal The motion vector detection unit detects a motion vector by the first detection method, the interpolation pixel data generation unit generates interpolation pixel data by the first interpolation pixel data generation method, and the frame image generation unit A first mode in which a frame image is generated by the first frame image generation method, the motion vector detection unit detects a motion vector by the second detection method, and the interpolation pixel data generation unit is the second mode. Interpolated pixel data is generated by the interpolated pixel data generating method, and the frame image generating unit generates a frame image by the second frame image generating method And a mode control unit (41) that selectively switches between the second mode for generating the frame rate.
In this configuration, in the first mode, the mode control unit deactivates a circuit portion that generates pixel data other than the pixel data included in the search range of the two frames in the pixel data generation unit. It is preferable to control.

また、本発明は、上述した従来の技術の課題を解決するため、入力映像信号の複数のフレームそれぞれで、補間画素データを生成する際に用いる動きベクトルを検出するための複数の画素データを含む所定の領域が探索範囲として設定され、前記複数のフレームそれぞれの探索範囲に含まれる画素データを生成する画素データ生成ステップと、第１のモードのとき、２フレームの探索範囲に含まれる画素データを用いて動きベクトルを検出する第１の検出方法で動きベクトルを検出し、第２のモードのとき、前記２フレームよりも時間的に前または後のフレームを含む３フレーム以上の探索範囲に含まれる画素データを用いて動きベクトルを検出する第２の検出方法で動きベクトルを検出する動きベクトル検出ステップと、前記第１のモードのとき、前記第１の検出方法により検出した動きベクトルと、前記２フレームの探索範囲に含まれる画素データとを用いて補間画素データを生成する第１の補間画素データ生成方法で補間画素データを生成し、前記第２のモードのとき、前記第２の検出方法により検出した動きベクトルと、少なくとも前記２フレームの探索範囲に含まれる画素データとを用いて補間画素データを生成する第２の補間画素データ生成方法で補間画素データを生成する補間画素データ生成ステップと、前記第１のモードのとき、前記第１の補間画素データ生成方法により順次生成した補間画素データによって補間フレームを生成し、前記２フレーム間に内挿して前記入力映像信号が有するフレームレートより高いフレームレートを有する映像信号として出力する第１のフレーム画像生成方法でフレーム画像を生成し、前記第２の補間画素データ生成方法により順次生成した補間画素データによって補間フレームを生成し、前記第２のモードのとき、前記２フレーム間に内挿して前記入力映像信号が有するフレームレートより高いフレームレートを有する映像信号として出力する第２のフレーム画像生成方法でフレーム画像を生成するフレーム画像生成ステップとを含むことを特徴とするフレームレート変換方法を提供する。
この構成において、前記第１のモードのとき、前記画素データ生成ステップにて前記２フレームの探索範囲に含まれる画素データ以外の画素データを生成しないことが好ましい。 The present invention also includes a plurality of pixel data for detecting a motion vector used when generating interpolation pixel data in each of a plurality of frames of an input video signal in order to solve the above-described problems of the conventional technology. A predetermined area is set as a search range, a pixel data generation step for generating pixel data included in the search range of each of the plurality of frames, and in the first mode, pixel data included in the search range of 2 frames The motion vector is detected by the first detection method using the motion vector, and in the second mode, the motion vector is included in a search range of three frames or more including a frame temporally before or after the two frames. A motion vector detecting step for detecting a motion vector by a second detection method for detecting a motion vector using pixel data; and the first mode. Interpolated pixel data is generated by a first interpolated pixel data generating method that generates interpolated pixel data using the motion vector detected by the first detecting method and the pixel data included in the search range of the two frames. In the second mode, a second interpolation pixel that generates interpolation pixel data using the motion vector detected by the second detection method and pixel data included in at least the search range of the two frames. An interpolation pixel data generation step for generating interpolation pixel data by a data generation method; and in the first mode, an interpolation frame is generated by interpolation pixel data sequentially generated by the first interpolation pixel data generation method; Interpolated between frames and output as a video signal having a frame rate higher than the frame rate of the input video signal A frame image is generated by one frame image generation method, and an interpolation frame is generated by interpolation pixel data sequentially generated by the second interpolation pixel data generation method. In the second mode, an internal frame is generated between the two frames. And a frame image generation step of generating a frame image by a second frame image generation method for outputting as a video signal having a frame rate higher than the frame rate of the input video signal. I will provide a.
In this configuration, in the first mode, it is preferable that pixel data other than pixel data included in the search range of the two frames is not generated in the pixel data generation step.

本発明のフレームレート変換装置及び方法によれば、レスポンスの速さ（少ない遅延時間）を優先する場合と画質を優先する場合との双方に対応することができ、両者を選択することが可能となる。   According to the frame rate conversion apparatus and method of the present invention, both the case where priority is given to the speed of response (small delay time) and the case where priority is given to image quality can be handled, and both can be selected. Become.

本発明のフレームレート変換装置の一実施形態を示すブロック図である。It is a block diagram which shows one Embodiment of the frame rate conversion apparatus of this invention. 本発明のフレームレート変換装置の一実施形態の動作を説明するための図である。It is a figure for demonstrating operation | movement of one Embodiment of the frame rate conversion apparatus of this invention.

以下、本発明のフレームレート変換装置及び方法について、添付図面を参照して説明する。図１において、入力端子１には、フレームレート変換の対象となっている映像信号を構成する各画素データが順次入力される。入力された画素データＰ０はフレームメモリ２に入力されて１フレーム期間遅延され、画素データＰ１として出力される。画素データＰ１はフレームメモリ３に入力されて１フレーム期間遅延され、画素データＰ２として出力される。画素データＰ２はフレームメモリ４に入力されて１フレーム期間遅延され、画素データＰ３として出力される。   Hereinafter, a frame rate conversion apparatus and method according to the present invention will be described with reference to the accompanying drawings. In FIG. 1, each pixel data constituting a video signal subject to frame rate conversion is sequentially input to an input terminal 1. The input pixel data P0 is input to the frame memory 2, delayed by one frame period, and output as pixel data P1. Pixel data P1 is input to the frame memory 3, delayed by one frame period, and output as pixel data P2. Pixel data P2 is input to the frame memory 4, delayed by one frame period, and output as pixel data P3.

また、画素データＰ０はラインメモリ５，６に順次入力されて１ライン期間ずつ遅延される。画素データＰ０は遅延器１３，１４に順次入力されて１画素期間ずつ遅延される。ラインメモリ５の出力は遅延器１５，１６に順次入力されて１画素期間ずつ遅延される。ラインメモリ６の出力は遅延器１７，１８に順次入力されて１画素期間ずつ遅延される。フレームメモリ２より出力された画素データＰ１はラインメモリ７，８に順次入力されて１ライン期間ずつ遅延される。画素データＰ１は遅延器１９，２０に順次入力されて１画素期間ずつ遅延される。ラインメモリ７の出力は遅延器２１，２２に順次入力されて１画素期間ずつ遅延される。ラインメモリ８の出力は遅延器２３，２４に順次入力されて１画素期間ずつ遅延される。   The pixel data P0 is sequentially input to the line memories 5 and 6 and delayed by one line period. Pixel data P0 is sequentially input to delay devices 13 and 14 and delayed by one pixel period. The output of the line memory 5 is sequentially input to the delay units 15 and 16 and delayed by one pixel period. The output of the line memory 6 is sequentially input to the delay units 17 and 18 and delayed by one pixel period. Pixel data P1 output from the frame memory 2 is sequentially input to the line memories 7 and 8 and delayed by one line period. The pixel data P1 is sequentially input to the delay devices 19 and 20, and is delayed by one pixel period. The output of the line memory 7 is sequentially input to the delay units 21 and 22 and delayed by one pixel period. The output of the line memory 8 is sequentially input to the delay units 23 and 24 and delayed by one pixel period.

フレームメモリ３より出力された画素データＰ２はラインメモリ９，１０に順次入力されて１ライン期間ずつ遅延される。画素データＰ２は遅延器２５，２６に順次入力されて１画素期間ずつ遅延される。ラインメモリ９の出力は遅延器２７，２８に順次入力されて１画素期間ずつ遅延される。ラインメモリ１０の出力は遅延器２９，３０に順次入力されて１画素期間ずつ遅延される。フレームメモリ４より出力された画素データＰ３はラインメモリ１１，１２に順次入力されて１ライン期間ずつ遅延される。画素データＰ３は遅延器３１，３２に順次入力されて１画素期間ずつ遅延される。ラインメモリ１１の出力は遅延器３３，３４に順次入力されて１画素期間ずつ遅延される。ラインメモリ１２の出力は遅延器３５，３６に順次入力されて１画素期間ずつ遅延される。   The pixel data P2 output from the frame memory 3 is sequentially input to the line memories 9 and 10 and delayed by one line period. Pixel data P2 is sequentially input to delay devices 25 and 26 and delayed by one pixel period. The output of the line memory 9 is sequentially input to the delay units 27 and 28 and delayed by one pixel period. The output of the line memory 10 is sequentially input to the delay devices 29 and 30 and delayed by one pixel period. Pixel data P3 output from the frame memory 4 is sequentially input to the line memories 11 and 12 and delayed by one line period. The pixel data P3 is sequentially input to the delay units 31 and 32 and delayed by one pixel period. The output of the line memory 11 is sequentially input to the delay units 33 and 34 and delayed by one pixel period. The output of the line memory 12 is sequentially input to the delay units 35 and 36 and delayed by one pixel period.

以上のようにして、遅延器１３〜１８からは現在フレームＦ０の領域Ａ０に含まれる９個の画素データが出力され、遅延器１９〜２４からは現在フレームＦ０に対して１フレーム前のフレームＦ１の領域Ａ１に含まれる９個の画素データが出力される。遅延器２５〜３０からは現在フレームＦ０に対して２フレーム前のフレームＦ２の領域Ａ２に含まれる９個の画素データが出力され、延器３１〜３６からは現在フレームＦ０に対して３フレーム前のフレームＦ３の領域Ａ３に含まれる９個の画素データが出力される。図２（Ａ），（Ｂ）に、フレームＦ０，Ｆ１，Ｆ２，Ｆ３及び領域Ａ０，Ａ１，Ａ２，Ａ３を概念的に示している。   As described above, the nine pixel data included in the area A0 of the current frame F0 are output from the delay units 13 to 18, and the frame F1 one frame before the current frame F0 is output from the delay units 19 to 24. Nine pixel data included in the area A1 is output. Nine pixel data included in the area A2 of the frame F2 that is two frames before the current frame F0 is output from the delay units 25 to 30, and the extenders 31 to 36 are three frames before the current frame F0. Nine pixel data included in the area A3 of the frame F3 is output. 2A and 2B conceptually show the frames F0, F1, F2, and F3 and the areas A0, A1, A2, and A3.

図２（Ａ），（Ｂ）において、領域Ａ０〜Ａ３に含まれる画素データは、補間フレームＦ１０，Ｆ２１の各補間画素データＰｉを生成する際に必要となる動きベクトルを求めるために使用される。領域Ａ０〜Ａ３は、動きベクトルの探索範囲である。このように、図１の入力端子１に順次入力される映像信号の複数のフレームそれぞれには、図２（Ａ），（Ｂ）に示すように、補間画素データＰｉを生成する際に用いる動きベクトルを検出するための複数の画素データを含む所定の領域が探索範囲として設定される。図１におけるフレームメモ２〜４，ラインメモリ５〜１２，遅延器１３〜３６の回路部分は、複数のフレームそれぞれの探索範囲に含まれる画素データを生成する画素データ生成部となっている。   2A and 2B, the pixel data included in the regions A0 to A3 are used to obtain a motion vector necessary for generating the interpolation pixel data Pi of the interpolation frames F10 and F21. . Regions A0 to A3 are motion vector search ranges. As described above, as shown in FIGS. 2A and 2B, for each of a plurality of frames of the video signal sequentially input to the input terminal 1 in FIG. 1, the motion used when generating the interpolated pixel data Pi. A predetermined area including a plurality of pixel data for detecting a vector is set as a search range. The circuit portions of the frame memos 2 to 4, the line memories 5 to 12, and the delay units 13 to 36 in FIG. 1 are pixel data generation units that generate pixel data included in the search ranges of a plurality of frames.

本実施形態においては、後述するように、図２（Ａ）に示す２つのフレームＦ０，Ｆ１の領域Ａ０，Ａ１に含まれる画素データを用いて動きベクトルを検出する第１の検出方法と、図２（Ｂ）に示す４つのフレームＦ０〜Ｆ３の領域Ａ０〜Ａ３に含まれる画素データを用いて動きベクトルを検出する第２の検出方法とを切り換えるよう構成されている。本実施形態では、第２の検出方法は４フレームＦ０〜Ｆ３の領域Ａ０〜Ａ３を探索範囲としたが、フレームＦ１，Ｆ２と、フレームＦ１，Ｆ２よりも時間的に前のフレームＦ３との３フレームの領域Ａ１〜Ａ３を探索範囲としてもよく、フレームＦ１，Ｆ２と、フレームＦ１，Ｆ２よりも時間的に後のフレームＦ０との３フレームの領域Ａ０〜Ａ２を探索範囲としてもよい。さらには、５フレーム以上の領域を探索範囲としてもよい。即ち、第１の検出方法では２フレームの領域を探索範囲とし、第２の検出方法では３フレーム以上の領域を探索範囲とすればよい。   In the present embodiment, as will be described later, a first detection method for detecting a motion vector using pixel data included in areas A0 and A1 of two frames F0 and F1 shown in FIG. The second detection method for detecting a motion vector using pixel data included in areas A0 to A3 of the four frames F0 to F3 shown in 2 (B) is switched. In the present embodiment, the second detection method uses the areas A0 to A3 of the four frames F0 to F3 as the search range, but 3 of the frames F1 and F2 and the frame F3 temporally before the frames F1 and F2 are used. The frame areas A1 to A3 may be set as the search range, and the three frame areas A0 to A2 including the frames F1 and F2 and the frame F0 temporally later than the frames F1 and F2 may be set as the search range. Furthermore, an area of 5 frames or more may be set as the search range. That is, in the first detection method, an area of 2 frames may be set as a search range, and in the second detection method, an area of 3 frames or more may be set as a search range.

ここでは簡略化のため、動きベクトルの探索範囲に含まれる画素データを９個としたが、実際にはさらに多くの画素データを含む領域を探索範囲とする。また、図２（Ｂ）の場合には、フレームＦ０，Ｆ３における探索範囲は、フレームＦ１，Ｆ２における探索範囲よりも広くする必要があるが、簡略化のためフレームＦ０〜Ｆ３の探索範囲を全て同じとしている。従って、実際には、図１において、さらに多くのラインメモリや遅延器を必要とする。本実施形態では、全てのフレームの探索範囲を９個の画素データを含む領域Ａ０〜Ａ３として説明することとする。   Here, for simplification, the number of pixel data included in the search range of the motion vector is set to nine. However, an area including more pixel data is actually set as the search range. In the case of FIG. 2B, the search range in the frames F0 and F3 needs to be wider than the search range in the frames F1 and F2. It is the same. Therefore, actually, more line memories and delay devices are required in FIG. In the present embodiment, the search range of all frames is described as regions A0 to A3 including nine pixel data.

図１において、端子４０には、レスポンスの速さを優先するレスポンス優先モードと画質を優先する画質優先モードとを切り換えるためのモード切換信号が入力される。このモード切換信号は、ユーザが図示していない操作部を操作していずれかのモードを選択することによって発生させたものでもよいし、画面に表示させる映像信号に応じて自動的に発生させたものでもよい。例えば、高画質表示が求められる、放送波信号より得た映像信号やハードディスクドライブまたは光ディスクのような記録媒体に記録された映像信号を再生する再生装置によって再生されたた映像信号を表示する場合には画質優先モードとし、ゲーム機器からの映像信号を表示する場合にはレスポンス優先モードとすることが好ましい。   In FIG. 1, a terminal 40 receives a mode switching signal for switching between a response priority mode that prioritizes response speed and an image quality priority mode that prioritizes image quality. This mode switching signal may be generated by a user operating an operation unit (not shown) to select one of the modes, or automatically generated according to a video signal to be displayed on the screen. It may be a thing. For example, in the case of displaying a video signal reproduced by a reproduction device that reproduces a video signal obtained from a broadcast wave signal or a video signal recorded on a recording medium such as a hard disk drive or an optical disk, which requires high-quality display. Is preferably an image quality priority mode, and is preferably a response priority mode when displaying a video signal from a game device.

画像表示装置は、ゲーム機器からの映像信号を表示する場合に適切な画質に調整するゲームモードを備えていることが多い。ゲームモードを選択した場合にレスポンス優先モードとし、それ以外で画質優先モードとしてもよい。モード切換信号は、例えば、レスポンス優先モードを示す“０”と、画質優先モードを示す“１”であるとする。   In many cases, the image display device has a game mode for adjusting to an appropriate image quality when displaying a video signal from a game device. The response priority mode may be selected when the game mode is selected, and the image quality priority mode may be set otherwise. For example, it is assumed that the mode switching signal is “0” indicating the response priority mode and “1” indicating the image quality priority mode.

端子４０に入力されたモード切換信号はモード制御部４１に入力される。モード制御部４１は入力されたモード切換信号に応じて動きベクトル検出部３７と補間画素データ生成部３８とフレーム画像生成部３９とを制御する。また、より好ましくは、モード制御部４１は、動きベクトル検出部３７と補間画素データ生成部３８とフレーム画像生成部３９に加えて、モード切換信号に応じて破線で囲んだフレームメモリ３，４とラインメモリ９〜１２と遅延器２５〜３６の部分を制御する。   The mode switching signal input to the terminal 40 is input to the mode control unit 41. The mode control unit 41 controls the motion vector detection unit 37, the interpolation pixel data generation unit 38, and the frame image generation unit 39 according to the input mode switching signal. More preferably, in addition to the motion vector detection unit 37, the interpolation pixel data generation unit 38, and the frame image generation unit 39, the mode control unit 41 includes frame memories 3 and 4 surrounded by a broken line according to the mode switching signal. The line memories 9 to 12 and delay units 25 to 36 are controlled.

まず、モード制御部４１にモード切換信号がレスポンス優先モードを示す“０”が入力された場合の動作について説明する。動きベクトル検出部３７は、モード制御部４１による制御に基づいて、図２（Ａ）に示すように、２つのフレームＦ０，Ｆ１の領域Ａ０，Ａ１の画素データを用いて、フレームＦ０，Ｆ１間に内挿する補間画素データＰｉを生成するために必要な動きベクトルＭＶを検出する。動きベクトル検出部３７は、補間画素データＰｉを通る複数の方向の画素の差分値が最も小さい方向を動きベクトルＭＶとする。   First, an operation when the mode switching signal “0” indicating the response priority mode is input to the mode control unit 41 will be described. Based on the control by the mode control unit 41, the motion vector detection unit 37 uses the pixel data of the areas A0 and A1 of the two frames F0 and F1, as shown in FIG. A motion vector MV necessary for generating the interpolation pixel data Pi to be interpolated into is detected. The motion vector detection unit 37 sets the direction having the smallest difference value of pixels in a plurality of directions passing through the interpolation pixel data Pi as the motion vector MV.

動きベクトルＭＶは補間画素データ生成部３８に入力される。補間画素データ生成部３８は、モード制御部４１による制御に基づいて、動きベクトルＭＶと、動きベクトルＭＶの方向に対応する領域Ａ０，Ａ１の画素データとを用いて、補間画素データＰｉを生成する。このように、補間画素データ生成部３８は、レスポンス優先モードの場合には、上記の第１の検出方法により検出した動きベクトルと、２フレームの探索範囲Ａ０，Ａ１に含まれる画素データとを用いて補間画素データを生成する第１の補間画素データ生成方法を採用する。   The motion vector MV is input to the interpolation pixel data generation unit 38. Based on the control by the mode control unit 41, the interpolation pixel data generation unit 38 generates the interpolation pixel data Pi using the motion vector MV and the pixel data of the regions A0 and A1 corresponding to the direction of the motion vector MV. . Thus, in the response priority mode, the interpolation pixel data generation unit 38 uses the motion vector detected by the first detection method and the pixel data included in the search ranges A0 and A1 of two frames. A first interpolation pixel data generation method for generating interpolation pixel data is employed.

フレーム画像生成部３９は、モード制御部４１による制御に基づいて、補間画素データ生成部３８から順次入力される補間画素データＰｉによって、図２（Ａ）に示すフレームＦ０，Ｆ１間に内挿する補間フレームＦ１０のフレーム画像を生成する。また、フレーム画像生成部３９は、モード制御部４１による制御に基づいて、補間画素データ生成部３８から順次入力される画素データＰA0によってフレームＦ０のフレーム画像を生成する。 Based on the control by the mode control unit 41, the frame image generation unit 39 interpolates between the frames F0 and F1 shown in FIG. 2A by the interpolation pixel data Pi sequentially input from the interpolation pixel data generation unit 38. A frame image of the interpolation frame F10 is generated. The frame image generation unit 39 generates a frame image of the frame F0 based on the pixel data P A0 sequentially input from the interpolation pixel data generation unit 38 based on the control by the mode control unit 41.

そして、フレーム画像生成部３９は、補間フレームＦ１０のフレーム画像とフレームＦ０のフレーム画像とがこの順で出力されるよう出力位相を調整して、入力端子１に入力された映像信号のフレームレートの２倍のフレームレートで出力する。フレームレート変換された映像信号は出力端子４２より出力される。このように、フレーム画像生成部３９は、レスポンス優先モードの場合には、上記の第１の補間画素データ生成方法により順次生成した補間画素データによって補間フレームを生成し、２フレーム間に内挿して入力映像信号が有するフレームレートより高いフレームレートを有する映像信号として出力する第１のフレーム画像生成方法を採用する。   The frame image generation unit 39 adjusts the output phase so that the frame image of the interpolation frame F10 and the frame image of the frame F0 are output in this order, and the frame rate of the video signal input to the input terminal 1 is adjusted. Output at twice the frame rate. The frame rate converted video signal is output from the output terminal 42. As described above, in the response priority mode, the frame image generation unit 39 generates an interpolation frame from the interpolation pixel data sequentially generated by the first interpolation pixel data generation method, and interpolates between the two frames. A first frame image generation method for outputting a video signal having a frame rate higher than that of the input video signal is employed.

この場合、出力端子４２より出力される映像信号の各フレームが画面に表示されるタイミングの遅延時間は少ない。従って、レスポンスが速く、例えばゲーム機器からの映像信号を表示した場合に、ゲーム機器に対する操作入力の入力タイミングと、その操作入力に対応した画像の表示タイミングとの間の時間的なずれが少なくなる。   In this case, the delay time of the timing at which each frame of the video signal output from the output terminal 42 is displayed on the screen is small. Accordingly, the response is fast and, for example, when a video signal from a game device is displayed, a time lag between the input timing of the operation input to the game device and the display timing of the image corresponding to the operation input is reduced. .

以上の説明より分かるように、レスポンス優先モードの場合には、動きベクトル検出部３７と補間画素データ生成部３８は領域Ａ２，Ａ３の画素データを使用しない。従って、動きベクトル検出部３７と補間画素データ生成部３８は領域Ａ２，Ａ３の画素データを入力しなくてもよい。そこで、モード制御部４１は、破線で囲んだフレームメモリ３，４とラインメモリ９〜１２と遅延器２５〜３６の部分を非動作とするよう制御してもよい。破線で囲んだ部分を非動作とした場合には消費電力を低減させることが可能となる。   As can be seen from the above description, in the response priority mode, the motion vector detection unit 37 and the interpolation pixel data generation unit 38 do not use the pixel data of the areas A2 and A3. Therefore, the motion vector detection unit 37 and the interpolation pixel data generation unit 38 do not have to input the pixel data of the areas A2 and A3. Therefore, the mode control unit 41 may perform control so that the frame memories 3 and 4, the line memories 9 to 12, and the delay units 25 to 36 surrounded by a broken line are deactivated. When the portion surrounded by the broken line is not operated, power consumption can be reduced.

次に、モード制御部４１にモード切換信号が画質優先モードを示す“１”が入力された場合の動作について説明する。領域Ａ０〜Ａ３それぞれに含まれる画素データは動きベクトル検出部３７に入力される。動きベクトル検出部３７は、モード制御部４１による制御に基づいて、図２（Ｂ）に示すように、４つのフレームＦ０〜Ｆ３の領域Ａ０〜Ａ３の画素データを用いて、フレームＦ２，Ｆ１間に内挿する補間画素データＰｉを生成するために必要な動きベクトルＭＶを検出する。動きベクトル検出部３７は、補間画素データＰｉを通る複数の方向の画素の差分値が最も小さい方向を動きベクトルＭＶとする。なお、この場合の補間画素データＰｉと、上述した補間フレームＦ１０内の補間画素データＰｉとはタイミングが異なる補間画素データであるが、便宜上、同一の符号を付している。   Next, the operation when “1” indicating the image quality priority mode is input to the mode control unit 41 as the mode switching signal will be described. Pixel data included in each of the areas A0 to A3 is input to the motion vector detection unit 37. Based on the control by the mode control unit 41, the motion vector detection unit 37 uses the pixel data of the areas A0 to A3 of the four frames F0 to F3 as shown in FIG. A motion vector MV necessary for generating the interpolation pixel data Pi to be interpolated into is detected. The motion vector detection unit 37 sets the direction having the smallest difference value of pixels in a plurality of directions passing through the interpolation pixel data Pi as the motion vector MV. In this case, the interpolation pixel data Pi and the interpolation pixel data Pi in the interpolation frame F10 described above are interpolation pixel data having different timings, but the same reference numerals are given for the sake of convenience.

動きベクトルＭＶは補間画素データ生成部３８に入力される。補間画素データ生成部３８には、領域Ａ０〜Ａ２それぞれに含まれる画素データが入力される。
補間画素データ生成部３８は、モード制御部４１による制御に基づいて、動きベクトルＭＶと、動きベクトルＭＶの方向に対応する領域Ａ１，Ａ２の画素データとを用いて、補間画素データＰｉを生成する。本実施形態においては、補間画素データ生成部３８は、２フレームの領域Ａ１，Ａ２の画素データを用いて補間画素データＰｉを生成しているが、画質を向上させるために、４フレームの領域Ａ０〜Ａ３の画素データを用いて補間画素データＰｉを生成してもよい。この場合、補間画素データ生成部３８には、領域Ａ３の画素データも入力する必要がある。 The motion vector MV is input to the interpolation pixel data generation unit 38. Pixel data included in each of the areas A0 to A2 is input to the interpolation pixel data generation unit 38.
Based on the control by the mode control unit 41, the interpolation pixel data generation unit 38 generates interpolation pixel data Pi using the motion vector MV and the pixel data of the regions A1 and A2 corresponding to the direction of the motion vector MV. . In the present embodiment, the interpolation pixel data generation unit 38 generates the interpolation pixel data Pi using the pixel data of the two-frame areas A1 and A2, but in order to improve the image quality, the four-frame area A0. The interpolated pixel data Pi may be generated using the pixel data of A3. In this case, it is necessary to input the pixel data of the region A3 to the interpolation pixel data generation unit 38 as well.

このように、補間画素データ生成部３８は、画質優先モードの場合には、上記の第２の検出方法により検出した動きベクトルと、少なくとも２フレームの探索範囲に含まれる画素データとを用いて補間画素データを生成する第２の補間画素データ生成方法を採用する。   Thus, in the case of the image quality priority mode, the interpolation pixel data generation unit 38 performs interpolation using the motion vector detected by the second detection method and the pixel data included in the search range of at least two frames. A second interpolation pixel data generation method for generating pixel data is employed.

フレーム画像生成部３９には、補間画素データ生成部３８によって生成された補間画素データＰｉと、領域Ａ０の画素データの内、補間画素データＰｉと同一の水平及び垂直方向の画素位置に位置する画素データＰA0と、領域Ａ１の画素データの内、補間画素データＰｉと同一の水平及び垂直方向の画素位置に位置する画素データＰA1とが入力される。フレーム画像生成部３９は、モード制御部４１による制御に基づいて、補間画素データ生成部３８から順次入力される補間画素データＰｉによって、図２（Ｂ）に示すフレームＦ２，Ｆ１間に内挿する補間フレームＦ２１のフレーム画像を生成する。また、フレーム画像生成部３９は、モード制御部４１による制御に基づいて、補間画素データ生成部３８から順次入力される画素データＰA1によってフレームＦ１のフレーム画像を生成する。 The frame image generation unit 39 includes the interpolation pixel data Pi generated by the interpolation pixel data generation unit 38 and pixels located in the same horizontal and vertical pixel positions as the interpolation pixel data Pi among the pixel data of the area A0. Data P A0 and pixel data P A1 located at the same horizontal and vertical pixel positions as the interpolation pixel data Pi among the pixel data in the area A1 are input. Based on the control by the mode control unit 41, the frame image generation unit 39 interpolates between the frames F2 and F1 shown in FIG. 2B by the interpolation pixel data Pi sequentially input from the interpolation pixel data generation unit 38. A frame image of the interpolation frame F21 is generated. The frame image generation unit 39 generates a frame image of the frame F1 based on the pixel data P A1 sequentially input from the interpolation pixel data generation unit 38 based on the control by the mode control unit 41.

そして、フレーム画像生成部３９は、補間フレームＦ２１のフレーム画像とフレームＦ１のフレーム画像とがこの順で出力されるよう出力位相を調整して、入力端子１に入力された映像信号のフレームレートの２倍のフレームレートで出力する。フレームレート変換された映像信号は出力端子４２より出力される。このように、フレーム画像生成部３９は、画質優先モードの場合には、上記の第２の補間画素データ生成方法により順次生成した補間画素データによって補間フレームを生成し、２フレーム間に内挿して入力映像信号が有するフレームレートより高いフレームレートを有する映像信号として出力する第２のフレーム画像生成方法を採用する。   The frame image generation unit 39 adjusts the output phase so that the frame image of the interpolation frame F21 and the frame image of the frame F1 are output in this order, and the frame rate of the video signal input to the input terminal 1 is adjusted. Output at twice the frame rate. The frame rate converted video signal is output from the output terminal 42. As described above, in the image quality priority mode, the frame image generation unit 39 generates an interpolation frame using the interpolation pixel data sequentially generated by the second interpolation pixel data generation method, and interpolates between the two frames. A second frame image generation method for outputting a video signal having a frame rate higher than that of the input video signal is employed.

この場合、出力端子４２より出力される映像信号は４フレームを動きベクトルＭＶの探索範囲として生成したものであるので誤補間が少なく、図２（Ａ）の場合よりも高画質のフレームレート変換画像となる。但し、図２（Ｂ）より分かるように、各フレームが画面に表示されるタイミングは１フレーム期間以上遅延することになる。   In this case, since the video signal output from the output terminal 42 is generated by using 4 frames as the search range of the motion vector MV, there is less misinterpolation, and the frame rate converted image with higher image quality than in the case of FIG. It becomes. However, as can be seen from FIG. 2B, the timing at which each frame is displayed on the screen is delayed by one frame period or more.

本発明は以上説明した本実施形態に限定されることはなく、本発明の要旨を逸脱しない範囲において種々変更可能である。本実施形態においては、フレームレートを２倍にするフレームレート変換装置について説明したが、３倍以上のフレームレートに変換するフレームレート変換装置としてもよい。また、図１においては、画素データＰA0，ＰA1を補間画素データ生成部３８からフレーム画像生成部３９へと供給する構成としたが、遅延器１５，２１より出力された画素データに基づいて画素データＰA0，ＰA1を得てもよい。この場合は、補間画素データＰｉと画素データＰA0，ＰA1とのタイミング合わせを適宜行うことが必要である。 The present invention is not limited to the embodiment described above, and various modifications can be made without departing from the gist of the present invention. In the present embodiment, the frame rate conversion device that doubles the frame rate has been described. However, a frame rate conversion device that converts the frame rate to three or more times may be used. In FIG. 1, the pixel data P A0 and P A1 are supplied from the interpolation pixel data generation unit 38 to the frame image generation unit 39, but based on the pixel data output from the delay units 15 and 21. Pixel data P A0 and P A1 may be obtained. In this case, it is necessary to appropriately adjust the timing of the interpolated pixel data Pi and the pixel data P A0 and P A1 .

１ 入力端子
２〜４ フレームメモリ
５〜１２ ラインメモリ
１３〜３６ 遅延器
３７ 動きベクトル検出部
３８ 補間画素データ生成部
３９ フレーム画像生成部
４０ 端子
４１ モード制御部 DESCRIPTION OF SYMBOLS 1 Input terminal 2-4 Frame memory 5-12 Line memory 13-36 Delay device 37 Motion vector detection part 38 Interpolation pixel data generation part 39 Frame image generation part 40 Terminal 41 Mode control part

Claims (4)

入力映像信号の複数のフレームそれぞれで、補間画素データを生成する際に用いる動きベクトルを検出するための複数の画素データを含む所定の領域が探索範囲として設定され、前記複数のフレームそれぞれの探索範囲に含まれる画素データを生成する画素データ生成部と、
２フレームの探索範囲に含まれる画素データを用いて動きベクトルを検出する第１の検出方法と、前記２フレームよりも時間的に前または後のフレームを含む３フレーム以上の探索範囲に含まれる画素データを用いて動きベクトルを検出する第２の検出方法とのいずれかで動きベクトルを検出する動きベクトル検出部と、
前記第１の検出方法により検出した動きベクトルと、前記２フレームの探索範囲に含まれる画素データとを用いて補間画素データを生成する第１の補間画素データ生成方法と、前記第２の検出方法により検出した動きベクトルと、少なくとも前記２フレームの探索範囲に含まれる画素データとを用いて補間画素データを生成する第２の補間画素データ生成方法とのいずれかで補間画素データを生成する補間画素データ生成部と、
前記第１の補間画素データ生成方法により順次生成した補間画素データによって補間フレームを生成し、前記２フレーム間に内挿して前記入力映像信号が有するフレームレートより高いフレームレートを有する映像信号として出力する第１のフレーム画像生成方法と、前記第２の補間画素データ生成方法により順次生成した補間画素データによって補間フレームを生成し、前記２フレーム間に内挿して前記入力映像信号が有するフレームレートより高いフレームレートを有する映像信号として出力する第２のフレーム画像生成方法とのいずれかでフレーム画像を生成するフレーム画像生成部と、
前記動きベクトル検出部が前記第１の検出方法で動きベクトルを検出し、前記補間画素データ生成部が前記第１の補間画素データ生成方法で補間画素データを生成し、前記フレーム画像生成部が前記第１のフレーム画像生成方法でフレーム画像を生成する第１のモードと、前記動きベクトル検出部が前記第２の検出方法で動きベクトルを検出し、前記補間画素データ生成部が前記第２の補間画素データ生成方法で補間画素データを生成し、前記フレーム画像生成部が前記第２のフレーム画像生成方法でフレーム画像を生成する第２のモードとを選択的に切り換えるモード制御部と
を備えることを特徴とするフレームレート変換装置。 A predetermined area including a plurality of pixel data for detecting a motion vector used when generating interpolation pixel data is set as a search range in each of a plurality of frames of the input video signal, and the search range of each of the plurality of frames A pixel data generation unit for generating pixel data included in
A first detection method for detecting a motion vector using pixel data included in a search range of two frames, and pixels included in a search range of three or more frames including a frame temporally before or after the two frames A motion vector detection unit for detecting a motion vector in any of the second detection methods for detecting a motion vector using data;
A first interpolation pixel data generation method for generating interpolation pixel data using the motion vector detected by the first detection method and pixel data included in the search range of the two frames, and the second detection method The interpolation pixel that generates the interpolation pixel data by any one of the second interpolation pixel data generation method that generates the interpolation pixel data using the motion vector detected by the above and the pixel data included in at least the search range of the two frames. A data generator;
An interpolation frame is generated from the interpolation pixel data sequentially generated by the first interpolation pixel data generation method, and is interpolated between the two frames and output as a video signal having a frame rate higher than that of the input video signal. An interpolation frame is generated by the interpolation pixel data sequentially generated by the first frame image generation method and the second interpolation pixel data generation method, and is interpolated between the two frames, which is higher than the frame rate of the input video signal A frame image generation unit for generating a frame image in any of the second frame image generation methods for outputting as a video signal having a frame rate;
The motion vector detection unit detects a motion vector by the first detection method, the interpolation pixel data generation unit generates interpolation pixel data by the first interpolation pixel data generation method, and the frame image generation unit A first mode in which a frame image is generated by a first frame image generation method; the motion vector detection unit detects a motion vector by the second detection method; and the interpolation pixel data generation unit by the second interpolation A mode control unit that generates interpolated pixel data by a pixel data generation method, and the frame image generation unit selectively switches between a second mode in which a frame image is generated by the second frame image generation method. A frame rate conversion device. 前記モード制御部は、前記第１のモードのとき、前記画素データ生成部における前記２フレームの探索範囲に含まれる画素データ以外の画素データを生成する回路部分を非動作とするよう制御することを特徴とする請求項１記載のフレームレート変換装置。   In the first mode, the mode control unit performs control so that a circuit portion that generates pixel data other than pixel data included in the search range of the two frames in the pixel data generation unit is inoperative. The frame rate conversion apparatus according to claim 1, wherein: 入力映像信号の複数のフレームそれぞれで、補間画素データを生成する際に用いる動きベクトルを検出するための複数の画素データを含む所定の領域が探索範囲として設定され、前記複数のフレームそれぞれの探索範囲に含まれる画素データを生成する画素データ生成ステップと、
第１のモードのとき、２フレームの探索範囲に含まれる画素データを用いて動きベクトルを検出する第１の検出方法で動きベクトルを検出し、第２のモードのとき、前記２フレームよりも時間的に前または後のフレームを含む３フレーム以上の探索範囲に含まれる画素データを用いて動きベクトルを検出する第２の検出方法で動きベクトルを検出する動きベクトル検出ステップと、
前記第１のモードのとき、前記第１の検出方法により検出した動きベクトルと、前記２フレームの探索範囲に含まれる画素データとを用いて補間画素データを生成する第１の補間画素データ生成方法で補間画素データを生成し、前記第２のモードのとき、前記第２の検出方法により検出した動きベクトルと、少なくとも前記２フレームの探索範囲に含まれる画素データとを用いて補間画素データを生成する第２の補間画素データ生成方法で補間画素データを生成する補間画素データ生成ステップと、
前記第１のモードのとき、前記第１の補間画素データ生成方法により順次生成した補間画素データによって補間フレームを生成し、前記２フレーム間に内挿して前記入力映像信号が有するフレームレートより高いフレームレートを有する映像信号として出力する第１のフレーム画像生成方法でフレーム画像を生成し、前記第２の補間画素データ生成方法により順次生成した補間画素データによって補間フレームを生成し、前記第２のモードのとき、前記２フレーム間に内挿して前記入力映像信号が有するフレームレートより高いフレームレートを有する映像信号として出力する第２のフレーム画像生成方法でフレーム画像を生成するフレーム画像生成ステップと
を含むことを特徴とするフレームレート変換方法。 A predetermined area including a plurality of pixel data for detecting a motion vector used when generating interpolation pixel data is set as a search range in each of a plurality of frames of the input video signal, and the search range of each of the plurality of frames A pixel data generation step for generating pixel data included in
In the first mode, the motion vector is detected by the first detection method that detects the motion vector using pixel data included in the search range of two frames, and in the second mode, the time is longer than the two frames. A motion vector detecting step of detecting a motion vector by a second detection method of detecting a motion vector using pixel data included in a search range of three or more frames including a preceding or following frame,
First interpolation pixel data generation method for generating interpolation pixel data using the motion vector detected by the first detection method and the pixel data included in the search range of the two frames in the first mode Interpolated pixel data is generated using the motion vector detected by the second detection method and at least pixel data included in the search range of the two frames in the second mode. An interpolation pixel data generation step for generating interpolation pixel data by the second interpolation pixel data generation method;
In the first mode, an interpolated frame is generated from the interpolated pixel data sequentially generated by the first interpolated pixel data generating method, and a frame higher than the frame rate of the input video signal is interpolated between the two frames. A frame image is generated by a first frame image generation method that outputs a video signal having a rate, an interpolation frame is generated by interpolation pixel data sequentially generated by the second interpolation pixel data generation method, and the second mode A frame image generation step of generating a frame image by a second frame image generation method for interpolating between the two frames and outputting as a video signal having a frame rate higher than the frame rate of the input video signal. A frame rate conversion method characterized by the above. 前記第１のモードのとき、前記画素データ生成ステップにて前記２フレームの探索範囲に含まれる画素データ以外の画素データを生成しないことを特徴とする請求項３記載のフレームレート変換方法。   4. The frame rate conversion method according to claim 3, wherein pixel data other than pixel data included in the search range of the two frames is not generated in the pixel data generation step in the first mode.
JP2009113434A 2009-05-08 2009-05-08 Frame rate conversion apparatus and method Active JP5212252B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009113434A JP5212252B2 (en) 2009-05-08 2009-05-08 Frame rate conversion apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009113434A JP5212252B2 (en) 2009-05-08 2009-05-08 Frame rate conversion apparatus and method

Publications (2)

Publication Number Publication Date
JP2010263468A JP2010263468A (en) 2010-11-18
JP5212252B2 true JP5212252B2 (en) 2013-06-19

Family

ID=43361184

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009113434A Active JP5212252B2 (en) 2009-05-08 2009-05-08 Frame rate conversion apparatus and method

Country Status (1)

Country Link
JP (1) JP5212252B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102586695B1 (en) 2018-02-09 2023-10-11 삼성전자주식회사 Display apparatus and control method for the same
CN112135081B (en) * 2020-09-11 2022-10-28 Oppo广东移动通信有限公司 Mode control method and device, frame insertion chip and electronic equipment

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001025021A (en) * 1999-07-05 2001-01-26 Sony Corp Motion detection method and motion detector
JP4244685B2 (en) * 2003-04-15 2009-03-25 日本ビクター株式会社 Moving picture time axis interpolation method and moving picture time axis interpolation apparatus
JP4396496B2 (en) * 2004-12-02 2010-01-13 株式会社日立製作所 Frame rate conversion device, video display device, and frame rate conversion method

Also Published As

Publication number Publication date
JP2010263468A (en) 2010-11-18

Similar Documents

Publication Publication Date Title
JP5317825B2 (en) Image processing apparatus and image processing method
KR100806858B1 (en) High definition image dislpay device and method for frame rate conversion thereof
JP2010056694A (en) Picture signal processing unit, image display unit, and picture signal processing method
JP2009003420A (en) Video signal display apparatus and method for reproducing video signal
US20090196567A1 (en) Video processing apparatus and controlling method for same
JP2014179818A (en) Image processing device and image processing method
JP5183231B2 (en) Video playback apparatus and control method
US20140028909A1 (en) Method for converting frame rate and video processing apparatus using the same
JP5249166B2 (en) Image processing apparatus and image processing method
US20140036148A1 (en) Apparatus and method for converting frame rate of video signal, and video processing apparatus using the same
JP2013030862A (en) Image processing apparatus, image processing method, and image display apparatus
JP5212252B2 (en) Frame rate conversion apparatus and method
JP2009300786A (en) Display device and method of controlling the same, program, and recording medium
JP4572144B2 (en) Display panel driving apparatus and display panel driving method
JP2007047476A (en) Liquid crystal display device and driving method of liquid crystal display device
JP2008070561A (en) Display apparatus and control method therefor
JP5241632B2 (en) Image processing circuit and image processing method
JP5219646B2 (en) Video processing apparatus and video processing apparatus control method
JP2007311963A (en) Image display device, signal processor and image processing method, and computer program
JP2003289511A (en) Image scan converting method and apparatus
WO2012169096A1 (en) Image display device and image processing device
JP2004357253A (en) Video signal conversion apparatus, video signal processor, and video display apparatus
JP2010261985A (en) Image processing device, image processing method, and program
JP5526918B2 (en) Video signal processing apparatus and method
JP2012227799A (en) Image display device

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20111012

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20111226

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130123

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130129

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130211

R150 Certificate of patent or registration of utility model

Ref document number: 5212252

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160308

Year of fee payment: 3