JP5219609B2 - フレームレート変換装置、方法及びプログラム - Google Patents

Description

本発明は、入力画像（入力フレーム）のフレームレート変換を行なうフレームレート変換装置、方法及びプログラムに関する。

表示装置をその表示特性から分類すると、インパルス型とホールド型に大別される。図１４（ｂ）のように、１フレーム期間中の表示をほぼ一定に保持する液晶パネルなどの装置をホールド型表示装置と呼ぶ。これに対し、図１４（ａ）のように、１フレーム中の発光期間が短いものをインパルス型表示装置と呼ぶ。

インパルス型表示装置には、ＣＲＴ（Cathode Ray Tube）や、フィールドエミッションタイプのディスプレイなどが挙げられる。インパルス型表示は画素が点滅を繰り返すため、画面がちらついて見えるフリッカを起こす特性がある。フリッカは高輝度・大面積になるほど検知され易い特性があるため、近年のディスプレイの大画面化によって、インパルス型表示装置のフリッカは一層改善すべき問題となっている。

フリッカを低減する方法としては、入力フレームを任意の割合で複数のサブフレームに分配することでフレームレートを上げて表示する方法が挙げられる。例えば、入力フレームを６対４の割合で２つのサブフレームに分配してフレームレートを倍に上げた場合、点滅の周波数が高くなるためフリッカは検知されにくくなる。

しかし、この表示を視覚した場合、図１５に示すように、１フレーム期間中において時間的に後方にあるサブフレームが視線の追従からずれてしまうため、視覚特性に依存した擬似輪郭が発生する。

また、動きの激しいシーン等の表示に際しては、尾引きが発生することがある。このような尾引きに対処するため、フレームレート変換に際して、そのフレームの動き量（ベクトル）に応じてサブフレームの一部の画素値を減衰させる技術が知られている（特許文献１）。画素値の減衰は、画素毎にサブフレーム間で切り替えて行なう。
特開２００７−０５２１８４号公報

しかしながら、上述した特許文献１の手法では、動領域においても時間的に後方に出力されるサブフレームに輝度を持つ画素が半数存在してしまうため、疑似輪郭が発生してしまう。図１６は、特許文献１の技術を適用した場合における表示出力の概要とそれを視覚により捉えた場合の見え方との関係を示す図である。この場合、動領域端部のサブフレームの輝度が疑似輪郭として見えることが分かる。

本発明は、上記課題に鑑みてなされたものであり、フリッカを低減する効果を維持しつつ、擬似輪郭及び画像の破綻を低減させるようにしたフレームレート変換装置、方法及びプログラムを提供することを目的とする。

上記目的を達成するため、本発明の一態様は、入力フレームの輝度を複数のサブフレームに分配してフレームレート変換を行なうフレームレート変換装置であって、
前記入力フレームにおける画像の１又は複数の画素からなる各領域の動き度を検出する検出手段と、
前記検出手段により検出された各領域の動き度に応じて前記複数のサブフレームにおける各領域での輝度分配量を決定する決定手段と、
前記決定手段により決定された輝度分配量で前記入力フレームの各領域の輝度を分配して前記複数のサブフレームを出力する出力手段と、を具備し、
前記決定手段は、前記領域において、前記動き検出手段により検出された動き度が予め定められた値より小さければ、該動き度が予め定められた値よりも大きい場合よりも、前記出力手段により出力される前記複数のサブフレーム間の当該領域の輝度差を小さくすることを特徴とする。

本発明によれば、フリッカを低減する効果を維持しつつ、擬似輪郭及び画像の破綻を低減させることができる。

以下、本発明に係わるフレームレート変換装置、方法及びプログラムの一実施の形態について添付図面を参照して詳細に説明する。なお、以下の実施形態において示す構成は、あくまで一例に過ぎず、本発明は図示された構成に限定されるものではない。

（実施形態）
図１は、本発明の一実施の形態に係わるフレームレート変換装置の概略構成の一例を示すブロック図である。

フレームレート変換装置には、コンピュータが組み込まれている。コンピュータには、ＣＰＵ等の主制御部、ＲＯＭ(Read Only Memory)、ＲＡＭ(Random Access Memory)等の記憶部が具備される。この他、コンピュータには、例えば、ディスプレイ又はタッチパネル等の入出力部、ネットワークカード等の通信部等が具備されていてもよい。なお、これら各構成部は、バス等により接続され、主制御部が記憶部に記憶されたプログラムを実行することで制御される。

フレームレート変換装置は、入力画像（以下、入力フレームと言う）を複数のサブフレームに分配してフレームレートを複数倍（整数）にして出力する。入力フレームの分配に際しては、フレーム間差分から入力フレームにおける各領域の動きを検出し、その動きの検出結果をサブフレームにおける各領域に反映させて分配する。なお、本実施形態においては、フレームレート変換により入力フレームを２倍のフレームレートに変換する場合を例に挙げて説明する。

フレームレート変換装置は、画面のちらつき、すなわち、フリッカの発生を低減させるように、入力フレームのフレームレート変換を行なう。フリッカが起きる度合いは、分配されたサブフレーム間のコントラストに関係する。すなわち、図１の場合には、サブフレームｓ２０４とサブフレームｓ２０５とのコントラストの関係によりフリッカの発生が左右される。これらの輝度差が大きい程、フリッカは検知され易いが、輝度差が小さい程、フリッカは検知され難い。なお、サブフレームｓ２０４は、１フレーム期間中において時間的後方に出力され、サブフレームｓ２０５は、１フレーム期間中において時間的先方に出力されるフレームとする。

フレームレート変換装置は、サブフレームｓ２０４とサブフレームｓ２０５とのコントラストを各サブフレーム内の領域毎に制御する。この制御は、各フレーム間で検出される各領域の動きとフリッカとの関係に基づいて行なわれる。サブフレームｓ２０４とサブフレームｓ２０５とを足し合わせると、フレームメモリ１０２に保持されたフレームｓ２０１の輝度に一致する。すなわち、輝度はフレームレート変換前後で同等となる。

ここで、フレームレート変換装置は、その機能的な構成として、フレームメモリ１０２と、動き領域検出部１０３と、分配補正係数生成部１０４と、分配処理部１０６と、差分処理部１０７と、切替器１０８とを具備して構成される。

フレームメモリ１０２は、入力フレームを１枚以上順次保持する。動き領域検出部１０３は、フレームメモリ１０２に保持されたフレームｓ２０１と入力フレームｓ２００とを比較し、フレームメモリ１０２に保持されたフレームｓ２０１における各領域の動き度Ｍを算出し、動き度マップＭ_ｍａｐを出力する。

分配補正係数生成部１０４は、動き度マップＭ_ｍａｐに対してフィルター処理を実施し、その結果を分配補正係数マップＲ_ｍａｐとして分配処理部１０６に出力する。分配処理部１０６は、フレームメモリ１０２に保持されたフレームｓ２０１の値を基本分配関数及び分配補正係数マップＲ_ｍａｐに応じて変換し、第１のサブフレームとしてサブフレームｓ２０４を出力する。

差分処理部１０７は、サブフレームｓ２０４とフレームメモリ１０２に保持されたフレームｓ２０１とに基づいて第２のサブフレームとしてサブフレームｓ２０５を生成し出力する。切替器１０８は、サブフレームｓ２０４とサブフレームｓ２０５とを交互に切り替えて出力する。

図２は、分配処理部１０６における入出力関係の一例を示す図である。分配処理部１０６では、分配処理部１０６への入力ｓ２０１の各値を基本分配関数と分配補正係数マップＲ_ｍａｐに従って変換し、サブフレームｓ２０４の値として出力する（数式１参照）。基本分配関数は、入力が静止画である場合（静止画時）のサブフレームｓ２０４の値を示している。

サブフレームｓ２０４における各領域の値は、分配補正係数マップＲ_ｍａｐの値によって動的に増減する。例えば、動きの大きい領域の分配補正係数Ｒの値は小さい値となり、サブフレームｓ２０４の対応する領域の値は小さくなる。これにより、１フレーム期間中において時間的後方に出力されるサブフレームにおける動きの大きい領域の値は小さくなるため、疑似輪郭及び尾引きが改善される。

図３は、動き領域検出部１０３における処理の一例を示すフローチャートである。

動き領域検出部１０３では、入力フレームと、当該入力フレームよりも前（例えば、直前）に入力されたフレームとから各画素のフレーム間差分を算出する（ステップＳ１０１及びステップＳ１０２）。そして、その差分値から動き度Ｍを算出し出力する（ステップＳ１０３及びステップＳ１０４）。動き度Ｍは、領域毎に動き度を持ったマップ状（２次元状）のＭ_ｍａｐで出力される。なお、本実施形態においては、領域が、単体の画素である場合について説明するが、複数画素を所定の範囲（Ｎ×Ｎ画素）でまとめたものであってもよい。複数画素を領域とした場合には、例えば、複数画素における平均値等をその領域における値として処理することにより、領域を画素とした場合と同様に処理すればよい。

ここで、フレーム間差分値Ｄと動き度Ｍとの関係の一例を図４に示す。図４に示すように、フレーム間差分値Ｄが大きい程、検出される動き度Ｍは減少する傾向を持つ。すなわち、本実施形態においては、動き度Ｍが静止度を示すため、動き度Ｍは動きの小さい領域は高くなり、動きの大きい領域は低くなる。なお、本実施形態においては、動き度Ｍが静止度を示す場合を例に挙げて説明するが、勿論、これとは逆であってもよい。

動き領域検出部１０３では、処理負荷が比較的に低い閾値処理を実施することにより、フレームメモリ１０２に保持されたフレームｓ２０１における各領域の動き度を算出する。具体的には、フレーム間差分値が（予め定められた）閾値ｄ１よりも小さければ、動き度としてｍ２を出力し、フレーム間差分値が閾値ｄ１よりも大きければ、動き度としてｍ１を出力する。この閾値処理は、各領域に対応して算出したフレーム間差分値各々に対して行なわれ、結果としてマップ状のＭ_ｍａｐが動き度として出力される。なお、ｍ１とｍ２は、例えば、０以上１以下の値であり、ｍ２はｍ１より大きい。

図５は、分配補正係数生成部１０４における処理の一例を示すフローチャートである。

この処理は、動き度マップＭ_ｍａｐが分配補正係数生成部１０４に入力されると開始する（ステップＳ２０１）。ここで、動き度マップＭ_ｍａｐでは、図６（ａ）に示すように、静止領域と判定された領域には動き度としてｍ２が与えられ、動領域として判定された領域には動き度としてｍ１が与えられている。なお、横軸は画素位置を示している。

分配補正係数生成部１０４は、まず、動き度マップＭ_ｍａｐに対して比較低減フィルター処理を行なう（ステップＳ２０２）。この処理では、注目領域の動き度Ｍの値と、その周辺領域（所定範囲の領域）の動き度Ｍの値とを比較し、注目領域の動き度Ｍの値を低減させる。フィルターは、例えば、ある値をフィルター範囲内の最低値に置き換える等の特性を持つ。動き度マップＭ_ｍａｐは、図６（ｂ）に示すように、例えば、静止領域の動き度Ｍの値が低減される。

続いて、分配補正係数生成部１０４は、比較低減フィルター処理の結果に対してローパスフィルター処理を実施した後（ステップＳ２０３）、その処理結果を分配補正係数マップＲ_ｍａｐとして分配処理部１０６に出力する（ステップＳ２０４）。ここで出力される分配補正係数マップＲ_ｍａｐは、図６（ｃ）に示すように、ローパスフィルター処理により高周波数域の信号が取り除かれ、空間的に滑らかな値となる。図６（ｃ）に示すように、静止領域が動領域と隣接している場合、当該静止領域において動領域と隣接する位置までの所定範囲の分配補正係数Ｒの値を連続的に減衰させることになる。

上述したように、本実施形態における分配補正係数生成部１０４では、フレーム内の領域毎に分配補正係数Ｒを変更させる。この変更に際しては、動き度マップＭ_ｍａｐをローパスフィルター処理により平滑化することにより、分配補正係数Ｒを空間的に滑らかに変化させる。ここで、ローパスフィルター処理の前に比較低減フィルター処理を行なうのは、比較低減フィルター処理を行なわずに分配補正係数マップＲ_ｍａｐを生成した場合には、図７に示すように、サブフレームにおける動領域端部の値が増えてしまうためである。この場合、図８に示すように、静止領域及び動領域の境界で画像が崩れてしまう。分配補正係数Ｒの平滑化は、動領域内では行なわず静止領域内のみ処理するのが望ましい。

差分処理部１０７は、フレームメモリ１０２に保持されたフレームｓ２０１からサブフレームｓ２０４の差分をとった結果をサブフレームｓ２０５として出力する。したがって、出力されるサブフレームの合計は、フレームメモリ１０２に保持されたフレームと一致する。インパルス型表示装置の場合には、任意の時間内に表示される信号の合計が一致すれば見かけ上の明るさは同等に見えることから、フレームレート変換前後で同等の明るさを維持できることになる。

ここで、図９（ａ）は、フレームメモリ１０２に保持されたフレームｓ２０１を示し、図９（ｂ）及び図９（ｃ）は分配補正係数マップＲ_ｍａｐが変化した場合の出力を示している。

動きの小さい領域は、上述した通り、その領域に対応する分配補正係数Ｒは大きく設定される。そのため、１フレーム期間中において時間的後方に出力されるサブフレームｓ２０４において、その領域に対応する出力値の分配量が高くなる。この場合、この領域における各サブフレームの輝度は、図９（ｂ）に示す波形で示される。動きの小さい領域では、フリッカが起こりやすいが、サブフレームｓ２０４におけるこの領域の値は、フリッカの低減が可能なレベル分確保されるため、フリッカの発生を防ぐことができる。

一方、動きの大きい領域は、上述した通り、その領域に対応する分配補正係数Ｒは小さく設定される。そのため、１フレーム期間中において時間的後方に出力されるサブフレームｓ２０４において、その領域に対応する出力値の分配量は低くなる。この場合、この領域における各サブフレームの輝度は、図９（ｃ）に示す波形で示される。動きの大きい領域では、フリッカが検知され難いため、サブフレームｓ２０４におけるこの領域の値が小さくても、フリッカが発生する可能性は低い。

ここで、例えば、各サブフレームの輝度が図９（ｃ）に示す波形となる場合における表示出力の概要とそれを視覚により捉えた場合の見え方は、図１０に示す関係となる。この図１０に示す表示出力の概要とその見え方との関係では、上述した図８と比較して、疑似輪郭や画像の崩れが低減されていることが分かる。

次に、図１１を用いて、図１に示すフレームレート変換装置における処理の流れについて説明する。

フレームレート変換装置は、入力フレームｓ２００が入力されると（ステップＳ３０１）、そのフレームをフレームメモリ１０２に格納する（ステップＳ３０２）。この格納が済むと、フレームレート変換装置は、動き領域検出部１０３において、当該入力フレームｓ２００と、フレームメモリ１０２に既に格納されているフレームとを比較する。そして、フレームメモリ１０２に既に格納されているフレームｓ２０１における領域毎に動き度Ｍを算出し動き度マップＭ_ｍａｐを出力する（ステップＳ３０３）。

続いて、フレームレート変換装置は、分配補正係数生成部１０４において、当該算出された動き度マップＭ_ｍａｐにフィルター処理を実施し、その結果を分配補正係数マップＲ_ｍａｐとして算出する（ステップＳ３０４）。フレームレート変換装置は、分配処理部１０６において、フレームメモリ１０２に既に格納されているフレームｓ２０１の値を基本分配関数及び分配補正係数マップＲ_ｍａｐに応じて変換し、サブフレームｓ２０４を生成する（ステップＳ３０５）。

サブフレームｓ２０４の生成が済むと、フレームレート変換装置は、差分処理部１０７において、フレームメモリ１０２に既に格納されているフレームｓ２０１とサブフレームｓ２０４との差分からサブフレームｓ２０５を生成する（ステップＳ３０６）。その後、フレームレート変換装置は、切替器１０８において、サブフレームｓ２０４とサブフレームｓ２０５とを交互に切り替えて出力する（ステップ３０７）。以下、入力フレームが入力される都度、上述した処理を繰り返し実行する。

上述したように、本実施形態によれば、フレームにおける画像の各領域から動き度を検出し、その検出結果に応じてサブフレーム（ｓ２０４、ｓ２０５）における各領域の分配量を決定する。これにより、フリッカを低減する効果を維持しつつ、擬似輪郭及び画像の破綻を低減させることができる。

以上が本発明の代表的な実施形態の一例であるが、本発明は、上記及び図面に示す実施形態に限定することなく、その要旨を変更しない範囲内で適宜変形して実施できるものである。

例えば、上述した実施形態においては、フレーム間差分を求め、当該差分値と閾値との関係からフレームの画像における各領域の動き度Ｍを算出する場合を例に挙げて説明したが、これに限られない。例えば、各領域のフレーム間のベクトルを算出し、そのベクトルの大きさから動き度Ｍを算出してもよい。ここで、図１２を用いて、この場合における動き領域検出部１０３における処理の流れについて説明する。動き領域検出部１０３では、入力フレームと、当該入力フレームよりも前（例えば、直前）に入力されたフレームとからフレーム間の動きベクトルを算出する（ステップＳ４０１及びステップＳ４０２）。そして、その動きベクトルから動き度Ｍを算出し出力する（ステップＳ４０３及びステップＳ４０４）。なお、動き度Ｍの算出は、動きベクトルの大きさに基づいて、上記図４で説明した方法と同様にして求めればよい。動きベクトルを用いることにより、フレームにおける画像の各領域の動きの大きさを一層正確に認識できることになる。

また、上述した実施形態においては、動き度Ｍが２値（ｍ１、ｍ２）である場合を例に挙げて説明したが、これに限られない。例えば、図１３に示すように、フレーム間差分Ｄが第１の値としての閾値ｄ２以下であればｍ２を出力し、第２の値としての閾値ｄ３よりも大きければｍ１を出力するようにしてもよい。また、フレーム間差分Ｄがｄ２からｄ３の間であれば、動き度Ｍ（この場合、動き度Ｍは静止度を示す）は、ｍ２からｍ１の間の値を出力する。ここで、フレーム間差分Ｄがｄ２からｄ３の間である場合、動き度Ｍの値は、その差分値が大きくなる程、単調に変化（減衰）する値を動き度Ｍとして出力する。これは、動きの大きさの連続性を反映している。勿論、上述した動きベクトルにより動き度Ｍを求める場合にも、この方法を適用して動き度Ｍを求めることができる。

なお、本発明は、ソフトウェアのプログラムをシステム或いは装置に直接或いは遠隔から供給し、そのシステム或いは装置に内蔵されたコンピュータが該供給されたプログラムコードを読み出して実行することにより実施形態の機能が達成される場合をも含む。この場合、供給されるプログラムは実施形態で図に示したフローチャートに対応したコンピュータプログラムである。

したがって、本発明の機能処理をコンピュータで実現するために、該コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳ（Operating System）に供給するスクリプトデータ等の形態であってもよい。

コンピュータプログラムを供給するためのコンピュータ読み取り可能な記録媒体としては以下が挙げられる。例えば、フロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などである。

その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続し、該ホームページから本発明のコンピュータプログラムをハードディスク等の記録媒体にダウンロードすることが挙げられる。この場合、ダウンロードされるプログラムは、圧縮され自動インストール機能を含むファイルであってもよい。また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明に含まれるものである。

また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記録媒体に格納してユーザに配布するという形態をとることもできる。この場合、所定の条件をクリアしたユーザに、インターネットを介してホームページから暗号を解く鍵情報をダウンロードさせ、その鍵情報を使用して暗号化されたプログラムを実行し、プログラムをコンピュータにインストールさせるようにもできる。

また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現される他、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどとの協働で実施形態の機能が実現されてもよい。この場合、ＯＳなどが、実際の処理の一部又は全部を行ない、その処理によって前述した実施形態の機能が実現される。

更に、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれて前述の実施形態の機能の一部或いは全てが実現されてもよい。この場合、機能拡張ボードや機能拡張ユニットにプログラムが書き込まれた後、そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ（Central Processing Unit）などが実際の処理の一部又は全部を行なう。

本発明の一実施の形態に係わるフレームレート変換装置の概略構成の一例を示すブロック図である。 図１に示す分配処理部１０６における入出力関係の一例を示す図である。 図１に示す動き領域検出部１０３における処理の一例を示すフローチャートである。 図１に示す動き領域検出部１０３における動き度Ｍの算出方法の一例を示す図である。 図１に示す分配補正係数生成部１０４における処理の一例を示すフローチャートである。 分配補正係数生成部１０４における処理の概要の一例を示す図である。 分配補正係数生成部１０４における処理の概要の一例を示す図である（比較低減フィルター処理未実施）。 比較低減フィルター処理を行なわなかった場合における表示出力の概要とそれを視覚により捉えた見え方の概要の一例を示す図である。 発光輝度の一例を示す図である。 図９（ｃ）の場合における表示出力の概要とそれを視覚により捉えた見え方の概要の一例を示す図である。 図１に示すフレームレート変換装置における処理の流れの一例を示すフローチャートである。 変形実施形態に係わる動き領域検出部１０３における処理の一例を示すフローチャートである。 変形実施形態に係わる動き領域検出部１０３における動き度Ｍの算出方法の一例を示す図である。 表示装置における発光輝度の一例を示す図である。 従来技術における表示出力の概要とそれを視覚により捉えた見え方の概要の一例を示す第１の図である。 従来技術における表示出力の概要とそれを視覚により捉えた見え方の概要の一例を示す第２の図である。

符号の説明

１０２ フレームメモリ
１０３ 動き検出部
１０４ 分配補正係数生成部
１０５ ＬＰＦ
１０６ 分配処理部
１０７ 差分処理部
１０８ 切替器

Claims (11)

1. 入力フレームの輝度を複数のサブフレームに分配してフレームレート変換を行なうフレームレート変換装置であって、
   前記入力フレームにおける画像の１又は複数の画素からなる各領域の動き度を検出する検出手段と、
   前記検出手段により検出された各領域の動き度に応じて前記複数のサブフレームにおける各領域での輝度分配量を決定する決定手段と、
   前記決定手段により決定された輝度分配量で前記入力フレームの各領域の輝度を分配して前記複数のサブフレームを出力する出力手段と、を具備し、
   前記決定手段は、前記領域において、前記動き検出手段により検出された動き度が予め定められた値より小さければ、該動き度が予め定められた値よりも大きい場合よりも、前記出力手段により出力される前記複数のサブフレーム間の当該領域の輝度差を小さくすることを特徴とするフレームレート変換装置。
2. 前記決定手段は、
   前記各領域の動き度に応じて前記複数のサブフレームの各領域における輝度分配量を補正する分配補正係数を生成することにより前記輝度分配量を決定し、
   前記出力手段は、
   前記決定手段により生成された分配補正係数で補正された輝度分配量にしたがって前記入力フレームの各領域の輝度を第１のサブフレームに分配する分配処理手段と、
   前記第１のサブフレームと前記入力フレームとの輝度の差分から第２のサブフレームを生成する差分処理手段と、
   前記第１のサブフレームと前記第２のサブフレームとを切り替えて１フレーム期間中に出力する切替手段と
   を具備することを特徴とする請求項１記載のフレームレート変換装置。
3. 前記検出手段は、
   前記入力フレームと該入力フレームよりも前に入力されたフレームとからフレーム間差分を算出し、該算出した差分値と閾値との関係から該入力フレームよりも前に入力されたフレームにおける画像の各領域の動き度を検出する
   ことを特徴とする請求項１記載のフレームレート変換装置。
4. 前記検出手段は、
   前記入力フレームと該入力フレームよりも前に入力されたフレームとから各領域のフレーム間の動きベクトルを算出し、該算出した動きベクトルから該入力フレームよりも前に入力されたフレームにおける画像の各領域の動き度を検出する
   ことを特徴とする請求項１記載のフレームレート変換装置。
5. 前記検出手段は、
   前記入力フレームよりも前に入力されたフレームにおける画像の各領域の動きと予め定められた値との関係から動きの大きい領域と動きの小さい領域とに対応する動き度をそれぞれ検出し、
   前記決定手段は、
   前記動きの大きい領域であれば、前記出力手段により時間的に後方に出力されるサブフレームの対応する領域への輝度分配量を、前記動きの小さい領域である場合に該サブフレームの対応する領域に分配する輝度分配量よりも低くすることで、前記複数のサブフレーム間の当該領域の輝度差を大きくする
   ことを特徴とする請求項１記載のフレームレート変換装置。
6. 前記検出手段は、
   前記入力フレームよりも前に入力されたフレームにおける画像の各領域の動きと予め定められた値との関係から動きの大きい領域と動きの小さい領域とに対応する動き度をそれぞれ検出し、
   前記決定手段は、
   前記動きの小さい領域であれば、前記出力手段により時間的に後方に出力されるサブフレームの対応する領域への輝度分配量を、前記動きの大きい領域である場合に該サブフレームの対応する領域に分配する輝度分配量よりも高くすることで、前記複数のサブフレーム間の当該領域の輝度差を小さくする
   ことを特徴とする請求項１又は５記載のフレームレート変換装置。
7. 第１の値と該第１の値よりも大きい第２の値とが予め定められており、
   前記検出手段は、
   前記入力フレームよりも前に入力されたフレームにおける画像の各領域の動きと前記第１の値又は前記第２の値との関係から動きの大きい領域と動きの小さい領域とを含む領域に対応する動き度をそれぞれ検出し、
   前記決定手段は、
   前記動きの大きい領域であれば、前記出力手段により時間的に後方に出力されるサブフレームの対応する領域への輝度分配量を、前記動きの小さい領域である場合に該サブフレームの対応する領域に分配する輝度分配量よりも低くすることで、前記複数のサブフレーム間の当該領域の輝度差を大きくし、前記動きの小さい領域であれば、前記出力手段により時間的に後方に出力されるサブフレームの対応する領域への輝度分配量を、前記動きの大きい領域である場合に該サブフレームの対応する領域に分配する輝度分配量よりも高くすることで、前記複数のサブフレーム間の当該領域の輝度差を小さくする
   ことを特徴とする請求項１記載のフレームレート変換装置。
8. 前記検出手段は、
   前記入力フレームよりも前に入力されたフレームにおける画像の領域の動きが前記第１の値から前記第２の値の間であれば、該第１の値から該第２の値の間で動きが大きくなるにつれて、動き度を単調に変化させて検出し、
   前記決定手段は、
   前記領域の動きが前記第１の値から前記第２の値の間であれば、前記出力手段により時間的に後方に出力されるサブフレームの対応する領域への輝度分配量を、前記動きの小さい領域である場合に該サブフレームの対応する領域に分配する輝度分配量よりも低くし、かつ動きが大きくなるにつれて、前記検出された動き度に応じて該輝度分配量を低くすることで、前記複数のサブフレーム間の当該領域の輝度差を大きくする
   ことを特徴とする請求項７記載のフレームレート変換装置。
9. 前記決定手段は、
   前記動きの小さい領域であり、かつ該領域が動きの大きい領域と隣接する場合には、前記出力手段により時間的に後方に出力されるサブフレームの対応する領域への輝度分配量を、該動きが小さい領域において該隣接する位置までの所定範囲の輝度分配量を連続的に減衰させることで、前記複数のサブフレーム間の該所定範囲の輝度差を大きくする
   ことを特徴とする請求項６又は７記載のフレームレート変換装置。
10. 入力フレームの輝度を複数のサブフレームに分配してフレームレート変換を行なうフレームレート変換装置におけるフレームレート変換方法であって、
    検出手段が、前記入力フレームにおける画像の１又は複数の画素からなる各領域の動き度を検出する検出工程と、
    決定手段が、前記検出工程により検出された各領域の動き度に応じて前記複数のサブフレームにおける各領域での輝度分配量を決定する決定工程と、
    出力手段が、前記決定工程により決定された輝度分配量で前記入力フレームの各領域の輝度を分配して前記複数のサブフレームを出力する出力工程と、を含み、
    前記決定工程では、前記領域において、前記動き検出工程において検出された動き度が予め定められた値より小さければ、該動き度が予め定められた値よりも大きい場合よりも、前記出力工程において出力される前記複数のサブフレーム間の当該領域の輝度差を小さくすることを特徴とするフレームレート変換方法。
11. 入力フレームの輝度を複数のサブフレームに分配してフレームレート変換を行なうフレームレート変換装置に内蔵されたコンピュータを、
    前記入力フレームにおける画像の１又は複数の画素からなる各領域の動き度を検出する検出手段、
    前記検出手段により検出された各領域の動き度に応じて前記複数のサブフレームにおける各領域での輝度分配量を決定する決定手段、
    前記決定手段により決定された輝度分配量で前記入力フレームの各領域の輝度を分配して前記複数のサブフレームを出力する出力手段
    として機能させるためのプログラムであって、
    前記決定手段は、前記領域において、前記動き検出手段により検出された動き度が予め定められた値より小さければ、該動き度が予め定められた値よりも大きい場合よりも、前記出力手段により出力される前記複数のサブフレーム間の当該領域の輝度差を小さくすることを特徴とするプログラム。

Images