JP2007181674A

JP2007181674A - ブロック整合及び動き補償補間を利用した映像形成方法

Info

Publication number: JP2007181674A
Application number: JP2006345009A
Authority: JP
Inventors: Joo Hee Moon; ジュヒムン; Jae Eun Song; ジェウンソン; Hye Jung Kim; へジョンキム; Young Seuk Song; ヨンソクソン
Original assignee: Medison Co Ltd
Current assignee: Samsung Medison Co Ltd
Priority date: 2005-12-21
Filing date: 2006-12-21
Publication date: 2007-07-19
Also published as: EP1814329A2; US20070140347A1; KR100870115B1; KR20070066047A; EP1814329A3

Abstract

【課題】ブロック不一致現象の発生を防止でき、少量データの計算で速やかに動画像を形成できるブロック整合技法と動き補償補間を利用した映像形成方法を提供する。
【解決手段】隣接第１、第２フレームの相関度を求めて補間フレームの形成如何を決定し、補間フレーム内の全てのブロックを基準ブロックとして選択して、対応する第１ブロックを第１フレームから選択して基準ブロックと第１ブロック間の第１動きベクトルを決定し、第１ブロックに整合する第２ブロックを第２フレームから決定し、基準ブロックと第２ブロックとの間の第２動きベクトルを決定し、第１及び第２動きベクトルに基づいて補間フレーム内の各ブロックの動きベクトルを決定し、補間フレーム内の各ブロックの動きベクトルを適用し、第１フレーム及び第２フレームから補間フレームの画素値を決定して補間フレームを形成し、補間フレームの損傷度がしきい値以下の時、補間フレームを採択する。
【選択図】図２

Description

本発明は映像形成方法に関し、特にブロック整合技法（ｂｌｏｃｋｍａｔｃｈｉｎｇａｌｇｏｒｉｔｈｍ，ＢＭＡ）と動き補償補間（ｍｏｔｉｏｎｃｏｍｐｅｎｓａｔｅｄｉｎｔｅｒｐｏｌａｔｉｏｎ，ＭＣＩ）を利用した映像形成方法に関する。

超音波診断法は比較的高い安定性と実用性を有しており、医療映像分野で多くの脚光を浴びており、特に産婦人科の診断において必須の手段として利用されている。また、超音波動画像を利用した診断及び応用が発展しており、今後インターネットと移動通信網を通じた超音波動画像の利用も活発に進めると予想される。このために、信頼性のある超音波動画像を獲得することが重要である。

動画像を具現するために短い時間の間に順次得られた停止画面、即ちフレームを連続的にディスプレイする。一般にフレーム間には対象体またはカメラの動きなどによって明るさの変化が発生する。このような明るさなどの変化を利用して隣接するフレーム間で対象体の動きを推定する。動画像及び静止映像の符号化のために広く使用されている動き推定（ｍｏｔｉｏｎｅｓｔｉｍａｔｉｏｎ）は各画素単位で動き情報を見出す方法として予測誤差を減らすことができる長所があるが、計算過程が複雑な短所がある。特にリアルタイム処理が要求される低ビット率転送システムに応用され難い。

動き推定のための計算量を減らすため、ブロック整合技法が利用される。ＢＭＡは動き推定のためにフレームを一定の大きさのブロックで分割し、一つのブロック内の全ての画素を一つの動きベクトルで表現する。図１ａ及び図１ｂに示したようにブロック整合技法を利用して現在のフレーム（Ｆｃ）で選択されたブロック（Ｂｃ）と最も類似のブロックを以前のフレームＦｐの探索領域（ｓｅａｒｃｈｗｉｎｄｏｗ，ＳＷ）内で検索して共通の動き情報である動きベクトル（ｍｏｔｉｏｎｖｅｃｔｏｒ，ＭＶ）を推定する。図１ａ及び図１ｂでブロックの大きさがＭ×Ｎ、水平方向または垂直方向に最大ｐ画素だけ動く時、上下左右でｐ画素だけの動きを考慮すれば、探索領域（ＳＷ）の大きさは（２ｐ＋Ｍ）×（２ｐ＋Ｎ）になる。現在、ブロック（Ｂｃ）と探索領域（ＳＷ）内の任意ブロック間の整合基準では式１のように定義されるＳＡＤ（ＳｕｍｏｆＡｂｓｏｌｕｔｅＤｉｆｆｅｒｅｎｃｅ）を使用する。

式１を利用して求めたＳＡＤ値のうち、最小ＳＡＤを有する画素の座標移動を計算し、現在のフレーム（Ｆｃ）で選択されたブロック（Ｂｃ）と最も整合度が高い以前のフレームＦｐ内のブロック（Ｂｂ）間の動きベクトルを決定する。

従来ブロック整合技法を利用して動きベクトルが誤って決定されると空の領域（ｈｏｌｅｒｅｇｉｏｎ）と重畳領域（ｏｖｅｒｌａｐｐｅｄｒｅｇｉｏｎ）などのようなブロック不一致現象（ｂｌｏｃｋｉｎｇａｒｔｉｆａｃｔｓ）が発生して再構成されたブロック全体が本来の映像信号と全く変わる深刻な主観的（ｓｕｂｊｅｃｔｉｖｅ）画質低下現象が発生する。一方、より正確に動き情報を得るために探索領域内の全ての候補ブロック間の整合（ｍａｔｃｈｉｎｇ）を比較する全域探索法（ｆｕｌｌｓｅａｒｃｈｍｅｔｈｏｄ）が多く使用されている。しかし、全域探索法を利用する場合、ブロックの大きさや探索領域の大きさが大きくなるにつれて計算量も急激に増加してリアルタイムで動画像を形成し難い短所がある。

前述した問題を解決するために本発明は、ブロック整合技法によるブロック不一致現象の発生を防止することができ、相対的に少ない量のデータを計算してより速やかに動画像を形成することができる、ブロック整合技法と動き補償補間を利用した映像形成方法を提供する。

本発明の一様態による映像形成方法は、ａ）それぞれ多数のブロックに分類される画素を備える、隣接する第１及び第２フレームの入力を受ける段階と、ｂ）前記第１及び第２フレームの相関度を求めて前記第１及び第２フレーム間に、多数のブロックに分類される画素を備える補間フレームの形成如何を決定する段階と、ｃ）前記補間フレーム内の全てのブロックを順に基準ブロックとして選択しながら、前記選択された基準ブロックに対応する第１ブロックを前記第１フレームから選択して前記基準ブロックと前記第１ブロック間の第１動きベクトルを決定し、前記第１ブロックに整合する第２ブロックを前記第２フレームから決定し、前記基準ブロックと前記第２ブロック間の第２動きベクトルを決定する段階と、ｄ）前記第１及び第２動きベクトルに基づいて前記補間フレーム内の各ブロックの動きベクトルを決定する段階と、ｅ）前記補間フレーム内の各ブロックの動きベクトルを適用し、前記第１フレーム及び前記第２フレームから前記補間フレームの画素値を決定して前記補間フレームを形成する段階と、ｆ）前記補間フレームの損傷度を検査して前記損傷度がしきい値以下である場合、前記補間フレームを採択して映像を形成する段階を備える。

本発明はブロック整合技法（ＢＭＡ）を使用する動き推定の過程に示したホール（ｈｏｌｅ）とオーバーラップ（ｏｖｅｒｌａｐ）領域問題を解決するために補間されるフレームを基準とする双方向動き推定技法を利用して動きベクトルを決定することによって、より簡単に動き補償補間をして補間フレームを形成することができる。また、２段階探索技法として全域探索と類似する効率を示しながら遂行速度を大きく改善することができる。また、ブロック間の動きベクトル差が出る値のしきい値（ｔｈｒｅｓｈｏｌｄ）をおき、全てのブロック境界がフィルタリングされてイメージが全般的にブラーリング（ｂｌｕｒｒｉｎｇ）されることを制限した。

さらに、隣接した原本フレームの相関度を考慮して補間フレームの形成如何を決定することによって効率性を向上させた。また、フレーム間の相関度が低い場合、補間基準（ｉｎｔｅｒｐｏｌａｔｉｏｎｃｒｉｔｅｒｉａ）によって補間フレームの形成如何を決定し、領域処理（ｒｅｇｉｏｎｐｒｏｃｅｓｓｉｎｇ）技法を通じてイメージ品質を向上させることができる。

本発明は全域探索法のように正確な予測効率を有しながら計算されるデータ量を減らすことができるブロック整合技法及び動き補償補間を利用した映像形成方法に関する。この映像は動画像、超音波映像、超音波動画像を含む。

映像信号のフレーム補間（ｆｒａｍｅｉｎｔｅｒｐｏｌａｔｉｏｎ）は連続する映像のフレームレート（ｆｒａｍｅｒａｔｅ）を変更させるために使用される。フレームレートはフレーム反復法（ｆｒａｍｅｒｅｐｅｔｉｔｉｏｎ）や線状補間法（ｌｉｎｅａｒｉｎｔｅｒｐｏｌａｔｉｏｎ）などの簡単な方式でも調節することができるが、画質の低下を防ぐために運動体（ｍｏｖｉｎｇｏｂｊｅｃｔ）の移動情報を利用してフレームレートを調節する。本発明では運動体の移動情報を適切に活用するために双方向推定を通じて動きを補償補間する。

動き補償補間（ＭＣＩ）に用いられる隣接したフレームの相関度が顕著に低くなったり、場面切替（ｓｃｅｎｅｃｈａｎｇｅ）のような構成の映像であれば自然で軟らかい映像を具現するために補間フレームを形成する必要がない。補間されたフレーム自体が突然の突出領域（ａｂｒｕｐｔａｒｅａ）を構成して画質低下をもたらすことができるためである。

本発明では隣接する２フレームの相関度を求め、相関度がしきい値以上である場合にのみ補間フレームを形成する。このため、動きベクトルを生成する前、隣接する２つのフレームの相関度を求め、相関度がしきい値以下である場合、場面切替と判断して動きベクトルを生成せず補間フレーム形成を終了することができる。このように本発明では隣接した原本フレームの相関度がしきい値より低い場合、補間フレームを形成しない。もちろん補間フレームを形成しない場合、突然の動き変化現象（ｍｏｔｉｏｎｊｅｒｋｉｎｅｓｓ）は避けられないが、画質低下は防止することができる。一方、補間されたフレームであっても突出領域が発生することがあるので、領域処理技法（ｒｅｇｉｏｎｐｒｏｃｅｓｓｉｎｇ）を通じてこのような問題を解決する。

隣接する２つのフレームの相関度を求め、場面切替ではないと判断された場合、動きベクトルを決定してそれに基づいて補間フレームを形成する。特に、本発明ではブロック整合技法によって動きベクトルが誤って決定される場合、発生するブロック不一致現象を防止するために双方向推定をして動きベクトルを決定する。

図３ａ及び図３ｂに示したように双方向動き推定のためにフレームＦ_１とＦ_２で同一の大きさの探索領域を設定する。探索領域は補間されるフレームＦ_１２内の基準ブロック（Ｂｒ）の位置を中心に設定できる。続いて、フレームＦ_１内で選択ブロック（Ｂｓ）を定め、基準ブロック（Ｂｒ）と選択ブロック（Ｂｓ）の中心座標値に基づいて第１動きベクトル（ＭＶ_１）を決定する。フレームＦ_２で選択ブロック（Ｂｓ）に整合する整合ブロック（Ｂｍ）を決定し、基準ブロック（Ｂｒ）と整合ブロック（Ｂｍ）の中心座標値に基づいて第２動きベクトル（ＭＶ_２）を決定する。

一方、より効率的に動きを推定するために第２フレームＦ_２内で図４に示したように螺旋状に整合ブロックを探索しながら、第１動きベクトル（ＭＶ_１）の大きさによって探索間隔を変化させる。例として第１動きベクトル（ＭＶ_１）が（０，０）であるブロックの周囲は１画素ずつ動いて整合ブロックを探索し、第１動きベクトル（ＭＶ_１）が（０，０）でない領域は２画素ずつ動いて整合ブロックを探索する。２画素間隔で探索して整合ブロックを見出したら見つけられた整合ブロックを中心に１画素ずつ螺旋状に動いて再度探索する。このような技法は全域探索技法と似た性能効率を示しながら探索速度を相当部分減らすことができる。

前述した過程によって決定された動きベクトルをベクトルメディアンフィルタリング（ｖｅｃｔｏｒｍｅｄｉａｎｆｉｌｔｅｒｉｎｇ）技法を利用して平滑化させる（ｓｍｏｏｔｈｉｎｇ）。一般的なメディアンフィルタリング技法は、動きベクトルを水平方向コンポーネント、垂直方向コンポーネント別に区分してスカラ（ｓｃａｌａｒ）フィルタリングする。このように分類されたコンポーネントをフィルタリングして得た動きベクトルは周辺動きベクトルの元素と異なって示される。本発明の実施例ではこのような問題を解決するために、動きベクトル全体コンポーネントに対してフィルタリングを行う。このようなベクトルメディアンフィルタリングは以下の式２のように定義される。

一方、本発明では画質低下を防止するために形成された補間フレームの採択如何を次のような過程によって決定する。動きベクトルから得られた補間フレームでブロック間のＳＡＤを求めた後、基準ＳＡＤ値を基準に全体フレームに渡りブロックを分類する。ブロック間のＳＡＤ値が非常に小さいということは現在ブロックで動きがほぼないということと解釈することができる。従って、ＳＡＤがしきい値以上であればブロックは誤って推定された動きベクトルから得られたブロックであるか、フレーム間の相関関係がほぼない場合、である。一つのフレーム内でＳＡＤがしきい値以上に分類されるブロックの個数が一定数値以上であれば時間的に隣接した２つのフレームは全体的にあるいは一定部分が相関関係がない映像と判断することができる。このような場合、多数映像構成による利得より主観的画質低下による損失の幅がより大きいと言える。従って、このような場合は形成された補間フレームを採択しないことによってより自然な映像を獲得することができる。

図５〜図７は動き推定ベクトルに基づいて形成した補間フレーム内のブロックをＳＡＤ値によって分類し損傷度を検査して示した例示図である。補間フレームの精度を向上させるためには、ブロック分類の基準になるしきい値の大きさが重要である。一方、図５〜図７に示したようにレベル１とレベル２に分類されるブロックの損傷度情報と各ブロックのＳＡＤ情報を利用してフレーム全体ブロック対比損傷程度を把握し、補間フレームの選択如何を決定することができる。図６に示したように損傷したブロックが集中した損傷領域（Ｂｒｏｋｅｎｒｅｇｉｏｎ）があり得る。特定ブロックを基準に上下左右のブロックを検査し、検査された全てのブロックが損傷したものであると判断される場合、その領域を損傷領域に指定することができる。損傷領域はイメージの画質を低下させるので、損傷領域の大きさ及び数によって補間フレーム選択如何を決定することもできる。また、損傷領域を以後より強力にディブロキングフィルタリング（ｄｅｂｌｏｃｋｉｎｇｆｉｌｔｅｒｉｎｇ）を加えて復旧することができる。図７は損傷したブロック（ｂｒｏｋｅｎｂｌｏｃｋ）を程度によってレベル１とレベル２に分類されたことを示している。即ち、相対的に損傷度が大きいと判断されたブロックは隣接するブロックと相関関係がほぼないと判断する。これにより、相対的に損傷が甚だしく示されたブロックは単純線状補間（ｌｉｎｅａｒｉｎｔｅｒｐｏｌａｔｉｏｎ）に形成することもできる。

一方、一つの補間フレームを生成しなければならない場合、前述した過程によって双方向補間（ｂｉｌｉｎｅａｒｉｎｔｅｒｐｏｌａｔｉｏｎ）技法のみを利用して補間フレームを構成すればよい。しかし、多数の補間フレームを生成しなければならない場合、次の式３のように定義される重み係数情報を利用した補間（ｗｅｉｇｈｔｅｄｉｎｔｅｒｐｏｌａｔｉｏｎ）技法を使用して多数のフレームを生成する。

次に、前述した過程によって補間フレームの採択如何を決定した後に、ブロック間の不一致を緩和させるためのブロック境界減少フィルタリング（ｄｅｂｌｏｃｋｉｎｇｆｉｌｔｅｒｉｎｇ）を実施する。

動きベクトルを平滑化させることによってブロック不一致現象（ｂｌｏｃｋｉｎｇａｒｔｉｆａｃｔｓ）をある程度緩和させることはできるが、ブロック単位で構成された補間フレームはブロック間の動きベクトルの差のため、ブロックの境界が明確になるブロック境界現象が発生する。特に動き推定時に探索領域内にブロックの相関関係が少ないほどブロック境界現象は目立つように示される。ブロック境界現象を減少させるため、ブロック境界画素間フィルタリングを通じて境界と境界間を自然に構成する。しかし、全てのブロック境界を検査してフィルタリングを行う場合、処理時間が増加して全体的に映像のブラーリング（ｂｌｕｒｒｉｎｇ）が発生し得る。

本発明の実施例では映像のブラーリングが示されることを防止するために補間フレーム内の各ブロックの動きベクトル情報と、ＳＡＤ情報のうち、少なくともいずれか一つを利用してフィルタリングを行うブロックを決定し、決定されたブロックのみをフィルタリングする。

図８ではマクロブロック（ＭＢ）間の水平、垂直方向の境界でそれぞれ２画素を選択しフィルタリングした場合を示している。補間フレーム内に隣接するブロックの動きベクトルを比較して２ベクトルの差が定められた基準値以上である場合、ブロックの全ての境界をフィルタリングし、そうでなければ次のブロックに超えていく。即ち、隣接するブロックの動きベクトルのノーム（ｎｏｒｍ）ベクトルを計算して一定のしきい値を超えるとフィルタリング処理を行うことができる。これを次の式４のように表現することができる。

式４でＶＡ、ＶＢは水平方向に隣接したブロックの動きベクトルであり、ＶＡ、ＶＣは垂直に隣接したブロックの動きベクトルである。そしてＴ１はしきい値である。

一方、前述した過程によって算出された補償フレーム内の各ブロックのＳＡＤを利用してフィルタリングを行うブロックを決定する。または、補間フレーム内に隣接するブロックの動きベクトル差が定められた基準値以上であり、ＳＡＤ値が基準値以上である場合にフィルタリングを行うブロックとして決定する。

フィルタリングが適用される隣接した２ブロックが水平方向で隣接していればそれぞれの画素に水平方向にフィルタリングマスクを被せて、隣接した２ブロックが垂直方向に隣接していれば垂直方向にマスクを被せる。フィルタリングして得た画素値とフィルタリング前の画素値を交替することによってフィルタリングの結果を適用する。

上述した実施例は本発明の原理を利用した多様な実施例の一部を示したことに過ぎない。本技術分野で通常の知識を有する者は本発明の本質から逸脱することなく、様々な変形が可能であることが明確に分かる。

従来のブロック整合技法を利用して動きベクトルを決定する例を示す概略図（その１）である。従来のブロック整合技法を利用して動きベクトルを決定する例を示す概略図（その２）である。本発明の実施例として双方向推定によって連続する２フレームＦ１、Ｆ２との間に挿入されたフレームを構成する方法を示す概略図である。双方向動き推定のために連続するフレーム内に設定された探索領域を示す概略図（その１）である。双方向動き推定のために連続するフレーム内に設定された探索領域を示す概略図（その２）である。２段階整合探索方法として示す例示図である。動き推定ベクトルに基づいて形成した補間フレーム内のブロックをＳＡＤしきい値によって分類して損傷度を検査して示した例示図（その１）である。動き推定ベクトルに基づいて形成した補間フレーム内のブロックをＳＡＤしきい値によって分類して損傷度を検査して示した例示図（その２）である。動き推定ベクトルに基づいて形成した補間フレーム内のブロックをＳＡＤしきい値によって分類して損傷度を検査して示した例示図（その３）である。ブロック境界減少フィルタリングを説明するための例示図である。

符号の説明

Ｆ_１、Ｆ_２フレーム、
Ｆ_１２補間フレーム、
Ｂｓ選択ブロック、
Ｂｒ基準ブロック、
Ｂｍ整合ブロック、

Claims

ａ）それぞれ多数のブロックに分類される画素を備える、隣接する第１及び第２フレームの入力を受ける段階と、
ｂ）前記第１及び第２フレームの相関度を求めて前記第１及び第２フレーム間に、多数のブロックに分類される画素を備える補間フレームの形成如何を決定する段階と、
ｃ）前記補間フレーム内の全てのブロックを順に基準ブロックとして選択しながら、前記選択された基準ブロックに対応する第１ブロックを前記第１フレームから選択して前記基準ブロックと前記第１ブロック間の第１動きベクトルを決定し、前記第１ブロックに整合する第２ブロックを前記第２フレームから決定し、前記基準ブロックと前記第２ブロック間の第２動きベクトルを決定する段階と、
ｄ）前記第１及び第２動きベクトルに基づいて前記補間フレーム内の各ブロックの動きベクトルを決定する段階と、
ｅ）前記補間フレーム内の各ブロックの動きベクトルを適用し、前記第１フレーム及び前記第２フレームから前記補間フレームの画素値を決定して前記補間フレームを形成する段階と、
ｆ）前記補間フレームの損傷度を検査して前記損傷度がしきい値以下である場合、前記補間フレームを採択して映像を形成する段階を備えることを特徴とする映像形成方法。
前記ｂ）の段階は、
ｂ１）前記相関度としきい値を比較する段階と、
ｂ２）前記相関度がしきい値以下である場合、前記段階ａ）に戻る段階と、
ｂ３）前記相関度がしきい値以上である場合、前記補間フレームを形成することに決定する段階を備えることを特徴とする請求項１に記載の映像形成方法。
前記段階ｃ）は、
ｃ１）前記補間フレーム内の基準ブロックの位置を中心に前記第１フレーム及び前記第２フレームで同一の大きさの探索領域をそれぞれ設定する段階と、
ｃ２）前記第１フレームから前記第１ブロックを選択する段階と、
ｃ３）前記基準ブロック中心の座標と前記第１ブロック中心の座標から前記第１動きベクトルを決定する段階と、
ｃ４）前記第２フレーム内で前記第１ブロックに整合する前記第２ブロックを決定する段階と、
ｃ５）前記基準ブロックの中心座標と前記第２ブロック中心の座標から前記第２動きベクトルを決定する段階を備えることを特徴とする請求項１に記載の映像形成方法。
前記段階ｃ４）において、
前記第１動きベクトルの大きさによって画素間隔を変化させながら整合を検索して前記第２ブロックを決定することを特徴とする請求項３に記載の映像形成方法。
前記段階ｃ４）は、
ｃ４１）前記第１動きベクトルの大きさがしきい値と同じである場合、前記探索領域の中心から螺旋状に第１画素間隔だけ移動しながら前記第１ブロックに整合するブロックを探索する段階と、
ｃ４２）前記第１動きベクトルの大きさがしきい値より大きい場合、前記探索領域の中心から螺旋状に前記第１画素間隔より大きい第２画素間隔だけ移動しながら前記第１ブロックに整合するブロックを探索する段階と、
ｃ４３）前記ｃ４２）段階で前記整合ブロックが探索された場合、前記探索された整合ブロックを中心に前記第２画素間隔より小さな第３画素間隔だけ移動しながら前記第１ブロックに整合するブロックを探索して前記第２ブロックを決定する段階を備えることを特徴とする請求項３に記載の映像形成方法。
前記段階ｃ）後、
前記第１及び第２動きベクトルをベクトルメディアンフィルタリング（ｖｅｃｔｏｒｍｅｄｉａｎｆｉｌｔｅｒｉｎｇ）を用いて平滑化させる段階をさらに備えることを特徴とする請求項１に記載の映像形成方法。
前記段階ｅ）において、
重み係数情報を用いた補間技法で多数の補間フレームを形成することを特徴とする請求項１に記載の映像形成方法。
前記段階ｆ）は、
ｆ１）前記補間フレームでブロック間のＳＡＤ（ＳｕｍｏｆＡｂｓｏｌｕｔｅＤｉｆｆｅｒｅｎｃｅ）を算出する段階と、
ｆ２）前記ＳＡＤがしきい値以上であるブロックの数が基準個数以下である場合、前記形成された補間フレームを採択する段階を備えることを特徴とする請求項１に記載の映像形成方法。
前記段階ｆ）後、
ｇ）前記ＳＡＤに基づいて、前記採択された前記補間フレーム内の各ブロックの損傷如何を把握する段階と、
ｈ）前記損傷したブロックを復旧する段階をさらに備えることを特徴とする請求項８に記載の映像形成方法。
前記段階ｈ）後、
ｇ１）境界をフィルタリングするブロックを決定する段階と、
ｇ２）決定されたブロックの境界をフィルタリングする段階をさらに備えることを特徴とする請求項９に記載の映像形成方法。
前記段階ｇ１）は、
ｇ１１）前記段階ｈ）後、前記補間フレーム内に隣接するブロックの動きベクトルの差を算出する段階と、
ｇ１２）前記算出された動きベクトルの差に基づいて境界をフィルタリングするブロックを決定する段階を備えることを特徴とする請求項１０に記載の映像形成方法。
前記段階ｇ１）において、
前記補間フレーム内のブロックのＳＡＤに基づいて境界をフィルタリングするブロックを決定することを特徴とする請求項１０に記載の映像形成方法。
前記段階ｇ２）において、
前記算出された動きベクトルの差と前記ＳＡＤに基づいて境界をフィルタリングするブロックを決定することを特徴とする請求項１１に記載の映像形成方法。