JP4621585B2 - 画像処理装置及び画像処理方法 - Google Patents

Description

本発明は、画像処理装置及び画像処理方法、特に、フレーム間予測による動画像圧縮に関連する画像処理装置及び画像処理方法に関する。

静止画像の圧縮方式としてはＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式が広く用いられており、動画像の圧縮方式としてはＭＰＥＧ（Ｍｏｔｉｏｎ Ｐｉｃｔｕｒｅ Ｃｏｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式が広く用いられている。ＪＰＥＧ方式にはＪＰＥＧやＪＰＥＧ２０００等の分類が存在し、ＭＰＥＧ方式にはＭＰＥＧ１やＭＰＥＧ２やＨ．２６４等の分類が存在する。ＪＰＥＧ方式では静止画像が変換処理や量子化処理や符号化処理により圧縮され、ＭＰＥＧ方式では動画像がさらにフレーム間予測や動き予測により圧縮される（特許文献１及び２）。

フレーム間予測による動画像圧縮について説明する。フレーム間予測による動画像圧縮が実施される場合には、動画像の各フレームについて、フレーム間予測による動画像圧縮のための参照フレームが事前に指定される。ＭＰＥＧ１やＭＰＥＧ２では１個のフレームについて１個の参照フレームしか指定できず、各フレームの参照フレームは各フレームの隣接フレームに制限されているのだが、Ｈ．２６４では１個のフレームについて複数個の参照フレームを指定でき、各フレームの参照フレームは各フレームの隣接フレームに制限されていない。

Ｈ．２６４のこのような利点が有用なのは、動画像内にフラッシュやシーンチェンジが存在する場合である。フラッシュやシーンチェンジの際のフレームについては、その隣接フレームとの類似度が低い場合が多く、その隣接フレームをその参照フレームとするのが不適切な場合が多いからである。フラッシュを包含する動画像の具体例としては、爆発物の爆発時の様子を撮影した映像や、写真撮影の様子を撮影した映像や、フラッシュを伴うシーンを含むアニメーション等が挙げられる。シーンチェンジを包含する動画像の具体例としては、撮影の中断・再開や映像の編集がなされた映像等が挙げられる。

しかしながら、動画像の各フレームについて適切な参照フレームを見い出す事は極めて難しい。そこで現実には、経験上の妥当性を根拠として、各フレームの直前の数フレームを各フレームの参照フレームとする方式が一般的に採用されている。この方式は、シーンチェンジを包含する動画像には適している可能性が高いが、フラッシュを包含する動画像には適していない可能性が高い。一方で、フラッシュの存在を輝度計算により検出する事で、フラッシュを包含する動画像の各フレームについて適切な参照フレームを見い出すという事も考えられる。しかしながら、フラッシュの存在を特別な工夫もなしに輝度計算により検出しようすると、そのための演算量が膨大になるので効率的ではない。
特開２００２−１８５８１７号公報 特開平１１−２２５３４２号公報

本発明は、動画像を構成する各フレームについて、フレーム間予測による動画像圧縮のための参照フレームを適切且つ効率的に決定できる画像処理装置及び画像処理方法を実現することを課題とする。

本発明は例えば、動画像の各フレームについて、フレーム間予測による動画像圧縮のための参照フレームを決定する画像処理装置であって、各フレーム内の画素を任意の第１方向に沿って複数のラインに分割し、さらに、各フレーム内の画素を前記第１方向と非平行の第２方向に沿って複数のラインに分割し、動画像のフレーム間において、各フレーム内の画素の輝度の合計同士と、各フレームの前記第１方向のライン上の画素の輝度の合計同士と、各フレームの前記第２方向のライン上の画素の輝度の合計同士とをそれぞれ比較する比較手段と、前記比較手段による比較結果に基づき、各フレーム内にフラッシュが存在するか否かの判定を行う判定手段と、前記判定手段による判定結果に基づき、フラッシュの開始前のフレームをフラッシュの終了後のフレームの参照フレームとする決定を行う決定手段とを備えることを特徴とする画像処理装置に係る。

本発明は例えば、動画像の各フレームについて、フレーム間予測による動画像圧縮のための参照フレームを決定する画像処理方法であって、各フレーム内の画素を任意の第１方向に沿って複数のラインに分割し、さらに、各フレーム内の画素を前記第１方向と非平行の第２方向に沿って複数のラインに分割し、動画像のフレーム間において、各フレーム内の画素の輝度の合計同士と、各フレームの前記第１方向のライン上の画素の輝度の合計同士と、各フレームの前記第２方向のライン上の画素の輝度の合計同士とをそれぞれ比較する比較段階と、前記比較段階による比較結果に基づき、各フレーム内にフラッシュが存在するか否かの判定を行う判定段階と、前記判定段階による判定結果に基づき、フラッシュの開始前のフレームをフラッシュの終了後のフレームの参照フレームとする決定を行う決定段階とを備えることを特徴とする画像処理方法に係る。

本発明は、動画像を構成する各フレームについて、フレーム間予測による動画像圧縮のための参照フレームを適切且つ効率的に決定できる画像処理装置及び画像処理方法を実現することを可能にする。

図１は、動画像圧縮を実行する画像処理システムのブロック図である。図１の画像処理システムでは、ＭＰＥＧ方式のＨ．２６４（ＭＰＥＧ４ＡＶＣ）に準拠した動画像圧縮が実行される。

図１の画像処理システムは、動画像圧縮の準備を実行する第１画像処理装置１０１と、動画像圧縮を実行する第２画像処理装置１０２により構成されている。第１画像処理装置１０１は、動画像の各フレームについて、フレーム間予測による動画像圧縮のための参照フレームを決定する画像処理装置である。第２画像処理装置１０２は、変換処理や量子化処理や符号化処理やフレーム間予測や動き補償による動画像圧縮を実行する画像処理装置である。第１画像処理装置１０１による参照関係の決定結果は、第２画像処理装置１０２によるフレーム間予測で利用される。

第１画像処理装置１０１の画像処理機能や第２画像処理装置１０２の画像処理機能は、ＬＳＩ等の集積回路により実現されているとするが、ＲＯＭやＨＤＤ等に実装されているプログラムにより実現されているとしても構わない。いずれの第１画像処理装置１０１も本発明の実施例に相当する。

第１画像処理装置１０１と第２画像処理装置１０２は、別々の集積回路又はプログラムにより実現されている、すなわち別々の装置として分離されているとするが、同一の集積回路又はプログラムにより実現されている、すなわち同一の装置として統合されているとしても構わない。いずれの第１画像処理装置１０１も本発明の実施例に相当する。

第１画像処理装置１０１は、比較手段の具体例に相当する比較部１１１と、判定手段の具体例に相当する判定部１１２と、決定手段の具体例に相当する決定部１１３により構成されている。比較部１１１は、輝度算出部１２１と、輝度保持部１２２と、輝度差算出部１２３と、輝度差保持部１２４と、閾値処理管理部１２５と、閾値処理結果保持部１２６により構成されている。

比較部１１１は、動画像のフレーム間において、各フレーム内の各画素の輝度の合計Ａ同士と、各フレームの水平方向のライン上の各画素の輝度のライン毎の合計Ｂ同士と、各フレームの垂直方向のライン上の各画素の輝度のライン毎の合計Ｃ同士とをそれぞれ比較するブロックである。具体的にはここでは、第１のフレームの輝度合計Ａ１，Ｂ１，Ｃ１と第２のフレームの輝度合計Ａ２，Ｂ２，Ｃ２とがそれぞれ相違するか否か、即ち両者間の輝度合計差｜Ａ１−Ａ２｜，｜Ｂ１−Ｂ２｜，｜Ｃ１−Ｃ２｜がそれぞれ閾値α，β，γを超過するか否かが評価される。輝度合計の算出及び保持は、輝度算出部１２１及び輝度保持部１２２により実行される。輝度合計差の算出及び保持は、輝度差算出部１２３及び輝度差保持部１２４により実行される。閾値処理の管理及び閾値処理結果の保持は、閾値処理管理部１２５及び閾値処理結果保持部１２６により実行される。

判定部１１２は、比較部１１１による比較結果に基づき、動画像の各フレームについて輝度変化の有無や位置を判定するブロックである。判定部１１２は、比較部１１１による比較結果に基づき、各フレーム内にフラッシュやシーンチェンジが存在するか否かの判定等を行う。

決定部１１３は、判定部１１２による判定結果に基づき、動画像の各フレームについて参照フレームを決定するブロックである。決定部１１３は、判定部１１２による判定結果に基づき、フラッシュ開始前のフレームをフラッシュ終了後のフレームの参照フレームとする決定等を行う。

図２は、動画像内に存在するフラッシュについて説明するための図である。図２には、Ａ，Ｂ，Ｃ，，，，，Ｄ，Ｅ，Ｆと続く一連の動画像を構成する６枚のフレームが図示されている。Ａ，Ｂ，Ｃの３枚のフレームとＤ，Ｅ，Ｆの３枚のフレームとがそれぞれ、３枚の隣接するフレームとなっている。

フレームＢ，Ｃ，Ｄ，Ｅ内には、フラッシュが存在する。フレームＢ，Ｃ，Ｄ，Ｅ内に存在するフラッシュは、フレームＢとフレームＥをそれぞれフラッシュ開始とフラッシュ終了とする一連のフラッシュである。フレームＡは一連のフラッシュ開始直前のフレームに相当し、フレームＦは一連のフラッシュ終了直後のフレームに相当する。

本実施例では、ある一連のフラッシュ開始直前のフレームＡを、その一連のフラッシュ終了直後のフレームＦの参照フレームとする。理由は、フラッシュ終了直後のフレームＦは、直前のフレームＥとの類似度よりもフラッシュ開始直前のフレームＡとの類似度の方が高い場合が多いからである。これにより、フラッシュを包含する動画像の圧縮率が向上される。本実施例では、こういった処理が、比較部１１１による比較処理と判定部１１２による判定処理と決定部１１３による決定処理をもって実行される。

なお、本処理では、適用対象をフラッシュ開始直前のフレームとフラッシュ終了直後のフレームに限定する必要はない。例えば、フラッシュ開始直前のフレームの１つ前のフレームを、フラッシュ終了直後のフレームの参照フレームとしてもよいし、フラッシュ開始直前のフレームを、フラッシュ終了直後のフレームの１つ後のフレームの参照フレームとしてもよい。

また、本処理では、適用対象を一連のフラッシュに限定する必要はない。例えば、ある一連のフラッシュ開始直前のフレームを、後続の一連のフラッシュ終了直後のフレームの参照フレームとしてもよい。実際、多数の爆発物の爆発時の様子を撮影した映像や、多数の写真機による写真撮影の様子を撮影した映像について、多発するフラッシュの区切りを検出する事に固執する事は無意味な事が多い。

図３は、第１画像処理装置１０１の処理（動画像圧縮の準備）について説明するためのフローチャート図である。

先ず、Ｓ１０１では、比較部１１１が、動画像の各フレームについて、各フレーム内の全画素の輝度の合計Ａと、各フレームの水平方向のライン上の全画素の輝度のライン毎の合計Ｂと、各フレームの垂直方向のライン上の全画素の輝度のライン毎の合計Ｃとをそれぞれ算出する。Ｎ番目のフレームの参照フレームが指定される際には、Ｎ番目のフレームとＮ−１番目のフレームの輝度合計Ａ，Ｂ，Ｃが算出される。輝度合計Ａ，Ｂ，Ｃの算出方法は図４に図示されている。

次に、Ｓ１０２では、比較部１１１が、動画像のフレーム間において、各フレーム内の全画素の輝度合計Ａの、フレーム間における差分ΔＡと、各フレームの水平方向のライン上の全画素のライン毎の輝度合計Ｂの、対応ライン間における差分ΔＢと、各フレームの垂直方向のライン上の全画素のライン毎の輝度合計Ｃの、対応ライン間における差分ΔＣとをそれぞれ算出する。Ｎ番目のフレームの参照フレームが指定される際には、Ｎ番目のフレームとＮ−１番目のフレームとの間での輝度合計差ΔＡ，ΔＢ，ΔＣが算出される。輝度合計差ΔＡ，ΔＢ，ΔＣの算出方法は図５に図示されている。

続いて、Ｓ１０３では、比較部１１１が、動画像のフレーム間において、フレーム間における輝度合計差ΔＡが閾値α以上であるか否かを判断する。フレーム間での輝度合計差ΔＡが閾値α以上であるという事は、フレーム間での輝度変化が大きいという事なので、本フローチャートは、あるフレーム間での輝度合計差ΔＡが閾値α以上である場合には、そのフレーム間にてフラッシュの発生・消滅やシーンチェンジが起きているとして処理が進行するようになっている。あるフレーム間の輝度合計差ΔＡが閾値α以上である場合、そのフレーム間についての処理はＳ１０４に移行して、あるフレーム間の輝度合計差ΔＡが閾値α未満である場合、そのフレーム間についての処理はＳ１３１に移行する。なお、フレームの範囲内で物体が動くだけではフレームの輝度合計Ａはさほど変わらないので、フレームの範囲内で物体が動いている際のフレーム間の輝度合計差ΔＡはさほど大きくはならない。即ち、Ｓ１０３の処理には、フラッシュの発生・消滅やシーンチェンジと物体の運動とを区別できるという効果がある。

続いて、Ｓ１０４では、比較部１１１が、動画像のフレーム間において、対応ライン間における輝度合計差ΔＢが閾値β以上であるような水平方向のラインの存在を検出する。

続いて、Ｓ１０５では、比較部１１１が、動画像のフレーム間において、対応ライン間における輝度合計差ΔＣが閾値γ以上であるような垂直方向のラインの存在を検出する。

続いて、Ｓ１１１では、判定部１１２が、比較部１１１による比較結果に基づいて、各フレーム内にフラッシュやシーンチェンジが存在するか否かを判定する。具体的にはここでは、輝度合計差ΔＡが閾値α以上であるフレーム間における、輝度合計差ΔＢが閾値β以上であるような水平方向のラインと輝度合計差ΔＣが閾値γ以上であるような垂直方向のラインの「分布」に基づいて、フレーム間にてフラッシュの発生・消滅が起きているかフラッシュの発生・消滅が起きていない（シーンチェンジが起きている）か、即ち、処理対象のフレーム内にフラッシュが存在するかフラッシュが存在しない（シーンチェンジが存在する）かが判定される。

フラッシュかシーンチェンジかの判定方法は図６に図示されている。図６Ａのように、輝度合計差ΔＢが閾値β以上の水平ラインと輝度合計差ΔＣが閾値γ以上の垂直ラインの分布に偏りがある場合は、判定結果はフラッシュ（Ｓ１１２）となる。図６Ｂのように、輝度合計差ΔＢが閾値β以上の水平ラインと輝度合計差ΔＣが閾値γ以上の垂直ラインの分布に偏りがない場合は、判定結果はシーンチェンジ（Ｓ１１３）となる。分布の偏りの有無については、相関を算出する等の統計的方法により機械的に判定可能である。

輝度合計差ΔＢが閾値β以上の水平ラインと輝度合計差ΔＣが閾値γ以上の垂直ラインの分布に偏りがない場合には、さらに「各水平ライン間の輝度合計差ΔＢ」と「フレーム間の輝度合計差ΔＡ÷フレームの垂直方向の画素数」との差分、すなわち「各水平ライン間の輝度合計差ΔＢ」と「全水平ライン間の輝度合計差ΔＢの平均」との差分を判定材料としてもよい。または「各垂直ライン間の輝度合計差ΔＣ」と「フレーム間の輝度合計差ΔＡ÷フレームの水平方向の画素数」との差分、すなわち「各垂直ライン間の輝度合計差ΔＣ」と「全垂直ライン間の輝度合計差ΔＣの平均」との差分を判定材料としてもよい。輝度合計差とその平均との差分が大きいラインが多い又は少ないという事は、ライン間の輝度合計差の分布の偏りが大きい又は少ないという事なので、判定結果をフラッシュ又はシーンチェンジとする。

なお、Ｓ１１１の処理では、フラッシュの有無だけでなくフラッシュの存在領域が特定される事になる。フラッシュの存在領域の特定方法は図７に図示されている。フラッシュの存在領域では、図７のように、輝度合計差ΔＢが閾値β以上の水平ラインと輝度合計差ΔＣが閾値γ以上の垂直ラインとが交差する事になる。そのため、判定部１１２は、当該水平ラインと当該垂直ラインとが交差する領域をフラッシュの存在領域として特定する事になる。フラッシュの存在領域の特定結果は、各フレームの参照フレームが各フレームのブロック毎に指定される場合において特に有用である。フラッシュ終了直後のフレームにおいて、フラッシュの存在領域にあるブロックについてはフラッシュ開始直前のフレームを参照フレームとして、フラッシュの存在領域にないブロックについては直前のフレームを参照フレームとする事で、フラッシュを包含する動画像の圧縮率が更に向上される事になるからである。

続いて、Ｓ１２１では、決定部１１３が、判定部１１２による判定結果に基づいて、各フレームの参照フレームを決定する。具体的にはここでは、各フレーム内にフラッシュが存在するか否かという判定結果に基づいて、フラッシュ開始直前のフレームがフラッシュ終了直後のフレームの参照フレームとして決定される。その他のフレームについては原則として、各フレームの直前の１フレームまたは数フレームが各フレームの参照フレームとして決定される。更には、各フレーム内の各ブロック内にフラッシュが存在するか否かという判定結果に基づいて、フラッシュの存在領域に位置するブロックについてフラッシュ開始直前のフレームがフラッシュ終了直後のフレームの参照フレームとして決定される事にしてもよい。

なお、決定部１１３による決定結果は、第２画像処理装置１０２に提供すべく、決定部１１３から出力される。出力態様は、決定部１１３が決定結果を第２画像処理装置１０２が利用可能な記憶媒体に記憶させるような出力態様でもよいし、決定部１１３が決定結果を第２画像処理装置１０２に対して送信するような出力態様でもよい。

また、決定部１１３は、動画像を構成する全フレームについて参照フレームを決定するのではなく、動画像を構成する「フラッシュ終了直後のフレーム」のみについて参照フレームを決定するようにしてもよい。この場合、その他のフレームの参照フレームについては、デフォルトで決定されているという取り扱いにする。これにより、決定結果の情報量が少なくて済む事になる。

続いて、Ｓ１３１では、動画像の各フレームについてＳ１０１からＳ１２１までの処理が実行された否かが判断される。動画像の全フレームについてＳ１０１からＳ１２１までの処理が実行されるまで、動画像の各フレームについてＳ１０１からＳ１２１までの処理が実行される。

このように、第１画像処理装置１０１は、各フレーム内にフラッシュが存在するか否かを判定し、フラッシュ開始前のフレームをフラッシュ終了後のフレームの参照フレームとして決定する。これによって、フラッシュを包含する動画像の圧縮率が向上される。このように、第１画像処理装置１０１においては、動画像を構成するフレームの参照フレームが適切に決定される。

さらには、第１画像処理装置１０１は、動画像のフレーム間において、各フレーム内の各画素の輝度の合計Ａ同士と、各フレームの水平方向のライン上の各画素の輝度のライン毎の合計Ｂ同士と、各フレームの垂直方向のライン上の各画素の輝度のライン毎の合計Ｃ同士とをそれぞれ比較するという簡単な演算で、動画像の各フレーム内にフラッシュが存在するか否かを判定する。すなわち、動画像の各フレーム内にフラッシュが存在するか否かを判定する処理が効率化されている。そのため、第１画像処理装置１０１においては、動画像を構成するフレームの参照フレームが効率的に決定される。

なお、水平方向のラインに関する輝度合計Ｂ及び輝度合計差ΔＢや垂直方向のラインに関する輝度合計Ｃ及び輝度合計差ΔＣは、ここでは１ライン毎に算出されているが、複数ライン毎に算出されるようにしてもよい。例えば、１ブロック毎（１６ライン毎）にＢ，ΔＢ，Ｃ，ΔＣが算出されるようにしてもよい。

また、水平方向のラインに関する輝度合計Ｂ及び輝度合計差ΔＢや垂直方向のラインに関する輝度合計Ｃ及び輝度合計差ΔＣは、ここでは全部のラインについて算出されているが、一部のラインについて算出されるようにしてもよい。例えば、Ｂ，ΔＢ，Ｃ，ΔＣが１ラインおきの１ライン毎に算出されるようにしてもよい。

また、フレームのラインに関する輝度合計と輝度合計差は、ここでは水平方向のラインと垂直方向のラインに関して算出されているが、図８のように、互いに直交する第１方向のラインと第２方向のラインに関して算出されるようにしてもよいし、さらには、図９のように、互いに非平行の第１方向のラインと第２方向のラインに関して算出されるようにしてもよい。ただし、物体の運動を区別する精度が高いという点で、非平行よりも直交の方が優れている。そして、演算が容易（特に集積回路の演算の場合）という点で、単なる直交よりも水平・垂直の方が優れている。ちなみに、フレームのラインに関する輝度合計と輝度合計差が水平方向のラインと垂直方向のラインに関して算出される場合、図１０のように、水平方向や垂直方向の物体運動の区別精度が高くなる。

動画像圧縮を実行する画像処理システムのブロック図である。 動画像内に存在するフラッシュについて説明するための図である。 第１画像処理装置の処理について説明するためのフローチャート図である。 輝度合計Ａ，Ｂ，Ｃの算出方法について説明するための図である。 輝度合計差ΔＡ，ΔＢ，ΔＣの算出方法について説明するための図である。 フラッシュかシーンチェンジかの判定方法について説明するための図である。 フラッシュの存在領域の特定方法について説明するための図である。 互いに直交する第１方向のラインと第２方向のラインを表す。 互いに非平行の第１方向のラインと第２方向のラインを表す。 物体運動の区別精度について説明するための図である。

符号の説明

１０１ 第１画像処理装置
１０２ 第２画像処理装置
１１１ 比較部
１１２ 判定部
１１３ 決定部
１２１ 輝度算出部
１２２ 輝度保持部
１２３ 輝度差算出部
１２４ 輝度差保持部
１２５ 閾値処理管理部
１２６ 閾値処理結果保持部

Claims (5)

1. 動画像の各フレームについて、フレーム間予測による動画像圧縮のための参照フレームを決定する画像処理装置であって、
   各フレーム内の画素を任意の第１方向に沿って複数のラインに分割し、さらに、各フレーム内の画素を前記第１方向と非平行の第２方向に沿って複数のラインに分割し、動画像のフレーム間において、各フレーム内の画素の輝度の合計同士と、各フレームの前記第１方向のライン上の画素の輝度の合計同士と、各フレームの前記第２方向のライン上の画素の輝度の合計同士とをそれぞれ比較する比較手段と、
   前記比較手段による比較結果に基づき、各フレーム内にフラッシュが存在するか否かの判定を行う判定手段と、
   前記判定手段による判定結果に基づき、フラッシュの開始前のフレームをフラッシュの終了後のフレームの参照フレームとする決定を行う決定手段とを備えることを特徴とする画像処理装置。
2. 前記比較手段は、
   動画像のフレーム間において、各フレーム内の画素の輝度の合計同士と、各フレームの前記第１方向のライン上の画素の輝度の合計同士と、各フレームの前記第１方向と直交する前記第２方向のライン上の画素の輝度の合計同士とをそれぞれ比較することを特徴とする請求項１記載の画像処理装置。
3. 前記比較手段は、
   動画像のフレーム間において、各フレーム内の画素の輝度の合計同士と、各フレームの前記第１方向である水平方向のライン上の画素の輝度の合計同士と、各フレームの前記第２方向である垂直方向のライン上の画素の輝度の合計同士とをそれぞれ比較することを特徴とする請求項２記載の画像処理装置。
4. 前記比較手段は、
   動画像のフレーム間において、各フレーム内の画素の輝度の合計同士と、各フレームの前記第１方向のライン上の画素の輝度のライン毎の合計同士と、各フレームの前記第２方向のライン上の画素の輝度のライン毎の合計同士とをそれぞれ比較することを特徴とする請求項１乃至３のいずれか１項記載の画像処理装置。
5. 動画像の各フレームについて、フレーム間予測による動画像圧縮のための参照フレームを決定する画像処理方法であって、
   各フレーム内の画素を任意の第１方向に沿って複数のラインに分割し、さらに、各フレーム内の画素を前記第１方向と非平行の第２方向に沿って複数のラインに分割し、動画像のフレーム間において、各フレーム内の画素の輝度の合計同士と、各フレームの前記第１方向のライン上の画素の輝度の合計同士と、各フレームの前記第２方向のライン上の画素の輝度の合計同士とをそれぞれ比較する比較段階と、
   前記比較段階による比較結果に基づき、各フレーム内にフラッシュが存在するか否かの判定を行う判定段階と、
   前記判定段階による判定結果に基づき、フラッシュの開始前のフレームをフラッシュの終了後のフレームの参照フレームとする決定を行う決定段階とを備えることを特徴とする画像処理方法。

Images