JP2003316348A5 - - Google Patents

Description

【００４７】
次に画像処理装置２０の動作について説明する。シーンチェンジ検出部２１は、正規化値Ｅあるいは相関係数ｒに基づいて、入力画像のシーンチェンジ位置を検出する。例えば、画像信号ＳＤinに基づく画像が図１０に示すものである場合、シーンチェンジ検出によって、フレームＦ（a-1）とフレームＦ（a）間、及びフレームＦ(a+4)とフレームＦ(a+5)間でシーンチェンジと検出されて、フレームＦ（a）〜Ｆ(a+4)の画像が連続シーンの画像であると判別できる。また、動き検出部２２は、各フレームの画像に基づいて動き検出を行い、動き検出情報ＭＶＤを生成する。

【００４９】
図１１は、動き累積値ＭＶＴに基づく例えば左右方向の累積された動き量を示している。ここで、図１０に示すように、連続シーンの入力画像が右方向に移動する被写体ＯＢ（車）を撮影したもので場合、入力画像に対する全画面の動き検出では背景部分の画像動きが検出されて動き検出情報ＭＶＤが生成される。このため、動き累積値ＭＶＴの動き量は図１１Ａに示すように、左方向に増加する。

Claims (21)

1. 入力画像のシーンチェンジを検出するシーンチェンジ検出手段と、
   前記入力画像内の画像動きを検出する動き検出手段と、
   前記シーンチェンジ検出手段によって検出されたシーンチェンジに基づいて連続シーンの期間を判別して、該連続シーンの期間中に前記動き検出手段で検出された画像動きに基づき前記連続シーンの期間中の前記入力画像を重畳させて、前記入力画像よりも広画角であって前記入力画像の位置が前記画像動きに応じて変化される表示画像を生成する表示画像生成手段を有する
   ことを特徴とする画像処理装置。
2. 前記シーンチェンジ検出手段は、
   前記入力画像内の隣接フレーム間の相関値を算出する相関値算出手段と、
   前記相関値に基づいて、シーンチェンジの有無を判定する判定手段とを有することを特徴とする請求項１記載の画像処理装置。
3. 前記相関値は、相関係数である
   ことを特徴とする請求項２記載の画像処理装置。
4. 前記相関値算出手段は、
   隣接フレーム間の差分値の平均値を差分平均値として算出する差分平均算出手段と、
   １フレームの画素値の平均値を画素平均値として算出する画素平均値算出手段と、
   前記画素平均値を用いて、前記差分平均値を正規化し、正規化された前記差分平均値を前記相関値として出力する正規化手段とを有する
   ことを特徴とする請求項２記載の画像処理装置。
5. 前記表示画像生成手段は、
   前記連続シーンの期間中に前記動き検出手段で検出された画像動きに基づき、前記入力画像の表示位置を決定する表示位置決定手段と、
   前記表示位置決定手段で表示位置が決定された前記連続シーンの期間中の入力画像を重畳させて、前記入力画像よりも広画角の広画角画像を生成する広画角画像生成手段と、
   前記入力画像を前記記表示位置決定手段で決定された表示位置に移動する入力画像移動手段と、
   前記入力画像移動手段で表示位置が移動された入力画像を前記広画角画像に重畳することで前記表示画像を生成する画像重畳手段とを有する
   ことを特徴とする請求項１記載の画像処理装置。
6. 前記広画角画像生成手段は、前記表示位置決定手段で表示位置が決定された前記連続シーンの期間中の入力画像を逆時間順に順次重畳することで前記広画角画像を生成する
   ことを特徴とする請求項５記載の画像処理装置。
7. 前記広画角画像生成手段は、前記表示画像における前記入力画像部分が前記表示画像を表示する画像表示領域を超えないように、前記広画角画像の表示位置を前記連続シーンの期間中に前記動き検出手段で検出された画像動きに基づいて移動させるものとし、
   前記入力画像移動手段は、前記広画角画像生成手段における前記広画角画像の移動に伴い、前記記表示位置決定手段で決定された表示位置を補正する
   ことを特徴とする請求項５記載の画像処理装置。
8. 前記広画角画像生成手段は、前記広画角画像と前記表示画像を表示する画像表示領域との大きさに基づいて、前記表示位置を前記連続シーンの期間中に前記動き検出手段で検出された画像動きに基づいて移動させるものとし、
   前記入力画像移動手段は、前記広画角画像生成手段における前記広画角画像の移動に伴い、前記表示位置決定手段で決定された表示位置を補正する
   ことを特徴とする請求項５記載の画像処理装置。
9. 前記表示画像を分割する画像分割手段を有し、
   前記画像分割手段は、前記表示画像を表示する画像表示領域が複数の表示領域で構成されているとき、前記複数の表示領域に対応させて前記表示画像を分割する
   ことを特徴とする請求項１記載の画像処理装置。
10. 入力画像内の画像の動きに応じて、画像の表示位置を変更する画像処理装置において、
    前記入力画像内の画像動きを検出する動き検出手段と、
    前記動き検出手段で検出された画像動きの複数フレーム分の情報に基づき、前記入力画像の表示位置を決定する表示位置決定手段と、
    前記入力画像を前記表示位置決定手段で決定された表示位置に移動する入力画像移動手段とを有する
    ことを特徴とする画像処理装置。
11. 入力画像のシーンチェンジと前記入力画像内の画像動きを検出し、
    検出されたシーンチェンジに基づいて連続シーンの期間を判別して、該連続シーンの期間中に検出された画像動きに基づき前記連続シーンの期間中の前記入力画像を重畳させて、前記入力画像よりも広画角であって前記入力画像の位置が前記画像動きに応じて変化される表示画像を生成する
    ことを特徴とする画像処理方法。
12. 前記入力画像内の隣接フレーム間の相関値を算出し、該相関値に基づいて、シーンチェンジの有無を判定する
    ことを特徴とする請求項１１記載の画像処理方法。
13. 前記相関値は、相関係数である
    ことを特徴とする請求項１２記載の画像処理方法。
14. 隣接フレーム間の差分値の平均値を差分平均値として算出し、
    １フレームの画素値の平均値を画素平均値として算出し、
    前記画素平均値を用いて、前記差分平均値を正規化し、正規化された前記差分平均値を前記相関値として用いる
    ことを特徴とする請求項１２記載の画像処理方法。
15. 前記連続シーンの期間中に検出された画像動きに基づき、前記入力画像の表示位置を決定するものとし、
    前記表示位置が決定された前記連続シーンの期間中の入力画像を重畳させて、前記入力画像よりも広画角の広画角画像を生成し、
    前記入力画像を前記表示位置に移動するものとし、
    前記表示位置が移動された入力画像を前記広画角画像に重畳することで前記表示画像を生成する
    ことを特徴とする請求項１１記載の画像処理方法。
16. 前記表示位置が決定された前記連続シーンの期間中の入力画像を逆時間順に順次重畳することで前記広画角画像を生成する
    ことを特徴とする請求項１５記載の画像処理方法。
17. 前記表示画像における前記入力画像の部分が前記表示画像を表示する画像表示領域を超えないように、前記広画角画像の表示位置を前記連続シーンの期間中に検出された画像動きに基づいて移動させるものとし、
    前記広画角画像の移動に伴い、前記連続シーンの期間中の入力画像に対する表示位置を補正する
    ことを特徴とする請求項１５記載の画像処理方法。
18. 前記広画角画像と前記表示画像を表示する画像表示領域との大きさに基づいて、前記表示位置を前記連続シーンの期間中に検出された画像動きに基づいて移動させるものとし、
    前記広画角画像の移動に伴い、前記決定された表示位置を補正する
    ことを特徴とする請求項１５記載の画像処理方法。
19. 前記表示画像を表示する画像表示領域が複数の表示領域で構成されているとき、前記複数の表示領域に対応させて前記表示画像を分割する
    ことを特徴とする請求項１１記載の画像処理方法。
20. 入力画像内の画像の動きに応じて、画像の表示位置を変更する画像処理方法において、
    前記入力画像内の画像動きを検出し、前記検出された画像動きの複数フレーム分の情報に基づき、前記入力画像の表示位置を決定し、前記入力画像を前記決定された表示位置に移動する
    ことを特徴とする画像処理方法。
21. コンピュータに、
    入力画像のシーンチェンジを検出する手順と、
    前記入力画像内の画像動きを検出する手順と、
    検出されたシーンチェンジに基づいて連続シーンの期間を判別して、該連続シーンの期間中に検出された画像動きに基づき前記連続シーンの期間中の前記入力画像を重畳させて、前記入力画像よりも広画角であって前記入力画像の位置が前記画像動きに応じて変化される表示画像を生成する手順と
    を実行させることを特徴とする画像処理プログラム。

Images