JP2006060309A - 表示装置 - Google Patents

Abstract

【課題】
未来の画像を表示する。
【解決手段】
動画像から所望の領域を抽出する境界検出処理（Ｓ１１０）、閉境界の決定処理（Ｓ１２０）、
現在の動画像の領域と、過去の動画像の領域とのパターンマッチングを行うパターンマッチング処理（Ｓ６００ないしＳ６１０）と、
上記パターンマッチング処理（Ｓ６００ないしＳ６１０）によってパターンが一致した領域間の移動状態を算出する領域移動状態算出手段（Ｓ７００ないしＳ７３０）と、
上記領域移動状態算出手段（Ｓ７００ないしＳ７３０）の算出結果に基づいて、上記領域記憶手段に記憶されている現在の動画像の領域を現在から所定時間経過時の推定位置に移動させるグループ毎に移動処理（Ｓ１０００〜Ｓ１０２０）と、
上記グループ毎に移動処理による移動後の領域の画像を上記ディスプレイ２５に表示する表示処理（Ｓ１１００〜Ｓ１２１０）と
を備えることを特徴とするカメラ１。
【選択図】 図１７

Description

本発明は、例えばスチルカメラの撮像範囲をモニタしたり、表示したりすることに適する表示装置の技術に関する。

従来、例えば、スチルカメラでは、ファインダー、又はモニタを見ながらシャッタタイミングを計り、所望のタイミングでシャッタを操作して、そのときの画像を記録する。
又、撮像した動画を認識したり、変形したりする技術として、様々な技術が提案されている。

例えば、画像の輪郭座標データを抽出する技術（特許文献１参照）、文字のパターンマッチング技術、及びアフィン変換の利用技術（特許文献２参照）、特徴点同士を比較するパターン認識技術、ヘルマート変換式やアフィン変換式などの変換モデルを利用（特許文献３参照）、動画像のジェスチャーをパターン認識する技術、特徴パラメータを利用（特許文献４参照）、位置ズレ量を検出する技術、パターン認識による（特許文献５参照）、アフィン変換式による入力画像の補正技術（特許文献６参照）、動画像から所望の領域を抽出する技術（特許文献７参照）など多数が開示されている。
特開平５−２１１６０２号公報 特開平５−２８３２１号公報 特開平８−３０７８３号公報 特開平９−２４５１７８号公報 特開平８−２４０４１１号公報 特開平１０−９１７８３号公報 特開平１１−２３８１３８号公報

ところで、例えば、従来のスチルカメラで、移動被写体を撮影しようとした場合には、移動する被写体の動きを予想して、待ち受け撮影したり、或いは始動する被写体を後追い撮影したりする。

しかしながら、待ち受け撮影するには、予め被写体の動きを把握して、予想しなければ、被写体を画面の中に入れて、撮影することは殆ど不可能である。
又、初めて出会ったシャッタチャンスを生かすことは、極めて難しい。

一方、後追い撮影では、カメラブレ、背景の流れ、ピント位置の適正化などを考慮して、撮影しなければならず、初めて出会ったシャッタチャンスで、良好な写真撮影を行うことは、殆ど不可能であった。

この様な不具合を防ぐには、所定期間の動画を最高解像度で一時的に蓄えておいて、シャッタボタンが操作されたときの画像を記憶するようにすれば、良いが、メモリが大量に必要な問題や消費電力が多くなって、携帯に向かない問題から現実的ではない。又、フィルムカメラでは、適用することが出来ない。

そこで、本発明では、例えば、スチルカメラで、移動する被写体を簡単に、且つ所望の位置や状態で、撮影させることを可能にする画像を提供する表示装置の提供を目的とする。

上記課題を解決するための手段として、請求項１の発明の表示装置は、撮像した動画像を表示手段に表示する表示装置において、上記動画像から所望の領域を抽出する領域抽出手段と、上記領域抽出手段で指示された領域を上記動画像別に記憶する領域記憶手段と、上記領域記憶手段に記憶されている現在の動画像の領域と、過去の動画像の領域との相関状態を判断する相関状態判断手段と、上記相関状態判断手段によって相関度が高いと判断された領域間の移動状態を算出する領域移動状態算出手段と、上記領域移動状態算出手段の算出結果に基づいて、上記領域記憶手段に記憶されている現在の動画像の領域を現在から所定時間経過時の推定位置に移動させる領域移動手段と、上記領域移動手段による移動後の領域の画像を上記表示手段に表示する移動後画像形成手段とを備えることを要旨とする。

これにより、領域抽出手段が撮像した動画像の１コマ（１フレーム）の画像から所望の領域を抽出し、領域記憶手段がその領域を上記動画像別に記憶する。この処理が常時繰り返し行われる。ここで記憶される領域のデータは、表示手段による表示が可能な程度の低解像度のもので良く、且つ記憶も最長で１秒程度で良い。尚、動画像の処理では、動画像の１コマ（１フレーム）単位の画像に対して、読込、加工、記憶を行い、これらが連続して表されることで、動画像を表示することになる。

この様に領域記憶手段が次々に、領域を記憶している状態で、相関状態判断手段が現在の動画像の領域と、過去の動画像の領域との相関状態を判断する。例えば、最後に領域記憶手段に記憶した領域と、前回記憶した領域との相関状態を判断する。

次いで、領域移動状態算出手段が相関度が高いと判断された領域間の移動状態を算出すると、領域移動手段が、その算出結果に基づいて、領域記憶手段に記憶されている現在の動画像の領域を現在から所定時間経過時の推定位置に移動させ、移動後画像形成手段がその移動後の領域の画像を表示手段に表示する。

これにより、現在から所定時間経過後の動画像が表示される。尚、相関度が高いとの判断手法としては、領域の形状がほぼ同一形状である場合、或いは前回の領域の形状をアフィン変換式などを用いて変形した後の形状と、現在の領域の形状とがほぼ同一か相似形である場合に相関度が高いと判断する。尚形状の対比は、特開平１１−２３８１３８号に示されている技法などどの様な技術を用いても良い。

従って、例えば、スチルカメラのファインダーやモニタディスプレイを用いることで、次のような機能を発揮する。
例えば、スチルカメラのＣＣＤが撮影した動画像が０．５秒後になるであろうと推定される動画像をモニタディスプレイに表示する。このモニタディスプレイを見て、被写体がモニタディスプレイの真ん中に表示されているのを確認して、シャッタを操作する。

シャッタを操作した時点にＣＣＤが撮影した画像が記録される。
この様にすることで、撮影者は、モニタディスプレイの画像が所望の状態になったことを確認してから、シャッタを押すだけで、モニタディスプレイの画像に近い位置に被写体が達したときの実際の画像を高解像度で記録することが可能になる。又、これは、被写体が実際に移動している場合、していない場合、スチルカメラが移動している場合、いない場合の何れの状態でも実現可能である。

尚、所定時間経過時の推定位置は、ここでは、０．５秒としたが、これは、実験により適切な値が求められ、設定される設計値である。又、この所定時間経過時間を撮影者が可変出来るようにし、撮影者の好みによって、短くしたり、長くしたりしても良い。

例えば、動作をゆっくり行う傾向の人は、長くし、反射的に動作を行う人は、時間を短くする様に使う。
請求項２の発明の表示装置は、上記相関状態判断手段によって相関度が高いと判断される場合は、現在の動画像の領域の形状と、過去の動画像の領域の形状との類似度合いがほぼ同一形状と判断できる場合であることを特徴とする請求項１に記載の表示装置を要旨とする。

これにより、領域抽出手段が撮像した動画像から所望の領域を抽出し、領域記憶手段がその領域を上記動画像別に記憶する。この処理が常時繰り返し行われる。
この様に領域記憶手段が次々に、領域を記憶している状態で、相関状態判断手段が現在の動画像の領域の形状と、過去の動画像の領域の形状との類似度合いがほぼ同一形状であるかを判断する。例えば、最後に領域記憶手段に記憶した領域の形状と、前回記憶した領域の形状とがほぼ同一であるかを判断する。

次いで、領域移動状態算出手段がほぼ同一形状であると判断された領域間の移動状態を算出すると、領域移動手段が、その算出結果に基づいて、領域記憶手段に記憶されている現在の動画像の領域を現在から所定時間経過時の推定位置に移動させ、移動後画像形成手段がその移動後の領域の画像を表示手段に表示する。

これにより、現在から所定時間経過後の動画像が表示される。
尚、領域の形状がほぼ同一であるかを判断する手法の例としては、特開平１１−２３８１３８号公報に示されている動画像から所望の領域を抽出する技法を用いることが可能である。

請求項３の発明の表示装置は、上記領域移動状態算出手段が算出する移動状態は、上記過去の動画像の領域の位置から上記現在の動画像の領域の位置まで移動する時間と、移動距離と、移動方向とに基づいて算出されることを特徴とする請求項１、又は請求項２に記載の表示装置を要旨とする。

これにより、請求項１、又は請求項２と同様の作用が得られることに加え、移動状態が、移動する時間と、移動距離と、移動方向とに基づいて算出される軌跡によって明確に表現される。

例えば、０．５秒間に、領域が移動した軌跡を数式化することが出来る。そして、今から０．５秒間経過するまで、今までの軌跡がそのまま踏襲されると仮定することも可能である。従って、今から０．５秒間後に領域が位置する座標を数値化することも可能になる。
例えば、領域が特定の方向に一定の速度で移動していた場合には、その移動方向を所定の時間分だけ延ばしてやることで、所定の時間後の位置が算出される。

又、曲線を描いて移動していた場合には、その曲線の式を求めることで、未来（所定時間経過時）の領域の位置を数値化することが可能になる。
尚、位置などの数値化に際しては、例えばＣＣＤの画素に基づいて行う。例えば、ＣＣＤの左下隅を原点（０、０）にし、横方向と、縦方向の画素数で、座標を表現する。例えば、（１、１）などの様に表現する。

請求項４の発明の表示装置は、上記領域移動手段が算出する所定時間経過時の推定位置は、上記過去の動画像の領域が上記現在の動画像の領域の位置まで移動した軌跡に基づいて、該現在の動画像の領域が所定時間経過時に到達する位置を算出することにより求められることを特徴とする請求項１ないし請求項３の何れかに記載の表示装置を要旨とする。

これにより、請求項１ないし請求項３の何れかと同様の作用が得られることに加え、未来（所定時間経過時）の領域の位置を数値化することが可能になる。
請求項５の発明の表示装置は、上記移動後画像形成手段が表示手段に表示する領域の画像は、同一の移動状態と判断される領域の画像毎にグループ分けし、グループを構成する領域の合計面積が小さい方のグループの画像を大きい方のグループの画像に上書きすることを特徴とする請求項１ないし請求項４の何れかに記載の表示装置を要旨とする。

これにより、請求項１ないし請求項４の何れかと同様の作用が得られることに加え、同一の移動状態と判断される領域の画像毎にグループ分けされた場合に、グループを構成する領域の合計面積が小さい方のグループの画像が大きい方のグループの画像に上書きされることで、領域の合計面積が小さい方のグループを注目画像として目立つ様に表示することが可能になる。

従って、注目画像を見ながらシャッタチャンス狙うことが可能になる表示が出来る。
請求項６の発明の表示装置は、上記表示手段は、スチルカメラのファインダー、又はスチルカメラのモニタであることを特徴とする請求項１ないし請求項５の何れかに記載の表示装置を要旨とする。

これにより、請求項１ないし請求項５の何れかに記載の作用を有するスチルカメラのファインダー、又はモニタが提供される。尚、ビデオカメラ共用型も同様である。
請求項７の発明の表示装置は、上記スチルカメラは、シャッタボタンが操作された場合に、その時点の上記撮像した動画像の静止画像、又は該動画像の被写体の画像を記録することを特徴とする請求項６に記載の表示装置を要旨とする。

これにより、請求項６の作用が得られることに加え、シャッタボタンを押したときの被写体の静止画像をそのまま記憶することが出来る。
請求項８の発明の表示装置は、上記スチルカメラが記録する画像は、上記表示手段が表示する画像に比べて解像度が高いことを特徴とする請求項７に記載の表示装置を要旨とする。

これにより、請求項７の作用が得られることに加え、表示手段が処理速度を優先して、低解像度の画像表示を行っていたとしても、スチルカメラが記憶する画像は、高解像度で、高密度の情報を備える。ここで、高解像度は、１フレームの画素数が多いことであり、高密度の情報は、明るさや色の表現段階が多段階であることを意味する。

請求項１の表示装置は、所定時間経過時に撮像することになる動画像を推定して表示することが出来ることから、この表示を見るものに所定時間経過時の動画像の状態を、その時間に達する前に、見せることが可能になる。

従って、例えば、スチルカメラのファインダーやモニタディスプレイに、この表示装置を取り付けることで、移動する被写体が所望の状態になったことを表示装置で確認してからシャッタを押すだけで、所望の状態の被写体の画像を記録することが可能になるスチルカメラの提供が出来るという極めて優れた効果を奏する。

つまり、特別な技術を持っていなくとも、写したいと思ったときや状態に近い写真を撮ることが容易なスチルカメラ、即ちシャッタチャンスを生かすことが出来るカメラを作ることを可能にする表示装置が提供されるという極めて優れた効果を奏する。

請求項２の表示装置は、所定時間経過時に撮像することになる動画像を推定して表示することが出来ることから、この表示を見るものに所定時間経過時の動画像の状態を、実際に見せることが可能になる。

従って、例えば、スチルカメラのファインダーやモニタディスプレイに、この表示装置を取り付けることで、移動する被写体が所望の状態になったことを表示装置で確認してからシャッタを押すだけで、所望の状態の被写体の画像を記録することが可能になるスチルカメラの提供が出来るという極めて優れた効果を奏する。

つまり、特別な技術を持っていなくとも、シャッタチャンスを生かして、写したいと思った状態に近い写真を撮ることが容易なスチルカメラを作ることを可能にする表示装置が提供されるという極めて優れた効果を奏する。

請求項３の表示装置は、請求項１、又は請求項２と同様の優れた効果が得られることに加え、領域の移動位置を簡単に算出することが可能になる。
請求項４の表示装置は、請求項１ないし請求項３の何れかと同様の優れた効果が得られることに加え、領域の移動位置を簡単に且つ正確に算出することが可能になる。

請求項５の表示装置は、請求項１ないし請求項４の何れかと同様の効果が得られることに加え、同一の移動状態と判断される領域の画像毎にグループ分けされた場合に、グループを構成する領域の合計面積が小さい方のグループの画像が大きい方のグループの画像に上書きされることで、領域の合計面積が小さい方のグループを注目画像として目立つ様に表示することが可能になる。

従って、注目画像を見ながらシャッタチャンス狙うことが可能になる表示が出来るという極めて優れた効果を奏する。この特徴により、移動する被写体を待ち受け撮影することと、後追い撮影することとを両立、つまりどちらでも注目画像を表示することが可能になる。

請求項６の表示装置は、請求項１ないし請求項５の何れかと同様の効果が得られるスチルカメラが提供され、シャッタチャンスを生かすことや、撮影者の意図を反映する撮影を行うことが可能になると言う極めて優れた効果を奏する。

請求項７の表示装置は、請求項６の効果が得られることに加え、シャッタボタンを押したときの被写体の静止画像をそのまま記憶することが出来ることによって、高解像度で、高密度の画像情報を備えた画像データを記憶することが可能なスチルカメラの提供が可能になるという効果を奏する。

請求項８の表示装置は、請求項７の効果が得られることに加え、表示手段が処理速度を優先して、低解像度の画像表示を行っていたとしても、スチルカメラが記憶する画像は、高解像度で、高密度の情報を備えることになり、スチルカメラとしての機能を十分に発揮させた上で、所望の状態の写真の撮影を簡単に且つ確実に行うことが可能になると言う極めて優れた効果を奏する。

次に発明の実施の形態を説明する。
図１は、カメラ１の外観図である。カメラ１は、図１の（Ｂ）に示すように、箱状の本体３と、撮影用のレンズ５と、ファインダーレンズ７と、シャッタボタン９と、設定レバー１１と、設定ボタン１３と、メッセージ表示用のディスプレイ１５と、補助光をストロボ発光するフラッシュランプ１７と、セルフ撮影設定ボタン１９と、セルフ撮影表示ランプ２１と、図１の（Ａ）に示すように、ファインダーレンズ７用のファインダー２３と、モニタ用のディスプレイ２５と、ズームボタン２７、２９と、サービスポート３１とを備えている。

又、設定レバー１１は、切る位置１１Ａ、Ｌ位置１１Ｂ、Ｓ位置１１Ｃ、Ｈ位置１１Ｄを備えている。詳細は、後述する。
このカメラ１は、次の様に使用する。

１．設定レバー１１を切る位置１１Ａにした場合。
この場合には、ディスプレイ２５には、レンズ５が撮像した画像が領域を移動することなく表示される。

又、ズームボタン２７を操作すると、レンズ５が望遠側に移動する。
ズームボタン２９を操作すると、レンズ５が広角側に移動する。
この様なズーミングの状態は、ディスプレイ２５に表示される。従って、ディスプレイ２５の状態を見ながら、レンズ５の焦点距離を好みの状態まで、増減することが出来る。

尚、ファインダー２３は、純光学式の可変焦点式、或いは可変フレーム範囲式であり、ズームボタン２７、２９の操作に応じて、撮影の範囲画像又はフレーム範囲が変動する。従って、実際の撮影範囲にほぼ一致する画像をファインダー２３で見ながら、撮影を行うことも可能である。

シャッタボタン９を操作すると、そのときにレンズ５に入射していた画像が記憶される。尚、この記憶は、解像度や情報の密度は、設定ボタン１３による操作で、予め選択されている。又、この選択状態は、ディスプレイ１５に表示される。

２．設定レバー１１をＬ位置１１Ｂ、Ｓ位置１１Ｃ、Ｈ位置１１Ｄの何れかにした場合。
この場合には、ディスプレイ２５には、レンズ５が撮像した画像の領域が後述する様に、未来の位置に移動した状態が表示される。

他の動作は、上記１．の場合と同様である。
本体３の左側面に設けられているサービスポート３１は、データ記録カード挿入口、外部接続インタフェースコネクタなどが設置されている。

図２は、カメラ１のブロック図である。
カメラ１は、光学式のレンズ５と、レンズ５が取り込んだ光線に応じた電気信号を発生するフルカラー用のＣＣＤ４１と、ＣＣＤ４１の出力した電気信号を３原色毎で、且つ画素毎に記憶する画像メモリ４３と、カメラ１の制御用のＣＰＵ４５と、ＣＰＵ４５からの指令に基づいて、画像メモリ４３に記憶されている画素データを入力して、解像度の調整、画像密度の調整、画像補正などを実行後、撮像データメモリ５１に格納する記録用データ処理部４７と、記録用データ処理部４７に接続された外部メモリコネクタ５３と、外部メモリコネクタ５３に接続される外部メモリカード５５と、ＣＰＵ４５からの指令に基づいて、画像メモリ４３から画素データを入力して、領域の移動などを行うモニタ用データ処理部４９と、モニタ用データ処理部４９に接続されたディスプレイ２５とを備えている。

この構成により、カメラ１は、シャッタボタン９を操作したときに、レンズ５から取り入れた画像を電気信号に変換した画像データを撮像データメモリ５１に記憶する。つまり、慣用されているディジタルカメラの機能を提供する。

又、カメラ１は、レンズ５から取り入れた画像を表示用に変換後、ディスプレイ２５に表示する。以下に、このディスプレイ２５に表示する処理を説明する。
図３は、ディスプレイ２５に表示される画像の説明図である。

ディスプレイ２５には、図３のエリア２５Ｍａｘないしエリア２５Ｍｉｎの範囲が表示される。又、ディスプレイ２５に画像を表示するモニタ用データ処理部４９は、ＣＣＤ４１の最大撮像エリア４１Ｍａｘの画像を入力して、画像処理を実行後、エリア２５Ｍａｘないしエリア２５Ｍｉｎの範囲の画像を表示する。

つまり、ＣＣＤ４１の最大撮像エリア４１Ｍａｘより狭い範囲の画像がディスプレイ２５に表示される。
このエリア２５Ｍａｘないしエリア２５Ｍｉｎの範囲は、モニタ用データ処理部４９によるソフトウエアによるズーミング範囲である。例えば、エリア２５Ｍｉｎがズームボタン２７を押し続けていた場合の画像の範囲であり、エリア２５Ｍａｘがズームボタン２９を操作し続けていた場合の画像の範囲である。

この様に、最大撮像エリア４１Ｍａｘとエリア２５Ｍａｘないしエリア２５Ｍｉｎとの間部分２５Ｋａｎは、手ぶれ補正や領域の移動などの表示画像補正処理用に用いられ、ディスプレイ２５に表示される画像の周辺域を補填する。

図４は、ＣＰＵ４５で実行される処理の全体を示すフローチャートである。全体の流れを図４に基づいて説明し、その後各部を詳細に説明する。
先ずモニタ用画像入力が行われ（Ｓ１００）、次いで、入力した画像の境界を検出する境界検出を行い（Ｓ１１０）、続いて、検出した境界から閉境界を決定する処理を行う（Ｓ１２０）。

次に、現在の閉境界と前回の閉境界とを対比して、ほぼ同一形状である閉境界間を関連付けるパターンマッチング処理を行い（Ｓ１３０）、その後、関連付けられた閉境界毎に、移動の方向と距離を算出するパターン毎に移動の方向と距離算出処理を行う（Ｓ１４０）。

次いで、移動の方向と、距離とがほぼ同一のグループを作るグループ分け処理を行って（Ｓ１５０）、グループ毎に移動後（Ｓ１６０）、各グループを合成して、表示用の画像を作り（Ｓ１７０）、ディスプレイ２５に表示を行う（Ｓ１８０）。

以上がレンズ５から入った光がＣＣＤ４１で電気信号に変換され、画像メモリ４３と、モニタ用データ処理部４９とを経由して、ディスプレイ２５に表示されるまでの流れである。

図５は、図４のＳ１００のモニタ用画像入力処理の詳細を示すフローチャートである。
先ず、ＣＣＤ４１がレンズ５を通して、撮像した画像データをＲＧＢ毎に画像メモリ４３に取り込むＲＧＢ別モニタ画像（モニタ用解像度画像）データ入力処理を行う（Ｓ２００）。

ここでは、写真画質（例えば、数百万画素以上）の撮像が可能なＣＣＤ４１から表示画質（例えば、数万ないし数十万画素）に必要な解像度の画素データをＲＧＢ毎に取り込んで、画像メモリ４３に格納する。尚、写真画質のＣＣＤ４１から表示画質のデータを抽出する方法は、ＣＣＤ４１の構造に依存する方法や読込技術による方法など、どの様な方法でも良い。又、画像メモリ４３への取込は、アナログ信号に替えて取り込んでも良く、或いはディジタルデータで取り込んでも良い。

次いで、画像メモリ４３のＲ画像データを格納しているエリアから、モニタ用データ処理部４９のＲモニタメモリ４９Ｒに移動させるＲ画像データをＲモニタメモリ４９Ｒに格納処理と（Ｓ２１０）、画像メモリ４３のＧ画像データを格納しているエリアから、モニタ用データ処理部４９のＧモニタメモリ４９Ｇに移動させるＧ画像データをＧモニタメモリ４９Ｇに格納処理と（Ｓ２２０）、画像メモリ４３のＢ画像データを格納しているエリアから、モニタ用データ処理部４９のＢモニタメモリ４９Ｂに移動させるＢ画像データをＢモニタメモリ４９Ｂに格納処理と（Ｓ２３０）を行う。これにより、画像メモリ４３に格納されているモニタ用解像度画像のＲＧＢモニタ画像がモニタ用データ処理部４９に移動される。

このモニタ用画像入力処理は、２０ｍｓ毎に実行される。これにより、毎秒５０コマの表示画像を提供することが可能になる。尚、このモニタ用画像入力処理の実行頻度は、設計値であり、適宜適切な値を選択する。例えば、取込頻度を短時間にすれば、滑らかな表示画像が得られるが、コンピュータの資源を大量に消費する。又、電力消費も多くなる。

又、取込頻度を長時間にすれば、コンピュータの資源の消費や負担は、小さくなり、消費電力も少なくなるが、表示画質が低下する。
尚、この図５に示すモニタ用画像入力処理が実行されることで、設定レバー１１が切る位置１１Ａの場合は、このＲモニタメモリ４９Ｒ、Ｇモニタメモリ４９Ｇ、Ｂモニタメモリ４９Ｂに格納された画像データが画質や表示範囲の調整を施されて、ディスプレイ２５に表示される。この場合には、既述したように、領域の移動は行われない。

従って、設定レバー１１が切る位置１１Ａの場合は、レンズ５が撮像した画像が殆ど変更されることなく、ディスプレイ２５に表示される。
このディスプレイ２５の表示を見ながらシャッタボタン９を操作すると、シャッタボタン９が操作されたことをＣＰＵ４５が検出したときに、図６に示す記録用画像入力処理が実行される。

この記録用画像入力処理では、先ず記録かを判断する（Ｓ３００）。この記録の判断は、撮影の条件が満たされているかを見ることで行う。例えば、電源容量が十分か、記憶容量が残っているか、カメラ１に異常がないか、カメラ１が正常に機能しているかなどを判断する。

ここで、記録が出来ないと判断された場合には、シャッタボタン９の操作があっても、一旦そのまま終了する。
又、記録が出来ると判断した場合は、ＣＣＤ４１がレンズ５を通して、撮像した画像データをＲＧＢ毎に画像メモリ４３に取り込むＲＧＢ画像データ入力（フルスペック画像データ（高解像度、高密度データ）を入力）処理を行う（Ｓ３１０）。

次いで、画像メモリ４３の画像データを記録用データ処理部４７に取り込んで、ズーミング、画質調整、解像度調整などを実行後、撮像データメモリ５１に格納する記録用メモリに格納処理を実行して（Ｓ３２０）、本記録用画像入力処理を一旦終了する。

この記録用メモリに格納する処理（Ｓ３２０）が実行されると、写真撮影が一旦完了する。
これにより、撮像データメモリ５１に格納されている写真データの活用が可能になる。

例えば、図示しない、外部出力コードを用いて、写真印刷を行ったり、外部に写真データを出力して、活用することが可能になる。尚、この記録用画像入力処理は、慣用されているディジタルカメラの処理と同様の構成が用いられるので、詳細な説明は、省略する。

図７は、Ｓ１１０の境界検出処理ルーチンのフローチャート、図８は、境界の説明図である。
この境界検出処理が起動されると、先ずＲモニタメモリ４９Ｒに格納されているＲ画像データを読み込んで、境界を検出する処理（Ｓ４００）と、Ｇモニタメモリ４９Ｇに格納されているＧ画像データを読み込んで、境界を検出する処理（Ｓ４１０）と、Ｂモニタメモリ４９Ｂに格納されているＢ画像データを読み込んで、境界を検出する処理（Ｓ４２０）とを実行する。境界の検出方法は、特開平１１−２３８１３８号公報や特開平５−２１１６０２号公報に開示されている例などどの様な方法の利用も可能である。

この様にＲＧＢ毎に境界を算出後（Ｓ４００ないしＳ４２０）、その境界を合成するＲＧＢの境界画像を合成処理を行って（Ｓ４３０）、その合成した画像を保存するＲＧＢ境界画像を読込時の時間情報と共にＲＧＢ境界メモリ４９ＲＧＢ（図２参照）に格納処理を実行する（Ｓ４４０）。

これにより、ＲＧＢ境界メモリ４９ＲＧＢには、レンズ５を通して撮像した画像の輪郭と、読み込んだ時間の情報とが格納される。例えば、図８に示すように、ＲＧＢ境界メモリ４９ＲＧＢに格納された１フレームの画像６１中に、領域６５を囲う様に境界線６３が格納される。

図９は、Ｓ１２０の閉境界の決定処理ルーチンのフローチャートである。
この閉境界の決定処理が起動されると、先ずＲＧＢ境界メモリ４９ＲＧＢからＲＧＢ境界画像を入力して、閉境界エリアを決定し、決定した閉境界エリアに識別コードを付与する処理を行う（Ｓ５００）。例えば、図８の境界線６３によって、閉じた閉境界エリアを抽出して、その抽出した閉境界エリアに識別コードとして、閉境界ＣＫ１、ＣＫ２、ＣＫ３、ＣＫ４、ＣＫ５、ＣＫ６、ＣＫ７、ＣＫ８、ＣＫ９、ＣＫ１０、ＣＫ１１、ＣＫ１２、ＣＫ１３、ＣＫ１４、ＣＫ１５を付与する。

閉境界を識別コードで分類した後（Ｓ５００）、その分類した閉境界エリア情報を読込時の時間情報と共に境界識別メモリ４９ＣＫ（図２参照）に格納する処理を行って（Ｓ５１０）、本ルーチンを一旦終了する。これにより、境界識別メモリ４９ＣＫに図８に示したような閉境界ＣＫ１、ＣＫ２、ＣＫ３、ＣＫ４、ＣＫ５、ＣＫ６、ＣＫ７、ＣＫ８、ＣＫ９、ＣＫ１０、ＣＫ１１、ＣＫ１２、ＣＫ１３、ＣＫ１４、ＣＫ１５の閉境界エリア情報が撮像した時間の情報と共に格納される。

図１０は、Ｓ１３０のパターンマッチング処理ルーチンのフローチャートである。
このパターンマッチング処理が起動されると、先ず境界識別メモリ４９ＣＫに格納されている最新（今回）の閉境界エリア情報の閉境界と、前回（又は所定時間前）の閉境界エリア情報の閉境界とを対比して、パターンマッチングを行って、形状がほぼ一致する閉境界の識別コードを抽出する（Ｓ６００）。パターンマッチングの手法は、どの様な方法を用いても良い。

ここでは、前回のフレームと、今回のフレームとの、即ち極めて短時間差の閉境界のパターンマッチングであるので、殆どの閉境界が、ほぼ一致する程度に、パターンマッチングの類似度の閾値を設定する。尚、この閾値は、設計値である。又、境界の検出の状態と合わせて、実験により、適切な値が設定される。

パターンマッチングを行って、形状がほぼ一致する閉境界の識別コードを抽出後（Ｓ６００）、その識別コード毎の対応関係を対応関係メモリ４９ＣＣ（図２参照）に記録する（Ｓ６１０）。例えば、対応関係メモリ４９ＣＣには、前回の閉境界ＣＫ１と、今回の閉境界ＣＫ２とが同一のような情報が格納される。

図１１は、Ｓ１４０のパターン毎に移動の方向と距離算出処理ルーチンのフローチャートである。
このパターン毎に移動の方向と距離算出処理が起動されると、先ず対応関係メモリ４９ＣＣから形状がほぼ一致するとされた閉境界の閉境界エリアのデータ（閉境界エリア情報）を入力して（Ｓ７００）、それらの形状の重心を各々求め（Ｓ７１０）、求めた重心の位置から前回の閉境界エリアと、今回の閉境界エリアの移動の方向と、距離とを求める処理を行って（Ｓ７２０）、求めたデータを移動状態メモリ４９Ｍ（図２参照）に記録する（Ｓ７３０）。

尚、重心同士を対比して、移動状態を求めているが他の特徴を求め、その特徴同士を対比して移動状態を求めても良い。例えば、これにより、現在の特定の閉境界が○度方向に○画素移動中の様に算出される。尚、移動状態の表現方法は、どの様な態様、例えば、水平方向の移動画素数と、垂直方法の移動画素数で表現しても良い。尚、ここでの画素数は、ＣＣＤ４１の画素が基準である。

図１２は、Ｓ１５０のグループ分け処理ルーチンのフローチャートである。
このグループ分け処理が起動されると、先ず設定レバー１１の位置が、切る位置１１Ａ、Ｌ位置１１Ｂ、Ｓ位置１１Ｃ、或いはＨ位置１１Ｄであるかを入力する動作モードの読込処理を行う（Ｓ８００）。次いで、動作モードが「切」であるかを判断する（Ｓ８１０）。ここで、切る位置１１Ａであれば、動作モードが「切」であると判断して、後述する処理に移行する。

一方、動作モードが「切」ではないと判断した場合は（Ｓ８１０）、次に設定レバー１１の位置が、Ｌ位置１１Ｂの場合の動作モードが「Ｌ」、Ｓ位置１１Ｃの場合の動作モードが「Ｓ」、或いはＨ位置１１Ｄの場合の動作モードが「Ｈ」の何れであるかを判断する。

ここで、動作モードが「Ｌ」であると判断された場合には、次に各閉境界エリア毎に、０．４秒前と、現在との移動の方向と、距離とを求める処理を行う（Ｓ８３０）。ここでは、移動の方向と距離の算出は、現在の位置、基準位置からの水平と、垂直の画素数と、０．４秒前のフレーム（２０フレーム前）の位置とを対比して、水平方向のズレ画素数と、垂直方向のズレ画素数とを求め、この値を０．４秒当たりの移動の方向と、距離とする。尚、これに変えて、０．４秒前から、現在までの２０フレーム間の軌跡（曲線状で、且つ変速するなどの状態を示すデータ）を求め、この軌跡に基づいて、現在の移動方向と、移動速度を算出して、用いる様にしても良い。又、軌跡の式を用いる様にしても良い。

また、動作モードが「Ｓ」であると判断された場合には、次に各閉境界エリア毎に、０．５秒前（２５フレーム前）と、現在との移動の方向と、距離とを求める処理を行う（Ｓ８４０）。ここでは、移動の方向と距離の算出は、現在の位置、基準位置からの水平と、垂直の画素数と、０．５秒前のフレームの位置とを対比して、水平方向のズレ画素数と、垂直方向のズレ画素数とを求め、この値を０．５秒当たりの移動の方向と、距離とする。尚、これに変えて、０．５秒前から、現在までの軌跡を求め、この軌跡に基づいて、現在の移動方向と、移動速度を算出して、用いる様にしても良い。又、軌跡の式を用いる様にしても良い。

又、動作モードが「Ｈ」であると判断された場合には、次に各閉境界エリア毎に、０．６秒前（３０フレーム前）と、現在との移動の方向と、距離とを求める処理を行う（Ｓ８５０）。ここでは、移動の方向と距離の算出は、現在の位置、基準位置からの水平と、垂直の画素数と、０．６秒前のフレームの位置とを対比して、水平方向のズレ画素数と、垂直方向のズレ画素数とを求め、この値を０．６秒当たりの移動の方向と、距離とする。尚、これに変えて、０．６秒前から、現在までの軌跡を求め、この軌跡に基づいて、現在の移動方向と、移動速度を算出して、用いる様にしても良い。又、軌跡の式を用いる様にしても良い。

Ｓ８３０ないしＳ８５０の何れかの処理で求められた方向と距離の情報は、データベース化される（Ｓ８６０）。このデータベース化により、現在の各閉境界エリアの移動方向と、移動速度を反映した値が利用可能になる。尚、パターンがマッチングしないためや移動していないために、移動方向と距離が算出されなかった、閉境界エリアは、移動方向と距離とが共に「０」にされる。

データベース化（Ｓ８６０）に次いで、方向でソートし、３グループ（最も多い方向、２番目に多い方向、その他の方向（１０度以上相違を閾値））に分ける処理を行う（Ｓ８７０）。

つまり、データベースされた各閉境界エリアを移動方向を基準にして、３つに分ける処理を行う。尚、３つに分けるのは、設計事項であり、少なくとも２つ以上に分ければ良い。

次いで、Ｓ８７０の処理で、２ないし３グループに分けられたかを判断し（Ｓ８８０）、２ないし３つに分けることが出来ていれば、次に、選別内容でグループメモリ４９ＳＧ（図２参照）に格納（野グループ、注グループ、他グループ）する処理を行う（Ｓ８９０）。

ここでは、最も多い方向の閉境界エリアは、野グループとして、野グループメモリ４９ＳＧＦ（図２参照）に格納し、２番目に多い方向の閉境界エリアは、注グループとして、注グループメモリ４９ＳＧＳ（図２参照）に格納し、その他の閉境界エリアは、他グループとして、他グループメモリ４９ＳＧＯ（図２参照）に格納する。

これにより、最も多い閉境界エリアは、野、つまりフィールドに当たると擬制され、ベース画像に利用される。又、２番目に多い方向の閉境界エリアは、注、つまり移動している画像に当たると擬制され、ベース画像に上書きされる上書き画像に利用される。

その他の閉境界エリアは、他グループとされ、移動することのない閉境界エリアとされる。
Ｓ８８０で、２ないし３グループに分けることが出来なかったと判断された場合には、次に距離でソートし、２グループ（最も多い距離、その他の距離（１０パーセント以上相違を閾値））に分ける処理を行う（Ｓ９００）。これにより、同一方向に移動する閉境界エリアのみの画像のグループ化が可能になる。例えば、移動する被写体を後追い撮影した場合などのグループ化が可能になる。

次に、２グループに分けられたかを判断して（Ｓ９１０）、分けられた場合には、既述したＳ８９０の処理による選別内容で格納する処理を行う。
一方、方向でも、距離でも２グループ分け出来なかったと判断された場合には（Ｓ９１０）、グループ分け無しで、閉境界エリアを野グループメモリ４９ＳＧＦに格納する。

又、Ｓ８１０で動作モードが「切」と判断された場合にも、閉境界エリアは、野グループメモリ４９ＳＧＦに格納される。
以上に説明したグループ分け処理により、各閉境界エリアを移動後の優先表示順位が確定される。又、画像がグループに分かれてまとまって移動することになるため、移動前の画像が壊れることなく移動後の位置まで移動することになる。

図１３は、閉境界エリアの移動状態の説明図、図１４は、Ｓ１６０のグループ毎に移動処理ルーチンのフローチャートである。
グループ毎に移動処理が起動されると、先ず野グループメモリ４９ＳＧＦ、注グループメモリ４９ＳＧＳ、他グループメモリ４９ＳＧＯから野グループ、注グループ、他グループのデータを読み込んで、各グループの方向と、距離の平均値を求め（ＳＳ１０００）、次いで、各グループに所属する各閉境界エリアを、各グループの平均の移動方向と、移動距離だけ移動させる処理を行って、後野グループメモリ４９ＡＧＦ、後注グループメモリ４９ＡＧＳ、後他グループメモリ４９ＡＧＯ（図２参照）に格納する処理をし（Ｓ１０１０）、これらの処理を全閉境界エリアの移動が終了するまで行い、終了したら本グループ毎に移動処理を一旦終了する（Ｓ１０２０）。

このグループ毎に移動処理により、動作モードに応じただけ、各閉境界エリアが移動する。ここでは、動作モードが「切」の場合には、現在の各閉境界エリアは、移動することはない。又、動作モードが「Ｌ」の場合には、０．４秒後に達すると推定される位置まで、各閉境界エリアが移動され、動作モードが「Ｓ」の場合には、０．５秒後に達すると推定される位置まで、各閉境界エリアが移動され、動作モードが「Ｈ」の場合には、０．６秒後に達すると推定される位置まで、各閉境界エリアが移動される。これにより、例えば、動作モードが「Ｓ」の場合に、図１３の（Ａ）、（Ｂ）に示す様に、野グループの画像７１、他グループの画像７３、現在の注グループの画像７５の画像がある場合に、０．５秒前に注グループの画像７７（重心７７Ａ）があったとすると、図１４のグループ毎の移動処理により、注グループは、現在の位置（重心７５Ａ）まで、矢印ＹＡ（横方向にＹＡＸ、縦方向にＹＡＹＡ）だけ移動し、０．５秒後に位置すると推定される位置７９（重心７９Ａ）まで、これから矢印ＹＡとほぼ同量の矢印ＹＢ（横方向にＹＡＸ、縦方向にＹＡＹ）だけ移動する。尚、図示は省略するが野グループの画像７１も移動する。又、他グループの画像７３は、現在位置のままである。

図１５は、Ｓ１７０の各グループを合成処理ルーチンのフローチャートである。
この各グループを合成処理が起動されると、先ず、後野グループメモリ４９ＡＧＦ、後注グループメモリ４９ＡＧＳ、後他グループメモリ４９ＡＧＯから各閉境界エリアのデータを入力し（Ｓ１１００）、各閉境界エリアの画像データを移動後の位置に貼り付ける（先ず、野グループを貼り付け、次に他グループを貼り付け、最後に注グループを貼り付ける）処理を行う（Ｓ１１１０）。

次いで、貼り付けた画像の空間を隣接閉境界エリアの画素情報によって穴埋めする（補完処理）処理を行って（Ｓ１１２０）、本各グループを合成処理を一旦終了する。
これにより、各グループが合成され、且つ合成によって、画像情報が存在しない部分も周囲の画像情報に基づいて、補完されて、１フレームの画像が合成され、出力メモリ４９ＯＵＴ（図２参照）に格納される。

図１６は、Ｓ１８０の表示処理ルーチンのフローチャートである。
この表示処理が起動されると、出力メモリ４９ＯＵＴから補完処理後の画像情報を入力し（Ｓ１２００）、ディスプレイ２５に表示する処理を行う（Ｓ１２１０）。

これにより、ディスプレイ２５に出力メモリ４９ＯＵＴに格納された画像が表示され、カメラ１を操作する者に、未来の画像（ディスプレイ２５を見ながらシャッタチャンスの判断を行って、シャッタボタン９を操作した未来の時点の推定画像）を見せることが可能になる。

図１７の（Ａ）、（Ｂ）は、ディスプレイ２５の表示の状態の説明図である。
ディスプレイ２５は、カメラ１を被写体に向けるとレンズ５を通して、撮像した被写体の画像を図１７に示す様に表示する。

例えば、動作モードを「Ｈ」にして、競馬場のゴール地点８１にレンズ５を向けた状態で、被写体の競走馬８３が走って来て、図１７の（Ａ）に示す様な状態のときに、ディスプレイ２５上の競走馬８３は、図１７の（Ｂ）に示す様に、ゴール地点８１に達した状態で表示され、このときに、ゴール地点８１に達した画像を見てから、シャッタボタン９を操作すると、その操作に応じて、記録用データ処理部４７がその時点（図１７の（Ｂ）の表示をしてから０．６秒程度経過した時点）の画像の撮像データをＣＣＤ４１から取り込み、撮像データメモリ５１に格納する。つまり、シャッタボタン９を操作する者は、０．６秒後の推定画像を見て、写すか否かを判断し、写すと決めたらシャッタボタン９を操作すれば、写すことを決断した画像に近い画像を高解像度で、且つ高密度で記録することが出来る。

又、シャッタボタン９を操作するまでの時間が短いことを好む場合は、設定レバー１１を短時間側の切る位置１１Ａ、Ｌ位置１１Ｂ、Ｓ位置１１Ｃにするだけで、好みのタイミングのシャッタチャンスを得ることが可能になる。尚、設定レバー１１で選択する動作モードを長時間側、或いは短時間側に変更、あるは拡張したり、設定時間間隔を短くしても良い。これらは、設計事項である。

又、図１７の様な被写体の場合に、後追い撮影に用いても良い。この様な後追い撮影を行うと、競走馬８３がディスプレイ２５の中央付近にほぼ留まり、背景が移動することになる。この場合でも、競走馬８３の画像の面積が競馬場の景色の面積より小さいため、競走馬８３が景色に上書きされて、ゴール地点８１に競走馬８３が到達した場面の画像を合成して、表示することが可能になる。

尚、ディスプレイ２５に表示される画像と、撮像データメモリ５１に格納される画像とは、全く独立して処理されるため、ディスプレイ２５の表示画像の一部に欠陥があっても、撮像データメモリ５１に格納される撮像データには、従来の高性能のディジタルカメラと同様に、シャッタボタン９を操作したときの被写体の画像が高解像度で、且つ高密度で記録されるという、優れた特徴を有する。

以上に説明したカメラ１は、所定時間経過時、例えば０．４秒後、０．５秒後、或いは０．６秒後に撮像することになる毎秒５０フレームの動画像を推定して表示することが出来ることから、この表示を見るものに所定時間経過時、例えば０．４秒後、０．５秒後、或いは０．６秒後の動画像の状態を、見せることが可能になる。

従って、例えば、カメラ１のディスプレイ２５に、この表示を行うことで、移動する被写体が所望の状態になったことを確認してからシャッタボタン９を押すだけで、所望の状態の被写体の画像を撮像データメモリ５１に記録することが可能になるという極めて優れた効果を奏する。

つまり、特別な技術を持っていなくとも、シャッタチャンスを生かして、写したいと思った状態に近い写真を撮ることが容易なカメラ１を作ることを可能にするという極めて優れた効果を奏する。

又、移動する被写体を注目画像として、画面に優先して表示することで、シャッタチャンスの判断に適する表示が行われるため、撮影者の意図を反映する撮影を行うことに適するカメラ１の提供が可能になると言う極めて優れた効果を奏する。

本発明は、上記実施例に限定されるものではなく、どの様な態様の実施も可能である。
次に、変形例を説明する。
カメラ１は、撮像データメモリ５１に動画像を記憶する構成を加えても良い。

ＣＣＤ４１は、フルカラー用の単体型でも良く、複数のＣＣＤを組み合わせたものでも良い。又、モノクローム型、赤外線検出用、紫外線検出用でも良い。
又、ＣＣＤ４１に限るものではなく、光を電気信号に変換する機能を有する素子や仕組みを有する構造のものであれば、どの様なものでも良い。

スチルカメラの用途に限るものでなく、近い未来の画像を表示することが有用な用途であれば、どの様なもの、例えばシネマカメラなどへの転用や応用も可能である。
又、カメラ１は、所謂ディジタルカメラの他に、フィルムカメラでも良い。

次に特許請求の範囲の構成と、発明の実施の形態との対応を説明する。
請求項１の表示手段は、ディスプレイ２５、領域抽出手段は、Ｓ４００〜Ｓ５００の処理、領域記憶手段は、Ｓ５１０の処理、相関状態判断手段は、Ｓ６００、Ｓ６１０の処理、領域移動状態算出手段は、Ｓ７００〜Ｓ７３０の処理、領域移動手段は、Ｓ８００〜Ｓ１０２０の処理、移動後画像形成手段は、Ｓ１１００〜Ｓ１２１０の処理が対応する。

請求項２は、Ｓ６００の内容を示す。
請求項３は、Ｓ７１０、Ｓ７２０の内容を示す。
請求項４は、Ｓ１０１０の説明が対応する。

請求項５は、Ｓ８７０の内容と、Ｓ１１１０の内容が対応する。
請求項６のスチルカメラは、カメラ１が対応する。
スチルカメラのモニタは、ディスプレイ２５が対応する。

ファインダーは、ディスプレイ２５をファインダー状にする構造が対応する。
請求項７は、Ｓ３００ないしＳ３２０の処理が対応する。
請求項８は、カメラ１の構造の説明である。

カメラ１の外観図である。 カメラ１のブロック図である。 ディスプレイ２５に表示される画像の説明図である。 ＣＰＵ４５で実行される処理の全体を示すフローチャートである。 モニタ用画像入力処理の詳細を示すフローチャートである。 記録用画像入力処理ルーチンのフローチャートである。 境界検出処理ルーチンのフローチャートである。 境界の説明図である。 閉境界の決定処理ルーチンのフローチャートである。 パターンマッチング処理ルーチンのフローチャートである。 パターン毎に移動の方向と距離算出処理ルーチンのフローチャートである。 グループ分け処理ルーチンのフローチャートである。 閉境界エリアの移動状態の説明図である。 グループ毎に移動処理ルーチンのフローチャートである。 各グループを合成処理ルーチンのフローチャートである。 表示処理ルーチンのフローチャートである。 ディスプレイ２５の表示の状態の説明図である。

符号の説明

１・・・カメラ、
３・・・本体、
５・・・レンズ、
７・・・ファインダーレンズ、
９・・・シャッタボタン、
１１・・・設定レバー、
１１Ａ・・・切る位置、
１１Ｂ・・・Ｌ位置、
１１Ｃ・・・Ｓ位置、
１１Ｄ・・・Ｈ位置、
１３・・・設定ボタン、
１５、２５・・・ディスプレイ、
１７・・・フラッシュランプ、
１９・・・セルフ撮影設定ボタン、
２１・・・セルフ撮影表示ランプ、
２３・・・ファインダー、
２５Ｋａｎ・・・間部分、
２５Ｍａｘ、２５Ｍｉｎ・・・エリア、
２７、２９・・・ズームボタン、
３１・・・サービスポート、
４１Ｍａｘ・・・最大撮像エリア、
４３・・・画像メモリ、
４７・・・記録用データ処理部、
４９・・・モニタ用データ処理部、
４９ＡＧＦ・・・後野グループメモリ、
４９ＡＧＯ・・・後他グループメモリ、
４９ＡＧＳ・・・後注グループメモリ、
４９Ｂ・・・Ｂモニタメモリ、
４９ＣＣ・・・対応関係メモリ、
４９ＣＫ・・・境界識別メモリ、
４９Ｇ・・・Ｇモニタメモリ、
４９Ｍ・・・移動状態メモリ、
４９ＯＵＴ・・・出力メモリ、
４９Ｒ・・・Ｒモニタメモリ、
４９ＲＧＢ・・・ＲＧＢ境界メモリ、
４９ＳＧ・・・グループメモリ、
４９ＳＧＦ・・・野グループメモリ、
４９ＳＧＯ・・・他グループメモリ、
４９ＳＧＳ・・・注グループメモリ、
５１・・・撮像データメモリ、
５３・・・外部メモリコネクタ、
５５・・・外部メモリカード、
６３・・・境界線、
６５・・・領域、
７１、７３、７５、７７・・・画像、
７９・・・位置、
８１・・・ゴール地点、
８３・・・競走馬

Claims (8)

1. 撮像した動画像を表示手段に表示する表示装置において、
   上記動画像から所望の領域を抽出する領域抽出手段と、
   上記領域抽出手段で指示された領域を上記動画像別に記憶する領域記憶手段と、
   上記領域記憶手段に記憶されている現在の動画像の領域と、過去の動画像の領域との相関状態を判断する相関状態判断手段と、
   上記相関状態判断手段によって相関度が高いと判断された領域間の移動状態を算出する領域移動状態算出手段と、
   上記領域移動状態算出手段の算出結果に基づいて、上記領域記憶手段に記憶されている現在の動画像の領域を現在から所定時間経過時の推定位置に移動させる領域移動手段と、
   上記領域移動手段による移動後の領域の画像を上記表示手段に表示する移動後画像形成手段と
   を備えることを特徴とする表示装置。
2. 上記相関状態判断手段によって相関度が高いと判断される場合は、現在の動画像の領域の形状と、過去の動画像の領域の形状との類似度合いがほぼ同一形状と判断できる場合であることを特徴とする請求項１に記載の表示装置。
3. 上記領域移動状態算出手段が算出する移動状態は、上記過去の動画像の領域の位置から上記現在の動画像の領域の位置まで移動する時間と、移動距離と、移動方向とに基づいて算出されることを特徴とする請求項１、又は請求項２に記載の表示装置。
4. 上記領域移動手段が算出する所定時間経過時の推定位置は、上記過去の動画像の領域が上記現在の動画像の領域の位置まで移動した軌跡に基づいて、該現在の動画像の領域が所定時間経過時に到達する位置を算出することにより求められることを特徴とする請求項１ないし請求項３の何れかに記載の表示装置。
5. 上記移動後画像形成手段が表示手段に表示する領域の画像は、同一の移動状態と判断される領域の画像毎にグループ分けし、グループを構成する領域の合計面積が小さい方のグループの画像を大きい方のグループの画像に上書きすることを特徴とする請求項１ないし請求項４の何れかに記載の表示装置。
6. 上記表示手段は、スチルカメラのファインダー、又はスチルカメラのモニタであることを特徴とする請求項１ないし請求項５の何れかに記載の表示装置。
7. 上記スチルカメラは、シャッタボタンが操作された場合に、その時点の上記撮像した動画像の静止画像、又は該動画像の被写体の画像を記録することを特徴とする請求項６に記載の表示装置。
8. 上記スチルカメラが記録する画像は、上記表示手段が表示する画像に比べて解像度が高いことを特徴とする請求項７に記載の表示装置。

Images