JP2004208318A

JP2004208318A - アーカイブ像の中の重要領域を決定する撮像装置と方法

Info

Publication number: JP2004208318A
Application number: JP2003425111A
Authority: JP
Inventors: John R Fredlund; ジョン・アール・フレッドランド
Original assignee: Eastman Kodak Co
Current assignee: Eastman Kodak Co
Priority date: 2002-12-20
Filing date: 2003-12-22
Publication date: 2004-07-22
Anticipated expiration: 2023-12-22
Also published as: DE60306737D1; US20040120606A1; EP1431912A2; JP4177750B2; DE60306737T2; EP1431912B1; EP1431912A3; US7327890B2

Abstract

【課題】像を撮影するとき、その中の適切な重要領域を決定する。
【解決手段】アーカイブ像における重要領域を決定する方法。この方法によれば、評価像が、アーカイブ像の構図の間に得られ、そのアーカイブ像が得られる。評価像をアーカイブ像と比較して、共通の像の要素を決定し、この共通の像の要素を同定する重要領域のデータが得られる。この共通の像の要素がアーカイブ像と関連付けられる。
【選択図】図５

Description

この発明は、アーカイブ像の中の重要領域を決定する撮像装置と方法に関する。

ディジタル像は、情報撮影（infoimaging）において益々人気のある形式になってきている。この人気の１つの理由は、使用者がそのようなディジタル像を操作し、編集し、変更し、強調できる容易さにある。たとえば、ディジタル像の外観を改良するため、使用者は、しばしば、米国のイーストマンコダック社により市販されているKodak Picture CDソフトウェアの中に提供されているクロップ（不要部削除）、ズームなどのツール、などの手動のディジタル撮像ツールやディジタル編集ツールを使用する。使用者は、これらの像編集ツールを用いて、１つの像の大きさを制限して、像の中の重要な要素を強調する。また、他の像編集ツールを、使用者が重要と考える像の部分に適用できる。しかし、手動の編集ツールでは、編集される各々の像の中で重要である領域を使用者が手動で指定する必要がある。多くの使用者にとって、この処理は時間がかかり、選んだ像のみを、このようにして編集する。

自動的または半自動的な像処理および像編集のアルゴリズムが知られている。これらのアルゴリズムはディジタル像の外観を高めるために使用できるが、使用者の入力をほとんど要求しない。これらの自動的または半自動的な像処理および像編集のアルゴリズムは、像の内容を解析し、像の重要な要素と使用者が思うことについて種々の仮定を適用する。たとえば、既知の肌色に近い色を有する大きな楕円形状のものは使用者にとって重要であると仮定できる。仮定された重要さの程度は、たとえば、その大きな楕円形状のものが像の中心近くにあるときに、高くできる。たとえば１９９８年１２月３１日にLuoらにより出願された米国特許第６，２８２，３１７号（"Method For Automatic Determination of Main Subjects in Photographic Images"）参照。他のアルゴリズムでは、ディジタル像を形成するディジタルデータの頻度解析を用いて、より重要であると考えられる像の要素を同定する。そのようなアルゴリズムは、撮影された像の可視的要素の解析に基づいて、像の中での重要なものについて仮定をする。たとえば、１９９８年１０月２２日にErkkileaらにより出願された米国特許出願第０７／１７６，８０５号（"Determining Portions of a Digital Image Which are In Focus"）参照。

像の中での重要なものの知識は、他の目的にも有用である。たとえば、像を探しているとき、使用者は、手動で像を分類し、手動で像の記述に基づいてテキストを入力して、層の探索を可能にする。もちろん、好ましいのは、１例の見本像を使用者が提示して、それから同様な像を同定できる。たとえば、１９９８年６月２９日にZhuらにより出願された米国特許第６，３４５，２７４号（"Method and Computer Program Product for Subjective Image Content Similarity-based Retrieval"）参照。この特許に説明される画像処理アルゴリズムでは、見本に似た像を同定することにより像の探索が可能になる。しかし、写真は、典型的には、多くの物体、形状、色調、色および他の可視要素を含み、それらは、像の探索において重要であることもあり、重要でないこともある。したがって、見本に基づいて像を探索するアルゴリズムは、アルゴリズムにより探索者に重要でない可視的要素の存在に基づき見本に似ているとして同定される可能性を減らすため、像のどの要素が重要であるかについて仮定する必要がある。

像のどの部分が最も重要な像の要素を含むかについて、明確な指示があると、そのような像の強調、探索および他の像を用いるアルゴリズムの有効性が大きくなる。したがって、像の中のどの可視的要素がより重要であるかを決定する自動的な方法が必要である。

像の中で何が重要であるかの指標を得る１つの方法は、その像が撮影されたときにその指標を得ることである。シーンの像のどの領域がカメラの使用者が注目しているかを見分ける試みが種々のカメラにおいて知られている。たとえば、Takagiらにより１９９５年６月７日に出願された米国特許第５，７６５，０４５号（"Camera Capable of Detecting Eye-Gaze"）と、１９９９年１０月１２日に大和田により出願された特開２００１−１１６９８５号公報（「被写体認識機能を有するカメラおよび被写体認識方法」）は、カメラのビューファインダにおける注視監視装置の使用を議論している。これらの刊行物に記載されたカメラは、自動焦点カメラであり、１つの撮影シーンを複数のスポットすなわち領域に分割してカメラから各スポットへの距離を決定する多スポット距離測定技術を用いる。注視監視装置の出力を用いて、どのスポットが像の主題を最も含むかをカメラが決定するのを助け、そのスポットに関連する距離で像を撮影するようにカメラの焦点を合わせる。カメラの焦点は、カメラから、その主題を最も含むとして同定されるスポットまでの距離で合わされる。

注視の監視は、また、ディジタル撮像システムにおける像圧縮の文脈でも議論されてきた。たとえば、１９９７年１２月２３日にGeisslerにより出願された米国特許第６，２５２，９８９号（"Foveated Image Coding System and Method for Image Bandwidth Reduction"）は、「foveated imaging」という技術を議論する。その技術では、観察者の注視の位置は、リアルタイムで監視され、リアルタイム撮影システムに通信される。リアルタイム撮影システムは、その像を圧縮して、観察者の注視位置の近くの高周波情報を保持し、観察者の注視位置の近くでない領域における高周波情報を捨てる。

このように、カメラには、注視を監視して注視監視装置からの情報を用いて写真撮影処理またはビデオ撮影処理について決定をするものがある。しかし、この決定を導く情報は、像の撮影の後で捨てられる。生理学研究の非類似的技術において注視位置を記録することは知られている。そのような研究は、典型的には、たとえば、観察される像から離れているビデオテープまたはデータファイルなどの媒体上で観察者の注視の移動の記録をする。これは、データと像を関連づけるのに困難を生じ、像の有用な寿命にわたって像とそのようなデータとの関連付けを維持することに困難を生じる。

さらに、多くの状況では、注視の監視が、像の中のどの要素が使用者にとって重要であるかを示すが、他の状況では、注視の監視は、像の中のどの要素が使用者にとって重要であるかを直接的には示さない。たとえば、像の中の被写体の出現を減らすように像が構図されることを確実にするため、使用者は、構図の間、被写体の上で凝視できる。従って、撮影において決定をするため注視方向を信頼するカメラは、像のどの要素が重要であるかについて誤った仮定に基づいて決定をすることがある。撮影後の処理では、使用者、シーンおよび／または注目要素についてより多い情報が利用でき、また、より多くの時間やより複雑なアルゴリズムが注視情報をよりよく解釈するために使用できるので、よりよい決定が可能になる。

２００２年１１月２５日にMillerらにより出願された米国特許出願第１０／３０３，９７８号（"Digital Imaging System With Eye Monitoring"）は、目監視装置を備える撮影システムを記載する。この目監視装置は、撮影シーケンスの間の注視方向を含む目情報を記憶し、その目情報を、撮影シーケンスの間に撮影された像と関連づける。ある実施形態では、状況の情報が目情報とともに得られる。この状況情報は像とも関連づけられる。この目監視装置は、その目的には有用であり、広く応用されている。しかし、使用者の中には、目監視装置の使用を好まない人もある。

米国特許第６，２８２，３１７号米国特許第６，３４５，２７４号米国特許第６，２５２，９８９号特開２００１−１１６９８５号公報 Kodak Picture CDソフトウェア（イーストマンコダック社）

したがって、必要なことは、撮影された像において何が重要であるかを決定し、撮影された像のどの部分が重要であるかを示す情報を撮影された像と関連付けるより簡単なカメラと方法である。

本発明の目的は、像を撮影するとき、その中の適切な重要領域を決定する撮像装置と方法を提供することである。

本発明の１つの見地では、像の中の重要領域を決定する方法が提供される。その方法によれば、像の構図の間に評価像を撮影する。評価像を像と比較して、共通の像の要素を同定し、共通の像の要素を特徴づける重要領域のデータを決定する。そして、重要領域のデータを像と関連づける。この「像」は、構図の結果として最終的に得られるディジタル像であり、以下ではアーカイブ像という。アーカイブ像の構図の間に一時的に記憶する「評価像」を用いてアーカイブ像の中の重要領域が決定される。

本発明の他の見地では、アーカイブ像の中の重要領域を決定する方法が提供される。その方法によれば、１組の評価像をアーカイブ像の構図の間に撮影する。次に、アーカイブ像を撮影し、予備的な重要領域のデータを評価像の上に形成する。１組の評価像の像に対応しない重要領域の像の部分を、予備的な重要領域の像から抽出し、予備的な重要領域の像の残りの部分を重要領域のデータとして格納する。そして、重要領域の像とアーカイブ像とを関連づける。

本発明の別の見地では、注目領域の像を形成する方法が提供される。その方法によれば、アーカイブ像を構図し、構図の間に１組の評価像を撮影する。次に、アーカイブ像を撮影する。さらに、アーカイブ像に対応する１つの評価像を得る。この評価像を、前記の１組の評価像と比較して、評価像の中の共通の部分を同定する。この評価像の中の共通の部分に対応するアーカイブ像の部分を示す重要領域のデータを作成する。そして、重要領域のデータを格納し、アーカイブ像と関連づける。

本発明のさらに他の見地では、撮像システムが提供される。この撮影システムは、評価像とアーカイブ像を得るために操作可能な撮像部を備える。制御部は、この撮像部に、１組の評価像とアーカイブ像を得させる。信号処理部は、評価像とアーカイブ像を比較して、すべての撮影された像に共通のアーカイブ像の部分を同定する。信号処理部は、この共通部分に対応するアーカイブ像の部分を同定する重要領域のデータを格納し、重要領域のデータをアーカイブ像と関連づける。

本発明のさらに別の見地では、撮像システムが提供される。この撮影システムは、構図信号を発生する構図トリガーとアーカイブ像撮影信号を発生する撮影トリガーとを備える。撮像システムは、構図信号が発生されたときに評価像（複数）を撮影し、アーカイブ像撮影信号が発生されたときにアーカイブ像を撮影する。処理部は、アーカイブ像を評価像と比較し、各々の評価像の中の像部分に対応するアーカイブ像の中の像の部分を同定する。さらに、この処理部は、アーカイブ像の中の上記の対応部分を同定する重要領域のデータをアーカイブ像と関連づける。

本発明の異なる見地では、撮像システムが提供される。この撮影システムは、アーカイブ像の構図の間に少なくとも１つの評価像を撮影するアーカイブ像撮影手段を備える。比較手段は、撮影された像を比較して、共通の像の要素を同定する。関連手段は、この共通の像の要素を同定するデータをアーカイブ像と関連づける。

本発明の効果は、アーカイブ像を撮影するとき、その中の適切な重要領域を決定して撮影できることである。

以下、添付の図面を参照して発明の実施の形態を説明する。
図１は、ディジタルスチル画像を撮影する撮像システム２０の１実施形態のブロック図である。図１に示されるように、撮像システム２０は撮影レンズユニット２２を含み、撮影レンズユニット２２は、(図示しない）題材（すなわち被写体）から光を導いて、イメージセンサ２４に像を形成する。

撮影レンズユニット２２は、単純に構成でき、たとえば、手動焦点または固定焦点の１つの焦点距離を持つ。図１に示される実施形態では、手動レンズユニット２２は、モータで駆動される２ｘズームレンズユニットであり、レンズ駆動装置３０により１つの静止素子または１組の複数の静止素子２８に対して１つの可動素子または複数の素子の組み合わせ２６が駆動される。レンズ駆動装置３０は、レンズの焦点距離と焦点位置の両方を制御する。距離測定システム３２は、イメージセンサ２４により得られた像を使用者４に提示して、使用者が像を構図するのを助ける。距離測定システム３２の動作は、後でより詳細に説明される。

種々の方法が、撮影レンズユニット２２の焦点設定を決定するために使用できる。好ましい実施形態では、イメージセンサ２４は、いわゆる"through focus"アプローチまたは"whole way scanning"アプローチを用いる多スポット自動焦点を提供するために使用される。シーンは、領域すなわちスポットの格子に分割され、最適な焦点距離は、各像領域に対して決定される。各領域に対する焦点距離は、一連の複数の焦点距離位置を、近い焦点距離から無限遠まで、像を撮影しつつ撮影レンズユニット２２を移動することにより決定される。カメラの設計によるが、４と３２の間の数の像が、異なる焦点距離で撮影されねばならない。典型的には、８つの異なる距離で像を撮影することにより適当な正確さが得られる。

次に、撮影された像のデータを解析して、各像領域についての最適焦点距離を決定する。この解析では、まず、１９９５年１２月１１日にXieらにより出願された米国特許第５，８７４，９９４号（"Filter Employing Arithmetic Operations for an Electronic Synchronized Digital Camera"）に説明されているように、１以上のフィルタを用いるバンドパスフィルタでセンサ信号を処理する。次に、各像領域についてのバンドパスフィルタの出力の絶対値のピークを、その像領域についての焦点距離を決定するために、その焦点距離で検出する。各像領域についての焦点距離を各々の撮影された焦点位置について決定した後で、各々の像領域についての最適焦点値を、最大の焦点値を与える撮影された焦点距離を選択することにより、または、種々の補間技術を用いて、２つの最大焦点値を与える２つの測定された焦点距離の間で中間距離値を推定することにより、決定する。

いま、最終的な高分解能のスチル像を撮影するために使用されるレンズ焦点距離が決定できる。好ましい実施形態では、狙いの被写体（たとえば撮影される人）に対応する像領域（複数）を決定する。次に、焦点位置を、これらの像領域のための最適焦点を与えるために設定する。たとえば、シーンの像を、複数の副分割部分に分割する。１９９６年１０月１５日にOmataらにより出願された米国特許第５，８７７，８０９号（"Method Of Automatic Object Detection In An Image"）に説明されているように、像の各副分割部分に含まれる高周波成分を表わす焦点評価値を決定でき、その焦点評価値を、被写体の距離を決定するために使用できる。狙いの被写体が動いているときは、１９９６年１０月２６日にOmataらにより出願された米国特許第６，０６７，１１４号（"Detecting Compositional Change In Image"）に説明されているように、被写体の追跡を行う。別の実施の形態では、１９９８年１０月１１日にOmataらにより出願された米国特許第５，７１５，４８３号（"Automatic Focusing Apparatus and Method"）に説明されているように、"whole way scanning"により決定される焦点距離を、粗い焦点位置として使用する。

１つの実施の形態では、撮像システム２０において自動焦点のために使用されるバンドパスフィルタや他の計算を、ディジタル・シグナル・プロセッサ４０で置き換える。この実施の形態では、１９９４年１２月３０日にParulskiらにより出願された米国特許第５，６８８，５９７号（"Electronic Camera With Rapid Autofocus Upon An Interline Image Sensor"）に説明されているように、撮像システム２０は、特別に適合されたイメージセンサ２４を用いて、レンズの焦点位置を自動的に設定する。この特許に説明されているように、センサの感光素子の複数のラインのうちの一部（たとえば１／４）だけを、焦点を決定するために使用する。他のラインは、センサの読み出し処理では省かれる。これはセンサの読み出し時間を短くし、撮影レンズユニット２２の焦点を合わせるのに要する時間を短くする。

別の実施の形態では、撮像システム２０は、別の光学型または他の型の距離計４８を使用して、像の主題（被写体）を同定し、その主題への距離に適当な撮影レンズユニット２２の位置を選択する。距離計４８は、レンズドライバ３０を直接に操作でき、または、図１の実施形態に示されるように、距離計４８は、データをマイクロプロセッサ５０に提供して、撮影レンズユニット２２の１以上の可動素子２６を動かす。距離計４８は、受動的、能動的またはその両方である。当業者に知られている広い範囲の適当な多センサの距離計が使用に適している。たとえば、１９９３年１１月３０日にTabataらにより出願された米国特許第５，４００，３６９号（"Compact Camera With Automatic Focal Length Dependent Exposure Adjustments"）がそのような距離計を開示している。

図１の実施の形態において、フィードバックループが、マイクロプロセッサ５０が撮影レンズ２２の焦点位置を正確に設定できるように、レンズドライバ３０とマイクロプロセッサ５０の間に確立される。距離計４８により提供される焦点の決定は、１スポット型でも多スポット型でもよい。好ましくは、焦点の決定は多スポット型を用いる。多スポットの焦点決定では、シーンは領域すなわちスポットの格子に分割され、光学的焦点距離は各スポットについて決定される。

イメージセンサ２４は、２次元に配列される複数の感光素子を備える。感光素子２４の中の個々の感光位置は、撮影されたディジタル像（ここでは、初期像という）の１画素に対応する。イメージセンサ２４は、たとえば通常のＣＣＤセンサ、ＣＭＯＳイメージセンサ及び／または電荷注入素子である。１例では、イメージセンサ２４は、１２８０×９６０の配列の感光素子を備える。イメージセンサ２４の感光素子すなわち感光位置は、シーンからの光量子を電荷のパケットに変換する。各感光位置は、たとえば、１９７５年３月７日にBayerにより出願された米国特許第３，９７１，０６５（"Color Imaging Array"）に記載されているバイヤー色フィルター配列などの、色フィルタ配列がかぶされている。バイヤー色フィルタ配列は、チェッカーボードのモザイクにおける５０％の緑画素と、赤と青の列の間で交互に配列される残りの画素とからなる。感光位置は、色がついた入射光の照明に応答して、感光位置に入射する照明の強度に対応するアナログ信号を出力する。種々の他の色フィルタが使用できる。イメージセンサがグレースケールすなわちいわゆる白と黒の像を撮像するために使用されるときは、色フィルタは省略できる。

各画素のアナログ入力は、アナログ増幅器(図示しない)により増幅され、アナログ・シグナル・プロセッサ３４によりアナログ処理されて、イメージセンサの出力増幅器の雑音を減少する。アナログ・シグナル・プロセッサ３４の出力は、アナログディジタル（Ａ／Ｄ）変換器３６（たとえばバイヤー色フィルタ配列のシーケンスにおける１０ビット信号を出力する１０ビットＡ／Ｄ変換器）によりディジタルイメージ信号に変換される。

ディジタル化されたイメージ信号は、フレームメモリに一時的に格納され、次に、１９８９年５月９日にSassonらにより出願された米国特許第５，０１６，１０７号（"Electronic Still Camera Utilizing Image Compression and Digital Storage"）に記載されるようなプログラマブル・ディジタル・シグナル・プロセッサ４０を用いて処理される。この画像処理は、たとえば、１９９３年６月３０日にLaRocheらにより出願された米国特許第５，３７３，３２２号（"Apparatus and Method for Adaptively Interpolating a Full Color Image Utilizing Chrominance Gradients"）や、１９８６年２月３日にCokらにより出願された米国特許第４，６４２，６７８号（"Signal Processing Method for Producing Interpolated Chrominance Values in a Sampled Image Signal"）に説明されている方法を用いて、色フィルタ配列の値から全解像度の色の像を再構成するための補間アルゴリズムを含む。中性の（すなわち白またはグレー）にとって緑に等しくなるように赤と緑の信号を修正因子で乗算することにより、シーンの発光体を修正するホワイトバランスが行われる。好ましくは、色修正は、カメラの分光感度を修正する３×３の行列を用いる。しかし、他の色修正スキームも使用できる。色調の修正では、１組のルックアップテーブルを用いて、国際電気通信連合の規格ITU-R BT.709に定義されている光・電気変換特性を出力する。空間フィルタにより達成されるイメージのシャープ化は、レンズのぼけを補償し、主観的によりシャープな像を出力する。輝度とクロミナンスとは、ITU-R BT.709において定義された方程式を用いて処理された赤、緑及び青の信号から形成される。

ディジタル・シグナル・プロセッサ４０は、初期像を用いてそのシーンのアーカイブ像を生成する。アーカイブ像は、たとえば、ＪＰＥＧＩＳＯ 10918-1 (ITU-T.81)標準を用いて圧縮され、メモリに格納される。ＪＰＥＧ圧縮標準は、周知の離散コサイン変換を用いて、輝度信号とクロミナンス信号の８×８ブロックを空間周波数ドメインに変換する。次に、離散コサイン変換係数は、量子化され、エントロピーコード化されて、ＪＰＥＧ圧縮画像データを生成する。このＪＰＥＧ圧縮画像データは、日本電子情報技術産業協会のCP-3451により刊行されたExchangeable Image File Format version 2.2において規格されているいわゆる「Exif」フォーマットを用いて格納される。また、Exifフォーマットのアーカイブ像は、メモリカード５２にも格納できる。図１に示される実施形態では、撮像システム２０は、リムーバブルのメモリカード５２を保持するスロット５４を備え、また、メモリカード５２と通信をするためのメモリカード・インタフェース５６を備える。Exifフォーマットのアーカイブ像や他のディジタル像は、ホストコンピュータ（図示されない）に送信することもできる。ホストコンピュータは、ホストコンピュータ・インタフェース４６を介して撮像システム２０に接続される。ホストコンピュータ・インタフェース４６は、たとえば、光、無線または他の変換器であって、画像データまたは他のデータを、光信号、無線信号または他の形の信号によりホストコンピュータまたはネットワーク（図示されない）に運ぶことができる形式に変換する。

ディジタル・シグナル・プロセッサ４０は、また、初期像に基づいて、より小さいサイズのディジタル像を生成する。これらのより小さいサイズのディジタル像をここでは評価像という。典型的には、評価像は、ビューファインダの表示装置３３または外部の表示装置４２での表示に適合される、より低解像度の像である。ビューファインダの表示装置３３と外部の表示装置４２は、たとえば、カラーまたはグレースケールの液晶表示装置（LCD)、有機ＬＥＤ（OLED)（有機エレクトロルミネッセンス表示装置（ＯＥＬＤ）ともいう）または他の種類のビデオ表示装置である。

撮影シーケンスにおいて、ディジタル・シグナル・プロセッサ４０は、初期像を用いて、評価像、アーカイブ像、または両方を生成する。ここでは、「撮影シーケンス」は、少なくとも、構図段階と撮影段階からなり、最適には、さらに検証段階を含む。

構図の間、マイクロプロセッサ５０は、像が撮影されることを示すタイミング発生器６６に信号を送る。タイミング発生器６６は、一般に、図１に示されるように、イメージ信号のディジタル変換、圧縮及び格納を制御するために、撮像システム２０の中の素子に接続される。イメージセンサ２４は、センサドライバ６８を介してタイミング発生器６６により駆動される。マイクロプロセッサ５０、タイミング発生器６６及びセンサドライバ６８は、固定または可変の積分時間の間、シーンから光の形でイメージセンサ２４が電荷を集めるのに協力する。積分時間が終わった後で、イメージ信号は、アナログ・シグナル・プロセッサ３４に送られ、初期像に変換され、この初期像は、先に一般的に説明したように、評価像またはアーカイブ像として使用できる。初期像のストリームがこうして撮影され、ディジタル・シグナル・プロセッサ４０は、初期像に基づいて評価像のストリームを生成する。評価像のストリームは、ビューファインダの表示装置３３または外部の表示装置４２に提示される。使用者４は、評価像のストリームを観察して、その像を構図するために評価像を使用する。１９９０年３月１５日にKuchtaらにより出願された米国特許第５，１６４，８３１号（"Electronic Still Camera Providing Multi-Format Storage Of Full And Reduced Resolution Images"）に説明されているような再サンプル技術を用いて、評価像を生成できる。また、評価像は、データメモリ４に格納できる。

撮影システム２０は、典型的には、使用者４がトリガーボタン６０を押したときに撮影段階に入る。しかし、撮影段階には、他の方法で、たとえば、マイクロプロセッサ５０からのタイマー信号またはリモートから受けた信号に応答して、入ることもできる。撮影段階の間、マイクロプロセッサ５０は、撮影信号を送って、ディジタル・シグナル・プロセッサ４０に、１つの初期像を選択させ、その初期像を処理してアーカイブ像を形成させる。検証段階の間、対応する評価像も形成され、その評価像がビューファインダの表示装置３３または外部の表示装置４２に送られ、ある期間提示される。これにより、使用者４は、撮影されたアーカイブ像が許容できることを検証できる。

別の実施の形態では、イメージセンサ２４により撮影された初期像は、アーカイブ像の形で撮影され、次に、評価像として使用するために変形される。また、他の実施の形態では、撮影システム２０は、複数の像を撮影するために２以上のシステムを備える。たとえば、図１において、オプションとして、追加の像撮影システム６９が示される。この追加の像撮影システム６９は、アーカイブ像を撮影するために使用できる。追加の像撮影システム６９は、たとえば、高解像度のディジタルイメージ装置または高解像度のフィルムまたはプレートなどの撮影素子を用いて画像を記録する画像撮影システムである。追加の像撮影システム６９が使用されるとき、イメージセンサ２４により撮影される像は、評価像として使用でき、そのアーカイブ像に対応する１つの評価像が得られ、像の構図の間に得られた評価像と比較される。

撮像システム２０は、使用者の制御部５８により制御される。制御部４８の一部は、図２により詳細に示される。制御部５８は、使用者４から入力を受け取り、撮像システム２０において動作中のマイクロプロセッサ５０が使用できる形式に変換するいずれかの変換器または他の装置を備える。たとえば、制御部４８は、タッチスクリーン、６方向、６方向、８方向のロッカースイッチ、ジョイスティック、スタイラス、トラックボール、音声認識システム、動作認識システム及び他の同様な装置からなる。図２に示される実施の形態では、制御部４８は、像を撮影するという使用者４の希望を示す信号をマイクロプロセッサ５０に送ることにより撮影動作を開始するためのシャッタートリガーボタンを含む。マイクロプロセッサ５０は、この信号に応答して、先に一般的に説明したように、ディジタル・シグナル・プロセッサ５０に、得られた信号を送る。「広（Ｗ）」ズームレンズボタン６２と、「遠(Ｔ)」ズームレンズボタン６４は、２：１光学的ズームと２：１ディジタルズームを制御する。光学的ズームは、撮影レンズユニットにより行われ、イメージセンサ２４により得られる焦点面の像の視野を変更するため、倍率を調節する。ディジタルズームは、ディジタル・シグナル・プロセッサ４０により行われ、フレームメモリ３８に記憶された、得られた像を切り取り(crop)、再サンプルする。使用者４が撮像システム２０を起動すると、ズームレンズは１:１位置に設定されるので、すべてのセンサの感光素子は、撮影された像を提供し、撮影レンズユニット２２は、広角位置に設定される。好ましい実施の形態では、この広角位置は、３５ｍｍフィルムカメラの４０ｍｍレンズと同等である。これは、最大の広角位置に対応する。

使用者が次に「遠」ズームレンズボタン６４を押すと、撮影レンズユニット２２は、マイクロプロセッサ５０によりレンズドライバ３０を介して調節されて、撮影レンズユニット２２をより望遠の焦点距離の方へ動かす。使用者４が「遠」ズームレンズボタン６４を押し続けると、撮影レンズユニット２２は最大限の光学的２:１ズーム位置に動く。好ましい実施の形態では、この最大限の光学的２：１ズーム位置は、３５ｍｍフィルムカメラの４０ｍｍレンズと同等である。使用者４がさらに「遠」ズームレンズボタン６４を押し続けると、撮影レンズユニット２２は最大限の光学的２:１ズーム位置にとどまるが、ディジタル・シグナル・プロセッサ５０は、像の中央領域を切り取ることにより（好ましくは再サンプルすることにより）、ディジタルズームを作動し始める。これは、カメラの見かけの倍率を増加する一方、アーカイブ像を作るときセンサの外側にあるいくつかの感光素子を放棄するので、シャープさを減少する。しかし、このシャープさの減少は、比較的小さいビューファインダ３３や外部ディスプレイ４２では通常は見えない。

たとえば、図１の撮像システム２０において、撮影された像は、たとえば約１．２５メガピクセルに対応する１２８０×９６０画素位置の高解像度のイメージセンサ２４から得られる。分解能の用語は、ここでは、像を提示するために使用される画素の数を示すために使用される。しかし、外部の表示装置４２は、たとえば約０．８メガピクセルに対応する３２０×２４０画素を提供するより低い解像度を備える。こうして、センサ素子の数は表示素子よりも１６倍多い。したがって、初期像を、ビューファインダ３３または外部ディスプレイ４２に適切に合うような適当な小さい寸法の評価画像に再サンプルする必要がある。低域通過フィルタとそれに続くサブサンプリングにより、または、適当なアンチエイリアス調整を用いる双１次補間技法を用いて、この再サンプリングが行える。その代わりに、比較的低い解像度のディスプレイのために高解像度の像に適合する当業者に知られている他の技法も使用できる。

撮影された像よりも少ない画素（すなわち低い解像度）の評価像を作るための撮影された像の再サンプリングは、ディジタル・シグナル・プロセッサ４０により行われる。前に述べたように、ディジタル・シグナル・プロセッサ４０は、ディジタルズームも行う。最大の２:１の設定において、ディジタル・シグナル・プロセッサ４０は、中央の６４０×４８０のセンサ領域を用いて、１２８０×９６０サンプルまでのこの中央領域を補間することによりアーカイブ像を提供する。

また、ディジタル・シグナル・プロセッサ４０は、ビューファインダ３３や外部ディスプレイ４２で見たときにアーカイブ像の外観に適合するように、評価像を別の方法で変更できる。この変更は、評価像がビューファインダ３３や外部ディスプレイ４２で提示されるときに、評価像の色が対応するアーカイブ像の色に合って見えるように、評価像を校正する色を含む。これら及び他の変更は、対応するアーカイブ像に提示される色、フォーマット、シーンのコンテンツ及び照明条件を使用者４に正確に提示するのを助ける。

上に述べたように、対応するアーカイブ像より低い解像度の電子ディスプレイを用いて、評価像が表示されるので、評価像は、ビューファインダ３３または外部ディスプレイ４２で見たとき、印刷などがより高解像度で行われるときより、もっとシャープに見えることがある。こうして、１つの選択としての実施の形態では、対応するアーカイブ像において焦点がずれて見える領域が外部のディスプレイ４２などの電子ディスプレイで見るとき焦点がずれて見えるように、各々の評価画像が変更される。さらに、ディジタルズームが動作しているとき、全体の像はソフトになるが、しかし、このソフト化は、外部のディスプレイ４２では通常は見えない。図１の撮像システム２０の例について、外部のディスプレイ４２は、３２０×２４０画素のディスプレイであるが、アーカイブ像は、最大のディジタルズーム設定において６４０×４８０画素のセンサ領域を用いて提供される。こうして、通常のサイズ変更の後で外部のディスプレイ４２に表示される評価像は、適当にシャープに見える。しかし、アーカイブ像は、許容できるシャープなプリントを作らない。したがって、３２０×２４０画素の評価像を生成する再サンプル技術が使用できるが、しかし、評価像は、最大のディジタルズーム設定が使用されるとき、見かけのシャープさを減少している。

理解されるように、アーカイブ像から作られる印刷出力または他の有形の出力の見かけのシャープさは、描かれる像の寸法の関数でもある。２００１年１２月２１日にBelzらにより出願された米国出願第１０／０２８，６４４号（"Method and Imaging System for Blurring Portions of a Verification Image To Show Out of Focus Areas in a Captured Archival Image"）に説明されているように、撮像システム２０は、出力の予想される寸法を示す信号を受け取るための入力(図示しない）をオプションで備えていて、評価像の見かけのシャープさを調整でき、および／または、警告を生じる。

アーカイブ像の中の重要領域を決定するために撮像システム２０を使用することが、図３、図４Ａ〜４Ｆ、図５及び図６を用いて説明される。図３は本発明による方法の第１の実施の形態におけるフローチャートを示す。図３に示されるように、撮像システム２０は、像構図モードに入ると（ステップ７０）、アーカイブ像を撮影する処理を開始する。撮像システム２０は、種々の方法で像構図モードに入る。たとえば、シャッタートリガーボタン６０が半押位置または他の完全には押されていない位置に動かされたことをマイクロプロセッサ５０が検出したときに、像構図モードに入る。別の方法では、モード選択スイッチ(図示しない)の位置に応答して、撮影モードに入るためのフラグをマイクロプロセッサ５０が検出できる信号を検出器(図示しない）が生成できる。また、別の方法では、撮像システム２０は、撮像システム２０が像構図に関連されるように保持されていることを検出するセンサ(図示しない)を備える。別の実施の形態では、撮像システム２０は、ビューファインダシステム３２において像を見るために使用者４の目２が存在することを検出器(図示しない)が検出するときはいつでも、像構図モードに入ることができる。

図４Ａ〜図４Ｅに示されているように、主題１０２を含むシーン１００の構図の間に、評価像が撮影される(ステップ７２）。先に説明したように、初期像が、アーカイブ像を構図するときに使用者４を助けるために、撮影され、ビューファインダのディスプレイ３３または外部のディスプレイ４２に表示されるが、この初期像から評価像が得られる。評価像は、たとえば、フレームメモリ３８、データメモリ４４またはメモリカード５２に格納される。構図の間に格納される評価象の数は、１以上である(ステップ７４）。

１つの実施の形態では、予め決められた数の評価像を構図の間に格納する。他の実施の形態では、フレームメモリ３８などのメモリが、構図の間に撮影される予め決められた数の評価像のシーケンスを含むファースト・イン・ラスト・アウトのバッファとして使用される。この実施の形態では、像構図処理が始まると、このバッファは、格納された評価像で満たされる。バッファが満たされて後でも構図処理が続くと、新しく得られた評価像は、最も古く得られた評価像と置き換わる。この処理は、アーカイブ像が格納されるまで続く。こうして、バッファは、アーカイブ像の撮影に達するまでの期間にわたって撮影された連続した評価像を含む。別の実施の形態では、アーカイブ像の撮影の前の予め決めけられた期間の間に撮影された評価像のみを記憶する。また、他の有用な評価像格納戦略を採用できる。

図４Ａ〜図４Ｅと図５に示されるように、撮影された評価像は、一般的に上で説明したように、評価像１１０、１１２、１１４、１１６、１１８を含む。１より多い任意の数の評価像を使用できる。

次に、アーカイブ像を得る(ステップ７６）。典型的には、上に述べたように、シャッタートリガーボタン６０が半押位置または他の完全には押されていない位置に動かされたことをマイクロプロセッサ５０が検出したときに、アーカイブ像が得られる。アーカイブ像は、撮影され、たとえば、フレームメモリ３８、データメモリ４４またはメモリカード５２に格納される(ステップ７８）。

ディジタル・シグナル・プロセッサ４０は、アーカイブ像を、少なくとも１つの評価像と比較して、撮影された評価像に共通する像要素を含むアーカイブ像の領域を同定する(ステップ８０）。アーカイブ像の解像度は、比較を容易にするように調整できる。すなわち、評価像の解像度に整合する像が生成できる。このアーカイブ像は、格納されている複数のアーカイブ像のすべてまたは１つのサンプルと比較できる。種々のサンプル方法が採用できる。たとえば、アーカイブ像の撮像の前の最後の数秒間に撮影された評価像のみが使用できる。別の方法では、２つごと、または、４つごとの評価像が比較されるか、または、別の同様な基準が使用される。他の意味のある統計的サンプルパターン、たとえば、評価像のグループから選択されたサンプルの重みを使用したサンプルパターンも使用できる。

他の例では、最大のしきい値より小さくアーカイブ像の撮影に最も時間的に近い評価像(複数）の視野におけるシフト（複数）を検出するため、評価像が、比較のために使用される条件にある評価像のみと比較される。このアプローチは、間違った読取りの数を減少するという効果がある。その間違った読取りは、アーカイブ像の初期段階においてしばしば生じる撮像システム２０の視野における大きなシフトのため、及び／または、ズームレンズ設定の調整の結果として、生じることがある。

評価像とアーカイブ像とを比較して、同じ像要素を含む像の中の領域を決定する（ステップ８０）。この比較では、また、実質的に同じであるが同一でない要素を含む像における領域を決定できる。これは、構図段階の間の題材の動きにより必要となることがある。別の方法では、アーカイブ像における被写体を表わすキー（key）要素または要素のパターンを、同定でき、共通の領域を、キー要素または要素のパターンを探すことにより決定する。通常の像比較アルゴリズムがこの目的のために使用できる。たとえば、比較される像の間でのカメラの相対的移動の決定は、ＭＰＥＧ２圧縮ビデオストリームを生成するときに使用される像比較アルゴリズムを用いて決定できる。

図５と図６は、そのような比較の結果を示す。この実施の形態では、アーカイブ像１２０を、１組の評価像１１０、１１２、１１４、１１６、１１８と比較する。各評価像とアーカイブ像とに共通の像要素は、重要領域１２２に含まれる。この重要領域１２２は、各評価像１１０、１１２、１１４、１１６、１１８とアーカイブ像１２０とに共通の像情報を含む領域として決定される。

次に、この共通の像要素を特徴づける重要領域のデータを決定する（ステップ８２）。重要領域のデータは、重要領域を含むアーカイブ像の領域を決定する。第１の実施の形態では、重要領域のデータは、アーカイブ像の中の共通の像要素の位置を同定する１組の座標を含む像メタデータからなる。他の実施の形態では、アーカイブ像は、複数の領域に分割され、重要領域は、それらの領域の１つに関連づけられる。この実施の形態では、重要領域のデータは、領域の指定を含む。別の実施の形態では、重要領域のデータは重要領域の中にあるアーカイブ像の中の１以上の対象物を同定する情報を含む。たとえば、図５と図６に示されるように、題材１１２は、共通の像の要素の中に位置される。この図示では、重要領域のメタデータは、人のように見える、像の中の物体が像の題材であることを示す指標を含む。

他の実施の形態では、重要領域のデータは、重要領域の像を含む。重要領域の像は多くの形をとる。たとえば、重要領域の像は重要領域をアーカイブ像の他の像と分離するためアーカイブ像にマップできる端部の像を含む。別の実施の形態では、重要領域の像は、重要領域を含むアーカイブ像の複製を含む。また、重要領域のデータは、アーカイブ像の中の重要領域の外観を有するが、異なった方法で処理または格納された像を含む。この方法は、たとえば、像の記憶容量を小さくするために、より低い解像度、より高い圧縮比及び／又は縮小された色域を持つようにすることである。さらに別の実施の形態では、重要領域の像は、アーカイブ像の外観と対照的な特有の外観を有するように処理される。

図５と図６では長方形で示されているけれども、共通領域の要素は、任意の形の重要領域１１２の中に含まれていてもよいことがわかる。

重要領域のデータを、アーカイブ像と関連付ける（ステップ８４）。１つの実施の形態では、重要領域のデータをアーカイブ像と関連付けるステップは、また、アーカイブ像の残りの部分が格納される像の解像度より高い解像度を持つ形式でアーカイブ像を格納するステップを含む。他の別の実施の形態では、重要領域のデータをアーカイブ像と関連付けるステップは、また、アーカイブ像の残りの部分を格納するのに使用される圧縮比より低い圧縮比で、同定された重要領域を格納するステップを含む。

この種のさらに別の実施の形態では、重要領域のデータをアーカイブ像と関連付けるステップは、重要領域を表わす像データを、像の他の領域において使用された色、色域又は他の色の設定とは異なる設定を用いて記録するステップを含む。この観点で、ディジタル像解析アルゴリズムを用いて容易に検出されるが像が記録されたときには直ちには観察できないような多くの小さな形の色調節がディジタル像の中の像情報に対して可能である。１つの単純な例では、重要領域の外側の領域における像情報を記録するのに使用されるビット数、たとえば３０ビットより多いディジタルビット、たとえば４８ビットが、ディジタル像の中の重要領域データ内の像情報を記憶するために用いられる。これらのレベルで、ビット深さの違いは、像を見る人にとってもともと明白でないが、ディジタル像プロセッサにとっては直ちに明らかである。別の方法では、色調節は、アーカイブ像を見る人にとって明白なように行える。たとえば、重要領域の外側にあるアーカイブ像とともに色情報データにより表わされる重要領域の中にあるアーカイブ像の部分は、黒と白の像情報で表わすことができる。

別の実施の形態では、注目領域のデータは、見てわかるマーク、見て分かる情報の形でアーカイブ像の中で記録でき、及び／又は、像を見る人にとって直ちには明らかでないが、適当な画像処理部により像から抽出できる形で、アーカイブ像の中に符号化される情報を含む光学的透かしの形で符号化できる。

他の実施の形態では、重要領域のデータは、データベースに、または、サーバーまたは他の形のメモリに、重要領域のデータに記録された情報とともに格納できる。この情報は、その注目領域のデータがあるアーカイブ像に関連することを示すものである。別の実施の形態では、重要領域のデータの情報は、格納でき、アーカイブ像と関連づけて記録されて、重要領域のデータの位置を示す

感光材料のうえに像を記録する化学的感光撮影システムなどの追加の撮影システム６９を用いてアーカイブ像が得られるとき、重要領域のデータは、従来行われてきたように可視または不可視の形のデータに重要領域のデータを光学的に符号化することにより、アーカイブ像と関連づけられる。別の方法では、重要領域のデータは、情報を受け取ることが可能な磁気的層を備える感光材料に記録できる。そのような感光材料は、たとえば、米国ニューヨーク州ロチェスターのイーストマンコダック社により販売されているアドバンテック（商標）フィルムなどの、アドバンスト写真システム（Advanced Photographic System）の要求に応えるフィルムである。別の形態では、重要領域のデータは、感光材料と関連づけられる電子メモリに記憶される。他の形態では、感光同定番号、像フレーム番号などの感光材料同定情報がフィルムから抽出され、重要領域の情報とともに格納され、データベースまたは他の格納装置に転送される。

図７は、本発明の方法の他の実施の形態のフローチャートを示す。この方法は、像の構図を開始したとき（ステップ１３０）に始まる。図８Ａ〜８Ｅに示されるように、像構図の間、評価像１５１、１５２、１５４、１５６、１５８を、アーカイブ像１６２の撮影に先立つある期間の間に続けて撮影し（ステップ１３２）、格納する（ステップ１３４）。次に、アーカイブ像１６０を撮影し（ステップ１３６）、格納する（ステップ１３８）。次に、このアーカイブ像に対応する重要領域の像を得る（ステップＳ１４０)。次に、重要領域のデータを一連の評価像と比較する（ステップ１４２）。この実施の形態では、重要領域のデータは、アーカイブ像の撮影の直前に撮影された評価像１５８からはじまり逆の順番で続く評価像１５６、１５４、１５２などを含む一連の評価像の中の個々の評価像と比較される。各々の比較において、重要領域の改良された像を作成する（ステップ１４３）。この重要領域の改良された像を、しきい条件と比較する（ステップ１４４）。このしきい条件に適う場合、重要領域の改良された像を注目領域のデータとして記憶する（ステップ１４５）。次に、より多くの評価像が比較のために利用できるか否かを決定する（ステップ１４６）。重要領域の改良された像を、重要領域のデータとして記憶し、この比較処理を、前記の同定された共通の像要素がしきい条件に適わなくなるまで（ステップ１４８）、または、アーカイブ像が上述の一連の評価像の各々と比較されるまで（ステップ１４６）、続ける。

しきい条件は、前記の比較により決定される重要領域が重要領域の意味のある指示を与えることを確実にすることを意図する多くの条件の１つとして使用できる。予め決められる条件の１例は、重要領域の像の大きさである。しきい条件は他の形であってもよい。たとえば、しきい条件は、重要領域についての最小の水平方向の空間、重要領域についての最小の縦方向の空間またはその両方を定義する。また、しきい条件は、重要領域の像の全体の像空間の予め決められた部分、予め決められた形状または予め決められた分布パターンの形をとる。さらに、しきい条件は、アーカイブ像の取得の前の時間、または、アーカイブ像の撮影のすぐ前に撮影された評価像の数により定量化できる。

図８に示されるように、１つの実施の形態では、アーカイブ像を、アーカイブ像の撮影のすぐ前の時間ｔ−１に撮影された評価像で始まる一連の評価像と比較する。この比較は、重要領域（注目領域）の予備的な像を生じる。この予備的な像は、他の評価像と逆の順序で比較される。各々の比較では、重要領域の予備的な像と比較されている評価像内に見出されない、予備的な像の像要素は、重要領域の予備的な像から抽出されて、重要領域の改良された像を生じる。この重要領域の改良された像の大きさは監視される。重要領域の改良された像がしきい値より小さいと決定されると、その重要領域の改良された像は捨てられ、比較において使用された重要領域の予備的な像が重要領域の像として決定される。

図８Ａ〜図８Ｆに示されるように、時間ｔに、撮影されたアーカイブ像１６０に対応する重要領域の像１６２を得る（ステップ１４０）。重要領域の像１６２を、時間ｔ−１に、アーカイブ像１６０の撮影のすぐ前に撮影された評価像１５８と比較する（ステップ１４２）。この比較の結果、重要領域の像１６２と評価像１５８の両方に共通でない像要素を同定する。共通でない要素を、重要領域の像１６２から抽出して、改良された重要領域の像１６４を生じる（ステップ１４３）。次に、この重要領域の改良された像１６４が最小の大きさのしきい条件１７０として示されるしきい条件に適うか否かを決定する（ステップ１４４）。重要領域の改良された像１６４が最小の大きさのしきい条件１７０に適うとき、重要領域の改良された像１６４を重要領域の像として記憶する（ステップ１４５）。もし、より多くの評価像が比較のために利用できるならば（ステップ１４６）、別の評価像を得る（ステップ１５０）。そして、この処理は、重要領域の像１６２を、時間ｔ−２に撮影された次の評価像１５６と比較するステップ（ステップ１４２）に戻る。

次に、重要領域の像（今は像１６２）を、評価像１５６と比較して（ステップ１４２）、重要領域の像１６２と評価像１５６の両方に共通でない像要素を同定する。共通でない要素を、重要領域の像１６２から抽出して、図８Ｄに示す、次の改良された重要領域の像１６４を生じる（ステップ１４３）。次に、この重要領域の改良された像１６４が最小の大きさのしきい条件１７０に適うか否かを決定する（ステップ１４４）。重要領域の改良された像１６４を重要領域の像として記憶する（ステップ１４５）。もし、さらに評価像が比較のために利用できるならば（ステップ１４６）、別の評価像を得て（ステップ１５０）、改良された重要領域の像１６２を、時間ｔ−３に撮影された次の評価像１５４と比較するステップ（ステップ１４２）に戻る。

この比較の結果、重要領域の像１６２と評価像１５４の両方に共通でない像要素を同定する。共通でない要素を、改良された重要領域の像１６２から抽出して、図８Ｄに示す、次の改良された重要領域の像１６６（図８Ｃ）を生じる（ステップ１４３）。次に、この重要領域の改良された像１６６が最小の大きさのしきい条件１７０に適うか否かを決定する（ステップ１４４）。重要領域の改良された像１６６を重要領域の像として記憶する（ステップ１４５）。もし、より多くの評価像が比較のために利用できるならば（ステップ１４６）、別の評価像を得る（ステップ１５０）。そして、この処理は、改良された予備的重要領域の像１６２を、時間ｔ−４に撮影された次の評価像１５２と比較するステップ（ステップ１４２）に戻る。

次に、重要領域の像（今は像１６６）を、時間ｔ−４に撮影された評価像１５２と比較して（ステップ１４２）、共通でない要素を、重要領域の像１６６から抽出して、図８Ｂに示す、次の改良された重要領域の像１６８を生じる（ステップ１４３）。次に、この重要領域の改良された像１６８が最小の大きさのしきい条件１７０に適うか否かを決定する（ステップ１４４）。ここで、最小の大きさのしきい条件に適わないと決定される。

しきい条件の１つが適わないとき、または、アーカイブ像がすべての評価像と比較されたとき、オプションとして実行できる検証ステップ（ステップＳ１４７）を行える。このステップでは、使用者４に、注目領域の像を示す。アーカイブ像を表示し、共通の要素を含む重要領域を示す。使用者４は、図２に示されているような承認ボタン６１を使用して、示された重要領域の自動的な提示を受け入れるか、または、図２に示されるような拒絶ボタン６３を押して、自動的な提示を拒絶するか、または、制御部５８を用いて、決定された重要領域を拒絶する。使用者４が自動的な提示を拒絶すると、重要領域の像を削除できる（ステップ１４８）。使用者４が自動的な提示を受け入れると、重要領域の像をアーカイブ像とともに格納する（ステップＳ１４９)。

発明の１つの実施の形態では、撮像システム２０の使用者４は、その評価像が重要領域を定義するために使用されるかについて、入力できる。たとえば、評価像が撮影され重要領域を決定するために使用されるときに、シャッタートリガーボタン６０を、重要領域を定義するために使用できる。この例では、シャッタートリガーボタン６０が半押し位置に動かされたとき、評価像が撮影される。シャッタートリガーボタン６０が十分に押すことなく放されるとき、アーカイブ像は撮影されず、評価像は捨てられる。シャッタートリガーボタン６０が十分に押されたとき、シャッタートリガーボタン６０が半押し位置から十分に押された位置まで動かされる間に撮影された評価像が格納され、重要領域を決定するために使用される。

このようにして、使用者４は、重要領域の決定において使用されるべき１組の像を決定できる。この処理は図９Ａ〜図９Ｅに示されていて、図９Ａ〜図９Ｅは、それぞれ、人２０２を含む撮影シーン２００を示す。この図示において、使用者４は、シャッタートリガーボタン６０を半押し位置に動かすことにより、シーン２００のアーカイブ像の構図を開始する。使用者が撮像システム２０で狙いをつけると、構図が始まり、図９Ａに図示されるように、人２０２の端が切り取られた視野の像を撮影する。この視野の評価像２１０が提示され、使用者４は、これを修正しようとして、撮像システムを動かす。しかし、評価像２１２は、この調整も人２０２の端を切り取ることを表わしている。この点で、使用者４は、シャッタートリガーボタン６０を離して評価像２１０，２１２を捨てることもできる。次に、使用者４は、シャッタートリガーボタン６０を半押し位置に戻し、図９Ｃと図９Ｄに示すように、評価像２１４，２１６を撮影する。最後に、使用者４は、シャッタートリガーボタン６０を全押し位置に動かして、図９Ｅに示されるアーカイブ像を撮影する。像２１４、２１６、２１８に共通の像要素は、図９Ｆに示される重要領域２２０として同定される。

この種の別の実施の形態では、シャッタートリガーボタン６０は、第１押し位置、第２押し位置及び全押し位置の間で移動可能である。シャッタートリガーボタン６０が第１押し位置に動かされるとき、カメラシステムは、撮影と評価像の提示を開始する。しかし、評価像は、重要領域の決定に使用するためには格納されていない。シャッタートリガーボタン６０が第２押し位置に動かされるとき、マイクロプロセッサ５０は、評価像を、重要領域の決定に使用するために格納させる。マイクロプロセッサ５０は、シャッタートリガーボタン６０が第１押し位置に戻るまで、または、全押し位置まで押されるまで、評価像の格納を続ける。シャッタートリガーボタン６０が第１押し位置に戻ると、格納されている評価像は捨てられる。シャッタートリガーボタン６０が全押し位置まで押されると、格納されている評価像が、アーカイブ像における重要領域を決定するために使用される。なお、重要領域を決定するためにどの評価像または他の形の重要領域のデータが格納されるべきであるかを使用者が決定するために使用する他の制御部５８を提供するようにしてもよい。

上述の実施の形態では、撮像システム２０は、スチルイメージ撮影システムを備えるカメラからなるものとして説明した。しかし、他の実施の形態では、撮像システム２０は、スチルイメージを表わすタグ特徴部を備えるビデオカメラ、パーソナルコンピュータ、米国ニューヨーク州ロチェスターのイーストマンコダック社により製造されたコダックImage Maker(TM)キオスク、別のイメージ撮影装置により撮影された評価像とアーカイブ像を得るように、また、それらの像をマイクロプロセッサ５０に提供するように適合されたメモリまたは通信インタフェースなどの画像ソースを備える画像設備または同様な装置などの像処理システムを備えていてもよい。

本発明の撮像システムの１実施形態のブロック図図１の撮像システムの背面図本発明の方法の１実施形態のフローチャート図４ｆに示されるアーカイブ像の構図の間の一連の評価像により撮影されたシーン像情報の図図４ｆに示されるアーカイブ像の構図の間の一連の評価像により撮影されたシーン像情報の図図４ｆに示されるアーカイブ像の構図の間の一連の評価像により撮影されたシーン像情報の図図４ｆに示されるアーカイブ像の構図の間の一連の評価像により撮影されたシーン像情報の図図４ｆに示されるアーカイブ像の構図の間の一連の評価像により撮影されたシーン像情報の図アーカイブ像の図撮像された評価像、アーカイブ像および重要領域を表わしたシーンの図、重要領域および影線で示された評価像を含むアーカイブ像の図本発明の方法の他の実施形態のフローチャート図８ｆに示されるアーカイブ像の構図の間の一連の評価像の中の１つの評価像の図図８ｆに示されるアーカイブ像の構図の間の一連の評価像の中の１つの評価像の図図８ｆに示されるアーカイブ像の構図の間の一連の評価像の中の１つの評価像の図図８ｆに示されるアーカイブ像の構図の間の一連の評価像の中の１つの評価像の図図８ｆに示されるアーカイブ像の構図の間の一連の評価像の中の１つの評価像の図アーカイブ像の図図９ｆに示される重要領域を得るため処理される構図の間に撮影される１つの評価像を含む撮影シーンの図図９ｆに示される重要領域を得るため処理される構図の間に撮影される１つの評価像を含む撮影シーンの図図９ｆに示される重要領域を得るため処理される構図の間に撮影される１つの評価像を含む撮影シーンの図図９ｆに示される重要領域を得るため処理される構図の間に撮影される１つの評価像を含む撮影シーンの図図９ｆに示される重要領域を得るため処理される構図の間に撮影される１つの評価像を含む撮影シーンの図重要領域の図

符号の説明

４使用者、２０撮像システム、４０ディジタル・シグナル・プロセッサ、５０マイクロプロセッサ、１００シーン、１１０、１１２、１１４、１１６、１１８評価像、１２０アーカイブ像、１２２重要領域、１５１、１５２、１５４、１５６、１５８評価像、１６０，１６２アーカイブ像、１６４、１６６重要領域の像、１７０しきい条件、２００シーン、２０２人、２１０，２１２，２１４，２１６評価像、２１８アーカイブ像、２２０重要領域。

Claims

１つのアーカイブ像における重要領域を決定する方法であって、
アーカイブ像の構図の間に撮影される評価像を得て、
前記のアーカイブ像を得て、
前記の評価像を前記のアーカイブ像と比較して共通の像の要素を決定し、
この共通の像の要素を特徴づける重要領域のデータを決定し、
この重要領域のデータを前記のアーカイブ像と関連付ける
方法。
請求項１に記載された方法において、
一連の複数の評価像を構図の間に撮影し、共通の像の要素を決定する前記のステップでは、前記のアーカイブ像を、前記の一連の複数の評価像と比較することにより共通の像の要素を決定し、この比較は、前記のアーカイブ像の撮影のすぐ前に撮影される評価像から開始され、前記の共通の像の要素が、前記のアーカイブ像の前記の像の要素の予め決定された最小の像空間を決定するまで、順次その前の評価像について続けられる
方法。
評価像とアーカイブ像を得るために操作可能な像取得手段と、
評価像をアーカイブ像と比較して、すべての評価像とアーカイブ像とに共通なアーカイブ像の中の部分を同定する信号処理器とからなり、
前記の信号処理器は、前記の共通部分に対応する前記のアーカイブ像の中の部分を同定する重要データの領域を記憶し、この重要領域のデータを前記のアーカイブ像と関連付ける
撮像システム。