JP5276838B2 - 情報処理装置、情報処理方法、およびコンピュータプログラム - Google Patents

Description

本発明は、情報処理装置、情報処理方法、およびコンピュータプログラムに関し、より詳細には、複数の画像を１つに包括する情報処理装置、情報処理方法、およびコンピュータプログラムに関する。

デジタルカメラやデジタル一眼レフカメラといった撮像装置で撮影した画像をパーソナルコンピュータや、撮影した画像の表示機能を備えるテレビのような情報処理装置で閲覧するためには、１枚ずつ表示させるか、複数の画像を一度に表示する、いわゆるサムネイル形式で表示させることで閲覧することができる。

ところで、近年複数の画像を格納することができるアーカイバやファイルフォーマットが検討されてきている。複数の画像を１つのファイルにまとめて格納することで、関連性のある画像の閲覧方法に新たなバリエーションが生まれることが期待される。

特開２００７−１９４９４８号公報

ハードディスク等の記録装置に記録されている複数の画像から、所定の条件を満たしている画像を抽出する技術として、例えば特許文献１がある。特許文献１は、画像の撮影時にＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）によって位置情報を取得し、撮影した画像と位置情報とを紐付けて格納している。そして、格納したＧＰＳ情報を用いて複数の画像を抽出することで、近い範囲で撮影した画像を取得することができるというものである。

しかし、特許文献１に記載の技術は、ＧＰＳが無ければ撮影時に位置情報を取得することが出来ず、ＧＰＳが無ければ近い範囲で撮影した画像を取得することが出来ないという問題があった。

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、複数の画像から１つの主画像を選択し、当該主画像に表示されている特徴物を抽出し、主画像および主画像に表示されている特徴物が含まれる画像を１つに包括することが可能な、新規かつ改良された情報処理装置、情報処理方法、およびコンピュータプログラムを提供することにある。

上記課題を解決するために、本発明のある観点によれば、複数の画像を１つに包括する情報処理装置であって、複数の画像の内の１つの画像を主画像として、該主画像に含まれる特徴物を抽出する特徴物抽出部と、特徴物抽出部で抽出した特徴物が含まれる画像を選択する画像選択部と、主画像および画像選択部が選択した画像を包括する画像包括部と、を含むことを特徴とする、情報処理装置が提供される。

かかる構成によれば、特徴物抽出部は、複数の画像の内の１つの画像を主画像として、該主画像に含まれる特徴物を抽出し、画像選択部は、特徴物抽出部で抽出した特徴物が含まれる画像を選択し、画像包括部は主画像および画像選択部が選択した画像を包括する。その結果、複数の画像から１つの主画像を選択し、当該主画像に表示されている特徴物を抽出し、主画像および主画像に表示されている特徴物が含まれる画像を１つに包括することができる。

特徴物抽出部は、画像選択部が選択した画像にのみ含まれる特徴物を抽出し、画像選択部は、画像選択部が選択した画像にのみ含まれる特徴物が含まれる画像を選択してもよい。かかる構成によれば、特徴物抽出部は、画像選択部が選択した画像にのみ含まれる特徴物を抽出し、画像選択部は、特徴物抽出部において抽出した、画像選択部が選択した画像にのみ含まれる特徴物が含まれる画像を選択する。その結果、主画像に含まれる特徴物が含まれている画像からさらに当該画像にのみ含まれている特徴物を抽出し、その抽出した特徴物が含まれる画像を探索して包括することで、包括した画像に広がりを持たせることができる。

画像包括部は、包括する画像に付帯する付帯情報を含めて包括してもよい。そして、付帯情報は、主画像からの方向に関する情報であってもよい。その結果、当該付帯情報を包括した画像の閲覧に用いることができ、主画像からの方向に関する情報を付帯情報として包括することで、包括した画像を閲覧する際に方向を選択することで、包括された画像に含まれる別の画像を閲覧することが出来る。

また、上記課題を解決するために、本発明の別の観点によれば、複数の画像を１つに包括する情報処理方法であって、複数の画像の内の１つの画像を主画像として、該主画像に含まれる特徴物を抽出する特徴物抽出ステップと、特徴物抽出ステップで抽出した特徴物が含まれる画像を選択する画像選択ステップと、主画像および画像選択ステップで選択した画像を包括する画像包括ステップと、を含むことを特徴とする、情報処理方法が提供される。

また、上記課題を解決するために、本発明の別の観点によれば、複数の画像を１つに包括するコンピュータプログラムであって、コンピュータに、複数の画像の内の１つの画像を主画像として、該主画像に含まれる特徴物を抽出する特徴物抽出ステップと、特徴物抽出ステップで抽出した特徴物が含まれる画像を選択する画像選択ステップと、主画像および画像選択ステップで選択した画像を包括する画像包括ステップと、を実行させることを特徴とする、コンピュータプログラムが提供される。

以上説明したように本発明によれば、複数の画像から１つの主画像を選択し、当該主画像に表示されている特徴物を抽出し、その特徴物が含まれる画像を可能な、新規かつ改良された情報処理装置、情報処理方法、およびコンピュータプログラムを提供することができる。

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

（第１の実施形態）
まず、本発明の第１の実施形態にかかる情報処理装置について説明する。図１は、本発明の第１の実施形態にかかる情報処理装置１００のハードウェア構成について説明する説明図である。以下、図１を用いて本発明の第１の実施形態にかかる情報処理装置１００のハードウェア構成について説明する。

本発明の第１の実施形態にかかる情報処理装置１００は、例えばパーソナルコンピュータのような装置であり、図１に示したように、本発明の第１の実施形態にかかる情報処理装置１００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０２と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０４と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０６と、内部バス１０８と、入出力インタフェース１１０と、表示部１１２と、入力部１１４と、音声出力部１１５と、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）１１６と、ドライブ１１７と、ネットワークインタフェース１１８と、外部インタフェース１１９と、を含んで構成される。

ＣＰＵ１０２は、数値計算や情報処理、機器制御等を行うものであり、ＲＯＭ１０４に格納されたプログラムや、ＲＡＭ１０６に格納されたデータを順次読み出すことによって、また、例えば情報処理装置１００のユーザが入力部１１４から入力した指令に対応する信号や、ネットワークインタフェース１１８を介して外部の機器から送信された信号に基づいて、数値計算や情報処理、機器制御する。

ＲＯＭ１０４は、ＣＰＵ１０２が数値計算や情報処理、機器制御等を行う際に使用するプログラムや演算用のパラメータのうち、基本的に変更されず固定のデータを格納するものである。また、ＲＡＭ１０６は、ＣＰＵ１０２が数値計算や情報処理、機器制御等を行う際に使用するプログラムや演算用のパラメータのうち、基本的に各種処理の際に適宜変化するデータを格納するものである。

内部バス１０８は、情報処理装置１００の内部でデータを交換する際の経路である。ＣＰＵ１０２、ＲＯＭ１０４、ＲＡＭ１０６は、内部バス１０８によってそれぞれ相互に接続されている。また、内部バスは入出力インタフェース１１０とも接続されており、入出力インタフェース１１０を介して送られる、入力部１１４から入力した指令に対応する信号や、ネットワークインタフェース１１８を介して情報処理装置１００とネットワークで接続される他の機器から送信された信号をＣＰＵ１０２に渡す。

入出力インタフェース１１０は、情報の入出力のやり取りを仲介するものである。入出力インタフェース１１０は、表示部１１２、入力部１１４、音声出力部１１５、ドライブ１１７、ネットワークインタフェース１１８および外部インタフェース１１９に接続される。また入出力インタフェース１１０は、上述のように内部バス１０８とも接続されており、入力部１１４から入力した指令に対応する信号や、ネットワークインタフェース１１８を介して情報処理装置１００とネットワークで接続される他の機器から送信された信号を、内部バス１０８を介してＣＰＵ１０２に渡す。

表示部１１２は、入力部１１４から入力された内容や、ＣＰＵ１０２で数値計算や情報処理、機器制御等を行った結果等に関する情報を表示するものである。表示部１１２は、例えば液晶表示装置や有機ＥＬ（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）表示装置等からなる。

入力部１１４は、例えば情報処理装置１００のユーザが、ＣＰＵ１０２に対して各種の指令を入力する際に操作されるものである。入力部１１４としては、例えばボタン、キーボードやタッチパッド等からなる。

音声出力部１１５は、情報処理装置１００において音声の出力を伴うような処理を実行した際に、当該処理において発生する音声を出力するものである。ＨＤＤ１１６は、内部にハードディスクを設け、設けられたハードディスクを駆動し、ＣＰＵ１０２によって読み出されて実行されるプログラムや情報（例えば動画ファイル）を記録・再生するものである。ドライブ１１７は、持ち運び可能な記録媒体が装着され、装着された記録媒体と情報処理装置１００との間でデータを授受するものである。持ち運び可能な記録媒体として、磁気ディスク、光ディスク、光磁気ディスク、半導体メモリ等を用いてもよく、ドライブ１１７はこれらの記録媒体を読み取ることができるような装置を用いることができる。

ネットワークインタフェース１１８は、情報処理装置１００とネットワークで接続される他の機器との間で無線または有線によって情報を授受するものである。外部インタフェース１１９は、情報処理装置１００に接続して使用する周辺機器との情報のやり取りを仲介するものである。外部インタフェース１１９として、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ポート等からなる。

以上、本発明の第１の実施形態にかかる情報処理装置１００のハードウェア構成について説明した。次に、本発明の第１の実施形態にかかる情報処理装置１００の機能構成について説明する。

図２は、本発明の第１の実施形態にかかる情報処理装置１００の機能構成について説明する説明図である。以下、図２を用いて本発明の第１の実施形態にかかる情報処理装置１００の機能構成について説明する。

図２に示したように、本発明の第１の実施形態にかかる情報処理装置１００は、特徴物抽出部１３２と、画像選択部１３４と、画像包括部１３６と、を含んで構成される。

特徴物抽出部１３２は、例えばＨＤＤ１１６や、ドライブ１１７に装着された記録媒体などに記録された画像から、人物や建物等の特徴物を抽出するものである。ここでは、ＨＤＤ１１６に記録されている画像から特徴物を抽出するものとして示している。特徴物の抽出には、既知の抽出技術を用いてもよい。例えば、画像の明るさの分布を分析し、分析した明るさの分布から変化量が大きい点を抽出し、抽出した点を集めることで特徴物の範囲を決定してもよい。

画像選択部１３４は、特徴物抽出部１３２で抽出した特徴物が含まれている画像を、例えばＨＤＤ１１６、ドライブ１１７に装着された記録媒体、またはネットワークインタフェース１１８を介してネットワークに接続された他の情報処理装置などに記録された画像から選択するものである。本実施形態においては、画像選択部１３４で画像を選択する際に、予め１つの画像を主画像として指定しておき、当該主画像から抽出した特徴物が含まれる画像を画像選択部１３４で選択する。

画像包括部１３６は、複数の画像を１つのファイルにまとめてアーカイブするものである。本実施形態においては、予め指定した主画像と、画像選択部１３４が選択した画像とを１つのファイルにまとめてアーカイブする。アーカイブ形式としては、例えばＺＩＰ形式のように１つまたは複数のファイルをアーカイブする形式であってもよく、１つまたは複数の画像ファイルを、付帯情報を含めて格納する形式であってもよい。付帯情報としては、例えば画像ファイルの撮影日時や、一の画像ファイルから他の画像ファイルへの方向情報であってもよい。アーカイブしたファイルは任意の場所に記録してもよい。

以上、本発明の第１の実施形態にかかる情報処理装置１００の機能構成について説明した。次に、本発明の第１の実施形態にかかる情報処理装置１００を用いた情報処理方法について説明する。

図３は、本発明の第１の実施形態にかかる情報処理装置１００を用いた情報処理方法について説明する流れ図である。以下、図３を用いて本発明の第１の実施形態にかかる情報処理装置１００を用いた情報処理方法について説明する。

まず、情報処理装置１００の内部、例えばＨＤＤ１１６や、ドライブ１１７に装着された記録媒体に記録されている画像ファイルの中から、１つの画像ファイルを主画像として選択する（ステップＳ１０２）。主画像としての選択は、例えば情報処理装置１００で動作するコンピュータプログラムを実行することで、画像ファイル選択画面を表示部１１２に表示させて、情報処理装置１００のユーザが入力部１１４を操作することによって行ってもよい。

上記ステップＳ１０２において１つの画像ファイルを主画像として選択すると、続いて当該主画像に含まれている特徴物が含まれる他の画像ファイルを探索する範囲を指定する（ステップＳ１０４）。探索する範囲として、例えばＨＤＤ１１６や、ドライブ１１７に装着された記録媒体に作成されているフォルダを指定してもよく、ＨＤＤ１１６や、ドライブ１１７に装着された記録媒体に記録されている画像ファイルが、実際に撮影された日時の範囲を指定してもよい。探索する範囲の指定には、例えば情報処理装置１００で動作するコンピュータプログラムを実行することで、

上記ステップＳ１０４で画像ファイルを探索する範囲を指定すると、続いて探索するランクの範囲を指定する（ステップＳ１０６）。ランクとは、主画像から直接探索可能な画像をランク１とし、現ランクの画像から探索可能でなおかつ下位ランクの画像でないものを、１つ上位のランクとする。従って、探索するランクを上げると探索範囲が拡大する。

図４は、本発明の第１の実施形態にかかる情報処理方法における、画像と探索ランクとの関係について説明する説明図である。図４を用いて、本発明の第１の実施形態にかかる情報処理方法における、画像と探索ランクとの関係について説明すると、主画像ｐｉｃ１には、特徴物としてビルと橋とが含まれている。この主画像ｐｉｃ１に含まれているビルは、画像ｐｉｃ２に、橋は画像ｐｉｃ３に、それぞれ含まれている。従って、画像ｐｉｃ２、ｐｉｃ３は、ともにランク１の画像となる。

また、画像ｐｉｃ２には高層ビル群が含まれている。この画像ｐｉｃ２に含まれている高層ビル群は、画像ｐｉｃ４に含まれている。従って、画像ｐｉｃ４はランク２の画像となる。一方、画像ｐｉｃ３には教会の鐘が含まれている。この画像ｐｉｃ３に含まれている教会の鐘は、画像ｐｉｃ５に含まれている。従って、画像ｐｉｃ５もランク２の画像となる。

よって、探索するランクの範囲をランク１までとすると、探索される画像は画像ｐｉｃ２、ｐｉｃ３の２枚となり、探索するランクの範囲をランク２までとすると、探索される画像は画像ｐｉｃ２、ｐｉｃ３、ｐｉｃ４、ｐｉｃ５の４枚となる。

なお、画像ｐｉｃ６は、他のどの画像とも特徴物が共通していない。従って、画像ｐｉｃ６は、この６枚を探索範囲に指定した場合に、どんなにランクを上げても選択されない画像となる。

上記ステップＳ１０６で探索するランクの範囲を指定すると、指定したランクの範囲に該当する画像を、上記ステップＳ１０４で指定した画像ファイルを探索する範囲の中から探索する（ステップＳ１０８）。このステップＳ１０８で探索される画像を「副画像」とも称する。すなわち、「副画像」とは主画像から見てランク１、ランク２、・・・に相当する画像である。本実施形態においては、副画像の探索は、まず上記ステップＳ１０２で指定した主画像に含まれる特徴物を特徴物抽出部１３２で抽出し、抽出した特徴物が指定した範囲内の画像ファイルに含まれているかどうかによって、ランク１の画像を探し出すことによって行う。

以下、本実施形態にかかる画像ファイルの探索方法の一例について説明するが、本発明においては画像の探索方法はかかる例に限定されないことは言うまでもない。

まず、上記ステップＳ１０２で主画像として指定した画像から、特徴物抽出部１３２において特徴物を抽出する。特徴物の抽出は、上述したように、例えば画像の明るさの分布を分析し、分析した明るさの分布から変化量が大きい点を抽出し、抽出した点を集めることで特徴物の範囲を決定することで抽出してもよい。本発明においては、主画像に含まれる特徴物を抽出する数は限定されないが、探索効率を考慮して、１つの画像ファイルあたりの抽出する特徴物の数に制限を設けてもよい。

特徴物の範囲を決定すると、当該範囲の一辺、例えば長辺を予め定めた長さに正規化する。例えば、特徴物の範囲の長辺を５０ピクセルに正規化するとした場合には、特徴物の範囲の長辺が１００ピクセルであった場合には、長辺を５０ピクセルに正規化することで、短辺も同一の比率で正規化して、特徴物の範囲の長辺と短辺の長さを半分にしている。

なお、主画像の特徴物の範囲を抽出する際に、画像の色や撮影時刻の情報を、画像の探索に用いるための情報として、一時的に情報処理装置１００の内部（例えばＲＡＭ１０６）に保持していてもよい。

主画像からの特徴物の抽出が終わると、次に抽出した主画像の特徴物が含まれる画像、すなわちランク１に相当する画像を、上記ステップＳ１０４で指定した範囲から探索する。具体的には、上記ステップＳ１０４で指定した範囲に含まれる全ての画像ファイルに対して、主画像と同様に、特徴物抽出部１３２において特徴物を抽出し、抽出した特徴物の範囲を正規化して、抽出した特徴物と主画像の特徴物とが同一の特徴物であるかどうかを、画像選択部１３４において判定することによって行う。

主画像の特徴物と探索画像の特徴物とが同一の特徴物であるかどうかの判定は、例えば、正規化された長辺と短辺との比率が所定の誤差の範囲内であるかどうかによって行ってもよく、また長辺と短辺とが交わる角度の差が所定の範囲内であるかどうかによって行ってもよい。また、主画像と探索画像との間の相関関係によって判定してもよい。例えば、（ｘ，ｙ）＝（主画像特徴物エリア輝度，探索画像特徴物エリア輝度）として相関係数を算出し、相関係数が所定の値を超えていれば、主画像の特徴物と探索画像の特徴物とが同一の特徴物であると判定してもよい。

なお、主画像の特徴物と探索画像の特徴物とが同一の特徴物であるかどうかを判定する際には、主画像の色や撮影時刻の情報を、画像の探索に用いるための情報として、一時的に情報処理装置１００の内部（例えばＲＡＭ１０６）に保持していた場合には、当該情報を用いて探索を行ってもよい。

画像を探索する際に、主画像から抽出した特徴物が含まれる画像が複数該当する場合も考えられる。この場合には、該当する画像をすべてランク１の画像として選択してもよく、所定の条件を満たす画像をランク１の画像として選択してもよい。所定の条件とは、例えば主画像の特徴物との同一性の度合いがより高い画像を選択することであってもよく、主画像の撮影日時との間隔が短い、または長い方の画像を選択することであってもよい。

ランク１の画像の探索が終了すると、上記ステップＳ１０６で指定した、探索するランクの範囲がランク１であれば、この時点で画像の探索を終了する。一方、上記ステップＳ１０６で指定した、探索するランクの範囲がランク２以上であれば、指定されたランクまで上述した画像の探索を繰り返す。

画像ファイルの探索が完了すると、ステップＳ１０２で指定した主画像と、ステップＳ１０８で探索した結果、選択された副画像とを、画像包括部１３６において１つのファイルにまとめて格納する（ステップＳ１１０）。１つのファイルにまとめて格納する際には、主画像を中心に、選択された画像がどの方向に存在する画像であるかを記述しながら、ＺＩＰのような圧縮形式によってアーカイブしてもよく、複数の画像の格納を許すファイルフォーマットに格納してもよい。主画像からの方向の情報は、例えば８つの方向に分割して、それぞれ主画像やランク１、ランク２、・・・の画像からどの方向に位置する画像であるかを、方向情報という形で付帯情報として格納してもよい。

図５は、本発明の第１の実施形態にかかる情報処理方法における、画像ファイルを包括する際のイメージについて説明する説明図である。ここでは探索範囲をランク２までとして説明している。画像ｐｉｃ１を主画像として、主画像および副画像を画像ｐｉｃ０として１つに包括して格納することで、関連性のある画像を１つのファイルに集約することができる。

複数の画像ファイルが１つにまとめられたものを閲覧する場合には、例えば以下のような方法によって閲覧することができる。ここでは、方向情報が付帯情報として格納されているファイルに含まれている画像を閲覧する方法について示している。なお、以下に示す方法は本発明の一例に過ぎないことは言うまでもない。

図６は、本発明の第１の実施形態にかかる、画像の閲覧方法について説明する流れ図である。まず、複数の画像が１つに集約されて格納されているファイルを選択する（ステップＳ１１２）。ファイルの選択は、例えば情報処理装置１００で動作するコンピュータプログラムを実行することで、画像ファイル選択画面を表示部１１２に表示させて、情報処理装置１００のユーザが入力部１１４を操作することによって行ってもよい。

上記ステップＳ１１２でファイルの選択が完了すると、当該ファイルに主画像として記録されている画像を表示部１１２に表示する（ステップＳ１１４）。主画像を表示する際には、ファイルに含まれている方向情報を解析し、主画像の周囲にランク１の画像が存在することを示す旨を併せて表示する。例えば、主画像の右上方向および左上方向にランク１の画像が存在している場合には、その方向に矢印のアイコンを表示してもよい。

ここで、ユーザが表示したい画像の方向を選択する（ステップＳ１１６）と、例えば画像の周囲に表示された矢印のアイコンを選択すると、当該方向に位置する副画像（ここではランク１の画像）を表示する（ステップＳ１１８）。例えば、主画像の右上方向の矢印のアイコンを選択すると、その方向に位置するランク１の画像を表示する。この際、ランク１の画像の左下方向には主画像が位置することになるので、ランク１の画像を表示する際には、当該画像の周囲に左下方向の矢印のアイコンを表示させてもよい。

なお、ランク１の画像を表示する際に、さらに下位のランクの画像、つまりランク２の画像と関連付けられていれば、ランク２の画像が存在する方向に矢印のアイコンを表示させてもよい。

図７および図８は、本発明の第１の実施形態にかかる情報処理方法において、画像の表示部１１２への表示について説明する説明図である。図７は、最初に主画像である画像ｐｉｃ１を表示部１１２に表示させた場合について示したものである。ここで右上方向のアイコンを選択すると、図６に示したように、画像ｐｉｃ１から右上方向に位置するランク１の画像である画像ｐｉｃ３を表示部１１２に表示する。この際に、主画像が位置する方向である左下方向のアイコンと、ランク２の画像が位置する方向である右上方向のアイコンとを表示させている。

以上、本発明の第１の実施形態にかかる情報処理方法について説明した。なお、上述した情報処理方法は、情報処理装置１００の内部に（例えばＲＯＭ１０４に）格納したコンピュータプログラムを、ＣＰＵ１０２で読み出して順次実行することによって行ってもよい。

以上説明したように、本発明の第１の実施形態によれば、複数の画像の中から１つの主画像を指定し、当該主画像に含まれる特徴物を抽出し、抽出した特徴物が含まれている他の画像（副画像）を探索し、主画像と副画像とを１つにまとめて記録する。記録する際には方向情報や時刻情報等の付帯情報も合わせて記録することができる。これにより、画像を撮影する際に位置情報を同時に記録しなくても、関連する複数の画像を１つにまとめて記録することができる。そして、そのように１つにまとめられた複数の画像を閲覧する際には、記録した付帯情報を用いることで容易に閲覧することが可能となる。

（第２の実施形態）
本発明の第２の実施形態では、デジタルカメラのような撮像装置に本発明を適用した場合について説明する。図９は、本発明の第２の実施形態にかかる撮像装置２００について説明する説明図である。以下、図９を用いて本発明の第２の実施形態にかかる撮像装置２００の構成について説明する。

図９に示したように、本発明の第２の実施形態にかかる撮像装置２００は、ズームレンズ２０２と、絞り２０４と、フォーカスレンズ２０６と、駆動装置２０２ａ、２０４ａ、２０６ａと、ＣＭＯＳイメージセンサ２０８と、アンプ一体型のＣＤＳ（Ｃｏｒｒｅｌａｔｅｄ Ｄｏｕｂｌｅ Ｓａｍｐｌｉｎｇ）回路２１０と、Ａ／Ｄ変換器２１２と、画像入力コントローラ２１４と、画像信号処理部２１６と、圧縮処理部２２０と、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）ドライバ２２２と、ＬＣＤ２２４と、制御部２２８と、操作部２３２と、メモリ２３４と、ＶＲＡＭ（Ｖｉｄｅｏ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２３６と、メディアコントローラ２３８と、記録メディア２４０と、モータドライバ２４２ａ、２４２ｂ、２４２ｃと、を含んで構成される。

ズームレンズ２０２は、駆動装置２０２ａによって光軸方向に前後して移動させることで焦点距離が連続的に変化するレンズであり、被写体の大きさを変化して撮影する。絞り２０４は、画像を撮影する際に、駆動装置２０４ａによって、ＣＭＯＳイメージセンサ２０８に入ってくる光量を調節する。フォーカスレンズ２０６は、駆動装置２０６ａによって光軸方向に前後して移動させることで被写体のピントを調節するものである。本実施形態では、フォーカスレンズ２０６を遠距離から近距離に駆動させながら、複数の露光時間で露光制御することで合焦評価値を得る。

本実施形態においては、ズームレンズ２０２およびフォーカスレンズ２０６は１枚のみ示しているが、ズームレンズ２０２の枚数は２枚以上であってもよく、フォーカスレンズ２０６の枚数も２枚以上であってもよい。

ＣＭＯＳイメージセンサ２０８は、ズームレンズ２０２、絞り２０４およびフォーカスレンズ２０６から入射された光を電気信号に変換するための素子である。本実施形態においては電子シャッタによって入射光を制御して、電気信号を取り出す時間を調節しているが、メカシャッタを用いて入射光を制御して、電気信号を取り出す時間を調節してもよい。なお、本実施形態ではＣＭＯＳイメージセンサを用いているが、本発明はこれに限られず、ＣＭＯＳイメージセンサの代わりにＣＣＤイメージセンサを用いてもよい。

ＣＤＳ回路２１０は、ＣＭＯＳイメージセンサ２０８から出力された電気信号の雑音を除去する、サンプリング回路の一種であるＣＤＳ回路と、雑音を除去した後に電気信号を増幅するアンプとが一体となった回路である。本実施形態ではＣＤＳ回路とアンプとが一体となった回路を用いて撮像装置２００を構成しているが、ＣＤＳ回路とアンプとを別々の回路で構成してもよい。

Ａ／Ｄ変換器２１２は、ＣＭＯＳイメージセンサ２０８で生成された電気信号をデジタル信号に変換して、画像の生データを生成するものである。

画像入力コントローラ２１４は、Ａ／Ｄ変換器で生成された画像の生データのメモリ２３４への入力を制御するものである。

画像信号処理部２１６は、ＣＭＯＳイメージセンサ２０８から得られる画像の生データに対して、光量のゲイン補正やホワイトバランスを調整するものである。画像信号処理部２１６は撮影した画像の露光データを取得する。露光データには合焦評価値（ＡＦ評価値）やＡＥ（Ａｕｔｏ Ｅｘｐｏｓｕｒｅ；自動露光）評価値を含んでおり、画像信号処理部２１６において合焦評価値やＡＥ評価値を算出する。

圧縮処理部２２０は、画像信号処理部２１６で光量のゲイン補正やホワイトバランスの調整が行われた画像を、適切な形式の画像データに圧縮する。画像の圧縮形式は可逆形式であっても非可逆形式であってもよい。適切な形式の例として、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）形式やＪＰＥＧ２０００形式に変換してもよい。

ＬＣＤ２２４は、撮影操作する前のライブビュー表示や、撮像装置２００の各種設定画面や、撮影した画像を表示する。画像データや撮像装置２００の各種情報のＬＣＤ２２４への表示は、ＬＣＤドライバ２２２を介して行われる。

制御部２２８は、ＣＭＯＳイメージセンサ２０８やＣＤＳ回路２１０などに対して信号系の命令を行ったり、操作部２３２の操作に対する操作系の命令を行ったりする。本実施形態においては、制御部を１つだけ含んでいるが、信号系の命令と操作系の命令とを別々の制御部で（例えば、ＣＰＵとＤＳＰに分けて）行うようにしてもよい。

操作部２３２は、撮像装置２００の操作を行ったり、撮影時の各種の設定を行ったりするための部材が配置されている。操作部２３２に配置される部材には、電源ボタン、撮影モードや撮影ドライブモードの選択および効果パラメータを設定する十字キーおよび選択ボタン、被写体の撮影動作を開始するシャッタボタン等を含んでいてもよい。

メモリ２３４は、撮影した画像を一時的に記憶するものである。メモリ２３４は、複数の画像を記憶できるだけの記憶容量を有している。メモリ２３４への画像の読み書きは画像入力コントローラ２１４によって制御される。メモリ２３４としては、例えばＳＤＲＡＭ（Ｓｙｎｃｈｒｏｎｏｕｓ Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）を用いてもよい。

ＶＲＡＭ２３６は、ＬＣＤ２２４に表示する内容を保持するものであり、ＬＣＤ２２４の解像度や最大発色数はＶＲＡＭ２３６の容量に依存する。

記録メディア２４０は、画像記録部の一例であり、撮影した画像や画像合成部２１８で合成した画像を記録するものである。記録メディア２４０への入出力は、メディアコントローラ２３８によって制御される。記録メディア２４０には、フラッシュメモリにデータを記録するカード型の記憶装置であるメモリカードを用いることができる。

モータドライバ２４２ａ、２４２ｂ、２４２ｃはズームレンズ２０２、絞り２０４およびフォーカスレンズ２０６を動作させる駆動装置２０２ａ、２０４ａ、２０６ａを制御する。モータドライバ２４２ａ、２４２ｂ、２４２ｃを介してズームレンズ２０２、絞り２０４およびフォーカスレンズ２０６を動作させることで、被写体の大きさや光の量、ピントを調節する。

以上、図９を用いて本発明の第２の実施形態にかかる撮像装置２００について説明した。かかる撮像装置２００の内部に、例えば図９に示したように、制御部２２８の内部に上述した特徴物抽出部１３２、画像選択部１３４、および画像包括部１３６を設けることで、撮像装置２００で撮影した複数の画像の中から１つの主画像を指定し、当該主画像に含まれる特徴物を抽出し、抽出した特徴物が含まれている他の画像（副画像）を探索し、主画像と副画像とを１つのファイルにまとめて記録することができる。

そして、記録したファイルを閲覧する場合には、本発明の第１の実施形態と同様に、操作部２３２を操作して閲覧したいファイルを選択し、主画像および副画像をＬＣＤ２２４に表示させることで閲覧することができる。従って、撮像装置２００で撮影した画像が記録された記録メディア２４０をパーソナルコンピュータ等の他の情報処理装置に読み込ませることなく、撮像装置２００上で複数の画像がまとめられたファイルの作成および閲覧を行うことができる。

以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明は係る例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。

本発明は、情報処理装置、情報処理方法、およびコンピュータプログラムに適用可能であり、特に複数の画像を１つに包括する情報処理装置、情報処理方法、およびコンピュータプログラムに適用可能である。

本発明の第１の実施形態にかかる情報処理装置１００のハードウェア構成について説明する説明図である。 本発明の第１の実施形態にかかる情報処理装置１００の機能構成について説明する説明図である。 本発明の第１の実施形態にかかる情報処理装置１００を用いた情報処理方法について説明する流れ図である。 本発明の第１の実施形態にかかる情報処理方法における、画像と探索ランクとの関係について説明する説明図である。 本発明の第１の実施形態にかかる情報処理方法における、画像ファイルを包括する際のイメージについて説明する説明図である。 本発明の第１の実施形態にかかる、画像の閲覧方法について説明する流れ図である。 本発明の第１の実施形態にかかる情報処理方法において、画像の表示部１１２への表示について説明する説明図である。 本発明の第１の実施形態にかかる情報処理方法において、画像の表示部１１２への表示について説明する説明図である。 本発明の第２の実施形態にかかる撮像装置２００について説明する説明図である。

符号の説明

１００ 情報処理装置
１０２ ＣＰＵ
１０４ ＲＯＭ
１０６ ＲＡＭ
１０８ 内部バス
１１０ 入出力インタフェース
１１２ 表示部
１１４ 入力部
１１５ 音声出力部
１１６ ＨＤＤ
１１７ ドライブ
１１８ ネットワークインタフェース
１１９ 外部インタフェース
１３２ 特徴物抽出部
１３４ 画像選択部
１３６ 画像包括部

Claims (4)

1. 複数の画像を１つに包括する情報処理装置であって、
   前記複数の画像の内の１つの画像を主画像として、該主画像に含まれる特徴物を抽出する特徴物抽出部と、
   前記特徴物抽出部で抽出した特徴物が含まれる画像を選択する画像選択部と、
   前記主画像および前記画像選択部が選択した画像を包括する画像包括部と、
   を含み、
   前記画像包括部は、包括する画像に付帯する付帯情報を含めて包括し、
   前記付帯情報は、前記特徴物抽出部が抽出した前記特徴物の前記主画像内での位置に基づいて前記画像包括部で生成される前記主画像からの方向に関する情報であることを特徴とする、情報処理装置。
2. 前記特徴物抽出部は、前記画像選択部が選択した画像にのみ含まれる特徴物を抽出し、前記画像選択部は、前記画像選択部が選択した画像にのみ含まれる特徴物が含まれる画像を選択することを特徴とする、請求項１に記載の情報処理装置。
3. 複数の画像を１つに包括する情報処理装置の情報処理方法であって、
   前記複数の画像の内の１つの画像を主画像として、該主画像に含まれる特徴物を抽出する特徴物抽出ステップと、
   前記特徴物抽出ステップで抽出した特徴物が含まれる画像を選択する画像選択ステップと、
   前記主画像および前記画像選択ステップで選択した画像を、前記特徴物抽出ステップで抽出された前記特徴物の前記主画像内での位置に基づいて前記主画像からの方向に関する情報を生成し、付帯情報として含めて包括する画像包括ステップと、
   を含むことを特徴とする、情報処理装置の情報処理方法。
4. 複数の画像を１つに包括するコンピュータプログラムであって、コンピュータに、
   前記複数の画像の内の１つの画像を主画像として、該主画像に含まれる特徴物を抽出する特徴物抽出ステップと、
   前記特徴物抽出ステップで抽出した特徴物が含まれる画像を選択する画像選択ステップと、
   前記主画像および前記画像選択ステップで選択した画像を、前記特徴物抽出ステップで抽出された前記特徴物の前記主画像内での位置に基づいて前記主画像からの方向に関する情報を生成し、付帯情報として含めて包括する画像包括ステップと、
   を実行させることを特徴とする、コンピュータプログラム。

Images