JP2005143014A - 画像処理装置、画像処理方法および画像処理プログラム - Google Patents

Abstract

【課題】 一部の領域に注釈情報が付与された複数の画像を順に再生するときに、画像と注釈情報との対応関係を明確にし得る画像処理装置を提供する。
【解決手段】 パーソナルコンピュータ(200)は、デジタルカメラ(100)で撮影された画像を表示部(29)にスライドショーとして再生表示する際に、注釈情報が付与された親画像とその親画像に注釈情報として付与された全ての画像を１組として、各組を順に再生表示するとともに、各組内では注釈情報として付与された画像よりも親画像を先に再生表示する。再生表示する親画像には注釈情報が付与された領域を示す枠を重ねて表示する。
【選択図】 図８

Description

本発明は、画像と画像の一部の領域に対して付与された注釈情報の再生を画像の処理の一部に含む画像処理装置、画像処理方法、および画像処理プログラムに関する。

複数の静止画像を一定時間ずつ順に表示することにより、画像の関連を判り易くしたり
臨場感を高めたりすることが行われている。これは元来、銀塩フィルム（スライド）に撮影した画像について行われてきたため、一般にスライドショーと呼ばれている。

近年では、デジタルカメラで撮影した画像やパーソナルコンピュータで生成した画像を、パーソナルコンピュータで順に表示することも行われており、このようにデジタル画像を順次表示することもスライドショーと呼ばれている。特開２００１−１０３４１５号や特開２００２−３００５２０号には、デジタル画像のスライドショーにおける画像の再生表示の順序について記載されている。

一方、デジタルカメラで撮影した画像の一部の領域に注釈情報を付与して、画像が有する情報伝達の機能を高めることが提案されている。画像への注釈情報の付与は画像を撮影したデジタルカメラ自体で行われることもあれば、画像をパーソナルコンピュータに伝送して、パーソナルコンピュータ上で行われることもある。いずれにしても、使用者は、画像の任意の位置に任意の大きさの領域を設けて、画像、音声、文字列等を注釈情報として付与することができる。１つの画像に複数の注釈情報を付与することも可能である。
特開２００１−１０３４１５号公報 特開２００２−３００５２０号公報

一部の領域に注釈情報が付与された画像もスライドショーで再生表示することが可能である。しかし、そのような画像のスライドショーにおいて、注釈情報が付与された画像と画像に付与されている注釈情報とを、どのような順序で再生するかについては、これまで提案されていない。

注釈情報は任意の時点で付与することができるから、仮に、画像の撮影日時や画像への注釈情報の付与日時の順にこれらを再生するとすれば、画像とその画像に付与された注釈情報の再生の間に他の画像や注釈情報が再生されることになって、画像と注釈情報の関係が非常に判り難くなり、画像に注釈情報を付加することの意味や、スライドショーを行うことの意義が大きく損なわれる。

本発明は、このような問題点に鑑みてなされたもので、スライドショーのように複数の画像を順に再生するときに、画像と注釈情報との関係を明確にし得る画像処理装置、画像処理方法、および画像処理プログラムを提供することを目的とする。

上記目的を達成するために、本発明では、画像と画像の一部の領域に対して付与された注釈情報の再生を画像の処理に含む画像処理装置において、画像と画像に付与されている注釈情報を再生する再生手段と、画像と画像に付与されている注釈情報との対応関係を検出する検出手段と、前記検出手段によって検出された対応関係に基づいて、前記再生手段による複数の画像と注釈情報の再生順序を決定する決定手段と、前記決定手段によって決定された再生順序に従って、前記再生手段に複数の画像と画像に付与されている注釈情報を再生させる制御手段を備えるようにする。

この画像処理装置では、画像と注釈情報の再生順序を、画像と注釈情報との対応関係に基づいて決定するため、スライドショーのように複数の画像を順に再生するときに、どの注釈情報がどの画像に付与されたものであるかが明確になる。

なお、画像の再生は表示によって行い、注釈情報の再生は、注釈情報が画像または文字であるか、あるいは音声であるかに応じて、表示または音声出力によって行うことになる。また、この画像処理装置は、画像と注釈情報の再生のみを行うものであってもよいし、画像の撮影、画像への注釈情報の付与、画像の編集等の他の処理を行うものであってもよい。

ここで、前記決定手段は、注釈情報が付与されている画像の再生順序を、その画像に付与されている注釈情報の再生順序よりも先とするようにするとよい。このようにすると、使用者は画像全体を把握した上で注釈情報を利用することができる。

前記決定手段は、注釈情報が画像であってその画像にさらに注釈情報が付与されているときに、その画像の再生順序を、その画像に付与されている注釈情報の再生順序よりも先とするようにするとよい。このようにすると、使用者は注釈情報である画像全体を把握した上で、さらに付与されている注釈情報を利用することができる。

前記決定手段は、注釈情報が付与されている画像が複数あるときに、注釈情報が付与されている１つの画像とその画像に付与されている注釈情報を１組として、組単位で再生順序を決定するようにするとよい。このようにすると、スライドショーにおいて、１つの画像とその画像に付与されている全ての注釈情報を再生した後で、他の画像を再生することになり、確実に画像と注釈情報の対応を明確にすることができる。

前記再生手段は、注釈情報が付与されている画像を再生するときに、その注釈情報が付与された領域を、再生する画像上に示すようにするとよい。このようにすると、注釈情報が画像のどの領域に対して付与されたものであるかが明確になる。

ここで、前記再生手段は、注釈情報が付与されている画像を再生するときに、その注釈情報が付与されている領域をその領域以外とは異なる態様で再生することができる。例えば、明るさ（輝度）や色を相違させる。

前記再生手段は、注釈情報が付与されている画像を再生した後、その注釈情報を再生する前に、その注釈情報が付与されている領域を拡大して再生するようにしてもよい。このようにすると、使用者は、画像全体について把握し、さらにそのうちの注釈情報が付与されている領域を把握した上で、注釈情報を利用することができる。

前記目的を達成するために、本発明ではまた、画像と画像の一部の領域に対して付与された注釈情報の再生を画像の処理に含む画像処理方法において、画像と画像に付与されている注釈情報との対応関係を検出し、検出した対応関係に基づいて複数の画像と注釈情報の再生順序を決定し、決定した再生順序に従って複数の画像と画像に付与されている注釈情報を再生するようにする。

前記目的を達成するために、本発明ではさらにまた、画像と画像の一部の領域に対して付与された注釈情報の再生を含む画像の処理をコンピュータに実行させる命令が記された画像処理プログラムにおいて、画像と画像に付与されている注釈情報との対応関係を検出する命令と、検出した対応関係に基づいて複数の画像と注釈情報の再生順序を決定する命令と、決定した再生順序に従って複数の画像と画像に付与されている注釈情報を再生する命令が記されているものとする。

本発明によれば、画像と注釈情報の再生順序を、画像と注釈情報との対応関係に基づいて決定するため、スライドショーのように複数の画像を順に再生するときに、どの注釈情報がどの画像に付与されたものであるかを明確にすることができる。したがって、注釈情報を画像に付与することの意義が確保される。

以下、本発明の実施形態について図面を参照しながら説明する。第１の実施形態であるデジタルカメラ１００を図１に示す。図１において（ａ）、（ｂ）はそれぞれデジタルカメラ１００の斜視図および背面図である。

デジタルカメラ１００は、前面に撮影レンズ１、ファインダ前窓３、フラッシュ発光部４、上面にレリーズボタン５、液晶表示器６、２つの撮影モード設定ボタン７、側面に着脱可能な記録媒体１０１を装着するための挿入口８、背面に液晶表示器９、ファインダ後窓１０、ズームボタン１１、３つの操作ボタン１２、および十字ボタン１３を備えている。デジタルカメラ１００は、ＣＣＤエリアセンサ２を内蔵しており、撮影対象からの光を撮影レンズ１でＣＣＤセンサ２上に結像させて、電気信号に変換することにより画像を撮影する。撮影した画像には、使用者が指定する領域に、画像の注釈情報（アノテーション）を付与することができる。

以下、アノテーションとしての画像をアノテーション画像とよび、アノテーションが付与された画像およびアノテーションが付与される画像を親画像ともよぶ。アノテーション画像は、他の画像と同様に、撮影によって得られる。アノテーション画像を含む全ての画像は、液晶表示器９に表示することができる。

レリーズボタン５は、半押しされたときに、自動露光制御および自動焦点調節を指示するＳ１信号を発し、全押しされたときに、記録する画像の撮影開始と、撮影した画像の記録媒体１０１への記録を指示するＳ２信号を発する。液晶表示器６は、デジタルカメラ１００の設定状況を表示する。デジタルカメラ１００は、親画像を含む通常の画像を撮影する通常撮影モードとアノテーション画像を撮影するアノテーション撮影モードとを有しており、撮影モード設定ボタン７はこれらのモードの切り換えの指示のために操作される。記録媒体１０１は撮影された画像を記録するもので、例えば、半導体メモリを内蔵し薄型に構成されたメモリカードを用いることができる。

液晶表示器９は、撮影された画像および操作案内を表示する。デジタルカメラ１００は、画像を撮影する撮影モードと画像を再生表示する再生モードを有しており、撮影モードに上述の通常撮影モードおよびアノテーション撮影モードがある。撮影モードにおいては、略一定の周期で画像の撮影が繰り返し行われ、撮影した画像は直ちに液晶表示器９に表示される。この画像は、撮影中の被写体を表すライブビューとなり、ファインダ後窓１０を介して観察される光学像と共に、フレーミングやズーミングの参考に利用される。

再生モードでは、記録媒体１０１に記録している画像を読み出して、液晶表示器９に表示する。再生モードで表示する画像には、親画像を含む通常の画像と、アノテーション画像が含まれる。

ズームボタン１１は、ズームレンズである撮影レンズ１の焦点距離の設定のために操作される。操作ボタン１２は、液晶表示器９に操作案内が表示されているときに、項目の選択や決定のために操作される。３つの操作ボタン１２の機能は、表示される操作案内に応じて変化する。操作ボタン１２の機能は、撮影条件に関するものと、アノテーションの付与に関するものに大別される。アノテーションの付与に関する機能で操作ボタン１２を分類すれば、アノテーションを付与する画像（親画像）を選択するための選択ボタン、アノテーションを付与する領域の大きさを切り換えるサイズ切り換えボタン、選択した親画像や切り換えた大きさに決定するための決定ボタン等がある。

十字ボタン１３は、左右方向に並ぶ２つの接点と、上下方向に並ぶ２つの接点の計４接点を有しており、液晶表示器９に表示されるカーソル（ポインタ）の上下左右への移動を指示するために操作される。アノテーションを付与する領域の位置は、この十字ボタン１３を操作することによって、変えることができる。以下、十字ボタン１３を上下左右ボタンともよぶ。

アノテーション撮影における処理の流れを図２に示し、その処理の間に液晶表示器９に表示する画像の例を図３に示す。以下、これらの図を参照して、アノテーション撮影における処理の流れを説明する。

アノテーション撮影モードに設定されると、まず、親画像を選択する案内画面を液晶表示器９に表示する（図２ステップ＃５）。この案内画面には、図３（ａ）に示すように、記録媒体１０１に記録されている画像のサムネイル画像（縮小画像）を並べて表示する。次いで、選択ボタンの操作によっていずれかの画像が選択され、決定ボタンの操作によって、選択された画像を親画像とすることが指示されるのを待つ（＃１０）。

親画像が決定されると、その画像のどの部分をアノテーションを付与する領域とするかの案内画面を表示する（＃１５）。この案内画面には、図３（ｂ）に示すように、親画像全体と、注釈情報を付与する領域のデフォルトとしてあらかじめ定められている領域を示す枠Ｆを表示する。そして、上下左右ボタンの操作により領域の移動が指示されたか否かを判定し（＃２０）、指示されたときは、図３（ｃ）に示すように、領域（枠Ｆ）を指示に応じて移動させる（＃２５）。

次いで、サイズ切り換えボタンの操作により、領域の大きさの切り換えが指示されたか否かを判定し（＃３０）、指示されたときは、図３（ｄ）に示すように、領域（枠Ｆ）の大きさを切り換える（＃３５）。領域の大きさは、あらかじめ数段階に設定されており、サイズ切り換えボタンが操作されるごとに１段階ずつ大きくしていく。なお、領域の大きさが最大の状態（親画像の全体に一致している状態）でサイズ切り換えボタンが操作されたときには、領域の大きさを最小にする。

次いで、決定ボタンの操作により注釈情報を付与する領域の位置および大きさの決定が指示されたか否かを判定し（＃４０）、指示がなければステップ＃２０に戻る。指示があったときは、図３（ｅ）に示すよう、ライブビューを表示する（＃４５）。なお、ライブビューとして表示される画像の撮影は、撮影モードに設定された時点で開始しており、ステップ＃５〜＃４０までの処理では、表示のみを休止している。

ライブビュー表示後、レリーズボタン５の操作によってＳ２信号が生成されるのを待つ（＃５０）。レリーズボタン５が操作されると、Ｓ２信号に先立ってＳ１信号が生成されるから、Ｓ１信号が生成された時点で、自動露光調節および自動焦点調節を行っておく。

Ｓ２信号が生成されると、画像を撮影し、これをアノテーション画像として、記録媒体１０１に記録する（＃５５）。そして、親画像とアノテーション画像の対応関係を示す関連付けファイルを作成して、記録媒体１０１に記録する（＃６０）。

アノテーション撮影で生成されるファイルのフォルダ構造を図４に示す。親画像のファイルと親画像に付与されたアノテーション画像のファイルは、同じフォルダの下に作成され、親画像であるかアノテーション画像であるかによらず、撮影順に連番が付けられていく。

図４において、Ａは親画像のファイルであり、通常撮影モードで撮影されたもの、または、使用者によってあらかじめ記録媒体１０１に記録されたものである。Ｂはアノテーション画像のファイルであり、Ｃは関連付けファイルである。関連付けファイルＣには、フォルダ名を含むパス名、親画像のファイル名、親画像の撮影日時、アノテーション画像が付与されている領域の位置および大きさ、その領域に付与されているアノテーション画像のファイル名が記される。

関連付けファイルの内容の例を図５に示す。図５において、Ｃ１は、親画像のファイルのパス名、ファイル名、および撮影日時を表している。Ｃ２はアノテーション画像が付与された１つの領域の位置と大きさを表しており、Ｃ３は、その領域に対して付与されているアノテーション画像のファイルのパス名とファイル名を表している。Ｃ４は、アノテーション画像が付与された別の領域の位置と大きさを表しており、Ｃ５は、その領域に対して付与されているアノテーション画像のファイルのパス名とファイル名を表している。

アノテーション画像が付与された領域の位置や大きさは、画素を単位として、横方向と縦方向について表される。領域の位置は、親画像の左上を原点とするアノテーション画像の左上の画素の位置で表される。１つの領域の位置および大きさを示す情報に続けてその領域に付与されたアノテーション画像のファイル名が記される。図５の例では、Ｃ１の１つの親画像にＣ２、Ｃ４の２つの領域が設定され、Ｃ２の領域にＣ３の３つのアノテーション画像が付与され、Ｃ４の領域にＣ５の２つのアノテーション画像が付与されている。

なお、親画像とアノテーション画像との関係を示す関連付けファイルを作成することに代えて、それらの関係を示す情報を親画像のファイルのタグ（ヘッダ）やアノテーション画像のファイルのタグに記録するようにしてもよい。この場合、タグに記録する情報には、親画像であるかアノテーション画像であるかの区別、親画像については、撮影日時、アノテーション画像が付与されている領域の位置および大きさ、その領域に付与されているアノテーション画像のファイル名、アノテーション画像については、親画像のファイル名、当該アノテーション画像が付与されている親画像の領域の位置および大きさを含める。

これらの情報を、親画像のファイルのタグのみに記録するようにしてもよいし、アノテーション画像のファイルのタグのみに記録するようにしてもよい。また、親画像とアノテーション画像の関係を関連付けファイルに記録する場合もファイルのタグに記録する場合も、アノテーション画像の撮影日時を含めるようにしてもよい。

デジタルカメラ１００において、アノテーション画像が付与された親画像を再生表示するときに、最初に表示する画面のいくつかの例を図６に示す。再生モードに設定されると、親画像とアノテーション画像が、サムネイル画像として並べて表示され、アノテーション画像がどの親画像に付与されたものであるかを示す像も表示される。

（ａ）は、２つの親画像Ｍ１、Ｍ３と２つのアノテーション画像Ｍ２、Ｍ４を表示したものである。親画像Ｍ１、Ｍ３は画面の左半分に表示され、アノテーション画像Ｍ２、Ｍ４は画面の右側に表示される。アノテーション画像Ｍ２と親画像Ｍ１との間に表示されている左向きの三角形の像は、前者が後者に付与されていることを示し、同様に、アノテーション画像Ｍ４と親画像Ｍ３との間に表示されている左向きの三角形の像は、前者が後者に付与されていることを示す。

（ｂ）は、１つの親画像Ｍ１と２つのアノテーション画像Ｍ２、Ｍ４を表示したものである。２つのアノテーション画像Ｍ２、Ｍ４を長方形の像が囲んでおり、この長方形の像が左向きの三角形の像に連なっている。これらの像は、アノテーション画像Ｍ２、Ｍ４が共に親画像Ｍ１に付与されていることを示す。親画像Ｍ１の下方には、下向きの三角形の像Ｎ１が表示されており、この像Ｎ１は、親画像Ｍ１以外の親画像が存在することを示す。上下左右キーで親画像を選択し、さらに下キー（上下左右キーの一部）を操作すると、次の親画像と、それに付与されているアノテーション画像が表示される。

（ｃ）も、１つの親画像Ｍ１と２つのアノテーション画像Ｍ２、Ｍ４を表示したものである。（ｂ）との相違は、三角形の像Ｎ１に代えて別の三角形の像Ｎ２が表示されている点である。この像Ｎ２は、アノテーション画像Ｍ２、Ｍ４の下方に表示されており、アノテーション画像Ｍ２、Ｍ４のほかにも親画像Ｍ１に付与されているアノテーション画像が存在することを示す。上下左右キーでアノテーション画像Ｍ４を選択し、さらに下キーを操作すると、親画像Ｍ１に付与されている次のアノテーション画像が表示される。

（ｄ）は、２つの親画像Ｍ１、Ｍ４と、４つのアノテーション画像Ｍ２、Ｍ３、Ｍ５、Ｍ６を表示したものである。アノテーション画像Ｍ２、Ｍ３は親画像Ｍ１に並べて表示されており、アノテーション画像Ｍ５、Ｍ６は親画像Ｍ２に並べて表示されている。アノテーション画像Ｍ２と親画像Ｍ１の間に表示されている左向きの三角形の像は、アノテーション画像Ｍ２、Ｍ３が親画像Ｍ１に付与されていることを示しており、同様に、アノテーション画像Ｍ５と親画像Ｍ４の間に表示されている左向きの三角形の像は、アノテーション画像Ｍ５、Ｍ６が親画像Ｍ４に付与されていることを示している。

このような形態で親画像とアノテーション画像のサムネイル画像を表示することで、親画像とアノテーション画像の関係を判り易く示すことができる。なお、ここに示した例よりも多くのサムネイル画像を一度に表示するようにしてもよい。

第２の実施形態であるパーソナルコンピュータ２００の外観を図７に示し、その構成を図８に模式的に示す。パーソナルコンピュータ２００は、ＣＰＵ２１、メモリ２２、ハードディスク２３等より成る制御部２４を内蔵した本体２５、キーボード２６、マウス２７等を含む入力部２８、および表示部２９を備えている。本体２５には、前述の記録媒体１０１および光ディスク等の他の記録媒体を装着したり、デジタルカメラ１００やインターネットと接続したりするための接続部３０も備えられている。

パーソナルコンピュータ２００は、画像を撮影することはできないが、デジタルカメラ１００と同様に、画像の一部の領域にアノテーションを付与する機能と、画像およびアノテーションを再生する機能を有する。画像およびアノテーションの再生は表示部２９に表示することによって行う。これらの機能に関する処理をはじめ、パーソナルコンピュータ２００が行う全ての処理はハードディスク２３に記録されている。

アノテーションを付与される画像は、他の装置、例えばデジタルカメラ１００で撮影されて、パーソナルコンピュータ２００に提供される。画像は、記録媒体１０１に記録されて、または不図示のケーブルを介して提供される。なお、インターネット上のウェブサイトからのダウンロード、あるいは電子メールの添付ファイルとして画像を取得することも可能である。

パーソナルコンピュータ２００では、アノテーション画像だけでなく、文字列もアノテーションとして画像に付与することができる。以下、アノテーションとしての文字列をアノテーション文字列という。アノテーション文字列は、キーボード２６より入力される。アノテーションを付与する際の親画像の選択や、アノテーションを付与する領域の位置や大きさの設定は、表示部２９に操作案内を表示して、第１の実施形態と同様にして行う。操作にはキーボード２６あるいはマウス２７を用いる。アノテーション画像の選択も、親画像の選択と同様にして行う。

パーソナルコンピュータ２００において、アノテーション画像が付与された親画像を再生表示するときの表示例を図９に示す。まず、（ａ）に示すように、親画像とアノテーション画像が、サムネイル画像として並べて表示され、アノテーション画像がどの親画像に付与されたものであるかを示す前述の像も表示される。なお、アノテーション文字列は、サムネイル画像として表すことができないので、所定の図形で表す。

この例では、３つの親画像Ｍ１、Ｍ３、Ｍ５と１１のアノテーション画像が表示されている。６つのアノテーション画像Ｍ２は、親画像Ｍ１に付与されており、３つのアノテーション画像Ｍ４は親画像Ｍ３に付与されており、２つのアノテーション画像Ｍ６は親画像Ｍ５に付与されている。

表示されているサムネイル画像はいずれも、マウス２７またはキーボード２６の操作によって選択することができる。アノテーション文字列を表す図形も同様である。

いずれかの親画像のサムネイル画像を選択すると、その画像が縮小前の通常の形態で表示され、その親画像に付与されているアノテーション画像のサムネイル画像とファイル名も表示される。図９の（ｂ）はその一例である。表示されたファイル名も選択可能である。

この状態で、いずれかのアノテーション画像のサムネイル画像またはファイル名を選択すると、そのアノテーション画像が付与されている領域を示す枠Ｆが、表示中の親画像に重ねて表示される。図９の（ｃ）はその一例である。このように、枠Ｆを親画像に重ねて表示することで、親画像のどの部分に対してアノテーション画像が付与されているのかが明確になる。

第１の実施形態のデジタルカメラ１００および本実施形態のパーソナルコンピュータ２００は、複数の画像を一定時間ずつ順に再生表示するスライドショーの機能も有する。スライドショーでは、画像を再生表示するのみならず、画像に付与されているアノテーション画像やアノテーション文字列も再生することができる。スライドショーでの再生方法は３つあり、使用者が任意に選択することができる。いずれの方法においても、親画像とそれに付与されている全てのアノテーションを１組として、各組を順に再生表示するとともに、各組内では、親画像の後にアノテーションを再生表示する。

再生表示の順序は、パーソナルコンピュータ２００では、制御部２４のＣＰＵ２１が、ハードディスク２３に記憶されているプログラムに従って決定する。その際、ＣＰＵ２１は、ハードディスク２３に記憶されている関連付けファイルを参照して親画像とアノテーションとの関係を見い出す。なお、親画像とアノテーションとの関係がファイルのタグに記されているときには、ファイルのタグを参照する。デジタルカメラ１００もＣＰＵとそのプログラムを記憶したメモリを含む制御部を備えており、この制御部がスライドショーでの画像の再生表示の順序を決定する。

以下、図１０の（ａ）〜（ｆ）に示す６つの画像をスライドショーで再生表示する場合を例にとって、各再生方法について説明する。なお、図１０の（ａ）および（ｅ）は親画像であり、（ｂ）、（ｃ）および（ｄ）は（ａ）の親画像に付与されたアノテーション画像、（ｆ）は（ｅ）の親画像に付与されたアノテーション画像である。

第１の再生方法は、まず、１つの親画像を再生表示し、次いで、その親画像に付与されているアノテーション画像を順に全て再生表示し、その後、別の親画像を再生表示し、さらに、その親画像に付与されているアノテーション画像を再生表示するものである。この方法で再生される画像を、再生の順序に従って図１１の（ａ）〜（ｆ）に示す。

なお、スライドショーの開始は、パーソナルコンピュータ２００ではキーボード２６またはマウス２７の操作によって、デジタルカメラ１００では操作ボタン１２の操作によって指示される。異なる親画像は撮影順序（ファイル名の一部である連番）に従って再生され、同一の親画像に付与されているアノテーション画像も撮影順序に従って再生される。最初に再生する親画像を使用者が指定し、他の親画像を撮影順序に従って再生するようにしてもよい。また、図１１には示していないが、親画像を再生表示するときに、アノテーション画像が付与されている領域を示す枠を、重ねて表示するようにしてもよい。

第２の再生方法は、各アノテーション画像を再生表示する直前にそのアノテーション画像が付与されている親画像を表示するとともに、そのアノテーション画像が付与されている領域を示す枠Ｆを親画像に重ねて表示するものである。この方法で再生される画像を、再生の順序に従って図１２の（ａ）〜（ｈ）に示す。

アノテーション画像が付与されている領域を示す枠Ｆを表示することに代えて、親画像のうちアノテーション画像が付与されている領域を、その領域以外とは異なる態様で表示するようにしてもよい。その例を図１３に示す。図１３において、（ａ）は、アノテーション画像が付与されている領域を他よりも明るく表示したもので、（ｂ）は、アノテーション画像が付与されている領域を他とは異なる色で表示したものである。

第３の再生方法は、第２の再生方法と同様、各アノテーション画像を再生表示する前にそのアノテーション画像が付与されている親画像を表示するものであるが、さらに、親画像を再生表示した後かつアノテーション画像を再生表示する前に、親画像のうち、そのアノテーション画像が付与されている領域を拡大して再生表示するものである。この方法で再生される画像を、再生の順序に従って図１４の（ａ）〜（ｌ）に示す。

（ｂ）、（ｅ）、（ｈ）、（ｋ）が拡大した親画像である。なお、この例では、アノテーション画像が付与されている領域を示す枠Ｆを親画像に重ねて表示するようにしているが、枠Ｆの表示を省略するようにしてもよい。

スライドショーでの再生表示に際して、再生表示中の画像が親画像であるかアノテーション画像であるかを示すために、アイコン等の図形を各画像に付加して表示したり、親画像とアノテーション画像を異なる色の枠で囲んで表示したりするようにしてもよい。

アノテーション画像の一部の領域に、さらにアノテーションを付与することも可能である。このようにアノテーションが２層以上の階層構造になっている画像も、上記の第１〜第３の再生方法によるスライドショーで表示することができる。その場合、親画像と親画像に付与されたアノテーション画像の再生順序と全く同様にして、アノテーション画像とこれに付与されているアノテーション画像の再生順序を定める。

図１０の（ｂ）のアノテーション画像にアノテーション画像が付与されている場合を例にとって、第２の再生方法による再生表示の例を図１５に示す。図１５において、（ｃ）が図１０の（ｂ）のアノテーション画像に付与されているアノテーション画像である。画像は図１５の（ａ）〜（ｉ）の順序で再生表示される。

スライドショーでは各画像を一定時間ずつ再生表示するが、その時間は、固定としてもよいし、使用者が選択できるようにしてもよい。また、１つの画像を再生表示している間に使用者から指示があったときには、その画像の再生を中止して、次の画像の再生表示に移行するようにしてもよい。

なお、ここではアノテーションが全て画像である場合について説明したが、アノテーションが文字列であるときにも、上記の第１〜第３の再生方法は適用可能である。その場合、文字列のアノテーションについては、そのアノテーション文字列を表示することになる。また、デジタルカメラ１００やパーソナルコンピュータ２００にマイクロフォンとスピーカとを備えて、画像に音声のアノテーションを付与したり、アノテーションである音声を再生したりするようにしてもよい。その場合も、上記の第１〜第３の再生方法を適用することができる。

第１の実施形態のデジタルカメラの外観を模式的に示す図。 上記デジタルカメラのアノテーション撮影における処理の流れを示すフローチャート。 上記デジタルカメラがアノテーション撮影の処理の間に表示する画像の例を示す図。 上記デジタルカメラがアノテーション撮影の処理で生成するファイルのフォルダ構造を示す図。 上記デジタルカメラが生成する関連付けファイルの内容の例を示す図。 上記デジタルカメラにおいて、アノテーション画像が付与された親画像を再生表示するときに最初に表示する画面の例を示す図。 第２の実施形態のパーソナルコンピュータの外観を模式的に示す図。 上記パーソナルコンピュータの構成を模式的に示す図。 上記パーソナルコンピュータにおいて、アノテーション画像が付与された親画像を再生表示するときの表示の例を示す図。 上記デジタルカメラおよびパーソナルコンピュータがスライドショーで再生表示する画像の例を示す図。 スライドショーにおける第１の再生方法での画像の再生順序を示す図。 スライドショーにおける第２の再生方法での画像の再生順序を示す図。 第２の再生方法での別の表示例を示す図。 スライドショーにおける第３の再生方法での画像の再生順序を示す図。 アノテーション画像にアノテーション画像が付与されているときの第２の再生方法での画像の再生順序を示す図。

符号の説明

１００ デジタルカメラ
１ 撮影レンズ
２ ＣＣＤエリアセンサ
３ ファインダ前窓
４ フラッシュ発光部
５ レリーズボタン
６ 液晶表示器
７ 撮影モード設定ボタン
８ 記録媒体挿入口
９ 液晶表示器
１０ ファインダ後窓
１１ ズームボタン
１２ 操作ボタン
１３ 十字ボタン
１０１ 記録媒体
２００ パーソナルコンピュータ
２１ ＣＰＵ
２２ メモリ
２３ ハードディスク
２４ 制御部
２５ 本体
２６ キーボード
２７ マウス
２８ 入力部
２９ 表示部
３０ 接続部

Claims (9)

1. 画像と画像の一部の領域に対して付与された注釈情報の再生を画像の処理に含む画像処理装置において、
   画像と画像に付与されている注釈情報を再生する再生手段と、
   画像と画像に付与されている注釈情報との対応関係を検出する検出手段と、
   前記検出手段によって検出された対応関係に基づいて、前記再生手段による複数の画像と注釈情報の再生順序を決定する決定手段と、
   前記決定手段によって決定された再生順序に従って、前記再生手段に複数の画像と画像に付与されている注釈情報を再生させる制御手段
   を備えることを特徴とする画像処理装置。
2. 前記決定手段は、注釈情報が付与されている画像の再生順序を、その画像に付与されている注釈情報の再生順序よりも先とすることを特徴とする請求項１に記載の画像処理装置。
3. 前記決定手段は、注釈情報が画像であってその画像にさらに注釈情報が付与されているときに、その画像の再生順序を、その画像に付与されている注釈情報の再生順序よりも先とすることを特徴とする請求項２に記載の画像処理装置。
4. 前記決定手段は、注釈情報が付与されている画像が複数あるときに、注釈情報が付与されている１つの画像とその画像に付与されている注釈情報を１組として、組単位で再生順序を決定することを特徴とする請求項１から請求項３までのいずれか１項に記載の画像処理装置。
5. 前記再生手段は、注釈情報が付与されている画像を再生するときに、その注釈情報が付与された領域を、再生する画像上に示すことを特徴とする請求項１から請求項４までのいずれか１項に記載の画像処理装置。
6. 前記再生手段は、注釈情報が付与されている画像を再生するときに、その注釈情報が付与されている領域をその領域以外とは異なる態様で再生することを特徴とする請求項５に記載の画像処理装置。
7. 前記再生手段は、注釈情報が付与されている画像を再生した後、その注釈情報を再生する前に、その注釈情報が付与されている領域を拡大して再生することを特徴とする請求項２または請求項３に記載の画像処理装置。
8. 画像と画像の一部の領域に対して付与された注釈情報の再生を画像の処理に含む画像処理方法において、
   画像と画像に付与されている注釈情報との対応関係を検出し、
   検出した対応関係に基づいて複数の画像と注釈情報の再生順序を決定し、
   決定した再生順序に従って複数の画像と画像に付与されている注釈情報を再生する
   ことを特徴とする画像処理方法。
9. 画像と画像の一部の領域に対して付与された注釈情報の再生を含む画像の処理をコンピュータに実行させる命令が記された画像処理プログラムにおいて、
   画像と画像に付与されている注釈情報との対応関係を検出する命令と、
   検出した対応関係に基づいて複数の画像と注釈情報の再生順序を決定する命令と、
   決定した再生順序に従って複数の画像と画像に付与されている注釈情報を再生する命令
   が記されていることを特徴とする画像処理プログラム。

Images