JP2010045435A - カメラ及び撮影システム - Google Patents

Abstract

【課題】撮影をアドバイスするキーワードと、該キーワードに従った撮影の結果得られた画像の内容から、当該キーワードを修飾したコメントを合成して画像に表示することが可能なカメラ及び撮影システムを提供することである。
【解決手段】デジタルカメラ１０に於いて、撮影者に対して次に撮影すべき被写体の候補に関する情報をシーな抽出部１８で抽出し、前記シーン抽出部１８から出力された情報に基づいて、次に撮影すべき被写体の候補に関する情報を候補表示部２０ａにて撮影者に告知する。この候補表示部２０ａの告知に基づいて、撮影された画像の特徴を特徴検出部１５で検出する。そして、前記シーン抽出部１８及び特徴検出部１５の出力に基づいて、フレーズ合成部２１にて修飾されたフレーズを作成し、前記撮影された画像と共に当該フレーズを候補表示部２０ａに表示して、前記撮影者に告知する。
【選択図】 図１

Description

本発明はカメラ及び撮影システムに関し、より詳細には、物語性のある写真鑑賞を可能とするカメラに関するものである。

デジタルカメラの普及によって、画像がデジタル化され、転送なども容易となり、スライドショーの活用、電子アルバムによる自動レイアウト等、様々な画像鑑賞の可能性が広がっている。

また、音楽をＢＧＭにしたり、画像に文字を合成したりすることも、手間をかければ誰にでもできるようになっている。前述のスライドショーなどでも、複数の画像を利用して、相互作用でより豊かな情感を伝えることも可能となっている。

こうした流れの中で、凝った画像に見慣れてしまうと、カメラで撮影した画像だけを見せられても、単調に感じたり、味気なく感じたりする鑑賞者が増えている。一方で、さりげないコメントが入っているだけでも、撮影者が身近に感じられて、その写真の持つ雰囲気が変わることがある。そのため、簡単に画像にコメントを添える技術が模索されている。

また、前述したスライドショーや電子アルバム等に於いて、個々の画像にコメントを付けて、全体としてストーリーができるような表現方法が求められている。単に、コメントを画像に付けるものとしては、例えば、下記特許文献１及び特許文献２のような技術がある。例えば、下記特許文献１には、撮影画像に対して後の整理・検索に役立つ具体的な識別清報を簡単に付加することができるデジタルスチルカメラ及びその制御方法が開示されている。また、下記特許文献２には、季語等によって、写真と俳句を関連付ける技術が開示されている。
特開２００７−２２８６０８号公報 特開２００４−２４０５７９号公報

しかしながら、前記特許文献１に記載のカメラでは、ユーザがタッチパネルに表示されるアイコンを逐一選択しなければならず、煩わしいものであった。また、前記特許文献２に記載の技術では、一枚の写真で完結するため、撮影した写真群から物語性を得ることができないものであった。

したがって、本発明は前記実情に鑑みてなされたものであり、その目的は、撮影をアドバイスするキーワードと、該キーワードに従った撮影の結果得られた画像の内容から、当該キーワードを修飾したコメントを合成して画像に表示することが可能なカメラ及び撮影システムを提供することである。

すなわち請求項１に記載の発明は、撮影者に対して次に撮影すべき被写体の候補に関する情報を抽出し出力するテーマ抽出手段と、前記テーマ抽出手段から出力された情報に基づいて、次に撮影すべき被写体の候補に関する情報を前記撮影者に告知する告知手段と、前記告知手段の告知に基づいて、撮影された画像の特徴を検出する特徴検出手段と、前記テーマ抽出手段の出力及び特徴検出手段の出力に基づいて修飾されたフレーズを作成し、前記撮影された画像と共に当該フレーズを前記告知手段を使って前記撮影者に告知するフレーズ合成手段と、を具備することを特徴とする。

請求項２に記載の発明は、請求項１に記載の発明に於いて、前記フレーズ合成手段は、前記告知手段に告知されたフレーズと、撮影時に得られた情報に基づいて、前記フレーズとは異なる第２のフレーズを作成して前記告知手段に告知することを特徴とする。

請求項３に記載の発明は、請求項１に記載の発明に於いて、撮影時の位置情報を取得する位置取得部と、前記撮影時の時刻情報を取得する時刻検出部、とを更に具備し、前記テーマ抽出手段は、前記撮影時の位置情報及び時刻情報の少なくとも一方に基づいて、次に撮影すべき被写体の候補に関する情報を抽出することを特徴とする。

請求項４に記載の発明は、請求項３に記載の発明に於いて、前記位置取得部で取得された撮影時の位置情報及び前記時刻検出部で取得された撮影時の時刻情報の少なくとも一方に基づいて特定の情報を外部機器より取得するための通信部を更に具備することを特徴とする。

請求項５に記載の発明は、請求項３に記載の発明に於いて、前記フレーズ合成手段は、前記位置取得部で前記位置情報が取得された場合には、当該位置情報に基づいて修飾されたフレーズを作成することを特徴とする。

請求項６に記載の発明は、請求項３に記載の発明に於いて、前記フレーズ合成手段は、前記時刻検出部で前記時刻情報が取得された場合には、当該時刻情報に基づいて修飾されたフレーズを作成することを特徴とする。

請求項７に記載の発明は、請求項３に記載の発明に於いて、前記フレーズ合成手段は、前記特徴検出手段で色の情報が取得された場合には、当該色情報に基づいて修飾されたフレーズを作成することを特徴とする。

請求項８に記載の発明は、請求項３に記載の発明に於いて、前記撮影された画像が前記フレーズ合成手段で作成されたフレーズに合致した場合は、該フレーズ及び当該画像を記録する記録手段を更に具備することを特徴とする。

請求項９に記載の発明は、請求項３に記載の発明に於いて、前記告知手段は、前記フレーズを表示する表示手段で構成されることを特徴とする。

請求項１０に記載の発明は、請求項９に記載の発明に於いて、前記表示手段は、前記撮影された画像と共に前記フレーズを表示することを特徴とする。

請求項１１に記載の発明は、被写体を撮影する撮影部と、撮影者に対して次に撮影すべき被写体の候補に関する情報を抽出するテーマ抽出手段と、前記テーマ抽出手段で抽出された情報に基づいて、次に撮影すべき被写体の候補に関する情報を前記撮影者に告知する告知手段と、前記告知手段の告知に基づいて、前記撮影部で撮影された画像の特徴を検出する特徴検出手段と、前記テーマ抽出手段及び特徴検出手段の出力に基づいて修飾されたフレーズを作成し、この作成されたフレーズを、前記撮影された画像と共に前記撮影者に告知するフレーズ合成手段と、を具備することを特徴とする。

請求項１２に記載の発明は、請求項１１に記載の発明に於いて、前記フレーズ合成手段は、前記告知手段に告知されたフレーズと、撮影時に得られた情報に基づいて、前記フレーズとは異なる第２のフレーズを作成して前記告知手段に告知することを特徴とする。

請求項１３に記載の発明は、請求項１１に記載の発明に於いて、撮影時の位置情報を取得する位置取得部と、前記撮影時の時刻情報を取得する時刻検出部、とを更に具備し、前記テーマ抽出手段は、前記撮影時の位置情報及び時刻情報の少なくとも一方に基づいて、次に撮影すべき被写体の候補に関する情報を抽出することを特徴とする。

請求項１４に記載の発明は、請求項１３に記載の発明に於いて、前記位置取得部で取得された撮影時の位置情報及び前記時刻検出部で取得された撮影時の時刻情報の少なくとも一方に基づいて特定の情報を外部機器より取得するための通信部を更に具備することを特徴とする。

請求項１５に記載の発明は、請求項１３に記載の発明に於いて、前記テーマ抽出手段は、前記撮影時の位置情報及び時刻情報の少なくとも一方に基づいて、次に撮影すべき被写体の候補に関する情報を抽出することを特徴とする。

請求項１６に記載の発明は、請求項１３に記載の発明に於いて、前記フレーズ合成手段は、前記位置取得部で前記位置情報が取得された場合には、当該位置情報に基づいて修飾されたフレーズを作成することを特徴とする。

請求項１７に記載の発明は、請求項１３に記載の発明に於いて、前記フレーズ合成手段は、前記時刻検出部で前記時刻情報が取得された場合には、当該時刻情報に基づいて修飾されたフレーズを作成することを特徴とする。

請求項１８に記載の発明は、請求項１３に記載の発明に於いて、前記フレーズ合成手段は、前記特徴検出手段で色の情報が取得された場合には、当該色情報に基づいて修飾されたフレーズを作成することを特徴とする。

請求項１９に記載の発明は、請求項１３に記載の発明に於いて、前記撮影された画像が前記フレーズ合成手段で作成されたフレーズに合致した場合は、該フレーズ及び当該画像を記録する記録手段を更に具備することを特徴とする。

請求項２０に記載の発明は、請求項１３に記載の発明に於いて、前記告知手段は、前記フレーズを表示する表示手段で構成されることを特徴とする。

請求項２１に記載の発明は、請求項２０に記載の発明に於いて、前記表示手段は、前記撮影された画像と共に前記フレーズを表示することを特徴とする。

本発明によれば、撮影をアドバイスするキーワードと、該キーワードに従った撮影の結果得られた画像の内容から、当該キーワードを修飾したコメントを合成して画像に表示することが可能なカメラ及び撮影システムを提供することができる。

以下、図面を参照して本発明の実施形態を説明する。

図１は、本発明の一実施形態であって、撮影システムが適用されたデジタルカメラ１０の構成を示すブロック図である。

図１に於いて、このデジタルカメラ１０は、位置検出部１１と、時刻検出部１２と、通信部１３と、撮影部１４と、特徴検出部１５と、データベース（ＤＢ）部１６と、シーン抽出部１８と、候補表示部１９と、フレーズ合成部２０と、候補表示部２０ａを含む表示部２０と、制御部２２と、を有して構成される。

前記位置検出部１１は、ＧＰＳからの電波を受信し、撮影時のデジタルカメラ１０の位置情報を検出・取得するための位置取得部である。前記時刻検出部１２は、このデジタルカメラ１０に内蔵される時計機能を有したもので、前記位置検出部１１で取得された位置に於ける時刻情報を取得するものである。前記通信部１３は、図示されない外部機器との通信、例えば撮影スポット情報等の特定の情報を取得するためのものである。

撮影部１４は、写真撮影時に写真画像を得る撮影手段である。特徴検出部１５は、前記撮影部１４より得られた写真画像を解析して写真の特徴を検出する特徴検出手段であり、画像処理機能を有している。この特徴検出には、例えば、色分布や顔検出等が用いられる。データベース部１６は、撮影位置、時刻、及び写真の特徴を格納する記録手段である。

シーン抽出部１８は、最初に取得した位置情報及び時刻情報より撮影テーマ選択を撮影者であるユーザに促し、更に撮影した写真の特徴と撮影位置情報より、次の撮影シーンを抽出するためのテーマ抽出手段である。表示部２０は告知手段としての候補表示部２０ａを有するもので、撮影部１４で取得された画像(写真)を表示するためのディスプレイ等の表示手段である。候補表示部２０ａは、前記シーン抽出部１８で抽出されたシーン情報をアドバイスとして表示する。フレーズ合成部２１は、撮影後に、候補表示部２０ａに表示されたシーン情報と写真の特徴より、フレーズを作成、合成するものでフレーズ合成手段を構成する。また、制御部２２は、ユーザの操作に従った制御を行うもので、このデジタルカメラ１０全体の制御を司るものである。

次に、図２を参照して、本発明の一実施形態に於けるデジタルカメラ１０に於いて、撮影された写真にフレーズを関連付ける方法について説明する。

時刻検出部１２より検出された時刻情報を基に、季節及び時刻が特定される。特定して季節を表すキーワードとしては、例えば、「立春」、「春分」、「春」、「初夏」、「夏」、「秋分」、「秋」、「冬」、「冬至」などがある。また、特定された時刻を表すキーワードとしては、例えば、「早朝」、「朝」、「午前」、「正午」、「昼」、「午後」、「タ方」、「夜」、「深夜」などがある。

位置検出部１１より検出された位置情報を基に、地図上の位置が特定される。ここで、特定された地図上の位置を表すキーワードとしては、その場所を表す大まかなもの、例えば、「山」、「畑」、「海」など、そしてその場所を示す目印のようなもの、例えば、「学校」、「会社」などがある。季節を表すキーワードと場所を表すキーワードから、フレーズが合成され、写真に関連付けられる。

更に、特徴検出部１５より検出された情報を基に、被写体の特徴が特定される。特定された被写体を表すキーワードの分類としては、「色（赤、青、黄、緑、など）」、「形（丸、三角、四角、長、短、など）」及び「推定された被写体（花、人、車、など）」がある。

前述した季節、場所と被写体のキーワードから、フレーズのテンプレートを基にフレーズが合成されて、写真に関連付けられる。

例えば、図２（ａ）に示されるように、位置情報より「山」、時刻情報より「秋」、被写体の特徴情報より「人」、の組合せにより、ハイキングのシーンが推定され、「秋のハイキング」というフレーズ２６ａが合成されて写真に関連付けられる。

また、図２（ｂ）に示されるように、位置情報として「山」、時刻情報として「春」、被写体の特徴情報より「赤・花」、の組合せにより、山で赤い花を撮影したことが推定され、「赤い花をみつけた」というフレーズ２６ｂが合成されて写真に関連付けられる。

次に、図３及び図４を参照して、ユーザに撮影テーマの選択を促すことについて説明する。

図３は、ユーザに選択を促すためのテーマを示した図である。

図３に於いて、時刻検出部１２で取得される情報から特定された季節を表すキーワードと、位置検出部１１で取得される情報から特定された場所を表すキーワードを、通信部１３を介して、図示されないサーバへ問い合わせが行われ、ピックアップされたキーワードから連想される数点のテーマの大枠が、前記サーバより取得される。

ピックアップされたテーマの大枠は、「家族野山ハイキング」や「野鳥観察」などである。ピックアップされたテーマの大枠がユーザによって選択され、ユーザによって「家族野山ハイキング」が選択された場合、そのテーマ情報を基に、通信部１３を介して図示されないサーバへ問い合わせが行われる。次いで、前記サーバより、そのテーマに沿ったシナリオデータ、撮影スポット情報、フレーズのテンプレート、キーワード、画像の特徴データが取得される。そして、シナリオデータに沿って、テーマに沿った撮影シーンがアドバイスされる。

図４は、撮影テーマとアドバイスを説明するための図である。

先ず、図４（ａ）に示されるデジタルカメラ１０のディスプレイ（表示部２０）に、図４（ｂ）に示されるような撮影テーマ選択メニューを表示される。ユーザが撮影を始める前に、図４（ｂ）に示されるようなメニュー階層を辿ることによって、所望のテーマが選択される。図４（ａ）に示される例では、先ず、メニュー第１階層で「プライベート」が選択され、メニュー第２階層で「遠出」が選択され、更に、メニュー第３階層で「日帰り」が選択される。

選択された各メニュー階層の各メニューは、キーワードとして利用される。このキーワードと撮影を始める時の位置情報、時刻情報より、撮影シーンの候補が抽出される。例えば、上記例が選択された場合、位置情報が「山」、時刻情報より「春」、選択されたキーワードの組合せによって、図４（ｃ）に示されるように、「忘れずに撮りましよう」というカテゴリの中に、「１．代表的な風景」、「２．きれいな花」、「３．家族みんなで」という撮影シーンのアドバイスが抽出される。

次に、図５を参照して、合成フレーズの候補の文言、表示アドバイス、撮影された写真群の関連付けについて説明する。

図５（ａ）〜（ｃ）は、合成フレーズの候補の文言、表示アドバイス、撮影した写真群の関連付けを説明するための図である。

図５（ｂ）に示されるようなアドバイスＡ１〜Ａ３は、それぞれ図５（ａ）に示されるようなフレーズＭ１、Ｍ２、Ｍ１１、Ｍ１２、Ｍ２１、Ｍ２２と関連している。ユーザにより写真撮影が行われる時、デジタルカメラ１０では、図５（ｂ）に示されるようなアドバイスＡ１〜Ａ３が候補表示部（表示装置）２０ａに表示される。ユーザは、この表示されたアドバイスを考慮して撮影を行う。この時、撮影された図５（ｃ）に示されるような写真Ｐ１〜Ｐ５は、そのアドバイスと関連を持っている。したがって、アドバイスと関連した写真と、アドバイスと関連したフレーズが結びつけられる。

次に、図６のフローチャートを参照して、本実施形態に於けるデジタルカメラ１０の制御動作について説明する。ここでは、ユーザが撮影テーマを選択する場合と、ユーザが写真撮影を行う場合と、ユーザが撮影した写真を再生する場合について説明する。

尚、この制御動作は、主に制御部２２によって行われる。

先ず、カメラが起動されると、ステップＳ１に於いて、撮影モードが確認される。ここで、撮影モードであればステップＳ２へ移行し、そうでない場合は後述するステップＳ１１に移行する。

ステップＳ２は、撮影可能な状態へ遷移されている。ここで、図示されないシャッタ釦が押されていない状態（スルー画表示中等）でシャッタ釦が押された場合は、ステップＳ３に移行する。このステップＳ３では、撮影が行われて、画像がデータベース部１６に記録される。

次に、ステップＳ４に於いて、撮影された写真より抽出された特徴、撮影位置、撮影時刻等のデータを基に、関連するデータの取得が行われてデータが取得できたかどうかが判定される。ここで、データが取得できた場合は、ステップＳ５に移行して、取得されたデータと画像の関連付けが行われる。一方、データが取得できない場合は、本シーケンスが終了する。

ステップＳ６では、撮影アドバイスに合致した画像であるかの判定処理が行われる。尚、このステップＳ６のサブルーチン「アドバイス画像判定処理」の詳細な動作については後述する。前記ステップＳ６の判定処理の結果、ステップＳ７に於いて、撮影アドバイスに合致すれば、ステップＳ８に移行してアドバイス画像としてデータベース部１６に記録される。一方、撮影アドバイスに合致した画像ではなかった場合は、前記ステップＳ４に移行して、再度データの取得が行われる。

また、前記ステップＳ２に於いて、図示されないシャッタ釦が押されていない状態（スルー画表示中）であれば、ステップＳ９に移行する。ここで、撮影テーマが指定されていれば、ステップＳ１０に移行してデジタルカメラ１０の候補表示部２０ａにアドバイス表示が行われる。その後、前記ステップＳ９に移行する。

一方、前記ステップＳ９に於いて撮影テーマが選択されていない場合は、撮影テーマ選択を行うように促されるべく、前記ステップＳ１に移行する。

次に、ユーザが撮影した写真を再生する場合の動作について説明する。

前記ステップＳ１にて撮影モードでないとされた場合は、ステップＳ１１に於いて、再生モードであるか否かが判定される。ここで、再生モードであればステップＳ１２に移行するが、そうでない場合は、後述するステップＳ１９へ移行する。

前記ステップＳ１１で再生モードであると判定された場合は、ステップＳ１２にて再生する画像が選択される。次いで、ステップＳ１３にて、再生画像の選択がなされたか否かが判定される。ここで、画像が選択されなければ、再度、再生モードに移行するかどうかをユーザの入力に促されるべく前記ステップＳ１１に移行する。

前記ステップＳ１３で再生画像が選択されたと判定された場合は、ステップＳ１４に移行して、選択された画像が撮影アドバイスによるものか否かの判定が行われる。ここで、撮影アドバイスによる写真であれば、ステップＳ１５に移行して、撮影アドバイスと撮影時のデータを基に、文言（フレーズ）が合成される。尚、このステップＳ１５のサブルーチン「アドバイスと撮影時データよりコメントを合成」の詳細な動作については後述する。次いで、ステップＳ１６では、合成された文言（フレーズ）がコメントとして、撮影された写真と関連付けて再生される。

一方、前記ステップＳ１４に於いて、選択された画像が撮影アドバイスによるものでない場合は、ステップＳ１７に移行して通常の画像再生が行われる。

そして、選択された画像が全て再生終了したならば、ステップＳ１８に移行して、再生モードを終了する否かが判定される。その結果、再生終了の場合は再生モードが終了して、本シーケンスが終了する。一方、再生終了でない場合は、前記ステップＳ１３に移行して、再度画像選択が行われる。

次に、撮影テーマの選択動作について説明する。

前記ステップＳ１１にて再生モードではないと判定された場合には、ステップＳ１９に移行して、テーマ指定モードであるか否かが判定される。ここで、テーマ指定で無ければ、前述したステップＳ１に移行し、テーマ指定モードであればステップＳ２０に移行する。このステップＳ２０では、選択可能なテーマが候補表示部２０ａに表示されて、ユーザに対して入力が促される。ここで、ユーザによりテーマ選択が行われると、続くステップＳ２１にて、ユーザによって指定されたテーマが、デジタルカメラ１０に記録される。その後、本シーケンスが終了する。

図７は、図６のフローチャートのステップＳ６に於けるサブルーチン「アドバイス画像判定処理（日帰り）の詳細な動作を説明するためフローチャートである。ここでは、撮影を行った写真が撮影アドバイスに則った写真であるかどうかが判定される。

ここでは、図４（ｃ）に示されるように、テーマとして「日帰り」が選択された場合について説明する。この場合、撮影アドバイスとして「家族みんなで」というフレーズが存在する。したがって、先ず、ステップＳ３１にて、撮影画像中の被写体に人の顔があるか否か、顔認識技術が利用されて特徴検出部１５による検出が行われ、判定がなされる。その結果、被写体に顔が存在するならば、ステップＳ３２に移行して、笑顔検出技術が利用されて正面を向いた笑顔の数が検出される。

次に、ステップＳ３３に於いて、検出された笑顔が、これまで「家族みんなで」という撮影アドバイスによって撮影された写真の中で最も多いか否かが判定される。ここで、撮影された写真の中で最も多い場合は、ステップＳ３４に移行して、この画像が「家族みんなで」というアドバイス画像として記録される。そして、ステップＳ３５にて、この時、前回「家族みんなで」というアドバイス画像として記録されていたものは、その候補から外される。その後、本サブルーチンを抜けて、図６のフローチャートのステップＳ７に移行する。

一方、前記ステップＳ３１にて、撮影画像中より人の顔が検出できなかった場合は、ステップＳ３６に移行する。ここでは、撮影アドバイス「きれいな花」を撮影したものか否かが判定されるために、その画像中に花のパターンが存在するか否かが判定される。花のパターンは、画像中の特徴抽出技術（エッジ、輪郭、線成分の抽出、領域分割による抽出、テクスチャの抽出等の処理）が利用されるもので、特徴検出部１５により抽出及び検出が行われる。

前記ステップＳ３６にて、花のパターンが抽出されたならば、次にステップＳ３７に於いて、抽出された画像の特徴より、以前に「きれいな花」アドバイス画像として記録された写真と比較されて、より大きく鮮やかに写っているか否かが判定される。この判定の結果、大きく鮮やかに写っていれば、ステップＳ３８に移行して、その写真が「きれいな花」アドバイス画像として記録される。そして、ステップＳ３９にて、この時、前回「きれいな花」アドバイス画像として記録されていたものは、その候補から外される。その後、本サブルーチンを抜けて、図６のフローチャートのステップＳ７に移行する。

一方、ステップＳ３７にて、抽出された画像が大きく鮮やかなものではなかった場合は、ステップＳ３８及びＳ２９がスキップされて、図６のフローチャートのステップＳ７に移行する。

また、前記ステップＳ３６に於いて、撮影画像中より花のパターンが検出できなかった場合は、ステップＳ４０に移行する。このステップＳ４０では、撮影アドバイス「代表的な風景」が撮影されたものか否かが判定される。そのために、その撮影画像の圧縮データサイズが今まで「代表的な風景」というアドバイス画像として記録された写真と比較されて、より大きいか否かが判定される。尚、風景写真は色情報が複雑であるため、ＪＰＥＧ等、画像圧縮が行われた時、圧縮率が低いため、圧縮画像データサイズは大きくなる。

前記ステップＳ４０にて、圧縮データが大きかった場合は、ステップＳ４１に移行して、「代表的な風景」というアドバイス画像として記録される。この時、続くステップＳ４２にて、前回「代表的な風景」アドバイス画像として記録されていたものが、その候補から外される。その後、本サブルーチンを抜けて、図６のフローチャートのステップＳ７に移行する。

一方、前記ステップＳ４０にて圧縮データ量が大と判定されなかった場合は、ステップＳ４１及びＳ４２がスキップされて、図６のフローチャートのステップＳ７に移行する。

次に、図８のフローチャートを参照して、図６のフローチャートのステップＳ１５に於けるサブルーチン「アドバイスと撮影時データよりコメントを合成」の詳細な動作について説明する。ここでは、撮影アドバイスと撮影時データよりフレーズを合成するための動作を説明する。

本サブルーチンに入ると、先ず、ステップＳ５１にて、撮影時に取得された位置情報から取得可能な場所データが存在するか否かが判定される。場所データは、位置情報（ＧＰＳデータ）が地名や地形及び地形を意味するキーワード（山、川、海）などに変換されたキーワードを意味する。ここで、場所データが存在すれば、ステップＳ５２に移行して、その場所を修飾するコメントが抽出される。ここで、抽出されるコメントは、例えば、「山」、「川」、「海」などである。一方、前記ステップＳ５１にて場所データが存在しない場合は、ステップＳ５２がスキップされる。

次に、ステップＳ５３に於いて、日時データ（時刻情報）が存在するか否かが判定される。ここで、日時データが無い場合は、ステップＳ５４に移行する。一方、日時データがあれば、ステップＳ５７に移行して、月の情報から季節が判定される。このステップＳ５７にて季節が判定されたならば、ステップＳ５８に移行して、季節を修飾するコメントが抽出される。季節を修飾するコメントは、例えば、「初春」、「春分」、「春」、「初夏」、「夏至」、「夏」、「残暑」、「初秋」、「秋」、「秋分」、「冬至」、「初冬」、「冬」などである。また、前記ステップＳ５７にて、季節が判定されない場合は、ステップＳ５８がスキップされる。

ステップＳ５９では、休日判定が行われる。ここで、休日であれば、ユーザが日常と異なる行動をとっていると推定されるので、ステップＳ６０に移行して、休日を修飾するコメントが抽出される。また、祝日である場合は、祝日の種類が抽出される。ここで、抽出されるコメントは、「土曜日」、「日曜日」、「正月」、「春分の日」、「みどりの日」、「国民の休日」、「海の日」、「終戦記念日」、「秋分の日」、「敬老の日」、「勤労感謝の日」、「天皇誕生日」などである。休日修飾コメントが抽出された後は、ステップＳ５４に移行する。

ステップＳ５４では、撮影された写真より抽出された特徴データの中の１つである、色の判定が行われる。これは、撮影された写真より画像の特徴が抽出（エッジ、輪郭、線成分の抽出、領域分割による抽出、テクスチャの抽出などの処理）される。そして、その画像を構成する中で、象徴的な色が抽出された場合は、ステップＳ５５に移行してその色を修飾するコメントが抽出される。修飾するコメントは、「赤」、「青」、「黄」、「緑」、「白」、「黒」などである。一方、前記ステップＳ５４にて、各撮影時データより各条件を判定できない場合は、ステップＳ５６に移行し、修飾コメントは抽出されない。その後、本サブルーチンを抜けて、図６のフローチャートのステップＳ１６に移行する。

図９は、デジタルカメラ１０の位置検出部１１にて取得された位置情報を基に、地図３０上にその位置を関連付けた図を示している。

撮影が行われる場所で、位置検出部１１により位置情報が取得されたとしても、地図３０上の地名や地形など、その場所を示すキーワードが検出できないこと場合がある。この場合、予め自宅３１の位置情報を取得し、デジタルカメラ１０内に登録しておくことにより、撮影場所３２が自宅から離れていた場合に、例えば、「はるばる来た」などの修飾コメントが付与される。

このように、本実施形態のデジタルカメラによれば、撮影をアドバイスするキーワードと、該キーワードに従った撮影の結果得られた画像の内容から、当該キーワードを修飾したコメントを合成して画像に表示することができる。

以上、本発明の実施形態について説明したが、本発明は前述した実施形態以外にも、本発明の要旨を逸脱しない範囲で種々の変形実施が可能である。

更に、前述した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件から幾つかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。

本発明の一実施形態であって、撮影システムが適用されたデジタルカメラ１０の構成を示すブロック図である。 撮影された写真にフレーズを関連付ける方法を説明するための図である。 ユーザに選択を促すためのテーマを示した図である。 撮影テーマとアドバイスを説明するための図である。 合成フレーズの候補の文言、表示アドバイス、撮影された写真群の関連付けについて説明するための図である。 本発明の一実施形態に於けるデジタルカメラ１０の制御動作について説明するためのフローチャートである。 図６のフローチャートのステップＳ６に於けるサブルーチン「アドバイス画像判定処理（日帰り）の詳細な動作を説明するためフローチャートである。 図６のフローチャートのステップＳ１５に於けるサブルーチン「アドバイスと撮影時データよりコメントを合成」の詳細な動作について説明するためのフローチャートである。 デジタルカメラ１０の位置検出部１１にて取得された位置情報を基に、地図３０上にその位置を関連付けた例を示した図である。

符号の説明

１０…デジタルカメラ、１１…位置検出部、１２…時刻検出部、１３…通信部、１４…撮影部、１５…特徴検出部、１６…データベース（ＤＢ）部、１８…シーン抽出部、２０…表示部、２０ａ…候補表示部、２１…フレーズ合成部、２２…制御部。

Claims (21)

1. 撮影者に対して次に撮影すべき被写体の候補に関する情報を抽出し出力するテーマ抽出手段と、
   前記テーマ抽出手段から出力された情報に基づいて、次に撮影すべき被写体の候補に関する情報を前記撮影者に告知する告知手段と、
   前記告知手段の告知に基づいて、撮影された画像の特徴を検出する特徴検出手段と、
   前記テーマ抽出手段の出力及び特徴検出手段の出力に基づいて修飾されたフレーズを作成し、前記撮影された画像と共に当該フレーズを前記告知手段を使って前記撮影者に告知するフレーズ合成手段と、
   を具備することを特徴とする撮影システム。
2. 前記フレーズ合成手段は、前記告知手段に告知されたフレーズと、撮影時に得られた情報に基づいて、前記フレーズとは異なる第２のフレーズを作成して前記告知手段に告知することを特徴とする請求項１に記載の撮影システム。
3. 撮影時の位置情報を取得する位置取得部と、前記撮影時の時刻情報を取得する時刻検出部、とを更に具備し、
   前記テーマ抽出手段は、前記撮影時の位置情報及び時刻情報の少なくとも一方に基づいて、次に撮影すべき被写体の候補に関する情報を抽出することを特徴とする請求項１に記載の撮影システム。
4. 前記位置取得部で取得された撮影時の位置情報及び前記時刻検出部で取得された撮影時の時刻情報の少なくとも一方に基づいて特定の情報を外部機器より取得するための通信部を更に具備することを特徴とする請求項３に記載の撮影システム。
5. 前記フレーズ合成手段は、前記位置取得部で前記位置情報が取得された場合には、当該位置情報に基づいて修飾されたフレーズを作成することを特徴とする請求項３に記載の撮影システム。
6. 前記フレーズ合成手段は、前記時刻検出部で前記時刻情報が取得された場合には、当該時刻情報に基づいて修飾されたフレーズを作成することを特徴とする請求項３に記載の撮影システム。
7. 前記フレーズ合成手段は、前記特徴検出手段で色の情報が取得された場合には、当該色情報に基づいて修飾されたフレーズを作成することを特徴とする請求項３に記載の撮影システム。
8. 前記撮影された画像が前記フレーズ合成手段で作成されたフレーズに合致した場合は、該フレーズ及び当該画像を記録する記録手段を更に具備することを特徴とする請求項３に記載の撮影システム。
9. 前記告知手段は、前記フレーズを表示する表示手段で構成されることを特徴とする請求項３に記載の撮影システム。
10. 前記表示手段は、前記撮影された画像と共に前記フレーズを表示することを特徴とする請求項９に記載の撮影システム。
11. 被写体を撮影する撮影部と、
    撮影者に対して次に撮影すべき被写体の候補に関する情報を抽出するテーマ抽出手段と、
    前記テーマ抽出手段で抽出された情報に基づいて、次に撮影すべき被写体の候補に関する情報を前記撮影者に告知する告知手段と、
    前記告知手段の告知に基づいて、前記撮影部で撮影された画像の特徴を検出する特徴検出手段と、
    前記テーマ抽出手段及び特徴検出手段の出力に基づいて修飾されたフレーズを作成し、この作成されたフレーズを、前記撮影された画像と共に前記撮影者に告知するフレーズ合成手段と、
    を具備することを特徴とするカメラ。
12. 前記フレーズ合成手段は、前記告知手段に告知されたフレーズと、撮影時に得られた情報に基づいて、前記フレーズとは異なる第２のフレーズを作成して前記告知手段に告知することを特徴とする請求項１１に記載のカメラ。
13. 撮影時の位置情報を取得する位置取得部と、前記撮影時の時刻情報を取得する時刻検出部、とを更に具備し、
    前記テーマ抽出手段は、前記撮影時の位置情報及び時刻情報の少なくとも一方に基づいて、次に撮影すべき被写体の候補に関する情報を抽出することを特徴とする請求項１１に記載のカメラ。
14. 前記位置取得部で取得された撮影時の位置情報及び前記時刻検出部で取得された撮影時の時刻情報の少なくとも一方に基づいて特定の情報を外部機器より取得するための通信部を更に具備することを特徴とする請求項１３に記載のカメラ。
15. 前記テーマ抽出手段は、前記撮影時の位置情報及び時刻情報の少なくとも一方に基づいて、次に撮影すべき被写体の候補に関する情報を抽出することを特徴とする請求項１３に記載のカメラ。
16. 前記フレーズ合成手段は、前記位置取得部で前記位置情報が取得された場合には、当該位置情報に基づいて修飾されたフレーズを作成することを特徴とする請求項１３に記載のカメラ。
17. 前記フレーズ合成手段は、前記時刻検出部で前記時刻情報が取得された場合には、当該時刻情報に基づいて修飾されたフレーズを作成することを特徴とする請求項１３に記載のカメラ。
18. 前記フレーズ合成手段は、前記特徴検出手段で色の情報が取得された場合には、当該色情報に基づいて修飾されたフレーズを作成することを特徴とする請求項１３に記載のカメラ。
19. 前記撮影された画像が前記フレーズ合成手段で作成されたフレーズに合致した場合は、該フレーズ及び当該画像を記録する記録手段を更に具備することを特徴とする請求項１３に記載のカメラ。
20. 前記告知手段は、前記フレーズを表示する表示手段で構成されることを特徴とする請求項１３に記載のカメラ。
21. 前記表示手段は、前記撮影された画像と共に前記フレーズを表示することを特徴とする請求項２０に記載のカメラ。

Images