JP2013207357A - サーバ、クライアント端末、システムおよびプログラム - Google Patents

Abstract

【課題】画角内に含まれる被写体のうち優先度が高いランドマークを示すことが可能なサーバ、クライアント端末、システムおよびプログラムを提供する。
【解決手段】ランドマークの位置情報および優先度を格納するデータベースと、クライアント端末から前記クライアント端末の位置情報を受信する受信部と、前記受信部により受信した位置情報に応じた前記ランドマークの位置情報および優先度を前記クライアント端末に送信する送信部と、を備え、前記受信部は、前記クライアント端末が撮影した被写体の位置情報を受信し、前記受信部により受信した前記被写体の位置情報に基づいて、前記データベースに格納される前記ランドマークの優先度を更新するよう制御する制御部をさらに備える、サーバ。
【選択図】図１

Description

本開示は、サーバ、クライアント端末、システムおよびプログラムに関する。

近年、被写体画像をデジタル画像信号として記憶媒体に記憶して保存するデジタルカメラが普及している。ユーザは、被写体にデジタルカメラを向けて、ビューファインダーに表示された画像を視認し、任意のタイミングでシャッターボタンを押下する。

ここで、このようなデジタルカメラに関する技術として、下記特許文献１では、顔が含まれる画像においてその顔の位置を表示する撮影装置が開示されている。

また、上記特許文献１に記載されているような、顔認識技術を用いて被写体（人物）の顔を表示する他、認識した顔にフォーカスを合わせたり、顔の部分の露出を適正化したりする撮影装置が提案されている。さらに、認識した顔のうち、子供の顔を優先してフォーカスを合わせたり、笑顔を優先してフォーカスを合わせ、自動的に撮像動作を行ったりする顔優先技術が提案されている。

特開２００８−１３１４０５号公報

上述した各技術では、顔認識技術を用いて被写体（人物）の顔に特化した優先フォーカスを行っているが、ユーザが優先して撮影したいと望む被写体は顔に限定されない。例えば、自然物や建築物など、特に有名なスポット（ランドマーク）を優先して撮影したいと望む場合が想定される。

そこで、本開示では、画角内に含まれる被写体のうち優先度が高いランドマークを示すことが可能な、新規かつ改良されたサーバ、クライアント端末、システムおよびプログラムを提案する。

本開示によれば、ランドマークの位置情報および優先度を格納するデータベースと、クライアント端末から前記クライアント端末の位置情報を受信する受信部と、前記受信部により受信した位置情報に応じた前記ランドマークの位置情報および優先度を前記クライアント端末に送信する送信部と、を備え、前記受信部は、前記クライアント端末が撮影した被写体の位置情報を受信し、前記受信部により受信した前記被写体の位置情報に基づいて、前記データベースに格納される優先度を更新するよう制御する制御部をさらに備えるサーバを提案する。

本開示によれば、クライアント端末の位置情報をサーバに送信する送信部と、サーバから、前記位置情報に示される前記クライアント端末の位置周辺に位置するランドマークの位置情報および優先度を受信する受信部と、前記サーバから受信した前記ランドマークの位置情報および優先度に基づいて、画角内の特定の被写体を示すインディケーターを表示制御する制御部と、を備えるクライアント端末を提案する。

本開示によれば、ランドマークの位置情報および優先度を格納するデータベースと、クライアント端末の位置情報に応じた前記ランドマークの位置情報および優先度に基づいて、画角内の特定の被写体を示すインディケーターを表示制御する制御部と、を備え、前記制御部は、前記クライアント端末が撮影した被写体の位置情報に基づいて、前記データベースに格納される優先度を更新するよう制御する、システムを提案する。

本開示によれば、クライアント端末から前記クライアント端末の位置情報を受信するステップと、前記受信するステップにより受信した位置情報に応じたランドマークの位置情報および優先度を前記クライアント端末に送信するステップと、前記クライアント端末が撮影した被写体の位置情報を受信するステップと、前記被写体の位置情報に基づいて、前記データベースに格納される優先度を更新するよう制御するステップと、をコンピュータに実行させるプログラムを提案する。

本開示によれば、クライアント端末の位置情報をサーバに送信するステップと、サーバから、前記位置情報に示される前記クライアント端末の位置周辺に位置するランドマークの位置情報および優先度を受信する受信するステップと、前記サーバから受信した前記ランドマークの位置情報および優先度に基づいて、画角内の特定の被写体を示すインディケーターを表示制御するステップと、をコンピュータに実行させるプログラムを提案する。

以上説明したように本開示によれば、画角内に含まれる被写体のうち優先度が高いランドマークを示すことが可能となる。

本開示の一実施形態による撮影システムの概要について説明するための図である。 本実施形態によるデジタルカメラの構成を示すブロック図である。 本実施形態によるサーバの構成を示すブロック図である。 本実施形態によるサーバがデジタルカメラに送信する優先度等データの一例を示す図である。 本実施形態による動作処理を示すフローチャートである。 本実施形態による優先度が高いランドマーク（有名スポット）を示す表示画面の一例を示す図である。 本実施形態による操作履歴の送信について説明するための図である。 本実施形態による有名スポットを順次示す例を説明するための図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

また、説明は以下の順序で行うものとする。
１．本開示の一実施形態による撮影システムの概要
２．基本構成
２−１．デジタルカメラの構成
２−２．サーバの構成
３．動作処理
４．まとめ

＜１．本開示の一実施形態による撮影システムの概要＞
まず、本開示の一実施形態による撮影システムの概要について図１を参照して説明する。図１に示すように、本開示の一実施形態による撮影システムは、クライアント端末の一例であるデジタルカメラ１と、サーバ３を有する。また、デジタルカメラ１およびサーバ３は、ネットワーク４を介して接続することが可能である。

本実施形態によるデジタルカメラ１は、図１に示すように、ビューファインダー（表示部２１）に実空間を撮像した撮像画像（実画像４０）を表示し、デジタルカメラ１の位置情報および撮像方向等をサーバ３に送信する。サーバ３は、デジタルカメラ１周辺の有名スポット（ランドマーク）を検索し、各有名スポットの優先度等データをデジタルカメラ１に送信する。

そして、デジタルカメラ１は、サーバ３から受信した各有名スポットの優先度等データに基づいて、実画像４０に写る各有名スポットのうち優先度が高い有名スポットを示すよう表示制御する。本明細書において、優先度とは、画角内の各ランドマーク（被写体）のうち特定のランドマークを示すための指標である。

より具体的には、例えば図１に示すように、実画像４０に被写体４１、４３、４５が含まれている場合、デジタルカメラ１は、フォーカス度合いを調整し、認識した各被写体のうち優先度が高い有名スポット（例えば被写体４１）にフォーカスを合わせる。また、デジタルカメラ１は、認識した被写体４１の位置を示すマーカー４２を実画像４０に重畳表示してもよい。さらに、デジタルカメラ１は、被写体４１の名称「□□塔」を実画像４０に重畳表示してもよい。

このように、本実施形態によるデジタルカメラ１は、優先度が高い有名スポットをユーザに通知し、ユーザは実画像４０に写る被写体のうちどの被写体が有名スポットであるかを直感的に認識することができる。

なお、各有名スポット（ランドマーク）の優先度は、例えばサーバ３において集計された各ユーザの操作履歴を含む統計データに基づいて判定されてもよい。例えば、多くのユーザがフォーカスを合わせて撮影した被写体は、ランドマークとしてサーバ３に登録され、さらに撮影回数の統計に応じて当該ランドマークの優先度が更新される。

以下、このような撮影システムに含まれるデジタルカメラ１とサーバ３の基本構成および本実施形態による撮影システムの動作処理について具体的に説明する。なお、本実施形態では、クライアント端末としてデジタルカメラ１を示すが、本開示の実施形態によるクライアント端末はこれに限定されない。例えば、本実施形態によるクライアント端末は、ビデオカメラ、カメラ付きのスマートフォン、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、携帯電話、携帯用音楽再生装置、携帯用映像処理装置または携帯用ゲーム機器、望遠鏡、双眼鏡等であってもよい。

また、本実施形態によるクライアント端末は、カメラ付きの装置に限定されず、例えばＧＰＳや方向センサ付きの装置など、自装置の位置情報と方向情報を取得できる装置にも適用可能である。さらに、本実施形態によるクライアント端末は、ＧＰＳや方向センサがなくても、自装置の位置情報や方向情報をマニュアルで入力できる装置にも適用可能である。

＜２．基本構成＞
［２−１．デジタルカメラの構成］
図２は、本実施形態によるデジタルカメラ１の構成を示すブロック図である。図２に示すように、デジタルカメラ１は、ＣＰＵ１０、ＲＯＭ１１、ＲＡＭ１２、方向センサ１３、ＧＰＳ測位部１４、カメラモジュール１５、操作入力部１６、画像認識部１８、撮像画像メモリ１９、表示制御部２０、表示部２１、ネットワークインターフェース（Ｉ／Ｆ）２２、および時計部２３を有する。以下、各構成について説明する。

方向センサ１３は、カメラモジュール１５のレンズ光学系の光軸の方向、つまり、撮像方向を検知し、検知した撮像方向の情報（方向情報）を出力する。なお、ここではクライアント端末の一例としてカメラモジュール１５を有するデジタルカメラ１を挙げているが、上述したように、本実施形態によるクライアント端末はカメラ付きの装置に限定されない。カメラを有していないクライアント端末の場合、方向センサ１３は、クライアント端末の特定の部位が向いている方向を方向情報として出力してもよい。また、方向センサ１３は、加速度センサ、地磁気センサ等によって実現されてもよい。

ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）測位部１４は、ＧＰＳ衛星からの電波を受信して、デジタルカメラ１が存在している位置を検知し、検知した位置情報を出力する。なお、ＧＰＳ測位部１４は、外部からの取得信号に基づいてデジタルカメラ１の位置を検知する位置情報取得部の一例である。この他、位置情報取得部は、例えばＷｉＦｉ、携帯電話・ＰＨＳ・スマートフォン等との送受信、または近距離通信等により位置を検知するものであってもよい。

カメラモジュール１５は、撮像素子、撮像レンズを含む撮像光学系、および撮像画像信号処理部を含み、デジタル信号とされた撮像画像のデータを出力する。なお、撮像素子は、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージャやＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージャにより実現される。

操作入力部１６は、ユーザによるカメラ操作を検出するためのシャッターボタン、ズームダイヤル、各種スイッチ等の物理的なキー群、および表示部２１に積層して設けられたタッチパネル等である。ＣＰＵ１０は、操作入力部１６から入力されたユーザ操作に応じた処理をＲＯＭ１１のプログラムにしたがって実行する。

画像認識部１８は、実画像に含まれる被写体（物体）を認識する機能を有する。ここで、画像認識部１８は認識対象の種別に応じた認識用情報（認識器、認識用パターンデータ、認識辞書データ、または専用認識アルゴリズム等）を利用すればよい。例えば、デジタルカメラ１がビル街に位置する場合はビルを認識するための認識用情報、実画像に含まれる有名スポットが寺院の場合は寺院を認識するための認識用情報など、本実施形態による画像認識部１８は利用する認識用情報を必要に応じて入れ替えてもよい。

また、画像認識部１８が被写体を認識するために利用する認識用情報は、サーバ３から送信されてもよい。後述するように、サーバ３は、ランドマークの位置情報および優先度と共に、当該ランドマークを認識するための認識用情報を送信する。

また、ＲＯＭ１１に予め複数の専用認識アルゴリズムや専用認識辞書データ等が記憶されている場合、画像認識部１８は、サーバ３からの認識切り替えパラメータに応じて利用する認識用情報を切り替えてもよい。

撮像画像メモリ１９は、例えば、カード型メモリなどのフラッシュメモリが用いられる。また、撮像画像メモリ１９は、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）などの記録媒体であってもよい。さらには、撮像画像メモリ１９は、このようなリムーバルなメモリ媒体ではなく、ハードディスク装置であってもよい。

また、撮像画像メモリ１９は、カメラモジュール１５から連続的に出力される被写体の画像を、シャッターボタンの操作タイミングに応じて、撮像画像として記憶してもよい。この際、撮像画像メモリ１９は、シャッターボタン操作時（撮像時）に時計部２３から出力された時刻情報を撮像時間として撮像画像に関連付けて記憶してもよい。

また、撮像画像メモリ１９は、シャッターボタン操作時（撮像時）にＧＰＳ測位部１４から出力された位置情報、および方向センサ１３から出力された撮像方向も撮像画像に関連付けて記憶してもよい。さらに、撮像画像メモリ１９は、操作入力部１６およびカメラモジュール１５から出力される操作履歴（撮像画像のどの被写体にフォーカスが合わせられたか、またはズームされたか等）を撮像画像に関連付けて記憶してもよい。

ＣＰＵ１０（主制御部）は、デジタルカメラ１の各構成を制御する。
本実施形態によるＣＰＵ１０は、カメラモジュール１５から出力される被写体画像において、画角内の被写体のうち、サーバ３から受信した優先度および位置情報を含む優先度等データに基づいて、優先度が高い被写体を示すよう制御する。例えば、ＣＰＵ１０は、カメラモジュール１５の撮影パラメータを自動設定してもよい。撮影パラメータとは、例えばフォーカス度合い、ホワイトバランス、または露出を調整するためのパラメータ等である。これにより、ＣＰＵ１０は、優先度が高い被写体にフォーカスを合わせたり、ホワイトバランスや露出を調整したりすることができる。

ＲＯＭ１１には、撮像機能を遂行するためのプログラムの他、画像認識処理、ランドマークの優先度に応じた撮影パラメータの自動設定、表示制御処理を行うためのプログラム等が記憶されている。また、ＲＯＭ１１に記憶されているプログラムは、ＣＰＵ１０により、ＲＡＭ１２をワークエリアとして用いながら実行されるものである。

表示制御部２０は、ＲＯＭ１１のプログラムに基づくＣＰＵ１０による制御にしたがって、表示部２１に表示する表示画面の表示内容を表示制御する。本実施形態による表示制御部２０は、画像認識部１８により認識した画像内（画角内）の被写体のうち、サーバ３から受信したランドマークの優先度および位置情報を含む優先度等データに基づき、特定の被写体を示すインディケーターを表示するよう制御してもよい。これにより、表示制御部２０は、優先度が高い被写体（すなわち有名スポット）を明示的に示すことができる。

なお、本実施形態において、表示制御部２０は、デジタルカメラ１が有する表示部２１の表示を制御しているが、本実施形態による制御対象機器は表示部２１に限定されず、例えばデジタルカメラ１に接続された外部の表示装置の表示を制御してもよい。

表示部２１は、表示制御部２０の制御に従って、メニュー画面、各種操作画面等の他、カメラモジュール１５から出力された被写体の画像（実画像）をリアルタイムに表示したり、撮像画像メモリ１９に記憶される撮像画像を表示したりする。また、表示部２１は、例えばＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）またはＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ−Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）などにより実現される。

また、本実施形態による表示部２１は、表示制御部２０による制御にしたがって、実画像に写る優先度が高い有名スポットを示す。表示部２１に表示される具体的な有名スポットの表示例については、後述する「３．動作処理」において説明する。

ネットワークＩ／Ｆ２２は、外部の装置とデータの送受信を行うための通信モジュールである。例えば、本実施形態によるネットワークＩ／Ｆ２２は、ネットワーク４を介してサーバ３と接続し、サーバ３に位置情報、撮像方向情報、撮像画像、操作履歴等を送信する。ここで、操作履歴とは、例えば操作入力部１６またはカメラモジュール１５から出力されるユーザのカメラ操作履歴であって、より具体的には、撮像画像のどの被写体にフォーカスが合わせたか、またはズームしたか等を示すデータであってもよい。

また、本実施形態によるネットワークＩ／Ｆ２２は、サーバ３から、ランドマークの位置情報、優先度、ランドマークを認識するために必要な認識用情報等を受信する。

以上、第１の実施形態によるデジタルカメラ１の構成について詳細に説明した。続いて、本実施形態によるサーバ３の構成について図３を参照して説明する。

［２−２．サーバの構成］
図３に示すように、サーバ３は、ＣＰＵ３０、ＲＯＭ３１、ＲＡＭ３２、ランドマークデータベース（ＤＢ）３３、判定部３４、ネットワークインターフェース（Ｉ／Ｆ）３５、および画像認識用情報データベース（ＤＢ）３６を有する。以下、各構成について説明する。

（ランドマークＤＢ３３）
ランドマークＤＢ３３は、有名スポット等のランドマークに関連付けられた位置情報および優先度を格納する。優先度は、例えばユーザの操作履歴（例えば、フォーカスが合わせられた、ズーム操作された等の操作履歴）等の統計データにより予め求められていてもよいし、デジタルカメラ１からの要求に応じて判定部３４が判定してもよい。

また、優先度は、サービス提供者により独自に設定されてもよい。これにより、ランドマークの所有者等は費用をかけて所有するランドマークの優先度を上げさせることが可能となる。

また、ランドマークＤＢ３３は、ランドマークの推薦データを格納してもよい。本明細書において、ランドマークの推薦データとは、当該ランドマークを撮影する際に推薦される時間帯や、構図情報、お勧めの時間帯や構図で撮像された画像のサムネイル等、撮影に関する推薦データである。ここで、構図情報はお勧め撮影条件の一例であるが、お勧め撮影条件は、例えばホワイトバランスや露出等を制御するための撮影パラメータも含まれる。

また、ランドマークＤＢ３３は、ランドマークの関連情報を格納してもよい。本明細書において、ランドマークの関連情報とは、当該ランドマークの名称や解説等である。

また、ランドマークＤＢ３３は、ランドマークと関連する他のランドマークを示す情報を格納してもよい。例えば、人気ドラマの撮影が行われた各スポット等、共通の話題や背景、歴史があるスポットは関連性が生じ、ユーザが続けて撮影することが想定される。また、サーバ３は、実際に各ユーザの操作履歴の統計データに基づいて、ユーザが同時期に撮影している複数の被写体に関連性が生じていると判断し、ランドマークＤＢ１３を更新することもできる。

（判定部３４）
判定部３４は、デジタルカメラ１の位置情報および撮像方向に基づき、デジタルカメラ１の画角内に含まれる各ランドマークの優先度を判定する。例えば、判定部３４は、ランドマークＤＢ３３からデジタルカメラ１周辺（例えば画角内）に位置する複数のランドマークを検索し、各ランドマークの操作履歴（統計データ）に基づいて各ランドマークの有名度（注目度）の順位を優先度として判定してもよい。

ここで、判定部３４は、操作履歴に重み付けを行って各ランドマークの優先度を判定してもよい。例えば、判定部３４は、著名人の操作履歴は一般人の操作履歴より重く評価してもよい。

また、判定部３４は、ユーザの属性に応じて優先度を判定してもよい。例えば、判定部３４は、ユーザが好きな著名人の操作履歴をより重く評価して各ランドマークの優先度を判定してもよい。

（画像認識用情報ＤＢ３６）
画像認識用情報ＤＢ３６は、画像に含まれるランドマークを認識するために必要な認識用情報である。認識用情報として、例えば画像認識用情報ＤＢ３６は、認識器、認識用パターンデータ、認識辞書データ、または専用認識アルゴリズム等を格納する。また、画像認識用情報ＤＢ３６は、デジタルカメラ１が複数の認識用情報を有する場合に必要な認識用情報に切り替えさせるための認識切り替えパラメータを格納してもよい。

（ネットワークＩ／Ｆ３５）
ネットワークＩ／Ｆ３５は、ネットワーク４を介してデジタルカメラ１との間でデータの送受信を行うための通信モジュールである。本実施形態によるネットワークＩ／Ｆ３５は、デジタルカメラ１から位置情報、撮像方向情報、撮像画像、操作履歴等を受信する。

また、ネットワークＩ／Ｆ３５は、デジタルカメラ１に、画角内のランドマークの位置情報、優先度、および推薦データ等を送信する。なお、このようにサーバ３がデジタルカメラ１に送信する優先度等データの具体例については後述する。

また、ネットワークＩ／Ｆ３５は、ランドマークの位置情報および優先度と共に、当該ランドマークを認識するための認識用情報を送信してもよい。

（ＣＰＵ３０、ＲＯＭ３１、およびＲＡＭ３２）
ＣＰＵ３０は、サーバ３の各構成を制御する。また、本実施形態によるＣＰＵ３０は、デジタルカメラ１の位置情報および撮像方向に基づき、ランドマークＤＢ３３からデジタルカメラ１の画角内に含まれる各ランドマークの位置情報、優先度、および推薦データ等を抽出（判定）する。

ＣＰＵ３０は、デジタルカメラ１の位置情報や現在の時間（日時、季節も含む）等に基づいて、場所別統計、時間別統計、および組み合わせ統計等、状況に応じた方法により、画角内に含まれる各ランドマークの優先度等を抽出してもよい。このように、状況に応じて抽出（判定）するランドマークを制限することで、抽出処理負担を軽減したり、抽出処理速度を上げたりすることができる。また、ランドマークの優先度は判定部３４により判定された優先度であってもよい。

また、ＣＰＵ３０は、画像認識用情報ＤＢ３６から、画角内に含まれるランドマークを認識するための必要な認識用情報を抽出（判定）する。

そして、ＣＰＵ３０は、各ランドマークの位置情報、優先度および推薦データ等、さらに認識用情報を、ネットワークＩ／Ｆ３５を制御してデジタルカメラ１に送信する。

ＲＯＭ３１は、上述したＣＰＵ３０による抽出（判定）処理や、判定部３４による優先度の判定処理、各ランドマークの優先等データをデジタルカメラ１にネットワークＩ／Ｆ３５により送信するためのソフトウェアプログラム等が記憶されている。また、ＣＰＵ３０は、ＲＯＭ３１に記憶されている上記ソフトウェアプログラムにしたがって、ＲＡＭ３２をワークエリアとして用いて処理を実行する。

以上、第１の実施形態によるサーバ３の構成について詳細に説明した。続いて、サーバ３からデジタルカメラ１に送信する優先度等データの具体例について図４を参照して説明する。

（優先度等データ例）
図４は、本実施形態による優先度等データの一例を示す図である。サーバ３は、図４に示すように、画角内に含まれる各ランドマークの位置情報（Ｐ１〜Ｐ４）、優先度、関連する他のランドマーク、推薦データ、および関連情報を含む優先度等データをデジタルカメラ１に送信する。

上述したように、優先度とは、画角内の各ランドマークのうち特定のランドマークを示すための指標である。図４に示す例では、サーバ３のＣＰＵ３０が、デジタルカメラ１の画角内にランドマークＬ１〜Ｌ４が含まれると判断し、これらランドマークの優先度として優先順位１〜３を抽出している。なお、優先順位１〜４は、ランドマークＬ１〜Ｌ４に対する各ユーザの操作履歴統計に基づいて判定部３４が判定した優先度であってもよい。

また、関連する他のランドマークは、上述したように、ランドマークと関連性を有する他のランドマークを示す情報（例えば、位置情報、名称、解説等）である。図４に示す例では、例えばランドマークＬ１はランドマークＬ３と関連し、ランドマークＬ２はランドマークＬ１と関連し、ランドマークＬ３はランドマークＬ４と関連する。

また、推薦データは、上述したように、お勧めの撮影時間帯、構図情報、サムネイル等である。図４に示す例では、例えばランドマークＬ１のお勧め撮影時間帯として１３時〜１７時、ランドマークＬ２のお勧め撮影時間帯として１８時〜２０時等が示されている。

また、関連情報は、上述したように、各ランドマークの名称、解説等であるところ、図４に示す例では、例えばランドマークＬ１の名称「○○寺」および解説、ランドマークＬ２の名称「□□塔」および解説等が示されている。

このような優先度等データを、サーバ３はデジタルカメラ１に送信し、デジタルカメラ１は受信した優先度等データに基づいて表示制御を行う。

以上、本実施形態による撮影システムに含まれるデジタルカメラ１およびサーバ３の基本構成について詳細に説明した。続いて、本実施形態による撮影システムの動作処理について具体的に説明する。

＜３．動作処理＞
図５は、本実施形態による動作処理を示すフローチャートである。図５に示すように、まず、ステップＳ１００において、デジタルカメラ１の表示制御部２０は、カメラモジュール１５から出力される被写体画像をリアルタイムに表示部２１に表示させる。

次に、ステップＳ１０３において、ＣＰＵ１０は、ＧＰＳ測位部１４から自身（デジタルカメラ１）の位置情報を取得し、また、方向センサ１３から撮像方向を取得する。

次いで、ステップＳ１０６において、デジタルカメラ１は、位置情報および撮像方向を含む撮像情報をサーバ３に送信する。また、デジタルカメラ１は、さらに撮像情報として、カメラモジュール１５から出力される撮影パラメータから算出した画角（ズーム率）を送信してもよい。

次に、ステップＳ１０９において、サーバ３は、デジタルカメラ１から受信した撮像情報に基づいて、画角内に含まれる有名スポット（ランドマーク）の優先度を、ランドマークＤＢ３３を参照して検索する。

続いて、ステップＳ１１２において、サーバ３は、検索した優先度等データ（図４参照）をデジタルカメラ１に送信する。

次いで、ステップＳ１１５において、デジタルカメラ１は、サーバ３から受信した優先度等データに基づいて、認識した被写体のうち優先度が高いランドマークを示すよう制御する。より具体的には、例えばデジタルカメラ１は、優先度が高いランドマークにフォーカスが合うよう撮影パラメータを自動設定してもよい。なお、撮影パラメータの自動設定として、デジタルカメラ１は、自動ズーム、ホワイトバランスまたは露出の自動調整等を行ってもよい。

若しくは、デジタルカメラ１は、認識した被写体のうち優先度が高いランドマークを示すインディケーターを表示制御してもよい。

ここで、図６を参照して優先度が高いランドマーク（有名スポット）を示す表示画面の一例について説明する。図６に示すように、デジタルカメラ１は、実画像４０に写る被写体のうち、認識した被写体であって、優先度が高い被写体４１（ランドマークＬ１）をマーカー４２で囲むよう表示制御する。さらに、デジタルカメラ１は、被写体４１にフォーカスを合わせるよう撮影パラメータを自動設定する。

また、図６に示すように、デジタルカメラ１は、優先度等データに含まれる被写体４１（ランドマークＬ１）の関連情報に基づいて、名称および解説を示す表示欄４６を実画像４０に重畳表示してもよい。なお、表示欄４６の表示タイミングは、特定の被写体にフォーカスを合わせたとき、撮影したとき、構図が決まったとき等のタイミングであってもよい。

さらに、デジタルカメラ１は、優先度等データに含まれている推薦データに基づいて、被写体４１のお勧めの構図例や、お勧めの撮影時間帯を表示部２１に表示するよう制御してもよい。ここで、デジタルカメラ１は、お勧めの構図例や撮影時間帯を、テキストデータで示してもよいし、図６に示すように、お勧めの構図で撮影した画像のサムネイル４７や、お勧めの撮影時間帯に撮影した画像のサムネイル４９により示してもよい。

また、デジタルカメラ１は、お勧めの構図例として、例えば三分割法に基づいて等間隔に水平線と垂直線を２本ずつ実画像４０に重畳表示し、表示部２１の表示画面が９等分されるよう表示制御してもよい。

これにより、ユーザは、実画像４０に写る被写体のうち、どこが有名スポットであるかを直感的に認識でき、多くの人が撮影する有名な被写体（有名スポット）を撮影することができる。

また、有名スポットの名称や解説も表示されるので、デジタルカメラ１の利便性が向上する。

また、有名スポットを撮影する際の推薦データとして、お勧めの構図例や時間帯が表示されるので、ユーザはこれらを参考にしてより良い写真を撮ることができる。

次に、図５に戻り、本実施形態による動作処理について説明を続ける。続くステップＳ１１８〜Ｓ１２４では、ユーザが実際に行った操作履歴に基づいて、サーバ３のランドマークＤＢ３３の優先度が更新される。

具体的には、ステップＳ１１８において、デジタルカメラ１の操作入力部１６は、ユーザによるタッチフォーカス、撮影操作等の操作を検出する。

次いで、ステップＳ１２１において、デジタルカメラ１は、操作入力部１６により検出された操作を、操作履歴としてサーバ３に送信する。この際、デジタルカメラ１は、撮像画像や、撮像画像に関連付けられた位置情報（撮影位置）、撮像方向、撮影日時情報、また、撮影対象の（フォーカス等した）被写体の位置情報等を併せてサーバ３に送信してもよい。また、デジタルカメラ１は、撮影時の撮影パラメータを併せてサーバ３に送信してもよい。

ここで、ユーザが、優先度等データに基づいてデジタルカメラ１が示した優先度が高い特定の被写体以外に注目して撮影する場合も想定される。例えば図７に示すように、優先度が高い被写体４１がマーカー４２で囲まれ、有名スポットであることが明示されていても、ユーザは実画像４０に写る他の被写体４３を撮影したい場合もある。この場合、ユーザは、実画像４０に写る被写体４３に対してタッチフォーカス操作を行い、被写体４３にフォーカスを合わせた上で撮影操作を行う。そして、デジタルカメラ１は、このような操作履歴（ユーザ操作に応じてデジタルカメラ１が被写体４３にフォーカスを合わせ、撮影したこと）をサーバ３に送信する。

次に、ステップＳ１２４において、サーバ３は、デジタルカメラ１から受信した操作履歴に基づいてランドマークＤＢ３３の優先度を更新する。より具体的には、例えば操作履歴に基づいてユーザがどの被写体（スポット）に注目したか（例えばフォーカスを合わせたか）といった情報を優先度の統計データとして更新する。また、サーバ３は、デジタルカメラ１から受信したその他の情報、例えば撮像画像、位置情報、撮像方向、撮影日時等を、注目された被写体に該当するランドマークに関連付けてランドマークＤＢ３３に格納する。なお、注目された（撮影された）被写体に該当するランドマークがランドマークＤＢ３３に登録されていない場合、サーバ３は、注目された被写体を新規ランドマークとして登録してもよい。

また、サーバ３は、デジタルカメラ１から複数の操作履歴や撮像画像等を受信し、同時期にユーザが撮影した被写体（スポット）を把握し、各スポットの他のスポットとの関連性を更新してもよい。

このようにして、サーバ３は、各ユーザからの操作履歴に基づいてランドマークＤＢ３３に格納される有名スポットの優先度等を更新することができる。

以上、本実施形態による撮影システムの動作処理について詳細に説明した。なお、上記ステップＳ１１５における優先度に基づいた撮影パラメータの自動設定において、デジタルカメラ１は、ユーザ操作に応じて特定のランドマークを順次示してもよい。以下、図８を参照して具体的に説明する。

図８は、本実施形態による有名スポット（ランドマーク）を順次示す例を説明するための図である。図８に示すように、実画像４０は、被写体４１、４３、４５を含んでいる。

ここで、デジタルカメラ１は、サーバ３から受信した優先度等データに基づき、図８の表示画面５１に示すように、被写体４１、４３、４５のうち最も優先度が高い被写体４１にフォーカスを合わせている。この場合に、ユーザが被写体４３に対してタッチフォーカス操作を行うと、表示画面５２に示すように、デジタルカメラ１は、認識した被写体４３をマーカー４４で囲み、被写体４３にフォーカスを合わせるよう制御する。さらに、デジタルカメラ１は、優先度等データに基づいて被写体４３の名称「○○寺」等を表示してもよい。

そして、ユーザが被写体４３にフォーカスを合わせて撮影した後、図８の表示画面５３に示すように、デジタルカメラ１は、優先度等データに基づいて次の被写体４５を認識し、フォーカスを合わせる。ここで、デジタルカメラ１が認識する次の被写体４５とは、直前にユーザが注目して撮影した被写体４３と関連する他のランドマークである。上述したように、優先度等データには、ランドマークと関連する他のランドマークを示す情報が含まれている。関連する他のランドマークは、ユーザが続けて撮影することが想定されるランドマークであるので、デジタルカメラ１は、当該関連する他のランドマークにフォーカスを合わせるよう撮影パラメータを自動設定する。

このように、本実施形態によるデジタルカメラ１は、優先度等データおよびユーザの操作に応じて、順次実画像内の特定の被写体を示すことができる。

＜４．まとめ＞
上述したように、本実施形態による撮影システムでは、各有名スポット（ランドマーク）の優先度に基づいて、画角内の各被写体のうち優先度が高い被写体を示すよう制御する。これにより、本実施形態では優先度が高い有名スポットをユーザに通知することができるので、ユーザは画角内の被写体のうちどの被写体が有名スポットであるかを直感的に認識することが可能となる。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

例えば、上述した実施形態では、サーバ側がランドマークＤＢ３３を有し、画角内の各ランドマークの優先度等データを抽出しているが、本開示による実施形態はこれに限定されない。例えば、本開示による実施形態では、クライアント端末側がランドマークＤＢ３３を有し、画角内の各ランドマーク（被写体）の優先度等データを抽出してもよい。

また、上述した実施形態において、お勧めの構図情報をテキストデータやサムネイルにより表示する例を説明したが、本実施形態によるお勧めの構図の提示はこれに限定されない。例えば、デジタルカメラ１が、角度、撮像向き、ズーム等を自動調整できる補助装置（三脚、卓上型等）に設置されている場合、デジタルカメラ１は、お勧めの構図情報（角度、向き、ズーム等）を補助装置に出力してもよい。そして、補助装置によりデジタルカメラ１が動かされ、向きや角度が調整されることで、お勧めの構図による実画像が表示部２１に表示されるようにしてもよい。

また、上述した実施形態において、図１に示すように、認識した実画像内の被写体のうち、優先度が高い被写体４１をマーカー４２で囲っているが、本実施形態による特定の被写体（ランドマーク）の示し方はこれに限定されない。例えば、優先度が高い被写体が画面上小さく写っている場合は、当該被写体を指す矢印により示してもよい。

なお、本技術は以下のような構成も取ることができる。
（１）
ランドマークの位置情報および優先度を格納するデータベースと、
クライアント端末から前記クライアント端末の位置情報を受信する受信部と、
前記受信部により受信した位置情報に応じた前記ランドマークの位置情報および優先度を前記クライアント端末に送信する送信部と、
を備え、
前記受信部は、前記クライアント端末が撮影した被写体の位置情報を受信し、
前記受信部により受信した前記被写体の位置情報に基づいて、前記データベースに格納される前記ランドマークの優先度を更新するよう制御する制御部をさらに備える、サーバ。
（２）
前記受信部は、前記ランドマークの位置情報および優先度に基づいて撮影パラメータが自動設定された前記クライアント端末の操作履歴を受信し、
前記制御部は、前記受信部により受信した操作履歴に基づいて前記データベースに格納される優先度を更新する、前記（１）に記載のサーバ。
（３）
前記サーバは、前記データベースに格納される操作履歴の統計データを集計し、前記クライアント端末の画角内に含まれる各ランドマークの優先度を判定する判定部をさらに備える、前記（１）または（２）に記載のサーバ。
（４）
前記クライアント端末が撮影した被写体は、前記ランドマークの優先度が設定された被写体である、前記（１）から（３）のいずれか１項に記載のサーバ。
（５）
前記撮影パラメータは、フォーカス度合い、ホワイトバランス、または露出を調整するためのパラメータである、前記（２）に記載のサーバ。
（６）
前記データベースは、前記ランドマークの推薦撮影時間帯をさらに格納する、前記（１）から（５）のいずれか１項に記載のサーバ。
（７）
前記データベースは、前記ランドマークの推薦撮影条件をさらに格納する、前記（１）から（６）のいずれか１項に記載のサーバ。
（８）
クライアント端末の位置情報をサーバに送信する送信部と、
サーバから、前記位置情報に示される前記クライアント端末の位置周辺に位置するランドマークの位置情報および優先度を受信する受信部と、
前記サーバから受信した前記ランドマークの位置情報および優先度に基づいて、画角内の特定の被写体を示すインディケーターを表示制御する制御部と、
を備える、クライアント端末。
（９）
前記送信部は、前記制御部により前記位置情報および優先度に基づいて画角内の特定の被写体を示すインディケーターが表示制御された後のユーザの操作履歴を、前記サーバに送信する、前記（８）に記載のクライアント端末。
（１０）
前記送信部は、撮像部が撮像した被写体の位置情報を前記サーバに送信する、前記（８）または（９）に記載のクライアント端末。
（１１）
前記送信部は、前記サーバから受信した位置情報および優先度に基づいてフォーカス、ホワイトバランス調整、または露出調整された被写体が撮影された場合、当該被写体の位置情報を前記サーバに送信する、前記（８）または（９）に記載のクライアント端末。
（１２）
前記制御部は、前記サーバから受信した位置情報および優先度に基づいて、撮像部の撮影パラメータを自動設定するよう制御する、前記（８）から（１１）のいずれか１項に記載のクライアント端末。
（１３）
ランドマークの位置情報および優先度を格納するデータベースと、
クライアント端末の位置情報に応じた前記ランドマークの位置情報および優先度に基づいて、画角内の特定の被写体を示すインディケーターを表示制御する制御部と、
を備え、
前記制御部は、前記クライアント端末が撮影した被写体の位置情報に基づいて、前記データベースに格納される前記ランドマークの優先度を更新するよう制御する、システム。
（１４）
クライアント端末から前記クライアント端末の位置情報を受信するステップと、
前記受信するステップにより受信した位置情報に応じたランドマークの位置情報および優先度を前記クライアント端末に送信するステップと、
前記クライアント端末が撮影した被写体の位置情報を受信するステップと、
前記被写体の位置情報に基づいて、データベースに格納される前記ランドマークの優先度を更新するよう制御するステップと、
をコンピュータに実行させる、プログラム。
（１５）
クライアント端末の位置情報をサーバに送信するステップと、
サーバから、前記位置情報に示される前記クライアント端末の位置周辺に位置するランドマークの位置情報および優先度を受信する受信するステップと、
前記サーバから受信した前記ランドマークの位置情報および優先度に基づいて、画角内の特定の被写体を示すインディケーターを表示制御するステップと、
をコンピュータに実行させる、プログラム。

１ デジタルカメラ（クライアント端末）
３ サーバ
４ ネットワーク
１０、３０ ＣＰＵ
１１、３１ ＲＯＭ
１２、３２ ＲＡＭ
１３ 方向センサ
１４ ＧＰＳ測位部
１５ カメラモジュール
１６ 操作検出部
１８ 画像認識部
１９ 撮像画像メモリ
２０ 表示制御部
２１ 表示部
２２、３５ ネットワークインターフェース（Ｉ／Ｆ）
２３ 時計部
３３ ランドマークＤＢ
３４ 判定部
３６ 画像認識用情報ＤＢ
４０ 実画像
４１、４３、４５ 被写体
４２、４４ マーカー
４６ 表示欄

Claims (15)

1. ランドマークの位置情報および優先度を格納するデータベースと、
   クライアント端末から前記クライアント端末の位置情報を受信する受信部と、
   前記受信部により受信した位置情報に応じた前記ランドマークの位置情報および優先度を前記クライアント端末に送信する送信部と、
   を備え、
   前記受信部は、前記クライアント端末が撮影した被写体の位置情報を受信し、
   前記受信部により受信した前記被写体の位置情報に基づいて、前記データベースに格納される前記ランドマークの優先度を更新するよう制御する制御部をさらに備える、サーバ。
2. 前記受信部は、前記ランドマークの位置情報および優先度に基づいて撮影パラメータが自動設定された前記クライアント端末の操作履歴を受信し、
   前記制御部は、前記受信部により受信した操作履歴に基づいて前記データベースに格納される優先度を更新する、請求項１に記載のサーバ。
3. 前記サーバは、前記データベースに格納される操作履歴の統計データを集計し、前記クライアント端末の画角内に含まれる各ランドマークの優先度を判定する判定部をさらに備える、請求項１に記載のサーバ。
4. 前記クライアント端末が撮影した被写体は、前記ランドマークの優先度が設定された被写体である、請求項１に記載のサーバ。
5. 前記撮影パラメータは、フォーカス度合い、ホワイトバランス、または露出を調整するためのパラメータである、請求項２に記載のサーバ。
6. 前記データベースは、前記ランドマークの推薦撮影時間帯をさらに格納する、請求項１に記載のサーバ。
7. 前記データベースは、前記ランドマークの推薦撮影条件をさらに格納する、請求項１に記載のサーバ。
8. クライアント端末の位置情報をサーバに送信する送信部と、
   サーバから、前記位置情報に示される前記クライアント端末の位置周辺に位置するランドマークの位置情報および優先度を受信する受信部と、
   前記サーバから受信した前記ランドマークの位置情報および優先度に基づいて、画角内の特定の被写体を示すインディケーターを表示制御する制御部と、
   を備える、クライアント端末。
9. 前記送信部は、前記制御部により前記位置情報および優先度に基づいて画角内の特定の被写体を示すインディケーターが表示制御された後のユーザの操作履歴を、前記サーバに送信する、請求項８に記載のクライアント端末。
10. 前記送信部は、撮像部が撮像した被写体の位置情報を前記サーバに送信する、請求項８に記載のクライアント端末。
11. 前記送信部は、前記サーバから受信した位置情報および優先度に基づいてフォーカス、ホワイトバランス調整、または露出調整された被写体が撮影された場合、当該被写体の位置情報を前記サーバに送信する、請求項８に記載のクライアント端末。
12. 前記制御部は、前記サーバから受信した位置情報および優先度に基づいて、撮像部の撮影パラメータを自動設定するよう制御する、請求項８に記載のクライアント端末。
13. ランドマークの位置情報および優先度を格納するデータベースと、
    クライアント端末の位置情報に応じた前記ランドマークの位置情報および優先度に基づいて、画角内の特定の被写体を示すインディケーターを表示制御する制御部と、
    を備え、
    前記制御部は、前記クライアント端末が撮影した被写体の位置情報に基づいて、前記データベースに格納される前記ランドマークの優先度を更新するよう制御する、システム。
14. クライアント端末から前記クライアント端末の位置情報を受信するステップと、
    前記受信するステップにより受信した位置情報に応じたランドマークの位置情報および優先度を前記クライアント端末に送信するステップと、
    前記クライアント端末が撮影した被写体の位置情報を受信するステップと、
    前記被写体の位置情報に基づいて、データベースに格納される前記ランドマークの優先度を更新するよう制御するステップと、
    をコンピュータに実行させる、プログラム。
15. クライアント端末の位置情報をサーバに送信するステップと、
    サーバから、前記位置情報に示される前記クライアント端末の位置周辺に位置するランドマークの位置情報および優先度を受信する受信するステップと、
    前記サーバから受信した前記ランドマークの位置情報および優先度に基づいて、画角内の特定の被写体を示すインディケーターを表示制御するステップと、
    をコンピュータに実行させる、プログラム。

Images