JP2012064071A - 情報システム、端末装置、広告出力方法、およびプログラム - Google Patents

Abstract

【課題】撮影オブジェクトを短時間に決定し、短時間に広告を出力できない。
【解決手段】端末装置の位置情報と方向情報と視野角を有する端末情報を取得する端末情報取得部と、位置情報と方向情報と視野角を各オブジェクト情報の領域情報に適用し、１以上の撮影オブジェクトを決定する撮影オブジェクト決定部と、決定した１以上の各撮影オブジェクトに対応する１以上の広告情報を取得する広告情報取得部と、カメラ部が取得した映像と１以上の広告情報を出力する出力部とを具備し、撮影オブジェクト決定部は、端末装置との距離が近い順にオブジェクトを検査し、端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域として登録していき、可視領域がなくなった場合に、撮影オブジェクトの判断処理を終了する端末装置により、撮影オブジェクトを短時間に決定し、短時間に広告を出力できる。
【選択図】図１

Description

本発明は、カメラで撮影されているオブジェクトを認識し、オブジェクトに関連付けられた広告を出力する情報システム等に関するものである。

従来、コンピュータ上の地理的情報と実風景の景観画像中の各部分とを対応付けて利用者に提示するとともに、各種情報（広告情報、案内情報等）を利用者に流す情報発信型景観ラベリング装置があった（特許文献１）。

また、ホストコンピュータでの背景データの処理、データ転送、端末表示の時間を大幅に削減し、最新の背景地図を用いた三次元地図情報を端末装置上で構成し、軽快な操作を行うことができる地図関連情報配信システムがあった（特許文献２）。

さらに、カメラ装置で撮影される映像に、被写体の情報を自動的に埋め込む被写体情報処理装置および被写体情報処理方法があった（特許文献３）。

特開平１１−６６３４７号公報 特開２００８−１５８５８３号公報 特開２００２−１５２７１３号公報

しかしながら、従来のシステムにおいては、多数のオブジェクトが登録されていることを想定していない。つまり、非常に多くのオブジェクトが登録されている場合、現在、撮影されているオブジェクトを特定することに多大な時間を要する、とともに多大なＣＰＵパワーが必要となる。したがって、例えば、ナビゲーションシステムに利用できない。

つまり、従来の情報システムにおいては、撮影されているオブジェクトを短時間に決定できず、短時間に適切な広告を出力することができなかった。

本第一の発明の情報システムは、サーバ装置と端末装置とを具備する情報システムであって、サーバ装置は、オブジェクトを識別するオブジェクト識別子と、オブジェクトが存在する領域を示す領域情報とを有するオブジェクト情報を、１以上格納し得るオブジェクト情報格納部と、オブジェクト識別子と広告情報とを有する広告管理情報を、１以上格納し得る広告管理情報格納部と、端末装置から、端末装置の位置を示す位置情報と端末装置が向いている方向を示す方向情報とを有する端末情報を受信するサーバ受信部と、端末情報が有する位置情報と、端末情報が有する方向情報と、予め格納されているまたは端末情報が有する視野角とを、オブジェクト情報格納部の各オブジェクト情報の領域情報に適用し、端末装置が撮影している１以上のオブジェクトを決定する撮影オブジェクト決定部と、撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する１以上の広告情報を、広告管理情報格納部から取得する広告情報取得部と、１以上の広告情報を有する１以上のオブジェクト広告情報を、端末装置に送信するサーバ送信部とを具備し、端末装置は、端末装置の位置を示す位置情報と、端末装置が向いている方向を示す方向情報とを取得する端末情報取得部と、映像を取得するカメラ部と、カメラ部が取得した映像を出力するカメラ映像出力手段を具備する出力部と、端末情報取得部が取得した位置情報と、方向情報とを有する端末情報をサーバ装置に送信する送信部と、端末情報の送信に対応して、１以上のオブジェクト広告情報を受信する受信部とを具備し、出力部は、１以上のオブジェクト広告情報が有する広告情報をも出力し、撮影オブジェクト決定部は、端末装置からの距離が近い順にオブジェクトを検査し、端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが端末装置に撮影されているか否かの検査を終了する情報システムである。

かかる構成により、撮影されているオブジェクトを短時間に決定し、短時間に広告を出力できる。

また、本第二の発明の情報システムは、第一の発明に対して、領域情報は、地図上での二次元の領域を示す二次元領域情報とオブジェクトの高さを示す高さ情報を有し、撮影オブジェクト決定部は、端末情報が有する位置情報および方向情報と、予め格納されているまたは端末情報が有する視野角とを用いて、三次元空間上での撮影領域を取得し、撮影領域を、オブジェクト情報格納部の各オブジェクト情報が有する領域情報に対して適用し、端末装置が撮影している１以上のオブジェクトを決定し、かつ、端末装置からの距離が近い順にオブジェクトを検査し、端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが端末装置に撮影されているか否かの検査を終了する情報システムである。

かかる構成により、撮影されているオブジェクトを短時間に決定し、短時間に三次元上の領域に広告を出力できる。

また、本第三の発明の情報システムは、第一または第二の発明に対して、サーバ装置は、オブジェクト情報格納部の１以上のオブジェクト情報に対応するオブジェクトと端末装置との距離を、各オブジェクトのオブジェクト情報と端末情報が有する位置情報とから、オブジェクトごとに算出する距離算出部をさらに具備し、撮影オブジェクト決定部は、端末装置からの距離が近い順にオブジェクトに対応するオブジェクト情報をソートし、端末装置からの距離が近い順にオブジェクトを検査し、端末装置が撮影している１以上のオブジェクトを決定する情報システムである。

かかる構成により、撮影されているオブジェクトを短時間に決定し、短時間に広告を出力できる。

また、本第四の発明の情報システムは、第一から第三いずれかの発明に対して、撮影オブジェクト決定部は、端末装置からの距離が近い順にオブジェクトを検査し、端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域のオブジェクトであり、かつ、端末装置からの距離が閾値以内のオブジェクトのみを検査し、端末装置が撮影している１以上のオブジェクトを決定する情報システムである。

かかる構成により、撮影されているオブジェクトを短時間に決定し、短時間に広告を出力できる。

また、本第五の発明の情報システムは、第一から第三いずれかの発明に対して、撮影オブジェクト決定部は、端末装置からの距離が近い順にオブジェクトを検査し、端末装置が撮影しているとして決定したオブジェクトの数が閾値になった場合に、検査を終了する情報システムである。

かかる構成により、撮影されているオブジェクトを短時間に決定し、短時間に広告を出力できる。

また、本第六の発明の情報システムは、第一から第五いずれかの発明に対して、広告情報取得部は、撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する広告情報を広告管理情報格納部から取得し、かつ、１以上の各オブジェクトに対応する領域情報をオブジェクト情報格納部から取得し、サーバ送信部は、広告情報取得部が取得した広告情報と、領域情報または領域情報に対応するカメラ上の表示領域情報とを有する１以上のオブジェクト広告情報を、端末装置に送信し、出力部は、１以上のオブジェクト広告情報が有する広告情報を、１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または１以上のオブジェクト広告情報が有する表示領域情報が示すカメラ上の領域に出力する情報システムである。

かかる構成により、短時間に広告を、適切な撮影オブジェクト上に出力できる。

また、本第七の発明の情報システムは、第一から第五いずれかの発明に対して、広告情報取得部は、撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する広告情報を広告管理情報格納部から取得し、かつ、１以上の各オブジェクトに対応する領域情報をオブジェクト情報格納部から取得し、サーバ送信部は、広告情報取得部が取得した広告情報と、領域情報または領域情報に対応するカメラ上の表示領域情報とを有する１以上のオブジェクト広告情報を、端末装置に送信し、出力部は、１以上のオブジェクト広告情報が有する広告情報を、１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または１以上のオブジェクト広告情報が有する表示領域情報が示すカメラ上の領域以外の領域に出力し、かつ、１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または１以上のオブジェクト広告情報が有する表示領域情報が示すオブジェクトを、他のオブジェクトと視覚的に区別できる態様で出力する情報システムである。

かかる構成により、撮影されているオブジェクトを短時間に決定し、短時間に広告を出力できる。

また、本第八の発明の情報システムは、第一から第七いずれかの発明に対して、サーバ装置は、オブジェクト広告情報を端末装置に送信した履歴を示す情報であり、送信回数が判断できる情報を含む広告送信履歴情報を格納し得る広告送信履歴情報格納部と、サーバ送信部がオブジェクト広告情報を端末装置に送信した場合、広告送信履歴情報を構成する広告送信履歴情報構成部と、広告送信履歴情報を広告送信履歴情報格納部に蓄積する広告送信履歴情報蓄積部とをさらに具備する情報システムである。

かかる構成により、撮影されているオブジェクトを短時間に決定し、短時間に広告を出力できるとともに、広告の利用履歴を蓄積し、後に利用できる。

また、本第九の発明の情報システムは、第八の発明に対して、サーバ装置は、広告送信履歴情報格納部の１以上の広告送信履歴情報を用いて、課金処理を行う課金処理部をさらに具備する情報システムである。

かかる構成により、撮影されているオブジェクトを短時間に決定し、短時間に広告を出力できるとともに、広告が出力された回数に基づいて課金処理ができる。

また、本第十の発明の端末装置は、＜従属関係 なし＞の発明に対して、オブジェクトを識別するオブジェクト識別子と、オブジェクトが存在する領域を示す領域情報とを有するオブジェクト情報を、１以上格納し得るオブジェクト情報格納部と、オブジェクト識別子と広告情報とを有する広告管理情報を、１以上格納し得る広告管理情報格納部と、端末装置の位置を示す位置情報と、端末装置が向いている方向を示す方向情報と、視野角とを有する端末情報を取得する端末情報取得部と、映像を取得するカメラ部と、カメラ部が取得した映像を出力するカメラ映像出力手段を具備する出力部と、端末情報が有する位置情報と方向情報と視野角とを、オブジェクト情報格納部の各オブジェクト情報の領域情報に適用し、端末装置が撮影している１以上のオブジェクトを決定する撮影オブジェクト決定部と、撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する１以上の広告情報を、広告管理情報格納部から取得する広告情報取得部とを具備し、出力部は、１以上の広告情報をも出力し、撮影オブジェクト決定部は、端末装置からの距離が近い順にオブジェクトを検査し、端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが端末装置に撮影されているか否かの検査を終了する端末装置である。
かかる構成により、撮影されているオブジェクトを短時間に決定し、短時間に広告を出力できる。

本発明による情報システムによれば、撮影されているオブジェクトを短時間に決定し、短時間に広告を出力できる。

実施の形態１における情報システムの概念図 同情報システムのブロック図 同情報システムのブロック図 同サーバ装置の動作について説明するフローチャート 同端末装置の動作について説明するフローチャート 同オブジェクトソート処理の動作について説明するフローチャート 同可視判断処理の動作について説明するフローチャート 同可視判断処理の動作について説明するフローチャート 同端末装置の動作について説明するフローチャート 同オブジェクト情報管理表を示す図 同広告管理情報管理表を示す図 同端末装置の出力例を示す図 同可視領域／不可視領域の概念を説明する図 同オブジェクト一時管理表を示す図 同端末装置の出力例を示す図 同端末装置の出力例を示す図 同オブジェクト情報管理表を示す図 同視野角の概念を説明する図 実施の形態２における端末装置のブロック図 同端末装置の動作について説明するフローチャート 上記実施の形態におけるコンピュータシステムの概観図 同コンピュータシステムのブロック図

以下、情報システム等の実施形態について図面を参照して説明する。なお、実施の形態において同じ符号を付した構成要素は同様の動作を行うので、再度の説明を省略する場合がある。
（実施の形態１）

本実施の形態において、撮影しているオブジェクトに対応する広告情報を出力する情報システムについて説明する。

また、本実施の形態において、カメラで撮影しているオブジェクトを決定するアルゴリズムについて、当該決定のための処理の終了条件が種々あり得る。

また、本実施の形態において、広告は、対応するオブジェクトの位置に出力される場合もあるし、対応するオブジェクトとは別の領域（例えば、広告領域）に出力される場合もある。

さらに、本実施の形態において、広告の出力履歴を残したり、広告の出力回数に応じた課金を行ったりする情報システムについて説明する。

図１は、本実施の形態における情報システム１の概念図である。情報システム１は、サーバ装置１１、端末装置１２を具備する。端末装置１２は、図１に示すように、２画面のディスプレイを有する端末でも良いし、１画面のディスプレイを有する端末でも良い。端末装置１２は、カメラ機能を有し、外部の風景、建物などを撮影している際に、撮影している映像内のオブジェクト（建物など）の領域や、オブジェクトに関連する広告などを出力できる。また、サーバ装置１１、および端末装置１２は、通常、通信可能である。また、情報システム１において、２以上の端末装置１２を具備していても良い。

図２は、本実施の形態における情報システム１のブロック図である。図３は、情報システム１を構成する端末装置１２のブロック図である。

サーバ装置１１は、オブジェクト情報格納部１１０１、広告管理情報格納部１１０２、広告送信履歴情報格納部１１０３、サーバ受信部１１０４、距離算出部１１０５、撮影オブジェクト決定部１１０６、広告情報取得部１１０７、サーバ送信部１１０８、広告送信履歴情報構成部１１０９、広告送信履歴情報蓄積部１１１０、および課金処理部１１１１を具備する。

端末装置１２は、受付部１２１、カメラ部１２２、端末情報取得部１２３、送信部１２４、受信部１２５、出力部１２６、および出力固定部１２７を具備する。また、端末情報取得部１２３は、位置情報取得手段１２３１、方向情報取得手段１２３２を具備する。さらに、出力部１２６は、カメラ映像出力手段１２６１を具備する。

サーバ装置１１を構成するオブジェクト情報格納部１１０１は、１以上のオブジェクト情報を格納し得る。オブジェクト情報は、オブジェクト識別子と、オブジェクトが存在する領域を示す領域情報とを有する情報である。オブジェクトとは、通常、地図上または地理上に現れるオブジェクトである地理オブジェクトである。オブジェクトは、例えば、店舗、建物、山、川、名勝、公園などである。オブジェクトは、例えば、ビルの中の店舗や会社などでも良い。オブジェクトは、地図上または地理上に現れるものであれば、内容は問わない。オブジェクト情報格納部１１０１は、地図情報を格納していても良い。かかる場合、地図情報は1以上のオブジェクト情報を含む。オブジェクト識別子とはオブジェクトを識別する情報であり、例えば、オブジェクトの名称、オブジェクトを識別するＩＤ、オブジェクトについての情報が格納されているウェブページのＵＲＬ、ＵＲＩなどである。領域情報とは、通常、二次元の領域の情報である。ただし、三次元の領域の情報でも、一次元の情報（点の情報）でも良い。つまり、領域情報はオブジェクトの位置（点）を特定する位置情報（Ｘ，Ｙ）でも良い。この（Ｘ，Ｙ）は、例えば、（緯度，経度）であり、例えば、オブジェクトの領域の重心点を示す情報である。領域が矩形であるとする場合、領域情報は、例えば、矩形の左上点、右下点の位置情報（経度，緯度）の情報である。さらに、領域情報は、例えば、三次元のオブジェクトの立体図形（例えば、６面体）の頂点を構成する点（８点）の集合や、立体図形（例えば、６面体）の高さを有する４点の集合などである。領域情報が三次元の領域の情報である場合、通常、領域情報は、地図上での二次元の領域を示す二次元領域情報とオブジェクトの高さを示す高さ情報を有する。

オブジェクト情報格納部１１０１は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。オブジェクト情報格納部１１０１にオブジェクト情報が記憶される過程は問わない。例えば、記録媒体を介してオブジェクト情報がオブジェクト情報格納部１１０１で記憶されるようになってもよく、通信回線等を介して送信されたオブジェクト情報がオブジェクト情報格納部１１０１で記憶されるようになってもよく、あるいは、入力デバイスを介して入力されたオブジェクト情報がオブジェクト情報格納部１１０１で記憶されるようになってもよい。

広告管理情報格納部１１０２は、１以上の広告管理情報を格納し得る。広告管理情報は、オブジェクト識別子と広告情報とを有する。広告情報は、広告の情報であり、静止画でも、動画でも、テキストでも、音声でも、それらの組み合わせの情報等でも良い。つまり、広告情報のデータタイプは問わない。広告管理情報格納部１１０２は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。広告管理情報格納部１１０２に広告管理情報が記憶される過程は問わない。

広告送信履歴情報格納部１１０３は、1以上の広告送信履歴情報を格納し得る。広告送信履歴情報は、オブジェクト広告情報を１以上の端末装置１２に送信した履歴を示す情報であり、送信回数が判断できる情報を含む情報である。広告送信履歴情報は、広告の利用実績の分析に利用したり、広告主に課金するため等に利用したりされる。なお、送信回数が判断できる情報とは、送信回数そのものでも良いし、送信した事実を示す情報などでも良い。広告送信履歴情報格納部１１０３は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。

サーバ受信部１１０４は、端末装置１２から端末情報を受信する。端末情報は、端末装置１２の位置を示す位置情報と端末装置１２が向いている方向を示す方向情報とを有する情報である。また、端末情報は、視野角を有することは好適である。位置情報とは、通常、（緯度，経度）の情報であるが、空間内の位置を示す情報でも良い。空間内の位置を示す情報は、例えば、（緯度，経度、高度）である。方向情報は、東西南北などの方位の情報を含んでも良い。また、方向情報は、端末の向き（上向き、下向きなど）を含んでも良い。方向情報は、例えば、５６．２°（北を０°、東を９０°とする方位）や、南南西などである。方向情報は、例えば、高さ方向の角度を含んでも良い。また、方向情報は、例えば、（Yaw,Pitch,Roll）などでも良い。（Yaw,Pitch,Roll）の「Yaw」は垂直軸に対する角度や先端の左右の揺れの度合い（長さなど）、「Pitch」は横軸に対する角度や先端の上下の揺れの度合い、「Roll」は縦軸に対する角度や端末装置１２全体の左右の揺れの度合いである。なお、位置情報とは、例えば、ＧＰＳ受信機により取得される。また、方向情報とは、例えば、コンパス、またはコンパスとジャイロにより取得される。方向情報や位置情報を取得する手段は問わない。さらに、端末情報は、端末装置１２を識別する端末識別子（例えば、情報の送受信に用いられるＩＰアドレスや、電話番号や、ＩＤや、ＭＡＣアドレスなど）も含むことは好適である。サーバ受信部１１０４は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。

距離算出部１１０５は、オブジェクト情報格納部１１０１の１以上のオブジェクト情報に対応するオブジェクトと端末装置１２との距離を、各オブジェクトのオブジェクト情報と端末情報が有する位置情報とから、オブジェクトごとに算出する。距離算出部１１０５は、例えば、サーバ受信部１１０４が受信した端末情報が有する位置情報と、各オブジェクトの領域情報から得られるオブジェクトの位置情報とから、オブジェクトと端末装置１２との距離を算出する。ここで、距離とは、領域の重心の点と、端末情報が有する位置情報が示す位置との距離、領域のいずれかの点と端末情報が有する位置情報が示す位置との距離、端末情報が有する位置情報が示す位置に最も近い領域内の点との距離などでも良い。つまり、距離の算出方法は種々あり得る。また、オブジェクトの位置情報は、オブジェクトの領域情報から生成された情報でも良いし、領域情報とは別にオブジェクト情報に含まれる情報でも良い。位置情報は、例えば、領域情報から得られる領域の重心である。距離算出部１１０５は、通常、ＭＰＵやメモリ等から実現され得る。距離算出部１１０５の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。

撮影オブジェクト決定部１１０６は、端末情報が有する位置情報と、端末情報が有する方向情報と、予め格納されているまたは端末情報が有する視野角とを、オブジェクト情報格納部１１０１の各オブジェクト情報の領域情報に適用し、端末装置１２が撮影している１以上のオブジェクトを決定する。視野角とは、カメラ部１２２が撮影可能な角度であり、平面上の角度でも良いし、高さ方向を含めた立体的な角度でも良い。立体的な角度とは、例えば、平面上の角度（θ１）と高さ方向の角度（θ２）とにより得られる。また、視野角は、撮影オブジェクト決定部１１０６が予め格納していても良いし、端末情報に含まれていても良い。ここで、「オブジェクトを決定する」とは、オブジェクト識別子を取得することでも良いし、オブジェクト情報の全部または一部を取得することでも良いし、オブジェクト情報を管理しているテーブルのレコードＩＤを取得すること等でも良い。つまり、「オブジェクトを決定する」とは、オブジェクトを特定する情報を取得することであれば良い。

撮影オブジェクト決定部１１０６は、端末装置１２からの距離が近い順にオブジェクトを検査し、端末装置１２が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが端末装置１２に撮影されているか否かの検査を終了することは好適である。

また、撮影オブジェクト決定部１１０６は、端末情報が有する位置情報および方向情報と、予め格納されているまたは端末情報が有する視野角とを用いて、三次元空間上での撮影領域を取得し、撮影領域を、オブジェクト情報格納部１１０１の各オブジェクト情報が有する領域情報に対して適用し、端末装置１２が撮影している１以上のオブジェクトを決定し、端末装置１２からの距離が近い順にオブジェクトを検査し、端末装置１２が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが端末装置１２に撮影されているか否かの検査を終了することは好適である。

また、撮影オブジェクト決定部１１０６は、端末装置１２からの距離が近い順にオブジェクトに対応するオブジェクト情報をソートし、端末装置１２からの距離が近い順にオブジェクトを検査し、端末装置１２が撮影している１以上のオブジェクトを決定することは好適である。

また、撮影オブジェクト決定部１１０６は、端末装置１２からの距離が近い順にオブジェクトを検査し、端末装置１２が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域のオブジェクトであり、かつ、端末装置１２からの距離が閾値以内のオブジェクトのみを検査し、端末装置１２が撮影している１以上のオブジェクトを決定することは好適である。

また、撮影オブジェクト決定部１１０６は、端末装置１２からの距離が近い順にオブジェクトを検査し、端末装置１２が撮影しているとして決定したオブジェクトの数が閾値になった場合に、検査を終了することは好適である。

さらに、撮影オブジェクト決定部１１０６は、例えば、カメラ部１２２が撮影した映像の中で、端末装置１２から最も距離が近い位置に存在するオブジェクトの撮影オブジェクト、またはカメラ部１２２が撮影した映像の中で最も中央寄りに位置するオブジェクトの撮影オブジェクト、またはカメラ部１２２が撮影した映像の中で最も大きい領域（平面上または立体上）を有するオブジェクトの撮影オブジェクトを決定しても良い。

なお、撮影オブジェクト決定部１１０６は、さらに具体的には、例えば、後述する図５のフローチャートに示すようなアルゴリズムで、端末装置１２が撮影している１以上のオブジェクトを決定することは好適である。

撮影オブジェクト決定部１１０６は、通常、ＭＰＵやメモリ等から実現され得る。撮影オブジェクト決定部１１０６の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。

広告情報取得部１１０７は、撮影オブジェクト決定部１１０６が決定した１以上の各オブジェクトに対応する１以上の広告情報を、広告管理情報格納部１１０２から取得する。
広告情報取得部１１０７は、撮影オブジェクト決定部１１０６が決定した１以上の各オブジェクトに対応する広告情報を広告管理情報格納部１１０２から取得し、かつ、１以上の各オブジェクトに対応する領域情報をオブジェクト情報格納部１１０１から取得しても良い。また、広告情報取得部１１０７は、さらに、取得した領域情報と端末情報（視野角とカメラの画面サイズ、または視野角とカメラの画面サイズとフォーカスの情報）とから、当該領域情報に対応するカメラ上の表示領域情報を算出しても良い。（正しいでしょうか？）広告情報取得部１１０７は、通常、ＭＰＵやメモリ等から実現され得る。広告情報取得部１１０７の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。

サーバ送信部１１０８は、広告情報取得部１１０７が取得した１以上の広告情報を有する１以上のオブジェクト広告情報を、端末装置１２に送信する。オブジェクト広告情報は、例えば、広告情報と、領域情報または領域情報に対応するカメラ上の表示領域情報とを有する情報である。なお、オブジェクト広告情報は広告情報のみでも良い。サーバ送信部１１０８は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。

広告送信履歴情報構成部１１０９は、サーバ送信部１１０８がオブジェクト広告情報を端末装置１２に送信した場合、広告送信履歴情報を構成する。広告送信履歴情報とは、例えば、オブジェクト広告情報の送信時刻、送信した端末装置１２の種類（ナビ、携帯、メーカーなど）、送信した広告情報、端末装置１２の識別子（電話番号やＭＡＣアドレスやＩＰアドレスなど）などである。なお、端末装置１２の種類や端末装置１２の識別子は、受信された端末情報に含まれる。また、広告送信履歴情報は、通常、広告情報または広告情報を特定する情報は含まれる。広告送信履歴情報構成部１１０９は、通常、ＭＰＵやメモリ等から実現され得る。広告送信履歴情報構成部１１０９の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。

広告送信履歴情報蓄積部１１１０は、広告送信履歴情報構成部１１０９が構成した広告送信履歴情報を広告送信履歴情報格納部１１０３に蓄積する。広告送信履歴情報蓄積部１１１０は、通常、ＭＰＵやメモリ等から実現され得る。広告送信履歴情報蓄積部１１１０の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。

課金処理部１１１１は、広告送信履歴情報格納部１１０３の１以上の広告送信履歴情報を用いて、課金処理を行う。課金処理とは、図示しない課金サーバに広告送信履歴情報や課金のための情報を送信する処理でも良いし、広告主への課金料金を算出する処理でも良い。つまり、課金処理は、課金に関する処理であれば何でも良い。課金処理は公知技術であるので、詳細な説明は省略する。課金処理部１１１１は、通常、ＭＰＵやメモリ等から実現され得る。課金処理部１１１１の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。

受付部１２１は、ユーザから、指示やデータ等の入力を受け付ける。各種の指示とは、例えば、端末装置１２の起動指示、カメラ部１２２に対する各種の指示などである。指示やデータ等の入力手段は、キーボードやマウスやテンキーやメニュー画面によるもの等、何でも良い。受付部１２１は、キーボード等の入力手段のデバイスドライバーや、メニュー画面の制御ソフトウェア等で実現され得る。

カメラ部１２２は、映像を取得する。カメラ部１２２は、いわゆるカメラである。カメラ部１２２は、通常、現在、ファインダーに映っている映像を取得する。カメラ部１２２は、例えば、ＣＣＤカメラにより実現され得る。

端末情報取得部１２３は、端末装置１２の位置を示す位置情報と、端末装置１２が向いている方向を示す方向情報とを有する端末情報を取得する。端末情報取得部１２３は、位置情報と方向情報と視野角を含む端末情報を取得しても良い。かかる場合、端末情報取得部１２３は、視野角を予め格納している。なお、視野角とは、視野角の情報と同意義である。視野角は、二次元の角度でも三次元の角度でも良い。なお、端末装置１２（カメラ部１２２）の位置、方向、視野角が分かれば、撮影できる領域が分かる。つまり、端末情報は、カメラ部１２２が撮影する領域を特定する情報である。撮影する領域は、三次元の領域であることが好適であるが、二次元の領域でも良い。

端末情報取得部１２３を構成する位置情報取得手段１２３１は、端末装置１２の位置を示す位置情報を取得する。位置情報取得手段１２３１は、例えば、ＧＰＳ受信機により構成される。また、位置情報取得手段１２３１は、例えば、無線電波の受信手段と、３つ以上の基地局から受信した３つ以上の電波の強度から位置情報を取得する処理手段（例えば、ＭＰＵやメモリ等で構成される手段）とから構成されても良い。位置情報取得手段１２３１が位置情報を取得する方法は問わない。また、位置情報は、二次元上の位置でも良いし、三次元空間における位置でも良い。

方向情報取得手段１２３２は、端末装置１２が向いている方向を示す方向情報を取得する。方向情報は、２次元上の向きを示す情報でも良いし、３次元上の方向（上下方向も含む）を示す情報でも良い。方向情報取得手段１２３２は、例えば、コンパスで実現される。また、方向情報取得手段１２３２は、例えば、コンパスとジャイロで実現される。

送信部１２４は、端末情報取得部１２３が取得した端末情報をサーバ装置１１に送信する。送信部１２４は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。

受信部１２５は、端末情報の送信に対応して、１以上のオブジェクト広告情報を受信する。受信部１２５は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。

出力部１２６は、カメラ部１２２が取得した映像を出力するカメラ映像出力手段１２６１を具備する。出力部１２６は、１以上のオブジェクト広告情報が有する広告情報をも出力しても良い。

出力部１２６は、１以上のオブジェクト広告情報が有する広告情報を、１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または１以上のオブジェクト広告情報が有する表示領域情報が示すカメラ上の領域に出力しても良い。

出力部１２６は、１以上のオブジェクト広告情報が有する広告情報を、１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または１以上のオブジェクト広告情報が有する表示領域情報が示すカメラ上の領域以外の領域に出力し、かつ、１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または１以上のオブジェクト広告情報が有する表示領域情報が示すオブジェクトを、他のオブジェクトと視覚的に区別できる態様で出力しても良い。ここで視覚的に区別できる態様とは、例えば、当該オブジェクトのみを太い枠で囲むこと、当該オブジェクトのみの背景色を変更すること、当該オブジェクトのみに目印の図形を付与すること等である。出力部１２６は、例えば、カメラ部１２２が取得した映像を第一のディスプレイに出力し、広告情報を第二のディスプレイに出力しても良い。

ここで、出力とは、通常、ディスプレイへの表示であるが、プロジェクターを用いた投影、外部の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラムなどへの処理結果の引渡しなどを含む概念である。出力部１２６は、ディスプレイ等の出力デバイスを含むと考えても含まないと考えても良い。出力部１２６は、出力デバイスのドライバーソフトまたは、出力デバイスのドライバーソフトと出力デバイス等で実現され得る。

カメラ映像出力手段１２６１は、カメラ部１２２が取得した映像を出力する。

出力固定部１２７は、受付部１２１が指示（出力固定指示）を受け付けた場合、出力部１２６が出力中の映像と広告情報を固定する。ここで、固定とは、Ｐａｕｓｅ、Ｒｅｓｕｍｅのことである。つまり、固定とは、カメラのアングルを動かしても、画面上に出力されている映像や広告情報などは動かない、という意味である。そして、出力固定部１２７は、出力部１２６が出力中の映像と広告情報を、少なくとも一時的に、図示しない記憶媒体に記録する。なお、出力中の映像などを固定する技術は、いわゆるビデオムービーなどの機能と同様であり、公知技術である。出力固定部１２７は、通常、ＭＰＵやメモリ等から実現され得る。出力固定部１２７の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。

次に、情報システム１の動作について説明する。まず、サーバ装置１１の動作について、図４のフローチャートを用いて説明する。

（ステップＳ４０１）サーバ受信部１１０４は、端末装置１２から、端末情報を受信したか否かを判断する。端末情報を受信すればステップＳ４０２に行き、端末情報を受信しなければステップＳ４１２に行く。

（ステップＳ４０２）撮影オブジェクト決定部１１０６は、ステップＳ４０１で受信された端末情報を用いて、当該端末情報が有する位置情報および／または方向情報を、オブジェクト情報格納部１１０１の各オブジェクト情報の領域情報に適用し、端末装置１２が撮影している（端末装置１２のディスプレイに映っている）１以上のオブジェクトを決定する。かかる処理を撮影オブジェクト決定処理という。なお、撮影オブジェクト決定部１１０６は、予め格納されている視野角をも用いて、端末装置１２が撮影している１以上のオブジェクトを決定することは好適である。なお、端末装置１２が撮影しているオブジェクトを撮影オブジェクトとも言う。撮影オブジェクト決定処理について、図５のフローチャートを用いて説明する。

（ステップＳ４０３）広告情報取得部１１０７は、カウンタｉに１を代入する。

（ステップＳ４０４）広告情報取得部１１０７は、ステップＳ４０２で決定された撮影オブジェクトの中に、ｉ番目の撮影オブジェクトが存在するか否かを判断する。ｉ番目の撮影オブジェクトが存在すればステップＳ４０５に行き、ｉ番目の撮影オブジェクトが存在しなければステップＳ４０９に行く。

（ステップＳ４０５）広告情報取得部１１０７は、ｉ番目の撮影オブジェクトに対応する広告情報を、広告管理情報格納部１１０２から検索する。例えば、ステップＳ４０２でオブジェクト識別子などのオブジェクトを特定する情報が記録媒体に一時格納されており、かかるオブジェクトを特定する情報のうちのｉ番目の撮影オブジェクトを特定する情報をキーとして、広告管理情報格納部１１０２を検索する。

（ステップＳ４０６）広告情報取得部１１０７は、ステップＳ４０５で１以上の広告情報を取得したか否かを判断する。広告情報を取得すればステップＳ４０７に行き、広告情報を取得しなければステップＳ４０８に行く。

（ステップＳ４０７）広告情報取得部１１０７は、取得した広告情報を有するオブジェクト広告情報を、記録媒体に一時蓄積する。なお、オブジェクト広告情報は、広告情報とｉ番目の撮影オブジェクトの領域情報とを有しても良いし、広告情報と、ｉ番目の撮影オブジェクトの領域情報から取得されるカメラ上の表示領域情報を有しても良い。かかる場合、広告情報取得部１１０７は、ｉ番目の撮影オブジェクトの領域情報から、表示領域情報を算出する。広告情報取得部１１０７は、ｉ番目の撮影オブジェクトの領域情報である緯度、経度、高さなどの情報を、カメラの画面上の位置（ｘ、ｙ）に変更する。

（ステップＳ４０８）広告情報取得部１１０７は、カウンタｉを１、インクリメントする。ステップＳ４０４に戻る。

（ステップＳ４０９）サーバ送信部１１０８は、広告情報取得部１１０７が一時格納した１以上のオブジェクト広告情報を端末装置１２に送信する。なお、広告情報取得部１１０７がオブジェクト広告情報を一時格納しなかった場合、サーバ送信部１１０８は、その旨を端末装置１２に送信しても良い。なお、オブジェクト広告情報が存在しない旨の情報も、オブジェクト広告情報であると考えても良い。

（ステップＳ４１０）広告送信履歴情報構成部１１０９は、広告送信履歴情報を構成する。つまり、例えば、広告送信履歴情報構成部１１０９は、サーバ送信部１１０８がオブジェクト広告情報を端末装置１２に送信した時刻を図示しない時計から取得する。また、広告送信履歴情報構成部１１０９は、端末装置１２の識別子を、受信された端末情報から取得する。そして、広告送信履歴情報構成部１１０９は、広告情報が有する広告識別子を取得する。次に、広告送信履歴情報構成部１１０９は、取得した情報から、広告送信履歴情報を構成する。広告送信履歴情報は、どの広告がいつどのような端末に送信されたかが判断できる情報であることは好適である。ただし、広告送信履歴情報は、送信された広告を識別する情報だけでも良い。

（ステップＳ４１１）広告送信履歴情報蓄積部１１１０は、ステップＳ４１０で構成された広告送信履歴情報を広告送信履歴情報格納部１１０３に蓄積する。

なお、図４のフローチャートにおいて、電源オフや処理終了の割り込みにより処理は終了する。

次に、ステップＳ４０２の撮影オブジェクト決定処理について、図５のフローチャートを用いて説明する。

（ステップＳ５０１）撮影オブジェクト決定部１１０６は、ステップＳ４０１で受信された端末情報が有する位置情報を取得する。

（ステップＳ５０２）撮影オブジェクト決定部１１０６は、ステップＳ４０１で受信された端末情報が有する方向情報と、視野角とを用いて、撮影されない角度を取得する。そして、撮影オブジェクト決定部１１０６は、かかる角度（不可視領域の角度）を記録媒体に登録（記録）する。例えば、方向情報が９０度（例えば、真東）であり、視野角が４０度である場合、撮影される角度は「７０度から１１０度」である。したがって、撮影オブジェクト決定部１１０６は、「０＜＝不可視領域の角度＜７０」および「１１０＜不可視領域の角度＜＝３６０」を登録する。なお、ここで、撮影オブジェクト決定部１１０６は、撮影される角度（可視領域の角度）を取得し、登録しても良い。つまり、可視領域の角度の登録も、不可視領域の角度の登録と同意義である、とする。

（ステップＳ５０３）撮影オブジェクト決定部１１０６は、ステップＳ５０１で取得した位置情報を用いて、端末装置１２から近いオブジェクトの順に、オブジェクト情報格納部１１０１のオブジェクト情報をソートする。かかる処理をオブジェクトソート処理という。オブジェクトソート処理について、図６のフローチャートを用いて説明する。

（ステップＳ５０４）撮影オブジェクト決定部１１０６は、カウンタｉに１を代入する。

（ステップＳ５０５）撮影オブジェクト決定部１１０６は、ステップＳ５０３でソートされたオブジェクト情報の中に、ｉ番目のオブジェクトが存在するか否かを判断する。ｉ番目のオブジェクトが存在すればステップＳ５０６に行き、ｉ番目のオブジェクトが存在しなければ上位処理にリターンする。

（ステップＳ５０６）撮影オブジェクト決定部１１０６は、ソートされたオブジェクト情報の中から、ｉ番目のオブジェクトのオブジェクト情報が有する領域情報を取得する。

（ステップＳ５０７）撮影オブジェクト決定部１１０６は、ステップＳ５０１で取得した位置情報と、ステップＳ５０５で取得した領域情報とを用いて、ｉ番目のオブジェクトが、撮影オブジェクト（端末装置１２のディスプレイに映っている）か否かを判断する。かかる判断を、可視判断処理という。可視判断処理について、図７、図８のフローチャートを用いて説明する。

（ステップＳ５０８）撮影オブジェクト決定部１１０６は、ステップＳ５０６における判断の結果、ｉ番目のオブジェクトが撮影オブジェクトであればステップＳ５０９に行き、撮影オブジェクトでなければステップＳ５１０に行く。

（ステップＳ５０９）撮影オブジェクト決定部１１０６は、少なくとも、ｉ番目のオブジェクトのオブジェクト識別子を図示しない記憶媒体に格納する。なお、ここでは、撮影オブジェクトを決定することは、例えば、オブジェクト識別子を格納することである。

（ステップＳ５１０）撮影オブジェクト決定部１１０６は、登録されている不可視領域、または可視領域から、可視領域が存在するか否かを判断する。可視領域が存在すればステップＳ５１１に行き、存在しなければ上位処理にリターンする。なお、かかる判断は、二次元平面において行われても良いし、三次元空間において行われても良い。

（ステップＳ５１１）撮影オブジェクト決定部１１０６は、カウンタｉを１、インクリメントする。ステップＳ５０５に戻る。

なお、図５のフローチャートにおいて、不可視領域の角度を登録したが、可視領域の角度を登録し、以後、かかる角度に入いるオブジェクトのみを処理対象としても良い。

また、図５のフローチャートのステップＳ５１０において、撮影オブジェクト決定部１１０６は、端末装置１２からの距離が近い順（範囲や角度を区切った中のオブジェクトの集合の中での近い順でも良い）にオブジェクトを検査し、端末装置１２が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合（すべてが不可視領域になった場合と同意義）に、オブジェクトが端末装置１２に撮影されているか否かの検査を終了することを説明した。

また、具体的には、ステップＳ５１０の処理は、以下である。つまり、撮影オブジェクト決定部１１０６は、端末装置１２から近い順にオブジェクトを検査し、端末装置１２が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報（ここでは、通常、後述の最小角度（θ_１）および最大角度（θ_２））を不可視領域として登録し、次に検査するオブジェクトと端末装置１２とにより不可視領域となる領域の情報を取得し、最小角度（θ_３）および最大角度（θ_４）により特定される領域のすべてが既に不可視領域として登録されているか否かを判断し、不可視領域として登録されていなければ次に検査するオブジェクトを端末装置１２が撮影しているとして決定し、当該最小角度（θ_３）および最大角度（θ_４)により特定される領域を不可視領域として登録する処理を繰り返し、端末情報が有する視野角すべての領域が不可視領域となった場合に、オブジェクトの検査を終了することである。

さらに、図５のフローチャートにおいて、可視領域が存在しなくなった場合に、撮影されているオブジェクトの検知処理を終了した。しかし、閾値の数だけ、可視領域内のオブジェクトが見つかった場合、予め決められた条件（例えば、病院、レストランなどの特定のジャンルなど）に合致するオブジェクトが見つかった場合、端末装置１２の距離から所定以内の距離にあるオブジェクトのみを検査対象とするなど、他の条件により、オブジェクトの検知処理を終了しても良い。

次に、ステップＳ５０２のオブジェクトソート処理について、図６のフローチャートを用いて説明する。

（ステップＳ６０１）距離算出部１１０５は、カウンタｉに１を代入する。

（ステップＳ６０２）距離算出部１１０５は、オブジェクト情報格納部１１０１に、ｉ番目のオブジェクトが存在するか否かを判断する。ｉ番目のオブジェクトが存在すればステップＳ６０３に行き、ｉ番目のオブジェクトが存在しなければステップＳ６０７に行く。

（ステップＳ６０３）距離算出部１１０５は、ｉ番目のオブジェクトの位置情報を、オブジェクト情報格納部１１０１から取得する。なお、ｉ番目のオブジェクトの位置情報は、ｉ番目のオブジェクトのオブジェクト情報に含まれる。

（ステップＳ６０４）距離算出部１１０５は、端末情報が有する位置情報が示す地点と、ステップＳ６０３で取得した位置情報が示す地点との距離を算出する。

（ステップＳ６０５）距離算出部１１０５は、ステップＳ６０４で取得した距離とｉ番目のオブジェクトのオブジェクト情報（またはそのうちの一部の情報）とを対にして、図示しない記録媒体に一時的に格納する。

（ステップＳ６０６）距離算出部１１０５は、カウンタｉを１、インクリメントする。ステップＳ６０２に戻る。

（ステップＳ６０７）撮影オブジェクト決定部１１０６は、距離をキーとして、距離の近い（小さい）順に、オブジェクト情報をソートする。上位処理にリターンする。

次に、ステップＳ５０６の可視判断処理について、図７のフローチャートを用いて説明する。なお、ここでの可視判断処理は、第一の可視判断処理である。第一の可視判断処理は、オブジェクトの平面的な情報のみを用いて、オブジェクトが端末装置１２のディスプレイに出力されているか否かを判断する処理である。

（ステップＳ７０１）撮影オブジェクト決定部１１０６は、カウンタｉに１を代入する。

（ステップＳ７０２）撮影オブジェクト決定部１１０６は、判断対象となるオブジェクトの領域情報の中にｉ番目の点が存在するか否かを判断する。ｉ番目の点が存在すればステップＳ７０３に行き、ｉ番目の点が存在しなければステップＳ７０５に行く。なお、領域情報は、例えば、その外形を示す点から構成されるとする。外形を示す点とは、領域情報が示す領域が４角形であれば４点存在し、８角形であれば８点存在する。点とは、通常、（緯度，経度）または（ｘ座標、ｙ座標）などで示される。

（ステップＳ７０３）撮影オブジェクト決定部１１０６は、ｉ番目の点と位置情報（端末情報が有する位置情報）との角度（θ）を算出し、当該角度（θ）をバッファに一時記憶する。角度（θ）の基準は、例えば、真北である。ただし、基準は一定であれば良く、真北であるとは限らない。なお、上記の位置情報とは、端末装置１２の位置を示す情報である。

（ステップＳ７０４）撮影オブジェクト決定部１１０６は、カウンタｉを１、インクリメントする。ステップＳ７０２に戻る。

（ステップＳ７０５）撮影オブジェクト決定部１１０６は、ステップＳ７０３でバッファに一時格納された角度（θ）から、最小の角度（θ_１）と最大角度（θ_２）とを取得する。

（ステップＳ７０６）撮影オブジェクト決定部１１０６は、ステップＳ７０５で取得した最小の角度（θ_１）と最大角度（θ_２）の領域すべてが、既に登録されている角度の領域であるか否かを判断する。既に登録されている角度の領域であればステップＳ７１０に行き、既に登録されている角度の領域を一部でも含まない場合はステップＳ７０７に行く。

（ステップＳ７０７）撮影オブジェクト決定部１１０６は、このオブジェクトを撮影オブジェクトであると判断する。リターン値として、撮影オブジェクトである旨の情報（例えば、「１」）を代入する。

（ステップＳ７０８）撮影オブジェクト決定部１１０６は、このオブジェクトを撮影オブジェクトであるとしたために、現在、不可視領域として登録されている角度に加え、最小の角度（θ_１）と最大角度（θ_２）の領域を不可視領域とする角度の幅（領域）を取得する。なお、例えば、現在、「３０度から４０度」が登録されており、最小の角度（θ_１）が３５度であり、最大角度（θ_２）が４５度である場合、撮影オブジェクト決定部１１０６は、「３０度から４５度」を取得する。また、例えば、現在、「３０度から４０度」が登録されており、最小の角度（θ_１）が５５度であり、最大角度（θ_２）が６０度である場合、「５５度から６０度」を取得する。

（ステップＳ７０９）撮影オブジェクト決定部１１０６は、ステップＳ７０８で取得した角度を登録する。なお、例えば、上記において、「３０度から４５度」は、「３０度から４０度」の情報に上書きされる。また、例えば、上記において、「５５度から６０度」が追記される。上位処理にリターンする。このとき、リターン値（撮影オブジェクトを示す値）も返される。

（ステップＳ７１０）撮影オブジェクト決定部１１０６は、撮影オブジェクト決定部１１０６は、このオブジェクトを非撮影オブジェクトであると判断する。リターン値として、非撮影オブジェクトである旨の情報（例えば、「０」）を代入する。上位処理にリターンする。このとき、リターン値（非撮影オブジェクトを示す値）も返される。

次に、ステップＳ５０６の可視判断処理について、図８のフローチャートを用いて説明する。なお、ここでの可視判断処理は、第二の可視判断処理である。第二の可視判断処理は、オブジェクトの立体的な情報のみを用いて、オブジェクトが端末装置１２のディスプレイに出力されているか否かを判断する処理である。図８のフローチャートにおいて、図７のフローチャートと同様のステップについて、説明を省略する。

（ステップＳ８０１）撮影オブジェクト決定部１１０６は、ｉ番目の点（ｘ１，ｙ１，ｚ１）と位置情報（ｘ０，ｙ０，ｚ０）との高さ方向の角度（θ_ｈ）を算出し、バッファに格納する。

（ステップＳ８０２）撮影オブジェクト決定部１１０６は、視点（位置情報）からの高さ方向の角度（θ_３）を取得する。θ_３は、ステップＳ８０１で格納したθ_ｈのうち、最大の角度である。

（ステップＳ８０３）撮影オブジェクト決定部１１０６は、最小の角度（θ_１）と最大角度（θ_２）の領域において、高さ方向の角度（θ_３）以上の角度が既に、登録されているか否かを判断する。登録されていればステップＳ７１０に行き、登録されていなければステップＳ７０７に行く。高さ方向の角度（θ_３）以上の角度が既に登録されている場合は、対象となるオブジェクトは不可視領域にあり、撮影オブジェクトではないことを示す。

（ステップＳ８０４）撮影オブジェクト決定部１１０６は、このオブジェクトを撮影オブジェクトであるとしたために、現在、不可視領域として登録されている角度に加え、最小角度（θ_１）と最大角度（θ_２）の平面領域を不可視領域とする角度の幅（領域）を取得する。なお、例えば、現在、「３０度から４０度」が登録されており、最小の角度（θ_１）が３５度であり、最大角度（θ_２）が４５度である場合、撮影オブジェクト決定部１１０６は、「３０度から４５度」を取得する。

（ステップＳ８０５）撮影オブジェクト決定部１１０６は、このオブジェクトを撮影オブジェクトであるとしたために、高さ方向の角度（θ_３）を取得する。なお、例えば、現在、最小の角度（θ_１）と最大角度（θ_２）の平面領域において、高さの角度「３０度」が登録されている場合、取得した高さ方向の角度（θ_３）が「３５度」であれば、「３５度」を取得する。

（ステップＳ８０６）撮影オブジェクト決定部１１０６は、ステップＳ８０４で取得した平面領域の角度（例えば、「３０度から４５度」）と、高さ方向の角度（例えば、「３５度」）を対応付けて蓄積（登録）する。上位処理にリターンする。このとき、リターン値も返される。なお、撮影オブジェクト決定部１１０６は、最小角度（θ_１）と最大角度（θ_２）の平面領域において、現在、不可視領域として登録されている高さ方向の角度が、高さ方向の角度（θ_３）以上であるか否かを判断し、高さ方向の角度（θ_３）以上であれば、高さ方向の角度（θ_３）を蓄積しない。

次に、端末装置１２の動作について、図９のフローチャートを用いて説明する。

（ステップＳ９０１）受付部１２１は、指示等を受け付けたか否かを判断する。指示等を受け付ければステップＳ９０２に行き、指示等を受け付けなければステップＳ９０１に戻る。

（ステップＳ９０２）受付部１２１は、ステップＳ９０１で受け付けた指示が起動指示であるか否かを判断する。起動指示であればステップＳ９０３に行き、起動指示でなければステップＳ９１２に行く。なお、起動指示とは、端末装置１２の起動の指示である。

（ステップＳ９０３）カメラ部１２２は、カメラ映像を取得する。

（ステップＳ９０４）出力部１２６のカメラ映像出力手段１２６１は、カメラ部１２２が取得した映像を出力する。

（ステップＳ９０５）端末情報取得部１２３の位置情報取得手段１２３１は、端末装置１２の位置を示す位置情報を取得する。

（ステップＳ９０６）方向情報取得手段１２３２は、端末装置１２が向いている方向を示す方向情報を取得する。

（ステップＳ９０７）端末情報取得部１２３は、ステップＳ９０５で取得した位置情報と、ステップＳ９０６で取得した方向情報とを有する端末情報を構成する。なお、端末情報取得部１２３は、予め格納している視野角を含む端末情報を構成することは好適である。

（ステップＳ９０８）送信部１２４は、ステップＳ９０７で構成した端末情報をサーバ装置１１に送信する。

（ステップＳ９０９）受信部１２５は、端末情報の送信に対応して、オブジェクト広告情報を受信したか否かを判断する。オブジェクト広告情報を受信すればステップＳ９１０に行き、オブジェクト広告情報を受信しなければステップＳ９０９に戻る。なお、ここで、一定時間以上、オブジェクト広告情報を受信しなければ、ステップＳ９１１に行くことは好適である。

（ステップＳ９１０）出力部１２６は、ステップＳ９０９で受信したオブジェクト広告情報を出力する処理を行う。かかる処理は、オブジェクト広告情報出力処理という。ステップＳ９０１に戻る。なお、オブジェクト広告情報が、広告情報が存在しない旨の情報である場合、出力部１２６は、何も出力しないことは好適である。また、オブジェクト広告情報出力処理は、例えば、１以上のオブジェクト広告情報が有する広告情報を、１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または１以上のオブジェクト広告情報が有する表示領域情報が示すカメラ上の領域に出力する処理である。また、オブジェクト広告情報出力処理は、例えば、１以上のオブジェクト広告情報が有する広告情報を、１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または１以上のオブジェクト広告情報が有する表示領域情報が示すカメラ上の領域以外の領域に出力し、かつ、１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または１以上のオブジェクト広告情報が有する表示領域情報が示すオブジェクトを、他のオブジェクトと視覚的に区別できる態様で出力する処理である。

（ステップＳ９１１）受付部１２１は、ユーザから、終了指示を受け付けたか否かを判断する。終了指示を受け付ければ処理を終了し、終了指示を受け付けなければステップＳ９０３に戻る。

（ステップＳ９１２）受付部１２１は、ユーザから、画面を固定する出力固定指示を受け付けたか否かを判断する。出力固定指示を受け付ければステップＳ９１３に行き、出力固定指示を受け付けなければステップＳ９１５に行く。

（ステップＳ９１３）出力固定部１２７は、出力部１２６が出力中の映像と広告情報を固定する。

（ステップＳ９１４）受付部１２１は、固定解除指示を受け付けたか否かを判断する。固定解除指示を受け付ければステップＳ９０３に行き、固定解除指示を受け付けなければステップＳ９１４に戻る。

（ステップＳ９１５）各構成要素は、受け付けた指示に対応した動作を行う。ステップＳ９０１に戻る。

以下、本実施の形態における情報システム１の具体的な動作について説明する。情報システム１の概念図は図１である。情報システム１は、カメラで捉えている画像に含まれるオブジェクトに対応する広告情報を、当該オブジェクトに重ねて、または他の領域（他のウィンドウや他のディスプレイ）に表示できる。なお、広告情報は、オブジェクトに対応付けて管理されている広告情報であるが、オブジェクトに関係する内容の広告情報であるとは限らない。例えば、富士山に対応付けられている広告情報が、一店舗や一レストラン等の広告情報でも良い。

次に、２つの具体例を用いて、情報システム１について説明する。具体例１は、オブジェクトの高さまでは考慮せず、オブジェクトの平面的な情報のみを考慮して、撮影されている映像の中に含まれるオブジェクトを認識し、当該オブジェクトに対応付けられている広告情報を出力する態様である。具体例２は、オブジェクトの高さをも考慮して、撮影されている映像の中に含まれるオブジェクトを認識し、当該オブジェクトに対応付けられている広告情報を出力する態様である。
（具体例１）

今、サーバ装置１１のオブジェクト情報格納部１１０１は、図１０に示すオブジェクト情報管理表を保持している。オブジェクト情報管理表は、地図上のオブジェクト情報を管理している表である。オブジェクト情報管理表は、「オブジェクト識別子」「オブジェクト名」「ＵＲＬ」「位置情報」「領域情報」などの属性値を有するレコードを１以上、管理している。「オブジェクト識別子」は、ここでは、オブジェクトのＩＤである。「オブジェクト名」は、オブジェクトの名称を示す。ＵＲＬは、オブジェクトに関して説明するウェブページ（ここでのオブジェクト関連情報）が存在する場所を示す情報である。「位置情報」は、オブジェクトの位置を特定する情報であり、ここでは、（緯度，経度）である。「領域情報」は、オブジェクトが配置されている二次元領域を示す情報であり、ここでは、多角形であるオブジェクトの３以上の頂点を示す。頂点も、ここでは、（緯度，経度）である。

また、サーバ装置１１の広告管理情報格納部１１０２は、図１１に示す広告管理情報管理表を保持している。広告管理情報管理表は、広告管理情報を管理している表である。広告管理情報管理表は、「ＩＤ」「オブジェクト識別子」「広告情報」などの属性値を有するレコードを１以上、管理している。

また、端末装置１２は、ここでは、２つのディスプレイを有する端末である、とする。なお、端末装置１２は、一つのディスプレイを有する端末であっても良いし、３つ以上のディスプレイを有する端末であっても良い。

かかる場合、ユーザは、端末装置１２を起動した、とする。すると、受付部１２１は、起動指示を受け付ける。そして、カメラ部１２２は、カメラ映像を取得する。そして、出力部１２６のカメラ映像出力手段１２６１は、カメラ部１２２が取得した映像を出力する。すると、図１２に示すように、端末装置１２の第一のディスプレイ（上部のディスプレイ）に、外界の映像が出力される。

次に、端末装置１２の端末情報取得部１２３の位置情報取得手段１２３１（ここでは、例えば、ＧＰＳ受信機）は、端末装置１２の位置情報（Ｘ，Ｙ）を取得する。

次に、方向情報取得手段１２３２は、端末装置１２が向いている方向を示す方向情報（θＡ）を取得する。方向情報（θＡ）は、例えば、真北から時計回りの角度（真東は９０度）を示す。

また、端末情報取得部１２３は、カメラ部１２２が有する視野角の情報（単に「視野角」という）を読み出す。ここでは、視野角は「θａ」である、とする。また、カメラ部１２２は、予め視野角「θａ」を格納している。とする。

次に、端末情報取得部１２３は、取得した位置情報（Ｘ，Ｙ）と、取得した方向情報（θＡ）と、視野角（θａ）とを有する端末情報（Ｘ，Ｙ，θＡ，θａ）を構成する。

次に、送信部１２４は、構成した端末情報（Ｘ，Ｙ，θＡ，θａ）をサーバ装置１１に送信する。

そして、サーバ装置１１のサーバ受信部１１０４は、端末装置１２から、端末情報（Ｘ，Ｙ，θＡ，θａ）を受信する。

次に、撮影オブジェクト決定部１１０６は、以下のように、撮影オブジェクトを決定する。つまり、撮影オブジェクト決定部１１０６は、受信された端末情報が有する位置情報（Ｘ，Ｙ）を取得する。

次に、撮影オブジェクト決定部１１０６は、端末情報が有する方向情報（θＡ）と視野角（θａ）とを用いて、不可視領域となる角度を算出する。撮影オブジェクト決定部１１０６は、「（θＡ−（θａ／２））＜＝可視領域＜＝（θＡ＋（θａ／２））」を可視領域となる角度として決定する。そして、可視領域を除く角度を不可視領域角度として算出し、蓄積する。かかる概念を図１３に示す。なお、可視領域が真北のラインをまたがっていない場合、不可視領域角度は「０＜＝不可視領域角度＜（θＡ−（θａ／２））」および「（θＡ＋（θａ／２））＜不可視領域角度＜＝３６０」である。また、可視領域が真北のラインをまたがっている場合、不可視領域角度は「（θＡ＋（θａ／２））＜不可視領域角度＜（θＡ−（θａ／２））」である。

そして、距離算出部１１０５が、端末装置１２の位置情報（Ｘ，Ｙ）を用いて、端末装置１２と各オブジェクトとの距離を算出する。そして、撮影オブジェクト決定部１１０６は、距離算出部１１０５が算出した距離を用いて、端末装置１２から近いオブジェクトの順に、オブジェクト情報格納部１１０１のオブジェクト情報をソートする。ソート処理については、図６で説明した処理により行う。ソート処理の結果、例えば、撮影オブジェクト決定部１１０６は、図１４に示すようなオブジェクト一時管理表を取得する。オブジェクト一時管理表の各レコードは、オブジェクト識別子と距離とを有する。距離は、位置情報（Ｘ，Ｙ）が示す点とオブジェクトの位置情報が示す点との距離である。

次に、撮影オブジェクト決定部１１０６は、オブジェクト一時管理表の上位のレコードから、撮影オブジェクトであるか否かを判断する。

つまり、撮影オブジェクト決定部１１０６は、オブジェクト一時管理表の１番目のレコードのオブジェクト識別子「１」を読み出す。そして、当該オブジェクト識別子「１」をキーとして、オブジェクト情報管理表を検索し、オブジェクト識別子「１」と対になる領域情報「（ｘ_１，ｙ_１）（ｘ_２，ｙ_２）（ｘ_３，ｙ_３）（ｘ_４，ｙ_４）」を取得する。

次に、撮影オブジェクト決定部１１０６は、受信された端末情報（Ｘ，Ｙ，θＡ，θａ）と、取得した領域情報「（ｘ_１，ｙ_１）（ｘ_２，ｙ_２）（ｘ_３，ｙ_３）（ｘ_４，ｙ_４）」とを用いて、１番目のオブジェクトが、撮影オブジェクトか否かを判断する。

まず、撮影オブジェクト決定部１１０６は、判断対象となるオブジェクト（オブジェクト識別子「１」のオブジェクト）の領域情報の中の１番目の点（ｘ_１，ｙ_１）を取得する。

次に、撮影オブジェクト決定部１１０６は、１番目の点（ｘ_１，ｙ_１）と位置情報（Ｘ，Ｙ）との角度（θ１）を算出し、当該角度（θ１）をバッファに一時記憶する。同様に、撮影オブジェクト決定部１１０６は、判断対象となるオブジェクト（オブジェクト識別子「１」のオブジェクト）の領域情報の中の２番目の点から４番目の各点と位置情報（Ｘ，Ｙ）との角度（θ２，θ３，θ４）を算出し、当該角度（θ２，θ３，θ４）もバッファに一時記憶する。バッファには、（θ１，θ２，θ３，θ４）が格納されたことになる。

次に、撮影オブジェクト決定部１１０６は、バッファに一時格納された角度（θ１，θ２，θ３，θ４）から、最小角度（例えば、（θ１））と最大角度（例えば、（θ４））とを取得する。

次に、撮影オブジェクト決定部１１０６は、取得した最小角度（θ１）と最大角度（θ４）の領域すべてが、既に登録されている角度の領域（「（θＡ−（θａ／２））＜＝可視領域＜＝（θＡ＋（θａ／２））」を除く角度）であるか否かを判断する。ここで、撮影オブジェクト決定部１１０６は、取得した最小角度（θ１）と最大角度（θ４）の領域は、可視領域であると判断した、とする。そして、撮影オブジェクト決定部１１０６は、オブジェクト識別子「１」のオブジェクトは、撮影オブジェクトであると判断する。

次に、撮影オブジェクト決定部１１０６は、「θ１＜＝不可視領域＜＝θ４」を新たな不可視領域とする。つまり、撮影オブジェクト決定部１１０６は、例えば、「０＜＝不可視領域角度＜（θＡ−（θａ／２））」および「（θＡ＋（θａ／２））＜不可視領域角度＜＝３６０」と「θ１＜＝不可視領域＜＝θ４」とをマージした不可視領域角度を記録媒体に登録する。ここで、マージとは、今までの不可視領域に、「θ１＜＝不可視領域＜＝θ４」を加えることであり、今までの不可視領域が「θ１＜＝不可視領域＜＝θ４」を含む場合もあるし、含まない場合もある。

次に、撮影オブジェクト決定部１１０６は、１番目のオブジェクトのオブジェクト識別子「１」を図示しない記憶媒体に格納する。

次に、撮影オブジェクト決定部１１０６は、登録されている不可視領域、または可視領域から、可視領域が存在する、と判断する。

次に、撮影オブジェクト決定部１１０６は、オブジェクト一時管理表の２番目のオブジェクト識別子「１７」を取得し、当該識別子「１７」をキーとして、オブジェクト情報管理表を検索し、オブジェクト識別子「１７」と対になる領域情報（例えば、「（ｘ_１０１，ｙ_１０１）（ｘ_１０２，ｙ_１０２）（ｘ_１０３，ｙ_１０３）（ｘ_１０３，ｙ_１０３）」）を取得する。

次に、撮影オブジェクト決定部１１０６は、受信された端末情報（Ｘ，Ｙ，θＡ，θａ）と、取得した領域情報「（ｘ_１０１，ｙ_１０１）（ｘ_１０２，ｙ_１０２）（ｘ_１０３，ｙ_１０３）（ｘ_１０３，ｙ_１０３）」とを用いて、２番目のオブジェクトが、撮影オブジェクトか否かを判断する。

まず、撮影オブジェクト決定部１１０６は、判断対象となるオブジェクト（オブジェクト識別子「１７」のオブジェクト）の領域情報の中の１番目の点（ｘ_１０１，ｙ_１０１）を取得する。

次に、撮影オブジェクト決定部１１０６は、１番目の点（ｘ_１０１，ｙ_１０１）と位置情報（Ｘ，Ｙ）との角度（θ１０１）を算出し、当該角度（θ１０１）をバッファに一時記憶する。同様に、撮影オブジェクト決定部１１０６は、判断対象となるオブジェクト（オブジェクト識別子「１７」のオブジェクト）の領域情報の中の２番目の点から４番目の各点と位置情報（Ｘ，Ｙ）との角度（θ１０２，θ１０３，θ１０４）を算出し、当該角度（θ１０２，θ１０３，θ１０４）もバッファに一時記憶する。バッファには、（θ１０１，θ１０２，θ１０３，θ１０４）が格納されたことになる。

次に、撮影オブジェクト決定部１１０６は、バッファに一時格納された角度（θ１０１，θ１０２，θ１０３，θ１０４）から、最小角度（例えば、（θ１０１））と最大角度（例えば、（θ１０３））とを取得する。

次に、撮影オブジェクト決定部１１０６は、取得した最小角度（θ１０１）と最大角度（θ１０３）の領域すべてが、既に登録されている角度の領域であるか否かを判断する。そして、撮影オブジェクト決定部１１０６は、最小角度（θ１０１）と最大角度（θ１０３）の領域すべてが、既に登録されている角度の領域であると、判断したとする。したがって、撮影オブジェクト決定部１１０６は、オブジェクト識別子「１７」のオブジェクトは撮影オブジェクトでない、と決定する。

次に、撮影オブジェクト決定部１１０６は、登録されている不可視領域、または可視領域から、可視領域が存在する、と判断する。

次に、撮影オブジェクト決定部１１０６は、オブジェクト一時管理表の３番目のオブジェクト識別子「３」を取得し、当該識別子「３」をキーとして、オブジェクト情報管理表を検索し、オブジェクト識別子「３」と対になる領域情報「（ｘ_１１，ｙ_１１）（ｘ_１２，ｙ_１２）（ｘ_１３，ｙ_１３）（ｘ_１４，ｙ_１４）」を取得する。

次に、撮影オブジェクト決定部１１０６は、受信された端末情報（Ｘ，Ｙ，θＡ，θａ）と、取得した領域情報「（ｘ_１１，ｙ_１１）（ｘ_１２，ｙ_１２）（ｘ_１３，ｙ_１３）（ｘ_１４，ｙ_１４）」とを用いて、３番目のオブジェクトが、撮影オブジェクトか否かを判断する。

まず、撮影オブジェクト決定部１１０６は、判断対象となるオブジェクト（オブジェクト識別子「３」のオブジェクト）の領域情報の中の１番目の点（ｘ_１１，ｙ_１１）を取得する。

次に、撮影オブジェクト決定部１１０６は、１番目の点（ｘ_１１，ｙ_１１）と位置情報（Ｘ，Ｙ）との角度（θ１１）を算出し、当該角度（θ１１）をバッファに一時記憶する。同様に、撮影オブジェクト決定部１１０６は、判断対象となるオブジェクト（オブジェクト識別子「３」のオブジェクト）の領域情報の中の２番目の点から４番目の各点と位置情報（Ｘ，Ｙ）との角度（θ１２，θ１３，θ１４）を算出し、当該角度（θ１２，θ１３，θ１４）もバッファに一時記憶する。バッファには、（θ１１，θ１２，θ１３，θ１４）が格納されたことになる。

次に、撮影オブジェクト決定部１１０６は、バッファに一時格納された角度（θ１１，θ１２，θ１３，θ１４）から、最小角度（例えば、（θ１１））と最大角度（例えば、（θ１４））とを取得する。

次に、撮影オブジェクト決定部１１０６は、取得した最小角度（θ１１）と最大角度（θ１４）の領域すべてが、既に登録されている角度の領域であるか否かを判断する。ここで、撮影オブジェクト決定部１１０６は、取得した最小角度（θ１１）と最大角度（θ１４）の領域と、既に登録されている不可視領域の角度とを比較する。そして、撮影オブジェクト決定部１１０６は、取得した最小角度（θ１１）と最大角度（θ１４）の領域は、可視領域であると判断した、とする。そして、撮影オブジェクト決定部１１０６は、オブジェクト識別子「３」のオブジェクトは、撮影オブジェクトであると判断する。

次に、撮影オブジェクト決定部１１０６は、「θ１１＜＝不可視領域＜＝θ１４」を新たな不可視領域とする。

次に、撮影オブジェクト決定部１１０６は、３番目のオブジェクトのオブジェクト識別子「３」を図示しない記憶媒体に格納する。

次に、撮影オブジェクト決定部１１０６は、登録されている不可視領域、または可視領域から、可視領域が存在する、と判断する。

以上の処理を、４番目以降のオブジェクトに対しても繰り返す。そして、オブジェクト識別子「２５」で識別されるオブジェクトを撮影オブジェクトであると決定した後、撮影オブジェクト決定部１１０６は、登録されている不可視領域、または可視領域から、可視領域が存在しない、と判断した、とする。そして、最終的に、撮影オブジェクトの識別子の集合「１，３，２５」が得られた、とする。

次に、広告情報取得部１１０７は、撮影オブジェクトの識別子が格納されているバッファから、１番目の撮影オブジェクトの識別子「１」を取得する。

次に、広告情報取得部１１０７は、１番目の撮影オブジェクトの識別子「１」に対応する広告情報を、広告管理情報管理表から検索する。そして、広告情報取得部１１０７は、識別子「１」に対応する領域情報「（ｘ_１，ｙ_１）（ｘ_２，ｙ_２）（ｘ_３，ｙ_３）（ｘ_４，ｙ_４）」を取得する。次に、広告情報取得部１１０７は、領域情報から、カメラ上の表示領域情報「（Ｘ_１，Ｙ_１）（Ｘ_２，Ｙ_２）（Ｘ_３，Ｙ_３）（Ｘ_４，Ｙ_４）」を算出する。つまり、広告情報取得部１１０７は、例えば、（緯度，経度）の情報を、カメラ上の座標情報（Ｘ，Ｙ）に、カメラの端末情報を用いて変換する。次に、広告情報取得部１１０７は、例えば、オブジェクト識別子「１」に対応する広告情報と、カメラ上の表示領域情報「（Ｘ_１，Ｙ_１）（Ｘ_２，Ｙ_２）（Ｘ_３，Ｙ_３）（Ｘ_４，Ｙ_４）」とを有するオブジェクト広告情報を構成し、記録媒体に一時蓄積する。

次に、広告情報取得部１１０７は、２番目の撮影オブジェクトの識別子「３」を取得する。そして、オブジェクト識別子「３」に対応する２つの広告情報を、広告管理情報管理表から検索する。そして、広告情報取得部１１０７は、２番目の撮影オブジェクトの識別子「３」に対応する領域情報「（ｘ_１１，ｙ_１１）（ｘ_１２，ｙ_１２）（ｘ_１３，ｙ_１３）（ｘ_１４，ｙ_１４）」を取得する。次に、広告情報取得部１１０７は、領域情報から、カメラ上の表示領域情報「（Ｘ_１１，Ｙ_１１）（Ｘ_１２，Ｙ_１２）（Ｘ_１３，Ｙ_１３）（Ｘ_１４，Ｙ_１４）」を算出する。次に、広告情報取得部１１０７は、例えば、オブジェクト識別子「３」に対応する２つの広告情報と、カメラ上の表示領域情報「（Ｘ_１１，Ｙ_１１）（Ｘ_１２，Ｙ_１２）（Ｘ_１３，Ｙ_１３）（Ｘ_１４，Ｙ_１４）」とを有するオブジェクト広告情報を構成し、記録媒体に一時蓄積する。

さらに、広告情報取得部１１０７は、３番目の撮影オブジェクトの識別子「２５」を取得する。そして、広告情報取得部１１０７は、オブジェクト識別子「２５」に対応する広告情報を、広告管理情報管理表から検索しようとするが、取得できない。オブジェクト識別子「２５」に対応する広告情報が、広告管理情報管理表に格納されていないからである。

次に、サーバ送信部１１０８は、広告情報取得部１１０７が一時格納した２つのオブジェクト広告情報を端末装置１２に送信する。

次に、受信部１２５は、端末情報の送信に対応して、２つのオブジェクト広告情報を受信する。

次に、出力部１２６は、受信したオブジェクト広告情報を出力する処理を行う。出力例を図１５に示す。図１５は、受信されたすべての広告情報を一度に出力している。また、広告情報と、対応するオブジェクトとの対応がとれる態様で、広告情報が出力されている。

ただし、広告情報は、撮影されているオブジェクトの上に表示されても良い。また、２以上の広告情報が存在する場合、タイムシェアリングで、出力する広告情報を切り替えても良い（図１６参照）。図１６によれば、広告情報を出力する第二のディスプレイには、一の広告情報のみが出力されており、その広告に対応するオブジェクトが四角で表示され、当該撮影オブジェクトが他のオブジェクトと比較して、視覚的に異なる態様で表示されている。

なお、上記において、端末装置１２からの距離が最も近い撮影オブジェクトの広告情報のみを出力しても良い。また、端末装置１２の最も中央部に存在する撮影オブジェクトの広告情報のみを出力しても良い。

なお、図１５の画面出力の状態で、ユーザは、出力を固定する指示を入力した、とする。すると、出力固定部１２７は、出力部１２６が出力中の映像と広告情報（図１５の画面）を固定する。なお、かかる画面の固定化処理は公知技術である。また、画面の固定化処理は、例えば、ＶＲＡＭの画像を変更しないようにし、カメラ部１２２の動作を停止するなどの処理により行われる。

また、広告情報を固定した後、例えば、ユーザが広告の領域を押下した場合、端末装置１２は、当該広告情報に対応付けられているＵＲＬを用いたＷｅｂ検索を行い、Ｗｅｂページを出力しても良い。かかる場合、オブジェクト広告情報は、広告情報と対になるＵＲＬを含んでいる、とする。かかることは。具体例２においても同様である。
（具体例２）

今、サーバ装置１１のオブジェクト情報格納部１１０１は、図１７に示すオブジェクト情報管理表を保持している。オブジェクト情報管理表は、地図上のオブジェクト情報を管理している表である。オブジェクト情報管理表は、「オブジェクト識別子」「オブジェクト名」「ＵＲＬ」「位置情報」「領域情報」などの属性値を有するレコードを１以上、管理している。図１７において、図１０のオブジェクト情報管理表との差異は、領域情報を構成する各点が高さ情報（ｚ）を有している点である。

また、サーバ装置１１の広告管理情報格納部１１０２は、図１１に示す広告管理情報管理表を保持している。

また、端末装置１２は、２つのディスプレイを有する端末である、とする。

かかる場合、ユーザは、端末装置１２を起動した、とする。すると、受付部１２１は、起動指示を受け付ける。そして、カメラ部１２２は、カメラ映像を取得する。そして、出力部１２６のカメラ映像出力手段１２６１は、カメラ部１２２が取得した映像を出力する。すると、図１２に示すように、端末装置１２の第一のディスプレイ（上部のディスプレイ）に、外界の映像が出力される。

次に、端末装置１２の端末情報取得部１２３の位置情報取得手段１２３１（ここでは、例えば、ＧＰＳ受信機）は、端末装置１２の位置情報（Ｘ，Ｙ，Ｚ）を取得する。なお、Ｚは、高さである。

次に、方向情報取得手段１２３２は、端末装置１２が向いている方向を示す方向情報（θＡ，θＢ）を取得する。θＡは平面上の角度、θＢは高さ方向の角度である。方向情報（θＡ）は、例えば、真北から時計回りの角度（真東は９０度）を示す。

また、端末情報取得部１２３は、カメラ部１２２が有する視野角の情報（単に「視野角」という）を読み出す。ここでは、視野角は（θａ，θｂ）である、とする。また、カメラ部１２２は、予め視野角（θａ，θｂ）を格納している、とする。なお、θａは平面上の角度、θｂは高さ方向の角度である。視野角（θａ，θｂ）を図１８に示す。

次に、端末情報取得部１２３は、取得した位置情報（Ｘ，Ｙ，Ｚ）と、取得した方向情報（θＡ，θＢ）と、視野角（θａ，θｂ）とを有する端末情報（Ｘ，Ｙ，Ｚ，θＡ，θＢ，θａ，θｂ）を構成する。

次に、送信部１２４は、構成した端末情報（Ｘ，Ｙ，Ｚ，θＡ，θＢ，θａ，θｂ）をサーバ装置１１に送信する。

そして、サーバ装置１１のサーバ受信部１１０４は、端末装置１２から、端末情報（Ｘ，Ｙ，Ｚ，θＡ，θＢ，θａ，θｂ）を受信する。

次に、撮影オブジェクト決定部１１０６は、以下のように、撮影オブジェクトを決定する。つまり、撮影オブジェクト決定部１１０６は、受信された端末情報が有する位置情報（Ｘ，Ｙ，Ｚ）を取得する。

次に、撮影オブジェクト決定部１１０６は、端末情報が有する方向情報（θＡ，θＢ）と視野角（θａ，θｂ）とを用いて、不可視領域となる三次元の角度を算出する。撮影オブジェクト決定部１１０６は、可視領域となる二次元の角度「（θＡ−（θａ／２））＜＝可視領域＜＝（θＡ＋（θａ／２））」を取得する。そして、可視領域となる高さ方向の角度「（θＢ−（θｂ／２））＜＝可視領域＜＝（θＢ＋（θｂ／２））」を取得する。そして、上記の可視領域ではない領域を、不可視領域として蓄積する。

そして、撮影オブジェクト決定部１１０６は、取得した位置情報（Ｘ，Ｙ，Ｚ）を用いて、端末装置１２から近いオブジェクトの順に、オブジェクト情報格納部１１０１のオブジェクト情報をソートする。ソート処理については、図６で説明した処理により行う。なお、ここでは、位置情報（Ｘ，Ｙ，Ｚ）のうちの（Ｘ，Ｙ）と、各オブジェクトの位置情報（例えば、（ｘ_ａ，ｙ_ａ））とを用いて、端末装置１２と各オブジェクトとの距離を算出し、距離をキーとしてソートする。そして、ソート処理の結果、撮影オブジェクト決定部１１０６は、図１４に示すようなオブジェクト一時管理表を取得する。オブジェクト一時管理表の各レコードは、オブジェクト識別子と距離とを有する。距離は、位置情報（Ｘ，Ｙ，Ｚ）（ただし、Ｚは利用されなくても良い）が示す点とオブジェクトの位置情報が示す点との距離である。

次に、撮影オブジェクト決定部１１０６は、オブジェクト一時管理表の上位のレコードから、撮影オブジェクトであるか否かを判断する。

つまり、撮影オブジェクト決定部１１０６は、オブジェクト一時管理表の１番目のレコードのオブジェクト識別子「１」を読み出す。そして、当該オブジェクト識別子「１」をキーとして、オブジェクト情報管理表を検索し、オブジェクト識別子「１」と対になる領域情報「（ｘ_１，ｙ_１，ｚ_１）（ｘ_２，ｙ_２，ｚ_２）（ｘ_３，ｙ_３，ｚ_３）（ｘ_４，ｙ_４，ｚ_４）」を取得する。

次に、撮影オブジェクト決定部１１０６は、受信された端末情報（Ｘ，Ｙ，Ｚ，θＡ，θＢ，θａ，θｂ）と、取得した領域情報「（ｘ_１，ｙ_１，ｚ_１）（ｘ_２，ｙ_２，ｚ_２）（ｘ_３，ｙ_３，ｚ_３）（ｘ_４，ｙ_４，ｚ_４）」とを用いて、１番目のオブジェクトが、撮影オブジェクトか否かを判断する。

まず、撮影オブジェクト決定部１１０６は、判断対象となるオブジェクト（オブジェクト識別子「１」のオブジェクト）の領域情報の中の１番目の点（ｘ_１，ｙ_１，ｚ_１）を取得する。

次に、撮影オブジェクト決定部１１０６は、１番目の点（ｘ_１，ｙ_１，ｚ_１）と位置情報（Ｘ，Ｙ，Ｚ）との平面上の角度（θ１１）を算出し、当該角度（θ１１）をバッファに一時記憶する。また、撮影オブジェクト決定部１１０６は、１番目の点（ｘ_１，ｙ_１，ｚ_１）と位置情報（Ｘ，Ｙ，Ｚ）との高さ方向の角度（θ１２）を算出し、当該角度（θ１２）をバッファに一時記憶する。同様に、撮影オブジェクト決定部１１０６は、判断対象となるオブジェクト（オブジェクト識別子「１」のオブジェクト）の領域情報の中の２番目の点から４番目の各点と位置情報（Ｘ，Ｙ，Ｚ）との平面上の角度（θ１２，θ１３，θ１４）を算出し、当該角度（θ１２，θ１３，θ１４）もバッファに一時記憶する。バッファには、（θ１１，θ１２，θ１３，θ１４）が格納されたことになる。さらに、同様に、撮影オブジェクト決定部１１０６は、判断対象となるオブジェクト（オブジェクト識別子「１」のオブジェクト）の領域情報の中の２番目の点から４番目の各点と位置情報（Ｘ，Ｙ，Ｚ）との高さ方向の角度（θ２２，θ２３，θ２４）を算出し、当該角度（θ２２，θ２３，θ２４）もバッファに一時記憶する。バッファには、（θ２１，θ２２，θ２３，θ２４）が格納されたことになる。

次に、撮影オブジェクト決定部１１０６は、バッファに一時格納された角度（θ１１，θ１２，θ１３，θ１４）から、平面上の最小角度（例えば、（θ１１））と最大角度（例えば、（θ１４））とを取得する。

また、撮影オブジェクト決定部１１０６は、バッファに一時格納された角度（θ２１，θ２２，θ２３，θ２４）から、高さ方向の最大角度（θ２４）を取得する。

次に、撮影オブジェクト決定部１１０６は、取得した平面上の最小角度（θ１１）と最大角度（θ１４）の領域すべてが、既に登録されている領域であるか否かを判断する。ここで、撮影オブジェクト決定部１１０６は、取得した最小角度（θ１１）と最大角度（θ１４）の領域は、可視領域であると判断した、とする。そして、撮影オブジェクト決定部１１０６は、オブジェクト識別子「１」のオブジェクトは、撮影オブジェクトであると判断する。

なお、ここで、例えば、撮影オブジェクト決定部１１０６は、取得した平面上の最小角度（θ１１）と最大角度（θ１４）の領域の一部が、既に登録されている領域ではないと判断した場合も、可視領域であると判断する。つまり、撮影オブジェクト決定部１１０６は、オブジェクト識別子「１」のオブジェクトが、撮影オブジェクトであると判断する。また、例えば、撮影オブジェクト決定部１１０６は、取得した平面上の最小角度（θ１１）と最大角度（θ１４）の領域のすべてが、既に登録されている角度の領域であると判断した場合でも、高さ方向の最大角度（θ２４）が、登録されている高さ方向の最大角度より大きい場合、平面上の最小角度（θ１１）と最大角度（θ１４）の領域において、可視領域であると判断する。つまり、撮影オブジェクト決定部１１０６は、オブジェクト識別子「１」のオブジェクトが、撮影オブジェクトであると判断するのである。

次に、撮影オブジェクト決定部１１０６は、「θ１１＜＝不可視領域＜＝θ１４」を新たな不可視領域とする。つまり、撮影オブジェクト決定部１１０６は、例えば、「０＜＝不可視領域角度＜（θＡ−（θａ／２））」および「（θＡ＋（θａ／２））＜不可視領域角度＜＝３６０」と「θ１１＜＝不可視領域＜＝θ１４」とをマージした平面上の不可視領域角度を記録媒体に登録する。そして、登録されている高さ方向の最大角度が（θ２４）より小さい場合、この平面上の領域に対応付けて、撮影オブジェクト決定部１１０６は、高さ方向の最大角度（θ２４）を登録する。

次に、撮影オブジェクト決定部１１０６は、１番目のオブジェクトのオブジェクト識別子「１」を図示しない記憶媒体に格納する。

次に、撮影オブジェクト決定部１１０６は、登録されている不可視領域、または可視領域から、可視領域が存在する、と判断した、とする。

以上の処理を、図１７の２番目以降のオブジェクトに対しても行い、撮影オブジェクトを決定する。

そして、撮影オブジェクト決定部１１０６は、登録されている不可視領域、または可視領域から、可視領域が存在しない、と判断するまで、上記の検査（撮影オブジェクトの決定のための検査）を繰り返す。そして、撮影オブジェクト決定部１１０６は、撮影オブジェクトのオブジェクト識別子「１」、「３」、「２５」を取得した、とする。

次に、広告情報取得部１１０７は、撮影オブジェクトの識別子が格納されているバッファから、１番目の撮影オブジェクトの識別子「１」を取得する。

次に、広告情報取得部１１０７は、１番目の撮影オブジェクトの識別子「１」に対応する広告情報を、広告管理情報管理表から検索する。そして、広告情報取得部１１０７は、識別子「１」に対応する領域情報「（ｘ_１，ｙ_１，ｚ_１）（ｘ_２，ｙ_２，ｚ_２）（ｘ_３，ｙ_３，ｚ_３）（ｘ_４，ｙ_４，ｚ_４）」を取得する。次に、広告情報取得部１１０７は、領域情報から、カメラ上の表示領域情報「（Ｘ_１，Ｙ_１）（Ｘ_２，Ｙ_２）（Ｘ_３，Ｙ_３）（Ｘ_４，Ｙ_４）」を算出する。つまり、広告情報取得部１１０７は、例えば、（緯度，経度，高度）の情報を、カメラ上の座標情報（Ｘ，Ｙ）に、カメラの端末情報を用いて、写像変換して取得する。次に、広告情報取得部１１０７は、例えば、オブジェクト識別子「１」に対応する広告情報と、カメラ上の表示領域情報「（Ｘ_１，Ｙ_１）（Ｘ_２，Ｙ_２）（Ｘ_３，Ｙ_３）（Ｘ_４，Ｙ_４）」とを有するオブジェクト広告情報を構成し、記録媒体に一時蓄積する。

次に、広告情報取得部１１０７は、２番目の撮影オブジェクトの識別子「３」を取得する。そして、オブジェクト識別子「３」に対応する２つの広告情報を、広告管理情報管理表から検索する。そして、広告情報取得部１１０７は、２番目の撮影オブジェクトの識別子「３」に対応する領域情報「（ｘ_１１，ｙ_１１，ｚ_１１）（ｘ_１２，ｙ_１２，ｚ_１２）（ｘ_１３，ｙ_１３，ｚ_１３）（ｘ_１４，ｙ_１４，ｚ_１４）」を取得する。次に、広告情報取得部１１０７は、領域情報から、カメラ上の表示領域情報「（Ｘ_１１，Ｙ_１１）（Ｘ_１２，Ｙ_１２）（Ｘ_１３，Ｙ_１３）（Ｘ_１４，Ｙ_１４）」を算出する。次に、広告情報取得部１１０７は、例えば、オブジェクト識別子「３」に対応する２つの広告情報と、カメラ上の表示領域情報「（Ｘ_１１，Ｙ_１１）（Ｘ_１２，Ｙ_１２）（Ｘ_１３，Ｙ_１３）（Ｘ_１４，Ｙ_１４）」とを有するオブジェクト広告情報を構成し、記録媒体に一時蓄積する。

さらに、広告情報取得部１１０７は、３番目の撮影オブジェクトの識別子「２５」を取得する。そして、広告情報取得部１１０７は、オブジェクト識別子「２５」に対応する広告情報を、広告管理情報管理表から検索しようとするが、取得できない。オブジェクト識別子「２５」に対応する広告情報が、広告管理情報管理表に格納されていないからである。

次に、サーバ送信部１１０８は、広告情報取得部１１０７が一時格納した２つのオブジェクト広告情報を端末装置１２に送信する。

次に、受信部１２５は、端末情報の送信に対応して、２つのオブジェクト広告情報を受信する。

次に、出力部１２６は、受信したオブジェクト広告情報を出力する処理を行う。出力例を図１５に示す。図１５は、受信されたすべての広告情報を一度に出力している。また、広告情報と、対応するオブジェクトとの対応がとれる態様で、広告情報が出力されている。

ただし、広告情報は、撮影されているオブジェクトの上に表示されても良い。また、２以上の広告情報が存在する場合、タイムシェアリングで、出力する広告情報を切り替えても良い（図１６参照）。図１６によれば、広告情報を出力する第二のディスプレイには、一の広告情報のみが出力されており、その広告に対応するオブジェクトが四角で表示され、当該撮影オブジェクトが他のオブジェクトと比較して、視覚的に異なる態様で表示されている。

なお、上記において、端末装置１２からの距離が最も近い撮影オブジェクトの広告情報のみを出力しても良い。また、端末装置１２の最も中央部に存在する撮影オブジェクトの広告情報のみを出力しても良い。

以上、本実施の形態によれば、カメラで撮影しているオブジェクトを認識し、かかるオブジェクトに対応付けられている広告情報を出力することができる。したがって、ユーザは、自分の目で見ている建物やランドマークや公園などの広告情報を非常に簡単に得ることができる。

また、本実施の形態によれば、撮影オブジェクトを検知する処理を適切に打ち切ることにより、高速な処理が可能となる。そのために、端末装置はナビゲーションシステムなどにも利用できる。

また、本実施の形態によれば、オブジェクトの高さをも考慮するので、例えば、ある建物の後ろに見えている建物に対応付けられている広告情報も得ることができる。

また、本実施の形態によれば、出力される広告情報は、カメラ上のオブジェクトの表示領域（枠）の大きさに合わせて縮小、拡大されるので、オブジェクトのサイズが一目瞭然に分かる。

また、本実施の形態によれば、２画面のうちの１画面に広告情報が出力されることにより、カメラの映像を邪魔せずに、ユーザは、広告情報を見ることができる。

さらに、本実施の形態によれば、画面上の映像を固定することにより、広告情報とオブジェクトとをゆっくり、楽な姿勢で閲覧できる。

なお、本実施の形態における処理は、ソフトウェアで実現しても良い。そして、このソフトウェアをソフトウェアダウンロード等により配布しても良い。また、このソフトウェアをＣＤ−ＲＯＭなどの記録媒体に記録して流布しても良い。なお、このことは、本明細書における他の実施の形態においても該当する。なお、本実施の形態におけるサーバ装置を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、記録媒体に、オブジェクトを識別するオブジェクト識別子と、当該オブジェクトが存在する領域を示す領域情報とを有する１以上のオブジェクト情報と、オブジェクト識別子と広告情報とを有する１以上の広告管理情報とを格納しており、コンピュータを、端末装置から、当該端末装置の位置を示す位置情報と当該端末装置が向いている方向を示す方向情報とを有する端末情報を受信するサーバ受信部と、前記端末情報が有する位置情報と、前記端末情報が有する方向情報と、予め格納されているまたは前記端末情報が有する視野角とを、前記記録媒体の各オブジェクト情報の領域情報に適用し、前記端末装置が撮影している１以上のオブジェクトを決定する撮影オブジェクト決定部と、前記撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する１以上の広告情報を、前記記録媒体から取得する広告情報取得部と、前記１以上の広告情報を有する１以上のオブジェクト広告情報を、前記端末装置に送信するサーバ送信部として機能させるためのプログラム、である。

また、上記プログラムにおいて、前記領域情報は、地図上での二次元の領域を示す二次元領域情報とオブジェクトの高さを示す高さ情報を有し、前記撮影オブジェクト決定部は、前記端末情報が有する位置情報および方向情報と、予め格納されているまたは前記端末情報が有する視野角とを用いて、三次元空間上での撮影領域を取得し、当該撮影領域を、前記オブジェクト情報格納部の各オブジェクト情報が有する領域情報に対して適用し、前記端末装置が撮影している１以上のオブジェクトを決定し、かつ、前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが前記端末装置に撮影されているか否かの検査を終了することは好適である。

また、上記プログラムにおいて、コンピュータを、前記オブジェクト情報格納部の１以上のオブジェクト情報に対応するオブジェクトと前記端末装置との距離を、前記各オブジェクトのオブジェクト情報と前記端末情報が有する位置情報とから、オブジェクトごとに算出する距離算出部としてさらに機能させ、前記撮影オブジェクト決定部は、前記端末装置からの距離が近い順にオブジェクトに対応するオブジェクト情報をソートし、前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影している１以上のオブジェクトを決定することは好適である。

また、上記プログラムにおいて、前記撮影オブジェクト決定部は、前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域のオブジェクトであり、かつ、前記端末装置からの距離が閾値以内のオブジェクトのみを検査し、前記端末装置が撮影している１以上のオブジェクトを決定することは好適である。

また、上記プログラムにおいて、前記撮影オブジェクト決定部は、前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影しているとして決定したオブジェクトの数が閾値になった場合に、前記検査を終了することは好適である。

また、上記プログラムにおいて、前記広告情報取得部は、前記撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する広告情報を前記記憶媒体から取得し、かつ、前記１以上の各オブジェクトに対応する領域情報を前記記憶媒体から取得し、前記サーバ送信部は、前記広告情報取得部が取得した広告情報と、領域情報または領域情報に対応するカメラ上の表示領域情報とを有する１以上のオブジェクト広告情報を、前記端末装置に送信することは好適である。

また、上記プログラムにおいて、前記広告情報取得部は、前記撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する広告情報を前記記憶媒体から取得し、かつ、前記１以上の各オブジェクトに対応する領域情報を前記記憶媒体から取得し、前記サーバ送信部は、前記広告情報取得部が取得した広告情報と、領域情報または領域情報に対応するカメラ上の表示領域情報とを有する１以上のオブジェクト広告情報を、前記端末装置に送信することは好適である。

また、上記プログラムにおいて、コンピュータを、前記サーバ送信部がオブジェクト広告情報を前記端末装置に送信した場合、広告送信履歴情報を構成する広告送信履歴情報構成部と、前記広告送信履歴情報を記憶媒体に蓄積する広告送信履歴情報蓄積部としてさらに機能させることは好適である。

また、上記プログラムにおいて、コンピュータを、前記広告送信履歴情報格納部の１以上の広告送信履歴情報を用いて、課金処理を行う課金処理部としてさらに機能させることは好適である。

また、本実施の形態における端末装置を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、コンピュータを、端末装置の位置を示す位置情報と、当該端末装置が向いている方向を示す方向情報とを取得する端末情報取得部と、映像を取得するカメラ部と、前記カメラ部が取得した映像を出力するカメラ映像出力手段を具備する出力部と、前記端末情報取得部が取得した位置情報と、方向情報とを有する端末情報をサーバ装置に送信する送信部と、前記端末情報の送信に対応して、前記１以上のオブジェクト広告情報を受信する受信部として機能させるためのプログラム、である。

また、上記プログラムにおいて、前記出力部は、前記１以上のオブジェクト広告情報が有する広告情報を、前記１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または前記１以上のオブジェクト広告情報が有する表示領域情報が示すカメラ上の領域に出力するものとして、コンピュータを機能させることは好適である。

さらに、上記プログラムにおいて、前記出力部は、前記１以上のオブジェクト広告情報が有する広告情報を、前記１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または前記１以上のオブジェクト広告情報が有する表示領域情報が示すカメラ上の領域以外の領域に出力し、かつ、前記１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または前記１以上のオブジェクト広告情報が有する表示領域情報が示すオブジェクトを、他のオブジェクトと視覚的に区別できる態様で出力するものとして、コンピュータを機能させることは好適である。
（実施の形態２）

本実施の形態において、スタンドアロンの端末装置について説明する。つまり、本実施の形態において、端末装置は、サーバ装置と通信せずに、実施の形態１で説明した機能を実現する。

図１９は、本実施の形態における端末装置２のブロック図である。端末装置２は、受付部１２１、オブジェクト情報格納部１１０１、広告管理情報格納部１１０２、カメラ部１２２、端末情報取得部１２３、距離算出部１１０５、撮影オブジェクト決定部１１０６、広告情報取得部１１０７、および出力部１２６を具備する。

なお、ここでの撮影オブジェクト決定部１１０６は、端末情報取得部１２３が取得した端末情報が有する位置情報と、端末情報が有する方向情報と、予め格納されているまたは端末情報が有する視野角とを、オブジェクト情報格納部１１０１の各オブジェクト情報の領域情報に適用し、端末装置１２が撮影している１以上のオブジェクトを決定する。撮影オブジェクトの決定アルゴリズムは、実施の形態１で説明した通りである。

次に、端末装置２の動作について、図２０のフローチャートを用いて説明する。図１９のフローチャートにおいて、図４または図９と同じステップの処理について、説明を省略する。

以下、本実施の形態における端末装置２の具体的な動作は、実施の形態１で述べた動作と同様であるので、説明を省略する。

以上、本実施の形態によれば、カメラで撮影しているオブジェクトを認識し、かかるオブジェクトに対応付けられている広告情報を出力することができる。したがって、ユーザは、自分の目で見ている建物やランドマークや公園などの広告情報を非常に簡単に得ることができる。

また、本実施の形態によれば、撮影オブジェクトを検知する処理を適切に打ち切ることにより、高速な処理が可能となる。そのために、端末装置はナビゲーションシステムなどにも利用できる。

また、本実施の形態によれば、オブジェクトの高さをも考慮するので、例えば、ある建物の後ろに見えている建物に対応付けられている広告情報も得ることができる。

また、本実施の形態によれば、出力される広告情報は、カメラ上のオブジェクトの表示領域（枠）の大きさに合わせて縮小、拡大されるので、オブジェクトのサイズが一目瞭然に分かる。

また、本実施の形態によれば、２画面のうちの１画面に広告情報が出力されることにより、カメラの映像を邪魔せずに、ユーザは、広告情報を見ることができる。

さらに、本実施の形態によれば、画面上の映像を固定することにより、広告情報とオブジェクトとをゆっくり、楽な姿勢で閲覧できる。

また、本実施の形態における端末装置２は、例えば、携帯電話、携帯端末、デジタルカメラ、カメラ機能を有するナビゲーション端末などである。

さらに、本実施の形態における情報処理装置を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、記録媒体に、オブジェクトを識別するオブジェクト識別子と、当該オブジェクトが存在する領域を示す領域情報とを有する１以上のオブジェクト情報と、オブジェクト識別子と広告情報とを有する１以上の広告管理情報とを格納しており、コンピュータを、端末装置の位置を示す位置情報と、当該端末装置が向いている方向を示す方向情報と、視野角とを有する端末情報を取得する端末情報取得部と、映像を取得するカメラ部と、前記カメラ部が取得した映像を出力するカメラ映像出力手段を具備する出力部と、前記端末情報が有する位置情報と方向情報と視野角とを、前記記録媒体の各オブジェクト情報の領域情報に適用し、前記端末装置が撮影している１以上のオブジェクトを決定する撮影オブジェクト決定部と、前記撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する１以上の広告情報を、前記記録媒体から取得する広告情報取得部とを具備し、前記出力部は、前記１以上の広告情報をも出力し、前記撮影オブジェクト決定部は、前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが前記端末装置に撮影されているか否かの検査を終了するものとして機能させるためのプログラム、である。
また、図２１は、本明細書で述べたプログラムを実行して、上述した実施の形態の端末装置、サーバ装置を実現するコンピュータの外観を示す。上述の実施の形態は、コンピュータハードウェア及びその上で実行されるコンピュータプログラムで実現され得る。図２１は、このコンピュータシステム３４０の概観図であり、図２２は、コンピュータシステム３４０の内部構成を示す図である。

図２１において、コンピュータシステム３４０は、ＦＤドライブ３４１１、ＣＤ−ＲＯＭドライブ３４１２を含むコンピュータ３４１と、キーボード３４２と、マウス３４３と、モニタ３４４とを含む。

図２２において、コンピュータ３４１は、ＦＤドライブ３４１１、ＣＤ−ＲＯＭドライブ３４１２に加えて、ＭＰＵ３４１３と、ＣＤ−ＲＯＭドライブ３４１２及びＦＤドライブ３４１１に接続されたバス３４１４と、ブートアッププログラム等のプログラムを記憶するためのＲＯＭ３４１５とに接続され、アプリケーションプログラムの命令を一時的に記憶するとともに一時記憶空間を提供するためのＲＡＭ３４１６と、アプリケーションプログラム、システムプログラム、及びデータを記憶するためのハードディスク３４１７とを含む。ここでは、図示しないが、コンピュータ３４１は、さらに、ＬＡＮへの接続を提供するネットワークカードを含んでも良い。

コンピュータシステム３４０に、上述した実施の形態の情報システム等の機能を実行させるプログラムは、ＣＤ−ＲＯＭ３５０１、またはＦＤ３５０２に記憶されて、ＣＤ−ＲＯＭドライブ３４１２またはＦＤドライブ３４１１に挿入され、さらにハードディスク３４１７に転送されても良い。これに代えて、プログラムは、図示しないネットワークを介してコンピュータ３４１に送信され、ハードディスク３４１７に記憶されても良い。プログラムは実行の際にＲＡＭ３４１６にロードされる。プログラムは、ＣＤ−ＲＯＭ３５０１、ＦＤ３５０２またはネットワークから直接、ロードされても良い。

プログラムは、コンピュータ３４１に、上述した実施の形態の端末装置等の機能を実行させるオペレーティングシステム（ＯＳ）、またはサードパーティープログラム等は、必ずしも含まなくても良い。プログラムは、制御された態様で適切な機能（モジュール）を呼び出し、所望の結果が得られるようにする命令の部分のみを含んでいれば良い。コンピュータシステム３４０がどのように動作するかは周知であり、詳細な説明は省略する。

なお、上記プログラムにおいて、情報を送信するステップや、情報を受信するステップなどでは、ハードウェアによって行われる処理、例えば、モデムやインターフェースカードなどで行われる処理（ハードウェアでしか行われない処理）は含まれない。

また、上記プログラムを実行するコンピュータは、単数であってもよく、複数であってもよい。すなわち、集中処理を行ってもよく、あるいは分散処理を行ってもよい。

また、上記各実施の形態において、一の装置に存在する２以上の通信手段は、物理的に一の媒体で実現されても良いことは言うまでもない。

また、上記各実施の形態において、各処理（各機能）は、単一の装置（システム）によって集中処理されることによって実現されてもよく、あるいは、複数の装置によって分散処理されることによって実現されてもよい。
本発明は、以上の実施の形態に限定されることなく、種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。

以上のように、本発明にかかる情報システムは、撮影されているオブジェクトを短時間に決定し、短時間に広告を出力できるという効果を有し、携帯端末システム等として有用である。

１ 情報システム
２、１２ 端末装置
１１ サーバ装置
１２１ 受付部
１２２ カメラ部
１２３ 端末情報取得部
１２４ 送信部
１２５ 受信部
１２６ 出力部
１２７ 出力固定部
１１０１ オブジェクト情報格納部
１１０２ 広告管理情報格納部
１１０３ 広告送信履歴情報格納部
１１０４ サーバ受信部
１１０５ 距離算出部
１１０６ 撮影オブジェクト決定部
１１０７ 広告情報取得部
１１０８ サーバ送信部
１１０９ 広告送信履歴情報構成部
１１１０ 広告送信履歴情報蓄積部
１１１１ 課金処理部
１２３１ 位置情報取得手段
１２３２ 方向情報取得手段
１２６１ カメラ映像出力手段

Claims (16)

1. サーバ装置と端末装置とを具備する情報システムであって、
   前記サーバ装置は、
   オブジェクトを識別するオブジェクト識別子と、当該オブジェクトが存在する領域を示す領域情報とを有するオブジェクト情報を、１以上格納し得るオブジェクト情報格納部と、
   オブジェクト識別子と広告情報とを有する広告管理情報を、１以上格納し得る広告管理情報格納部と、
   前記端末装置から、当該端末装置の位置を示す位置情報と当該端末装置が向いている方向を示す方向情報とを有する端末情報を受信するサーバ受信部と、
   前記端末情報が有する位置情報と、前記端末情報が有する方向情報と、予め格納されているまたは前記端末情報が有する視野角とを、前記オブジェクト情報格納部の各オブジェクト情報の領域情報に適用し、前記端末装置が撮影している１以上のオブジェクトを決定する撮影オブジェクト決定部と、
   前記撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する１以上の広告情報を、前記広告管理情報格納部から取得する広告情報取得部と、
   前記１以上の広告情報を有する１以上のオブジェクト広告情報を、前記端末装置に送信するサーバ送信部とを具備し、
   前記端末装置は、
   当該端末装置の位置を示す位置情報と、当該端末装置が向いている方向を示す方向情報とを取得する端末情報取得部と、
   映像を取得するカメラ部と、
   前記カメラ部が取得した映像を出力するカメラ映像出力手段を具備する出力部と、
   前記端末情報取得部が取得した位置情報と、方向情報とを有する端末情報を前記サーバ装置に送信する送信部と、
   前記端末情報の送信に対応して、前記１以上のオブジェクト広告情報を受信する受信部とを具備し、
   前記出力部は、
   前記１以上のオブジェクト広告情報が有する広告情報をも出力し、
   前記撮影オブジェクト決定部は、
   前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが前記端末装置に撮影されているか否かの検査を終了する情報システム。
2. 前記領域情報は、地図上での二次元の領域を示す二次元領域情報とオブジェクトの高さを示す高さ情報を有し、
   前記撮影オブジェクト決定部は、
   前記端末情報が有する位置情報および方向情報と、予め格納されているまたは前記端末情報が有する視野角とを用いて、三次元空間上での撮影領域を取得し、当該撮影領域を、前記オブジェクト情報格納部の各オブジェクト情報が有する領域情報に対して適用し、前記端末装置が撮影している１以上のオブジェクトを決定し、かつ、
   前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが前記端末装置に撮影されているか否かの検査を終了する請求項１記載の情報システム。
3. 前記サーバ装置は、
   前記オブジェクト情報格納部の１以上のオブジェクト情報に対応するオブジェクトと前記端末装置との距離を、前記各オブジェクトのオブジェクト情報と前記端末情報が有する位置情報とから、オブジェクトごとに算出する距離算出部をさらに具備し、
   前記撮影オブジェクト決定部は、
   前記端末装置からの距離が近い順にオブジェクトに対応するオブジェクト情報をソートし、前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影している１以上のオブジェクトを決定する請求項１または請求項２記載の情報システム。
4. 前記撮影オブジェクト決定部は、
   前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域のオブジェクトであり、かつ、前記端末装置からの距離が閾値以内のオブジェクトのみを検査し、前記端末装置が撮影している１以上のオブジェクトを決定する請求項１から請求項３いずれか記載の情報システム。
5. 前記撮影オブジェクト決定部は、
   前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影しているとして決定したオブジェクトの数が閾値になった場合に、前記検査を終了する請求項１から請求項３いずれか記載の情報システム。
6. 前記広告情報取得部は、
   前記撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する広告情報を前記広告管理情報格納部から取得し、かつ、前記１以上の各オブジェクトに対応する領域情報を前記オブジェクト情報格納部から取得し、
   前記サーバ送信部は、
   前記広告情報取得部が取得した広告情報と、領域情報または領域情報に対応するカメラ上の表示領域情報とを有する１以上のオブジェクト広告情報を、前記端末装置に送信し、
   前記出力部は、
   前記１以上のオブジェクト広告情報が有する広告情報を、前記１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または前記１以上のオブジェクト広告情報が有する表示領域情報が示すカメラ上の領域に出力する請求項１から請求項５いずれか記載の情報システム。
7. 前記広告情報取得部は、
   前記撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する広告情報を前記広告管理情報格納部から取得し、かつ、前記１以上の各オブジェクトに対応する領域情報を前記オブジェクト情報格納部から取得し、
   前記サーバ送信部は、
   前記広告情報取得部が取得した広告情報と、領域情報または領域情報に対応するカメラ上の表示領域情報とを有する１以上のオブジェクト広告情報を、前記端末装置に送信し、
   前記出力部は、
   前記１以上のオブジェクト広告情報が有する広告情報を、前記１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または前記１以上のオブジェクト広告情報が有する表示領域情報が示すカメラ上の領域以外の領域に出力し、かつ、前記１以上のオブジェクト広告情報が有する領域情報に対応する表示領域情報または前記１以上のオブジェクト広告情報が有する表示領域情報が示すオブジェクトを、他のオブジェクトと視覚的に区別できる態様で出力する請求項１から請求項５いずれか記載の情報システム。
8. 前記サーバ装置は、
   オブジェクト広告情報を前記端末装置に送信した履歴を示す情報であり、送信回数が判断できる情報を含む広告送信履歴情報を格納し得る広告送信履歴情報格納部と、
   前記サーバ送信部がオブジェクト広告情報を前記端末装置に送信した場合、広告送信履歴情報を構成する広告送信履歴情報構成部と、
   前記広告送信履歴情報を前記広告送信履歴情報格納部に蓄積する広告送信履歴情報蓄積部とをさらに具備する請求項１から請求項７いずれか記載の情報システム。
9. 前記サーバ装置は、
   前記広告送信履歴情報格納部の１以上の広告送信履歴情報を用いて、課金処理を行う課金処理部をさらに具備する請求項８記載の情報システム。
10. オブジェクトを識別するオブジェクト識別子と、当該オブジェクトが存在する領域を示す領域情報とを有するオブジェクト情報を、１以上格納し得るオブジェクト情報格納部と、
    オブジェクト識別子と広告情報とを有する広告管理情報を、１以上格納し得る広告管理情報格納部と、
    端末装置の位置を示す位置情報と、当該端末装置が向いている方向を示す方向情報と、視野角とを有する端末情報を取得する端末情報取得部と、
    映像を取得するカメラ部と、
    前記カメラ部が取得した映像を出力するカメラ映像出力手段を具備する出力部と、
    前記端末情報が有する位置情報と方向情報と視野角とを、前記オブジェクト情報格納部の各オブジェクト情報の領域情報に適用し、前記端末装置が撮影している１以上のオブジェクトを決定する撮影オブジェクト決定部と、
    前記撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する１以上の広告情報を、前記広告管理情報格納部から取得する広告情報取得部とを具備し、
    前記出力部は、
    前記１以上の広告情報をも出力し、
    前記撮影オブジェクト決定部は、
    前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが前記端末装置に撮影されているか否かの検査を終了する端末装置。
11. 請求項１から請求項９いずれか記載の情報システムを構成するサーバ装置。
12. 請求項１から請求項９いずれか記載の情報システムを構成する端末装置。
13. 記録媒体に、
    オブジェクトを識別するオブジェクト識別子と、当該オブジェクトが存在する領域を示す領域情報とを有する１以上のオブジェクト情報と、
    オブジェクト識別子と広告情報とを有する１以上の広告管理情報とを格納しており、
    端末情報取得部、カメラ部、出力部、撮影オブジェクト決定部、および広告情報取得部により実現される広告出力方法であって、
    前記端末情報取得部が、端末装置の位置を示す位置情報と、当該端末装置が向いている方向を示す方向情報と、視野角とを有する端末情報を取得する端末情報取得ステップと、
    前記カメラ部が、映像を取得するカメラステップと、
    前出力部記が、前記取得された映像を出力する出力ステップと、
    前記撮影オブジェクト決定部が、前記端末情報が有する位置情報と方向情報と視野角とを、前記記憶媒体の各オブジェクト情報の領域情報に適用し、端末装置が撮影している１以上のオブジェクトを決定する撮影オブジェクト決定ステップと、
    前記が、前記撮影オブジェクト決定ステップで決定された１以上の各オブジェクトに対応する１以上の広告情報を、前記記憶媒体から取得する広告情報取得ステップとを具備し、
    前記出力ステップは、
    前記１以上の広告情報をも出力し、
    前記撮影オブジェクト決定ステップは、
    前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが前記端末装置に撮影されているか否かの検査を終了する広告出力方法。
14. 記録媒体に、
    オブジェクトを識別するオブジェクト識別子と、当該オブジェクトが存在する領域を示す領域情報とを有する１以上のオブジェクト情報と、
    オブジェクト識別子と広告情報とを有する１以上の広告管理情報とを格納しており、
    コンピュータを、
    端末装置から、当該端末装置の位置を示す位置情報と当該端末装置が向いている方向を示す方向情報とを有する端末情報を受信するサーバ受信部と、
    前記端末情報が有する位置情報と、前記端末情報が有する方向情報と、予め格納されているまたは前記端末情報が有する視野角とを、前記記録媒体の各オブジェクト情報の領域情報に適用し、前記端末装置が撮影している１以上のオブジェクトを決定する撮影オブジェクト決定部と、
    前記撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する１以上の広告情報を、前記記録媒体から取得する広告情報取得部と、
    前記１以上の広告情報を有する１以上のオブジェクト広告情報を、前記端末装置に送信するサーバ送信部として機能させるためのプログラム。
15. コンピュータを、
    端末装置の位置を示す位置情報と、当該端末装置が向いている方向を示す方向情報とを取得する端末情報取得部と、
    映像を取得するカメラ部と、
    前記カメラ部が取得した映像を出力するカメラ映像出力手段を具備する出力部と、
    前記端末情報取得部が取得した位置情報と、方向情報とを有する端末情報をサーバ装置に送信する送信部と、
    前記端末情報の送信に対応して、前記１以上のオブジェクト広告情報を受信する受信部として機能させるためのプログラム。
16. 記録媒体に、
    オブジェクトを識別するオブジェクト識別子と、当該オブジェクトが存在する領域を示す領域情報とを有する１以上のオブジェクト情報と、
    オブジェクト識別子と広告情報とを有する１以上の広告管理情報とを格納しており、
    コンピュータを、
    端末装置の位置を示す位置情報と、当該端末装置が向いている方向を示す方向情報と、視野角とを有する端末情報を取得する端末情報取得部と、
    映像を取得するカメラ部と、
    前記カメラ部が取得した映像を出力するカメラ映像出力手段を具備する出力部と、
    前記端末情報が有する位置情報と方向情報と視野角とを、前記記録媒体の各オブジェクト情報の領域情報に適用し、前記端末装置が撮影している１以上のオブジェクトを決定する撮影オブジェクト決定部と、
    前記撮影オブジェクト決定部が決定した１以上の各オブジェクトに対応する１以上の広告情報を、前記記録媒体から取得する広告情報取得部とを具備し、
    前記出力部は、
    前記１以上の広告情報をも出力し、
    前記撮影オブジェクト決定部は、
    前記端末装置からの距離が近い順にオブジェクトを検査し、前記端末装置が撮影しているとして先に決定したオブジェクトの撮影により不可視となる領域の情報を不可視領域として登録していき、可視領域がなくなった場合に、オブジェクトが前記端末装置に撮影されているか否かの検査を終了するものとして機能させるためのプログラム。