JP2020144821A - 画像表示システム、画像表示方法、プログラム - Google Patents

Abstract

【課題】広告等に用いられる画像の表示の効果をより向上させることが可能な画像表示システムを提供すること。【解決手段】画像を配信する画像配信装置１０から端末装置３０が画像を受信する画像表示システムであって、前記画像配信装置は、透明な領域を有する第１の画像データと、前記第１の画像データと対応付けられた第２の画像データの登録を受け付ける配信画像受付部１５と、前記配信画像受付部が受け付けた前記第１の画像データと前記第２の画像データを前記端末装置に送信する配信部１２と、を有し、前記端末装置は、前記画像配信装置から前記第１の画像データと前記第２の画像データを取得する取得部３９と、前記取得部が取得した前記第１の画像データと前記第２の画像データを重ねて画面に表示する表示部４０と、を有することを特徴とする。【選択図】図３

Description

本発明は、画像表示システム、画像表示方法、及びプログラムに関する。

Ｗｅｂページに設けられた広告枠に広告主が広告を表示させる配信型のディスプレイ広告が知られている。広告主は様々なＷｅｂサイトが提供する広告枠に製品やサービスの広告を表示させることができる。広告枠に表示された製品やサービスに興味を持った閲覧者は広告枠をクリック（又はタップ）するので、広告主は閲覧者を自社のＷｅｂサイトに呼び込むことができる。

広告主としては閲覧者が広告をクリックする頻度を向上させたいが、１つのＷｅｂページに掲載される広告の数は増大傾向にあり、広告主は閲覧者の注意を引きつける表示方法を工夫している（例えば、特許文献１参照。）。特許文献１には、動画広告を配信することで広告の効果（クリック率）を高める技術について開示されている。人は動く物に視線を奪われやすいという傾向があるため、広告の注目度を高め広告の効果を向上させることができる。

しかしながら、動画では時系列に映像が移り変わるだけであり、閲覧者が興味を持つことが期待される態様で動画を表示することができない。したがって、必ずしもクリック率を向上させることができるとは限らなかった。

本発明は、上記課題に鑑み、広告等に用いられる画像の表示の効果をより向上させることが可能な画像表示システムを提供することを目的とする。

上記課題に鑑み、画像を配信する画像配信装置から端末装置が画像を受信する画像表示システムであって、前記画像配信装置は、透明な領域を有する第１の画像データと、前記第１の画像データと対応付けられた第２の画像データの登録を受け付ける配信画像受付部と、前記配信画像受付部が受け付けた前記第１の画像データと前記第２の画像データを前記端末装置に送信する配信部と、を有し、
前記端末装置は、前記画像配信装置から前記第１の画像データと前記第２の画像データを取得する取得部と、前記取得部が取得した前記第１の画像データと前記第２の画像データを重ねて画面に表示する表示部と、を有することを特徴とする。

広告等に用いられる画像の表示の効果をより向上させることが可能な画像表示システムを提供することができる。

広角画像の一例として全天球画像について説明する図の一例である。 画像表示システムの概略を説明する図である。 背景画像に重ねて表示される全天球画像を説明する図の一例である。 画像表示システムの一例の構成図である。 コンピュータシステムの一例のハードウェア構成図である。 端末装置の一例のハードウェア構成図である。 全天球カメラの一例の使用イメージ図である。 全天球カメラで撮像された画像から全天球画像が作成されるまでの処理の概略を説明する図である。 全天球カメラで撮像された画像から全天球画像が作成されるまでの処理の概略を説明する図である。 閲覧者の視線を説明する図の一例である。 所定領域情報と所定領域画像の関係の一例を示した図である。 Ｗｅｂページが使用する情報を模式的に説明する図の一例である。 端末装置、広告主Ｗｅｂサーバ、パートナーサイトＷｅｂサーバ、画像配信装置、ＳＳＰ及びＤＳＰの機能をブロック状に示す一例の機能ブロック図である。 配信画像受付部と画像登録端末の機能をブロック状に示す一例の機能ブロック図である。 画像登録端末のディスプレイに表示された一例の配信画像登録画面を示す図である。 画像表示システムが広告として表示される全天球画像を配信する手順を説明する一例のシーケンス図である。 端末装置が配信画像を表示する手順を示す一例のフローチャート図である。 背景画像と全天球画像を重ね合わせた場合に広告枠に表示される一例の画像を示す図である。 端末装置に表示された広告枠における背景画像と全天球画像の表示例を示す図である。 広告データが配信されるいくつかの形態を示す図である。 ターンテーブル型の広告について説明する図の一例である。 仮想的なカメラにオブジェクトを透視投影変換する様子を模式的に示す図である。 ある角度で広告枠に表示された一例のターンテーブル型広告を示す図である。 角度変更画像及び全天球画像の一例を示す図である。 画像登録端末のディスプレイに表示された一例の配信画像登録画面を示す図である。 端末装置が全天球画像に角度変更画像を重ねる処理を説明する図である。 端末装置が全天球画像に角度変更画像を重ねて表示する手順を示す一例のフローチャート図である。 端末装置に表示された広告枠における角度変更画像と全天球画像の表示例を示す図である。

以下、本発明を実施するための方法の一例として画像表示システムと画像表示システムが行う画像表示方法について説明する。

＜本実施形態の画像表示システムの概略＞
図１は、広角画像の一例として全天球画像６について説明する図の一例である。図１（ａ）は、３次元の立体球ＣＳで表された全天球画像６を示し、図１（ｂ）は正距円筒射影図法で表された画像（以下、「正距円筒射影画像」という）である全天球画像６を示す。全天球カメラで生成された全天球画像６は図１（ｂ）のような正距円筒射影画像が立体球ＣＳに張り合わされた三次元の構造を有している。仮想カメラＩＣは閲覧者の視点に対応し、図１（ａ）では全天球画像６の中心に視点がある。閲覧者は仮想カメラＩＣを通るＸ軸、Ｙ軸、Ｚ軸を中心とする３軸の回転を行わせて、全天球画像６の任意の領域を所定領域画像Ｑとして端末装置のディスプレイ上に表示させることができる。

図２は、本実施形態の画像表示システム１００の概略を説明する図である。本実施形態では第三者配信により配信される広告に全天球画像６を用いる画像表示システム１００について説明する。第三者配信とは、媒体社が保有しているサーバでなく広告代理店などが保有するサーバから媒体に広告を配信する仕組みである。第三者配信サーバは広告の配信頻度などのコントロールや広告の効果の計測等を行う。図２では画像配信装置１０が第三者配信サーバに相当する。
（Ｓ１）端末装置３０は広告枠７（広告を表示する表示枠）を有するＷｅｂページをブラウザ８等で開くと、この端末装置３０に広告を表示したいと考えるＤＳＰ２０（Demand−Side Platform）に通知される。端末装置３０はこのＤＳＰ２０に広告を要求する。
（Ｓ２）ＤＳＰ２０は画像配信装置１０に広告を要求する。
（Ｓ３）画像配信装置１０は広告要求を記憶しておき、自機に端末装置３０がアクセスするためのアクセス情報２を生成してＤＳＰ２０に送信する。
（Ｓ４）ＤＳＰ２０は受信したアクセス情報２を端末装置３０に送信する。
（Ｓ５）端末装置３０はアクセス情報２に基づいて画像配信装置１０に対し広告データを要求する。
（Ｓ６）画像配信装置１０はアクセス情報２で要求された広告データ（全天球画像６、背景画像Ｂ等)を端末装置３０に送信する。
（Ｓ７）端末装置３０は広告データを受信して、端末装置３０で動作するブラウザ８が背景画像Ｂに全天球画像６を重ねて広告枠７に表示する。

図３を用いて、背景画像Ｂに重ねて表示される全天球画像６について説明する。図３は、背景画像Ｂに重ねて表示される全天球画像６の概略を説明する図である。図３（ａ）は全天球画像６（第１の画像データの一例）の一例であり、図３（ｂ）は背景画像Ｂ（第２の画像データの一例）の一例である。実施例１において、全天球画像６は２つのタイプに分けられる。１つ目のタイプは、全天球画像は３６０度（４πラジアン）画像の透明レイヤに不透明領域６ａが形成された画像である。２つ目のタイプは３６０度画像の一部に透明領域が設けられた画像である。この２つ目のタイプは、例えば、後述する全天球カメラ９で撮像された、周囲３６０度（４πラジアン）が撮像されている画像の一部に透明領域が形成された画像である。このいずれのタイプの画像でも、図のように矩形で表す場合には正距円筒射影図法など球を平面で表す図法で表示される。したがって、図３（ａ）は水平方向に３６０度の幅があり、垂直方向に１８０度の高さがある。なお、点線は説明のためのものであり、背景画像Ｂと同じ大きさを示す。全天球画像６は広告枠７のサイズよりも大きい。

図３（ｂ）に示す背景画像Ｂは、広告枠７と同程度の大きさであり、そのサイズは正距円筒射影画像よりも小さい。つまり、背景画像Ｂは常に全体が広告枠７に表示された状態であり、背景画像Ｂに重なった全天球画像６の一部（図１の所定領域画像）が広告枠７に表示される。

そして、全天球画像６は透明レイヤに不透明領域６ａが合成された構造を有している。換言すると全天球画像６は全体的に透明だが一部が不透明になっている。図３（ａ）の不透明領域６ａはただの円形だが、不透明領域６ａには任意のコンテンツ（画像や文字など）が配置される。このような全天球画像６と背景画像Ｂがそれぞれ端末装置３０に配信される。

図３（ｃ）（ｄ）は端末装置３０が広告枠７に表示する画像を示している。図３（ｃ）に示すように、端末装置３０は背景画像Ｂに全天球画像６を重ねて表示する。全天球画像６が全体的に透明なので、背景画像Ｂに不透明領域６ａのみが重なって表示される。全天球画像６は広告枠７及び背景画像Ｂよりも大きいので、図３（ｃ）では右端の１つの不透明領域６ａが表示範囲外である。

閲覧者は全天球画像６を上下左右に回転させて、広告枠７に表示されていない範囲を表示させることができる。図３（ｄ）は閲覧者から見て右から左方向に全天球画像６が回転（移動）された状態を示す。背景画像Ｂに変更はないが、広告枠７に表示される（所定領域Ｔとして画角に入る）不透明領域６ａが右から左方向に移動している。そのため、図３（ｄ）では左端の１つの不透明領域６ａが表示範囲外である。これにより、例えば、コンテンツがゲームなどのキャラクターである場合、背景画像Ｂの中を移動している（歩いている）ように見える。

このように、本実施例の画像表示システム１００は、上下左右に回転させることができる全天球画像６の一部を不透明にして、背景画像Ｂと重ねることで、単に全天球画像６が回転するだけでなく、背景に対し動きがある画像閲覧体験を提供できる。

従来、全天球画像６を用いて例えばゲームなどのキャラクターに動きを与えようとする場合、デザイナーが背景画像Ｂを正距円射影筒図法で作成してキャラクターを配置するという作業が必要であったが、背景画像Ｂを正距円筒射影図法で作成するには時間と労力が必要となるという不都合があった。これに対し、本実施例では背景画像Ｂを平面画像で用意し、キャラクターを配置した全天球画像６を重ねることで、キャラクターに動きをもたらすことができる。閲覧者から見ると自分の操作でキャラクターが動くのでインタラクティブ性が向上し、広告としての画像の表示の効果を高めることができる。

例えば、キャラクターの初期位置では背景画像Ｂに描画されている仲間の近くにキャラクターがいるように見せ、全天球画像６が回転（移動）するとキャラクターが背景画像Ｂに対し動いて、キャラクターが背景画像Ｂに描画されている敵の近くにいるように見せることなども可能であり、これまでにない画像の表現が可能になる。

なお、全天球画像６は、３６０度（４πラジアン）の透明レイヤに不透明領域６ａが形成された画像の一例であり、その他に、後述するように図１８（ａ）のように全天球カメラで撮像されることで得られた撮像画像の一例であってもよい。広告枠７に収まらない広角な画像であれば、全天球画像６ではなく通常の平面画像であってもよい。また、広告の効果とは、少なくとも注目させることであるが、更に閲覧者がクリック（又はタップ）することを効果と称してもよい。

＜用語について＞
第１の画像データと第２の画像データが対応付けられるとは、両者が同じ端末装置３０に配信されることをいう。１つの第１の画像データに複数の第２の画像データが対応付けられてもよいし、１つの第２の画像データに複数の第１の画像データが対応付けられてもよい。

また、透明とは、完全に透明な場合だけでなく、半透明の場合を含んでよい。

第１の画像データと第２の画像データが重ねられる場合は、透明な領域を有する第１の画像データが閲覧者から見て手前で、第２の画像データが後ろになる。その他、重ねる際の相対位置、切り取りの有無、などは任意でよい。

また、画像は表示枠に限らず画面（ディスプレイ）の全体に画像が表示されてもよい。

＜システム構成例＞
図４は、画像表示システム１００の概略的な構成図の一例である。画像表示システム１００は、ネットワークＮを介して通信可能な端末装置３０、画像配信装置１０、ＤＳＰ２０、ＳＳＰ（Supply Side Platform）５０、パートナーサイトＷｅｂサーバ６０、及び、広告主Ｗｅｂサーバ７０を有している。

ネットワークＮは、端末装置３０が設置されている施設などに構築されているＬＡＮ、ＬＡＮをインターネットに接続するプロバイダのプロバイダネットワーク、及び、回線事業者が提供する回線等により構築されている。ネットワークＮが複数のＬＡＮを有する場合、ネットワークＮはＷＡＮやインターネットと呼ばれる。ネットワークＮは有線又は無線のどちらで構築されてもよく、また、有線と無線が組み合わされていてもよい。また、端末装置３０が直接、公衆回線網に接続する場合は、ＬＡＮを介さずにプロバイダネットワークに接続することができる。

端末装置３０は、本実施形態においてクライアント端末として動作する情報処理装置である。端末装置３０ではブラウザソフト又はこれと同等の機能を有するアプリケーションソフトウェアが動作しており、端末装置３０が要求したＷｅｂページをパートナーサイトＷｅｂサーバ６０から受信してディスプレイに表示させる。

端末装置３０は、例えばＰＣ（Personal Computer）、タブレット装置、スマートフォン、ＰＤＡ（Personal Digital Assistant）、ゲーム機、ナビゲーション端末、ウェアラブルＰＣなどであるが、Ｗｅｂページを表示させることができればよい。例えば、プリンターがＷｅｂページを表示させる機能やディスプレイを有する場合、プリンターが端末装置３０として使用されてもよい。また、デジタルサイネージがＷｅｂページを表示させてもよい。デジタルサイネージとは、屋外、店頭、公共空間及び交通機関など、人が通過又は存在しうる場所でディスプレイなどの電子的な表示機器を使って情報を発信するシステム、表示機器又は表示される情報をいう。なお、本実施形態ではＷｅｂページにＷｅｂアプリが含まれるものとする。Ｗｅｂアプリとは、Ｗｅｂブラウザ上で動作するプログラミング言語（たとえばJavaScript（登録商標））によるプログラムとＷｅｂサーバ側のプログラムが協調することによって動作し、Ｗｅｂブラウザ上で使用されるソフトウェア又はその仕組みを言う。なお、本実施形態ではＷｅｂアプリ以外にも、ネイティブアプリと呼ばれるＯＳに依存するアプリであっても同様に動作させることができる。

端末装置３０は、有線ＬＡＮや無線ＬＡＮのアクセスポイントを介してネットワークＮと接続してもよいし、３Ｇ、４ＧやＬＴＥ（Long Term Evolution）といった交換回線型の通信により、ネットワークＮに接続してもよい。

パートナーサイトＷｅｂサーバ６０は閲覧者が使用するクライアントコンピュータ（本実施形態の端末装置３０）に対しネットワークを通じて情報や機能を提供するサーバ（一般的な情報処理装置）である。パートナーサイトＷｅｂサーバ６０が提供するＷｅｂページには広告枠７が設けられている。パートナーサイトＷｅｂサーバ６０はＳＳＰ５０に広告枠７への広告の表示を依頼している。これにより、広告枠７にはＳＳＰ５０が発行した広告タグを対応付けることができる。

広告主Ｗｅｂサーバ７０も閲覧者が使用するクライアントコンピュータ（本実施形態の端末装置３０）に対しネットワークを通じて情報や機能を提供するサーバ（一般的な情報処理装置）である。広告主は広告枠７の購入をＤＳＰ２０に依頼している。また、広告データを保持する画像配信装置１０をＤＳＰ２０に登録している。また、広告主は広告データを画像配信装置１０に入稿しておく。広告データには、背景画像Ｂと全天球画像６の他、広告主Ｗｅｂサーバ７０など閲覧者に閲覧させたいＷｅｂサイト（ランディングページ）のＵＲＬが登録されている（ＵＲＬがリンクされている）。

広告主Ｗｅｂサーバ７０及びパートナーサイトＷｅｂサーバ６０と端末装置３０は例えばＨＴＴＰ又はＨＴＴＰｓの通信プロトコルを使って通信する。端末装置３０からの要求に対し広告主Ｗｅｂサーバ７０とパートナーサイトＷｅｂサーバ６０が画面情報を端末装置３０に送信する。画面情報は、ＨＴＭＬ、スクリプト言語、及びＣＳＳ（cascading style sheet）で記述されたプログラムであり、主にＨＴＭＬによりＷｅｂページの構造が特定され、スクリプト言語によりＷｅｂページの動作が規定され、ＣＳＳによりＷｅｂページのスタイルが特定される。本実施形態で、閲覧者のＷｅｂページに対する操作を全天球画像６に反映させるのはスクリプト言語である。スクリプト言語として、具体的には、JavaScript（登録商標）又はECMAScriptというプログラム言語が知られている。

広告主Ｗｅｂサーバ７０及びパートナーサイトＷｅｂサーバ６０はいずれもクッキー（Cookie）を端末装置３０のブラウザソフトに記録する。広告主Ｗｅｂサーバ７０は自社のクッキーとＤＳＰ２０のクッキーの両方を記録し、パートナーサイトＷｅｂサーバ６０は自社のクッキーとＳＳＰ５０のクッキーの両方を記録する。

ＳＳＰ５０は、広告枠７を掲載するパートナーサイトＷｅｂサーバ６０が広告枠７を販売することで収益を最大化するための仕組みである。図では１つの装置のように記載されているが、１台以上の情報処理装置のネットワークである。パートナーサイトＷｅｂサーバ６０はＳＳＰ５０に広告枠７の販売を依頼している。具体的には広告枠７にＳＳＰ５０が発行する広告タグが記載されており、端末装置３０がパートナーサイトＷｅｂサーバ６０のＷｅｂページを表示すると広告タグがＳＳＰ５０に広告の配信を要求する（広告リクエスト）。ＳＳＰ５０はＤＳＰ２０から広告枠７の入札を受け付け、落札したＤＳＰ２０にアクセスするためのアクセス情報１を端末装置３０に送信する。

ＤＳＰ２０は広告枠７の買い付け、広告配信等、広告主のために効率的・効果的な広告配信を行う仕組みである。図では１つの装置のように記載されているが、１台以上の情報処理装置のネットワークである。すなわち、ＤＳＰ２０はＳＳＰ５０からクッキー（区別するためＳＳＰクッキーという）等を取得して、自分が管理するＤＳＰクッキーとＳＳＰクッキーの対応付情報に基づき閲覧者の属性等を判断する。そして、閲覧者の属性や予算等に基づいて依頼している広告主からの広告の配信設定に基づいて決定した価格でＳＳＰ５０に入札する。

落札したＤＳＰ２０はアクセス情報１により端末装置３０から広告を要求される。ＤＳＰ２０は画像配信装置１０に広告リクエストを通知して、画像配信装置１０に端末装置３０が広告データを要求するためのアクセス情報２を画像配信装置１０から取得する。なお、広告データは、全天球画像６を表示させる表示プログラムと操作履歴を取得する操作履歴プログラムを含む。

ＤＳＰ２０はアクセス情報２を端末装置３０に送信する。ＤＳＰ２０は契約にしたがって広告主に課金する。画像配信装置１０と広告主との間では契約に従った課金が行われる。ただし、広告が表示されただけで課金されるかどうかなどは契約によって異なる。

画像配信装置１０は、ＤＳＰ２０が買い取った広告枠７に対し閲覧者の属性に最適な広告の素材（全天球画像６）を含む広告データを提供する１台以上の情報処理装置である。画像配信装置１０はバナーやテキストなどの入稿素材や広告画像を保持している。広告データは単なるバナー（文字や写真や絵でつくられた画像）の場合もあるし、画像に加えスクリプト言語が含まれる場合がある。本実施形態では、全天球画像６を表示順に回転させたり、閲覧者の全天球画像６に対する操作を全天球画像６の外観に反映させたりする表示プログラム、及び、全天球画像６に対する操作履歴を記録したりするための操作履歴プログラムが含まれる。いずれもスクリプト言語で記述される。

端末装置３０がアクセス情報２に基づいて画像配信装置１０に広告データを要求すると、画像配信装置１０は広告データを端末装置３０に送信する。広告データには全天球画像６が含まれており、表示プログラムは全天球画像６の注目点を辿るように自動的に全天球画像６を回転させ、また、拡大したり縮小したりする。また、操作履歴プログラムは画像配信装置１０のクッキー（区別するため画像クッキーという）及び画像ＩＤと共に全天球画像６に対する操作履歴を画像配信装置１０に送信する。画像クッキーは画像配信装置１０からブラウザソフトに書き込まれる。操作履歴は例えば、どの閲覧画角が表示されたかという情報である。なお、この操作履歴は注目点の決定に使用されるため、操作履歴が注目点の決定に使用されない場合、操作履歴は送信されなくてもよい。

また、操作履歴プログラムは、後述する表示パターンのパターンＩＤと共にクリックされた旨を画像配信装置１０に送信する。画像配信装置１０は１つの全天球画像６に対し複数の表示パターンを定めており、各表示パターンのクリック率を監視することで、クリック率が高い表示パターンのみを配信できるようになる。

＜ハードウェア構成例＞
続いて、本実施形態の画像表示システムにおける広告主Ｗｅｂサーバ７０、パートナーサイトＷｅｂサーバ６０、画像配信装置１０、ＳＳＰ５０及びＤＳＰ２０のハードウェア構成について説明する。

広告主Ｗｅｂサーバ７０、パートナーサイトＷｅｂサーバ６０、画像配信装置１０、ＳＳＰ５０及びＤＳＰ２０は、例えば図５に示すハードウェア構成のコンピュータシステムにより実現される。図５は本実施形態に係るコンピュータシステム２００の一例のハードウェア構成図である。

図５に示したコンピュータシステム２００は、入力装置２０１、表示装置２０２、外部Ｉ／Ｆ２０３、ＲＡＭ（Random Access Memory）２０４、ＲＯＭ（Read Only Memory）２０５、ＣＰＵ（Central Processing Unit）２０６、通信Ｉ／Ｆ２０７、及びＨＤＤ（Hard Disk Drive）２０８などを備え、それぞれがバスＢで相互に接続されている。

入力装置２０１はキーボードやマウス、タッチパネルなどを含み、オペレータが各操作信号を入力するのに用いられる。表示装置２０２はディスプレイなどを含み、コンピュータシステム２００による処理結果を表示する。

通信Ｉ／Ｆ２０７はコンピュータシステム２００を社内ネットワーク及びインターネット等に接続させるインタフェースである。これにより、コンピュータシステム２００は通信Ｉ／Ｆ２０７を介してデータ通信を行うことができる。

ＨＤＤ２０８はプログラムやデータを格納している不揮発性の記憶装置である。格納されるプログラムやデータには、例えばコンピュータシステム２００全体を制御する基本ソフトウェアであるＯＳ（Operating System）や、ＯＳ上において各種機能を提供するアプリケーションソフトなどがある。ＨＤＤ２０８は格納しているプログラム２０８ｐやデータを所定のファイルシステム及び／又はＤＢ（データベース）により管理している。

外部Ｉ／Ｆ２０３は、外部装置とのインタフェースである。外部装置には、記録媒体２０３ａなどがある。これにより、コンピュータシステム２００は外部Ｉ／Ｆ２０３を介して記録媒体２０３ａの読み取り及び／又は書き込みを行うことができる。記録媒体２０３ａにはフレキシブルディスク、ＣＤ（Compact Disk）、ＤＶＤ（Digital Versatile Disk）、ＳＤメモリカード（SD Memory card）、ＵＳＢメモリ（Universal Serial Bus memory）などがある。

ＲＯＭ２０５は、電源を切ってもプログラムやデータを保持することができる不揮発性の半導体メモリ（記憶装置）である。ＲＯＭ２０５には、コンピュータシステム２００の起動時に実行されるＢＩＯＳ（Basic Input/Output System）、ＯＳ設定、及びネットワーク設定などのプログラムやデータが格納されている。ＲＡＭ２０４は、プログラムやデータを一時保持する揮発性の半導体メモリ（記憶装置）である。

ＣＰＵ２０６は、ＲＯＭ２０５やＨＤＤ２０８などの記憶装置からプログラムやデータをＲＡＭ２０４上に読み出し、処理を実行することで、コンピュータシステム２００全体の制御や機能を実現する演算装置である。

なお、各サーバはクラウドコンピューティングに対応していてよいが、いわゆる単体の情報処理装置でもよい。クラウドコンピューティングとは、特定ハードウェア資源が意識されずにネットワーク上のリソースが利用される利用形態をいう。

<<端末装置>>
図６は端末装置３０の一例のハードウェア構成図である。なお、図６の端末装置３０はタブレット装置又はスマートフォン等が想定されている。端末装置３０は、ＣＰＵ６０１、ＲＯＭ６０２、ＲＡＭ６０３、ＥＥＰＲＯＭ６０４、ＣＭＯＳセンサ６０５、加速度・方位センサ６０６、メディアドライブ６０８を備えている。

ＣＰＵ６０１は端末装置３０の全体の動作を制御する。ＲＯＭ６０２は基本入出力プログラムを記憶している。ＲＡＭ６０３はＣＰＵ６０１のワークエリアとして使用される。ＥＥＰＲＯＭ６０４はＣＰＵ６０１の制御にしたがってデータの読み出し又は書き込みを行う。ＣＭＯＳセンサ６０５は、ＣＰＵ６０１の制御にしたがって被写体を撮像し画像データを得る。加速度・方位センサ６０６は地磁気を検知する電子磁気コンパスやジャイロコンパス、加速度センサ等である。

メディアドライブ６０８は、フラッシュメモリ等のメディア６０７に対するデータの読み出し又は書き込み（記憶）を制御する。メディアドライブ６０８は、既に記録されていたデータが読み出され又は新たにデータが書き込まれて記憶するメディア６０７を着脱自在な構成となっている。

なお、ＥＥＰＲＯＭ６０４には、ＣＰＵ６０１が実行するプログラム６０４ｐが記憶されている。プログラム６０４ｐは実施形態における各種処理を実行するためのアプリケーションソフトウェアやＯＳ等である。プログラム６０４ｐはメディア６０７などに記憶された状態で配布されてもよいし、プログラム配信用のサーバから配信されてもよい。

また、ＣＭＯＳセンサ６０５は光を電荷に変換して被写体の画像を電子化する電荷結合素子である。ＣＭＯＳセンサ６０５は被写体を撮像することができるのであれば、例えばＣＣＤ（Charge Coupled Device）センサであってもよい。ＣＭＯＳセンサ６０５はバーコードや二次元バーコードを読み取ることができる。

更に、端末装置３０は、ＲＦタグリーダ/ライタ６２２、アンテナＩ/Ｆ６２３、及び、振動アクチュエータ６２４を備える。ＲＦタグリーダ/ライタ６２２は例えばＮＦＣ（Near Field Communication）などの規格にしたがって通信する。

振動アクチュエータ６２４は、端末装置３０を振動させるモータである。例えば、着信やメールを受信すると振動することで閲覧者にその旨を知らせることができる。

更に、端末装置３０は音声入力部６０９、音声出力部６１０、アンテナ６１１、通信部６１２、無線ＬＡＮ通信部６１３、近距離無線通信用アンテナ６１４、近距離無線通信部６１５、ディスプレイ６１６、タッチパネル６１７及びバスライン６１９を備える。

音声入力部６０９は音声を音声信号に変換する。音声出力部６１０は音声信号を音声に変換する。通信部６１２はアンテナ６１１を利用して無線通信信号により最寄りの基地局装置と通信を行う。無線ＬＡＮ通信部６１３はＩＥＥＥ８０２．１１規格に準拠する無線ＬＡＮ通信を行う。

近距離無線通信部６１５は近距離無線通信用アンテナ６１４を利用して例えばBluetooth（登録商標）、又は、Bluetooth Low Energy（登録商標）の通信規格にしたがった通信装置である。

ディスプレイ６１６は、被写体の画像や各種アイコン等を表示する液晶や有機ＥＬ等である。タッチパネル６１７は、ディスプレイ６１６上に載せられ、感圧式又は静電式のパネルによって構成され、指やタッチペン等によるタッチによってディスプレイ６１６上におけるタッチ位置を検出する。バスライン６１９は上記各部を電気的に接続するためのアドレスバスやデータバス等である。

また、端末装置３０は専用の電池６１８を備え、電池６１８又は商用電源のいずれによっても駆動され得る。なお、音声入力部６０９は音声を入力するマイクが含まれる。音声出力部６１０は音声を出力するスピーカが含まれている。

＜全天球画像について＞
先に示したように、本実施例１においては、全天球画像６に２つのタイプがある。そのうち、図７〜図１０を用いて全天球カメラ９で撮像された全天球画像６について説明する。図７は、全天球カメラ９の使用イメージ図である。全天球カメラ９は、図７に示されているように、ユーザが手に持ってユーザの周りの被写体を撮像する撮像装置である。全天球カメラ９は、２つの撮像素子の背面同士が対向させられた構造を有しており、それぞれユーザの周りの被写体を撮像することで、２つの半球画像を得る。

次に、図８及び図９を用いて、全天球カメラ９で撮像された画像から全天球画像６が作成されるまでの処理の概略を説明する。なお、図８（ａ）は全天球カメラ９で撮像された半球画像（前側）、図８（ｂ）は全天球カメラ９で撮像された半球画像（後側）、図８（ｃ）は正距円筒射影図法により表された画像（正距円筒射影画像）を示した図である。図９（ａ）は正距円筒射影画像で球を被う状態を示した概念図、図９（ｂ）は全天球画像６を示した図である。

図８（ａ）に示されているように、全天球カメラ９によって得られた画像は、魚眼レンズによって湾曲した半球画像（前側）となる。また、図８（ｂ）に示されているように、全天球カメラ９によって得られた画像は、魚眼レンズによって湾曲した半球画像（後側）となる。そして、半球画像（前側）と、１８０度反転された半球画像（後側）とは、全天球カメラ９によって合成され、図８（ｃ）に示されているように、正距円筒射影画像が作成される。これが全天球画像である。

そして、OpenGL ES（Open Graphics Library for Embedded Systems）が利用されることで、図９（ａ）に示されているように、正距円筒射影画像が球面を覆うように貼り付けられ、図９（ｂ）に示されているような全天球画像６が表示される。このように、全天球画像６は、正距円筒射影画像が球の中心を向いた画像として表される。なお、OpenGL ESは、２Ｄ(2−Dimensions)及び３Ｄ(3−Dimensions)のデータを視覚化するために使用するグラフィックスライブラリである。全天球画像６は、静止画であっても動画であってもよい。

画像配信装置１０が配信する広告データにはこの全天球画像６が含まれている。全天球画像６は、球面を覆うように貼り付けられて表示される画像であるため湾曲しており、人間が見ると違和感を持ってしまう。そこで、端末装置３０は、全天球画像６の一部の所定領域Ｔを湾曲の少ない平面画像として表示することで、人間に違和感を与えないように表示する。所定領域Ｔは、三次元の仮想空間における座標（Ｘ，Ｙ，Ｚ）によって示される。一方、ディスプレイ６１６は二次元平面なので所定領域Ｔのままでは端末装置３０が表示できない。そこで、３Ｄコンピュータグラフィックの技法を用いて三次元の物体を二次元平面に投影する透視投影変換により端末装置３０は所定領域Ｔを得る。

図１０は、閲覧者の視線を説明する図の一例である。全天球画像６は三次元の座標を有しているので、視線方向は三次元の座標又は緯度・経度などの球体の座標を特定する情報で特定される。本実施形態では、所定領域Ｔの中心点ＣＰを視線方向とする。所定領域Ｔの中心点ＣＰは球面座標系の（θ、φ）により特定される。θは経度、φは緯度を表す。

閲覧者は操作により視線方向を変えることができるが、仮想カメラＩＣが平行移動しないと仮定すると、仮想カメラＩＣは剛体としてロール（Ｚ軸を中心とする回転）、ヨー（Ｙ軸を中心とする回転）、及びピッチ（Ｘ軸を中心とする回転）の３つの回転が可能である。この３つの回転のいずれが生じても視線方向が変化する。例えば、閲覧者が全天球画像６を水平方向に回転させるとヨー角が変化し、上下方向に回転させるとピッチ角が変化し、ディスプレイ６１６の中心を軸に全天球画像６を回転させるとロール角が変化する。本実施形態では、閲覧者のＷｅｂページに対する操作が、視線方向（ロール角、ヨー角、ピッチ角）等に反映される。どのように反映されるかは表示プログラムに予め記述されているものとする。所定領域Ｔは拡大又は縮小も可能である。

閲覧者は広告枠７に対し上下左右にフリックすることで視線方向を変更する（画像データを回転させる）ことができる。

図１１を用いて、所定領域情報と所定領域Ｔの画像の関係について説明する。なお、図１１は、所定領域情報と所定領域Ｔの画像の関係の一例を示した図である。図１１に示されているように、ｒＨはHorizontal Radian（経度θ）、ｒＶはVertical Radian（緯度φ）、αは画角(Angle)を示す。すなわち、撮像方向（θ，φ）で示される仮想カメラＩＣの注視点が、仮想カメラＩＣの撮像領域である所定領域Ｔの中心点ＣＰとなるように、仮想カメラＩＣの姿勢を変更することになる。所定領域画像Ｑは、全天球画像６における所定領域Ｔの画像である。ｆは仮想カメラＩＣから中心点ＣＰまでの距離である。Ｌは所定領域Ｔの任意の頂点と中心点ＣＰとの距離である（２Ｌは対角線）。そして、図１１では、一般的に以下の式（Ａ）で示される三角関数が成り立つ。

Ｌｆ＝ｔａｎ（α／２） ・・・（Ａ）
＜Ｗｅｂページが使用する情報＞
図１２は、Ｗｅｂページが使用する情報を模式的に説明する図の一例である。図１２（ａ）はパートナーサイトＷｅｂサーバ６０が提供するＷｅｂページである。パートナーサイトＷｅｂサーバ６０が提供するＷｅｂページは１つ以上の広告枠７を有している。また、端末装置３０のブラウザは予めＳＳＰクッキーとＤＳＰクッキーを保持している。広告枠７にはＳＳＰ５０のＵＲＬ及び広告枠ＩＤ等が対応付けられている。端末装置３０のブラウザ（後述の広告枠検出部３６）はＳＳＰクッキー、及びリクエスト内容をＳＳＰ５０に送信する。また、広告枠７を落札したＤＳＰ２０のＵＲＬを含むアクセス情報１と落札ＩＤがＳＳＰ５０から端末装置３０に送信される。

図１２（ｂ）はアクセス情報１に基づく動作を説明する図である。端末装置３０はＤＳＰ２０のＵＲＬに基づいてＤＳＰ２０に落札ＩＤとＤＳＰクッキーを送信する。ＤＳＰ２０は落札ＩＤで広告リクエストを特定し、画像配信装置１０から画像配信装置１０のＵＲＬと広告機会ＩＤを含むアクセス情報２を取得する。端末装置３０はアクセス情報２と広告機会ＩＤをＤＳＰ２０から取得する。

図１２（ｃ）はアクセス情報２に基づく動作を説明する図である。端末装置３０は画像配信装置１０のＵＲＬに基づいて画像配信装置１０に広告機会ＩＤを送信する。画像配信装置１０は広告機会ＩＤで特定される広告リクエスト等に基づいて広告データを生成し、画像クッキー、広告枠ＩＤ及び表示パターンと共に端末装置３０に送信する。このようにして、Ｗｅｂページの広告枠７に全天球画像６が表示される。

＜機能について＞
図１３は端末装置３０、広告主Ｗｅｂサーバ７０、パートナーサイトＷｅｂサーバ６０、画像配信装置１０、ＳＳＰ５０及びＤＳＰ２０の機能をブロック状に示す機能ブロック図の一例である。

<<広告主Ｗｅｂサーバ、パートナーサイトＷｅｂサーバ>>
広告主Ｗｅｂサーバ７０とパートナーサイトＷｅｂサーバ６０は、Ｗｅｂページ提供部７１を有している。広告主Ｗｅｂサーバ７０とパートナーサイトＷｅｂサーバ６０が有するこれらの各機能は、ＨＤＤ２０８からＲＡＭ２０４に展開されたプログラム２０８ｐをＣＰＵ２０６が実行することにより実現される機能又は手段である。

Ｗｅｂページ提供部７１は、例えば一般的なＨＴＴＰ通信を行い、端末装置３０からのＷｅｂページの要求に対しＷｅｂページを構築して端末装置３０に送信する。処理に必要であればアプリケーションサーバに処理を依頼し、処理結果をＷｅｂページに配置して送信する。

広告主Ｗｅｂサーバ７０のＷｅｂページには広告主のクッキーとＤＳＰクッキーが含まれている。広告主Ｗｅｂサーバ７０はＤＳＰ２０に広告の配信を依頼しているためである。これによりリターゲッティング広告等が可能になる。パートナーサイトＷｅｂサーバ６０のＷｅｂページにはパートナーサイトのクッキーとＳＳＰクッキーが含まれている。パートナーサイトＷｅｂサーバ６０はＳＳＰ５０に広告枠７の販売を依頼しているためである。

<<ＳＳＰ>>
ＳＳＰ５０は、広告リクエスト部５１、広告要求取得部５２、アクセス情報送信部５３、及び、落札部５４を有している。ＳＳＰ５０が有するこれらの各機能は、ＨＤＤ２０８からＲＡＭ２０４に展開されたプログラム２０８ｐをＣＰＵ２０６が実行することにより実現される機能又は手段である。

広告要求取得部５２は、端末装置３０が広告枠７に対応づけられた広告タグを実行することでＳＳＰクッキーと共に要求する広告リクエストを取得する。広告要求取得部５２はＳＳＰクッキーが含まれる広告リクエストを広告リクエスト部５１に送出する。

広告リクエスト部５１は、ＤＳＰ２０に対し広告リクエストを送信する。広告リクエストには、ＳＳＰクッキー、パートナーサイトＷｅｂサーバ６０のドメイン、広告枠ＩＤ、広告枠７サイズ、広告フォーマット、ブラウザ種類、ＯＳ種類等が含まれる。

落札部５４はＤＳＰ２０から入札を受け付け、基本的に最も高い入札金額のＤＳＰ２０に広告枠７を販売するオークションを行う（広告主の製品やサービスによっては入札を受け付けない）。落札部５４は落札ＩＤを生成してＤＳＰ２０に通知する。

アクセス情報送信部５３は落札したＤＳＰ２０に対し広告を要求するためのアクセス情報１を生成し落札ＩＤと共に端末装置３０に送信する。アクセス情報１にはＤＳＰ２０のＵＲＬ（ＩＰアドレス）が含まれる。

<<ＤＳＰ>>
ＤＳＰ２０は、リクエスト受付部２１、入札判断部２２、入札部２３、広告要求受付部２４、及び、画像依頼部２５を有している。ＤＳＰ２０が有するこれらの各機能は、ＨＤＤ２０８からＲＡＭ２０４に展開されたプログラム２０８ｐをＣＰＵ２０６が実行することにより実現される機能又は手段である。

また、記憶部２９には、クッキー情報ＤＢ２９１と配信設定ＤＢ２９２が構築されている。記憶部２９は、図５に示したＨＤＤ２０８又はＲＡＭ２０４により実現される。

表１はクッキー情報ＤＢ２９１に記憶される情報を模式的に示す。クッキー情報ＤＢ２９１はＤＳＰクッキーとＳＳＰクッキーを対応付けると共に、閲覧者が訪問した訪問ドメインが登録されている。ＤＳＰクッキーとＳＳＰクッキーの対応付けはクッキーシンクと呼ばれる技術により可能である。また、訪問ドメインはＤＳＰ２０がタグ（行動監視タグ）を貼り付けたＷｅｂサイトを閲覧者が訪問することで得られる。したがって、ＤＳＰ２０は、ＳＳＰクッキーからＤＳＰクッキーを特定でき、更に、この閲覧者がどのようなＷｅｂサイトに興味を持っているかを判断できる。

表２は配信設定ＤＢ２９２に記憶される情報を模式的に示す。配信設定ＤＢ２９２には、広告主ＩＤ、広告対象属性（好ましい対象者の属性）、及び、非広告対象属性（好ましくない対象者の属性）が登録されている。広告主ＩＤは広角画像を提供する提供元になる広告主を特定又は識別するための識別情報である。したがって、ＤＳＰ２０又は画像配信装置１０は、広角画像の提供元に対し設定されている好ましい対象者の属性又は好ましくない対象者の属性を参照して、広角画像を送信するか否かを決定することができる。

なお、ＩＤはIdentificationの略であり識別子や識別情報という意味である。ＩＤは複数の対象から、ある特定の対象を一意的に区別するために用いられる名称、符号、文字列、数値又はこれらのうち１つ以上の組み合わせをいう。以下のＩＤについても同様である。広告対象属性は広告主が広告を配信したい閲覧者の属性であり、非広告対象属性は広告主が広告を配信したくない閲覧者の属性である。ＤＳＰ２０はクッキー情報ＤＢ２９１等から判断される閲覧者の属性と配信設定ＤＢ２９２の情報を比較して閲覧者の属性を数値化し、入札金額を決定する。なお、入札金額の決定には時間帯、曜日、閲覧者の地域等、各種の情報が考慮されてよい。

（ＤＳＰの機能）
リクエスト受付部２１はＳＳＰ５０から広告リクエストを受けつける。リクエスト情報により端末装置３０の広告枠ＩＤ等の基本的な情報が得られる。

入札判断部２２はリクエスト受付部２１が受けつけた広告リクエストをクッキー情報ＤＢ２９１と配信設定ＤＢ２９２を参照して評価することで入札金額を決定する（入札しない場合もある）。上記のように、ＳＳＰクッキーからＤＳＰクッキーを特定し、ＤＳＰクッキーに対応付けて蓄積されている属性情報が、配信設定ＤＢ２９２に記憶された広告主の依頼とどの程度一致するかにより入札金額を決定する。

入札部２３は、決定された入札金額でＳＳＰ５０に入札する。落札できた場合は落札ＩＤを取得し、広告リクエストと対応付けておく。

広告要求受付部２４は、アクセス情報１に基づく端末装置３０からの広告要求（落札ＩＤ、ＤＳＰクッキー）を取得する。広告要求受付部２４は落札ＩＤにより広告リクエストを特定する。ＤＳＰクッキーはなくてもよく、ＳＳＰクッキーとＤＳＰクッキーが対応付けられていない場合に使用される。

画像依頼部２５はＤＳＰクッキー、広告主ＩＤ、及びリクエスト内容と共にアクセス情報２を画像配信装置１０に対し要求する。広告主ＩＤにより広告主が特定される。リクエスト内容の広告枠ＩＤにより広告枠７が特定される。更に、閲覧者の属性を画像配信装置１０に送信してもよい。これにより、画像配信装置１０は閲覧者に適した全天球画像６を配信できる。

<<端末装置>>
端末装置３０は、Ｗｅｂページ取得部３１、Ｗｅｂページ解析部３２、Ｗｅｂページ表示部３３、操作受付部３４、及びスクリプト実行部３５を有している。端末装置３０が有するこれらの各機能は、ＥＥＰＲＯＭ６０４からＲＡＭ６０３に展開されたプログラム６０４ｐをＣＰＵ６０１が実行することにより実現される機能又は手段である。

操作受付部３４は、端末装置３０に対する各種の操作を受け付ける。具体的には、端末装置３０が実行するブラウザに対する操作を受け付ける。操作受付部３４はＷｅｂページに対する操作を受け付ける。スクリプトに基づく画像データへの操作は画像操作受付部４３が受け付ける。

Ｗｅｂページ取得部３１は、閲覧者の操作により又はスクリプトの動作により広告主Ｗｅｂサーバ７０及びパートナーサイトＷｅｂサーバ６０と通信して、広告主Ｗｅｂサーバ７０及びパートナーサイトＷｅｂサーバ６０からＷｅｂページを取得する。

Ｗｅｂページ解析部３２は、画面情報に含まれるＨＴＭＬを先頭から順番に読み取りＨＴＭＬに含まれる文章や画像データの構造を解析する。また、ＣＳＳに記述されたＨＴＭＬの文章や画像データとの紐付けを検出して、ＨＴＭＬに含まれる文章や画像データのスタイルを対応付ける。また、Ｗｅｂページ解析部３２は、ＨＴＭＬからscriptタグを検出してスクリプト言語で記述されているスクリプトを抽出する。Ｗｅｂページ解析部３２はＨＴＭＬとＣＳＳをＷｅｂページ表示部３３に送出し、スクリプトをスクリプト実行部３５に送出する。

Ｗｅｂページ表示部３３はＨＴＭＬの先頭から解析が終わった順にＷｅｂページをディスプレイ６１６に表示していく。また、Ｗｅｂページに対する操作に応じてＷｅｂページを更新する。

スクリプト実行部３５は、Ｗｅｂページ解析部３２が抽出したスクリプトを実行する。スクリプトの具体的な内容はＷｅｂページによって様々である。本実施形態ではスクリプトとして、広告枠７に対応付けられた広告タグ、ＳＳＰ５０から取得するアクセス情報１、ＤＳＰ２０から取得するアクセス情報２、画像配信装置１０から配信される広告データが検出される。スクリプト実行部３５は、図６に示したＣＰＵ６０１がプログラム６０４ｐを実行すること等により実現される。また、スクリプト実行部３５が有する各機能又は手段は、ＣＰＵ６０１がスクリプトを実行することで実現される。

広告枠検出部３６は、Ｗｅｂページ取得部３１が取得した画面情報に含まれる広告枠７に対応付けられた広告タグを端末装置３０が実行して実現される機能である。広告枠検出部３６は広告枠７に対応づけられたＵＲＬに基づいてＳＳＰクッキーと共に広告リクエストをＳＳＰ５０に送信する。

アクセス情報取得部３７は、ＳＳＰ５０からアクセス情報１を取得する。アクセス情報１はスクリプトで記述されている。広告要求部３８は、アクセス情報１に含まれるＵＲＬに基づいてＤＳＰ２０にアクセスし落札ＩＤとＤＳＰクッキーと共に広告を要求する。広告要求部３８はこの要求に対しアクセス情報２と広告機会ＩＤを取得する。アクセス情報２もスクリプトで記述されている。

広告取得部３９はアクセス情報２に含まれる画像配信装置１０のＵＲＬに基づき、広告機会ＩＤを指定して、画像配信装置１０に対し広告データを要求する。画像配信装置１０は広告データを生成するので、広告取得部３９は広告データを取得する。本実施形態の広告データは、全天球画像６（又は／及び３ＤＣＧ（Three−dimensional computer graphics）画像）、表示パターン、表示プログラム及び操作履歴プログラムを含む。操作履歴プログラムは操作履歴を画像配信装置１０に送信させる。表示プログラムは表示パターンで全天球画像６や３ＤＣＧ画像を回転させ、全天球画像６又は３ＤＣＧ画像への操作を全天球画像６又は３ＤＣＧ画像の外観に反映させる。操作履歴プログラムと表示プログラムもスクリプト言語で記述されており、スクリプト実行部３５により実行される。

広告表示部４０は、画像配信装置１０から取得した広告データを表示する。広告表示部４０は主に表示プログラムで実現され、広告枠７に全天球画像６又は３ＤＣＧ画像（すなわち広告）を表示し更に自動的に回転させたりする。また、全天球画像６に対する操作に応じて全天球画像６の外観を変化させる。

画像操作受付部４３はポインティングデバイス（ディスプレイ６１６がタッチパネルの場合は指、棒状部材又は専用ペンとタッチパネル、マウスが使用される場合はマウスポインタ、トラックボールが使用される場合はマウスポインタ）の座標が広告枠７に含まれる場合、Ｗｅｂページへの操作よりも優先して画像データへの操作を受け付ける。これにより、閲覧者が広告枠７の上でフリックしたりスワイプしたりした場合や、拡大縮小のためにピンチイン、ピンチアウトしたりした場合、Ｗｅｂページでなく画像データを変化させることができる。

画像配信装置１０から広告データを取得することで端末装置３０は画像配信装置１０の画像クッキーを取得し記憶部４９に記憶できる。広告取得部３９が画像クッキーを画像配信装置１０に送信することで、画像配信装置１０ではＤＳＰクッキーと画像クッキーを対応付けることができる。

操作履歴記録部４１は、主に操作履歴プログラムにより実現され、全天球画像６又は３ＤＣＧに対する操作情報を操作履歴として記録する。操作履歴の詳細は画像配信装置１０において説明する。操作履歴送信部４２は、主に操作履歴プログラムにより実現され、広告枠７に表示された全天球画像６又は３ＤＣＧに対する操作履歴を画像クッキー及び画像ＩＤ（全天球画像６を識別する）と共に画像配信装置１０に送信する。また、クリックされた場合は更に表示パターンと共にその旨を画像配信装置１０に送信する。

<<画像配信装置>>
画像配信装置１０は、画像情報応答部１１、広告配信部１２、注目点決定部１３、操作履歴取得部１４、及び、配信画像受付部１５を有している。画像配信装置１０が有するこれらの各機能は、ＨＤＤ２０８からＲＡＭ２０４に展開されたプログラム２０８ｐをＣＰＵ２０６が実行することにより実現される機能又は手段である。

また、画像配信装置１０は、図５に示したＨＤＤ２０８又はＲＡＭ２０４により実現される記憶部１９を有している。記憶部１９には、配信履歴ＤＢ１９１、操作履歴ＤＢ１９２、クッキー対応ＤＢ１９３、広告画像ＤＢ１９４、パターンＤＢ１９５及び表示プログラム１９６が構築されている。

表３は、操作履歴ＤＢ１９２に記憶される情報を模式的に示す。操作履歴ＤＢ１９２には各閲覧者が全天球画像６に対しどのような操作を行ったのかという履歴が記録されている。操作履歴ＤＢ１９２には画像ＩＤ、閲覧時刻、画像クッキー、閲覧画角１〜３の各項目が記録されている。画像ＩＤは全天球画像６を特定するための情報である。画像クッキーは端末装置３０を操作する閲覧者又は端末装置３０の同一性を判別する情報になる（装置識別情報の一例）。閲覧画角１〜３は閲覧者が全天球画像６を閲覧した際の画角である。各閲覧画角１〜３には閲覧時間、拡大の有無、拡大した場合は拡大後の画角、及び、縮小の有無、が格納されている。このように、各画像ごとに閲覧者が興味を持ったと考えられる画角が記録される。閲覧画角１〜３は、閲覧者が全天球画像６を回転させずに静止した時間が所定時間（例えば１秒）以上の画角である。端末装置３０の操作履歴記録部４１は静止した時間が上位３つの画角を記録する。１つだけでもよいし４つ以上でもよい。同様に、操作履歴記録部４１はそれぞれの閲覧画角１〜３で閲覧者が拡大又は縮小したか否かを記録する。画像配信装置１０はこのような操作履歴を注目点Ｐとする場合がある。更に、画像ＩＤに画像クッキーが対応付けられていればリターゲッティング広告が可能になる。操作履歴としてクリック時画角を記録してもよい。

表４は、広告画像ＤＢ１９４に記憶されている情報を模式的に示す。広告画像ＤＢ１９４には、広告の対象となる全天球画像６又は３ＤＣＧに関する情報が登録されている。広告画像ＤＢ１９４には、広告主ＩＤ、画像ＩＤ、初期位置、優先度、及び、対象属性が対応付けて登録されている。ＤＳＰ２０により広告主が決定されるので、この広告主が配信したい画像のうち、閲覧者の属性と表４の対象属性の一致度又は優先度の少なくとも一方に基づいて配信する画像が決定される。配信時には全天球画像６の初期位置が指定される。画像ＩＤには重ねて表示される背景画像Ｂと全天球画像６が対応付けられている。なお、リターゲッティング広告の場合は、操作履歴ＤＢ１９２で画像クッキーに対応付けられた画像が配信される。

表５は、クッキー対応ＤＢ１９３に記憶されている情報を模式的に示す。クッキー対応ＤＢ１９３には、ＤＳＰクッキーと画像クッキーが対応付けられている。ＤＳＰクッキーはＤＳＰ２０から通知され、画像クッキーは端末装置３０から通知される。両者が対応付けられることでＤＳＰクッキーだけで画像配信装置１０が閲覧者を判別できるようになる。

表６は、パターンＤＢ１９５に登録されている情報を模式的に示す。パターンＤＢ１９５には全天球画像６又は３ＤＣＧ画像の注目点Ｐを表示させる順番及び画角の組み合わせが登録されている。順番及び画角の組み合わせを表示パターンという。表６では４つの座標１〜４が注目点Ｐである。注目点Ｐの数は１つの全天球画像６又は３ＤＣＧ画像に４つとは限らず３つ以下又は５つ以上でもよい。また、全天球画像６又は３ＤＣＧ画像によって様々でよい。表示パターンは座標１〜４の表示順を有している。したがって、注目点Ｐが４つの場合、表示順は４の階乗個（＝２４）ある。また、各注目点Ｐの画角が例えば３段階に変更される場合、３の４乗の画角の組み合わせがある。したがって、画角に関して１つの表示順について８１通りの組み合わせがある。最終的に１つの全天球画像６又は３ＤＣＧ画像について２４×８１の表示パターンがある。クリック回数はこの表示パターンごとに閲覧者がクリックした回数である。クリックは「所定の操作」の一例である。つまり、画像配信装置１０は同じ全天球画像６又は３ＤＣＧ画像を同じ表示パターンで全天球画像６又は３ＤＣＧ画像を複数の端末装置３０に表示させ、端末装置３０がクリックした旨を記録する。こうすることで、クリック率の低い表示パターンによる配信を徐々に回避できる。なお、クリック回数は閲覧者の属性（性別、年代、家族構成等）ごとに記録することが好適である。これにより、閲覧者の属性に対しクリック回数が多い表示パターンで表示できる。

表７は、配信履歴ＤＢ１９１に登録されている情報を模式的に示す。配信履歴ＤＢ１９１には画像クッキーに対応付けて配信された全天球画像６又は３ＤＣＧ画像の画像ＩＤと表示パターンが登録されている。画像配信装置１０が広告データを送信する際に端末装置３０に画像クッキーが登録されている場合、画像配信装置１０はこの画像クッキーを端末装置３０から取得できる。画像配信装置１０は同一の閲覧者に同じ全天球画像６又は３ＤＣＧ画像の配信を避けたり、同じ全天球画像６又は３ＤＣＧ画像を同じ表示パターンで配信することを避けたりすることができる。逆に、リターゲッティング配信することもできる。

（画像配信装置の機能について）
画像情報応答部１１はＤＳＰ２０から取得したＤＳＰクッキー、広告主ＩＤ、リクエスト内容（主に広告枠ＩＤ）に対し広告機会ＩＤを付与し、アクセス情報２と共にＤＳＰ２０に返送する。広告機会ＩＤにより端末装置３０の広告枠７ごとに広告の配信機会を特定できる。

広告配信部１２は、端末装置３０から広告機会ＩＤと共に広告データを要求されると配信する全天球画像６と表示パターンを決定する。まず、ＤＳＰ２０から取得した広告主ＩＤに対応付けられた全天球画像６又は３ＤＣＧ画像を広告画像ＤＢ１９４から決定する。好ましくは閲覧者の属性を考慮する。閲覧者の属性はＤＳＰ２０から通知されてもよいし、画像配信装置１０が画像クッキーに対応付けて蓄積したものでもよい。次に、広告配信部１２はパターンＤＢ１９５を参照して全天球画像６の表示パターンを決定する。例えば、最もクリック回数の多いパターンを決定する、又は、クリック回数が閾値以上のパターンから任意に決定する。パターン決定時も閲覧者の属性が考慮されることが好ましい。

操作履歴取得部１４は、端末装置３０から画像クッキー及び画像ＩＤと共に操作履歴を取得し、操作履歴ＤＢ１９２に設定する。なお、注目点を決定するための操作履歴とクリック回数を更新するための操作履歴（クリックしたこと）の２種類の操作履歴がある。

端末装置３０の操作履歴記録部４１を画像配信装置１０が有していてもよい。操作履歴記録部４１は時系列的な操作内容を必要とするので、通信帯域などによっては画像配信装置１０が取得することが困難になるおそれがある。これに対し、端末装置３０の操作履歴記録部４１は最終的な操作履歴のみを画像配信装置１０に送信すればよいので通信負荷を低減できる。

注目点決定部１３は、全天球画像６の注目点Ｐを決定する。画像処理などで注目点を推定するなど各種の注目点Ｐの決定方法が考えられるが、詳細は省略する。注目点決定部１３は決定した注目点Ｐを使った表示パターンをパターンＤＢ１９５に登録する。

配信画像受付部１５は、画像配信装置１０が配信するための画像を受け付ける（すなわち広告の入稿を受け付ける）。配信画像受付部１５による画像の受け付け方法については図１４を参照して説明する。なお、全天球画像６と背景画像Ｂをまとめて配信画像という場合がある。

＜配信画像の受け付け＞
図１４は、配信画像受付部１５と画像登録端末９０の機能をブロック状に示す機能ブロック図の一例である。配信画像受付部１５は通信部１５１、画面情報作成部１５２、及び、画像記憶部１５３を有している。

通信部１５１は、画像登録端末９０と例えばＨＴＴＰ又はＨＴＴＰｓの通信プロトコルを使って通信する。本実施例では、画像登録端末９０からの要求に対し配信画像を登録するための配信画像登録画面の画面情報を画像登録端末９０に送信する。また、画像登録端末９０から配信画像を受信する。

画面情報作成部１５２は、図１５に示す配信画像登録画面の画面情報を作成する。画像記憶部１５３は通信部１５１が受信した配信画像を広告画像ＤＢ１９４に記憶させる。

画像登録端末９０は、例えば広告主や代理店の担当者（以下、単に担当者という）が操作する端末であり、図３に示した全天球画像６と背景画像Ｂを配信画像として画像配信装置１０に登録するために使用される。画像登録端末９０は通信部９１、表示制御部９２、及び操作受付部９３を有している。なお、画像登録端末９０のハードウェア構成は図５と同様でよい。

通信部９１は、配信画像登録画面の画面情報を配信画像受付部１５から受信し、担当者が入力した配信画像を配信画像受付部１５に送信する。

表示制御部９２は、通信部９１が受信した配信画像登録画面の画面情報を画像登録端末９０のディスプレイに表示する。操作受付部９３は配信画像登録画面に対する担当者の操作（全天球画像６と背景画像Ｂ）を受け付ける。

図１５は、画像登録端末９０のディスプレイに表示された配信画像登録画面２２０の一例を示す。図１５に示すように、配信画像登録画面２２０はプレビュー画面領域２２１、全天球画像ファイル選択欄２２２、背景画像ファイル選択欄２２３、重畳解除ボタン２２４、キャンセルボタン２２５、及び、新規作成ボタン２２６を有している。

全天球画像ファイル選択欄２２２は、担当者が全天球画像６のファイルを選択して設定するための欄である。背景画像ファイル選択欄２２３は担当者が背景画像Ｂのファイルを選択して設定するための欄である。全天球画像ファイル選択欄２２２で選択された全天球画像６はプレビュー画面領域２２１に表示され、背景画像ファイル選択欄２２３で選択された背景画像Ｂはプレビュー画面領域２２１に表示される。

重畳解除ボタン２２４は全天球画像６と背景画像Ｂの一方を非表示にするためのボタンである。担当者が重畳解除ボタン２２４を押下するたびに、全天球画像６のみ、背景画像Ｂのみ、又は、全天球画像６と背景画像Ｂの両方、が表示される。

なお、この全天球画像６が、先述した図３（ａ）に示した不透明領域６ａが合成された全天球画像（１つ目のタイプ）であれば、担当者が、予め、全天球画像の透明レイヤ上に、不透明領域６ａを配置して合成して、全天球画像６を生成しておく。また、この全天球画像６が、例えば、後述する図１８（ａ）に示した一部に透明領域３１０を設けた全天球画像であれば（２つ目のタイプ）、担当者が所定の領域を透明領域３１０とするため透明レイヤと合成しておき、全天球画像６を生成しておく。

プレビュー画面領域２２１の全天球画像６は所定領域画像なので一部のみしか表示されない。担当者は全天球画像６を回転させて不透明領域６ａ（コンテンツ）の初期位置を合わせることができる。初期位置とは、端末装置３０が画像配信装置１０から広告データを受信した直後に配信画像を広告枠７に表示した場合の、背景画像Ｂに対する全天球画像６の相対位置である。担当者は広告効果が高まるように初期位置を決定できる。端末装置３０は全天球画像６の初期位置の登録を受け付ける。

＜動作手順＞
図１６は、画像表示システム１００が広告として表示される全天球画像６を配信する手順を説明するシーケンス図の一例である。

S1：まず、閲覧者はパートナーサイトＷｅｂサーバ６０と接続するように端末装置３０を操作する。端末装置３０の操作受付部３４は操作を受け付け、Ｗｅｂページ取得部３１がＷｅｂページを取得する。

S2：端末装置３０のＷｅｂページ解析部３２はＷｅｂページを解析しＨＴＭＬ、ＣＳＳ，スクリプトを抽出し、Ｗｅｂページ表示部３３がＨＴＭＬとＣＳＳに基づいてＷｅｂページを表示する。

S3：端末装置３０の広告枠検出部３６は広告枠７に対応付けられた広告タグ（スクリプト）を実行することで広告リクエストをＳＳＰ５０に送信する。広告リクエストには、例えばＳＳＰクッキー、パートナーサイトＷｅｂサーバ６０のドメイン、広告枠ＩＤ、広告枠７サイズ、広告フォーマット、ブラウザ種類、ＯＳ種類等が含まれる。

S4：ＳＳＰ５０の広告要求取得部５２は広告リクエストを取得し、広告リクエスト部５１が広告リクエストを受け付ける。広告リクエスト部５１はＳＳＰクッキーを検出してＤＳＰ２０に対し広告リクエストを通知して広告枠７を販売する。

S5：ＤＳＰ２０のリクエスト受付部２１は広告リクエストを入札判断部２２に送出する。ＤＳＰ２０の入札判断部２２はクッキー情報ＤＢ２９１を参照してＳＳＰクッキーからＤＳＰクッキーを特定する。

S6：入札判断部２２はＤＳＰクッキーから属性を判断する。クッキー情報ＤＢ２９１の訪問ドメインを参照してもよいし、適宜、ＤＳＰクッキーで特定される閲覧者の属性情報を参照してもよい。

S7：入札判断部２２は配信設定ＤＢ２９２を参照して広角画像又は３ＤＣＧ画像の提供元に対し設定されている好ましい対象者の属性又は好ましくない対象者の属性に基づいて、この閲覧者に広角画像を送信するか否かを決定する。ここでは少なくとも１つの広告主について配信すると決定したものとする。

S8：入札判断部２２は広告主の予算や属性の一致度等に応じて入札金額を決定する。

S9：ＤＳＰ２０の入札部２３はＳＳＰ５０に入札する。ＳＳＰ５０の落札部５４は複数のＤＳＰ２０からの入札に対し原則的に最も高い入札金額を申し入れたＤＳＰ２０を落札者に決定する。

S10：ここでは図示するＤＳＰ２０が落札したものとする。ＳＳＰ５０は落札ＩＤをＤＳＰ２０に通知する。

S11：ＳＳＰ５０のアクセス情報送信部５３は落札ＩＤと共にアクセス情報１を端末装置３０に送信する。

S12：端末装置３０の広告要求部３８はアクセス情報１を実行することで落札ＩＤと共に広告要求をＤＳＰ２０に送信する。

S13：ＤＳＰ２０の広告要求受付部２４は落札ＩＤにより広告リクエストを特定する。画像依頼部２５は広告主ＩＤ、ＤＳＰクッキー、及び、広告リクエストと共に画像配信装置１０に画像を要求する。

S14：画像配信装置１０の画像情報応答部１１は画像要求を受信すると広告リクエストを特定するための広告機会ＩＤを生成する。

S15：画像情報応答部１１は広告機会ＩＤと対応付けられたアクセス情報２をＤＳＰ２０に送信する。

S16：ＤＳＰ２０の画像依頼部２５はアクセス情報２を受信して、広告要求受付部２４が端末装置３０に送信する。

S17：端末装置３０の広告取得部３９はアクセス情報２に含まれる画像配信装置１０のＵＲＬに基づいて広告要求（広告機会ＩＤ）を送信する。端末装置３０が画像クッキーを保持している場合は画像クッキーを送信することができる。

S18：画像配信装置１０の広告配信部１２は広告機会ＩＤにより画像要求を特定する。

S19：広告配信部１２はＤＳＰクッキーから属性を判断したり、画像クッキーから属性を判断したりする。

S20：広告配信部１２は広告主ＩＤと属性に基づき全天球画像６と背景画像を特定する。すなわち、広告画像ＤＢ１９４を参照し全天球画像６と背景画像に対し設定されている配信の対象者の属性又は優先度に基づいて送信する全天球画像６と背景画像を決定する。表示パターンはクリック回数が閾値より高いものであるが、全天球画像６と背景画像の配信数が少ない間は不作為に選択する。

S21：広告配信部１２は全天球画像６、背景画像、初期位置、表示パターン、画像ＩＤ、画像クッキー、及び、広告枠ＩＤを含む広告データを端末装置３０に送信する。全天球画像６又は背景画像には広告主Ｗｅｂサーバ７０のＵＲＬが対応付けられている。

S22：端末装置３０の広告取得部３９は広告データを取得し、広告表示部４０が広告枠７に全天球画像６と背景画像を表示する。閲覧者が広告枠７を押下（クリック又はタップ）すると操作受付部３４が受け付け、広告主Ｗｅｂサーバ７０のＵＲＬに基づいてＷｅｂページ取得部３１が広告主Ｗｅｂサーバ７０と通信を開始する。

＜広告データを受信した端末装置の処理＞
次に、図１７を用いて広告データを受信した端末装置の処理について説明する。図１７は端末装置３０が配信画像を表示する手順を示すフローチャート図の一例である。

広告表示部４０はまず、背景画像Ｂを広告枠ＩＤで特定される広告枠７に表示する（Ｓ１０１）。

次に、広告表示部４０は初期位置に基づいて全天球画像から広告枠７のサイズに適した所定領域画像を生成する（Ｓ１０２）。

広告表示部４０は背景画像Ｂに重ねて所定領域画像を表示する（Ｓ１０３）。所定領域画像は不透明領域６ａを除いて透明なので、不透明領域６ａが背景画像Ｂに重なって表示される。なお、ステップＳ１０１〜Ｓ１０３は順番に実行されているが、背景画像Ｂに所定領域画像を重ねた後に広告枠７に表示してもよい。

画像操作受付部４３は全天球画像６の回転を受け付けた否かを判断する（Ｓ１０４）。閲覧者が全天球画像６を操作しない場合は（Ｓ１０４のＮｏ）、広告表示部４０は表示パターンにしたがって注目点を順番に表示する（Ｓ１０５）。

閲覧者が全天球画像６を操作した場合（Ｓ１０４のＹｅｓ）、閲覧者の操作が優先され、広告表示部４０は中心点ＣＰに基づいて全天球画像６から広告枠７のサイズに適した所定領域画像を生成する（Ｓ１０６）。

広告表示部４０は背景画像Ｂに重ねて所定領域画像を表示する（Ｓ１０７）。背景画像Ｂに対し不透明領域６ａの相対位置が変化したので、閲覧者には背景画像Ｂの上を不透明領域６ａのコンテンツ（ゲームのキャラクターなど）が動いているように見える。

画像操作受付部４３は広告枠７（全天球画像６又は背景画像Ｂ）のクリックを受け付けた否かを判断する（Ｓ１０８）。

クリックを受け付けた場合（Ｓ１０８のＹｅｓ）、Ｗｅｂページ取得部３１が広告主Ｗｅｂサーバ７０と通信して、Ｗｅｂページ表示部３３がＷｅｂページ（これをランディングページという）を表示する（Ｓ１０９）。

＜背景画像と全天球画像の重ね合わせの一例＞
背景画像Ｂと全天球画像６の重ね合わせの例については図３に示した。図３では、全天球画像６の一部が不透明領域６ａ（多くの領域が透明領域）であったが、全天球画像６の一部が透明領域でもよい。図１８は、背景画像Ｂと全天球画像６を重ね合わせた場合に広告枠７に表示される画像の一例である。図１８（ａ）は例えば、物件の室内を全天球カメラ９で撮像した全天球画像６を示し、図１８（ｂ）は背景画像Ｂを示す。全天球画像６には窓３１０，ソファ３１１及びハンガーラック３１２のコンテンツがあるが、窓３１０のみが透明で、ソファ３１１、ハンガーラック３１２、壁及び床を含む他の部分は不透明である。また、背景画像Ｂは一様な晴天の画像である。

図１８（ｃ）は広告枠７の背景画像Ｂに全天球画像６の一部が重ねられた状態を示す。透明部は窓３１０だけなので、窓３１０が広告枠７に入るように閲覧者が全天球画像６を回転させた場合にだけ、窓越しに背景画像Ｂ（晴天）が見える。実空間でも窓から空が見ることはあり得るので、全天球画像６の閲覧時のリアリティを向上でき、広告効果を高める画像の表現ができる。全天球画像６は、これ以外にも例えば、ホテルの室内や、車の室内の画像を全天球カメラ９で撮像して全天球画像６として利用し、天候がよい時間帯や、夕焼けなどの時間帯の背景画像を組み込むことで、画像の表示の効果を高めることも可能である。

図１９は端末装置３０に表示された広告枠７における背景画像Ｂと全天球画像６の表示例を示す図である。図１９ではＷｅｂページに１つの広告枠７があり、背景画像Ｂに重ねて全天球画像６の所定領域画像が表示されている。全天球画像６は透明なレイヤに不透明領域６ａが配置される構造となっている。すなわち、全天球画像６はあくまで正距円筒射影図法で作成されている。全天球画像６は緯度が高い又は低い領域が歪んでいることで端末装置３０が表示する際は歪みが少なくなるが、緯度が高い又は低い領域に不透明領域６ａが配置されると、端末装置３０が表示した際には不透明領域６ａが歪んでしまう。したがって、不透明領域６ａは赤道付近（緯度が９０度）に配置することが好ましい。

図１９（ａ）の広告枠７で閲覧者が左右に全天球画像６を回転させると図１９（ｂ）のように背景画像Ｂは止まったまま所定領域画像の不透明領域６ａが移動する。図１９（ｂ）の広告枠７で閲覧者が左右に全天球画像６を回転させると図１９（ａ）のように背景画像Ｂは止まったまま所定領域画像の不透明領域６ａが移動する。したがって、閲覧者には背景画像Ｂを不透明領域６ａが移動しているように見える。

なお、不透明領域６ａの位置、数、又は、面積等はあくまで一例に過ぎない。不透明領域６ａのコンテンツはゲームのキャラクターに限られないのはもちろんであり、乗り物など画像で表現できるものはほぼ全てコンテンツにできる。また、コンテンツは文字、数字、アルファベット、記号などでもよい。

背景画像Ｂは不透明領域６ａのコンテンツに応じて何らかの関連性があるようにデザインされるとよい。逆に、背景画像Ｂに何らかの関連性がある不透明領域６ａのコンテンツがデザインされてもよい。例えば、ゲームの一場面を背景画像Ｂとしてコンテンツをゲームに登場するキャラクターにするような場合がある。しかし、必ずしも不透明領域６ａのコンテンツと関連がなくてもよい。

なお、図１８（ａ）に示した全天球画像６は、全天球カメラ９で撮像された画像であるが、それ以外にも３ＤＣＧで作成した３６０度（４πラジアン）の画像であってもよい。この場合も、同様に、例えば、窓３１０のガラスに対応する領域を透明にすることで、同様のことが実施できる。

＜広告データの配信形態の補足＞
本実施形態では第三者配信という仕組みで広告が配信されたが、広告は最終的に端末装置３０が表示するＷｅｂページに表示されればよい。図２０は広告データが配信されるいくつかの形態を示す。

図２０（ａ）ではパートナーサイトＷｅｂサーバ６０が配信するＷｅｂページに広告データが含まれる状態でＷｅｂページが送信されている。この場合、広告主はパートナーサイトＷｅｂサーバ６０に予め画像データを入稿している。

図２０（ｂ）では広告配信サーバ８０が広告データを配信している。パートナーサイトＷｅｂサーバ６０が広告を載せたいＷｅｂページを広告配信サーバ８０に登録する。これにより、広告配信サーバ８０はアドタグを出力するので、パートナーサイトＷｅｂサーバ６０は広告を載せたいＷｅｂページにアドタグを貼り付ける。また、広告主は広告データを広告配信サーバ８０に入稿しておく。

閲覧者がパートナーサイトＷｅｂサーバ６０にアクセスをすると、アドタグにより広告配信サーバ８０を呼び出す。広告配信サーバ８０は各広告主から入稿されたどの広告を配信するか判断し、広告データを端末装置３０に送信する。

図２０（ｃ）は本実施形態で説明した態様における広告データの配信例である。本実施形態で説明したように、画像配信装置１０が広告データを配信してもよいし、ＤＳＰ２０が配信してもよい。広告主は広告データをＤＳＰ２０に入稿しておけばよい。また、図２０（ｃ）の構成では、ＤＳＰ２０又は画像配信装置１０が広告配信サーバ８０となる。

また、画像データの好適例として広告枠７に表示される画像データを説明したが、 また、画像データの好適例として広告枠７に表示される画像データを説明したが、端末装置３０に配信され閲覧者の操作で変化する（インタラクティブ性がある）画像データであれば広告に限られず本実施形態を好適に適用できる。

＜まとめ＞
以上説明したように本実施例の画像表示システムは、上下左右に回転させることができる全天球画像６の一部を不透明又は透明にして、背景画像Ｂと重ねることで、単に全天球画像６が回転するだけでなく、閲覧者の操作により背景に対し動きがあるインタラクティブ性の高い画像閲覧体験を低コストに提供できる。したがって、広告の効果を高める画像の表示の表現を実現することができる。

なお、背景画像Ｂが広告枠７に対し固定であるかのように説明したが、背景画像Ｂは広告枠７に対し動いてもよい。背景画像Ｂも広告枠７よりも大きなサイズであれば、閲覧者の操作によって動かすことができる。また、複数の背景画像Ｂが端末装置３０に送信されてもよい。この場合、閲覧者の所定の操作で背景画像Ｂが切り替わる。背景画像Ｂと全天球画像６の組み合わせが変わるのでより動きのある新しい画像閲覧の体験を提供できる。

本実施例ではターンテーブル型の広告を全天球画像６と重ねて配信画像とする画像表示システム１００について説明する。

まず、図２１を用いてターンテーブル型の広告について説明する。ターンテーブル型の広告は、実物又は３ＤＣＧをターンテーブル３３１で回転させて一定又は任意の角度ごとに撮像した画像を用いた広告である。例えば、中古車市場では車を種々の角度から見て判断したいという閲覧者が多く、従来からターンテーブル型の広告が採用されている。図２１ではターンテーブル３３１上に実物の車３３２が載っており、車に光軸を向けたカメラ３３０が配置されている。車３３２を撮像対象という。撮像対象は広告の対象となる物やサービスである。

カメラ３３０はターンテーブル３３１の回転に連動して車３３２を自動的に撮像するので、カメラ３３０から見て角度が少しずつ異なる車３３２の画像が撮像される。なお、自動で撮像する必要はなく、人間がターンテーブル３３１を少しずつ回転させてカメラ３３０で撮像してもよい。このようにして撮像された各画像を角度変更画像という。

ターンテーブル型広告では角度変更画像が端末装置３０に配信され、閲覧者は広告枠７に表示された１つの角度変更画像を水平方向に回転させるように操作できる。端末装置３０は、回転量に応じて角度変更画像を抽出してディスプレイ６１６に表示する。したがって、閲覧者は車を任意の角度に回転させて自由な角度から閲覧することができるように感じる。

なお、図２１では実物の車を例にして説明したが、３ＤＣＧでも同様に角度変更画像を作成できる。３ＤＣＧとはコンピュータの演算によって三次元空間内の仮想的な立体物を２次元である平面上の情報に変換することで奥行き感（立体感）のある画像を作る手法である。３ＤＣＧは、モデリング、ワールド変換、ビュー変換、透視投影変換（射影変換）、ライティングなどのプロセスで作成される。なお、モデリングとワールド変換までは専用のソフトウェア上で作業され、ビュー変換、透視投影変換、ライティングは表示プログラムで実行される。

モデリングはローカル座標系で作成者がオブジェクトの形状を定義すること、例えばポリゴンで形状を作成することをいう。ワールド変換は描画対象の三次元空間を表すワールド座標系にオブジェクトの座標を変換する（平行移動と回転）ことをいう（ワールド座標系にオブジェクトを配置すること）。ビュー変換はワールド座標系で閲覧者の視点を定めることに相当し、カメラの座標、カメラの注視点及びカメラの上方向を設定し、オブジェクトを特定の方向から見るための設定を行う処理である。視点は閲覧者の操作により決定されてもよいし、自動的に変更することもできる。透視投影変換は三次元空間のオブジェクトを２次元の平面に投影することをいう。ライティングは光源の位置に応じて明暗を与える処理をいう。

図２２は、仮想的なカメラ３０１にオブジェクト３０２を透視投影変換する様子を模式的に示している。ポリゴンで作成された車のオブジェクト３０２が平面に投影されている。仮想的なカメラ３０１の位置を変えると（ビュー変換）カメラの位置に応じて車を投影できる。カメラ３０１の位置は車の周囲の３６０度の任意の位置に変更できるので、ターンテーブル型広告に適した角度変更画像を生成できる。

＜ターンテーブル型広告の不都合について＞
図２３はある角度で広告枠７に表示されたターンテーブル型広告の一例を示す。図２３では飲料３４０のターンテーブル型広告を示す。ターンテーブル型広告はインタラクティブ性が高く広告効果が高いため利用したいというニーズが多いが、角度変更画像の背景は広告用に選定又は撮像された背景ではなく、駐車場などの実際の風景であったり、単一色の壁などが背景となっていたりする場合が多い。このため、図２３（ａ）に示すように背景がない（均一色の背景）状態でターンテーブル型広告が配信される場合がある。

しかしながら、実際に広告として配信する場合、広告としてデザインされた背景がある方が広告効果も高いことが知られている。図２３（ｂ）ではいくつかの山の頂上の背景が付加されているが、閲覧者が飲料３４０を回転させると背景も回転して変化するため、インタラクティブ性が向上する。

しかし、中古車などの実物が撮像されている角度変更画像に背景を付けることは容易でなかった。また、３ＤＣＧで作成された角度変更画像に背景を付ける場合は、背景の３Ｄモデルを作って撮像対象と共に透視投影変換する方法がある。しかし、３Ｄモデルを作成することは時間と労力がかかるという不都合があった。

本実施例では、角度変更画像に背景をより低コストに付加できる画像表示システム１００について説明する。

＜機能について＞
本実施例においては、上記の実施例にて説明した図５，図６のハードウェア構成図、及び、図１３,図１４に示した機能ブロック図を援用できるものとして、主に相違点を説明する。

表８は、本実施例における広告画像ＤＢ１９４の一例を示す。表４と比較すると表８の広告画像ＤＢ１９４は配置位置、及び角度変更画像番号の項目を有している。配置位置は、端末装置３０が画像配信装置１０から受信した直後に配信画像を表示する時、全天球画像６におけるどの位置に角度変更画像を配置するかを指定する。初期位置と配置位置が異なると、端末装置３０が配信画像を表示した時に閲覧者が撮像対象を目視できないので、初期位置と配置位置は同じか近い値であることが多い。角度変更画像番号は複数の角度変更画像のうち何番目を最初に（端末装置３０が画像配信装置１０から配信画像を受信した直後）表示するかを示す。配置位置と角度変更画像番号は担当者が決定する。

画像配信装置１０から端末装置３０に配信される広告データには、配置位置と角度変更画像番号も含まれる。

＜角度変更画像と全天球画像の広告画像ＤＢへの登録＞
図２４を用いて広告画像ＤＢ１９４に登録される角度変更画像と全天球画像６について説明する。図２４（ａ）は角度変更画像３９０（第１の画像データの一例）の一例を示し、図２４（ｂ）は全天球画像６（第２の画像データの一例）の一例を示す。実施例１と同様に重ね合わせは端末装置３０で行われるが、配置位置と角度変更画像番号は担当者が設定し、広告画像ＤＢ１９４に登録しておく。

図２４（ａ）の角度変更画像３９０は３６枚あるが、角度変更画像３９０は行方向に撮像された角度が少しずつ異なっている。１〜３６の番号は角度変更画像番号であり、角度変更画像の識別情報である。任意の番号から昇順又は降順に辿って端末装置３０が表示しても撮像対象（車）の向きが連続的に変化する。３６個は一例であり、もっと少なくても多くてもよい。

また、角度変更画像３９０の１つ１つは矩形であり、車の像はその一部に過ぎない。角度変更画像３９０の背景部分（車以外の部分）は、全天球画像６と重ねた場合に違和感を生じさせるので、予め透明になっている。これにより、閲覧者は全天球画像６に重ねられた車の像のみを視認できる。背景部分を透明にする方法としては、ターンテーブル上の車をカメラ３３０が撮像する際に予め均一色のスクリーンを用意しておく方法がある。担当者は画像処理によりこの均一色のみを透明にすればよい。３ＤＣＧで作成された角度変更画像３９０の場合は、そもそも背景がないので例えば白い部分を透明にすればよい。

図２４（ｂ）の全天球画像６は作図の都合上、平面画像で示すが、実際には全天球カメラ９で撮像された正距円筒射影画像である。担当者は任意の場所に角度変更画像３９０の配置位置を決定できる。ただし、全天球画像６は緯度が高い又は低い領域が歪んでいることで端末装置３０が表示した際の歪みを少なくするが、緯度が高い又は低い領域に角度変更画像３９０を配置すると、端末装置３０が表示した際には角度変更画像３９０が歪んでしまう。したがって、角度変更画像３９０は赤道付近（緯度が９０度）に配置することが好ましい。

図２５は、本実施例において、画像登録端末９０のディスプレイに表示された配信画像登録画面２６０の一例を示す。なお、図２５の説明では主に図１５との相違を説明する。図２５の配信画像登録画面２６０はプレビュー画面領域２６１、角度変更画像ファイル選択欄２６２、全天球画像ファイル選択欄２６３、重畳解除ボタン２６４、キャンセルボタン２６５、及び、新規作成ボタン２６６を有している。

角度変更画像ファイル選択欄２６２は、担当者が角度変更画像のファイルを選択して設定するための欄である。角度変更画像のファイルは３６枚の各角度変更画像ごとに用意してもよいが、別々のファイルになると画像配信装置１０から端末装置３０への送信に要する時間が長くなる。このため、角度変更画像のファイルは３６枚の各角度変更画像で１つのファイルとすることが好ましい。端末装置３０は３６枚の角度変更画像を１つずつ切り取って全天球画像６と重ね合わせる。

プレビュー画面領域２６１、全天球画像ファイル選択欄２６３、重畳解除ボタン２６４、キャンセルボタン２６５、及び、新規作成ボタン２６６については図１５と同様でよい。

プレビュー画面領域２６１に示すように、全天球画像６の一部が所定領域画像として表示されており、所定領域画像に１つの角度変更画像３９０が重ねて表示されている。このような表示は、担当者がプレビュー画面領域に表示された３６枚の角度変更画像３９０から１つを選び、重畳解除ボタン２６４を押し全天球画像６に切り替えて、配置位置をクリックすることなどにより可能である。ただし、操作方法は適宜考えられる。

担当者が角度変更画像３９０を全天球画像６に配置した際の角度変更画像３９０の中心又は左上コーナーなどが配置位置である。また、担当者が全天球画像６に配置した角度変更画像により角度変更画像番号が決まる。

＜端末装置における全天球画像に対する角度変更画像の重ね合わせ＞
続いて、図２６を用いて端末装置３０における全天球画像６に対する角度変更画像３９０の重ね合わせについて説明する。図２６は端末装置３０が全天球画像６に角度変更画像３９０を重ねる処理を説明する図である。図２６（ａ）は角度変更画像３９０を示し、図２６（ｂ）は全天球画像６を示す。

なお、角度変更画像３９０は水平方向に３６０度を変化させて撮像されているので、全天球画像６も水平方向のみの回転が許可される。つまり、上下方向に回転させても全天球画像６が回転しない。また、角度変更画像の高さは一定でよい（広告画像ＤＢ１９４の配置位置のφのままでよい）。

閲覧者による全天球画像６の回転に同期させて向きが異なる角度変更画像３９０を端末装置３０が表示するには、中心点ＣＰの水平方向の角度（経度）θに応じて、角度変更画像３９０を切り取って、所定領域画像の決まった高さに重ねればよい。例えば、広告画像データにおいて全天球画像６の水平方向の初期位置をθ_０、配置位置をθ_０、角度変更画像番号を１５とする。

角度変更画像は３６枚なので３６０度を３６で割ると、１枚当たり１０度に相当する。閲覧者が回転させた後の中心点ＣＰの水平方向の角度をθとすると、「（θ−θ０）/１０度」により、全天球画像６の水平方向の角度の変化が角度変更画像３９０の何枚分に相当するか分かる。したがって、式（Ｂ）により角度変更画像番号を決定できる。
「（θ−θ_０）/１０度」＋１５ …（Ｂ）
この角度変更画像番号の角度変更画像を所定領域画像の水平方向の中心かつ決まった高さ（配置位置のφ）に端末装置３０が重ねればよい。

図２６（ｂ）では３つの所定領域画像Ｑを点線で示す。各所定領域画像には向きが異なる角度変更画像３９０が配置されている。このように、閲覧者が全天球画像６を回転させて広告枠７に表示される各所定領域画像を変更すると、撮像された角度が異なる角度変更画像３９０が表示される。閲覧者が全天球画像６を回転させることで背景が変わるが、背景の変化と同期して向きが変更された撮像対象（車）が表示されるので、背景と共に車の向きが変わるように見える。

＜広告データを受信した端末装置の処理＞
次に、図２７を用いて広告データを受信した端末装置３０の処理について説明する。図２７は端末装置３０が全天球画像６に角度変更画像３９０を重ねて表示する手順を示すフローチャート図の一例である。

広告表示部４０は、初期位置に基づいて全天球画像６から広告枠７のサイズに適した所定領域画像を生成する（Ｓ２０１）。

次に、広告表示部４０は角度変更画像番号に基づいて１つの角度変更画像を取り出す（Ｓ２０２）。角度変更画像のファイルの行数と列数は決まっているので、角度変更画像番号が分かれば、角度変更画像の１つのファイルからどの角度変更画像を取り出せばよいか（切り出せばよいか）特定できる。予め、角度変更画像のファイル内の座標と角度変更画像番号が対応付けられたテーブルなどが用意されてもよい。

次に、広告表示部４０は広告データとして送信された配置位置に基づいて所定領域画像に角度変更画像を重ねて表示する（Ｓ２０３）。所定領域画像の水平方向の中心に角度変更画像が配置される場合、所定領域画像の水平方向の中心は初期位置と同じなので、所定領域画像の水平方向の中心に角度変更画像を配置する。

画像操作受付部４３は全天球画像６の回転を受け付けた否かを判断する（Ｓ２０４）。閲覧者が全天球画像６を操作しない場合は（Ｓ２０４のＮｏ）、広告表示部４０は表示パターンにしたがって注目点を順番に表示する（Ｓ２０５）。

閲覧者が全天球画像６を操作した場合（Ｓ２０４のＹｅｓ）、閲覧者の操作が優先され、広告表示部４０は変更後の中心点ＣＰに基づいて全天球画像６から広告枠７のサイズに適した所定領域画像を生成する（Ｓ２０６）。

広告表示部４０は回転後の中心点ＣＰの水平方向の角度（経度）θに基づいて式（Ｂ）から角度変更画像番号を決定する（Ｓ２０７）。広告表示部４０は決定した角度変更画像番号の角度変更画像を角度変更画像のファイルから切り取る。

広告表示部４０は所定領域画像の水平方向の中心かつ決まった高さ（配置位置のφ）に角度変更画像を重ねて表示する（Ｓ２０８）。

画像操作受付部４３は広告枠７のクリックを受け付けた否かを判断する（Ｓ２０９）。

クリックを受け付けた場合（Ｓ２０９のＹｅｓ）、Ｗｅｂページ取得部３１が広告主Ｗｅｂサーバ７０と通信して、Ｗｅｂページ表示部３３がＷｅｂページを表示する（Ｓ２１０）。

＜角度変更画像と全天球画像の重ね合わせの一例＞
図２８は端末装置３０に表示された広告枠７における角度変更画像３９０と全天球画像６の表示例を示す図である。図２８ではＷｅｂページに１つの広告枠７があり、全天球画像６の所定領域画像Ｑに重ねて角度変更画像３９０が表示されている。図２８（ａ）の広告枠７で閲覧者が左右に全天球画像６を回転させると図２８（ｂ）のように所定領域画像Ｑが変化し（回転し）、全天球画像６の回転に同期して角度変更画像３９０が切り替わる。図２８（ｂ）についても同様である。したがって、閲覧者には背景（全天球画像６）が変わると角度変更画像に写っている撮像対象の向きが変わるように見え、インタラクティブ性が向上し、広告効果を高める画像の表示の表現を実現することができる。

なお、角度変更画像３９０の配置位置は所定領域画像（広告枠７）の中央でなくてもよく、適宜設定されうる。また、角度変更画像の撮像対象は角度を変えて撮像されるものであればよい。また、全天球画像６の回転方向は左右方向に限られず、上下方向に回転してもよい。

＜まとめ＞
以上説明したように、本実施例の画像表示システム１００は、全天球画像６を回転させながら所定領域画像Ｑを生成し、回転に同期して決定された角度変更画像３９０を重ねて表示するので、角度変更画像に背景をより低コストに付加できる。

＜その他の適用例＞
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。

例えば、本実施形態では、広告枠７に全天球画像６が表示される例を説明したが、全天球画像６は広角な画像であればよい。すなわち、広告枠７には入りきらない画角を有し、閲覧者の操作で見られる範囲が変わる画像データであればよい。また、Ｗｅｂページに表示される画像は広告用の画像である必要はなく、画像データであればよい。

また、全天球画像６を表示する端末装置３０のアプリケーションはブラウザソフトに限られず、任意のアプリケーションソフトウェアが画面に全天球画像６や３ＤＣＧ画像を表示する際にも本実施形態を適用できる。

本実施形態では端末装置３０がＤＳＰ２０にアクセスし、次に、画像配信装置１０にアクセスして広告データを取得している。しかし、ＤＳＰ２０が画像配信装置１０から直接、広告データを取得して端末装置３０に送信してもよい。端末装置３０はＤＳＰ２０にアクセスするだけで広告データを取得できるため、広告が表示されるまでの時間を短縮できる。また、ＤＳＰ２０と画像配信装置１０が一体に構成されており、ＤＳＰ２０が広告データ（全天球画像）を端末装置３０に配信してもよい。

また、本実施形態で説明されたＳＳＰ５０，ＤＳＰ２０及び画像配信装置１０が連携する広告の配信方法は一例に過ぎず、端末装置３０が広告を表示するまでのプロセスを制限する意図はない。例えば、単純なプロセスとして、パートナーサイトＷｅｂサーバ６０が広告主からの広告データを預かっておき、端末装置３０に配信してもよい。この場合、ＳＳＰ５０、ＤＳＰ２０及び画像配信装置１０はなくてよい。

また、全天球画像６は２つの画像が張り合わされる方法で作成される場合に限られず、例えば、撮像方向を少しずつ移動しながら撮像した画像データの重複部分を重ね合わせて作成してもよい。すなわち、全天球画像６の作成方法は制限されない。

また、以上の実施例で示した図１３、図１４などの構成例は、画像表示システム１００の処理の理解を容易にするために、主な機能に応じて分割したものである。しかし、各処理単位の分割の仕方や名称によって本願発明が制限されることはない。画像表示システム１００は、処理内容に応じて更に多くの処理単位に分割することもできる。また、１つの処理単位が更に多くの処理を含むように分割することもできる。

上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。

７ 広告枠
１０ 画像配信装置
２０ ＤＳＰ
３０ 端末装置
４０ 広告表示部
５０ ＳＳＰ
６０ パートナーサイトＷｅｂサーバ
７０ 広告主Ｗｅｂサーバ
１００ 画像表示システム

特開２００８−１９２１１５号公報

Claims (14)

1. 画像を配信する画像配信装置から端末装置が画像を受信する画像表示システムであって、
   前記画像配信装置は、
   透明な領域を有する第１の画像データと、前記第１の画像データと対応付けられた第２の画像データの登録を受け付ける配信画像受付部と、
   前記配信画像受付部が受け付けた前記第１の画像データと前記第２の画像データを前記端末装置に送信する配信部と、を有し、
   前記端末装置は、
   前記画像配信装置から前記第１の画像データと前記第２の画像データを取得する取得部と、
   前記取得部が取得した前記第１の画像データと前記第２の画像データを重ねて画面に表示する表示部と、
   を有することを特徴とする画像表示システム。
2. 前記第１の画像データは前記画面が有する表示枠のサイズよりも大きく、前記第１の画像データに対する表示変更の要求に応じて前記第１の画像データの一部の所定領域画像が前記表示枠に表示されることを特徴とする請求項１に記載の画像表示システム。
3. 前記配信画像受付部は、前記端末装置が前記第１の画像データを受信した直後に前記表示枠に表示する初期位置の登録を受け付け、
   前記配信部は前記第１の画像データと前記第２の画像データ及び前記初期位置を前記端末装置に送信することを特徴とする請求項２に記載の画像表示システム。
4. 前記表示部は、前記第２の画像データを背景画像として、前記第１の画像データを前記第２の画像データに重ねて表示することで、前記第１の画像データの不透明領域のみを前記第２の画像データに重ねて表示することを特徴とする請求項２又は３に記載の画像表示システム。
5. 前記第２の画像データに重ねて表示された前記第１の画像データに対する表示変更の要求により前記表示枠に表示される所定領域画像が変更された場合、
   前記第２の画像データに対する前記不透明領域の相対位置が変わることを特徴とする請求項４に記載の画像表示システム。
6. 前記第２の画像データは前記画面が有する表示枠のサイズよりも大きく、前記第２の画像データに対する表示変更の要求により前記第２の画像データの一部の所定領域画像が前記表示枠に表示され、
   前記第１の画像データは前記表示枠のサイズよりも小さく、予め定められた配置位置に表示されることを特徴とする請求項１に記載の画像表示システム。
7. 前記配信画像受付部は、前記端末装置が前記第２の画像データを受信した直後に前記表示枠に表示する初期位置、及び、前記配置位置の登録を受け付け、
   前記配信部は前記第１の画像データ、前記第２の画像データ、前記初期位置及び前記配置位置を前記端末装置に送信することを特徴とする請求項６に記載の画像表示システム。
8. 前記第１の画像データは同じ撮像対象を水平方向の異なる角度から撮像した複数の角度変更画像を有し、
   前記配信画像受付部は、前記端末装置が前記第２の画像データを受信した直後に前記表示枠に表示する前記角度変更画像の識別情報の登録を受け付け、
   前記配信部は前記第１の画像データ、前記第２の画像データ、前記初期位置、前記配置位置及び前記角度変更画像の識別情報を前記端末装置に送信することを特徴とする請求項７に記載の画像表示システム。
9. 前記表示部は、前記第２の画像データを背景として、前記角度変更画像の識別情報で特定される１つの前記角度変更画像を前記第２の画像データに重ねて表示することで、前記角度変更画像の不透明領域を前記第２の画像データに重ねて表示することを特徴とする請求項８に記載の画像表示システム。
10. 前記第２の画像データに対する表示変更の要求により前記表示枠に表示される所定領域画像が変更された場合、
    前記表示部は、前記第２の画像データに対する表示変更の要求に応じた前記角度変更画像を決定し、変更後の所定領域画像に前記角度変更画像を重ねて表示することを特徴とする請求項９に記載の画像表示システム。
11. 前記表示部は、前記第２の画像データの水平方向の回転に同期して前記撮像対象の向きが異なる前記角度変更画像を前記第２の画像データに重ねて表示することを特徴とする請求項１０に記載の画像表示システム。
12. 前記第１の画像データはターンテーブル上にある実物の前記撮像対象が異なる角度から撮像された複数の前記角度変更画像を有するか、又は、
    ３ＤＣＧで作成された３Ｄモデルの前記撮像対象が異なる角度から撮像された複数の前記角度変更画像を有することを特徴とする請求項８〜１１のいずれか１項に記載の画像表示システム。
13. 画像を配信する画像配信装置から端末装置が画像を受信する画像表示システムが行う画像表示方法であって、
    前記画像配信装置は、
    配信画像受付部が、透明な領域を有する第１の画像データと、前記第１の画像データと対応付けられた第２の画像データの登録を受け付けるステップと、
    配信部が、前記配信画像受付部が受け付けた前記第１の画像データと前記第２の画像データを前記端末装置に送信するステップと、を有し、
    前記端末装置は、
    取得部が、前記画像配信装置から前記第１の画像データと前記第２の画像データを取得するステップと、
    表示部が、前記取得部が取得した前記第１の画像データと前記第２の画像データを重ねて画面に表示するステップと、
    を有することを特徴とする画像表示方法。
14. 画像を配信する画像配信装置から画像を表示する端末装置を、
    前記画像配信装置が登録を受け付けた透明な領域を有する第１の画像データと、前記第１の画像データと対応付けられた第２の画像データとを取得する取得部と、
    前記取得部が取得した前記第１の画像データと前記第２の画像データを重ねて画面に表示する表示部、
    として機能させるためのプログラム。