JP2013183333A - 拡張現実システム - Google Patents

Abstract

【課題】、過去の時点における情報を提供する「拡張現実システム」を提供する。
【解決手段】車載システム１は、カメラ１０３で自車前方を撮影した映像上の、ＡＲデータが表す座標が写り込む位置に、ＡＲデータが表すＡＲタグを配置したＡＲ画像を表示すると共に、カメラ１０３で撮影した映像を記録動画データとして、ＡＲタグを表示したＡＲデータを表示ＡＲデータとして、各時点における現在位置と自車前方方向とを走行履歴として記憶する。スマートフォン２のＡＲプレイヤ２１０は、記録動画データを再生した再生映像６０１を表示すると共に、再生映像上の、走行履歴より求まる表示ＡＲデータが表す座標が写り込む位置に、ＡＲデータが表すＡＲタグ６０２を表示する（ａ）。
【選択図】図６

Description

本発明は、拡張現実の技術に関するものである。

拡張現実（AR： Augmented Reality）の技術としては、通信を介してサーバから取得した携帯電話端末の周辺の施設の情報を、現時点においてカメラが撮影している実空間の周辺の風景を表す映像上の当該施設に対応する位置に重畳表示する通信端末が知られている（たとえば、特許文献１）。

特開２０１０-２３９５６８号公報

上述した拡張現実の技術によれば、現時点における現実を拡張することしかできず、過去の時点についての情報をユーザに提供することができない。
そこで、本発明は、過去の各時点についての情報を、ユーザが容易に取得可能かつ各情報の主体を直感的に把握可能な形態で提供する拡張現実システムを提供することを課題とする。

前記課題達成のために、本発明は、カメラを備え、施設に関係づけられた当該関係づけられた施設の情報を表す拡張現実情報に基づいて、前記カメラの撮影範囲に含まれる施設に関係づけられた拡張現実情報が表す情報を、前記カメラで撮影した撮影映像上の当該情報を表す前記拡張現実情報が関係づけられた施設が写り込む位置に配置した拡張現実画像を表示する拡張現実システムに、各時点における現在位置と前記カメラの撮影方向とを履歴データとして、前記カメラで撮影し撮影映像を記録映像データとして、前記拡張現実画像に情報を配置した拡張現実情報を表示拡張現実情報として記録する記録手段と、前記記録手段が記録した記録映像データを再生した再生映像を表示すると共に、前記記録手段が記録した表示拡張現実情報のうちの、前記記録手段が記録した履歴データより求まる表示中の再生映像の撮影時点におけるカメラの撮影範囲に含まれる施設に関係づけられている表示拡張現実情報が表す情報を、前記再生映像上の前記履歴データより求まる当該情報を表す前記表示拡張現実情報が関係づけられた施設が写り込む位置に配置した拡張現実再生画像を表示する再生手段とを備えたものである。

ここで、このような拡張現実システムは、前記再生手段において、前記記録映像データの再生時刻位置の指定をユーザから受け付けて、指定された再生時刻位置から前記記録映像データの再生を行うように構成してもよい。
また、このような拡張現実システムは、前記拡張現実情報を、関係づけられた施設の種別を表す種別情報を含むものとし、前記再生手段において、ユーザから施設の種別の選択を受け付け、前記再生映像上に配置する情報を、ユーザからの選択を受け付けた種別を表す種別情報が登録された前記表示拡張現実情報が表す情報のみに限定するように構成してもよい。

また、このような拡張現実システムは、前記拡張現実情報が表す前記情報を、関係づけられた施設の種別を表す図形とし、当該拡張現実情報に、さらに関係づけられた施設の詳細を表す詳細情報を含め、前記再生手段において、前記再生映像上に前記情報である前記図形を配すると共に、前記拡張現実再生画像の表示上で、前記図形の選択をユーザから受け付けて、選択を受け付けた図形を前記情報として含む前記拡張現実情報に含まれる詳細情報を表示するように構成してもよい。

ここで、以上の拡張現実システムは自動車に搭載されるシステムとして良く、この場合、前記カメラは前記自動車の前方の風景を撮影するものとしてもよい。または、以上の拡張現実システムは自動車に搭載された、前記自動車の前方の風景を撮影する前記カメラと、前記記録手段を備えた車載システムと、前記車載システムに接続可能な、前記記録手段が記録した前記履歴データと前記記録映像データと前記表示拡張現実情報との転送を前記車載システムより受けて記憶する記憶部と、前記再生手段とを備えた携帯装置とより構成し、前記再生手段において、前記記憶部に記憶した前記履歴データと前記記録映像データと前記表示拡張現実情報とを用いて前記拡張現実再生画像を表示するようにしてもよい。

以上のような拡張現実システムによれば、過去の時点についての情報を、拡張現実と同様の形態によってユーザに提供することができる。したがって、ユーザは、過去の各時点についての情報を各情報の主体を直感的に把握可能な形態で、容易に取得することができることとなる。

以上のように、本発明によれば、過去の各時点についての情報を、ユーザが容易に取得可能かつ各情報の主体を直感的に把握可能な形態で提供する拡張現実システムを提供することができる。

本発明の実施形態に係る情報システムの構成を示すブロック図である。 本発明の実施形態に係る車載システムの記憶装置の記憶内容を示す図である。 本発明の実施形態に係る車載システムの表示画面を示す図である。 本発明の実施形態に係るＡＲ再生処理を示すフローチャートである。 本発明の実施形態に係るスマートフォンの表示画面を示す図である。 本発明の実施形態に係るスマートフォンの表示画面を示す図である。

以下、本発明の実施形態について説明する。
図１に本実施形態に係る情報システムの構成を示す。
図示するように、本実施形態に係る情報システムは、自動車に搭載される車載システム１と、車載システム１と接続可能な携帯装置であるスマートフォン２とよりなる。
そして、車載システム１は、表示装置１０１、操作部１０２、自動車の前方の風景を撮影するカメラ１０３、ＧＰＳ受信機１０４、自動車の車速や角速度を計測する車両状態センサ１０５、記憶装置１０６、ナビゲーション部１０７、ＡＲ表示部１０８、ドライブレコーダ１０９、制御部１１０、スマートフォン２と車載システム１を無線または有線で接続するための外部インタフェース１１１とを備えている。

一方、スマートフォン２は、記憶部２０１、マイク２０２、スピーカ２０３、タッチパネル２０４、表示部２０５、移動体通信網にアクセスするための無線通信装置２０６、車載システム１をスマートフォン２と無線または有線で接続するためのホストインタフェース２０７、マイク２０２やスピーカ２０３やタッチパネル２０４や無線通信装置２０６を利用してスマートフォン２を移動電話として機能させる電話機能部２０８、ＡＲクライアント２０９、ＡＲプレイヤ２１０を備えている。

ただし、車載システム１やスマートフォン２は、ハードウエア的には、マイクロプロセッサや、メモリや、その他の周辺デバイスを有する一般的な構成を備えたコンピュータを用いて構成してよく、この場合、以上に示した車載システム１やスマートフォン２の各部、または、その一部は、マイクロプロセッサが予め用意されたプログラムを実行することにより具現化するプロセスとして実現されるものであって良い。また、この場合、このようなプログラムは、記録媒体や適当な通信路を介して、車載システム１やスマートフォン２に提供されるものであって良い。

次に、車載システム１の記憶装置１０６の記憶内容について説明する。
図２に示すように、記憶装置１０６には、地図データ、記録動画データ、走行履歴データ、ＡＲデータベース、ＡＲ表示履歴データが格納される。
ここで、地図データは、道路地図を表すデータであり、予め記憶装置１０６に記憶される。
また、記録動画データは、ドライブレコーダ１０９が、カメラ１０３で撮影した映像を、撮影時刻を表すタイムコードと共に記録したものである。
また、走行履歴データには、ナビゲーション部１０７が、各時点において、当該時点における現在時刻と当該時点において算出している自動車の現在位置と当該時点において算出している自動車の前方方向とを位置履歴データとして登録する。
また、ＡＲデータベースは、施設の情報を表すＡＲデータを蓄積したものであり、各ＡＲデータは、ＡＲデータが情報を表す施設の種別を示す情報種別、ＡＲデータが情報を表す施設の位置を表す座標、拡張現実のためにカメラ１０３が撮影した映像上に表すＡＲタグを表すＡＲタグデータ、ＡＲデータが情報を表す施設についての詳細な情報である詳細情報とを有する。

ここで、ＡＲデータベースの各ＡＲデータは、予め記憶装置１０６に記憶されたものであってもよいが、ＡＲ表示部１０８が、車載システム１に接続されたスマートフォン２のＡＲクライアント２０９を介して、移動体通信網を含むＷＡＮ３上のＡＲサーバより取得して記憶装置１０６に格納したものであってもよい。なお、ＡＲサーバは、ＡＲクライアント２０９からの要求に応えて各地の施設のＡＲデータを提供するサーバである。

次に、ＡＲ表示履歴データには、ＡＲ表示部１０８によって複数の表示ＡＲデータが登録される。また、各ＡＲ表示データは、上述したＡＲデータに表示開始時刻を付加した構成を有する。
さて、このような構成において、車載システム１のナビゲーション部１０７は、記憶装置１０６に記録されている地図データを用いて、ＧＰＳ受信機１０４や車両状態センサ１０５を利用した、自車の現在位置や自車の現在の前方方向の算出や、ユーザからの目的地の設定の受け付けや、設定された目的地までのルートの探索や、現在位置周辺の地図上に現在位置を表すマークや目的地までのルートを表したナビゲーション画像の生成などを行う。

また、上述のように、ナビゲーション部１０７は、各時点において、当該時点における現在時刻と当該時点において算出している自動車の現在位置と当該時点において算出している自動車の前方方向を位置履歴データとして走行履歴データに登録する処理も行う。
一方、ドライブレコーダ１０９は、カメラ１０３が撮影した映像に撮影時刻を表すタイムコードを付して、記録動画データとして記憶装置１０６に記憶する処理を継続的に行う。
また、ＡＲ表示部１０８は、ナビゲーション部１０７が上述のように算出している現在位置と現在の前方方向とより算出されるカメラ１０３の撮影範囲内の座標が登録されているＡＲデータをＡＲデータベースから抽出する。そして、カメラ１０３が撮影した映像上に、抽出した各ＡＲデータのＡＲタグデータが示すＡＲタグを配置したＡＲ画像を生成する。ここで、各ＡＲタグは、ナビゲーション部１０７が上述のように算出している現在位置と現在の前方方向とより算出される当該ＡＲタグのＡＲタグデータに登録されている座標が写り込む、カメラ１０３の撮影映像中の位置に配置する。

ここで、図３ａにこのようにして生成されるＡＲ画像の例を示す。
図示するように、ＡＲ画像は、カメラ１０３が撮影した自動車前方の風景を表す映像２０上の、ＡＲデータが情報を表す施設が移り込んでいる位置に、当該ＡＲデータのＡＲタグデータよって示されるＡＲタグ２１を配置したものとなっている。なお、図示した例では、ＡＲタグ２１として、施設の種別を表すアイコンを用いた場合を示している。

ここで、ＡＲ表示部１０８は、ナビゲーション部１０７によって目的地までのルートが設定されている場合には、図示するように、カメラ１０３が撮影した映像２０上で当該ルートを表すルート図形２２もＡＲ画像に含めるようにしてもよい。
さて、ＡＲ表示部１０８は、以上のようにＡＲ画像を生成すると共に、ＡＲ画像中に配置した各ＡＲタグ２１のＡＲタグデータが含まれるＡＲデータに、当該ＡＲタグ２１を最初にＡＲ画像中に配置した時刻を表示開始時刻として付加して表示ＡＲデータを生成し、ＡＲ表示履歴データに格納する処理も行う。

また、ＡＲ表示部１０８は、以上のように生成したＡＲ画像が表示装置１０１に表示されている状態において、操作部１０２を用いたユーザのＡＲタグ２１の選択操作が発生したならば、図３ｂに示すように、選択された該ＡＲタグ２１のＡＲタグデータが含まれるＡＲデータに登録されている詳細情報２３を表示する処理も行う。

また、上述のように、ＡＲ表示部１０８は、ナビゲーション部１０７が上述のように算出している現在位置と現在の前方方向とより算出されるカメラ１０３の撮影範囲内の座標が登録されているＡＲデータを、車載システム１に接続されたスマートフォン２のＡＲクライアント２０９を介して、移動体通信網を含むＷＡＮ３のＡＲサーバより取得して記憶装置１０６に格納する処理も行うようにしてよい。

次に制御部１１０は、操作部１０２を用いたユーザのモード選択操作に応じて、ナビゲーションモード、ＡＲモードのいずれかを選択的に設定する。そして、ナビゲーションモードの設定期間中は、表示装置１０１に上述したナビゲーション画像を表示し、ＡＲモードの設定期間中は、表示装置１０１に上述したＡＲ画像を表示する。

次に、スマートフォン２のＡＲプレイヤ２１０は、タッチパネル２０４のユーザ操作によって起動されると、ＡＲ再生処理を実行する。
図４に、このＡＲ再生処理の手順を示す。
図示するように、このＡＲ再生処理では、スマートフォン２が車載システム１に接続されているかどうかを調べ（ステップ４０２）、接続されていれば、表示部２０５に適当な問い合わせ画面を表示し、ＡＲ再生情報の更新の要否をユーザに問い合わせ、更新の不要が指示されたならば（ステップ４０４）、ステップ４０８に進む。一方、更新要が指示されたならば（ステップ４０４）、車載システム１の制御部１１０にＡＲ表示履歴データと記録動画データと走行履歴データとの転送要求を発行することにより、車載システム１の記録装置に記録されているＡＲ表示履歴データと記録動画データと走行履歴データとを取得し、記憶部２０１に記憶した上で（ステップ４０６）、ステップ４０８に進む。なお、ステップ４０６の実行時に既に記憶部２０１にＡＲ表示履歴データと記録動画データと走行履歴データとが記憶されている場合には、これをステップ４０６で取得したＡＲ表示履歴データと記録動画データに置き換えるようにする。

ここで、車載システム１の制御部１１０は、スマートフォン２からの転送要求を受け取ると、記憶装置１０６のＡＲ表示履歴データと記録動画データと走行履歴データとのスマートフォン２への転送を実行する。
そして、ステップ４０８に進んだならば、記憶部２０１にＡＲ表示履歴データと記録動画データと走行履歴データとが記憶されているかどうかを調べ、記憶されていなければエラーを表示部２０５に表示し（ステップ４１０）、ＡＲ再生処理を終了する。
一方、記憶部２０１にＡＲ表示履歴データと記録動画データと走行履歴データとが記憶されていれば（ステップ４０８）、表示部２０５に適当なメニュー画面を表示し、ＡＲタグデータが持ちうる情報種別のうちから、表示情報種別の選択を受け付ける（ステップ４１２）。

そして、次に、ユーザから再生開示時刻の指定を受け付ける（ステップ４１４）。
ここで、再生開示時刻の指定は、たとえば、図５ａに示すように、表示部２０５にスライドバー５１０を表示し、ユーザのスライドバー５１０の操作によって再生開示時刻の指定を受け付けるようにしてもよい。この場合、スライドバー５１０の末尾位置が、記録動画データの先頭のタイムコードが表す記録動画データ全体の撮影終了時刻に対応し、スライドバー５１０の先頭位置が、記録動画データの末尾のタイムコードが表す記録動画データ全体の撮影開始時刻に対応する。そして、ユーザによってスライドバー５１０の移動によって指定された記録動画データ全体の撮影終了時刻と撮影開始時刻との間の時刻が、ユーザによって指定された再生開示時刻となる。

また、再生開示時刻の指定は、たとえば、ステップ４０６においてＡＲ表示履歴データと記録動画データと走行履歴データと共に、走行履歴データによって示される過去に走行したルート周辺の地図データを車載装置から取得すると共に、図５ｂに示すように、地図５２０上に、過去に走行したルート５３０と、表示ＡＲタグデータのＡＲタグデータが表すＡＲタグ５４０とを表示した画像を表示部２０５に表示し、当該画像上でユーザから指定を受け付けたルート５３０上の地点にもっとも近似する現在位置が登録されている位置履歴データに登録されている時刻を指定された再生開示時刻として受け付けるようにしてもよい。なお、表示ＡＲタグデータのＡＲタグデータが表すＡＲタグ５４０は、地図５２０上の表示ＡＲタグデータの座標位置に配置されている。図５ｂの地図５２０の表示は、ユーザの操作に応じて、ルートに沿ってスクロールさせることができるように構成されている。また、地図上５２０に表示したＡＲタグ５４０の選択をユーザから受け付けて、選択されたＡＲタグ２１のＡＲタグデータが含まれる表示ＡＲデータに登録されている詳細情報２３を表示部２０５に表示するようにしてもよい。

または、図５ｃに示すように、ＡＲ表示履歴データに含まれる表示ＡＲデータのＡＲタグ５６０の一覧を表示ＡＲデータに登録されている表示開始時刻の順に表示し、一覧上で指定されたＡＲタグ５６０の表示ＡＲデータに登録されている表示開始時刻を指定された再生開示時刻として受け付けるようにしてもよい。なお、この場合に、ユーザの適当な操作に応じて、一覧上で指定されたＡＲタグ５６０のＡＲタグデータが含まれる表示ＡＲデータに登録されている詳細情報２３を表示部２０５に表示するようにしてもよい。

さて、図４に戻り、このようにして、再生開始時刻の指定を受け付けたならば（ステップ４１４）、記憶部２０１に記憶されている記録動画データの再生と再生映像の表示部２０５への表示を、再生開始時刻に等しい撮影時刻がタイムコードとして付加されている時間位置から開始する（ステップ４１６）。

そして、以降は、ＡＲタグ２１の選択（ステップ４２０）と、再生開始時刻の切り替え（ステップ４２２）と、再生停止指示（ステップ４２４）と、記録再生データの末尾までの再生の終了（ステップ４２６）とのいずれかが発生するまで、記録動画データの再生を進めながらステップ４１８の処理を行う。

すなわち、ステップ４１８では、記憶部２０１に記憶されている走行履歴データから、現在の記録動画データの再生位置のタイムコードに最も近似する時刻が登録されている位置履歴データを取得する。そして、取得した位置履歴データに登録されている当該時刻における現在位置と前方方向とより算出される、当該時刻におけるカメラ１０３の撮影範囲内の座標と、表示情報種別に一致する情報種別が登録されている表示ＡＲデータを、記憶部２０１のＡＲ表示履歴データから抽出する。そして、表示部２０５に表示している記録再生データの再生映像上に、抽出した各表示ＡＲデータのＡＲタグデータが示すＡＲタグ２１を表示する。ここで、各ＡＲタグ２１は、取得した位置履歴データに登録されている現在位置と現在の前方方向とより算出される当該ＡＲタグ２１の表示ＡＲタグデータに登録されている座標が写り込む、記録再生データの再生映像中の位置に対応する位置に表示する。

図６ａは、このようにして、表示部２０５に表示される画像を表しており、図示するようにこの画像は、過去に走行した施設から前方の風景を撮影した映像（記録再生データの再生映像）６０１上に、当該映像６０１に映り込んでいる施設のＡＲタグ６０２を表したものとなっている。

一方、記録再生データの再生、表示中に、ユーザによる、記録再生データの再生映像上に表示したＡＲタグ６０２の選択（ステップ４２０）が発生した場合には、記録再生データの再生を一時停止し（ステップ４２８）、図６ｂに示すように、選択されたＡＲタグ６０２のＡＲタグデータが含まれる表示ＡＲデータに登録されている詳細情報６０３を表示する（ステップ４３０）。

そして、詳細情報利用処理の実行指示の発生（ステップ４３２）、再生再開指示の発生（ステップ４３４）とを監視する。
そして、詳細情報利用処理の実行指示が発生したならば（ステップ４３２）、指示された詳細情報利用処理を実行し（ステップ４４０）、ステップ４３６に進む。
ここで、詳細情報利用処理は、たとえば、詳細情報６０３を表示した施設の目的地への設定処理や、詳細情報６０３に含まれる電話番号への電話発信（発呼）処理などである。
図６ｃは、目的地への設定処理の例を示しており、この例では図示するように、ユーザによる詳細情報６０３中の住所部分の選択に応答してメニュー６１０を表示して、当該処理の実行指示を受け付ける。そして、目的地への設定処理では、詳細情報６０３中の住所もしくは詳細情報６０３に対応する表示ＡＲタグデータに登録されている座標の目的地としての設定を車載装置のナビゲーション部１０７に命令する処理を行う。

また、図６ｄは、電話発信処理の例を示しており、この例では図示するように、ユーザによる詳細情報６０３中の電話番号部分の選択に応答してメニュー６２０を表示して、当該処理の実行指示を受け付ける。そして、電話発信処理では、詳細情報６０３中の電話番号への発信（発呼）を電話機能部２０８に行わせる処理を行う。

さて、図４に戻り、再生再開指示をユーザから受け付けた場合には（ステップ４３４）、ステップ４３６に進む。
そして、ステップ４３６に進んだならば、詳細情報６０３の表示を消去し、記録再生データの再生を再開し（ステップ４３８）、ステップ４１８からの処理に戻る。
一方、記録再生データの再生、表示中に、ユーザ操作による再生開始時刻の切り替え（ステップ４２２）が発生した場合には、ステップ４１６に戻り、切り替えられた再生開始時刻に記録動画データの再生時間位置を切り替えた上で、ステップ４１８以降の処理に戻る。
また、再生停止指示（ステップ４２４）、もしくは、記録再生データの末尾までの再生の終了（ステップ４２６）が発生した場合には、ＡＲ再生処理を終了する。
以上、ＡＲ再生処理について説明した。
ところで、以上の実施形態は、ＡＲ再生処理をスマートフォン２において行うようにしたが、ＡＲプレイヤ２１０と同等の機能部を車載システム１に設けることにより、ＡＲ再生処理を車載システム１において行うようにしてもよい。
または、以上の車載システム１の機能をスマートフォン２に統合し、スマートフォン単独において、ＡＲ表示部１０８が行うＡＲ画像の表示や、ＡＲ再生処理を行うようにしてもよい。
以上のように、本実施形態によれば、ＡＲプレイヤ２１０のＡＲ再生処理によって、過去の時点についての情報を、ＡＲ画像による拡張現実と同様の形態によってユーザに提供することができる。したがって、ユーザは、過去の各時点についての情報を各情報の主体を直感的に把握可能な形態で、容易に取得することができることとなる。

１…車載システム、２…スマートフォン、３…ＷＡＮ、１０１…表示装置、１０２…操作部、１０３…カメラ、１０４…ＧＰＳ受信機、１０５…車両状態センサ、１０６…記憶装置、１０７…ナビゲーション部、１０８…ＡＲ表示部、１０９…ドライブレコーダ、１１０…制御部、１１１…外部インタフェース、２０１…記憶部、２０２…マイク、２０３…スピーカ、２０４…タッチパネル、２０５…表示部、２０６…無線通信装置、２０７…ホストインタフェース、２０８…電話機能部、２０９…ＡＲクライアント、２１０…ＡＲプレイヤ。

Claims (7)

1. カメラを備え、施設に関係づけられた当該関係づけられた施設の情報を表す拡張現実情報に基づいて、前記カメラの撮影範囲に含まれる施設に関係づけられた拡張現実情報が表す情報を、前記カメラで撮影した撮影映像上の当該情報を表す前記拡張現実情報が関係づけられた施設が写り込む位置に配置した拡張現実画像を表示する拡張現実システムであって、
   各時点における現在位置と前記カメラの撮影方向とを履歴データとして、前記カメラで撮影し撮影映像を記録映像データとして、前記拡張現実画像に情報を配置した拡張現実情報を表示拡張現実情報として記録する記録手段と、
   前記記録手段が記録した記録映像データを再生した再生映像を表示すると共に、前記記録手段が記録した表示拡張現実情報のうちの、前記記録手段が記録した履歴データより求まる表示中の再生映像の撮影時点におけるカメラの撮影範囲に含まれる施設に関係づけられている前記表示拡張現実情報が表す情報を、前記再生映像上の前記履歴データより求まる当該情報を表す前記表示拡張現実情報が関係づけられた施設が写り込む位置に配置した拡張現実再生画像を表示する再生手段とを有することを特徴とする拡張現実システム。
2. 請求項１記載の拡張現実システムであって、
   前記再生手段は、前記記録映像データの再生時刻位置の指定をユーザから受け付けて、指定された再生時刻位置から前記記録映像データの再生を行うことを特徴とする拡張現実システム。
3. 請求項１または２記載の拡張現実システムであって、
   前記拡張現実情報は、関係づけられた施設の種別を表す種別情報を含み、
   前記再生手段は、ユーザから施設の種別の選択を受け付け、前記再生映像上に配置する情報を、ユーザからの選択を受け付けた種別を表す種別情報が登録された前記表示拡張現実情報が表す情報のみに限定することを特徴とする拡張現実システム。
4. 請求項１または２記載の拡張現実システムであって、
   前記拡張現実情報が表す前記情報は、関係づけられた施設の種別を表す図形であって、
   当該拡張現実情報は、さらに関係づけられた施設の詳細を表す詳細情報を含み、
   前記再生手段は、前記再生映像上に前記情報である前記図形を配すると共に、前記拡張現実再生画像の表示上で、前記図形の選択をユーザから受け付けて、選択を受け付けた図形を前記情報として含む前記拡張現実情報に含まれる詳細情報を表示することを特徴とする拡張現実システム。
5. 請求項１、２、３または４記載の拡張現実システムであって、
   当該拡張現実システムは自動車に搭載され、
   前記カメラは前記自動車の前方の風景を撮影することを特徴とする拡張現実システム。
6. 請求項１、２、３または４記載の拡張現実システムであって、
   当該拡張現実システムは
   自動車に搭載された、前記自動車の前方の風景を撮影する前記カメラと、前記記録手段を備えた車載システムと、
   前記車載システムに接続可能な、前記記録手段が記録した前記履歴データと前記記録映像データと前記表示拡張現実情報との転送を前記車載システムより受けて記憶する記憶部と、前記再生手段とを備えた携帯装置とより構成され、
   前記再生手段は、前記記憶部に記憶した前記履歴データと前記記録映像データと前記表示拡張現実情報とを用いて前記拡張現実再生画像を表示することを特徴とする拡張現実システム。
7. カメラを備えたコンピュータによって読み取られ実行されるコンピュータプログラムであって、
   前記コンピュータを、
   施設に関係づけられた当該関係づけられた施設の情報を表す拡張現実情報に基づいて、前記カメラの撮影範囲に含まれる施設に関係づけられた拡張現実情報が表す情報を、前記カメラで撮影した撮影映像上の当該情報を表す前記拡張現実情報が関係づけられた施設が写り込む位置に配置した拡張現実画像を表示する拡張現実画像表示手段と、
   各時点における現在位置と前記カメラの撮影方向とを履歴データとして、前記カメラで撮影し撮影映像を記録映像データとして、前記拡張現実画像に情報を配置した拡張現実情報を表示拡張現実情報として記録する記録手段と、
   前記記録手段が記録した記録映像データを再生した再生映像を表示すると共に、前記記録手段が記録した表示拡張現実情報のうちの、前記記録手段が記録した履歴データより求まる表示中の再生映像の撮影時点におけるカメラの撮影範囲に含まれる施設に関係づけられている表示拡張現実情報が表す情報を、前記再生映像上の前記履歴データより求まる当該情報を表す前記表示拡張現実情報が関係づけられた施設が写り込む位置に配置した拡張現実再生画像を表示する再生手段として機能させることを特徴とするコンピュータプログラム。