JP4220793B2 - On-site guidance device, program, and on-site guidance method - Google Patents

On-site guidance device, program, and on-site guidance method Download PDF

Info

Publication number
JP4220793B2
JP4220793B2 JP2003018636A JP2003018636A JP4220793B2 JP 4220793 B2 JP4220793 B2 JP 4220793B2 JP 2003018636 A JP2003018636 A JP 2003018636A JP 2003018636 A JP2003018636 A JP 2003018636A JP 4220793 B2 JP4220793 B2 JP 4220793B2
Authority
JP
Japan
Prior art keywords
route
image
video
point
node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003018636A
Other languages
Japanese (ja)
Other versions
JP2004086848A (en
Inventor
清詞 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2003018636A priority Critical patent/JP4220793B2/en
Publication of JP2004086848A publication Critical patent/JP2004086848A/en
Application granted granted Critical
Publication of JP4220793B2 publication Critical patent/JP4220793B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
この発明は、予め定められた構内において、出発点となる第1の地点から到達点となる第2の地点までの道のりを案内する構内案内装置、プログラムおよび構内案内方法に関する。
【0002】
【従来の技術】
目的とする情報にアクセスする手法として、従来から様々な手法が考えられ実用化されてきている。特に、近年における情報処理技術の発展に伴い、目的とする情報を検索しこれにアクセスする技術が飛躍的な進展を遂げている。
【0003】
一例として、この出願の出願人は、図書検索システムを実用化し、リメディオ(商品名)として商品化している。この図書検索システムは、様々な機能を有しているが、そのうちの一つとして、各種のキーワードに基づいて図書(雑誌、論文等を含む)を検索し、検索結果である図書に関する情報を利用者端末の使用者に提供するという機能を有している。
【0004】
【発明が解決しようとする課題】
図書の検索を一例に挙げると、図書の検索をして所望の図書に関する情報にアクセスした者は、通常、その図書自体にアクセスしたいと考えるはずである。そこで、図書の検索結果にその図書の設置場所の情報を含ませることが考えられる。例えば、図書館であれば、その図書が蔵書されている場所に関する情報を提供し、書店であれば、その図書が売られている書店中の売り場に関する情報を提供する、というような具合である。
【0005】
しかしながら、その図書が蔵書されている図書館中の場所やその図書が売られている書店中の売り場に関する情報を提供したとしても、その図書館や書店に不慣れである者には、その図書に対するアクセスが容易とはいえない。このようなことから、検索した図書に対するアクセスを支援する有効な手法が望まれる。
【0006】
なお、目的とする場所への道案内のためのツールとしては、従来、カーナビゲーションシステムを代表とするナビゲーションシステムが提案され(例えば、特開平9−119845号公報、特開平10−318773号公報、特開平11−94571号公報等)、広く普及している。しかしながら、このようなナビゲーションシステムを、検索した図書に対するアクセスを支援するツールとしてそのまま応用することはできない。
【0007】
本発明の目的は、検索した図書等の検索対象物に対するアクセスを支援する有効な手法を提供することである。
【0033】
【課題を解決するための手段】
請求項記載の構内案内装置の発明は、予め定められた構内における複数の地点をそれぞれ表す複数のノード間を結ぶルート毎に、前記ノード間の経路の動画映像を記憶装置に記憶する動画映像記憶手段と、前記各ノードの周囲のパノラマ画像を記憶装置に記憶するパノラマ画像記憶手段と、前記構内における出発点となる第1の地点を表す前記ノードと到達点となる第2の地点を表す前記ノードとの入力を、利用者端末を介して受け付ける受付手段と、入力された前記ノード間の最短経路となる少なくとも1以上の前記ルートを選択する選択手段と、選択された前記ルートが1の場合には、当該ルートの前記動画映像を経路映像として作成し、前記選択された前記ルートが複数の場合には、前記各ルートが直線状であれば前記各ルートの前記動画映像を結合して経路映像として作成し、前記各ルートが直線状でなければ前記各ルートの前記動画映像を前記各ルートに共通する前記各ノードの周囲のパノラマ画像と前記各ルートが形成する角度とに基づく回転画像で結合して経路映像として作成する経路映像作成手段と、前記経路映像を前記利用者端末に対して送信して再生させる再生手段と、を備える。
【0034】
請求項記載の発明は、請求項記載の構内案内装置において、前記再生手段は、前記利用者端末に対して、前記経路映像をストリーミング配信する。
【0037】
請求項記載の発明は、請求項1または2記載の構内案内装置において、前記経路映像作成手段は、前記パノラマ画像から前記回転映像を生成する際に水平方向成分と垂直方向成分とを参照し、前記回転映像で結合する二つの前記ルートの前記動画映像における垂直方向のずれをも結合する。
【0038】
請求項記載の発明は、請求項1ないし3のいずれか一記載の構内案内装置において、前記パノラマ画像は、同一の前記パノラマ画像を接続した画像である。
【0040】
請求項記載の発明は、請求項1ないし4のいずれか一記載の構内案内装置において、前記経路映像作成手段は、前記回転映像とその前後の前記ルートの前記動画映像との切り換えに際して、クロスフェード効果を用いる
【0041】
請求項の発明は、請求項1ないし4のいずれか一記載の構内案内装置において、前記経路映像作成手段は、前記回転映像とその前後の前記ルートの前記動画映像との切り換えに際して、ディゾルブ効果を用いる
【0042】
請求項記載のプログラムの発明は、コンピュータを、予め定められた構内における複数の地点をそれぞれ表す複数のノード間を結ぶルート毎に、前記ノード間の経路の動画映像を記憶装置に記憶する動画映像記憶手段と、前記各ノードの周囲のパノラマ画像を記憶装置に記憶するパノラマ画像記憶手段と、前記構内における出発点となる第1の地点を表す前記ノードと到達点となる第2の地点を表す前記ノードとの入力を、利用者端末を介して受け付ける受付手段と、入力された前記ノード間の最短経路となる少なくとも1以上の前記ルートを選択する選択手段と、選択された前記ルートが1の場合には、当該ルートの前記動画映像を経路映像として作成し、前記選択された前記ルートが複数の場合には、前記各ルートが直線状であれば前記各ルートの前記動画映像を結合して経路映像として作成し、前記各ルートが直線状でなければ前記各ルートの前記動画映像を前記各ルートに共通する前記各ノードの周囲のパノラマ画像と前記各ルートが形成する角度とに基づく回転画像で結合して経路映像として作成する経路映像作成手段と、前記経路映像を前記利用者端末に対して送信して再生させる再生手段と、として機能させるためのプログラムである。
【0043】
請求項記載の構内案内方法の発明は、構内案内装置で実行される構内案内方法であって、前記構内案内装置は、制御部と記憶部を備え、前記制御部において実行される、動画映像記憶手段が、予め定められた構内における複数の地点をそれぞれ表す複数のノード間を結ぶルート毎に、前記ノード間の経路の動画映像を記憶装置に記憶するステップと、パノラマ画像記憶手段が、前記各ノードの周囲のパノラマ画像を記憶装置に記憶するステップと、受付手段が、前記構内における出発点となる第1の地点を表す前記ノードと到達点となる第2の地点を表す前記ノードとの入力を、利用者端末を介して受け付けるステップと、選択手段が、入力された前記ノード間の最短経路となる少なくとも1以上の前記ルートを選択するステップと、経路映像作成手段が、選択された前記ルートが1の場合には、当該ルートの前記動画映像を経路映像として作成し、前記選択された前記ルートが複数の場合には、前記各ルートが直線状であれば前記各ルートの前記動画映像を結合して経路映像として作成し、前記各ルートが直線状でなければ前記各ルートの前記動画映像を前記各ルートに共通する前記各ノードの周囲のパノラマ画像と前記各ルートが形成する角度とに基づく回転画像で結合して経路映像として作成するステップと、再生手段が、前記経路映像を前記利用者端末に対して送信して再生させるステップと、を含む。
【0048】
【発明の実施の形態】
<第1の実施の形態>
本発明の第1の実施の形態を図1ないし図6に基づいて説明する。
【0049】
図1は、予め定められた構内において、出発点となる第1の地点から到達点となる第2の地点までの道のりを案内する構内案内装置、構内案内方法、構内案内処理に関するコンピュータプログラム、そのようなコンピュータプログラムを記憶する記憶媒体を含む検索案内システムの模式図である。図2は、そのような検索案内システムの概略ブロック図である。
【0050】
本実施の形態においては、構内案内装置として機能するサーバ101が設けられ、このサーバ101に利用者端末として機能するクライアント201がネットワーク301を介して接続されている。また、ネットワーク301中には、情報検索装置として機能する図書検索システム401も接続されている。
【0051】
クライアント201は、CPU及びメモリ等から構成されるマイクロコンピュータを含むコンピュータであり、表示装置211及び入力装置221を備える。入力装置221には、キーボードの他、マウス等のポインティングディバイスが含まれている。また、表示装置211で情報をブラウズさせるブラウズ機能を有している。このブラウズ機能は、図示しないハードディスクに格納されたブラウザソフトウェアによって実現されている。
【0052】
サーバ101は、Webサーバ111を含んでいる。このWebサーバ111は、CPU及びメモリ等から構成されるマイクロコンピュータを含むコンピュータである。また、サーバ101のハードディスク▲1▼121には、構内案内処理を実行する構内案内処理プログラムと、クライアント201のブラウザソフトウェアからの要求に応じてWebサーバ101と外部プログラムとの間で連携して処理を行なうCGI(Common Gateway Interface)プログラムとが設けられている。そして、このCGIプログラムによって連携される外部プログラムとしては、経路探索ソフトウェア及びWeb画面作成ソフトウェアが設けられている。
【0053】
また、サーバ101にはハードディスク▲2▼131が設けられており、このハードディスク▲2▼131には、構内案内処理プログラム及び外部プログラムによって実行されるクライアント201のブラウジングに必要な各種の情報、例えば映像情報や各種の属性情報が含まれている。この場合、構内案内処理プログラムは、クライアント201に対して、構内案内の目的となる構内を表現する図面上にノード及びルートから構成される経路を表示する画面を提供する。そこで、ハードディスク▲2▼131は、構内を表現する図面の生成に必要な画像情報とノード及びルートに関する属性情報とを記憶保存するデータベースとしての機能を奏することになる。
【0054】
このように、サーバ101には、各種のプログラムがハードディスク▲1▼121やハードディスク▲2▼131に記憶保存されている。そこで、これらのハードディスク▲1▼121やハードディスク▲2▼131は、プログラムを記憶する記憶媒体となる。
【0055】
図書検索システム401は、サーバ101に類似したハードウエア構成を有しており、この図書検索システム401にアクセスしているクライアント201に図書検索機能を提供する。つまり、図書検索システム401もCPU及びメモリ等から構成されるマイクロコンピュータを含むコンピュータであり、図書検索のためのソフトウェアを解釈実行する。この図書検索のためのソフトウェアは、図書検索システム401上で実行されるCGIプログラムによって連携される外部プログラムであり、クライアント201のブラウザソフトウェアからの要求に応じて処理を行なう。
【0056】
ここで、図1に例示するように、クライアント201は、図書検索システム401にアクセスすることによって、図書の検索を行なうことができる。図書の検索は、例えば、図書検索システム401がクライアント201に図書検索用の画面を提供し、クライアント201がその入力装置221によって図書検索用の画面にキーワードを入力することによって行われる。つまり、図書検索システム401上で実行される図書検索のためのソフトウェアは、クライアント201で入力されたキーワードに従い図示しない図書データベースを検索し、該当する図書情報をクライアント201に提供する。図1に例示する図書検索結果画面1001は、検索された図書が配置されている配置情報1011をユーザに提供する。この配置情報1011には、配置場所の名称がハイパーリンク1012となって表現されている。そこで、クライアント201において、そのハイパーリンク1012がポインティングディバイス等でクリックされると、サーバ111における構内案内処理プログラムが起動し、クライアント201にその図書が配置されている場所に案内する画像が案内画面2001として提供される。
【0057】
図3は、構内案内処理の流れを示すフローチャートである。図4は、案内画面の一例を示す模式図である。図5は、案内画面中の属性画面に含まれるノードの周辺画像であるパノラマ画像の一例を示す模式図である。図6は、案内画面中の属性画面に含まれるノードの周辺画像であるドーナツ状に変形したパノラマ画像の一例を示す模式図である。以下、図3を参照しながら、構内案内処理の流れを説明する。
【0058】
図書検索結果画面1001に表示される配置情報1002中のハイパーリンク1003がクリックされると、構内案内処理プログラムの起動要請コマンドの他、その検索された図書が配置されている場所、例えば図書館の階数に関する情報と共に、その図書館の該当階の構内における出発点となる第1の地点と到達点となる第2の地点とに関する情報が図書検索システム401からサーバ101に送信される。これにより、サーバ101では、図書館の階数に関する情報と、その図書館の該当階の構内における出発点となる第1の地点と到達点となる第2の地点とに関する情報とが入力される(ステップS101)。ここに、予め定められた構内における出発点となる第1の地点と到達点となる第2の地点との入力を受け付ける手段(ステップ)が実行される。
【0059】
次いで、サーバ101では、経路探索ソフトウェアによって、第1の地点(A)から第2の地点(B)に到る最短経路となるノードとルートとの組合せが計算される(ステップS102)。このような経路探索ソフトウェアによる処理は、出発点から到達点に到る最短経路となるノードとルートとの組合せを計算する公知の演算手法によって実行される。このような公知の演算手法としては、例えば、「岩波書店、石畑清著、ソフトウェア科学第三巻『アルゴリズムとデータ構造』第4章『グラフのアルゴリズム』第五節『最短路の問題』(b)Dijkstraのアルゴリズムの単純な実現法」等に紹介されている。ここに、入力された第1の地点と第2の地点とに基づいて第1の地点から第2の地点に到るノード及びルートから構成された経路を計算する手段(ステップ)が実行される。
【0060】
次いで、ステップS102による計算の結果、経路があるかどうかを判定し(ステップS103)、なければ経路なしをクライアント201でブラウズ可能とし(ステップS104)、あれば図書館の該当する階の平面図をクライアント201でブラウズ可能とする(ステップS105)。この場合、図書館の該当する階の平面図というのは、構内を表現する図面の一例であり、構内を表現する図面としては、平面図に限らず、3次元図や鳥瞰図等、各種の図面を採用することができる。
【0061】
ステップS105の処理の結果、クライアント201の表示装置211には、案内画面2001が表示される。この案内画面2001は、図1及び図4に例示するように、地図画面2101と属性画面2201とから構成されている。ステップS105の処理が終了した時点では、案内画面2001中に地図画面2101のみが表示されることになる。
【0062】
次いで、ステップS106では、属性画面及び属性情報プログラムが作成される。こうして、ステップS105及びステップS106によって、構内を表現する図面の生成に必要な画像情報とノード及びルートに関する属性情報とを記憶保存するデータベース(ハードディスク▲2▼131)を検索し、構内を表現する図面中に計算された経路を表示する地図画面2101と計算された経路を構成するノード及びルートの属性情報を経路の順番に表示する属性画面2201とを組み合わせた案内画面2001を生成するための情報を収集する手段(ステップ)が実行される。
【0063】
また、ステップS106では、作成した属性情報プログラムをクライアント201に送信する。その結果、クライアント201では、属性情報プログラムを実行可能な状態となる。
【0064】
次いで、サーバ101は、ステップS106で作成された属性画面を、クライアント201でブラウズ可能とする(ステップS107)。その結果、クライアント201には、図1及び図4に例示する属性画面2201が表示可能となる。
【0065】
この際、サーバ101は、ステップS102での計算結果をクライアント201に送信している。そこで、クライアント201では、ステップS106でサーバ101から送信された属性情報プログラムが解釈実行されることで、送信されたステップS102での計算結果に従い地図画面2101上に最短経路に該当するノード及びルートの表示をブラウズ可能とする(ステップS108)。図3のフローチャート中、ステップS108の処理に括弧を付して示しているのは、このステップS108の処理について、クライアント201が備えるマイクロコンピュータによって解釈実行されるからである。その結果、クライアント201には、図1及び図4に例示するように、地図画面2101上に「502」、「506」、「507」、「509」として例示されているようなノード2111及びそれらのノード2111を繋ぐルート2121が表示可能となる。図4に例示する地図画面2101では、「502」と表示されているノード2111が出発点となる第1の地点であり、「509」と表示されているノード2111が到達点となる第2の地点である。
【0066】
以上説明したように、サーバ101は、ステップS105、ステップS107、ステップS108のように、ある情報をクライアント201でブラウズ可能とする処理を実行する。ここに、収集した情報に基づいて案内画面2001を利用者端末(クライアント201)でブラウズ可能にする手段(ステップ)が実行される。
【0067】
その後、サーバ101は、ユーザの入力待ちの状態となる(ステップS109)。
【0068】
ここで、属性画面2201を含む案内画面2001について説明する。
【0069】
まず、属性画面2201には、案内画面2001をブラウズするクライアント201で指定可能な各種のオブジェクトを有している。この場合、クライアント201での指定は、例えば入力装置221に含まれているポインティングディバイスでのクリック操作による。そして、そのようなオブジェクトがクライアント201で指定された場合、その表示装置211でブラウズしている案内画面2001に変化が生ずる。これは、図3に示すフローチャート中のステップS106でサーバ101からクライアント201に送信された属性情報プログラムがクライアント201上で解釈実行されることによる機能である。
【0070】
次いで、属性画面2201は、その冒頭部分に、案内画面2001が案内する案内経路を説明する簡略説明2211を有している。図4には、その簡略説明2211として、「502から509までの最短経路」と示されている。502、509というのは、ノード2111を意味する。
【0071】
そのような案内経路の説明の下には、「選択画面に戻る」というオブジェクト2221が示されている。クライアント201においてそのオブジェクト2221がクリックされると、ステップS106によってサーバ101からクライアント201に送信された属性情報プログラムがクライアント201によって解釈実行され、クライアント201は画面表示を選択画面に戻す。この選択画面というのは、例えば、図1に例示される図書検索結果画面1001である。
【0072】
また、案内画面2001中、「選択画面に戻る」というオブジェクト2221の下には、「全ノード、ルートの点滅表示」という説明が付された経路点滅指定オブジェクトとしてのチェックボックス2231が表示されている。このチェックボックス2231をクリックすると、ステップS106によってサーバ101からクライアント201に送信された属性情報プログラムがクライアント201によって解釈実行され、サーバ101のステップS108での処理によってクライアント201の地図画面2101中に表示されるノード2111及びそれらのノード2111を繋ぐルート2121が点滅表示される。これにより、ノード2111及びルート2121が目立ち、容易に視認可能な状態となる。
【0073】
また、案内画面2001中、「全ノード、ルートの点滅表示」という説明が付されたチェックボックス2231の下には、「全経路映像を連続して見る」という説明が付された経路実撮影映像指定オブジェクト2241が表示されている。この経路実撮影映像指定オブジェクト2241をクリックすると、ステップS106によってサーバ101からクライアント201に送信された属性情報プログラムがクライアント201によって解釈実行され、案内画面2001中にノード2111の502から506及び507を経て509に到る全経路の実撮影映像(動画)が再生される。この場合、そのような実撮影映像は、ステップS106によってサーバ101からクライアント201に属性情報プログラムと共に予め送信されていても、「全経路映像を連続して見る」という説明が付された経路実撮影映像指定オブジェクト2241がクリックされたことをサーバ101に通知し、これに応じてサーバ101がクライアント201に送信しても良く、あるいは、同種の処理を実行する公知のあらゆる手法を用いても良い。
【0074】
次いで、属性画面2201には、「全経路映像を連続して見る」という説明が付された経路実撮影映像指定オブジェクト2241の下に、地図画面2101中の案内経路を構成するノード2111に関する属性情報2251及びルート2121に関する属性情報2261が経路順に表示されている。これらの属性情報2251、2261は、図4に例示する属性画面2201では、「出発ノード502」、「ルート502から506へ」、「ノード506」、「ルート506から507へ」、というように示されている。
【0075】
ノード2111に関する属性情報2251には、そのノード2111の識別番号2252がノードIDとして示される他、地点名2253及び地点概要2254が示されている。図4に示す属性画面2201では、ノード2111の識別番号2252として「502」、地点名2253として「5階ホール」、地点概要2254として「本館エレベータ付近」がそれぞれ示され、ノード2111の識別番号2252として「506」、地点名2253として「5階新館自然図書バックナンバー(1)」、地点概要2254として「5階新館自然図書バックナンバー(1)」がそれぞれ示されている。
【0076】
また、ノード2111に関する属性情報2251には、そのノード2111の周辺画像が含まれている。ノード2111の周辺画像として、本実施の形態では、そのノード2111の周辺のパノラマ画像2255及びそのようなパノラマ画像2255をドーナツ状に変形した画像2256が表示されている。パノラマ画像2255は、360度画像であっても、より狭い角度のパノラマ画像であっても、いずれでも良い。また、それらのパノラマ画像2255及びそのドーナツ状に変形した画像2256は、一例として実撮影映像により構成されているが、実施に当っては、実撮影映像ではなく、アニメーション画像等をパノラマ画像2255及びそのドーナツ状に変形した画像2256として用いても良い。加えて、ノード2111の周辺画像は、必ずしもパノラマ画像2255及びそのドーナツ状に変形した画像2256である必要はない。
【0077】
ここで、図5は、識別番号2252が「506」というノード2111の属性情報2251としてのパノラマ画像2255を例示し、図6は、そのようなパノラマ画像2255をドーナツ状に変形した画像2256を例示している。
【0078】
また、パノラマ画像2255及びそのドーナツ状に変形した画像2256は、それ自体オブジェクトを構成し、クリックされることで、ステップS106によってサーバ101からクライアント201に送信された属性情報プログラムがクライアント201によって解釈実行され、クリックされたパノラマ画像2255又はそのドーナツ状に変形した画像2256が拡大表示される。図1に、パノラマ画像2255をドーナツ状に変形した画像2256がクリックされて拡大画像となっている状態を例示する。
【0079】
また、ノード2111に関する属性画面2201中には、「ノード点滅表示」という説明が付されたノード点滅指定オブジェクトとしてのチェックボックス2257が表示されている。このチェックボックス2257をクリックすると、ステップS106によってサーバ101からクライアント201に送信された属性情報プログラムがクライアント201によって解釈実行され、ステップS108での処理によってクライアント201の地図画面2101中に表示される対応するノード2111が点滅表示される。例えば、識別番号2252が「502」であるノード2111に関する属性画面2201中のチェックボックス2257がクリックされると、地図画面2101中に表示されている「502」のノード2111が点滅表示される。これにより、目的とするノード2111が目立ち、容易に視認可能な状態となる。
【0080】
次いで、ルート2121に関する属性情報2261には、そのルート2121の識別番号2262がノードIDとして示される他、地点名としてのルート名2263及び地点概要2264が示されている。図4に示す属性画面2201では、502から506へ到るルート2121の識別番号2262として「5026_0」、地点名2263として「5階新館自然図書バックナンバー(1)方面」、地点概要2264として「5階本館ホールより5階新館自然図書バックナンバー(1)に行くルート」がそれぞれ示され、506から507へ到るルート2121の識別番号2262として「5067_0」、地点名2263として「5階新館自然図書バックナンバー(2)方面」、地点概要2264として「5階新館の自然図書バックナンバー(1)より5階新館自然図書バックナンバー(2)」がそれぞれ示されている。
【0081】
また、ルート2121に関する属性情報2261には、そのルート2121の始点における周辺画像2265と終点における周辺画像2266とが含まれている。これらの周辺画像2265及び2266は、一例として実撮影映像により構成されているが、実施に当っては、実撮影映像ではなく、アニメーション画像等を周辺画像2265及び2266として用いても良い。
【0082】
また、これらの周辺画像2265及び2266は、それ自体オブジェクトを構成し、クリックされることで、ステップS106によってサーバ101からクライアント201に送信された属性情報プログラムがクライアント201によって解釈実行され、クリックされた周辺画像2265及び2266が拡大表示される。図1に、識別番号が「「5026_0」のルート2121の終点における周辺画像2266がクリックされて拡大画像となっている状態を例示する。
【0083】
そして、ルート2121に関する属性情報2261には、そのルート2121の始点における周辺画像2265と終点における周辺画像2266との間に位置させて、そのルート2121中の進行方向及び方向変化を示す記号2267が各記号2267に対応する所要時間2268と共に表示されている。このような記号2267及び所要時間2268の一例としては、502から507へ到る識別番号が「「5026_0」であるルート2121を例に挙げると、直進4.5秒、左折2.5秒、直進17.9秒である。
【0084】
ここでは、ルート2121中の進行方向及び方向変化を示す記号2267に対応させて各記号2267の所要時間2268を表示する例を示したが、所要時間2268に代えて、所要歩行数を表示するようにしても良い。
【0085】
また、ルート2121に関する属性画面2201中には、「ルート点滅表示」という説明が付されたルート点滅指定オブジェクトとしてのチェックボックス2269が表示されている。このチェックボックス2269をクリックすると、ステップS106によってサーバ101からクライアント201に送信された属性情報プログラムがクライアント201によって解釈実行され、ステップS108での処理によってクライアント201の地図画面2101中に表示される対応するルート2121が点滅表示される。例えば、識別番号2262が「5026_0」であるルート2121に関する属性画面2201中のチェックボックス2269がクリックされると、地図画面2101中に表示されている502から506までのルート2121が点滅表示される。これにより、目的とするルート2121が目立ち、容易に視認可能な状態となる。
【0086】
また、ルート2121に関する属性画面2201中には、「ルート映像を見る」という説明が付されたルート実撮影映像指定オブジェクト2270が表示されている。このルート実撮影映像指定オブジェクト2270をクリックすると、ステップS106によってサーバ101からクライアント201に送信された属性情報プログラムがクライアント201によって解釈実行され、属性画面2201中に対応するルート2121の始点から終点に到る実撮影映像(動画)が再生される。この場合、そのような実撮影映像は、ステップS106によってサーバ101からクライアント201に属性情報プログラムと共に予め送信されていても、「ルート映像を見る」という説明が付されたルート実撮影映像指定オブジェクト2270がクリックされたことをサーバ101に通知し、これに応じてサーバ101がクライアント201に送信しても良く、あるいは、同種の処理を実行する公知のあらゆる手法を用いても良い。
【0087】
さらに、クライアント201で解釈実行される属性情報プログラムは、「ルート映像を見る」という説明が付されたルート実撮影映像指定オブジェクト2270がクリックされて属性画面2201中に対応するルート2121の始点から終点に到る実撮影映像(動画)が再生される進行具合に合わせて、地図画面2101中に表示される対応するルート2121をアニメーション表示する。アニメーション表示の例としては、例えば、ルート2121の実撮影映像(動画)の再生進行具合に合わせて、地図画面2101中に表示される対応するルート2121の一部の色を変えて表示するとか、対応するルート2121の一部を点滅表示するとかの手法を採用することが可能である。
【0088】
以上説明したように、本実施の形態によれば、予め定められた構内における出発点となる第1の地点から到達点となる第2の地点へのアクセスを支援することができる。
【0089】
<第2の実施の形態>
本発明の第2の実施の形態を図7ないし図18に基づいて説明する。第1の実施の形態と同一部分は同一符号で示し、説明も省略する。したがって、第1の実施の形態を説明するのに用いた図1ないし図6も、適宜参照する。
【0090】
本実施の形態は、図4に示す案内画面2001中、「全経路映像を連続して見る」という説明が付された経路実撮影映像指定オブジェクト2241がクリックされた場合の処理の詳細に関する。前述したように、図4に示す案内画面2001中、「全ノード、ルートの点滅表示」という説明が付されたチェックボックス2231の下には、「全経路映像を連続して見る」という説明が付された経路実撮影映像指定オブジェクト2241が表示されている。この経路実撮影映像指定オブジェクト2241をクリックすると、ステップS106によってサーバ101からクライアント201に送信された属性情報プログラムがクライアント201によって解釈実行され、案内画面2001中に全経路の実撮影映像(動画)が再生される。この場合、そのような実撮影映像は、ステップS106によってサーバ101からクライアント201に属性情報プログラムと共に予め送信されていても、「全経路映像を連続して見る」という説明が付された経路実撮影映像指定オブジェクト2241がクリックされたことをサーバ101に通知し、これに応じてサーバ101がクライアント201に送信しても良く、あるいは、同種の処理を実行する公知のあらゆる手法を用いても良い。
【0091】
また、ここでは、実撮影映像として、実際に撮影した映像を用いる例を示しているが、実施に当っては実撮影映像である必要はなく、例えばグラフィックス画像やアニメーション画像であっても良い。つまり、利用者の視覚的な認識を容易にし得るような映像であれば、実際に撮影された映像であると、作成されたバーチャルな映像であると、その種類を問わない。この意味で、図4に示す案内画面2001中、「全経路映像を連続して見る」という説明が付された経路実撮影映像指定オブジェクト2241は、経路映像指定オブジェクト2241と称することも可能である。そこで、本実施の形態では、第1の実施の形態で経路実撮影映像指定オブジェクト2241と称したオブジェクトを、経路映像指定オブジェクト2241と称することにする。
【0092】
図7は、地図画面2101の一例を示す模式図である。この地図画面2101中には、サーバ11に設定された全てのノード2111とルート2121とが示されている。経路中において、出発点となる第1の地点と到達点となる第2の地点とは、予め設定された複数のノード2111(図7中、501〜509で示されている)から選択される。第1の地点から第2の地点に到る案内経路は、ノード2111を結ぶ予め設定された複数のルート2121の中から、最短経路が選択される。例えば、第1の地点が「502」というノード2111で第2の地点が「508」というノード2111である場合、経路は、「502」→「506」、「506」→「508」となる。このような経路を求めるアルゴリズムは、前述したように、出発点から到達点に到る最短経路となるノード2111とルート2121との組合せを計算する公知の演算手法によって実行される。
【0093】
ここで、このような経路を案内画面2001中に映像で提供する場合、全てのノード2111から全てのノード2111に到る経路を全て撮影すると、撮影量が膨大になり、データ量が膨大となる。そこで、ノード2111間を結ぶルート2121毎に分割して動画映像を撮影し、それらのルート2121毎に分割された動画映像を組み合わせて利用者に提供する手法が考えられる。上述した例の場合であれば、「502」→「506」に到るルート2121の映像と、「506」→「508」に到るルート2121の映像との二つを結合し、「502」→「508」に到る映像を利用者に提供するわけである。このとき、ストリーミング映像フォーマットとして、Real Media(登録商標)やWindows Media(登録商標)等が用いられる。また、映像を結合して提供する手段としては、一例として、SMILを用いて例えば図8に例示する記述を行なって経路映像リストを作成し、Real Player(登録商標)等にその記述を行ったファイルである経路映像リストを読み込ませることにより、ネットワーク301を介して上記結合映像をストリーミング映像として利用者に提供することが可能である。
【0094】
このように映像の結合を行なう場合、結合を行なう部分では、映像の向きが一致していることが経路を案内する上で非常に望ましい。上記例の場合は、「502」→「506」に到るルート2121の映像の終了時での撮影向きと、「506」→「508」に到るルート2121の映像の開始時での撮影向きが一致しているべきである。このようにすることにより、利用者は「502」から「506」を経由して「508」に到る連続した映像を見ることができる。
【0095】
ところが、「506」というノード2111は、「508」というノード2111に到るルート2121の他に、「507」というノード2111に到るルート2121の出発点でもある。この場合、図7より明らかなように、「506」というノード2111から「507」というノード2111に到るルート2121と、「506」というノード2111から「508」というノード2111に到るルート2121とは、向きが異なっている。そこで、このような場合には、「502」→「506」に到るルート2121の映像の終了時での向きに対して、「506」→「508」に到るルート2121の映像の開始時での撮影向きと「506」→「507」に到るルート2121の映像の開始時での撮影向きとを一致させる必要が生ずる。
【0096】
そこで、このような問題に対する簡便な解決策としては、例えば、「502」→「506」に到るルート2121の映像の終了時での向きは「507」というノード2111の方向とし、「506」→「508」に到る映像の開始時の向きは「507」というノード2111の方向から開始し、撮影方向を反時計回りに90度回転した後に「508」というノード2111に到るような映像とし、「506」→「507」に到る映像の開始時の向きは「507」というノード2111の方向とすれば、問題となっている向きを全て一致させることができる。
【0097】
しかしながら、例えば「507」というノード2111から「508」というノード2111に到る映像を作成しようとすると、ルート2121は「507」→「506」、「506」→「508」となるのに対して、上記の映像を再利用するためには、「507」→「506」の映像において、「506」というノード2111に到った後、180度回転しなければならない。なぜなら、「507」→「506」の映像では、向きは「507」というノード2111と反対方向を向いているが、「506」というノード2111で「506」→「508」の映像に向きを合わせるためには、「507」というノード2111の方向を向いていなければならないからである。しかも、利用者は、「507」→「506」のルート2121の映像の終了時において「506」というノード2111で180度回転した後、さらに「506」→「508」のルート2121の映像の開始時において反時計回りに90度回転した映像を見ることになり、回転が多く混乱することが考えられる。
【0098】
このように、ノード2111及びルート2121の数が増えるに従い、このような問題が多発する。
【0099】
本実施の形態は、以上説明したような問題点に鑑み、各ノード2111においてその周囲をパノラマ画像2255で記録し、このパノラマ画像2255に基づいて回転映像でそのノード2111の前後に位置する二つのルート2121を滑らかに繋ぐ処理を実行する。つまり、サーバ101は、そのパノラマ画像2255の開始向きをそのパノラマ画像2255に関連付けてハードディスク▲2▼131に記録しておく。そして、第1の地点から第2の地点までをそれらを結ぶルート2121の動画映像で案内する際に、第1の地点から第2の地点までの複数本のルート2121間に位置するノード2111において、そのノード2111に到る先行するルート2121映像の終点の向きと、そのノード2111から出発する後続するルート2121映像の始点の向きとが異なる場合、そのノード2111の周囲を記録したパノラマ画像2255とその開始向きの情報とを用いて回転映像を作成する。こうしておいて、ノード2111に到るルート2121映像の終了後、作成した回転画像を挿入し、その後、ノード2111から出発するルート2121映像を開始するようにする。これにより、ノード2111の前後に位置する二つのルート2121を滑らかに繋ぐわけである。
【0100】
以上説明した処理を、図9ないし図15に基づいてより詳細に説明する。
【0101】
図9は、検索案内システムの概略ブロック図である。本実施の形態においては、サーバ101に、ストリーミング映像サーバ141が含まれている。このストリーミング映像サーバ141は、ストリーミング対応のデータを作成(エンコード)するエンコーダと、配信を行なう配信サーバとの二つの役割を担う。別の実施の形態として、サーバ101がエンコーダとして機能し、ストリーミング映像サーバ141は配信サーバとしてのみ機能するように役割分担しても良い。また、利用者端末であるクライアント201には、ストリーミング映像再生ソフトがインストールされている。したがって、クライアント201は、ストリーミング対応のデータを受信して再生を行なうプレーヤとして機能する。このようなストリーミング技術を実行する本実施の形態のシステムが実行するストリーミング配信方式としては、エンコードしたデータを一度ファイルに保存してから配信サーバで配信するオンデマンド配信方式と、エンコードと配信とを並列して行ないリアルタイムの配信を行なうライブ配信方式とのいずれを採用しても良い。
【0102】
サーバ101は、そのハードディスク▲2▼131に、全てのルート2121及びノード2111について、ルート2121の始点から終点に到る動画映像とノード2111のパノラマ画像2255とを記憶保存している。つまり、ハードディスク▲2▼131は、全てのルート2121及びノード2111について、ルート2121の始点から終点に到る動画映像とノード2111のパノラマ画像2255とを記憶保存するデータベースとして機能する。そこで、サーバ101は、第1の地点から第2の地点に到る全てのルート2121及びノード2111について、ハードディスク▲2▼131に記憶保存されたルート2121の始点から終点に到る動画映像とそのルート2121間を滑らかに繋ぐようにするノード2111のパノラマ画像2255に基づく回転映像とを経路映像リストとして作成し、作成した経路映像リストをストリーミング映像サーバ141に渡す。これにより、ストリーミング映像サーバ141は、経路映像リストに基づいてストリーミング対応となるように経路映像を作成する。そこで、利用者端末であるクライアント201は、インストールされたストリーミング映像再生ソフトによって、ストリーミング映像サーバ141にアクセスして経路映像をダウンロードしながら、ダウンロード取得した経路映像リストを再生することが可能である。
【0103】
図10は、図4に示す案内画面2001中、「全経路映像を連続して見る」という説明が付された経路映像指定オブジェクト2241がクリックされた場合のサーバ101での経路映像リスト作成処理の流れを示すフローチャートである。
【0104】
経路映像指定オブジェクト2241がクリックされると(ステップS201)、サーバ101は、ルート2121の始点から終点に到る動画映像とノード2111のパノラマ画像2255とを記憶保存するデータベースであるハードディスク▲2▼131を検索する第1の処理と、ノード2111において先行するルート2121の終点と後続するルート2121の始点とをパノラマ画像2255に基づく回転映像で繋ぐ第2の処理とを実行する(再生手段、再生ステップ)。本実施の形態では、第2の処理を実行するに際して、サーバ101は、経路映像リストを作成してストリーミング映像サーバ141に渡し、このストリーミング映像サーバ141で実際の経路映像をストリーミング配信可能な圧縮ファイル形式で生成する。これにより、計算した経路の順に第1の地点から第2の地点に到る経路映像を利用者端末であるクライアント201で再生可能となる。
【0105】
ここで、サーバ101での経路映像リストの作成について、より詳細に説明する。まず、サーバ101のハードディスク▲1▼121にインストールされたCGIプログラムは、出発点である第1の地点から到達点である第2の地点に到るまでの全ての結合映像数Zに達するまで、最適なルート2121の映像を経路映像リストに追加する(ステップS202〜ステップS208)。このような処理を実現するために、まず、経路映像リストに第1番目のルート2121映像を追加する(ステップS202)。この際、例えばカウンタ等に、ルート2121映像の順番を示すNの値として、「1」を設定する。そして、全ての結合映像数Z、つまり出発点である第1の地点から到達点である第2の地点に到るまでの全てのルート2121の数ZにNが達したかどうかが判定され(ステップS203)、Z=Nであれば(ステップS203のY)、経路映像リストが完成したことになるので、作成後の経路映像リストをストリーミング映像サーバ141に渡す(ステップS204)。これにより、利用者端末であるクライアント201に作成後の経路映像をストリーミング配信可能となる。
【0106】
これに対して、Z=Nでない場合、つまり出発点である第1の地点から到達点である第2の地点に到るまでの全てのルート2121の数ZにNが達しない場合には(ステップS203のN)、経路映像リストに第N+番目のルート2121映像を追加し(ステップS202)、カウントに設定したNをN+に更新した後(ステップS208)、ステップS203の処理にリターンする。この際、第N番目のルート2121映像の終了時における角度が、第N+1番目のルート2121映像の開始時における角度と等しければ(ステップS205のY)、単に、その第N+1番目のルート2121映像を経路映像リストに追加するだけであるが(ステップS207)、そうでない場合には(ステップS205のN)、ノード2111のパノラマ画像2255に基づいて回転映像を作成し、この回転映像を経路映像リストに追加した後(ステップS206)、第N+1のルート2121映像を経路映像リストに追加する(ステップS207)。この場合におけるノード2111のパノラマ画像2255に基づく回転映像は、第N+1番目のルート2121映像と第N+1番目のルート2121映像とを滑らかに繋ぐような回転映像である。サーバ101は、そのようなノード2111のパノラマ画像2255に基づく回転映像を生成する。
【0107】
以上説明したようなサーバ101による経路映像リストは、一例として、図11ないし図13に示すXML記述言語で記述される。つまり、サーバ101は、図11ないし図13に例示するようなXML記述言語で経路映像リストを作成する。図11ないし図13に例示するXML記述言語の経路映像リストは、それぞれ単独の記述内容ではなく、図11から図12、図12から図13と繋がる一連の内容を有している。ここでは、図面表現上のスペースの問題で図11ないし図13に分けて示しているに過ぎない。以下、このようなXML記述言語による経路映像リストについて詳述する。
【0108】
まず、XML記述言語による経路映像リスト中、図11から図12にかけて示す静止画情報記述領域には、静止画の情報が記述されている。
【0109】
例えば、「506」というノード2111における終了・開始映像の静止画(これらは同一の画像である)は、<image id="S506">のタグに情報が記述されている。href=”…”は、この静止画像のファイルへのリンクである。xSizeは、画像のX方向の画素数である。ySizeは、画像のY方向の画素数である。verticalAngleは、垂直画角である。horizontalAngleは、水平画角である。angleDirectionは、その静止画の中心が向いている方向である。
【0110】
また、「506」というノード2111におけるパノラマ画像2255は、<panoramicImage id="P506">のタグに情報が記述されている。href,xSize,ySize, angleDirection,verticalAngleは、<image .. >タグと同様の意味を有する。rotationImageHrefは、360度のパノラマ画像2255を意味する。rotationImageXSize,rotationImageYSizeは、そのようなパノラマ画像2255におけるX,Y方向の画素数である。
【0111】
「507」、「508」というノード2111についても、同様の手法で、終了・開始映像の静止画、パノラマ画像2255の情報が記述されている。
【0112】
次に、XML記述言語による経路映像リスト中、図12から図13にかけて示すノード情報記述領域には、ノード2111の情報が記述されている。
【0113】
例えば、「506」というノード2111のIDは、<naviNode id="N506">と記述され、id=”N506”となる。<link>タグは、関連する画像などへのリンクを表し、type属性により、何に対するリンクかを表している。
【0114】
この場合、「506」というノード2111における終了・開始映像の静止画へのリンクは<link type="image" idref="S506"/>、パノラマ画像2255へのリンクは<link type="panoramicImage" id="P506"/>と記述されている。
【0115】
「507」、「508」というノード2111についても、同様の手法で、終了・開始映像の静止画、パノラマ画像2255の情報が記述されている。
【0116】
さらに、XML記述言語による経路映像リスト中、図13に示すルート情報記述領域には、ルート2121の情報が記述されている。
【0117】
例えば、ノード2111「502」から「506」に向かうルート2121は、<naviRoute id="R502-506">のタグで囲まれた部分に記述されている。<routeLength>タグは、ルート2121の距離を表わす。<startNaviNode>タグは、開始節のIDを表わす。<endNaviNode>タグは、終了ノード2111のIDを表わす。そして、<routeFile>には、属性hrefとしてルート2121の映像へのリンクが記述されている。
【0118】
図14は、パノラマ画像2255から回転映像を作成する手順を視覚的に示す模式図である。図14の上段は、あるノード2111に到るルート2121の終了時の画像である。<naviRoute>タグに記述された<endNaviNode>タグにある終了ノード2111のIDから該当する<naviNode>が判り、その<naviNode>に記述された<link type="image">に記述されたid属性から終了時の画像が判り、id属性に記述されたangleDirectionより角度aが判る。
【0119】
同様な方法で、次のノード2111に到るルート2121の開始時の画像(下段)の角度dが判る。
【0120】
同様な方法で、パノラマ画像2255(中段)の開始向きの角度eが判る。さらに、パノラマ画像2255のXSizeから角度a,dに該当するパノラマ画像2255上でのX方向の画素位置b,cが判る。算出式は、
b=(5140/360)×a
d=(5140/360)×c
である。例えば、a=180,d=90,e=0,panoramicImageタグにかかれたXSize=5140である場合、b=2570,d=1285である。
【0121】
これより、パノラマ画像2255上の移動画素量が判る。そこで、パノラマ画像2255の画素位置bから画素位置cに移動する回転映像を作成することができる。回転映像の作成は、例えばreal networks社が提供するrealPix言語によって記述することで、簡単に行なうことができるので、ここではその説明を省略する。
【0122】
そして、終了向きと開始向きの異なる二つのルート2121の動画映像間に、それらのルート2121を接続するノード2111の回転映像を経路映像リストに追加することで、映像の向きが滑らかに繋がった案内経路映像を利用者に提供することができる。この際、回転映像とその前後のルート2121映像とを切り換える際に、クロスフェード効果やディゾルブ効果等の効果を用いた映像を表示することにより、接続部分の差異を減少し、その繋がりをより滑らかにすることができる。クロスフェード効果やディゾルブ効果については、従来技術なのでその説明を省略する。
【0123】
以上説明したノード2111におけるパノラマ画像2255に基づく回転映像によって二つのルート2121を滑らかに繋ぐという手法は、出発点である第1の地点及び到達点である第2の地点でも応用可能である。つまり、例えばダイアログボックス等で、出発点である第1の地点での開始向きや到達点である第2の地点での終了向きとして任意の角度値を入力可能とすることを前提として、「全経路映像を連続して見る」という説明が付された経路映像指定オブジェクト2241がクリックされる際、入力されたそれぞれの映像の開始方向、終了方向を参照し、必要であればパノラマ画像2255から回転映像を作成する。こうして、第1の地点におけるルート2121始点の動画映像の向きが案内を開始する向きと異なる場合には、案内を開始する向きと第1の地点におけるルート2121始点の動画映像の向きとを第1の地点におけるノード2111のパノラマ画像2255に基づく回転映像で繋ぐことが可能となる。また、第2の地点におけるルート2121終点の動画映像の向きが所望の向きと異なる場合には、第2の地点におけるルート2121終点の動画映像の向きと所望の向きとを第2の地点におけるノード2111のパノラマ画像2255に基づく回転映像で繋ぐことが可能となる。これにより、より視覚的に認識容易である案内情報を提供することができる。
【0124】
図15は、パノラマ画像2255から回転映像を作成する図14とは別の手順を視覚的に示す模式図である。つまり、図15に模式図として例示する手法は、パノラマ画像2255から回転映像を生成する際に、水平方向成分と垂直方向成分とを参照し、回転映像で繋ぐ二つの画像における垂直方向のずれをも繋ぐものである。具体的には、<image>タグに記述されたverticalAngle(iv),horizontalAngle(ih)と、<panoramicImage>タグに書かれたverticalAngle(pv)を基にして、より滑らかに繋がる回転映像を作成する。
【0125】
XSizeとYSizeとの値として、panoramicImageタグに記述された値を用いると、図15中のbやcの部分を囲む枠内のピクセル範囲(X、Y)として、簡便には、
X=(XSize/360)×ih
Y=(YSize/pv)×iv
を計算し、パノラマ画像2255上のb枠の左上(px1,py1)、右下(px2,py2)の座標は、それぞれ、
(px1、py1)=(b−X/2、YSize/2−Y)
(px2、py2)=(b+X/2、YSize/2+Y)
と求めることができる(但し、被写体が∞にあるとした場合の近似式)。
【0126】
これより、パノラマ画像2255の画素位置bにおいて、bを囲む枠部分から開始し、画素位置cではcを囲む枠部分内に移動する回転映像を作成することができる。よって、ノード2111における経路映像の方向転換をより滑らかにし、案内情報の質をより向上させることができる。
【0127】
図16及び図17は、パノラマ画像2255から回転映像を作成する図14及び図15とは別の手順を視覚的に示す模式図である。つまり、パノラマ画像2255は360度画像であり、図16に例示するパノラマ画像2255においても左右の端部は継ぎ目が生ずることなく繋がる。しかしながら、実際の画像ファイルは2次元画像として表現されていることから、X方向の座標は始点及び終点を持つ。このため、角度の指定によっては、該当部分の枠の一部が端部からはみ出たり(図16のb参照)、あるいは完全にはみ出たり(図16のc参照)することが起こり得る。このとき、回転映像の作成に際して、このような例外については例外判定を行ない、それぞれのケース毎に必要な静止画像を生成するなどの処理を行なわなければならない。そこで、図17に例示するように、予めパノラマ画像2255を二枚接続して720度画像とすることにより、回転角が360度以内であれば、例外判定を行なうことなく回転映像を作成することができる。これにより、ノード2111とその前後のルート2121とを正しく繋ぐことができ、ノード2111における経路映像の方向転換を滑らかにすることができる。
【0128】
ここで、パノラマ画像2255は、サーバ101のハードディスク▲2▼131に予め720度パノラマ画像として記憶保存されていても良く、あるいは、サーバ101による経路映像リストの作成時等に720度パノラマ画像とされていも良い。
【0129】
図18は、図4に示す案内画面2001中、「全経路映像を連続して見る」という説明が付された経路映像指定オブジェクト2241がクリックされた場合の図10とは異なる経路映像リスト作成処理の流れを示すフローチャートである。もっとも、図18に例示するフローチャートにおいても、基本的な処理の流れは図10に例示するフローチャートと共通する。異なる点は、二つのルート2121を繋ぐノード2111において、パノラマ画像2255が必要とされているのに、サーバ101のハードディスク▲2▼131に必要とされているパノラマ画像2255が存在しない場合である。
【0130】
つまり、前述したように、出発点である第1の地点から到達点である第2の地点に到るまでの全てのルート2121の数ZにNが達しない場合には(ステップS203のN)、経路映像リストに第N+番目のルート2121映像を追加し(ステップS202)、カウントに設定したNをN+に更新した後(ステップS208)、ステップS203の処理にリターンする。この際、第N番目のルート2121映像の終了時における角度が、第N+1番目のルート2121映像の開始時における角度と等しければ(ステップS205のY)、単に、その第N+1番目のルート2121映像を経路映像リストに追加するだけであるが(ステップS207)、そうでない場合には(ステップS205のN)、ノード2111のパノラマ画像2255に基づいて回転映像を作成し、この回転映像を経路映像リストに追加した後(ステップS206)、第N+1のルート2121映像を経路映像リストに追加する(ステップS207)。
【0131】
ここで、図10に例示するフローチャートでは、ステップS205において、第N番目のルート2121映像の終了時における角度が、第N+1番目のルート2121映像の開始時における角度と等しくないと判定された場合(ステップS205のN)、ノード2111のパノラマ画像2255に基づき回転映像を作成してこの回転映像を経路映像リストに追加するステップS206の処理に先立ち、サーバ101のハードディスク▲2▼131に該当するパノラマ画像2255が存在するかどうかを判定する(ステップS301)。その判定の結果、該当するパノラマ画像2255が存在すると判定された場合にはノード2111のパノラマ画像2255に基づき回転映像を作成してこの回転映像を経路映像リストに追加するステップS206の処理を実行する。これに対して、ステップS301での判定の結果、該当するパノラマ画像2255が存在しないと判定された場合には(ステップS301のN)、向きの変更に必要な分の角度を文字として表示する画像を作成し、これを経路映像リストに追加し(ステップS302)、その後にステップS207に処理を移す。これにより、そのような向きの変更に必要な分の角度を文字として表示する画像が追加された経路映像リストがストリーミング映像サーバ141に渡された場合には、そのストリーミング映像サーバ141にアクセスするクライアント201において、少なくとも、前後する二つのルート2121の映像が何度回転しているかをストリーミング表示することができる。これにより、サーバ101のハードディスク▲2▼131に利用しようとするパノラマ画像2255がない場合でも、利用者にそのノード2111の前後における映像の向きがどれぐらい変っているのか知らせることができる。
【0132】
【発明の効果】
本発明は、出発点となる第1の地点から到達点となる第2の地点に到る経路について一見して視覚的に認識容易である案内情報を提供することができ、しかも、出発点となる第1の地点から到達点となる第2の地点に到る全ての経路についての経路映像を記憶保存することなく、ルートの始点から終点に到る動画映像とノードのパノラマ画像とを記憶保存するだけで、換言するとより少ないデータ量によってノードにおける経路映像の方向転換を滑らかにし、案内情報の質を向上させることができる。
【図面の簡単な説明】
【図1】本発明の第1の実施の形態として、予め定められた構内において、出発点となる第1の地点から到達点となる第2の地点までの道のりを案内する構内案内装置、構内案内方法、構内案内処理に関するコンピュータプログラム、そのようなコンピュータプログラムを記憶する記憶媒体を含む検索案内システムの模式図である。
【図2】そのような検索案内システムの概略ブロック図である。
【図3】構内案内処理の流れを示すフローチャートである。
【図4】案内画面の一例を示す模式図である。
【図5】案内画面中の属性画面に含まれるノードの周辺画像であるパノラマ画像の一例を示す模式図である。
【図6】案内画面中の属性画面に含まれるノードの周辺画像であるドーナツ状に変形したパノラマ画像の一例を示す模式図である。
【図7】本発明の第2の実施の形態として、地図画面の一例を示す模式図である。
【図8】経路映像リストを例示する模式図である。
【図9】検索案内システムの概略ブロック図である。
【図10】経路映像リスト作成処理の流れを示すフローチャートである。
【図11】XML記述言語による経路映像リストの一部を例示する模式図である。
【図12】図11に例示する経路映像リストの続きを示す模式図である。
【図13】図12に例示する経路映像リストの続きを示す模式図である。
【図14】パノラマ画像から回転映像を作成する手順を視覚的に示す模式図である。
【図15】パノラマ画像から回転映像を作成する図14とは別の手順を視覚的に示す模式図である。
【図16】パノラマ画像から回転映像を作成する図14及び図15とは別の手順を視覚的に示すために、360度パノラマ画像で発生する不具合を説明する模式図である。
【図17】720度パノラマ画像により図16に例示する不具合が解消される状態を示す模式図である。
【図18】図10とは異なる経路映像リスト作成処理の流れを示すフローチャートである。
【符号の説明】
101 構内案内装置(サーバ)
131 データベース(記憶装置)
201 利用者端末(クライアント)
401 情報検索装置(図書検索システム)
502 第1の地点
509 第2の地点
2001 案内画面
2101 地図画面
2111 ノード
2121 ルート
2201 属性画面
2231 経路点滅指定オブジェクト(チェックボックス)
2241 経路実撮影映像指定オブジェクト、ルート映像指定オブジェクト
2252 ノードの識別番号
2253 ノードの地点名
2254 ノードの地点概要
2255 ノードの周辺画像、パノラマ画像
2256 ノードの周辺画像、パノラマ画像をドーナツ状に変形した画像
2257 ノード点滅指定オブジェクト(チェックボックス)
2262 ルートの識別番号
2263 ルートの地点名(ルート名)
2264 ルートの地点概要
2265 ルートの始点画像
2266 ルートの終点画像
2267 ルート中の進行方向及び方向変化を示す記号
2268 記号に対応する所要時間
2269 ルート点滅指定オブジェクト(チェックボックス)
2270 ルート実撮影映像指定オブジェクト
[0001]
BACKGROUND OF THE INVENTION
  The present invention provides, on a predetermined premises, a premises guidance device for guiding a route from a first point as a starting point to a second point as a destination point,Program and campus guidance methodAbout.
[0002]
[Prior art]
Various methods have conventionally been considered and put into practical use as methods for accessing target information. In particular, with the development of information processing technology in recent years, technology for searching for and accessing target information has made dramatic progress.
[0003]
As an example, the applicant of this application has put a book search system into practical use and commercialized it as remedy (trade name). This book search system has various functions, but one of them is to search for books (including magazines, papers, etc.) based on various keywords, and to use information about books as search results. Provided to the user of the user terminal.
[0004]
[Problems to be solved by the invention]
Taking a book search as an example, a person who searches for a book and accesses information about the desired book will usually want to access the book itself. Therefore, it is conceivable to include information on the location of the book in the book search result. For example, in the case of a library, information on a place where the book is stored is provided, and in the case of a bookstore, information on a sales floor in the bookstore where the book is sold is provided.
[0005]
However, even if you provide information about the location in the library where the book is stored and the sales floor in the bookstore where the book is sold, those who are unfamiliar with the library or bookstore have access to the book. It's not easy. For this reason, an effective method for supporting access to the retrieved books is desired.
[0006]
In addition, as a tool for route guidance to a target place, conventionally, a navigation system represented by a car navigation system has been proposed (for example, Japanese Patent Laid-Open Nos. 9-119845 and 10-318773, JP-A-11-94571, etc.) are widely used. However, such a navigation system cannot be applied as it is as a tool for supporting access to searched books.
[0007]
An object of the present invention is to provide an effective technique for supporting access to a search object such as a searched book.
[0033]
[Means for Solving the Problems]
  Claim1The invention of the on-site guidance device described isFor each route connecting a plurality of nodes each representing a plurality of points in a predetermined premises, a moving image storage means for storing a moving image video of a route between the nodes in a storage device, and a panoramic image around each of the nodes Panoramic image storage means for storingThe first point on the campusSaid node representingAnd the second point to be reachedSaid node representing andInput, Via user terminalAcceptReceptionMeans and enteredSelect at least one route that is the shortest route between the nodesDoChoiceMeans,When the selected route is 1, the moving image of the route is created as a route image. When the selected route is plural, if each route is a straight line, each route If the respective routes are not linear, the moving image video of each route is the panoramic image around each node common to each route and the respective routes. Route image creation means for creating a route image by combining with a rotation image based on the angle to be formed, and playback means for transmitting the route image to the user terminal and playing it back.
[0034]
  Claim2The described invention is claimed.1In the on-site guidance device described above, the reproduction means performs streaming distribution of the route video to the user terminal.
[0037]
  Claim3The described invention is claimed.1 or 2In the premises guidance apparatus described above,Route video creation meansRefers to a horizontal direction component and a vertical direction component when generating the rotated image from the panoramic image,JointwoThe video image of the routeThe vertical displacement atJoin.
[0038]
  Claim4The described invention is claimed.1 to 3In the campus guidance device according to any one of the above, the panoramic image isConnected the same panoramic imageIt is an image.
[0040]
  Claim5The described invention is claimed.1 to 4In the campus guidance device according to any one of the above,Route video creation meansIs the rotation image and before and afterThe video image of the routeUse the crossfade effect when switching betweenHave.
[0041]
  Claim6The invention of claim1 to 4In the campus guidance device according to any one of the above,Route video creation meansIs the rotation image and before and afterThe video image of the routeWhen switching betweenDissolve effectForHave.
[0042]
  Claim7DescriptionProgramsThe invention ofFor each route connecting a plurality of nodes each representing a plurality of points in a predetermined premises, a moving image video storage means for storing a moving image video of a path between the nodes in a storage device, and surroundings of each node Input to the panorama image storage means for storing the panorama image in the storage device and the node representing the first point serving as the starting point and the node representing the second point serving as the arrival point on the campus An accepting means for accepting via a terminal; a selecting means for selecting at least one or more of the routes as the shortest path between the inputted nodes; and if the selected route is 1, the moving image of the route When a plurality of the selected routes are created, the moving images of the routes are combined if the routes are linear. A rotation image created as a road image and based on a panoramic image around each node common to each route and an angle formed by each route, if the route is not linear, The program for functioning as route video creation means for creating a route video by combining with the above, and playback means for transmitting the route video to the user terminal for playback.
[0043]
  Claim8DescriptionOn-site guidance methodThe invention ofA site guidance method executed by a site guidance device, wherein the site guidance device includes a control unit and a storage unit, and the video image storage means executed in the control unit includes a plurality of video images stored in a predetermined site. For each route connecting a plurality of nodes each representing a point, a step of storing a moving image video of a route between the nodes in a storage device, and a panoramic image storage means store a panoramic image around each of the nodes in the storage device And a step of accepting an input of the node representing the first point serving as the starting point and the node representing the second point serving as the arrival point via the user terminal. Selecting at least one or more of the routes that are the shortest route between the inputted nodes; and a route image creating unit selecting the selected route In the case of 1, the moving image video of the route is created as a route image, and when the selected route is plural, the moving images of the routes are combined if the routes are linear. If the respective routes are not linear, the moving image video of each route is based on the panoramic image around each node common to each route and the angle formed by each route. A step of combining the rotated images to create a route image; and a step of reproducing the route image by transmitting the route image to the user terminal.
[0048]
DETAILED DESCRIPTION OF THE INVENTION
<First Embodiment>
A first embodiment of the present invention will be described with reference to FIGS.
[0049]
FIG. 1 shows a campus guidance apparatus, a campus guidance method, and a computer program related to campus guidance processing for guiding a route from a first point as a starting point to a second point as a destination in a predetermined campus, It is a schematic diagram of a search guidance system including a storage medium for storing such a computer program. FIG. 2 is a schematic block diagram of such a search guidance system.
[0050]
In this embodiment, a server 101 that functions as a local guidance apparatus is provided, and a client 201 that functions as a user terminal is connected to the server 101 via a network 301. In addition, a book search system 401 that functions as an information search device is also connected to the network 301.
[0051]
The client 201 is a computer including a microcomputer including a CPU and a memory, and includes a display device 211 and an input device 221. The input device 221 includes a pointing device such as a mouse in addition to a keyboard. In addition, the display device 211 has a browsing function for browsing information. This browsing function is realized by browser software stored in a hard disk (not shown).
[0052]
The server 101 includes a web server 111. The Web server 111 is a computer including a microcomputer that includes a CPU and a memory. Further, the hard disk {circle around (1)} 121 of the server 101 performs processing in cooperation between the local guidance processing program for executing the local guidance processing and the Web server 101 and the external program in response to a request from the browser software of the client 201. A CGI (Common Gateway Interface) program is provided. As an external program linked by the CGI program, route search software and Web screen creation software are provided.
[0053]
In addition, the server 101 is provided with a hard disk (2) 131. The hard disk (2) 131 includes various information necessary for browsing of the client 201 executed by the on-site guidance processing program and the external program, such as video. Information and various attribute information are included. In this case, the on-site guidance processing program provides the client 201 with a screen for displaying a route composed of nodes and routes on the drawing representing the on-site for the purpose of on-site guidance. Therefore, the hard disk {circle around (2)} 131 functions as a database for storing and storing image information necessary for generating a drawing representing the premises and attribute information regarding nodes and routes.
[0054]
As described above, in the server 101, various programs are stored and stored in the hard disk (1) 121 and the hard disk (2) 131. Therefore, the hard disk (1) 121 and the hard disk (2) 131 are storage media for storing programs.
[0055]
The book search system 401 has a hardware configuration similar to that of the server 101, and provides a book search function to the client 201 that is accessing the book search system 401. That is, the book search system 401 is also a computer including a microcomputer including a CPU and a memory, and interprets and executes software for book search. The software for book search is an external program linked by a CGI program executed on the book search system 401, and performs processing in response to a request from the browser software of the client 201.
[0056]
Here, as illustrated in FIG. 1, the client 201 can search for a book by accessing the book search system 401. The book search is performed, for example, when the book search system 401 provides a book search screen to the client 201 and the client 201 inputs a keyword to the book search screen by the input device 221. That is, the book search software executed on the book search system 401 searches a book database (not shown) according to the keyword input by the client 201 and provides the corresponding book information to the client 201. The book search result screen 1001 illustrated in FIG. 1 provides the user with arrangement information 1011 in which the searched book is arranged. In this arrangement information 1011, the name of the arrangement place is expressed as a hyperlink 1012. Therefore, when the hyperlink 1012 is clicked on the client 201 with a pointing device or the like, the on-site guidance processing program in the server 111 is activated, and an image that guides the client 201 to the place where the book is arranged is a guidance screen 2001. Offered as.
[0057]
FIG. 3 is a flowchart showing the flow of the on-site guidance process. FIG. 4 is a schematic diagram illustrating an example of a guidance screen. FIG. 5 is a schematic diagram illustrating an example of a panoramic image that is a peripheral image of a node included in the attribute screen in the guidance screen. FIG. 6 is a schematic diagram showing an example of a panoramic image transformed into a donut shape that is a peripheral image of a node included in the attribute screen in the guidance screen. Hereinafter, the flow of the on-site guidance process will be described with reference to FIG.
[0058]
When a hyperlink 1003 in the placement information 1002 displayed on the book search result screen 1001 is clicked, in addition to a command to start the campus guidance processing program, the place where the searched book is placed, for example, the number of floors of the library Along with the information on the library, information on the first point serving as the starting point and the second point serving as the destination point on the campus of the corresponding floor of the library is transmitted from the book search system 401 to the server 101. Thereby, in the server 101, information related to the number of floors of the library and information related to the first point serving as the starting point and the second point serving as the arrival point on the premises of the corresponding floor of the library are input (step S101). ). Here, a means (step) for receiving inputs of a first point serving as a starting point and a second point serving as a destination point on a predetermined campus is executed.
[0059]
Next, in the server 101, a combination of a node and a route that is the shortest route from the first point (A) to the second point (B) is calculated by the route search software (step S102). Such processing by the route search software is executed by a known calculation method for calculating a combination of a node and a route that is the shortest route from the starting point to the destination point. As such a known calculation method, for example, “Iwanami Shoten, Kiyoshi Ishihata, Software Science Volume 3“ Algorithms and Data Structures ”, Chapter 4“ Graph Algorithms ”, Section 5“ Shortest Path Problem ”(b ) A simple method for realizing the Dijkstra algorithm ”. Here, a means (step) for calculating a route composed of a node and a route from the first point to the second point based on the input first point and second point is executed. .
[0060]
Next, it is determined whether or not there is a route as a result of the calculation in step S102 (step S103). If there is no route, it is possible to browse without a route on the client 201 (step S104), and if there is a plan view of the corresponding floor of the library. It is possible to browse in 201 (step S105). In this case, the plan view of the corresponding floor of the library is an example of a drawing representing the campus, and the drawing representing the campus is not limited to the plan view, but various drawings such as a three-dimensional view and a bird's eye view. Can be adopted.
[0061]
As a result of the processing in step S105, a guidance screen 2001 is displayed on the display device 211 of the client 201. This guidance screen 2001 is composed of a map screen 2101 and an attribute screen 2201 as illustrated in FIGS. When the process of step S105 is completed, only the map screen 2101 is displayed in the guidance screen 2001.
[0062]
Next, in step S106, an attribute screen and an attribute information program are created. In this way, in step S105 and step S106, a database (hard disk {circle around (2)} 131) that stores and saves image information necessary for generating a drawing representing the premises and attribute information relating to the nodes and routes is retrieved, and the drawings representing the premises. Information for generating a guidance screen 2001 combining a map screen 2101 for displaying a calculated route and an attribute screen 2201 for displaying attribute information of nodes and routes constituting the calculated route in order of the route. Collecting means (steps) are executed.
[0063]
In step S106, the created attribute information program is transmitted to the client 201. As a result, the client 201 can execute the attribute information program.
[0064]
Next, the server 101 allows the client 201 to browse the attribute screen created in step S106 (step S107). As a result, the attribute screen 2201 illustrated in FIGS. 1 and 4 can be displayed on the client 201.
[0065]
At this time, the server 101 transmits the calculation result in step S102 to the client 201. Therefore, the client 201 interprets and executes the attribute information program transmitted from the server 101 in step S106, so that the node and route corresponding to the shortest path are displayed on the map screen 2101 according to the calculated result in step S102. The display can be browsed (step S108). In the flowchart of FIG. 3, the process of step S108 is shown in parentheses because the process of step S108 is interpreted and executed by the microcomputer included in the client 201. As a result, as illustrated in FIGS. 1 and 4, the client 201 includes the nodes 2111 illustrated as “502”, “506”, “507”, and “509” on the map screen 2101, and those The route 2121 connecting the nodes 2111 can be displayed. In the map screen 2101 illustrated in FIG. 4, the node 2111 displayed as “502” is the first point as the starting point, and the node 2111 displayed as “509” is the second point as the destination. It is a point.
[0066]
As described above, the server 101 executes processing for enabling browsing of certain information by the client 201 as in steps S105, S107, and S108. Here, a means (step) for enabling the user terminal (client 201) to browse the guidance screen 2001 based on the collected information is executed.
[0067]
Thereafter, the server 101 waits for user input (step S109).
[0068]
Here, the guidance screen 2001 including the attribute screen 2201 will be described.
[0069]
First, the attribute screen 2201 has various objects that can be specified by the client 201 browsing the guide screen 2001. In this case, the designation on the client 201 is, for example, by a click operation with a pointing device included in the input device 221. When such an object is designated by the client 201, a change occurs in the guidance screen 2001 that is being browsed by the display device 211. This is a function obtained by interpreting and executing on the client 201 the attribute information program transmitted from the server 101 to the client 201 in step S106 in the flowchart shown in FIG.
[0070]
Next, the attribute screen 2201 has a brief description 2211 explaining the guidance route guided by the guidance screen 2001 at the beginning of the attribute screen 2201. In FIG. 4, “shortest path from 502 to 509” is shown as the short description 2211. 502 and 509 mean the node 2111.
[0071]
Below the description of such a guide route, an object 2221 “return to selection screen” is shown. When the object 2221 is clicked on the client 201, the attribute information program transmitted from the server 101 to the client 201 in step S106 is interpreted and executed by the client 201, and the client 201 returns the screen display to the selection screen. This selection screen is, for example, the book search result screen 1001 illustrated in FIG.
[0072]
In the guidance screen 2001, a check box 2231 as a route blinking designation object with an explanation of “all nodes and routes blinking display” is displayed below the object 2221 “return to selection screen”. . When this check box 2231 is clicked, the attribute information program transmitted from the server 101 to the client 201 in step S106 is interpreted and executed by the client 201, and displayed on the map screen 2101 of the client 201 by the processing in step S108 of the server 101. Nodes 2111 and the route 2121 connecting these nodes 2111 are displayed in a blinking manner. As a result, the node 2111 and the route 2121 are conspicuous and can be easily visually recognized.
[0073]
In addition, in the guidance screen 2001, a route actual captured video with a description “view all route videos continuously” is displayed below a check box 2231 with a description “all nodes, blinking display of route”. A designated object 2241 is displayed. When this route actual shot video designation object 2241 is clicked, the attribute information program transmitted from the server 101 to the client 201 in step S106 is interpreted and executed by the client 201. Actual captured images (moving images) of all the routes up to 509 are reproduced. In this case, even if such actual captured video is transmitted in advance from the server 101 to the client 201 together with the attribute information program in step S106, the actual path captured with the description of “viewing all path video continuously” is attached. The server 101 may be notified that the video designation object 2241 has been clicked, and the server 101 may send it to the client 201 in response to this, or any known method for executing the same type of processing may be used.
[0074]
Next, on the attribute screen 2201, attribute information on the node 2111 that constitutes the guide route in the map screen 2101 under the actual route shooting image designation object 2241 with the description “view all the route images continuously”. 2251 and attribute information 2261 related to the route 2121 are displayed in the order of the route. These attribute information 2251 and 2261 are shown as “departure node 502”, “from route 502 to 506”, “node 506”, “from route 506 to 507” on the attribute screen 2201 illustrated in FIG. Has been.
[0075]
In the attribute information 2251 related to the node 2111, the identification number 2252 of the node 2111 is indicated as a node ID, and a spot name 2253 and a spot summary 2254 are indicated. In the attribute screen 2201 shown in FIG. 4, “502” is shown as the identification number 2252 of the node 2111, “5th floor hall” is shown as the spot name 2253, “near the main building elevator” is shown as the spot summary 2254, and the identification number 2252 of the node 2111 is shown. "506", "5th floor new library nature book back number (1)" as the spot name 2253, and "5th floor new library nature book back number (1)" as the spot outline 2254, respectively.
[0076]
Further, the attribute information 2251 related to the node 2111 includes a peripheral image of the node 2111. In this embodiment, a panoramic image 2255 around the node 2111 and an image 2256 obtained by transforming such a panoramic image 2255 into a donut shape are displayed as the peripheral image of the node 2111. The panorama image 2255 may be a 360-degree image or a panorama image at a narrower angle. In addition, the panorama image 2255 and the image 2256 deformed into a donut shape are configured by actual captured video as an example. You may use as the image 2256 deform | transformed into the donut shape. In addition, the peripheral image of the node 2111 is not necessarily the panoramic image 2255 and the image 2256 deformed into a donut shape.
[0077]
Here, FIG. 5 illustrates a panoramic image 2255 as the attribute information 2251 of the node 2111 whose identification number 2252 is “506”, and FIG. 6 illustrates an image 2256 obtained by transforming such a panoramic image 2255 into a donut shape. is doing.
[0078]
Further, the panorama image 2255 and the image 2256 transformed into a donut shape itself constitute an object, and when clicked, the attribute information program transmitted from the server 101 to the client 201 in step S106 is interpreted and executed by the client 201. Then, the clicked panorama image 2255 or an image 2256 deformed into a donut shape is enlarged and displayed. FIG. 1 illustrates a state where an image 2256 obtained by transforming the panoramic image 2255 into a donut shape is clicked to become an enlarged image.
[0079]
In addition, in the attribute screen 2201 related to the node 2111, a check box 2257 as a node blinking designation object with an explanation “node blinking display” is displayed. When this check box 2257 is clicked, the attribute information program transmitted from the server 101 to the client 201 in step S106 is interpreted and executed by the client 201, and displayed in the map screen 2101 of the client 201 by the processing in step S108. Node 2111 is displayed blinking. For example, when the check box 2257 in the attribute screen 2201 related to the node 2111 whose identification number 2252 is “502” is clicked, the node 2111 “502” displayed in the map screen 2101 is blinked. As a result, the target node 2111 is conspicuous and easily visible.
[0080]
Next, in the attribute information 2261 regarding the route 2121, an identification number 2262 of the route 2121 is indicated as a node ID, and a route name 2263 as a point name and a point summary 2264 are indicated. In the attribute screen 2201 shown in FIG. 4, “5026_0” is identified as the identification number 2262 of the route 2121 from 502 to 506, “5th floor new library natural book back number (1) direction” as the location name 2263, and “5” as the location overview 2264. The route from the main floor hall to the 5th floor new library nature book back number (1) "is shown," 5067_0 "as the identification number 2262 of the route 2121 from 506 to 507, and" 5th floor new building natural book "as the spot name 2263 "Back number (2) direction", as the point outline 2264, "5th floor new library natural library back number (2) from 5th floor new library natural library back number (2)" is shown respectively.
[0081]
The attribute information 2261 relating to the route 2121 includes a peripheral image 2265 at the start point of the route 2121 and a peripheral image 2266 at the end point. These peripheral images 2265 and 2266 are configured by actual captured video as an example. However, in practice, animation images or the like may be used as the peripheral images 2265 and 2266 instead of the actual captured video.
[0082]
Further, these peripheral images 2265 and 2266 themselves constitute an object, and when clicked, the attribute information program transmitted from the server 101 to the client 201 in step S106 is interpreted and executed by the client 201 and clicked. The peripheral images 2265 and 2266 are enlarged and displayed. FIG. 1 exemplifies a state in which the peripheral image 2266 at the end point of the route 2121 with the identification number “5026_0” is clicked to become an enlarged image.
[0083]
The attribute information 2261 relating to the route 2121 includes a symbol 2267 indicating a traveling direction and a change in direction in the route 2121 located between the peripheral image 2265 at the start point of the route 2121 and the peripheral image 2266 at the end point. A required time 2268 corresponding to the symbol 2267 is displayed. As an example of such a symbol 2267 and the required time 2268, a route 2121 with an identification number “5026_0” from 502 to 507 is taken as an example, straight travel 4.5 seconds, left turn 2.5 seconds, straight travel 17.9 seconds.
[0084]
Here, an example is shown in which the required time 2268 of each symbol 2267 is displayed in correspondence with the symbol 2267 indicating the traveling direction and the direction change in the route 2121. However, instead of the required time 2268, the required number of walks is displayed. Anyway.
[0085]
In the attribute screen 2201 related to the route 2121, a check box 2269 is displayed as a route blinking designation object with an explanation of “route blinking display”. When this check box 2269 is clicked, the attribute information program transmitted from the server 101 to the client 201 in step S106 is interpreted and executed by the client 201, and the corresponding information displayed in the map screen 2101 of the client 201 by the processing in step S108. The route 2121 is displayed blinking. For example, when the check box 2269 in the attribute screen 2201 related to the route 2121 with the identification number 2262 of “5026_0” is clicked, the routes 2121 from 502 to 506 displayed in the map screen 2101 are blinked. As a result, the target route 2121 is conspicuous and easily visible.
[0086]
Also, in the attribute screen 2201 related to the route 2121, a route actual captured video designation object 2270 with an explanation “view route video” is displayed. When this route actual captured video designation object 2270 is clicked, the attribute information program transmitted from the server 101 to the client 201 in step S106 is interpreted and executed by the client 201, and the route 2121 corresponding to the attribute screen 2201 is reached from the start point to the end point. The actual captured video (movie) is played back. In this case, even if such actual captured video is transmitted in advance from the server 101 to the client 201 together with the attribute information program in step S106, the route actual captured video designation object 2270 with the description “view root video” is attached. May be notified to the server 101, and the server 101 may send it to the client 201 in response to this, or any known method for executing the same kind of processing may be used.
[0087]
Further, the attribute information program that is interpreted and executed by the client 201 is clicked on the route actual captured video designation object 2270 with the description of “view root video” and the corresponding end point from the start point of the route 2121 in the attribute screen 2201. The corresponding route 2121 displayed in the map screen 2101 is displayed in an animation in accordance with the progress of the actual captured video (moving image) that is reached. As an example of the animation display, for example, a part of the color of the corresponding route 2121 displayed in the map screen 2101 may be changed in accordance with the progress of reproduction of the actual captured video (moving image) of the route 2121. It is possible to employ a method of displaying a part of the corresponding route 2121 in a blinking manner.
[0088]
As described above, according to this embodiment, it is possible to support access from a first point serving as a starting point to a second point serving as a destination point on a predetermined campus.
[0089]
<Second Embodiment>
A second embodiment of the present invention will be described with reference to FIGS. The same parts as those in the first embodiment are denoted by the same reference numerals, and description thereof is also omitted. Accordingly, reference is also made to FIGS. 1 to 6 used to describe the first embodiment as appropriate.
[0090]
The present embodiment relates to details of processing in the case where a route actual captured image designation object 2241 with an explanation of “viewing all route images continuously” is clicked on the guidance screen 2001 shown in FIG. As described above, in the guidance screen 2001 shown in FIG. 4, below the check box 2231 with the description of “all nodes, blinking display of route”, there is an explanation of “viewing all route images continuously”. Attached route actual shooting video designation object 2241 is displayed. When this route actual captured video designation object 2241 is clicked, the attribute information program transmitted from the server 101 to the client 201 in step S106 is interpreted and executed by the client 201, and actual captured images (moving images) of all routes are displayed in the guidance screen 2001. Played. In this case, even if such actual captured video is transmitted in advance from the server 101 to the client 201 together with the attribute information program in step S106, the actual path captured with the description of “viewing all path video continuously” is attached. The server 101 may be notified that the video designation object 2241 has been clicked, and the server 101 may send it to the client 201 in response to this, or any known method for executing the same type of processing may be used.
[0091]
In addition, here, an example is shown in which an actually captured video is used as the actual captured video. However, the actual captured video does not have to be a real captured video, and may be, for example, a graphics image or an animation image. . In other words, any video can be used as long as the video can be easily recognized by the user, whether it is an actually captured video or a created virtual video. In this sense, in the guidance screen 2001 shown in FIG. 4, the actual route shooting image designation object 2241 with the description “view all the route images continuously” can also be referred to as a route image designation object 2241. . Therefore, in the present embodiment, the object referred to as the path actual captured video designation object 2241 in the first embodiment is referred to as the path video designation object 2241.
[0092]
FIG. 7 is a schematic diagram illustrating an example of the map screen 2101. In this map screen 2101, all nodes 2111 and routes 2121 set in the server 11 are shown. In the route, a first point as a starting point and a second point as a destination point are selected from a plurality of preset nodes 2111 (indicated by 501 to 509 in FIG. 7). . As the guide route from the first point to the second point, the shortest route is selected from a plurality of preset routes 2121 connecting the nodes 2111. For example, when the first point is the node 2111 “502” and the second point is the node 2111 “508”, the route is “502” → “506”, “506” → “508”. As described above, the algorithm for obtaining such a route is executed by a known calculation method for calculating a combination of the node 2111 and the route 2121 that are the shortest route from the starting point to the destination point.
[0093]
Here, when such a route is provided as a video on the guidance screen 2001, if all the routes from all the nodes 2111 to all the nodes 2111 are photographed, the amount of photographing becomes enormous and the amount of data becomes enormous. . Therefore, a method may be considered in which a moving image is captured for each route 2121 connecting the nodes 2111 and the moving images divided for each route 2121 are combined and provided to the user. In the case of the above-described example, the image of the route 2121 from “502” to “506” and the image of the route 2121 from “506” to “508” are combined, and “502” is combined. → Video that reaches “508” is provided to the user. At this time, Real Media (registered trademark), Windows Media (registered trademark), or the like is used as a streaming video format. In addition, as a means for providing and combining images, for example, the description illustrated in FIG. 8 is created using SMIL, for example, a route image list is created, and the description is described in Real Player (registered trademark) or the like. By reading a route video list as a file, the combined video can be provided to the user as a streaming video via the network 301.
[0094]
When images are combined in this way, it is highly desirable for guiding the routes that the directions of the images match in the portion where the images are combined. In the case of the above example, the shooting direction at the end of the video of the route 2121 from “502” to “506” and the shooting direction at the start of the video of the route 2121 from “506” to “508” Should be consistent. In this way, the user can view a continuous video from “502” to “508” via “506”.
[0095]
However, the node 2111 “506” is a starting point of the route 2121 to the node 2111 “507” in addition to the route 2121 to the node 2111 “508”. In this case, as is apparent from FIG. 7, a route 2121 from the node 2111 “506” to the node 2111 “507” and a route 2121 from the node 2111 “506” to the node 2111 “508” Are in different directions. Therefore, in such a case, the start of the image of the route 2121 reaching “506” → “508” with respect to the orientation at the end of the image of the route 2121 reaching “502” → “506”. Therefore, it is necessary to match the shooting direction at the start of the video of the route 2121 from “506” to “507”.
[0096]
Therefore, as a simple solution to such a problem, for example, the direction at the end of the video of the route 2121 from “502” to “506” is the direction of the node 2111 of “507”, and “506” → The direction of the start of the video reaching “508” starts from the direction of the node 2111 “507”, and the video reaches the node 2111 “508” after the photographing direction is rotated 90 degrees counterclockwise. Assuming that the starting direction of the video from “506” to “507” is the direction of the node 2111 of “507”, all the problematic directions can be matched.
[0097]
However, for example, when an image from the node 2111 “507” to the node 2111 “508” is to be created, the route 2121 becomes “507” → “506”, “506” → “508”. In order to reuse the video, the video from “507” to “506” must be rotated 180 degrees after reaching the node 2111 “506”. This is because in the video “507” → “506”, the orientation is opposite to the node 2111 “507”, but the orientation is adjusted to the video “506” → “508” at the node 2111 “506”. This is because the direction of the node 2111 “507” must be pointed. Moreover, the user rotates 180 degrees at the node 2111 “506” at the end of the video of the route 2121 from “507” to “506”, and then starts the video of the route 2121 from “506” to “508”. At that time, an image rotated 90 degrees counterclockwise will be seen, and it is conceivable that the rotation is confused a lot.
[0098]
As described above, such problems frequently occur as the number of nodes 2111 and routes 2121 increases.
[0099]
In the present embodiment, in view of the problems described above, the periphery of each node 2111 is recorded as a panoramic image 2255, and two images positioned before and after the node 2111 are displayed as rotated images based on the panoramic image 2255. A process for smoothly connecting the routes 2121 is executed. That is, the server 101 records the start direction of the panoramic image 2255 in the hard disk {circle around (2)} 131 in association with the panoramic image 2255. Then, when guiding from the first point to the second point with the moving image of the route 2121 connecting them, the node 2111 located between the plurality of routes 2121 from the first point to the second point If the direction of the end point of the preceding route 2121 image reaching the node 2111 is different from the direction of the starting point of the subsequent route 2121 image starting from the node 2111, the panorama image 2255 recorded around the node 2111 and A rotation image is created using the information of the starting direction. In this way, after the end of the route 2121 video reaching the node 2111, the created rotated image is inserted, and then the route 2121 video starting from the node 2111 is started. As a result, the two routes 2121 positioned before and after the node 2111 are smoothly connected.
[0100]
The process described above will be described in more detail with reference to FIGS.
[0101]
FIG. 9 is a schematic block diagram of the search guidance system. In the present embodiment, the server 101 includes a streaming video server 141. The streaming video server 141 has two roles: an encoder that creates (encodes) streaming-compatible data, and a distribution server that performs distribution. As another embodiment, the server 101 may function as an encoder, and the streaming video server 141 may be divided so as to function only as a distribution server. In addition, streaming video playback software is installed in the client 201 which is a user terminal. Therefore, the client 201 functions as a player that receives and reproduces streaming-compatible data. The streaming distribution method executed by the system of this embodiment that executes such streaming technology includes an on-demand distribution method in which encoded data is stored once in a file and then distributed by a distribution server, and encoding and distribution Any of the live distribution methods for performing real-time distribution in parallel may be adopted.
[0102]
The server 101 stores and saves the moving image from the start point to the end point of the route 2121 and the panorama image 2255 of the node 2111 for all the routes 2121 and nodes 2111 in the hard disk {circle around (2)} 131. That is, the hard disk {circle over (2)} 131 functions as a database that stores and saves the moving image video from the start point to the end point of the route 2121 and the panorama image 2255 of the node 2111 for all the routes 2121 and the nodes 2111. Therefore, the server 101, for all the routes 2121 and nodes 2111 from the first point to the second point, the moving image video from the start point to the end point of the route 2121 stored and stored in the hard disk (2) 131 and A rotated video based on the panorama image 2255 of the node 2111 that smoothly connects the routes 2121 is created as a route video list, and the created route video list is passed to the streaming video server 141. Thereby, the streaming video server 141 creates a route video so as to be compatible with streaming based on the route video list. Therefore, the client 201, which is a user terminal, can play the downloaded route video list while accessing the streaming video server 141 and downloading the route video by using the installed streaming video playback software.
[0103]
FIG. 10 shows a route video list creation process in the server 101 when a route video designation object 2241 with an explanation of “view all route videos continuously” is clicked on the guidance screen 2001 shown in FIG. It is a flowchart which shows a flow.
[0104]
When the route video designation object 2241 is clicked (step S201), the server 101 stores a hard disk {2} 131 which is a database for storing and saving the moving image video from the start point to the end point of the route 2121 and the panorama image 2255 of the node 2111. And a second process of connecting the end point of the preceding route 2121 and the starting point of the subsequent route 2121 with the rotated video based on the panoramic image 2255 in the node 2111 (reproducing means, reproducing step) ). In the present embodiment, when executing the second process, the server 101 creates a route video list and passes it to the streaming video server 141, and the streaming video server 141 can stream the actual route video. Generate in format. As a result, the route image from the first point to the second point in the calculated route order can be reproduced by the client 201 as the user terminal.
[0105]
Here, creation of a route video list in the server 101 will be described in more detail. First, the CGI program installed in the hard disk {circle around (1)} 121 of the server 101 reaches all the combined video numbers Z from the first point as the starting point to the second point as the destination point. The video of the optimal route 2121 is added to the route video list (steps S202 to S208). In order to realize such processing, first, the first route 2121 video is added to the route video list (step S202). At this time, for example, “1” is set as a value of N indicating the order of the route 2121 video in a counter or the like. Then, it is determined whether or not N has reached all the combined video numbers Z, that is, the number Z of all the routes 2121 from the first point that is the starting point to the second point that is the reaching point ( In step S203), if Z = N (Y in step S203), the route video list is completed, and the route video list after creation is passed to the streaming video server 141 (step S204). As a result, the created route video can be streamed to the client 201 which is the user terminal.
[0106]
On the other hand, when Z = N is not satisfied, that is, when N does not reach the number Z of all the routes 2121 from the first point as the starting point to the second point as the destination point ( In step S203 N), the N + th route 2121 video is added to the route video list (step S202), N set in the count is updated to N + (step S208), and the process returns to step S203. At this time, if the angle at the end of the Nth route 2121 image is equal to the angle at the start of the (N + 1) th route 2121 image (Y in step S205), the N + 1th route 2121 image is simply displayed. It is only added to the route video list (step S207). Otherwise (N in step S205), a rotated video is created based on the panorama image 2255 of the node 2111, and this rotated video is added to the route video list. After the addition (step S206), the (N + 1) th route 2121 video is added to the route video list (step S207). In this case, the rotated video based on the panoramic image 2255 of the node 2111 is a rotated video that smoothly connects the (N + 1) th route 2121 video and the (N + 1) th route 2121 video. The server 101 generates a rotated video based on the panorama image 2255 of such a node 2111.
[0107]
The route video list by the server 101 as described above is described in the XML description language shown in FIGS. 11 to 13 as an example. That is, the server 101 creates a route video list in an XML description language as exemplified in FIGS. The route picture list of the XML description language illustrated in FIGS. 11 to 13 has a series of contents linked to FIGS. 11 to 12 and FIGS. Here, FIG. 11 to FIG. 13 are only shown separately because of space problems in drawing representation. Hereinafter, a route video list using such an XML description language will be described in detail.
[0108]
First, in the path video list in the XML description language, still picture information is described in the still picture information description area shown in FIGS.
[0109]
For example, for the still image of the end / start video (they are the same image) in the node 2111 “506”, information is described in a tag of <image id = “S506”>. href = “...” is a link to the still image file. xSize is the number of pixels in the X direction of the image. ySize is the number of pixels in the Y direction of the image. The vertical Angle is a vertical angle of view. Horizontal Angle is a horizontal angle of view. AngleDirection is a direction in which the center of the still image is directed.
[0110]
Further, the panoramic image 2255 in the node 2111 “506” has information described in a tag <panoramicImage id = “P506”>. href, xSize, ySize, angleDirection, verticalAngle have the same meaning as the <image ..> tag. RotationImageHref means a 360 degree panoramic image 2255. rotationImageXSize and rotationImageYSize are the numbers of pixels in the X and Y directions in such a panoramic image 2255.
[0111]
With respect to the nodes 2111 “507” and “508”, the information of the still image of the end / start video and the panoramic image 2255 is described in the same manner.
[0112]
Next, in the path video list in the XML description language, information of the node 2111 is described in the node information description area shown in FIGS.
[0113]
For example, the ID of the node 2111 “506” is described as <naviNode id = “N506”>, and id = “N506”. The <link> tag represents a link to a related image or the like, and represents what the link is based on the type attribute.
[0114]
In this case, the link to the still image of the end / start video in the node 2111 “506” is <link type = "image" idref = "S506" />, and the link to the panoramic image 2255 is <link type = "panoramicImage". It is described as id = "P506" />.
[0115]
With respect to the nodes 2111 “507” and “508”, the information of the still image of the end / start video and the panoramic image 2255 is described in the same manner.
[0116]
Further, in the route video list in the XML description language, information on the route 2121 is described in the route information description area shown in FIG.
[0117]
For example, the route 2121 from the node 2111 “502” to “506” is described in a portion surrounded by tags <naviRoute id = “R502-506”>. The <routeLength> tag represents the distance of the route 2121. The <startNaviNode> tag represents the ID of the start node. The <endNaviNode> tag represents the ID of the end node 2111. In <routeFile>, a link to the video of the route 2121 is described as the attribute href.
[0118]
FIG. 14 is a schematic diagram visually showing a procedure for creating a rotated video from the panoramic image 2255. The upper part of FIG. 14 is an image at the end of the route 2121 to a certain node 2111. The corresponding <naviNode> can be determined from the ID of the end node 2111 in the <endNaviNode> tag described in the <naviRoute> tag, and the id attribute described in <link type = "image"> described in that <naviNode> Thus, the image at the end can be determined, and the angle a can be determined from the angle Direction described in the id attribute.
[0119]
In the same way, the angle d of the image (lower stage) at the start of the route 2121 to the next node 2111 can be determined.
[0120]
In the same way, the start angle e of the panorama image 2255 (middle stage) can be determined. Further, pixel positions b and c in the X direction on the panoramic image 2255 corresponding to the angles a and d can be determined from the XSize of the panoramic image 2255. The calculation formula is
b = (5140/360) × a
d = (5140/360) × c
It is. For example, when a = 180, d = 90, e = 0, and XSize = 5140 written in the panoramicImage tag, b = 2570 and d = 1285.
[0121]
From this, the amount of moving pixels on the panorama image 2255 is known. Therefore, it is possible to create a rotated video that moves from the pixel position b of the panoramic image 2255 to the pixel position c. Creation of a rotating video can be easily performed by describing it in, for example, the realPix language provided by real networks, so that the description thereof is omitted here.
[0122]
Then, by adding the rotated video of the node 2111 connecting the two routes 2121 between the moving images of the two routes 2121 having different end directions and starting directions to the route video list, guidance in which the video directions are smoothly connected. The route image can be provided to the user. At this time, when switching between the rotated image and the route 2121 image before and after it, an image using effects such as a crossfade effect and a dissolve effect is displayed, thereby reducing the difference in the connection portion and smoothing the connection. Can be. Since the cross-fade effect and dissolve effect are conventional techniques, description thereof is omitted.
[0123]
The method of smoothly connecting the two routes 2121 by the rotated video based on the panoramic image 2255 in the node 2111 described above can be applied to the first point as the starting point and the second point as the reaching point. In other words, for example, in a dialog box, it is assumed that any angle value can be input as the starting direction at the first point as the starting point and the ending direction at the second point as the reaching point. When a route video designation object 2241 with an explanation of “viewing the route video continuously” is clicked, the start direction and end direction of each input video are referred to, and if necessary, rotated from the panoramic image 2255 Create a video. Thus, if the direction of the moving image at the starting point of the route 2121 at the first point is different from the direction at which the guidance starts, the direction of starting the guiding and the direction of the moving image at the starting point of the route 2121 at the first point are set to the first. It is possible to connect with a rotated video based on the panoramic image 2255 of the node 2111 at the point. If the direction of the moving image at the end point of the route 2121 at the second point is different from the desired direction, the direction of the moving image at the end point of the route 2121 at the second point and the desired direction are set as a node at the second point. It is possible to connect with a rotated video based on the 2111 panoramic image 2255. Thereby, it is possible to provide guidance information that is easier to visually recognize.
[0124]
FIG. 15 is a schematic diagram visually showing a procedure different from that in FIG. 14 for creating a rotated video from the panoramic image 2255. That is, the method illustrated as a schematic diagram in FIG. 15 refers to the horizontal component and the vertical component when generating a rotated video from the panoramic image 2255, and detects the vertical shift between two images connected by the rotated video. Are also connected. Specifically, based on verticalAngle (iv), horizontalAngle (ih) described in <image> tag and verticalAngle (pv) written in <panoramicImage> tag, a rotating image that is connected more smoothly is created. .
[0125]
If the value described in the panoramicImage tag is used as the value of XSize and YSize, the pixel range (X, Y) in the frame surrounding the parts b and c in FIG.
X = (XSize / 360) × ih
Y = (YSize / pv) × iv
The coordinates of the upper left (px1, py1) and lower right (px2, py2) of the b frame on the panoramic image 2255 are
(Px1, py1) = (b−X / 2, YSize / 2−Y)
(Px2, py2) = (b + X / 2, YSize / 2 + Y)
(However, an approximate expression when the subject is at ∞).
[0126]
Accordingly, it is possible to create a rotated video that starts from a frame portion surrounding b at the pixel position b of the panoramic image 2255 and moves into the frame portion surrounding c at the pixel position c. Therefore, the direction change of the route image at the node 2111 can be made smoother, and the quality of the guidance information can be further improved.
[0127]
FIGS. 16 and 17 are schematic diagrams visually showing a procedure different from FIGS. 14 and 15 for creating a rotated video from the panoramic image 2255. FIG. That is, the panoramic image 2255 is a 360-degree image, and the left and right end portions of the panoramic image 2255 illustrated in FIG. 16 are connected without a seam. However, since the actual image file is expressed as a two-dimensional image, the coordinates in the X direction have a start point and an end point. For this reason, depending on the designation of the angle, a part of the frame of the corresponding part may protrude from the end (see b of FIG. 16) or completely (see c of FIG. 16). At this time, when creating a rotating image, it is necessary to perform exception determination for such an exception and generate a necessary still image for each case. Therefore, as illustrated in FIG. 17, by connecting two panoramic images 2255 in advance to form a 720 degree image, if the rotation angle is within 360 degrees, a rotated image can be created without making an exception determination. Can do. Accordingly, the node 2111 and the route 2121 before and after the node 2111 can be correctly connected, and the direction change of the route image at the node 2111 can be made smooth.
[0128]
Here, the panorama image 2255 may be stored and saved in advance as a 720 degree panorama image in the hard disk (2) 131 of the server 101, or may be a 720 degree panorama image when the server 101 creates a route video list. It ’s okay.
[0129]
18 is a route video list creation process different from that in FIG. 10 when a route video designation object 2241 with an explanation of “view all route videos continuously” is clicked on the guidance screen 2001 shown in FIG. It is a flowchart which shows the flow. However, also in the flowchart illustrated in FIG. 18, the basic processing flow is the same as that in the flowchart illustrated in FIG. 10. A different point is that the panoramic image 2255 is required in the node 2111 connecting the two routes 2121, but the required panoramic image 2255 does not exist in the hard disk {circle around (2)} 131 of the server 101.
[0130]
That is, as described above, when N does not reach the number Z of all the routes 2121 from the first point that is the starting point to the second point that is the reaching point (N in step S203). The N + th route 2121 video is added to the route video list (step S202), N set in the count is updated to N + (step S208), and the process returns to step S203. At this time, if the angle at the end of the Nth route 2121 image is equal to the angle at the start of the (N + 1) th route 2121 image (Y in step S205), the N + 1th route 2121 image is simply displayed. It is only added to the route video list (step S207). Otherwise (N in step S205), a rotated video is created based on the panorama image 2255 of the node 2111, and this rotated video is added to the route video list. After the addition (step S206), the (N + 1) th route 2121 video is added to the route video list (step S207).
[0131]
Here, in the flowchart illustrated in FIG. 10, when it is determined in step S205 that the angle at the end of the Nth route 2121 video is not equal to the angle at the start of the (N + 1) th route 2121 video ( N) in step S205, a panoramic image corresponding to the hard disk {circle around (2)} 131 of the server 101 is created prior to the processing in step S206 which creates a rotated video based on the panoramic image 2255 of the node 2111 and adds this rotated video to the route video list. It is determined whether or not 2255 exists (step S301). As a result of the determination, if it is determined that the corresponding panoramic image 2255 exists, the process of step S206 is executed to create a rotated video based on the panoramic image 2255 of the node 2111 and add this rotated video to the route video list. . On the other hand, as a result of the determination in step S301, if it is determined that the corresponding panoramic image 2255 does not exist (N in step S301), an image that displays the angle necessary for changing the orientation as characters. Is added to the route video list (step S302), and then the process proceeds to step S207. Accordingly, when a path video list to which an image for displaying the angle necessary for changing the orientation as characters is added to the streaming video server 141, the client accessing the streaming video server 141 In 201, it is possible to perform streaming display at least how many times the images of the two routes 2121 preceding and following are rotating. Thus, even when there is no panoramic image 2255 to be used on the hard disk {circle around (2)} 131 of the server 101, the user can be informed of how much the video orientation before and after the node 2111 has changed.
[0132]
【The invention's effect】
  The present inventionIt is possible to provide guidance information that is easy to visually recognize at a glance about the route from the first point that is the starting point to the second point that is the reaching point, and the first point that is the starting point Without storing and saving the route video for all routes from the point to the second point that is the destination, just storing and saving the video image and the panoramic image of the node from the start point to the end point of the route, In other words, the direction change of the route image at the node can be smoothed with a smaller amount of data, and the quality of the guidance information can be improved.
[Brief description of the drawings]
FIG. 1 illustrates a first embodiment of the present invention, a premises guidance device for guiding a route from a first point as a starting point to a second point as a destination in a predetermined premises, 1 is a schematic diagram of a search guidance system including a guidance method, a computer program related to premises guidance processing, and a storage medium storing such a computer program.
FIG. 2 is a schematic block diagram of such a search guidance system.
FIG. 3 is a flow chart showing a flow of on-site guidance processing.
FIG. 4 is a schematic diagram showing an example of a guidance screen.
FIG. 5 is a schematic diagram illustrating an example of a panoramic image that is a peripheral image of a node included in an attribute screen in the guidance screen.
FIG. 6 is a schematic diagram illustrating an example of a panoramic image transformed into a donut shape that is a peripheral image of a node included in an attribute screen in the guidance screen.
FIG. 7 is a schematic diagram showing an example of a map screen as the second embodiment of the present invention.
FIG. 8 is a schematic diagram illustrating a route video list.
FIG. 9 is a schematic block diagram of a search guidance system.
FIG. 10 is a flowchart showing a flow of a route video list creation process.
FIG. 11 is a schematic diagram illustrating a part of a route video list in an XML description language.
12 is a schematic diagram showing a continuation of the route video list illustrated in FIG. 11. FIG.
13 is a schematic diagram showing a continuation of the route video list illustrated in FIG. 12. FIG.
FIG. 14 is a schematic diagram visually showing a procedure for creating a rotated video from a panoramic image.
FIG. 15 is a schematic diagram visually showing a procedure different from FIG. 14 for creating a rotated video from a panoramic image.
FIG. 16 is a schematic diagram for explaining a problem that occurs in a 360-degree panoramic image in order to visually show a procedure different from that in FIGS. 14 and 15 for creating a rotated video from a panoramic image.
17 is a schematic diagram illustrating a state in which the problem illustrated in FIG. 16 is solved by a 720-degree panoramic image.
FIG. 18 is a flowchart showing a flow of a route video list creation process different from FIG.
[Explanation of symbols]
101 On-site guidance device (server)
131 Database (storage device)
201 User terminal (client)
401 Information Search Device (Book Search System)
502 First point
509 Second point
2001 Information screen
2101 Map screen
2111 nodes
2121 route
2201 Attribute screen
2231 Route blinking specification object (check box)
2241 Route actual shooting video designation object, route video designation object
2252 Node identification number
2253 Node name
2254 Node Overview
2255 Image around node, panorama image
2256 Image around the node and panorama image transformed into a donut shape
2257 Node blinking specification object (check box)
2262 Route identification number
2263 Location name of route (route name)
2264 Route Overview
2265 Route start image
2266 Route end point image
2267 Symbols indicating the direction of travel and direction changes in the route
Time required for 2268 symbols
2269 Route blinking specification object (check box)
2270 Route actual shooting video designation object

Claims (8)

予め定められた構内における複数の地点をそれぞれ表す複数のノード間を結ぶルート毎に、前記ノード間の経路の動画映像を記憶装置に記憶する動画映像記憶手段と、
前記各ノードの周囲のパノラマ画像を記憶装置に記憶するパノラマ画像記憶手段と、
前記構内における出発点となる第1の地点を表す前記ノードと到達点となる第2の地点を表す前記ノードとの入力を、利用者端末を介して受け付ける受付手段と、
入力された前記ノード間の最短経路となる少なくとも1以上の前記ルートを選択する選択手段と、
選択された前記ルートが1の場合には、当該ルートの前記動画映像を経路映像として作成し、前記選択された前記ルートが複数の場合には、前記各ルートが直線状であれば前記各ルートの前記動画映像を結合して経路映像として作成し、前記各ルートが直線状でなければ前記各ルートの前記動画映像を前記各ルートに共通する前記各ノードの周囲のパノラマ画像と前記各ルートが形成する角度とに基づく回転画像で結合して経路映像として作成する経路映像作成手段と、
前記経路映像を前記利用者端末に対して送信して再生させる再生手段と、
を備える構内案内装置。
For each route connecting a plurality of nodes each representing a plurality of points in a predetermined premises, a moving image video storage means for storing a moving image video of a path between the nodes in a storage device;
Panoramic image storage means for storing a panoramic image around each of the nodes in a storage device;
The input of the node representing the second point to be the arrival point and the node representing the first point as a starting point in the premises, a receiving means for receiving through the user terminal,
Selection means for selecting at least one or more of the routes that are the shortest paths between the inputted nodes ;
When the selected route is 1, the moving image of the route is created as a route image. When the selected route is plural, if each route is a straight line, each route If the respective routes are not linear, the moving image video of each route is the panoramic image around each node common to each route and the respective routes. Route video creation means for creating a route video by combining with a rotation image based on the angle to be formed,
Playback means for transmitting the route video to the user terminal for playback;
A premises guidance device comprising:
前記再生手段は、前記利用者端末に対して、前記経路映像をストリーミング配信する
請求項記載の構内案内装置。
The reproduction means streams the route video to the user terminal ;
The on-site guidance device according to claim 1 .
前記経路映像作成手段は、前記パノラマ画像から前記回転映像を生成する際に水平方向成分と垂直方向成分とを参照し、前記回転映像で結合する二つの前記ルートの前記動画映像における垂直方向のずれをも結合する、
請求項1または2記載の構内案内装置。
The route image creation means refers to a horizontal direction component and a vertical direction component when generating the rotated image from the panoramic image, and a vertical shift in the moving image of the two routes combined by the rotated image. Also combine,
The on-site guidance device according to claim 1 or 2 .
前記パノラマ画像は、同一の前記パノラマ画像を接続した画像である
請求項1ないし3のいずれか一記載の構内案内装置。
The panoramic image is an image obtained by connecting the same panoramic image .
The local area guidance device according to any one of claims 1 to 3 .
前記経路映像作成手段は、前記回転映像とその前後の前記ルートの前記動画映像との切り換えに際して、クロスフェード効果を用いる、
請求項1ないし4のいずれか一記載の構内案内装置。
It said path image creation means, when switching between the moving image of the root of the rotating image and its front and rear, are use cross-fade effects,
5. A campus guidance apparatus according to any one of claims 1 to 4 .
前記経路映像作成手段は、前記回転映像とその前後の前記ルートの前記動画映像との切り換えに際して、ディゾルブ効果を用いる、
請求項1ないし4のいずれか一記載の構内案内装置。
It said path image creation means, when switching between the moving image of the root of the rotating image and its front and rear, are use a dissolve effect,
5. A campus guidance apparatus according to any one of claims 1 to 4 .
コンピュータを、Computer
予め定められた構内における複数の地点をそれぞれ表す複数のノード間を結ぶルート毎に、前記ノード間の経路の動画映像を記憶装置に記憶する動画映像記憶手段と、For each route connecting a plurality of nodes each representing a plurality of points in a predetermined premises, a moving image video storage means for storing a moving image video of a path between the nodes in a storage device;
前記各ノードの周囲のパノラマ画像を記憶装置に記憶するパノラマ画像記憶手段と、Panoramic image storage means for storing a panoramic image around each of the nodes in a storage device;
前記構内における出発点となる第1の地点を表す前記ノードと到達点となる第2の地点を表す前記ノードとの入力を、利用者端末を介して受け付ける受付手段と、Accepting means for accepting input of the node representing the first point serving as the starting point and the node representing the second point serving as the reaching point via the user terminal on the premises;
入力された前記ノード間の最短経路となる少なくとも1以上の前記ルートを選択する選択手段と、Selection means for selecting at least one or more of the routes that are the shortest paths between the inputted nodes;
選択された前記ルートが1の場合には、当該ルートの前記動画映像を経路映像として作成し、前記選択された前記ルートが複数の場合には、前記各ルートが直線状であれば前記各ルートの前記動画映像を結合して経路映像として作成し、前記各ルートが直線状でなければ前記各ルートの前記動画映像を前記各ルートに共通する前記各ノードの周囲のパノラマ画像と前記各ルートが形成する角度とに基づく回転画像で結合して経路映像として作成する経路映像作成手段と、When the selected route is 1, the moving image of the route is created as a route image. When the selected route is plural, if each route is a straight line, each route If the respective routes are not linear, the moving image video of each route is the panoramic image around each node common to each route and the respective routes. Route video creation means for creating a route video by combining with a rotation image based on the angle to be formed,
前記経路映像を前記利用者端末に対して送信して再生させる再生手段と、Playback means for transmitting the route video to the user terminal for playback;
として機能させるためのプログラム。Program to function as.
構内案内装置で実行される構内案内方法であって、前記構内案内A site guidance method executed by a site guidance device, wherein the site guidance 装置は、制御部と記憶部を備え、前記制御部において実行される、The apparatus includes a control unit and a storage unit, and is executed in the control unit.
動画映像記憶手段が、予め定められた構内における複数の地点をそれぞれ表す複数のノード間を結ぶルート毎に、前記ノード間の経路の動画映像を記憶装置に記憶するステップと、A step of storing a moving image video of a path between the nodes in a storage device for each route connecting a plurality of nodes each representing a plurality of points in a predetermined premises,
パノラマ画像記憶手段が、前記各ノードの周囲のパノラマ画像を記憶装置に記憶するステップと、Panoramic image storage means for storing a panoramic image around each of the nodes in a storage device;
受付手段が、前記構内における出発点となる第1の地点を表す前記ノードと到達点となる第2の地点を表す前記ノードとの入力を、利用者端末を介して受け付けるステップと、A step of accepting, via a user terminal, an input of a node representing a first point serving as a starting point and a node representing a second point serving as a reaching point on the premises;
選択手段が、入力された前記ノード間の最短経路となる少なくとも1以上の前記ルートを選択するステップと、Selecting at least one or more of the routes that are the shortest path between the inputted nodes;
経路映像作成手段が、選択された前記ルートが1の場合には、当該ルートの前記動画映像を経路映像として作成し、前記選択された前記ルートが複数の場合には、前記各ルートが直線状であれば前記各ルートの前記動画映像を結合して経路映像として作成し、前記各ルートが直線状でなければ前記各ルートの前記動画映像を前記各ルートに共通する前記各ノードの周囲のパノラマ画像と前記各ルートが形成する角度とに基づく回転画像で結合して経路映像として作成するステップと、When the route image creation means has the selected route being 1, the moving image image of the route is created as a route image, and when there are a plurality of the selected routes, each route has a straight line shape. If so, the moving image video of each route is combined to create a route image, and if each route is not linear, the moving image video of each route is a panorama around each node that is common to each route Creating a route image by combining images and rotated images based on the angles formed by the routes; and
再生手段が、前記経路映像を前記利用者端末に対して送信して再生させるステップと、A reproduction means for transmitting and reproducing the route video to the user terminal;
を含む構内案内方法。On-site guidance method including
JP2003018636A 2002-07-01 2003-01-28 On-site guidance device, program, and on-site guidance method Expired - Fee Related JP4220793B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003018636A JP4220793B2 (en) 2002-07-01 2003-01-28 On-site guidance device, program, and on-site guidance method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2002192019 2002-07-01
JP2003018636A JP4220793B2 (en) 2002-07-01 2003-01-28 On-site guidance device, program, and on-site guidance method

Publications (2)

Publication Number Publication Date
JP2004086848A JP2004086848A (en) 2004-03-18
JP4220793B2 true JP4220793B2 (en) 2009-02-04

Family

ID=32071873

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003018636A Expired - Fee Related JP4220793B2 (en) 2002-07-01 2003-01-28 On-site guidance device, program, and on-site guidance method

Country Status (1)

Country Link
JP (1) JP4220793B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7621448B2 (en) 2004-09-30 2009-11-24 Ricoh Company, Ltd. Information display medium, information managing apparatus, information managing method, guidance managing method, and guidance managing program
KR100823264B1 (en) 2006-04-13 2008-04-17 삼성전자주식회사 Method and apparatus for requesting the print of panorama image at mobile device
WO2014085948A1 (en) * 2012-12-06 2014-06-12 Qualcomm Incorporated Annular view for panorama image
JP7346635B1 (en) * 2022-03-10 2023-09-19 功憲 末次 Target location search system and program

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04503440A (en) * 1988-12-14 1992-06-18 ウエイナー、デブラ、シー Interacting panoramic device
JP2859757B2 (en) * 1991-07-15 1999-02-24 アルパイン株式会社 In-vehicle navigator
JPH05173479A (en) * 1991-12-19 1993-07-13 Tokyo Electron Ltd Navigation device
JPH07306054A (en) * 1994-05-11 1995-11-21 Brother Ind Ltd Navigation system
JPH10304433A (en) * 1997-04-30 1998-11-13 Matsushita Electric Works Ltd Information guidance system
JPH1137786A (en) * 1997-07-17 1999-02-12 Yoshiaki Masuno Navigator
JPH11283045A (en) * 1998-03-30 1999-10-15 Kubota Corp Institution guiding system
JP2000055693A (en) * 1998-08-10 2000-02-25 Hitachi Ltd Portable navigation system
JP2001311626A (en) * 2000-02-24 2001-11-09 Fujitsu Ltd Guide data processing method, record medium of program for processing guide data, and program for processing guide data
JP3684996B2 (en) * 2000-04-17 2005-08-17 株式会社デンソー Portable map display device
JP2002026804A (en) * 2000-07-12 2002-01-25 Mitsubishi Electric Corp System and method for providing specific facility information, and portable information terminal

Also Published As

Publication number Publication date
JP2004086848A (en) 2004-03-18

Similar Documents

Publication Publication Date Title
US8427481B1 (en) Virtual tour on electronic maps
JP4735733B2 (en) Video system and video system program
US8488040B2 (en) Mobile and server-side computational photography
JP5524965B2 (en) Inspection in geographic information system
US6388688B1 (en) Graph-based visual navigation through spatial environments
US8831380B2 (en) Viewing media in the context of street-level images
DeCamp et al. An immersive system for browsing and visualizing surveillance video
US20180047213A1 (en) Method and apparatus for providing augmented reality-based dynamic service
US20050283730A1 (en) System and process for viewing and navigating through an interactive video tour
US20120162253A1 (en) Systems and methods of integrating virtual flyovers and virtual tours
US20120179983A1 (en) Three-dimensional virtual environment website
JP2007192988A (en) Object enhancement display system in video reproduction system and object locus overlay display system, and player device and server device used for the display systems
JP4056167B2 (en) Library information search space construction / retrieval apparatus and computer-readable recording medium recording a book information retrieval space construction / retrieval program
JP4220793B2 (en) On-site guidance device, program, and on-site guidance method
Sugimoto et al. Building Movie Map-A Tool for Exploring Areas in a City-and its Evaluations
JP5798673B2 (en) Electronic shopping system
US20170329748A1 (en) Method and system for editing hyperlink in a three-dimensional scene
JP2005174024A (en) Image forming apparatus and method
KR101559586B1 (en) Apparatus and method for guiding information using augmented reality
KR20050085145A (en) Method and apparatus for virtual walkthrough
JP2004070522A (en) Device and method for image reproduction
JPH10187759A (en) Moving picture anchor displaying, selecting, and stetting device, moving picture hypermedia device using moving picture anchor, and moving picture provision system
JP2006222901A (en) Method and program for supporting moving picture reproduction, server device and computer system
JP2007174477A (en) Object-related automatic display system in video reproduction system, player device and server device used for display system
JP3486579B2 (en) Space drawing method, virtual space drawing apparatus, and storage medium

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20041008

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20051020

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20051021

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20060811

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080805

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080930

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20081111

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20081114

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111121

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111121

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121121

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131121

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees