JP6450779B2

JP6450779B2 - ストリートビュー目的地への案内を提供する方法およびデバイス

Info

Publication number: JP6450779B2
Application number: JP2016570310A
Authority: JP
Inventors: テンマー，
Original assignee: テンセント・テクノロジー・（シェンジェン）・カンパニー・リミテッド
Priority date: 2014-06-05
Filing date: 2015-06-04
Publication date: 2019-01-09
Anticipated expiration: 2035-06-04
Also published as: KR20160147052A; US10677609B2; JP2017524905A; CN104596523B; KR101864814B1; US20160265935A1; EP3123113A4; WO2015184996A1; CN104596523A; US9891073B2; US20180120125A1; EP3123113A1

Description

本開示は、インターネット技術の分野に関し、特に、ストリートビュー目的地への案内を提供する方法およびデバイスに関する。

既存の技術では、ストリートビュー目的地への案内は、主に、ユーザ検索を用いて提供され、すなわち、目的地の検索およびそこへの案内は、ユーザによって打ち込まれたキーワードに従って提供されるか、または話題をプッシュ通知することによって提供される、すなわち、デザイナーズホテルおよび人気の観光スポット等の種々のストリートビューの話題が、ユーザにアクティブにプッシュ通知され、案内は、ユーザの選択に従って提供される。

本開示の実装では、本発明者は、既存の技術が少なくとも以下の問題を有することを見出している。

ユーザ検索の案内様式では、案内は、ユーザ入力に基づいて提供される必要があり、それは、使用のために不便である。話題プッシュ通知の案内様式では、プッシュ通知される話題は、ユーザが関心を持っていない話題、またはユーザによって必要とされない話題であり得、それは、望ましくない実際の効果を有することもあり、良好に標的化されない。

本発明の実施形態は、標的様式でストリートビュー目的地への案内を効率的かつ便利に実装することができる、ストリートビュー目的地への案内を提供する方法およびデバイスを開示する。

本発明の実施形態の第１の側面は、ストリートビュー目的地への案内を提供する方法であって、
デバイスが位置するシナリオの現実のシナリオ画像を取得することと、
デバイスの現在の場所およびデバイスが向いている方向に従って、表示される必要がある注釈情報を決定し、現実のシナリオ画像内に、表示される必要がある注釈情報を表示することと、
選択される注釈情報を決定し、選択された注釈情報に対応するストリートビューの詳細情報を表示することと
を含む、方法を開示する。

本発明の実施形態の第２の側面は、ストリートビュー目的地への案内を提供するためのデバイスであって、
デバイスが位置するシナリオの現実のシナリオ画像を取得するように構成されている取得モジュールと、
デバイスの現在の場所およびデバイスが向いている方向に従って、表示される必要がある注釈情報を決定するように構成されている第１の決定モジュールと、
選択される注釈情報を決定するように構成されている第２の決定モジュールと、
現実のシナリオ画像内に、表示される必要がある注釈情報を表示し、選択された注釈情報に対応するストリートビューの詳細情報を表示するように構成されている表示モジュールと
を含む、デバイスを開示する。
本発明はさらに、例えば、以下を提供する。
（項目１）
ストリートビュー目的地への案内を提供する方法であって、
デバイスが位置するシナリオの現実のシナリオ画像を取得することと、
前記デバイスの現在の場所およびデバイスが向いている方向を決定することと、
前記デバイスの前記現在の場所および前記デバイスが向いている方向に従って、表示される必要がある注釈情報を決定することと、
前記現実のシナリオ画像内に前記表示される必要がある注釈情報を表示することと、
選択される注釈情報を決定することと、
前記選択された注釈情報に対応するストリートビューの詳細情報を表示することと
を含む、方法。
（項目２）
前記デバイスが位置するシナリオの現実のシナリオ画像を取得することは、前記デバイスのカメラを使用して、前記デバイスが位置するシナリオの前記現実のシナリオ画像を取得することを含む、項目１に記載の方法。
（項目３）
前記デバイスの前記現在の場所は、全地球測位システム（ＧＰＳ）測位装置を使用することによって決定され、前記デバイスの前記デバイスが向いている方向は、センサを使用することによって決定され、前記センサは、加速度計、ジャイロスコープ、および電子コンパスのうちの１つ以上のものを備えている、項目１に記載の方法。
（項目４）
前記デバイスの前記現在の場所および前記デバイスが向いている方向に従って、表示される必要がある注釈情報を決定することは、
前記デバイスの前記現在の場所と前記デバイスが向いている方向とに対応する注釈情報を取得することと、
注釈情報をフィルタ処理するためのポリシーに従って、前記取得された注釈情報にフィルタ処理を行うことと、
前記フィルタ処理した後に得られた注釈情報が前記表示される必要がある注釈情報であることを決定することと
を含む、項目１に記載の方法。
（項目５）
前記注釈情報をフィルタ処理するためのポリシーに従って、前記取得された注釈情報にフィルタ処理を行うことは、
前記注釈情報に対応する現実のシナリオのタイプに従って、前記取得された注釈情報にフィルタ処理を行うこと、および／または、
前記注釈情報に対応する現実のシナリオから前記デバイスの前記現在の場所までの距離に従って、前記取得された注釈情報にフィルタ処理を行うこと
を含む、項目４に記載の方法。
（項目６）
前記現実のシナリオ画像内に前記表示される必要がある注釈情報を表示することは、前記表示される必要がある注釈情報と前記現実のシナリオ画像とを前記デバイスのディスプレイ画面上にオーバーレイ様式で表示することを含む、項目１に記載の方法。
（項目７）
標的エリアが前記デバイスの前記ディスプレイ画面上に設定されている場合、前記方法は、前記標的エリア内の注釈情報と前記注釈情報に対応する現実のシナリオとを強調様式で表示することをさらに含む、項目６に記載の方法。
（項目８）
前記選択される注釈情報を決定することは、ユーザが注釈情報をクリックしたことが検出されると、前記ユーザがクリックした前記注釈情報を前記選択される注釈情報として決定することを含む、項目１に記載の方法。
（項目９）
前記選択される注釈情報を決定することは、標的エリア内の注釈情報が前記標的エリア内に留まる時間が閾値を超えたことが検出されると、前記注釈情報が前記選択される注釈情報であることを決定することを含む、項目１に記載の方法。
（項目１０）
前記選択される注釈情報を決定することは、ユーザが前記デバイスを揺り動かしたことが検出されると、標的エリア内の注釈情報が前記選択される注釈情報であることを決定することを含む、項目１に記載の方法。
（項目１１）
前記選択される注釈情報を決定することは、視線追跡技術を使用することによって、ユーザが注釈情報に留まる時間が閾値を超えたことが検出されると、前記注釈情報が前記選択される注釈情報であることを決定することを含む、項目１に記載の方法。
（項目１２）
前記選択される注釈情報を決定することは、音声を使用することによってユーザによって入力された注釈情報入力が検出されると、前記注釈情報が前記選択される注釈情報であることを決定することを含む、項目１に記載の方法。
（項目１３）
前記方法は、２つ以上の注釈情報が標的エリア内に現れる場合、事前設定ルールに従って、１つの注釈情報を選択し、前記１つの注釈情報が前記標的エリア内の注釈情報であることを決定することをさらに含む、項目１に記載の方法。
（項目１４）
前記事前設定ルールに従って、１つの注釈情報を選択し、前記１つの注釈情報が前記標的エリア内の注釈情報であることを決定することは、前記標的エリアの中心点に最も近い注釈情報が前記標的エリア内の前記注釈情報であることを決定することを含む、項目１３に記載の方法。
（項目１５）
前記事前設定ルールに従って、１つの注釈情報を選択し、前記１つの注釈情報が前記標的エリア内の注釈情報であることを決定することは、前記標的エリア内に現れる注釈情報の重みに従って、最も高い重みを伴う注釈情報を選択し、前記注釈情報が前記標的エリア内の前記注釈情報であることを決定することを含む、項目１３に記載の方法。
（項目１６）
前記事前設定ルールに従って、１つの注釈情報を選択し、前記１つの注釈情報が前記標的エリア内の注釈情報であることを決定することは、１つの注釈情報をランダムに選択し、前記１つの注釈情報が前記標的エリア内の前記注釈情報であることを決定することを含む、項目１３に記載の方法。
（項目１７）
前記選択された注釈情報に対応するストリートビューの詳細情報を表示することは、前記選択された注釈情報に対応する前記ストリートビューの詳細ページを表示することを含み、前記詳細ページは、ストリートビューサムネイル、住所詳細、連絡先番号、および距離を備えている、項目１に記載の方法。
（項目１８）
前記選択された注釈情報に対応するストリートビューの詳細情報を表示した後、ユーザが前記詳細ページ上の前記ストリートビューサムネイルをクリックしたことが検出されると、対応するストリートビューパノラマを表示することをさらに含む、項目１７に記載の方法。
（項目１９）
前記選択された注釈情報に対応するストリートビューの詳細情報を表示した後、前記ストリートビュー目的地までの経路を計画することに対する要求が受信されると、前記現在の場所から前記ストリートビュー目的地までの最適ルートを決定することをさらに含み、前記最適ルートは、最適歩行ルート、公共輸送手段のための最適ルート、および非公共輸送手段のための最適ルートのうちの１つ以上のものを備えている、項目１７に記載の方法。
（項目２０）
前記注釈情報は、関心地点（ＰＯＩ）情報、ストリートビューサムネイル、近くの活動情報、緊急情報、輸送機関情報、および距離のうちの１つ以上のものを備えている、項目１に記載の方法。

本発明の実施形態の技術的解決策をより明確に説明するために、以下は、実施形態または既存の技術を説明するために要求される付随の図面を簡単に紹介する。明らかに、以下の説明における付随の図面は、本発明のいくつかの実施形態のみを示し、当業者は、依然として、創造的努力を伴わずに、これらの付随の図面から他の図面を導出し得る。

図１は、本発明のある実施形態による、ストリートビュー目的地への案内を提供する方法の概略フロー図である。

図２は、本発明のある実施形態による、ストリートビュー目的地への案内を提供するための別の方法の概略フロー図である。

図３Ａは、本発明のある実施形態による、携帯電話のカメラを使用することによって現実のシナリオ画像を取得する概略図である。

図３Ｂは、本発明のある実施形態による、注釈情報をフィルタ処理するためのポリシーを設定する概略図である。

図３Ｃは、本発明のある実施形態による、拡張現実技術を使用することによって、表示される必要がある注釈情報と現実のシナリオ画像とを携帯電話のディスプレイ画面上にオーバーレイ様式で表示する概略図である。

図３Ｄは、選択された注釈情報に対応するストリートビューの詳細ページを表示する概略図である。

図４は、本発明のある実施形態による、ストリートビュー目的地への案内を提供するための別の方法の概略フロー図である。

図５は、本発明のある実施形態による、ストリートビュー目的地への案内を提供するためのデバイスの概略構造図である。

図６は、本発明のある実施形態による、ストリートビュー目的地への案内を提供するための別のデバイスの概略構造図である。

図７は、本発明のある実施形態による、ストリートビュー目的地への案内を提供するための別のデバイスの概略構造図である。

図８は、本発明のある実施形態による、ストリートビュー目的地への案内を提供するための別のデバイスの概略構造図である。

図９は、本発明のある実施形態による、ストリートビュー目的地への案内を提供するための別のデバイスの概略構造図である。

当業者が、本発明の実施形態において提供される技術的解決策をより理解することを可能にするために、以下は、本発明の実施形態において提供される技術的解決策に伴われるいくつかの技術的用語を簡単に説明する。

拡張現実（ＡＲ）：コンピュータによって生成される仮想オブジェクト、シナリオ、またはシステムプロンプト情報が、現実のシナリオ上にオーバーレイされることにより、現実を拡張し、現実の世界におけるユーザの知覚を向上させる。ユーザと現実の世界との間の接続は、切断され、仮想オブジェクトが、ユーザの眼の前に表示される。したがって、情報が、より便利に取得されることができ、オブジェクトとの相互作用は、より自然となる。

空間的測位およびジェスチャ決定技術：拡張現実内にオーバーレイされた仮想情報が、空間的測位においてユーザの移動またはジェスチャに関連付けられることが確実にされる。ユーザが、方向転換または移動すると、視野が変化する。故に、コンピュータによって生成される拡張情報は、変化し、情報は、ディスプレイ画面の正しい場所にリアルタイムで表示される。

以下は、本発明の実施形態における付随の図面を参照して、本発明の実施形態における技術的解決策を明確かつ完全に説明する。明らかに、説明される実施形態は、本発明の実施形態の全てではなく、単に、その一部である。創造的努力を伴わずに、本発明の実施形態に基づいて当業者によって得られた他の実施形態は全て、本開示の保護範囲内にあるものとする。

本発明のある実施形態による、ストリートビュー目的地への案内を提供する方法の概略フロー図である図１を参照する。本方法は、以下のステップを含み得る。

Ｓ１０１：デバイスが位置するシナリオの現実のシナリオ画像を取得するステップ。

本発明のこの実施形態では、デバイスが位置するシナリオの現実の画像は、デバイスのカメラを使用することによって取得され得、現実の画像は、デバイスのディスプレイ画面上に表示される。

Ｓ１０２：デバイスの現在の場所およびデバイスが向いている方向に従って、表示される必要がある注釈情報を決定するステップ。

本発明のこの実施形態では、デバイスの現在の場所は、全地球測位システム（ＧＰＳ）測位装置を使用することによって決定され得、デバイスのデバイスが向いている方向は、センサを使用することによって決定され得、センサは、限定ではないが、加速度計、ジャイロスコープ、電子コンパス等を含み得る。

具体的には、デバイスの現在の場所およびデバイスが向いている方向が決定された後、デバイスの現在の場所およびデバイスが向いている方向に対応する注釈情報がさらに取得され得、取得された注釈情報のフィルタ処理が、注釈情報をフィルタ処理するための事前設定ポリシーに従って行われ、フィルタ処理した後に得られた注釈情報が表示される必要がある注釈情報であることが決定される。

デバイスの現在の場所およびデバイスが向いている方向に対応する注釈情報が取得される場合、その注釈情報データベースが、対応する注釈情報を取得するように、デバイスの現在の場所およびデバイスが向いている方向に従って検索され得る。注釈情報データベース内の注釈情報は、事前に手動で収集され得る。例えば、デバイスの現在の場所が、経度ｘｘおよび緯度ｘｘであり、デバイスの現在の対面方向が、真北である場合、デバイスの現在の場所およびデバイスが向いている方向に対応する注釈情報は、経度ｘｘおよび緯度ｘｘの場所の真北のショッピングモール、ホテル、映画館等であり得る。

デバイスの現在の場所およびデバイスが向いている方向に対応する注釈情報が取得された後、取得された注釈情報のフィルタ処理が、注釈情報をフィルタ処理するための事前設定ポリシーに従って行われ得る。注釈情報をフィルタ処理するためのポリシーは、事前にユーザによって設定され得る。例えば、フィルタ処理は、注釈情報に対応する現実のシナリオのタイプ（例えば、生活サービス、観光スポット、およびショッピング）に従って行われ得る。例えば、生活サービスタイプ（ホテル、美味しい食事、運動、映画館、スーパーマーケット／コンビニ等であり得る）のみ表示されるか、またはホテル、美味しい食事、運動等のみのうちの１以上のものが表示されるように設定される。フィルタ処理はまた、注釈情報に対応する現実のシナリオからデバイスの現在の場所までの距離、例えば、５ｋｍ、１ｋｍ、５００ｍ等以内に従って行われ得る。もちろん、フィルタ処理はまた、他のフィルタ処理ポリシーに従って行われ得、例えば、フィルタ処理は、タイプおよび距離の両方に従って行われる。

Ｓ１０３：現実のシナリオ画像内に、表示される必要がある注釈情報を表示するステップ。

本発明のこの実施形態では、デバイスが位置するシナリオの現実のシナリオ画像が取得され、表示される必要がある注釈情報が決定された後、表示される必要がある注釈情報が、現実のシナリオ画像内に表示され得る。

具体的には、デバイスが位置するシナリオの現実のシナリオ画像が取得され、表示される必要がある注釈情報が決定された後、表示される必要がある注釈情報および現実のシナリオ画像は、デバイスのディスプレイ画面上にオーバーレイ様式で表示され得、それは、具体的には、拡張現実技術を使用することによって実装され得る。

好ましくは、本発明のこの実施形態では、標的エリアが、デバイスのディスプレイ画面上に設定され得る。表示される必要がある注釈情報および現実のシナリオ画像がデバイスのディスプレイ画面上にオーバーレイ様式で表示される場合、標的エリア内の注釈情報と注釈情報に対応する現実のシナリオとは、強調様式で表示され得る（例えば、ハイライトされるか、または比率の拡大を行うことによって表示される）。

ユーザがデバイスを移動させると、ディスプレイ画面上に表示されるデバイスの現実のシナリオ画像は、変化する。故に、注釈情報が表示される画面上の表示場所も、デバイスが移動するにつれて変化し、それは、具体的には、空間的測位およびジェスチャ決定技術を使用することによって実装され得る。

本発明のこの実施形態では、１つのみの注釈情報が標的エリア内に現れると、その注釈情報が標的エリア内の注釈情報であることが決定され、注釈情報と注釈情報に対応する現実のシナリオとは、強調様式で表示されることに留意されたい。複数の注釈情報が標的エリア内に現れると、１つの注釈情報が、事前設定ルールに従って選択され、その注釈情報が標的エリア内の注釈情報であることが決定され、その注釈情報とその注釈情報に対応する現実のシナリオとは、強調様式で表示される。例えば、標的エリア内に現れる注釈情報から標的エリアの中心までの距離が、別個にカウントされ、標的エリアの中心点に最も近い注釈情報が標的エリア内の注釈情報であることが決定され得る。最も高い重みを伴う注釈情報がまた、標的エリア内に現れる注釈情報の重み（各注釈情報の重みは、事前設定され得る）に従って選択され、その注釈情報が標的エリア内の注釈情報であることが決定され得る。標的エリア内に現れる注釈情報のうちの１つの注釈情報がまた、ランダムに選択され、その注釈情報が標的エリア内の注釈情報であることが決定され得る。もちろん、標的エリア内に現れる注釈情報のうちの１つの注釈情報がまた、標的エリア内の注釈情報であることは、他の様式で決定され（例えば、各注釈情報の優先順位が、事前設定され得、複数の注釈情報が標的エリア内に現れると、最高優先順位を伴う１つの注釈情報が標的エリア内の注釈情報であることが決定される）、その具体的様式は、本明細書では、再び列挙されない。

Ｓ１０４：選択される注釈情報を決定し、選択された注釈情報に対応するストリートビューの詳細情報を表示するステップ。

本発明のこの実施形態では、表示される必要がある注釈情報が現実のシナリオ画像内に表示された後、選択される注釈情報に対して、選択された注釈情報に対応するストリートビューの詳細情報が、表示され得る。

具体的には、標的エリアがデバイスのディスプレイ画面上に設定されている場合、選択される注釈情報は、少なくとも以下の様式で決定され得る。

様式１：ユーザが注釈情報をクリックしたことが検出されると、ユーザがクリックした注釈情報が選択される注釈情報であることが決定される。

このように、ユーザは、画面上に表示される注釈情報をクリックすることによって、注釈情報選択命令をデバイスに送信し得、ユーザが注釈情報をクリックしたことが検出されると、ユーザがクリックした注釈情報が選択される注釈情報であることが決定される。

様式２：標的エリア内の注釈情報が標的エリア内に留まる時間が閾値を超えたことが検出されると、その注釈情報が選択される注釈情報であることが決定される。

このように、ユーザは、デバイスを移動させることによって標的エリアに、ユーザが選択を意図する注釈情報を移動させ得、注釈情報が標的エリア内に留まる時間が閾値（事前設定され得、例えば、２秒である）を超えることが確実にされる。デバイスが標的エリア内の注釈情報が標的エリア内に留まる時間が閾値を超えることを検出すると、デバイスは、標的エリア内の注釈情報が選択される注釈情報であることを決定する。

様式３：ユーザがデバイスを揺り動かしたことが検出されると、標的エリア内の注釈情報が選択される注釈情報であることが決定される。

このように、ユーザは、デバイスを移動させることによって、標的エリア内の注釈情報を変化させ得、ユーザが標的エリア内の現在の注釈情報がユーザが選択を意図する注釈情報であることを決定すると、ユーザは、デバイスに、デバイスを揺り動かすことによって、標的エリア内の注釈情報を選択するための命令を送信し得る。デバイスがユーザがデバイスを揺り動かしたことを検出すると、デバイスは、標的エリア内の注釈情報が選択される注釈情報であることを決定する。

このように、デバイスによって、ユーザがデバイスを揺り動かしたことを検出することは、具体的には、事前設定ルールに従ってユーザが携帯電話を揺り動かしたことを検出することであり、例えば、揺り動かしが上向きおよび下向き（左および右または前方および後方）であり、かつ時間が閾値を超える（または揺動時間が閾値を超える）ことを検出することであり得る。

様式４：視線追跡技術を使用することによって、ユーザが注釈情報に留まる時間が閾値（事前設定され得、例えば、２秒である）を超えたことが検出されると、その注釈情報が選択される注釈情報であることが決定される。

このように、ユーザは、事前設定時間を超える時間の間、ユーザが選択を意図する注釈情報を見つめることによって、注釈情報を選択し得、デバイスが、視線追跡技術を使用することによって、ユーザ（ユーザの眼球）が注釈情報に留まる時間が閾値を超えることを検出すると、デバイスは、その注釈情報が選択される注釈情報であることを決定する。

様式５：音声認識の手段を用いて、音声を使用することによってユーザによって入力された注釈情報が検出されると、その注釈情報が選択される注釈情報であることが決定される。

このように、ユーザは、音声入力を用いて、ユーザが選択を意図する注釈情報を選択し得る。ユーザが注釈情報の選択を意図すると、ユーザは、音声を使用することによって、直接、注釈情報を入力し得る（すなわち、注釈情報を読み上げ）。デバイスが、音声認識を用いて、音声を使用することによってユーザによって入力された注釈情報を検出すると、デバイスは、その注釈情報が選択される注釈情報であることを決定する。

標的エリアがデバイスのディスプレイ画面上に設定されていない場合、ユーザはまた、ユーザが選択を意図する注釈情報をクリックすることによって、注釈情報選択命令をデバイスに送信し得、デバイスがユーザが注釈情報をクリックしたことを検出すると、デバイスは、ユーザがクリックした注釈情報が選択される注釈情報であることを決定する。代替として、ユーザは、注釈情報を見つめることによって、注釈情報を選択し得、デバイスが、視線追跡技術を使用することによって、ユーザが注釈情報に留まる時間が閾値を超えることを検出すると、デバイスは、注釈情報を選択される注釈情報として決定する。代替として、ユーザはまた、音声入力を用いて、注釈情報を選択し得、デバイスが、音声を使用することによってユーザによって入力された注釈情報を検出すると、デバイスは、その注釈情報が選択される注釈情報であることを決定する。

本発明のこの実施形態では、選択される注釈情報が決定された後、選択された注釈情報に対応するストリートビューの詳細情報が、表示され得る。例えば、選択された注釈情報に対応するストリートビューの詳細ページが、表示される。詳細ページは、限定ではないが、ストリートビューサムネイル、住所詳細、連絡先番号、および距離（ストリートビュー目的地から現在の場所までの距離）等の情報を含み得る。

ユーザは、詳細ページ上のストリートビューサムネイルをクリックすることによって、ストリートビューパノラマを閲覧し得る。故に、デバイスは、ユーザが対応するストリートビューをより良好に閲覧するように、デバイスがユーザが詳細ページ上のストリートビューサムネイルをクリックしたことを検出すると、対応するストリートビューパノラマを表示し得る。

さらに、本発明のこの実施形態における技術的解決策では、ストリートビュー目的地までの経路を計画（ナビゲート）する機能がさらに、提供され得る。例えば、「経路計画」（「ナビゲーション」または「目的地として設定」）選択肢が、ストリートビュー詳細ページ上に設定され、ユーザは、選択肢をクリックすることによって、現在の場所からストリートビュー目的地までの経路の計画をクエリし得る。

故に、デバイスは、デバイスがストリートビュー目的地までの経路を計画することに対する要求を受信すると、現在の場所からストリートビュー目的地までの最適ルートを決定し得、最適ルートは、最適歩行ルート、公共輸送手段のための最適ルート、および非公共輸送手段のための最適ルートのうちの１つ以上のものを含み得る。

本発明のこの実施形態において提供される技術的解決策では、注釈情報は、限定ではないが、関心地点（ＰＯＩ）情報（例えば、ストリートビュー名、ストリートビュータイプ、ストリートビュー経度、およびストリートビュー緯度等の情報）、ストリートビューサムネイル、近くの活動情報（例えば、宣伝活動、有名人のコンサート、および人気の映画の上映）、緊急情報（例えば、交通事故）、輸送機関情報（例えば、道路が順調であるかどうか、および交通整理が行われているかどうか）、および距離等の１つ以上の情報を含み得ることに留意されたい。ユーザは、注釈情報およびユーザの必要性に従って、ストリートビュー目的地をより良好に選択することができる。

本発明のこの実施形態では、ストリートビュー目的地への案内を提供するためのデバイスは、カメラを有するスマートフォン、タブレットコンピュータ、携帯情報端末（ＰＤＡ）、またはモバイルインターネットデバイス（ＭＩＤ）等の端末デバイスであり得る。

図２を参照すると、図２は、本発明のある実施形態による、ストリートビュー目的地への案内を提供する方法の概略フロー図である。図２に示されるストリートビュー目的地への案内を提供する方法では、本発明のこの実施形態において提供される技術的解決策は、ストリートビュー目的地への案内を提供するためのデバイスがカメラを伴うスマートフォン（略して携帯電話）である実施例を使用することによって説明される。図２に示されるストリートビュー目的地への案内を提供する方法は、以下のステップを含み得る。

Ｓ２０１：カメラを使用することによって、デバイスが位置するシナリオの現実のシナリオ画像を取得するステップ。

図３Ａを参照すると、この実施形態では、ユーザは、携帯電話のカメラを使用することによって、現実のシナリオの画像情報を取得し、画像情報を携帯電話のディスプレイ画面上に表示し得る。

Ｓ２０２：デバイスの現在の場所およびデバイスが向いている方向に従って、表示される必要がある注釈情報を決定するステップ。

この実施形態では、ＧＰＳ測位装置および加速度計、ジャイロスコープ、または電子コンパス等のセンサが、携帯電話の現在の場所および向いている方向を取得し、さらに、携帯電話の現在の場所および向いている方向に従って表示される必要がある注釈情報を決定するために、事前に携帯電話内に配置され得る。

ユーザは、設定インターフェースにおいて、表示される必要がある注釈情報を設定し得る。例えば、生活サービスタイプの注釈情報のみ表示されることが設定され得、現在の場所から５００ｍ以内のストリートビューの注釈情報のみ表示されることが設定され得る。概略図に対して、図３Ｂを参照されたい。

Ｓ２０３：表示される必要がある注釈情報と現実のシナリオ画像とをデバイスのディスプレイ画面上にオーバーレイ様式で表示するステップ。

図３Ｃを参照すると、この実施形態では、表示される必要がある注釈情報および現実のシナリオ画像は、拡張現実技術を使用することによって、携帯電話の画面上にオーバーレイ様式で表示され得る。標的エリアが、携帯電話の画面上に設定され、標的エリア内の注釈情報と注釈情報に対応する現実のシナリオとは、ハイライトされる。

表示される必要がある注釈情報および現実のシナリオ画像がデバイスのディスプレイ画面上にオーバーレイ様式で表示された後、画面上に表示される注釈情報はさらに、ユーザの設定に従ってフィルタ処理され得ることに留意し、そのフィルタ処理ポリシーに対して、ステップＳ１０２に説明される注釈情報をフィルタ処理するためのポリシーを参照されたい。

Ｓ２０４：標的エリア内の注釈情報が標的エリア内に留まる時間が閾値を超えたことが検出されると、その注釈情報が選択される注釈情報であることを決定するステップ。

この実施形態では、選択される注釈情報は、標的エリア内の注釈情報が標的エリア内に留まる時間が閾値を超えたことが検出されると、その注釈情報が選択される注釈情報であることが決定される様式で決定される。閾値が２秒に設定されると仮定すると、携帯電話が、注釈情報が標的エリアに進入し、標的エリア内の注釈情報が標的エリア内に留まる時間が２秒を超えたことを検出すると、その注釈情報が選択される注釈情報であることが決定される。

Ｓ２０５：選択された注釈情報に対応するストリートビューの詳細ページを表示するステップ。

図３Ｄを参照すると、この実施形態では、選択される注釈情報が決定された後、選択された注釈情報に対応するストリートビューの詳細ページが、画面上に表示され得る。詳細ページは、ストリートビューサムネイル、住所詳細、および連絡先番号等の情報を含み得、詳細ページは、「目的地として設定」選択肢を含む。ユーザは、「目的地として設定」選択肢をクリックすることによって、現在の場所からストリートビュー目的地までの最適ルートを閲覧することができ、最適ルートは、最適歩行ルート、公共輸送手段のための最適ルート（例えば、バスまたは地下鉄）、および非公共輸送手段のための最適ルート（例えば、自ら運転する車または自転車）を含み得る。

本発明のある実施形態による、ストリートビュー目的地への案内を提供するための別の方法の概略フロー図である、図４を参照する。本方法は、以下のステップを含み得る。

Ｓ４０１：カメラを使用することによって、デバイスが位置するシナリオの現実のシナリオ画像を取得するステップ。

Ｓ４０２：ＧＰＳ測位装置を使用することによって、デバイスの現在の場所を決定し、方向センサを使用することによって、デバイスの向いている方向を決定するステップ。

Ｓ４０３：デバイスの現在の場所およびデバイスが向いている方向に従って、表示される必要がある注釈情報を決定するステップ。

本発明のこの実施形態では、デバイスの現在の場所およびデバイスが向いている方向に対応する注釈情報が取得された後、注釈情報のフィルタ処理が、注釈情報をフィルタ処理するためにユーザによって設定されるポリシーに従って行われ得（フィルタ処理は、タイプおよび／または距離に従って行われ得る）、フィルタ処理した後に得られた注釈情報が表示される必要がある注釈情報であることが決定される。

Ｓ４０４：表示される必要がある注釈情報と現実のシナリオ画像とをデバイスのディスプレイ画面上にオーバーレイ様式で表示するステップ。

この実施形態では、注釈情報と現実のシナリオ画像とは、拡張現実技術を使用することによって、デバイスの画面上に表示され得る。

Ｓ４０５：ユーザが注釈情報をクリックする動作が検出されると、クリックされた注釈情報が選択される注釈情報であることを決定するステップ。

Ｓ４０６：選択された注釈情報に対応するストリートビューの詳細ページを表示するステップ。

詳細ページは、「経路計画」選択肢を含む。ユーザは、「経路計画」選択肢をクリックすることによって、現在の場所からストリートビュー目的地までの最適ルートを閲覧することができる。

Ｓ４０７：経路計画要求が受信されると、現在の場所からストリートビュー目的地までの最適ルートを表示するステップ。

最適ルートは、最適歩行ルート、公共輸送手段のための最適ルート、および非公共輸送手段のための最適ルートのうちの１つ以上のものを含む。

前述の方法実施形態におけるものと同一技術的アイディアに基づいて、本発明の実施形態はさらに、ストリートビュー目的地への案内を提供するためのデバイスを提供し、デバイスは、前述の方法実施形態に適用可能である。

本発明のある実施形態による、ストリートビュー目的地への案内を提供するためのデバイスの概略構造図である、図５を参照する。デバイスは、
デバイスが位置するシナリオの現実のシナリオ画像を取得するように構成されている取得モジュール５１と、
デバイスの現在の場所およびデバイスが向いている方向に従って、表示される必要がある注釈情報を決定するように構成されている第１の決定モジュール５２と、
選択される注釈情報を決定するように構成されている第２の決定モジュール５３と、
現実のシナリオ画像内に、表示される必要がある注釈情報を表示し、選択された注釈情報に対応するストリートビューの詳細情報を表示するように構成されている表示モジュール５４と
を含み得る。

取得モジュール５１は、デバイスのカメラを使用することによって、デバイスが位置するシナリオの現実のシナリオ画像を取得するように構成され得る。

表示モジュール５４は、表示される必要がある注釈情報と現実のシナリオ画像とをデバイスのディスプレイ画面上にオーバーレイ様式で表示するように構成され得る。

標的エリアがデバイスのディスプレイ画面上に設定されている場合、
表示モジュール５４はさらに、注釈情報が標的エリア内に現れる場合、強調様式で（例えば、ハイライトされるか、または比率の拡大を行うことによって表示される）注釈情報と注釈情報に対応する現実のシナリオとを表示するように構成され得る。

故に、第２の決定モジュール５３は、ユーザが注釈情報をクリックしたことが検出されると、ユーザがクリックした注釈情報を選択される注釈情報として決定するか、または標的エリア内の注釈情報が標的エリア内に留まる時間が閾値を超えたことが検出されると、その注釈情報を選択される注釈情報として決定するか、またはユーザがデバイスを揺り動かしたことが検出されると、標的エリア内の注釈情報を選択される注釈情報として決定するか、または視線追跡技術を使用することによって、ユーザが注釈情報に留まる時間が閾値を超えたことが検出されると、その注釈情報を選択される注釈情報として決定するか、または音声を使用することによってユーザによって入力された注釈情報入力が検出されると、その注釈情報を選択される注釈情報として決定するように構成され得る。

表示モジュール５４は、選択された注釈情報に対応するストリートビューの詳細ページを表示するように構成され得る。

詳細ページは、ストリートビューサムネイル、住所詳細、連絡先番号、および距離を含む。

表示モジュール５４はさらに、ユーザが詳細ページ上のストリートビューサムネイルをクリックしたことが検出されると、対応するストリートビューパノラマを表示するように構成され得る。

注釈情報は、関心地点（ＰＯＩ）情報（例えば、ストリートビュー名、ストリートビュータイプ、ストリートビュー経度、およびストリートビュー緯度等の情報）、ストリートビューサムネイル、近くの活動情報（例えば、宣伝活動、有名人のコンサート、および人気の映画の上映）、緊急情報（例えば、交通事故）、輸送機関情報（例えば、道路が順調であるかどうか、および交通整理が行われているかどうか）、および距離等の情報のうちの１つ以上のものを含む。

本発明のある実施形態による、ストリートビュー目的地への案内を提供するための別のデバイスの概略構造図である、図６を参照する。デバイスは、
デバイスが位置するシナリオの現実のシナリオ画像を取得するように構成されている取得モジュール６１と、
デバイスの現在の場所およびデバイスが向いている方向を決定するように構成されている第３の決定モジュール６２と、
デバイスの現在の場所およびデバイスが向いている方向に従って、表示される必要がある注釈情報を決定するように構成されている第１の決定モジュール６３と、
選択される注釈情報を決定するように構成されている第２の決定モジュール６４と、
現実のシナリオ画像内に、表示される必要がある注釈情報を表示し、選択された注釈情報に対応するストリートビューの詳細情報を表示するように構成されている表示モジュール６５と
を含み得る。

第３の決定モジュールは、全地球測位システム（ＧＰＳ）測位装置を使用することによって、デバイスの現在の場所を決定し、および／またはセンサを使用することによって、デバイスのデバイスが向いている方向を決定するように構成され得、センサは、加速度計、ジャイロスコープ、および電子コンパスを含む。

本発明のある実施形態による、ストリートビュー目的地への案内を提供するための別のデバイスの概略構造図である、図７を参照する。デバイスは、
デバイスが位置するシナリオの現実のシナリオ画像を取得するように構成されている取得モジュール７１と、
デバイスの現在の場所およびデバイスが向いている方向に従って、表示される必要がある注釈情報を決定するように構成されている第１の決定モジュール７２と、
選択される注釈情報を決定するように構成されている第２の決定モジュール７３と、
現実のシナリオ画像内に、表示される必要がある注釈情報を表示し、選択された注釈情報に対応するストリートビューの詳細情報を表示するように構成されている表示モジュール７４と
を含み得る。

第１の決定モジュール７２は、
デバイスの現在の場所とデバイスが向いている方向とに対応する注釈情報を取得するように構成されている取得ユニット７２１と、
注釈情報をフィルタ処理するためのポリシーに従って取得された注釈情報のフィルタ処理を行うように構成されているフィルタ処理ユニット７２２と、
フィルタ処理した後に得られた注釈情報が表示される必要がある注釈情報であることを決定するように構成されている決定ユニット７２３と
を含み得る。

フィルタ処理ユニット７２２は、注釈情報に対応する現実のシナリオのタイプ（例えば、生活サービス、観光スポット、およびショッピング）に従って取得された注釈情報のフィルタ処理を行うこと、および／または注釈情報に対応する現実のシナリオからデバイスの現在の場所までの距離（例えば、２ｋｍ、１ｋｍ、または５００ｍ以内）に従って取得された注釈情報のフィルタ処理をすることを行うように構成され得る。

本発明のある実施形態による、ストリートビュー目的地への案内を提供するための別のデバイスの概略構造図である、図８を参照する。デバイスは、
デバイスが位置するシナリオの現実のシナリオ画像を取得するように構成されている取得モジュール８１と、
デバイスの現在の場所およびデバイスが向いている方向に従って、表示される必要がある注釈情報を決定するように構成されている第１の決定モジュール８２と、
選択される注釈情報を決定するように構成されている第２の決定モジュール８３と、
現実のシナリオ画像内に、表示される必要がある注釈情報を表示し、選択された注釈情報に対応するストリートビューの詳細情報を表示するように構成されている表示モジュール８４と
を含み得る。

標的エリアがデバイスのディスプレイ画面上に設定されている場合、
表示モジュール８４はさらに、注釈情報が標的エリア内に現れる場合、強調様式で（例えば、ハイライトされるか、または比率の拡大を行うことによって表示される）注釈情報と注釈情報に対応する現実のシナリオとを表示するように構成され得る。

故に、第２の決定モジュール８３は、ユーザが注釈情報をクリックしたことが検出されると、ユーザがクリックした注釈情報が選択される注釈情報であることを決定するか、または標的エリア内の注釈情報が標的エリア内に留まる時間が閾値を超えたことが検出されると、その注釈情報が選択される注釈情報であることを決定するか、またはユーザがデバイスを揺り動かしたことが検出されると、標的エリア内の注釈情報が選択される注釈情報であることを決定するか、または視線追跡技術を使用することによって、ユーザが注釈情報に留まる時間が閾値を超えたことが検出されると、その注釈情報が選択される注釈情報であることを決定するか、または音声を使用することによってユーザによって入力された注釈情報入力が検出されると、その注釈情報が選択される注釈情報であることを決定するように構成され得る。

故に、本発明のこの実施形態において提供されるストリートビュー目的地への案内を提供するためのデバイスはさらに、
２つ以上の注釈情報が標的エリア内に現れる場合、事前設定ルールに従って、１つの注釈情報を選択し、その１つの注釈情報が標的エリア内の注釈情報であることを決定するように構成されている第４の決定モジュール８５を含み得る。

第４の決定モジュール８５は、標的エリアの中心点に最も近い注釈情報が標的エリア内の注釈情報であることを決定するか、または標的エリア内に現れる注釈情報の重みに従って、最も高い重みを伴う注釈情報を選択し、その注釈情報が標的エリア内の注釈情報であることを決定するか、または１つの注釈情報をランダムに選択し、その１つの注釈情報が標的エリア内の注釈情報であることを決定するように構成され得る。

本発明のある実施形態による、ストリートビュー目的地への案内を提供するための別のデバイスの概略構造図である、図９を参照する。デバイスは、
デバイスが位置するシナリオの現実のシナリオ画像を取得するように構成されている取得モジュール９１と、
デバイスの現在の場所およびデバイスが向いている方向に従って、表示される必要がある注釈情報を決定するように構成されている第１の決定モジュール９２と、
選択される注釈情報を決定するように構成されている第２の決定モジュール９３と、
現実のシナリオ画像内に、表示される必要がある注釈情報を表示し、選択された注釈情報に対応するストリートビューの詳細情報を表示するように構成されている表示モジュール９４と
を含み得る。

表示モジュール９４は、選択された注釈情報に対応するストリートビューの詳細ページを表示するように構成され得る。

故に、表示モジュール９４はさらに、ユーザが詳細ページ上のストリートビューサムネイルをクリックしたことが検出されると、対応するストリートビューパノラマを表示するように構成され得る。

故に、本発明のこの実施形態において提供されるストリートビュー目的地への案内を提供するためのデバイスはさらに、
ストリートビュー目的地までの経路を計画することに対する要求が受信されると、現在の場所からストリートビュー目的地までの最適ルートを決定するように構成されているナビゲーションモジュール９５を含み得、最適ルートは、最適歩行ルート、公共輸送手段のための最適ルート、および非公共輸送手段のための最適ルートのうちの１つ以上のものを含む。

前述の説明から、本発明の実施形態において提供される技術的解決策では、ストリートビュー目的地への案内を提供するための解決策が提供され、解決策は、より現実的視覚的効果およびより多くのシナリオ情報を有することが分かる。ユーザは、目的地ストリートビューを見出すように、表示される注釈情報とデバイスの正面の現実のシナリオとを直感的に比較することができる。目的地ストリートビューは、デバイスの現在の場所および向いている方向情報と、ユーザの選択とを参照して決定されるので、目的地ストリートビューは、実際のユーザの必要性をより良好に満たし、ストリートビュー案内は、より便り、効率的、かつ標的化されたものとなる。

当業者は、実施形態における方法のプロセスの全部または一部が、コンピュータプログラム命令関連ハードウェアによって実装され得ることを理解し得る。プログラムは、コンピュータ読み取り可能な記憶媒体内に記憶され得る。プログラムが起動すると、前述の方法実施形態のプロセスが、行われる。記憶媒体は、磁気ディスク、光学ディスク、読取専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）等を含み得る。

前述に開示される内容は、単に、本発明の好ましい実施形態であって、本開示の範囲を限定することを意図するものではない。当業者は、前述の実施形態を実装するための手順の全部または一部を理解することができ、本開示の請求項に従うものによって行われる任意の均等物変形例は、依然として、本開示の範囲内であるものとする。

Claims

ストリートビュー目的地への案内を提供する方法であって、
デバイスが位置するシナリオの現実のシナリオ画像を取得することと、
前記デバイスの現在の場所およびデバイスが向いている方向を決定することと、
前記デバイスの前記現在の場所および前記デバイスが向いている方向に従って、表示される必要がある注釈情報を決定することと、
前記現実のシナリオ画像内に前記表示される必要がある注釈情報を表示することと、
選択される注釈情報を決定することと、
前記選択された注釈情報に対応するストリートビューの詳細情報を表示することと
を含み、
前記現実のシナリオ画像内に前記表示される必要がある注釈情報を表示することは、
前記表示される必要がある注釈情報と前記現実のシナリオ画像とを前記デバイスのディスプレイ画面上にオーバーレイ様式で表示することと、
標的エリアが前記デバイスの前記ディスプレイ画面上に設定されており、前記注釈情報が前記標的エリア内に現れる場合、前記方法は、前記標的エリア内の注釈情報と前記注釈情報に対応する現実のシナリオとを強調様式で表示することと、
を含む、方法。
前記デバイスが位置するシナリオの現実のシナリオ画像を取得することは、前記デバイスのカメラを使用して、前記デバイスが位置するシナリオの前記現実のシナリオ画像を取得することを含む、請求項１に記載の方法。
前記デバイスの前記現在の場所は、全地球測位システム（ＧＰＳ）測位装置を使用することによって決定され、前記デバイスの前記デバイスが向いている方向は、センサを使用することによって決定され、前記センサは、加速度計、ジャイロスコープ、および電子コンパスのうちの１つ以上のものを備えている、請求項１に記載の方法。
前記デバイスの前記現在の場所および前記デバイスが向いている方向に従って、表示される必要がある注釈情報を決定することは、
前記デバイスの前記現在の場所と前記デバイスが向いている方向とに対応する注釈情報を取得することと、
注釈情報をフィルタ処理するためのポリシーに従って、前記取得された注釈情報にフィルタ処理を行うことと、
前記フィルタ処理した後に得られた注釈情報が前記表示される必要がある注釈情報であることを決定することと
を含む、請求項１に記載の方法。
前記注釈情報をフィルタ処理するためのポリシーに従って、前記取得された注釈情報にフィルタ処理を行うことは、
前記注釈情報に対応する現実のシナリオのタイプに従って、前記取得された注釈情報にフィルタ処理を行うこと、および／または、
前記注釈情報に対応する現実のシナリオから前記デバイスの前記現在の場所までの距離に従って、前記取得された注釈情報にフィルタ処理を行うこと
を含む、請求項４に記載の方法。
前記選択される注釈情報を決定することは、
ユーザが注釈情報をクリックしたことが検出されると、前記ユーザがクリックした前記注釈情報を前記選択される注釈情報として決定すること、または、
標的エリア内の注釈情報が前記標的エリア内に留まる時間が閾値を超えたことが検出されると、前記注釈情報が前記選択される注釈情報であることを決定すること、または、
ユーザが前記デバイスを揺り動かしたことが検出されると、標的エリア内の注釈情報が前記選択される注釈情報であることを決定すること、または、
視線追跡技術を使用することによって、ユーザが注釈情報に留まる時間が閾値を超えたことが検出されると、前記注釈情報が前記選択される注釈情報であることを決定すること、または、
音声を使用することによってユーザによって入力された注釈情報入力が検出されると、前記注釈情報が前記選択される注釈情報であることを決定すること
を含む、請求項１に記載の方法。
前記方法は、２つ以上の注釈情報が標的エリア内に現れる場合、事前設定ルールに従って、１つの注釈情報を選択し、前記１つの注釈情報が前記標的エリア内の注釈情報であることを決定することをさらに含む、請求項１に記載の方法。
前記事前設定ルールに従って、１つの注釈情報を選択し、前記１つの注釈情報が前記標的エリア内の注釈情報であることを決定することは、
前記標的エリアの中心点に最も近い注釈情報が前記標的エリア内の前記注釈情報であることを決定すること、または、
前記標的エリア内に現れる注釈情報の重みに従って、最も高い重みを伴う注釈情報を選択し、前記注釈情報が前記標的エリア内の前記注釈情報であることを決定すること
を含む、請求項７に記載の方法。
前記事前設定ルールに従って、１つの注釈情報を選択し、前記１つの注釈情報が前記標的エリア内の注釈情報であることを決定することは、１つの注釈情報をランダムに選択し、前記１つの注釈情報が前記標的エリア内の前記注釈情報であることを決定することを含む、請求項７に記載の方法。
前記選択された注釈情報に対応するストリートビューの詳細情報を表示することは、前記選択された注釈情報に対応する前記ストリートビューの詳細ページを表示することを含み、前記詳細ページは、ストリートビューサムネイル、住所詳細、連絡先番号、および距離を備えている、請求項１に記載の方法。
前記選択された注釈情報に対応するストリートビューの詳細情報を表示した後、ユーザが前記詳細ページ上の前記ストリートビューサムネイルをクリックしたことが検出されると、対応するストリートビューパノラマを表示することをさらに含む、請求項１０に記載の方法。
前記選択された注釈情報に対応するストリートビューの詳細情報を表示した後、前記ストリートビュー目的地までの経路を計画することに対する要求が受信されると、前記現在の場所から前記ストリートビュー目的地までの最適ルートを決定することをさらに含み、前記最適ルートは、最適歩行ルート、公共輸送手段のための最適ルート、および非公共輸送手段のための最適ルートのうちの１つ以上のものを備えている、請求項１０に記載の方法。
前記注釈情報は、関心地点（ＰＯＩ）情報、ストリートビューサムネイル、近くの活動情報、緊急情報、輸送機関情報、および距離のうちの１つ以上のものを備えている、請求項１に記載の方法。