JP2020535536A5 - - Google Patents

Claims (20)

1. 現実世界プロセス制御環境内で拡張現実（ＡＲ）モバイルデバイスのユーザに仮想強化視角を提供する方法であって、前記方法が、
   ＡＲシステムの１つ以上のプロセッサによって、前記プロセス制御環境のマップの第１のノードが、現在前記ＡＲモバイルデバイスのカメラの視野内にある第１の現実世界オブジェクトに対応することを判定することと、
   前記１つ以上のプロセッサによって、前記第１のノードと前記マップの１つ以上の他のノードとの間の関係を判定することであって、前記関係が、前記１つ以上の他のノードに対応する１つ以上の他の現実世界オブジェクトが、前記第１の現実世界オブジェクトによって少なくとも部分的に不明瞭であることを示す、判定することと、
   少なくとも部分的に前記第１のノードと前記他のノードとの間の前記関係を判定することに応答して、前記１つ以上のプロセッサによって、メモリから前記１つ以上の他の現実世界オブジェクトを描画する１つ以上のデジタルモデルまたはデジタル画像を取得することと、
   前記１つ以上のプロセッサによって、前記ＡＲモバイルデバイスのディスプレイに、前記第１の現実世界オブジェクトが前記カメラの前記視野内にある間に、前記取得されたデジタルモデルまたはデジタル画像を前記ユーザに提示させることと、を含む、方法。
2. 前記第１のノードが現在前記カメラの視野内にある第１の現実世界オブジェクトに対応することを判定することが、
   前記ＡＲモバイルデバイスの少なくとも現在の配向を検出することと、
   前記現在の配向および前記マップによって示される前記第１のノードの位置に少なくとも基づいて、前記第１の現実世界オブジェクトが現在前記カメラの前記視野内にあることを判定することと、を含む、請求項１に記載の方法。
3. 前記第１のノードが現在前記カメラの視野内にある第１の現実世界オブジェクトに対応することを判定することが、
   前記第１のノードが、（ｉ）現在前記カメラの視野内にあり、かつ（ｉｉ）現在前記ＡＲモバイルデバイスの閾値距離内にある、第１の現実世界オブジェクトに対応することを判定することを含む、請求項１または請求項２に記載の方法。
4. 前記第１のノードと前記１つ以上の他のノードとの間の関係を判定することが、
   前記関係を指定するノードデータベースにアクセスすることを含む、請求項１から請求項３のいずれかに記載の方法。
5. 前記第１のノードと前記１つ以上の他のノードとの間の関係を判定することが、
   前記第１の現実世界オブジェクトから前記ＡＲモバイルデバイスによって得られたノード識別子を判定することと、
   前記ノード識別子を使用して前記関係を判定することと、を含む、請求項１から請求項４のいずれかに記載の方法。
6. ノード識別子を判定することが、
   前記第１の現実世界オブジェクト上でＱＲコードをスキャンして、前記ＡＲモバイルデバイスによって得られたノード識別子を判定することを含む、請求項５に記載の方法。
7. メモリから前記１つ以上の他の現実世界オブジェクトを描画する１つ以上のデジタルモデルまたはデジタル画像を取得することが、
   前記メモリから前記１つ以上の現実世界オブジェクトを描画する１つ以上の３次元（３Ｄ）デジタルモデルを取得することを含む、請求項１から請求項６のいずれかに記載の方法。
8. 前記メモリから前記１つ以上の現実世界オブジェクトを描画する１つ以上のデジタルモデルまたはデジタル画像を取得することが、
   前記１つ以上の現実世界オブジェクトを描画する前記１つ以上のデジタル画像を取得することを含む、請求項１から請求項７のいずれかに記載の方法。
9. 前記第１のノードと前記マップに関連付けられている１つ以上の他のノードとの間の関係を判定することが、
   前記第１の現実世界オブジェクトが、前記１つ以上の他の現実世界オブジェクトが位置しているキャビネットであると判定することを含む、請求項１から請求項８のいずれかに記載の方法。
10. 現実世界プロセス制御環境内で拡張現実（ＡＲ）モバイルデバイスのユーザに仮想強化視角を提供するためのサーバであって、前記サーバが、
    前記プロセス制御環境のマップの第１のノードが、現在前記ＡＲモバイルデバイスのカメラの視野内にある第１の現実世界オブジェクトに対応することを判定することと、
    前記第１のノードと前記マップの１つ以上の他のノードとの間の関係を判定することであって、前記関係が、前記１つ以上の他のノードに対応する１つ以上の他の現実世界オブジェクトが、前記第１の現実世界オブジェクトによって少なくとも部分的に不明瞭であることを示す、判定することと、
    少なくとも部分的に前記第１ノードと前記他のノードとの間の前記関係を判定することに応答して、メモリから前記１つ以上の他の現実世界オブジェクトを描画する１つ以上のデジタルモデルまたはデジタル画像を取得することと、
    前記ＡＲモバイルデバイスのディスプレイに、前記第１の現実世界オブジェクトが前記カメラの前記視野内にある間に、前記取得されたデジタルモデルまたはデジタル画像を前記ユーザに提示させることと、を行うように構成されている、サーバ。
11. 前記サーバが、少なくとも、
    前記ＡＲモバイルデバイスの現在の配向および前記マップによって示される前記第１のノードの位置に少なくとも基づいて、第１の現実世界オブジェクトが現在前記カメラの視野内にあることを判定することによって、前記第１のノードが、現在前記カメラの前記視野内にある前記第１の現実世界オブジェクトに対応することを判定するように構成されている、請求項１０に記載のサーバ。
12. 前記サーバが、少なくとも、
    前記第１のノードが、（ｉ）現在前記カメラの視野内にあり、かつ（ｉｉ）現在前記ＡＲモバイルデバイスの閾値距離内にある、第１の現実世界オブジェクトに対応することを判定することによって、前記第１のノードが、現在前記カメラの視野内にある第１の現実世界オブジェクトに対応することを判定するように構成されている、請求項１０または請求項１１に記載のサーバ。
13. 前記サーバが、少なくとも、
    前記第１の現実世界オブジェクトから前記ＡＲモバイルデバイスによって得られたノード識別子を判定することと、
    前記ノード識別子を使用して前記関係を判定することと、によって、前記第１のノードと前記１つ以上の他のノードとの間の関係を判定するように構成されている、請求項１０から請求項１２のいずれかに記載のサーバ。
14. 前記サーバが、少なくとも、
    前記第１の現実世界オブジェクトが、前記１つ以上の他の現実世界オブジェクトが位置しているキャビネットであると判定することによって、前記第１のノードと前記マップの１つ以上の他のノードとの間の関係を判定するように構成されている、請求項１０から請求項１３のいずれかに記載のサーバ。
15. 現実世界プロセス制御環境内で仮想強化視覚をユーザに提供するための拡張現実（ＡＲ）モバイルデバイスであって、前記ＡＲモバイルデバイスが、カメラおよびディスプレイを含み、前記ＡＲモバイルデバイスが、
    前記プロセス制御環境のマップの第１のノードが、現在前記カメラの視野内にある第１の現実世界オブジェクトに対応することを判定することと、
    前記第１のノードと前記マップの１つ以上の他のノードとの間の関係を判定することであって、前記関係が、前記１つ以上の他のノードに対応する１つ以上の他の現実世界オブジェクトが、前記第１の現実世界オブジェクトによって少なくとも部分的に不明瞭であることを示す、判定することと、
    少なくとも部分的に前記第１ノードと前記他のノードとの間の前記関係を判定することに応答して、メモリから前記１つ以上の他の現実世界オブジェクトを描画する１つ以上のデジタルモデルまたはデジタル画像を取得することと、
    前記第１の現実世界オブジェクトが前記カメラの前記視野内にある間に、前記取得されたデジタルモデルまたはデジタル画像を前記ディスプレイを介してユーザに前記提示することと、を行うように構成されている、ＡＲモバイルデバイス。
16. 前記ＡＲモバイルデバイスが、慣性測定ユニットをさらに含み、前記ＡＲモバイルデバイスが、少なくとも、
    前記慣性測定ユニットを使用して、前記ＡＲモバイルデバイスの少なくとも現在の配向を検出することと、
    前記ＡＲモバイルデバイスの前記現在の配向および前記マップによって示される前記第１のノードの位置に少なくとも基づいて、第１の現実世界オブジェクトが現在前記カメラの視野内にあることを判定することと、によって、前記第１のノードが、現在前記カメラの前記視野内にある前記第１の現実世界オブジェクトに対応することを判定するように構成されている、請求項１５に記載のＡＲモバイルデバイス。
17. 前記ＡＲモバイルデバイスが、少なくとも、
    前記第１のノードが、（ｉ）現在前記カメラの視野内にあり、かつ（ｉｉ）現在前記ＡＲモバイルデバイスの閾値距離内にある、第１の現実世界オブジェクトに対応することを判定することによって、前記第１のノードが、現在前記カメラの視野内にある第１の現実世界オブジェクトに対応することを判定するように構成されている、請求項１５または請求項１６に記載のＡＲモバイルデバイス。
18. 前記ＡＲモバイルデバイスが、少なくとも、
    前記第１の現実世界オブジェクトから前記ＡＲモバイルデバイスによって得られたノード識別子を判定することと、
    前記ノード識別子を使用して前記関係を判定することと、によって、前記第１のノードと前記１つ以上の他のノードとの間の関係を判定するように構成されている、請求項１５から請求項１７のいずれかに記載のサーバ。
19. 前記ＡＲモバイルデバイスが、前記カメラを使用して前記第１の現実世界オブジェクト上のＱＲコードをスキャンすることによって、前記ノード識別子を判定するように構成されている、請求項１８に記載のＡＲモバイルデバイス。
20. 前記ＡＲモバイルデバイスが、少なくとも、
    前記第１の現実世界オブジェクトが、前記１つ以上の他の現実世界オブジェクトが位置しているキャビネットであると判定することによって、前記第１のノードと前記マップの１つ以上の他のノードとの間の関係を判定するように構成されている、請求項１５から請求項１９のいずれかに記載のＡＲモバイルデバイス。