JPWO2020237089A5

JPWO2020237089A5 -

Info

Publication number: JPWO2020237089A5
Application number: JP2021568892A
Authority: JP
Publication date: 2023-05-30

Description

前述の概要は、例証として提供され、限定することを意図するものではない。
本発明は、例えば、以下を提供する。
（項目１）
ポータブル電子システムであって、
センサであって、前記センサは、物理的世界内のオブジェクトについての３次元（３Ｄ）情報を捕捉するように構成される、センサと、
アクティブメモリと、
ローカルメモリと、
送受信機であって、前記送受信機は、コンピュータネットワークを経由した遠隔メモリとの通信のために構成される、送受信機と、
プロセッサであって、前記プロセッサは、前記センサ、前記アクティブメモリ、前記ローカルメモリ、および前記送受信機に通信可能に結合され、コンピュータ実行可能命令を実行し、少なくとも部分的に、前記物理的世界内のオブジェクトについての３Ｄ情報に基づいて、前記物理的世界の一部の３Ｄ表現を提供するように構成される、プロセッサと
を備え、
前記物理的世界の一部の３Ｄ表現は、複数のブロックを備え、各ブロックは、ある時点における前記物理的世界の一部の領域内のオブジェクトを表す値を有し、
前記コンピュータ実行可能命令は、
前記ポータブル電子システムが非アクティブ動作ステータスに変化すると、前記複数のブロックを前記アクティブメモリ、前記ローカルメモリ、および前記遠隔メモリのうちの少なくとも１つ内に存続させる
ための命令を備える、ポータブル電子システム。
（項目２）
前記非アクティブ動作ステータスは、シャットダウンまたはスリープである、項目１に記載のポータブル電子システム。
（項目３）
前記複数のブロックを前記アクティブメモリ、前記ローカルメモリ、および前記遠隔メモリのうちの少なくとも１つ内に存続させることは、
前記非アクティブ動作ステータスが、スリープであるとき、前記複数のブロックが、前記ポータブル電子システムのウェイクアップに応じて、前記ポータブル電子システムによってアクセス可能であるように、前記複数のブロックが現在存在する個別のメモリ内に、前記複数のブロックを存続させること
を含む、項目２に記載のポータブル電子システム。
（項目４）
前記複数のブロックを前記アクティブメモリ、前記ローカルメモリ、および前記遠隔メモリのうちの少なくとも１つ内に存続させることは、
前記非アクティブ動作ステータスが、シャットダウンであるとき、前記ローカルメモリ内のブロックの少なくとも一部を前記遠隔メモリ内に存続させ、前記アクティブメモリ内のブロックを前記ローカルメモリおよび／または前記遠隔メモリ内に存続させること
を含む、項目２に記載のポータブル電子システム。
（項目５）
前記コンピュータ実行可能命令は、
少なくとも部分的に、前記物理的世界内のオブジェクトについての着信３Ｄ情報に基づいて、１つ以上の新しいブロックを算出することと、
前記ポータブル電子システムの周囲の存続されるブロックが読み出され得るように、前記存続されるブロックから、前記１つ以上の新しいブロックと少なくとも部分的に重複するブロックを選択することと
を行うための命令を備える、項目１に記載のポータブル電子システム。
（項目６）
前記存続されるブロックから、前記１つ以上の新しいブロックと少なくとも部分的に重複するブロックを選択することは、前記１つ以上の新しいブロックと前記存続されるブロックを比較することを含む、項目５に記載のポータブル電子システム。
（項目７）
前記１つ以上の新しいブロックと前記存続されるブロックを比較することは、
前記１つ以上の新しいブロックと前記アクティブメモリ内に存続されるブロックを比較すること
を含む、項目６に記載のポータブル電子システム。
（項目８）
前記１つ以上の新しいブロックと前記存続されるブロックを比較することは、
前記アクティブメモリが、前記１つ以上の新しいブロックと少なくとも部分的に重複するブロックを有していないとき、前記１つ以上の新しいブロックと前記ローカルメモリ内に存続されるブロックを比較すること
を含む、項目７に記載のポータブル電子システム。
（項目９）
前記１つ以上の新しいブロックと前記存続されるブロックを比較することは、
前記ローカルメモリが、前記１つ以上の新しいブロックと少なくとも部分的に重複するブロックを有していないとき、前記１つ以上の新しいブロックと前記遠隔メモリ内に存続されるブロックを比較すること
を含む、項目８に記載のポータブル電子システム。
（項目１０）
前記コンピュータ実行可能命令は、
前記複数のブロックを前記１つ以上の新しいブロックで更新する
ための命令を備える、項目５に記載のポータブル電子システム。
（項目１１）
拡張現実システム内のポータブル電子システムを動作させる方法であって、前記方法は、
少なくとも１つのプロセッサを用いて、
物理的世界内の表面についての３次元（３Ｄ）情報を備える複数のブロックを取得することと、
前記複数のブロックのうちの少なくとも１つをアクティブメモリ内に記憶することと、
仮想コンテンツを前記ポータブル電子システムのユーザにレンダリングするために、前記アクティブメモリからのブロックを使用することと、
第１の時間における非アクティブ動作ステータスへの遷移に応じて、前記ブロックをアクティブメモリ内に存続させることと、
前記第１の時間後の第２の時間におけるアクティブ動作ステータスへの遷移に応じて、仮想コンテンツを前記ポータブル電子システムのユーザにレンダリングするために、前記存続されるブロックを使用するかどうかを決定することと
を含む、方法。
（項目１２）
前記ブロックは、メッシュブロックである、項目１１に記載の方法。
（項目１３）
前記ポータブル電子システムのユーザの現在の視野または投影される視野に基づいて、前記アクティブメモリとローカルメモリとの間でブロックをページングすることを含む、項目１１に記載の方法。
（項目１４）
非アクティブ動作ステータスへの遷移に応じて、前記ブロックを前記ローカルメモリ内に存続させることをさらに含む、項目１１に記載の方法。
（項目１５）
仮想コンテンツを前記ユーザにレンダリングするために、前記アクティブメモリからのブロックを使用することは、
視覚的オクルージョン処理のために前記ブロックを使用することと、
物理学ベースの相互作用および／または環境推測を算出することと
を含む、項目１１に記載の方法。
（項目１６）
非一過性コンピュータ可読媒体であって、前記非一過性コンピュータ可読媒体は、その上に記憶される命令を有し、前記命令は、プロセッサ上で実行されると、
物理的世界内の表面についての３次元（３Ｄ）情報を備える複数のブロックを取得することと、
前記複数のブロックのうちの少なくとも１つをアクティブメモリ内に記憶することと、
仮想コンテンツをポータブル電子システムのユーザにレンダリングするために、前記アクティブメモリからのブロックを使用することと、
第１の時間における非アクティブ動作ステータスへの遷移に応じて、前記ブロックをアクティブメモリ内に存続させることと、
前記第１の時間後の第２の時間におけるアクティブ動作ステータスへの遷移に応じて、仮想コンテンツを前記ポータブル電子システムのユーザにレンダリングするために、前記存続されるブロックを使用するかどうかを決定することと
を含む行為を実施する、非一過性コンピュータ可読媒体。
（項目１７）
前記ブロックは、メッシュブロックである、項目１６に記載の非一過性コンピュータ可読媒体。
（項目１８）
前記行為は、
前記ポータブル電子システムのユーザの現在の視野または投影される視野に基づいて、前記アクティブメモリとローカルメモリとの間でブロックをページングすること
を含む、項目１６に記載の非一過性コンピュータ可読媒体。
（項目１９）
前記行為は、
非アクティブ動作ステータスへの遷移に応じて、前記ブロックを前記ローカルメモリ内に存続させること
を含む、項目１６に記載の非一過性コンピュータ可読媒体。
（項目２０）
仮想コンテンツを前記ユーザにレンダリングするために、前記アクティブメモリからのブロックを使用することは、
視覚的オクルージョン処理のために前記ブロックを使用することと、
物理学ベースの相互作用および／または環境推測を算出することと
を含む、項目１６に記載の非一過性コンピュータ可読媒体。

Claims

ポータブル電子システムであって、
センサであって、前記センサは、物理的世界内のオブジェクトについての３次元（３Ｄ）情報を捕捉するように構成される、センサと、
アクティブメモリと、
ローカルメモリと、
送受信機であって、前記送受信機は、コンピュータネットワークを経由した遠隔メモリとの通信のために構成される、送受信機と、
プロセッサであって、前記プロセッサは、前記センサ、前記アクティブメモリ、前記ローカルメモリ、および前記送受信機に通信可能に結合され、コンピュータ実行可能命令を実行し、前記物理的世界内のオブジェクトについての３Ｄ情報に少なくとも部分的に基づいて、前記物理的世界の一部の３Ｄ表現を提供するように構成される、プロセッサと
を備え、
前記物理的世界の前記一部の３Ｄ表現は、複数のブロックを備え、各ブロックは、ある時点における前記物理的世界の前記一部の領域内のオブジェクトを表す値を有し、
前記コンピュータ実行可能命令は、
前記ポータブル電子システムが非アクティブ動作ステータスに変化すると、前記複数のブロックを前記アクティブメモリ、前記ローカルメモリ、および前記遠隔メモリのうちの少なくとも１つ内に存続させる
ための命令を備える、ポータブル電子システム。
前記物理的世界の前記一部は、前記ポータブル電子システムのユーザの視野内にあり、
各ブロックは、前記ある時点における前記物理的世界の前記一部の領域の立体表現を備える、請求項１に記載のポータブル電子システム。
前記非アクティブ動作ステータスは、シャットダウンまたはスリープであり、
前記複数のブロックを前記アクティブメモリ、前記ローカルメモリ、および前記遠隔メモリのうちの少なくとも１つ内に存続させることは、
前記非アクティブ動作ステータスが、スリープであるとき、前記複数のブロックが、前記ポータブル電子システムのウェイクアップに応じて、前記ポータブル電子システムによってアクセス可能であるように、前記複数のブロックが現在存在する個別のメモリ内に、前記複数のブロックを存続させること、および／または
前記非アクティブ動作ステータスが、シャットダウンであるとき、前記ローカルメモリ内のブロックの少なくとも一部を前記遠隔メモリ内に存続させ、前記アクティブメモリ内のブロックを前記ローカルメモリおよび／または前記遠隔メモリ内に存続させること
を含む、請求項１に記載のポータブル電子システム。
前記コンピュータ実行可能命令は、
前記物理的世界内のオブジェクトについての着信３Ｄ情報に少なくとも部分的に基づいて、１つ以上の新しいブロックを算出することと、
前記ポータブル電子システムの周囲の存続されるブロックが読み出され得るように、前記存続されるブロックから、前記１つ以上の新しいブロックと少なくとも部分的に重複するブロックを選択することと
を行うための命令を備える、請求項１に記載のポータブル電子システム。
前記存続されるブロックから、前記１つ以上の新しいブロックと少なくとも部分的に重複するブロックを選択することは、前記１つ以上の新しいブロックと前記存続されるブロックを比較することを含む、請求項４に記載のポータブル電子システム。
前記１つ以上の新しいブロックと前記存続されるブロックを比較することは、
前記１つ以上の新しいブロックと前記アクティブメモリ内に存続されるブロックを比較すること
を含む、請求項５に記載のポータブル電子システム。
前記１つ以上の新しいブロックと前記存続されるブロックを比較することは、
前記アクティブメモリが、前記１つ以上の新しいブロックと少なくとも部分的に重複するブロックを有していないとき、前記１つ以上の新しいブロックと前記ローカルメモリ内に存続されるブロックを比較すること
を含む、請求項６に記載のポータブル電子システム。
前記１つ以上の新しいブロックと前記存続されるブロックを比較することは、
前記ローカルメモリが、前記１つ以上の新しいブロックと少なくとも部分的に重複するブロックを有していないとき、前記１つ以上の新しいブロックと前記遠隔メモリ内に存続されるブロックを比較すること
を含む、請求項７に記載のポータブル電子システム。
前記コンピュータ実行可能命令は、
前記複数のブロックを前記１つ以上の新しいブロックで更新する
ための命令を備える、請求項４に記載のポータブル電子システム。
拡張現実システム内のポータブル電子システムを動作させる方法であって、前記方法は、
少なくとも１つのプロセッサを用いて、
物理的世界内の表面についての３次元（３Ｄ）情報を備える複数のブロックを取得することと、
前記複数のブロックのうちの少なくとも１つをアクティブメモリ内に記憶することと、
仮想コンテンツを前記ポータブル電子システムのユーザにレンダリングするために、前記アクティブメモリからのブロックを使用することと、
第１の時間における非アクティブ動作ステータスへの遷移に応じて、前記ブロックをアクティブメモリ内に存続させることと、
前記第１の時間の後の第２の時間におけるアクティブ動作ステータスへの遷移に応じて、仮想コンテンツを前記ポータブル電子システムのユーザにレンダリングするために、前記存続されるブロックを使用するかどうかを決定することと
を含む、方法。
拡張現実システム内のポータブル電子システムを動作させる方法であって、前記方法は、
少なくとも１つのプロセッサを用いて、
物理的世界内の表面の３次元（３Ｄ）表現を備える複数のブロックを取得することであって、各ブロックは、前記物理的世界の一部の立体表現を備える、ことと、
前記複数のブロックをアクティブメモリ内に記憶することと、
仮想コンテンツを前記ポータブル電子システムのユーザにレンダリングするために、前記アクティブメモリからのブロックを使用することと、
第１の時間における非アクティブ動作ステータスへの遷移に応じて、前記ブロックをアクティブメモリ内に選択的に存続させることと、
前記第１の時間の後の第２の時間におけるアクティブ動作ステータスへの遷移に応じて、仮想コンテンツを前記ポータブル電子システムのユーザにレンダリングするために、前記存続されるブロックを使用するかどうかを決定することと
を含む、方法。
各ブロックは、ある時点における前記物理的世界の一部の立体表現を備える、請求項１０または請求項１１に記載の方法。
前記複数のブロックは、同一体積の空間に対応する、請求項１０または請求項１１に記載の方法。
前記ブロックは、メッシュブロックである、請求項１０または請求項１１に記載の方法。
前記ポータブル電子システムのユーザの現在の視野または投影される視野に基づいて、前記アクティブメモリとローカルメモリとの間でブロックをページングすること、および／または
非アクティブ動作ステータスへの遷移に応じて、前記ブロックを前記ローカルメモリ内に存続させること
を含む、請求項１０または請求項１１に記載の方法。
仮想コンテンツを前記ユーザにレンダリングするために、前記アクティブメモリからのブロックを使用することは、
視覚的オクルージョン処理のために前記ブロックを使用することと、
物理学ベースの相互作用および／または環境推測を算出することと
を含む、請求項１０または請求項１１に記載の方法。
非一過性コンピュータ可読媒体であって、前記非一過性コンピュータ可読媒体は、その上に記憶される命令を有し、前記命令は、プロセッサ上で実行されると、
物理的世界内の表面についての３次元（３Ｄ）情報を備える複数のブロックを取得することと、
前記複数のブロックのうちの少なくとも１つをアクティブメモリ内に記憶することと、
仮想コンテンツをポータブル電子システムのユーザにレンダリングするために、前記アクティブメモリからのブロックを使用することと、
第１の時間における非アクティブ動作ステータスへの遷移に応じて、前記ブロックをアクティブメモリ内に存続させることと、
前記第１の時間の後の第２の時間におけるアクティブ動作ステータスへの遷移に応じて、仮想コンテンツを前記ポータブル電子システムのユーザにレンダリングするために、前記存続されるブロックを使用するかどうかを決定することと
を含む行為を実施する、非一過性コンピュータ可読媒体。
非一過性コンピュータ可読媒体であって、前記非一過性コンピュータ可読媒体は、その上に記憶される命令を有し、前記命令は、プロセッサ上で実行されると、
物理的世界内の表面の３次元（３Ｄ）表現を備える複数のブロックを取得することであって、各ブロックは、前記物理的世界の一部の立体表現を備える、ことと、
前記複数のブロックをアクティブメモリ内に記憶することと、
仮想コンテンツを前記ポータブル電子システムのユーザにレンダリングするために、前記アクティブメモリからのブロックを使用することと、
第１の時間における非アクティブ動作ステータスへの遷移に応じて、前記アクティブメモリ内の前記ブロックを不揮発性メモリに選択的に転送することと、
前記第１の時間の後の第２の時間におけるアクティブ動作ステータスへの遷移に応じて、仮想コンテンツを前記ポータブル電子システムのユーザにレンダリングするために、前記転送されたブロックを使用するかどうかを決定することと
を含む行為を実施する、非一過性コンピュータ可読媒体。
各ブロックは、ある時点における前記物理的世界の一部の立体表現を備える、請求項１７または請求項１８に記載の非一過性コンピュータ可読媒体。
前記複数のブロックは、同一体積の空間に対応する、請求項１７または請求項１８に記載の非一過性コンピュータ可読媒体。
前記ブロックは、メッシュブロックである、請求項１７または請求項１８に記載の非一過性コンピュータ可読媒体。
前記行為は、
前記ポータブル電子システムのユーザの現在の視野または投影される視野に基づいて、前記アクティブメモリとローカルメモリとの間でブロックをページングすること、および／または
非アクティブ動作ステータスへの遷移に応じて、前記ブロックを前記ローカルメモリ内に存続させること
を含む、請求項１７または請求項１８に記載の非一過性コンピュータ可読媒体。
仮想コンテンツを前記ユーザにレンダリングするために、前記アクティブメモリからのブロックを使用することは、
視覚的オクルージョン処理のために前記ブロックを使用することと、
物理学ベースの相互作用および／または環境推測を算出することと
を含む、請求項１７または請求項１８に記載の非一過性コンピュータ可読媒体。