JP2022522582A - ダイナミックスケジューリングのためのシステムおよび方法 - Google Patents

ダイナミックスケジューリングのためのシステムおよび方法 Download PDF

Info

Publication number
JP2022522582A
JP2022522582A JP2021533685A JP2021533685A JP2022522582A JP 2022522582 A JP2022522582 A JP 2022522582A JP 2021533685 A JP2021533685 A JP 2021533685A JP 2021533685 A JP2021533685 A JP 2021533685A JP 2022522582 A JP2022522582 A JP 2022522582A
Authority
JP
Japan
Prior art keywords
wearable display
console
head wearable
data
time period
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021533685A
Other languages
English (en)
Inventor
ガン ルー,
ユーティン ファン,
ドン チェン,
チー ク,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Meta Platforms Technologies LLC
Original Assignee
Facebook Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Facebook Technologies LLC filed Critical Facebook Technologies LLC
Publication of JP2022522582A publication Critical patent/JP2022522582A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W72/00Local resource management
    • H04W72/12Wireless traffic scheduling
    • H04W72/1263Mapping of traffic onto schedule, e.g. scheduled allocation or multiplexing of flows
    • H04W72/1273Mapping of traffic onto schedule, e.g. scheduled allocation or multiplexing of flows of downlink data flows
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/32Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using local area network [LAN] connections
    • A63F13/323Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using local area network [LAN] connections between game devices with different hardware characteristics, e.g. hand-held game devices connectable to game consoles or arcade machines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/437Interfacing the upstream path of the transmission network, e.g. for transmitting client requests to a VOD server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4436Power management, e.g. shutting down unused components of the receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W72/00Local resource management
    • H04W72/12Wireless traffic scheduling
    • H04W72/1263Mapping of traffic onto schedule, e.g. scheduled allocation or multiplexing of flows
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W72/00Local resource management
    • H04W72/12Wireless traffic scheduling
    • H04W72/1263Mapping of traffic onto schedule, e.g. scheduled allocation or multiplexing of flows
    • H04W72/1268Mapping of traffic onto schedule, e.g. scheduled allocation or multiplexing of flows of uplink data flows
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/16Use of wireless transmission of display information

Abstract

頭部ウェアラブルディスプレイとコンソールとの間のダイナミックスケジューリングのためのシステム、方法、およびデバイスが提供されることが本出願に開示されている。頭部ウェアラブルディスプレイは、第1の時間インスタンスにおいて、コンソールへの第1のダウンリンク送信を開始することができる。頭部ウェアラブルディスプレイは、第1のダウンリンク送信のデータの転送が完了する時の第2の時間インスタンスにおいて、第1のダウンリンク送信の終わりをコンソールにダイナミックに指示することができる。頭部ウェアラブルディスプレイは、第2の時間インスタンスに対して、コンソールにアップリンク送信をダイナミックに始めさせることができる。頭部ウェアラブルディスプレイは、アップリンク送信のデータの転送が完了する時の第3の時間インスタンスにおいて、第2のダウンリンク送信をダイナミックに始動させる旨の指示を受信することができる。【選択図】図1A

Description

関連出願の相互参照
本出願は、2019年3月8日に出願された米国特許出願第62/815,834号、および2020年1月31日に出願された米国特許出願第16/778,488号の優先権を主張するものであり、これらの内容全体があらゆる目的で参照により本明細書に組み込まれている。
本開示は、一般的に、ダイナミックスケジューリングのためのシステムおよび方法を含むがこれらに限定されないディスプレイシステムおよび方法に関する。
ウェアラブルディスプレイ技術は、対応するディスプレイデバイスを着用するユーザに仮想現実または拡張現実体験を提供することができる。該技術は、ユーザが対応する画像と対話できるようにする一連のコンピュータ生成画像を提供可能である。例えば、ディスプレイデバイスは、ディスプレイデバイスの視野がユーザの自然な視野に取って代わるようにユーザの視野上にまたは視野内に位置付けられる頭部ウェアラブルデバイスを含むことができる。
ダイナミックスケジューリングのためのデバイス、システム、および方法が本明細書に提供される。頭部ウェアラブルディスプレイ(HWD)は、頭部ウェアラブルディスプレイのユーザに仮想現実(VR)、拡張現実(AR)、または複合現実(MR)アプリケーション(例えば、VR/AR/MR体験)を提供するためのコンソールと接続可能である。いくかの実施形態では、コンソールと頭部ウェアラブルディスプレイとの間の通信の1つまたは複数の態様は、柔軟なスケジューリングおよび改善された効率を提供するためにダイナミックにスケジューリングまたは修正可能である。例えば、通信のウェイクアップ時間期間は、送信のための1つまたは複数のダウンリンク(DL)期間および/またはアップリンク(UL)期間を有するダイナミックデータ送信間隔を含むことができる。DL送信はHWDからコンソールまでの送信を指すことができる。UP送信はコンソールからHWDまでの送信を指すことができる。いくつかの実施形態では、データ送信間隔の継続時間は、例えば、対応するデータ送信間隔においてダイナミックに判断または修正(例えば、延長、短縮)可能である。データ送信間隔のダウンリンク期間および/またはアップリンク期間の継続時間は、柔軟なスケジューリングを提供するために対応するダウンリンク期間および/またはアップリンク期間において修正(例えば、延長、短縮)可能である。データ送信間隔に対するDL/ULペアの数は、例えば、さらなるDL/ULペアを追加するためにまたはDL/ULペアを延長するために、データ送信間隔において修正可能である。いくつかの実施形態では、後続のウェイクアップ時間および/またはウェイクアップ間隔は、現在のまたは以前のデューティサイクルの終わりに判断され得る。デューティサイクルは、継続的にではなく断続的に動作する機械、デバイス、またはコンピューティングデバイスのサイクルまたは動作(例えば、アクティブ期間)を含むまたはこれに対応することができる。いくつかの実施形態では、デューティサイクルは、デバイス(例えば、HWD、コンソール)が非アクティブであるまたはオフである時の時間期間と比較して、デバイスがアクティブである(例えば、オンである、アクティブ期間、パワーサイクル)時間の割合またはパーセンテージを含むことができる。よって、例えば、固定期間を有するデューティサイクルと対照的に、ダイナミックスケジューリングは、電力を効率的に改善しかつ節電することができる。
提供される内容は特許請求の範囲に示されている。
少なくとも1つの態様では、方法が提供される。方法は、頭部ウェアラブルディスプレイによって第1の時間インスタンスにおいて、コンソールへの第1のダウンリンク送信を開始することを含むことができる。方法は、頭部ウェアラブルディスプレイによってコンソールに、第1のダウンリンク送信のデータの転送が完了する時の第2の時間インスタンスにおいて、第1のダウンリンク送信の終わりをダイナミックに指示することを含むことができる。方法は、頭部ウェアラブルディスプレイによって、第2の時間インスタンスに対して、コンソールにアップリンク送信をダイナミックに始めさせることを含むことができる。方法は、頭部ウェアラブルディスプレイによって、アップリンク送信のデータの転送が完了する時の第3の時間インスタンスにおいて、第2のダウンリンク送信をダイナミックに始動させる旨の指示を受信することを含むことができる。
いくつかの実施形態では、方法は、頭部ウェアラブルディスプレイとコンソールとの間の転送されるデータ量およびチャネルの性質に従って、頭部ウェアラブルディスプレイとコンソールとの間のデータ送信間隔に対して予想される継続時間を推定することを含むことができる。データ送信間隔は、第1のダウンリンク送信およびアップリンク送信を含むことができる。方法は、頭部ウェアラブルディスプレイによって、第1のダウンリンク送信の時間期間を推定することを含むことができる。方法は、頭部ウェアラブルディスプレイによって、第1のダウンリンク送信に対して送信するためのさらなるデータがあると判断することと、該判断に応答して、頭部ウェアラブルディスプレイによって、第1のダウンリンク送信の推定された時間期間を超えてデータをコンソールに転送し続けることとを含むことができる。
いくつかの実施形態では、方法は、コンソールによって、アップリンク送信の時間期間を推定することを含むことができる。方法は、コンソールによって、アップリンク送信に対して送信するためのさらなるデータがあると判断することと、該判断に応答して、コンソールによって、アップリンク送信の推定された時間期間を超えてデータを頭部ウェアラブルディスプレイに転送し続けることとを含むことができる。方法は、頭部ウェアラブルディスプレイによって第4の時間インスタンスにおいて、第4の時間インスタンスで利用可能なデータに従って頭部ウェアラブルディスプレイとコンソールとの間のデータ送信間隔での1つまたは複数のリンクペアの追加をダイナミックにサポートすることを含むことができる。いくつかの実施形態では、それぞれのリンクペアは、少なくとも1つのダウンリンク送信および少なくとも1つのアップリンク送信を含むことができる。
いくつかの実施形態では、第1のウェイクアップ時間期間は、第1のダウンリンク送信、アップリンク送信、および第2のダウンリンク送信を含むことができる。方法は、コンソールによって、さらなる1つまたは複数のダウンリンク送信および1つまたは複数のアップリンク送信をサポートするために第2のウェイクアップ時間期間を追加するようにダイナミックに判断することを含むことができる。方法は、第1のウェイクアップ時間期間と第2のウェイクアップ時間期間との間のスリープ時間期間の継続時間をダイナミックに構成することを含むことができる。
少なくとも1つの態様では、頭部ウェアラブルディスプレイが提供される。頭部ウェアラブルディスプレイは、第1の時間インスタンスにおいて、コンソールへの第1のダウンリンク送信を開始するように構成される1つまたは複数のプロセッサを含むことができる。1つまたは複数のプロセッサは、第1のダウンリンク送信のデータの転送が完了する時の第2の時間インスタンスにおいて、第1のダウンリンク送信の終わりをコンソールにダイナミックに指示するように構成可能である。1つまたは複数のプロセッサは、コンソールに第2の時間インスタンスに対してアップリンク送信をダイナミックに始めさせるように構成可能である。1つまたは複数のプロセッサは、アップリンク送信のデータの転送が完了する時の第3の時間インスタンスにおいて、第2のダウンリンク送信をダイナミックに始動させる旨の指示を受信するように構成可能である。
いくつかの実施形態では、1つまたは複数のプロセッサは、第1のダウンリンク送信の期間を推定するように構成可能である。1つまたは複数のプロセッサは、第1のダウンリンク送信に対して送信するためのさらなるデータがあると判断するように、かつ、該判断に応答して、第1のダウンリンク送信の推定された時間期間を超えてデータをコンソールに転送し続けるように構成可能である。1つまたは複数のプロセッサは、コンソールにアップリンク送信の時間期間を推定させるように構成可能である。
いくつかの実施形態では、1つまたは複数のプロセッサは、アップリンク送信に対して送信するためのさらなるデータがあるとコンソールに判断させるように、および、該判断に応答して、コンソールに、アップリンク送信の推定された時間期間を超えてデータを頭部ウェアラブルディスプレイに転送し続けさせるように構成可能である。1つまたは複数のプロセッサは、第4の時間インスタンスにおいて、第4の時間インスタンスで利用可能なデータに従って頭部ウェアラブルディスプレイとコンソールとの間データ送信間隔での1つまたは複数のリンクペアの追加をダイナミックにサポートするように構成可能である。いくつかの実施形態では、それぞれのリンクペアは、少なくとも1つのダウンリンク送信および少なくとも1つのアップリンク送信を含むことができる。
いくつかの実施形態では、第1のウェイクアップ時間期間は、第1のダウンリンク送信、アップリンク送信、および第2のダウンリンク送信を含むことができ、1つまたは複数のプロセッサは、さらなる1つまたは複数のダウンリンク送信および1つまたは複数のアップリンク送信をサポートするための第2のウェイクアップ時間期間の追加をダイナミックにサポートするように構成可能である。1つまたは複数のプロセッサは、第1のウェイクアップ時間期間と第2のウェイクアップ時間期間との間のスリープ時間期間の継続時間をダイナミックに構成するように構成可能である。
少なくとも1つの態様では、命令を記憶する非一時的なコンピュータ可読媒体が提供される。命令は、1つまたは複数のプロセッサによって実行される時、1つまたは複数のプロセッサに、第1の時間インスタンスにおいてコンソールへの第1のダウンリンク送信を開始させることができる。命令は、1つまたは複数のプロセッサによって実行される時、1つまたは複数のプロセッサに、第1のダウンリンク送信のデータの転送が完了する時の第2の時間インスタンスにおいて、第1のダウンリンク送信の終わりをコンソールにダイナミックに指示させることができる。命令は、1つまたは複数のプロセッサによって実行される時、1つまたは複数のプロセッサに、コンソールが第2の時間インスタンスに対してアップリンク送信をダイナミックに始めさせるようにすることができる。命令は、1つまたは複数のプロセッサによって実行される時、1つまたは複数のプロセッサに、アップリンク送信のデータの転送が完了する時の第3の時間インスタンスにおいて、第2のダウンリンク送信をダイナミックに始動させる旨の指示を受信させることができる。
いくつかの実施形態では、命令は、1つまたは複数のプロセッサによって実行される時、1つまたは複数のプロセッサに、第1のダウンリンク送信の時間期間を推定させることができる。命令は、1つまたは複数のプロセッサによって実行される時、1つまたは複数のプロセッサに、第1のダウンリンク送信に対して送信するためのさらなるデータがあると判断させ、かつ、該判断に応答して、第1のダウンリンク送信の推定された時間期間を超えてデータをコンソールに転送し続けさせることができる。
これらのならびに他の態様および実装形態について、以下に詳細に論じる。前述の情報および以下の詳細な説明は、さまざまな態様および実装形態の実例を含み、かつ、特許請求される態様および実装形態の特質および特色を理解するための概説または枠組みを提供するものである。図面は、さまざまな態様および実装形態の例証およびさらなる理解を与えるものであり、本明細書に組み込まれかつこの一部を構成している。
添付の図面は正確な縮尺率であることは意図されていない。さまざまな図面における同様の参照番号および名称は同様の要素を指示する。明確にするために、あらゆるコンポーネントがあらゆる図面に標示可能であるとは限らない。
本開示の例示の実装形態に従って、コンソールと頭部ウェアラブルディスプレイとの間の通信のためにダイナミックにスケジューリングするための人工現実システムの一実施形態のブロック図である。 本開示の例示の実装形態による頭部ウェアラブルディスプレイの図である。 本開示の例示の実装形態による、変動する継続時間を有する複数のウェイクアップ間隔のタイミングダイアグラムである。 本開示の例示の実装形態による、変動する継続時間のダウンリンク期間およびアップリンク期間を有するウェイクアップ時間期間のタイミングダイアグラムである。 本開示の例示の実装形態に従って、コンソールと頭部ウェアラブルディスプレイとの間の通信のためにダイナミックにスケジューリングするためのプロセスまたは方法を示すフローチャートである。 本開示の例示の実装形態に従って、コンソールと頭部ウェアラブルディスプレイとの間の通信のためにダイナミックにスケジューリングするためのプロセスまたは方法を示すフローチャートである。 本開示の例示の実装形態に従って、コンソールと頭部ウェアラブルディスプレイとの間の通信のためにダイナミックにスケジューリングするためのプロセスまたは方法を示すフローチャートである。 本開示の例示の実装形態によるコンピューティング環境のブロック図である。
ある特定の実施形態を詳細に示す図に移る前に、本開示が、本明細書に記載されかつ図に示される詳細または方法論に限定されないことは理解されるべきである。また、本明細書に使用される術語が単に説明の目的のためのものであり、かつ限定するものとみなされるべきではないことは理解されるべきである。
以下の本発明のさまざまな実施形態の説明を読み取るために、本明細書の節およびこれらの対応する内容の以下の説明は役立ち得るものである:
- 節Aでは、コンソールと頭部ウェアラブルディスプレイとの間の通信のためにダイナミックにスケジューリングするためのデバイス、システム、および方法の実施形態を説明している。
- 節Bでは、コンピューティングシステムの実施形態を説明している。
A.ダイナミックにスケジューリングする
本開示の主題は、コンソール(例えば、制御ユニット)と頭部ウェアラブルディスプレイとの間の通信用のダイナミックスケジューリングおよびデューティサイクル方式のためのシステムおよび方法を対象とする。このアプリケーションでは、コンソールとペアリングされた頭部ウェアラブルディスプレイ(HWD)の無線AR/VR/MR(人工現実と総称されるまたは一般的に言われる時がある)構成に対処するものとする。頭部ウェアラブルディスプレイは、例えば、無線60GHz通信リンクを通して、コンソールと通信する。1つの態様では、頭部ウェアラブルディスプレイは、節電するために周期的にイネーブルかつディスエーブルにされる。頭部ウェアラブルディスプレイは、コンソールと通信するためにウェイクアップ(例えば、動作のアクティブモード、高電力消費)時間期間においてイネーブルにされ得、かつ、コンソールとの通信が必要ではない時のスリープ(動作の非アクティブまたは低電力モード、低電力消費)時間期間においてディスエーブルにされ得る。一般に、ウェイクアップ時間期間およびスリープ時間期間は、固定され調整不可能である。しかしながら、センサデータ量およびセンサデータの処理量は、例えば、仮想現実/拡張現実(VR/AR)アプリケーションにおいてユーザの移動に従って変更の可能性がある。さらに、頭部ウェアラブルディスプレイとコンソールとの間の通信リンク(例えば、60GHzリンク)のチャネル条件は、ユーザの移動に従って変更の可能性がある。
本明細書に説明されるデバイス、システム、および方法は、変動するトラフィックデータおよび/またはチャネル条件に対応するように、デューティサイクルをダイナミックに調整する、スケジューリングする、および制御するために提供可能である。1つの態様では、ウェイクアップ時間期間を含むウェイクアップ間隔はダイナミックに調整される。ウェイクアップ間隔は、ウェイクアップ時間期間の始まりと後続のウェイクアップ時間期間の始まりとの間の時間期間であってよい。プロセスまたはチャネルリンク状態に対する(例えば、HWDのセンサを介して取得および/または生成された)検知データ量に応じて、ウェイクアップ間隔は増大または減少させることができる。
1つのアプローチでは、ウェイクアップ時間期間はダイナミックに調整される。ウェイクアップ時間期間は、複数のダウンリンク(DL)時間期間およびアップリンク(UL)時間期間を含んでよい。1つの例では、DL時間期間およびUL時間期間のそれぞれはダイナミックに調整可能である。別の例では、ウェイクアップ間隔内のDLおよびULペアの数は調整可能である。ウェイクアップ間隔は固定されなくてもよいため、新たなウェイクアップ時間期間は現在のデューティサイクルの終わりに判断可能である、または、2次通信リンク(例えば、Bluetooth、Wifi)はウェイクアッププロセスを開始するために用いられ得る。
図1Aを参照すると、ダイナミックスケジューリングのための例示の人工現実システム100が提供される。概要として、システム100はコンソール102および頭部ウェアラブルディスプレイ140を含むことができる。頭部ウェアラブルディスプレイ140(例えば、ゴーグル、眼鏡、頭部装着デバイス、頭部ウェアラブルデバイス)は、例えば、頭部ウェアラブルディスプレイ140のユーザにとっての少なくとも1つのユーザセッションのために、頭部ウェアラブルディスプレイ140とコンソール102との間でデータを通信しかつ転送するためにコンソール102(例えば、パック)とペアリング可能である。ユーザセッションは、頭部ウェアラブルディスプレイ140による、VR体験、AR体験、またはMR体験を含むことができる。頭部ウェアラブルディスプレイ140は、頭部ウェアラブルディスプレイ140が、コンソール102からデータを転送しかつ受信するためにスリープ期間120から抜けてウェイクアップ時間期間110を開始することができるウェイクアップ間隔108におけるデータ転送(例えば、構成設定など)を行うことができる。ウェイクアップ時間期間110は、頭部ウェアラブルディスプレイ140とコンソール102との間のデータ量およびチャネル130の1つまたは複数の性質に部分的に基づいてダイナミックにスケジューリング可能である。頭部ウェアラブルディスプレイ140および/またはコンソール102は、データ送信間隔112のダウンリンク114および/またはアップリンク116の継続時間が、例えば、対応するダウンリンク114および/またはアップリンク116の間にダイナミックに判断されるように、ウェイクアップ時間期間110のデータ送信間隔112をダイナミックにスケジューリング可能である。
いくつかの実施形態では、人工現実システム環境100は、ユーザが着用する頭部ウェアラブルディスプレイ140、および頭部ウェアラブルディスプレイ140に人工現実のコンテンツを提供するコンソール102を含む。頭部ウェアラブルディスプレイ(HWD)は、頭部装着ディスプレイ(HMD)、頭部装着デバイス(HMD)、頭部ウェアラブルデバイス(HWD)、頭部着用ディスプレイ(HWD)、または頭部着用デバイス(HWD)と称されて、これらを含んで、またはこれらの一部であってよい。頭部ウェアラブルディスプレイ140は、この頭部ウェアラブルディスプレイ140の場所および/または向きを検出し、かつ頭部ウェアラブルディスプレイ140の検出された場所および/または向きをコンソール102に提供することができる。コンソール102は、頭部ウェアラブルディスプレイ140の検出された場所および/または向きのみならず、人工現実に対するユーザ入力に従って人工現実の画像を指示する画像データを生成し、かつ、該画像データを提示のために頭部ウェアラブルディスプレイ140に送信してよい。いくつかの実施形態では、人工現実システム環境100は、図1Aに示されるより多くの、少ない、またはこれと異なるコンポーネントを含む。いくつかの実施形態では、人工現実システム環境100の1つまたは複数のコンポーネントの機能性は、ここで説明されるのと異なるやり方でコンポーネントの間で分散され得る。例えば、コンソール102の機能性の一部は、頭部ウェアラブルディスプレイ140によって実行されてよい。例えば、頭部ウェアラブルディスプレイ140の機能性の一部は、コンソール102によって実行されてよい。いくつかの実施形態では、コンソール102は頭部ウェアラブルディスプレイ140の一部として統合される。
人工現実システム100のさまざまなコンポーネントおよび要素は、図4に示されかつ後述されるコンピューティング環境のコンポーネントまたは要素上にまたはこれらを使用して実装されてよい。例えば、コンソール102および頭部ウェアラブルディスプレイ140は、図4に示されかつ後述されるコンピューティングシステム414と同様のコンピューティングシステムを含んでまたは組み込んでよい。コンソール102および頭部ウェアラブルディスプレイ140は、1つまたは複数の処理ユニット416、ストレージ418、ネットワークインターフェース420、ユーザ入力デバイス422、および/もしくはユーザ出力デバイス424を含んでよい。
コンソール102は、コンピューティングシステムまたはWiFiデバイスを含むことができる。いくつかの実施形態では、コンソール102は、例えば、ウェアラブルコンピューティングデバイス(例えば、スマートウォッチ、スマート眼鏡、頭部ウェアラブルディスプレイ)、スマートフォン、その他の携帯電話、デバイス(例えば、消費者装置)、デスクトップコンピュータ、ラップトップコンピュータ、仮想現実(VR)パック、VRパーソナルコンピュータ(PC)、VRコンピューティングデバイス、頭部ウェアラブルデバイスとして実装可能である、または、分散コンピューティングデバイスで実装可能である。コンソール102は、VR、拡張現実(AR)、および/または複合現実(MR)体験を提供するために実装可能である。いくつかの実施形態では、コンソール102は、プロセッサ104、ストレージデバイス106、ネットワークインターフェース、ユーザ入力デバイス、および/またはユーザ出力デバイスなど、従来の、専用の、またはカスタムコンピュータコンポーネントを含むことができる。実施形態では、コンソール102は、図4に示されかつ後述されるデバイスのいくつかの要素を含んでよい。
頭部ウェアラブルディスプレイ140は、コンピューティングシステムまたはWiFiデバイスを含むことができる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、例えば、ウェアラブルコンピューティングデバイス(例えば、スマートウォッチ、スマート眼鏡、頭部ウェアラブルディスプレイ)、スマートフォン、その他の携帯電話、デバイス(例えば、消費者装置)、デスクトップコンピュータ、ラップトップコンピュータ、仮想現実(VR)パック、VRパーソナルコンピュータ(PC)、VRコンピューティングデバイス、頭部ウェアラブルデバイスとして実装可能である、または、分散コンピューティングデバイスで実装可能である。頭部ウェアラブルディスプレイ140は、VR、拡張現実(AR)、および/または複合現実(MR)体験を頭部ウェアラブルディスプレイ140の(例えば、ディスプレイを着用している)ユーザに提供するために実装可能である。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、プロセッサ104、ストレージデバイス106、ネットワークインターフェース、ユーザ入力デバイス、および/またはユーザ出力デバイスなど、従来の、専用の、またはカスタムコンピュータコンポーネントを含むことができる。実施形態では、頭部ウェアラブルディスプレイ140は、図4に示されかつ後述されるデバイスのいくつかの要素を含んでよい。
コンソール102および頭部ウェアラブルディスプレイ140は、1つまたは複数のプロセッサ104を含むことができる。1つまたは複数のプロセッサ104は、コンソール102および/または頭部ウェアラブルディスプレイ140に対する入力データを前処理するための、および/またはコンソール102および/または頭部ウェアラブルディスプレイ140に対する出力データを後処理するための任意のロジック、回路網、および/または処理コンポーネント(例えば、マイクロプロセッサ)を含むことができる。1つまたは複数のプロセッサ104は、コンソール102および/または頭部ウェアラブルディスプレイ140の1つまたは複数の動作を構成、制御、および/または管理するためのロジック、回路網、処理コンポーネント、および/または機能性を提供可能である。例えば、プロセッサ104は、ウェイクアップ時間期間110、データ送信間隔112、ダウンリンク114、アップリンク116、およびスリープ期間120を含むがこれらに限定されないデータおよびメトリックを受信してよい。
コンソール102および頭部ウェアラブルディスプレイ140は、ストレージデバイス106を含むことができる。ストレージデバイス106は、コンソール102および頭部ウェアラブルディスプレイ140と関連付けられた任意のタイプまたは形式のデータを記憶、保持、または維持するように設計または実装可能である。例えば、コンソール102および頭部ウェアラブルディスプレイ140は、ウェイクアップ時間期間110、データ送信間隔112、ダウンリンク114、アップリンク116、およびスリープ期間120の1つまたは複数に対応するデータを記憶することができる。ストレージデバイス106は、コンソール102の内部に、スタティックランダムアクセスメモリ(SRAM)または内部SRAMを含むことができる。実施形態では、ストレージデバイス106は、コンソール102の集積回路内に含まれ得る。ストレージデバイス106は、メモリ(例えば、メモリ、メモリユニット、ストレージデバイスなど)を含むことができる。メモリは、本開示に説明されるさまざまなプロセス、レイヤ、およびモジュールを完了させるまたは促進させるためのデータおよび/またはコンピュータコードを記憶するための1つまたは複数のデバイス(例えば、RAM、ROM、フラッシュメモリ、ハードディスクストレージなど)を含んでよい。メモリは、揮発性メモリまたは不揮発性メモリであってまたは含んでよく、かつ本開示に説明されるさまざまなアクティビティおよび情報構造をサポートするための、データベースコンポーネント、オブジェクトコードコンポーネント、スクリプトコンポーネント、または任意の他のタイプの情報構造を含むことができる。例示の実施形態によると、メモリは、処理回路を介してプロセッサ104に通信可能に接続され、かつ(例えば、処理回路および/またはプロセッサによって)本明細書に説明される1つまたは複数のプロセスもしくは方法(例えば、方法300)を実行するためのコンピュータコードを含む。
コンソール102は、頭部ウェアラブルディスプレイ140への1つまたは複数のチャネル130を確立できる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、コンソール102への1つまたは複数のチャネル130を確立できる。チャネル130は、コンソール102と頭部ウェアラブルディスプレイ140との間で確立された接続(例えば、無線接続)、セッション(例えば、ユーザセッション)、またはリンクを含むことができる。チャネル130は、コンソール102と頭部ウェアラブルディスプレイ140との間で確立された、大容量、低遅延、および省電力接続を含むことができる。いくつかの実施形態では、チャネル130は、ミリ波スペクトル接続または30GHz~300GHzの接続周波数を含むことができるがこれらに限定されない。いくつかの実施形態では、チャネル130は、60GHz周波数接続(例えば、60GHZ WiFi、IEEE 802.11 ad)を含むことができるがこれに限定されない。チャネル130は、頭部ウェアラブルディスプレイ140のユーザに対するVR体験、AR体験、またはMR体験を提供するまたはサポートするために使用可能である。いくつかの実施形態では、チャネル130は、Bluetooth(BT)、Bluetooth low energy(BLE)、および/または低電力WiFiを含むがこれらに限定されない、近距離無線通信技術の種々の形式を含むことができ、これを使用して確立できる。
頭部ウェアラブルディスプレイ140および/またはコンソール102は、1つまたは複数のウェイクアップ間隔108を確立可能である。ウェイクアップ間隔108は、頭部ウェアラブルディスプレイ140とコンソール102との間の送信または通信のための少なくとも1つのウェイクアップ時間期間110および少なくとも1つのスリープ期間120を含むことができる。いくつかの実施形態では、ウェイクアップ間隔108は、例えば、現在のまたは以前のウェイクアップ時間期間110においてダイナミックに判断またはスケジューリング可能である。いくつかの実施形態では、ウェイクアップ間隔108の継続時間または長さは、頭部ウェアラブルディスプレイ140とコンソール102との間の柔軟なスケジューリングを提供するために対応するウェイクアップ間隔108において修正(例えば、延長、短縮)可能である。ウェイクアップ時間期間110は、頭部ウェアラブルディスプレイ140とコンソール102との間の通信期間、構成期間、および/またはデータ転送期間を含むまたはこれらに対応することができる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140およびコンソール102は、限定はされないが、構成設定、更新、場所情報、および/またはユーザ設定などのデータおよび情報を交換するためにウェイクアップ時間期間110において通信可能である。スリープ期間120(例えば、スリープモード)は、頭部ウェアラブルディスプレイ140および/またはコンソール102が、例えば、電力使用を浪費しないように、オフにされる、非アクティブにされる、省電力モードである、待機モードである、または最低レベルの電力を使用している時間期間を含むまたはこれに対応することができる。
ウェイクアップ時間期間110は、データを受信しかつ転送するために頭部ウェアラブルディスプレイ140およびコンソール102に対する少なくとも1つのデータ送信間隔112を含むことができる。ウェイクアップ時間期間110は、コンソール102および/または頭部ウェアラブルディスプレイ140によってダイナミックにスケジューリング可能である。例えば、いくつかの実施形態では、後続のウェイクアップ時間期間110の開始時間または始まりは、以前のウェイクアップ時間期間110またはデューティサイクルの終わりに判断され得る。ウェイクアップ時間期間110の継続時間または長さは、例えば、1つまたは複数のリンクペアを対応するウェイクアップ時間期間110に追加する、または1つまたは複数のリンクペアを対応するウェイクアップ時間期間110から除去することによって、ウェイクアップ時間期間110においてダイナミックに修正、更新、または調整(例えば、延長、短縮)可能である。ウェイクアップ時間期間110は、頭部ウェアラブルディスプレイ140とコンソール102との間のデータ量および/またはチャネル130の性質に部分的に基づいて、ダイナミックに判断またはスケジューリング可能である(例えば、固定されたスケジュールに従わなくてよい)。
データ送信間隔112は、少なくとも1つのダウンリンク期間114(ダウンリンク114と称される時がある)および少なくとも1つのアップリンク期間116(アップリンク116と称される時がある)を含むことができる。コンソール102および/または頭部ウェアラブルディスプレイ140は、データ送信間隔112の継続時間または長さをダイナミックに判断可能である。例えば、頭部ウェアラブルディスプレイ140および/またはコンソール102は、データ送信間隔112において、対応するデータ送信間隔112が含むことができるのはどのくらいのリンクペアかをダイナミックに判断可能である。リンクペアは、少なくとも1つのダウンリンク期間114および少なくとも1つのアップリンク期間116を含むことができる。それぞれのリンクペアはダウンリンク期間114およびアップリンク期間116を含むことができる。いくつかの実施形態では、データ送信間隔112は、単一のリンクペア(例えば、1ダウンリンク114、1アップリンク116)、または複数のリンクペア(例えば、複数のダウンリンク114、複数のアップリンク)を含むことができる。
データ送信間隔112の継続時間または長さは、例えば、ダウンリンク114および/またはアップリンク116の継続時間を修正(例えば、延長、短縮)することによってデータ送信間隔112においてダイナミックに修正、更新、または調整(例えば、延長、短縮)可能である。いくつかの実施形態では、データ送信間隔112の継続時間または長さは、例えば、1つまたは複数のリンクペアを対応するデータ送信間隔112に追加すること、または1つまたは複数のリンクペアを対応するデータ送信間隔112から除去することによって、データ送信間隔112においてダイナミックに修正、更新、または調整(例えば、延長、短縮)可能である。
いくつかの実施形態では、ダウンリンク期間114は、頭部ウェアラブルディスプレイ140からコンソール102までのデータ転送を含むことができる。ダウンリンク期間114は、ダイナミックに調整可能/修正可能な継続時間または時間長を含むまたはこれに対応することができる。例えば、ダウンリンク期間114は、固定された継続時間なしで開始可能であり、ダウンリンク114の継続時間は、頭部ウェアラブルディスプレイ140および/またはコンソール102によって対応するダウンリンク114の間に判断可能である。いくつかの実施形態では、後続のダウンリンク114を実行するかどうかは頭部ウェアラブルディスプレイ140および/またはコンソール102によって以前のアップリンク116の終わりにまたはこれの間に判断可能である。ダウンリンク114のダイナミックな継続時間は、ダウンリンク114の間に転送されるデータ量、および/または、頭部ウェアラブルディスプレイ140とコンソール102との間のチャネル130の性質または特性に部分的に基づいて判断可能である。
いくつかの実施形態では、アップリンク期間116はコンソール102から頭部ウェアラブルディスプレイ140までのデータ転送のための持続時間を含むことができる。アップリンク期間116は、ダイナミックに調整可能/修正可能な継続時間または時間長を含むことができる。例えば、アップリンク期間116は、固定された継続時間なしで開始可能であり、アップリンク116の継続時間は、頭部ウェアラブルディスプレイ140および/またはコンソール102によって対応するアップリンク116の間に判断可能である。いくつかの実施形態では、後続のアップリンク116を実行するかどうかは、頭部ウェアラブルディスプレイ140および/またはコンソール102によって以前のダウンリンク114の終わりにまたはこれの間に判断可能である。アップリンク116のダイナミックな継続時間は、アップリンク116の間に転送されるデータ量、および/または、頭部ウェアラブルディスプレイ140とコンソール102との間のチャネル130の性質に部分的に基づいて判断可能である。
コンソール102および/または頭部ウェアラブルディスプレイ140は、チャネル130の1つまたは複数の性質(例えば、状態、速度、帯域幅)を判断するためにチャネル130に対して計測を行うまたは実行することができる。この計測は、状態計測(例えば、オン、オフ、アクティブ化)、チャネル130の可用性、接続速度、信号対雑音比、遅延値、電力消費値、および/またはチャネル130の信頼性を含むことができる。コンソール102および/または頭部ウェアラブルディスプレイ140は、1つまたは複数の時間インスタンス118を生成または確立することができる。時間インスタンス118は、特定の時点、時間期間、時間範囲、および/または時間値を含むまたはこれらに対応することができる。いくつかの実施形態では、時間インスタンス118は、ダウンリンク期間114とアップリンク期間116との間の時間長または継続時間を含むまたはこれに対応することができる。
いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、ユーザが着用可能であり、かつ人工現実体験をユーザに提示するまたは提供することができる電子部品である。頭部ウェアラブルディスプレイ140は、1つまたは複数の画像、ビデオ、オーディオ、またはこれらの何らかの組み合わせをレンダリングして、人工現実体験をユーザに提供してよい。いくつかの実施形態では、オーディオは、頭部ウェアラブルディスプレイ140、コンソール102、またはこの両方からオーディオ情報を受信し、かつ該オーディオ情報に基づいてオーディオを提示する外部デバイス(例えば、スピーカおよび/またはヘッドホン)を介して提示される。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、センサ142、視標追跡部144、手追跡部146、通信インターフェース148、画像レンダラ150、電子ディスプレイ152、レンズ154、および補償器156を含む。これらのコンポーネントは、共に動作して、頭部ウェアラブルディスプレイ140の場所、および頭部ウェアラブルディスプレイ140を着用しているユーザの視線方向を検出し、かつ、頭部ウェアラブルディスプレイ140の検出された場所および/または向きに対応する人工現実内の視界の画像をレンダリングすることができる。他の実施形態では、頭部ウェアラブルディスプレイ140は、図1Aに示されるより多くの、少ない、またはこれと異なるコンポーネントを含む。
いくつかの実施形態では、センサ142は、頭部ウェアラブルディスプレイ140の場所および向きを検出する電子部品、または電子部品およびソフトウェアコンポーネントの組み合わせを含む。センサ142の例は、1つもしくは複数の画像センサ、1つもしくは複数の加速度計、1つもしくは複数のジャイロスコープ、1つもしくは複数の磁力計、または動きおよび/または場所を検出する別の適したタイプのセンサを含むことができる。例えば、1つまたは複数の加速度計は、並進運動(例えば、前/後ろ、上/下、左/右)を測定でき、1つまたは複数のジャイロスコープは、回転運動(例えば、ピッチ、ヨー、ロール)を測定できる。いくつかの実施形態では、センサ142は、並進運動および回転運動を検出し、かつ頭部ウェアラブルディスプレイ140の向きおよび場所を判断する。1つの態様では、センサ142は、頭部ウェアラブルディスプレイ140の以前の向きおよび場所に対する並進運動および回転運動を検出し、かつ検出された並進運動および/または回転運動を蓄積するまたは統合することによって、頭部ウェアラブルディスプレイ140の新たな向きおよび/または場所を判断することができる。頭部ウェアラブルディスプレイ140が20度回転していると検出することに応答して、頭部ウェアラブルディスプレイ140が基準方向から25度の方向に向けられている一例を想定すると、センサ142は、頭部ウェアラブルディスプレイ140がここで、基準方向から45度の方向に面しているまたは向けられていると判断してよい。頭部ウェアラブルディスプレイ140が第2の方向に3フィート移動したと検出することに応答して、頭部ウェアラブルディスプレイ140が第1の方向に基準点から2フィート離れて位置していた別の例を想定して、センサ142は、頭部ウェアラブルディスプレイ140がここで、第1の方向に2フィートおよび第2の方向に3フィートのベクトル乗算で位置していると判断してよい。
いくつかの実施形態では、視標追跡部144は、頭部ウェアラブルディスプレイ140のユーザの視線方向を検出する電子部品、または電子部品およびソフトウェアコンポーネントの組み合わせを含む。いくつかの実施形態では、頭部ウェアラブルディスプレイ140、コンソール102、またはこれらの組み合わせは、頭部ウェアラブルディスプレイ140のユーザの視線方向を組み込んで人工現実の画像データを生成することができる。いくつかの実施形態では、視標追跡部144は、それぞれの視標追跡部144が対応する眼の画像をキャプチャし、かつ眼の視線方向を判断する2つの視標追跡部を含む。1つの例では、視標追跡部144は、眼のキャプチャされた画像に従って、眼の角回転、眼の並進、眼の捻転の変化、および/または眼の形状の変化を判断し、かつ判断された眼の角回転、並進、および捻転の変化に従って、頭部ウェアラブルディスプレイ140に対して対応する視線方向を判断する。1つのアプローチでは、視標追跡部144は、眼の一部分上に所定の基準または構造化パターンを照らしまたは投影し、かつ頭部ウェアラブルディスプレイ140に対する眼の対応する視線方向を判断するように眼の一部分上に投影されたパターンを解析するために眼の画像をキャプチャすることができる。いくつかの実施形態では、視標追跡部144は、ユーザの視線方向を判断するために、頭部ウェアラブルディスプレイ140の向きおよび頭部ウェアラブルディスプレイ140に対する対応する視線方向を組み込む。頭部ウェアラブルディスプレイ140が基準方向から30度の方向に向けられ、かつ頭部ウェアラブルディスプレイ140の対応する視線方向が頭部ウェアラブルディスプレイ140に対して-10度(または350度)である一例を想定すると、視標追跡部144は、ユーザの視線方向が基準方向から20度であると判断してよい。いくつかの実施形態では、頭部ウェアラブルディスプレイ140のユーザは、視標追跡部144をイネーブルまたはディスエーブルにするように(例えば、ユーザ設定によって)頭部ウェアラブルディスプレイ140を構成可能である。いくつかの実施形態では、頭部ウェアラブルディスプレイ140のユーザは、視標追跡部144をイネーブルまたはディスエーブルにするように促される。
いくつかの実施形態では、手追跡部146は、ユーザの手を追跡する電子部品、または電子部品およびソフトウェアコンポーネントの組み合わせを含む。いくつかの実施形態では、手追跡部146は、画像センサ(例えば、カメラ)、および手の形状、場所、および向きを検出できる画像プロセッサを含むまたはこれらに結合される。手追跡部146は、手の検出された形状、場所、および向きを指示する手追跡測定を生じさせてよい。
いくつかの実施形態では、通信インターフェース148は、コンソール102と通信する電子部品、または電子部品およびソフトウェアコンポーネントの組み合わせを含む。通信インターフェース148は、通信リンクを通してコンソール102の通信インターフェース122と通信してよい。通信リンクは無線リンクであってよい。無線リンクの例として、セルラー通信リンク、近距離無線通信リンク、Wi-Fi、Bluetooth、60GHz無線リンク、または任意の通信無線通信リンクを挙げることができる。通信リンクを通して、通信インターフェース148は、頭部ウェアラブルディスプレイ140の判断された場所および/もしくは向き、ユーザの判断された視線方向、ならびに/または手追跡測定を指示するデータをコンソール102に送信してよい。また、通信リンクを通して、通信インターフェース148は、レンダリングされる画像を指示するまたはこれに対応する画像データ、および該画像と関連付けられたさらなるデータをコンソール102から受信してよい。
いくつかの実施形態では、画像レンダラ150は、例えば、人工現実の空間を考慮した変化に従って、表示する1つまたは複数の画像を生成する電子部品、または電子部品およびソフトウェアコンポーネントの組み合わせを含む。いくつかの実施形態では、画像レンダラ150は、本明細書に説明されるさまざまな機能を果たすための命令を実行するプロセッサ(またはグラフィック処理ユニット(GPU))として実装される。画像レンダラ150は、通信インターフェース148を通して、レンダリングされる人工現実の画像を描写する画像データ、およびこの画像と関連付けられたさらなるデータを受信し、かつ電子ディスプレイ152を通して該画像をレンダリングしてよい。いくつかの実施形態では、コンソール102からの画像データは符号化されてよく、画像レンダラ150は画像データを復号して画像をレンダリングしてよい。いくつかの実施形態では、画像レンダラ150は、さらなるデータにおいてコンソール102から、人工現実空間における仮想オブジェクトを指示するオブジェクト情報、および仮想オブジェクトの深さ(または頭部ウェアラブルディスプレイ140からの距離)を指示する深さ情報を受信する。1つの態様では、人工現実の画像、オブジェクト情報、コンソール102からの深さ情報、および/またはセンサ142からの更新されたセンサ測定値に従って、画像レンダラ150は、頭部ウェアラブルディスプレイ140の更新された場所および/または向きに対応するように人工現実の画像を更新するために、シェーディング、再投影、および/またはブレンドを行ってよい。ユーザが、更新されたセンサ測定値に応答して画像全体を再作成するのではなく、初期センサ測定の後に該ユーザの頭部を回転させたと想定して、画像レンダラ150は、更新されたセンサ測定値に従って人工現実内の更新された視界に対応する画像の小部分(例えば、10%)を生成し、かつ再投影によってコンソール102から画像データにおける画像に該部分を付加する。画像レンダラ150は、付加されるエッジにシェーディングおよび/またはブレンドを行ってよい。それ故に、更新されたセンサ測定値に従って人工現実の画像を再作成することなく、画像レンダラ150は人工現実の画像を生成できる。いくつかの実施形態では、画像レンダラ150は、ユーザの手に対応する手モデルの形状、場所、および向きを指示する手モデルデータを受信し、かつ人工現実の画像上に手モデルをオーバーレイする。このような手モデルは、ユーザが人工現実内でのさまざまな対話を行えるようにするための視覚フィードバックとして提示されてよい。
いくつかの実施形態では、電子ディスプレイ152は画像を表示する電子部品である。電子ディスプレイ152は、例えば、液晶ディスプレイまたは有機発光ダイオードディスプレイであってよい。電子ディスプレイ152は、ユーザが見通すことができる透明ディスプレイであってよい。いくつかの実施形態では、頭部ウェアラブルディスプレイ140がユーザによって着用される時、電子ディスプレイ152は、ユーザの眼の近位(例えば、3インチ未満)に位置する。1つの態様では、電子ディスプレイ152は、画像レンダラ150によって生成された画像に従ってユーザの眼に向けて光を発するまたは投影する。
いくつかの実施形態では、レンズ154は、電子ディスプレイ152から受信された光を変える機械部品である。レンズ154は、電子ディスプレイ152からの光を拡大し、かつ該光と関連付けられた光学誤差を補正してよい。レンズ154は、フレネルレンズ、凸レンズ、凹レンズ、フィルタ、または、電子ディスプレイ152からの光を変える任意の適した光学部品であってよい。レンズ154によって、電子ディスプレイ152からの光は瞳に達し、それによって、ユーザは、電子ディスプレイ152が眼に極めて接近しているかに関わらず、電子ディスプレイ152によって表示される画像を見ることができる。
いくつかの実施形態では、補償器156は、いずれのひずみまたは収差も補償するために補償を行う電子部品、または電子部品およびソフトウェアコンポーネントの組み合わせを含む。1つの態様では、レンズ154は、色収差、糸巻形ひずみ、たる形ひずみなどの光学収差を取り入れる。補償器156は、レンズ154によって引き起こされるひずみを補償するために画像レンダラ150からレンダリングされる画像に加えるための補償(例えば、予歪)を判断し、かつ判断された補償を画像レンダラ150からの画像に加えてよい。補償器156は、予歪した画像を電子ディスプレイ152に提供してよい。
いくつかの実施形態では、コンソール102は、レンダリングされるコンテンツを頭部ウェアラブルディスプレイ140に提供する電子部品、または電子部品およびソフトウェアコンポーネントの組み合わせである。1つの態様では、コンソール102は通信インターフェース122およびコンテンツプロバイダ124を含む。これらのコンポーネントは、共に動作して、頭部ウェアラブルディスプレイ140の場所、および頭部ウェアラブルディスプレイ140のユーザの視線方向に対応する人工現実の視界(ユーザのFOV)を判断してよく、かつ、判断された視界に対応する人工現実の画像を指示する画像データを生成可能である。さらに、これらのコンポーネントは、画像と関連付けられたさらなるデータを生成するために共に動作してよい。さらなるデータは、人工現実の画像以外の人工現実を提示することまたはレンダリングすることと関連付けられた情報であってよい。さらなるデータの例として、手モデルデータ、物理空間における頭部ウェアラブルディスプレイ140の場所および向きを仮想空間に変えるためのマッピング情報(または、simultaneous localization and mapping(SLAM)データ)、動きベクトル情報、深さ情報、エッジ情報、オブジェクト情報などが挙げられる。コンソール102は、人工現実の提示のために頭部ウェアラブルディスプレイ140に画像データおよびさらなるデータを提供してよい。他の実施形態では、コンソール102は、図1Aに示されるより多くの、少ない、またはこれと異なるコンポーネントを含む。いくつかの実施形態では、コンソール102は頭部ウェアラブルディスプレイ140の一部として統合される。
いくつかの実施形態では、通信インターフェース122は、頭部ウェアラブルディスプレイ140と通信する電子部品、または電子部品およびソフトウェアコンポーネントの組み合わせである。通信インターフェース122は、通信リンク(例えば、無線リンク)を通してコンソール102の通信インターフェース122と通信する通信インターフェース148の相手部品であってよい。通信リンクを通して、通信インターフェース122は、頭部ウェアラブルディスプレイ140から、頭部ウェアラブルディスプレイ140の判断された場所および/または向き、ユーザの判断された視線方向、および手追跡測定を指示するデータを受信してよい。また、通信リンクを通して、通信インターフェース122は、頭部ウェアラブルディスプレイ140に、レンダリングされる画像を描写する画像データ、および人工現実の画像と関連付けられたさらなるデータを送信してよい。
コンテンツプロバイダ124は、頭部ウェアラブルディスプレイ140の場所および/または向きに従ってレンダリングされるコンテンツを生成するコンポーネントを含むまたはこれに対応することができる。いくつかの実施形態では、コンテンツプロバイダ124は、頭部ウェアラブルディスプレイ140のユーザの視線方向、およびレンダリングされるコンテンツを生成するための手追跡測定値に基づく人工現実におけるユーザとの対話を組み込んでよい。1つの態様では、コンテンツプロバイダ124は、頭部ウェアラブルディスプレイ140の場所および/または向きに従って人工現実の視界を判断する。例えば、コンテンツプロバイダ124は、物理空間における頭部ウェアラブルディスプレイ140の場所を人工現実空間内の場所にマッピングし、かつ人工現実空間におけるマッピングされた場所からマッピングされた向きに対応する方向に沿って人工現実空間の視界を判断する。コンテンツプロバイダ124は、人工現実空間の判断された視界の画像を描写する画像データを生成してよく、かつこの画像データを、通信インターフェース122を通して頭部ウェアラブルディスプレイ140に送信してよい。コンテンツプロバイダ124はまた、手追跡測定値に従って頭部ウェアラブルディスプレイ140のユーザの手に対応する手モデルを生成し、かつ人工現実空間において手モデルの形状、場所、および向きを指示する手モデルデータを生成してよい。いくつかの実施形態では、コンテンツプロバイダ124は、画像と関連付けられた、動きベクトル情報、深さ情報、エッジ情報、オブジェクト情報、手モデルデータなどを含むさらなるデータを生成し、かつ該さらなるデータを画像データと共に通信インターフェース122を通して頭部ウェアラブルディスプレイ140に送信してよい。コンテンツプロバイダ124は、画像を描写する画像データを符号化してよく、かつ符号化されたデータを頭部ウェアラブルディスプレイ140に送信可能である。いくつかの実施形態では、コンテンツプロバイダ124は、頭部ウェアラブルディスプレイ140に対する画像データを周期的に(例えば、11ミリ秒ごとに)生成しかつ提供する。1つの態様では、通信インターフェース122は、図2A~図4に関して後述されるようにさらなるデータを頭部ウェアラブルディスプレイ140に適応的に送信できる。
図1Bは、例示の実施形態による頭部ウェアラブルディスプレイ140の図160である。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、前部剛体162およびバンド164を含む。前部剛体162は、(図1Bに示されない)電子ディスプレイ152、(図1Bに示されない)レンズ154、センサ142、視標追跡部144A、144B、通信インターフェース148、および画像レンダラ150を含む。図1Bに示される実施形態では、通信インターフェース148、画像レンダラ150、およびセンサ142は、前部剛体162内に位置しており、ユーザには可視でない場合がある。他の実施形態では、頭部ウェアラブルディスプレイ140は図1Bに示されるのと異なる構成を有する。例えば、通信インターフェース148、画像レンダラ150、視標追跡部144A、144B、および/またはセンサ142は、図1Bに示されるのと異なる場所にあってよい。
ここで、図2Aを参照すると、変動する継続時間を有する複数のウェイクアップ間隔108の図式200が示されている。図式200は、それぞれが異なる継続時間を有する3つのウェイクアップ間隔108を含む。例えば、第1のウェイクアップ間隔108は、第1のウェイクアップ時間期間110および第1のスリープ期間120を含む。第1のウェイクアップ時間期間110は第1のウェイク継続時間を含むことができ、第1のスリープ期間120は第1のスリープ継続時間を含むことができる。第2のウェイクアップ間隔108は、第2のウェイクアップ時間期間110および第2のスリープ期間120を含むことができる。
第2のウェイクアップ時間期間110は第2のウェイク継続時間を含むことができ、第2のスリープ期間120は第2のスリープ継続時間を含むことができる。第3のウェイクアップ間隔108は、第3のウェイクアップ時間期間110および第3のスリープ期間120を含むことができる。第3のウェイクアップ時間期間110は第3のウェイク継続時間を含むことができ、第3のスリープ期間120は第3のスリープ継続時間を含むことができる。いくつかの実施形態では、第3のウェイクアップ時間期間110の第3のウェイク継続時間は、第1のウェイクアップ時間期間110の第1のウェイク継続時間、および第2のウェイクアップ時間期間110の第2のウェイク継続時間より長い可能性がある。第1のウェイクアップ時間期間110の第1のウェイク継続時間は、第2のウェイクアップ時間期間110の第2のウェイク継続時間より長い可能性がある。
いくつかの実施形態では、第3のスリープ期間120の第3のスリープ継続時間は、第1のスリープ期間120の第1のスリープ継続時間、および第2のスリープ期間120の第2のスリープ継続時間より長い可能性がある。第1のスリープ期間120の第1のスリープ継続時間は第2のスリープ期間120の第2のスリープ継続時間より長い可能性がある。図2Aに示される異なるウェイクアップ間隔108は、異なる継続時間を有するウェイクアップ時間期間110およびスリープ期間120を含むことができ、かつ、これらの継続時間が、例えば、対応するウェイクアップ時間期間110において、ダイナミックに判断可能であるように固定された継続時間を含まない場合がある。
ここで図2Bを参照すると、変動する継続時間のダウンリンク114およびアップリンク116を有するウェイクアップ時間期間110のタイミングダイアグラム250が示されている。ウェイクアップ時間期間110はハンドシェイク期間/ビーム形成期間254を含むことができる。ハンドシェイク期間/ビーム形成期間254は、ウェイクアップ時間期間110を開始または始動させるために頭部ウェアラブルディスプレイ140とコンソール102との間で送信される1つまたは複数のハンドシェイク信号を含むことができる。ハンドシェイク期間/ビーム形成期間254は、頭部ウェアラブルディスプレイ140とコンソール102との間にチャネル130を確立するように複数のビームから少なくとも1つのビームを識別しかつ選択するためのビーム形成プロセスを含むことができる。ウェイクアップ時間期間110は、さらなるビーム形成アクセス期間を含んでよい頭部SLS/RAアクセス期間256を含むことができる。例えば、いくつかの実施形態では、頭部ウェアラブルディスプレイ140および/またはコンソール102は、チャネル130に対して選択された候補ビームを検査しかつ検証するために、または頭部ウェアラブルディスプレイ140とコンソール102との間のチャネル130に対して新たな候補ビームを選択するために、ビーム選択および/またはビーム形成を検査するまたはやり直すことができる。
ウェイクアップ時間期間110は、複数のリンクペア252を有するデータ送信間隔112を含むことができる。いくつかの実施形態では、リンクペア252のそれぞれは、少なくとも1つのダウンリンク114および少なくとも1つのアップリンク116を含むことができる。頭部ウェアラブルディスプレイ140および/またはコンソール102は、例えば、対応するダウンリンク114またはアップリンク116の間、ダウンリンク114またはアップリンク116の継続時間または終点をダイナミックに判断するおよび/または調整することができる。異なるリンクペア252のダウンリンク114は異なる継続時間を有することができる、またはデータ送信間隔112の1つまたは複数ダウンリンク114は同じ継続時間を有することができる。例えば、ダウンリンク114の継続時間は、ダウンリンク114の間に送信されるデータ量に部分的に基づいてダイナミックに判断および/または調整可能である。いくつかの実施形態では、頭部ウェアラブルディスプレイ140および/またはコンソール102は、ダウンリンク114の継続時間をダイナミックにかつ対応するダウンリンク114の間に延長あるいは修正可能である。異なるリンクペア252のアップリンク116は異なる継続時間を有することができる、またはデータ送信間隔112の1つまたは複数のアップリンク116は同じ継続時間を有することができる。例えば、アップリンク116の継続時間は、アップリンク116の間に送信されるデータ量に部分的に基づいてダイナミックに判断可能である。同じ実施形態では、頭部ウェアラブルディスプレイ140および/またはコンソール102は、アップリンク116の継続時間をダイナミックにかつ対応するアップリンク116の間に延長あるいは修正可能である。データ送信間隔112は、単一のリンクペア252または複数のリンクペア252を含むことができる。
いくつかの実施形態では、ウェイクアップ時間期間110は、テールBF/RA(例えば、ビーム形成/リソースアクセス)期間258を含むことができる。テールBF/RA期間258は、頭部ウェアラブルディスプレイ140とコンソール102との間の次のまたは後続のウェイクアップ時間期間110のビーム構成を確立するためにさらなるビーム形成アクセス期間を含むまたはこれに対応することができる。
ここで、図3A~図3Cを参照すると、ダイナミックスケジューリングのための方法300が示されている。概要として、方法300は、ウェイクアップ時間期間を始動させること(302)と、データ送信間隔を開始すること(304)と、ダウンリンク送信を開始すること(306)と、ダウンリンク送信が完了しているかどうかを判断すること(308)と、ダウンリンク送信を継続すること(310)と、指示を生成すること(312)と、アップリンク送信を開始すること(314)と、アップリンク送信が完了しているかどうかを判断すること(316)と、アップリンク送信を継続すること(318)と、データ送信間隔112が完了しているかどうかを判断すること(320)と、後続のダウンリンク送信を開始すること(322)と、後続のダウンリンク送信が完了しているかどうかを判断すること(324)と、後続のウェイクアップ時間を判断すること(326)と、スリープ期間を開始すること(328)とのうちの1つまたは複数を含むことができる。前述の動作のいずれかは、本明細書に説明されるコンポーネントまたはデバイスのいずれか1つまたは複数、例えば、コンソール102および/または頭部ウェアラブルディスプレイ140によって行われてよい。
302を参照すると、いくつかの実施形態では、ウェイクアップ時間期間を始動するまたは始めることができる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、頭部ウェアラブルディスプレイ140とコンソール102との間のチャネル130を通して頭部ウェアラブルディスプレイ140とコンソール102との間の通信セッションまたはデータ転送を開始する旨の指示、コマンド、または命令をコンソール102に送信できる。例えば、頭部ウェアラブルディスプレイ140および/またはコンソール102は、スリープ期間を抜けまたは終了し、かつウェイクアップ時間期間110またはウェイクアップ時間間隔108を始動させるための信号またはウェイクアップ通知を送信することができる。ウェイクアップ時間期間110は、データ転送セッションを始動させるために頭部ウェアラブルディスプレイ140とコンソール102との間に1つまたは複数のハンドシェイク信号を含むことができる。ハンドシェイク信号は、頭部ウェアラブルディスプレイ140とコンソール102との間のチャネル130(例えば、通信リンク)のためのプロトコルおよび/または構成を確立するための1つまたは複数のアクセス規則を含むことができる。
ハンドシェイク信号は、頭部ウェアラブルディスプレイ140とコンソール102との間にチャネル130を確立するように少なくとも1つのビームを識別するためにビーム追跡および/またはビーム形成期間を含むまたはこれに対応することができる。例えば、頭部ウェアラブルディスプレイ140および/またはコンソール102は(例えば、信号対雑音比に従って)最高のビーム、または最強の信号を有するビームを識別するための1つまたは複数の信号(例えば、データバースト)を送信可能である。ウェイクアップ時間期間110は少なくとも1つのデータ送信間隔112を含むことができる。
304を参照すると、いくつかの実施形態では、データ送信間隔が開始可能である。頭部ウェアラブルディスプレイ140および/またはコンソール102は、データ送信間隔112を開始することができる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140はデータ送信間隔112の継続時間をダイナミックに判断可能である。頭部ウェアラブルディスプレイ140および/またはコンソール102は、送信されるデータ量、および/または頭部ウェアラブルディスプレイ140とコンソール102との間のチャネル130の1つもしくは複数の性質に従ってまたは部分的に基づいて、頭部ウェアラブルディスプレイ140とコンソール102との間のデータ送信間隔112の予想される継続時間を推定する(例えば、ダイナミックに推定する)ことができる。データ送信間隔112は、第1のダウンリンク送信114およびアップリンク送信116を含むことができる。例えば、頭部ウェアラブルディスプレイ140および/またはコンソール102は、送信されるデータ量、および、チャネル130の、速度、安定性、妨害レベル、および/または帯域幅を含むがこれらに限定されないチャネル130の性質を判断できる。頭部ウェアラブルディスプレイ140は、データ送信間隔112を始める前に、またはデータ送信間隔112が始動している時、データ送信間隔112の予想される継続時間を判断可能である。
いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、判断された継続時間なしでデータ送信間隔112を開始することができ、かつ対応するデータ送信間隔112における継続時間を判断可能である。例えば、頭部ウェアラブルディスプレイ140は、データがアクセス、生成、および/または送信されている時のデータ量を判断でき、かつ対応するデータ送信間隔112におけるデータ送信間隔112のダウンリンク/アップリンクペア252の継続時間および/または数をダイナミックに修正可能である。
306を参照すると、いくつかの実施形態では、ダウンリンク送信が開始可能である。頭部ウェアラブルディスプレイ140は、第1の時間インスタンス118において、コンソール102への第1のダウンリンク114送信を開始可能である。頭部ウェアラブルディスプレイ140は、コンソール102にデータまたは情報を送信し始めることができる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、コンソール102にデータを送信し始めることに同意する旨の指示、命令、コマンド、または承諾を送信できる。例えば、データは、限定はされないが、センサデータ、場所データ、構成データ、設定、スケジューリング、および/または頭部ウェアラブルディスプレイ140による以前のユーザセッションからのデータなど、頭部ウェアラブルディスプレイに対応するいずれの情報も含むことができる。頭部ウェアラブルディスプレイ140は、ダウンリンク114の間に送信されるデータ量を判断できる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、ダウンリンク114の間に送信される予想されるもしくは既知のデータ量、および/または、頭部ウェアラブルディスプレイ140とコンソール102との間のチャネル130の1つもしくは複数の性質に部分的に基づいて、第1のダウンリンク114を開始する前にまたは第1のダウンリンク114の間に、第1のダウンリンク114送信の継続時間または時間期間を推定可能である。
308を参照すると、いくつかの実施形態では、ダウンリンク送信が完了しているかどうかの判断がなされ得る。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、ダウンリンク114が完了しているかどうかを判断するために、ダウンリンク114の推定される継続時間または時間期間を、ダウンリンク114の現在の継続時間または時間期間と比較することができる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、所定の継続時間または予想される完了時間がないダウンリンク114を開始することができる。例えば、ダウンリンク114の継続時間または長さは、対応するダウンリンク114の間に判断可能である。頭部ウェアラブルディスプレイ140は、コンソール102に送信するための任意のさらなるデータがあるかどうかを判断することができる。例えば、いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、ダウンリンク114の間にコンソール102に既に送信されているデータ量を判断し、かつ判断された量を、ダウンリンク114に対するコンソール102への送信される以前の判断されたまたは予想されたデータ量と比較することができる。
310を参照すると、いくつかの実施形態では、ダウンリンク送信が継続し得る。いくつかの実施形態では、ダウンリンク送信が完了していないという判断がなされ得る。頭部ウェアラブルディスプレイ140は、ダウンリンク114の間に送信するためのかつコンソール102へのダウンリンク114を継続するためのさらなるデータがあると判断することができる。例えば、頭部ウェアラブルディスプレイ140は、第1のダウンリンク送信114に対して送信するさらなるデータがあると判断し、かつ該判断に応答して、第1のダウンリンク送信114の推定された継続時間または推定された時間期間を超えてデータをコンソール102に転送し続けることができる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、ダウンリンクデータの全てが(生成もしくはアクセスされるおよび/または)送信されるまで、または判断されたレベルのデータが送信されるまで、データをコンソール102に送信し続けることができる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、ダウンリンク114の間に送信されるデータ量を継続して監視することができ、方法300は、現在のダウンリンク114が完了しているかどうかを判断するために(308)に戻ることができる。
312を参照すると、いくつかの実施形態では、指示が生成可能である。頭部ウェアラブルディスプレイ140は、ダウンリンク114が完了していることを指示するまたは命令するためにコンソール102に対する指示(例えば、コマンド、命令)を生成することができる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、第1のダウンリンク送信114のデータの転送が完了する時の第2の時間インスタンス118において、第1のダウンリンク送信114の終わりをコンソール102にダイナミックに指示することを含むことができる。例えば、頭部ウェアラブルディスプレイ10は、ダウンリンク114の間に、ダウンリンク114が完了している(または完了中である)こと、またはダウンリンク114の最後のパケットが送信されているまたは送信されたことを、ダイナミックに判断または検出することができる。頭部ウェアラブルディスプレイ140は、例えば、ダウンリンク114が終わる時に、ダウンリンク114が完了する旨の指示をコンソール102に対して生成かつ提供可能である。いくつかの実施形態では、頭部ウェアラブルディスプレイ10は、頭部ウェアラブルディスプレイ140からコンソール102までのダウンリンク114が完了するまたは終わる(または完了中である)ことをダイナミックに指示するために、ダウンリンク114の最終または最後のパケットによってコンソール102への指示をダイナミックに提供することができる。
314を参照すると、いくつかの実施形態では、アップリンク送信が開始可能である。頭部ウェアラブルディスプレイ140は、第2の時間インスタンス118に対して、コンソール102にアップリンク116送信をダイナミックに始めさせることができる。第2の時間インスタンス118は、第1の時間インスタンス118の後またはこれより遅く、かつ第1の時間インスタンス118と異なる時間値または時間期間を含むことができる。頭部ウェアラブルディスプレイ140によってコンソール102に送信される指示は、コンソール102に、頭部ウェアラブルディスプレイ140とコンソール102との間のデータ送信間隔112のアップリンク部分を始めさせるまたは開始させることができる。いくつかの実施形態では、コンソール102は、頭部ウェアラブルディスプレイ140からの指示を受信することに応答してアップリンク116をダイナミックに開始することができる。例えば、コンソール102は、アップリンク116を始めるために所定のまたは固定された時間期間で待機しなくてよく、その代わりに、頭部ウェアラブルディスプレイ140からのダウンリンク114の終わりの指示を受信することに応答してアップリンク116をダイナミックに開始してよい。
いくつかの実施形態では、コンソール102は、アップリンク116に対してデータを送信し始めることに同意する旨の指示、命令、コマンド、または承諾を頭部ウェアラブルディスプレイ140に送信できる。アップリンクデータは、限定はされないが、場所データ、構成データ、設定、スケジューリング、および/またはチャネルデータ(例えば、通信リンクデータ)など、頭部ウェアラブルディスプレイ140および/またはコンソール102に対応するいずれの情報も含むことができる。コンソール102は、アップリンク116の間に送信されるデータ量を判断できる。いくつかの実施形態では、コンソール102は、アップリンク116の間に送信されるデータ量、および/または、頭部ウェアラブルディスプレイ140とコンソール102との間のチャネル130の1つもしくは複数の性質に部分的に基づいて、アップリンク116を開始する前にまたはアップリンク116の間に、アップリンク116送信の継続時間または時間期間を推定可能である。
316を参照すると、いくつかの実施形態では、アップリンク送信が完了しているかどうかの判断がなされ得る。いくつかの実施形態では、コンソール102は、所定の継続時間または予想される完了時間なくアップリンク116を開始することができる。例えば、アップリンク116の継続時間または長さは、むしろ、対応するアップリンク116の間に判断可能である。コンソール102は、頭部ウェアラブルディスプレイ140に送信するための任意のさらなるデータがあるかどうかを(例えば、アップリンク送信の過程で)判断することができる。例えば、いくつかの実施形態では、コンソール102は、アップリンク116の間に頭部ウェアラブルディスプレイ140に既に送信されているデータ量を判断し、かつ判断された量を、アップリンク116に対する頭部ウェアラブルディスプレイ140への送信される以前に判断されたまたは予想されたデータ量と比較することができる。
318を参照すると、いくつかの実施形態では、アップリンク送信が継続可能である。いくつかの実施形態では、アップリンク送信が完了していないとの判断がなされ得る。コンソール102は、アップリンク116の間に(例えば、アップリンク送信の間に)送信するためのかつ頭部ウェアラブルディスプレイ140へのアップリンク送信を(アップリンク期間116を延長することによって)継続するためのさらなるデータがあると判断することができる。いくつかの実施形態では、コンソール102は、アップリンク116送信に対して送信するためのさらなるデータがあると判断し、かつ該判断に応答して、アップリンク送信の推定された時間期間を超えてデータを頭部ウェアラブルディスプレイ140に転送し続けることができる。コンソール102は、ダウンリンクデータの全てが送信されるまで、または判断されたレベルのデータが送信されるまで、データを頭部ウェアラブルディスプレイ140に送信し続けることができる。いくつかの実施形態では、コンソール102は、アップリンク116の間に送信されるデータ量を継続して監視することができ、方法300は、現在のアップリンク116が完了しているかどうかを判断するために(316)に戻る/進むことができる。
320を参照すると、いくつかの実施形態では、データ送信間隔112が完了しているかどうかの判断がなされ得る。例えば、コンソール102は、アップリンク116が完了しているかどうか、またはさらなるデータがアップリンク116の間に(アクセスされるまたは生成されるおよび)送信されるかどうかをアップリンク116の間にダイナミックに判断可能である。いくつかの実施形態では、コンソール102は、アップリンク116の最後のまたは最終パケットが送信されているかどうか、またはアップリンク116の間にさらなるパケットが送信されるかどうかをダイナミックに判断可能である。アップリンク116は、現在のデータ送信間隔112の終わりに対応することができる。いくつかの実施形態では、コンソール102は、現在のデータ送信間隔112が延長されるかどうかを判断可能である。例えば、コンソール102は、さらなるリンクペア252(例えば、DL/ULペア)がデータ送信間隔112に追加されるべきかどうかを判断できる。コンソール102は、コンソール102と頭部ウェアラブルディスプレイ140との間の送信されるデータ量および/またはチャネル130の性質(例えば、速度、帯域幅)に部分的に基づいて、データ送信間隔112を延長または修正するように判断できる。
322を参照すると、いくつかの実施形態では、後続のダウンリンク送信が開始可能である。コンソール102は、アップリンク送信が完了していること、およびさらなるデータがコンソール102と頭部ウェアラブルディスプレイ140との間で送信されることを判断することができる。例えば、コンソール102および/または頭部ウェアラブルディスプレイ140は、アップリンク116の間に、アップリンク送信が完了していること、およびさらなるデータが第2のまたはさらなるダウンリンク送信を通して送信されることをダイナミックに判断可能である。コンソール102および/または頭部ウェアラブルディスプレイ140は、第2のもしくはさらなるダウンリンク送信および/または第2のもしくはさらなるアップリンク送信をサポートするためにデータ送信間隔112の継続時間を延長または修正するように判断できる。いくつかの実施形態では、頭部ウェアラブルディスプレイ140は、アップリンク116送信または以前のアップリンク116送信のデータの転送が完了する時の第3の時間インスタンス118において、第2のダウンリンク114送信をダイナミックに始動させる旨の指示を受信できる。
いくつかの実施形態では、コンソール102および/頭部ウェアラブルディスプレイ140は、アップリンク送信が完了していること、およびさらなるデータが1つまたは複数のさらなるリンクペア252(例えば、DL/ULペア)を通して送信されることをアップリンク116の間にダイナミックに判断することができる。コンソール102および/または頭部ウェアラブルディスプレイ140は、1つまたは複数のさらなるリンクペア252をサポートするためにデータ送信間隔112の継続時間を延長または修正するように判断することができる。コンソール102および/または頭部ウェアラブルディスプレイ140は、第4のまたは後続の時間インスタンス118において、第4のまたは後続の時間インスタンス118で利用可能なデータに従ってまたは部分的に基づいて、頭部ウェアラブルディスプレイ140とコンソール102との間のデータ送信間隔112に対する1つまたは複数のリンクペア252の追加をダイナミックにサポートするようにダイナミックに判断可能である。いくつかの実施形態では、それぞれのリンクペア252は、少なくとも1つのダウンリンク114送信および少なくとも1つのアップリンク送信116を含むことができる。コンソール102および/または頭部ウェアラブルディスプレイ140は、データ送信間隔112のさらなるリンクペア252に対する後続のダウンリンク114を開始または始動させる旨の指示を生成可能である。頭部ウェアラブルディスプレイ140は、第4のまたは後続の時間インスタンス118において、コンソール102への第2のまたは後続のダウンリンク114送信を開始することができる。いくつかの実施形態では、第1のウェイクアップ時間期間110は、第1のダウンリンク114送信、アップリンク116送信、および第2のダウンリンク114送信を含むことができ、コンソール102は、さらなる1つもしくは複数のダウンリンク送信および1つもしくは複数のアップリンク送信または1つもしくは複数のさらなるリンクペア252をサポートするために第2のウェイクアップ時間期間110を追加するようにダイナミックに判断可能である。324を参照すると、いくつかの実施形態では、方法300は、第2のまたは後続のダウンリンク114が完了しているかどうかを判断するために(308)に戻る/進むことができる。
326を参照すると、いくつかの実施形態では、後続のウェイクアップ時間110が判断可能である。コンソール102および/または頭部ウェアラブルディスプレイ140は、アップリンク送信が完了していること、およびコンソール102と頭部ウェアラブルディスプレイ140との間で送信されるさらなるデータはないことを判断できる。いくつかの実施形態では、コンソール102は、アップリンク116の最後のまたは最終パケットが送信されている、または頭部ウェアラブルディスプレイ140に送信されていることをダイナミックに判断可能である。アップリンク期間116は現在のデータ送信間隔112の終わりに対応することができ、コンソール102および/または頭部ウェアラブルディスプレイ140は、現在のデータ送信間隔112が完了していると判断することができる。
コンソール102および/または頭部ウェアラブルディスプレイ140は、(例えば、第1のウェイクアップ時間期間110と第2のウェイクアップ時間期間110との間の)第1のまたは以前のウェイクアップ時間期間110の終わりの後のスリープ期間120の継続時間をダイナミックに判断または構成することができる。コンソール102および/または頭部ウェアラブルディスプレイ140は、コンソール102と頭部ウェアラブルディスプレイ140との間の後続のデータ送信間隔112の後続のウェイクアップ時間期間110を判断できる。いくつかの実施形態では、コンソール102および/または頭部ウェアラブルディスプレイ140は、1つまたは複数の以前のデータ送信間隔において送信されたデータ量、および/または後続のデータ送信間隔112において送信される予想されるデータ量に部分的に基づいて、後続のウェイクアップ時間期間110を判断可能である。
328を参照すると、いくつかの実施形態では、スリープ期間120が開始可能である。スリープ期間120の継続時間または時間期間は、以前のウェイクアップ時間期間110終わりに、または以前のウェイクアップ時間期間110において、頭部ウェアラブルディスプレイ140および/またはコンソール102によってダイナミックに判断または調整可能である。いくつかの実施形態では、スリープ期間120の継続時間または時間期間は、頭部ウェアラブルディスプレイ140とコンソール102との間の次のまたは後続のウェイクアップ時間期間110の判断された時間インスタンス118に少なくとも部分的に基づいて選択可能である。
B.コンピューティングシステム
本明細書に説明されるさまざまな動作は、コンピュータシステム上に実装可能である。図4は、本開示を実施するために使用可能な典型的なコンピューティングシステム414のブロック図を示す。いくつかの実施形態では、図1A~図1Bのコンソール102および頭部ウェアラブルディスプレイ140は、コンピューティングシステム414によって実装される。コンピューティングシステム414は、例えば、スマートフォン、その他の携帯電話、タブレットコンピュータ、ウェアラブルコンピューティングデバイス(例えば、スマートウォッチ、眼鏡、頭部ウェアラブルディスプレイ)、デスクトップコンピュータ、ラップトップコンピュータなどの消費者装置として実装可能である、または、分散コンピューティングデバイスで実装可能である。コンピューティングシステム414は、VR、AR、MR体験を提供するために実装可能である。いくつかの実施形態ではコンピューティングシステム414は、プロセッサ416、ストレージデバイス418、ネットワークインターフェース420、ユーザ入力デバイス422、およびユーザ出力デバイス424など、従来のコンピュータコンポーネントを含むことができる。
ネットワークインターフェース420は、リモートサーバシステムのWANインターフェースがまた接続される広域ネットワーク(例えば、インターネット)への接続を提供できる。ネットワークインターフェース420は、Wi-Fi、Bluetooth、またはセルラーデータネットワーク規格(例えば、3G、4G、5G、60GHz、LTEなど)などのさまざまなRFデータ通信規格を実装する有線インターフェース(例えば、Ethernet)および/または無線インターフェースを含むことができる。
ユーザ入力デバイス422は、ユーザがコンピューティングシステム414に信号を提供できる任意のデバイス(単数または複数)を含むことができ、コンピューティングシステム414は、信号が特定のユーザ要求または情報を指示していると解釈することができる。ユーザ入力デバイス422は、キーボード、タッチパッド、タッチスクリーン、マウスまたはその他のポインティングデバイス、スクロールホイール、クリックホイール、ダイヤル、ボタン、スイッチ、キーパッド、マイクロホン、およびセンサ(例えば、運動センサ、視標追跡センサなど)などのいずれかまたは全てを含むことができる。
ユーザ出力デバイス424は、コンピューティングシステム414がユーザに情報を提供できる任意のデバイスを含むことができる。例えば、ユーザ出力デバイス424は、コンピューティングシステム414によって生成されるまたはこれに配信される画像を表示するためのディスプレイを含むことができる。ディスプレイは、さまざまな画像生成技術、例えば、液晶ディスプレイ(LCD)、有機発光ダイオード(OLED)を含む発光ダイオード(LED)、投影システム、または陰極線管(CRT)などを、補助電子機器(例えば、デジタル-アナログまたはアナログ-デジタル変換器、または信号プロセッサなど)と共に組み込むことができる。入力デバイスおよび出力デバイス両方として機能するタッチスクリーンなどのデバイスが使用可能である。出力デバイス424は、ディスプレイに加えてまたはこれの代わりに提供可能である。例として、表示灯、スピーカ、触覚「ディスプレイ」デバイス、およびプリンタなどが挙げられる。
いくつかの実装形態は、コンピュータ可読記憶媒体にコンピュータプログラム命令を記憶する、マイクロプロセッサ、ストレージ、およびメモリなどの電子部品を含む。本明細書に説明される特徴の多くは、コンピュータ可読記憶媒体上に符号化されるプログラム命令のセットとして特定されるプロセスとして実装可能である。これらのプログラム命令は、1つまたは複数のプロセッサによって実行される時、プロセッサに、プログラム命令に指示されるさまざまな動作を行わせる。プログラム命令またはコンピュータコードの例として、コンパイラによって生じさせるような機械コード、および、コンピュータ、電子部品、またはインタープリタを使用するマイクロプロセッサによって実行される高レベルコードを含むファイルが挙げられる。適したプログラミングによって、プロセッサ416は、サーバまたはクライアントによって実行されるように本明細書に説明される機能性のいずれか、またはメッセージ管理サービスと関連付けられたその他の機能性を含む、コンピューティングシステム414に対するさまざまな機能性を提供できる。
コンピューティングシステム414が実例となるものであり、かつ変形および修正が可能であることは理解されるであろう。本開示に関連して使用されるコンピュータシステムは、具体的にここでは説明されていないその他の能力を有することができる。さらに、コンピューティングシステム414が特定のブロックに関して説明されているが、これらのブロックが説明の利便性のために定められ、かつ構成部品の特定の物理的配置を含意することが意図されていないことは、理解されたい。例えば、異なるブロックは、同じ設備に、同じサーバラックに、または同じマザーボード上に位置することができる。さらに、ブロックは物理的に異なったコンポーネントに対応する必要はない。ブロックは、例えば、プロセッサをプログラミングすることまたは適切な制御回路網を提供することによって、さまざまな動作を行うように構成可能であり、さまざまなブロックは、初期構成がどのように得られるかに応じて再構成可能であってもなくてもよい。本開示の実装形態は、回路網およびソフトウェアの任意の組み合わせを使用して実装される電子デバイスを含むさまざまな装置で実現可能である。
いくつかの例示の実装形態についてここで説明されているが、前述の内容は例示であり限定するものではなく例として提示されていることは明らかである。とりわけ、本明細書に提示される例の多くは方法の行為またはシステム要素の特定の組み合わせを伴うが、これらの行為およびこれらの要素は他のやり方で組み合わせて同じ目的を達成することができる。1つの実装形態に関連して論じた行為、要素、および特徴は、複数の実施形態または他の実装形態における同様の役割から除外されることを意図するものではない。
本明細書に開示される実施形態に関連して説明されるさまざまなプロセス、動作、例示的なロジック、論理ブロック、モジュール、および回路を実装するために使用されるハードウェアおよびデータ処理コンポーネントは、汎用シングルもしくはマルチチッププロセッサ、デジタル信号プロセッサ(DSP)、特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)、または他のプログラマブル論理デバイス、ディスクリートゲートもしくはトランジスタロジック、ディスクリートハードウェアコンポーネント、あるいは本明細書に説明される機能を実行するように設計されるこれらの任意の組み合わせで実装または実行されてよい。汎用プロセッサは、マイクロプロセッサ、または任意の従来のプロセッサ、コントローラ、マイクロコントローラ、もしくは状態機械であってもよい。プロセッサはまた、DSPおよびマイクロプロセッサの組み合わせ、複数のマイクロプロセッサ、DSPコアと連動する1つまたは複数のマイクロプロセッサなどのコンピューティングデバイスの組み合わせ、または任意の他のこのような構成として実装されてよい。いくつかの実施形態では、特定のプロセスおよび方法は、所与の機能に特有の回路網によって実行されてよい。メモリ(例えば、メモリ、メモリユニット、ストレージデバイスなど)は、本開示に説明されるさまざまなプロセス、レイヤ、およびモジュールを完了させるまたは促進させるためのデータおよび/またはコンピュータコードを記憶するための1つまたは複数のデバイス(例えば、RAM、ROM、フラッシュメモリ、ハードディスクストレージなど)を含んでよい。メモリは、揮発性メモリまたは不揮発性メモリであってよくまたはこれらを含んでよく、本開示に説明されるさまざまなアクティビティおよび情報構造をサポートするためのデータベースコンポーネント、オブジェクトコードコンポーネント、スクリプトコンポーネント、または任意の他のタイプの情報構造を含んでよい。例示的な実施形態によると、メモリは処理回路を介してプロセッサに通信可能に接続され、かつ本明細書に説明される1つまたは複数のプロセスを(例えば、処理回路および/またはプロセッサによって)実行するためのコンピュータコードを含む。
本開示では、さまざまな動作を達成するための任意の機械可読媒体上の方法、システム、およびプログラム製品を考察している。本開示の実施形態は、既存のコンピュータプロセッサを使用して、または、このまたは別の目的のために組み込まれた適切なシステム用の専用コンピュータプロセッサによって、またはハードワイヤドシステムによって実施されてよい。本開示の範囲内の実施形態は、記憶されている機械実行可能命令またはデータ構造を持つまたは有する機械可読媒体を備えるプログラム製品を含む。このような機械可読媒体は、汎用または専用コンピュータもしくはプロセッサを有する他の機械によってアクセスできる任意の利用可能な媒体とすることができる。例として、このような機械可読媒体は、RAM、ROM、EPROM、EEPROM、もしくは他の光学ディスクストレージ、磁気ディスクストレージもしくは他の磁気ディスクストレージデバイス、または所望のプログラムコードを機械実行可能命令またはデータ構造の形式で持つまたは記憶するために使用可能であり、かつ汎用または専用コンピュータもしくはプロセッサを有する他の機械によってアクセスできる任意の他の媒体を含むことができる。上記の組み合わせはまた、機械可読媒体の範囲内に含まれる。機械実行可能命令は、例えば、汎用コンピュータ、専用コンピュータ、または専用処理機械にある特定の機能または機能グループを実行させる命令およびデータを含む。
本明細書で使用される表現および術語は、説明の目的のためのものであり、限定するものとみなされるべきではない。本明細書における「含む」、「備える」、「有する」、「含有する」、「伴う」、「~を特徴とする」、「~であることを特徴とする」、およびこの変形の使用は、その後に列挙される項目、この等価物、およびさらなる項目、ならびに専らその後に列挙される項目から成る代替的な実装形態を包含することを意味する。1つの実装形態では、本明細書に説明されるシステムおよび方法は、説明される要素、行為、またはコンポーネントの、1つ、複数のそれぞれの組み合わせ、または全てから成る。
単数形で称される本明細書におけるシステムおよび方法の実施形態、要素、または行為へのいずれの言及もまた、複数のこれらの要素を含む実装形態に及ぶことができ、本明細書におけるいずれかの実装形態、要素、または行為に対する複数形でのいずれの言及もまた、単一の要素のみを含む実装形態に及ぶことができる。単数形または複数形での言及は、本開示のシステム、方法、これらのコンポーネント、行為、または要素を単一のまたは複数の構成に限定することを意図するものではない。任意の情報、行為、または要素に基づくいずれの行為または要素への言及も、該行為または要素が任意の情報、行為、または要素に少なくとも部分的に基づく実装形態を含むことができる。
本明細書に開示される任意の実装形態は、任意の他の実装形態または実施形態と組み合わせ可能であり、「実装形態」、「いくつかの実装形態」、または「1つの実装形態」などへの言及は、必ずしも相互排他的でなく、実装形態に関連して説明される特定の特徴、構造、または特性が少なくとも1つの実装形態または実施形態に含まれ得ることを指示することが意図されている。本明細書に使用されるこのような用語は、必ずしも全て同じ実装形態に言及しているわけではない。任意の実装形態は、本明細書に開示される態様および実装形態に一致する何らかのやり方で、包括的にまたは排他的に任意の他の実装形態と組み合わせ可能である。
図面、詳細な説明、またはいずれかの特許請求項における技術的特徴の後に参照符号が続く場合、参照符号は、図面、詳細な説明、および特許請求項の明瞭さを高めるために含まれている。従って、参照符号があってもなくても、いずれの請求項要素の範囲に対してもいずれの限定的効果も有さない。
本明細書に説明されるシステムおよび方法は、これらの特性から逸脱することなく他の特有の形式で具現化されてよい。「およそ」、「約」、「実質的に」、または他の程度に関する用語への言及は、別段明示的に指示されない限り、所与の測定、単位、または範囲から+/-10%の変動を含む。結合された要素は、互いに直接または介在要素を有して、電気的に、機械的に、または物理的に結合可能である。よって、本明細書に説明されるシステムおよび方法の範囲は、前述の説明ではなく添付の特許請求の範囲によって指示され、特許請求項の等価の意味および範囲内で生じる変化はここに含まれる。
用語「結合される」およびこの変形は、2つの部材を互いに直接または間接的に接合することを含む。このような接合は、静置で(例えば、常置でまたは固定されて)も、可動で(例えば、除去可能でまたは解除可能で)あってもよい。このような接合は、2つの部材が互いに直接結合されること、2つの部材が別個の介在部材および互いに結合される任意のさらなる中間部材を使用して互いに結合されること、または、2つの部材が、単一の単体として2つの部材のうちの1つと一体的に形成される介在部材を使用して互いに結合されることによって、実現可能である。「結合される」またはこの変形がさらなる用語によって修正される(例えば、直接結合される)場合、上記で提供される「結合される」の総称定義はさらなる用語の平易な言葉の意味によって修正される(例えば、「直接結合される」は任意の別個の介在部材がない2つの部材の接合を意味する)ことで、上記で提供される「結合される」の総称定義よりも狭い定義になる。このような結合は、機械的、電気的、または流体的なものであってよい。
「または」への言及は、「または」を使用して説明されるいずれの用語も説明される用語の1つ、複数、および全てのいずれかを指示することができるように包括的であるように構成可能である。「「A」および「B」の少なくとも1つ」への言及は、「A」のみ、「B」のみ、ならびに「A」および「B」の両方を含むことができる。「備える」または他のオープンな術語と併せて使用されるような言及は、さらなる項目を含むことができる。
さまざまな要素のサイズ、寸法、構造、形状、および比率、パラメータの値、取り付け配置、材料の使用、色、向きにおける変動などの説明した要素および行為の修正は、本明細書に開示される主題の教示および利点から著しく逸脱することなく行われ得る。例えば、一体的に形成されるように示される要素は、複数の部分または要素から構成可能であり、要素の位置は逆にされあるいは変更され得、別々の要素または位置の特質もしくは数は改められまたは変更され得る。開示された要素および動作の設計、動作条件、および配置の他の置換、修正、変更、および省略はまた、本開示の範囲から逸脱することなくなされ得る。
本明細書における要素の位置(例えば、「上部」、「下部」、「~より上に」、「~より下に」)への言及は、単に、図におけるさまざまな要素の向きを説明するために使用される。さまざまな要素の向きは、他の例示の実施形態に従って異なる場合があり、そのような変動は本開示によって包含されることが意図される。

Claims (11)

  1. 頭部ウェアラブルディスプレイによって第1の時間インスタンスにおいて、コンソールへの第1のダウンリンク送信を開始することと、
    前記頭部ウェアラブルディスプレイによって前記コンソールに、前記第1のダウンリンク送信のデータの転送が完了する時の第2の時間インスタンスにおいて、前記第1のダウンリンク送信の終わりをダイナミックに指示することと、
    前記頭部ウェアラブルディスプレイによって、前記第2の時間インスタンスに対して、前記コンソールにアップリンク送信をダイナミックに始めさせることと、
    前記頭部ウェアラブルディスプレイによって、前記アップリンク送信のデータの転送が完了する時の第3の時間インスタンスにおいて、第2のダウンリンク送信をダイナミックに始動させる旨の指示を受信することと、を含む、方法。
  2. 前記頭部ウェアラブルディスプレイと前記コンソールとの間の転送されるデータ量およびチャネルの性質に従って、前記頭部ウェアラブルディスプレイと前記コンソールとの間のデータ送信間隔に対して予想される継続時間を推定することであって、前記データ送信間隔は、前記第1のダウンリンク送信および前記アップリンク送信を含む、予想される継続時間を推定することをさらに含む、請求項1に記載の方法。
  3. 前記頭部ウェアラブルディスプレイによって、前記第1のダウンリンク送信の時間期間を推定することをさらに含む、請求項1に記載の方法。
  4. 前記頭部ウェアラブルディスプレイによって、前記第1のダウンリンク送信に対して送信するためのさらなるデータがあると判断することと、
    前記判断に応答して、前記頭部ウェアラブルディスプレイによって、前記第1のダウンリンク送信の推定された前記時間期間を超えてデータを前記コンソールに転送し続けることと、をさらに含む、請求項3に記載の方法。
  5. 前記コンソールによって、前記アップリンク送信の時間期間を推定することをさらに含む、請求項1に記載の方法。
  6. 前記コンソールによって、前記アップリンク送信に対して送信するためのさらなるデータがあると判断することと、
    前記判断に応答して、前記コンソールによって、前記アップリンク送信の推定された前記時間期間を超えてデータを前記頭部ウェアラブルディスプレイに転送し続けることと、をさらに含む、請求項5に記載の方法。
  7. 前記頭部ウェアラブルディスプレイによって第4の時間インスタンスにおいて、前記第4の時間インスタンスで利用可能なデータに従って前記頭部ウェアラブルディスプレイと前記コンソールとの間のデータ送信間隔での1つまたは複数のリンクペアの追加をダイナミックにサポートすることであって、それぞれのリンクペアは、少なくとも1つのダウンリンク送信および少なくとも1つのアップリンク送信を含む、1つまたは複数のリンクペアの追加をダイナミックにサポートすることをさらに含む、請求項1に記載の方法。
  8. 第1のウェイクアップ時間期間は、前記第1のダウンリンク送信、前記アップリンク送信、および前記第2のダウンリンク送信を含み、前記方法は、前記コンソールによって、さらなる1つまたは複数のダウンリンク送信および1つまたは複数のアップリンク送信をサポートするために第2のウェイクアップ時間期間を追加するようにダイナミックに判断することをさらに含む、請求項1に記載の方法。
  9. 前記第1のウェイクアップ時間期間と前記第2のウェイクアップ時間期間との間のスリープ時間期間の継続時間をダイナミックに構成することをさらに含む、請求項8に記載の方法。
  10. 請求項1から9のいずれか一項に記載の方法を実行するように構成される1つまたは複数のプロセッサを含む、頭部ウェアラブルディスプレイ。
  11. 1つまたは複数のプロセッサによって実行される時、前記1つまたは複数のプロセッサに、請求項1から9のいずれか一項に記載の方法を実行させる命令を記憶する、非一時的なコンピュータ可読媒体。
JP2021533685A 2019-03-08 2020-03-03 ダイナミックスケジューリングのためのシステムおよび方法 Pending JP2022522582A (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201962815834P 2019-03-08 2019-03-08
US62/815,834 2019-03-08
US16/778,488 2020-01-31
US16/778,488 US11277856B2 (en) 2019-03-08 2020-01-31 Systems and methods for dynamic scheduling
PCT/US2020/020769 WO2020185447A1 (en) 2019-03-08 2020-03-03 Systems and methods for dynamic scheduling

Publications (1)

Publication Number Publication Date
JP2022522582A true JP2022522582A (ja) 2022-04-20

Family

ID=72335840

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021533685A Pending JP2022522582A (ja) 2019-03-08 2020-03-03 ダイナミックスケジューリングのためのシステムおよび方法

Country Status (6)

Country Link
US (2) US11277856B2 (ja)
EP (1) EP3935863A1 (ja)
JP (1) JP2022522582A (ja)
KR (1) KR20210137083A (ja)
CN (1) CN113632495A (ja)
WO (1) WO2020185447A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11405913B2 (en) * 2019-03-08 2022-08-02 Facebook Technologies, Llc Latency reduction for artificial reality
US11800410B1 (en) * 2021-11-08 2023-10-24 Meta Platforms Technologies, Llc Systems and methods of WiFi with out-of-band signaling

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6950444B1 (en) * 1999-08-24 2005-09-27 Paradyne Corporation System and method for a robust preamble and transmission delimiting in a switched-carrier transceiver
JP2000099451A (ja) * 1998-09-24 2000-04-07 Fuji Xerox Co Ltd インターフェース制御装置
JP4201254B2 (ja) * 2003-01-24 2008-12-24 セイコーインスツル株式会社 データ伝送システム及び身体装着型通信装置
JP3809839B2 (ja) * 2004-03-09 2006-08-16 セイコーエプソン株式会社 データ転送制御装置、電子機器及びデータ転送制御方法
KR100666051B1 (ko) * 2005-05-04 2007-01-10 삼성전자주식회사 대기시간을 표시하는 반이중방식 통신을 지원하는 단말기및 이의 통신방법
EP1964297A2 (en) * 2005-12-20 2008-09-03 Conexant Systems, Inc. More power save multi-poll indication
AU2012201089C1 (en) * 2007-06-15 2014-05-22 Blackberry Limited System and method for semi-persistent and dynamic scheduling and discontinuous reception control
CN201266986Y (zh) * 2008-08-19 2009-07-01 武汉力源信息技术有限公司 音视频数字压缩录像及回放装置
JP5177071B2 (ja) * 2009-04-30 2013-04-03 ソニー株式会社 送信装置および方法、受信装置および方法、並びに送受信システム
CN101626481B (zh) * 2009-08-11 2014-08-13 中兴通讯股份有限公司 终端间共享文件的方法及其终端
EP2679068B1 (en) 2011-02-21 2017-04-05 Broadcom Corporation Dynamic uplink/downlink configuration for time division duplex
CN103096328B (zh) * 2011-11-02 2015-09-23 西门子公司 用于多链路无线数据传输的装置、系统和方法
WO2013117798A1 (en) * 2012-02-06 2013-08-15 Nokia Corporation Method and apparatus for uplink communication
CN103517419B (zh) * 2012-06-20 2017-08-25 华为终端有限公司 通知上行数据发送的信道使用时间的方法、上行数据发送方法和设备
CN102740133A (zh) * 2012-07-13 2012-10-17 深圳市茁壮网络股份有限公司 一种信息交互的方法、终端及系统
CN103634086B (zh) * 2012-08-28 2018-12-21 中兴通讯股份有限公司 调整上下行时间分配的方法、系统、局端设备及cpe
US9492741B2 (en) * 2013-05-22 2016-11-15 Microsoft Technology Licensing, Llc Wireless gaming protocol
US9183612B2 (en) * 2013-09-04 2015-11-10 Qualcomm Incorporated Wearable display device use-based data processing control
US8958158B1 (en) * 2013-12-03 2015-02-17 Google Inc. On-head detection for head-mounted display
CN103809730B (zh) * 2014-02-18 2016-08-17 上海新储集成电路有限公司 一种低功耗可穿戴设备系统
CN104516479A (zh) * 2014-12-08 2015-04-15 广东欧珀移动通信有限公司 一种移动设备省电控制方法、设备及系统
CN107925918B (zh) * 2015-08-14 2022-01-04 联想创新有限公司(香港) 无线通信系统中的上行链路/下行链路调度
WO2017035300A1 (en) * 2015-08-25 2017-03-02 Idac Holdings, Inc. Framing, scheduling, and synchronization in wireless systems
CN105472542B (zh) * 2015-12-16 2019-02-12 深圳智芯数据服务有限公司 一种基于低功耗蓝牙标准的智能穿戴设备与移动终端数据传输方法及系统
CN106910234A (zh) * 2015-12-18 2017-06-30 普联软件股份有限公司 一种基于改进的三维渲染引擎分布式渲染方法及系统
US9894679B2 (en) * 2016-03-18 2018-02-13 Qualcomm Incorporated Dynamic adjustment of downlink and uplink traffic scheduling
US10133345B2 (en) * 2016-03-22 2018-11-20 Microsoft Technology Licensing, Llc Virtual-reality navigation
US10660032B2 (en) * 2016-04-13 2020-05-19 Qualcomm Incorporated Micro sleep indicator techniques in a wireless communication system
CN106339088B (zh) * 2016-08-30 2020-03-10 维沃移动通信有限公司 检测设备运动状态的方法、手持式移动终端及穿戴式设备
CN106572417B (zh) * 2016-10-27 2019-11-05 腾讯科技(深圳)有限公司 音效控制方法和装置
CN106598213A (zh) * 2016-10-31 2017-04-26 深圳晨芯时代科技有限公司 一种虚拟现实设备及其控制方法、系统
CN106843932B (zh) * 2016-12-26 2020-07-24 歌尔科技有限公司 虚拟现实设备固件的升级方法及系统
CN108809545B (zh) 2017-05-04 2023-01-06 华为技术有限公司 传输上行控制信息的方法和装置
CN107315472A (zh) * 2017-06-15 2017-11-03 闻泰通讯股份有限公司 一种分体式vr数据交互方法及装置
CN107450945A (zh) * 2017-07-13 2017-12-08 北京小鸟看看科技有限公司 一种虚拟现实设备的固件更新方法
WO2019032148A1 (en) 2017-08-08 2019-02-14 Intel Ip Coproration IMPROVED PROGRAMMING FOR WIRELESS COMMUNICATIONS
CN107943282A (zh) * 2017-11-06 2018-04-20 上海念通智能科技有限公司 一种基于增强现实和可穿戴设备的人机交互系统及方法
CN107798924A (zh) * 2017-11-29 2018-03-13 北京幻鲸数字科技有限公司 一种在vr环境下的地理教学方法及系统
CN108182027A (zh) * 2017-12-21 2018-06-19 深圳市舟海科技有限公司 智能穿戴设备的控制方法、背景更新方法和相关设备
US20210184738A1 (en) * 2019-12-16 2021-06-17 Qualcomm Incorporated Indication to update uplink and downlink beams

Also Published As

Publication number Publication date
US11277856B2 (en) 2022-03-15
US20200288492A1 (en) 2020-09-10
US20220191907A1 (en) 2022-06-16
WO2020185447A1 (en) 2020-09-17
KR20210137083A (ko) 2021-11-17
CN113632495A (zh) 2021-11-09
US11678324B2 (en) 2023-06-13
EP3935863A1 (en) 2022-01-12

Similar Documents

Publication Publication Date Title
US11678324B2 (en) Systems and methods for dynamic scheduling
US11723003B2 (en) Latency reduction for artificial reality
US11882552B2 (en) Switching between different communication protocols
KR20230118114A (ko) 무선 통신에서의 twt의 콰이어트 엘리먼트를 위한 시스템 및 방법
US20230189142A1 (en) Systems and methods for beacon alignment for soft access point
JP2022522583A (ja) Ar/vrアプリケーションのための二次リンク
US11316610B2 (en) Systems and methods for beamforming
JP2023547778A (ja) ソフトアクセスポイントのための時間スロット予約
US20220240339A1 (en) Methods and systems for low power reconnection
US20220182935A1 (en) Systems and methods for quiet element in twt for wireless communication
TW202243523A (zh) 用於在無線頻譜中實行共存操作之系統和方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221209

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20231220

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231226