JP2019153347A - 実速度での拡張現実（ａｒ）デバイスの無効化 - Google Patents

実速度での拡張現実（ａｒ）デバイスの無効化 Download PDF

Info

Publication number
JP2019153347A
JP2019153347A JP2019107192A JP2019107192A JP2019153347A JP 2019153347 A JP2019153347 A JP 2019153347A JP 2019107192 A JP2019107192 A JP 2019107192A JP 2019107192 A JP2019107192 A JP 2019107192A JP 2019153347 A JP2019153347 A JP 2019153347A
Authority
JP
Japan
Prior art keywords
information
category
display
shortened
speed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019107192A
Other languages
English (en)
Other versions
JP6867438B2 (ja
Inventor
ジャック・マンダラ
Mandala Jack
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of JP2019153347A publication Critical patent/JP2019153347A/ja
Application granted granted Critical
Publication of JP6867438B2 publication Critical patent/JP6867438B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • B60K35/23—
    • B60K35/29—
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • B60K2360/186—
    • B60K2360/195—
    • B60K2360/334—
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems

Abstract

【課題】拡張現実(AR)デバイスの様々な速度に基づいてARディスプレイ上の情報を制限するためのシステム、装置、および方法を提供すること。【解決手段】システム、デバイス、および方法は、より高いレベルの集中が現実世界の活動に必要とされるとき、装着者があまり注意をそらされないように、3つ以上のレベルの動き(たとえば、静止、歩行、運転)に基づいてARディスプレイに表示される情報を制限する。【選択図】図５

Description

本出願は、本譲受人に譲渡され、参照により本明細書に明確に組み込まれる、2013年3月6日に出願された、「Disabling augmented reality (AR) devices at speed」という名称の米国特許出願第13/787,340号に基づく利益および優先権を主張する。
本開示は、概してワイヤレス拡張現実(AR)ディスプレイのためのシステム、装置、および方法に関し、より詳細には、ARディスプレイが様々な速度で移動中にARディスプレイに示される情報の少なくとも一部を次第に無効にすることに関する。
ARデバイス(たとえば、AR眼鏡またはヘッドマウントディスプレイ)が、ウェブ検索結果、現在のおよび予想される天気、道案内、ソーシャルメディアコンテンツ、ナビゲーション情報、電子メールおよびメッセージング、写真、映画およびTV番組などの情報を装着者に提供することができる。装着者が運転している、走っている、またはさらには歩いているとき、この情報がしばしば注意をそらすもの(distraction)を形成する可能性がある。装着者が不必要に注意をそらされないように、動きに基づいてこの情報をフィルタリングする方法が必要である。
拡張現実(AR)ディスプレイ上の情報を、ARデバイスの様々な速度に基づいて制限するためのシステム、装置、および方法が提示される。装着者が運転している、走っている、またはさらには歩いているとき、情報がしばしば注意をそらすものを形成する。したがって、記載するシステム、デバイス、および方法は、より高いレベルの集中が現実世界の活動に必要とされるとき、装着者が注意をそらされないように、3つ以上のレベルの動き(たとえば、静止、歩行、運転)に基づいてARディスプレイに表示される情報を制限することを目標とする。
いくつかの態様によれば、仮想現実(AR)デバイスのARディスプレイ上の情報を制限するための方法が開示され、この方法は、ARデバイスの速度を判定するステップと、速度を第1の閾値および第2の閾値と比較するステップと、速度を第1の閾値および第2の閾値と比較することに基づいてARディスプレイをフィルタリングするステップとを含み、ARディスプレイをフィルタリングするステップが、速度が第1の閾値を下回るとき、完全な情報をARディスプレイに表示できるようにするステップと、速度が第1の閾値を超え、第2の閾値を下回るとき、完全な情報から簡略化された情報に制限してARディスプレイに表示するステップと、速度が第2の閾値を超えるとき、短縮情報に短縮するステップとを含む。
いくつかの態様によれば、拡張現実(AR)デバイスのARディスプレイ上の情報を制限するためのARシステムが開示され、このARシステムは、ARディスプレイを含んでARディスプレイに情報を投影するように構成されたARデバイスと、速度を提供する速度センサと、プロセッサとを含み、プロセッサは、速度が第1の閾値を下回ることに基づいて完全な情報がARディスプレイに表示されることを可能にし、速度が第1の閾値を上回り第2の閾値を下回ることに基づいて完全な情報から簡略化された情報に制限してARディスプレイに表示され、速度が第2の閾値を上回ることに基づいて短縮情報に短縮するように構成される。
いくつかの態様によれば、拡張現実(AR)デバイスのARディスプレイ上の情報を制限するためのARシステムが開示され、このシステムは、ARデバイスの速度を判定するための手段と、速度を第1の閾値および第2の閾値と比較するための手段と、速度を第1の閾値および第2の閾値と比較することに基づいてARディスプレイをフィルタリングするための手段とを含み、ARディスプレイをフィルタリングするための手段が、速度が第1の閾値を下回るとき完全な情報をARディスプレイに表示できるようにするための手段と、速度が第1の閾値を上回り、第2の閾値を下回るとき、完全な情報から簡略化された情報に制限してARディスプレイに表示するための手段と、速度が第2の閾値を上回るとき、簡略化された情報を短縮するための手段とを含む。
いくつかの態様によれば、拡張現実(AR)ディスプレイ上の情報を制限するためのARデバイスが開示され、このARデバイスは、プロセッサと、メモリとを含み、メモリは、ARデバイスの速度を判定する、速度を第1の閾値および第2の閾値と比較する、速度を第1の閾値および第2の閾値と比較することに基づいてARディスプレイをフィルタリングするソフトウェア命令を含み、ARディスプレイをフィルタリングするソフトウェア命令が、速度が第1の閾値を下回るとき完全な情報をARディスプレイに表示できるようにし、速度が第1の閾値を上回り、第2の閾値を下回るとき、完全な情報から簡略化された情報に制限してARディスプレイに表示し、速度が第2の閾値を上回るとき、短縮情報に短縮するソフトウェア命令を含む。
いくつかの態様によれば、拡張現実(AR)デバイスのARディスプレイ上の情報を制限するためにそこに格納されたプログラムコードを含んだ非一時的コンピュータ可読記憶媒体が開示され、この非一時的コンピュータ可読記憶媒体は、ARデバイスの速度を判定する、速度を第1の閾値および第2の閾値と比較する、速度を第1の閾値および第2の閾値と比較することに基づいてARディスプレイをフィルタリングするプログラムコードを含み、ARディスプレイをフィルタリングするプログラムコードが、速度が第1の閾値を下回るとき完全な情報をARディスプレイに表示できるようにし、速度が第1の閾値を上回り、第2の閾値を下回るとき、完全な情報から簡略化された情報に制限してARディスプレイに表示し、速度が第2の閾値を上回るとき、短縮情報に短縮するプログラムコードを含む。
例として様々な態様を示され、説明される次の詳細な説明から、当業者には他の態様が容易に明らかになることは理解される。図面および詳細な説明は、性質上例示とみなされるべきであり、制限とみなされるべきではない。
本発明の実施形態について、単に例として、添付の図面を参照して説明する。
本発明の一実施形態に従ってARシステムを示す図である。 本発明の一実施形態に従ってARシステムを示す図である。 本発明の一実施形態に従ってARシステムを示す図である。 本発明の一実施形態に従ってARシステムを示す図である。 本発明のいくつかの実施形態に従って、速度に基づいてARディスプレイを制限する方法を示す図である。 本発明の一実施形態に従ってARディスプレイを示す図である。 本発明の一実施形態に従ってARディスプレイを示す図である。 本発明の一実施形態に従ってARディスプレイを示す図である。 本発明の一実施形態に従ってARディスプレイを示す図である。 本発明の一実施形態に従ってARディスプレイを示す図である。 本発明の一実施形態に従ってARディスプレイを示す図である。 本発明の一実施形態に従ってARディスプレイを示す図である。 本発明の一実施形態に従ってARディスプレイを示す図である。 本発明の一実施形態に従ってARディスプレイを示す図である。 本発明の一実施形態に従ってARディスプレイを示す図である。 本発明のいくつかの実施形態に従って、変化する速度に基づいて表示される項目の表である。
添付の図面に関連して以下に示す詳細な説明は、本開示の様々な態様の説明とするものであり、本開示を実践することができる態様のみを表すものではない。この開示に記載する各態様は、単に本開示の一例または例示として提供され、必ずしも他の態様よりも好ましいまたは有利であると解釈されるべきではない。詳細な説明は、本開示を完全に理解できるようにするために特定の詳細を含む。しかしながら、当業者には明らかであるように、本開示は、これらの特定の詳細なしで実践することができる。いくつかの例では、本開示の概念を不明瞭にすることを避けるために、周知の構造およびデバイスをブロック図の形態で示す。頭字語および他の記述用語が、便宜上または明確にするために使用されることがあるが、本開示の範囲を限定しようとするものではない。
本明細書に記載する位置判定技法は、ワイヤレスワイドエリアネットワーク(WWAN)、ワイヤレスローカルエリアネットワーク(WLAN)、ワイヤレスパーソナルエリアネットワーク(WPAN)など、様々なワイヤレス通信ネットワークと併せて実装されることが可能である。「ネットワーク」および「システム」という用語は、多くの場合区別なく用いられている。WWANは、符号分割多元接続(CDMA)ネットワーク、時分割多元接続(TDMA)ネットワーク、周波数分割多元接続(FDMA)ネットワーク、直交周波数分割多元接続(OFDMA)ネットワーク、シングルキャリア周波数分割多元接続(SC-FDMA)ネットワーク、ロングタームエボリューション(LTE)などであることが可能である。CDMAネットワークは、cdma2000、広帯域CDMA(W-CDMA)など、1つまたは複数の無線アクセス技術(RAT)を実装することができる。cdma2000は、IS-95規格、IS-2000規格、およびIS-856規格を含む。TDMAネットワークは、モバイル通信用グローバルシステム(GSM(登録商標):Global System for Mobile Communications)、デジタル高機能携帯電話システム(D-AMPS:Digital Advanced Mobile Phone System)、またはその他のRATを実装することができる。GSM(登録商標)およびW-CDMAについては、「第3世代パートナーシッププロジェクト」(3GPP)と名付けられた団体からの文書に記載されている。cdma2000については、「第三世代パートナーシップ2」(3GPP2)と名付けられた団体からの文書に記載されている。3GPPおよび3GPP2の文書は、公的に入手可能である。WLANは、IEEE802.11xネットワークであることが可能であり、WPANは、Bluetooth(登録商標)ネットワーク、IEEE802.15x、または他のタイプのネットワークであることが可能である。この技術は、WWAN、WLAN、および/またはWPANのいかなる組合せと併せて実装することもできる。
本明細書で使用するモバイルデバイスは、時には移動局(MS)またはユーザ機器(UE)、たとえばセルラ電話、携帯電話、もしくは他の無線通信デバイス、パーソナルコミュニケーションシステム(PCS)デバイス、パーソナルナビゲーションデバイス(PND)、パーソナルインフォメーションマネージャ(PIM)、携帯情報端末(PDA)、ラップトップ、またはワイヤレス通信および/もしくはナビゲーション信号を受信することができる他の好適なモバイルデバイスなどと呼ばれる。「モバイルデバイス」という用語はまた、たとえば近距離のワイヤレス、赤外線、有線接続、または他の接続によって、パーソナルナビゲーションデバイス(PND)と通信するデバイスを含むよう意図されており、衛星信号の受信、支援データの受信、および/または位置関連の処理がデバイスで行われるか、PNDで行われるかを問わない。また「モバイルデバイス」は、たとえばインターネット、Wi-Fi、または他のネットワークを介してサーバと通信することができる、ワイヤレス通信デバイス、コンピュータ、ラップトップなどのすべてのデバイスを含むよう意図されており、衛星信号の受信、支援データの受信、および/または位置関連の処理がデバイスで、サーバで、またはネットワークと関連する別のデバイスで行われるかどうかを問わない。上記のいかなる使用可能な組合せも、同様に「モバイルデバイス」とみなされる。
拡張現実(AR)ディスプレイに表示される情報を、完全な情報から短縮情報に制限された情報まで、ARデバイスの様々な速度に基づいてフィルタリングするためのシステム、装置、および方法が提示される。装着者が運転している、走っている、またはさらには歩いているとき、情報がしばしば注意をそらすものを形成する。したがって、記載するシステム、デバイス、および方法は、より高いレベルの集中が現実世界の活動に必要とされるとき、装着者があまり注意をそらされないように、3つ以上のレベルの動き(たとえば、静止、歩行、運転)に基づいてARディスプレイに表示される情報をフィルタリングすることを目標とする。
図1〜図4は、本発明のいくつかの実施形態に従って、ARシステムを示している。いくつかのARシステムは、ARデバイス100、モバイルデバイス200、およびネットワーク300を含む。ARデバイス100は、独立型、またはモバイルデバイス200と一体化したものとすることができる。ARデバイス100は、モバイルデバイス200を介してネットワーク300に間接的に接続されてもよい。ARデバイス100は、別個のモバイルデバイス200なしでネットワーク300に直接接続されてもよい。ARデバイス100は、ネットワーク300に接続されなくてもよい。モバイルデバイス200が含まれるとき、ARデバイス100とネットワーク300との間の通信を提供することができる。ネットワーク300は、セルラネットワークおよび/またはWiFiネットワークであって、場合によりインターネット上のサーバに接続されてもよい。
図1では、システムが、ネットワーク300-1と通信しているARデバイス100-1を含んでいる。別個のモバイルデバイス200は含まれていない。ARデバイス100-1は、ワイヤレス回路と、速度センサとを含んでいる。ARデバイス100-1は、眼鏡または他のヘッドマウントディスプレイまたはディスプレイもしくは画像プロジェクタを有するモバイルデバイスの形態とすることができる。ワイヤレス回路によりARデバイス100-1は、ワイドエリアネットワーク(WAN)を使用してネットワーク300-1にワイヤレスに接続することができる。WANワイヤレス回路は、WANネットワーク(たとえば、セルラネットワークおよび/またはWiFiネットワーク)への相互接続を含むことができる。速度センサは、GPSデバイス、モーションセンサ、加速度計、ジャイロメータ、および/または同様のものを含むことができる。速度センサは、速度または速さパラメータを含んだメッセージを受信する受信機であってもよい。いずれの場合も、ARデバイス100中の速度センサおよびプロセッサは、ARデバイス100-1が移動している速度のカテゴリを検出することができる。
図2では、ARデバイス100-2がモバイルデバイス200-1にワイヤレスに結合される。ARデバイス100-2は、Bluetooth(登録商標)ワイヤレス回路などのパーソナルエリアネットワーク(PAN)を介してモバイルデバイス200-1に接続するワイヤレス回路を含む。ARデバイス100-2には、WAN接続がなくてもよい。また、モバイルデバイス200-1には、ネットワーク300へのWAN接続があっても、なくてもよい。ARデバイス100-2は、ヘッドマウントなどの形態とすることができる。モバイルデバイス200-1は、モバイルデバイス200-1が移動している速度のカテゴリを検出する速度センサおよびプロセッサを含み、したがって、モバイルデバイス200-1とともに移動していると考えられるARデバイス100-1の速度は、わかるようになる。
図3では、システムが、ARデバイス100-2(上記)、モバイルデバイス200-2、およびネットワーク300-2を含む。ARデバイス100-2は、PANインターフェースを使用してモバイルデバイス200-2と通信する。そして、モバイルデバイス200-2は、別のPANインターフェースを用いてARデバイス100と、およびWANインターフェースを使用してネットワーク300-2と通信する。この図では、ネットワーク300-2は、モバイルデバイス200-2の速度、したがってARデバイス100-2の速度を判定する。モバイルデバイス200-2は、この速度または速度の量子化されたレベルを含んだネットワーク300-2からのメッセージを受信する。
図4では、システムが、ARデバイス100-2(上記)、モバイルデバイス200-1、およびネットワーク300-2を含む。モバイルデバイス200-1は、モバイルデバイス200-1が移動している速度のカテゴリを検出する速度センサおよびプロセッサを含み、したがって、モバイルデバイス200-1とともに移動していると考えられるARデバイス100-2の速度は、わかるようになる。
上記の各システムでは、動きを少なくとも3つのカテゴリ(たとえば、静止、歩行、運転)に分類するために、速度が量子化される、言い換えれば閾値と比較される。ARデバイス100の速度は、ネットワーク300、モバイルデバイス200、またはARデバイス100自体によって判定されることが可能である。
図6〜図15は、本発明のいくつかの実施形態に従って、様々なARディスプレイを示している。
図5では、本発明のいくつかの実施形態に従って、速度に基づいてARディスプレイを制限する方法400が示される。処理は、ARデバイス100で行われてもよい。あるいは処理は、モバイルデバイス200またはネットワーク300にオフロードされてもよい。いずれの場合にも、ARデバイス100は、現在の速度がある閾値の間であることに基づいて、様々なレベル、ボリューム、量、または種類の情報を示す。次の例は、3つの重なっていないカテゴリの間で速度が上昇している、すなわち、静止位置(第1の閾値を下回る)から歩行速度(第1の閾値と第2の閾値との間)へ、最終的には運転速度(第2の閾値を上回る)になると考える。一般的には、速度が上昇するにつれて、注意をそらす情報がARデバイス100を介してユーザにあまり提示されなくなる。
410において、プロセッサがARデバイス100の速度を判定する。速度を判定するプロセッサは、ARデバイス100に、付随するモバイルデバイス200に、ARデバイス100もしくはモバイルデバイス200を追跡するネットワーク300またはその組合せにあってもよい。多くの場合、モバイルデバイス200は、モバイルデバイス200(したがって付随するARデバイス100)の速度を判定するために使用することができる内蔵GPS受信機を有する。同じプロセッサまたは異なるプロセッサは、ARデバイス100が特定の速度で移動しているかどうかを判定する。
420において、プロセッサが、速度を第1の閾値および第2の閾値と比較する。たとえば、第1の閾値は、歩行中のユーザから静止ユーザを線引きすることができ、第2の閾値は、運転中のユーザから歩行中のユーザを線引きことができる。
430において、プロセッサは、第1の閾値および第2の閾値に対する判定された速度の比較に基づいて、ARディスプレイのために情報をフィルタリングする。フィルタリングは、ステップ440(静止)、ステップ450(歩行)、およびステップ460(運転)でさらに説明する。
440において、プロセッサは、第1の速度が第1の閾値を下回ることに基づいて、AR情報のすべてがARデバイス100上に示されることを可能にする。この場合、ARデバイス100は、(たとえば、ユーザが歩行中から静止ユーザを線引きすると考えられる)第1の閾値を下回る速度で移動しており、したがってAR情報はフィルタリングされない。プロセッサは、モバイルデバイス200にあって、ARデバイス100にAR情報をフィードしてもよい。あるいはプロセッサは、ARデバイス100自体にあって、判定した速度に基づいてどのAR情報を表示するかを決定してもよい。あるいはプロセッサは、ネットワーク300にあって、モバイルデバイス200を介して間接的に、またはネットワーク300を介して直接的に、ARデバイス100にAR情報をフィードしてもよい。
450において、プロセッサは、速度が第1の閾値を上回り、第2の閾値を下回るとき、完全な情報を簡略化された情報に制限してARディスプレイに表示されるようにする。この場合、ARデバイス100は、第1の閾値を上回るが第2の閾値を下回る速度で移動している。たとえば、ARデバイス100は、現在、第1の閾値と第2の閾値の間である歩行速度で動いている。プロセッサは、AR情報の一部をフィルタリングすることができる。たとえば、簡略化された情報は、単にアイコンもしくは数バイトのAR情報、可聴音、読み上げられるテキスト、またはほんの数秒間表示されるアイコンもしくはテキストであってもよく、それによりユーザにとって注意をそらすものを制限する。
460においてプロセッサは、速度が第2の閾値を上回るとき、完全な情報または簡略化された情報を短縮情報にさらに短縮する。この場合、ARデバイス100は、第2の閾値を上回って移動している。たとえば、ARデバイス100は、現在、第2の閾値を上回る運転速度で動いている。ARデバイス100は、ARデバイス100が第2の閾値を上回って移動していることに基づいて、簡略化されたAR情報をさらに制限すること、またはAR情報を表示しないことによって、情報を短縮することができる。すなわちプロセッサは、AR情報のかなりの部分または全部をフィルタリングすることができる。たとえば、ARディスプレイは、AR情報を全く示さない、数バイトをフィルタリングして単にアイコンにする、音声を再生する、文字のテキストを可聴音に変換する、および/または所定の時間(たとえば、1秒、2秒、5秒、または10秒)の間、簡略化された情報を一瞬の間示すことが可能である。
ARデバイス100は、第1の閾値速度および第2の閾値速度よりも遅く移動することと、速く移動することとを繰り返すことがある。したがって、ARデバイス100が速度を変えるにつれて、ARディスプレイは、完全なAR情報を示す、様々な量の簡略化されたAR情報を示す、またはAR情報を示さないことが可能である。一般的に、ARデバイスは、非常に限られたAR情報が表示される、またはAR情報が表示されなくなるまで、速度閾値が上がるにつれて、より少ない情報を表示する。したがって、簡略化された情報は、完全な情報よりも少ない情報を含み、短縮情報は、簡略化された情報よりも少ない情報を含む。たとえば、アイコンが、テキストよりも少ない情報を含む。同様に、音声またはビープ音は、アイコンよりも少ない情報を含む。より低い解像度の画像は、より高い解像度の画像よりも少ない情報を含む。より小さい画像は、より大きい画像よりも少ない情報を含む。ビープ音は、読み上げられるテキストよりも少ない情報を含む。
ARデバイス100(たとえば、AR眼鏡などのヘッドマウントディスプレイ)が、ウェブ検索結果、現在のおよび予想される天気、道案内、ソーシャルメディアコンテンツ、ナビゲーション情報、電子メールおよびメッセージング、写真、映画およびTV番組などの情報を装着者に提供することができる。注意をそらすものを制限するために、装着者が第1の閾値を上回る速度で移動しているとき、この情報の一部が制限され、装着者がより高い第2の閾値を上回る速度で移動しているとき、さらに制限される、または無効にされる。
図6に示すように、たとえばウェブ検索結果が、静止しているとき、完全に詳細に示され、ARディスプレイ上の中心に置かれる。図7に示すように、第1の閾値と第2の閾値との間で動いている(たとえば、歩いている)とき、ウェブ検索結果は、ビューのメインフィールドの脇にアイコンとして示される。図8では、天気は、静止しているとき、完全な、詳細情報で示される。しかしながら図9では、第1の閾値と第2の閾値との間で動いているとき、天気は、現在の気温および「時々曇り」または「雨のおそれ」などの簡単なその日の予報に制限されている。図10では、静止しているとき、画面全体にわたって映画が示されている。しかしながら図11では、映画またはTV番組は一時停止され、アイコンとして脇に示されている。図12では、静止しているとき、詳細な道案内が示されている。図13では、第1の閾値と第2の閾値との間で動いているとき、詳細な道案内は、短い段階的な道案内に変換される。図14では、たとえばソーシャルメディアアプリケーションもしくはサイト、電子メール、メッセージング、または写真からのAR情報が、静止とともに完全に詳細に示される。しかしながら図15では、第1の閾値と第2の閾値との間で動いているとき、このAR情報は、ユーザの注意をそらさないように脇に移されたアイコンとして示される。上記の実施形態のそれぞれにおいて、第2の閾値を上回って動いているとき、ARディスプレイが無効にされる。
表示されるAR情報は、速度に基づいてフィルタリングされることが可能である。たとえば、装着者が静止しているまたは第1の閾値速度を下回って移動しているとき、AR情報は完全に提示される。装着者が第1の閾値速度を上回るが第2の閾値速度を下回って移動しているとき、AR情報は簡略化される。装着者が第2の閾値速度を上回って移動しているとき、AR情報はさらに簡略化される、または無効にされる。あるいは、3つ以上の閾値が使用される。すなわち、装着者が第1の閾値を下回って移動している(たとえば、静止に近い)とき、AR情報は、完全に利用できる。装着者が第1の閾値と第2の閾値との間で移動している(たとえば、歩行中である)とき、一部のAR情報が簡略化される。装着者が第2の閾値と第3の閾値との間で移動している(たとえば、ジョギング中である)とき、より多くが簡略化される。装着者が第3の閾値を上回って移動している(たとえば、運転中である)とき、AR情報のさらに多くが簡略化される、または無効にされる。
図16は、本発明のいくつかの実施形態に従って、変化する速度に基づいて表示される項目を表にしたものである。表示されるAR情報は、速度および内容に基づいてフィルタリングされることが可能である。速度(たとえば、単位mphまたはkph)は、3つ以上のカテゴリに量子化されてもよい。たとえば、第1の閾値を下回るARデバイス100が、静止している、またはほとんど動いていないとみなされてもよい。第1の閾値と第2の閾値との間のARデバイス100は、歩行中である、またはゆっくり動いているとみなされてもよい。第2の閾値を上回るARデバイス100は、運転中である、または速く動いているとみなされてもよい。さらにカテゴリまたは量子化レベルが考慮されてもよい。
図のように、ウェブ検索結果、天気、および道案内は、それぞれ異なるように扱われることが可能である。ウェブ検索結果は、静止しているとき、完全に詳細に示され、ゆっくり動いているとき、アイコンとして示されるが、速く動いているとき、無効にされることが可能である。道案内は、静止しているとき、完全に詳細に示され、歩いているとき、簡略化されたリストとして示され、装着者が運転しているとき、次の曲がり角を示す1本の線に簡略化されることが可能である。天気は、静止では完全に詳細に示され、歩いている、または運転しているとき、同じ詳細まで簡略化されることが可能である。
AR情報は、これを一瞬の間(すなわち、速度に基づいた所定の時間の間)表示することによって簡略化される。たとえば、装着者が静止している(または第1の閾値速度を下回って移動している)ときに新しいメッセージが届く場合、完全なメッセージが表示される。装着者が第1の閾値速度を上回り、第2の閾値速度を下回って移動しているとき、アイコンが一瞬の間表示されて(たとえば、2秒間)、装着者に新しいメッセージを知らせ、その後消える、または最小化されてアイコンになる。装着者が第2の閾値速度を上回って移動しているとき、音声アラートが一瞬の間聞こえて(たとえば、ビープ音、「メールが届きました」または「左に関心の地点」と述べるメッセージ)、装着者に新しいイベントを知らせる。この時点で、装着者は音声のプロンプトおよびコマンド(たとえば、「メールを読む」)を使用することで、視覚的に注意をそらすことを避けることができる、またはより遅い速度で動くことができる。
さらに、速度または量子化された速度が、実際の速さを判定することなく判定されることが可能である。たとえば、モーションセンサが、ARデバイス100またはモバイルデバイス200は、モーションセンサが動きを全くまたはほとんど検出しない(たとえば、第1の閾値を下回る)とき、停止している、モーションセンサがいくらかの動きを検出する(たとえば、第1の閾値と第2の閾値の間)ときゆっくり動いている、モーションセンサが急速に変化する動きまたは振動を検出する(たとえば、第2の閾値を上回る)とき、速く動いていると判定することができる。この場合、動きがないまたはほとんどないことが停止を表し、いくらかの動きが歩行を表し、著しい動きが運転を表す。さらに、たとえばユーザが、車、またはタクシー、列車、バス、もしくは航空機などの公共交通機関の乗客であるとき、ユーザがこの閾値テストを停止する(override)ことができる。
本明細書に記載する手法は、用途に応じて様々な手段によって実行することができる。たとえばこうした手法は、ハードウェア、ファームウェア、ソフトウェア、またはその任意の組合せで実行することができる。ハードウェアによる実行については、1つまたは複数の特定用途向け集積回路(ASIC)、デジタル信号プロセッサ(DSP)、デジタル信号処理装置(DSPD)、プログラマブルロジックデバイス(PLD)、フィールドプログラマブルゲートアレイ(FPGA)、プロセッサ、コントローラ、マイクロコントローラ、マイクロプロセッサ、電子デバイス、本明細書に記載する機能を実行するように設計された他の電子ユニット、またはその組合せの中に、処理ユニットを実装することができる。
ファームウェアおよび/またはソフトウェアによる実行については、本明細書に記載する機能を実行するモジュール(たとえばプロシージャ、関数など)を用いて、方法を実装することができる。本明細書に記載する方法を実行する際に、命令を実体的に組み入れるいかなる機械可読媒体も使用することができる。たとえば、ソフトウェアコードをメモリに格納し、プロセッサユニットによって実行することができる。メモリは、処理ユニット内にまたは処理ユニット外に実装することができる。本明細書で使用する「メモリ」という用語は、いかなるタイプの長期、短期、揮発性、不揮発性、または他のメモリを指し、メモリもしくはいくつかのメモリの特定のタイプ、またはメモリが格納される媒体のタイプに限定されないものとする。
ファームウェアおよび/またはソフトウェアで実行される場合、機能は、コンピュータ可読媒体上に1つまたは複数の命令またはコードとして格納されることが可能である。例には、データ構造でコード化されたコンピュータ可読媒体、およびコンピュータプログラムでコード化されたコンピュータ可読媒体が含まれる。コンピュータ可読媒体は、物理的なコンピュータ記憶媒体を含む。記憶媒体は、コンピュータがアクセスすることができるいかなる入手可能な媒体であってもよい。例として、このようなコンピュータ可読媒体は、RAM、ROM、EEPROM、CD-ROMもしくは他の光ディスク記憶装置、磁気ディスク記憶装置もしくは他の磁気記憶装置、または、所望のプログラムコードを命令もしくはデータ構造の形式で格納するために使用することができ、コンピュータがアクセスすることができる他のいかなる媒体も含むことができるが、これらに限定ではなく、本明細書で使用するディスク(disk)およびディスク(disc)は、コンパクトディスク(CD:compact disc)、レーザディスク(laser disc)、光ディスク(optical disc)、デジタル多用途ディスク(DVD:digital versatile disc)、フロッピー（登録商標）ディスク(floppy disk)、およびブルーレイディスク(blu-ray(登録商標) disc)を含み、ディスク(disk)は通常磁気的にデータを再生し、ディスク(disc)はレーザを使用して光学的にデータを再生する。上記のものの組合せもまた、コンピュータ可読媒体の範囲内に含まれるべきである。
コンピュータ可読媒体上に記憶することに加えて、命令および/またはデータは、通信装置に含まれる伝送媒体上の信号として提供することができる。たとえば、通信装置は、命令およびデータを示す信号を有するトランシーバを含むことができる。命令およびデータは、1つまたは複数のプロセッサに特許請求の範囲に概要を示す機能を実行させるように構成される。すなわち、通信装置は、開示の機能を実行するための情報を示す信号を有する送信媒体を含む。第1に、通信装置に含まれる送信媒体は、開示の機能を行うための情報の第1の部分を含むことができ、第2に、通信装置に含まれる送信媒体は、開示の機能を行うための情報の第2の部分を含むことができる。
当業者が本開示を作成するまたは利用することができるように、開示した実施形態の前述の説明を提供する。これらの態様への様々な変更形態が当業者には容易に理解されることとなり、本明細書で定義した一般的な原理は、本開示の趣旨または範囲を逸脱することなく他の態様に適用され得る。
100 ARデバイス
200 モバイルデバイス
300 ネットワーク

Claims (34)

  1. 拡張現実(AR)デバイスのARディスプレイ上の情報を制限するための方法であって、
    前記ARデバイスの速度を判定するステップと、
    複数の閾値に対する前記速度の比較に少なくとも部分的に基づき、動きのカテゴリを決定するステップであって、前記動きのカテゴリは、第1のカテゴリ、第2のカテゴリ、および第3のカテゴリを含み、第1の閾値が、前記第1のカテゴリおよび前記第2のカテゴリ間を線引きし、第2の閾値が、前記第2のカテゴリおよび前記第3のカテゴリ間を線引きする、ステップと、
    前記動きのカテゴリの決定に基づいて前記ARディスプレイをフィルタリングするステップであって、
    前記第1のカテゴリに対して、完全な情報を前記ARディスプレイに表示できるようにするステップであって、前記完全な情報がテキストまたは画像を少なくとも含む、ステップと、
    前記第2のカテゴリに対して、少なくとも、前記ARディスプレイの全体に渡って表示される前記完全な情報を前記ARディスプレイの脇部分に表示されるアイコンで代替することにより、前記完全な情報から、前記ARディスプレイに表示するための簡略化された情報に制限するステップであって、前記アイコンが前記完全な情報よりも少ない情報を含む、ステップと、
    前記第3のカテゴリに対して、短縮情報に移行するステップであって、前記短縮情報が前記簡略化された情報よりも少ない情報を含む、ステップと
    を含む、フィルタリングするステップと
    を含む、方法。
  2. 前記ARデバイスが、ヘッドマウントディスプレイを含む、請求項1に記載の方法。
  3. 前記第１の閾値が、歩行中のユーザから静止中のユーザを線引きする、請求項1に記載の方法。
  4. 記第２の閾値が、運転中のユーザから歩行中のユーザを線引きする、請求項1に記載の方法。
  5. 前記ARデバイスの前記速度を判定するステップが、モバイルデバイスの速度を判定するステップを含む、請求項1に記載の方法。
  6. 前記短縮情報に移行するステップが、前記短縮情報を一瞬の間提示するステップを含む、請求項1に記載の方法。
  7. 前記短縮情報に移行するステップが、
    前記完全な情報の情報タイプを判定するステップと、
    前記情報タイプに基づいて前記短縮情報を表示するステップと
    を含む、請求項1に記載の方法。
  8. 前記短縮情報に移行するステップが、ユーザに一瞬の間通知するステップを含む、請求項1に記載の方法。
  9. 前記短縮情報に移行するステップが、いずれかのAR情報の表示を無効にするステップを含む、請求項1に記載の方法。
  10. 前記短縮情報が、音声信号を含む、請求項1に記載の方法。
  11. 拡張現実(AR)デバイスのARディスプレイ上の情報を制限するためのARシステムであって、
    前記ARディスプレイを備える前記ARデバイスであって、前記ARディスプレイ上で情報を投影するように構成される前記ARデバイスと、
    速度を提供する速度センサと、
    プロセッサとを備え、前記プロセッサが、
    複数の閾値に対する前記速度の比較に少なくとも部分的に基づき、動きのカテゴリを決定することであって、前記動きのカテゴリは、第1のカテゴリ、第2のカテゴリ、および第3のカテゴリを含み、第1の閾値が、前記第1のカテゴリおよび前記第2のカテゴリ間を線引きし、第2の閾値が、前記第2のカテゴリおよび前記第3のカテゴリ間を線引きする、前記動きカテゴリを決定することと、
    前記第1のカテゴリに対して、完全な情報を前記ARディスプレイに表示できるようにすることであって、前記完全な情報がテキストまたは画像を少なくとも含む、表示できるようにすることと、
    前記第2のカテゴリに対して、少なくとも、前記ARディスプレイの全体に渡って表示される前記完全な情報を前記ARディスプレイの脇部分に表示されるアイコンで代替することにより、前記完全な情報から、前記ARディスプレイに表示するための簡略化された情報に制限することであって、前記アイコンが前記完全な情報よりも少ない情報を含む、制限することと、
    前記第3のカテゴリに対して、短縮情報に移行することであって、前記短縮情報が前記簡略化された情報よりも少ない情報を含む、移行することと
    を行うように構成される、ARシステム。
  12. 前記ARデバイスが、ヘッドマウントディスプレイを備える、請求項11に記載のARシステム。
  13. 前記ARデバイスが前記速度センサを備える、請求項11に記載のARシステム。
  14. モバイルデバイスをさらに備える、請求項11に記載のARシステム。
  15. 前記モバイルデバイスが、前記プロセッサを備える請求項14に記載のARシステム。
  16. 拡張現実(AR)デバイスのARディスプレイ上の情報を制限するためのARシステムであって、
    前記ARデバイスの速度を判定するための手段と、
    複数の閾値に対する前記速度の比較に少なくとも部分的に基づき、動きのカテゴリを決定するための手段であって、前記動きのカテゴリは、第1のカテゴリ、第2のカテゴリ、および第3のカテゴリを含み、第1の閾値が、前記第1のカテゴリおよび前記第2のカテゴリ間を線引きし、第2の閾値が、前記第2のカテゴリおよび前記第3のカテゴリ間を線引きする、手段と、
    前記動きのカテゴリの決定に基づいて前記ARディスプレイをフィルタリングするための手段であって、
    前記第1のカテゴリに対して、完全な情報を前記ARディスプレイに表示できるようにするための手段であって、前記完全な情報がテキストまたは画像を少なくとも含む、手段と、
    前記第2のカテゴリに対して、少なくとも、前記ARディスプレイの全体に渡って表示される前記完全な情報を前記ARディスプレイの脇部分に表示されるアイコンで代替することにより、前記完全な情報から、前記ARディスプレイに表示するための簡略化された情報に制限するための手段であって、前記アイコンが前記完全な情報よりも少ない情報を含む、手段と、
    前記第3のカテゴリに対して、短縮情報に移行するための手段であって、前記短縮情報が前記簡略化された情報よりも少ない情報を含む、手段と
    を含む、フィルタリングするための手段と
    を含む、システム。
  17. 前記ARデバイスが、ヘッドマウントディスプレイを含む、請求項16に記載のシステム。
  18. 前記完全な情報の情報タイプを判定するための手段をさらに含む、請求項16に記載のシステム。
  19. 前記短縮情報が前記アイコンを含む、請求項16に記載のシステム。
  20. 前記短縮情報に移行するための前記手段が、ユーザに一瞬の間通知するための手段を含む、請求項16に記載のシステム。
  21. 前記短縮情報に移行するための前記手段が、いずれかのAR情報の表示を無効にするための手段を含む、請求項16に記載のシステム。
  22. 前記短縮情報が音声信号を含む、請求項16に記載のシステム。
  23. 拡張現実(AR)デバイスのARディスプレイ上の情報を制限するためのARデバイスであって、プロセッサおよびメモリを備え、前記メモリが、
    前記ARデバイスの速度を判定するためのソフトウェア命令と、
    複数の閾値に対する前記速度の比較に少なくとも部分的に基づき、動きのカテゴリを決定するためのソフトウェア命令であって、前記動きのカテゴリは、第1のカテゴリ、第2のカテゴリ、および第3のカテゴリを含み、第1の閾値が、前記第1のカテゴリおよび前記第2のカテゴリ間を線引きし、第2の閾値が、前記第2のカテゴリおよび前記第3のカテゴリ間を線引きする、ソフトウェア命令と、
    前記動きのカテゴリの決定に基づいて前記ARディスプレイをフィルタリングするためのソフトウェア命令であって、
    前記第1のカテゴリに対して、完全な情報を前記ARディスプレイに表示できるようにするためのソフトウェア命令であって、前記完全な情報がテキストまたは画像を少なくとも含む、ソフトウェア命令と、
    前記第2のカテゴリに対して、少なくとも、前記ARディスプレイの全体に渡って表示される前記完全な情報を前記ARディスプレイの脇部分に表示されるアイコンで代替することにより、前記完全な情報から、前記ARディスプレイに表示するための簡略化された情報に制限するためのソフトウェア命令であって、前記アイコンが前記完全な情報よりも少ない情報を含む、ソフトウェア命令と、
    前記第3のカテゴリに対して、短縮情報に移行するためのソフトウェア命令であって、前記短縮情報が前記簡略化された情報よりも少ない情報を含む、ソフトウェア命令と
    を含む、フィルタリングするためのソフトウェア命令と
    を備える、ARデバイス。
  24. 前記ARデバイスが、ヘッドマウントディスプレイを含む、請求項23に記載のARデバイス。
  25. 前記完全な情報の情報タイプを判定するためのソフトウェア命令をさらに含む、請求項23に記載のARデバイス。
  26. 拡張現実(AR)デバイスのARディスプレイ上の情報を制限するためのプログラムコードを含む、コンピュータ可読記録媒体であって、
    前記ARデバイスの速度を判定するためのプログラムコードと、
    複数の閾値に対する前記速度の比較に少なくとも部分的に基づき、動きのカテゴリを決定するためのプログラムコードであって、前記動きのカテゴリは、第1のカテゴリ、第2のカテゴリ、および第3のカテゴリを含み、第1の閾値が、前記第1のカテゴリおよび前記第2のカテゴリ間を線引きし、第2の閾値が、前記第2のカテゴリおよび前記第3のカテゴリ間を線引きする、プログラムコードと、
    前記動きのカテゴリの決定に基づいて前記ARディスプレイをフィルタリングするためのプログラムコードであって、
    前記第1のカテゴリに対して、完全な情報を前記ARディスプレイに表示できるようにするためのプログラムコードであって、前記完全な情報がテキストまたは画像を少なくとも含む、プログラムコードと、
    前記第2のカテゴリに対して、少なくとも、前記ARディスプレイの全体に渡って表示される前記完全な情報を前記ARディスプレイの脇部分に表示されるアイコンで代替することにより、前記完全な情報から、前記ARディスプレイに表示するための簡略化された情報に制限するためのプログラムコードであって、前記アイコンが前記完全な情報よりも少ない情報を含む、プログラムコードと、
    前記第3のカテゴリに対して、短縮情報に移行するためのプログラムコードであって、前記短縮情報が前記簡略化された情報よりも少ない情報を含む、プログラムコードと
    を含む、フィルタリングするためのプログラムコードと
    を含む、コンピュータ可読記録媒体。
  27. 前記短縮情報に移行する前記プロセッサが、前記短縮情報を一瞬の間提示するプロセッサを含む、請求項11に記載のARシステム。
  28. 前記短縮情報に移行する前記プロセッサが、ユーザに一瞬の間通知するプロセッサを含む、請求項11に記載のARシステム。
  29. 前記短縮情報に移行するための前記手段が、前記短縮情報を一瞬の間提示するための手段を含む、請求項16に記載のシステム。
  30. 前記アイコンが前記ARディスプレイのコーナー部分に表示される、請求項1に記載の方法。
  31. 前記完全な情報がテキストおよび画像を含み、前記テキストおよび前記画像が少なくとも前記ARディスプレイの脇部分に表示される前記アイコンで代替される、請求項1に記載の方法。
  32. 前記短縮情報が音声信号を含む、請求項11に記載のARシステム。
  33. 前記短縮情報が音声信号を含む、請求項23に記載のARデバイス。
  34. 前記短縮情報が音声信号を含む、請求項26に記載のコンピュータ可読記録媒体。
JP2019107192A 2013-03-06 2019-06-07 実速度での拡張現実（ａｒ）デバイスの無効化 Active JP6867438B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/787,340 US10685487B2 (en) 2013-03-06 2013-03-06 Disabling augmented reality (AR) devices at speed
US13/787,340 2013-03-06

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2015561362A Division JP2016513830A (ja) 2013-03-06 2014-02-11 実速度で拡張現実（ａｒ）デバイスを無効にする

Publications (2)

Publication Number Publication Date
JP2019153347A true JP2019153347A (ja) 2019-09-12
JP6867438B2 JP6867438B2 (ja) 2021-04-28

Family

ID=50277290

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2015561362A Pending JP2016513830A (ja) 2013-03-06 2014-02-11 実速度で拡張現実（ａｒ）デバイスを無効にする
JP2019107192A Active JP6867438B2 (ja) 2013-03-06 2019-06-07 実速度での拡張現実（ａｒ）デバイスの無効化

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2015561362A Pending JP2016513830A (ja) 2013-03-06 2014-02-11 実速度で拡張現実（ａｒ）デバイスを無効にする

Country Status (6)

Country Link
US (2) US10685487B2 (ja)
EP (1) EP2965170B1 (ja)
JP (2) JP2016513830A (ja)
KR (1) KR102205959B1 (ja)
CN (1) CN105009030B (ja)
WO (1) WO2014137554A1 (ja)

Families Citing this family (103)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9952664B2 (en) 2014-01-21 2018-04-24 Osterhout Group, Inc. Eye imaging in head worn computing
US9229233B2 (en) 2014-02-11 2016-01-05 Osterhout Group, Inc. Micro Doppler presentations in head worn computing
US9298007B2 (en) 2014-01-21 2016-03-29 Osterhout Group, Inc. Eye imaging in head worn computing
US20150205111A1 (en) 2014-01-21 2015-07-23 Osterhout Group, Inc. Optical configurations for head worn computing
US9400390B2 (en) 2014-01-24 2016-07-26 Osterhout Group, Inc. Peripheral lighting for head worn computing
US9965681B2 (en) 2008-12-16 2018-05-08 Osterhout Group, Inc. Eye imaging in head worn computing
US9715112B2 (en) 2014-01-21 2017-07-25 Osterhout Group, Inc. Suppression of stray light in head worn computing
CN103970258B (zh) * 2013-01-28 2018-08-07 联想(北京)有限公司 穿戴式电子设备以及显示方法
US10685487B2 (en) 2013-03-06 2020-06-16 Qualcomm Incorporated Disabling augmented reality (AR) devices at speed
US20160054795A1 (en) * 2013-05-29 2016-02-25 Mitsubishi Electric Corporation Information display device
US9810906B2 (en) 2014-06-17 2017-11-07 Osterhout Group, Inc. External user interface for head worn computing
US9671613B2 (en) 2014-09-26 2017-06-06 Osterhout Group, Inc. See-through computer display systems
US9829707B2 (en) 2014-08-12 2017-11-28 Osterhout Group, Inc. Measuring content brightness in head worn computing
US11227294B2 (en) 2014-04-03 2022-01-18 Mentor Acquisition One, Llc Sight information collection in head worn computing
US9529195B2 (en) 2014-01-21 2016-12-27 Osterhout Group, Inc. See-through computer display systems
US20160019715A1 (en) 2014-07-15 2016-01-21 Osterhout Group, Inc. Content presentation in head worn computing
US9746686B2 (en) 2014-05-19 2017-08-29 Osterhout Group, Inc. Content position calibration in head worn computing
US20150277118A1 (en) * 2014-03-28 2015-10-01 Osterhout Group, Inc. Sensor dependent content position in head worn computing
US9939934B2 (en) 2014-01-17 2018-04-10 Osterhout Group, Inc. External user interface for head worn computing
US9448409B2 (en) 2014-11-26 2016-09-20 Osterhout Group, Inc. See-through computer display systems
US9841599B2 (en) 2014-06-05 2017-12-12 Osterhout Group, Inc. Optical configurations for head-worn see-through displays
US9299194B2 (en) 2014-02-14 2016-03-29 Osterhout Group, Inc. Secure sharing in head worn computing
US10191279B2 (en) 2014-03-17 2019-01-29 Osterhout Group, Inc. Eye imaging in head worn computing
US10649220B2 (en) 2014-06-09 2020-05-12 Mentor Acquisition One, Llc Content presentation in head worn computing
US20150228119A1 (en) 2014-02-11 2015-08-13 Osterhout Group, Inc. Spatial location presentation in head worn computing
US9575321B2 (en) 2014-06-09 2017-02-21 Osterhout Group, Inc. Content presentation in head worn computing
US11103122B2 (en) 2014-07-15 2021-08-31 Mentor Acquisition One, Llc Content presentation in head worn computing
US9594246B2 (en) 2014-01-21 2017-03-14 Osterhout Group, Inc. See-through computer display systems
US10254856B2 (en) 2014-01-17 2019-04-09 Osterhout Group, Inc. External user interface for head worn computing
US10684687B2 (en) 2014-12-03 2020-06-16 Mentor Acquisition One, Llc See-through computer display systems
US9836122B2 (en) 2014-01-21 2017-12-05 Osterhout Group, Inc. Eye glint imaging in see-through computer display systems
US9811159B2 (en) 2014-01-21 2017-11-07 Osterhout Group, Inc. Eye imaging in head worn computing
US11892644B2 (en) 2014-01-21 2024-02-06 Mentor Acquisition One, Llc See-through computer display systems
US11487110B2 (en) 2014-01-21 2022-11-01 Mentor Acquisition One, Llc Eye imaging in head worn computing
US9529199B2 (en) 2014-01-21 2016-12-27 Osterhout Group, Inc. See-through computer display systems
US9494800B2 (en) 2014-01-21 2016-11-15 Osterhout Group, Inc. See-through computer display systems
US9766463B2 (en) 2014-01-21 2017-09-19 Osterhout Group, Inc. See-through computer display systems
US11669163B2 (en) 2014-01-21 2023-06-06 Mentor Acquisition One, Llc Eye glint imaging in see-through computer display systems
US11737666B2 (en) 2014-01-21 2023-08-29 Mentor Acquisition One, Llc Eye imaging in head worn computing
US9532714B2 (en) 2014-01-21 2017-01-03 Osterhout Group, Inc. Eye imaging in head worn computing
US20150205135A1 (en) 2014-01-21 2015-07-23 Osterhout Group, Inc. See-through computer display systems
US9651784B2 (en) 2014-01-21 2017-05-16 Osterhout Group, Inc. See-through computer display systems
US9753288B2 (en) 2014-01-21 2017-09-05 Osterhout Group, Inc. See-through computer display systems
US9846308B2 (en) 2014-01-24 2017-12-19 Osterhout Group, Inc. Haptic systems for head-worn computers
US9852545B2 (en) 2014-02-11 2017-12-26 Osterhout Group, Inc. Spatial location presentation in head worn computing
US20150241964A1 (en) 2014-02-11 2015-08-27 Osterhout Group, Inc. Eye imaging in head worn computing
US9401540B2 (en) 2014-02-11 2016-07-26 Osterhout Group, Inc. Spatial location presentation in head worn computing
US9613448B1 (en) * 2014-03-14 2017-04-04 Google Inc. Augmented display of information in a device view of a display screen
US20160187651A1 (en) 2014-03-28 2016-06-30 Osterhout Group, Inc. Safety for a vehicle operator with an hmd
US9651787B2 (en) 2014-04-25 2017-05-16 Osterhout Group, Inc. Speaker assembly for headworn computer
US9423842B2 (en) 2014-09-18 2016-08-23 Osterhout Group, Inc. Thermal management for head-worn computer
US9672210B2 (en) 2014-04-25 2017-06-06 Osterhout Group, Inc. Language translation with head-worn computing
US10853589B2 (en) 2014-04-25 2020-12-01 Mentor Acquisition One, Llc Language translation with head-worn computing
US10663740B2 (en) 2014-06-09 2020-05-26 Mentor Acquisition One, Llc Content presentation in head worn computing
WO2016013692A1 (ko) * 2014-07-22 2016-01-28 엘지전자(주) 헤드 마운티드 디스플레이 및 그 제어방법
WO2016017997A1 (en) 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Wearable glasses and method of providing content using the same
GB201414609D0 (en) * 2014-08-18 2014-10-01 Tosas Bautista Martin Systems and methods for dealing with augmented reality overlay issues
US9684172B2 (en) 2014-12-03 2017-06-20 Osterhout Group, Inc. Head worn computer display systems
USD743963S1 (en) 2014-12-22 2015-11-24 Osterhout Group, Inc. Air mouse
CN104539805B (zh) * 2014-12-29 2018-05-22 北京智产科技咨询有限公司 一种移动终端及其控制装置
CN104580727B (zh) * 2014-12-29 2018-10-23 北京智产科技咨询有限公司 一种移动终端及其控制装置
US10255713B2 (en) * 2014-12-29 2019-04-09 Google Llc System and method for dynamically adjusting rendering parameters based on user movements
USD751552S1 (en) 2014-12-31 2016-03-15 Osterhout Group, Inc. Computer glasses
USD753114S1 (en) 2015-01-05 2016-04-05 Osterhout Group, Inc. Air mouse
US20160239985A1 (en) 2015-02-17 2016-08-18 Osterhout Group, Inc. See-through computer display systems
US10878775B2 (en) 2015-02-17 2020-12-29 Mentor Acquisition One, Llc See-through computer display systems
US9563983B2 (en) 2015-03-04 2017-02-07 International Business Machines Corporation Filtering information within augmented reality overlays
US9557951B2 (en) 2015-03-04 2017-01-31 International Business Machines Corporation Filtering information within augmented reality overlays
JP2017054185A (ja) * 2015-09-07 2017-03-16 株式会社東芝 情報処理装置、情報処理方法及び情報処理プログラム
US10528021B2 (en) 2015-10-30 2020-01-07 Rockwell Automation Technologies, Inc. Automated creation of industrial dashboards and widgets
GB2545005B (en) * 2015-12-03 2021-09-08 Bentley Motors Ltd Responsive human machine interface
US20170169611A1 (en) * 2015-12-09 2017-06-15 Lenovo (Singapore) Pte. Ltd. Augmented reality workspace transitions based on contextual environment
US10229540B2 (en) * 2015-12-22 2019-03-12 Google Llc Adjusting video rendering rate of virtual reality content and processing of a stereoscopic image
US10313281B2 (en) 2016-01-04 2019-06-04 Rockwell Automation Technologies, Inc. Delivery of automated notifications by an industrial asset
US10591728B2 (en) 2016-03-02 2020-03-17 Mentor Acquisition One, Llc Optical systems for head-worn computers
US10667981B2 (en) 2016-02-29 2020-06-02 Mentor Acquisition One, Llc Reading assistance system for visually impaired
US10318570B2 (en) 2016-08-18 2019-06-11 Rockwell Automation Technologies, Inc. Multimodal search input for an industrial search platform
US10401839B2 (en) 2016-09-26 2019-09-03 Rockwell Automation Technologies, Inc. Workflow tracking and identification using an industrial monitoring system
US10545492B2 (en) 2016-09-26 2020-01-28 Rockwell Automation Technologies, Inc. Selective online and offline access to searchable industrial automation data
US10319128B2 (en) * 2016-09-26 2019-06-11 Rockwell Automation Technologies, Inc. Augmented reality presentation of an industrial environment
US10735691B2 (en) 2016-11-08 2020-08-04 Rockwell Automation Technologies, Inc. Virtual reality and augmented reality for industrial automation
US10388075B2 (en) 2016-11-08 2019-08-20 Rockwell Automation Technologies, Inc. Virtual reality and augmented reality for industrial automation
US10866631B2 (en) 2016-11-09 2020-12-15 Rockwell Automation Technologies, Inc. Methods, systems, apparatuses, and techniques for employing augmented reality and virtual reality
WO2018125428A1 (en) 2016-12-29 2018-07-05 Magic Leap, Inc. Automatic control of wearable display device based on external conditions
KR102585234B1 (ko) 2017-01-19 2023-10-06 삼성전자주식회사 전자 기기를 위한 비전 인텔리전스 관리
US10909371B2 (en) * 2017-01-19 2021-02-02 Samsung Electronics Co., Ltd. System and method for contextual driven intelligence
US10445944B2 (en) 2017-11-13 2019-10-15 Rockwell Automation Technologies, Inc. Augmented reality safety automation zone system and method
KR20200110771A (ko) 2018-01-18 2020-09-25 삼성전자주식회사 증강 현실 콘텐츠 조정 방법 및 장치
US10818086B2 (en) * 2018-02-09 2020-10-27 Lenovo (Singapore) Pte. Ltd. Augmented reality content characteristic adjustment
KR102068215B1 (ko) * 2018-04-30 2020-01-20 주식회사 북트랩스 증강현실/가상현실을 적용한 스토리 기반의 콘텐츠 제공 방법 및 시스템
KR102637416B1 (ko) * 2019-10-30 2024-02-16 엘지전자 주식회사 Xr 디바이스 및 그 제어 방법
TWI712011B (zh) 2019-12-18 2020-12-01 仁寶電腦工業股份有限公司 安全警示語音提示方法
JP6805375B2 (ja) * 2020-01-10 2020-12-23 株式会社東芝 情報処理装置、情報処理方法及び情報処理プログラム
CN111240414B (zh) * 2020-01-23 2021-03-09 福州贝园网络科技有限公司 一种眼镜腰带式计算机装置
JP2021139695A (ja) * 2020-03-04 2021-09-16 パナソニックＩｐマネジメント株式会社 車載装置および車載システム
FR3115117B1 (fr) * 2020-10-13 2023-02-17 Eyelights Dispositif et procédé pour contrôler l’affichage d’informations dans le champ de vision d’un conducteur d’un véhicule
WO2022154847A1 (en) 2021-01-12 2022-07-21 Emed Labs, Llc Health testing and diagnostics platform
US11615888B2 (en) 2021-03-23 2023-03-28 Emed Labs, Llc Remote diagnostic testing and treatment
US11929168B2 (en) 2021-05-24 2024-03-12 Emed Labs, Llc Systems, devices, and methods for diagnostic aid kit apparatus
US11373756B1 (en) 2021-05-24 2022-06-28 Emed Labs, Llc Systems, devices, and methods for diagnostic aid kit apparatus
US11711332B2 (en) 2021-05-25 2023-07-25 Samsung Electronics Co., Ltd. System and method for conversation-based notification management
GB2623461A (en) 2021-06-22 2024-04-17 Emed Labs Llc Systems, methods, and devices for non-human readable diagnostic tests
CN114460749A (zh) * 2022-01-29 2022-05-10 杭州灵伴科技有限公司 头戴式显示装置和载人装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005172851A (ja) * 2003-12-05 2005-06-30 Sony Corp 画像表示装置
JP2005221465A (ja) * 2004-02-09 2005-08-18 Nissan Motor Co Ltd 周囲情報提供装置
JP2005252735A (ja) * 2004-03-04 2005-09-15 Olympus Corp 危険防止機能付き頭部装着型表示装置
US20080118051A1 (en) * 2002-03-15 2008-05-22 Gilad Odinak System and method for providing a multi-modal communications infrastructure for automated call center operation
JP2010097472A (ja) * 2008-10-17 2010-04-30 Kddi Corp 表示システム、表示方法およびプログラム
US20100253918A1 (en) * 2009-04-02 2010-10-07 Gm Global Technology Operations, Inc. Infotainment display on full-windshield head-up display
JP2011123807A (ja) * 2009-12-14 2011-06-23 Dainippon Printing Co Ltd アノテーション表示システム，方法及びサーバ装置
JP2013032932A (ja) * 2011-08-01 2013-02-14 Sharp Corp 携帯端末

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08233594A (ja) 1995-02-27 1996-09-13 Aqueous Res:Kk 車載用ナビゲーションシステム
US6127990A (en) 1995-11-28 2000-10-03 Vega Vista, Inc. Wearable display and methods for controlling same
US6734834B1 (en) 2000-02-11 2004-05-11 Yoram Baram Closed-loop augmented reality apparatus
WO2002052785A2 (en) * 2000-12-22 2002-07-04 Research In Motion Limited Information browser system and method for a wireless communication device
JP2007335006A (ja) 2006-06-15 2007-12-27 Toyota Motor Corp 車両用コンテンツ再生装置
JP2008205573A (ja) 2007-02-16 2008-09-04 Nec Saitama Ltd モバイル機器及びその制御方法
JP5198368B2 (ja) 2009-06-18 2013-05-15 本田技研工業株式会社 車両用画像表示装置
US8947454B2 (en) 2009-11-04 2015-02-03 Honda Motor Co., Ltd. Display device for vehicle
JPWO2011083782A1 (ja) * 2010-01-07 2013-05-13 日本電気株式会社 携帯情報端末および画面表示制御方法
KR101560954B1 (ko) * 2010-08-09 2015-10-15 나이키 이노베이트 씨.브이. 모바일 장치를 이용한 피트니스 모니터링
WO2012063542A1 (ja) 2010-11-09 2012-05-18 富士フイルム株式会社 拡張現実感提供装置
KR101544524B1 (ko) 2010-12-16 2015-08-17 한국전자통신연구원 차량용 증강현실 디스플레이 시스템 및 차량용 증강현실 디스플레이 방법
JP2012155655A (ja) 2011-01-28 2012-08-16 Sony Corp 情報処理装置、報知方法及びプログラム
EP2689969B1 (en) 2011-03-25 2017-09-13 LG Electronics Inc. Image processing in image displaying device mounted on vehicle
KR101252169B1 (ko) 2011-05-27 2013-04-05 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
CN102932624A (zh) 2011-09-02 2013-02-13 斯凯普公司 移动视频通话
GB2495694B (en) * 2011-09-02 2017-11-08 Skype Mobile video calls
US9069743B2 (en) * 2011-10-13 2015-06-30 Microsoft Technology Licensing, Llc Application of comments in multiple application functionality content
US8947323B1 (en) * 2012-03-20 2015-02-03 Hayes Solos Raffle Content display methods
US10685487B2 (en) 2013-03-06 2020-06-16 Qualcomm Incorporated Disabling augmented reality (AR) devices at speed

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080118051A1 (en) * 2002-03-15 2008-05-22 Gilad Odinak System and method for providing a multi-modal communications infrastructure for automated call center operation
JP2005172851A (ja) * 2003-12-05 2005-06-30 Sony Corp 画像表示装置
JP2005221465A (ja) * 2004-02-09 2005-08-18 Nissan Motor Co Ltd 周囲情報提供装置
JP2005252735A (ja) * 2004-03-04 2005-09-15 Olympus Corp 危険防止機能付き頭部装着型表示装置
JP2010097472A (ja) * 2008-10-17 2010-04-30 Kddi Corp 表示システム、表示方法およびプログラム
US20100253918A1 (en) * 2009-04-02 2010-10-07 Gm Global Technology Operations, Inc. Infotainment display on full-windshield head-up display
JP2011123807A (ja) * 2009-12-14 2011-06-23 Dainippon Printing Co Ltd アノテーション表示システム，方法及びサーバ装置
JP2013032932A (ja) * 2011-08-01 2013-02-14 Sharp Corp 携帯端末

Also Published As

Publication number Publication date
EP2965170A1 (en) 2016-01-13
US11217026B2 (en) 2022-01-04
KR20150123866A (ko) 2015-11-04
US20140253588A1 (en) 2014-09-11
JP2016513830A (ja) 2016-05-16
US20200175769A1 (en) 2020-06-04
EP2965170B1 (en) 2020-06-03
WO2014137554A1 (en) 2014-09-12
JP6867438B2 (ja) 2021-04-28
US10685487B2 (en) 2020-06-16
CN105009030A (zh) 2015-10-28
KR102205959B1 (ko) 2021-01-20
CN105009030B (zh) 2018-04-10

Similar Documents

Publication Publication Date Title
JP2019153347A (ja) 実速度での拡張現実（ａｒ）デバイスの無効化
US11842411B2 (en) Location-based virtual avatars
US10089862B2 (en) Pedestrian alerts for mobile devices
JP6280134B2 (ja) ヘルメットベースのナビゲーション通知方法、装置およびコンピュータプログラム
US9803992B2 (en) Suspending voice guidance during route navigation
EP3631798B1 (en) Voice driven dynamic menus
US11523159B2 (en) Generating media content items based on location information
EP2652689A1 (en) Context aware advertisement delivery
JP2015012496A (ja) 携帯端末、携帯端末制御方法およびコンピュータプログラム
US11310688B2 (en) Information presenting device, information presenting method and recording medium
CN109672779A (zh) 一种折叠控制方法、可折叠终端及计算机可读存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190612

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200630

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200727

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201026

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210315

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210408

R150 Certificate of patent or registration of utility model

Ref document number: 6867438

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150