JP2023109858A - オーディオ出力デバイスを有するディスプレイシステム - Google Patents

オーディオ出力デバイスを有するディスプレイシステム Download PDF

Info

Publication number
JP2023109858A
JP2023109858A JP2023079228A JP2023079228A JP2023109858A JP 2023109858 A JP2023109858 A JP 2023109858A JP 2023079228 A JP2023079228 A JP 2023079228A JP 2023079228 A JP2023079228 A JP 2023079228A JP 2023109858 A JP2023109858 A JP 2023109858A
Authority
JP
Japan
Prior art keywords
head
mounted display
speaker unit
display unit
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2023079228A
Other languages
English (en)
Other versions
JP7528308B2 (ja
Inventor
ニール ディー エヴァンズ
D Evans Neal
ジェームズ ダブリュー ヴァンダイク
W Vandyke James
アンドリュー エム ハルヴァ
M Hulva Andrew
ロバート ディー シルフヴァスト
D Silfvast Robert
クリストファー ティー ユーバンク
T Eubank Christopher
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of JP2023109858A publication Critical patent/JP2023109858A/ja
Application granted granted Critical
Publication of JP7528308B2 publication Critical patent/JP7528308B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1008—Earpieces of the supra-aural or circum-aural type
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03G—CONTROL OF AMPLIFICATION
    • H03G5/00—Tone control or bandwidth control in amplifiers
    • H03G5/02—Manually-operated control
    • H03G5/025—Equalizers; Volume or gain control in limited frequency bands
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1041—Mechanical or electronic switches, or control elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/02—Spatial or constructional arrangements of loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/033—Headphones for stereophonic communication
    • H04R5/0335—Earpiece support, e.g. headbands or neckrests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1058—Manufacture or assembly
    • H04R1/1066—Constructional aspects of the interconnection between earpiece and earpiece support
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083—Reduction of ambient noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/22—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only 
    • H04R1/26—Spatial arrangements of separate transducers responsive to two or more frequency ranges
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • H04R2201/107—Monophonic and stereophonic headphones with microphone for two-way hands free communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/01—Hearing devices using active noise cancellation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Stereophonic System (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Headphones And Earphones (AREA)
  • Details Of Audible-Bandwidth Transducers (AREA)

Abstract

【課題】取り外し可能なスピーカユニットを含むオーディオ出力デバイスを有するディスプレイシステムを提供する。【解決手段】ディスプレイシステム１００は、ヘッドマウントディスプレイユニット１１０及び取り外し可能なスピーカユニット１３２を含む。ヘッドマウントディスプレイユニット１１０は、視覚コンテンツをユーザに出力し、現実環境の視覚的パススルーをユーザに提供する。取り外し可能なスピーカユニット１３２は、聴覚コンテンツをユーザに提供するために、ヘッドマウントディスプレイユニット１１０に取り外し可能に結合することができる。視覚コンテンツ又は聴覚コンテンツのうちの少なくとも１つは、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置に従って変更される。【選択図】図１Ａ

Description

（関連出願の相互参照）
この出願は、２０１８年６月１４日に出願された米国特許仮出願第６２／６８４，８２６号の優先権及び利益を主張し、その開示全体が、参照により本明細書に組み込まれる。
この開示は、ディスプレイシステム、具体的には、そのためのオーディオ出力デバイスに関する。
仮想現実システムは、視覚コンテンツ及び聴覚コンテンツを含み得るコンテンツをユーザに提供する。視覚コンテンツは、ヘッドマウントディスプレイユニット（head-mounted display、ＨＭＤ）によって提供されてもよく、一方、聴覚コンテンツは、多くの場合、ヘッドマウントディスプレイユニットから物理的に分離されたヘッドホンによって提供される。
本明細書では、ディスプレイシステムの実装形態が開示される。一態様では、ディスプレイシステムは、ヘッドマウントディスプレイユニット及び取り外し可能なスピーカユニットを含む。ヘッドマウントディスプレイユニットは、視覚コンテンツをユーザに出力し、現実環境の視覚的パススルーをユーザに提供する。取り外し可能なスピーカユニットは、聴覚コンテンツをユーザに提供するために、ヘッドマウントディスプレイユニットに取り外し可能に結合することができる。視覚コンテンツ又は聴覚コンテンツのうちの少なくとも１つは、ヘッドマウントディスプレイユニットに対して取り外し可能なスピーカユニットの位置に従って変更される。
ヘッドマウントディスプレイは、内蔵スピーカを含んでもよい。取り外し可能なスピーカユニット又はその位置に従う内蔵スピーカのうちの１つ以上による聴覚コンテンツの出力。取り外し可能なスピーカユニットによって出力される聴覚コンテンツのオーディオ信号処理は、取り外し可能なスピーカユニットがヘッドマウントディスプレイユニット上の結合位置に向かって移動されるにつれて変化してもよい。オーディオ信号処理は、取り外し可能なスピーカユニットによって出力される聴覚コンテンツの音量、イコライゼーション、又はダイナミックレンジを変更することのうちの１つ以上を含む。取り外し可能なスピーカユニットがヘッドマウントディスプレイユニットの視野内にあるとき、視覚コンテンツは、取り外し可能なスピーカユニットに空間的に近接した視覚的インジケータを含んでもよい。視覚的インジケータは、取り外し可能なスピーカユニットのサウンド出力能力をユーザに示すことができる。
別の態様では、ディスプレイシステムは、ヘッドマウントディスプレイユニット及びオーディオヘッドセットを含む。ヘッドマウントディスプレイユニットは、第１及び第２の内蔵スピーカを含む。オーディオヘッドセットは、ヘッドマウントディスプレイユニットに取り外し可能に結合することができる第１及び第２の取り外し可能なスピーカユニットを含む。
別の態様では、ヘッドマウントディスプレイユニットを有するディスプレイシステム、ヘッドマウントディスプレイユニットに対して移動可能な可動オーディオ出力デバイス、コントローラ、及びセンサを用いて、コンテンツを提供するための方法が提供される。本方法は、センサを有するコントローラによって、可動オーディオ出力デバイスの位置を判定することと、可動オーディオ出力デバイスの位置に従って、ヘッドマウントディスプレイユニットを用いてコンテンツを提供することと、を含む。
ディスプレイシステムの側面図である。 図１Ａのディスプレイシステムの上面図である。 図１Ａのディスプレイシステムの概略図である。 図１Ａのディスプレイシステムの取り外し可能なスピーカユニットの概略図である。 図１のディスプレイシステムの変形例である、別のディスプレイシステムの部分側面図である。 図２Ａのディスプレイシステムの部分後面図である。 図１のディスプレイシステムの変形例である、別のディスプレイシステムの部分側面図である。 図３Ａのディスプレイシステムの部分後面図である。 図３Ａのディスプレイシステムのヘッドマウントディスプレイユニットの部分側面図である。 図３Ａのディスプレイシステムの取り外し可能なスピーカユニットの部分側面図である。 破線で示された隠れた特徴を有する図３Ａのディスプレイシステムの部分側面図である。 第１の状態にあるオーディオヘッドセットの第１の図である。 第２の状態にある図４Ａのオーディオヘッドセットの第２の図である。 図４Ａのオーディオヘッドセットを含む、図１Ａのディスプレイシステムの変形であるディスプレイシステムの側面図である。 図１のディスプレイシステムからサウンドを出力するための方法のフロー図である。 図１のディスプレイシステムからのサウンド出力のプロットである。 図６Ａのプロットに係る、図１のディスプレイシステムからサウンド出力を提供する方法のフロー図である。 図１のディスプレイシステムからのサウンド出力のプロットである。 図７Ａのプロットに係る、図１のディスプレイシステムからサウンド出力を提供する方法のフロー図である。 図１のディスプレイシステムからのサウンド出力をイコライゼーションするための、ゲイン対距離のプロットである。 図８Ａのプロットに係る、図１のディスプレイシステムからサウンド出力を提供する方法のフロー図である。 図１のディスプレイシステムからのサウンド出力をダイナミックレンジ圧縮するための、ダイナミックレンジ対距離のプロットである。 図９Ａのプロットに係る、図１のディスプレイシステムからのサウンド出力を提供する方法のフロー図である。 現実環境及びオーディオ出力デバイスを含む視野を有するヘッドマウントディスプレイユニットの図である。 図８Ａの視野を有し、視覚的インジケータを更に表示するヘッドマウントディスプレイユニットの別の図である。 オーディオ出力デバイスを含まない視野を有し、別の視覚的インジケータを更に表示するヘッドマウントディスプレイユニットの別の図である。 図８Ｂ及び図８Ｃの視覚的インジケータを提供するための方法のフロー図である。 図１Ａのディスプレイシステムのコントローラ用のハードウェア構成の概略図である。
ヘッドマウントディスプレイユニット、及びオーディオヘッドセットなどのオーディオ出力デバイスを含むディスプレイシステムの実施形態が、本明細書に開示されている。オーディオ出力デバイスは、本明細書に記載される様々な方法でヘッドマウントディスプレイユニットから取り外し可能であるか、又はそうでなければ、ヘッドマウントディスプレイユニットに対して移動可能である。オーディオ出力デバイス及び／又は内蔵オーディオ出力デバイスから提供される聴覚コンテンツは、本明細書に記載される様々な方法で、可動オーディオ出力デバイスの位置に従って出力されてもよい。視覚コンテンツはまた、本明細書に記載される様々な方法で、可動オーディオ出力デバイスの位置に従って提供されてもよい。
図１Ａ～図１Ｃを参照すると、ディスプレイシステム１００は、ヘッドマウントディスプレイユニット１１０と、（示されるように）それから取り外し可能であるか、又はそれに対して関節接合されているなどの、ヘッドマウントディスプレイユニット１１０に対して物理的に移動可能であるオーディオヘッドセット１３０とを含む。以下で更に詳細に説明するように、ディスプレイシステム１００は、ヘッドマウントディスプレイユニット１１０とオーディオヘッドセット１３０との間に機械的及び／若しくは電気的接続を形成してもよく、ヘッドマウントディスプレイユニット１１０自体及びオーディオヘッドセット１３０によってサウンドをユーザに提供してもよく、並びに／又はヘッドマウントディスプレイユニット１１０を用いてオーディオヘッドセット１３０の使用に関連するキュー及び／若しくはフィードバックをユーザに提供してもよい。用語「オーディオヘッドセット１３０」は、ユーザの片耳若しくは両耳に近接して保持されるオーディオ出力デバイス又はオーディオ出力デバイスのセット（例えば、後述するような取り外し可能なスピーカユニット１３２）を指す。複数（例えば、２つ）のオーディオ出力デバイスの場合、オーディオヘッドセット１３０のオーディオ出力デバイスは、互いから分離していても、又は分離可能であってもよい（例えば、ヘッドバンドがそれらの間に延在して、互いに固定される必要はない）。オーディオヘッドセット１３０はまた、ヘッドホン（単数又は複数）、又はイヤフォン（単数又は複数）と呼ばれ得る。
本明細書に開示されるディスプレイシステムは、後述するように、コンピュータ生成現実（例えば、仮想現実又は複合現実）を提供するように構成されてもよい。使用される用語「仮想」は、一般に、「コンピュータが生成した」コンテンツ又はエクスペリエンスを指す。例えば、本明細書に記載されるコンテンツは、視覚コンテンツ（例えば、仮想コンテンツ若しくはコンピュータ生成視覚コンテンツ又はグラフィックとも呼ばれる）、及び聴覚コンテンツ（例えば、仮想コンテンツ若しくはコンピュータ生成聴覚コンテンツ又はオーディオとも呼ばれる）などの、仮想又はコンピュータ生成コンテンツと呼ばれ得る。
ヘッドマウントディスプレイユニット１１０は、一般に、支持体１１２及びディスプレイスクリーン１１４を含む。支持体は、ユーザの頭部Ｈに装着され、それによって、ユーザの目に対して好適な位置でディスプレイスクリーン１１４を支持するように構成されている。図示するように、支持体は、ユーザの頭部Ｈを取り囲むストラップとして構成されている。スマートフォンの画面又は専用画面などのディスプレイスクリーン１１４は、視覚コンテンツをユーザに提供する。ディスプレイスクリーン１１４がスマートフォン又は取り外し可能な他のビデオ出力デバイスである場合、ヘッドマウントディスプレイユニット１１０は、ディスプレイスクリーン１１４に結合可能であると考えることができる。
ディスプレイシステム１００は、ユーザが現実環境を見ることができる視覚的パススルーを提供することによって、複合現実エクスペリエンスを提供するように構成されてもよい。図示するように、ヘッドマウントディスプレイユニット１１０は、ビデオパススルーを利用しており、この場合、ヘッドマウントディスプレイユニット１１０の１つ以上のカメラ１１６は、ディスプレイスクリーン１１４によってユーザに表示される、現実環境の画像をキャプチャする。そのような表示システム１００はまた、仮想現実エクスペリエンスを提供するように機能してもよく、この場合、現実環境の画像はディスプレイスクリーン１１４によって表示されず、そうでなければ、現実環境はユーザの視界から部分的又は全体的に遮断される。ビデオパススルーの代替として、ヘッドマウントディスプレイユニット１１０は、光学パススルーを利用することができ、この場合、ユーザは現実環境を直接見る。例えば、ヘッドマウントディスプレイユニット１１０は、現実環境からの光がユーザの目にパススルーすることと、ディスプレイスクリーン１１４からの光をユーザの目に反射して視覚コンテンツを提供することとの両方を可能にするリフレクタを含んでもよい。
ヘッドマウントディスプレイユニット１１０は、ユーザの耳に聴覚コンテンツを伝送又は出力するスピーカ１１８を更に含んでもよい。スピーカ１１８は、例えば、ユーザの耳Ｅに近接して支持体１１２に結合され、サウンドを耳に導く。スピーカ１１８は、ヘッドマウントディスプレイユニットから簡単に取り外せないように、ヘッドマウントディスプレイユニット１１０に（例えば、支持体１１２、又はディスプレイスクリーン１１４のハウジングに）固定的に結合されている。これは、ヘッドマウントディスプレイユニットから容易に取り外し可能であるように、ヘッドマウントディスプレイユニット１１０に取り外し可能に結合可能である、オーディオヘッドセット１３０のスピーカユニット１３２とは対照的である。したがって、スピーカ１１８は、固定オーディオ出力デバイス、固定スピーカ、内蔵スピーカ、又はＨＭＤスピーカと呼ばれてもよく、一方、スピーカユニット１３２は、取り外し可能なスピーカ又は取り外し可能なスピーカユニットと呼ばれてもよい。オーディオヘッドセット１３０及び取り外し可能なスピーカユニット１３２はまた、オーディオ出力デバイス又は可動オーディオ出力デバイスと呼ばれてもよい。
ＨＭＤスピーカ１１８は、現実環境からのサウンドがユーザの耳に到達することを更に可能にする。例えば、ＨＭＤスピーカ１１８は、ユーザの耳の上方及び／又は前に配置されてもよく、それによって、現実環境からのサウンドがユーザの耳に到達することを妨げない。このように、ヘッドマウントディスプレイユニット１１０は、ユーザが現実環境を聞くことを可能にする一方で、聴覚コンテンツをユーザに同時に伝送することによって、複合現実エクスペリエンスをユーザに聴覚的に提供することができる。したがって、ＨＭＤスピーカ１１８はまた、追加聴覚スピーカと呼ばれ得る。
以下で更に詳細に説明するように、ＨＭＤスピーカ１１８は、オーディオヘッドセット１３０が、ＨＭＤスピーカ１１８と併せて又はこれを除いて聴覚コンテンツをユーザに提供することを可能にするように更に構成されている。いくつかの実施形態では、ＨＭＤスピーカ１１８は省略されてもよく、この場合、聴覚コンテンツはオーディオヘッドセット１３０によって提供される。
ヘッドマウントディスプレイユニットはまた、ユーザに関連する条件、ヘッドマウントディスプレイユニット１１０、及び／又はオーディオヘッドセット１３０を検出する様々なセンサを含んでもよい。例えば、カメラ１１６に加えて、ヘッドマウントディスプレイユニット１１０は、加速度計、ジャイロスコープ、磁力計、慣性測定ユニット（inertial measurement unit、ＩＭＵ）、カメラなどのうちの１つ以上のような動きセンサ１２０を含んでもよく、これによって、ユーザの頭部Ｈ及び／若しくはヘッドマウントディスプレイユニット１１０の位置並びに／又は向きに関する条件を測定する。カメラ１１６及び／又は動きセンサ１２０はまた、例えば、オーディオヘッドセット１３０の視覚認識を使用して、それに対するオーディオヘッドセット１３０の位置、向き、及び／若しくは動きを判定するように構成されてもよく、取り外し可能なスピーカユニット１３２のマーカを検出、位置特定、及び／若しくは追跡するように構成されてもよく、並びに／又は、取り外し可能なスピーカユニット１３２から放射されたビーコン信号を検出、位置特定、及び／若しくは追跡するように構成されてもよい。ヘッドマウントディスプレイユニット１１０はまた、ユーザの目の状態（例えば、焦点距離、瞳孔径など）を測定するために使用される、カメラなどの目センサ１２２を含んでもよい。
オーディオヘッドセット１３０は、ユーザの耳Ｅにサウンドを伝送することによってユーザに聴覚コンテンツを提供する、取り外し可能なスピーカユニット１３２を含む。取り外し可能なスピーカユニット１３２は、例えば、右側の取り外し可能なスピーカユニット１３２ｒ及び左側の取り外し可能なスピーカユニット１３２ｌを含み、これらは、聴覚コンテンツを提供するために、ユーザの右耳Ｅ及び左耳Ｅと物理的にそれぞれ関連付けられている。
取り外し可能なスピーカユニット１３２のそれぞれは、一般に、ハウジング１３４、並びに１つ以上のスピーカ１３６及び様々なタイプの電子機器１３８を含む。ハウジング１３４は、１つ以上のスピーカ１３６及び電子機器１３８を含み、ヘッドマウントディスプレイユニット１１０の支持体１１２に接続されてそれによって支持され、それからオーディオ信号を受信し、及び／又はそれから電力を受信するように構成されている。スピーカ１３６は、サウンド（すなわち、聴覚コンテンツ）をユーザに出力する。電子機器１３８は、スピーカ１３６と協働して構成されて、サウンド出力を提供し、かつ、他の機能を提供することができる。
図示するように、オーディオヘッドセット１３０は、オーバーイヤー構成を有してもよく、この場合、ハウジング１３４は、ユーザの耳の全体を取り囲むように構成されている。あるいは、オーディオヘッドセット１３０は、オンイヤー構成を有してもよく、この場合、ハウジング１３４は、ユーザの耳に載るように構成され、又は、ハウジング１３４の一部分がユーザの耳Ｅ内に（例えば、部分的に外耳道内に）配置されるインイヤー構成を有するように構成されている。
図１Ｄに概略的に示すように、スピーカユニット１３２の電子機器１３８は、増幅器１３８ａ、電力電子機器１３８ｂ、信号電子機器１３８ｃ、検知電子機器１３８ｄ、及び／又は周囲サウンド電子機器１３８ｅを含んでもよい。増幅器１３８ａは、スピーカ１３６を駆動してサウンドを出力するように構成されている。電力電子機器１３８ｂは、増幅器１３８ａ、信号電子機器１３８ｃ、及び／又は検知電子機器１３８ｄなどの、取り外し可能なスピーカユニット１３２の様々な他の電子機器に電力供給するように構成されている。電力電子機器１３８ｂは、例えば、有線電力、及び／又はバッテリなどのローカルに貯蔵された電力を提供してもよい。信号電子機器１３８ｃは、ヘッドマウントディスプレイユニット１１０若しくは後述するコントローラ１５０などの別の構成要素に、及び／又は、そこから、信号を受信及び／又は送信するように構成されている。信号電子機器１３８ｃは、例えば、無線接続、誘導性接続、又は光接続などを介して信号を送信及び／又は受信するための通信インタフェースを含んでもよい。そのような信号は、例えば、取り外し可能なスピーカユニット１３２から聴覚コンテンツを出力するために受信されるオーディオ信号、及び／又は取り外し可能なスピーカユニット１３２の感知情報（例えば、位置）を提供するための感知信号を含んでもよい。信号電子機器１３８ｃはまた、例えば、受動的若しくは能動的マーカ（例えば、可視光又は非可視光源）又は（例えば、別のタイプの検出可能かつ位置特定可能な出力信号を放射する）ビーコンを提供することによって、ヘッドマウントディスプレイユニット１３０に対して取り外し可能なスピーカユニット１３２の位置及び／又は向きを判定するのを支援する出力を提供することができる。感知電子機器１３８ｄは、現実空間における、又はヘッドマウントディスプレイユニット１１０、支持体１１２、又はそれらの結合位置若しくは特徴などの、ディスプレイシステム１００の別の部分に対する、取り外し可能なスピーカユニット１３２の位置、向き、及び／又は動き（例えば、位置及び向きの変化）などの、取り外し可能なスピーカユニット１３２の様々なパラメータを感知するように構成されている。検知電子機器１３８ｄは、加速度計（単数又は複数）、ジャイロスコープ（単数又は複数）、慣性測定ユニット（ＩＭＵ）、近接センサ（単数又は複数）、及び／又はカメラ（例えば、ビデオ認識用）などの、そのような位置、向き、及び／又は動きを検出するための１つ以上の適切なセンサを含んでもよい。
周囲サウンド電子機器１３８ｅは、周囲サウンドを（例えば、マイクロフォン１３８ｅ’を使用して現実環境から）検出し、検出された周囲サウンドを（例えば、信号プロセッサ１３８ｅ”を用いて）処理し、それに従って処理されたサウンドを（例えば、増幅器１３８ａを使用して）スピーカ１３６に出力させるように機能する。処理されたサウンドは、例えば、音響透過性及び／又はアクティブノイズキャンセルを提供してもよい。音響透過性を用いると、現実環境からの周囲サウンドは、一般に、処理されたサウンドとして有意な変更なしに再生され、これは処理された周囲サウンドと呼ばれることがあり、スピーカ１３６によって出力される。結果として、例えば、取り外し可能なスピーカユニット１３２がユーザの耳Ｅに対して配置されている場合、ユーザはなおも現実環境を聞くことができ、そうでなければ、（例えば、絶縁及び／又は遮断によって）現実環境の周囲サウンドがユーザの耳Ｅに直接到達することを妨げてもよい。アクティブノイズキャンセルを用いると、周囲サウンドは処理されて、一般に、（例えば、周囲サウンドと同じ振幅で、しかし逆位相になることによって）周囲サウンドをキャンセルする又は打ち消す処理済みのサウンドが提供され、これは処理されたキャンセルサウンドと呼ばれることがあり、スピーカ１３６によって出力される。
スピーカ電子機器１３８（例えば、増幅器１３８ａ、電力電子機器１３８ｂ、信号電子機器１３８ｃ、検知電子機器１３８ｄ、及び／若しくは周囲サウンド電子機器１３８ｅ）、又は同様の機能を実行する異なる電子機器が、代わりに又は追加的に、ヘッドマウントディスプレイユニット１１０に組み込まれてもよいことに留意されたい。例えば、スピーカ１３６は、ヘッドマウントディスプレイユニット１１０及び／又はコントローラ１５０への有線接続を有してもよく、一方、増幅、電力供給、検知、及び周囲サウンド機能は、ヘッドマウントディスプレイユニット１１０及び／又はコントローラ１５０の電子機器によって実行される。
ヘッドマウントディスプレイユニット１１０及びオーディオヘッドセット１３０に加えて、ディスプレイシステム１００は、コントローラ１５０を更に含む。図示するように、コントローラ１５０は、ヘッドマウントディスプレイユニット１１０及びオーディオヘッドセット１３０の外部にあってもよく、有線又は無線接続などを用いて通信している。コントローラ１５０は、一般に、ユーザ、ヘッドマウントディスプレイユニット１１０、及び／若しくはオーディオヘッドセット１３０の位置及び／又は向きなどの様々な入力情報（例えば、信号）を処理し、そのような情報を処理し、並びに（例えば、視覚コンテンツ及び聴覚コンテンツを出力するために）ヘッドマウントディスプレイユニット１１０を、及び（例えば、聴覚コンテンツを出力するために）オーディオヘッドセット１３０を制御するための出力信号を提供するように構成されている。コントローラ１５０のハードウェア構成について、図９を参照して以下に説明する。ヘッドマウントディスプレイユニット１１０及びオーディオヘッドセット１３０とは別個の外部の単一ユニットとして示されているが、コントローラ１５０は、代わりに、複数のそのようなコントローラを含んでもよく、又はコントローラ１５０として協働的に機能する別個のユニット群に細分化されてもよく、かつ、コントローラ１５０は、ヘッドマウントディスプレイユニット１１０及び取り外し可能なスピーカユニット１３２のうちの１つ以上に組み込まれてもよい。
上述のように、ヘッドマウントディスプレイユニット１１０及びオーディオヘッドセット１３０は、ヘッドマウントディスプレイユニット１１０とオーディオヘッドセット１３０との間の機械的、電気的、及び／若しくはデータ接続を提供するように協働的に構成されてもよく、サウンドをユーザに協働的に提供してもよく、並びに／又はヘッドマウントディスプレイユニット１１０を用いてオーディオヘッドセット１３０の使用に関連するキュー及び／若しくはフィードバックをユーザに提供してもよい。
図２Ａ～図４Ｂを参照すると、オーディオヘッドセット１３０の取り外し可能なスピーカユニット１３２のそれぞれは、ヘッドマウントディスプレイユニット１１０から取り外し可能である。ヘッドマウントディスプレイユニット１１０に取り付けられると、取り外し可能なスピーカユニット１３２のそれぞれは、それによって物理的に支持され、更にヘッドマウントディスプレイユニット１１０と通信し、及び／又はそこから電力を受信することができる。
図２Ａ～図２Ｂを参照すると、ディスプレイシステム２００は、ヘッドマウントディスプレイユニット２１０に磁力で解放可能に結合可能である、取り外し可能なスピーカユニット２３２を有するオーディオヘッドセット２３０を含む。ヘッドマウントディスプレイユニット２１０は、ヘッドマウントディスプレイユニット１１０として構成され、ＨＭＤ磁気アタッチメントと呼ばれ得る１つ以上の磁気アタッチメント２２４を更に含む。取り外し可能なスピーカユニット２３２は、取り外し可能なスピーカユニット１３２として構成され、ヘッドマウントディスプレイユニット２１０のＨＭＤ磁気アタッチメント２２４に対応する１つ以上の磁気アタッチメント２４４を含む。ヘッドマウントディスプレイユニット２１０及び取り外し可能なスピーカユニット２３２の磁気アタッチメント２２４、２４４は、それぞれ、ＨＭＤ磁気アタッチメント２２４及びスピーカ磁気アタッチメント２４４と呼ばれてもよい。磁気アタッチメント２２４、２４４は、磁力で互いに引き付け合うように構成されており、磁気アタッチメント２２４、２４４のうちの一方が永久磁気を含み、他方が強磁性材料又は反対向きの別の永久磁石を含む。
図２Ａ～図２Ｂに示される例では、ヘッドマウントディスプレイユニット２１０は、一方がユーザの耳Ｅの前方にあり、他方が後方にある、２つのＨＭＤ磁気アタッチメント２２４を含む。図示するように、２つのＨＭＤ磁気アタッチメント２２４は、ヘッドマウントディスプレイユニット２１０の支持体１１２に、例えば、ユーザの耳Ｅの前方及び後方に位置するように下方に延在するフランジ２１２ａ（例えば、突出部）に、結合されてもよい。２つのＨＭＤ磁気アタッチメント２２４は、ヘッドマウントディスプレイユニット２１０の支持体１１２内に組み込まれるか、又は別の方法で支持体１１２に結合され得る永久磁石を含む。
ハウジング１３４又はそのパッド２４６などの取り外し可能なスピーカユニット２３２は、支持体１１２の（例えば、フランジ２１２ａの内側に）突出して（例えば、内側に延在して）、例えば、（例えば、オーバーイヤー構成で）頭部Ｈを耳Ｅの周囲に係合させるか、又は（例えば、オンイヤー構成で）ユーザの耳Ｅに係合させて、ユーザに対して配置してもよい。結果として、取り外し可能なスピーカユニット２３２は、ヘッドマウントディスプレイユニット１１０に結合された（例えば、スピーカ磁気アタッチメント２４４によって形成された）外側部分から横方向内側に（例えば、ユーザに向かって）延在する内側部分（例えば、パッド２４６及び／又はハウジング１３４）を有すると考えることができる。パッド２４６は、（例えば、オンイヤー及び／又はオーバーイヤー構成で）ユーザの耳Ｅに係合及び／又は外接してもよい。
取り外し可能なスピーカユニット２３２のそれぞれは、ヘッドマウントディスプレイユニット２１０の２つのＨＭＤ磁気アタッチメント２２４に磁気的に結合可能である、２つのスピーカ磁気アタッチメント２４４を含む。例えば、２つのスピーカ磁気アタッチメント２４４は、ＨＭＤ磁気アタッチメント２２４に磁気的に結合可能となるように、ユーザの耳Ｅの前方及び後方に延在してもよい。スピーカ磁気アタッチメント２４４は、例えば、細長くすることができ、取り外し可能なスピーカユニット２３２のハウジング１３４から前方及び後方に延在してもよい。図示するように、スピーカ磁気アタッチメント２４４は、ヘッドマウントディスプレイユニット２１０のＨＭＤ磁気アタッチメント２２４の永久磁石に引き付けられるように、強磁性材料又は反対向きの永久磁石を含むポストとして構成されてもよい。あるいは、ＨＭＤ磁気アタッチメント２２４は、強磁性材料を含んでもよく、スピーカ磁気アタッチメント２４４は、そこに引き付けられる永久磁石を含んでもよい。
ヘッドマウントディスプレイユニット２１０及び取り外し可能なスピーカユニット２３２はまた、取り外し可能なスピーカユニット２３２を、それらに対して所定の位置（例えば、ユーザの耳Ｅの上方のヘッドマウントディスプレイユニット１１０の結合位置）に案内するように構成されてもよい。例えば、磁気アタッチメント２２４、２４４の各セット（例えば、磁気アタッチメント２２４、２４４の前後のペア）は、取り外し可能なスピーカユニット２３２のスピーカ磁気アタッチメント２４４を、対応するヘッドマウントディスプレイユニット２１０のＨＭＤ磁気アタッチメント２２４に案内するための磁力を提供する。加えて、互いに対応しない磁気アタッチメント２２４、２４４はまた、例えば、同じ向きの永久磁石を有することによって、互いに反発するように機能してもよい。その結果、取り外し可能なスピーカユニット２３２は、所定でない位置から離れるように押しのけられる。これらの引力及び／又は反発力は、ユーザに触知フィードバックを提供することによって、取り外し可能なスピーカユニット１３２を、ユーザの視野の外側にあるヘッドマウントディスプレイユニット２１０上のそれぞれの結合位置に、ユーザが案内するのを助けるために有用であり得る。
取り外し可能なスピーカユニット２３２を適切な位置に案内するために磁力を使用する代わりに、又はそれに加えて、ヘッドマウントディスプレイユニット２１０及び取り外し可能なスピーカユニット２３２は、機械的に協働するガイド機構を含んでもよい。例えば、ヘッドマウントディスプレイユニット２１０は、取り外し可能なスピーカユニット２３２のスピーカ磁気アタッチメント２４４を所定の位置に受容し、案内する支持体１１２内に戻り止めを含んでもよい。
取り外し可能なスピーカユニット２３２は、スピーカ磁気アタッチメント２４４を中心に枢動して、例えば、ユーザの耳Ｅに向かって付勢されるか、又は別の方法でそこに収容されるように構成されてもよい。一実施例では、スピーカ磁気アタッチメント２４４は、前方及び後方に延在する（例えば、枢動軸２４４ａを形成する）円筒形ポストである。円筒形ポストは、ＨＭＤ磁気アタッチメント２２４の表面、又はヘッドマウントディスプレイユニット２１０の支持体１１２に沿って、それに対して枢動するように回転する。別の実施例では、ハウジング１３４は、スピーカ磁気アタッチメントがヘッドマウントディスプレイユニット２１０のＨＭＤ磁気アタッチメント２２４に対して移動することなく（例えば、回転することなく）、スピーカ磁気アタッチメント２４４に対して枢動し、それによって、ハウジング１３４及びその中のスピーカ１３６がヘッドマウントディスプレイユニット２１０に対して枢動することをなおも可能にする。
取り外し可能なスピーカユニット２３２の枢動軸２４４ａは、例えば、スピーカ磁気アタッチメント２４４によって形成される。枢動軸２４４ａは、図示するように、取り外し可能なスピーカユニット２３２の中央位置に（例えば、水平方向に及び垂直方向に）配置されてもよく、又は（例えば、取り外し可能なスピーカユニット２３２の上端部に向かって）垂直方向に、及び／若しくは（例えば、取り外し可能なスピーカユニット２３２の内側又は外側に向かって）水平方向に、付勢されてもよい。加えて、枢動軸２４４ａは、図示するように、ヘッドマウントディスプレイユニット２１０の支持体１１２の外側に配置されてもよい。
取り外し可能なスピーカユニット２３２は、ばね又は磁石などで、枢動軸２４４ａを中心にユーザの耳Ｅに向かって付勢されるように更に構成されてもよい。図２Ａ～図２Ｂに示される例では、取り外し可能なスピーカユニット２３２は、磁力でユーザの耳Ｅに向かって付勢されてもよい。ヘッドマウントディスプレイユニット２１０は、ユーザの耳Ｅの上方に配置された１つの向きの磁石２２８を含んでもよく、一方、取り外し可能なスピーカユニット２３２は、例えば、ハウジング１３４から上向きに延在する細長い部材を形成するか、又はそれを組み込むことによって、ユーザの耳Ｅの上方に反対向きの別の磁石２４８を含む。ヘッドマウントディスプレイユニット２１０及び取り外し可能なスピーカユニット２３２の磁石２２８、２４８は、取り外し可能なスピーカユニット２３２を枢動軸２４４ａを中心に、ユーザの耳Ｅに向かって付勢するように互いに反発する。
ヘッドマウントディスプレイユニット２１０及び取り外し可能なスピーカユニット２３２は、ヘッドマウントディスプレイユニット２１０に対して追加的に構成されて、取り外し可能なスピーカユニット２３２に電力を供給する。図示するように、磁気アタッチメント２２４、２４４は、ヘッドマウントディスプレイユニット２１０から取り外し可能なスピーカユニット２３２に電気を伝導して、増幅器１３８ａ及び他の電子機器（例えば、信号電子機器１３８ｃ及び／又は検知電子機器１３８ｄ）に電力を供給する。例えば、磁気アタッチメント２２４、２４４の第１のセットは、電力用（正）であり、磁気アタッチメント２２４、２４４の第２のセットは接地用である。磁気アタッチメント２２４、２４４はまた、ヘッドマウントディスプレイユニット２１０から取り外し可能なスピーカユニット２３２への伝導を介して、電力を伝導するのと併せて、オーディオ信号を送信してもよい。
あるいは、電力は、オーディオ信号も送信し得る磁気アタッチメント２２４、２４４とは独立した電気接点を用いて、ヘッドマウントディスプレイユニット２１０から取り外し可能なスピーカユニット２３２へ伝導されてもよい。他の変形例では、オーディオ信号は、別個の接点及び／又は光接続などで、電力とは無関係に送信されてもよい。検知電子機器１３８ｄを有する取り外し可能なスピーカユニット２３２の実施形態では、センサ信号は、磁気アタッチメント２２４、２４４、別個の接点、光接続を用いて、又は無線で、取り外し可能なスピーカユニット２３２からヘッドマウントディスプレイユニット２１０に送信されてもよい。電力はまた、ヘッドマウントディスプレイユニット２１０から誘導的に提供されてもよい。
図３Ａ～図３Ｅを参照すると、ディスプレイシステム３００は、ヘッドマウントディスプレイユニット３１０に解放可能に結合することができる取り外し可能なスピーカユニット３３２を有するオーディオヘッドセット３３０を含む。ヘッドマウントディスプレイユニット３１０は、ヘッドマウントディスプレイユニット１１０として構成されており、ソケットなどの雌型構成を有する磁気アタッチメント３２４を更に含む。取り外し可能なスピーカユニット３３２は、取り外し可能なスピーカユニット１３２として構成され、一方、ヘッドマウントディスプレイユニット３１０の磁気アタッチメント３２４によって受容されるボールなどの雄型構成を有する磁気アタッチメント３４４を更に含む。ヘッドマウントディスプレイユニット３１０及び取り外し可能なスピーカユニット３３２の磁気アタッチメント３２４、３４４は、それぞれ、ＨＭＤ又は雌型磁気アタッチメント、及びスピーカ又は雄型磁気アタッチメントと呼ばれてもよい。
図３Ａ～図３Ｅに示される例では、ヘッドマウントディスプレイユニット３１０は、ユーザの耳Ｅの上方に配置された１つのＨＭＤ磁気アタッチメント３２４を含む。図示するように、ＨＭＤ磁気アタッチメント３２４は、ユーザの耳Ｅの上方のヘッドマウントディスプレイユニット３１０の支持体１１２に結合されている。スピーカ磁気アタッチメント３４４は、例えば、ハウジング１３４から上向きに延在する細長い突出部（例えば、シャフト）の端部に形成されている、取り外し可能なスピーカユニット３３２のハウジング１３４に結合されている。
磁気アタッチメント３２４、３４４は、球面形状などのＨＭＤ磁気アタッチメント３２４によってスピーカ磁気アタッチメント３４４の受容を可能にする相補的なプロファイルを有する。磁気アタッチメント３２４、３４４はまた、ヘッドマウントディスプレイユニット３１０に対して取り外し可能なスピーカユニット３３２の移動を可能にし、一方で、それによってなおも支持されるように構成されてもよい。例えば、取り外し可能なスピーカユニット３３２は、図３Ａ及び図３Ｂ内の矢印によって示されるように、内側及び外側、前方及び後方に変位し、かつ、回転することを可能とされてもよい。
ヘッドマウントディスプレイユニット３１０及び取り外し可能なスピーカユニット３３２は、ヘッドマウントディスプレイユニット３１０に対して追加的に構成されて、取り外し可能なスピーカユニット３３２に電力を供給する。図示するように、磁気アタッチメント３２４、３４４は、ヘッドマウントディスプレイユニット３１０から取り外し可能なスピーカユニット３３２に電気を伝導して、増幅器１３８ａ及び／又はその他の電子機器１３８に電力を供給する。例えば、取り外し可能なスピーカユニット３３２がヘッドマウントディスプレイユニット３１０に対して移動するときに、磁気アタッチメント３２４、３４４のそれぞれは、電気を伝導するための物理的接触を維持する電力接点及び接地接点を提供するように細分化される。
例えば、図３Ｃに示すように、ＨＭＤ磁気アタッチメント３２４は、ＨＭＤ磁気アタッチメント３２４の球面に沿って離間されており、かつ、互いから電気的に絶縁された、第１の電力接点３２４ａ（例えば、正）及び第２の電力接点３２４ｂ（例えば、接地）を含んでもよい。図３Ｄに示すように、スピーカ磁気アタッチメント３４４は、互いに電気的に絶縁され、かつ、それらに対応するＨＭＤ磁気アタッチメント３２４の第１の電力接点３２４ａ及び第２の電力接点３２４ｂよりも大きい導電性表面積を有する、第１の電力接点３４４ａ（例えば、正）及び第２の電力接点３４４ｂ（例えば、接地）を含む。結果として、図３Ｅに示すように、取り外し可能なスピーカユニット３３２は、電力接点３４４ａ、３４４ｂと３２４ａ、３２４ｂとの間の導電接触をなおも維持してそれらの間で電力を伝導している間に、内側／外側、前方／後方に移動し、及び／又は限られた範囲の動きで回転することができる。磁気アタッチメント３２４、３４４はまた、ヘッドマウントディスプレイユニット３１０から取り外し可能なスピーカユニット３３２に、電力を伝導するのと併せてオーディオ信号を送信してもよい。ＨＭＤ磁気アタッチメント３２４の電力接点３２４ａ、３２４ｂは、例えば、永久磁石であってもよく、又は強磁性材料で作製されてもよく、若しくはそうでなければ強磁性材料を含んでもよく、一方、スピーカ磁気アタッチメント３４４の電力接点３４４ａ、３４４ｂは、強磁性材料で作製されてもよく、又はＨＭＤ磁気アタッチメント３２４のものとは反対向きの永久磁石であってもよい。
取り外し可能なスピーカユニット２３２、３３２は、ヘッドマウントディスプレイユニット２１０、３１０に対して移動可能であると説明されているが、磁気アタッチメント２２４、２４４及び磁気アタッチメント３２４、３４４の変形例は、代わりに、それらの間の移動を防止するように構成されてもよい。
更に、取り外し可能なスピーカユニット２３２、３３２は、ヘッドマウントディスプレイユニット２１０、３１０に磁力で解放可能に結合することができるものとして説明されているが、その代わりに、バックル、クランプ、又は締結具などの他の解放可能なメカニズムで互いに結合されてもよい。そのような場合、電力及び信号は、そのような解放可能なメカニズム、又は別個の電力接続及びデータ接続を介して伝導されてもよい。
図４Ａ～図４Ｃを参照すると、ディスプレイシステム４００は、ヘッドマウントディスプレイユニット４１０及び互いに取り外し可能に結合することができる、右側の取り外し可能なスピーカユニット４３２ｒ及び左側の取り外し可能なスピーカユニット４３２ｌなどの、取り外し可能なスピーカユニット４３２を有するオーディオヘッドセット４３０を含む。取り外し可能なスピーカユニット４３２のそれぞれは、取り外し可能なスピーカユニット１３２、２３２、３３２のうちの１つとして構成され、結合機構４４９を更に含む。一実施例では、結合機構４４９は、磁力を使用して、取り外し可能なスピーカユニット４３２を互いに結合する。例えば、右側の取り外し可能なスピーカユニット４３２ｒの結合機構４４９は、永久磁石若しくは強磁性材料であってもよく、又はそれらを含んでもよく、一方、左側の取り外し可能なスピーカユニット４３２ｌの結合機構４４９は、例えば永久磁石（例えば、反対向きの）若しくは強磁性材料であるか、又はそれらを含んで、それに磁気的に引き付けられるように構成されている。
結合機構４４９は、取り外し可能なスピーカユニット４３２を磁力で互いに取り外し可能に結合するように構成されるとき、（例えば、ハウジング１３４又はパッド２４６内に収容されて）視界から隠されてもよい。
結合機構４４９は、磁力を使用する代わりに、又はそれに加えて、取り外し可能なスピーカユニット４３２を互いに取り外し可能に結合する機械的メカニズム（例えば、バックル、クランプ、又は締結具）であってもよい。
更に図４Ｃを参照すると、結合機構４４９はまた、取り外し可能なスピーカユニット４３２をヘッドマウントディスプレイユニット４１０に結合するように機能してもよい。例えば、ヘッドマウントディスプレイユニット４１０は、ヘッドマウントディスプレイユニット１１０として構成されてもよく、結合機構４４９に対応する結合機構４２９を含んでもよい。例えば、図４Ｃに示すように、ヘッドマウントディスプレイユニット４１０の右側上の結合機構４２９は、左側の取り外し可能なスピーカユニット４３２ｌの結合機構４４９に対する同様の配置（例えば、位置、磁力を使用した場合の磁極配向、又は機械的係合を使用した場合の共通の雄／雌構成）の結合機構４２９のうちの１つ以上を含んでもよい。結果として、ヘッドマウントディスプレイユニット４１０の右側を、左側の取り外し可能なスピーカユニット４３２ｌが右側の取り外し可能なスピーカユニット４３２ｒに結合するのと同様の方法で、右側の取り外し可能なスピーカユニット４３２ｒに結合することができる。
図５～図７Ｂを参照すると、ディスプレイシステム１００、２００、３００、４００のいずれに対しても、ヘッドマウントディスプレイユニット１１０、２１０、３１０、４１０及びオーディオヘッドセット１３０、２３０、３３０、４３０、又は両方とも、オーディオヘッドセット１３０、２３０、３３０、４３０の状態に従ってサウンドを出力する。以下に続く説明の簡略化のために、ディスプレイシステム１００のみを参照するが、他のディスプレイシステム２００、３００、４００は、図５～図７Ｂに関して説明されるように構成され得ることを理解されたい。以下で更に詳細に説明されるように、サウンドが出力されるのに従うオーディオヘッドセット１３０の状態は、取り外し可能なスピーカユニット１３２が互いに結合されている（すなわち、前述したように音声ユニットを形成する）かどうか、又はヘッドマウントディスプレイユニット１１０に対するオーディオヘッドセット１３０若しくは取り外し可能なスピーカユニット１３２の位置若しくは相対的移動、のうちの１つ以上であってもよい。
図５を参照すると、一実施例では、ヘッドマウントディスプレイユニット１１０のＨＭＤスピーカ１１８は、取り外し可能なスピーカユニット１３２が互いから分離されるときに、例えば、取り外し可能なスピーカユニット１３２が互いから分離した後、そしてその後の持続時間に、サウンドを出力する。そのような場合、ヘッドマウントディスプレイユニット１１０のＨＭＤスピーカ１１８からのサウンド出力は、オーディオヘッドセット１３０（例えば、その取り外し可能なスピーカユニット１３２）のサウンド出力能力を示唆するオーディオキュー又はフィードバックを提供するように、オーディオヘッドセット１３０又はその取り外し可能なスピーカユニット１３２の起動を表すことができる。
図５は、取り外し可能なスピーカユニット１３２を互いから分離したことに従い、ＨＭＤスピーカ１１８からサウンドを出力するための方法５００を示す。この方法は、例えば、コントローラ１５０、並びにヘッドマウントディスプレイユニット１１０及び取り外し可能なスピーカユニット１３２の様々なセンサを用いて実装されてもよい。
第１の動作５１０では、取り外し可能なスピーカユニット１３２の互いからの分離が判定される。取り外し可能なスピーカユニット１３２の分離は、例えば、ユーザが取り外し可能なスピーカユニット１３２を引き離すことにより生じ得る。取り外し可能なスピーカユニット１３２の分離は、取り外し可能なスピーカユニット１３２間の相対的移動、又は近接性の変化を検出することなどによって、カメラ１１６、又は取り外し可能なスピーカユニット１３２の検知電子機器１３８ｄから受信したビデオを処理することなどによって、例えば、ヘッドマウントディスプレイユニット１１０のセンサを使用してコントローラ１５０によって、判定することができる。
第２の動作５２０では、判定されている取り外し可能なスピーカユニット１３２の分離に基づいて、ヘッドマウントディスプレイユニット１１０のＨＭＤスピーカ１１８からサウンドが出力される。例えば、コントローラ１５０は、オーディオ信号及び／又は電力をＨＭＤスピーカ１１８に送信させて、そこからサウンドを出力させることができる。ＨＭＤスピーカ１１８からのサウンド出力は、聴覚コンテンツを含む。そのような聴覚コンテンツは、取り外し可能なスピーカユニット１３２に関連するオーディオインジケータを含んでもよい。
第３の動作５３０では、オーディオヘッドセット１３０の取り外し可能なスピーカユニット１３２からサウンドが出力される。例えば、コントローラ１５０は、オーディオ信号及び／又は電力を取り外し可能なスピーカユニット１３２に送信させることができる。取り外し可能なスピーカユニット１３２からのサウンド出力には、仮想又は複合現実エクスペリエンスに関連するような聴覚コンテンツを含んでもよい。
動作５２０、５３０では、図６Ａ～図６Ｂ及び図７Ａ～図７Ｂを参照して以下に説明する方法に従って、取り外し可能なスピーカユニット１３２からサウンドが出力されてもよい。
図６Ａ～図６Ｂ及び図７Ａ～図７Ｂを参照すると、ヘッドマウントディスプレイユニット１１０のＨＭＤスピーカ１１８及び取り外し可能なスピーカユニット１３２が、オーディオヘッドセット１３０及び／又はその取り外し可能なスピーカユニット１３２の位置に従ってサウンドを出力するように、オーディオ信号処理が（例えば、コントローラ１５０によって）実行される。以下で更に詳細に説明するように、そのようなオーディオ信号処理又は他のオーディオ制御には、音量を調整すること（図６Ａ～図７Ｂ及び関連する説明を参照）、イコライゼーション（図８Ａ～図８Ｂ及び関連する説明を参照）、並びに／又はダイナミックレンジ（図９Ａ～図９Ｂを参照）を含んでもよい。
図６Ａ～図６Ｂを参照すると、取り外し可能なスピーカユニット１３２は、ヘッドマウントディスプレイユニット１１０に結合されるまでサウンドを出力しないように構成されてもよい。例えば、取り外し可能なスピーカユニット１３２は、ヘッドマウントディスプレイユニット１１０から独立して電源を有しなくてもよい（例えば、内部電池を有しない、ヘッドマウントディスプレイユニット１１０から独立した電源への有線接続を有しない、又は他の方法でヘッドマウントディスプレイユニット１１０に取り外し可能に結合されたときにのみ電力供給される）。他の実施例では、取り外し可能なスピーカユニット１３２は、導電性又は光学データ接続などを介して、物理的にそれに結合されているときのみに、ヘッドマウントディスプレイユニット１１０（例えば、仮想オーディオコンテンツ）に関連付けられたオーディオ信号を受信してもよい。なおも更なる実施例では、取り外し可能なスピーカユニット１３２は、ヘッドマウントディスプレイユニット１１０に取り外し可能に結合されるまで、他の方法で（例えば、ソフトウェアプログラミングによって）サウンドを出力しないように構成されている。
そのようなシナリオでは、ヘッドマウントディスプレイユニット１１０のＨＭＤスピーカ１１８は、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニットに結合されていない間に、取り外し可能なスピーカユニット１３２によって発せられているサウンドをシミュレートするか、又は別の方法で表すように、サウンドを出力することができる。取り外し可能なスピーカユニット１３２をヘッドマウントディスプレイユニット１１０に接続すると、取り外し可能なスピーカユニット１３２からのサウンド出力は、主音源になる（例えば、オンにする）ように増大し、一方、ＨＭＤスピーカ１１８からのサウンド出力は、同時に又はその後実質的に（例えば、サウンドを発しないように）減少させることができる。
図６Ａは、取り外し可能なスピーカユニット１３２がオーディオヘッドセット１３０に結合可能である所定の結合位置までの取り外し可能なスピーカユニット１３２の距離の関数として、ヘッドマウントディスプレイユニット１１０のＨＭＤスピーカ１１８、及びオーディオヘッドセット１３０の取り外し可能なスピーカユニット１３２からのサウンド出力の音量のプロットを示す。プロットに沿って右方向に移動することが、取り外し可能なスピーカユニット１３２を結合位置に向かって移動させることを反映するように、ゼロ距離（すなわち、結合位置における）がプロットの右側に示されている。このプロットはまた、取り外し可能なスピーカユニット１３２が取り外し可能なスピーカユニット１３２に結合位置で結合されている、Ｃによって示される結合状態を示す。結合状態Ｃがゼロ距離の後に示されているが、これは取り外し可能なスピーカユニット１３２の結合状態の状態変化を表すものとして理解されるべきであり、取り外し可能なスピーカユニット１３２と結合位置との間の距離の更なる変化を必ずしも表すものではないことを理解されたい。本明細書で使用するとき、用語「音量」は、一般に、オーディオ出力デバイスによって出力されるサウンドのレベルを指し、「サウンド出力レベル」とも呼ばれてもよい。
図示するように、取り外し可能なスピーカユニット１３２が結合位置に近づいて移動するにつれて、ＨＭＤスピーカ１１８の音量１１８ｖが増大し、取り外し可能なスピーカユニット１３２が結合位置にあるか又はその近くにあるときにピーク音量に到達する。取り外し可能なスピーカユニット１３２の音量１３２ｖは、取り外し可能なスピーカユニット１３２が結合位置に到達するまでゼロにとどまり、及び／又はヘッドマウントディスプレイユニット１１０に結合される。
結合位置において、又は結合状態Ｃにあると、取り外し可能なスピーカユニット１３２の音量１３２ｖは、例えば、ユーザに対して主音源になるように増大される。スピーカユニット１３２からのサウンド出力は、結合状態Ｃにある間維持される。
取り外し可能なスピーカユニット１３２の音量１３２ｖの増大と一致して、（例えば、取り外し可能なスピーカユニット１３２が結合位置に移動されるとき、又はヘッドマウントディスプレイユニット１１０に結合すると）、ＨＭＤスピーカ１１８の音量１１８ｖは減少する。例えば、ＨＭＤスピーカ１１８の音量１１８ｖは、取り外し可能なスピーカユニット１３２が結合状態Ｃにあるときにゼロにすることができ、及び／又はゼロで維持することができる。
図６Ｂは、ヘッドマウントディスプレイユニット１１０に対する（例えば、ヘッドマウントディスプレイユニット１１０上の結合位置に対する）オーディオヘッドセット１３０及び／又は取り外し可能なスピーカユニット１３２の位置に個別に従って、ＨＭＤスピーカ１１８からサウンドを出力するための方法６００を示す。方法６００は、例えば、コントローラ１５０、並びにヘッドマウントディスプレイユニット１１０及び取り外し可能なスピーカユニット１３２の様々なセンサを用いて実装されてもよい。取り外し可能なスピーカユニット１３２のうちの１つに関連して説明されているが、方法６００は、取り外し可能なスピーカユニット１３２及びオーディオヘッドセット１３０のそれぞれに適用可能であることを理解されたい。
第１の動作６１０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置（例えば、その上の結合位置）の変化が判定される。取り外し可能なスピーカユニット１３２の位置は、例えば、ユーザが取り外し可能なスピーカユニット１３２に対して移動する（例えば、ヘッドに向かって、離れて、それを回転させる）とき、又はユーザが取り外し可能なスピーカユニット１３２を移動させる（例えば、取り外し可能なスピーカユニット１３２を結合位置に移動させる）ときに、ヘッドマウントディスプレイユニット１１０に対して変更されてもよい。取り外し可能なスピーカユニット１３２の位置又は相対的移動の変化は、ヘッドマウントディスプレイユニットに向かう動き、及び又はそれらの間の近接性の変化を検出することなどによって、（例えば、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０に結合されていることとは無関係に電力供給される場合）カメラ１１６、又は取り外し可能なスピーカユニット１３２の検知電子機器１３８ｄから受信したビデオを処理することなどによって、例えば、ヘッドマウントディスプレイユニット１１０のセンサを使用して、コントローラ１５０によって判定されてもよい。
第２の動作６２０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置の変化に基づいて、ＨＭＤスピーカ１１８の音量１１８ｖが変更される。例えば、図６Ａに示すように、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０（例えば、その上の結合位置）に向かって、又はそこから離れて、それぞれ移動するにつれて、音量１１８ｖは増大又は減少する。コントローラ１５０は、オーディオ信号及び／又は電力をＨＭＤスピーカ１１８に送信させ、そこからサウンドを音量１１８ｖで出力させることができる。ＨＭＤスピーカ１１８からのサウンド出力には、仮想又は複合現実エクスペリエンスに関連するものなどの聴覚コンテンツを含む。
第３の動作６３０では、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０に対してゼロ距離にあると判定したことに基づいて、又は取り外し可能なスピーカユニット１３２をヘッドマウントディスプレイユニット１１０に所定の位置で結合すると、取り外し可能なスピーカユニット１３２の音量１３２ｖが、実質的に増大する。例えば、コントローラ１５０は、第２の動作６２０に関して上述したように、ヘッドマウントディスプレイユニット１１０及び／若しくは取り外し可能なスピーカユニット１３２のセンサを使用して、並びに／又は取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０に結合されていると判定することによって、取り外し可能なスピーカユニット１３２がゼロ距離にあると判定することができる。コントローラ１５０は、オーディオ信号及び／又は電力を取り外し可能なスピーカユニット１３２に送信させて、そこからサウンドを実質的に増大した音量１３２ｖで出力させることができる。例えば、取り外し可能なスピーカユニット１３２の音量１３２ｖがゼロから増大して、一次的な又は唯一のサウンド出力をユーザに提供することができる。
第４の動作６４０では、取り外し可能なスピーカユニット１３２のゼロ距離の結合の判定に基づいて、又は実質的に増大している取り外し可能なスピーカユニット１３２の音量１３２ｖに従って、ＨＭＤスピーカ１１８の音量１１８ｖが、実質的に減少する（例えば、ゼロになる）。例えば、コントローラ１５０は、オーディオ信号及び／又は電力をＨＭＤスピーカ１１８に送信させて音量１１８ｖを減少させるか、又はＨＭＤスピーカ１１８に送信しないようにして音量１１８ｖをゼロに減少させてもよい。第４の動作６４０は、第３の動作６３０と同時に又はその直後などに、第３の動作６３０と一致して生じてもよい。
第５の動作６５０では、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０に結合されている（例えば、図６Ａに示す結合状態にある）間、取り外し可能なスピーカユニット１３２は、サウンド出力をユーザに提供し続け、一方、ＨＭＤスピーカ１１８は、ユーザに二次的なサウンドを提供するか又は全くサウンドを提供しない。
第６の動作６６０では、取り外し可能なスピーカユニット１３２の音響透過性が起動されてもよい。音響透過性は、周囲サウンド電子機器１３８ｅ（例えば、マイクロフォン１３８ｅ’及び信号プロセッサ１３８ｅ”）によって実施されて、上述のように処理された周囲サウンドを生成する。音響透過性は、例えば、ディスプレイシステム１００が、複合現実モードで若しくはデフォルトにより動作している場合、又はユーザの選択によって起動され得る場合に、取り外し可能なスピーカユニット１３２をヘッドマウントディスプレイユニット１１０に結合すると自動的に起動されてもよい。音響透過性により、取り外し可能なスピーカユニット１３２がユーザの耳Ｅに直接、周囲サウンドが流れるのを物理的に妨げているにもかかわらず、処理された周囲サウンドをユーザに送信することによって、複合現実エクスペリエンスを提供することができる。
第７の動作６７０では、取り外し可能なスピーカユニット１３２のノイズキャンセルが起動されてもよい。ノイズキャンセルは、上述のように処理されたキャンセルサウンドを生成するように、周囲サウンド電子機器１３８ｅによって実装される。例えば、ディスプレイシステム１００が仮想現実モードで動作している場合（例えば、視覚的パススルーを伴わない仮想視覚コンテンツを提供しているとき）、又は、デフォルトにより（例えば、取り外し可能なスピーカユニット１３２をヘッドマウントディスプレイユニット１１０に接続した後の所定時間経過後、若しくは音響透過性を動作させている所定時間後）、ノイズキャンセルは、取り外し可能なスピーカユニット１３２をヘッドマウントディスプレイユニット１１０に結合すると自動的に起動されてもよく、又はユーザの選択によって起動されてもよい。ノイズキャンセルにより、ユーザによる現実環境からのサウンドの聞こえを更に抑制することによって、仮想現実エクスペリエンスを提供することができる。ノイズキャンセルは起動されなくてもよく、又は音響透過性を起動することなく起動されてもよい（例えば、第６の動作６６０及び第７の動作６７０の一方、他方、又は両方が実行されてもよい）ことに留意されたい。
方法６００の変形例では、取り外し可能なスピーカユニット１３２の位置を判定し（すなわち、第１の動作６１０）、それに基づくＨＭＤスピーカ１１８の音量１１８ｖを変更する（すなわち、第２の動作６２０）、第１の動作６１０及び第２の動作６２０は省略されてもよい。そのような場合、ゼロ位置を判定することに基づいて、又は結合されると、取り外し可能なスピーカユニット１３２の音量１３２ｖを増大させ（すなわち、第３の動作６３０）、ＨＭＤスピーカ１１８の音量１１８ｖを減少させる（すなわち、第４の操作６４０）、第３の動作６３０及び第４の動作６４０はなおも実行される。
方法６００、及びその前述の変形例は、例えば、第３の動作５３０において、前述の方法５００と併せて使用されてもよい。
図７Ａ～図７Ｂを参照すると、取り外し可能なスピーカユニット１３２は、ヘッドマウントディスプレイユニット１１０に結合される前に、サウンドを出力するように構成されてもよい。例えば、取り外し可能なスピーカユニット１３２は、ヘッドマウントディスプレイユニットに結合されていることとは無関係に（例えば、内部電池、又は電源への有線接続を有することによって）電力供給されてもよい。そのようなシナリオでは、ヘッドマウントディスプレイユニット１１０のＨＭＤスピーカ１１８、及び取り外し可能なスピーカユニット１３２は、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０に結合される前などに、ユーザが体験する音量の変動を制限するようにサウンド出力をブレンドしてもよい。
ヘッドマウントディスプレイユニット１１０のＨＭＤスピーカ１１８、及び取り外し可能なスピーカユニット１３２は、（例えば、取り外し可能なスピーカユニット１３２が互いに結合されているときの）オーディオヘッドセット１３０の動き、及び／又は取り外し可能なスピーカユニット１３２の動きに個別に従って、サウンドを出力する。例えば、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０から比較的遠い距離にある場合、ＨＭＤスピーカ１１８のみからサウンドを出力する。取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０のより近くに移動すると、取り外し可能なスピーカユニット１３２は、ヘッドマウントディスプレイユニット１１０のＨＭＤスピーカ１１８及び取り外し可能なスピーカユニット１３２の両方から同時に発せられているサウンドがユーザに聞こえるように、音量を増大させてもよい。取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０の更に近くに移動すると、例えば、取り外し可能なスピーカユニット１３２をそれに結合するために、ＨＭＤスピーカ１１８及び取り外し可能なスピーカユニット１３２は、ＨＭＤスピーカ１１８からの音量を減少させることによって音量変動を制限するように、協働してサウンド出力を提供する一方で、同時に、取り外し可能なスピーカユニット１３２からの音量を増大させ、次いで減少させることができる。これは、ユーザが知覚する音量の変動を、ユーザが知覚する音量の変動を制限するのに役立ち得る。
図７Ａは、取り外し可能なスピーカユニット１３２がオーディオヘッドセット１３０に結合可能である所定の結合位置までの取り外し可能なスピーカユニット１３２の距離の関数として、ＨＭＤスピーカ１１８及び取り外し可能なスピーカユニット１３２から出力されるサウンドの音量のプロットを示す。プロットに沿って右方向に移動することが、取り外し可能なスピーカユニット１３２を結合位置に向かって移動させることを反映するように、ゼロ距離（すなわち、結合位置における）がプロットの右側に示されている。
図示するように、取り外し可能なスピーカユニット１３２とヘッドマウントディスプレイユニット１１０上の結合位置との間の比較的遠くの距離において、取り外し可能なスピーカユニット１３２がサウンドを出力しない間、ＨＭＤスピーカ１１８は音量１１８ｖでサウンドを出力する。そのような比較的遠くの距離では、ＨＭＤスピーカ１１８の音量１１８ｖは、そのような距離から無関係であってもよく、及び／又は一定であってもよい。取り外し可能なスピーカユニット１３２が結合位置の更に近くに移動すると、ＨＭＤスピーカ１１８の音量１１８ｖは減少し得る一方で、取り外し可能なスピーカユニット１３２の音量１３２ｖは増大する。そのようなより近い距離では、ユーザは、ＨＭＤスピーカ１１８及び取り外し可能なスピーカユニット１３２の両方からの出力からサウンドを聞くことができる。取り外し可能なスピーカユニットがユーザの耳Ｅの上方でヘッドマウントディスプレイユニット１１０に結合するゼロ距離に移動するときなどの近い距離では、ＨＭＤスピーカ１１８によって出力される音量１１８ｖはゼロに減少し、一方、取り外し可能なスピーカユニット１３２の音量１３２ｖは最終出力レベルまで減少し得る。取り外し可能なスピーカユニット１３２の音量１３２ｖの減少は、例えば、ハウジング１３４又は取り外し可能なスピーカユニット１３２のパッド２４６がユーザの耳Ｅに係合することによる、現実環境から知覚され得る減少した距離及び／又はサウンド分離のために、そうでなければユーザが知覚し得る音量の増大を考慮することができる。
図７Ｂは、ヘッドマウントディスプレイユニット１１０に対する（例えば、ヘッドマウントディスプレイユニット１１０上の結合位置に対する）オーディオヘッドセット１３０及び／又は取り外し可能なスピーカユニット１３２の位置に個別に従って、ＨＭＤスピーカ１１８及び取り外し可能なスピーカユニット１３２からサウンドを出力するための方法７００を示す。方法７００は、例えば、コントローラ１５０、並びにヘッドマウントディスプレイユニット１１０及び取り外し可能なスピーカユニット１３２の様々なセンサを用いて実行されてもよい。取り外し可能なスピーカユニット１３２のうちの１つのみに関連して説明されているが、方法７００は、取り外し可能なスピーカユニット１３２及びオーディオヘッドセット１３０のそれぞれに適用可能であることを理解されたい。
第１の動作７１０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置（例えば、その上の所定の結合位置）が判定され、それによって、方法６００の第１の動作６１０について上述した方法で実行することができる。
第２の動作７２０では、比較的遠くにある（例えば、閾値距離よりも大きい）ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置に基づいて、ＨＭＤスピーカ１１８はサウンドを出力し（すなわち、音量１１８ｖはゼロより大きい）、一方、取り外し可能なスピーカユニット１３２はサウンドを出力しない（すなわち、音量１３２ｖはゼロである）。コントローラ１５０は、オーディオ信号及び／又は電力をＨＭＤスピーカ１１８に送信させて、そこからサウンドを出力させることができる。ＨＭＤスピーカ１１８からのサウンド出力には、仮想又は複合現実エクスペリエンスに関連するものなどの聴覚コンテンツを含む。
第３の動作７３０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置が中間範囲にあり（例えば、閾値距離を下回り、第２の閾値を上回る）、かつ、減少していることに基づいて、ＨＭＤスピーカ１１８の音量１１８ｖは減少され、一方、取り外し可能なスピーカユニット１３２の音量１３２ｖは、同時に増大する。コントローラ１５０は、オーディオ信号及び／又は電力をＨＭＤスピーカ１１８及び取り外し可能なスピーカユニット１３２に送信させることができる。
第４の動作７４０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置が近接しており（例えば、ゼロ距離までの第２の閾値距離を下回る）、かつ、ゼロ距離まで減少していることに基づいて、ＨＭＤスピーカ１１８の音量１１８ｖはゼロに減少され、取り外し可能なスピーカユニット１３２の音量１３２ｖはゼロ以外の値にわずかに減少される。コントローラ１５０は、オーディオ信号及び／又は電力をＨＭＤスピーカ１１８に送信させて、そこからサウンドを出力させることができる。
第５の動作７５０では、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０に結合されている間、取り外し可能なスピーカユニット１３２は、ゼロよりも大きい音量１３２ｖでサウンド出力をユーザに提供し続け、一方、ＨＭＤスピーカ１１８はサウンドをユーザに提供しない。
第６の動作７６０では、方法６００の第６の動作６７０について前述したように、取り外し可能なスピーカユニット１３２の音響透過性が起動されてもよい。
第７の動作７７０では、方法６００の第７の動作６７０について前述したように、取り外し可能なスピーカユニット１３２のノイズキャンセルが起動されてもよい。
方法６００の態様は、方法７００に組み込まれてもよく、この場合、ＨＭＤスピーカ１１８の音量１１８ｖは、そこから発せられるサウンドで取り外し可能なスピーカユニット１３２の動きをシミュレートするように変化し得ることに留意されたい。例えば、第２の動作７２０では、ヘッドマウントディスプレイユニット１１０上の結合位置の近くに移動している取り外し可能なスピーカユニット１３２をシミュレートするために音量１１８ｖを増大させてもよく、第３の動作７３０では、増大させても一定のままであってもよい。更に、方法７００は、例えば、第３の動作５３０において、前述の方法５００と併せて使用されてもよい。
図８Ａ～図８Ｂを参照すると、ヘッドマウントディスプレイユニット１１０から取り外されたときにサウンドを出力するように構成された取り外し可能なスピーカユニット１３２の場合、取り外し可能なスピーカユニット１３２によって出力されるサウンドのイコライゼーションは、取り外し可能なスピーカユニット１３２からヘッドマウントディスプレイユニット１１０（例えば、その上の結合位置）までの距離に従って変化し得る。例えば、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０の近くに移動すると、低い周波数の（例えば、バスレンジの）サウンドのゲインが増大し、より高い周波数のサウンドのゲインが減少し得る。低い周波数でゲインを減少させ、より高い周波数でゲインを増大させることにより、より高い周波数のサウンドに対する電力出力を集中させ、それによって一般に、所与の音量出力に対して低周波数サウンドよりも電力消費が少なくなる。取り外し可能なスピーカユニット１３２の電力出力は、ポータブル／取り外し可能な性質（例えば、バッテリで電力供給されている）、及び／又は一次使用ケース（例えば、ユーザの耳Ｅにごく近接して保持されている）ことに起因して制限され得るため、このようにしてイコライゼーションすることにより、イコライゼーションが行われなかった場合よりも取り外し可能なスピーカユニット１３２が比較的遠くの距離にある間、ユーザがより大きなサウンドを体験することを可能にし得る。
図８Ａを参照すると、取り外し可能なスピーカユニット１３２によって出力される低い周波数サウンドのゲインは、低周波数ゲイン８３２Ｌと呼ばれ、一方、取り外し可能なスピーカユニット１３２によって出力されるより高い周波数のサウンドのゲインは、高周波数ゲイン８３２Ｈと呼ばれる。低周波数ゲイン８３２Ｌ及び高周波数ゲイン８３２Ｈは、Ｙ軸がゲインであり、Ｘ軸が取り外し可能なスピーカユニット１３２とヘッドマウントディスプレイユニット１１０との間の距離（例えば、その上の結合位置）であり、右側で距離がゼロである（すなわち、取り外し可能なスピーカユニット１３２は、プロットに沿って右方向に移動する結合位置により近づくように移動する）プロットによって表される。
取り外し可能なスピーカユニット１３２とヘッドマウントディスプレイユニット１１０との間が比較的遠い距離において、低周波数ゲイン８３２Ｌは、１を下回り、例えば、ゼロから開始する。距離が減少するにつれて、例えば、ユーザが取り外し可能なスピーカユニット１３２をヘッドマウントディスプレイユニット１１０に向かって（例えば、ユーザの耳Ｅの上方の結合位置まで）移動させるときなどに、低周波数ゲインは増大し、例えば、１で終了する。逆に、高周波数ゲイン８３２Ｈは、比較的遠くの距離で１を上回り、距離が減少するにつれて減少し、例えば、１で終了する。その結果、比較的遠くの距離では、低周波数ゲイン８３２Ｌは１を下回り、高周波数ゲイン８３２Ｈは１を上回り、低周波数ゲイン８３２Ｌと高周波数ゲイン８３２Ｈとの差は、距離が減少するにつれて減少し、例えば、その差はゼロで終了する。
その代わりに又は加えて、比較的近い距離では、取り外し可能なスピーカユニット１３２がユーザの手の中にあり、それに結合されるヘッドマウントディスプレイユニット１１０に向かって移動されているときなどに、低周波数サウンドに対するゲインが、比較的近い距離で１を上回って増大されてもよい。そのような低周波数サウンドは、取り外し可能なスピーカユニット１３２がユーザによって保持されたときにロールオフする（例えば、減衰される）傾向を有してもよく、そのような低周波数サウンドに対するゲインを増加させることにより、より平坦なサウンド、又はより平坦なサウンドの知覚をユーザに提供することができる。したがって、再び図８Ａを参照すると、取り外し可能なスピーカユニット１３２によって出力される低周波数サウンドの代替ゲインは、低周波数ゲイン８３２Ｌ’と呼ばれる。取り外し可能なスピーカユニット１３２とヘッドマウントディスプレイユニット１１０との間が比較的近い距離において、低周波数ゲイン８３２Ｌ’は、１を上回って増大してもよく、距離が減少するにつれて、例えば、１に向かって及び／又は１まで、漸進的（図示するように）又は階段状に減少してもよい。比較的遠い距離では、低周波数ゲイン８３２Ｌ’は、低周波数ゲイン８３２Ｌと同じであってもよく（例えば、ゼロなどにおいて、１を下回って開始し、距離が減少するにつれて増大する）、又は（例えば、１である）他の値であってもよい。
図８Ｂは、ヘッドマウントディスプレイユニット１１０に対する（例えば、ヘッドマウントディスプレイユニット１１０上の結合位置に対する）オーディオヘッドセット１３０及び／又は取り外し可能なスピーカユニット１３２の位置に個別に従って、イコライゼーションオーディオ信号処理を使用して、取り外し可能なスピーカユニット１３２からサウンドを出力するための方法８００を示す。方法８００は、例えば、コントローラ１５０、並びにヘッドマウントディスプレイユニット１１０及び取り外し可能なスピーカユニット１３２の様々なセンサを用いて実行されてもよい。取り外し可能なスピーカユニット１３２のうちの１つのみに関連して説明されているが、方法８００は、取り外し可能なスピーカユニット１３２及びオーディオヘッドセット１３０のそれぞれに適用可能であることを理解されたい。方法８００は、イコライゼーション方法又はイコライゼーションオーディオ信号処理方法と呼ばれてもよく、単独で及び／又は方法７００と併せて使用されてもよい。
第１の動作８１０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置（例えば、その上の所定の結合位置）が判定され、それによって、方法６００の第１の動作６１０について上述した方法で実行することができる。
第２の動作８２０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置が比較的遠い（例えば、閾値距離よりも大きい）ことに基づいて、低周波数ゲイン８３２Ｌは１を下回り、及び／又は高周波数ゲイン８３２Ｈは１を上回り、低周波数ゲイン８３２Ｌ及び／又は高周波数ゲイン８３２Ｈに従って、取り外し可能なスピーカユニット１３２からサウンドが出力される。コントローラ１５０は、例えば図８Ａに示すように、低周波数ゲイン８３２Ｌ及び高周波数ゲイン８３２Ｈを調整し、オーディオ信号及び／又は電力を取り外し可能なスピーカユニット１３２に送信させて、そのような調整されたゲインに従ってそこからサウンドを出力させることができる。出力サウンドは、仮想又は複合現実エクスペリエンスに関連するものなどの聴覚コンテンツを含んでもよい。
第３の動作８３０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置が中間範囲にあり（例えば、閾値距離を下回り、第２の閾値を上回る）、かつ、減少していることに基づいて、低周波数ゲイン８３２Ｌは増大し、及び／又は高周波数ゲイン８３２Ｈは減少し、（調整された）低周波数ゲイン８３２Ｌ及び／又は高周波数ゲイン８３２Ｈに従って、取り外し可能なスピーカユニット１３２からサウンドが出力される。コントローラ１５０は、例えば図８Ａに示すように、低周波数ゲイン８３２Ｌ及び高周波数ゲイン８３２Ｈを調整し、オーディオ信号及び／又は電力を取り外し可能なスピーカユニット１３２に送信させて、そのような調整されたゲインに従ってそこからサウンドを出力させることができる。
第４の動作８４０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置が比較的近い範囲（例えば、第２の閾値を下回る）にあり、かつ、減少していることに基づいて、低周波数ゲインは、１を上回って任意選択的に増大してもよく、その後、距離がゼロまで減少するにつれて１に向かって更に任意選択的に減少してもよい。コントローラ１５０は、低周波数ゲイン８３２Ｌ’を調整し、オーディオ信号及び／又は電力を取り外し可能なスピーカユニット１３２に送信させて、そのようなゲインに従ってサウンドを出力させることができる。
図９Ａ～図９Ｂを参照すると、ヘッドマウントディスプレイユニット１１０から取り外されたときにサウンドを出力するように構成された取り外し可能なスピーカユニット１３２の場合、取り外し可能なスピーカユニット１３２によって出力されるサウンドのダイナミックレンジは、ヘッドマウントディスプレイユニット１１０（例えば、その上の結合位置）に対する取り外し可能なスピーカユニット１３２の距離に従って変化させることができる。ダイナミックレンジは、一般に、大きなサウンドと穏やかなサウンドとの間の音量範囲を指すが、一方、ダイナミックレンジ圧縮は、より大きなサウンドの音量を減少し、及び／又はより静かなサウンドを増幅するオーディオ信号処理を指す。例えば、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０のより近くに移動すると、ダイナミックレンジ圧縮を減少したレベルで適用することができ、それによって、比較的遠い距離ではより低いダイナミックレンジ、及びより低い距離ではより高いダイナミックレンジをもたらす。このようにダイナミックレンジ圧縮を適用することにより、例えば、比較的遠くの距離で、ユーザが、より多くのサウンドを聞くこと、及び／又は取り外し可能なスピーカユニット１３２から一貫したより大きな音量を体験することを可能にすることができる。
図９Ａを参照すると、取り外し可能なスピーカユニットによって出力されるサウンドのダイナミックレンジ９３２Ｒは、取り外し可能なスピーカユニット１３２とヘッドマウントディスプレイユニット１１０との間の距離（例えば、その上の結合位置）の関数として示されている。距離が減少するにつれて、ダイナミックレンジ９３２Ｒが増大するように、より少ないダイナミック圧縮が適用される。
図９Ｂは、ヘッドマウントディスプレイユニット１１０に対する（例えば、ヘッドマウントディスプレイユニット１１０上の結合位置に対する）オーディオヘッドセット１３０及び／又は取り外し可能なスピーカユニット１３２の位置に個別に従って、ダイナミックレンジ圧縮オーディオ信号処理を使用して、取り外し可能なスピーカユニット１３２からサウンドを出力するための方法９００を示す。方法９００は、例えば、コントローラ１５０、並びにヘッドマウントディスプレイユニット１１０及び取り外し可能なスピーカユニット１３２の様々なセンサを用いて実行されてもよい。取り外し可能なスピーカユニット１３２のうちの１つのみに関連して説明されているが、方法９００は、取り外し可能なスピーカユニット１３２及びオーディオヘッドセット１３０のそれぞれに適用可能であることを理解されたい。方法９００は、ダイナミックレンジ圧縮方法又はダイナミックレンジ圧縮オーディオ信号処理方法と呼ばれてもよく、単独で、並びに／又は方法７００及び／若しくは方法８００と併せて使用されてもよい。
第１の動作９１０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置（例えば、その上の所定の結合位置）が判定され、それによって、方法６００の第１の動作６１０について上述した方法で実行することができる。
第２の動作９２０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置が比較的遠い（例えば、閾値距離よりも大きい）ことに基づいて、比較的高いレベルのダイナミックレンジ圧縮が適用されて、比較的低いダイナミックレンジを達成する。コントローラ１５０は、例えば、図９Ａに示されるダイナミックレンジ９３２Ｒを達成するためにダイナミックレンジ圧縮を適用し、オーディオ信号及び／又は電力を取り外し可能なスピーカユニット１３２に送信させて、そのようなダイナミックレンジに従ってそこからサウンドを出力させることができる。出力サウンドは、仮想又は複合現実エクスペリエンスに関連するものなどの聴覚コンテンツを含んでもよい。
第３の動作９３０では、ヘッドマウントディスプレイユニット１１０に対する取り外し可能なスピーカユニット１３２の位置が中間範囲にあり（例えば、閾値距離を下回る）、かつ、減少していることに基づいて、適用されるダイナミックレンジ圧縮のレベルが減少されて、比較的高いダイナミックレンジを達成する。コントローラ１５０は、例えば、図９Ａに示されるダイナミックレンジ９３２Ｒを達成するためにダイナミックレンジ圧縮を適用し、オーディオ信号及び／又は電力を取り外し可能なスピーカユニット１３２に送信させて、そのようなダイナミックレンジに従ってそこからサウンドを出力させることができる。
図１０Ａ～図１０Ｄを参照すると、ディスプレイシステム１００は、オーディオヘッドセット１３０に関連付けられた視覚的インジケータ１０６０を表示するように構成されてもよい。例えば、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０に結合される前に、ヘッドマウントディスプレイユニット１１０は、オーディオヘッドセット１３０に空間的に近接していてもよい、アニメーション、アイコン、又は他のインジケータなどの視覚的インジケータ１０６０を含む視覚コンテンツを提供することができる。視覚的インジケータ１０６０は、オーディオヘッドセット１３０のサウンド出力能力を示唆するか、若しくは別の方法で示すことができ、及び／又はその使用のための命令を提供してもよい。ディスプレイシステム１００及びその構成要素（例えば、ヘッドマウントディスプレイユニット１１０及びオーディオヘッドセット１３０）に関連して説明されているが、図１０Ａ～図１０Ｄに関して説明される概念及び方法は、ディスプレイシステム２００、３００、４００に適用可能である。
例えば、図１０Ａでは、ユーザは、ヘッドマウントディスプレイユニット１１０のディスプレイスクリーン１１４を見ることができ、視野内のオーディオヘッドセット１３０を（例えば、上述のようなビデオ又は光学パススルーを介して）複合現実エクスペリエンス内の現実オブジェクト、又は仮想現実エクスペリエンスにおける仮想オブジェクトとして見ることができ、ここでオーディオヘッドセット１３０は、レンダリングされたグラフィックによって描かれる。例示目的のために、オーディオヘッドセット１３０は、現実環境のテーブル上に配置されている。図１０Ｂに示すように、ディスプレイスクリーン１１４はまた、例えば、オーディオヘッドセット１３０を取り囲む及び／又は重ね合わせるなど、それに近接して描かれることによって、オーディオヘッドセット１３０に視覚的に関連付けられ得る視覚的インジケータ１０６０を表示することができる。
視覚的インジケータ１０６０は、オーディオヘッドセット１３０のオーディオ能力及び／若しくは使用を示唆するか、又は他の方法で通信する。一実施例では、視覚的インジケータは、（図示されるような）音波、従来のヘッドホンの描写、又はオーディオヘッドセット１３０のオーディオ能力若しくは使用を連想させる他のアイコンなどの、オーディオ関連アイコンである。その代わりに又は加えて、視覚的インジケータ１０６０は、オーディオヘッドセット１３０から発せられている音波などのアニメーションであってもよい。視覚的インジケータ１０６０（例えば、音波のアニメーション）の動き及び／又は強度は、例えば、サウンドが出力されていることに応じて外観を変更することによって、それに関連するサウンドに相関させることができる。例えば、視覚的インジケータ１０６０は、サウンド又は音楽のビートに従って（例えば、サウンドのより速い又は遅いビートにそれぞれ従って、より速く又は遅く）、又は音波イベントの強度に従って（例えば、爆発などの大きなサウンド及び／若しくは強いサウンドを生成すると予想される現実又は仮想イベントと一致して、サイズが大きくなる及び／又はより速く脈動する）、視覚的に脈動してもよい。
視覚的インジケータ１０６０は、オーディオヘッドセット１３０及び／又は取り外し可能なスピーカユニット１３２に個別に対して、空間的に近接して（例えば、ごく近接して、重なり合って、及び／又はその周囲に）配置されてもよい。オーディオヘッドセット１３０の位置は、例えば、ヘッドマウントディスプレイユニット１１０のセンサ（例えば、オーディオヘッドセット１３０のビデオ認識用のカメラ１１６、若しくは動きセンサ１２０）、及び／又は取り外し可能なスピーカユニット１３２の検知電子機器１３８ｄ（例えば、カメラ、動きセンサなど）を使用することによって、上述の方法で判定することができる。
視覚的インジケータ１０６０又はその変形例は、例えば、オーディオヘッドセット１３０を使用する方法を示す１つ以上の図を表示して、オーディオヘッドセット１３０を使用する方法を示唆するか、又は別の方法で通信することができる。図１０Ｃを参照すると、例えば、取り外し可能なスピーカユニット１３２がユーザの視野内にないとき、視覚的インジケータ１０７０は、取り外し可能なスピーカユニット１３２をヘッドマウントディスプレイユニット１１０上の結合位置に移動させる際にユーザを案内することができる。視覚的インジケータ１０７０は、取り外し可能なスピーカユニット１３２を表すイラスト１０７０ａと、結合位置を表す別のイラスト１０７０ｂとを含む。イラスト１０７０ａ、１０７０ｂは、取り外し可能なスピーカユニット１３２とヘッドマウントディスプレイユニット１１０上の結合位置との間の物理的空間配置を表す互いに対する空間的関係で表示されてもよく、それによって、取り外し可能なスピーカユニット１３２を結合するために必要とされる移動をユーザに通信する。例えば、図示するように、イラスト１０７０ａ（すなわち、取り外し可能なスピーカユニット１３２を表す）は、イラスト１０７０ｂ（すなわち、ヘッドマウントディスプレイユニット１１０上の結合位置を表す）の下方向かつ右方向に配置され、それによって、右側の取り外し可能なスピーカユニット１３２が結合位置の前方かつより下方にあることを表すことができる。視覚的表示１０７０は、代わりに又は加えて、ヘッドマウントディスプレイユニット１１０に結合されるために取り外し可能なスピーカユニット１３２を移動させる場所をユーザに指示する、図像（例えば、矢印）、テキスト（例えば、書かれたテキスト）、及び／又は（例えば、イラスト１０７０ｂに向かうイラスト１０７０ａの動きを描く）アニメーションを含んでもよい。
図１０Ｄを参照すると、ディスプレイシステムで視覚コンテンツを提供するための、特に、オーディオ出力デバイスに関連する視覚的インジケータを提供するための方法１０００。ディスプレイシステムは、例えば、ディスプレイシステム１００、２００、３００、４００のうちの１つであってもよい。方法１０００は、例えば、コントローラ１５０、並びにヘッドマウントディスプレイユニット１１０及び取り外し可能なスピーカユニット１３２の様々なセンサを用いて実行されてもよい。簡略化のために、方法１０００は、ディスプレイシステム１００に関連して説明されているが、ディスプレイシステム２００、３００、４００に適用可能であることを理解されたい。加えて、以下の取り外し可能なスピーカユニット１３２に関して一般に説明されているが、方法１０００は、取り外し可能なスピーカユニット１３２、オーディオヘッドセット１３０、又は外部スピーカなどの別のオーディオ出力デバイスのそれぞれに適用可能であることを理解されたい。
第１の動作１０１０では、オーディオ出力デバイス（例えば、オーディオヘッドセット１３０、取り外し可能なスピーカユニット１３２、又は他のオーディオ出力デバイス）の位置が判定される。オーディオ出力デバイスの位置は、ヘッドマウントディスプレイユニット１１０に向かう動き、及び又はそれらの間の近接性の変化を検出することなどによって、（例えば、取り外し可能なスピーカユニット１３２がヘッドマウントディスプレイユニット１１０に結合されていることとは無関係に電力供給される場合）カメラ１１６、又は取り外し可能なスピーカユニット１３２の検知電子機器１３８ｄから受信したビデオを処理することなどによって、例えば、ヘッドマウントディスプレイユニット１１０のセンサを使用して、コントローラ１５０によって判定されてもよい。
第２の動作１０２０では、オーディオ出力デバイスがヘッドマウントディスプレイユニットの視野内にある間、視覚的インジケータ１０６０は、オーディオ出力デバイスに空間的に近接して表示される。例えば、コントローラ１５０は、第１の動作１０１０で判定された位置に従って、ディスプレイスクリーン１１４で視覚的インジケータ１０６０を表示するために、ヘッドマウントディスプレイユニット１１０に表示信号を送信してもよい。視覚的インジケータ１０６０は、上述したように、オーディオ出力デバイスのオーディオ特性（例えば、ヘッドホンなどのオーディオデバイスの音波若しくはタイプに似たアイコン又はアニメーションを示す）、及び／又はオーディオ出力デバイスを使用するための（例えば、取り外し可能なスピーカユニット１３２をヘッドマウントディスプレイユニット１１０に結合するための）指示を、ユーザに視覚的に通信することができる。ヘッドマウントディスプレイユニット１１０の視野は、ユーザが所与の時間に見ることができる現実環境の一部分である。
第３の動作１０３０では、オーディオ出力デバイスがディスプレイスクリーン１１４の視界の外側にあるとき、視覚的インジケータ１０７０は、ヘッドマウントディスプレイユニットへの（例えば、取り外し可能なスピーカユニット１３２の結合位置への）オーディオ出力デバイスの物理的近接性を示すように表示される。例えば、コントローラ１５０は、第１の動作１０１０で判定された位置に従って、ディスプレイスクリーン１１４で視覚的インジケータ１０７０を表示するために、ヘッドマウントディスプレイユニット１１０に表示信号を送信してもよい。上述のように、視覚的インジケータ１０７０は、取り外し可能なスピーカユニット１３２を表すイラスト１０７０ａと、ヘッドマウントディスプレイユニット１１０上の結合位置に対する取り外し可能なスピーカユニット１３２の物理的空間的関係（例えば、物理的近接性）を表す、それに対する空間的関係における結合位置を表すイラスト１０７０ｂと、を含んでもよい。第２の動作１０２０及び第３の動作１０３０の一方、他方、又は両方が実行されてもよいことに留意されたい。
第２の動作１０２０（すなわち、オーディオ出力デバイスが視野内にあるとき）、及び／又は第３の動作１０３０（すなわち、オーディオ出力デバイスが視野外にあるとき）と同時に生じ得る、第４の動作１０４０では、仮想聴覚コンテンツは、ＨＭＤスピーカ１１８によって出力されてもよく、それによって、オーディオ出力デバイスから発せられているサウンドを空間的にシミュレートすることができる（例えば、オーディオ出力デバイスの左右の向き及び／又は距離をそれぞれ表すために、左から右へ空間的にバランスされており、及び／又は音量が変化している）。仮想聴覚コンテンツは、視覚的インジケータ１０６０又は視覚的インジケータ１０７０に対応してもよく、例えば、その表示と時間的に一致してもよい。
方法１０００は、視覚的インジケータ１０６０、１０７０の両方を提供するものとして説明されているが、方法１０００は代わりに、視覚的インジケータ１０６０、１０７０のうちの１つのみを提供するための動作を含んでもよい。
上述したように、方法１０００は、オーディオヘッドセット１３０以外のオーディオ出力デバイス、又はディスプレイシステム１００に関連付けられた取り外し可能なスピーカユニット１３２を用いて使用されてもよい。例えば、別のオーディオ出力デバイスは、ヘッドマウントディスプレイユニットに物理的に結合可能ではない外部スピーカであってもよい。
更に、方法１０００は、上述の方法５００、６００、７００と併せて使用されてもよい。例えば、方法５００、６００、７００、８００、９００を用いて説明したように、視覚的インジケータ１０６０、１０７０は、ＨＭＤスピーカ１１８及び／又は取り外し可能なスピーカユニット１３２からのサウンド出力と同時に表示されてもよい。
図１１を参照すると、コントローラ１５０は、図示及び記載されたハードウェア構成、又は他の好適な構成を有してもよい。コントローラ１５０は、プロセッサ１１５１、メモリ１１５２、記憶装置１１５３、通信インタフェース１１５４、及びその間の通信のためにそのような構成要素又はデバイスを接続するバス１１５５を含んでもよい。プロセッサ１１５１は、コンピュータプログラム命令を実行し、そのような命令によって記述された動作を実行するように動作可能である。一例として、プロセッサ１１５１は、中央処理ユニット、又は他の従来の処理デバイスであってもよい。メモリ１１５２は、揮発性高速短期情報記憶デバイス（例えば、ランダムアクセスメモリモジュール）であってもよい。記憶装置１１５３は、不揮発性情報記憶装置（例えば、ハードドライブ）であってもよい。通信インタフェース１１５４は、例えば、ヘッドマウントディスプレイユニット１１０及び／又はオーディオヘッドセット１３０への、及び／又は、そこからの信号を（例えば、有線で又は無線で）送信及び／又は受信するように構成されている。
物理的環境とは、人々が電子システムの助けなしに、感知及び／又は相互作用することができる物理的世界を指す。物理的な公園などの物理的環境には、物理的な木々、物理的な建物、及び物理的な人々などの物理的物品が挙げられる。人々は、視覚、触覚、聴覚、味覚、及び臭覚などを介して、物理的環境を直接感知し、及び／又はそれと相互作用することができる。
対照的に、コンピュータ生成現実（computer-generated reality、ＣＧＲ）環境は、人々が電子システムを介して感知及び／又は相互作用する全体的又は部分的にシミュレーションされた環境を指す。ＣＧＲでは、人の身体運動のサブセット又はその表現が追跡され、それに応答して、ＣＧＲ環境内でシミュレートされた１つ以上の仮想オブジェクトの１つ以上の特性が、少なくとも１つの物理学の法則でふるまうように調整される。例えば、ＣＧＲシステムは、人の頭部の回転を検出し、それに応答して、そのようなビュー及び音が物理的環境においてどのように変化し得るかと同様の方法で、人に提示されるグラフィックコンテンツ及び音場を調整することができる。状況によっては（例えば、アクセス性の理由から）、ＣＧＲ環境における仮想オブジェクト（単数又は複数）の特性（単数又は複数）に対する調整は、身体運動の表現（例えば、音声コマンド）に応じて行われてもよい。
人は、視覚、聴覚、触覚、味覚及び嗅覚を含むこれらの感覚のうちのいずれか１つを使用して、ＣＧＲオブジェクトを感知し、かつ／又はＣＧＲオブジェクトと相互作用してもよい。例えば、人は、３Ｄ空間において点音源の知覚を提供する、３Ｄ又は空間的広がりを有するオーディオ環境を作り出すオーディオオブジェクトを感知し、かつ／又はそれと相互作用することができる。別の例では、オーディオオブジェクトは、コンピュータ生成オーディオを含め、又は含めずに、物理的環境から周囲音を選択的に組み込むオーディオ透過性を可能にすることができる。いくつかのＣＧＲ環境では、人は、オーディオオブジェクトのみを感知し、及び／又はそれと相互作用することができる。
ＣＧＲの例としては、仮想現実及び複合現実が挙げられる。
仮想現実（virtual reality、ＶＲ）環境とは、１つ以上の感覚について、全面的にコンピュータ生成感覚入力に基づくように設計されたシミュレーション環境を指す。ＶＲ環境は、人が感知及び／又は相互作用することができる複数の仮想オブジェクトを含む。例えば、木、建物、及び人々を表すアバターのコンピュータ生成画像は、仮想オブジェクトの例である。人は、コンピュータ生成環境内に人が存在することのシミュレーションを通じて、かつ／又はコンピュータ生成環境内での人の身体運動のサブセットのシミュレーションを通じて、ＶＲ環境における仮想オブジェクトを感知し、かつ／又はそれと相互作用することができる。
コンピュータ生成感覚入力に全面的に基づくように設計されたＶＲ環境とは対照的に、複合現実（mixed reality、ＭＲ）環境は、コンピュータ生成感覚入力（例えば、仮想オブジェクト）を含むことに加えて、物理的環境からの感覚入力又はその表現を組み込むように設計されたシミュレーション環境を指す。仮想の連続体上では、複合現実環境は、一方の端部における完全な物理的環境と、他方の端部における仮想現実環境との間であるがこれらを含まない、任意の場所である。
ＭＲ環境によっては、コンピュータ生成感覚入力は、物理的環境からの感覚入力の変更に応答し得る。また、ＭＲ環境を提示するためのいくつかの電子システムは、仮想オブジェクトが現実のオブジェクト（すなわち、物理的環境からの物理的物品又はその表現）と相互作用することを可能にするために、物理的環境に対する所在場所及び／又は向きを追跡することができる。例えば、システムは、仮想の木が物理的な地面に対して静止して見えるように、動きを考慮することができる。
複合現実の例としては、拡張現実及び拡張仮想が挙げられる。
拡張現実（augmented reality、ＡＲ）環境は、１つ以上の仮想オブジェクトが物理的環境上又はその表現上に重ねられたシミュレーション環境を指す。例えば、ＡＲ環境を提示するための電子システムは、人が物理的環境を直接見ることができる透明又は半透明のディスプレイを有してもよい。システムは、透明又は半透明のディスプレイ上に仮想オブジェクトを提示するように構成されていてもよく、それによって、人はシステムを使用して、物理的環境上に重ねられた仮想オブジェクトを知覚する。あるいは、システムは、不透明ディスプレイと、物理的環境の表現である、物理的環境の画像又はビデオをキャプチャする１つ以上の撮像センサとを有してもよい。システムは、画像又はビデオを仮想オブジェクトと合成し、その合成物を不透明なディスプレイ上に提示する。人は、システムを使用して、物理的環境の画像又はビデオによって物理的環境を間接的に見て、物理的環境上に重ねられた仮想オブジェクトを知覚する。本明細書で使用するとき、不透明ディスプレイ上に示される物理的環境のビデオは、「パススルービデオ」と呼ばれ、システムが、１つ以上の撮像センサ（単数又は複数）を使用して、物理的環境の画像をキャプチャし、不透明ディスプレイ上にＡＲ環境を提示する際にそれらの画像を使用することを意味する。更に代替的に、システムは、仮想オブジェクトを、物理的環境に、例えば、ホログラムとして又は物理的表面上に投影するプロジェクションシステムを有してもよく、それによって、人は、システムを使用して、物理的環境上に重ねられた仮想オブジェクトを知覚する。
拡張現実環境はまた、物理的環境の表現がコンピュータ生成感覚情報によって変換されるシミュレーション環境を指す。例えば、パススルービデオを提供する際に、システムは、１つ以上のセンサ画像を変換して、撮像センサによってキャプチャされた遠近法とは異なる選択された遠近法（例えば、視点）による面付けを行うことができる。別の例として、物理的環境の表現は、その一部分をグラフィカルに変更（例えば、拡大）することによって変換されてもよく、それにより、変更された部分を元のキャプチャ画像を表すが非写実的であるバージョンとすることができる。更なる例として、物理的環境の表現は、その一部分をグラフィカルに除去又は曖昧化することによって変換されてもよい。
拡張仮想（augmented virtuality、ＡＶ）環境は、物理的環境からの１つ以上の感覚入力を仮想環境又はコンピュータ生成環境が組み込むシミュレーション環境を指す。感覚入力は、物理的環境の１つ以上の特性の表現であり得る。例えば、ＡＶパークには、仮想の木及び仮想の建物があり得るが、顔がある人々は、物理的な人々が撮られた画像から写実的に再現される。別の例として、仮想オブジェクトは、１つ以上の撮像センサによって撮像された物理的物品の形状又は色を採用してもよい。更なる例として、仮想オブジェクトは、物理的環境における太陽の位置と一致する影を採用することができる。
多種多様の電子システムが存在することによって、人が様々なＣＧＲ環境を感知し、かつ／又はＣＧＲ環境と相互作用できるようになる。例としては、ヘッドマウントシステム、プロジェクションベースシステム、ヘッドアップディスプレイ（heads-up display、ＨＵＤ）、統合表示機能を有する車両ウィンドシールド、統合表示機能を有する窓、（例えば、コンタクトレンズと同様に）人の目の上に配置されるように設計されたレンズとして形成されたディスプレイ、ヘッドホン／イヤフォン、スピーカアレイ、入力システム（例えば、触覚フィードバックを有する又は有さない、ウェアラブル又はハンドヘルドコントローラ）、スマートフォン、タブレット、及びデスクトップ／ラップトップコンピュータ、が挙げられる。ヘッドマウントシステムは、１つ以上のスピーカ（単数又は複数）及び一体型不透明ディスプレイを有してもよい。あるいは、ヘッドマウントシステムは、外部の不透明ディスプレイ（例えば、スマートフォン）を受け入れるように構成されていてもよい。ヘッドマウントシステムは、物理的環境の画像若しくはビデオをキャプチャするための１つ以上の撮像センサ、及び／又は物理的環境の音声をキャプチャするための１つ以上のマイクロフォンを組み込んでいてもよい。不透明ディスプレイではなく、ヘッドマウントシステムは、透明又は半透明のディスプレイを有してもよい。透明又は半透明のディスプレイは、画像を表す光が人の目に向けられる媒体を有してもよい。ディスプレイは、デジタル光投影、ＯＬＥＤ、ＬＥＤ、ｕＬＥＤ、液晶オンシリコン、レーザスキャン光源、又はこれらの技術の任意の組み合わせを利用することができる。媒体は、光導波路、ホログラム媒体、光結合器、光反射器、又はこれらの任意の組み合わせであってもよい。一実施形態では、透明又は半透明のディスプレイは、選択的に不透明になるように構成されていてもよい。プロジェクションベースシステムは、グラフィック画像を人間の網膜上に投影する網膜投影技術を採用することができる。プロジェクションシステムはまた、例えば、ホログラムとして、又は物理的表面上に、仮想オブジェクトを物理的環境内に投影するように構成されていてもよい。
上述のように、本技術の一態様は、様々なソースから入手可能なデータを収集及び使用して、視覚コンテンツ及び出力オーディオコンテンツを表示することであり、これには、ユーザの頭部又は目の動き又は状態に基づいてコンテンツを変化させることを含み得る。本開示は、いくつかの例において、この収集されたデータは、特定の人を一意に特定する個人情報データ、又は特定の人に連絡する若しくはその所在を突き止めるために使用できる個人情報データを含み得ることを想到している。そのような個人情報データとしては、人口統計データ、ロケーションベースのデータ、電話番号、電子メールアドレス、ツイッターＩＤ、自宅の住所、ユーザの健康又はフィットネスのレベル（例えば、バイタルサイン測定値、服薬情報、運動情報）に関するデータ若しくは記録、誕生日、又は任意のその他の識別情報若しくは個人情報を挙げることができる。
本開示は、本技術におけるそのような個人情報データの使用がユーザの利益になる使用であり得る点を認識するものである。例えば、個人情報データを使用してコンテンツを出力することができる。したがって、そのような個人情報データの使用により、ユーザに、強化されたユーザエクスペリエンスを可能にする。更には、ユーザに利益をもたらす、個人情報データに関する他の使用もまた、本開示によって想到される。例えば、健康データ及びフィットネスデータは、ユーザの全般的なウェルネスについての洞察を提供するために使用することができ、あるいは、ウェルネスの目標を追求するための技術を使用している個人への、積極的なフィードバックとして使用することもできる。
本開示は、そのような個人情報データの収集、分析、開示、伝送、記憶、又は他の使用に関与するエンティティが、確固たるプライバシーポリシー及び／又はプライバシー慣行を遵守するものとなることを想到する。具体的には、そのようなエンティティは、個人情報データを秘密として厳重に保守するための、業界又は政府の要件を満たしているか又は上回るものとして一般に認識されている、プライバシーのポリシー及び慣行を実施し、一貫して使用するべきである。そのようなポリシーは、ユーザによって容易にアクセス可能とするべきであり、データの収集及び／又は使用が変化するにつれて更新されるべきである。ユーザからの個人情報は、そのエンティティの合法的かつ正当な使用のために収集されるべきであり、それらの合法的使用を除いては、共有又は販売されるべきではない。更には、そのような収集／共有は、ユーザに告知して同意を得た後に実施されるべきである。更には、そのようなエンティティは、そのような個人情報データへのアクセスを保護して安全化し、その個人情報データへのアクセスを有する他者が、それらのプライバシーポリシー及び手順を遵守することを保証するための、あらゆる必要な措置を講じることを考慮するべきである。更には、そのようなエンティティは、広く受け入れられているプライバシーのポリシー及び慣行に対する自身の遵守を証明するために、第三者による評価を自らが受けることができる。更には、ポリシー及び慣行は、収集及び／又はアクセスされる具体的な個人情報データのタイプに適合されるべきであり、また、管轄権固有の考慮事項を含めた、適用可能な法令及び規格に適合されるべきである。例えば、アメリカ合衆国では、特定の健康データの収集又はアクセスは、医療保険の相互運用性と説明責任に関する法律（Health Insurance Portability and Accountability Act、ＨＩＰＡＡ）などの、連邦法及び／又は州法によって管理することができ、その一方で、他国における健康データは、他の規制及びポリシーの対象となり得るものであり、それに従って対処されるべきである。それゆえ、各国の異なる個人データのタイプに関して、異なるプライバシー慣行が保たれるべきである。
前述のことがらにも関わらず、本開示はまた、個人情報データの使用又は個人情報データへのアクセスを、ユーザが選択的に阻止する実施形態も想到する。すなわち、本開示は、そのような個人情報データへのアクセスを防止又は阻止するように、ハードウェア要素及び／又はソフトウェア要素を提供することができると想到する。例えば、ユーザの頭部又は目の状態や動きを観察する場合、本技術は、ユーザに、サービスの登録中又はその後いつでも、個人情報データ収集への参加の「オプトイン」又は「オプトアウト」の選択を可能にするように構成されてもよい。別の実施例では、ユーザは、ユーザの動き若しくは状態データを提供しないように、又はユーザ観測データが観察若しくは維持される時間の長さを制限するように選択することができる。「オプトイン」及び「オプトアウト」の選択肢を提供することに加えて、本開示は、個人情報のアクセス又は使用に関する通知を提供することを想到する。例えば、ユーザの個人情報データにアクセスすることとなるアプリのダウンロード時にユーザに通知され、その後、個人情報データがアプリによってアクセスされる直前に再びユーザに注意してもよい。
更には、本開示の意図は、個人情報データを、非意図的若しくは無許可アクセス又は使用の危険性を最小限に抑える方法で、管理及び処理するべきであるという点である。データの収集を制限し、データがもはや必要とされなくなった時点で削除することによって、危険性を最小限に抑えることができる。更には、適用可能な場合、特定の健康関連アプリケーションにおいて、ユーザのプライバシーを保護するために、データの非特定化を使用することができる。非特定化は、適切な場合には、特定の識別子（例えば、生年月日など）を除去すること、記憶されたデータの量又は特異性を制御すること（例えば、位置データを住所レベルよりも都市レベルで収集すること）、データがどのように記憶されるかを制御すること（例えば、データをユーザ全体にわたって情報集約すること）及び／又は他の方法によって、容易にすることができる。
それゆえ、本開示は、１つ以上の様々な開示された実施形態を実施するための、個人情報データの使用を広範に網羅するものではあるが、本開示はまた、そのような個人情報データにアクセスすることを必要とせずに、それらの様々な実施形態を実施することもまた可能であることを想到している。すなわち、本技術の様々な実施形態は、そのような個人情報データの全て又は一部分が欠如することにより、実施不可能となるものではない。例えば、コンテンツは、ユーザに関連付けられたデバイスにより要求されているコンテンツ、若しくは公的に利用可能な情報などの、非個人情報データ又は最低最小限量の個人情報に基づき嗜好を推測することによって、ユーザに提供することができる。

Claims (15)

  1. 視覚コンテンツをユーザに出力するヘッドマウントディスプレイユニットと、
    聴覚コンテンツを前記ユーザに提供するために、前記ヘッドマウントディスプレイユニットに取り外し可能に結合することができる、取り外し可能なスピーカユニットと、を備え、
    前記視覚コンテンツ又は前記聴覚コンテンツのうちの少なくとも１つが、前記ヘッドマウントディスプレイユニットに対する前記取り外し可能なスピーカユニットの位置に従って変更される、
    ディスプレイシステム。
  2. 前記ヘッドマウントディスプレイユニットが内蔵スピーカを含み、前記聴覚コンテンツの出力が、前記位置に従って前記取り外し可能なスピーカユニット又は前記内蔵スピーカのうちの１つ以上から出力される、請求項１に記載のディスプレイシステム。
  3. 前記内蔵スピーカの音量が、前記取り外し可能なスピーカユニットの前記位置に従って変更される、請求項２に記載のディスプレイシステム。
  4. 前記内蔵スピーカの前記音量が、前記取り外し可能なスピーカユニットが前記ヘッドマウントディスプレイユニットに結合されていないときに正であり、前記取り外し可能なスピーカユニットが前記ヘッドマウントディスプレイユニットに結合されているときにゼロであり、前記取り外し可能なスピーカユニットの別の音量が、前記取り外し可能なスピーカユニットが前記ヘッドマウントディスプレイユニットに結合されているときに正である、請求項３に記載のディスプレイシステム。
  5. 前記取り外し可能なスピーカユニットが前記ヘッドマウントディスプレイユニットに結合されていないときには、前記取り外し可能なスピーカユニットの前記他の音量が正である、請求項４に記載のディスプレイシステム。
  6. 前記取り外し可能なスピーカユニットによって出力される前記聴覚コンテンツのオーディオ信号処理が、前記取り外し可能なスピーカユニットが前記ヘッドマウントディスプレイユニット上の結合位置に向かって移動されるにつれて変化する、請求項２から５のいずれか一項に記載のディスプレイシステム。
  7. 前記オーディオ信号処理が、前記取り外し可能なスピーカユニットが前記結合位置に向かって移動されるにつれて、前記音量を増大させることを含む、請求項６に記載のディスプレイシステム。
  8. 前記オーディオ信号処理が、前記取り外し可能なスピーカユニットが前記結合位置に向かって移動されるにつれて、低周波数ゲインを増大させることを含むイコライゼーションを含む、請求項６から７のいずれか一項に記載のディスプレイシステム。
  9. 前記オーディオ信号処理が、前記取り外し可能なスピーカユニットが前記結合位置に向かって移動されるにつれて、前記ダイナミックレンジを増大させることを含む、請求項６から８のいずれか一項に記載のディスプレイシステム。
  10. 前記取り外し可能なスピーカユニットが前記ヘッドマウントディスプレイユニットの視野内にあるときに、前記視覚コンテンツが、前記取り外し可能なスピーカユニットに空間的に近接した視覚的インジケータを含む、請求項１から９のいずれか一項に記載のディスプレイシステム。
  11. 前記視覚的インジケータが、前記取り外し可能なスピーカユニットのサウンド出力能力を前記ユーザに示す、請求項１０に記載のディスプレイシステム。
  12. 前記取り外し可能なスピーカユニットが前記ヘッドマウントディスプレイユニットの視野外にあるときに、前記視覚コンテンツが、前記聴覚コンテンツを前記ユーザに提供するために前記取り外し可能なスピーカユニットが前記ヘッドマウントディスプレイユニットに取り外し可能に結合することができる結合位置への、前記取り外し可能なスピーカユニットの物理的近接性の視覚的インジケータを含む、請求項１から１１のいずれか一項に記載のディスプレイシステム。
  13. 前記第１及び第２の取り外し可能なスピーカユニットが、前記ヘッドマウントディスプレイユニットに結合されたときに、前記ヘッドマウントディスプレイユニットからオーディオ信号及び電力を受信する、請求項１から１２のいずれか一項に記載のディスプレイシステム。
  14. 前記第１及び第２の取り外し可能なスピーカユニットが、前記ヘッドマウントディスプレイユニットから取り外されたときに、電力供給され、オーディオ信号を受信する、請求項１から１３のいずれか一項に記載のディスプレイシステム。
  15. 前記第１及び第２の取り外し可能なスピーカユニットが、磁気アタッチメントを用いて前記ヘッドマウントディスプレイユニットに取り外し可能に結合することができる、請求項１から１４のいずれか一項に記載のディスプレイシステム。
JP2023079228A 2018-06-14 2023-05-12 オーディオ出力デバイスを有するディスプレイシステム Active JP7528308B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201862684826P 2018-06-14 2018-06-14
US62/684,826 2018-06-14
JP2020567904A JP2021526757A (ja) 2018-06-14 2018-09-27 オーディオ出力デバイスを有するディスプレイシステム
PCT/US2018/053142 WO2019240832A1 (en) 2018-06-14 2018-09-27 Display system having an audio output device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2020567904A Division JP2021526757A (ja) 2018-06-14 2018-09-27 オーディオ出力デバイスを有するディスプレイシステム

Publications (2)

Publication Number Publication Date
JP2023109858A true JP2023109858A (ja) 2023-08-08
JP7528308B2 JP7528308B2 (ja) 2024-08-05

Family

ID=64017441

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020567904A Ceased JP2021526757A (ja) 2018-06-14 2018-09-27 オーディオ出力デバイスを有するディスプレイシステム
JP2023079228A Active JP7528308B2 (ja) 2018-06-14 2023-05-12 オーディオ出力デバイスを有するディスプレイシステム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2020567904A Ceased JP2021526757A (ja) 2018-06-14 2018-09-27 オーディオ出力デバイスを有するディスプレイシステム

Country Status (5)

Country Link
US (3) US10848846B2 (ja)
EP (1) EP3807743A1 (ja)
JP (2) JP2021526757A (ja)
CN (2) CN209201256U (ja)
WO (1) WO2019240832A1 (ja)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10816812B2 (en) * 2018-09-13 2020-10-27 Apple Inc. Display devices with multimodal audio
KR102704825B1 (ko) * 2018-10-01 2024-09-09 삼성디스플레이 주식회사 표시 장치
US10846898B2 (en) * 2019-03-28 2020-11-24 Nanning Fugui Precision Industrial Co., Ltd. Method and device for setting a multi-user virtual reality chat environment
US11934579B2 (en) * 2019-05-30 2024-03-19 Hewlett-Packard Development Company, L.P. Haptic device activation for virtual events that exceed view boundary
US20210081047A1 (en) * 2019-09-13 2021-03-18 Apple Inc. Head-Mounted Display With Haptic Output
JP7556360B2 (ja) * 2019-12-04 2024-09-26 株式会社ソシオネクスト 表示装置及び音響装置
US11190864B1 (en) 2020-03-18 2021-11-30 Apple Inc. Speaker unit for head-mountable device
US11810714B2 (en) * 2020-03-25 2023-11-07 Apple Inc. Headband for head-mounted device
US11830119B1 (en) 2020-05-29 2023-11-28 Apple Inc. Modifying an environment based on sound
CN111736353B (zh) * 2020-08-25 2020-12-04 歌尔光学科技有限公司 一种头戴式设备
WO2022072747A1 (en) * 2020-09-30 2022-04-07 Magic Leap, Inc. Dual mode ported speaker
CN112291689B (zh) * 2020-11-27 2022-07-22 歌尔光学科技有限公司 声音播放方法、可穿戴设备和可读存储介质
US11722813B2 (en) * 2021-02-17 2023-08-08 Picotera Electronics Inc. Situational awareness, communication, and safety for hearing protection devices
JP2022153776A (ja) * 2021-03-30 2022-10-13 セイコーエプソン株式会社 装着型画像表示装置
CN113301475B (zh) * 2021-07-27 2021-09-28 深圳市听科技音频技术有限公司 一种密封防尘耳机
US20230073369A1 (en) * 2021-09-03 2023-03-09 Icon Ai Inc. Smart sound mirror device integrated with ai assistant platform service and equipped with display
US11856378B2 (en) * 2021-11-26 2023-12-26 Htc Corporation System with sound adjustment capability, method of adjusting sound and non-transitory computer readable storage medium
US12114139B2 (en) * 2022-06-17 2024-10-08 Motorola Mobility Llc Wearable audio device with centralized stereo image and companion device dynamic speaker control
CN118276812A (zh) * 2022-09-02 2024-07-02 荣耀终端有限公司 一种界面交互方法及电子设备
CN116009694A (zh) * 2022-12-26 2023-04-25 维沃移动通信有限公司 可穿戴设备及其控制方法

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5633993A (en) 1993-02-10 1997-05-27 The Walt Disney Company Method and apparatus for providing a virtual world sound system
US20020186180A1 (en) * 2000-11-30 2002-12-12 William Duda Hands free solar powered cap/visor integrated wireless multi-media apparatus
US7155025B1 (en) * 2002-08-30 2006-12-26 Weffer Sergio W Surround sound headphone system
US20050058317A1 (en) * 2003-09-15 2005-03-17 Montgomery Robert D. Headgear and electronic components in combination
JP2007266870A (ja) * 2006-03-28 2007-10-11 Nikon Corp ヘッドマウントディスプレイ装置
US8085966B2 (en) * 2007-01-10 2011-12-27 Allan Amsel Combined headphone set and portable speaker assembly
US8180090B2 (en) * 2007-05-11 2012-05-15 Sony Ericsson Mobile Communications Ab Headset with exchangeable speaker
US8259984B2 (en) * 2007-06-29 2012-09-04 Sony Ericsson Mobile Communications Ab Headset with on-ear detection
JP2011066549A (ja) * 2009-09-15 2011-03-31 Brother Industries Ltd ヘッドマウントディスプレイ
US20110214082A1 (en) 2010-02-28 2011-09-01 Osterhout Group, Inc. Projection triggering through an external marker in an augmented reality eyepiece
KR20130122516A (ko) * 2010-04-26 2013-11-07 캠브리지 메카트로닉스 리미티드 청취자의 위치를 추적하는 확성기
CN102149033A (zh) * 2010-10-28 2011-08-10 华为终端有限公司 耳机的处理方法和用户设备
US20130024018A1 (en) 2011-07-22 2013-01-24 Htc Corporation Multimedia control method and multimedia control system
US20140064536A1 (en) 2012-08-28 2014-03-06 Google Inc. Thin Film Bone-Conduction Transducer for a Wearable Computing System
KR101989893B1 (ko) 2012-10-29 2019-09-30 엘지전자 주식회사 헤드 마운트 디스플레이 및 이를 이용한 오디오 신호 출력 방법
US9542958B2 (en) * 2012-12-18 2017-01-10 Seiko Epson Corporation Display device, head-mount type display device, method of controlling display device, and method of controlling head-mount type display device
US9685001B2 (en) * 2013-03-15 2017-06-20 Blackberry Limited System and method for indicating a presence of supplemental information in augmented reality
US9143848B2 (en) 2013-07-15 2015-09-22 Google Inc. Isolation of audio transducer
US20150097759A1 (en) 2013-10-07 2015-04-09 Allan Thomas Evans Wearable apparatus for accessing media content in multiple operating modes and method of use thereof
US9547175B2 (en) 2014-03-18 2017-01-17 Google Inc. Adaptive piezoelectric array for bone conduction receiver in wearable computers
US10529359B2 (en) 2014-04-17 2020-01-07 Microsoft Technology Licensing, Llc Conversation detection
WO2015176037A1 (en) 2014-05-16 2015-11-19 T-Ink, Inc. Devices and techniques relating to a touch sensitive control device
WO2016001909A1 (en) 2014-07-03 2016-01-07 Imagine Mobile Augmented Reality Ltd Audiovisual surround augmented reality (asar)
KR101760013B1 (ko) 2014-08-13 2017-07-31 엘지전자 주식회사 전자 디바이스 및 그 제어방법
US9638921B2 (en) * 2015-06-11 2017-05-02 Oculus Vr, Llc Strap system for head-mounted displays
CN105049977A (zh) 2015-07-30 2015-11-11 努比亚技术有限公司 一种耳机音量自动调节方法及装置
CN205158279U (zh) 2015-11-30 2016-04-13 广东小天才科技有限公司 一种虚拟现实装置
WO2017196294A1 (en) 2016-05-09 2017-11-16 Oakley, Inc. Modular wearable electronic devices, systems, and methods
US20170347219A1 (en) * 2016-05-27 2017-11-30 VideoStitch Inc. Selective audio reproduction
JP2018152812A (ja) * 2017-03-15 2018-09-27 ソニー株式会社 ヘッドホン
CN107071648B (zh) 2017-06-19 2020-01-10 深圳市泰衡诺科技有限公司上海分公司 声音播放调节系统、装置及方法
JP6613429B2 (ja) * 2017-08-09 2019-12-04 イアフレド株式会社 映像音響再生装置

Also Published As

Publication number Publication date
US11805347B2 (en) 2023-10-31
WO2019240832A1 (en) 2019-12-19
EP3807743A1 (en) 2021-04-21
US20190387299A1 (en) 2019-12-19
JP7528308B2 (ja) 2024-08-05
US20240031716A1 (en) 2024-01-25
CN209201256U (zh) 2019-08-02
US10848846B2 (en) 2020-11-24
US20210076120A1 (en) 2021-03-11
JP2021526757A (ja) 2021-10-07
CN112262360A (zh) 2021-01-22

Similar Documents

Publication Publication Date Title
JP7528308B2 (ja) オーディオ出力デバイスを有するディスプレイシステム
CN211014859U (zh) 头戴式显示系统和用于头戴式显示系统的音频部件
JP7551639B2 (ja) 多数のヘッドセット間の音声空間化および強化
US10133358B1 (en) Fitting detection for a bone conduction transducer (BCT) using an inertial measurement unit (IMU) sensor
US10908428B2 (en) Multiple-device system with multiple power and data configurations
US11740316B2 (en) Head-mountable device with indicators
US20210081047A1 (en) Head-Mounted Display With Haptic Output
US8965012B1 (en) Smart sensing bone conduction transducer
US11810714B2 (en) Headband for head-mounted device
KR102549948B1 (ko) 디바이스 위치에 기초하여 오디오 필터를 결정하는 오디오 시스템 및 방법
CN110888234A (zh) 显示系统
US20230291244A1 (en) Wirelessly Chargeable Wearable Electronic Device and Wireless Charging Case
US12078812B2 (en) Head-mountable device for posture detection
US11190864B1 (en) Speaker unit for head-mountable device
JP7291784B2 (ja) ヘッドマウントデバイス用のモジュールシステム
US11709365B1 (en) Motor temperature sensor for head-mountable device
US20230228999A1 (en) Head-mountable device and connector
EP4312102A1 (en) Wear detection
TW202347875A (zh) 用於行動裝置的天線系統
WO2023244515A1 (en) Head-mountable device with guidance features

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230607

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230607

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240624

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240724

R150 Certificate of patent or registration of utility model

Ref document number: 7528308

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150