JP2015510283A - 着用可能な計算機システムへのサウンド状態の表示 - Google Patents

Abstract

（ｉ）サウンドの音源の方向、及び、（ii）サウンドの強度レベルを示す、１以上の表示を行う、例示的方法及びシステムを開示する。方法は、着用可能な計算機システムが検出したサウンドに対応するオーディオデータを受け取るステップを具備することができる。さらに、この方法は、このオーディオデータを分析し、（ｉ）このサウンドの音源のこの着用可能な計算機システムからの方向、及び、（ii）このサウンドの強度レベル、の両方を測定するステップを有することができる。さらに、この方法は、着用可能な計算機システムに、（ｉ）このサウンドの音源の方向、及び、（ii）このサウンドの強度レベル、を示す１以上の表示を着用可能な計算機システムに表示させるステップを有することができる。【選択図】図１

Description

本出願は、２０１１年１１月１４日に出願された米国特許出願番号１３／２９５，９５３、表題「着用可能な計算機システムへのサウンド状態の表示（Ｄｉｓｐｌａｙｉｎｇ Ｓｏｕｎｄ Ｉｎｄｉｃａｔｉｏｎ ｏｎ ａ Ｗｅａｒａｂｌｅ Ｃｏｍｐｕｔｉｎg Ｓｙｓｔｅｍ）」に基づく優先権を主張するものであり、この米国特許出願を参照として本出願にすべて組み込むものとする。

特に記載がない限り、この部分に記載された事項は、本明細書の請求項に対する先行技術ではなく、この部分に含めることにより先行技術となることを認めるものでもない。

パーソナルコンピュータ、ラップトップコンピュータ、タブレットコンピュータ、携帯電話、及び、数えきれない種々のインターネット接続可能な装置のような、計算装置が現在の生活の様々な局面でますます普及してきている。コンピュータが進歩するにつれて、コンピュータで生成された情報をユーザが知覚する現実の世界と融合させるような、迫真性を増大させる装置がもっと普及することが期待される。

１つの特徴において、例示的実施の方法は、（ｉ）着用可能な計算機システムが検出したサウンドに対応するオーディオデータを受け取るステップと、（ii）このオーディオデータを分析し、（ａ）このサウンドの音源のこの着用可能な計算機システムからの方向、及び、（ｂ）このサウンドの強度レベル、の両方を測定するステップと、（iii）この着用可能な計算機システムに、（ａ）このサウンドの音源の方向、及び、（ｂ）このサウンドの強度レベル、の１以上の状態を表示させるステップとを含有し、この着用可能な計算機システムは、この着用可能な計算機システムに所定の閾値レベルを超えた強度レベルを有する１以上の状態を表示させるための条件設定を行うことを特徴とする。

他の１つの特徴において、プロセッサーによる動作に応答して、プロセッサーを動作させる命令を保存した一時的ではないコンピュータ読み取り可能媒体が開示される。例示的実施の形態によれば、この命令には、（ｉ）着用可能な計算機システムが検出したサウンドに対応するオーディオデータを受け取る命令と、（ii）このオーディオデータを分析し、（ａ）このサウンドの音源のこの着用可能な計算機システムからの方向、及び、（ｂ）このサウンドの強度レベル、の両方を測定する命令と、（iii）この着用可能な計算機システムに、（ａ）このサウンドの音源の方向、及び、（ｂ）このサウンドの強度レベル、の１以上の状態を表示させる命令と、（iv）この着用可能な計算機システムに所定の閾値レベルを超えた強度レベルを有する１以上の状態を表示させるための条件を調整する命令と、が含まれる。

さらに他の１つの特徴において、着用可能な計算機システムが開示される。例示的な着用可能な計算機システムには、（ｉ）頭部装着ディスプレイであって、この頭部装着ディスプレイはコンピュータで生成された情報を表示し現実世界の環境を視覚的に認識させるよう構成されていることを特徴とする頭部装着ディスプレイと、（ii）コントローラであって、このコントローラは、着用可能な計算機システムが検出したサウンドに対応するオーディオデータを受け取り、（ａ）このサウンドの音源のこの着用可能な計算機システムからの方向、及び、（ｂ）このサウンドの強度レベル、の両方を測定するよう構成されていることを特徴とするコントローラと、（iii）ディスプレイシステムであって、このディスプレイシステムは、（ａ）このサウンドの音源の方向、及び、（ｂ）このサウンドの強度レベルを表示する１以上の状態を表示するよう構成されていることを特徴とするディスプレイシステムとが含まれ、このコントローラはさらに、この着用可能な計算機システムに所定の閾値レベルを超えた強度レベルを有する１以上の状態を表示させるための条件を定めるよう構成されていることを特徴とする。

他の特徴、利点、及び代案と共に、これらは、適切な添付図を参照し、以下の詳細な説明を読むことにより、当業者にとって明らかなものとなる。

例示的実施の形態による方法を図解した流れ図である。 例示的実施の形態による、例示的マイクロフォンの配列の概略図である。 例示的実施の形態による、例示的ディスプレイの概略図である。 例示的実施の形態による、図３ａのディスプレイに含まれることがある例示的矢印の大きさの概略図である。 例示的実施の形態による、他の例示的ディスプレイの概略図である。 例示的実施の形態による、例示的色コード化されたスケールの概略図である。 例示的実施の形態による、さらに他の例示的ディスプレイの概略図である。 例示的実施の形態による、例示的強度レベル計の概略図である。 データを受信し、伝送し、表示するための例示的システムの概略を示す。 図６に示したシステムのシステムを別方向から見たものを示す。 データを受信し、伝送し、表示するための例示的システムの概略を示す。 データを受信し、伝送し、表示するための例示的システムの概略を示す。 例示的コンピュータネットワークのインフラ基盤の概略図を示す。 例示的実施の形態による、例示的サウンド事象表示器の概略図である。 例示的実施の形態による、他の例示的サウンド事象表示器の概略図である。

以下の詳細な説明では、添付図面を参照して、開示するシステム及び方法の種々の特徴及び機能について説明する。図面において、特に記載がない限り、類似の記号は類似の構成要素を示す。図解したシステム及び方法についてここに記載したシステム及び方法の実施の形態は、限定することを意図するものではない。開示したシステム及び方法が種々の異なった構成で配置し及び組み合わせることができることは明らかであり、このような構成はすべてここで予期されるものである。
１． 概要
着用可能な計算機システムは、現実世界の環境を視覚的に知覚することを可能にし、現実世界の環境の知覚に関するコンピュータで生成された情報を表示するよう構成することができる。コンピュータで生成された情報はユーザが知覚する現実世界の環境に組み込むことができる。例えば、コンピュータ生成された情報は、ユーザが知覚する現実世界に、有用なコンピュータで生成された情報、又は、ユーザがその瞬間知覚又は経験するものに関する光景を補完することができる。

場合によっては、着用可能な計算機システムのユーザは、聞き取りが難しいことがある。例えば、難聴であったり耳が聞こえなかったり、ユーザに聴覚障害があるかもしれない。このように、ユーザが周囲環境のサウンドを聴取することが難しいことがある。従って、周囲環境のサウンドの表示をユーザに行うことは有益な場合がある。例えば、着用可能な計算機システムからのサウンド音源の方向、及び／又は、サウンドの強度を表示することは有益な場合がある。１例として、ユーザは歩道で道路を横断しようとして横断歩道にいて、接近中の車は、その横断歩道を通り過ぎることをユーザに警告するために、その車からユーザにクラクションを鳴らすことがある。このような場合、クラクションが来る方向（例えば、左から、又は、右から）及びその強さ（例えば、接近中の車がどれだけユーザの近くにいるかを示すために）をユーザに表示することは有益である。

ここに記載の方法及びシステムは周囲の現実世界の環境に存在するサウンドを表示することを容易にすることができる。例示的方法には、（ａ）着用可能な計算機システムにより検出されたサウンドに関するオーディオデータを受け取るステップと、（ｂ）（ｉ）このサウンドの音源のこの着用可能な計算機システムからの方向、及び、（ii）このサウンドの強度レベル、の両方を測定するためにオーディオデータを分析するステップと、（ｃ）この着用可能な計算機システムに（ｉ）このサウンドの音源の方向、及び、（ii）このサウンドの強度レベル、を表示する１以上の状態を表示させるステップと、を含めることができる。これらの１以上の状態を表示することにより、ユーザは有益に周囲環境のサウンドの状態を知ることができる。

例示的実施の形態によれば、この着用可能な計算機システムは、所定の閾値レベルを超える強度レベルの１以上の表示を行う条件を調整することができる。さらに、多くの形式のサウンド表示が可能である。１つの例として、表示は、（ｉ）このサウンドの音源のこの着用可能な計算機システムからの方向、及び、（ii）このサウンドの強度レベル、の両方を示す１つのグラフィックな表示（例えば、矢印）とすることができる。他の例として、この着用可能な計算機システムは、（ｉ）このサウンドの音源の方向を示す第１の表示（例えば、矢印）及び（ii）このサウンドの強度レベルを示す第２の表示（例えば、強度メーター）を表示することができる。
２． 例示的方法
例示的方法には、周囲環境のサウンドを示すための１以上のサウンド表示を行う着用可能な計算機システムが含まれる。図１は、例示的実施の形態による方法を図解した流れ図である。さらに、具体的には、例示的方法１００には、ブロック１０２に示すような、着用可能な計算機システムにより検出されたサウンドに対応するオーディオデータを受け取るステップが含まれる。この方法には、次に、ブロック１０４で示すように、（ｉ）このサウンドの音源のこの着用可能な計算機システムからの方向、及び、（ii）このサウンドの強度レベル、の両方を測定するためにオーディオデータを分析するステップが含まれる。さらに、この方法は、次いで、（ｉ）このサウンドの音源の方向、及び、（ii）このサウンドの強度レベル、を示す１以上の表示を、着用可能な計算機システムに表示させる。

この例示的方法１００は、着用可能な計算機システム６００、８００、又は８２０のような着用可能な計算機システムにより行われる例として記載されているが、当然のことながら例示的方法は、着用可能な計算装置と、この着用可能な計算機システムとの通信を行う遠隔サーバーのような、他の構成要素と組み合わせて実施することもできる。
Ａ. 着用可能な計算機システムにより検出されたサウンドに対応するオーディオデータの受け取り
上述のように、ブロック１０２で、この着用可能な計算機システムは、検出されたサウンドに対応するオーディオデータを受け取る。１つの例では、この着用可能な計算機システムには、周囲環境のサウンドを検出するよう構成された複数のマイクロフォンを含めることができる。本明細書全般で用いられる「サウンド」には、周囲環境に存在する単一のサウンド事象（例えば、単一の落雷音、単一の音の調子）、又は、周囲環境に存在する複数のサウンド（例えば、複数の落雷音、１つの歌曲）を含めることができることに注意すべきである。加えて、周囲環境のサウンドは、単一のサウンドの音源、又は、複数のサウンドの音源から来ることがある。

周囲環境のサウンドを検出するよう構成した複数のマイクロフォンは、複数の方向からくるサウンドを検出するように配置することができる。例えば、マイクロフォンをマイクロフォンの配列として配置することができる。図２は、マイクロフォンの配列２０２を有する例示的な着用可能な計算機システム２００の概略を示す。特に、計算機システム２００には、指向性マイクロフォン２０４ａ〜２０４ｅが含まれる。各指向性マイクロフォン２０４ａ〜２０４ｅは、それぞれ対応する領域２０６ａ〜２０６ｅのオーディオを捕捉するために配置されている。各指向性マイクロフォンは対応する領域から来るサウンドを主として検出するよう位置合わせされているが、このマイクロフォンは他の領域から来るサウンドも検出することがある。

１つの実施例において、配列２０２したマイクロフォンは、図６に示したフレーム６０４、６０６、及び６０８のように、着用可能な計算機システムのフレームの様々な場所に沿って配置することができる。さらに、この配列２０２では、約１５０度の範囲の領域から来るサウンドを検出するよう配置しているが、他の例示的実施の形態による配列では、これ以上の角度（例えば、３６０度まで）又はそれ以下の角度の範囲の領域から来るサウンドを検出することができる。

１つの実施例において、図２を参照して、着用可能な計算機システム２００の周囲環境２０７には、サウンドの複数の音源を含めることができる。例えば、サウンド２１０の第１の音源２０８は、領域２０６ａに位置し、サウンド２１４の第２の音源２１２は領域２０６ｄに位置することができる。着用可能な計算機システム２００は、周囲環境のサウンドに対応するオーディオデータを受け取ることができる。特に、マイクロフォンの配列２０２により、サウンド２１０及びサウンド２１４を検出することができる。１つの実施例において、各マイクロフォンは、サウンド２１０及び２１４を検出することができる。マイクロフォンを配列２０２に配置することにより、各指向性マイクロフォン２０４ａ〜２０４ｅは、別々の時刻に及び／又は別々の強度レベルでサウンド２１０及び２１４を検出することができる。
Ｂ． オーディオデータの分析
周囲環境のサウンドを検出した後、着用可能な計算機システムは、図９に示したプロセッサー９１４のようなプロセッサーにオーディオデータを分析のために送ることができる。特に、着用可能な計算機システムは、ブロック１０４にて、（ｉ）サウンドの音源の着用可能な計算機システムからの方向、及び、（ii）サウンドの強度レベル、の両方を測定するためにオーディオデータを分析する。

サウンドの音源の着用可能な計算機システムからの方向を測定するために、着用可能な計算機システムは、マイクロフォン２０４ａ〜２０４ｅで集められたオーディオデータを分析することができる。上述のように、１つの実施例において、各マイクロフォンはサウンド２１０及びサウンド２１４を検出することができる。しかしながら各指向性マイクロフォン２０４ａ〜２０４ｅは、異なる時刻に及び／又は異なる強度レベルでサウンド２１０又は２１４を検出することができる。例えば、サウンド２１０は、サウンド２１０がマイクロフォン２０４ｂ〜２０４ｅで検出されるより前に、マイクロフォン２０４aで検出されると思われる。同様に、サウンド２１４は、サウンド２１４が０４ａ〜２０４ｃ及び２０４ｅで検出されるより前に、マイクロフォン２０４ｄで検出されると思われる。種々のマイクロフォンでサウンドが検出される時間差に基づき、着用可能な計算機システムは、サウンドの音源の方向を測定することができる。このようなオーディオデータの方向分析は技術的にはよく知られている。配列２０２により検出されたオーディオデータに基づき、システムは、サウンド２１０の音源２０８は領域２０６ａにあり、サウンド２１４の音源２１２は領域２０６ｄにあると判断することができる。

さらに、着用可能な計算機システムは、オーディオデータを分析して、サウンドの強度レベル（例えば、音量）を測定することができる。サウンドの強度レベルの測定は、技術的にはよく知られている。１つの実施例において、この強度レベルは、サウンドを特定した領域のマイクロフォンにより検出されたサウンドの強度レベルとすることができる。他の実施例において、この強度レベルは、配列中の各マイクロフォンが受け取ったサウンドの平均強度レベルとすることができる。

周囲環境におけるサウンドの強度レベルは時間と共に変化することに注意しなければならない。例えば、音源２０８は人の話し声の可能性があり、ユーザの声は時間と共に変化することがある。他の例として、音源は、時間と共に強度が変化するサウンドを出力する楽器とすることができる。同様に、他の例も可能である。

さらに、マイクロフォンは音源に近付くほど、多少は高い強度レベルでサウンドを記録すると思われるので、強度の測定を、サウンドの音源の方向を測定するための補助とすることができる。
Ｃ． （ｉ）サウンドの音源の方向、及び、（ii）サウンドの強度レベルの、１以上の表示を着用可能な計算機システムに表示させる
オーディオデータの分析に応じて、着用可能な計算機システムは、ブロック１０６にて、サウンドの音源の方向、及び、サウンドの強度レベルを示す１以上の表示を行う。この１以上の表示は、周囲環境における役に立つサウンドに関する有益な情報をユーザに提供することができる。例えば、これらの表示は、周囲環境に存在するサウンドについて、耳の聞こえにくいユーザへの警報として役立たせることができる。他の例として、これらの表示は、耳の聞こえにくいユーザに、周囲環境がどのように聞こえているのかを視覚化することで手助けすることができる。
ｉ． 単一のグラフィック表示
この１以上の表示は、（ｉ）サウンドの音源の着用可能な計算機システムからの方向、及び、（ii）サウンドの強度レベルの両方を表示する単一のグラフィック表示を具備するようにできる。例えば、単一のグラフィック表示は矢印とすることができる。

図３ａは、着用可能な計算機システム２００の例示的ディスプレイ３００の概略を示す。この実施例において、音源２０８は、ディスプレイ３００の時のサウンドの音源のみである（すなわち、音源２１２はこのときサウンドを生じさせていない）。ディスプレイ３００には、サウンド２１０の単一のグラフィック表示が含まれる。特に、図３ａにおいて、サウンド２１０の音源２０８は人の話し声である。単一のグラフィック表示である矢印３０２は、（ｉ）音源の着用可能な計算機システムからの方向、及び、（ii）の強度レベルの両方を表示している。この実施例では、矢印３０２はサウンドの音源の近くに配置されている。特に矢印３０２は、サウンドの音源の少し上に配置されている。矢印は、サウンドが来る方向に居るユーザを明確に示す役割を果たすことができる。他の例では、矢印は、音源の少し左または右、或いは音源２０８に重ねて配置することができる。

上述の通り、サウンドの強度レベルは時間とともに変化する。従って、１つの実施例において、矢印の大きさは、強度レベルの変化に基づいて変化する。例えば、人の声は０デシベルから６０デシベル（ｄＢ）までの範囲で変化することがある。矢印の大きさは、サウンド２１０の強度レベルに基づいて変化することができる。図３ｂはディスプレイ３００に含まれることがある、例示的な矢印の大きさを示している。この実施例において、矢印３１０は、６０ｄＢに対応し、矢印３１２は、５０ｄＢに対応し、矢印３１４は、４０ｄＢに対応し、矢印３１６は、３０ｄＢに対応し、矢印３１８は、２０ｄＢに対応し、矢印３２０は、１０ｄＢに対応する。勿論、これらの間の他のデシベルレベルに対応する矢印を含めることもできる。大きな強度レベルに対し大きな矢印を表示することで、着用可能な計算機システムのユーザは、周囲環境に大きなサウンドが存在する時がわかる。１つの実施例において、周囲環境におけるサウンドが大きくなればなるほど、ユーザはサウンドにより注意を払ったり、サウンドをより認識すると思われる。従って、ユーザが表示された大きな矢印を見たとき、ユーザに対して、周囲環境に特別な注意を払うようディスプレイが表示することになる。

上述の通り、周囲環境中に２以上のサウンドの音源が存在することがある。従って、着用可能な計算機システムは、複数のサウンドの各々に対応するオーディオデータを受け取ることができ、このオーディオデータを分析して、（ｉ）サウンドの各音源の着用可能な計算機システムからの方向、及び、（ii）各サウンドの強度レベルの両方を測定することができる。着用可能な計算機システムは、次いで、サウンドの方向、及び、サウンドの強度レベルを各サウンドについて表示するために、１以上の表示をディスプレイする。例えば、図４ａに示すように、人２０８と人２１２が同時に話をしていることがある。図４ａは、サウンド２１０の第１の表示４０２と、サウンド２１４の第２の表示４０４を含む例示的なディスプレイ４００を表現している。この実施例において、表示はそれぞれの話し手の上にある円環となる。

これらの円環は、両方ともサウンドの音源の方向を表すことができ、また、強度を表すこともできる。１つの実施例において、円環の大きさは、異なる強度に応じて変化することができる。しかしながら、別の例では、異なる色でサウンドの異なる強度レベルを表示することができる。例えば、円環は、強度レベルの変化を表示するために色コード化することができる。例えば、図４ｂは、異なる色コードのスケール４０８を表現している。この実施例において、色４１０は、６０ｄＢに対応し、色４１２は、５０ｄＢに対応し、色４１４は、４０ｄＢに対応し、色４１６は、３０ｄＢに対応し、色４１８は、２０ｄＢに対応し、色４２０１０ｄＢに対応する。１つの実施例において、より明るい色をより高い強度レベルに対応させることができる。

他の実施例として、強度の表示には、色コード化されたサウンドマップを含めることができる。例えば、図４ｃは、色コード化されたサウンドマップを有する例示的ディスプレイ４５０を示す。特に、サウンドの音源に対応するディスプレイの領域をサウンドの強度レベルを表示するように色付けすることができる。さらに、サウンドの音源に対応しないディスプレイの領域は、色付けしないでおくことができる（すなわち、ユーザが知覚するような自然な色のままにしておくことができる）。この実施例では、音源２１２は色４１２となっている一方、音源２０８は色４１６となっている。従って、ユーザは、音源２１２からのサウンドのほうが音源２０８からのサウンドより大きいことが分かる（すなわち、人２１２は人２０８より大きな声で話している）。

さらに別の実施例として、例示的な単一のグラフィック表示では、サウンドの音源上に又は音源近くの点滅光とすることができる。点滅光の位置で、着用可能なコンピュータからの音源の方向を示すことができ、点滅光の周波数は、種々の強度レベルを示すために調整することができる。

別の実施例として、強度の表示には円形表示器が含まれる。例えば、グラフィックな表示器をサウンドの到着角度に対応して円形表示器の位置に置くことができる。さらに、円の中心からの距離をサウンドの強度レベルに対応させることができる。円形表示器は、例えば、全３６０度の到着角で捕捉できるシステムにおいて有用なものとすることができる。１つの実施例において、ディスプレイスクリーンの１つの隅のような、着用可能な計算機システムのディスプレイスクリーンの周辺に、円形表示器を表示することができる。

図１０ａ及び図１０ｂは、例示的円形表示器を示す。特に図１０ａは、例示的円形表示器１０００の概略を示す。円形表示器１０００には、円１００２及び強度表示バー１００４が含まれる。この実施例では、強度表示バー１００４の位置で、サウンドの音源が直接ユーザの後ろにあることを表示する役割を果たすことができる。さらに、円１００２の中心１００６からの強度表示バー１００４の長さは、サウンドの強度レベルを表示する役割を果たすことができる。例えば、強度表示バーは、低い強度のサウンドに対して短くする（すなわち、中心から離れる）ことができ、強い強度のサウンドに対して長くする（すなわち、中心に近付く）ことができる。図１０ｂは、円形表示器１０１０の他の実施例を示す。この実施例では、円形表示器には、円１０１２と強度表示バー１０１４とが含まれる。強度表示バー１０１４は、サウンドの音源がユーザの左にあることを表示する役割を果たす。さらに、強度表示バー１０１４の長さはサウンドの強度レベルを表示する。図１０ａに示されたサウンドの強度と比べて、図１０ｂのサウンドの強度は弱い。

１つの実施例において、強度表示バーを含めるのではなく、サウンドの強度を表示するために大きさを定めることができる矢印を円形表示器に含めることができる。さらに他の実施例において、円形表示器には、円の上に置いたグラフィック（例えば、点）を含めることができ、この点は、サウンドの強度に基づき色を変えることができる。当然のことながら、円形表示器には、サウンドの強度レベルを表示するために役立つ他のグラフィックを含めることができる。
ii. 方向及び強度の別々の表示
他の実施例において、この１以上の表示は、サウンドの音源の方向を示す第１の表示とサウンドの強度レベルを示す第２の表示とを具備する。例えば、第１の表示はサウンドの音源の方向を示す矢印又は円環とすることができ、第２の表示は強度メーター又は色コード化されたサウンドマップとすることができる。例示的強度メーター５００を図５に示す。この実施例では、強度メーターは０デシベルから１５０デシベルの範囲であり、バー５０２は、サウンドの強度レベルを表示する（この例では、１００ｄＢである）。サウンドの強度レベルは時間とともに変化することがあり、従って、バー５０２の長さも強度レベルに合わせて変化することができる。

強度メーター５０２のような強度メーターは、ディスプレイのいろいろな場所で表示することができる。例えば、強度メーターはディスプレイの周辺部に表示することができる。別の例では、強度メーターをサウンドの音源の近くに表示することができる。さらに、複数のサウンドの音源がある場合は、着用可能な計算機システムは、サウンドの音源毎に１つの強度メーターを表示させることができる。
iii． ユーザの視野外のサウンドの音源
１つの実施例において、サウンドの音源がユーザの視野の外側にあることがある。着用可能な計算機システムは、着用可能な計算機システムに約１８０度の現実世界の環境での視野範囲をもたらすことができる。着用可能な計算機システムは、周囲環境のこの視野の外側にある音源からくるサウンドを検出することができる。例えば、サウンドの音源は、ユーザの後ろ、又は、ユーザの周囲視覚範囲外における左又は右にあるかもしれない。着用可能な計算機システムは、サウンドの音源が視野の外側又は視野の周辺にあると判断することができる。１つの実施例において、着用可能な計算機システムには、マイクロフォンがどのような方向からのサウンドも（すなわち、３６０度の範囲で）検出できるように、着用可能な計算機システムのまわりに設置された複数のマイクロフォンを含めることができる。例えば、着用可能な計算機システムには、ユーザの頭のまわりに１２０度の間隔で、三角形に配置した３つのマイクロフォンを含めることができる。同様に、他のマイクロフォンを設置することも可能である。

表示の例として、視野の周辺で光を点滅させる点滅光とすることができる。例えば、ディスプレイには、ディスプレイ４５０の周辺部４７２の点４７０のように、ディスプレイの周辺部のいずれかの点に点滅光を含めることができる。この点滅光は、ユーザに対して、サウンドがユーザの視野外で検出されたことを表示する。
iv． 強度レベルの閾値を超えるサウンドの表示
１つの実施例において、この方法には、所定の閾値レベルを超える強度レベルに１以上の表示を着用可能な計算機システムに表示させるための、条件設定を伴うことができる。従って、周囲環境におけるサウンドの強度レベルを測定した後、着用可能な計算機システムは、この強度レベルが所定の閾値レベルを超えているかどうかを判断することができる。この強度レベルが所定の閾値レベルを超えている場合、着用可能な計算機システムは、前記１以上の表示を行う。しかし、強度レベルが所定の閾値レベルを超えていない場合、着用可能な計算機システムは、前記１以上の表示を行わない。

この条件設定を行うステップは、例えば、ユーザが表示として見ることに関心を示さないであろう暗騒音を除外するのに有用である。１つの実施例において、着用可能な計算機システムは、５ｄＢを超える強度レベルに１以上の表示を着用可能な計算機システムに表示させるよう条件設定する。他の閾値の例も可能であり、ユーザは、１ｄＢと２０ｄＢとの間で閾値レベルを設定するとか、着用可能な計算機システムが望ましい閾値レベルを持つよう設定することができる。

他の実施例において、ユーザは、着用可能な計算機システムを着用することができ、この着用可能な計算機システムのディスプレイの電源を最初は停止状態にしておくことができる。例えば、ディスプレイを何らかの理由で停止状態にすることができる。しかしながら、ディスプレイが電源停止状態となっている間、着用可能な計算機システムはサウンドを検出することができる。このシステムはサウンドの強度レベルが所定の閾値レベルを超えているかどうかを判断することができる。強度レベルが所定の閾値レベルを超えているとの判断に対応して、システムは、１以上の表示を行わせるためにディスプレイを起動させることができる。
v． 移動平均窓に関連させて強度レベルを表示
１つの実施例において、サウンドの絶対強度を表示するのではなく、サウンド事象の強度レベル表示は、サウンド事象の絶対強度レベルと周囲環境のサウンドの移動平均窓の強度レベルとの差として代表させることができる。移動平均窓は、所定の継続時間を有する移動平均窓とすることができる。例えば、移動平均窓は、３０秒とすることができる。勿論、移動平均窓は、これより長い、或いは、短い継続時間とすることができる。

サウンド事象の絶対強度レベルと周囲環境のサウンドの移動平均窓の強度レベルとの差として、サウンド事象の強度レベルを代表させることにより、表示されるサウンドの強度は、ユーザの居る特定の環境に適合させることができる。このことは、ユーザの特別なサウンド環境での関連したサウンドをユーザに表示することの手助けとなる。例えば、着用可能な計算機システムのユーザが非常に静かな環境（例えば、空き部屋）にいる場合、直近３０秒間の平均サウンド強度は低いと思われる。異常事象は、ドアを軽くノックする程度の静かなものである可能性がある。軽いノックのサウンドの強度は、直近３０秒間の平均サウンド強度の比較的低いと思われるサウンド強度に対する相対値で表示することができる。

一方、着用可能な計算機システムのユーザが非常にうるさい環境（例えば、騒音の多い工場）にいる場合、直近３０秒間の平均サウンド強度は高くなる。サウンドの強度レベルは、この非常にうるさい環境のサウンドの平均強度に対する相対値で表示することができる。加えて、上述したように、いくつかの実施例では、着用可能な計算機システムは、所定の閾値を超えるサウンドの強度を表示するよう条件設定することができる。この所定の閾値は、平均ノイズの下限に基づくことができる。例えば、サウンドの強度を表示する条件を定める所定の閾値は、静かな環境に対してよりもうるさい環境に対してのほうを大きくすることができる。上記で説明した実施例を用いると、静かな環境では、平均ノイズの下限は、静かな部屋の平均ノイズに近い値に設定されることがある。一方、うるさい環境では、平均ノイズの下限は、騒音の多い工場の平均ノイズに近い値に設定されることがある。有利なことには、平均ノイズの下限に基づいて閾値レベルを調整することにより、着用可能な計算機システムは、ユーザが居る特定のサウンド環境に関連させてサウンドを確実に表示することができる。

１つの実施例において、着用可能な計算機システムは、この移動平均分析を連続的に稼働させるよう設定することができる。移動平均分析を連続的に稼働させることにより、ユーザは、ユーザが別のサウンド環境に（例えば、静かな環境からうるさい環境へ）移動したとき、手動で閾値レベルを変更する必要がない。
vi． サウンドの追加表示
着用可能な計算機システムからのサウンドの音源の方向及びサウンドの強度レベルの表示を行うのに加え、他のサウンド表示もまた可能である。上述したように、周囲環境でのサウンドは発話かもしれない。１つの実施例において、この方法はさらに、発話のテキストを定める発話からテキストへの変換特性を具備することができる。発話のテキストを決定した後、この方法は、着用可能な計算機システムに発話のテキストを表示させるステップを伴うことができる。１つの実施例において、着用可能な計算機システムは、話者の上に吹き出しを表示し、この吹き出しに話者の発話のテキストを記入しておくことができる。

他のサウンド表示の可能性は、サウンドの音源が何であるかの表示である。１つの実施例において、着用可能な計算機システムは、サウンドの音源を判断することができ、着用可能な計算機システムサウンドの音源に関する情報を提供することができる。着用可能な計算機システムは、オーディオデータを分析し、サウンドの音源を判断することができ、そして、サウンドの音源を示す他の表示を行うことができる。例えば、この他の表示は、サウンドの音源について説明するテキスト表示（例えば、犬、猫、人、楽器、車、等）とすることができる。

例えば、着用可能な計算機システムは、サウンドの音源とサウンドとを一致させるためにサウンドを分析することができる。１つの実施例において、遠隔サーバーには、サウンドの断片のデータベースを含めることができ、各断片は音源と関連付けられている。サーバーは、検出したサウンドをサウンドの断片のデータベース中の種々のサウンドと比較し、合致するものを特定することができる。一旦、サウンドの音源を特定すると、着用可能な計算機システムは、その音源についての情報を表示する。例えば、音源を特定する情報を表示することができる。例えば、サウンドは、所定の車のエンジンからくるサウンドである可能性がある。着用可能な計算機システムは、それがどのような形式の車であるかを表示することができる。他の情報を提供することも可能である。例えば、着用可能な計算機システムは、その車の市場価格及び／又はその車を購入できる施設に関する情報を表示することができる。他の情報の例も可能である。

他の実施例において、着用可能な計算機システムサウンドの音源に関するビデオを表示することができる。例えば、着用可能な計算機システムは岸辺からのサウンド（例えば、波の砕ける音）を検出することができる。着用可能な計算機システムは、岸辺と波の砕ける場面のビデオを表示することができる。このビデオは、その音を発している世界をユーザが視覚化する手助けをすることができる。

さらに他の実施例において、他の可能なサウンド表示は、サウンドのオーディオ周波数を示す表示である。オーディオ周波数は、例えば、音程を定めるサウンドの特性であり、オーディオ周波数は、ヘルツ（Ｈｚ）で測定することができる。一般に、普通の人の可聴周波数は、２０Ｈｚから２０，０００Ｈｚである。しかし、個々の人が聞こえる周波数の範囲は周囲条件により影響されることがある。

着用可能な計算機システムはサウンドを分析し、このサウンドのオーディオ周波数を様々な方法で測定することができる。例えば、着用可能な計算機システムは、周波数領域又は時間領域のどちらかのアルゴリズムを用いて、このサウンドのオーディオ周波数を分析することができる。前者では、入力信号の周波数変換における正弦波のピーク位置の特定を試みることがある。後者では、波形と時間遅れさせた波形との類似性を測定するために自己相関関数を用いることがある。サウンドのオーディオ周波数を測定した後、着用可能な計算機システムは、測定したオーディオ周波数表示を行うことができる。例えば、着用可能な計算機システムは、測定したオーディオ周波数の値を表示することができる。他の例として、着用可能な計算機システムは、オーディオ周波数の目盛を表示することができる。

サウンドのオーディオ周波数を測定し、そのオーディオ周波数の表示を行うことは種々の理由で有益となる可能性がある。オーディオ周波数を視覚化することの利点の一例として、ユーザが高い周波数のノイズにさらされた状態で経験することができる。そのような状態では、高いオーディオ周波数の表示が表示されるので、サウンドが高いオーディオ周波数を持つことをユーザに警告することができる。この警告は、例えば、高いオーディオ周波数のサウンドに起因する潜在的な聴覚障害を回避する動作をユーザに取らせるよう誘導するのに役立つことがある。

さらに別の実施例では、他の可能なサウンド表示は、ウィナーエントロピーを示す表示である。ウィナーエントロピーは、サウンドスペクトルの幾何平均の算術平均に対する割合として分析することができる。特に、ウィナーエントロピーは、０と１との間でサウンドの乱雑さの程度であり、そのサウンドがホワイトノイズなのか調和的なサウンドなのかを識別するために使うことができる。従って、着用可能な計算機システムのユーザ（例えば、聴覚障害を持つユーザ）は、サウンドがホワイトノイズなのか調和的なサウンドなのかを判断する利益を得ることができる。

上述の例示的なサウンド表示に加えて、サウンドの他の表示も可能である。
III． 例示的システム及び装置
図６は、データを受信し、伝送し、表示するための例示的システム６００の概略を示す。システム６００は、着用可能な計算装置の形で示されている。システム６００は、方法１００を実行する構成とすることができる。図６が着用可能な計算装置の例として頭部装着装置６０２を図示するが、他の形式の着用可能な計算装置を付加的に又はもう１つの方法として用いることもできる。図６に示すように、頭部装着装置６０２は、レンズフレーム６０４，６０６及びフレームサポートセンター６０８を含むフレームエレメントと、レンズエレメント６１０，６１２と、突き出たサイドアーム６１４，６１６とを具備する。フレームサポートセンター６０８及び突き出たサイドアーム６１４，６１６は、それぞれユーザの鼻と耳を介してユーザの顔に頭部装着装置６０２を固定するよう構成されている。

フレームエレメント６０４，６０６及び６０８及び、突き出たサイドアーム６１４，６１６は、プラスチック及び／又は金属の中空でない構造で形成することができ、又は、頭部装着装置６０２の内部を通り抜けて配線し部品の相互接続するように、同様の材料で中空構造に形成することができる。他の材料も可能である。

レンズエレメント６１０，６１２の各々１以上は、投影された画像又はグラフィックを適切に表示することができるどのような材料で形成してもよい。レンズエレメント６１０，６１２の各々は、ユーザがこのレンズエレメントを通して見ることができるよう十分透明にすることができる。レンズエレメントのこれらの２つの特性を結合させることにより、投影された画像又はグラフィックがレンズエレメントを通してユーザが知覚する現実世界の光景に重ねあわされた、迫真性を増大させた表示又はヘッドアップ表示を容易にする。

突き出たサイドアーム６１４，６１６は、それぞれレンズフレーム６０４，６０６から伸びる突出部とすることができ、ユーザの耳の後ろに位置して頭部装着装置６０２をユーザに固定することができる。突き出たサイドアーム６１４，６１６は、さらに、ユーザの頭の後部にまで伸ばすことにより頭部装着装置６０２をユーザに固定することができる。加えて、又は、もう１つの方法として、例えば、システム６００は、頭部に装着するヘルメットの機構の中に結合又は固定することができる。他の可能性も存在する。

システム６００には、オンボード計算機システム６１８、ビデオカメラ６２０、センサー６２２、及び、指操作可能なタッチパッド６２４も含めることができる。オンボード計算機システム６１８は、頭部装着装置６０２の突き出たサイドアーム６１４上に示されている。しかしながら、オンボード計算機システム６１８は、頭部装着装置６０２の他の部分に取り付けることが可能であり、或いは、頭部装着装置６０２から離れて設置することも可能である（例えば、オンボード計算機システム６１８は、頭部装着装置６０２と有線又は無線で接続することができる）。オンボード計算機システム６１８には、例えば、プロセッサー及びメモリーを含めることができる。オンボード計算機システム６１８は、ビデオカメラ６２０及び指操作可能なタッチパッド６２４から（及び、他の知覚装置、又は、ユーザインターフェース、又は、その両方から）のデータを受け取り分析し、画像を生成してレンズエレメント６１０及び６１２により出力するよう構成することができる。

ビデオカメラ６２０は、頭部装着装置６０２の突き出たサイドアーム６１４上に示されている。しかしながら、ビデオカメラ６２０は、頭部装着装置６０２の他の部分に取り付けることが可能である。ビデオカメラ６２０は、種々の解像度又は異なるフレームレートで画像をとらえるよう構成することができる。例えば、携帯電話やウェブカメラで用いられるような小さなフォームファクタの多くのビデオカメラをシステム６００の実施例に組む込むことができる。

さらに、図６は１つのビデオカメラ６２０を示しているが、１以上のビデオカメラを用いることもでき、各々のカメラで同じ光景をとらえるようにすることも、異なる光景をとらえるようにすることも可能である。例えば、ビデオカメラ６２０はユーザが知覚する現実世界の光景の少なくとも一部をとらえるように前方に向けることができる。この前方に向けたビデオカメラ６２０でとらえた画像は、次に、コンピュータ生成された画像が、ユーザが知覚する現実世界の光景と互いに影響しあうようにして、迫真性を増大させるために用いることができる。

センサー６２２は、頭部装着装置６０２の突き出たサイドアーム６１６上に示されている。しかしながら、センサー６２２は、頭部装着装置６０２の他の部分に取り付けることが可能である。センサー６２２には、例えば、１以上のジャイロスコープ又は加速度計を含めることができる。他の検知装置このセンサー６２２内に又はこのセンサー６２２に加えて含めることができ、或いは、他の検知機能をセンサー６２２が果たすことができる。

指操作可能なタッチパッド６２４は、頭部装着装置６０２の突き出たサイドアーム６１６上に示されている。しかしながら、指操作可能なタッチパッド６２４は、頭部装着装置６０２の他の部分に取り付けることが可能である。また、２以上の指操作可能なタッチパッドが部装着装置６０２上にあってもよい。指操作可能なタッチパッド６２４はユーザにより命令を入力するために使うことができる。指操作可能なタッチパッド６２４は、いろいろな可能性の中で、静電容量検出、抵抗検出、表面弾性波処理により、指の位置及び動きの少なくとも１つを検知することができる。指操作可能なタッチパッド６２４は、パッド表面と平行又は平面的な方向、パッド表面と垂直な方向、又はその両方の方向への指の動きを検出することができ、また、パッド表面に加わる圧力のレベルを検出することもできる。指操作可能なタッチパッド６２４は、１以上の半透明な又は透明な絶縁層、及び、１以上の半透明な又は透明な導電層により形成することができる。指操作可能なタッチパッド６２４の端部は、ユーザの指が指操作可能なタッチパッド６２４の端部又は他の領域に触れたとき、ユーザに触覚的に手ごたえを与えるため、隆起した表面、又はぎざぎざにした表面、又は、粗い表面で形成することができる。２以上の指操作可能なタッチパッドがある場合は、指操作可能なタッチパッドの各々を独立に動作させることができ、異なる機能を与えることができる。

図７は、図６に概略的に示したシステム６００を別の視点から見たものである。図７に示すように、レンズエレメント６１０，６１２は、ディスプレイエレメントとしての役割を果たすことができる。頭部装着装置６０２には、突き出たサイドアーム６１６の内側面に取り付けられ、レンズエレメント６１２の内側面にディスプレイ６３０を投影するよう構成された、第１のプロジェクター６２８を含めることができる。加えて、又は、もう１つの方法として、第２のプロジェクター６３２を突き出たサイドアーム６１４内側面に取り付け、レンズエレメント６１０の内側面にディスプレイ６３４を投影するよう構成することができる。

レンズエレメント６１０，６１２は、光投影システムにおけるコンバイナとしての役割を果たすことができ、プロジェクター６２８，６３２から投影された光を反射するコーティングを含めることができる。実施の形態によっては、反射コーティングを用いない場合もある（例えば、プロジェクター６２８，６３２がスキャニングレーザ装置であるとき）。

代替的実施の形態において、他の形式のディスプレイエレメントを用いることもできる。例えば、レンズエレメント６１０，６１２自身には、エレクトロルミネッセントディスプレイ又は液晶ディスプレイのような透明又は半透明なマトリックスディスプレイ、画像をユーザの目に送る１以上の導波路、或いは、目の近くに焦点を合わせた画像をユーザに送ることができる他の光エレメントを含めることができる。対応するディスプレイドライバは、このようなマトリックスディスプレイを駆動するためにフレームエレメント６０４，６０６内に取り付けることができる。もう１つの方法として、又は、付加的に、レーザ又はＬＥＤ源、及び、スキャニングシステムを１以上のユーザの目の網膜上に直接ラスターディスプレイを描画するために用いることができる。同様に、他の可能性も存在する。

図８ａは、データを受信し、伝送し、表示するための例示的システム８００の概略を示す。システム８００は、方法１００を実行するために構成されている。システム８００は、着用可能な計算装置８０２の形で示されている。着用可能な計算装置８０２には、図６及び図７を参照して説明したような、フレームエレメント及びサイドアームが含まれる。着用可能な計算装置８０２は、図６及び図７を参照して説明したような、オンボード計算機システム８０４とビデオカメラ８０６とを付加的に含めることができる。ビデオカメラ８０６は、着用可能な計算装置８０２のフレームに取り付けられているのが示されているが、ビデオカメラ８０６は、他の位置に取り付けることもできる。

図８ａに示すように、着用可能な計算装置８０２には、装置に取り付けることのできる１つのディスプレイ８０８を含めることができる。ディスプレイ８０８は、図６及び図７を参照して説明したレンズエレメントのような、着用可能な計算装置８０２のレンズエレメントの１つに形成することができ、ユーザの現実の世界の光景にコンピュータ生成されたグラフィックスを重ね合わせるよう構成することができる。ディスプレイ８０８は、着用可能な計算装置８０２のレンズの中央に取り付けるよう示されているが、ディスプレイ８０８は、他の場所に取り付けることもできる。ディスプレイ８０８は、光導波路８１０を介してディスプレイ８０８と接続されている計算機システム８０４により制御することができる。

図８ｂは、データを受信し、伝送し、表示するための例示的システム８２０の概略を示す。システム８２０は、方法１００を実行するために構成されている。システム８２０は、着用可能な計算装置８２２の形で示されている。着用可能な計算装置８２２には、サイドアーム８２３、中央フレームサポート８２４、及び鼻あて８２５の付いたブリッジ部を含めることができる。図８ｂに示した実施例では、中央フレームサポート８２４は、サイドアーム８２３とつながっている。着用可能な計算装置８２２には、レンズエレメントを有するレンズフレームが含まれていない。着用可能な計算装置８２２には、図６及び図７を参照して説明したような、オンボード計算機システム８２６及びビデオカメラ８２８を付加的に含めることができる。

着用可能な計算装置８２２には、サイドアーム８２３又は中央フレームサポート８２４のうちの１つに取り付けられた１つのレンズエレメント８３０を含めることができる。レンズエレメント８３０には、図６及び図７を参照して説明したような、ディスプレイを含めることができ、ユーザの現実の世界の光景にコンピュータ生成されたグラフィックスを重ね合わせるよう構成することができる。１つの実施例では、１つのレンズエレメント８３０が、突き出たサイドアーム８２３の内側（ユーザが装着したときにユーザの頭に曝される側）に取り付けることができる。１つのレンズエレメント８３０は、着用可能な計算装置８２２をユーザが装着したときにユーザの目の前、又は目の近傍に配置することができる。例えば、１つのレンズエレメント８３０は、図８ｂに示すように、中央フレームサポート８２４の下に配置することができる。

図９は、コンピュータネットワークのインフラ基盤の概略図を示す。システム９００において、装置９１０は通信リンク９２０（例えば、有線接続又は無線接続）を用いて、遠隔装置９３０と通信する。装置９１０は、データを受け取り、そのデータに対応する情報又はそのデータに関連する情報を表示することのできるどのような形式の装置でもよい。例えば、装置９１０は、図６〜図８ｂを参照して説明した頭部装着装置６０２，８００，又は８２０のような、ヘッドアップディスプレイシステムとすることができる。

従って、装置９１０には、プロセッサー９１４及びディスプレイ９１６を具備するディスプレイシステム９１２を含めることができる。ディスプレイ９１０は、例えば、光学的なシースルーディスプレイ、光学的なシーアラウンドディスプレイ、又は、ビデオシースルーディスプレイとすることができる。プロセッサー９１４は、遠隔装置９３０からのデータを受け取り、ディスプレイ９１６上にこのデータを表示するよう構成することができる。プロセッサー９１４は、例えば、マイクロプロセッサー又はディジタル信号プロセッサーのような、どのような形式のプロセッサーでもよい。

装置９１０にはさらに、プロセッサー９１４と接続されたメモリー９１８のような、オンボードデータ記憶装置を含めることができる。メモリー９１８は、例えば、プロセッサー９１４からアクセスすることができ、プロセッサー９１４で実行することができるソフトウェアを保存することができる。

遠隔装置９３０は、データを装置９１０に送るよう構成したラップトップコンピュータ、携帯電話、又はタブレット計算装置、等、を含む、任意の形式の計算装置又は伝送器とすることができる。遠隔装置９３０及び装置９１０は、プロセッサー、伝送器、受信器、アンテナ、等、のような、通信リンク９２０を可能とするハードウェアを有することができる。

図９において、通信リンク９２０は、無線接続として示されているが、有線接続も用いることができる。例えば、通信リンク９２０は、ユニバーサルシリアルバスのような有線シリアルバス又はパラレルバスとすることができる。有線接続は独自の接続としてもよい。通信リンク９２０はまた、他の可能性の中でも、例えばブルートゥース（登録商標）、無線技術、ＩＥＥＥ８０２．１１に記載された通信プロトコル（ＩＥＥＥ８０２．１１改訂版を含む）、（ＧＳＭ、ＣＤＭＡ、ＵＭＴＳ、ＥＶＤＯ、ＷｉＭＡＸ、又はＬＴＥのような）携帯電話技術、Ｚｉｇｂｅｅ（登録商標）技術を用いた無線接続とすることもできる。遠隔装置３３０は、インターネットを介してアクセスすることができ、特定のウェブサービス（例えば、ソーシャルネットワーキング、フォトシェアリング、アドレスブック、等）と関連させたコンピューティングクラスターを含むことができる。

図９を参照して、装置９１０は方法１００のステップを実行することができる。特に、この方法１００は、一時的ではないコンピュータ読み取り可能媒体に保存された命令を実行したとき、プロセッサー９１４により実行される動作に対応している。１つの実施例において、一時的ではないコンピュータ読み取り可能媒体は、メモリー９１８の一部とすることができる。この一時的ではないコンピュータ読み取り可能媒体は、プロセッサー９１４による動作に応答して、プロセッサー９１４に種々の動作を行わせる命令を、この媒体に保存しておくことができる。この命令には、（ａ）着用可能な計算機システムが検出したサウンドに対応するオーディオデータを受け取る命令と、（ｂ）このオーディオデータを分析し、（ｉ）このサウンドの音源のこの着用可能な計算機システムからの方向、及び、（ii）このサウンドの強度レベル、の両方を測定する命令と、（ｃ）この着用可能な計算機システムに、（ｉ）このサウンドの音源の方向、及び、（ii）このサウンドの強度レベル、の１以上の状態を表示させる命令と、が含まれる。さらに、１つの実施例において、この命令にはさらに、この着用可能な計算機システムに所定の閾値レベルを超えた強度レベルを有する１以上の状態を表示させるための条件を設定する命令が含まれる。
IV． 結論
当然のことながら、ここに記載の構成は、単なる実施例である。従って、当業者であれば他の構成又は他のエレメント（例えば、機械、インターフェース、機能、順序、及び機能のグループ分け、等）を用いることができること、及び、いくつかのエレメントは省略しても所望の結果が得られることを理解するであろう。さらに、ここに記載のエレメントの多くは、別々の又は分散した構成部品として、又は任意の組み合わせ及び場所で他の構成部品と組み合わせて、実行することのできる、機能的存在として記述している。

当然のことながら、ここに記載のシステム及び方法が、ユーザに関する個人情報、又はユーザの個人情報にかかわる情報を収集し及び／又は用いる場合、そのユーザには、そのような個人情報（例えば、ユーザの嗜好に関する情報）を含有するプログラム又は特徴を選択／除外する機会を与えることができる。加えて、個人を特定することができる情報を除去するために、特定のデータを、保存または使用する前に１以上の方法で匿名化することができる。例えば、個人を特定する情報をユーザ特定のために使えなくするために、そして、あらゆるユーザの嗜好又はユーザの相互関係を、特定のユーザと関連付けないで、一般化するために（例えば、ユーザの人口統計に基づいて一般化するために）、ユーザの身元は匿名化することができる。

多くの特徴及び実施の形態をここに開示したが、他の特徴及び実施の形態が可能なことは当業者には明らかである。ここに開示した種々の特徴及び実施の形態は図解のためのものであり、限定を意図するものではなく、実際の権利範囲は以下の特許請求の範囲によって示されるものであり、特許請求の範囲で示したような範囲と均等なものも含まれる。当然のことながら、ここに記載の用語の言い回しも特定の実施の形態を説明するためだけのものであり、限定のためのものではない。

Claims (20)

1. コンピュータにより実行される方法であって、
   着用可能な計算機システムが検出したサウンドに対応するオーディオデータを受け取るステップと、
   前記オーディオデータを分析し、（ｉ）前記サウンドの音源の前記着用可能な計算機システムからの方向、及び、（ii）前記サウンドの強度レベル、の両方を測定するステップと、
   前記着用可能な計算機システムに、（ｉ）前記サウンドの音源の方向、及び、（ii）前記サウンドの強度レベル、を示す１以上の表示を行うステップと、
   を具備し、
   前記着用可能な計算機システムは、前記着用可能な計算機システムに所定の閾値レベルを超えた強度レベルを有する１以上の表示を行うための条件設定を行うことを特徴とする、
   方法。
2. 前記着用可能な計算機システムのディスプレイは、最初は電源停止状態になっていて、前記方法は、
   前記強度レベルを測定した後、前記強度レベルが所定の閾値レベルを超えているかどうかを判断するステップと、
   前記強度レベルが前記所定の閾値レベルを超えているとの判断に対応して、前記１以上の表示を行うために前記ディスプレイを起動させるテップと、
   を具備することを特徴とする、請求項１に記載の方法。
3. 前記１以上の表示は、（ｉ）前記サウンドの音源の前記着用可能な計算機システムからの方向、及び、（ii）前記サウンドの強度レベル、の両方を示す１つのグラフィックな表示を具備することを特徴とする請求項１に記載の方法。
4. 前記１つのグラフィックな表示は、矢印であることを特徴とする請求項３に記載の方法。
5. 前記サウンドの強度レベルは時間とともに変化し、前記矢印の大きさは、前記強度レベルの変化に基づいて変化することを特徴とする請求項４に記載の方法。
6. 前記１以上の表示は、（ｉ）前記サウンドの音源の方向を示す第１の表示、及び、（ii）前記サウンドの強度レベルを示す第２の表示、を具備することを特徴とする請求項１に記載の方法。
7. 前記第１の表示は矢印であり、前記第２の表示は強度メーターであることを特徴とする請求項６に記載の方法。
8. 前記サウンドの強度レベルは時間とともに変化し、前記１以上の表示は、前記強度レベルに合わせて変化する強度レベルと関連付けられた表示を具備することを特徴とする請求項１に記載の方法。
9. 前記１以上の表示を行うステップは、異なる強度レベルに対して異なる色を表示するステップを具備することを特徴とする請求項１に記載の方法。
10. 前記１以上の表示は、強度メーターを具備することを特徴とする請求項１に記載の方法。
11. 前記着用可能な計算機システムは、前記着用可能な計算機システムにおける現実世界の環境での視野をもたらし、前記方法はさらに、
    前記音源が、前記視野の外側又は前記視野の周辺にあると判断するステップを具備し、前記１以上の表示として、前記視野の周辺にある点滅光を具備することを特徴とする請求項１に記載の方法。
12. 前記サウンドは発話を具備し、前記方法はさらに、
    前記発話のテキストを決定する、発話からテキストへの変換特性決定ステップと、
    前記発話のテキストを前記着用可能な計算機システムに表示するステップと、
    を具備することを特徴とする請求項１に記載の方法。
13. 着用可能な計算機システムが検出した第２のサウンドに対応するオーディオデータを受け取るステップと、
    前記オーディオデータを分析し、（ｉ）前記第２のサウンドの音源の前記着用可能な計算機システムからの方向であって、前記第２のサウンドの方向は前記サウンドの方向とは異なることを特徴とする方向、及び、（ii）前記第２のサウンドの強度レベル、の両方を測定するステップと、
    前記着用可能な計算機システムに、（ｉ）前記第２のサウンドの音源の方向、及び、（ii）前記２のサウンドの強度レベル、の１以上の表示を行うステップと、
    を具備することを特徴とする請求項１に記載の方法。
14. 前記サウンドの音源の方向を測定するために前記オーディオデータを分析するステップと、
    前記着用可能な計算機システムに、他の表示を行うステップであって、前記他の表示は、前記サウンドの音源を示す他の表示であることを特徴とするステップと、
    をさらに具備することを特徴とする請求項１に記載の方法。
15. 前記他の表示は、前記サウンドの音源について説明するテキスト表示であることを特徴とする請求項１４に記載の方法。
16. 前記他の表示は、前記サウンドの音源に関するビデオであることを特徴とする請求項１４に記載の方法。
17. プロセッサーによる実行に応答して、プロセッサーに動作させる命令を有する、一時的ではないコンピュータ読み取り可能媒体であって、前記命令は、
    着用可能な計算機システムが検出したサウンドに対応するオーディオデータを受け取る命令と、
    前記オーディオデータを分析し、（ｉ）前記サウンドの音源の前記着用可能な計算機システムからの方向、及び、（ii）前記サウンドの強度レベル、の両方を測定する命令と、
    前記着用可能な計算機システムに、（ｉ）前記サウンドの音源の方向、及び、（ii）前記サウンドの強度レベル、の１以上の表示を行う命令と、
    を具備し、
    前記着用可能な計算機システムに１以上の表示を行わせる命令の設定条件は、前記強度レベルが所定の閾値レベルを超えていることであることを特徴とする、
    一時的ではないコンピュータ読み取り可能媒体。
18. 前記１以上の表示は、（ｉ）前記音源の前記着用可能な計算機システムからの方向、及び、（ii）前記強度レベル、の両方を示す１つのグラフィックな表示を具備することを特徴とする請求項１７に記載の一時的ではないコンピュータ読み取り可能媒体。
19. 着用可能な計算機システムであって、
    頭部装着ディスプレイであって、前記頭部装着ディスプレイは、コンピュータで生成された情報を表示するよう構成され、現実世界の環境を視覚的に知覚することを可能にすることを特徴とする頭部装着ディスプレイと、
    コントローラであって、前記コントローラは、着用可能な計算機システムが検出したサウンドに対応するオーディオデータを受け取り、（ｉ）前記サウンドの音源の前記着用可能な計算機システムからの方向、及び、（ii）前記サウンドの強度レベル、の両方を測定するよう構成されていることを特徴とするコントローラと、
    ディスプレイシステムであって、前記ディスプレイシステムは、（ｉ）前記音源の方向、及び、（ii）前記強度レベル、を示す１以上の表示を行うよう構成されていることを特徴とするディスプレイシステムと、
    を具備し、
    前記コントローラは、前記着用可能な計算機システムに所定の閾値レベルを超えた強度レベルを有する１以上の表示を行うための条件設定を行うよう構成されていることを特徴とする、着用可能な計算機システム。
20. 前記ディスプレイシステムのディスプレイは、最初は電源停止状態になっていて、
    前記コントローラは、前記強度レベルを測定した後、前記強度レベルが所定の閾値レベルを超えているかどうかを判断し、
    前記ディスプレイシステムは、前記強度レベルが前記所定の閾値レベルを超えているとの判断に対応して、前記１以上の表示を行うために前記ディスプレイを起動させる、
    ことを特徴とする請求項１９に記載の着用可能な計算機システム。

Images