JP2016504648A

JP2016504648A - 物理空間においてサウンドフィールドを表現するための方法および装置

Info

Publication number: JP2016504648A
Application number: JP2015541777A
Authority: JP
Inventors: シャン、ペイ; リウ、ケシー
Original assignee: Qualcomm Inc
Current assignee: Qualcomm Inc
Priority date: 2012-11-14
Filing date: 2013-10-11
Publication date: 2016-02-12
Anticipated expiration: 2033-10-11
Also published as: KR20150085030A; WO2014077990A1; US20140136981A1; CN104919823B; US9412375B2; US9286898B2; KR20150085032A; EP2920983B1; WO2014077991A1; KR101762522B1; CN104919823A; EP2920984A1; US20140136203A1; CN104919824A; JP2016506639A; JP2016505918A; JP6138956B2; JP6092412B2; CN104782146A; EP2920983A1

Abstract

物理空間においてサウンドフィールドを表現するための方法および装置は、サウンドトランスデューサアレイをタッチ面使用可能ディスプレイテーブルとともに含むシステムに具現化されているものとして提供および説明される。アレイは、トランスデューサのグループ（多数のスピーカおよび／またはマイクロフォン）を含みうる。アレイは、サウンド再生（アレイが多数のスピーカを含む構成では）、またはサウンドピックアップ（アレイが多数のマイクロフォンを含む構成では）が、特定の方向に集中した空間パターン（または、サウンドプロジェクションパターン）を、他の方向からの妨害を減らすと同時に有するように、トランスデューサのグループについて信号の空間処理を行うように構成されうる。【選択図】図７

Description

米国特許法第１１９条に基づく優先権の主張

[0001] 本願は、２０１２年１１月１４日に出願された「Device and System for Refreshing a Sound Field in a Physical Space」と題する米国特許仮出願第６１/７２６４５１号、２０１２年１１月１４日に出願された「Method and Apparatus for Providing Tangible Control of Sound」と題する米国特許仮出願第６１/７２６４５６号、２０１２年１１月１４日に出願された「Device and System Having Smart Directional Conferencing」と題する米国特許仮出願第６１/７２６４４１号、および２０１２年１１月１４日に出願された「Collaborative Document Review and Editing」と題する米国特許仮出願第６１／７２６，４６１号への優先権およびそれらの利益を主張する。

[0002] 様々な特徴は、物理空間においてサウンドフィールドを表現するためのデバイスおよびシステムに関する。

[0003] サウンドとは、可聴範囲内の周波数から成る、固体、液体、またはガスを通して伝達される圧力の振動である機械波である。例えば、人間の聴力は、通常、約２０Ｈｚから２０，０００Ｈｚ（２０ｋＨｚ）の周波数に制限される。これらのサウンドは、聞くことはできるが見ることはできない。人間の視覚が他のすべての感覚に勝るため、サウンドの視覚化が可能になることは、ユーザ経験を大いに高めるだろう。

[0004] 本開示の１つまたは複数の態様の基本的な理解を与えるために、そのような態様の簡略化された概要を以下に提示する。この概要は、本開示の意図されるすべての特徴の広範な概略ではなく、本開示のすべての態様のキーとなる要素または重要な要素を識別することも、本開示の任意の態様またはすべての態様の適用範囲（scope）を線引きすることも意図しない。その唯一の目的は、後に提示されるより詳細な説明への前置きとして、本開示の１つまたは複数の態様のいくつかの概念を、簡略化された形式で提示することである。

[0005] 第１の例は、物理空間においてサウンドフィールドを表現するための方法を提供する。方法は、物理空間と通信状態にあるサウンドトランスデューサアレイによって、物理空間からサウンドをキャプチャすることを含む。物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットを含みうる。ひとたびサウンドがキャプチャされると、キャプチャされたサウンドのサウンドプロジェクションパターンが算出され得、ここで、サウンドプロジェクションパターンは、キャプチャされたサウンドのサウンドフィールドの表現である。次に、サウンドプロジェクションパターンは、サウンドトランスデューサアレイと対象ユーザとの間に延びる物理空間上に表示されうる。サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示されうる。

[0006] 一態様によれば、サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされ得、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドを含みうる。追加的に、キャプチャされたサウンドは、このキャプチャされたサウンドの発生ロケーション（originating location）を特定するために処理されうる。対象ユーザは、キャプチャされたサウンドの発生ロケーションにいる可能性がある。

[0007] 一態様によれば、サウンドトランスデューサアレイは、別個のマイクロフォンアレイおよびスピーカアレイを備えうる。マイクロフォンアレイがスピーカアレイとは別個である場合、マイクロフォンビームは、マイクロフォンアレイ上でキャプチャされ、物理空間において第１のカラーで表示され得るが、一方で、スピーカビームは、スピーカアレイから送信され、物理空間において第２のカラーで表示され得、ここで、第１のカラーは第２のカラーとは異なる。次に、カラーヒートマップがマイクロフォンビームに適用され得、ここで、カラーヒートマップの主ローブは強い信号領域を表し、カラーヒートマップにおけるカラーの変化は弱い信号領域を表す。

[0008] 一態様によれば、サウンドトランスデューサアレイは、組み合わせられたマイクロフォンおよびスピーカアレイを備えうる。マイクロフォンおよびスピーカアレイが組み合わせられているとき、マイクロフォンビームは、サウンドトランスデューサアレイ上でキャプチャされ、物理空間において第１のカラーで表示されうるが、一方で、スピーカビームは、サウンドトランスデューサアレイから送信され、物理空間において第２のカラーで表示され得、ここで、第１のカラーは第２のカラーとは異なる。次に、カラーヒートマップがマイクロフォンビームに適用され、ここで、カラーヒートマップの主ローブは強い信号領域を表し、カラーヒートマップにおけるカラーの変化は弱い信号領域を表す。

[0009] 一実施形態によれば、サウンドプロジェクションパターンは、矢印のようなシンボルまたはビームパターンの形式でありうる。

[0010] 第２の例は、サウンドトランスデューサアレイを提供する。サウンドトランスデューサアレイは、スピーカアレイと、スピーカアレイと通信状態にある、サウンドをキャプチャするためのマイクロフォンアレイと、マイクロフォンアレイと通信状態にある少なくとも１つのプロセッサとを含みうる。少なくとも１つのプロセッサは、サウンドをキャプチャすることと、キャプチャされたサウンドのサウンドプロジェクションパターンを算出することとを行うように構成され、ここで、サウンドプロジェクションパターンは、キャプチャされたサウンドのサウンドフィールドの表現である。次に、少なくとも１つのプロセッサは、サウンドトランスデューサアレイと対象ユーザとの間に延びる物理空間上にサウンドプロジェクションパターンを表示するように構成されうる。サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示され得、物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットを含みうる。

[0011] 一態様によれば、サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされ得、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドを含みうる。追加的に、少なくとも１つのプロセッサは、キャプチャされたサウンドの発生ロケーションを特定するために、キャプチャされたサウンドを処理するようにさらに構成されうる。対象ユーザは、キャプチャされたサウンドの発生ロケーションにいる可能性がある。

[0012] 一態様によれば、少なくとも１つのプロセッサは、マイクロフォンアレイ上でマイクロフォンビームをキャプチャすることと、ここで、マイクロフォンビームは物理空間において第１のカラーで表示される、スピーカアレイからスピーカビームを送信することと、ここで、スピーカビームは、物理空間において第２のカラーで表示され、第１のカラーは第２のカラーとは異なる、を行うようにさらに構成されうる。少なくとも１つのプロセッサは、次に、カラーヒートマップをマイクロフォンビームに適用するようにさらに構成され得、ここで、カラーヒートマップの主ローブは強い信号領域を表し、カラーヒートマップにおけるカラーの変化は弱い信号領域を表す。マイクロフォンアレイは、スピーカアレイと組み合わせられうる。代替的に、マイクロフォンアレイは、スピーカアレイとは別個である可能性がある。

[0013] 一実施形態によれば、サウンドプロジェクションパターンは、矢印のようなシンボルまたはビームパターンの形式でありうる。

[0014] 第３の例は、物理空間と通信状態にある、物理空間においてサウンドフィールドを表現するためのサウンドトランスデューサアレイを提供する。サウンドトランスデューサアレイは、物理空間からサウンドをキャプチャするための手段を含み得、ここで、サウンドは、物理空間と通信状態にあるサウンドトランスデューサアレイによって物理空間中に発せられる。物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットを含みうる。

[0015] サウンドトランスデューサアレイは、また、キャプチャされたサウンドのサウンドプロジェクションパターンを算出するための手段と、ここで、サウンドプロジェクションパターンは、キャプチャされたサウンドのサウンドフィールドの表現である、サウンドトランスデューサアレイと対象ユーザとの間に延びる物理空間上にサウンドプロジェクションパターンを表示するための手段とを含みうる。サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示されうる。

[0016] 一態様によれば、サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされ得、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドを含みうる。追加的に、サウンドトランスデューサアレイは、キャプチャされたサウンドの発生ロケーションを特定するために、キャプチャされたサウンドを処理するための手段を含みうる。対象ユーザは、キャプチャされたサウンドの発生ロケーションにいる可能性がある。

[0017] 一態様によれば、サウンドトランスデューサアレイは、別個のマイクロフォンアレイおよびスピーカアレイを備えうる。マイクロフォンアレイがスピーカアレイとは別個であるとき、サウンドトランスデューサは、マイクロフォンアレイ上でマイクロフォンビームをキャプチャし、物理空間において第１のカラーで表示するための手段と、スピーカアレイからスピーカビームを送信するための手段とをさらに備え得、ここで、スピーカビームは、物理空間において第２のカラーで表示され、第１のカラーは第２のカラーとは異なる。サウンドトランスデューサは、カラーヒートマップをマイクロフォンビームに適用するための手段をさらに備え得、ここで、カラーヒートマップの主ローブは強い信号領域を表し、カラーヒートマップにおけるカラーの変化は弱い信号領域を表す。

[0018] 一態様によれば、サウンドトランスデューサアレイは、組み合わせられたマイクロフォンおよびスピーカアレイを備えうる。マイクロフォンアレイがスピーカアレイと組み合わせられているとき、サウンドトランスデューサは、マイクロフォンアレイ上でマイクロフォンビームをキャプチャし、物理空間において第１のカラーで表示するための手段と、スピーカアレイからスピーカビームを送信するための手段とをさらに備え、ここで、スピーカビームは、物理空間において第２のカラーで表示され、第１のカラーは第２のカラーとは異なる。サウンドトランスデューサは、カラーヒートマップをマイクロフォンビームに適用するための手段をさらに備え得、ここで、カラーヒートマップの主ローブは強い信号領域を表し、カラーヒートマップにおけるカラーの変化は弱い信号領域を表す。

[0019] 一実施形態によれば、サウンドプロジェクションパターンは、矢印のようなシンボルまたはビームパターンの形式でありうる。

[0020] 第４の例は、物理空間においてサウンドフィールドを表現するための１つまたは複数の命令を含むコンピュータ可読記憶媒体を提供し、この１つまたは複数の命令は、少なくとも１つのプロセッサによって実行されると、物理空間からサウンドをキャプチャすることと、ここで、サウンドは、物理空間と通信状態にあるサウンドトランスデューサアレイによって物理空間中に発せられる、キャプチャされたサウンドのサウンドプロジェクションパターンを算出することと、ここで、サウンドプロジェクションパターンは、キャプチャされたサウンドのサウンドフィールドの表現である、を少なくとも１つのプロセッサに行わせる。次に、少なくとも１つのプロセッサは、サウンドトランスデューサアレイと対象ユーザとの間に延びる物理空間上にサウンドプロジェクションを表示しうる。サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示され得、物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットを含みうる。

[0021] 一態様によれば、サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされ得、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドを含みうる。追加的に、少なくとも１つのプロセッサは、キャプチャされたサウンドの発生ロケーションを特定するために、キャプチャされたサウンドを処理しうる。対象ユーザは、キャプチャされたサウンドの発生ロケーションにいる可能性がある。

[0022] 一態様によれば、サウンドトランスデューサアレイは、別個のマイクロフォンアレイおよびスピーカアレイを備えうる。マイクロフォンアレイがスピーカアレイとは別個であるとき、少なくとも１つのプロセッサは、マイクロフォンアレイ上でマイクロフォンビームをキャプチャし、物理空間において第１のカラーで表示す得ることに加え、スピーカアレイからスピーカビームを送信し得、ここで、スピーカビームは、物理空間において第２のカラーで表示され、第１のカラーは第２のカラーとは異なる。少なくとも１つのプロセッサは、カラーヒートマップをマイクロフォンビームに適用し得、ここで、カラーヒートマップの主ローブは強い信号領域を表し、カラーヒートマップにおけるカラーの変化は弱い信号領域を表す。

[0023] 一態様によれば、サウンドトランスデューサアレイは、組み合わせられたマイクロフォンおよびスピーカアレイを備えうる。マイクロフォンアレイがスピーカアレイと組み合わせられているとき、少なくとも１つのプロセッサは、マイクロフォンアレイ上でマイクロフォンビームをキャプチャし、物理空間において第１のカラーで表示することに加え、スピーカアレイからスピーカビームを送信し得、ここで、スピーカビームは、物理空間において第２のカラーで表示され、第１のカラーは第２のカラーとは異なる。少なくとも１つのプロセッサは、また、カラーヒートマップをマイクロフォンビームに適用し得、ここで、カラーヒートマップの主ローブは強い信号領域を表し、カラーヒートマップにおけるカラーの変化は弱い信号領域を表す。

[0024] 一実施形態によれば、サウンドプロジェクションパターンは、矢印のようなシンボルまたはビームパターンの形式でありうる。

[0025] 様々な特徴、性質、および利点は、同様の参照符号が全体にわたって相応に同一視される図面と併せて考慮された場合、以下で示される詳細な説明から明らかになるであろう。

図１は、サウンドトランスデューサアレイを使用する典型的なシステムの例を例示する。図２は、サウンドトランスデューサアレイと、タッチセンシティブスクリーンを有するデバイスとを含むシステムを例示する。図３は、音声通信用のプライバシーゾーンを作り出すために利用されるようなアレイの例を例示する。図４は、アレイを使用した空間化（spatialized）車両ナビゲーションシステムの例を例示する。図５は、サラウンドサウンド経験のためにアレイを利用することの例を例示する。図６は、互いに干渉することなく異なる方向に一斉に多数のオーディオプログラムを配信するためのアレイを利用することの例を例示する。図７は、一実施形態に係る、物理空間においてサウンドフィールドを表現することの例を例示する。図８は、サウンドフィールドがシンボル的に矢印で表現されるサウンドフィールド視覚化システムの例を例示する。図９は、一実施形態に係る、サウンドトランスデューサアレイが、話している個人（individual）に向けられていないことを示すサウンドフィールド視覚化画像を物理空間において表現することの例を例示する。図１０は、テーブル上に矢印として例示されるドラッギングコマンドを示す図９のタッチ面使用可能テーブル（touch surface-enabled table）を例示する。図１１は、アップデートされたサウンドフィールド視覚化画像として視覚化されている、アレイの調整されたサウンドフィールドを例示しており、それは、アレイが、上記個人からサウンドを受信するように現在適切に向けられていることを参加者に示す。図１２は、サウンドフィールド視覚化および制御システムのブロック図を例示する。図１３は、ユーザが、距離が互いに離れている２人の隣接した話者からのサウンドのピックアップを制御する必要のありうる通信会議システムまたはサウンドステージシナリオを例示する。図１４は、音声がアレイからのピックアップビームの重要な焦点（major focus）である極めて重要な話者（「ＶＩＰ」：very important talker）を有する図８のタッチ面使用可能テーブルを例示する。図１５は、一実施形態に係る、物理空間においてサウンドフィールドを表現するための概略方法のフローチャートを例示する。図１６は、いくつかの実装が使用しうるサウンドトランスデューサアレイの例を例示する。図１７は、いくつかの実装が使用しうるデバイスの例を例示する。図１８は、一実施形態に係る、１つまたは複数のタブレットを利用して物理空間においてサウンドフィールドを表現および制御するためのシステムを例示する。図１９Ａは、サウンドトランスデューサアレイおよびいくつかのデバイスを含むシステムを例示する。図１９Ｂは、サウンドトランスデューサアレイおよびいくつかのデバイスを含む別のシステムを例示する。図１９Ｃは、サウンドトランスデューサアレイ、中央モバイルデバイス、およびいくつかのデバイスを含む別のシステムを例示する。

[0047] 以下の説明では、本開示の様々な態様の完全な理解を与えるために、特定の詳細が示される。しかしながら、これらの態様がこれらの特定の詳細なしで実施されうることは、当業者によって理解されるであろう。例えば、不必要な詳細でこれら態様をあいまいにしないために、回路がブロック図で示されうる。他の事例では、周知の回路、構造、および技法は、本開示の態様をあいまいにしないために、詳細には示されない可能性がある。

[0048] 図１は、サウンドトランスデューサアレイを使用する典型的なシステムの例を例示する。示されるように、システムは、会議用テーブル１０１上に位置するサウンドトランスデューサアレイ１００を含む。サウンドトランスデューサアレイ１００は、異なる方向からのサウンド（または、オーディオ）をキャプチャするように配列された、いくつかのマイクロフォン／スピーカを含む。例として、４人の個人１０４−１１０が会議用テーブルの周りに位置しうる。１人の個人１０６が話しており、このサウンドは、サウンドトランスデューサアレイ１００によってキャプチャされる。しかしながら、キャプチャされたサウンドのサウンドフィールドは、シンボル的にも視覚的にも会議用テーブル上に表現されていない。その結果、サウンドトランスデューサアレイ１００が、話している個人１０６に集中している（focus）ことおよび／またはサウンドをキャプチャしていることの確証はない。

[0049] 物理空間（例えば、物理的サーフェス）においてサウンドフィールドを表現および制御するための方法および装置の様々な態様が、サウンドトランスデューサアレイ（本明細書では「サウンドトランスデューサアレイ」、「トランスデューサアレイ」、または単純に「アレイ」と呼ばれる）をタッチ面使用可能ディスプレイテーブルとともに含むシステムで具現化されているものとして本明細書で説明される。アレイは、トランスデューサのグループ（多数のスピーカおよび／またはマイクロフォン）を含みうる。アレイは、サウンド再生（アレイが多数のスピーカを含む構成では）、またはサウンドピックアップ（アレイが多数のマイクロフォンを含む構成では）が、特定の方向に集中した空間パターンを、他の方向からの妨害を減らすと同時に有するように、トランスデューサのグループについて信号の空間処理を行うように構成されうる。

[0050] 図２は、サウンドトランスデューサアレイと、タッチセンシティブスクリーンを有するデバイスとを含むシステムを例示する。図２に示されるように、システムは、サウンドトランスデューサアレイ２００およびデバイス２０１を含みうる。

[0051] いくつかの実装では、サウンドトランスデューサアレイ２００は、少なくとも１つのプロセッサ、メモリ、いくつかのマイクロフォンおよびスピーカ、少なくとも１つのトランシーバ、いくつかの誘導性素子(inductive element)、コンパス、少なくとも１つの通信インターフェース、ならびに少なくとも１つの識別情報マーカを含みうる。サウンドトランスデューサアレイ２００のマイクロフォンおよびスピーカは、異なる方向からのサウンド、オーディオ、またはマイクロフォンビームをキャプチャし、それぞれ、物理空間において表示されるスピーカビームを送信するように配列されうる。例えば、マイクロフォンおよびスピーカは、線形に、円形で、またはその他の配列で配列されうる。サウンドトランスデューサアレイ２００は、通信インターフェースおよび少なくとも１つのトランシーバを使用することによってデバイス２０１と通信しうる。いくつかの実装では、トランシーバは、サウンドトランスデューサアレイ２００とデバイス２０１との間にワイヤレス通信リンク（データを受信および送信するための）を提供する。異なる実装は、サウンドトランスデューサアレイ２００とデバイス２０１との間の通信するために異なる通信プロトコルを使用しうる。通信プロトコルの例には、近接場通信（ＮＦＣ）、Ｗｉ−Ｆｉ（登録商標）、ブルートゥース（Bluetooth（登録商標））、ＺｉｇＢｅｅ（登録商標）、デジタルリビングネットワークアライアンス（ＤＬＮＡ）、およびエアプレイが含まれる。

[0052] いくつかの実装では、コンパスは、サウンドトランスデューサアレイ２００がその方位を決定する方法を提供する。方位情報は、いくつかの実装において、サウンドトランスデューサアレイの位置および／または方位を決定するために、内部で使用されうるか、他のデバイス（例えば、デバイス２０１）に渡されうる。誘導性素子もまた、サウンドトランスデューサアレイの位置および／または方位を決定するために使用されうる。例えば、誘導性素子は、タッチセンシティブスクリーン上でサウンドトランスデューサアレイの位置および方位を決定するために、デバイス（例えば、デバイス２０１）によって使用されうる。識別情報マーカはまた、マイクロフォンおよびスピーカの位置および／または方位を決定するために使用されうる。

[0053] 上の説明は、サウンドトランスデューサアレイの可能性のある構成要素／要素の概略である。サウンドトランスデューサアレイの構成要素／要素についてのより詳細な説明は、図１６を参照して以下にさらに説明されるだろう。

[0054] さらに、図２に示されるように、デバイス２０１は、タッチセンシティブスクリーン２０２を含みうる。タッチセンシティブスクリーン２０２は、サウンドの触知可能な制御を提供するために使用されうる。タッチセンシティブスクリーン２０２は、ユーザの動き（例えば、タッチスクリーン上の指の動き）を感知およびキャプチャするためにも使用されうる。いくつかの実装では、デバイス２０１およびタッチセンシティブスクリーン２０２は、サーフェステーブル（surface table）に統合される。

[0055] タッチセンシティブスクリーン２０２に加えて、デバイス２０１は、また、少なくとも１つのプロセッサ、メモリ、少なくとも１つのトランシーバ、および少なくとも１つの通信インターフェースを含みうる。いくつかの実装では、上の構成要素は、デバイス２０１が、サウンドトランスデューサアレイ２００、ローカルおよびリモートコンピュータ、ワイヤレスデバイス（例えば、電話）、ポータブルコンピュータデバイス（例えば、タブレット）と通信することを可能にする。デバイス２０１の構成要素／要素は、図１７を参照して以下でさらに説明されるだろう。

[0056] 物理空間においてサウンドフィールドを表現および制御するためのシステムの様々なデバイスおよび構成要素の概略を提供したので、以降、これらのデバイスがそのようなシステムでどのように使用されるかについての詳細な説明が説明されるだろう。アレイについてのいくつかの例となるユースケースが、図３−６を参照して説明される。これらのユースケースは、会議用テーブルのようなサーフェステーブル上に、あるいは、１つまたは複数のタブレット上に表示され得、ここで、各個人は別個のタブレットを有する。複数の個人の各々がタブレットを利用するシステムは、図１８を参照して以下でさらに説明される。

[0057] 図３は、音声通信用のプライバシーゾーンを作り出すために利用されるアレイの例を例示する。示されるように、リスナは、「明るい」ゾーン内におり、４人の潜在的な盗聴者（eavesdropper）が「暗い」ゾーン内に位置している。これらのゾーンは物理空間上に例示され、これにより、この物理空間（例えば、会議用テーブル）の周りに座っている複数の個人は、「明るい」ゾーンを表すパターンと１つまたは複数の「暗い」ゾーンを表すパターンとを視覚化することができる。「明るい」ゾーン内の一個人が対象サウンドを聞きうる間、「暗い」ゾーン内の一個人（または複数の個人）は、明るいゾーンにおけるサウンドのミュートバージョンを聞くか、または、明るいゾーンにおけるサウンドの認識不可能なバージョンを聞きうる。認識不可能なバージョンのサウンドは、明るいゾーンにおけるサウンドのマスクされたバージョンでありうる。ビームフォーミング技法または他の空間オーディオ技法が、明るいゾーンおよび暗いゾーンを形成する際に適用されうる。これらの技法についてのさらなる説明は、２０１２年１０月３１日に出願された「Systems, Methods, and Apparatus for Producing a Directional Sound Field」と題する米国実用特許出願第１３／６６５５９２号（代理人管理番号１１２６３９）で見つけられうる。

[0058] 明るいゾーンおよび暗いゾーンの表現は、また、サウンドがサウンドトランスデューサアレイ内のスピーカから発散しているときに視覚的に表示されうる。そのような実施形態では、例示されるリスナは、音声通信呼中であり得、潜在的な盗聴者がリスナの会話を聞くことを阻止するためにサウンドトランスデューサアレイを使用している可能性がある。例えば、明るいおよび暗いゾーンパターンの表示が本明細書でさらに説明されるように、サーフェステーブル上にありうる。

[0059] 音声通信のためのプライバシーゾーンの異なる変形例は、上述されたプライバシーゾーンを作り出すのと同様の技法を使用することであるが、リスナおよび盗聴者は、例えば、図６に示されるように、全員異なるプログラムを聞いている。そのような変形例では、物理空間上に例示されるパターンは、各々、プログラムを表すパターンでありうる。異なる構成では、例示されるパターンは、また、プログラムを聞くためのプライバシーゾーンを表しうる。例えば、物理空間の周りの各人物（person）は、異なるサウンドレコーディングまたはサウンドストリーム（例えば、３つのラジオ局）を聞いている可能性がある。明るいゾーンおよび暗いゾーンは、人物ごとに個人化されうる（individualized）。１つの可能性のある実装は、例えば、３人の人物がいる場合、３つのプライバシーゾーンをオーバレイし、これら３つのプライバシーゾーンの各々の表現を、１つの物理空間において表示することである。したがって、各人物は、事実上、他の人物に対して彼ら自身のプライバシーゾーンを有する。

[0060] 図４は、アレイを使用した空間化車両ナビゲーションシステムの例を例示する。この例では、進路を指示する音声コマンドの各々のサウンドは、リスナが曲がるべき方向から発生しているように見受けられうる。

[0061] 図５は、サラウンドサウンド経験のためにアレイを利用することの例を例示する。

[0062] 図６は、互いに干渉することなく異なる方向に一斉に多数のオーディオプログラムを配信するためのアレイを利用することの例を例示する。

[0063] 上の使用例を実装するためのアレイについての信号の空間処理は、制御ソフトウェアによって提供されうる。ユーザは、サウンドフィールド生成およびピックアップパターン調整を構成および制御するために従来の「キーボードとマウス」インターフェースを使用して制御ソフトウェアとインタラクトしうるが、従来のインターフェースは、依然として、サウンドフィールドを制御する際に抽象的なアプローチしか提供しない。さらに、このインターフェースは、サウンドが生じたのと同じロケーションにある必要がある。

[0064] 図７は、一実施形態に係る、物理空間においてサウンドフィールドを表現することの例を例示する。このシステムでは、サウンドトランスデューサアレイによってキャプチャされたサウンドのグラフィカル表現が、サウンドフィールドの物理空間において並置されうる。グラフィカル表現は、サウンドプロジェクションパターン（例えば、１つまたは複数の物理波フィールド）の形式でありうる。

[0065] 示されるように、このシステムは、サウンドトランスデューサアレイ７００およびデバイス７０１を含みうる。いくつかの実装では、デバイス７０１は、テーブルの一部でありうる。サウンドトランスデューサアレイ７００は、異なる方向からのサウンド／オーディオをキャプチャするように配列された、いくつかのマイクロフォン／スピーカを含みうる。マイクロフォンは、線形に、円形で、またはその他の配列で配列されうる。デバイス７０１は、タッチセンシティブスクリーン７０２を含みうる。タッチセンシティブスクリーン７０２は、キャプチャされたサウンドのサウンドフィールドのグラフィカル表現を物理空間において表示するためのものでありうる。サウンドに関する予備情報もまた、タグ付けされたアレイのまわりに、テキストでまたはチャートで表示されることができる。サウンドを何か変える必要がある場合、タッチスクリーンは、個人（または、ユーザ）がサウンドを修正することを許可する何らかの制御を提供することができる。

[0066] サウンドトランスデューサアレイ７００は、特定の通信プロトコルを使用する少なくとも１つのワイヤレス通信リンクを使用してデバイス７０１と通信しうる。通信プロトコルの例には、近接場通信（ＮＦＣ）、Ｗｉ−Ｆｉ、ブルートゥース、ＺｉｇＢｅｅ、デジタルリビングネットワークアライアンス（ＤＬＮＡ）、およびエアプレイが含まれる。

[0067] さらに、図７は、タッチセンシティブスクリーン７０２を有するデバイス７０１を会議テーブルの一部として例示し、そのテーブルの周りには、ミーティング／会議に参加している４人の個人７０４−７０１が座っている。図７に示されるように、サウンドトランスデューサアレイ７００は、デバイス７０１のスクリーン７０２の上に配置されうる。

[0068] サウンドトランスデューサアレイ７００から、マイクロフォンおよびスピーカについての実際のフィルタ情報が入手可能である。この情報から、３Ｄ空間におけるサウンドプロジェクションパターンまたはマイクロフォンピックアップパターン（このケースでは、２Ｄの水平空間が情報の大半を含む）が算出されうる。この情報は、上述されたような、ブルートゥース、近接場通信、ＤＬＮＡ、等のワイヤレスプロトコルを介してサーフェステーブルに送信されうる。この情報を用いて、様々なコンピュータグラフィカル視覚化が生成されうる。一般のグラフィックスは、２Ｄ音圧（sound pressure）またはその際立たせたバージョンと一致する２Ｄグラフィックスでありうる。グラフィックスの原点（origin）は、サウンドトランスデューサアレイ７００の中心にアンカーされ得、それが動くとシフトしうる。いくつかの実装では、超音波／赤外線／音波パルスが、サウンドトランスデューサアレイ７００の位置を決定するために使用されうる。他の実装では、サウンドトランスデューサアレイ７００は、近接場通信（ＮＦＣ）タグを含み得、これは、デバイス７０１が、サウンドトランスデューサアレイ７００の位置を決定することを可能にする。このように、サウンドフィールドアレイの表現（すなわち、シンボル化および表現）は、空間において実際のサウンドフィールドと配列されうる。

[0069] 図８は、サウンドフィールドが矢印でシンボル的に表現されるサウンドフィールド視覚化システムの例を例示する。矢印は、サウンドトランスデューサアレイ７００から、キャプチャされたサウンドの発生ロケーションに延びうる。

[0070] 図９は、一実施形態に係る、サウンドトランスデューサアレイが、話している個人に向けられていないことを示すサウンドフィールド視覚化画像を物理空間において表現することの例を例示する。

[0071] サウンドフィールド生成およびピックアップパターンとインタラクトする際に、より直観的および直接的なアプローチを提供するために、個人（またはユーザ）が直接「サウンドにタッチすること」を可能にする新規かつ自明なシステムが本明細書で説明される。開示されるアプローチの一態様では、図９に例示されているタッチ面使用可能テーブル９２０は、タッチスクリーンディスプレイ面（「テーブル面（table surface）」）９２２上にタッチスクリーンインターフェースおよび他のセンサを含みうる。サウンドトランスデューサアレイ（「アレイ」）９３０のような、タグ付けされたオブジェクトが、テーブル９２０の上にまたは近くに配置されうる。図９で説明される例は、通信会議に参加しており、会議用テーブルのようなタッチ面使用可能テーブル９２０の周りに位置している４人の個人９０２、９０４、９０６、および９０８を含む。一個人９０６が話しており、その個人からのサウンドがアレイ９３０によってキャプチャされている。

[0072] アレイ９３０は、異なる方向からの／へのサウンド（またはオーディオ）をキャプチャ／生成するように配列されたいくつかのマイクロフォン／スピーカを含みうる。マイクロフォンは、線形に、円形で、またはその他の配列で配列されうる。これらのオブジェクトについての情報およびグラフィックスがテーブル９２０上に表示されうる。例えば、空間処理パラメータ（「サイドローブ除去：２０ｄＢ」および「ビーム幅：１５度」と例示されている）、話している人の識別情報（「スピーカ：ハイディ」と例示されている）、および時間情報（「ミーティング残り時間：２０分」と例示されている）のような、通信会議に関するパラメータを描写するグラフィカル情報要素９５０がテーブル面９２２上に表示されうる。

[0073] 加えて、アレイ９３０のようなサウンドデバイスであるタグ付けされたオブジェクトの場合、サウンド放射のグラフィカル表現および／またはマイクロフォンピックアップパターンはそれらの近くで視覚化されうる。いくつかの実装では、超音波／赤外線／音波パルスが、アレイ９３０の位置を決定するために使用される。他の実装では、アレイ９３０は、近接場通信（ＮＦＣ）タグを含み得、これは、テーブル９２０が、アレイ９３０の位置および相対的な方位を決定することを可能にする。このように、アレイ９３０に関する任意のサウンドプロジェクションパターンの表現（すなわち、シンボル化および表現）は、関連性のある実際のサウンドフィールドと空間的に配列されうる。例えば、サウンドプロジェクションパターン（または、フィールド視覚化画像）９５２が、キャプチャされたサウンドのサウンドフィールドの表現のために、テーブル面９２２上に表示されうる。サウンドフィールド視覚化画像９５２は、アレイ９３０が、話している個人９０６に集中していることおよび／またはサウンドをキャプチャしていることの視覚的な確証を提供しうる。図９で見受けられうるように、サウンドフィールド視覚化画像９５２は、アレイ９３０が、話している個人９０６に―そうされるべきであったとしても―向けられていない参加者を視覚的に示しうる。

[0074] 開示されるアプローチの一態様では、タッチスクリーン制御ソフトウェアが、アレイ９３０の空間処理特性を修正するために使用されうる。タッチスクリーン制御ソフトウェアは、サウンドフィールド視覚化および制御システム（「サウンドフィールドシステム」）１２００の一部として実装され、この一例が図１２に描写される。サウンドフィールドシステム１２００において、アレイ９３０は、様々な通信技術を使用する任意の数のワイヤレス通信リンク１２９０を使用してテーブル９２０と通信しうる。

[0075] アレイ９３０から、そこに含まれるマイクロフォンおよびスピーカについての実際のフィルタ情報が入手可能である。この情報から、３次元（３Ｄ）空間（このケースでは、テーブル面９２２に対して水平な２次元（２Ｄ）平面が情報の大半を含む）におけるサウンドプロジェクションパターンまたはマイクロフォンピックアップパターンが決定されうる。この情報は、ワイヤレス通信リンク１２９０を介してサーフェステーブルに送信されうる。テーブル面９２２が、サウンドプロジェクションパターンの挙動の視覚的な相対物（「グラフィック視覚化」１２２２と示される）を表示すると同時に、テーブル９２０は、マルチタッチおよび他のコマンドセンサ（「マルチタッチコマンド１２２４」と例示される）を有する触知可能なインターフェースとしても機能しうる。

[0076] 一実施形態によれば、ユーザインターフェースは、個人（または、ユーザ）が、所望の動作を選択することを可能にするために、物理空間上に表示されうる。この所望の動作は、１つまたは複数のサウンドプロジェクションパターンを、それへの第２の動作の適用のために選択すること、または、１つまたは複数のサウンドプロジェクションパターンからなる１つまたは複数の仮想グルーピングを作り出すことを備えうる。グラフィカル表現は、１つまたは複数の仮想グルーピングの例示を備え得、この例示は、１つまたは複数の仮想レイヤを備え得、１つまたは複数の仮想グルーピングの各々は、１つまたは複数の仮想レイヤのうちの少なくとも１つに対応する。

[0077] 個人（または、ユーザ）は、リアルタイムでまたはほぼリアルタイムで視覚フィードバックを受け取ると同時に、タッチ面とインタラクトすることによって、視覚化されたサウンドプロジェクションパターンに関連するパラメータを直接的かつ直観的に調整しうる。可能性のあるインタラクション様式は、個人がタッチ面上で１つまたは複数のコマンドを実行することを含みうる。コマンドは、サウンドトランスデューサアレイに関連付けられた１つまたは複数のサウンドプロジェクションパターン（例えば、１つまたは複数の物理波フィールド）のグラフィカル表現を操作するために使用されうる。コマンドは、テキストの形式であり得、キーボード、マウス、ボタン、バー、メニュー、またはソフトウェアにおけるそれらの相対物からの通信である。コマンドはまた、タッチ面上のディスプレイの変化から受け取った視覚フィードバックに基づいて調整されることができるジェスチャでありうる。ジェスチャは、コンピュータマウスの代わりに、個人の指を用いて行われうる。ジェスチャには、多数の（２重または３重の）タッピングによってサウンドプロジェクションパターンを選択すること、そのパターンの周りに２回以上円を描くこと、異なるビームを異なる仮想レイヤに送ること、１つまたは複数のビームを一時的に隠すこと、１つまたは複数のビームを選択すること、多数のサウンドプロジェクションパターンをまとめてグルーピングしてグループ方式でそれらを操作すること、および／または、ビームまたはグルーピングが調節および強調されうるようになるために、ビームまたはグルーピングが選択された時点での追加のグラフィック効果のアプリケーションを操作すること、が含まれうるがそれらに限られるわけではない。

[0078] 図９の例に戻り、グラフィック視覚化１２２２は、アレイ９３０から受け取られる情報（「サウンド入力および出力パターン、サイド情報１２３２」として例示される）を用いて生成されうる。一般のグラフィックスは、２Ｄ音圧またはその際立たせたバージョンと一致する２Ｄグラフィックを含みうる。図９に例示される例では、サウンドフィールド視覚化画像９５２は、キャプチャされたサウンドについての２Ｄサウンドフィールドを視覚的に表現しうる。開示されるアプローチの一態様では、グラフィックスの原点は、アレイ９３０の中心にアンカーされ得、アレイ９３０が動くとシフトしうる。

[0079] 図９で示されるように、サウンドフィールド視覚化画像９５２は、アレイ９３０が、たとえそれが向けられるべきであっても、話している個人９０６に向けられていないことを参加者に視覚的に示し、参加者のいずれか１人は、アレイ９３０のサウンドフィールドを個人９０６の方にリダイレクトするためのジェスチャを行いうる。テーブル面９２２から受け取ったマルチタッチコマンド１２２４に基づく情報のような制御情報は、アレイ９３０の特性（「サウンドフィールド境界線、強度、方向、等」１２３４と例示される）を変更することによって、アレイ９３０を制御するために使用されうる。したがって、個人９０６は、矢印１００２で図１０に例示されるドラッギングコマンドをテーブル面９２２上で行い、アレイ９３０をリダイレクトしうる。図１１は、アップデートされたサウンドフィールド視覚化画像１１５２として視覚化されている、アレイ９３０の調整されたサウンドフィールドを例示しており、これは、個人９０６からのサウンドを受信するためにアレイ９３０が現在適切に向けられていることを参加者に示す。したがって、ユーザは、文字通り「サウンドにタッチすること」を行い、ビームパターンをリダイレクトすること、新しいビームパターンを描くこと、パラメータ値を調整すること、等の動作を行い、サウンドフィールドが操作されていることに伴う視覚的変化を見ることができる。

[0080] 図１３に例示されている通信会議システムまたはサウンドステージシナリオ１３００のような別の例では、ユーザは、互いに距離が離れている２人の隣接した話者１３０２、１３０４からのサウンドのピックアップを制御する必要がありうる。隣接した話者１３０２、１３０４の間をカバーする距離が広いため、アレイ９３０からのピックアップビームは、このピックアップビームが、話者１３０２、１３０４をカバーするのに十分な幅になるように、しかしながら、背景雑音のようなスプリアスのサウンドをピックアップするほど広くなりすぎないように調整される必要がありうる。面９２２上に表示されるサウンドフィールド視覚化画像１３５２によって例示されているように、視覚的にピックアップビームを見ることができるようになると、参加者は、アレイ９３０からのピックアップビームが狭すぎることを見ることができる。すなわち、ユーザは、設定されるように、アレイ９３０からのピックアップビームが十分に広くないことを見ることができる。この例では、例えば、２つの手を使用して、ユーザは、矢印１３９２、１３９４で例示されているように、テーブル９２０に対して、アレイ９３０からのピックアップビームの「拡大」をジェスチャしうる。次に、テーブル９２０は、ユーザがより広いビームを望むことをアレイ９３０に通信しうる。アレイ９３０は、その内蔵フィルタを適切に調整し得、テーブル９２０は、テーブル面９２２上により広いビームを視覚化し得、これらはすべてすべてをリアルタイムでまたはほぼリアルタイムである。

[0081] 通常、アレイ９３０は、ピックアップビームが話している人に向けられるように自動的に切り替わりうるように、話している人を追跡しうる。図９の例を参照すると、図１４でさらに修正されうるように、音声がアレイ９３０からのピックアップビームの重要な焦点である極めて重要な話者（「ＶＩＰ」）１４１０が存在しうる。システムは、ＶＩＰ１４１０が話していることは何も聞き逃すべきではなく、個人９０２、９０４、９０６、および９０８のような他の個人からの何らかのコンテンツを失うことを犠牲にしうる。この例えは、３重にタッピングすること、または、ＶＩＰ１４１０の方向に円を２回描くことといったジェスチャにより、アレイ９３０からのピックアップビームは、ＶＩＰ１４１０を追跡するようにロックされ得、アレイ９３０は、ＶＩＰ１４１０だけを記録しうる。サウンドフィールド視覚化画像１４５２は、アレイ９３０からのピックアップビームの現在の方向を関係者に示すためにテーブル面９２２上に表示され得、ロックアイコン１４５４も、それに加え他の視覚インジケーションもまた、ピックアップビームがロックモードであることを示すためにテーブル面９２２上に出現しうる。ユーザは、ピックアップビームをアンロックするために別のジェスチャを使用しうる。

[0082] 本明細書で説明される様々な態様はまた、タブレットまたは他のタッチスクリーンデバイスに拡張され得、ここで、アレイもまた、タブレットデバイス上に、タグ付けされ表現されうる。例えば、多くの参加者は、各々、テーブル９２０とともにシステムの一部として統合されうるサウンドトランスデューサアレイに関連付けられたタブレットデバイスを有しうる。

[0083] 物理空間においてサウンドフィールドを表現するためのシステムの様々なデバイスおよび構成要素の概略を提供したので、以降、これらのデバイスがそのようなシステムでどのように使用されるかについての詳細な説明が説明される。

[0084] 図１５は、一実施形態に係る、物理空間においてサウンドフィールドを表現するための概略な方法のフローチャートを例示する。図１５に示されるように、サウンドは、物理空間からキャプチャされ得、この場合、サウンドは、物理空間と通信状態にあるサウンドトランスデューサアレイによって物理空間へと発せられる１５０２。サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされ得、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドを含みうる。物理空間は、例えば、ディスプレイスクリーン、タッチセンシティブスクリーン、またはタブレットでありうる。次に、キャプチャされたサウンドのサウンドプロジェクションパターンが算出され得、ここで、サウンドプロジェクションパターンは、キャプチャされたサウンドのサウンドフィールドの表現である１５０４。サウンドプロジェクションパターンは、例えば、矢印のようなシンボルまたはビームパターンの形式でありうる。サウンドプロジェクションパターンが算出された後、サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで物理空間上に表示され、サウンドトランスデューサアレイと対象ユーザとの間に延びうる１５０６。

[0085] 一実施形態によれば、ひとたびサウンドがキャプチャされると、キャプチャされたサウンドは、キャプチャされたサウンドの発生ロケーションを識別するために処理されうる。対象ユーザは、キャプチャされたサウンドの発生ロケーションにいる可能性がある。

[0086] 一実施形態によれば、サウンドトランスデューサアレイは、組み合わせられたマイクロフォンおよびスピーカアレイを備えうる。マイクロフォンビームは、サウンドトランスデューサアレイ上でキャプチャされ、物理空間において第１のカラーで表示され得、スピーカビームは、サウンドトランスデューサアレイから送信され、物理空間において第２のカラーで表示され得、ここで、第１のカラーは第２のカラーとは異なる。カラーヒートマップがマイクロフォンビームに適用され得、ここで、カラーヒートマップの主ローブは強い信号領域を表し、カラーヒートマップにおけるカラーの変化は弱い信号領域を表す。

[0087] 別の実施形態によれば、サウンドトランスデューサアレイは、別個のマイクロフォンアレイと別個のスピーカアレイを備えうる。マイクロフォンアレイは、物理空間において第１のカラーで表示されうるマイクロフォンビームをキャプチャし得、スピーカアレイは、物理空間において第２のカラーで表示されるスピーカビームを送信し得、ここで、第１のカラーは第２のカラーとは異なる。マイクロフォンビームにカラーヒートが適用され得、ここで、カラーヒートマップの主ローブは強い信号領域を表し、カラーヒートマップにおけるカラーの変化は弱い信号領域を表す。

[0088] 図１６は、いくつかの実装が使用しうるサウンドトランスデューサアレイの例を例示する。図１６に示されるように、サウンドトランスデューサアレイ１６００は、少なくとも１つのプロセッサ／処理回路１６０２、メモリ１６０４、複数のマイクロフォンおよびスピーカ１６０６、いくつかの入力デバイス１６０８、少なくとも１つのトランシーバ１６１０、少なくとも１つのユーザインターフェースモジュール１６１２、および少なくとも１つの通信インターフェースモジュール１６１４を含みうる。

[0089] マイクロフォンおよびスピーカ１６０６は、サウンドおよび／または音声をキャプチャし、物理空間において表示されるスピーカビームを送信するために使用されうる。入力デバイス１６０８は、ユーザが、文字通り「サウンドにタッチする」を行い、ビームパターンをリダイレクトすること、新しいビームパターンを描くこと、パラメータ値を調整すること、等の動作を行い、サウンドフィールドが操作されることに伴う視覚的変化を見ることを可能にする
[0090] トランシーバ１６１０は、サウンドトランスデューサアレイが、他のデバイス（例えば、電話、コンピュータ、タブレット、サウンドトランスデューサアレイ）からのワイヤレス信号を送信および受信することを可能にしうる。サウンドトランスデューサアレイは、多数のトランシーバを含み得、それは、サウンドトランスデューサアレイが、異なる通信リンクおよび異なる通信プロトコルを使用して異なるデバイスと通信すること（例えば、ワイヤレスに）を可能にする。いくつかの実装では、ユーザインターフェースモジュール１６１２は、マイクロフォン１６０６、入力デバイス１６０８、およびプロセッサ／処理回路１６０２の間にインターフェースを提供する。ユーザインターフェースモジュール１６１２は、いくつかのユーザインターフェースモジュール（例えば、各構成要素のためのモジュール）を含みうる。いくつかの実装では、通信インターフェースモジュール１６１４は、トランシーバ１６１０と、プロセッサ／処理回路１６０２との間にインターフェースを提供する。通信インターフェースモジュール１６１４は、いくつかのインターフェースモジュール（例えば、各トランシーバのためのモジュール）を含みうる。

[0091] 図１６に示されるように、プロセッサ／処理回路１６０２は、サウンド検出モジュール／回路１６１６、位置／方位モジュール／回路１６１８、サウンド処理モジュール／回路１６２０、およびコマンドモジュール／回路１６２２を含みうる。

[0092] サウンド検出モジュール／回路１６１６は、サウンドを検出およびキャプチャするためのものでありうる。いくつかの実装では、サウンド検出モジュール／回路１６１６は、マイクロフォン１６０６からサウンドをキャプチャしうる。位置／方位モジュール／回路１６１８は、いくつかの実装では、サウンドトランスデューサアレイ１６００の位置および／または方位を決定するためのものでありうる。サウンド処理モジュール／回路１６２０は、マイクロフォン１６０６によってキャプチャされたサウンドを処理し、キャプチャされたサウンドのサウンドプロジェクションパターン（すなわち、１つまたは複数の物理波フィールドのグラフィカル表現）を算出し、物理空間上にグラフィカル表現を表示するためのものでありうる。コマンドモジュール／回路１６２２は、アレイのサウンドフィールドをリダイレクトするためのマルチタッチコマンド（または、ジェスチャ）に基づいて制御情報を処理するためのものでありうる。サウンドの処理は、キャプチャされたサウンドから個人のサウンドを抽出することを含みうる。サウンドの処理は、いくつかの実装では、話している人のアイデンティティを特定することも含みうる。

[0093] 図１７は、いくつかの実装が使用しうるデバイスの例を例示する。図１７に示されるように、デバイス１７００は、少なくとも１つのプロセッサ／処理回路１７０２、メモリ１７０４、タッチセンシティブスクリーン１７０６、いくつかの入力デバイス１７０８、少なくとも１つのトランシーバ１７１０、少なくとも１つのユーザインターフェースモジュール１７１２、および少なくとも１つの通信インターフェースモジュール１７１４を含みうる。

[0094] タッチセンシティブスクリーン１７０６は、物理空間においてサウンドフィールドのグラフィカル表現を表示するために使用されうる。タッチセンシティブスクリーン１７０６は、１つまたは複数のユーザからの入力を受信するためにも使用されうる。入力デバイス１７０８は、ユーザが、データを入力することおよび／またはデバイスの制御を提供することを可能にする。トランシーバ１７１０は、デバイスが、他のデバイス（例えば、電話、コンピュータ、タブレット、サウンドトランスデューサアレイ）からのワイヤレス信号を送信および受信することを可能しうる。デバイスは、サウンドトランスデューサアレイが、異なる通信リンクおよび異なる通信プロトコルを使用して異なるデバイスと通信すること（例えば、ワイヤレスに）を可能にする多数のトランシーバを含みうる。いくつかの実装では、ユーザインターフェースモジュール１７１２は、タッチセンシティブスクリーン１７０６、入力デバイス１７０８、およびプロセッサ／処理回路１７０２の間にインターフェースを提供する。ユーザインターフェースモジュール１７１２は、いくつかのユーザインターフェースモジュール（例えば、各構成要素のためのモジュール）を含みうる。いくつかの実装では、通信インターフェースモジュール１７１４は、トランシーバ１７１０とプロセッサ／処理回路１７０２との間にインターフェースを提供する。通信インターフェースモジュール１７１４は、いくつかのインターフェースモジュール（例えば、各トランシーバのためのモジュール）を含みうる。

[0095] 図１７に示されるように、プロセッサ／処理回路１７０２は、サウンドトランスデューサアレイとインターフェース接続するためのサウンド検出モジュール／回路１７１６、サウンドトランスデューサアレイの位置を決定するための位置／方位モジュール／回路１７１８、サウンド処理モジュール／回路１７２０、およびコマンドモジュール／回路１７２２を含みうる。

[0096] サウンド検出モジュール／回路１７１６は、サウンドトランスデューサアレイとインターフェース接続するためのものでありうる。位置／方位モジュール／回路１７１８は、いくつかの実装では、サウンドトランスデューサアレイの位置および／または方位を決定するためのものでありうる。サウンド処理モジュール／回路１７２０は、いくつかの実装では、マイクロフォンによってキャプチャされたサウンドを処理するためのものでありうる。マイクロフォンは、デバイスに結合されたサウンドトランスデューサアレイのマイクロフォンでありうる。サウンドの処理は、キャプチャされたサウンドから個人のサウンドを抽出することを含みうる。サウンドの処理は、いくつかの実装では、話している人のアイデンティティを特定することも含みうる。コマンドモジュール／回路１７２２は、アレイのサウンドフィールドをリダイレクトするためのマルチタッチジェスチャに基づいて制御情報を処理するためのものでありうる。

[0097] 図１８は、一実施形態に係る、１つまたは複数のタブレットを利用して物理空間においてサウンドフィールドを表現および制御するためのシステムを例示する。図１８に示されるように、３人の個人１８００−１８０６は、各々、互いにまたはハブ１８１４と直接通信することができるタブレット１８０８−１８１２を有しうる。各タブレットは、各タブレット内の内部にまたは各タブレットの外部に位置しうるそれ自体のサウンドトランスデューサアレイ（すなわち、マイクロフォンおよびスピーカ）１８０９−１８１３を有しうる。

[0098] 図１９Ａは、追加のデバイスを使用して実装されうる別の構成を例示する。図１９Ａに示されるように、サウンドトランスデューサアレイ１９００は、いくつかのモバイルデバイス１９０２−１９０８（例えば、ハンドセット、タブレット）と通信状態にある。これらのモバイルデバイスの各々は、それぞれのユーザ／人物１９１０−１９１６に関連付けられうる。モバイルデバイスは、ハンドセット、タブレット、電話、スマートフォン、ポータブル電子デバイス、電子ノートパッド、および／または携帯情報端末（ＰＤＡ）でありうる。モバイルデバイスは、セルラネットワークおよび／または他の通信ネットワークを介して、他のデバイスと通信することができうる。

[0099] モバイルデバイス１９０２−１９０８は、ユーザが、サウンドトランスデューサアレイ１９００に「チェックイン」および／または登録する（例えば、マイクロフォンアレイ１９００の近くでモバイルデバイスをタップすることによってＮＦＣを使用してチェックインする）ことを可能にしうる。しかしながら、異なる実装は、異なる方法でサウンドトランスデューサアレイ１９００に「チェックイン」および／または登録しうる。例えば、モバイルデバイスは、サウンドトランスデューサアレイ１９００と通信するために別の通信プロトコルまたは通信リンク（例えば、ブルートゥース、ＷｉＦｉ（登録商標））を使用しうる。ひとたびユーザ／モバイルデバイスが「チェックイン」または登録されると、モバイルデバイスは、超音波／赤外線／音波パルス（または、他の既知のタグ）を使用してサウンドトランスデューサアレイによって追跡され得、それは、サウンドトランスデューサアレイ１９００がモバイルデバイスの位置／ロケーションを継続して知ることを可能にし、これは、結果として、サウンドトランスデューサアレイ１９００が、追跡されているモバイルデバイスに関連付けられたユーザの位置／ロケーションを知っていることを意味する。

[0100] 各モバイルデバイス１９０２−１９０８は、ユーザが、サウンドトランスデューサアレイ１９００に対してユーザおよび／またはデバイス（例えば、タブレット）の位置／ロケーションを特定することを可能にするそのそれぞれのスクリーン上にグラフィカルユーザインターフェースを提供しうる。すなわち、ユーザは、モバイルデバイスのスクリーン上にユーザの位置を示し得、それは、次に、サウンドトランスデューサアレイ１９００および／または別のデバイス（例えば、デバイス１００１）に送信される（例えば、ブルートゥース、ＷｉＦｉを介して）。モバイルデバイス（例えば、モバイルデバイス１９０２−１９０８）のスクリーン上のグラフィカルユーザインターフェースは、また、テキスト（例えば、転写されたキャプチャされた音声）を提供／表示しうる。そのようなテキストは、サウンドトランスデューサアレイ１９００からおよび／またはサウンドトランスデューサアレイ１９００と通信状態にある別のデバイスから提供／送信されうる。

[0101] サウンドトランスデューサアレイ１９００は、テーブル（示されない）上にまたはテーブル上に統合されたデバイスのタッチセンシティブスクリーン（示されない）上に位置しうる。同様に、モバイルデバイス１９０２−１９０８は、テーブル上にまたはテーブル上に統合されたデバイスのタッチセンシティブスクリーン上に配置されうる。

[0102] 図１９Ｂは、異なるデバイスを使用して実装されうる別の構成を例示する。図１９Ｂは、サウンドトランスデューサアレイ１９００がデバイス１９２０のタッチセンシティブスクリーン１９２２上に位置していること、および、ユーザの位置が、デバイス１９２０のタッチセンシティブスクリーン１９２２上のグラフィカルユーザインターフェース上で指定されていることを除いて図１９Ａに類似する。図１９Ｂに示されるように、モバイルデバイス１９０２−１９０８（例えば、ハンドセット、タブレット）は、サウンドトランスデューサアレイ１９００および／またはデバイス１９２０と通信状態にある（例えば、ブルートゥース、ＷｉＦｉを使用して）。

[0103] 図１９Ｂにさらに示されるように、ユーザは、グラフィカルユーザインターフェース要素の位置／ロケーションを指定することによって、サウンドトランスデューサアレイ１９００に対するそれらの位置を指定しうる。図１９Ｂに示されるように、グラフィカルユーザインターフェース上に表示される４つのグラフィカルユーザインターフェース要素１９３０−１９３６がスクリーン１９２２に示されている。各グラフィカルユーザインターフェース要素１９３０−１９３６は、特定のユーザおよび／またはモバイルデバイスに関連付けられうる。グラフィカルユーザインターフェース要素は、ユーザインターフェース要素が関連付けられたユーザを特定するテキストまたは画像（例えば、ＩＤ、名前、写真）を含みうる。異なる実装は、グラフィカルユーザインターフェース要素を異なった方法で提示しうる。いくつかの実装では、グラフィカルユーザインターフェース要素は、ユーザがスクリーンをタップすることおよび／またはログインすることで提示される。いくつかの実装では、グラフィカルユーザインターフェース要素は、ユーザが、図１９Ａで上に説明された例示的な方法のうちの１つを使用してサウンドトランスデューサアレイ１９００および／またはデバイス１９２０に「チェックイン」および／または登録する（例えば、サウンドトランスデューサアレイ１９００および／またはデバイス１９２０をタッピングすることによってＮＦＣを使用してチェックインする）とき提示されうる。モバイルデバイス１９０２−１９０８がサウンドトランスデューサアレイ１９００および／またはデバイス１９２０と通信状態にあるため、モバイルデバイス１９０２−１９０８は、サウンドトランスデューサアレイ１９００およびデバイス１９２０の一方またはそれら両方からデータを受信しうる。そのようなデータは、モバイルデバイス１９０２−１９０８のスクリーン上に提示／表示されうる。データの例には、いくつかの実装では、キャプチャされた音声の転写されたテキストが含まれる。

[0104] いくつかの実装では、デバイス１９２０は、モバイルデバイス（例えば、タブレット、ハンドセット）である。これは、モバイルデバイスのスクリーンサイズが、モバイルデバイスのスクリーン上に配置されるべきサウンドトランスデューサアレイ１９００に対して十分に大きい場合に可能でありうる。そのような事例では、モバイルデバイスは、サウンドトランスデューサアレイ１９００が配置されている中央モバイルデバイス（例えば、中央タブレット）として機能しうる。図１９Ｃは、中央モバイルデバイス（例えば、中央タブレット）を含む構成の例を例示する。図１９Ｃに示されるように、モバイルデバイス１９０２−１９０８（例えば、ハンドセット、タブレット）は、サウンドトランスデューサアレイ１９００および／または中央モバイルデバイス１９４０と通信状態にある（例えば、ブルートゥース、ＷｉＦｉを使用して）。中央モバイルデバイス１９４０は、サウンドトランスデューサアレイ１９００が配置されうるタッチセンシティブスクリーン１９４２を含む。いくつかの実装では、モバイルデバイス１９０２−１９０８はいずれも中央モバイルデバイスとして機能しうることに留意されたい。

[0105] 図１９Ｃの構成は、図１９Ｂのデバイス１９２０（これはサーフェステーブル／サーフェスタブレットでありうる）が、他のモバイルデバイス（例えば、モバイルデバイス１９０２−１９０８）と通信状態にある中央モバイルデバイスとして機能しうるモバイルデバイス１９４０（例えば、タブレット、スマートフォン）と置き換えられている点を除いて図１９Ｂの構成に類似しうる。いくつかの実装では、図１９Ｃに示される構成の動作は、図１９Ａ−１９Ｂに示され、説明された構成の動作に類似する。すなわち、例えば、いくつかの実装では、ユーザは、ＮＦＣまたは他の通信プロトコル／リンク（例えば、ブルートゥース、ＷｉＦｉ）を使用して、サウンドトランスデューサアレイ１９００および／または中央モバイルデバイス１９４０に「チェックイン」、登録、および／またはログインしうる。

[0106] 「例示的（な）」という用語は、本明細書で使用される場合、「実例、事例、または例示を提供する」という意味で用いられる。「例示的」なものとして本明細書で説明された任意の実装または態様は、必ずしも、本開示の他の態様よりも好ましい、または利点を有するものと解釈されるべきではない。同様に、「態様」という用語は、本開示のすべての態様が、説明された特徴、利点、または動作モードを含むことを必要としない。「結合（された）」という用語は、本明細書において、２つのオブジェクト間の直接的または間接的な結合を指すために使用される。例えば、オブジェクトＡがオブジェクトＢに物理的に接触しており、オブジェクトＢがオブジェクトＣに接触している場合、オブジェクトＡとＣとは、それらが互いに直接物理的には接触していない場合であっても、依然として、互いに結合しているものとして考えられうる。例えば、ダイの基板は、そのダイの基板がパッケージング基板と直接物理的に接触していない場合であっても、パッケージング基板に結合されうる。

[0107] 図１，２，３，４，５，６，７，８，９，１０，１１，１２，１３，１４，１５，１６，１７，１８および／または１９に例示される構成要素、ステップ、特徴、および／または機能のうちの１または複数は、単一の構成要素、ステップ、特徴、または機能へと組み合わされるおよび／または並べ換えられうるか、あるいはいくつかの構成要素、ステップ、または機能に組み込まれうる。追加の要素、構成要素、ステップ、および／または機能もまた、本発明から逸脱することなく追加されうる。

[0108] また、これら実施形態が、フローチャート、フロー図、構造図、またはブロック図として描写されるプロセスとして説明されうることに留意されたい。フローチャートは、動作を順次プロセスとして説明しうるが、これら動作の多くは並行してまたは同時に行われうる。加えて、動作の順序は並べ換えることができる。プロセスは、その動作が完了したときに終了する。プロセスは、方法、関数、プロシージャ、サブルーチン、サブプログラム、等に対応しうる。プロセスが関数に対応するとき、その終了は、呼び出し関数または主関数に関数の復帰に対応する。

[0109] さらに、記憶媒体は、データを記憶するための１つまたは複数のデバイスを表すことができ、それには、読取専用メモリ（ＲＯＭ）、ランダムアクセスメモリ（ＲＡＭ）、磁気ディスク記憶媒体、光学記憶媒体、フラッシュメモリデバイス、および／または情報を記憶するための他の機械可読媒体が含まれる。「機械可読媒体」または「機械可読記憶媒体」という用語には、ポータブルまたは固定記憶デバイス、光学記憶デバイス、ワイヤレスチャネル、ならびに命令（１または複数）および／またはデータを記憶、包含、または搬送する能力のある様々な他の媒体が含まれるがそれらに限定されるものではない。

[0110] さらに、実施形態は、ハードウェア、ソフトウェア、ファームウェア、ミドルウェア、マイクロコード、またはこれらの任意の組み合わせによって実装されうる。ソフトウェア、ファームウェア、ミドルウェアまたはマイクロコードで実装される場合、必要なタスクを行うためのプログラムコードまたはコードセグメントは、記憶媒体または他の記憶装置（１または複数）のような機械可読媒体に記憶されうる。プロセッサは、必要なタスクを行いうる。コードセグメントは、プロシージャ、関数、サブプログラム、プログラム、ルーチン、サブルーチン、モジュール、ソフトウェアパッケージ、クラス、あるいは命令、データ構造、またはプログラムセグメントの任意の組み合わせを表しうる。コードセグメントは、情報、データ、引き数、パラメータ、またはメモリコンテンツを渡すことおよび／または受け取ることによって、ハードウェア回路または別のコードセグメントに結合されうる。情報、引き数、パラメータ、データ、等は、メモリ共有、メッセージパッシング、トークンパッシング、ネットワーク送信、等を含む任意の適切な手段を介して、渡されること、転送されること、または送信されることができる。

[0111] 本明細書で開示された例に関連して説明された実例となる様々な論理ブロック、モジュール、回路（例えば、処理回路）、要素、および／または構成要素は、汎用プロセッサ、デジタルシグナルプロセッサ（ＤＳＰ）、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）または他のプログラマブル論理構成要素、ディスクリートゲートまたはトランジスタ論理、ディスクリートハードウェア構成要素、あるいは本明細書で説明された機能を行うように設計されたこれらの任意の組み合わせで、実装されるかまたは行われうる。汎用プロセッサは、マイクロプロセッサでありうるが、代替として、このプロセッサは、任意の従来のプロセッサ、コントローラ、マイクロコントローラ、またはステートマシンでありうる。プロセッサはまた、コンピューティング構成要素の組み合わせ、例えば、ＤＳＰと、１つのマイクロプロセッサ、多くのマイクロプロセッサ、ＤＳＰコアと連携した１つまたは複数のマイクロプロセッサ、またはその他のこのような構成との組み合わせとして実装されうる。

[0112] 本明細書で開示された例に関連して説明された方法またはアルゴリズムは、処理ユニット、プログラミング命令、または他の指示の形式で、直接ハードウェアにおいて、プロセッサによって実行可能なソフトウェアモジュールにおいて、または両方の組み合わせにおいて具現化されることができ、単一のデバイス内に含まれるかまたは複数のデバイスにわたって分散されることができる。ソフトウェアモジュールは、ＲＡＭメモリ、フラッシュメモリ、ＲＯＭメモリ、ＥＰＲＯＭメモリ、ＥＥＰＲＯＭ（登録商標）メモリ、レジスタ、ハードディスク、リムーバブルディスク、ＣＤ−ＲＯＭ、または当技術分野において知られているその他の形式の記憶媒体内に存在しうる。記憶媒体は、プロセッサが記憶媒体から情報を読み取り、また記憶媒体に情報を書き込むことができるように、プロセッサに結合されうる。代替として、記憶媒体はプロセッサに一体化されうる。

[0113] 当業者であれば、本明細書で開示された実施形態に関連して説明された実例となる様々な論理ブロック、モジュール、回路、およびアルゴリズムステップが、電子ハードウェア、コンピュータソフトウェア、または両方の組み合わせとして実装されうることはさらに認識するであろう。このハードウェアおよびソフトウェアの互換性を明確に例示するために、実例となる様々な構成要素、ブロック、モジュール、回路、およびステップが、概してそれらの機能の観点から上記に説明されている。このような機能性がハードウェアとして実装されるかソフトウェアとして実装されるかは、特定の用途およびシステム全体に課せられる設計制約に依存する。

[0114] 本明細書で説明された発明の様々な特徴は、本発明から逸脱することなく異なるシステムにおいて実装されうる。本開示の前述の態様は単なる例であり、本発明を限定するものとして解釈されるべきではないことに留意されたい。本開示の態様の説明は、特許請求の範囲の適用範囲を限定することではなく、実例となるものであることが意図されている。このように、本教示は、他のタイプの装置に容易に適用されることができ、多くの代替例、修正例、および変形例が当業者に明らかになるであろう。

[0114] 本明細書で説明された発明の様々な特徴は、本発明から逸脱することなく異なるシステムにおいて実装されうる。本開示の前述の態様は単なる例であり、本発明を限定するものとして解釈されるべきではないことに留意されたい。本開示の態様の説明は、特許請求の範囲の適用範囲を限定することではなく、実例となるものであることが意図されている。このように、本教示は、他のタイプの装置に容易に適用されることができ、多くの代替例、修正例、および変形例が当業者に明らかになるであろう。
以下に本願発明の当初の特許請求の範囲に記載された発明を付記する。
［Ｃ１］
物理空間においてサウンドフィールドを表現する方法であって、
前記物理空間からサウンドをキャプチャすることと、ここで、前記サウンドは、前記物理空間と通信状態にあるサウンドトランスデューサアレイによって前記物理空間中に発せられる、
前記キャプチャされたサウンドのサウンドプロジェクションパターンを算出することと、ここにおいて、前記サウンドプロジェクションパターンは、前記キャプチャされたサウンドのサウンドフィールドの表現を備える、
前記物理空間上に前記サウンドプロジェクションパターンを表示することと
を備え、前記サウンドプロジェクションパターンは、前記サウンドトランスデューサアレイと対象ユーザとの間に延びる、
方法。
［Ｃ２］
前記キャプチャされたサウンドの発生ロケーションを特定するために前記キャプチャされたサウンドを処理することをさらに備える、
Ｃ１に記載の方法。
［Ｃ３］
前記対象ユーザは、前記キャプチャされたサウンドの前記発生ロケーションにいる、
Ｃ２に記載の方法。
［Ｃ４］
前記サウンドトランスデューサアレイは、別個のマイクロフォンアレイとスピーカアレイを備える、
Ｃ１に記載の方法。
［Ｃ５］
前記マイクロフォンアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記スピーカアレイからスピーカビームを送信することと
をさらに備え、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
Ｃ４に記載の方法。
［Ｃ６］
カラーヒートマップを前記マイクロフォンビームに適用することをさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
Ｃ５に記載の方法。
［Ｃ７］
前記サウンドトランスデューサアレイは、組み合わせられたマイクロフォンおよびスピーカアレイを備える、
Ｃ１に記載の方法。
［Ｃ８］
前記サウンドトランスデューサアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記サウンドトランスデューサアレイからスピーカビームを送信することと
をさらに備え、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
Ｃ７に記載の方法。
［Ｃ９］
カラーヒートマップを前記マイクロフォンビームに適用することをさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
Ｃ８に記載の方法。
［Ｃ１０］
前記サウンドは、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドを含む、
Ｃ１に記載の方法。
［Ｃ１１］
前記サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされる、
Ｃ１に記載の方法。
［Ｃ１２］
前記サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示される、
Ｃ１に記載の方法。
［Ｃ１３］
前記物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットのうちの少なくとも１つを備える、
Ｃ１に記載の方法。
［Ｃ１４］
前記サウンドプロジェクションパターンは、ビームパターンの形式のサウンドプロジェクションパターンを備える、
Ｃ１に記載の方法。
［Ｃ１５］
前記サウンドプロジェクションパターンは、シンボルを備える、
Ｃ１に記載の方法。
［Ｃ１６］
前記シンボルは、矢印を備える、
Ｃ１５に記載の方法。
［Ｃ１７］
物理空間と通信状態にあるサウンドトランスデューサアレイであって、
スピーカアレイと、
前記スピーカアレイと通信状態にある、サウンドをキャプチャするためのマイクロフォンアレイと、
前記マイクロフォンアレイと通信状態にある少なくとも１つのプロセッサと
を備え、前記少なくとも１つのプロセッサは、
前記サウンドをキャプチャすることと、
前記キャプチャされたサウンドのサウンドプロジェクションパターンを算出することと、ここにおいて、前記サウンドプロジェクションパターンは、前記キャプチャされたサウンドのサウンドフィールドの表現を備える、
前記物理空間上に前記サウンドプロジェクションパターンを表示することと
を行うように構成され、前記サウンドプロジェクションパターンは、前記サウンドトランスデューサアレイと対象ユーザとの間に延びる、
サウンドトランスデューサアレイ。
［Ｃ１８］
前記少なくとも１つのプロセッサは、前記キャプチャされたサウンドの発生ロケーションを特定するために、前記キャプチャされたサウンドを処理することを行うようにさらに構成される、
Ｃ１７に記載のサウンドトランスデューサアレイ。
［Ｃ１９］
前記対象ユーザは、前記キャプチャされたサウンドの前記発生ロケーションにいる、
Ｃ１８に記載のサウンドトランスデューサアレイ。
［Ｃ２０］
前記マイクロフォンアレイは、前記スピーカアレイとは別個である、
Ｃ１７に記載のサウンドトランスデューサアレイ。
［Ｃ２１］
前記少なくとも１つのプロセッサは、
前記マイクロフォンアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記スピーカアレイからスピーカビームを送信することと
を行うようにさらに構成され、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
Ｃ２０に記載のサウンドトランスデューサアレイ。
［Ｃ２２］
前記少なくとも１つのプロセッサは、カラーヒートマップを前記マイクロフォンビームに適用するようにさらに構成され、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
Ｃ２１に記載のサウンドトランスデューサアレイ。
［Ｃ２３］
前記マイクロフォンアレイは、前記スピーカアレイと組み合わせられる、
Ｃ１７に記載のサウンドトランスデューサアレイ。
［Ｃ２４］
前記少なくとも１つのプロセッサは、
前記組み合わせられたマイクロフォンおよびスピーカアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記組み合わせられたマイクロフォンおよびスピーカアレイからスピーカビームを送信することと
をさらに行うように構成され、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
Ｃ２３に記載のサウンドトランスデューサアレイ。
［Ｃ２５］
前記少なくとも１つのプロセッサは、カラーヒートマップを前記マイクロフォンビームに適用することを行うようにさらに構成され、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
Ｃ２４に記載のサウンドトランスデューサアレイ。
［Ｃ２６］
前記サウンドは、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドのうちの１または複数を含む、
Ｃ１７に記載のサウンドトランスデューサアレイ。
［Ｃ２７］
前記サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされる、
Ｃ１７に記載のサウンドトランスデューサアレイ。
［Ｃ２８］
前記サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示される、
Ｃ１７に記載のサウンドトランスデューサアレイ。
［Ｃ２９］
前記物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットのうちの少なくとも１つを備える、
Ｃ１７に記載のサウンドトランスデューサアレイ。
［Ｃ３０］
前記サウンドプロジェクションパターンは、ビームパターンの形式のサウンドプロジェクションパターンを含む、
Ｃ１７に記載のサウンドトランスデューサアレイ。
［Ｃ３１］
前記サウンドプロジェクションパターンは、シンボルを備える、
Ｃ１７に記載のサウンドトランスデューサアレイ。
［Ｃ３２］
前記シンボルは、矢印を備える、
Ｃ３１に記載のサウンドトランスデューサアレイ。
［Ｃ３３］
物理空間と通信状態にあるサウンドトランスデューサアレイであって、
前記物理空間からサウンドをキャプチャするための手段と、ここで、前記サウンドは、前記物理空間と通信状態にあるサウンドトランスデューサアレイによって前記物理空間中に発せられる、
前記キャプチャされたサウンドのサウンドプロジェクションパターンを算出するための手段と、ここにおいて、前記サウンドプロジェクションパターンは、前記キャプチャされたサウンドのサウンドフィールドの表現を備える、
前記物理空間上に前記サウンドプロジェクションパターンを表示するための手段と
を備え、前記サウンドプロジェクションパターンは、前記サウンドトランスデューサアレイと対象ユーザとの間に延びる、
サウンドトランスデューサアレイ。
［Ｃ３４］
前記キャプチャされたサウンドの発生ロケーションを特定するために前記キャプチャされたサウンドを処理するための手段をさらに備える、
Ｃ３３に記載のサウンドトランスデューサアレイ。
［Ｃ３５］
前記対象ユーザは、前記キャプチャされたサウンドの前記発生ロケーションにいる、
Ｃ３４に記載のサウンドトランスデューサアレイ。
［Ｃ３６］
前記サウンドトランスデューサアレイは、別個のマイクロフォンアレイとスピーカアレイを備える、
Ｃ３３に記載のサウンドトランスデューサアレイ。
［Ｃ３７］
前記マイクロフォンアレイ上でマイクロフォンビームをキャプチャするための手段と、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記スピーカアレイからスピーカビームを送信するための手段と
をさらに備え、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
Ｃ３６に記載のサウンドトランスデューサアレイ。
［Ｃ３８］
カラーヒートマップを前記マイクロフォンビームに適用するための手段をさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
Ｃ３７に記載のサウンドトランスデューサアレイ。
［Ｃ３９］
前記サウンドトランスデューサアレイは、組み合わせられたマイクロフォンおよびスピーカアレイを備える、
Ｃ３３に記載のサウンドトランスデューサアレイ。
［Ｃ４０］
前記サウンドトランスデューサアレイ上でマイクロフォンビームをキャプチャするための手段と、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記サウンドトランスデューサアレイからスピーカビームを送信するための手段と
をさらに備え、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
Ｃ３９に記載のサウンドトランスデューサアレイ。
［Ｃ４１］
カラーヒートマップを前記マイクロフォンビームに適用するための手段をさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
Ｃ４０に記載のサウンドトランスデューサアレイ。
［Ｃ４２］
前記サウンドは、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドのうちの１または複数を含む、
Ｃ３３に記載のサウンドトランスデューサアレイ。
［Ｃ４３］
前記サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされる、
Ｃ３３に記載のサウンドトランスデューサアレイ。
［Ｃ４４］
前記サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示される、
Ｃ３３に記載のサウンドトランスデューサアレイ。
［Ｃ４５］
前記物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットのうちの少なくとも１つを備える、
Ｃ３３に記載のサウンドトランスデューサアレイ。
［Ｃ４６］
前記サウンドプロジェクションパターンは、ビームパターンの形式のサウンドプロジェクションパターンを含む、
Ｃ３３に記載のサウンドトランスデューサアレイ。
［Ｃ４７］
前記サウンドプロジェクションパターンは、シンボルを備える、
Ｃ４６に記載のサウンドトランスデューサアレイ。
［Ｃ４８］
物理空間においてサウンドフィールドを表現するための１つまたは複数の命令を備えるコンピュータ可読記憶媒体であって、前記１つまたは複数の命令は、少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、
前記物理空間からサウンドをキャプチャすることと、ここで前記サウンドは、前記物理空間と通信状態にあるサウンドトランスデューサアレイによって前記物理空間中に発せられる、
前記キャプチャされたサウンドのサウンドプロジェクションパターンを算出することと、ここにおいて、前記サウンドプロジェクションパターンは、前記キャプチャされたサウンドのサウンドフィールドの表現を備える、
前記物理空間上に前記サウンドプロジェクションパターンを表示することと
を行わせ、前記サウンドプロジェクションパターンは、前記サウンドトランスデューサアレイと対象ユーザとの間に延びる、
コンピュータ可読記憶媒体。
［Ｃ４９］
少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、前記キャプチャされたサウンドの発生ロケーションを特定するために前記キャプチャされたサウンドを処理することを行わせる１つまたは複数の命令をさらに備える、
Ｃ４８に記載のコンピュータ可読記憶媒体。
［Ｃ５０］
前記対象ユーザは、前記キャプチャされたサウンドの前記発生ロケーションにいる、
Ｃ４９に記載のコンピュータ可読記憶媒体。
［Ｃ５１］
前記サウンドトランスデューサアレイは、別個のマイクロフォンアレイとスピーカアレイを備える、
Ｃ４８に記載のコンピュータ可読記憶媒体。
［Ｃ５２］
少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、
前記マイクロフォンアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記スピーカアレイからスピーカビームを送信することと、
を行わせる１つまたは複数の命令をさらに備え、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
Ｃ４８に記載のコンピュータ可読記憶媒体。
［Ｃ５３］
少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、カラーヒートマップを前記マイクロフォンビームに適用することを行わせる１つまたは複数の命令をさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
Ｃ４８に記載のコンピュータ可読記憶媒体。
［Ｃ５４］
前記サウンドトランスデューサアレイは、組み合わせられたマイクロフォンおよびスピーカアレイを備える、
Ｃ４８に記載のコンピュータ可読記憶媒体。
［Ｃ５５］
少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、
前記サウンドトランスデューサアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記サウンドトランスデューサアレイからスピーカビームを送信することと
を行わせる１つまたは複数の命令をさらに備える前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
Ｃ５４に記載のコンピュータ可読記憶媒体。
［Ｃ５６］
少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、カラーヒートマップを前記マイクロフォンビームに適用することを行わせる１つまたは複数の命令をさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
Ｃ５５に記載のコンピュータ可読記憶媒体。
［Ｃ５７］
前記サウンドは、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドのうちの１または複数を含む、
Ｃ４８に記載のコンピュータ可読記憶媒体。
［Ｃ５８］
前記サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされる、
Ｃ４８に記載のコンピュータ可読記憶媒体。
［Ｃ５９］
前記サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示される、
Ｃ４８に記載のコンピュータ可読記憶媒体。
［Ｃ６０］
前記物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットのうちの少なくとも１つを備える、
Ｃ４８に記載のコンピュータ可読記憶媒体。
［Ｃ６１］
前記サウンドプロジェクションパターンは、ビームパターンの形式のサウンドプロジェクションパターンを含む、
Ｃ４８に記載のコンピュータ可読記憶媒体。

Claims

物理空間においてサウンドフィールドを表現する方法であって、
前記物理空間からサウンドをキャプチャすることと、ここで、前記サウンドは、前記物理空間と通信状態にあるサウンドトランスデューサアレイによって前記物理空間中に発せられる、
前記キャプチャされたサウンドのサウンドプロジェクションパターンを算出することと、ここにおいて、前記サウンドプロジェクションパターンは、前記キャプチャされたサウンドのサウンドフィールドの表現を備える、
前記物理空間上に前記サウンドプロジェクションパターンを表示することと
を備え、前記サウンドプロジェクションパターンは、前記サウンドトランスデューサアレイと対象ユーザとの間に延びる、
方法。
前記キャプチャされたサウンドの発生ロケーションを特定するために前記キャプチャされたサウンドを処理することをさらに備える、
請求項１に記載の方法。
前記対象ユーザは、前記キャプチャされたサウンドの前記発生ロケーションにいる、
請求項２に記載の方法。
前記サウンドトランスデューサアレイは、別個のマイクロフォンアレイとスピーカアレイを備える、
請求項１に記載の方法。
前記マイクロフォンアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記スピーカアレイからスピーカビームを送信することと
をさらに備え、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
請求項４に記載の方法。
カラーヒートマップを前記マイクロフォンビームに適用することをさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
請求項５に記載の方法。
前記サウンドトランスデューサアレイは、組み合わせられたマイクロフォンおよびスピーカアレイを備える、
請求項１に記載の方法。
前記サウンドトランスデューサアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記サウンドトランスデューサアレイからスピーカビームを送信することと
をさらに備え、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
請求項７に記載の方法。
カラーヒートマップを前記マイクロフォンビームに適用することをさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
請求項８に記載の方法。
前記サウンドは、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドを含む、
請求項１に記載の方法。
前記サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされる、
請求項１に記載の方法。
前記サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示される、
請求項１に記載の方法。
前記物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットのうちの少なくとも１つを備える、
請求項１に記載の方法。
前記サウンドプロジェクションパターンは、ビームパターンの形式のサウンドプロジェクションパターンを備える、
請求項１に記載の方法。
前記サウンドプロジェクションパターンは、シンボルを備える、
請求項１に記載の方法。
前記シンボルは、矢印を備える、
請求項１５に記載の方法。
物理空間と通信状態にあるサウンドトランスデューサアレイであって、
スピーカアレイと、
前記スピーカアレイと通信状態にある、サウンドをキャプチャするためのマイクロフォンアレイと、
前記マイクロフォンアレイと通信状態にある少なくとも１つのプロセッサと
を備え、前記少なくとも１つのプロセッサは、
前記サウンドをキャプチャすることと、
前記キャプチャされたサウンドのサウンドプロジェクションパターンを算出することと、ここにおいて、前記サウンドプロジェクションパターンは、前記キャプチャされたサウンドのサウンドフィールドの表現を備える、
前記物理空間上に前記サウンドプロジェクションパターンを表示することと
を行うように構成され、前記サウンドプロジェクションパターンは、前記サウンドトランスデューサアレイと対象ユーザとの間に延びる、
サウンドトランスデューサアレイ。
前記少なくとも１つのプロセッサは、前記キャプチャされたサウンドの発生ロケーションを特定するために、前記キャプチャされたサウンドを処理することを行うようにさらに構成される、
請求項１７に記載のサウンドトランスデューサアレイ。
前記対象ユーザは、前記キャプチャされたサウンドの前記発生ロケーションにいる、
請求項１８に記載のサウンドトランスデューサアレイ。
前記マイクロフォンアレイは、前記スピーカアレイとは別個である、
請求項１７に記載のサウンドトランスデューサアレイ。
前記少なくとも１つのプロセッサは、
前記マイクロフォンアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記スピーカアレイからスピーカビームを送信することと
を行うようにさらに構成され、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
請求項２０に記載のサウンドトランスデューサアレイ。
前記少なくとも１つのプロセッサは、カラーヒートマップを前記マイクロフォンビームに適用することを行うようにさらに構成され、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
請求項２１に記載のサウンドトランスデューサアレイ。
前記マイクロフォンアレイは、前記スピーカアレイと組み合わせられる、
請求項１７に記載のサウンドトランスデューサアレイ。
前記少なくとも１つのプロセッサは、
前記組み合わせられたマイクロフォンおよびスピーカアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記組み合わせられたマイクロフォンおよびスピーカアレイからスピーカビームを送信することと
をさらに行うように構成され、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
請求項２３に記載のサウンドトランスデューサアレイ。
前記少なくとも１つのプロセッサは、カラーヒートマップを前記マイクロフォンビームに適用することを行うようにさらに構成され、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
請求項２４に記載のサウンドトランスデューサアレイ。
前記サウンドは、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドのうちの１または複数を含む、
請求項１７に記載のサウンドトランスデューサアレイ。
前記サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされる、
請求項１７に記載のサウンドトランスデューサアレイ。
前記サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示される、
請求項１７に記載のサウンドトランスデューサアレイ。
前記物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットのうちの少なくとも１つを備える、
請求項１７に記載のサウンドトランスデューサアレイ。
前記サウンドプロジェクションパターンは、ビームパターンの形式のサウンドプロジェクションパターンを含む、
請求項１７に記載のサウンドトランスデューサアレイ。
前記サウンドプロジェクションパターンは、シンボルを備える、
請求項１７に記載のサウンドトランスデューサアレイ。
前記シンボルは、矢印を備える、
請求項３１に記載のサウンドトランスデューサアレイ。
物理空間と通信状態にあるサウンドトランスデューサアレイであって、
前記物理空間からサウンドをキャプチャするための手段と、ここで、前記サウンドは、前記物理空間と通信状態にあるサウンドトランスデューサアレイによって前記物理空間中に発せられる、
前記キャプチャされたサウンドのサウンドプロジェクションパターンを算出するための手段と、ここにおいて、前記サウンドプロジェクションパターンは、前記キャプチャされたサウンドのサウンドフィールドの表現を備える、
前記物理空間上に前記サウンドプロジェクションパターンを表示するための手段と
を備え、前記サウンドプロジェクションパターンは、前記サウンドトランスデューサアレイと対象ユーザとの間に延びる、
サウンドトランスデューサアレイ。
前記キャプチャされたサウンドの発生ロケーションを特定するために前記キャプチャされたサウンドを処理するための手段をさらに備える、
請求項３３に記載のサウンドトランスデューサアレイ。
前記対象ユーザは、前記キャプチャされたサウンドの前記発生ロケーションにいる、
請求項３４に記載のサウンドトランスデューサアレイ。
前記サウンドトランスデューサアレイは、別個のマイクロフォンアレイとスピーカアレイを備える、
請求項３３に記載のサウンドトランスデューサアレイ。
前記マイクロフォンアレイ上でマイクロフォンビームをキャプチャするための手段と、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記スピーカアレイからスピーカビームを送信するための手段と
をさらに備え、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
請求項３６に記載のサウンドトランスデューサアレイ。
カラーヒートマップを前記マイクロフォンビームに適用するための手段をさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
請求項３７に記載のサウンドトランスデューサアレイ。
前記サウンドトランスデューサアレイは、組み合わせられたマイクロフォンおよびスピーカアレイを備える、
請求項３３に記載のサウンドトランスデューサアレイ。
前記サウンドトランスデューサアレイ上でマイクロフォンビームをキャプチャするための手段と、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記サウンドトランスデューサアレイからスピーカビームを送信するための手段と
をさらに備え、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
請求項３９に記載のサウンドトランスデューサアレイ。
カラーヒートマップを前記マイクロフォンビームに適用するための手段をさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
請求項４０に記載のサウンドトランスデューサアレイ。
前記サウンドは、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドのうちの１または複数を含む、
請求項３３に記載のサウンドトランスデューサアレイ。
前記サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされる、
請求項３３に記載のサウンドトランスデューサアレイ。
前記サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示される、
請求項３３に記載のサウンドトランスデューサアレイ。
前記物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットのうちの少なくとも１つを備える、
請求項３３に記載のサウンドトランスデューサアレイ。
前記サウンドプロジェクションパターンは、ビームパターンの形式のサウンドプロジェクションパターンを含む、
請求項３３に記載のサウンドトランスデューサアレイ。
前記サウンドプロジェクションパターンは、シンボルを備える、
請求項４６に記載のサウンドトランスデューサアレイ。
物理空間においてサウンドフィールドを表現するための１つまたは複数の命令を備えるコンピュータ可読記憶媒体であって、前記１つまたは複数の命令は、少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、
前記物理空間からサウンドをキャプチャすることと、ここで前記サウンドは、前記物理空間と通信状態にあるサウンドトランスデューサアレイによって前記物理空間中に発せられる、
前記キャプチャされたサウンドのサウンドプロジェクションパターンを算出することと、ここにおいて、前記サウンドプロジェクションパターンは、前記キャプチャされたサウンドのサウンドフィールドの表現を備える、
前記物理空間上に前記サウンドプロジェクションパターンを表示することと
を行わせ、前記サウンドプロジェクションパターンは、前記サウンドトランスデューサアレイと対象ユーザとの間に延びる、
コンピュータ可読記憶媒体。
少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、前記キャプチャされたサウンドの発生ロケーションを特定するために前記キャプチャされたサウンドを処理することを行わせる１つまたは複数の命令をさらに備える、
請求項４８に記載のコンピュータ可読記憶媒体。
前記対象ユーザは、前記キャプチャされたサウンドの前記発生ロケーションにいる、
請求項４９に記載のコンピュータ可読記憶媒体。
前記サウンドトランスデューサアレイは、別個のマイクロフォンアレイとスピーカアレイを備える、
請求項４８に記載のコンピュータ可読記憶媒体。
少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、
前記マイクロフォンアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記スピーカアレイからスピーカビームを送信することと、
を行わせる１つまたは複数の命令をさらに備え、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
請求項４８に記載のコンピュータ可読記憶媒体。
少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、カラーヒートマップを前記マイクロフォンビームに適用することを行わせる１つまたは複数の命令をさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
請求項４８に記載のコンピュータ可読記憶媒体。
前記サウンドトランスデューサアレイは、組み合わせられたマイクロフォンおよびスピーカアレイを備える、
請求項４８に記載のコンピュータ可読記憶媒体。
少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、
前記サウンドトランスデューサアレイ上でマイクロフォンビームをキャプチャすることと、ここで、前記マイクロフォンビームは、前記物理空間において第１のカラーで表示される、
前記サウンドトランスデューサアレイからスピーカビームを送信することと
を行わせる１つまたは複数の命令をさらに備え、前記スピーカビームは、前記物理空間において第２のカラーで表示され、前記第１のカラーは前記第２のカラーとは異なる、
請求項５４に記載のコンピュータ可読記憶媒体。
少なくとも１つのプロセッサによって実行されると、前記少なくとも１つのプロセッサに、カラーヒートマップを前記マイクロフォンビームに適用することを行わせる１つまたは複数の命令をさらに備え、前記カラーヒートマップの主ローブは強い信号領域を表し、前記カラーヒートマップにおけるカラーの変化は弱い信号領域を表す、
請求項５５に記載のコンピュータ可読記憶媒体。
前記サウンドは、亜音速サウンド、超音波サウンド、赤外線サウンド、および無線周波数サウンドのうちの１または複数を含む、
請求項４８に記載のコンピュータ可読記憶媒体。
前記サウンドは、リアルタイムでまたはほぼリアルタイムでキャプチャされる、
請求項４８に記載のコンピュータ可読記憶媒体。
前記サウンドプロジェクションパターンは、リアルタイムでまたはほぼリアルタイムで表示される、
請求項４８に記載のコンピュータ可読記憶媒体。
前記物理空間は、ディスプレイスクリーン、タッチスクリーン、およびタブレットのうちの少なくとも１つを備える、
請求項４８に記載のコンピュータ可読記憶媒体。
前記サウンドプロジェクションパターンは、ビームパターンの形式のサウンドプロジェクションパターンを含む、
請求項４８に記載のコンピュータ可読記憶媒体。