JP2022177304A

JP2022177304A - 両耳オーディオレンダリングのための両耳間時間差クロスフェーダ

Info

Publication number: JP2022177304A
Application number: JP2022159449A
Authority: JP
Inventors: チャールズディッカーサミュエル; Charles Dicker Samuel; マユールバーバイヤハーシュ; Mayur Barbhaiya Harsh
Original assignee: Magic Leap Inc
Current assignee: Magic Leap Inc
Priority date: 2018-10-05
Filing date: 2022-10-03
Publication date: 2022-11-30
Anticipated expiration: 2039-10-04
Also published as: US20220132264A1; US20200112817A1; JP7477734B2; US11595776B2; CN116249053B; US20220417698A1; US11863965B2; US10887720B2; JP7545960B2; CN113170273A; US20200112816A1; EP3861763A4; JP2022177305A; EP3861763A1; CN113170273B; US11463837B2; EP3861768A4; JP2022504233A; WO2020073024A1; US11197118B2

Abstract

【課題】オーディオ信号をウェアラブル頭部デバイスのユーザに提示するためのシステムおよび方法を提供する。【解決手段】方法は、遅延モジュールが、ウェアラブル頭部デバイスを介してユーザに提示される仮想環境内の源場所に対応する第１の入力オーディオ信号を受信し、第１の入力オーディオ信号を、左出力オーディオ信号および右出力オーディオ信号を発生させるように処理する。左出力オーディオ信号は、ウェアラブル頭部デバイスと関連付けられる左スピーカを介してユーザの左耳に提示される。右出力オーディオ信号は、ウェアラブル頭部デバイスと関連付けられる右スピーカを介してユーザの右耳に提示される。【選択図】図１

Description

（関連出願の相互参照）
本願は、その内容が、参照することによってその全体として本明細書に組み込まれる、２０１８年１０月５日に出願された米国仮出願第６２／７４２，２５４号、２０１９年３月１日に出願された米国仮出願第６２／８１２，５４６号、および２０１８年１０月５日に出願された米国仮出願第６２／７４２，１９１号の優先権を主張する。

本開示は、概して、オーディオ信号処理のためのシステムおよび方法に関し、特に、複合現実環境内でオーディオ信号を提示するためのシステムおよび方法に関する。

没入感および信憑性がある仮想環境は、ユーザの予期、例えば、仮想環境内のオブジェクトに対応するオーディオ信号が、仮想環境内のそのオブジェクトの場所と、そしてそのオブジェクトの視覚的提示と一貫するであろうという予期と一貫する様式におけるオーディオ信号の提示を要求する。仮想現実、拡張現実、および複合現実環境内で豊富かつ複雑な音景（音環境）を作成することは、それぞれ、ユーザの環境内の異なる場所／近接度および／または方向から発するように現れる、多数のデジタルオーディオ信号の効率的な提示を要求する。聴者の脳は、（例えば、２つの耳の間の位相偏移を検出することによって）ユーザの２つの耳の間の音の到着時間の差異を認識し、時間差から音の空間的起源を推測するように適合される。故に、仮想環境に関して、ユーザの左耳と右耳との間の両耳間時間差（ＩＴＤ）を正確に提示することが、仮想環境内でオーディオ源を識別するユーザの能力にとって重要であり得る。しかしながら、オブジェクトおよびユーザの位置および配向を信憑性があるように反映するために音景を調節することは、オーディオ信号の急速な変化を要求し得、これは、仮想環境の没入感を損なう「クリック」音等の望ましくない音アーチファクトをもたらし得る。仮想環境のユーザに音景を提示するシステムおよび方法が、音アーチファクトを最小限にし、算出的に効率的なままでありながら、ユーザの耳に両耳間時間差を正確に提示することが、望ましい。

本開示の実施例は、オーディオ信号をウェアラブル頭部デバイスのユーザに提示するためのシステムおよび方法を説明する。例示的方法によると、第１の入力オーディオ信号が、受信され、第１の入力オーディオ信号は、ウェアラブル頭部デバイスを介してユーザに提示される仮想環境内の源場所に対応する。第１の入力オーディオ信号は、左出力オーディオ信号および右出力オーディオ信号を発生させるように処理される。左出力オーディオ信号は、ウェアラブル頭部デバイスと関連付けられる左スピーカを介してユーザの左耳に提示される。右出力オーディオ信号は、ウェアラブル頭部デバイスと関連付けられる右スピーカを介してユーザの右耳に提示される。第１の入力オーディオ信号を処理することは、遅延プロセスを第１の入力オーディオ信号に適用し、左オーディオ信号および右オーディオ信号を発生させることと、左オーディオ信号の利得を調節することと、右オーディオ信号の利得を調節することと、第１の頭部関連伝達関数（ＨＲＴＦ）を左オーディオ信号に適用し、左出力オーディオ信号を発生させることと、第２のＨＲＴＦを右オーディオ信号に適用し、右出力オーディオ信号を発生させることとを含む。遅延プロセスを第１の入力オーディオ信号に適用することは、両耳間時間遅延（ＩＴＤ）を第１の入力オーディオ信号に適用することを含み、ＩＴＤは、源場所に基づいて決定される。
本発明は、例えば、以下を提供する。
（項目１）
オーディオ信号をウェアラブル頭部デバイスのユーザに提示する方法であって、前記方法は、
第１の入力オーディオ信号を受信することであって、前記第１の入力オーディオ信号は、前記ウェアラブル頭部デバイスを介して前記ユーザに提示される仮想環境内の第１の源場所に対応する、ことと、
前記第１の入力オーディオ信号を処理し、左出力オーディオ信号および右出力オーディオ信号を発生させることであって、前記第１の入力オーディオ信号を処理することは、
遅延プロセスを前記第１の入力オーディオ信号に適用し、左オーディオ信号および右オーディオ信号を発生させることと、
前記左オーディオ信号の利得を調節することと、
前記右オーディオ信号の利得を調節することと、
第１の頭部関連伝達関数（ＨＲＴＦ）を前記左オーディオ信号に適用し、前記左出力オーディオ信号を発生させることと、
第２のＨＲＴＦを前記右オーディオ信号に適用し、前記右出力オーディオ信号を発生させることと
を含む、ことと、
前記ウェアラブル頭部デバイスと関連付けられる左スピーカを介して前記ユーザの左耳に前記左出力オーディオ信号を提示することと、
前記ウェアラブル頭部デバイスと関連付けられる右スピーカを介して前記ユーザの右耳に前記右出力オーディオ信号を提示することと
を含み、
前記遅延プロセスを前記第１の入力オーディオ信号に適用することは、両耳間時間遅延（ＩＴＤ）を前記第１の入力オーディオ信号に適用することを含み、前記ＩＴＤは、前記第１の源場所に基づいて決定される、方法。
（項目２）
前記ＩＴＤを決定することは、第１の耳に対応する第１の耳遅延と、第２の耳に対応する第２の耳遅延とを決定することを含む、項目１に記載の方法。
（項目３）
前記第１の耳遅延は、ゼロである、項目２に記載の方法。
（項目４）
前記第１の源場所は、第１の時間における前記仮想環境内の仮想オブジェクトの場所に対応し、
前記方法はさらに、第２の時間における前記仮想環境内の前記仮想オブジェクトの場所に対応する第２の源場所を決定することを含み、
前記第１の耳遅延を決定することは、前記第１の時間に対応する先行の第１の耳遅延と、前記第２の時間に対応する後続の第１の耳遅延とを決定し、前記先行の第１の耳遅延と前記後続の第１の耳遅延との間でクロスフェードし、前記第１の耳遅延を発生させることを含み、
前記第２の耳遅延を決定することは、前記第１の時間に対応する先行の第２の耳遅延と、前記第２の時間に対応する後続の第２の耳遅延とを決定し、前記先行の第２の耳遅延と前記後続の第２の耳遅延との間でクロスフェードし、前記第２の耳遅延を発生させることを含む、
項目２に記載の方法。
（項目５）
前記遅延プロセスを適用することは、フィルタを前記第１の入力オーディオ信号に適用することを含む、項目４に記載の方法。
（項目６）
フィルタを前記左オーディオ信号に適用することをさらに含む、項目４に記載の方法。
（項目７）
フィルタを前記右オーディオ信号に適用することをさらに含む、項目４に記載の方法。
（項目８）
前記遅延プロセスを適用することは、前記第１の時間における第１の遅延モジュールから前記第２の時間における第２の遅延モジュールに遷移することを含み、前記第２の遅延モジュールは、前記第１の遅延モジュールと異なる、項目４に記載の方法。
（項目９）
前記第１の遅延モジュールは、第１の１つ以上のフィルタを前記第１の入力オーディオ信号、前記左オーディオ信号、および前記右オーディオ信号のうちの第１の１つ以上のものに適用することと関連付けられ、前記第２の遅延モジュールは、第２の１つ以上のフィルタを前記第１の入力オーディオ信号、前記左オーディオ信号、および前記右オーディオ信号のうちの第２の１つ以上のものに適用することと関連付けられる、項目８に記載の方法。
（項目１０）
前記第１の耳は、前記ユーザの左耳に対応し、前記第２の耳は、前記ユーザの右耳に対応する、項目４に記載の方法。
（項目１１）
前記第１の耳は、前記ユーザの右耳に対応し、前記第２の耳は、前記ユーザの左耳に対応する、項目４に記載の方法。
（項目１２）
前記第１の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第２の源場所は、前記第１の耳よりも前記第２の耳に近接する、項目４に記載の方法。
（項目１３）
前記第２の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第１の源場所は、前記第１の耳よりも前記第２の耳に近接する、項目４に記載の方法。
（項目１４）
前記第１の源場所は、前記第２の源場所よりも前記第１の耳に近接し、前記第１の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第２の源場所は、前記第２の耳よりも前記第１の耳に近接する、項目４に記載の方法。
（項目１５）
前記第２の源場所は、前記第１の源場所よりも前記第１の耳に近接し、前記第１の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第２の源場所は、前記第２の耳よりも前記第１の耳に近接する、項目４に記載の方法。
（項目１６）
システムであって、
ウェアラブル頭部デバイスと、
前記ウェアラブル頭部デバイスと関連付けられる左スピーカと、
前記ウェアラブル頭部デバイスと関連付けられる右スピーカと、
１つ以上のプロセッサであって、前記１つ以上のプロセッサは、方法を実行するように構成されており、前記方法は、
第１の入力オーディオ信号を受信することであって、前記第１の入力オーディオ信号は、前記ウェアラブル頭部デバイスを介してユーザに提示される仮想環境内の第１の源場所に対応する、ことと、
前記第１の入力オーディオ信号を処理し、左出力オーディオ信号および右出力オーディオ信号を発生させることであって、前記第１の入力オーディオ信号を処理することは、
遅延プロセスを前記第１の入力オーディオ信号に適用し、左オーディオ信号および右オーディオ信号を発生させることと、
前記左オーディオ信号の利得を調節することと、
前記右オーディオ信号の利得を調節することと、
第１の頭部関連伝達関数（ＨＲＴＦ）を前記左オーディオ信号に適用し、前記左出力オーディオ信号を発生させることと、
第２のＨＲＴＦを前記右オーディオ信号に適用し、前記右出力オーディオ信号を発生させることと
を含む、ことと、
前記左スピーカを介して前記ユーザの左耳に前記左出力オーディオ信号を提示することと、
前記右スピーカを介して前記ユーザの右耳に前記右出力オーディオ信号を提示することと
を含み、
前記遅延プロセスを前記第１の入力オーディオ信号に適用することは、両耳間時間遅延（ＩＴＤ）を前記第１の入力オーディオ信号に適用することを含み、前記ＩＴＤは、前記第１の源場所に基づいて決定される、１つ以上のプロセッサと
を備える、システム。
（項目１７）
前記ＩＴＤを決定することは、第１の耳に対応する第１の耳遅延と、第２の耳に対応する第２の耳遅延とを決定することを含む、項目１６に記載のシステム。
（項目１８）
前記第１の耳遅延は、ゼロである、項目１７に記載のシステム。
（項目１９）
前記第１の源場所は、第１の時間における前記仮想環境内の仮想オブジェクトの場所に対応し、
前記方法はさらに、第２の時間における前記仮想環境内の前記仮想オブジェクトの場所に対応する第２の源場所を決定することを含み、
前記第１の耳遅延を決定することは、前記第１の時間に対応する先行の第１の耳遅延と、前記第２の時間に対応する後続の第１の耳遅延とを決定し、前記先行の第１の耳遅延と前記後続の第１の耳遅延との間でクロスフェードし、前記第１の耳遅延を発生させることを含み、
前記第２の耳遅延を決定することは、前記第１の時間に対応する先行の第２の耳遅延と、前記第２の時間に対応する後続の第２の耳遅延とを決定し、前記先行の第２の耳遅延と前記後続の第２の耳遅延との間でクロスフェードし、前記第２の耳遅延を発生させることを含む、
項目１７に記載のシステム。
（項目２０）
前記遅延プロセスを適用することは、フィルタを前記第１の入力オーディオ信号に適用することを含む、項目１９に記載のシステム。
（項目２１）
前記方法はさらに、フィルタを前記左オーディオ信号に適用することを含む、項目１９に記載のシステム。
（項目２２）
前記方法はさらに、フィルタを前記右オーディオ信号に適用することを含む、項目１９に記載のシステム。
（項目２３）
前記遅延プロセスを適用することは、前記第１の時間における第１の遅延モジュールから前記第２の時間における第２の遅延モジュールに遷移することを含み、前記第２の遅延モジュールは、前記第１の遅延モジュールと異なる、項目１９に記載のシステム。
（項目２４）
前記第１の遅延モジュールは、第１の１つ以上のフィルタを前記第１の入力オーディオ信号、前記左オーディオ信号、および前記右オーディオ信号のうちの第１の１つ以上のものに適用することと関連付けられ、前記第２の遅延モジュールは、第２の１つ以上のフィルタを前記第１の入力オーディオ信号、前記左オーディオ信号、および前記右オーディオ信号のうちの第２の１つ以上のものに適用することと関連付けられる、項目２３に記載のシステム。
（項目２５）
前記第１の耳は、前記ユーザの左耳に対応し、前記第２の耳は、前記ユーザの右耳に対応する、項目１９に記載のシステム。
（項目２６）
前記第１の耳は、前記ユーザの右耳に対応し、前記第２の耳は、前記ユーザの左耳に対応する、項目１９に記載のシステム。
（項目２７）
前記第１の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第２の源場所は、前記第１の耳よりも前記第２の耳に近接する、項目１９に記載のシステム。
（項目２８）
前記第２の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第１の源場所は、前記第１の耳よりも前記第２の耳に近接する、項目１９に記載のシステム。
（項目２９）
前記第１の源場所は、前記第２の源場所よりも前記第１の耳に近接し、前記第１の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第２の源場所は、前記第２の耳よりも前記第１の耳に近接する、項目１９に記載のシステム。
（項目３０）
前記第２の源場所は、前記第１の源場所よりも前記第１の耳に近接し、前記第１の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第２の源場所は、前記第２の耳よりも前記第１の耳に近接する、項目１９に記載のシステム。
（項目３１）
非一過性コンピュータ可読媒体であって、前記非一過性コンピュータ可読媒体は、命令を含有しており、前記命令は、１つ以上のプロセッサによって実行されると、前記１つ以上のプロセッサに、オーディオ信号をウェアラブル頭部デバイスのユーザに提示する方法を実施させ、前記方法は、
第１の入力オーディオ信号を受信することであって、前記第１の入力オーディオ信号は、前記ウェアラブル頭部デバイスを介して前記ユーザに提示される仮想環境内の第１の源場所に対応する、ことと、
前記第１の入力オーディオ信号を処理し、左出力オーディオ信号および右出力オーディオ信号を発生させることであって、前記第１の入力オーディオ信号を処理することは、
遅延プロセスを前記第１の入力オーディオ信号に適用し、左オーディオ信号および右オーディオ信号を発生させることと、
前記左オーディオ信号の利得を調節することと、
前記右オーディオ信号の利得を調節することと、
第１の頭部関連伝達関数（ＨＲＴＦ）を前記左オーディオ信号に適用し、前記左出力オーディオ信号を発生させることと、
第２のＨＲＴＦを前記右オーディオ信号に適用し、前記右出力オーディオ信号を発生させることと
を含む、ことと、
前記ウェアラブル頭部デバイスと関連付けられる左スピーカを介して前記ユーザの左耳に前記左出力オーディオ信号を提示することと、
前記ウェアラブル頭部デバイスと関連付けられる右スピーカを介して前記ユーザの右耳に前記右出力オーディオ信号を提示することと
を含み、
前記遅延プロセスを前記第１の入力オーディオ信号に適用することは、両耳間時間遅延（ＩＴＤ）を前記第１の入力オーディオ信号に適用することを含み、前記ＩＴＤは、前記第１の源場所に基づいて決定される、非一過性コンピュータ可読媒体。
（項目３２）
前記ＩＴＤを決定することは、第１の耳に対応する第１の耳遅延と、第２の耳に対応する第２の耳遅延とを決定することを含む、項目３１に記載の非一過性コンピュータ可読媒体。
（項目３３）
前記第１の耳遅延は、ゼロである、項目３２に記載の非一過性コンピュータ可読媒体。
（項目３４）
前記第１の源場所は、第１の時間における前記仮想環境内の仮想オブジェクトの場所に対応し、
前記方法はさらに、第２の時間における前記仮想環境内の前記仮想オブジェクトの場所に対応する第２の源場所を決定することを含み、
前記第１の耳遅延を決定することは、前記第１の時間に対応する先行の第１の耳遅延と、前記第２の時間に対応する後続の第１の耳遅延とを決定し、前記先行の第１の耳遅延と前記後続の第１の耳遅延との間でクロスフェードし、前記第１の耳遅延を発生させることを含み、
前記第２の耳遅延を決定することは、前記第１の時間に対応する先行の第２の耳遅延と、前記第２の時間に対応する後続の第２の耳遅延とを決定し、前記先行の第２の耳遅延と前記後続の第２の耳遅延との間でクロスフェードし、前記第２の耳遅延を発生させることを含む、
項目３２に記載の非一過性コンピュータ可読媒体。
（項目３５）
前記遅延プロセスを適用することは、フィルタを前記第１の入力オーディオ信号に適用することを含む、項目３４に記載の非一過性コンピュータ可読媒体。
（項目３６）
前記方法はさらに、フィルタを前記左オーディオ信号に適用することを含む、項目３４に記載の非一過性コンピュータ可読媒体。
（項目３７）
前記方法はさらに、フィルタを前記右オーディオ信号に適用することを含む、項目３４に記載の非一過性コンピュータ可読媒体。
（項目３８）
前記遅延プロセスを適用することは、前記第１の時間における第１の遅延モジュールから前記第２の時間における第２の遅延モジュールに遷移することを含み、前記第２の遅延モジュールは、前記第１の遅延モジュールと異なる、項目３４に記載の非一過性コンピュータ可読媒体。
（項目３９）
前記第１の遅延モジュールは、第１の１つ以上のフィルタを前記第１の入力オーディオ信号、前記左オーディオ信号、および前記右オーディオ信号のうちの第１の１つ以上のものに適用することと関連付けられ、前記第２の遅延モジュールは、第２の１つ以上のフィルタを前記第１の入力オーディオ信号、前記左オーディオ信号、および前記右オーディオ信号のうちの第２の１つ以上のものに適用することと関連付けられる、項目３８に記載の非一過性コンピュータ可読媒体。
（項目４０）
前記第１の耳は、前記ユーザの左耳に対応し、前記第２の耳は、前記ユーザの右耳に対応する、項目３４に記載の非一過性コンピュータ可読媒体。
（項目４１）
前記第１の耳は、前記ユーザの右耳に対応し、前記第２の耳は、前記ユーザの左耳に対応する、項目３４に記載の非一過性コンピュータ可読媒体。
（項目４２）
前記第１の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第２の源場所は、前記第１の耳よりも前記第２の耳に近接する、項目３４に記載の非一過性コンピュータ可読媒体。
（項目４３）
前記第２の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第１の源場所は、前記第１の耳よりも前記第２の耳に近接する、項目３４に記載の非一過性コンピュータ可読媒体。
（項目４４）
前記第１の源場所は、前記第２の源場所よりも前記第１の耳に近接し、前記第１の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第２の源場所は、前記第２の耳よりも前記第１の耳に近接する、項目３４に記載の非一過性コンピュータ可読媒体。
（項目４５）
前記第２の源場所は、前記第１の源場所よりも前記第１の耳に近接し、前記第１の源場所は、前記第２の耳よりも前記第１の耳に近接し、前記第２の源場所は、前記第２の耳よりも前記第１の耳に近接する、項目３４に記載の非一過性コンピュータ可読媒体。

図１は、本開示のいくつかの実施形態による、例示的オーディオ空間化システムを図示する。

図２Ａ－２Ｃは、本開示のいくつかの実施形態による、例示的遅延モジュールを図示する。

図３Ａ－３Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源および例示的な対応する遅延モジュールを図示する。

図４Ａ－４Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源および例示的な対応する遅延モジュールを図示する。

図５Ａ－５Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源および例示的な対応する遅延モジュールを図示する。

図６Ａは、本開示のいくつかの実施形態による、例示的クロスフェーダを図示する。

図６Ｂ－６Ｃは、本開示のいくつかの実施形態による、クロスフェーダに関する例示的制御信号を図示する。図６Ｂ－６Ｃは、本開示のいくつかの実施形態による、クロスフェーダに関する例示的制御信号を図示する。

図７Ａ－７Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源およびクロスフェーダを含む例示的な対応する遅延モジュールを図示する。

図８Ａ－８Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源およびクロスフェーダを含む例示的な対応する遅延モジュールを図示する。

図９Ａ－９Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源およびクロスフェーダを含む例示的な対応する遅延モジュールを図示する。

図１０Ａ－１０Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源およびクロスフェーダを含む例示的な対応する遅延モジュールを図示する。

図１１Ａ－１１Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源およびクロスフェーダを含む例示的な対応する遅延モジュールを図示する。

図１２Ａ－１２Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源およびクロスフェーダを含む例示的な対応する遅延モジュールを図示する。

図１３Ａ－１３Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源およびクロスフェーダを含む例示的な対応する遅延モジュールを図示する。

図１４Ａ－１４Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源およびクロスフェーダを含む例示的な対応する遅延モジュールを図示する。

図１５Ａ－１５Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源およびクロスフェーダを含む例示的な対応する遅延モジュールを図示する。

図１６Ａ－１６Ｂは、本開示のいくつかの実施形態による、それぞれ、聴者に対する例示的仮想音源およびクロスフェーダを含む例示的な対応する遅延モジュールを図示する。

図１７は、本開示のいくつかの実施形態による、例示的遅延モジュールを図示する。

図１８Ａ－１８Ｅは、本開示のいくつかの実施形態による、例示的遅延モジュールを図示する。図１８Ａ－１８Ｅは、本開示のいくつかの実施形態による、例示的遅延モジュールを図示する。

図１９－２２は、本開示のいくつかの実施形態による、遅延モジュールの間で遷移するための例示的プロセスを図示する。図１９－２２は、本開示のいくつかの実施形態による、遅延モジュールの間で遷移するための例示的プロセスを図示する。図１９－２２は、本開示のいくつかの実施形態による、遅延モジュールの間で遷移するための例示的プロセスを図示する。図１９－２２は、本開示のいくつかの実施形態による、遅延モジュールの間で遷移するための例示的プロセスを図示する。

図２３は、本開示のいくつかの実施形態による、例示的ウェアラブルシステムを図示する。

図２４は、本開示のいくつかの実施形態による、例示的ウェアラブルシステムと併せて使用され得る、例示的ハンドヘルドコントローラを図示する。

図２５は、本開示のいくつかの実施形態による、例示的ウェアラブルシステムと併せて使用され得る、例示的補助ユニットを図示する。

図２６は、本開示のいくつかの実施形態による、例示的ウェアラブルシステムに関する例示的機能ブロック図を図示する。

実施例の以下の説明では、本明細書の一部を形成し、例証として、実践され得る具体的実施例が示される、付随の図面が、参照される。他の実施例も、使用され得、構造変更が、開示される実施例の範囲から逸脱することなく、行われ得ることを理解されたい。

例示的ウェアラブルシステム

図２３は、ユーザの頭部上に装着されるように構成される、例示的ウェアラブル頭部デバイス２３００を図示する。ウェアラブル頭部デバイス２３００は、頭部デバイス（例えば、ウェアラブル頭部デバイス２３００）、ハンドヘルドコントローラ（例えば、下記に説明されるハンドヘルドコントローラ２４００）、および／または補助ユニット（例えば、下記に説明される補助ユニット２５００）等の１つ以上のコンポーネントを含む、より広範なウェアラブルシステムの一部であってもよい。いくつかの実施例では、ウェアラブル頭部デバイス２３００は、仮想現実、拡張現実、または複合現実システムまたはアプリケーションのために使用されることができる。ウェアラブル頭部デバイス２３００は、ディスプレイ２３１０Ａおよび２３１０Ｂ（左および右透過性ディスプレイと、直交瞳拡大（ＯＰＥ）格子セット２３１２Ａ／２３１２Ｂおよび射出瞳拡大（ＥＰＥ）格子セット２３１４Ａ／２３１４Ｂ等、ディスプレイからユーザの眼に光を結合するための関連付けられるコンポーネントとを含み得る）等の１つ以上のディスプレイと、スピーカ２３２０Ａおよび２３２０Ｂ（それぞれ、つるアーム２３２２Ａおよび２３２２Ｂ上に搭載され、ユーザの左および右耳に隣接して位置付けられ得る）等の左および右音響構造と、赤外線センサ、加速度計、ＧＰＳユニット、慣性測定ユニット（ＩＭＵ、例えば、ＩＭＵ２３２６）、音響センサ（例えば、マイクロホン２３５０）等の１つ以上のセンサと、直交コイル電磁受信機（例えば、左つるアーム２３２２Ａに搭載されるように示される受信機２３２７）と、ユーザから離れるように配向される、左および右カメラ（例えば、深度（飛行時間）カメラ２３３０Ａおよび２３３０Ｂ）と、ユーザに向かって配向される、左および右眼カメラ（例えば、ユーザの眼移動を検出するため）（例えば、眼カメラ２３２８Ａおよび２３２８Ｂ）とを含むことができる。しかしながら、ウェアラブル頭部デバイス２３００は、本発明の範囲から逸脱することなく、任意の好適なディスプレイ技術およびセンサまたは他のコンポーネントの任意の好適な数、タイプ、または組み合わせを組み込むことができる。いくつかの実施例では、ウェアラブル頭部デバイス２３００は、ユーザの音声によって発生されるオーディオ信号を検出するように構成される、１つ以上のマイクロホン１５０を組み込んでもよく、そのようなマイクロホンは、ユーザの口に隣接して位置付けられてもよい。いくつかの実施例では、ウェアラブル頭部デバイス２３００は、他のウェアラブルシステムを含む、他のデバイスおよびシステムと通信するために、ネットワーキング特徴（例えば、Ｗｉ－Ｆｉ能力）を組み込んでもよい。ウェアラブル頭部デバイス２３００はさらに、バッテリ、プロセッサ、メモリ、記憶ユニット、または種々の入力デバイス（例えば、ボタン、タッチパッド）等のコンポーネントを含んでもよい、または１つ以上のそのようなコンポーネントを含むハンドヘルドコントローラ（例えば、ハンドヘルドコントローラ２４００）または補助ユニット（例えば、補助ユニット２５００）に結合されてもよい。いくつかの実施例では、センサは、ユーザの環境に対する頭部搭載型ユニットの座標のセットを出力するように構成されてもよく、入力をプロセッサに提供し、同時位置特定およびマッピング（ＳＬＡＭ）プロシージャおよび／またはビジュアルオドメトリアルゴリズムを実施してもよい。いくつかの実施例では、ウェアラブル頭部デバイス２３００は、下記にさらに説明されるように、ハンドヘルドコントローラ２４００および／または補助ユニット２５００に結合されてもよい。

図２４は、例示的ウェアラブルシステムの例示的モバイルハンドヘルドコントローラコンポーネント２４００を図示する。いくつかの実施例では、ハンドヘルドコントローラ２４００は、ウェアラブル頭部デバイス２３００および／または下記に説明される補助ユニット２５００と有線または無線通信してもよい。いくつかの実施例では、ハンドヘルドコントローラ２４００は、ユーザによって保持されるべき取っ手部分２４２０と、上面２４１０に沿って配置される１つ以上のボタン２４４０とを含む。いくつかの実施例では、ハンドヘルドコントローラ２４００は、光学追跡標的としての使用のために構成されてもよく、例えば、ウェアラブル頭部デバイス２３００のセンサ（例えば、カメラまたは他の光学センサ）は、ハンドヘルドコントローラ２４００の位置および／または配向を検出するように構成されることができ、これは、転じて、ハンドヘルドコントローラ２４００を保持するユーザの手の位置および／または配向を示し得る。いくつかの実施例では、ハンドヘルドコントローラ２４００は、プロセッサ、メモリ、記憶ユニット、ディスプレイ、または上記に説明されるもの等の１つ以上の入力デバイスを含んでもよい。いくつかの実施例では、ハンドヘルドコントローラ２４００は、１つ以上のセンサ（例えば、ウェアラブル頭部デバイス２３００に関して上記に説明されるセンサまたは追跡コンポーネントのうちのいずれか）を含む。いくつかの実施例では、センサは、ウェアラブル頭部デバイス２３００に対する、またはウェアラブルシステムの別のコンポーネントに対するハンドヘルドコントローラ２４００の位置または配向を検出することができる。いくつかの実施例では、センサは、ハンドヘルドコントローラ２４００の取っ手部分２４２０内に位置付けられてもよい、および／またはハンドヘルドコントローラに機械的に結合されてもよい。ハンドヘルドコントローラ２４００は、例えば、ボタン２４４０の押下状態、またはハンドヘルドコントローラ２４００の位置、配向、および／または運動（例えば、ＩＭＵを介して）に対応する、１つ以上の出力信号を提供するように構成されることができる。そのような出力信号は、ウェアラブル頭部デバイス２３００のプロセッサへの、補助ユニット２５００への、またはウェアラブルシステムの別のコンポーネントへの入力として使用されてもよい。いくつかの実施例では、ハンドヘルドコントローラ２４００は、音（例えば、ユーザの発話、環境音）を検出し、ある場合には、検出された音に対応する信号をプロセッサ（例えば、ウェアラブル頭部デバイス２３００のプロセッサ）に提供するために、１つ以上のマイクロホンを含むことができる。

図２５は、例示的ウェアラブルシステムの例示的補助ユニット２５００を図示する。いくつかの実施例では、補助ユニット２５００は、ウェアラブル頭部デバイス２３００および／またはハンドヘルドコントローラ２４００と有線または無線通信してもよい。補助ユニット２５００は、ウェアラブル頭部デバイス２３００および／またはハンドヘルドコントローラ２４００（ディスプレイ、センサ、音響構造、プロセッサ、マイクロホン、および／またはウェアラブル頭部デバイス２３００またはハンドヘルドコントローラ２４００の他のコンポーネントを含む）等のウェアラブルシステムの１つ以上のコンポーネントを動作させるためのエネルギーを提供するために、バッテリを含むことができる。いくつかの実施例では、補助ユニット２５００は、プロセッサ、メモリ、記憶ユニット、ディスプレイ、１つ以上の入力デバイス、および／または上記に説明されるもの等の１つ以上のセンサを含んでもよい。いくつかの実施例では、補助ユニット２５００は、補助ユニットをユーザ（例えば、ユーザによって装着されるベルト）に取り付けるためのクリップ２５１０を含む。ウェアラブルシステムの１つ以上のコンポーネントを格納するために補助ユニット２５００を使用する利点は、そのように行うことが、大きいまたは重いコンポーネントが、（例えば、ウェアラブル頭部デバイス２３００内に格納される場合）ユーザの頭部に搭載される、または（例えば、ハンドヘルドコントローラ２４００内に格納される場合）ユーザの手によって担持されるのではなく、大きく重い物体を支持するために比較的に良好に適しているユーザの腰部、胸部、または背部の上に担持されることを可能にし得ることである。これは、バッテリ等の比較的に重いまたは嵩張るコンポーネントに関して特に有利であり得る。

図２６は、上記に説明される、例示的ウェアラブル頭部デバイス２３００と、ハンドヘルドコントローラ２４００と、補助ユニット２５００とを含み得る等、例示的ウェアラブルシステム２６００に対応し得る、例示的機能ブロック図を示す。いくつかの実施例では、ウェアラブルシステム２６００は、仮想現実、拡張現実、または複合現実用途のために使用され得る。図２６に示されるように、ウェアラブルシステム２６００は、ここでは「トーテム」と称される（および上記に説明されるハンドヘルドコントローラ２４００に対応し得る）例示的ハンドヘルドコントローラ２６００Ｂを含むことができ、ハンドヘルドコントローラ２６００Ｂは、トーテム／ヘッドギヤ６自由度（６ＤＯＦ）トーテムサブシステム２６０４Ａを含むことができる。ウェアラブルシステム２６００はまた、（上記に説明されるウェアラブル頭部デバイス２３００に対応し得る）例示的ヘッドギヤデバイス２６００Ａを含むことができ、ヘッドギヤデバイス２６００Ａは、トーテム／ヘッドギヤ６ＤＯＦヘッドギヤサブシステム２６０４Ｂを含む。実施例では、６ＤＯＦトーテムサブシステム２６０４Ａおよび６ＤＯＦヘッドギヤサブシステム２６０４Ｂは、協働し、ヘッドギヤデバイス２６００Ａに対するハンドヘルドコントローラ２６００Ｂの６つの座標（例えば、３つの平行移動方向におけるオフセットおよび３つの軸に沿った回転）を決定する。６自由度は、ヘッドギヤデバイス２６００Ａの座標系に対して表されてもよい。３つの平行移動オフセットは、そのような座標系内におけるＸ、Ｙ、およびＺオフセット、平行移動行列、またはある他の表現として表されてもよい。回転自由度は、ヨー、ピッチ、およびロール回転のシーケンス、ベクトル、回転行列、四元数、またはある他の表現として表されてもよい。いくつかの実施例では、ヘッドギヤデバイス２６００Ａ内に含まれる１つ以上の深度カメラ２６４４（および／または１つ以上の非深度カメラ）および／または１つ以上の光学標的（例えば、上記に説明されるようなハンドヘルドコントローラ２４００のボタン２４４０またはハンドヘルドコントローラ内に含まれる専用光学標的）は、６ＤＯＦ追跡のために使用されることができる。いくつかの実施例では、ハンドヘルドコントローラ２６００Ｂは、上記に説明されるようなカメラを含むことができ、ヘッドギヤデバイス２６００Ａは、カメラと併せた光学追跡のための光学標的を含むことができる。いくつかの実施例では、ヘッドギヤデバイス２６００Ａおよびハンドヘルドコントローラ２６００Ｂは、それぞれ、３つの直交して配向されるソレノイドのセットを含み、これは、３つの区別可能な信号を無線で送信および受信するために使用される。受信するために使用される、コイルのそれぞれの中で受信される３つの区別可能な信号の相対的大きさを測定することによって、ヘッドギヤデバイス２６００Ａに対するハンドヘルドコントローラ２６００Ｂの６ＤＯＦが、決定されてもよい。いくつかの実施例では、６ＤＯＦトーテムサブシステム２６０４Ａは、ハンドヘルドコントローラ２６００Ｂの高速移動に関する改良された正確度および／またはよりタイムリーな情報を提供するために有用である、慣性測定ユニット（ＩＭＵ）を含むことができる。

拡張現実または複合現実用途を伴ういくつかの実施例では、座標をローカル座標空間（例えば、ヘッドギヤデバイス２６００Ａに対して固定される座標空間）から慣性座標空間に、または環境座標空間に変換することが、望ましくあり得る。例えば、そのような変換は、ヘッドギヤデバイス２６００Ａのディスプレイが、ディスプレイ上の固定位置および配向において（例えば、ヘッドギヤデバイス２６００Ａのディスプレイにおける同一の位置において）ではなく、仮想オブジェクトを実環境に対する予期される位置および配向において提示する（例えば、ヘッドギヤデバイス２６００Ａの位置および配向にかかわらず、前方に向いた実椅子に着座している仮想人物）ために必要であり得る。これは、仮想オブジェクトが、実環境内に存在する（かつ、例えば、ヘッドギヤデバイス２６００Ａが、偏移および回転するにつれて、実環境内に不自然に位置付けられて現れない）という錯覚を維持することができる。いくつかの実施例では、座標空間の間の補償変換が、慣性または環境座標系に対するヘッドギヤデバイス２６００Ａの変換を決定するために、（例えば、同時位置特定およびマッピング（ＳＬＡＭ）および／またはビジュアルオドメトリプロシージャを使用して）深度カメラ２６４４からの画像を処理することによって決定されることができる。図２６に示される実施例では、深度カメラ２６４４は、ＳＬＡＭ／ビジュアルオドメトリブロック２６０６に結合されることができ、画像をブロック２６０６に提供することができる。ＳＬＡＭ／ビジュアルオドメトリブロック２６０６実装は、本画像を処理し、次いで、頭部座標空間と実座標空間との間の変換を識別するために使用され得る、ユーザの頭部の位置および配向を決定するように構成される、プロセッサを含むことができる。同様に、いくつかの実施例では、ユーザの頭部姿勢および場所に関する情報の付加的源が、ヘッドギヤデバイス２６００ＡのＩＭＵ２６０９から取得される。ＩＭＵ２６０９からの情報は、ＳＬＡＭ／ビジュアルオドメトリブロック２６０６からの情報と統合され、ユーザの頭部姿勢および位置の高速調節に関する改良された正確度および／またはよりタイムリーな情報を提供することができる。

いくつかの実施例では、深度カメラ２６４４は、ヘッドギヤデバイス２６００Ａのプロセッサ内に実装され得る、手のジェスチャトラッカ２６１１に、３Ｄ画像を供給することができる。手のジェスチャトラッカ２６１１は、例えば、深度カメラ２６４４から受信された３Ｄ画像を手のジェスチャを表す記憶されたパターンに合致させることによって、ユーザの手のジェスチャを識別することができる。ユーザの手のジェスチャを識別する他の好適な技法も、明白となるであろう。

いくつかの実施例では、１つ以上のプロセッサ２６１６は、ヘッドギヤサブシステム２６０４Ｂ、ＩＭＵ２６０９、ＳＬＡＭ／ビジュアルオドメトリブロック２６０６、深度カメラ２６４４、マイクロホン２６５０、および／または手のジェスチャトラッカ２６１１からデータを受信するように構成されてもよい。プロセッサ２６１６はまた、制御信号を６ＤＯＦトーテムシステム２６０４Ａに送信し、それから受信することができる。プロセッサ２６１６は、ハンドヘルドコントローラ２６００Ｂがテザリングされない実施例等では、無線で、６ＤＯＦトーテムシステム２６０４Ａに結合されてもよい。プロセッサ２６１６はさらに、視聴覚コンテンツメモリ２６１８、グラフィカル処理ユニット（ＧＰＵ）２６２０、および／またはデジタル信号プロセッサ（ＤＳＰ）オーディオ空間化装置２６２２等の付加的コンポーネントと通信してもよい。ＤＳＰオーディオ空間化装置２６２２は、頭部関連伝達関数（ＨＲＴＦ）メモリ２６２５に結合されてもよい。ＧＰＵ２６２０は、画像毎に変調された光の左源２６２４に結合される、左チャネル出力と、画像毎に変調された光の右源２６２６に結合される、右チャネル出力とを含むことができる。ＧＰＵ２６２０は、立体視画像データを画像毎に変調された光の源２６２４、２６２６に出力することができる。ＤＳＰオーディオ空間化装置２６２２は、オーディオを左スピーカ２６１２および／または右スピーカ２６１４に出力することができる。ＤＳＰオーディオ空間化装置２６２２は、プロセッサ２６１６から、ユーザから仮想音源（例えば、ハンドヘルドコントローラ２６００Ｂを介して、ユーザによって移動され得る）への方向ベクトルを示す入力を受信することができる。方向ベクトルに基づいて、ＤＳＰオーディオ空間化装置２６２２は、対応するＨＲＴＦを決定することができる（例えば、ＨＲＴＦにアクセスすることによって、または複数のＨＲＴＦを補間することによって）。ＤＳＰオーディオ空間化装置２６２２は、次いで、決定されたＨＲＴＦを仮想オブジェクトによって発生された仮想音に対応するオーディオ信号等のオーディオ信号に適用することができる。これは、複合現実環境内の仮想音に対するユーザの相対的位置および配向を組み込むことによって、すなわち、その仮想音が、実環境内の実音である場合に聞こえるであろうもののユーザの予期に合致する仮想音を提示することによって、仮想音の信憑性および現実性を向上させることができる。

図２６に示されるもの等のいくつかの実施例では、プロセッサ２６１６、ＧＰＵ２６２０、ＤＳＰオーディオ空間化装置２６２２、ＨＲＴＦメモリ２６２５、およびオーディオ／視覚的コンテンツメモリ２６１８のうちの１つ以上のものは、補助ユニット２６００Ｃ（上記に説明される補助ユニット２５００に対応し得る）内に含まれてもよい。補助ユニット２６００Ｃは、バッテリ２６２７を含み、そのコンポーネントを給電する、および／または電力をヘッドギヤデバイス２６００Ａおよび／またはハンドヘルドコントローラ２６００Ｂに供給してもよい。そのようなコンポーネントを、ユーザの腰部に搭載され得る、補助ユニット内に含むことは、ヘッドギヤデバイス２６００Ａのサイズおよび重量を限定することができ、これは、ひいては、ユーザの頭部および頸部の疲労を低減させることができる。

図２６は、例示的ウェアラブルシステム２６００の種々のコンポーネントに対応する要素を提示するが、これらのコンポーネントの種々の他の好適な配列も、当業者に明白となるであろう。例えば、補助ユニット２６００Ｃと関連付けられるものとして図２６に提示される要素は、代わりに、ヘッドギヤデバイス２６００Ａまたはハンドヘルドコントローラ２６００Ｂと関連付けられ得る。さらに、いくつかのウェアラブルシステムは、ハンドヘルドコントローラ２６００Ｂまたは補助ユニット２６００Ｃを完全に無くしてもよい。そのような変更および修正は、開示される実施例の範囲内に含まれるものとして理解されるものである。

オーディオレンダリング

下記に説明されるシステムおよび方法は、上記に説明されるもの等の拡張現実または複合現実システムにおいて実装されることができる。例えば、拡張現実システムの１つ以上のプロセッサ（例えば、ＣＰＵ、ＤＳＰ）が、オーディオ信号を処理するために、または下記に説明されるコンピュータ実装方法のステップを実装するために使用されることができ、拡張現実システムのセンサ（例えば、カメラ、音響センサ、ＩＭＵ、ＬＩＤＡＲ、ＧＰＳ）が、本システムのユーザまたはユーザの環境内の要素の位置および／または配向を決定するために使用されることができ、拡張現実システムのスピーカが、オーディオ信号をユーザに提示するために使用されることができる。

上記に説明されるもの等の拡張現実または複合現実システムでは、１つ以上のプロセッサ（例えば、ＤＳＰオーディオ空間化装置２６２２）は、１つ以上のスピーカ（例えば、上記に説明される左および右スピーカ２６１２／２６１４）を介したウェアラブル頭部デバイスのユーザへの提示のために、１つ以上のオーディオ信号を処理することができる。いくつかの実施形態では、１つ以上のスピーカは、ウェアラブル頭部デバイスとは別個のユニット（例えば、ヘッドホン）に属してもよい。オーディオ信号の処理は、知覚されるオーディオ信号の真正性、例えば、複合現実環境内のユーザに提示されるオーディオ信号が、オーディオ信号が実環境内で聞こえるであろう方法のユーザの予期に合致する程度と、オーディオ信号を処理する際に伴う算出オーバーヘッドとの間のトレードオフを要求する。仮想環境内でオーディオ信号を現実的に空間化することは、没入感および信憑性があるユーザ体験を作成することに対して重要であり得る。

図１は、いくつかの実施形態による、例示的空間化システム１００を図示する。システム１００は、入力音／信号を空間化することによって音景（音環境）を作成する。システム１００は、エンコーダ１０４と、ミキサ１０６と、デコーダ１１０とを含む。

システム１００は、入力信号１０２を受信する。入力信号１０２は、音景内に提示されるべきオブジェクトに対応するデジタルオーディオ信号を含んでもよい。いくつかの実施形態では、デジタルオーディオ信号は、オーディオデータのパルスコード変調（ＰＣＭ）波形であってもよい。

エンコーダ１０４は、入力信号１０２を受信し、１つ以上の左利得調節信号および１つ以上の右利得調節信号を出力する。実施例では、エンコーダ１０４は、遅延モジュール１０５を含む。遅延モジュール１０５は、プロセッサ（上記に説明される拡張現実システムのプロセッサ等）によって実行され得る、遅延プロセスを含むことができる。音景内のオブジェクトが具体的場所から生じるように現れさせるために、エンコーダ１０４は、それに応じて、遅延モジュール１０５を使用して入力信号１０２を遅延させ、利得モジュール（ｇ＿Ｌ１ … ｇ＿ＬＭおよびｇ＿Ｒ１ … ｇ＿ＲＭ）に入力される制御信号（ＣＴＲＬ＿Ｌ１ … ＣＲＴＬ＿ＬＭおよびＣＴＲＬ＿Ｒ１ … ＣＴＲＬ＿ＲＭ）の値を設定する。

遅延モジュール１０５は、入力信号１０２を受信し、左耳遅延および右耳遅延を出力する。左耳遅延は、左利得モジュール（ｇ＿Ｌ１ … ｇ＿ＬＭ）に入力され、右耳遅延は、右利得モジュール（ｇ＿Ｒ１ … ｇ＿ＲＭ）に入力される。左耳遅延は、第１の値だけ遅延された入力信号１０２であってもよく、右耳遅延は、第２の値だけ遅延された入力信号１０２であってもよい。いくつかの実施形態では、左耳遅延および／または右耳遅延は、ゼロであってもよく、その場合では、遅延モジュール１０５は、それぞれ、入力信号１０２を左利得モジュールおよび／または右利得モジュールに効果的にルーティングする。両耳間時間差（ＩＴＤ）は、左耳遅延と右耳遅延との間の差異であり得る。

１つ以上の左制御信号（ＣＴＲＬ＿Ｌ１ … ＣＴＲＬ＿ＬＭ）が、１つ以上の左利得モジュールに入力され、１つ以上の右制御値（ＣＴＲＬ＿Ｒ１ … ＣＴＲＬ＿ＲＭ）が、１つ以上の右利得モジュールに入力される。１つ以上の左利得モジュールは、１つ以上の左利得調節信号を出力し、１つ以上の右利得モジュールは、１つ以上の右利得調節信号を出力する。

１つ以上の左利得モジュールはそれぞれ、１つ以上の左制御信号の制御信号の値に基づいて、左耳遅延の利得を調節し、１つ以上の右利得モジュールはそれぞれ、１つ以上の右制御信号の制御信号の値に基づいて、右耳遅延の利得を調節する。

エンコーダ１０４は、入力信号１０２が対応する音景内に提示されるべきオブジェクトの場所に基づいて、利得モジュールに入力される制御信号の値を調節する。各利得モジュールは、入力信号１０２に、制御信号の値の関数である係数を乗算する、乗算器であってもよい。

ミキサ１０６は、エンコーダ１０４から利得調節信号を受信し、利得調節信号を混合し、混合された信号を出力する。混合された信号は、デコーダ１１０に入力され、デコーダ１１０の出力は、左耳スピーカ１１２Ａおよび右耳スピーカ１１２Ｂ（以降、集合的に、「スピーカ１１２」と称される）に入力される。

デコーダ１１０は、左ＨＲＴＦフィルタＬ＿ＨＲＴＦ＿１－Ｍと、右ＨＲＴＦフィルタＲ＿ＨＲＴＦ＿１－Ｍとを含む。デコーダ１１０は、ミキサ１０６から混合された信号を受信し、混合された信号をフィルタ処理および合計し、フィルタ処理された信号をスピーカ１１２に出力する。デコーダ１１０の第１の加算ブロック／回路は、左ＨＲＴＦフィルタから出力された左のフィルタ処理された信号を合計し、デコーダ１１０の第２の加算ブロック／回路は、右ＨＲＴＦフィルタから出力された右のフィルタ処理された信号を合計する。

いくつかの実施形態では、デコーダ１１０は、Ｊｏｔ，ｅｔａｌ，ＢｉｎａｕｒａｌＳｉｍｕｌａｔｉｏｎｏｆＣｏｍｐｌｅｘＡｃｏｕｓｔｉｃＳｃｅｎｅｓｆｏｒＩｎｔｅｒａｃｔｉｖｅＡｕｄｉｏ，ＡｕｄｉｏＥｎｇｉｎｅｅｒｉｎｇＳｏｃｉｅｔｙＣｏｎｖｅｎｔｉｏｎＰａｐｅｒ，ｐｒｅｓｅｎｔｅｄＯｃｔｏｂｅｒ５－８，２００６（その内容が、参照することによってその全体として本明細書に組み込まれる）に説明されるもの等、左／右物理的スピーカの位置を個別の耳の位置に変換するためのクロストークキャンセラを含んでもよい。

いくつかの実施形態では、デコーダ１１０は、ＨＲＴＦフィルタのバンクを含んでもよい。バンク内のＨＲＴＦフィルタはそれぞれ、ユーザの頭部に対する具体的方向をモデル化してもよい。これらの方法は、空間関数の固定セットおよび基底フィルタの固定セットにわたるＨＲＴＦデータの分解に基づいてもよい。これらの実施形態では、ミキサ１０６からの各混合された信号は、源の方向に最も近い方向をモデル化するＨＲＴＦフィルタの入力に混合されてもよい。それらのＨＲＴＦフィルタのそれぞれに混合される信号のレベルは、源の具体的方向によって決定される。

いくつかの実施形態では、システム１００は、複数の入力信号を受信してもよく、複数の入力信号のそれぞれに関するエンコーダを含んでもよい。入力信号の合計数は、音景内に提示されるべきオブジェクトの合計数を表し得る。

音景内に提示されるオブジェクトの方向が、変化する場合、エンコーダ１０４Ａが、１つ以上の左利得モジュールおよび１つ以上の右利得モジュールに入力される１つ以上の左制御信号および１つ以上の右制御信号の値を変化させることができるだけではなく、遅延モジュール１０５は、音景内にオブジェクトを適切に提示するために、入力信号１０２の遅延を変化させ、左耳遅延および／または右耳遅延を生成してもよい。

図２Ａ－２Ｃは、いくつかの実施形態による、遅延モジュール２０５の種々のモードを図示する。遅延モジュール２０５は、ある値、例えば、時間値、サンプルカウント、および同等物だけ入力信号を遅延させる、遅延ユニット２１６を含んでもよい。図２Ａ－２Ｃに示される例示的遅延モジュールのうちの１つ以上のものは、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。

図２Ａは、いくつかの実施形態による、遅延モジュール２０５のゼロタップ遅延モードを図示する。ゼロタップ遅延モードでは、入力信号２０２は、第１の耳遅延２２２および第２の耳遅延２２４を作成するように分割される。遅延ユニット２１６は、入力信号２０２を受信するが、入力信号２０２を遅延させない。いくつかの実施形態では、遅延ユニット２１６は、入力信号２０２を受信し、入力信号２０２のサンプルでバッファを満たし、これは、次いで、遅延モジュール２０５が、１タップ遅延モードまたは２タップ遅延モード（下記に説明される）に遷移する場合に使用されてもよい。遅延モジュール２０５は、第１の耳遅延２２２および第２の耳遅延２２４を出力し、これは、単純に、入力信号２０２（いかなる遅延も伴わない）である。

図２Ｂは、いくつかの実施形態による、遅延モジュール２０５の１タップ遅延モードを図示する。１タップ遅延モードでは、入力信号２０２は、第２の耳遅延２２８を作成するように分割される。遅延ユニット２１６は、入力信号２０２を受信し、第１の値だけ入力信号２０２を遅延させ、第１の耳遅延２２６を出力する。第２の耳遅延２２８は、単純に、入力信号２０２（いかなる遅延も伴わない）である。遅延モジュール２０５は、第１の耳遅延２２６および第２の耳遅延２２８を出力する。いくつかの実施形態では、第１の耳遅延２２６は、左耳遅延であってもよく、第２の耳遅延２２８は、右耳遅延であってもよい。いくつかの実施形態では、第１の耳遅延２２６は、右耳遅延であってもよく、第２の耳遅延２２８は、左耳遅延であってもよい。

図２Ｃは、いくつかの実施形態による、遅延モジュール２０５の２タップ遅延モードを図示する。２タップ遅延モードでは、遅延ユニット２１６は、入力信号２０２を受信し、第１の値だけ入力信号２０２を遅延させ、第１の耳遅延２３２を出力し、第２の値だけ入力信号２０２を遅延させ、第２の耳遅延２３４を出力する。いくつかの実施形態では、第１の耳遅延２３２は、左耳遅延であってもよく、第２の耳遅延２３４は、右耳遅延であってもよい。いくつかの実施形態では、第１の耳遅延２３２は、右耳遅延であってもよく、第２の耳遅延２３４は、左耳遅延であってもよい。

いくつかの実施形態では、音景（音環境）が、ユーザに提示されてもよい。以下の議論は、単一の仮想オブジェクトを伴う音景に関するが、しかしながら、本明細書に説明される原理は、多くの仮想オブジェクトを伴う音景に適用可能であり得る。

図３Ａは、いくつかの実施形態による、ユーザ３０２と、正中面３０６上の仮想オブジェクト（ハチ）３０４とを含む、環境３００を図示する。ユーザ３０２の左耳から仮想ハチ３０４までの距離３０８は、ユーザ３０２の右耳から仮想ハチ３０４までの距離３１０に等しい。したがって、仮想ハチ３０４からの音は、左耳および右耳の両方に到達するまでに同一の時間量がかかるはずである。

図３Ｂは、いくつかの実施形態による、図３Ａの環境３００に対応する、遅延モジュール３１２を図示する。遅延モジュール３１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。図３Ｂに図示されるように、遅延モジュール３１２は、ゼロタップ遅延モードにあり、入力信号３１４は、左耳遅延３１６および右耳遅延３１８を作成するように分割される。左耳遅延３１６および右耳遅延３１８は、距離３０８および距離３１０が、同一であるため、単純に、入力信号３１４である。遅延ユニット３２０は、入力信号３１４を受信するが、信号を出力しない。いくつかの実施形態では、遅延ユニット３１６は、入力信号３１４を受信し、入力信号３１４のサンプルでバッファを満たし、これは、次いで、遅延モジュール３１２が、１タップ遅延モードまたは２タップ遅延モードに遷移する場合に使用されてもよい。遅延モジュール３１２は、左耳遅延３１６および右耳遅延３１８を出力する。

図４Ａは、いくつかの実施形態による、ユーザ４０２と、正中面４０６の左側の仮想オブジェクト（ハチ）４０４とを含む、環境４００を図示する。ユーザ４０２の右耳から仮想ハチ４０４までの距離４１０は、ユーザ４０２の左耳から仮想ハチ４０４までの距離４０８を上回る。したがって、仮想ハチ４０４からの音は、左耳よりも右耳に到達するまでにより長くかかるはずである。

図４Ｂは、いくつかの実施形態による、図４Ａの環境４００に対応する、遅延モジュール４１２を図示する。遅延モジュール４１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。図４Ｂに図示されるように、遅延モジュール４１２は、第１のタップ遅延モードにあり、入力信号４１４は、左耳遅延４１６を作成するように分割される。遅延ユニット４２０は、入力信号４１４を受信し、時間４２２だけ入力信号４１４を遅延させ、右耳遅延４１８を出力する。左耳遅延４１６は、単純に、入力信号４１４であり、右耳遅延４１８は、単純に、入力信号４１４の遅延バージョンである。遅延モジュール４１２は、左耳遅延４１６および右耳遅延４１８を出力する。

図５Ａは、いくつかの実施形態による、ユーザ５０２と、正中面５０６の右側の仮想オブジェクト（ハチ）５０４とを含む、環境５００を図示する。ユーザ５０２の左耳から仮想ハチ５０４までの距離５０８は、ユーザ５０２の右耳から仮想ハチ５０４までの距離５１０を上回る。したがって、仮想ハチ５０４からの音は、右耳よりも左耳に到達するまでにより長くかかるはずである。

図５Ｂは、いくつかの実施形態による、図５Ａの環境５００に対応する、遅延モジュール５１２を図示する。遅延モジュール５１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。図５Ｂに図示されるように、遅延モジュール５１２は、１タップ遅延モードにあり、入力信号５１４は、右耳遅延５１８を作成するように分割される。遅延ユニット５２０は、入力信号５１４を受信し、時間５２２だけ入力信号５１４を遅延させ、左耳遅延５１６を出力する。右耳遅延５１８は、単純に、入力信号５１４であり、左耳遅延５１６は、単純に、入力信号５１４の遅延バージョンである。遅延モジュール５１２は、左耳遅延５１６および右耳遅延５１８を出力する。

いくつかの実施形態では、音景内の仮想オブジェクトの方向は、ユーザに対して変化する。例えば、仮想オブジェクトは、いくつか例を挙げると、正中面の左側から正中面の右側に移動し、正中面の右側から正中面の左側に移動し、正中面の右側の第１の位置から正中面の右側の第２の位置に移動し、第２の位置は、第１の位置よりも正中面に近接し、正中面の右側の第１の位置から正中面の右側の第２の位置に移動し、第２の位置は、第１の位置よりも正中面から遠く、正中面の左側の第１の位置から正中面の左側の第２の位置に移動し、第２の位置は、第１の位置よりも正中面に近接し、正中面の左側の第１の位置から正中面の左側の第２の位置に移動し、第２の位置は、第１の位置よりも正中面から遠く、正中面の右側から正中面上に移動し、正中面上から正中面の右側に移動し、正中面の左側から正中面上に移動し、正中面から正中面の左側に移動し得る。

いくつかの実施形態では、ユーザに対する音景内の仮想オブジェクトの方向の変化は、ＩＴＤ（例えば、左耳遅延と右耳遅延との間の差異）の変化を要求し得る。

いくつかの実施形態では、遅延モジュール（例えば、例示的システム１００に示される遅延モジュール１０５）は、仮想オブジェクトの方向の変化に基づいて、左耳遅延および／または右耳遅延を瞬間的に変化させることによって、ＩＴＤを変化させてもよい。しかしながら、左耳遅延および／または右耳遅延を瞬間的に変化させることは、音アーチファクトをもたらし得る。音アーチファクトは、例えば、「クリック」音であり得る。そのような音アーチファクトを最小限にすることが、望ましい。

いくつかの実施形態では、遅延モジュール（例えば、例示的システム１００に示される遅延モジュール１０５）は、仮想オブジェクトの方向の変化に基づいて、遅延の値のランピングまたは平滑化を使用して左耳遅延および／または右耳遅延を変化させることによって、ＩＴＤを変化させてもよい。しかしながら、遅延の値のランピングまたは平滑化を使用して左耳遅延および／または右耳遅延を変化させることは、音アーチファクトをもたらし得る。音アーチファクトは、例えば、ピッチの変化であり得る。そのような音アーチファクトを最小限にすることが、望ましい。いくつかの実施形態では、遅延の値のランピングまたは平滑化を使用して左耳遅延および／または右耳遅延を変化させることは、例えば、ランピングまたは平滑化を算出および実行するためにかかる時間に起因して、および／または新しい音が配信されるまでにかかる時間に起因して、待ち時間を導入し得る。そのような待ち時間を最小限にすることが、望ましい。

いくつかの実施形態では、遅延モジュール（例えば、例示的システム１００に示される遅延モジュール１０５）は、第１の遅延から後続遅延へのクロスフェードを使用して左耳遅延および／または右耳遅延を変化させることによって、ＩＴＤを変化させてもよい。クロスフェードは、例えば、時間ドメイン内で信号を伸長または圧縮しないように回避することによって、遅延値の間の遷移の間のアーチファクトを低減させ得る。時間ドメイン内で信号を伸長または圧縮することは、上記に説明されるような「クリック」音またはピッチ偏移をもたらし得る。

図６Ａは、いくつかの実施形態による、クロスフェーダ６００を図示する。クロスフェーダ６００は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。クロスフェーダ６００は、入力として第１の耳遅延６０２および後続耳遅延６０４を受信し、クロスフェードされた耳遅延６０６を出力する。クロスフェーダ６００は、第１のレベルフェーダ（Ｇｆ）６０８と、後続レベルフェーダ（Ｇｓ）６１０と、加算器６１２とを含む。第１のレベルフェーダ６０８は、制御信号ＣＴＲＬ＿Ｇｆの変化に基づいて、第１の耳遅延のレベルを漸進的に減少させ、後続レベルフェーダ６１０は、制御信号ＣＴＲＬ＿Ｇｓの変化に基づいて、後続耳遅延のレベルを漸進的に増加させる。加算器６１２は、第１のレベルフェーダ６０８および後続レベルフェーダ６１２の出力を合計する。

図６Ｂは、いくつかの実施形態による、制御信号ＣＴＲＬ＿Ｇｆのモデルを図示する。示される実施例では、制御信号ＣＴＲＬ＿Ｇｆの値は、ある時間周期にわたって１からゼロに減少する（例えば、時間ｔ＿０において１および時間ｔ＿ｅｎｄにおいてゼロ）。いくつかの実施形態では、制御信号ＣＴＲＬ＿Ｇｆの値は、直線的に、指数関数的に、またはある他の関数で１からゼロに減少してもよい。

図６Ｃは、いくつかの実施形態による、制御信号ＣＴＲＬ＿Ｇｓのモデルを図示する。示される実施例では、制御信号ＣＴＲＬ＿Ｇｓの値は、ある時間周期にわたってゼロから１に増加する（例えば、時間ｔ＿０においてゼロおよび時間ｔ＿ｅｎｄにおいて１）。いくつかの実施形態では、制御信号ＣＴＲＬ＿Ｇｓの値は、直線的に、指数関数的に、またはある他の関数でゼロから１に増加してもよい。

図７Ａは、いくつかの実施形態による、ユーザ７０２と、第１の時間における正中面７０６の左側の仮想オブジェクト（ハチ）７０４Ａおよび後続時間における正中面７０６の右側の仮想オブジェクト（ハチ）７０４Ｂとを含む、環境７００を図示する。第１の時間において、仮想ハチ７０４Ａからユーザ７０２の右耳までの距離７１０Ａは、仮想ハチ７０４Ａからユーザ７０２の左耳までの距離７０８Ａを上回る。したがって、第１の時間において、仮想ハチ７０４Ａからの音は、左耳よりも右耳に到達するまでにより長くかかるはずである。後続時間において、仮想ハチ７０４Ｂから左耳までの距離７０８Ｂは、仮想ハチ７０４Ｂから右耳までの距離７１０Ｂを上回る。したがって、後続時間において、仮想ハチ７０４Ｂからの音は、右耳よりも左耳に到達するまでにより長くかかるはずである。

図７Ｂは、いくつかの実施形態による、図７Ａの環境７００に対応する、遅延モジュール７１２を図示する。遅延モジュール７１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。遅延モジュール７１２は、入力信号７１４を受信し、左耳遅延７１６および右耳遅延７１８を出力する。遅延モジュール７１２は、遅延ユニット７２０と、２つのクロスフェーダ、すなわち、左クロスフェーダ７３０Ａおよび右クロスフェーダ７３０Ｂとを含む。左クロスフェーダ７３０Ａは、第１のレベルフェーダ（Ｇｆ）７２２Ａと、後続レベルフェーダ（Ｇｓ）７２４Ａと、加算器７２６Ａとを含む。右クロスフェーダ７３０Ｂは、第１のレベルフェーダ（Ｇｆ）７２２Ｂと、後続レベルフェーダ（Ｇｓ）７２４Ｂと、加算器７２６Ｂとを含む。

第１の時間において、距離７１０Ａは、距離７０８Ａを上回る。第１の時間に関して、入力信号７１４は、第１のレベルフェーダ７２２Ａに直接供給され、遅延ユニット７２０は、第１の時間だけ入力信号７１４を遅延させ、第１の時間だけ遅延された入力信号７１４を第１のレベルフェーダ７２２Ｂに供給する。

後続時間において、距離７０８Ｂは、距離７１０Ａを上回る。後続時間に関して、入力信号７１４は、後続レベルフェーダ７２４Ｂに直接供給され、遅延ユニット７２０は、後続時間だけ入力信号７１４を遅延させ、後続時間だけ遅延された入力信号７１４を後続レベルフェーダ７２４Ａに供給する。

加算器７２６Ａは、第１のレベルフェーダ７２２Ａおよび後続レベルフェーダ７２４Ａの出力を合計し、左耳遅延７１６を作成し、加算器７２６Ｂは、第１のレベルフェーダ７２２Ｂおよび後続レベルフェーダ７２４Ｂの出力を合計し、右耳遅延７１８を作成する。

したがって、左クロスフェーダ７３０Ａは、入力信号７１４と後続時間だけ遅延された入力信号７１４との間でクロスフェードし、右クロスフェーダ７３０Ｂは、第１の時間だけ遅延された入力信号７１４と入力信号７１４との間でクロスフェードする。

図８Ａは、いくつかの実施形態による、ユーザ８０２と、第１の時間における正中面８０６の右側の仮想オブジェクト（ハチ）８０４Ａおよび後続時間における正中面８０６の左側の仮想オブジェクト（ハチ）８０４Ｂとを含む、環境８００を図示する。第１の時間において、仮想ハチ８０８Ａからユーザ８０２の左耳までの距離８０８Ａは、仮想ハチ８０４Ａからユーザ８０２の右耳までの距離８１０Ａを上回る。したがって、第１の時間において、仮想ハチ８０４Ａからの音は、右耳よりも左耳に到達するまでにより長くかかるはずである。後続時間において、仮想ハチ８０４Ｂから右耳までの距離８１０Ｂは、仮想ハチ８０４Ｂから左耳までの距離８０８Ｂを上回る。したがって、後続時間において、仮想ハチ８０４Ｂからの音は、左耳よりも右耳に到達するまでにより長くかかるはずである。

図８Ｂは、いくつかの実施形態による、図８Ａの環境８００に対応する、遅延モジュール８１２を図示する。遅延モジュール８１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。遅延モジュール８１２は、入力信号８１４を受信し、左耳遅延８１６および右耳遅延８１８を出力する。遅延モジュール８１２は、遅延ユニット８２０と、２つのクロスフェーダ、すなわち、左クロスフェーダ８３０Ａおよび右クロスフェーダ８３０Ｂとを含む。左クロスフェーダ８３０Ａは、第１のレベルフェーダ（Ｇｆ）８２２Ａと、後続レベルフェーダ（Ｇｓ）８２４Ａと、加算器８２６Ａとを含む。右クロスフェーダ８３０Ｂは、第１のレベルフェーダ（Ｇｆ）８２２Ｂと、後続レベルフェーダ（Ｇｓ）８２４Ｂと、加算器８２６Ｂとを含む。

第１の時間において、距離８０８Ａは、距離８１０Ａを上回る。第１の時間に関して、入力信号８１４は、第１のレベルフェーダ８２２Ｂに直接供給され、遅延ユニット８２０は、第１の時間だけ入力信号８１４を遅延させ、第１の時間だけ遅延された入力信号８１４を第１のレベルフェーダ８２２Ａに供給する。

後続時間において、距離８１０Ｂは、距離８０８Ｂを上回る。後続時間に関して、入力信号８１４は、後続レベルフェーダ８２４Ａに直接供給され、遅延ユニット８２０は、後続時間だけ入力信号８１４を遅延させ、後続時間だけ遅延された入力信号８１４を後続レベルフェーダ８２４Ｂに供給する。

加算器８２６Ａは、第１のレベルフェーダ８２２Ａおよび後続レベルフェーダ８２４Ａの出力を合計し、左耳遅延８１６を作成し、加算器８２６Ｂは、第１のレベルフェーダ８２２Ｂおよび後続レベルフェーダ８２４Ｂの出力を合計し、右耳遅延８１８を作成する。

したがって、左クロスフェーダ８３０Ａは、第１の時間だけ遅延された入力信号８１４と入力信号８１４との間でクロスフェードし、右クロスフェーダ８３０Ｂは、入力信号８１４と後続時間だけ遅延された入力信号８１４との間でクロスフェードする。

図９Ａは、いくつかの実施形態による、ユーザ９０２と、第１の時間における正中面９０６からより右側にある仮想オブジェクト（ハチ）９０４Ａおよび後続時間における正中面９０６からそれほど右側ではない（例えば、正中面９０６により近接する）仮想オブジェクト（ハチ）９０４Ｂとを含む、環境９００を図示する。第１の時間において、仮想ハチ９０４Ａからユーザ９０２の左耳までの距離９０８Ａは、仮想ハチ９０４Ａからユーザ９０２の右耳までの距離９１０Ａを上回る。したがって、第１の時間において、仮想ハチ９０４Ａからの音は、右耳よりも左耳に到達するまでにより長くかかるはずである。後続時間において、仮想ハチ９０４Ｂから左耳までの距離９０８Ｂは、仮想ハチ９０４Ｂから右耳までの距離９１０Ｂを上回る。したがって、後続時間において、仮想ハチ９０４Ｂからの音は、右耳よりも左耳に到達するまでにより長くかかるはずである。距離９０８Ａおよび９０８Ｂを比較すると、距離９０８Ａは、距離９０８Ｂを上回るため、第１の時間における仮想ハチ９０４Ａからの音は、後続時間における仮想ハチ９０４Ｂからの音よりも左耳に到達するまでにより長くかかるはずである。距離９１０Ａおよび９１０Ｂを比較すると、第１の時間における仮想ハチ９０４Ａからの音は、右耳に到達するまでに後続時間における仮想ハチ９０４Ｂからの音と同一の時間がかかるはずである。

図９Ｂは、いくつかの実施形態による、図９Ａの環境９００に対応する、遅延モジュール９１２を図示する。遅延モジュール９１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。遅延モジュール９１２は、入力信号９１４を受信し、左耳遅延９１６および右耳遅延９１８を出力する。遅延モジュール９１２は、遅延ユニット９２０と、左クロスフェーダ９３０とを含む。左クロスフェーダ９３０は、第１のレベルフェーダ（Ｇｆ）９２２と、後続レベルフェーダ（Ｇｓ）９２４と、加算器９２６とを含む。

第１の時間において、距離９０８Ａは、距離９１０Ａを上回る。第１の時間に関して、入力信号９１４は、右耳遅延９１８に直接供給され、遅延ユニット９２０は、第１の時間だけ入力信号９１４を遅延させ、第１の時間だけ遅延された入力信号９１４を第１のレベルフェーダ９２２に供給する。

後続時間において、距離９０８Ｂは、距離９１０Ｂを上回り、距離９０８Ｂは、距離９０８Ａを下回る。後続時間に関して、入力信号９１４は、右耳遅延９１８に直接供給され、遅延ユニット９２０は、後続時間だけ入力信号９１４を遅延させ、後続時間だけ遅延された入力信号９１４を後続レベルフェーダ９２４に供給する。

第１の時間だけ遅延された入力信号９１４は、距離９０８Ａが、距離９０８Ｂを上回るため、後続時間だけ遅延された入力信号９１４よりも多く遅延され得る。

加算器９２６は、第１のレベルフェーダ９２２および後続レベルフェーダ９２４の出力を合計し、左耳遅延９１６を作成する。

したがって、左クロスフェーダ９３０は、第１の時間だけ遅延された入力信号９１４と後続時間だけ遅延された入力信号９１４との間でクロスフェードする。

図１０Ａは、いくつかの実施形態による、ユーザ１００２と、第１の時間における正中面１００６の右側の仮想オブジェクト（ハチ）１００４Ａおよび後続時間における正中面１００６からより右側にある（例えば、正中面１００６からより遠い）仮想オブジェクト（ハチ）１００４Ｂとを含む、環境１０００を図示する。第１の時間において、仮想ハチ１００４Ａからユーザ１００２の左耳までの距離１００８Ａは、仮想ハチ１００４Ａからユーザ１００２の右耳までの距離１０１０Ａを上回る。したがって、第１の時間において、仮想ハチ１００４Ａからの音は、右耳よりも左耳に到達するまでにより長くかかるはずである。後続時間において、仮想ハチ１００４Ｂから左耳までの距離１００８Ｂは、仮想ハチ１００４Ｂから右耳までの距離１０１０Ｂを上回る。したがって、後続時間において、仮想ハチ１００４Ｂからの音は、右耳よりも左耳に到達するまでにより長くかかるはずである。距離１００８Ａおよび１００８Ｂを比較すると、距離１００８Ｂは、距離１００８Ａを上回るため、後続時間における仮想ハチ１００４Ｂからの音は、第１の時間における仮想ハチ１００４Ａからの音よりも左耳に到達するまでにより長くかかるはずである。距離１０１０Ａおよび１０１０Ｂを比較すると、第１の時間における仮想ハチ１００４Ａからの音は、右耳に到達するまでに後続時間における仮想ハチ１００４Ｂからの音と同一の時間がかかるはずである。

図１０Ｂは、いくつかの実施形態による、図１０Ａの環境１０００に対応する、遅延モジュール１０１２を図示する。遅延モジュール１０１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。遅延モジュール１０１２は、入力信号１０１４を受信し、左耳遅延１０１６および右耳遅延１０１８を出力する。遅延モジュール１０１２は、遅延ユニット１０２０と、左クロスフェーダ１０３０とを含む。左クロスフェーダ１０３０は、第１のレベルフェーダ（Ｇｆ）１０２２と、後続レベルフェーダ（Ｇｓ）１０２４と、加算器１０２６とを含む。

第１の時間において、距離１００８Ａは、距離１０１０Ａを上回る。第１の時間に関して、入力信号１０１４は、右耳遅延１０１８に直接供給され、遅延ユニット１０２０は、第１の時間だけ入力信号１０１４を遅延させ、第１の時間だけ遅延された入力信号１０１４を第１のレベルフェーダ１０２２に供給する。

後続時間において、距離１００８Ｂは、距離１０１０Ｂを上回り、距離１００８Ｂは、距離１００８Ａを上回る。後続時間に関して、入力信号１０１４は、右耳遅延１０１８に直接供給され、遅延ユニット１０２０は、後続時間だけ入力信号１０１４を遅延させ、後続時間だけ遅延された入力信号１０１４を後続レベルフェーダ１０２４に供給する。

第１の時間だけ遅延された入力信号１０１４は、距離１００８Ａが、距離１００８Ｂを下回るため、後続時間だけ遅延された入力信号１０１４よりも少なく遅延され得る。

加算器１０２６は、第１のレベルフェーダ１０２２および後続レベルフェーダ１０２４の出力を合計し、左耳遅延１０１６を作成する。

したがって、左クロスフェーダ１０３０は、第１の時間だけ遅延された入力信号１０１４と後続時間だけ遅延された入力信号１０１４との間でクロスフェードする。

図１１Ａは、いくつかの実施形態による、ユーザ１１０２と、第１の時間における正中面１１０６からより右側にある仮想オブジェクト（ハチ）１１０４Ａおよび後続時間における正中面１１０６からそれほど右側ではない（例えば、正中面１１０６により近接する）仮想オブジェクト（ハチ）１１０４Ｂとを含む、環境１１００を図示する。第１の時間において、仮想ハチ１１０４Ａからユーザ１１０２の右耳までの距離１１１０Ａは、仮想ハチ１１０４Ａからユーザ１１０２の左耳までの距離１１０８Ａを上回る。したがって、第１の時間において、仮想ハチ１１０４Ａからの音は、左耳よりも右耳に到達するまでにより長くかかるはずである。後続時間において、仮想ハチ１１０４Ｂから右耳までの距離１１１０Ｂは、仮想ハチ１１０４Ｂから左耳までの距離１１０８Ｂを上回る。したがって、後続時間において、仮想ハチ１１０４Ｂからの音は、左耳よりも右耳に到達するまでにより長くかかるはずである。距離１１１０Ａおよび１１１０Ｂを比較すると、距離１１１０Ａは、距離１１１０Ｂを上回るため、第１の時間における仮想ハチ１１０４Ａからの音は、後続時間における仮想ハチ１１０４Ｂからの音よりも右耳に到達するまでにより長くかかるはずである。距離１１０８Ａおよび１１０８Ｂを比較すると、第１の時間における仮想ハチ１１０４Ａからの音は、左耳に到達するまでに後続時間における仮想ハチ１１０４Ｂからの音と同一の時間がかかるはずである。

図１１Ｂは、いくつかの実施形態による、図１１Ａの環境１１００に対応する、遅延モジュール１１１２を図示する。遅延モジュール１１１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。遅延モジュール１１１２は、入力信号１１１４を受信し、左耳遅延１１１６および右耳遅延１１１８を出力する。遅延モジュール１１１２は、遅延ユニット１１２０と、右クロスフェーダ１１３０とを含む。右クロスフェーダ１１３０は、第１のレベルフェーダ（Ｇｆ）１１２２と、後続レベルフェーダ（Ｇｓ）１１２４と、加算器１１２６とを含む。

第１の時間において、距離１１１０Ａは、距離１１０８Ａを上回る。第１の時間に関して、入力信号１１１４は、左耳遅延１１１６に直接供給され、遅延ユニット１１２０は、第１の時間だけ入力信号１１１４を遅延させ、第１の時間だけ遅延された入力信号１１１４を第１のレベルフェーダ１１２２に供給する。

後続時間において、距離１１１０Ｂは、距離１１０８Ａを上回り、距離１１１０Ｂは、距離１１１０Ａを下回る。後続時間に関して、入力信号１１１４は、左耳遅延１１１６に直接供給され、遅延ユニット１１２０は、後続時間だけ入力信号１１１４を遅延させ、後続時間だけ遅延された入力信号１１１４を後続レベルフェーダ１１２４に供給する。

第１の時間だけ遅延された入力信号１１１４は、距離１１１０Ａが、距離１１１０Ｂを上回るため、後続時間だけ遅延された入力信号１１１４よりも多く遅延され得る。

加算器１１２６は、第１のレベルフェーダ１１２２および後続レベルフェーダ１１２４の出力を合計し、左耳遅延１１１６を作成する。

したがって、右クロスフェーダ１１３０は、第１の時間だけ遅延された入力信号１１１４と後続時間だけ遅延された入力信号１１１４との間でクロスフェードする。

図１２Ａは、いくつかの実施形態による、ユーザ１２０２と、第１の時間における正中面１２０６の左側の仮想オブジェクト（ハチ）１２０４Ａおよび後続時間における正中面１２０６からより左側にある（例えば、正中面１２０６からより遠い）仮想オブジェクト（ハチ）１２０４Ｂとを含む、環境１２００を図示する。第１の時間において、仮想ハチ１２０４Ａからユーザ１２０２の右耳までの距離１２１０Ａは、仮想ハチ１２０４Ａからユーザ１２０２の左耳までの距離１２０８Ａを上回る。したがって、第１の時間において、仮想ハチ１２０４Ａからの音は、左耳よりも右耳に到達するまでにより長くかかるはずである。後続時間において、仮想ハチ１２０４Ｂから右耳までの距離１２１０Ｂは、仮想ハチ１２０４Ｂから左耳までの距離１２０８Ａを上回る。したがって、後続時間において、仮想ハチ１２０４Ｂからの音は、左耳よりも右耳に到達するまでにより長くかかるはずである。距離１２１０Ａおよび１２１０Ｂを比較すると、距離１２１０Ｂは、距離１２１０Ａを上回るため、後続時間における仮想ハチ１２０４Ｂからの音は、第１の時間における仮想ハチ１２０４Ａからの音よりも右耳に到達するまでにより長くかかるはずである。距離１２０８Ａおよび１２０８Ｂを比較すると、第１の時間における仮想ハチ１２０４Ａからの音は、左耳に到達するまでに後続時間における仮想ハチ１２０４Ｂからの音と同一の時間がかかるはずである。

図１２Ｂは、いくつかの実施形態による、図１２Ａの環境１２００に対応する、遅延モジュール１２１２を図示する。遅延モジュール１２１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。遅延モジュール１２１２は、入力信号１２１４を受信し、左耳遅延１２１６および右耳遅延１２１８を出力する。遅延モジュール１２１２は、遅延ユニット１２２０と、右クロスフェーダ１２３０とを含む。右クロスフェーダ１２３０は、第１のレベルフェーダ（Ｇｆ）１２２２と、後続レベルフェーダ（Ｇｓ）１２２４と、加算器１２２６とを含む。

第１の時間において、距離１２１０Ａは、距離１２０８Ａを上回る。第１の時間に関して、入力信号１２１４は、左耳遅延１２１６に直接供給され、遅延ユニット１２２０は、第１の時間だけ入力信号１２１４を遅延させ、第１の時間だけ遅延された入力信号１２１４を第１のレベルフェーダ１２２２に供給する。

後続時間において、距離１２１０Ｂは、距離１２０８Ｂを上回り、距離１２１０Ｂは、距離１２１０Ａを上回る。後続時間に関して、入力信号１２１４は、左耳遅延１２１６に直接供給され、遅延ユニット１２２０は、後続時間だけ入力信号１２１４を遅延させ、後続時間だけ遅延された入力信号１２１４を後続レベルフェーダ１２２４に供給する。

第１の時間だけ遅延された入力信号１２１４は、距離１２１０Ａが、距離１２１０Ｂを下回るため、後続時間だけ遅延された入力信号１２１４よりも少なく遅延され得る。

加算器１２２６は、第１のレベルフェーダ１２２２および後続レベルフェーダ１２２４の出力を合計し、右耳遅延１２１６を作成する。

したがって、左クロスフェーダ１２３０は、第１の時間だけ遅延された入力信号１２１４と後続時間だけ遅延された入力信号１２１４との間でクロスフェードする。

図１３Ａは、いくつかの実施形態による、ユーザ１３０２と、第１の時間における正中面１３０６の右側の仮想オブジェクト（ハチ）１３０４Ａおよび後続時間における正中面１３０６上の仮想オブジェクト（ハチ）１３０４Ｂとを含む、環境１３００を図示する。第１の時間において、仮想ハチ１３０４Ａからユーザ１３０２の左耳までの距離１３０８Ａは、仮想ハチ１３０４Ａからユーザ１３０２の右耳までの距離１３１０Ａを上回る。したがって、第１の時間において、仮想ハチ１３０４Ａからの音は、右耳よりも左耳に到達するまでにより長くかかるはずである。後続時間において、仮想ハチ１３０４Ｂから左耳までの距離１３０８Ｂは、仮想ハチ１３０４Ｂから右耳までの距離１３１０Ｂと同一である。したがって、後続時間において、仮想ハチ１３０４Ｂからの音は、左耳に到達するまでに右耳と同一の時間がかかるはずである。距離１３０８Ａおよび１３０８Ｂを比較すると、距離１３０８Ａは、距離１３０８Ｂを上回るため、第１の時間における仮想ハチ１３０４Ａからの音は、後続時間における仮想ハチ１３０４Ｂからの音よりも左耳に到達するまでにより長くかかるはずである。距離１３１０Ａおよび１３１０Ｂを比較すると、第１の時間における仮想ハチ１３０４Ａからの音は、右耳に到達するまでに後続時間における仮想ハチ１３０４Ｂからの音と同一の時間がかかるはずである。

図１３Ｂは、いくつかの実施形態による、図１３Ａの環境１３００に対応する、遅延モジュール１３１２を図示する。遅延モジュール１３１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。遅延モジュール１３１２は、入力信号１３１４を受信し、左耳遅延１３１６および右耳遅延１３１８を出力する。遅延モジュール１３１２は、遅延ユニット１３２０と、左クロスフェーダ１３３０とを含む。左クロスフェーダ１３３０は、第１のレベルフェーダ（Ｇｆ）１３２２と、後続レベルフェーダ（Ｇｓ）１３２４と、加算器１３２６とを含む。

第１の時間において、距離１３０８Ａは、距離１３１０Ａを上回る。第１の時間に関して、入力信号１３１４は、右耳遅延１３１８に直接供給され、遅延ユニット１３２０は、第１の時間だけ入力信号１３１４を遅延させ、第１の時間だけ遅延された入力信号１３１４を第１のレベルフェーダ１３２２に供給する。

後続時間において、距離１３０８Ｂは、距離１３１０Ｂと同一であり、距離１３０８Ｂは、距離１３０８Ａを下回る。後続時間に関して、入力信号１３１４は、右耳遅延１３１８に直接供給され、入力信号１３１４は、後続レベルフェーダ１３２４に直接供給される。

加算器１３２６は、第１のレベルフェーダ１３２２および後続レベルフェーダ１３２４の出力を合計し、左耳遅延１３１６を作成する。

したがって、左クロスフェーダ１３３０は、第１の時間だけ遅延された入力信号１３１４と入力信号１３１４との間でクロスフェードする。

図１４Ａは、いくつかの実施形態による、ユーザ１４０２と、第１の時間における正中面１４０６上の仮想オブジェクト（ハチ）１４０４Ａおよび後続時間における正中面１４０６の右側の仮想オブジェクト（ハチ）１４０４Ｂとを含む、環境１４００を図示する。第１の時間において、仮想ハチ１４０４Ａからユーザ１４０２の左耳までの距離１４０８Ａは、仮想ハチ１４０４Ａからユーザ１４０２の右耳までの距離１４１０Ａと同一である。したがって、第１の時間において、仮想ハチ１４０４Ａからの音は、左耳に到達するまでに右耳と同一の時間がかかるはずである。後続時間において、仮想ハチ１４０４Ｂから左耳までの距離１４０８Ｂは、仮想ハチ１４０４Ａから右耳までの距離１４１０Ａを上回る。したがって、後続時間において、仮想ハチ１４０４Ｂからの音は、右耳よりも左耳に到達するまでにより長くかかるはずである。距離１４０８Ａおよび１４０８Ｂを比較すると、距離１４０８Ｂは、距離１４０８Ａを上回るため、後続時間における仮想ハチ１４０４Ｂからの音は、第１の時間における仮想ハチ１４０４Ａからの音よりも左耳に到達するまでにより長くかかるはずである。距離１４１０Ａおよび１４１０Ｂを比較すると、第１の時間における仮想ハチ１４０４Ａからの音は、右耳に到達するまでに後続時間における仮想ハチ１４０４Ｂからの音と同一の時間がかかるはずである。

図１４Ｂは、いくつかの実施形態による、図１４Ａの環境１４００に対応する、遅延モジュール１４１２を図示する。遅延モジュール１４１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。遅延モジュール１４１２は、入力信号１４１４を受信し、左耳遅延１４１６および右耳遅延１４１８を出力する。遅延モジュール１４１２は、遅延ユニット１４２０と、左クロスフェーダ１４３０とを含む。左クロスフェーダ１４３０は、第１のレベルフェーダ（Ｇｆ）１４２２と、後続レベルフェーダ（Ｇｓ）１４２４と、加算器１４２６とを含む。

第１の時間において、距離１４０８Ａは、距離１４１０Ａと同一である。第１の時間に関して、入力信号１４１４は、右耳遅延１４１８に直接供給され、入力信号１４１４は、第１のレベルフェーダ１４２２に直接供給される。

後続時間において、距離１４０８Ｂは、距離１４１０Ｂを上回る。後続時間に関して、入力信号１４１４は、右耳遅延１４１８に直接供給され、遅延ユニット１４２０は、後続時間だけ入力信号１４１４を遅延させ、後続時間だけ遅延された入力信号１４１４を後続レベルフェーダ１４２４に供給する。

加算器１４２６は、第１のレベルフェーダ１４２２および後続レベルフェーダ１４２４の出力を合計し、左耳遅延１４１６を作成する。

したがって、左クロスフェーダ１４３０は、入力信号１４１４と後続時間だけ遅延された入力信号１４１４との間でクロスフェードする。

図１５Ａは、いくつかの実施形態による、ユーザ１５０２と、第１の時間における正中面１５０６の左側の仮想オブジェクト（ハチ）１５０４Ａおよび後続時間における正中面１５０６上の仮想オブジェクト（ハチ）１５０４Ｂとを含む、環境１５００を図示する。第１の時間において、仮想ハチ１５０４Ａからユーザ１５０２の右耳までの距離１５１０Ａは、仮想ハチ１５０４Ａからユーザ１５０２の左耳までの距離１５０８Ａを上回る。したがって、第１の時間において、仮想ハチ１５０４Ａからの音は、左耳よりも右耳に到達するまでにより長くかかるはずである。後続時間において、仮想ハチ１５０４Ｂから左耳までの距離１５０８Ｂは、仮想ハチ１５０４Ｂから右耳までの距離１５１０Ｂと同一である。したがって、後続時間において、仮想ハチ１５０４Ｂからの音は、左耳に到達するまでに右耳と同一の時間がかかるはずである。距離１５１０Ａおよび１５１０を比較すると、距離１５１０Ａは、距離１５１０Ｂを上回るため、第１の時間における仮想ハチ１５０４Ａからの音は、後続時間における仮想ハチ１５０４Ｂからの音よりも右耳に到達するまでにより長くかかるはずである。距離１５０８Ａおよび１５０８Ｂを比較すると、第１の時間における仮想ハチ１５０４Ａからの音は、左耳に到達するまでに後続時間における仮想ハチ１５０４Ｂからの音と同一の時間がかかるはずである。

図１５Ｂは、いくつかの実施形態による、図１５Ａの環境１５００に対応する、遅延モジュール１５１２を図示する。遅延モジュール１５１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。遅延モジュール１５１２は、入力信号１５１４を受信し、左耳遅延１５１６および右耳遅延１５１８を出力する。遅延モジュール１５１２は、遅延ユニット１５２０と、右クロスフェーダ１５３０とを含む。右クロスフェーダ１５３０は、第１のレベルフェーダ（Ｇｆ）１５２２と、後続レベルフェーダ（Ｇｓ）１５２４と、加算器１５２６とを含む。

第１の時間において、距離１５１０Ａは、距離１５０８Ａを上回る。第１の時間に関して、入力信号１５１４は、左耳遅延１５１６に直接供給され、遅延ユニット１５２０は、第１の時間だけ入力信号１５１４を遅延させ、第１の時間だけ遅延された入力信号１５１４を第１のレベルフェーダ１５２２に供給する。

後続時間において、距離１５０８Ｂは、距離１５１０Ｂと同一であり、距離１５１０Ｂは、距離１５１０Ａを下回る。後続時間に関して、入力信号１５１４は、左耳遅延１５１６に直接供給され、入力信号１５１４は、後続レベルフェーダ１５２４に直接供給される。

加算器１５２６は、第１のレベルフェーダ１５２２および後続レベルフェーダ１５２４の出力を合計し、右耳遅延１５１８を作成する。

したがって、右クロスフェーダ１５３０は、第１の時間だけ遅延された入力信号１５１４と入力信号１５１４との間でクロスフェードする。

図１６Ａは、いくつかの実施形態による、ユーザ１６０２と、第１の時間における正中面１６０６上の仮想オブジェクト（ハチ）１６０４Ａおよび後続時間における正中面１６０６の左側の仮想オブジェクト（ハチ）１６０４Ｂとを含む、環境１６００を図示する。第１の時間において、仮想ハチ１６０４Ａからユーザ１６０２の左耳までの距離１６０８Ａは、仮想ハチ１６０４Ａからユーザ１６０２の右耳までの距離１６１０Ａと同一である。したがって、第１の時間において、仮想ハチ１６０４Ａからの音は、左耳に到達するまでに右耳と同一の時間がかかるはずである。後続時間において、仮想ハチ１６０４Ｂから右耳までの距離１６１０Ｂは、仮想ハチ１６０４Ａから左耳までの距離１６０８Ｂを上回る。したがって、後続時間において、仮想ハチ１６０４Ｂからの音は、左耳よりも右耳に到達するまでにより長くかかるはずである。距離１６１０Ａおよび１６１０Ｂを比較すると、距離１６１０Ｂは、距離１６１０Ａを上回るため、後続時間における仮想ハチ１６０４Ｂからの音は、第１の時間における仮想ハチ１６０４Ａからの音よりも右耳に到達するまでにより長くかかるはずである。距離１６０８Ａおよび１６０８Ｂを比較すると、第１の時間における仮想ハチ１６０４Ａからの音は、左耳に到達するまでに後続時間における仮想ハチ１６０４Ｂからの音と同一の時間がかかるはずである。

図１６Ｂは、いくつかの実施形態による、図１６Ａの環境１６００に対応する、遅延モジュール１６１２を図示する。遅延モジュール１６１２は、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。遅延モジュール１６１２は、入力信号１６１４を受信し、左耳遅延１６１６および右耳遅延１６１８を出力する。遅延モジュール１６１２は、遅延ユニット１６２０と、右クロスフェーダ１６３０とを含む。右クロスフェーダ１３３０は、第１のレベルフェーダ（Ｇｆ）１６２２と、後続レベルフェーダ（Ｇｓ）１６２４と、加算器１６２６とを含む。

第１の時間において、距離１６０８Ａは、距離１６１０Ａと同一である。第１の時間に関して、入力信号１６１４は、左耳遅延１６１６に直接供給され、入力信号１６１４は、第１のレベルフェーダ１６２２に直接供給される。

後続時間において、距離１６１０Ｂは、距離１６０８Ｂを上回る。後続時間に関して、入力信号１６１４は、左耳遅延１６１６に直接供給され、遅延ユニット１６２０は、後続時間だけ入力信号１６１４を遅延させ、後続時間だけ遅延された入力信号１６１４を後続レベルフェーダ１６２４に供給する。

加算器１６２６は、第１のレベルフェーダ１６２２および後続レベルフェーダ１６２４の出力を合計し、右耳遅延１６１８を作成する。

したがって、右クロスフェーダ１６３０は、入力信号１６１４と後続時間だけ遅延された入力信号１６１４との間でクロスフェードする。

図１７は、いくつかの実施形態では、例示的システム１００に示される遅延モジュール１０５を実装するために使用され得る、例示的遅延モジュール１７０５を図示する。いくつかの実施形態では、例えば、図１７に図示されるように、遅延モジュール１７０５は、１つ以上のフィルタ（例えば、共通フィルタＦＣ１７５６、第１のフィルタＦ１１７５２、および第２のフィルタＦ２１７５４）を含んでもよい。第１のフィルタＦ１１７５２および第２のフィルタＦ２１７５４は、例えば、音源が、近接場にあるとき、音の１つ以上の効果をモデル化するために使用されてもよい。例えば、第１のフィルタＦ１
１７５２および第２のフィルタＦ２１７５４は、音源が、スピーカ／耳位置に近接して、またはそれから離れるように移動するとき、音の１つ以上の効果をモデル化するために使用されてもよい。共通フィルタＦＣ１７５６は、音源が、両耳への信号に影響を及ぼし得る、物体、空気吸収、および同等物によって妨害されること等の１つ以上の効果をモデル化するために使用されてもよい。第１のフィルタＦ１１７５２は、第１の効果を適用してもよく、第２のフィルタＦ２１７５４は、第２の効果を適用してもよく、共通フィルタＦＣ１７５６は、第３の効果を適用してもよい。

示される実施例では、入力信号１７０２が、遅延モジュール１７０５に入力され、例えば、入力信号１７０２が、共通フィルタＦＣ１７５６の入力に適用されることができる。共通フィルタＦＣ１７５６は、１つ以上のフィルタを入力信号１７０２に適用し、共通のフィルタ処理された信号を出力する。共通のフィルタ処理された信号は、第１のフィルタＦ１１７５２および遅延ユニット１７１６の両方に入力される。第１のフィルタＦ１１７５２は、１つ以上のフィルタを共通のフィルタ処理された信号に適用し、第１の耳遅延１７２２と称される、第１のフィルタ処理された信号を出力する。遅延ユニット１７１６は、遅延を共通のフィルタ処理された信号に適用し、遅延された共通のフィルタ処理された信号を出力する。第２のフィルタＦ２１７５４は、１つ以上のフィルタを遅延された共通のフィルタ処理された信号に適用し、第２の耳遅延１７２４と称される、第２のフィルタ処理された信号を出力する。いくつかの実施形態では、第１の耳遅延１７２２は、左耳に対応してもよく、第２の耳遅延１７２４は、右耳に対応してもよい。いくつかの実施形態では、第１の耳遅延１７２２は、右耳に対応してもよく、第２の耳遅延１７２４は、左耳に対応してもよい。

いくつかの実施形態では、図１７に図示される３つのフィルタ、すなわち、共通フィルタＦＣ１７５６、第１のフィルタＦ１１７５２、および第２のフィルタＦ２１７５４の全てが、必要とされるわけではない場合がある。一実施例では、第１のフィルタＦ１１７５２に入力される信号および第２のフィルタＦ２１７５４に入力される信号は両方とも、これに適用される共通フィルタＦＣ１７５６の効果を有するため、共通フィルタＦＣ１７５６設定は、第１のフィルタＦ１１７５２および第２のフィルタＦ２１７５４のそれぞれに適用／追加されてもよく、共通フィルタＦＣ１７５６は、除去され、したがって、フィルタの合計数を３つから２つに低減させてもよい。

遅延モジュール１７０５は、図２Ｂの遅延モジュール２０５に類似し得、図２Ｂの第１の耳遅延２２６は、図１７の第２の耳遅延１７２４に対応し、図２Ｂの第２の耳遅延２２８は、図１７の第１の耳遅延１７２２に対応する。本実施形態では、第１の耳遅延１７２２は、いかなる遅延も有しておらず、第２の耳遅延１７２４は、遅延を有する。これは、例えば、音源が、第２の耳よりも第１の耳に近接し、第１の耳が、第１の耳遅延１７２２を受け取り、第２の耳が、第２の耳遅延１７２４を受け取るときの場合であり得る。当業者は、以下の説明が、主として、図２Ｂの変形例に関するが、原理は、図２Ａおよび２Ｃの変形例にも同様に適用され得ることを理解するであろう。

図１８Ａ－１８Ｅは、いくつかの実施形態による、遅延モジュール１８０５の変形例を図示する。図１８Ａ－１８Ｅに示される遅延モジュール１８０５の変形例のうちのいずれかは、例示的システム１００に示される遅延モジュール１０５を実装するために使用されてもよい。図１８Ａは、いかなるフィルタも伴わない遅延モジュール１８０５を図示する。遅延モジュール１８０５は、例えば、音源が、遠方場にあるとき、いかなるフィルタも必要とし得ない。図１８Ｂは、第１のフィルタＦ１１８５２のみを伴う遅延モジュール１８０５を図示する。遅延モジュール１８０５は、例えば、音源が、第１の耳により近接し、第１の耳のみが、物体によって妨害されているとき、第１のフィルタＦ１１８５２のみを必要とし得る。図１８Ｃは、第２のフィルタＦ２１８５４のみを伴う遅延モジュール１８０５を図示する。遅延モジュール１８０５は、例えば、音源が、第２の耳からより遠くにあり、第２の耳のみが、物体によって妨害されているとき、第２のフィルタＦ２１８５４のみを必要とし得る。図１８Ｄは、第１のフィルタＦ１１８５２および第２のフィルタＦ２１８５４を伴う遅延モジュール１８０５を図示し、第１のフィルタＦ１１８５２および第２のフィルタＦ２１８５４は、異なる。遅延モジュール１８０５は、例えば、音源が、第１の耳により近接し、各耳が、異なるサイズの物体によって妨害されているとき、第１のフィルタＦ１１８５２および第２のフィルタＦ２１８５４を必要とし得る。図１８Ｅは、共通フィルタＦＣ１８５６のみを伴う遅延モジュール１８０５を図示する。遅延モジュール１８０５は、例えば、源が、遠方場にあり、両耳が、等しく妨害されている、または空気吸収が、存在するとき、共通フィルタＣＦ１８５６のみを必要とし得る。

いくつかの実施形態では、図１８Ａ－１８Ｅに図示される遅延モジュールのうちのいずれか１つは、妨害する物体またはそれに対する音源の移動等の音景の変化に起因して、図１８Ａ－１８Ｅに図示される他の遅延モジュールのうちのいずれかに遷移してもよい。

図１８Ａに図示される（いかなるフィルタも含まない）遅延モジュール１８０５から図１８Ｂ－１８Ｅに図示される遅延モジュール１８０５のうちのいずれか（そのそれぞれは、１つ以上のフィルタを含む）への遷移は、適切な／所望の時間に１つ以上のフィルタを単純に導入することを含んでもよい。同様に、図１８Ｂ－１８Ｅに図示される遅延モジュール１８０５から図１８Ａに図示される遅延モジュール１８０５への遷移は、適切な／所望の時間に１つ以上のフィルタを単純に除去することを含んでもよい。

図１８Ｂに図示される（第１のフィルタＦ１１８５２を含む）遅延モジュール１８０５から図１８Ｃに図示される（第２のフィルタＦ２１８５４を含む）遅延モジュール１８０５への遷移は、適切な／所望の時間に第１のフィルタＦ１１８５２を除去し、第２のフィルタＦ２１８５４を追加することを含んでもよい。同様に、図１８Ｃに図示される（第２のフィルタＦ２１８５４を含む）遅延モジュール１８０５から図１８Ｂに図示される（第１のフィルタＦ１１８５２を含む）遅延モジュール１８０５への遷移は、適切な／所望の時間に第２のフィルタＦ２１８５４を除去し、第１のフィルタＦ１１８５２を追加することを含んでもよい。

図１８Ｂに図示される（第１のフィルタＦ１１８５２を含む）遅延モジュール１８０５から図１８Ｄに図示される（第１のフィルタＦ１１８５２および第２のフィルタＦ２１８５４を含む）遅延モジュール１８０５への遷移は、適切な／所望の時間に第２のフィルタＦ２１８５４を追加することを含んでもよい。同様に、図１８Ｄに図示される（第１のフィルタＦ１１８５２を含む）遅延モジュール１８０５および第２のフィルタＦ２１８５４から図１８Ｂに図示される（第１のフィルタＦ１１８５２を含む）遅延モジュール１８０５への遷移は、適切な／所望の時間に第２のフィルタＦ２１８５４を除去することを含んでもよい。

図１８Ｂに図示される（第１のフィルタＦ１１８５２を含む）遅延モジュール１８０５から図１８Ｅに図示される（共通フィルタＦＣ１８５６を含む）遅延モジュール１８０５への遷移は、適切な／所望の時間に共通フィルタ１８５６を追加し、第１のフィルタＦ１１８５２の状態を共通フィルタＦＣ１８５６にコピーし、第１のフィルタＦ１１８５２を除去することを含んでもよい。同様に、図１８Ｅに図示される（共通フィルタＦＣ１８５６を含む）遅延モジュール１８０５から図１８Ｂに図示される（第１のフィルタＦ１１８５２を含む）遅延モジュール１８０５への遷移は、適切な／所望の時間に第１のフィルタＦ１１８５２を追加し、共通フィルタＦＣ１８５６の状態を第１のフィルタＦ１１８５２にコピーし、共通フィルタＦＣ１８５６を除去することを含んでもよい。

図１８Ｃに図示される（第２のフィルタＦ２１８５４を含む）遅延モジュール１８０５から図１８Ｄに図示される（第１のフィルタＦ１１８５２および第２のフィルタＦ２１８５４を含む）遅延モジュール１８０５への遷移は、適切な／所望の時間に第１のフィルタＦ１１８５２を追加することを含んでもよい。同様に、図１８Ｄに図示される（第１のフィルタＦ１１８５２を含む）遅延モジュール１８０５および第２のフィルタＦ２１８５４から図１８Ｃに図示される（第２のフィルタＦ２１８５４を含む）遅延モジュール１８０５への遷移は、適切な／所望の時間に第１のフィルタＦ１１８５２を除去することを含んでもよい。

図１８Ｃに図示される（第２のフィルタＦ２１８５４を含む）遅延モジュール１８０５から図１８Ｅに図示される（共通フィルタＦＣ１８５６を含む）遅延モジュール１８０５への遷移は、図１９の実施例によって図示されるもの等のプロセスを実行することを含んでもよい。例示的プロセスの段階１９０２において、共通フィルタＦＣ１８５６が、追加され、第２のフィルタＦ２１８５４の状態が、共通フィルタＦＣ１８５６にコピーされる。これは、時間Ｔ１において起こり得る。１９０４において、本システムは、遅延時間を待機する。遅延時間は、遅延ユニット１８１６が信号を遅延させる時間量である。１９０６において、第２のフィルタＦ２１８５４が、除去される。これは、時間Ｔ２において起こり得る。

遅延ユニット１８１６は、先入れ先出しバッファを含む。時間Ｔ１の前に、遅延ユニット１８１６のバッファは、入力信号１８０２で満たされる。第２のフィルタＦ２１８５４は、時間Ｔ１の前からの入力信号１８０２のみを含む遅延ユニット１８１６の出力をフィルタ処理する。時間Ｔ１と時間Ｔ２との間で、共通フィルタＦＣ１８５６は、入力信号１８０２をフィルタ処理し、遅延ユニット１８１６のバッファは、Ｔ１の前からの入力信号１８０２および時間Ｔ１と時間Ｔ２との間からのフィルタ処理された入力信号の両方で満たされる。第２のフィルタＦ２１８５４は、時間Ｔ１の前からの入力信号１８０２のみを含む遅延ユニット１８１６の出力をフィルタ処理する。時間Ｔ２において、第２のフィルタ１８５４は、除去され、遅延ユニット１８１６は、時間Ｔ１において開始されるフィルタ処理された入力信号のみで満たされる。

いくつかの実施形態では、図１８Ｃに図示される（第２のフィルタＦ２１８５４を含む）遅延モジュール１８０５から図１８Ｅに図示される（共通フィルタＦＣ１８５６を含む）遅延モジュール１８０５への遷移は、第２のフィルタＦ２１８５４を用いて（または第２のフィルタＦ２１８５４と同一の設定を有する別のフィルタを用いて）遅延ユニット１８１６内の全てのサンプルを処理し、処理されたサンプルを遅延ユニット１８１６に書き込み、共通フィルタＦＣ１８５６のフィルタを追加し、第２のフィルタＦ２１８５４の状態を共通フィルタＦＣ１８５６にコピーし、第２のフィルタＦ２１８５４を除去することを含んでもよい。いくつかの実施形態では、全ての前述のステップは、時間Ｔ１において起こり得る。すなわち、全ての前述のステップは、同時に（またはほぼ同時に）起こり得る。いくつかの実施形態では、遅延ユニット１８１６は、先入れ先出しバッファを含む。これらの実施形態では、遅延ユニット１８１６内の全てのサンプルを処理する際、処理は、バッファの終わりから始まりに（すなわち、最も古いサンプルから最も新しいものに）進んでもよい。

図１８Ｅに図示される（共通フィルタＦＣ１８５６を含む）遅延モジュール１８０５から図１８Ｃに図示される（第２のフィルタＦ２１８５４を含む）遅延モジュール１８０５への遷移は、図２０の実施例によって図示されるもの等のプロセスを実行することを含んでもよい。２００２において、共通フィルタＦＣ１８５６の状態が、保存される。これは、時間Ｔ１において起こり得る。２００４において、本システムは、遅延時間を待機する。遅延時間は、遅延ユニット１８１６が信号を遅延させる時間量である。２００６において、第２のフィルタＦ２１８５４が、追加され、保存された共通フィルタＦＣ１８５６の状態が、第２のフィルタＦ２１８５４にコピーされ、共通フィルタＦＣ１８５６が、除去される。これは、時間Ｔ２において起こり得る。

遅延ユニット１８１６は、先入れ先出しバッファを含む。時間Ｔ１の前に、共通フィルタＦＣ１８５６は、入力信号１８０２をフィルタ処理し、遅延ユニット１８１６のバッファは、フィルタ処理された入力信号で満たされる。時間Ｔ１と時間Ｔ２との間で、共通フィルタＦＣ１８５６は、入力信号１８０２をフィルタ処理し続け、遅延ユニット１８１６のバッファは、フィルタ処理された入力信号で満たされ続ける。時間Ｔ２において、第２のフィルタＦ２１８５４が、追加され、保存された共通フィルタＦＣ１８５６の状態が、第２のフィルタＦ２１８５４にコピーされ、共通フィルタＦＣ１８５６が、除去される。

図１８Ｄに図示される（第１のフィルタＦ１１８５２および第２のフィルタＦ２１８５４を含む）遅延モジュール１８０５から図１８Ｅに図示される（共通フィルタＦＣ１８５６を含む）遅延モジュール１８０５への遷移は、図２１の実施例によって図示されるプロセスを実行することを含んでもよい。２１０２において、共通フィルタＦＣ１８５６が、追加され、第１のフィルタＦ１１８５２の状態が、共通フィルタＦＣ１８５６にコピーされ、第１のフィルタＦ１１８５２が、除去される。これは、時間Ｔ１において起こり得る。２１０４において、本システムは、遅延時間を待機する。遅延時間は、遅延ユニット１８１６が信号を遅延させる時間量である。２１０６において、第２のフィルタＦ２１８５４が、除去される。これは、時間Ｔ２において起こり得る。

図１８Ｅに図示される（共通フィルタＦＣ１８５６を含む）遅延モジュール１８０５から図１８Ｅに図示される（第１のフィルタＦ１１８５２および第２のフィルタＦ２１８５４を含む）遅延モジュール１８０５への遷移は、図２２の実施例によって図示されるプロセスを実行することを含んでもよい。２２０２において、共通フィルタＦＣ１８５６の状態が、保存される。これは、時間Ｔ１において起こり得る。２２０４において、本システムは、遅延時間を待機する。遅延時間は、遅延ユニット１８１６が信号を遅延させる時間量である。２２０６において、第１のフィルタＦ１１８５２が、追加され、保存された共通フィルタＦＣ１８５６の状態が、第１のフィルタＦ１１８５２にコピーされ、第２のフィルタＦ２１８５４が、追加され、保存された共通フィルタＦＣ１８５６の状態が、第２のフィルタＦ２１８５４にコピーされ、共通フィルタＦＣ１８５６が、除去される。これは、時間Ｔ２において起こり得る。

遅延ユニット１８１６は、先入れ先出しバッファを含む。時間Ｔ１の前に、共通フィルタＦＣ１８５６は、入力信号１８０２をフィルタ処理し、遅延ユニット１８１６のバッファは、フィルタ処理された入力信号で満たされる。時間Ｔ１と時間Ｔ２との間で、共通フィルタＦＣ１８５６は、入力信号１８０２をフィルタ処理し続け、遅延ユニット１８１６のバッファは、フィルタ処理された入力信号で満たされ続ける。時間Ｔ２において、第１のフィルタＦ１１８５２が、追加され、保存された共通フィルタＦＣ１８５６の状態が、第１のフィルタ１８５２にコピーされ、第２のフィルタＦ２１８５４が、追加され、保存された共通フィルタＦＣ１８５６の状態が、第２のフィルタＦ２１８５４にコピーされ、共通フィルタＦＣ１８５６が、除去される。

本開示の種々の例示的実施形態が、本明細書に説明される。これらの実施例は、非限定的意味で参照される。それらは、本開示のより広く適用可能な側面を例証するために提供される。種々の変更が、説明される本開示に行われてもよく、本開示の真の精神および範囲から逸脱することなく、均等物が代用されてもよい。加えて、多くの修正が、特定の状況、材料、組成物、プロセス、プロセス作用、またはステップを本開示の目的、精神、または範囲に適合させるために行われてもよい。さらに、当業者によって理解されるであろうように、本明細書で説明および図示される個々の変形例はそれぞれ、本開示の範囲または精神から逸脱することなく、他のいくつかの実施形態のうちのいずれかの特徴から容易に分離され得るか、またはそれらと組み合わせられ得る、離散コンポーネントおよび特徴を有する。全てのそのような修正は、本開示と関連付けられる請求項の範囲内であることが意図される。

本開示は、主題のデバイスを使用して実施され得る方法を含む。本方法は、そのような好適なデバイスを提供する行為を含んでもよい。そのような提供は、エンドユーザによって実施されてもよい。換言すると、「提供する」行為は、単に、エンドユーザが、本主題の方法において必要なデバイスを取得する、それにアクセスする、それに接近する、それを位置付ける、それを設定する、それをアクティブ化する、それに電源を入れる、または別様にそれを提供するように作用することを要求する。本明細書に列挙される方法は、論理的に可能な列挙されたイベントの任意の順序およびイベントの列挙される順序で行なわれてもよい。

本開示の例示的側面が、材料選択および製造に関する詳細とともに、上記に記載されている。本開示の他の詳細に関して、これらは、上記で参照された特許および刊行物に関連して理解され、概して、当業者によって公知である、または理解され得る。同じことが、一般的または論理的に採用されるような付加的行為の観点から、本開示の方法ベースの側面に関しても当てはまり得る。

加えて、本開示は、随意に、種々の特徴を組み込む、いくつかの実施例を参照して説明されているが、本開示は、開示の各変形例に関して検討されるように説明または図示されるものに限定されるものではない。種々の変更が、説明される本開示に行われてもよく、均等物（本明細書に列挙されるか、またはある程度の簡潔目的のために含まれないかどうかにかかわらず）が、本開示の真の精神および範囲から逸脱することなく代用されてもよい。加えて、値の範囲が提供される場合、その範囲の上限と下限との間の全ての介在値および任意の他の述べられた値または述べられた範囲内の介在値が、本開示内に包含されるものと理解されたい。

また、説明される本発明の変形例の任意の随意の特徴は、独立して、または本明細書に説明される特徴のうちの任意の１つ以上のものと組み合わせて、記載および請求され得ることが検討される。単数形項目の言及は、存在する複数の同一項目が存在する可能性を含む。より具体的には、本明細書および本明細書に関連付けられた請求項で使用されるように、単数形「ａ」、「ａｎ」、「ｓａｉｄ」、および「ｔｈｅ」は、別様に具体的に述べられない限り、複数の言及を含む。換言すると、冠詞の使用は、上記の説明および本開示と関連付けられる請求項における本主題の項目のうちの「少なくとも１つ」を可能にする。さらに、そのような請求項は、任意の随意の要素を除外するように起草され得ることに留意されたい。したがって、本文言は、請求項の要素の列挙と関連する「単に」、「のみ」、および同等物等の排他的専門用語の使用、または「消極的」限定の使用のための先行詞としての役割を果たすことが意図される。

そのような排他的専門用語を使用しなければ、本開示と関連付けられる請求項における用語「～を備える」は、所与の数の要素がそのような請求項で列挙されるかどうかにかかわらず、任意の付加的要素の包含を可能にするものとする、または特徴の追加は、そのような請求項に記載される要素の性質を変換すると見なされ得る。本明細書で具体的に定義される場合を除いて、本明細書で使用される全ての技術および科学用語は、請求項の正当性を維持しながら、可能な限り広い一般的に理解されている意味を与えられるべきである。

本開示の範疇は、提供される実施例および／または本明細書に限定されるものではなく、むしろ、本開示と関連付けられる請求項の用語の範囲のみによって限定されるものとする。

Claims

本明細書に記載の発明。