JP2019532569A5 - - Google Patents

Description

１つ以上の実施形態では、本方法はまた、聴取者の検出された第２の頭部姿勢および第２の複数のソースの個別の位置／配向に基づいて、第２の複数のソースに対応する第２のオーディオデータを第３の複数のソースに対応する第３のオーディオデータにレンダリングするステップを含む。
本発明は、例えば、以下を提供する。
（項目１）
空間化オーディオシステムであって
聴取者の頭部姿勢を検出するためのセンサと、
第１および第２の段階においてオーディオデータをレンダリングするためのプロセッサと
を備え、
前記第１の段階は、第１の複数のソースに対応する第１のオーディオデータを第２の複数のソースに対応する第２のオーディオデータにレンダリングすることを含み、
前記第２の段階は、前記聴取者の検出された頭部姿勢に基づいて、前記第２の複数のソースに対応する第２のオーディオデータを第３の複数のソースに対応する第３のオーディオデータにレンダリングすることを含み、
前記第２の複数のソースは、前記第１の複数のソースより少ないソースから成る、
システム。
（項目２）
前記センサは、慣性測定ユニットである、項目１に記載のシステム。
（項目３）
前記第１の複数のソースは、仮想音源である、項目１に記載のシステム。
（項目４）
前記第２の複数のソースは、仮想音源である、項目１に記載のシステム。
（項目５）
前記センサは、前記第１の段階の後かつ前記第２の段階の前に、前記聴取者の頭部姿勢を検出する、項目１に記載のシステム。
（項目６）
前記センサは、前記第２の段階の直前に、前記聴取者の頭部姿勢を検出する、項目５に記載のシステム。
（項目７）
前記第３の複数のソースは、前記第２の複数のソースより少ないソースから成る、項目１に記載のシステム。
（項目８）
前記第３の複数のソースは、前記第２の複数のソースと等しい個数のソースから成る、項目１に記載のシステム。
（項目９）
前記第１のオーディオデータは、完全オーディオストリームデータセットである、項目１に記載のシステム。
（項目１０）
前記第２の複数のソースは、８つまたはより少ないソースから成る、項目１に記載のシステム。
（項目１１）
前記第１の複数のソースのそれぞれは、異なる位置／配向に対応する、項目１に記載のシステム。
（項目１２）
前記第２の複数のソースのそれぞれは、異なる位置／配向に対応する、項目１に記載のシステム。
（項目１３）
前記第３の複数のソースのそれぞれは、異なる位置／配向に対応する、項目１に記載のシステム。
（項目１４）
前記第１の複数のソースは、第１の複数の位置に対応する、項目１に記載のシステム。
（項目１５）
前記第２の複数のソースは、第２の複数の位置に対応し、
前記第２の複数の位置のそれぞれは、前記第１の複数の位置のそれぞれより前記聴取者に近い、
項目１４に記載のシステム。
（項目１６）
前記第２の複数のソースは、第２の複数の位置に対応し、
前記第２の複数の位置は、単一平面内に位置しない、
項目１記載のシステム。
（項目１７）
前記第３の複数のソースに対応する複数のスピーカをさらに備え、前記複数のスピーカは、前記第３のオーディオデータに基づいて、音を生産する、項目１に記載のシステム。
（項目１８）
前記第３の複数のソースのそれぞれは、異なる位置に対応し、
前記複数のスピーカのそれぞれは、個別の異なる位置における前記第３の複数のソースの個別のソースに対応する、
項目１７に記載のシステム。
（項目１９）
前記第２の段階は、前記聴取者の検出された頭部姿勢および前記第２の複数のソースの個別の位置／配向に基づいて、前記第２の複数のソースに対応する第２のオーディオデータを前記第３の複数のソースに対応する第３のオーディオデータにレンダリングすることを含む、項目１に記載のシステム。
（項目２０）
前記第２の段階は、前記聴取者の平行移動より回転に敏感である、項目１に記載のシステム。
（項目２１）
前記第２の段階は、回転専用オーディオ変換である、項目１に記載のシステム。
（項目２２）
空間化オーディオシステムであって、
第１の時間における第１の頭部姿勢および第２の時間における聴取者の第２の頭部姿勢を検出するためのセンサであって、前記第２の時間は、前記第１の時間の後である、センサと、
第１および第２の段階においてオーディオデータをレンダリングするためのプロセッサと
を備え、
前記第１の段階は、前記聴取者の検出された第１の頭部姿勢に基づいて、第１の複数のソースに対応する第１のオーディオデータを第２の複数のソースに対応する第２のオーディオデータにレンダリングすることを含み、
前記第２の段階は、前記聴取者の検出された第２の頭部姿勢に基づいて、前記第２の複数のソースに対応する第２のオーディオデータを第３の複数のソースに対応する第３のオーディオデータにレンダリングすることを含み、
前記第２の複数のソースは、前記第１の複数のソースより少ないソースから成る、
システム。
（項目２３）
前記センサは、慣性測定ユニットである、項目２２に記載のシステム。
（項目２４）
前記第１の複数のソースは、仮想音源である、項目２２に記載のシステム。
（項目２５）
前記第２の複数のソースは、仮想音源である、項目２２に記載のシステム。
（項目２６）
前記センサは、前記第１の段階の前に、前記聴取者の第１の頭部姿勢を検出する、項目２２に記載のシステム。
（項目２７）
前記センサは、前記第１の段階の後かつ前記第２の段階の前に、前記聴取者の第２の頭部姿勢を検出する、項目２２に記載のシステム。
（項目２８）
前記センサは、前記第２の段階の直前に、前記聴取者の第２の頭部姿勢を検出する、項目２２に記載のシステム。
（項目２９）
前記第３の複数のソースは、前記第２の複数のソースより少ないソースから成る、項目２２に記載のシステム。
（項目３０）
前記第３の複数のソースは、前記第２の複数のソースと等しい個数のソースから成る、項目２２に記載のシステム。
（項目３１）
前記第１のオーディオデータは、完全オーディオストリームデータセットである、項目２２に記載のシステム。
（項目３２）
前記第２の複数のソースは、８つまたはより少ないソースから成る、項目２２に記載のシステム。
（項目３３）
前記第１の複数のソースのそれぞれは、異なる位置／配向に対応する、項目２２に記載のシステム。
（項目３４）
前記第２の複数のソースのそれぞれは、異なる位置／配向に対応する、項目２２に記載のシステム。
（項目３５）
前記第３の複数のソースのそれぞれは、異なる位置／配向に対応する、項目２２に記載のシステム。
（項目３６）
前記第１の複数のソースは、第１の複数の位置に対応する、項目２２に記載のシステム。
（項目３７）
前記第２の複数のソースは、第２の複数の位置に対応し、
前記第２の複数の位置のそれぞれは、前記第１の複数の位置のそれぞれより前記聴取者に近い、
項目３６に記載のシステム。
（項目３８）
前記第２の複数のソースは、第２の複数の位置に対応し、
前記第２の複数の位置は、単一平面内に位置しない、
項目２２に記載のシステム。
（項目３９）
前記第３の複数のソースに対応する複数のスピーカをさらに備え、前記複数のスピーカは、前記第３のオーディオデータに基づいて、音を生産する、項目２２に記載のシステム。
（項目４０）
前記第３の複数のソースのそれぞれは、異なる位置に対応し、
前記複数のスピーカのそれぞれは、個別の異なる位置における前記第３の複数のソースの個別のソースに対応する、
項目３９に記載のシステム。
（項目４１）
前記第２の段階は、前記聴取者の検出された第２の頭部姿勢および前記第２の複数のソースの個別の位置／配向に基づいて、前記第２の複数のソースに対応する第２のオーディオデータを前記第３の複数のソースに対応する第３のオーディオデータにレンダリングすることを含む、項目２２に記載のシステム。
（項目４２）
前記第２の段階は、前記聴取者の平行移動より回転に敏感である、項目２２に記載のシステム。
（項目４３）
前記第２の段階は、回転専用オーディオ変換である、項目２２に記載のシステム。
（項目４４）
空間化オーディオをレンダリングする方法であって、
第１の複数のソースに対応する第１のオーディオデータを第２の複数のソースに対応する第２のオーディオデータにレンダリングすることと、
聴取者の頭部姿勢を検出することと、
前記聴取者の検出された頭部姿勢に基づいて、前記第２の複数のソースに対応する第２のオーディオデータを第３の複数のソースに対応する第３のオーディオデータにレンダリングすることと
を含み、
前記第２の複数のソースは、前記第１の複数のソースより少ないソースから成る、方法。
（項目４５）
前記第１の複数のソースは、仮想音源である、項目４４に記載の方法。
（項目４６）
前記第２の複数のソースは、仮想音源である、項目４４に記載の方法。
（項目４７）
前記第１のオーディオデータをレンダリングした後かつ前記第２のオーディオデータをレンダリングする前に、前記聴取者の頭部姿勢を検出することをさらに含む、項目４４に記載の方法。
（項目４８）
前記第２のオーディオデータをレンダリングする直前に、前記聴取者の頭部姿勢を検出することをさらに含む、項目４４に記載の方法。
（項目４９）
前記第３の複数のソースは、前記第２の複数のソースより少ないソースから成る、項目４４に記載の方法。
（項目５０）
前記第３の複数のソースは、前記第２の複数のソースと等しい個数のソースから成る、項目４４に記載の方法。
（項目５１）
前記第１のオーディオデータは、完全オーディオストリームデータセットである、項目４４に記載の方法。
（項目５２）
前記第２の複数のソースは、８つまたはより少ないソースから成る、項目４４に記載の方法。
（項目５３）
前記第１の複数のソースのそれぞれは、異なる位置／配向に対応する、項目４４に記載の方法。
（項目５４）
前記第２の複数のソースのそれぞれは、異なる位置／配向に対応する、項目４４に記載の方法。
（項目５５）
前記第３の複数のソースのそれぞれは、異なる位置／配向に対応する、項目４４に記載の方法。
（項目５６）
前記第１の複数のソースは、第１の複数の位置に対応する、項目４４に記載の方法。
（項目５７）
前記第２の複数のソースは、第２の複数の位置に対応し、
前記第２の複数の位置のそれぞれは、前記第１の複数の位置のそれぞれより前記聴取者に近い、
項目５６に記載の方法。
（項目５８）
前記第２の複数のソースは、第２の複数の位置に対応し、
前記第２の複数の位置は、単一平面内に位置しない、
項目４４に記載の方法。
（項目５９）
前記第３のオーディオデータに基づいて、前記第３の複数のソースに対応する複数のスピーカを通して音を生産することをさらに含む、項目４４に記載の方法。
（項目６０）
前記第３の複数のソースのそれぞれは、異なる位置に対応し、
前記複数のスピーカのそれぞれは、個別の異なる位置における前記第３の複数のソースの個別のソースに対応する、
項目５９に記載の方法。
（項目６１）
前記聴取者の検出された頭部姿勢および前記第２の複数のソースの個別の位置／配向に基づいて、前記第２の複数のソースに対応する第２のオーディオデータを前記第３の複数のソースに対応する第３のオーディオデータにレンダリングすることをさらに含む、項目４４に記載の方法。
（項目６２）
前記第２の複数のソースに対応する第２のオーディオデータを前記第３の複数のソースに対応する第３のオーディオデータにレンダリングすることは、前記聴取者の平行移動より回転に敏感である、項目４４に記載の方法。
（項目６３）
前記第２の複数のソースに対応する第２のオーディオデータを前記第３の複数のソースに対応する第３のオーディオデータにレンダリングすることは、回転専用オーディオ変換である、項目４４に記載の方法。
（項目６４）
空間化オーディオをレンダリングする方法であって、
聴取者の第１の頭部姿勢を検出することと、
前記聴取者の検出された第１の頭部姿勢に基づいて、第１の複数のソースに対応する第１のオーディオデータを第２の複数のソースに対応する第２のオーディオデータにレンダリングすることと、
前記聴取者の第２の頭部姿勢を検出することと、
前記聴取者の検出された第２の頭部姿勢に基づいて、前記第２の複数のソースに対応する第２のオーディオデータを第３の複数のソースに対応する第３のオーディオデータにレンダリングすることと
を含み、前記第２の複数のソースは、前記第１の複数のソースより少ないソースから成る、方法。
（項目６５）
前記第１の複数のソースは、仮想音源である、項目６４に記載の方法。
（項目６６）
前記第２の複数のソースは、仮想音源である、項目６４に記載の方法。
（項目６７）
前記第１のオーディオデータをレンダリングする前に、前記聴取者の第１の頭部姿勢を検出することをさらに含む、項目６４に記載の方法。
（項目６８）
前記第１のオーディオデータをレンダリングした後かつ前記第２のオーディオデータをレンダリングする前に、前記聴取者の第２の頭部姿勢を検出することをさらに含む、項目６４に記載の方法。
（項目６９）
前記第２のオーディオデータをレンダリングする直前に、前記聴取者の第２の頭部姿勢を検出することをさらに含む、項目６４に記載の方法。
（項目７０）
前記第３の複数のソースは、前記第２の複数のソースより少ないソースから成る、項目６４に記載の方法。
（項目７１）
前記第３の複数のソースは、前記第２の複数のソースと等しい個数のソースから成る、項目６４に記載の方法。
（項目７２）
前記第１のオーディオデータは、完全オーディオストリームデータセットである、項目６４に記載の方法。
（項目７３）
前記第２の複数のソースは、８つまたはより少ないソースから成る、項目６４に記載の方法。
（項目７４）
前記第１の複数のソースのそれぞれは、異なる位置／配向に対応する、項目６４に記載の方法。
（項目７５）
前記第２の複数のソースのそれぞれは、異なる位置／配向に対応する、項目６４に記載の方法。
（項目７６）
前記第３の複数のソースのそれぞれは、異なる位置／配向に対応する、項目６４に記載の方法。
（項目７７）
前記第１の複数のソースは、第１の複数の位置に対応する、項目６４に記載の方法。
（項目７８）
前記第２の複数のソースは、第２の複数の位置に対応し、
前記第２の複数の位置のそれぞれは、前記第１の複数の位置のそれぞれより前記聴取者に近い、
項目７７に記載の方法。
（項目７９）
前記第２の複数のソースは、第２の複数の位置に対応し、
前記第２の複数の位置は、単一平面内に位置しない、
項目６４に記載の方法。
（項目８０）
前記第３のオーディオデータに基づいて、前記第３の複数のソースに対応する複数のスピーカを通して音を生産することをさらに含む、項目６４に記載の方法。
（項目８１）
前記第３の複数のソースのそれぞれは、異なる位置に対応し、
前記複数のスピーカのそれぞれは、個別の異なる位置における前記第３の複数のソースの個別のソースに対応する、
項目８０に記載の方法。
（項目８２）
前記聴取者の検出された第２の頭部姿勢および前記第２の複数のソースの個別の位置／配向に基づいて、前記第２の複数のソースに対応する第２のオーディオデータを前記第３の複数のソースに対応する第３のオーディオデータにレンダリングすることをさらに含む、項目６４に記載の方法。
（項目８３）
前記第２の複数のソースに対応する第２のオーディオデータを前記第３の複数のソースに対応する第３のオーディオデータにレンダリングすることは、前記聴取者の平行移動より回転に敏感である、項目６４に記載の方法。
（項目８４）
前記第２の複数のソースに対応する第２のオーディオデータを前記第３の複数のソースに対応する第３のオーディオデータにレンダリングすることは、回転専用オーディオ変換である、項目６４に記載の方法。
（項目８５）
非一過性コンピュータ可読媒体内に具現化されるコンピュータプログラム製品であって、前記コンピュータ可読媒体は、その上に記憶される命令のシーケンスを有し、前記命令のシーケンスは、プロセッサによって実行されると、前記プロセッサに、空間化オーディオをレンダリングするための方法を実行させ、前記方法は、
第１の複数のソースに対応する第１のオーディオデータを第２の複数のソースに対応する第２のオーディオデータにレンダリングすることと、
聴取者の頭部姿勢を検出することと、
前記聴取者の検出された頭部姿勢に基づいて、前記第２の複数のソースに対応する第２のオーディオデータを第３の複数のソースに対応する第３のオーディオデータにレンダリングすることと
を含み、前記第２の複数のソースは、前記第１の複数のソースより少ないソースから成る、
コンピュータプログラム製品。
（項目８６）
非一過性コンピュータ可読媒体内に具現化されるコンピュータプログラム製品であって、前記コンピュータ可読媒体は、その上に記憶される命令のシーケンスを有し、前記命令のシーケンスは、プロセッサによって実行されると、前記プロセッサに、空間化オーディオをレンダリングするための方法を実行させ、前記方法は、
聴取者の第１の頭部姿勢を検出することと、
前記聴取者の検出された第１の頭部姿勢に基づいて、第１の複数のソースに対応する第１のオーディオデータを第２の複数のソースに対応する第２のオーディオデータにレンダリングすることと、
前記聴取者の第２の頭部姿勢を検出することと、
前記聴取者の検出された第２の頭部姿勢に基づいて、前記第２の複数のソースに対応する第２のオーディオデータを第３の複数のソースに対応する第３のオーディオデータにレンダリングすることと
を含み、前記第２の複数のソースは、前記第１の複数のソースより少ないソースから成る、
コンピュータプログラム製品。
（項目８７）
前記第２の複数のソースのそれぞれは、前記聴取者の頭部から約６インチ〜約１２インチに位置する、項目１に記載のシステム。
（項目８８）
前記第２の複数のソースのそれぞれは、前記聴取者の頭部から約６インチ〜約１２インチに位置する、項目２２に記載のシステム。
（項目８９）
前記第２の複数のソースのそれぞれは、前記聴取者の頭部から約６インチ〜約１２インチに位置する、項目４４に記載の方法。
（項目９０）
前記第２の複数のソースのそれぞれは、前記聴取者の頭部から約６インチ〜約１２インチに位置する、項目６４に記載の方法。

Claims (20)

1. 空間化オーディオシステムであって
   聴取者の最新の頭部姿勢を検出するためのセンサと、
   第１の段階および第２の段階においてオーディオデータをレンダリングするためのプロセッサと
   を備え、
   前記第１の段階は、第１の複数のソースに対応する第１のオーディオデータを第２の複数のソースに対応する第２のオーディオデータにレンダリングすることを含み、前記第１の複数のソースのそれぞれは、第１の複数の位置のうちの１つを有し、前記第２の複数のソースのそれぞれは、第２の複数の位置のうちの１つを有し、
   前記第２の段階は、前記聴取者の前記検出された最新の頭部姿勢に基づいて、前記第２の複数のソースに対応する前記第２のオーディオデータを第３の複数のソースに対応する第３のオーディオデータにレンダリングすることを含み、前記第３の複数のソースのそれぞれは、第３の複数の位置のうちの１つを有し、
   前記第２の複数のソースは、前記第１の複数のソースより少ないソースから成り、
   前記第１のオーディオデータを前記第２のオーディオデータにレンダリングすることは、前記第１のオーディオデータをワーピングすることを含み、
   前記第２のオーディオデータを前記第３のオーディオデータにレンダリングすることは、前記第２のオーディオデータをワーピングすることを含む、システム。
2. 前記センサは、慣性測定ユニットである、請求項１に記載のシステム。
3. 前記第１の複数のソースは、仮想音源である、請求項１に記載のシステム。
4. 前記第２の複数のソースは、仮想音源である、請求項１に記載のシステム。
5. 前記センサは、前記第１の段階の後かつ前記第２の段階の前に、前記聴取者の前記最新の頭部姿勢を検出する、請求項１に記載のシステム。
6. 前記センサは、前記第２の段階の直前に、前記聴取者の前記最新の頭部姿勢を検出する、請求項５に記載のシステム。
7. 前記第３の複数のソースは、前記第２の複数のソースと等しい個数のソースまたは前記第２の複数のソースより少ないソースから成る、請求項１に記載のシステム。
8. 前記第１のオーディオデータは、完全オーディオストリームデータセットである、請求項１に記載のシステム。
9. 前記第２の複数のソースは、８つまたはより少ないソースから成る、請求項１に記載のシステム。
10. 前記第１の複数のソースのそれぞれは、異なる位置／配向に対応する、請求項１に記載のシステム。
11. 前記第２の複数のソースのそれぞれは、異なる位置／配向に対応する、請求項１に記載のシステム。
12. 前記第３の複数のソースのそれぞれは、異なる位置／配向に対応する、請求項１に記載のシステム。
13. 前記第２の複数の位置のそれぞれは、前記第１の複数の位置のそれぞれより前記聴取者に近い、請求項１に記載のシステム。
14. 前記第２の複数の位置は、単一平面内に位置しない、請求項１に記載のシステム。
15. 前記第３の複数のソースに対応する複数のスピーカをさらに備え、前記複数のスピーカは、前記第３のオーディオデータに基づいて、音を生産する、請求項１に記載のシステム。
16. 前記複数のスピーカのそれぞれは、前記第３の複数の位置のうちの個別の位置における前記第３の複数のソースの個別のソースに対応する、請求項１５に記載のシステム。
17. 前記第２の段階は、前記聴取者の前記検出された最新の頭部姿勢および前記第２の複数のソースの個別の位置／配向に基づいて、前記第２の複数のソースに対応する前記第２のオーディオデータを前記第３の複数のソースに対応する前記第３のオーディオデータにレンダリングすることを含む、請求項１に記載のシステム。
18. 前記第２の段階は、前記聴取者の平行移動より回転に敏感である、請求項１に記載のシステム。
19. 前記第２の段階は、回転専用オーディオ変換である、請求項１に記載のシステム。
20. 空間化オーディオシステムであって、
    第１の時間における第１の頭部姿勢および第２の時間における聴取者の第２の頭部姿勢を検出するためのセンサであって、前記第２の時間は、前記第１の時間の後である、センサと、
    第１の段階および第２の段階においてオーディオデータをレンダリングするためのプロセッサと
    を備え、
    前記第１の段階は、前記聴取者の前記検出された第１の頭部姿勢に基づいて、第１の複数のソースに対応する第１のオーディオデータを第２の複数のソースに対応する第２のオーディオデータにレンダリングすることを含み、前記第１の複数のソースのそれぞれは、第１の複数の位置のうちの１つを有し、前記第２の複数のソースのそれぞれは、第２の複数の位置のうちの１つを有し、
    前記第２の段階は、前記聴取者の前記検出された第２の頭部姿勢に基づいて、前記第２の複数のソースに対応する第２のオーディオデータを第３の複数のソースに対応する第３のオーディオデータにレンダリングすることを含み、前記第３の複数のソースのそれぞれは、第３の複数の位置のうちの１つを有し、
    前記第２の複数のソースは、前記第１の複数のソースより少ないソースから成り、
    前記第１のオーディオデータを前記第２のオーディオデータにレンダリングすることは、前記第１のオーディオデータをワーピングすることを含み、
    前記第２のオーディオデータを前記第３のオーディオデータにレンダリングすることは、前記第２のオーディオデータをワーピングすることを含む、システム。