JP2018534617A5

JP2018534617A5 -

Info

Publication number: JP2018534617A5
Application number: JP2018519046A
Authority: JP
Filing date: 2016-10-12
Publication date: 2019-04-25
Anticipated expiration: 2036-10-12

Claims

高次アンビソニック（ＨＯＡ）オーディオデータを表すビットストリームを復号するように構成されたデバイスであって、
フォアグラウンドオーディオ信号が遷移中であるときの前記ビットストリームの同じフレームの間に、環境ＨＯＡ係数が遷移中であるかどうかの複数遷移指示を取得することと、
前記複数遷移指示に基づいて、対応するフォアグラウンドオーディオ信号の空間的特性を記述するベクトルを取得することと、前記ベクトルは、球面調和領域において定義される、
前記ベクトルに基づいて、１つまたは複数のスピーカーフィードをレンダリングすることと、
前記１つまたは複数のスピーカーに前記１つまたは複数のスピーカーフィードを出力することと
を行うように構成された１つまたは複数のプロセッサと、
前記１つまたは複数のプロセッサに結合され、前記ベクトルを記憶するように構成されたメモリと
を備えるデバイス。
前記１つまたは複数のプロセッサは、前記ビットストリームの前記フレームの間に遷移中である環境ＨＯＡ係数の数のバックグラウンド指示を取得するようにさらに構成され、
前記１つまたは複数のプロセッサは、前記バックグラウンド指示に基づいて前記複数遷移指示を取得するように構成される、
請求項１に記載のデバイス。
前記１つまたは複数のプロセッサは、前記環境ＨＯＡ係数のうちの１つに関して遷移が起きたことを示す指示に応答して、前記バックグラウンド指示を取得するように構成される、請求項２に記載のデバイス。
前記１つまたは複数のプロセッサは、前記環境ＨＯＡ係数のうちのどれが前記ビットストリームの前記フレームの間に遷移中であるかを示す指示を取得するように構成される、請求項２に記載のデバイス。
前記１つまたは複数のプロセッサは、フォアグラウンドオーディオ信号が前記ビットストリームの前記フレームの間に遷移中であるかどうかのフォアグラウンド指示を取得するようにさらに構成され、
前記１つまたは複数のプロセッサは、前記フォアグラウンド指示に基づいて前記複数遷移指示を取得するように構成される、請求項１に記載のデバイス。
前記複数遷移指示は、前記フォアグラウンドオーディオ信号がフェードインされるときの前記ビットストリームの前記同じフレームの間に前記環境ＨＯＡ係数がフェードインされるかどうかを示す、請求項１に記載のデバイス。
前記複数遷移指示は、前記フォアグラウンドオーディオ信号がフェードアウトされるときの前記ビットストリームの前記同じフレームの間に前記環境ＨＯＡ係数がフェードアウトされるかどうかを示す、請求項１に記載のデバイス。
前記デバイスはテレビジョンを備え、前記テレビジョンは、１つまたは複数の統合されたスピーカーとして前記１つまたは複数のスピーカーを含む、請求項１に記載のデバイス。
前記デバイスは受信機を備え、前記受信機は、前記１つまたは複数のスピーカーに結合される、請求項１に記載のデバイス。
高次アンビソニック（ＨＯＡ）オーディオデータを表すビットストリームを復号する方法であって、
１つまたは複数のプロセッサによって、フォアグラウンドオーディオ信号が遷移中であるときの前記ビットストリームの同じフレームの間に、環境ＨＯＡ係数が遷移中であるかどうかの複数遷移指示を取得することと、
前記１つまたは複数のプロセッサによって、前記複数遷移指示に基づいて、対応するフォアグラウンドオーディオ信号の空間的特性を記述するベクトルを取得することと、両方の前記ベクトルは、球面調和領域において定義される、
１つまたは複数のプロセッサによっておよび前記ベクトルに基づいて、１つまたは複数のスピーカーフィードをレンダリングすることと、
１つまたは複数のプロセッサによって、前記１つまたは複数のスピーカーに前記１つまたは複数のスピーカーフィードを出力することと
を備える方法。
前記ビットストリームの前記フレームの間に遷移中である環境ＨＯＡ係数の数のバックグラウンド指示を取得することと、
フォアグラウンドオーディオ信号が前記ビットストリームの前記フレームの間に遷移中であるかどうかのフォアグラウンド指示を取得することと
をさらに備え、
前記複数遷移指示を取得することは、前記フォアグラウンド指示および前記バックグラウンド指示に基づいて前記複数遷移指示を取得することを備える、請求項１０に記載の方法。
前記バックグラウンド指示を取得することは、前記環境ＨＯＡ係数のうちの１つに関して遷移が起きたことを示す指示に応答して、前記バックグラウンド指示を取得することを備える、請求項１１に記載の方法。
前記環境ＨＯＡ係数のうちのどれが前記ビットストリームの前記フレームの間に遷移中であるかを示す指示を取得することをさらに備える、請求項１１に記載の方法。
前記フォアグラウンド指示を取得することは、前記フォアグラウンドオーディオ信号に対応する前記ベクトルのコーディングモードが、前記ベクトルが低減されたベクトルであることを示すとき、前記ビットストリームの異なるフレームのトランスポートチャネルについてのタイプの指示に基づいて、前記フォアグラウンド指示を取得することを備える、請求項１１に記載の方法。
前記ビットストリームの前記フレームから、第１のフレームが、前記ビットストリームの異なるフレームを参照することなく前記フレームが復号されることを可能にする独立フレームであるかどうかの独立フレーム指示を取得することをさらに備える、請求項１１に記載の方法。
前記フォアグラウンド指示を取得することは、前記第１のフレームが独立フレームであることを示す前記独立フレーム指示に応答して、前記ビットストリームから、前記フォアグラウンド指示を取得することを備える、請求項１５に記載の方法。
前記第１のフレームが独立フレームでないことを示す前記独立フレーム指示に応答して、前記異なるフレームの前記トランスポートチャネルについてのタイプの指示を取得することをさらに備える、請求項１５に記載の方法。
前記フォアグラウンド指示を取得することは、前記異なるフレームの前記トランスポートチャネルについての前記タイプの前記指示に基づいて、前記異なるフレームの同じトランスポートチャネルが前記ベクトルベースのオーディオ信号を含んでいたかどうかを示す、前記フレームの前記トランスポートチャネルについての前記フォアグラウンド指示を取得することを備える、請求項１７に記載の方法。
前記フォアグラウンド指示を取得することは、前記フォアグラウンドオーディオ信号に対応するベクトルのコーディングモードが、前記ベクトルが低減されたベクトルであることを示すとき、前記異なるフレームの前記トランスポートチャネルについての前記タイプの前記指示に基づいて、前記異なるフレームの同じトランスポートチャネルが前記ベクトルベースのオーディオ信号を含んでいたかどうかを示す、前記フレームの前記トランスポートチャネルについての前記フォアグラウンド指示を取得することを備える、請求項１７に記載の方法。
前記独立フレーム指示を取得することは、前記フォアグラウンドオーディオ信号に対応する前記ベクトルのコーディングモードが、前記ベクトルが低減されたベクトルであることを示すとき、前記異なるフレームの同じトランスポートチャネルが前記ベクトルベースのオーディオ信号を含んでいたかどうかを示す、前記フレームの前記トランスポートチャネルについての前記独立フレーム指示を取得することを備える、請求項１７に記載の方法。
前記方法は、前記１つまたは複数のスピーカーに結合されたデバイスによって行われる、請求項１０に記載の方法。
前記デバイスはテレビジョンを備え、
前記１つまたは複数のスピーカーは、前記テレビジョン内に統合された１つまたは複数のスピーカーを備える、請求項２１に記載の方法。
前記デバイスは受信機を備える、請求項２１に記載の方法。
実行されると、１つまたは複数のプロセッサに、
フォアグラウンドオーディオ信号が遷移中であるときのビットストリームの同じフレームの間に、環境ＨＯＡ係数が遷移中であるかどうかの複数遷移指示を取得することと、
前記複数遷移指示に基づいて、対応するフォアグラウンドオーディオ信号の空間的特性を記述するベクトルを取得することと、前記ベクトルは、球面調和領域において定義される、
前記ベクトルに基づいて、１つまたは複数のスピーカーフィードをレンダリングすることと、
前記１つまたは複数のスピーカーに前記１つまたは複数のスピーカーフィードを出力することと
を行わせる命令を記憶した非一時的コンピュータ可読記憶媒体。
高次アンビソニック（ＨＯＡ）オーディオデータを表すビットストリームを復号するためのデバイスであって、
フォアグラウンドオーディオ信号が遷移中であるときの前記ビットストリームの同じフレームの間に、環境ＨＯＡ係数が遷移中であるかどうかの複数遷移指示を取得するための手段と、
前記複数遷移指示に基づいて、対応するフォアグラウンドオーディオ信号の空間的特性を記述するベクトルを取得するための手段と、前記ベクトルは、球面調和領域において定義される、
前記ベクトルに基づいて、１つまたは複数のラウドスピーカーフィードをレンダリングするための手段と、
１つまたは複数のラウドスピーカーに前記１つまたは複数のスピーカーフィードを出力するための手段と
を備えるデバイス。
高次アンビソニック（ＨＯＡ）オーディオデータを表すビットストリームを符号化するように構成されたデバイスであって、
マイクロフォンによってキャプチャされたオーディオ信号に基づいて、前記ＨＯＡオーディオデータを取得することと、
フォアグラウンドオーディオ信号と、前記フォアグラウンドオーディオ信号の空間成分を示すベクトルとを取得するために、前記ＨＯＡオーディオデータの少なくとも一部分を分解することと、前記ベクトルは、球面調和領域において定義される、
前記フォアグラウンドオーディオ信号が遷移中であるときの前記ビットストリームの同じフレームの間に、環境ＨＯＡ係数が遷移中であるかどうかの複数遷移指示を取得することと、
前記複数遷移指示に基づいて、前記ベクトルの要素を取得することと、
前記ビットストリームにおいて、前記ベクトルの前記取得された要素を指定することと
を行うように構成された１つまたは複数のプロセッサと、
前記１つまたは複数のプロセッサに結合され、前記ベクトルを記憶するように構成されたメモリと
を備えるデバイス。
前記１つまたは複数のプロセッサは、前記環境ＨＯＡ係数のうちの１つに関して遷移が起きたことを示す指示に応答して、前記ビットストリームの前記フレームの間に遷移中である環境ＨＯＡ係数の数のバックグラウンド指示を取得するようにさらに構成され、
前記１つまたは複数のプロセッサは、前記バックグラウンド指示に基づいて前記複数遷移指示を取得するように構成される、
請求項２６に記載のデバイス。
前記１つまたは複数のプロセッサは、前記フォアグラウンドオーディオ信号に対応する前記ベクトルのコーディングモードが、前記ベクトルが低減されたベクトルであることを示すとき、および前記ビットストリームの異なるフレームのトランスポートチャネルについてのタイプの指示に基づいて、フォアグラウンドオーディオ信号が前記ビットストリームの前記フレームの間に遷移中であるかどうかのフォアグラウンド指示を取得するようにさらに構成され、
前記１つまたは複数のプロセッサは、前記フォアグラウンド指示に基づいて前記複数遷移指示を取得するように構成される、
請求項２６に記載のデバイス。
前記複数遷移指示は、前記フォアグラウンドオーディオ信号がフェードインされるときの前記ビットストリームの前記同じフレームの間に前記環境ＨＯＡ係数がフェードインされるかどうかを示す、請求項２６に記載のデバイス。
前記複数遷移指示は、前記フォアグラウンドオーディオ信号がフェードアウトされるときの前記ビットストリームの前記同じフレームの間に前記環境ＨＯＡ係数がフェードアウトされるかどうかを示す、請求項２６に記載のデバイス。
前記オーディオ信号をキャプチャするように構成された前記マイクロフォンをさらに備える、請求項２６に記載のデバイス。
高次アンビソニック（ＨＯＡ）オーディオデータを表すビットストリームを符号化する方法であって、
１つまたは複数のプロセッサによっておよびマイクロフォンによってキャプチャされたオーディオ信号に基づいて、前記ＨＯＡオーディオデータを取得することと、
フォアグラウンドオーディオ信号と、前記フォアグラウンドオーディオ信号の空間成分を示すベクトルとを取得するために、前記１つまたは複数のプロセッサによって、前記ＨＯＡオーディオデータの少なくとも一部分を分解することと、
前記１つまたは複数のプロセッサによって、前記フォアグラウンドオーディオ信号が遷移中であるときの前記ビットストリームの同じフレームの間に、環境ＨＯＡ係数が遷移中であるかどうかの複数遷移指示を取得することと、
前記１つまたは複数のプロセッサによって、前記複数遷移指示に基づいて、前記ベクトルの要素を取得することと、
前記１つまたは複数のプロセッサによっておよび前記ビットストリームにおいて、前記ベクトルの前記取得された要素を指定することと
を備える方法。
前記環境ＨＯＡ係数のうちの１つに関して遷移が起きたことを示す指示に応答して、前記ビットストリームの前記フレームの間に遷移中である環境ＨＯＡ係数の数のバックグラウンド指示を取得することと、
前記ビットストリーム中で、前記フォアグラウンドオーディオ信号に対応する前記ベクトルのコーディングモードが、前記ベクトルが低減されたベクトルであることを示すとき、および前記ビットストリームの異なるフレームのトランスポートチャネルについてのタイプの指示に基づいて、フォアグラウンドオーディオ信号が前記ビットストリームの前記フレームの間に遷移中であるかどうかのフォアグラウンド指示を指定することと
をさらに備え、
前記複数遷移指示を取得することは、前記フォアグラウンド指示および前記バックグラウンド指示に基づいて前記複数遷移指示を取得することを備える、
請求項３２に記載の方法。
前記フォアグラウンド指示を取得することは、前記ビットストリーム中で、および前記フォアグラウンドオーディオ信号に対応する前記ベクトルのコーディングモードが、前記ベクトルが低減されたベクトルであることを示すとき、前記フォアグラウンド指示を指定することを備える、請求項３３に記載の方法。
前記ビットストリームの前記フレーム中で、前記フレームが、前記ビットストリームの異なるフレームを参照することなく前記フレームが復号されることを可能にする独立フレームであるかどうかの独立フレーム指示を指定することをさらに備える、請求項３３に記載の方法。
前記フォアグラウンド指示を取得することは、前記フレームが独立フレームであることを示す前記独立フレーム指示に応答して、前記ビットストリームから、前記フォアグラウンド指示を取得することを備える、請求項３５に記載の方法。
前記フレームが独立フレームでないことを示す前記独立フレーム指示に応答して、前記異なるフレームの前記トランスポートチャネルについてのタイプの指示を取得することをさらに備える、請求項３５に記載の方法。
前記フォアグラウンド指示を取得することは、前記異なるフレームの前記トランスポートチャネルについての前記タイプの前記指示に基づいて、前記異なるフレームの同じトランスポートチャネルが前記ベクトルベースのオーディオ信号を含んでいたかどうかを示す、前記フレームの前記トランスポートチャネルについての前記フォアグラウンド指示を取得することを備える、請求項３５に記載の方法。
前記フォアグラウンド指示を取得することは、前記フォアグラウンドオーディオ信号に対応する前記ベクトルのコーディングモードが、前記ベクトルが低減されたベクトルであることを示すとき、前記異なるフレームの前記トランスポートチャネルについての前記タイプの前記指示に基づいて、前記異なるフレームの同じトランスポートチャネルが前記ベクトルベースのオーディオ信号を含んでいたかどうかを示す、前記フレームの前記トランスポートチャネルについての前記フォアグラウンド指示を取得することを備える、請求項３８に記載の方法。
前記独立フレーム指示を取得することは、前記フォアグラウンドオーディオ信号に対応する前記ベクトルのコーディングモードが、前記ベクトルが低減されたベクトルであることを示すとき、前記異なるフレームの同じトランスポートチャネルが前記ベクトルベースのオーディオ信号を含んでいたかどうかを示す、前記フレームの前記トランスポートチャネルについての前記独立フレーム指示を取得することを備える、請求項３８に記載の方法。
前記１つまたは複数のプロセッサは、マイクロフォンに結合され、
前記方法は、前記マイクロフォンで、前記オーディオデータをキャプチャすることをさらに備える、請求項３２に記載の方法。
実行されると、１つまたは複数のプロセッサに、
マイクロフォンによってキャプチャされたオーディオ信号に基づいて、前記ＨＯＡオーディオデータを取得することと、
フォアグラウンドオーディオ信号と、前記フォアグラウンドオーディオ信号の空間成分を示すベクトルとを取得するために、前記ＨＯＡオーディオデータの少なくとも一部分を分解することと、
フォアグラウンドオーディオ信号が遷移中であるときのビットストリームの同じフレームの間に、環境ＨＯＡ係数が遷移中であるかどうかの複数遷移指示を取得することと、
前記複数遷移指示に基づいて、前記ベクトルの要素を取得することと、
前記ビットストリームにおいて、前記ベクトルの前記取得された要素を指定することと
を行わせる命令を記憶した非一時的コンピュータ可読記憶媒体。
高次アンビソニック（ＨＯＡ）オーディオデータを表すビットストリームを符号化するためのデバイスであって、
マイクロフォンによってキャプチャされたオーディオ信号に基づいて、前記ＨＯＡオーディオデータを取得するための手段と、
フォアグラウンドオーディオ信号と、前記フォアグラウンドオーディオ信号の空間成分を示すベクトルとを取得するために、前記ＨＯＡオーディオデータの少なくとも一部分を分解するための手段と、
前記フォアグラウンドオーディオ信号が遷移中であるときの前記ビットストリームの同じフレームの間に、環境ＨＯＡ係数が遷移中であるかどうかの複数遷移指示を取得するための手段と、
前記複数遷移指示に基づいて、前記ベクトルの要素を取得するための手段と、
前記ビットストリームにおいて、前記ベクトルの前記取得された要素を指定するための手段と
を備えるデバイス。
前記１つまたは複数のプロセッサは、前記ベクトルに基づいて、前記ＨＯＡオーディオデータを再構成するように構成され、
前記１つまたは複数のプロセッサは、前記再構成されたＨＯＡオーディオデータに基づいて、前記１つまたは複数のスピーカーフィードをレンダリングするように構成される、
請求項１に記載のデバイス。
前記１つまたは複数のプロセッサは、前記ベクトルに基づいて、１つまたは複数のバイノーラルオーディオヘッドフォンフィードをレンダリングするように構成され、
前記１つまたは複数のスピーカーは、１つまたは複数のヘッドフォンスピーカーを備える、
請求項１に記載のデバイス。
前記デバイスは、ヘッドフォンを備え、前記ヘッドフォンは、１つまたは複数の統合されたヘッドフォンスピーカーとして前記１つまたは複数のヘッドフォンスピーカーを含む、請求項４５に記載のデバイス。
前記デバイスは、自動車を備え、前記自動車は、１つまたは複数の統合されたスピーカーとして前記１つまたは複数のスピーカーを含む、請求項１に記載のデバイス。
前記１つまたは複数のプロセッサは、前記ベクトルと、前記対応するフォアグラウンドオーディオ信号とに基づいて、前記１つまたは複数のスピーカーフィードをレンダリングするように構成される、請求項１に記載のデバイス。
前記方法は、前記ベクトルに基づいて、前記ＨＯＡオーディオデータを再構成することをさらに備え、
前記１つまたは複数のスピーカーフィードをレンダリングすることは、前記再構成されたＨＯＡオーディオデータに基づいて、前記１つまたは複数のスピーカーフィードをレンダリングすることを備える、
請求項１０に記載の方法。
前記１つまたは複数のスピーカーフィードをレンダリングすることは、前記ベクトルに基づいて、１つまたは複数のバイノーラルオーディオヘッドフォンフィードをレンダリングすることを備え、
前記１つまたは複数のスピーカーは、１つまたは複数のヘッドフォンスピーカーを備える、
請求項１０に記載の方法。
前記１つまたは複数のスピーカーフィードをレンダリングすることは、前記ベクトルと、前記対応するフォアグラウンドオーディオ信号とに基づいて、前記１つまたは複数のスピーカーフィードをレンダリングすることを備える、請求項１０に記載の方法。