RU2766560C2 - Способ и устройство для декодирования амбиофонического аудиопредставления звукового поля для проигрывания аудио с использованием 2d-компоновок - Google Patents

Способ и устройство для декодирования амбиофонического аудиопредставления звукового поля для проигрывания аудио с использованием 2d-компоновок Download PDF

Info

Publication number
RU2766560C2
RU2766560C2 RU2019100542A RU2019100542A RU2766560C2 RU 2766560 C2 RU2766560 C2 RU 2766560C2 RU 2019100542 A RU2019100542 A RU 2019100542A RU 2019100542 A RU2019100542 A RU 2019100542A RU 2766560 C2 RU2766560 C2 RU 2766560C2
Authority
RU
Russia
Prior art keywords
speaker
matrix
decoding
positions
processing
Prior art date
Application number
RU2019100542A
Other languages
English (en)
Other versions
RU2019100542A (ru
RU2019100542A3 (ru
Inventor
Флориан КАЙЛЕР
Йоханнес БЕМ
Original Assignee
Долби Интернэшнл Аб
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Долби Интернэшнл Аб filed Critical Долби Интернэшнл Аб
Publication of RU2019100542A publication Critical patent/RU2019100542A/ru
Publication of RU2019100542A3 publication Critical patent/RU2019100542A3/ru
Application granted granted Critical
Publication of RU2766560C2 publication Critical patent/RU2766560C2/ru

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/02—Systems employing more than two channels, e.g. quadraphonic of the matrix type, i.e. in which input signals are combined algebraically, e.g. after having been phase shifted with respect to each other
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/308—Electronic adaptation dependent on speaker or headphone connection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/07—Synergistic effects of band splitting and sub-band processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/11—Application of ambisonics in stereophonic audio systems

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Physics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Stereophonic System (AREA)

Abstract

Изобретение относится к средствам для обработки аудиопредставления звукового поля. Технический результат заключается в повышении эффективности обработки аудиопредставления звукового поля. Обрабатывают аудиосигнал в амбиофоническом формате в представление L громкоговорителей, основываясь на матрице обработки. Матрица обработки имеет элементы, основанные на позициях громкоговорителей, и при этом матрица обработки определяется на основании взвешивания по меньшей мере элемента первой матрицы посредством весового коэффициента. Первая матрица определяется на основании позиций L громкоговорителей и по меньшей мере виртуальной позиции по меньшей мере виртуального громкоговорителя, которая добавлена к позициям L громкоговорителей. 3 н.п. ф-лы, 7 ил.

Description

ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ
Настоящее изобретение относится к способу и устройству для декодирования аудиопредставления звукового поля, и, в частности, амбиофонически форматируемого аудиопредставления, для проигрывания аудио с использованием двухмерной или близкой к двухмерной компоновки.
УРОВЕНЬ ТЕХНИКИ
Точная локализация является ключевой целью для любой системы воспроизведения пространственного аудио. Такие системы воспроизведения успешно применимы для систем конференций, игр или других виртуальных сред, которые получают преимущества от 3D-звука. Звуковые сцены в 3D могут быть синтезированы или захвачены как естественное звуковое поле. Сигналы звукового поля, такие как, например, амбиофония, переносят представление желаемого звукового поля. Процесс декодирования требуется для получения отдельных сигналов громкоговорителей из представления звукового поля. Декодирование амбиофонически форматируемого сигнала также называется "обработкой". Для того чтобы синтезировать аудиосцены, функции панорамирования, которые обращаются к пространственной компоновке громкоговорителей, требуются для получения пространственной локализации заданного источника звука. Для записи естественного звукового поля, матрицы микрофонов требуются для захвата пространственной информации. Амбиофонический подход является очень подходящим инструментом для выполнения этого. Амбиофонически форматируемые сигналы переносят представление желаемого звукового поля на основе сферического гармонического разложения звукового поля. В то время как базовый амбиофонический формат или B-формат использует сферические гармонические функции нулевого и первого порядка, так называемая амбиофония высокого порядка (HOA) также дополнительно использует сферические гармонические функции по меньшей мере 2-го порядка. Пространственное расположение громкоговорителей называется компоновкой громкоговорителей. Для процесса декодирования требуется матрица декодирования (также называемая матрицей обработки), которая является конкретной для некоторой заданной компоновки громкоговорителей и которая генерируется с использованием известных позиций громкоговорителей.
Обычно используемыми компоновками громкоговорителей являются стереокомпоновка, которая задействует два громкоговорителя, стандартная компоновка объемного звучания, которая использует пять громкоговорителей, и расширения компоновки объемного звучания, которые используют более пяти громкоговорителей. Однако эти широко известные компоновки ограничены двумя измерениями (2D), например никакая информация высоты не воспроизводится. Обработка для известных компоновок громкоговорителей, которая может воспроизводить информацию высоты, имеет недостатки в локализации и окраске звука: либо пространственные вертикальные панорамы воспринимаются с очень неравномерной громкостью, либо сигналы громкоговорителей имеют сильные боковые лепестки, что дает недостатки в особенности для смещенных от центра позиций слушания. Таким образом, так называемое сберегающее энергию построение обработки предпочтительно при обработке описания звукового поля HOA для громкоговорителей. Это означает, что обработка одного источника звука дает в результате сигналы громкоговорителей с постоянной энергией независимо от направления источника. Иными словами, входная энергия, переносимая амбиофоническим представлением, сохраняется средством обработки громкоговорителя. Международная патентная публикация WO2014/012945A1 [1] настоящих изобретателей описывает построение средства обработки HOA с хорошими свойствами сбережения энергии и локализации для 3D-компоновок громкоговорителей. Однако в то время как этот подход хорошо работает для 3D-компоновок громкоговорителей, которые покрывают все направления, некоторые направления источников ослабляются для 2D-компоновок громкоговорителей (как, например объемный звук 5.1). Это происходит в особенности для направлений, где никакие громкоговорители не размещаются, например, сверху.
В работе Ф. Зоттера и М. Франка "Круговое амбиофоническое панорамирование и декодирование" ("All-Round Ambisonic Panning and Decoding") [2] "мнимый" громкоговоритель добавляется, если присутствует пустота в выпуклой оболочке, образуемой громкоговорителями. Однако получающийся в результате сигнал для этого мнимого громкоговорителя пропускается в проигрывании через действительный громкоговоритель. Таким образом, источник сигнала с этого направления (т.е. направления, где никакой действительный громкоговоритель не располагается), будет все равно ослаблен. Кроме того, эта работа показывает использование мнимого громкоговорителя только для использования с VBAP (панорамированием амплитуды на векторной основе).
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
Таким образом, остается проблемой проектирование сберегающих энергию амбиофонических средств обработки для 2D (двухмерных) компоновок громкоговорителей, в которых источники звука с направлений, где никаких громкоговорителей не размещается, менее ослаблены или вообще не ослаблены. 2D- компоновки громкоговорителей могут быть классифицированы как те, в которых углы возвышения громкоговорителей находятся внутри определенного малого диапазона (например, <10°) так, что они близки к горизонтальной плоскости.
Настоящее техническое описание описывает решение для обработки/декодирования амбиофонически форматируемого аудиопредставления звукового поля для равномерных или неравномерных распределений пространственных громкоговорителей, причем обработка/декодирование обеспечивает сильно улучшенные свойства локализации и окраски и является сберегающим энергию, и причем даже звук с направлений, в которых никакой громкоговоритель не доступен, обрабатывается. Обеспечивает преимущества то, что звук с направлений, в которых никакой громкоговоритель не доступен, обрабатывается с по существу той же самой энергией и воспринимаемой громкостью, какую он имел бы, если бы громкоговоритель был доступен в соответственном направлении. Разумеется, точная локализация этих источников звука невозможна, поскольку никакой громкоговоритель не доступен в этом направлении.
В частности, по меньшей мере некоторые описанные варианты осуществления обеспечивают новый способ для получения матрицы декодирования для декодирования данных звукового поля в формате HOA. Поскольку по меньшей мере формат HOA описывает звуковое поле, которое не относится непосредственно к позициям громкоговорителей, и поскольку сигналы громкоговорителей, которые должны быть получены, обязательно имеют формат аудио на основе каналов, декодирование сигналов HOA всегда непосредственно относится к обработке аудиосигнала. По существу, то же самое также применимо и к другим аудиоформатам звукового поля. Таким образом, настоящее раскрытие относится и к декодированию, и к обработке относящихся к звуковому полю аудиоформатов. Термины "матрица декодирования" и "матрица обработки" используются как синонимы.
Для получения матрицы декодирования для некоторой заданной компоновки с хорошими свойствами сбережения энергии один или несколько виртуальных громкоговорителей добавляется в позициях, где никакой громкоговоритель не доступен. Например, для получения улучшенной матрицы декодирования для 2D-компоновки два виртуальных громкоговорителя добавляется сверху и снизу (в соответствии с углами возвышения +90° и -90°, причем 2D-громкоговорители размещаются приблизительно на возвышении 0°). Для этой виртуальной 3D-компоновки громкоговорителей строится матрица декодирования, которая удовлетворяет свойству сбережения энергии. Наконец, весовые коэффициенты из матрицы декодирования для виртуальных громкоговорителей микшируются с постоянными усилениями для действительных громкоговорителей 2D-компоновки.
Согласно одному варианту осуществления матрица декодирования (или матрица обработки) для обработки или декодирования аудиосигнала в амбиофоническом формате для некоторого заданного набора громкоговорителей генерируется путем генерирования первой предварительной матрицы декодирования с использованием стандартного способа и с использованием модифицированных позиций громкоговорителей, причем модифицированные позиции громкоговорителей включают в себя позиции громкоговорителей заданного набора громкоговорителей и по меньшей мере одну дополнительную виртуальную позицию громкоговорителя, и понижающего микширования первой предварительной матрицы декодирования, причем коэффициенты, относящиеся к по меньшей мере одному дополнительному виртуальному громкоговорителю, удаляются и распределяются по коэффициентам, относящимся к громкоговорителям заданного набора громкоговорителей. В одном варианте осуществления последующий этап нормализации матрицы декодирования следует за этим. Получающаяся в результате матрица декодирования является подходящей для обработки или декодирования амбиофонического сигнала для заданного набора громкоговорителей, причем даже звук от позиций, где никакой громкоговоритель не присутствует, воспроизводится с верной энергией сигнала. Это происходит ввиду строения улучшенной матрицы декодирования. Предпочтительно, первая предварительная матрица декодирования является сберегающей энергию.
В одном варианте осуществления матрица декодирования имеет L строк и O3D столбцов. Количество строк соответствует количеству громкоговорителей в 2D-компоновке громкоговорителей, и количество столбцов соответствует количеству амбиофонических коэффициентов O3D, которое зависит от порядка N HOA согласно O3D=(N+1)2. Каждый из коэффициентов матрицы декодирования для 2D-компоновки громкоговорителей является суммой по меньшей мере первого промежуточного коэффициента и второго промежуточного коэффициента. Первый промежуточный коэффициент получается способом построения 3D-матрицы со сбережением энергии для текущей позиции громкоговорителя 2D-компоновки громкоговорителей, причем способ построения 3D-матрицы со сбережением энергии использует по меньшей мере одну позицию виртуального громкоговорителя. Второй промежуточный коэффициент получается посредством коэффициента, который получается из упомянутого способа построения 3D-матрицы со сбережением энергии для по меньшей мере одной позиции виртуального громкоговорителя, умноженного на весовой коэффициент g. В одном варианте осуществления весовой коэффициент g вычисляется согласно
Figure 00000001
, где L является количеством громкоговорителей в 2D-компоновке громкоговорителей.
В одном варианте осуществления изобретение относится к машиночитаемому носителю данных, имеющему сохраненные на нем исполняемые инструкции, для побуждения компьютера выполнять способ, содержащий этапы способа, раскрываемого выше или в формуле изобретения.
Устройство, которое задействует способ, раскрывается в пункте 9.
Имеющие преимущества варианты осуществления раскрываются в зависимых пунктах формулы изобретения, в последующем описании и на чертежах.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
Примерные варианты осуществления изобретения описаны со ссылками на сопроводительные чертежи, которые изображают на
фиг.1 блок-схему способа согласно одному варианту осуществления;
фиг.2 примерное строение микшированной с понижением матрицы декодирования HOA;
фиг.3 блок-схему для получения и модификации позиций громкоговорителей;
фиг.4 структурную схему устройства согласно одному варианту осуществления;
фиг.5 распределение энергии, возникающее в результате стандартной матрицы декодирования;
фиг.6 распределение энергии, возникающее в результате матрицы декодирования согласно вариантам осуществления; и
фиг.7 использование раздельно оптимизированных матриц декодирования для различных полос частот.
ОПИСАНИЕ ВАРИАНТОВ ОСУЩЕСТВЛЕНИЯ
Фиг.1 изображает блок-схему способа для декодирования аудиосигнала, в частности, сигнала звукового поля, согласно одному варианту осуществления. Декодирование сигналов звукового поля в общем случае требует позиций громкоговорителей, для которых аудиосигнал должен быть обработан. Такие позиции громкоговорителей
Figure 00000002
1 ...
Figure 00000002
L для L громкоговорителей вводятся i10 в процесс. Следует заметить, что, когда упоминаются позиции, фактически здесь подразумеваются пространственные направления, т.е. позиции громкоговорителей определяются их углами наклона
Figure 00000003
и углами азимута
Figure 00000004
, которые комбинируются в вектор
Figure 00000005
. Затем по меньшей мере одна позиция виртуального громкоговорителя добавляется 10. В одном варианте осуществления все позиции громкоговорителей, которые вводятся в процесс i10, находятся по существу в одной и той же плоскости так, что они составляют 2D-компоновку, и по меньшей мере один виртуальный громкоговоритель, который добавляется, находится вне этой плоскости. В одном особенно выгодном варианте осуществления все позиции громкоговорителей, которые вводятся в процесс i10, находятся по существу в одной и той же плоскости, и позиции двух виртуальных громкоговорителей добавляются на этапе 10. Имеющие преимущества позиции двух виртуальных громкоговорителей описаны ниже. В одном варианте осуществления добавление выполняется согласно ур.(6) ниже. Этап 10 добавления дает в результате модифицированный набор углов громкоговорителей
Figure 00000002
'1 ...
Figure 00000002
'L+Lвирт на q10. Lвирт является количеством виртуальных громкоговорителей. Модифицированный набор углов громкоговорителей используется на этапе 11 построения 3D-матрицы декодирования. Также порядок N HOA (в общем случае порядок коэффициентов сигнала звукового поля) должен быть обеспечен i11 для этапа 11.
Этап 11 построения 3D-матрицы декодирования выполняет любой известный способ для генерирования 3D-матрицы декодирования. Предпочтительно, 3D-матрица декодирования является подходящей для сберегающего энергию типа декодирования/обработки. Например, способ, описанный в работе PCT/EP2013/065034, может быть использован. Этап 11 построения 3D-матрицы декодирования дает в результате матрицу декодирования или матрицу обработки D', которая подходит для обработки L'=L+Lвирт сигналов громкоговорителей, где Lвирт является количеством виртуальных позиций громкоговорителей, которые были добавлены на этапе 10 "добавления виртуальных позиций громкоговорителей".
Поскольку только L громкоговорителей физически доступно, матрица декодирования D', которая получается в результате этапа 11 построения 3D-матрицы декодирования, должна быть приспособлена под L громкоговорителей на этапе 12 понижающего микширования. Этот этап выполняет понижающее микширование матрицы декодирования D', причем коэффициенты, относящиеся к виртуальным громкоговорителям, взвешиваются и распределяются по коэффициентам, относящимся к существующим громкоговорителям. Предпочтительно, коэффициенты любого конкретного порядка HOA (т.е. столбец матрицы декодирования D') взвешиваются и добавляются к коэффициентам того же самого порядка HOA (т.е. к тому же самому столбцу матрицы декодирования D'). Одним примером является понижающее микширование согласно ур.(8) ниже. Этап 12 понижающего микширования дает в результате микшированную с понижением 3D-матрицу декодирования
Figure 00000006
, которая имеет L строк, т.е. меньше строк, чем матрица декодирования D', но имеет то же самое количество столбцов, что и матрица декодирования D'. Иными словами, размерность матрицы декодирования D' равна (L+Lвирт)×O3D и размерность микшированной с понижением 3D-матрицы декодирования
Figure 00000006
равна L×O3D.
Фиг.2 изображает примерное строение микшированной с понижением HOA-матрицы декодирования
Figure 00000006
из HOA-матрицы декодирования D'. HOA-матрица декодирования D' имеет L+2 строк, что означает, что две виртуальные позиции громкоговорителей были добавлены к L доступным позициям громкоговорителей, и O3D столбцов, где O3D=(N+1)2 и N является порядком HOA. На этапе 12 понижающего микширования коэффициенты строк L+1 и L+2 HOA-матрицы декодирования D' взвешиваются и распределяются по коэффициентам их соответственного столбца, и строки L+1 и L+2 удаляются. Например, первые коэффициенты d'L+1,1 и d'L+2,1 каждой из строк L+1 и L+2 взвешиваются и добавляются к первым коэффициентам всех остальных строк, таким как d'1,1. Получающийся в результате коэффициент
Figure 00000007
1,1 микшированной с понижением HOA-матрицы декодирования
Figure 00000006
является функцией от d'1,1, d'L+1,1, d'L+2,1 и весового коэффициента g. Тем же самым образом, например, получающийся в результате коэффициент
Figure 00000007
2,1 микшированной с понижением HOA-матрицы декодирования
Figure 00000006
является функцией от d'2,1, d'L+1,1, d'L+2,1 и весового коэффициента g, и получающийся в результате коэффициент
Figure 00000007
1,2 микшированной с понижением HOA-матрицы декодирования
Figure 00000006
является функцией от d'1,2, d'L+1,2, d'L+2,2 и весового коэффициента g.
Обычно микшированная с понижением HOA-матрица декодирования
Figure 00000006
будет нормализована на этапе 13 нормализации. Однако этот этап 13 является опциональным, поскольку не нормализованная матрица декодирования также может быть использована для декодирования сигнала звукового поля. В одном варианте осуществления микшированная с понижением HOA-матрица декодирования
Figure 00000006
нормализуется согласно ур.(9) ниже. Этап 13 нормализации дает в результате нормализованную микшированную с понижением HOA-матрицу декодирования D, которая имеет ту же самую размерность L×O3D, что и микшированная с понижением HOA-матрица декодирования
Figure 00000006
.
Нормализованная микшированная с понижением HOA-матрица декодирования D может затем быть использована на этапе 14 декодирования звукового поля, где входной сигнал звукового поля i14 декодируется для L сигналов q14 громкоговорителей. Обычно нормализованная микшированная с понижением HOA-матрица декодирования D не нуждается в модификации, пока компоновка громкоговорителей не модифицируется. Таким образом, в одном варианте осуществления нормализованная микшированная с понижением HOA-матрица декодирования D сохраняется в хранилище матрицы декодирования.
Фиг.3 изображает подробности того, как в одном варианте осуществления позиции громкоговорителей получаются и модифицируются. Этот вариант осуществления содержит этапы определения 101 позиций
Figure 00000002
1 ...
Figure 00000002
L L громкоговорителей и порядка N коэффициентов сигнала звукового поля, определения 102 из позиций, что L громкоговорителей находятся по существу в 2D-плоскости, и генерирования 103 по меньшей мере одной виртуальной позиции
Figure 00000008
виртуального громкоговорителя.
В одном варианте осуществления по меньшей мере одна виртуальная позиция
Figure 00000009
является одной из
Figure 00000010
и
Figure 00000011
.
В одном варианте осуществления две виртуальных позиции
Figure 00000009
и
Figure 00000012
, соответствующие двум виртуальным громкоговорителям, генерируются 103, где
Figure 00000010
и
Figure 00000013
.
Согласно одному варианту осуществления способ для декодирования закодированного аудиосигнала для L громкоговорителей в известных позициях содержит этапы, на которых определяют 101 позиции
Figure 00000002
1 ...
Figure 00000002
L L громкоговорителей и порядок N коэффициентов сигнала звукового поля, определяют 102 из позиций, что L громкоговорителей находятся по существу в 2D-плоскости, генерируют 103 по меньшей мере одну виртуальную позицию
Figure 00000009
виртуального громкоговорителя, генерируют 11 3D-матрицу декодирования D', причем определенные позиции
Figure 00000002
1 ...
Figure 00000002
L L громкоговорителей и по меньшей мере одна виртуальная позиция
Figure 00000009
используются, и 3D-матрица декодирования D' имеет коэффициенты для упомянутых определенных и виртуальных позиций громкоговорителей, микшируют с понижением 12 3D-матрицу декодирования D', причем коэффициенты для виртуальных позиций громкоговорителей взвешиваются и распределяются по коэффициентам, относящимся к определенным позициям громкоговорителей, и причем получается уменьшенная 3D-матрица декодирования
Figure 00000006
, имеющая коэффициенты для определенных позиций громкоговорителей, и декодируют 14 закодированный аудиосигнал i14 с использованием уменьшенной 3D-матрицы декодирования
Figure 00000006
, причем получается множество декодированных сигналов q14 громкоговорителей.
В одном варианте осуществления закодированный аудиосигнал является сигналом звукового поля, например в формате HOA.
В одном варианте осуществления по меньшей мере одна виртуальная позиция
Figure 00000009
виртуального громкоговорителя является одной из
Figure 00000010
и
Figure 00000011
.
В одном варианте осуществления коэффициенты для виртуальных позиций громкоговорителей взвешиваются посредством весового коэффициента
Figure 00000001
.
В одном варианте осуществления способ имеет дополнительный этап нормализации уменьшенной 3D-матрицы декодирования
Figure 00000006
, причем получается нормализованная уменьшенная 3D-матрица декодирования D, и этап 14 декодирования закодированного аудиосигнала i14 использует нормализованную уменьшенную 3D-матрицу декодирования D. В одном варианте осуществления способ имеет дополнительный этап сохранения уменьшенной 3D-матрицы декодирования
Figure 00000006
или нормализованной микшированной с понижением HOA-матрицы декодирования D в хранилище матрицы декодирования.
Согласно одному варианту осуществления, матрица декодирования для обработки или декодирования сигнала звукового поля для некоторого заданного набора громкоговорителей генерируется путем генерирования первой предварительной матрицы декодирования с использованием стандартного способа и с использованием модифицированных позиций громкоговорителей, причем модифицированные позиции громкоговорителей включают в себя позиции громкоговорителей заданного набора громкоговорителей и по меньшей мере одну дополнительную виртуальную позицию громкоговорителя, и понижающего микширования первой предварительной матрицы декодирования, причем коэффициенты, относящиеся к по меньшей мере одному дополнительному виртуальному громкоговорителю, удаляются и распределяются по коэффициентам, относящимся к громкоговорителям из заданного набора громкоговорителей. В одном варианте осуществления последующий этап нормализации матрицы декодирования следует за этим. Получающаяся в результате матрица декодирования подходит для обработки или декодирования сигнала звукового поля для заданного набора громкоговорителей, причем даже звук от позиций, где никакой громкоговоритель не присутствует, воспроизводится с верной энергией сигнала. Это происходит ввиду строения улучшенной матрицы декодирования. Предпочтительно, первая предварительная матрица декодирования является сберегающей энергию.
Фиг.4a) изображает структурную схему устройства согласно одному варианту осуществления. Устройство 400 для декодирования закодированного аудиосигнала в формате звукового поля для L громкоговорителей в известных позициях содержит блок 410 суммирования для добавления по меньшей мере одной позиции по меньшей мере одного виртуального громкоговорителя к позициям L громкоговорителей, блок 411 генератора матрицы декодирования для генерирования 3D-матрицы декодирования D', причем позиции
Figure 00000002
1 ...
Figure 00000002
L L громкоговорителей и по меньшей мере одна виртуальная позиция
Figure 00000009
используются, и 3D-матрица декодирования D' имеет коэффициенты для упомянутых определенных и виртуальных позиций громкоговорителей, блок 412 понижающего микширования матрицы для понижающего микширования 3D-матрицы декодирования D', причем коэффициенты для виртуальных позиций громкоговорителей взвешиваются и распределяются по коэффициентам, относящимся к определенным позициям громкоговорителей, и причем получается уменьшенная 3D-матрица декодирования
Figure 00000006
, имеющая коэффициенты для определенных позиций громкоговорителей, и блок 414 декодирования для декодирования закодированного аудиосигнала с использованием уменьшенной 3D-матрицы декодирования
Figure 00000006
, причем получается множество декодированных сигналов громкоговорителей.
В одном варианте осуществления устройство дополнительно содержит блок 413 нормализации для нормализации уменьшенной 3D-матрицы декодирования
Figure 00000006
, причем получается нормализованная уменьшенная 3D-матрица декодирования D, и блок 414 декодирования использует нормализованную уменьшенную 3D-матрицу декодирования D.
В одном варианте осуществления, изображенном на фиг.4b), устройство дополнительно содержит первый блок 4101 определения для определения позиций (
Figure 00000014
L) L громкоговорителей и порядка N коэффициентов сигнала звукового поля, второй блок 4102 определения для определения из позиций, что L громкоговорителей находятся по существу в 2D-плоскости, и блок 4103 генерирования позиции виртуального громкоговорителя для генерирования по меньшей мере одной виртуальной позиции (
Figure 00000009
) виртуального громкоговорителя.
В одном варианте осуществления устройство дополнительно содержит множество полосовых фильтров 715b для разделения закодированного аудиосигнала на множество полос частот, причем множество раздельных 3D-матриц декодирования Db' генерируется 711b, по одной для каждой полосы частот, и каждая 3D-матрица декодирования Db' микшируется с понижением 712b и опционально нормализуется раздельно, и причем блок 714b декодирования декодирует каждую полосу частот раздельно. В этом варианте осуществления устройство дополнительно содержит множество блоков 716b суммирования, по одному для каждого громкоговорителя. Каждый блок суммирования суммирует полосы частот, которые относятся к соответственному громкоговорителю.
Каждый из блока 410 суммирования, блока 411 генератора матрицы декодирования, блока 412 понижающего микширования матрицы, блока 413 нормализации, блока 414 декодирования, первого блока 4101 определения, второго блока 4102 определения и блока 4103 генерирования позиции виртуального громкоговорителя может осуществляться одним или несколькими процессорами, и каждый из этих блоков может совместно использовать один и тот же процессор с любым другим из этих или других блоков.
Фиг.7 изображает вариант осуществления, который использует раздельно оптимизированные матрицы декодирования для различных полос частот входного сигнала. В этом варианте осуществления способ декодирования содержит этап разделения закодированного аудиосигнала на множество полос частот с использованием полосовых фильтров. Множество раздельных 3D-матриц декодирования Db' генерируется 711b, по одной для каждой полосы частот, и каждая 3D-матрица декодирования Db' микшируется с понижением 712b и опционально нормализуется раздельно. Декодирование 714b закодированного аудиосигнала выполняется для каждой полосы частот раздельно. Это имеет преимущество в том, что зависимые от частоты различия в человеческом восприятии могут быть приняты в расчет и могут приводить к различным матрицам декодирования для различных полос частот. В одном варианте осуществления только одна или несколько (но не все) матриц декодирования генерируется путем добавления виртуальных позиций громкоговорителей и затем взвешивания и распределения их коэффициентов по коэффициентам для существующих позиций громкоговорителей, как описано выше. В другом варианте осуществления каждая из матриц декодирования генерируется путем добавления виртуальных позиций громкоговорителей и затем взвешивания и распределения их коэффициентов по коэффициентам для существующих позиций громкоговорителей, как описано выше. Наконец, все полосы частот, которые относятся к одному и тому же громкоговорителю, суммируются в одном блоке 716b суммирования полос частот для каждого громкоговорителя в операции, обратной к разбиению полос частот.
Каждый из блока 410 суммирования, блока 711b генератора матрицы декодирования, блока 712b понижающего микширования матрицы, блока 713b нормализации, блока 714b декодирования, блока 716b суммирования полос частот и блока 715b полосовых фильтров может осуществляться одним или несколькими процессорами, и каждый из этих блоков может совместно использовать один и тот же процессор с любым другим из этих или других блоков.
Один аспект настоящего раскрытия предназначен для получения матрицы обработки для 2D-компоновки с хорошими свойствами сбережения энергии. В одном варианте осуществления два виртуальных громкоговорителя добавляется сверху и снизу (углы возвышения +90° и -90°, причем 2D-громкоговорители размещены приблизительно на возвышении 0°). Для этой виртуальной 3D-компоновки громкоговорителей строится матрица обработки, которая удовлетворяет свойству сбережения энергии. Наконец, весовые коэффициенты из матрицы обработки для виртуальных громкоговорителей микшируются с постоянными усилениями для действительных громкоговорителей 2D-компоновки.
Далее описывается амбиофоническая (а именно HOA) обработка.
Амбиофоническая обработка является процессом вычисления сигналов громкоговорителей из амбиофонического описания звукового поля. Иногда она также называется амбиофоническим декодированием. Амбиофоническое 3D-представление звукового поля порядка N рассматривается, где количество коэффициентов равно
Figure 00000015
ZEqn1_O3d		 (1)
Коэффициенты для временной выборки t представляются вектором b(t)
Figure 00000016
c O3D элементами. Посредством матрицы обработки D
Figure 00000017
сигналы громкоговорителей для временной выборки t вычисляются следующим образом
Figure 00000018
ZEqn1_HoaRendering		 (2)
где D
Figure 00000019
, и w
Figure 00000020
, и L является количеством громкоговорителей.
Позиции громкоговорителей определяются через их углы наклона
Figure 00000003
и углы азимута
Figure 00000004
, которые комбинируются в вектор
Figure 00000005
для
Figure 00000021
. Различные расстояния громкоговорителей от позиций прослушивания компенсируются посредством отдельных задержек для каналов громкоговорителей.
Энергия сигнала в области HOA дается следующим образом
Figure 00000022
 (3)
где H обозначает (комплексно-сопряженное) транспонирование. Соответствующая энергия сигналов громкоговорителей вычисляется следующим образом
Figure 00000023
 (4)
Соотношение
Figure 00000024
для сберегающей энергию матрицы декодирования/обработки должно быть постоянным для того, чтобы достигать сберегающего энергию декодирования/обработки.
По существу следующее расширение для улучшенной 2D-обработки предлагается: Для построения матриц обработки для 2D-компоновок громкоговорителей один или несколько виртуальных громкоговорителей добавляется. 2D-компоновки понимаются как те, в которых углы возвышения громкоговорителей находятся внутри определенного малого диапазона так, что они близки к горизонтальной плоскости. Это может быть выражено следующим образом
Figure 00000025
ZEqn1_2dthreshold		 (5)
Пороговое значение
Figure 00000026
обычно выбирается для соответствия значению в диапазоне 5°-10° в одном варианте осуществления.
Для построения обработки определяется модифицированный набор углов громкоговорителей
Figure 00000027
. Последние (в этом примере две) позиции громкоговорителей являются позициями двух виртуальных громкоговорителей на северном и южном полюсах (в вертикальном направлении, т.е. сверху и снизу) полярной системы координат:
Figure 00000028
Figure 00000029

Figure 00000010

Figure 00000013
ZEqn1_virtualLS		 (6)
Таким образом, новое количество громкоговорителей, используемое для построения обработки, равно
Figure 00000030
. Из этих модифицированных позиций громкоговорителей матрица обработки
Figure 00000031
строится с подходом сбережения энергии. Например, способ построения, описанный в [1], может быть использован. Теперь окончательная матрица обработки для исходной компоновки громкоговорителей находится из D'. Одной идеей является микшировать весовые коэффициенты для виртуального громкоговорителя, определенные в матрице D', для действительных громкоговорителей. Фиксированный коэффициент усиления используется, который выбирается равным
Figure 00000001
.ZEqn1_downmixGain		 (7)
Коэффициенты промежуточной матрицы
Figure 00000032
(также называемой здесь уменьшенной 3D-матрицей декодирования) определяются следующим образом
Figure 00000033
для
Figure 00000021
и
Figure 00000034
ZEqn1_Ddownmix		 (8)
где
Figure 00000035
является элементом матрицы
Figure 00000006
в l-й строке и q-м столбце. На опциональном последнем этапе промежуточная матрица (уменьшенная 3D-матрица декодирования) нормализуется с использованием нормы Фробениуса:
Figure 00000036
ZEqn1_matrixNorm		 (9)
Фиг.5 и 6 изображают распределения энергии для компоновки громкоговорителей объемного звучания 5.0. На обоих чертежах значения энергии показаны как градации серого, и окружности указывают позиции громкоговорителей. Посредством раскрываемого способа в особенности ослабление сверху (а также снизу, не показано здесь) явным образом уменьшается.
Фиг.5 изображает распределение энергии, возникающее в результате стандартной матрицы декодирования. Малые окружности вокруг плоскости z=0 представляют позиции громкоговорителей. Как можно увидеть, покрывается диапазон энергии [-3,9, ..., 2,1] дБ, что дает в результате различия в энергии, равные 6 дБ. Кроме того, сигналы сверху (и снизу, не показано) единичной сферы воспроизводятся с очень низкой энергией, т.е. не слышны, поскольку никакие громкоговорители здесь не доступны.
Фиг.6 изображает распределение энергии, возникающее в результате матрицы декодирования согласно одному или нескольким вариантам осуществления, причем то же самое количество громкоговорителей находится в тех же самых позициях, что и на фиг.5. По меньшей мере следующие преимущества обеспечены: во-первых, покрывается меньший диапазон энергии [-1,6, ..., 0,8] дБ, что дает в результате меньшие различия в энергии, равные только 2,4 дБ. Во-вторых, сигналы из всех направлений единичной сферы воспроизводятся с их верной энергией, даже если никакие громкоговорители здесь не доступны. Поскольку эти сигналы воспроизводятся через доступные громкоговорители, их локализация не верна, но сигналы слышны с верной громкостью. В этом примере сигналы сверху и снизу (не показано) становятся слышимыми ввиду декодирования посредством улучшенной матрицы декодирования.
В одном варианте осуществления способ для декодирования закодированного аудиосигнала в амбиофоническом формате для L громкоговорителей в известных позициях содержит этапы, на которых добавляют по меньшей мере одну позицию по меньшей мере одного виртуального громкоговорителя к позициям L громкоговорителей, генерируют 3D-матрицу декодирования D', причем позиции
Figure 00000002
1, ...,
Figure 00000002
L L громкоговорителей и по меньшей мере одна виртуальная позиция
Figure 00000009
используются, и 3D-матрица декодирования D' имеет коэффициенты для упомянутых определенных и виртуальных позиций громкоговорителей, микшируют с понижением 3D-матрицу декодирования D', причем коэффициенты для виртуальных позиций громкоговорителей взвешиваются и распределяются по коэффициентам, относящимся к определенным позициям громкоговорителей, и причем получается уменьшенная 3D-матрица декодирования
Figure 00000006
, имеющая коэффициенты для определенных позиций громкоговорителей, и декодируют закодированный аудиосигнал с использованием уменьшенной 3D-матрицы декодирования
Figure 00000006
, причем получается множество декодированных сигналов громкоговорителей.
В другом варианте осуществления устройство для декодирования закодированного аудиосигнала в амбиофоническом формате для L громкоговорителей в известных позициях содержит блок 410 суммирования для добавления по меньшей мере одной позиции по меньшей мере одного виртуального громкоговорителя к позициям L громкоговорителей, блок 411 генератора матрицы декодирования для генерирования 3D-матрицы декодирования D', причем позиции
Figure 00000002
1 ...
Figure 00000002
L L громкоговорителей и по меньшей мере одна виртуальная позиция
Figure 00000009
используются, и 3D-матрица декодирования D' имеет коэффициенты для упомянутых определенных и виртуальных позиций громкоговорителей, блок 412 понижающего микширования матрицы для понижающего микширования 3D-матрицы декодирования D', причем коэффициенты для виртуальных позиций громкоговорителей взвешиваются и распределяются по коэффициентам, относящимся к определенным позициям громкоговорителей, и причем получается уменьшенная 3D-матрица декодирования
Figure 00000006
, имеющая коэффициенты для определенных позиций громкоговорителей, и блок 414 декодирования для декодирования закодированного аудиосигнала с использованием уменьшенной 3D-матрицы декодирования
Figure 00000006
, причем получается множество декодированных сигналов громкоговорителей.
В еще одном варианте осуществления устройство для декодирования закодированного аудиосигнала в амбиофоническом формате для L громкоговорителей в известных позициях содержит по меньшей мере один процессор и по меньшей мере одну память, причем память имеет сохраненные инструкции, которые при исполнении в процессоре осуществляют блок 410 суммирования для добавления по меньшей мере одной позиции по меньшей мере одного виртуального громкоговорителя к позициям L громкоговорителей, блок 411 генератора матрицы декодирования для генерирования 3D-матрицы декодирования D', причем позиции
Figure 00000002
1 ...
Figure 00000002
L L громкоговорителей и по меньшей мере одна виртуальная позиция
Figure 00000009
используются, и 3D-матрица декодирования D' имеет коэффициенты для упомянутых определенных и виртуальных позиций громкоговорителей, блок 412 понижающего микширования матрицы для понижающего микширования 3D-матрицы декодирования D', причем коэффициенты для виртуальных позиций громкоговорителей взвешиваются и распределяются по коэффициентам, относящимся к определенным позициям громкоговорителей, и причем получается уменьшенная 3D-матрица декодирования
Figure 00000006
, имеющая коэффициенты для определенных позиций громкоговорителей, и блок 414 декодирования для декодирования закодированного аудиосигнала с использованием уменьшенной 3D-матрицы декодирования
Figure 00000006
, причем получается множество декодированных сигналов громкоговорителей.
В еще одном варианте осуществления машиночитаемый носитель данных имеет сохраненные на нем исполняемые инструкции для побуждения компьютера выполнять способ для декодирования закодированного аудиосигнала в амбиофоническом формате для L громкоговорителей в известных позициях, причем способ содержит этапы, на которых добавляют по меньшей мере одну позицию по меньшей мере одного виртуального громкоговорителя к позициям L громкоговорителей, генерируют 3D-матрицу декодирования D', причем позиции
Figure 00000002
1, ...,
Figure 00000002
L L громкоговорителей и по меньшей мере одна виртуальная позиция
Figure 00000009
используются, и 3D-матрица декодирования D' имеет коэффициенты для упомянутых определенных и виртуальных позиций громкоговорителей, микшируют с понижением 3D-матрицу декодирования D', причем коэффициенты для виртуальных позиций громкоговорителей взвешиваются и распределяются по коэффициентам, относящимся к определенным позициям громкоговорителей, и причем получается уменьшенная 3D-матрица декодирования
Figure 00000006
, имеющая коэффициенты для определенных позиций громкоговорителей, и декодируют закодированный аудиосигнал с использованием уменьшенной 3D-матрицы декодирования
Figure 00000006
, причем получается множество декодированных сигналов громкоговорителей. Дополнительные варианты осуществления машиночитаемых носителей информации могут включать в себя любые признаки, описанные выше, в частности признаки, раскрываемые в зависимых пунктах формулы изобретения, ссылающиеся на пункт 1.
Следует понимать, что настоящее изобретение было описано исключительно в качестве примера, и модификации подробностей могут быть осуществлены без выхода за пределы объема изобретения. Например, хотя это описано только в отношении HOA, изобретение может также применяться для других аудиоформатов звукового поля.
Каждый признак, раскрываемый в описании, (где уместно) в формуле изобретения и на чертежах может быть обеспечен независимо или в любой надлежащей комбинации. Признаки могут, где уместно, осуществляться в аппаратных средствах, в программных средствах или в их комбинации. Ссылочные позиции, фигурирующие в формуле изобретения, приведены только в качестве иллюстрации и не должны оказывать ограничивающего эффекта на объем формулы изобретения.
На следующие материалы были сделаны ссылки выше.
[1] Интернациональная патентная публикация № WO2014/012945A1 (PD120032).
[2] Ф. Зоттер и М. Франк, "Круговое амбиофоническое панорамирование и декодирование" ("All-Round Ambisonic Panning and Decoding"), Журнал Общества инженеров по звуковой технике, 2012 г., том 60, стр.807-820.

Claims (9)

1. Способ обработки аудиосигнала в амбиофоническом формате в 2D-компоновку громкоговорителей, содержащий этапы, на которых
обрабатывают аудиосигнал в амбиофоническом формате в представление L громкоговорителей, основываясь на матрице обработки,
при этом матрица обработки имеет элементы, основанные на позициях громкоговорителей, и при этом матрица обработки определяется на основании взвешивания по меньшей мере элемента первой матрицы посредством весового коэффициента
Figure 00000037
, и
при этом первая матрица определяется на основании позиций L громкоговорителей и по меньшей мере виртуальной позиции по меньшей мере виртуального громкоговорителя, которая добавлена к позициям L громкоговорителей.
2. Устройство для обработки аудиосигнала в амбиофоническом формате в 2D-компоновку громкоговорителей, содержащее:
обработчик для обработки аудиосигнала в амбиофоническом формате в представление L громкоговорителей, основываясь на матрице обработки,
при этом матрица обработки имеет элементы, основанные на позициях громкоговорителей, и при этом матрица обработки определяется на основании взвешивания по меньшей мере элемента первой матрицы посредством весового коэффициента
Figure 00000037
, и
при этом первая матрица определяется на основании позиций L громкоговорителей и по меньшей мере виртуальной позиции по меньшей мере виртуального громкоговорителя, которая добавлена к позициям L громкоговорителей.
3. Долговременный носитель данных, который содержит или хранит, или имеет записанный на него цифровой аудиосигнал, декодированный в соответствии с п. 1.
RU2019100542A 2013-10-23 2014-10-20 Способ и устройство для декодирования амбиофонического аудиопредставления звукового поля для проигрывания аудио с использованием 2d-компоновок RU2766560C2 (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP13290255.2 2013-10-23
EP20130290255 EP2866475A1 (en) 2013-10-23 2013-10-23 Method for and apparatus for decoding an audio soundfield representation for audio playback using 2D setups

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
RU2016119533A Division RU2679230C2 (ru) 2013-10-23 2014-10-20 Способ и устройство для декодирования амбиофонического аудиопредставления звукового поля для проигрывания аудио с использованием 2d-компоновок

Related Child Applications (1)

Application Number Title Priority Date Filing Date
RU2022101794A Division RU2022101794A (ru) 2013-10-23 2022-01-27 Способ и устройство для декодирования амбиофонического аудиопредставления звукового поля для проигрывания аудио с использованием 2d-компоновок

Publications (3)

Publication Number Publication Date
RU2019100542A RU2019100542A (ru) 2019-02-28
RU2019100542A3 RU2019100542A3 (ru) 2021-12-08
RU2766560C2 true RU2766560C2 (ru) 2022-03-15

Family

ID=49626882

Family Applications (2)

Application Number Title Priority Date Filing Date
RU2019100542A RU2766560C2 (ru) 2013-10-23 2014-10-20 Способ и устройство для декодирования амбиофонического аудиопредставления звукового поля для проигрывания аудио с использованием 2d-компоновок
RU2016119533A RU2679230C2 (ru) 2013-10-23 2014-10-20 Способ и устройство для декодирования амбиофонического аудиопредставления звукового поля для проигрывания аудио с использованием 2d-компоновок

Family Applications After (1)

Application Number Title Priority Date Filing Date
RU2016119533A RU2679230C2 (ru) 2013-10-23 2014-10-20 Способ и устройство для декодирования амбиофонического аудиопредставления звукового поля для проигрывания аудио с использованием 2d-компоновок

Country Status (16)

Country Link
US (8) US9813834B2 (ru)
EP (5) EP2866475A1 (ru)
JP (6) JP6463749B2 (ru)
KR (4) KR102235398B1 (ru)
CN (6) CN108777837B (ru)
AU (6) AU2014339080B2 (ru)
BR (2) BR122017020302B1 (ru)
CA (5) CA3168427A1 (ru)
ES (1) ES2637922T3 (ru)
HK (4) HK1255621A1 (ru)
MX (5) MX359846B (ru)
MY (2) MY179460A (ru)
RU (2) RU2766560C2 (ru)
TW (5) TWI686794B (ru)
WO (1) WO2015059081A1 (ru)
ZA (5) ZA201801738B (ru)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9288603B2 (en) 2012-07-15 2016-03-15 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for backward-compatible audio coding
US9473870B2 (en) 2012-07-16 2016-10-18 Qualcomm Incorporated Loudspeaker position compensation with 3D-audio hierarchical coding
US9479886B2 (en) 2012-07-20 2016-10-25 Qualcomm Incorporated Scalable downmix design with feedback for object-based surround codec
US9761229B2 (en) 2012-07-20 2017-09-12 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for audio object clustering
US9736609B2 (en) 2013-02-07 2017-08-15 Qualcomm Incorporated Determining renderers for spherical harmonic coefficients
EP2866475A1 (en) 2013-10-23 2015-04-29 Thomson Licensing Method for and apparatus for decoding an audio soundfield representation for audio playback using 2D setups
US9838819B2 (en) * 2014-07-02 2017-12-05 Qualcomm Incorporated Reducing correlation between higher order ambisonic (HOA) background channels
EP3375208B1 (en) * 2015-11-13 2019-11-06 Dolby International AB Method and apparatus for generating from a multi-channel 2d audio input signal a 3d sound representation signal
US20170372697A1 (en) * 2016-06-22 2017-12-28 Elwha Llc Systems and methods for rule-based user control of audio rendering
FR3060830A1 (fr) * 2016-12-21 2018-06-22 Orange Traitement en sous-bandes d'un contenu ambisonique reel pour un decodage perfectionne
US10405126B2 (en) 2017-06-30 2019-09-03 Qualcomm Incorporated Mixed-order ambisonics (MOA) audio data for computer-mediated reality systems
RU2740703C1 (ru) 2017-07-14 2021-01-20 Фраунхофер-Гезелльшафт Цур Фердерунг Дер Ангевандтен Форшунг Е.Ф. Принцип формирования улучшенного описания звукового поля или модифицированного описания звукового поля с использованием многослойного описания
RU2736418C1 (ru) 2017-07-14 2020-11-17 Фраунхофер-Гезелльшафт Цур Фердерунг Дер Ангевандтен Форшунг Е.Ф. Принцип формирования улучшенного описания звукового поля или модифицированного описания звукового поля с использованием многоточечного описания звукового поля
US10015618B1 (en) * 2017-08-01 2018-07-03 Google Llc Incoherent idempotent ambisonics rendering
CN114582357A (zh) * 2020-11-30 2022-06-03 华为技术有限公司 一种音频编解码方法和装置
US11743670B2 (en) 2020-12-18 2023-08-29 Qualcomm Incorporated Correlation-based rendering with multiple distributed streams accounting for an occlusion for six degree of freedom applications

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2124351B1 (en) * 2008-05-20 2010-12-15 NTT DoCoMo, Inc. A spatial sub-channel selection and pre-coding apparatus
WO2011129304A1 (ja) * 2010-04-13 2011-10-20 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
US8111830B2 (en) * 2005-12-19 2012-02-07 Samsung Electronics Co., Ltd. Method and apparatus to provide active audio matrix decoding based on the positions of speakers and a listener
RU2011117698A (ru) * 2008-10-07 2012-11-10 Фраунхофер-Гезелльшафт цур Фёрдерунг дер ангевандтен Форшунг Е.Ф., (DE) Бинауральная визуализация мультиканального звукового сигнала
US20130010971A1 (en) * 2010-03-26 2013-01-10 Johann-Markus Batke Method and device for decoding an audio soundfield representation for audio playback
WO2013149867A1 (en) * 2012-04-02 2013-10-10 Sonicemotion Ag Method for high quality efficient 3d sound reproduction

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5594800A (en) * 1991-02-15 1997-01-14 Trifield Productions Limited Sound reproduction system having a matrix converter
GB9204485D0 (en) * 1992-03-02 1992-04-15 Trifield Productions Ltd Surround sound apparatus
US6798889B1 (en) * 1999-11-12 2004-09-28 Creative Technology Ltd. Method and apparatus for multi-channel sound system calibration
FR2847376B1 (fr) 2002-11-19 2005-02-04 France Telecom Procede de traitement de donnees sonores et dispositif d'acquisition sonore mettant en oeuvre ce procede
KR101492826B1 (ko) * 2005-07-14 2015-02-13 코닌클리케 필립스 엔.브이. 다수의 출력 오디오 채널들을 생성하기 위한 장치 및 방법과, 그 장치를 포함하는 수신기 및 오디오 재생 디바이스, 데이터 스트림 수신 방법, 및 컴퓨터 판독가능 기록매체
KR100619082B1 (ko) * 2005-07-20 2006-09-05 삼성전자주식회사 와이드 모노 사운드 재생 방법 및 시스템
CN101361122B (zh) * 2006-04-03 2012-12-19 Lg电子株式会社 处理媒体信号的装置及其方法
US8379868B2 (en) * 2006-05-17 2013-02-19 Creative Technology Ltd Spatial audio coding based on universal spatial cues
DE602007013415D1 (de) 2006-10-16 2011-05-05 Dolby Sweden Ab Erweiterte codierung und parameterrepräsentation einer mehrkanaligen heruntergemischten objektcodierung
FR2916078A1 (fr) * 2007-05-10 2008-11-14 France Telecom Procede de codage et decodage audio, codeur audio, decodeur audio et programmes d'ordinateur associes
CN101884065B (zh) * 2007-10-03 2013-07-10 创新科技有限公司 用于双耳再现和格式转换的空间音频分析和合成的方法
US8605914B2 (en) * 2008-04-17 2013-12-10 Waves Audio Ltd. Nonlinear filter for separation of center sounds in stereophonic audio
DK2211563T3 (da) * 2009-01-21 2011-12-19 Siemens Medical Instr Pte Ltd Fremgangsmåde og apparat til blind kildeadskillelse til forbedring af interferensestimering ved binaural Weiner-filtrering
KR20110041062A (ko) * 2009-10-15 2011-04-21 삼성전자주식회사 가상 스피커 장치 및 가상 스피커 처리 방법
JP2011211312A (ja) * 2010-03-29 2011-10-20 Panasonic Corp 音像定位処理装置及び音像定位処理方法
US9271081B2 (en) * 2010-08-27 2016-02-23 Sonicemotion Ag Method and device for enhanced sound field reproduction of spatially encoded audio input signals
EP2450880A1 (en) * 2010-11-05 2012-05-09 Thomson Licensing Data structure for Higher Order Ambisonics audio data
EP2469741A1 (en) * 2010-12-21 2012-06-27 Thomson Licensing Method and apparatus for encoding and decoding successive frames of an ambisonics representation of a 2- or 3-dimensional sound field
EP2541547A1 (en) * 2011-06-30 2013-01-02 Thomson Licensing Method and apparatus for changing the relative positions of sound objects contained within a higher-order ambisonics representation
EP2592845A1 (en) * 2011-11-11 2013-05-15 Thomson Licensing Method and Apparatus for processing signals of a spherical microphone array on a rigid sphere used for generating an Ambisonics representation of the sound field
EP2645748A1 (en) * 2012-03-28 2013-10-02 Thomson Licensing Method and apparatus for decoding stereo loudspeaker signals from a higher-order Ambisonics audio signal
CN107071687B (zh) 2012-07-16 2020-02-14 杜比国际公司 用于渲染音频声场表示以供音频回放的方法和设备
CN102932730B (zh) * 2012-11-08 2014-09-17 武汉大学 一种正四面体结构的扬声器组声场效果增强方法及系统
EP2866475A1 (en) * 2013-10-23 2015-04-29 Thomson Licensing Method for and apparatus for decoding an audio soundfield representation for audio playback using 2D setups

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8111830B2 (en) * 2005-12-19 2012-02-07 Samsung Electronics Co., Ltd. Method and apparatus to provide active audio matrix decoding based on the positions of speakers and a listener
EP2124351B1 (en) * 2008-05-20 2010-12-15 NTT DoCoMo, Inc. A spatial sub-channel selection and pre-coding apparatus
RU2011117698A (ru) * 2008-10-07 2012-11-10 Фраунхофер-Гезелльшафт цур Фёрдерунг дер ангевандтен Форшунг Е.Ф., (DE) Бинауральная визуализация мультиканального звукового сигнала
US20130010971A1 (en) * 2010-03-26 2013-01-10 Johann-Markus Batke Method and device for decoding an audio soundfield representation for audio playback
WO2011129304A1 (ja) * 2010-04-13 2011-10-20 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
WO2013149867A1 (en) * 2012-04-02 2013-10-10 Sonicemotion Ag Method for high quality efficient 3d sound reproduction

Also Published As

Publication number Publication date
TWI841483B (zh) 2024-05-01
TW201923752A (zh) 2019-06-16
US11770667B2 (en) 2023-09-26
RU2679230C2 (ru) 2019-02-06
AU2022291445A1 (en) 2023-02-02
US10158959B2 (en) 2018-12-18
KR102491042B1 (ko) 2023-01-26
AU2018267665A1 (en) 2018-12-13
US20200382889A1 (en) 2020-12-03
AU2021200911B2 (en) 2022-12-01
EP3742763A1 (en) 2020-11-25
US11451918B2 (en) 2022-09-20
AU2021200911A1 (en) 2021-03-04
JP2024138553A (ja) 2024-10-08
US20160309273A1 (en) 2016-10-20
EP3061270A1 (en) 2016-08-31
CA3147189C (en) 2024-04-30
ZA201901243B (en) 2021-05-26
CN108777837B (zh) 2021-08-24
RU2019100542A (ru) 2019-02-28
MX359846B (es) 2018-10-12
US10986455B2 (en) 2021-04-20
KR20240017091A (ko) 2024-02-06
CN108337624B (zh) 2021-08-24
ZA202005036B (en) 2022-04-28
TWI651973B (zh) 2019-02-21
AU2022291444B2 (en) 2024-04-18
ES2637922T3 (es) 2017-10-17
US20220408209A1 (en) 2022-12-22
JP2022008492A (ja) 2022-01-13
CN108632737A (zh) 2018-10-09
KR102235398B1 (ko) 2021-04-02
CA3147196C (en) 2024-01-09
ZA202210670B (en) 2024-01-31
WO2015059081A1 (en) 2015-04-30
ZA202107269B (en) 2023-09-27
EP2866475A1 (en) 2015-04-29
CN108777836A (zh) 2018-11-09
JP7254137B2 (ja) 2023-04-07
CN108777836B (zh) 2021-08-24
TWI797417B (zh) 2023-04-01
KR20160074501A (ko) 2016-06-28
RU2019100542A3 (ru) 2021-12-08
US20190349699A1 (en) 2019-11-14
BR122017020302B1 (pt) 2022-07-05
AU2014339080A1 (en) 2016-05-26
KR20230018528A (ko) 2023-02-07
BR112016009209A8 (pt) 2017-12-05
JP6463749B2 (ja) 2019-02-06
MX2018012489A (es) 2020-11-06
TW202329088A (zh) 2023-07-16
BR112016009209B1 (pt) 2021-11-16
KR20210037747A (ko) 2021-04-06
CN108777837A (zh) 2018-11-09
EP3742763B1 (en) 2023-03-29
CN108632737B (zh) 2020-11-06
MX2022011449A (es) 2023-03-08
CA3147189A1 (en) 2015-04-30
JP2016539554A (ja) 2016-12-15
TWI686794B (zh) 2020-03-01
CA2924700A1 (en) 2015-04-30
ZA201801738B (en) 2019-07-31
TW201517643A (zh) 2015-05-01
JP2023078432A (ja) 2023-06-06
CN105637902A (zh) 2016-06-01
CN108632736B (zh) 2021-06-01
CN108337624A (zh) 2018-07-27
CA3221605A1 (en) 2015-04-30
US20180077510A1 (en) 2018-03-15
JP7529371B2 (ja) 2024-08-06
AU2018267665B2 (en) 2020-11-19
EP4213508A1 (en) 2023-07-19
AU2022291443A1 (en) 2023-02-02
CA2924700C (en) 2022-06-07
MX2022011447A (es) 2023-02-23
MX2016005191A (es) 2016-08-08
MY179460A (en) 2020-11-06
RU2016119533A (ru) 2017-11-28
HK1221105A1 (zh) 2017-05-19
HK1252979A1 (zh) 2019-06-06
KR102629324B1 (ko) 2024-01-29
AU2014339080B2 (en) 2018-08-30
JP2020074643A (ja) 2020-05-14
JP2019068470A (ja) 2019-04-25
MY191340A (en) 2022-06-17
MX2022011448A (es) 2023-03-14
CN105637902B (zh) 2018-06-05
CN108632736A (zh) 2018-10-09
CA3168427A1 (en) 2015-04-30
JP6660493B2 (ja) 2020-03-11
EP3061270B1 (en) 2017-07-12
EP3300391A1 (en) 2018-03-28
TWI817909B (zh) 2023-10-01
US20210306785A1 (en) 2021-09-30
US20220417690A1 (en) 2022-12-29
HK1257203A1 (zh) 2019-10-18
HK1255621A1 (zh) 2019-08-23
RU2016119533A3 (ru) 2018-07-20
TW202403730A (zh) 2024-01-16
US10694308B2 (en) 2020-06-23
US11750996B2 (en) 2023-09-05
US20240056755A1 (en) 2024-02-15
TW202022853A (zh) 2020-06-16
US9813834B2 (en) 2017-11-07
CA3147196A1 (en) 2015-04-30
EP3300391B1 (en) 2020-08-05
JP6950014B2 (ja) 2021-10-13
BR112016009209A2 (ru) 2017-08-01
AU2022291444A1 (en) 2023-02-02

Similar Documents

Publication Publication Date Title
RU2766560C2 (ru) Способ и устройство для декодирования амбиофонического аудиопредставления звукового поля для проигрывания аудио с использованием 2d-компоновок