Claims (42)
1. Устройство (300) для декодирования акустического окружения (302), причем акустическое окружение (302) включающее в себя по меньшей мере один аудиоисточник и по меньшей мере один аудиообъект, причем по меньшей мере один аудиообъект представляется посредством структурно-акустических данных, которые связывают данные положения (110ax, 120bx) многоугольников (110, 120) с акустическими свойствами акустических материалов (150), при этом данные положения включают в себя, для каждого многоугольника, положение вершин, причем устройство содержит:1. An apparatus (300) for decoding an acoustic environment (302), wherein the acoustic environment (302) includes at least one audio source and at least one audio object, wherein the at least one audio object is represented by structural-acoustic data that relates position data (110ax, 120bx) of polygons (110, 120) with acoustic properties of acoustic materials (150), wherein the position data includes, for each polygon, the position of the vertices, the device comprising:
модуль (330) считывания потоков битов для считывания, из потока (204) битов, кодированной версии (322) структурно-акустических данных и по меньшей мере одного аудиопотока (312), который должен рендерироваться, сформированного по меньшей мере посредством одного аудиоисточника в акустическом окружении (302);a bitstream reading module (330) for reading, from a bitstream (204), an encoded version (322) of structural-acoustic data and at least one audio stream (312) to be rendered, generated by at least one audio source in an acoustic environment (302);
блок (310) декодирования аудиоисточников для декодирования по меньшей мере одного аудиопотока (312), представляющего по меньшей мере один аудиоисточник;an audio source decoding unit (310) for decoding at least one audio stream (312) representing at least one audio source;
блок (320) декодирования структурно-акустических данных для декодирования структурно-акустических данных (211).a structural-acoustic data decoding block (320) for decoding the structural-acoustic data (211).
2. Устройство по п. 1, дополнительно содержащее модуль (350) рендеринга для рендеринга аудиосигнала (301), полученного по меньшей мере из одного аудиопотока (312, 212) согласно структурным и взаимосвязям положений между тем по меньшей мере одним источником и декодированными структурно-акустическими данными (211).2. The device according to claim 1, further comprising a rendering module (350) for rendering an audio signal (301) obtained from at least one audio stream (312, 212) according to the structural and position relationships between that at least one source and the decoded structural acoustic data (211).
3. Устройство по любому из предшествующих пунктов, в котором блок (320) декодирования структурно-акустических данных включает в себя декодер (3800) списков вершин для декодирования списка (3802) вершин, указывающего положения вершин, причем каждая вершина имеет индекс вершины.3. The apparatus of any one of the preceding claims, wherein the structural acoustic data decoding unit (320) includes a vertex list decoder (3800) for decoding a vertex list (3802) indicating vertex positions, each vertex having a vertex index.
4. Устройство по п. 3, в котором декодер (3800) списков вершин выполнен с возможностью извлечения для каждой координаты каждой вершины значения координаты или индекса вершины ординального значения, ассоциированного в окончательном списке, ранее кодированной вершины.4. The apparatus of claim 3, wherein the vertex list decoder (3800) is configured to retrieve, for each coordinate of each vertex, the coordinate value or vertex index value of the ordinal value associated in the final list of the previously encoded vertex.
5. Устройство по п. 4, выполненное с возможностью считывания передачи в служебных сигналах в потоке (204) битов, причем передача служебных сигналов указывает то, кодируется в потоке битов значение координаты или индекс вершины.5. The apparatus of claim 4, configured to read signaling transmissions in the bitstream (204), wherein the signaling transmission indicates whether a coordinate value or a vertex index is encoded in the bitstream.
6. Устройство по любому из предшествующих пунктов, в котором блок (320) декодирования структурно-акустических данных использует по меньшей мере для одной размерности (X, Y, Z), упорядоченный окончательный список, в котором значения координат ранее декодированных вершин сохраняются согласно порядку, при этом блок (220) декодирования структурно-акустических данных выполнен с возможностью восстановления, в случае, если в потоке (204) битов кодировано ординальное значение упорядоченного окончательного списка, значения координаты в качестве значения, сохраненного в упорядоченном окончательном списке (450), ассоциированном с ординальным значением.6. The device as claimed in any one of the preceding claims, wherein the structural-acoustic data decoding unit (320) uses, for at least one dimension (X, Y, Z), an ordered final list in which the coordinate values of previously decoded vertices are stored according to the order, wherein the structural-acoustic data decoding block (220) is configured to restore, if the bit stream (204) encodes the ordinal value of the ordered final list, the coordinate value as a value stored in the ordered final list (450) associated with ordinal value.
7. Устройство по п. 6, в котором блок декодирования структурно-акустических данных выполнен с возможностью оценки для каждой вершины значения (160x, 160y, 160z) двоичной маски, указывающего, кодируется ли значение координаты или ординальное значение в упорядоченном окончательном списке в потоке (204) битов.7. The apparatus of claim 6, wherein the structural acoustic data decoding unit is configured to estimate, for each vertex, a value (160x, 160y, 160z) of a binary mask indicating whether a coordinate value or an ordinal value is encoded in the ordered final list in the stream ( 204) bits.
8. Устройство по п. 6 или 7, выполненное с возможностью выбора, на основе передачи в служебных сигналах формы потока битов, между активацией и деактивацией упорядоченного окончательного списка по меньшей мере для одной размерности, чтобы за счет этого деактивировать упорядоченный окончательный список.8. The apparatus of claim 6 or 7, configured to select, based on transmission of a bitstream form signal, between activation and deactivation of the ordered final list for at least one dimension, thereby deactivating the ordered final list.
9. Устройство по любому из пп. 6-8, выполненное с возможностью определения множества координат вершин таким образом, чтобы назначить более высоко ранжированные упорядоченные значения и/или упорядоченные значения с меньшим числом битов для координат с более высоким множеством.9. Device according to any one of paragraphs. 6-8, configured to define a set of vertex coordinates so as to assign higher ranked ordered values and/or ordered values with fewer bits to coordinates with a higher set.
10. Устройство по любому из пп. 6-9, выполненное с возможностью обновления упорядоченного окончательного списка в реальном времени на основе значений координат и/или ординальных значений, декодированных из потока битов.10. Device according to any one of paragraphs. 6-9, configured to update the ordered final list in real time based on coordinate values and/or ordinal values decoded from the bit stream.
11. Устройство по любому из пп. 6-10, в котором упорядоченный окончательный список (450) включает в себя одно создание (450x, 450y, 450z) экземпляра окончательного списка для каждой размерности.11. Device according to any one of paragraphs. 6-10, in which the ordered final list (450) includes one creation (450x, 450y, 450z) of the final list instance for each dimension.
12. Устройство по п. 11, в котором блок декодирования структурно-акустических данных выполнен с возможностью12. The device according to claim 11, in which the structural-acoustic data decoding unit is configured to
в случае, если для первой размерности значение координаты одной текущей вершины является равным одному значению координаты одной ранее декодированной вершины, сохраненной в создании экземпляра окончательного списка, связанном с первой размерностью в определенном ординальном значении, декодирования ординального значения создания экземпляра окончательного списка, in the event that for the first dimension, the coordinate value of one current vertex is equal to one coordinate value of one previously decoded vertex stored in the final list instance creation associated with the first dimension at a certain ordinal value, decoding the ordinal value of the final list instance creation,
в случае, если для второй размерности значение координаты текущей вершины отличается от любого значения координаты одной ранее декодированной вершины, сохраненной в создании экземпляра окончательного списка, связанном со второй размерностью, декодирования значения координаты.in the event that, for the second dimension, the coordinate value of the current vertex is different from any coordinate value of one previously decoded vertex stored in the final list instance creation associated with the second dimension, decoding the coordinate value.
13. Устройство по любому из предшествующих пунктов, выполненное с возможностью декодирования структурно-акустических данных с использованием арифметического кодирования.13. The device according to any of the preceding claims, configured to decode structural-acoustic data using arithmetic coding.
14. Устройство по любому из предшествующих пунктов, с использованием, для того чтобы декодировать по меньшей мере одни структурно-акустические данные, второго окончательного списка, согласно которому по меньшей мере одни структурно-акустические данные декодируются из положения во втором окончательном списке.14. The apparatus of any one of the preceding claims, using, in order to decode the at least one structural-acoustic data, a second final list, whereby the at least one structural-acoustic data is decoded from a position in the second final list.
15. Устройство по п. 14, сконфигурированное таким образом, что если по меньшей мере одни структурно-акустические данные не находятся во втором окончательном списке по меньшей мере одни структурно-акустические данные считываются полностью из потока битов.15. The apparatus of claim 14, configured such that if the at least one structural acoustic data is not in the second final list, the at least one structural acoustic data is read entirely from the bit stream.
16. Устройство по п. 14 или 15, в котором конкретный код имеет большую битовую длину, чем коды, используемые для указания положения во втором окончательном списке.16. The apparatus of claim 14 or 15, wherein the particular code has a greater bit length than the codes used to indicate the position in the second final list.
17. Устройство по любому из пп. 14-16, в котором последние декодированные структурно-акустические данные расположены в первом положении во втором окончательном списке, и другие декодированные структурно-акустические во втором окончательном списке сдвигаются.17. Device according to any one of paragraphs. 14-16, in which the last decoded structure-acoustic data is located at a first position in the second final list, and other decoded structure-acoustic data in the second final list are shifted.
18. Устройство по любому из пп. 14-17, в котором коды, указывающие первые положения во втором окончательном списке, имеет меньшую битовую длину, чем коды, указывающие последние положения во втором окончательном списке.18. Device according to any one of paragraphs. 14-17, in which the codes indicating the first positions in the second final list have a smaller bit length than the codes indicating the last positions in the second final list.
19. Устройство по любому из пп. 14-18, с использованием второго окончательного списка для декодирования списка данных многоугольников.19. The device according to any one of paragraphs. 14-18, using the second final list to decode the polygon data list.
20. Устройство по п. 19 с использованием второго окончательного списка для декодирования списка данных многоугольников, в котором указываются индексы вершин для вершин в списке вершин.20. The apparatus of claim 19, using a second final list to decode a polygon data list indicating vertex indices for the vertices in the vertex list.
21. Устройство по любому из предшествующих пунктов, выполненное с возможностью считывания передаваемой в служебных сигналах в потоке (204) битов информации относительно ограничивающего прямоугольника (500), содержащегося в акустическом окружении, причем информация относительно ограничивающего прямоугольника включает в себя данные положения для локализации ограничивающего прямоугольника (500) в окружении, причем устройство дополнительно выполнено с возможностью декодирования структурно-акустических данных в ограничивающем прямоугольнике.21. The apparatus of any one of the preceding claims, configured to read signaled bit stream (204) information regarding a bounding box (500) contained in an acoustic environment, wherein the information regarding the bounding box includes position data for localizing the bounding box (500) in the environment, wherein the device is further configured to decode structural-acoustic data in the bounding box.
22. Устройство по п. 21, в котором декодер выполнен с возможностью восстановления положения каждой вершины на основе информации относительно ограничивающего прямоугольника, включающей в себя данные положения.22. The apparatus of claim 21, wherein the decoder is configured to reconstruct the position of each vertex based on the bounding box information including the position data.
23. Устройство по п. 21 или 22, сконфигурированное таким образом, чтобы, в случае, если поток (204) битов передает в служебных сигналах то, что акустическое окружение представляет по меньшей мере один рекуррентный шаблон, восстанавливать по меньшей мере один акустический объект посредством применения рекурренции к рекуррентному шаблону в ограничивающем прямоугольнике.23. The apparatus of claim 21 or 22, configured to, if the bit stream (204) signals that the acoustic environment represents at least one recurrent pattern, recover the at least one acoustic object by applying recurrence to the recurrent pattern in the bounding box.
24. Устройство по п. 23, конфигурированное таким образом, чтобы, в случае, если поток (204) битов передает в служебных сигналах то, что по меньшей мере один рекуррентный шаблон представляет собой симметричный шаблон, включенный в ограничивающий прямоугольник, восстанавливать по меньшей мере один объект посредством симметричного формирования структурно-акустических данных в положениях, симметричных по отношению к положениям вершин в ограничивающем прямоугольнике.24. The apparatus of claim 23, configured to, in the event that the bit stream (204) signals that at least one recurrent pattern is a symmetric pattern included in the bounding box, recover at least one object by symmetrically generating structural-acoustic data at positions symmetrical with respect to the positions of the vertices in the bounding box.
25. Устройство по п. 24, в котором симметрия представляет собой плоскую симметрию, и передаваемые в служебных сигналах в потоке битов данные симметрии включают в себя информацию, ассоциированную с плоскостью симметрии, при этом устройство выполнено с возможностью восстановления по меньшей мере одного объекта посредством симметричного формирования структурно-акустических данных в положениях, симметричных по отношению к положениям вершин в ограничивающем прямоугольнике относительно плоскости симметрии.25. The apparatus of claim 24, wherein the symmetry is a plane symmetry, and the symmetry data signaled in the bitstream includes information associated with the symmetry plane, wherein the apparatus is configured to reconstruct at least one object by the symmetry generating structural-acoustic data in positions symmetrical with respect to the positions of the vertices in the bounding box relative to the plane of symmetry.
26. Устройство по любому из пп. 21-25, выполненное с возможностью выполнения смены системы координат вершин с пространственной системы координат ограничивающего прямоугольника, заданной по меньшей мере посредством одной определенной вершины ограничивающего прямоугольника, на исходную систему координат.26. The device according to any one of paragraphs. 21-25, configured to change the vertex coordinate system from the spatial coordinate system of the bounding box, defined by at least one specific vertex of the bounding box, to the original coordinate system.
27. Устройство по любому из предшествующих пунктов, дополнительно выполненное с возможностью в случае, если поток (104) битов передает в служебных сигналах, что по меньшей мере два значения координат по меньшей мере двух вершин кодируются в разложенной на множители форме согласно общему делителю, умножения каждого из по меньшей мере двух значений координат, кодированных в разложенной на множители форме, и общий делитель, с тем чтобы восстанавливать по меньшей мере два значения координат.27. The apparatus of any one of the preceding claims, further configured to, in the event that the bitstream (104) signals in the service signals, that at least two coordinate values of at least two vertices are encoded in factorized form according to a common divisor, multiplying each of the at least two coordinate values encoded in factorized form, and a common divisor so as to recover the at least two coordinate values.
28. Устройство по п. 27, в котором общий делитель представляет собой наибольший общий делитель.28. The device of claim 27, wherein the common divisor is the greatest common divisor.
29. Устройство по любому из предшествующих пунктов, в котором многоугольники представляют собой треугольники.29. An apparatus as claimed in any one of the preceding claims, wherein the polygons are triangles.
30. Способ декодирования акустического окружения (302), причем акустическое окружение (302) включает в себя по меньшей мере один аудиоисточник и по меньшей мере один аудиообъект, причем по меньшей мере один аудиообъект представляется посредством списка (400) структурно-акустических данных, который связывает данные положения (110ax, 120bx) многоугольников (110, 120) со структурно-акустическими свойствами материалов (150), при этом данные положения включают в себя, для каждого многоугольника, положение одной первичной структурно-акустической вершины (110ax) и положение оставшихся структурно-акустических вершин (110b), при этом способ содержит этапы, на которых30. A method for decoding an acoustic environment (302), wherein the acoustic environment (302) includes at least one audio source and at least one audio object, wherein the at least one audio object is represented by a list (400) of structural acoustic data that associates position data (110ax, 120bx) of polygons (110, 120) with structural-acoustic properties of materials (150), wherein these positions include, for each polygon, the position of one primary structural-acoustic vertex (110ax) and the position of the remaining structural-acoustic vertices acoustic peaks (110b), the method comprising the steps of
считывают из потока (204) битов кодированную версию (322) структурно-акустических данных (211) и по меньшей мере один аудиопоток (212), который должен рендерироваться, сформированный по меньшей мере посредством одного аудиоисточника в акустическом окружении (302);reading from the bit stream (204) an encoded version (322) of the structural-acoustic data (211) and at least one audio stream (212) to be rendered, generated by at least one audio source in the acoustic environment (302);
декодируют по меньшей мере один аудиопоток (312, 212); иdecode at least one audio stream (312, 212); And
декодируют структурно-акустические данные (211).decode structural-acoustic data (211).
31. Устройство для кодирования акустического окружения, причем акустическое окружение включает в себя по меньшей мере один аудиоисточник и по меньшей мере один аудиообъект, причем по меньшей мере один аудиообъект представляется по меньшей мере посредством одних структурно-акустических данных, которые связывают данные положения (110ax, 120bx) многоугольников (110, 120) с акустическими свойствами акустических материалов (150), при этом структурно-акустические данные включают в себя, для каждого многоугольника, положение вершин (110ax, 110ay, 110az), причем устройство содержит:31. An apparatus for encoding an acoustic environment, wherein the acoustic environment includes at least one audio source and at least one audio object, wherein the at least one audio object is represented by at least one structural acoustic data that associates position data (110ax, 120bx) polygons (110, 120) with acoustic properties of acoustic materials (150), wherein the structural-acoustic data includes, for each polygon, the position of the vertices (110ax, 110ay, 110az), and the device contains:
блок (210) кодирования аудиоисточников, выполненный с возможностью кодирования по меньшей мере одного аудиопотока, который должен рендерироваться, причем по меньшей мере один аудиопоток ассоциирован по меньшей мере с одним аудиоисточником;an audio source encoding unit (210), configured to encode at least one audio stream to be rendered, the at least one audio stream associated with at least one audio source;
блок (220) кодирования структурно-акустических данных, выполненный с возможностью кодирования по меньшей мере одних структурно-акустические данные (221) для получения кодированной версии (222) по меньшей мере одних структурно-акустических данных (221),a structural-acoustic data encoding unit (220), configured to encode at least one structural-acoustic data (221) to obtain an encoded version (222) of at least one structural-acoustic data (221),
модуль (230) записи потоков битов, выполненный с возможностью записи в потоке (204) битов по меньшей мере одного аудиопотока (212) и кодированной версии (222) по меньшей мере одних структурно-акустических данных (221). a bit stream recording module (230) configured to record in the bit stream (204) at least one audio stream (212) and an encoded version (222) of at least one structural-acoustic data (221).