RU2023122339A - METHODS, DEVICES AND SYSTEMS FOR EXPANDING THREE DEGREES OF FREEDOM (3DOF+) MPEG-H 3D AUDIO - Google Patents

METHODS, DEVICES AND SYSTEMS FOR EXPANDING THREE DEGREES OF FREEDOM (3DOF+) MPEG-H 3D AUDIO Download PDF

Info

Publication number
RU2023122339A
RU2023122339A RU2023122339A RU2023122339A RU2023122339A RU 2023122339 A RU2023122339 A RU 2023122339A RU 2023122339 A RU2023122339 A RU 2023122339A RU 2023122339 A RU2023122339 A RU 2023122339A RU 2023122339 A RU2023122339 A RU 2023122339A
Authority
RU
Russia
Prior art keywords
listener
displacement
head
information
audio
Prior art date
Application number
RU2023122339A
Other languages
Russian (ru)
Inventor
Кристоф ФЕРШ
Леон ТЕРЕНТИВ
Дэниел ФИШЕР
Original Assignee
Долби Интернешнл Аб
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Долби Интернешнл Аб filed Critical Долби Интернешнл Аб
Publication of RU2023122339A publication Critical patent/RU2023122339A/en

Links

Claims (32)

1. Способ обработки информации о положении, указывающей положение объекта для звукового объекта, причем обработку осуществляют с использованием декодера MPEG-H 3D Audio, причем положение объекта используемо для рендеринга звукового объекта, при этом способ включает:1. A method for processing position information indicating the position of an object for an audio object, wherein the processing is performed using an MPEG-H 3D Audio decoder, wherein the position of the object is used to render the audio object, wherein the method includes: прием битового потока, содержащего кодированный звук; receiving a bit stream containing encoded audio; декодирование из битового потока звукового объекта и информации о положении для звукового объекта; decoding from the audio object bitstream and position information for the audio object; получение информации об ориентации слушателя, указывающей ориентацию головы слушателя;obtaining listener orientation information indicating the orientation of the listener's head; получение информации о смещении слушателя, указывающей смещение головы слушателя относительно номинального положения прослушивания посредством входного интерфейса декодера MPEG-H 3D Audio;obtaining listener displacement information indicating a displacement of the listener's head relative to the nominal listening position through an input interface of the MPEG-H 3D Audio decoder; определение положения объекта из информации о положении, причемdetermining the position of an object from position information, wherein информация о положении содержит указание расстояния от звукового объекта до номинального положения прослушивания;the position information contains an indication of the distance from the sound object to the nominal listening position; модификацию положения объекта на основании информации о смещении слушателя за счет применения поступательного перемещения к положению объекта; иmodifying the object's position based on information about the listener's displacement by applying translational movement to the object's position; And дополнительную модификацию модифицированного положения объекта на основании информации об ориентации слушателя, причем additional modification of the modified position of the object based on information about the orientation of the listener, and когда информация о смещении слушателя указывает смещение головы слушателя из номинального положения прослушивания вследствие небольшого смещения положения, при этом небольшое смещение положения имеет абсолютное значение 0,5 метра или менее 0,5 метра, расстояние между положением звукового объекта и положением прослушивания после смещения головы слушателя является равным расстоянию между модифицированным положением звукового объекта и номинальным положением прослушивания.when the listener displacement information indicates the displacement of the listener's head from the nominal listening position due to a small position displacement, and the small position displacement has an absolute value of 0.5 meters or less than 0.5 meters, the distance between the position of the sound object and the listening position after the listener's head displacement is equal to the distance between the modified position of the sound object and the nominal listening position. 2. Способ по п. 1, отличающийся тем, что:2. Method according to claim 1, characterized in that: модификацию положения объекта и дополнительную модификацию модифицированного положения объекта выполняют таким образом, что звуковой объект после рендеринга на одном или более реальных или виртуальных динамиках в соответствии с дополнительным модифицированным положением объекта психоакустически воспринимается слушателем как возникающий из фиксированного положения относительно номинального положения прослушивания независимо от смещения головы слушателя из номинального положения прослушивания и ориентации головы слушателя относительно номинальной ориентации.the modification of the object position and the additional modification of the modified object position are performed such that the sound object, after rendering on one or more real or virtual speakers in accordance with the additional modified object position, is psychoacoustically perceived by the listener as arising from a fixed position relative to the nominal listening position, regardless of the listener's head displacement from the nominal listening position and the orientation of the listener's head relative to the nominal orientation. 3. Способ по п. 1, отличающийся тем, что:3. Method according to claim 1, characterized in that: модификацию положения объекта на основании информации о смещении слушателя выполняют посредством поступательного перемещения положения объекта, равного смещению головы слушателя из номинального положения прослушивания, но в противоположном направлении. modification of the object's position based on the listener's displacement information is accomplished by progressively moving the object's position equal to the displacement of the listener's head from the nominal listening position, but in the opposite direction. 4. Способ по п. 1, отличающийся тем, что:4. Method according to claim 1, characterized in that: информация о смещении слушателя указывает смещение головы слушателя из номинального положения прослушивания, которое достигаемо посредством движения по меньшей мере одного из верхней части тела и головы пользователя. the listener displacement information indicates the displacement of the listener's head from the nominal listening position, which is achieved by movement of at least one of the user's upper body and head. 5. Способ по п. 1, отличающийся тем, что дополнительно включает:5. The method according to claim 1, characterized in that it additionally includes: обнаружение ориентации головы слушателя посредством носимого или стационарного оборудования.detecting the listener's head orientation using wearable or stationary equipment. 6. Способ по п. 1, отличающийся тем, что дополнительно включает:6. The method according to claim 1, characterized in that it additionally includes: обнаружение смещения головы слушателя из номинального положения прослушивания посредством носимого и/или стационарного оборудования.detection of the listener's head displacement from the nominal listening position using wearable and/or fixed equipment. 7. Способ по п. 1, отличающийся тем, что расстояние между модифицированным положением звукового объекта и положением прослушивания после смещения отображают на коэффициенты усиления для модификации уровня звукового сигнала.7. The method according to claim 1, characterized in that the distance between the modified position of the sound object and the listening position after the shift is mapped to gain factors for modifying the sound signal level. 8. Энергонезависимый машиночитаемый носитель, содержащий команды, которые при исполнении программного обеспечения процессором цифровой обработки сигналов или микропроцессором вызывают выполнение процессором цифровой обработки сигналов или микропроцессором способа по п. 1.8. A non-transitory computer-readable medium containing instructions that, when executed by a digital signal processor or microprocessor, cause the digital signal processor or microprocessor to execute the method of claim 1. 9. Декодер MPEG-H 3D Audio или обработка информации о положении, указывающей положение объекта для звукового объекта, причем положение объекта используемо для рендеринга звукового объекта, при этом декодер содержит процессор и запоминающее устройство, соединенное с процессором, причем процессор адаптирован для:9. An MPEG-H 3D Audio decoder or processing position information indicating an object position for an audio object, wherein the object position is used to render the audio object, wherein the decoder comprises a processor and a storage device coupled to the processor, wherein the processor is adapted to: приема битового потока, содержащего кодированный звук; receiving a bit stream containing encoded audio; декодирования из битового потока звукового объекта и информации о положении для звукового объекта; decoding from the audio object bitstream and position information for the audio object; получения информации об ориентации слушателя, указывающей ориентацию головы слушателя;obtaining listener orientation information indicating the orientation of the listener's head; получения информации о смещении слушателя, указывающей смещение головы слушателя относительно номинального положения прослушивания посредством входного интерфейса декодера MPEG-H 3D Audio;obtaining listener displacement information indicating a displacement of the listener's head relative to the nominal listening position through an input interface of the MPEG-H 3D Audio decoder; определения положения объекта из информации о положении, причемdetermining the position of an object from position information, and информация о положении содержит указание расстояния от звукового объекта до номинального положения прослушивания;the position information contains an indication of the distance from the sound object to the nominal listening position; модификации положения объекта на основании информации о смещении слушателя за счет применения поступательного перемещения к положению объекта; иmodifying the position of an object based on information about the listener's displacement by applying translational movement to the position of the object; And дополнительной модификации модифицированного положения объекта на основании информации об ориентации слушателя, причем additional modification of the modified position of the object based on information about the orientation of the listener, and когда информация о смещении слушателя указывает смещение головы слушателя из номинального положения прослушивания вследствие небольшого смещения положения, при этом небольшое смещение положения имеет абсолютное значение, составляющее 0,5 метра или менее 0,5 метра, расстояние между положением звукового объекта и положением прослушивания после смещения головы слушателя является равным расстоянию между модифицированным положением звукового объекта и номинальным положением прослушивания.when the listener displacement information indicates the displacement of the listener's head from the nominal listening position due to a small position displacement, and the small position displacement has an absolute value of 0.5 meters or less than 0.5 meters, the distance between the position of the sound object and the listening position after the head displacement listener is equal to the distance between the modified sound object position and the nominal listening position.
RU2023122339A 2018-04-09 2019-04-09 METHODS, DEVICES AND SYSTEMS FOR EXPANDING THREE DEGREES OF FREEDOM (3DOF+) MPEG-H 3D AUDIO RU2023122339A (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US62/654,915 2018-04-09
US62/695,446 2018-07-09
US62/823,159 2019-03-25

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
RU2020130112A Division RU2803062C2 (en) 2018-04-09 2019-04-09 Methods, apparatus and systems for expanding three degrees of freedom (3dof+) of mpeg-h 3d audio

Publications (1)

Publication Number Publication Date
RU2023122339A true RU2023122339A (en) 2023-09-19

Family

ID=

Similar Documents

Publication Publication Date Title
US10080094B2 (en) Audio processing apparatus
EP4258659A3 (en) Method for encoding/decoding video signals and apparatus therefor
EP2645749B1 (en) Audio apparatus and method of converting audio signal thereof
RU2016141642A (en) DEVICE AND METHOD FOR RE-DISPLAYING RELATED TO THE SCREEN OF AUDIO OBJECTS
US11750999B2 (en) Method and system for handling global transitions between listening positions in a virtual reality environment
RU2010147691A (en) CODING METHOD AND DEVICE FOR DECODING BASED ON AUDIO OBJECTS
MX2015008956A (en) Binaural audio processing.
RU2018105082A (en) METHOD AND DEVICE FOR PROVIDING TALENTIAL FEEDBACK AND INTERACTIVITY BASED ON THE USER'S tactile FEEDBACK (HAPSPACE)
JP2015019371A5 (en)
US20160042740A1 (en) Method and device of extracting sound source acoustic image body in 3d space
CA2645910A1 (en) Methods and apparatuses for encoding and decoding object-based audio signals
MY189823A (en) Decoder, encoder and method for informed loudness estimation in object-based audio coding systems
BR112016009209A8 (en) METHOD AND APPARATUS FOR DETERMINING A DECODING MATRIX FOR DECODING AN ENCODED AUDIO SIGNAL, AND COMPUTER READABLE STORAGE MEDIA
JP2012133366A5 (en)
US11284211B2 (en) Determination of targeted spatial audio parameters and associated spatial audio playback
RU2016141784A (en) DEVICE AND METHOD OF SOUND RENDERING USING DETERMINATION OF GEOMETRIC DISTANCE
US20160323672A1 (en) Multi-channel speaker output orientation detection
EP3318070B1 (en) Determining azimuth and elevation angles from stereo recordings
EP4242828A3 (en) Audio apparatus and method of audio processing
WO2013079993A1 (en) Signal processing for audio scene rendering
JPWO2018198789A1 (en) Signal processing apparatus and method, and program
CN113454716A (en) Apparatus, method and computer program for controlling noise reduction
RU2023122339A (en) METHODS, DEVICES AND SYSTEMS FOR EXPANDING THREE DEGREES OF FREEDOM (3DOF+) MPEG-H 3D AUDIO
EP4164256A1 (en) Apparatus, methods and computer programs for processing spatial audio
RU2020127372A (en) METHODS, DEVICE AND SYSTEMS FOR FORMING 6DOF SOUND AND REPRESENTATION OF DATA AND STRUCTURES OF BIT STREAMS FOR FORMING 6DOF SOUND