KR20060026234A - 3d audio playback system and method thereof - Google Patents

3d audio playback system and method thereof Download PDF

Info

Publication number
KR20060026234A
KR20060026234A KR1020040075082A KR20040075082A KR20060026234A KR 20060026234 A KR20060026234 A KR 20060026234A KR 1020040075082 A KR1020040075082 A KR 1020040075082A KR 20040075082 A KR20040075082 A KR 20040075082A KR 20060026234 A KR20060026234 A KR 20060026234A
Authority
KR
South Korea
Prior art keywords
signal
listener
signals
output
ears
Prior art date
Application number
KR1020040075082A
Other languages
Korean (ko)
Inventor
김동관
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020040075082A priority Critical patent/KR20060026234A/en
Publication of KR20060026234A publication Critical patent/KR20060026234A/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/033—Headphones for stereophonic communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation 
    • H04S5/005—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation  of the pseudo five- or more-channel type, e.g. virtual surround
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/11—Application of ambisonics in stereophonic audio systems

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Stereophonic System (AREA)

Abstract

입체 음향 재생 장치가 개시된다. 본 발명에 따른 입체 음향 장치는 복수 채널 신호들이 소정 각도로 청취자의 양 귀에 들어올 때 청취자의 양 귀에서 측정되는 전달함수들을 저장하는 데이터베이스; 채널들을 통해 입력되는 신호들을 주파수 영역의 신호로 변환하는 신호 변환부; 주파수 영역의 입력 신호들과 데이터베이스로부터 독출한 입력 신호에 각각 대응하는 전달함수를 곱하여 출력하는 신호 처리부; 신호 처리부에서 출력되는 신호들을 시간 영역의 신호들로 역변환하는 신호 역변환부; 및 신호 역변환부에서 출력되는 채널 신호들을 청취자의 양 귀로 출력되는 두 채널 신호로 각각 합성하는 합성부를 포함함을 특징으로한다.Disclosed is a stereo sound reproducing apparatus. The stereoscopic device according to the present invention comprises a database for storing transfer functions measured at both ears of a listener when multiple channel signals enter both ears of the listener at a predetermined angle; A signal converter converting signals input through channels into signals in a frequency domain; A signal processor for multiplying and transmitting a transfer function corresponding to input signals in a frequency domain and input signals read from a database; A signal inverse converter for inversely converting signals output from the signal processor into signals in a time domain; And a synthesizer for synthesizing the channel signals output from the signal inverse transform unit into two channel signals output to both ears of the listener.

Description

입체 음향 재생 장치 및 방법{3D audio playback system and method thereof}3D audio playback system and method

도 1은 본 발명에 따른 입체 음향 재생 장치에 대한 블록도이다.1 is a block diagram of a stereoscopic sound reproducing apparatus according to the present invention.

도 2는 도 1의 앰비언스 처리부에 대한 상세 블록도이다.FIG. 2 is a detailed block diagram of an ambience processor of FIG. 1.

본 발명은 입체 음향 재생 장치 및 방법에 관한 것으로, 특히 다채널의 음향을 2채널로 변환하여 재생하는 장치 및 방법에 관한 것이다.The present invention relates to an apparatus and method for reproducing stereo sound, and more particularly, to an apparatus and method for converting and reproducing multichannel sound into two channels.

입체 음향은 인간의 두 귀로 들을 수 있는 원리를 기반으로한다. 두 귀가 인식하는 두 신호로부터 3차원 공간에서 음원의 위치를 찾을 수 있는 충분한 정보를 추출할 수 있다. 이러한 인간의 청각 시스템을 연구하는 분야가 음향심리학(psychoacoustics)이다. Stereo sound is based on the principle that two human ears can hear. From the two signals recognized by both ears, enough information can be extracted to locate the sound source in three-dimensional space. The field of study of these human auditory systems is psychoacoustics.

입체 음향 재생은 실제 음장(sound field)을 디지털적으로 재생하는 것을 목표로한다. 이를 위해, 청취자에서 서로 다른 각도로 도달하는 사운드를 분석하여 리스닝 큐(listening cue), 예를 들어, 양쪽 귀로 느끼는 사운드의 세기의 차(Interaural Intensity Difference, IID) 신호, 양쪽 귀로 전달되는 사운드의 시간 차(Interaural Time Differnece, ITD) 신호 혹은 도달된 사운드에 대해 필터 역할을 하는 외이 효과(outer ear effect)를 다시 만들 필요가 있다.Stereo sound reproduction aims to digitally reproduce the actual sound field. To do this, you analyze the sound arriving at different angles from the listener and listen to a listening cue, for example, an Interaural Intensity Difference (IID) signal from both ears, and the time of the sound delivered to both ears. We need to recreate the outer ear effect, which acts as a filter for the Interaural Time Differnece (ITD) signal or the sound reached.

사운드 큐들이 다시 만들어지면, 이들을 합성하여 입체 음향을 생성한다. 이 때 사용되는 것이 머리전달함수(Head Related Transfer Function)이다. When the sound cues are recreated, they are synthesized to produce stereo sound. This is used for the Head Related Transfer Function.

머리전달함수는 음원으로부터 귀의 고막으로 전달되는 경로를 모델링한 필터 계수로서, 음원과 청취자의 머리와의 상대적인 위치에 따라 그 값이 달라진다. 보통 머리전달함수는 청취자의 양쪽 귀에 마이크로폰을 장착하고 그 위치를 알고있는 장소에 스피커를 설치한 다음, 스피커를 통해 사운드를 생성하여 마이크로 폰을 통해 수신된 신호를 녹음하고 원 신호와 수신된 신호와의 임펄스 응답을 비교하여 얻어진다. 머리전달함수는 헤드폰과 같이 두 채널로 재생하는 시스템에서는 직접 청취자의 귀로 출력되어 입체 음향 효과를 재생한다.The head transfer function is a filter coefficient modeling the path from the sound source to the ear drum. The value varies depending on the relative position of the sound source and the listener's head. Usually, the head transfer function is to mount microphones on both ears of the listener, place the speakers in a location where the location is known, generate sound through the speakers, record the signals received through the microphones, and record the original and received signals. It is obtained by comparing the impulse response of. The head transfer function is output to the listener's ear directly in a system that reproduces two channels, such as headphones, to reproduce stereoscopic sound effects.

두 채널을 이용한 사운드 재생은 개인용 멀티미디어 PC나 MP3 등과 같은 1인용 멀티미디어가 각광을 받으면서 그 중요도가 높아져 가고있다. 그러나 헤드폰에 의한 재생은 스피커에 의한 재생에 비해 한계가 있다. 헤드폰에 의한 재생의 경우, 재생 음의 위치가 머리 안에서 느껴지기 때문이다.Sound reproduction using two channels is getting more important as a single multimedia such as personal multimedia PC or MP3 has been in the spotlight. However, playback by headphones is limited compared to playback by speakers. In the case of playback by headphones, the position of the playback sound is felt in the head.

또한, 종래의 헤드폰의 경우 인간이 들을 수 있는 현장감 또는 입체감의 효과를 배가시키기 위해 다채널 오디오 신호를 만들고 각 채널에 특정 상수를 곱한 다음, 좌측 및 우측 신호끼리 합성하여 두 채널로 변환하였다. 그러나 이와 같은 방식의 문제점은 인간이 갖는 음원의 공간상의 위치에 따른 인식 차이를 단순히 특정 채널에 동일한 상수를 곱하여 합성하기때문에 해당 채널의 전 주파수 대역에 동 일한 상수를 곱한 결과가 되어 인간이 갖는 주파수 대역에 대한 민감도 차이를 고려할 수 없다.In addition, in the case of the conventional headphones, in order to double the effect of realism or stereoscopic sound that can be heard by humans, a multichannel audio signal was made, multiplied by a certain constant for each channel, and left and right signals were synthesized and converted into two channels. However, the problem with this method is that the recognition difference according to the spatial position of the sound source that humans have is simply synthesized by multiplying the same constant to a specific channel, which is the result of multiplying the same constant to the entire frequency band of the corresponding channel. The difference in sensitivity to the band cannot be taken into account.

본 발명이 이루고자하는 기술적 과제는 스테레오 채널 신호, 중앙 채널 신호 및 서라운드 채널 신호에 대해서 각 채널신호에 대응하는 전달함수를 사용하여 2채널로 변환함으로써 청취자에게 입체 음향을 제공하는 입체 음향 재생 장치를 제공하는데 있다.SUMMARY OF THE INVENTION The present invention provides a stereoscopic sound reproducing apparatus that provides a stereoscopic sound to a listener by converting a stereo channel signal, a center channel signal, and a surround channel signal into two channels using a transfer function corresponding to each channel signal. It is.

상기 기술적 과제를 이루기위한, 본 발명의 입체 음향 재생 장치는 복수 채널 신호들이 소정 각도로 청취자의 양 귀에 들어올 때 청취자의 양 귀에서 측정되는 전달함수들을 저장하는 데이터베이스; 상기 채널들을 통해 입력되는 신호들을 주파수 영역의 신호로 변환하는 신호 변환부; 상기 주파수 영역의 입력 신호들과 상기 데이터베이스로부터 독출한 상기 입력 신호에 각각 대응하는 전달함수를 곱하여 출력하는 신호 처리부; 상기 신호 처리부에서 출력되는 신호들을 시간 영역의 신호들로 역변환하는 신호 역변환부; 및 상기 신호 역변환부에서 출력되는 채널 신호들을 청취자의 양 귀로 출력되는 두 채널 신호로 각각 합성하는 합성부를 포함함을 특징으로한다.To achieve the above technical problem, the stereoscopic reproducing apparatus of the present invention comprises: a database for storing transfer functions measured at both ears of a listener when a plurality of channel signals enter both ears of the listener at a predetermined angle; A signal converter converting signals input through the channels into signals in a frequency domain; A signal processor which multiplies and outputs a transfer function corresponding to the input signals in the frequency domain and the input signals read from the database; A signal inverse converter for inversely converting signals output from the signal processor into signals in a time domain; And a synthesizer for synthesizing the channel signals output from the signal inverse transform unit into two channel signals output to both ears of the listener.

이하에서 첨부된 도면을 참조하여 본 발명을 보다 상세하게 설명하기로한다.Hereinafter, the present invention will be described in more detail with reference to the accompanying drawings.

도 1은 본 발명에 따른 입체 음향 재생 장치에 대한 블록도이다. 도시된 입체 음향 재생 장치는 신호변환부(11), 신호처리부(12), 데이터베이스(13), 신호역 변환부(14), 제1합성기(15) 및 제2합성기(16)를 포함하고, 스테레오 신호 처리를 위한 앰비언스 처리부(10)를 더 구비할 수 있다.1 is a block diagram of a stereoscopic sound reproducing apparatus according to the present invention. The illustrated stereoscopic reproduction apparatus includes a signal converter 11, a signal processor 12, a database 13, a signal inverse converter 14, a first synthesizer 15 and a second synthesizer 16, The apparatus may further include an ambience processing unit 10 for stereo signal processing.

여기서, 데이터베이스(13)는 각 채널신호가 소정 각도로 청취자의 양 귀에 들어올 때 측정된 전달함수를 저장한 것이다. 전달함수로는 머리전달함수(Head Realted Transfer Function, HRTF) 또는 공간전달함수(Roon Transfer Function, RTF)가 있다. HRTF는 무반향실내에서 가짜 머리(dummy head)의 좌우측에 마이크로폰을 설치한 다음. 여러 각도에 배치한 스피커들, 즉 스테레오 스피커, 중앙 스피커 및 서라운드 스피커에서 출력되는 음들을 녹음하여 푸리에(Fourier) 변환한 것을 말한다. 즉, HRTF는 자유음장(free field)에서 음원으로부터 청취자 귀의 외이도(ear canal)에 이르기까지의 음의 전파를 나타내는 주파수 평면상의 전달함수를 의미한다.Here, the database 13 stores the transfer function measured when each channel signal enters both ears of the listener at a predetermined angle. Transfer functions include a head realted transfer function (HRTF) or a space transfer function (RTF). HRTF installs microphones on the left and right sides of the dummy head in an anechoic chamber. Fourier-transformed recordings of speakers placed at various angles, ie, stereo speakers, center speakers, and surround speakers. In other words, HRTF refers to a transfer function on the frequency plane representing the propagation of sound from the sound source to the ear canal of the listener's ear in the free field.

귀의 구조 측면에서 보면, 귓바퀴의 불규칙한 모양으로인해 외이도로 소리가 들어가기 전 귀에 도달하는 신호의 주파수 스펙트럼이 왜곡되게되는데, 이러한 왜곡은 소리의 방향이나 거리 등에 따라서 그 양상이 달라지므로 청취자가 소리의 방향을 인지하는데 있어 이러한 주파수 성분의 변화가 큰 역할을 하게 되며 이러한 주파수 왜곡의 정도를 나타내는 것이 바로 HRTF이다. 결국, HRTF 또는 RTF는 음원의 위치에 따라 좌우되며, 같은 음원의 위치라도 상술한 IID 또는 IDT에 따라 달라진다. 또한 사람마다 귓바퀴, 얼굴 모양이 모두 다르기때문에 개인에 따라 차이가 있을 수 있다. In terms of the structure of the ear, the irregular shape of the ear canal causes distortion of the frequency spectrum of the signal reaching the ear before the sound enters the ear canal. This change in frequency component plays a big role in the perception of the signal, and HRTF is a measure of the frequency distortion. After all, HRTF or RTF depends on the position of the sound source, even the position of the same sound source depends on the above-described IID or IDT. In addition, since each person's rim and face are all different, it may be different for each person.

RTF는 특정 장소에 따른 공간의 크기, 구조, 벽 또는 천정 재질 등에 의해 음원에 대한 직접음, 초기 반사음, 잔향 패턴 및 잔향 시간 등이 달라지는 것을 반영하여 HRTF를 측정한 것을 말한다. 공간적인 특성을 반영하기위해서는 특정 장소, 예를 들어 클래식 공연장 또는 대중가수들의 라이브 무대 등의 효과를 생성하기 위해서는 무반향실이 아닌 특정 실내에서 측정하는 것이 필요하다. 이를 이용하여 특정한 장소에 대한 가상의 음장, 즉 음원을 둘러싸고 있는 공간을 생성할 수 있다. RTF is a measure of HRTF reflecting changes in direct sound, early reflections, reverberation pattern, and reverberation time for a sound source due to the size, structure, wall, or ceiling material of a particular place. In order to reflect the spatial characteristics, it is necessary to measure in a specific room, not an anechoic room, in order to create an effect such as a specific place, for example, a classical concert hall or a live stage of popular singers. Using this, a virtual sound field for a specific place, that is, a space surrounding the sound source can be created.

실제로 원하는 입체음을 생성하기 위해서는 단순음을 HRTF 또는 RTF를 이용하여 변환하는 것이 바람직하다.In order to actually produce the desired stereo sound, it is preferable to convert the simple sound using HRTF or RTF.

엠비언스 처리부(10)는 선택적으로 구비되어 스테레오 신호 L,R 의 앰비언스(ambience)를 복원하기위해 스테레오 신호가 신호 변환부(10)에 입력되기 이전에 엠비언스 처리를 더 수행한다. 앰비언스는 음에 감싸이는 듯한 상태를 말하는 것으로, 벽이나 천정에서의 반향에 의해 생기는 음향특성을 말한다. 앰비언스 처리를 함으로써 스테레오 채널 신호 각각에 고유한 방향성 정보를 강조하게되어 스테레오 음장(stereo sound field)를 넓힐 수 있다. 도 2는 앰비언스 처리부(10)에 대한 상세 블록도이다.The ambience processor 10 is selectively provided to perform ambience processing before the stereo signal is input to the signal converter 10 to restore the ambience of the stereo signals L and R. Ambiance refers to the state of being wrapped in sound, and refers to the acoustic properties of reverberation from walls and ceilings. By performing ambience processing, the directional information unique to each stereo channel signal can be emphasized to widen the stereo sound field. 2 is a detailed block diagram of the ambience processing unit 10.

도시된 앰비언스 처리부(10)는 제1 및 제2가산기(20, 21), 제1 및 제2등화부(22, 23), 제1 및 제2이득(24, 25), 제어부(26) 및 믹서(27)를 포함한다.The illustrated ambience processor 10 includes first and second adders 20 and 21, first and second equalizers 22 and 23, first and second gains 24 and 25, a controller 26 and A mixer 27.

제1 및 제2가산기(20, 21)는 좌측 채널 신호(L)와 우측 채널 신호(R)를 각각 가산 및 감산한다. 제1등화부(22)는 제1가산기(20)의 출력중 소정 파장대역의 출력을 강화(boost)하고, 제2등화부(23)는 제2가산기(21)의 출력중 상기 파장대역의 출력을 감쇠(attenuation)한다. 상기 파장대역은 제어부(26)에 의해 제공된다.The first and second adders 20 and 21 add and subtract the left channel signal L and the right channel signal R, respectively. The first equalizer 22 boosts the output of the predetermined wavelength band among the outputs of the first adder 20, and the second equalizer 23 performs the output of the wavelength band among the outputs of the second adder 21. Attenuate the output. The wavelength band is provided by the control unit 26.

제어부(26)는 감산된 신호에 포함된 방향성 정보(directional information)를 이용하여 주파수 분석을 함으로써 상기 파장대역을 각 등화부(22, 23)에 출력한다. 제1 및 제2이득부(24, 25)는 제어부(26)에서 출력되는 이득 K1, K2를 제1 및 제2등화부(22, 23)의 출력에 각각 곱한다. 믹서(27)는 스테레오 신호(L,R)과 각 이득부(24, 25)의 출력을 믹싱하여 다음 식과 같이 Lo, Ro를 출력한다.The controller 26 outputs the wavelength band to each equalizer 22 and 23 by performing frequency analysis using directional information included in the subtracted signal. The first and second gain units 24 and 25 multiply the gains K 1 and K 2 output from the controller 26 by the outputs of the first and second equalizers 22 and 23, respectively. Mixer 27 outputs an L o, R o the following equation by mixing the output of the stereo signal (L, R) and each of the gain unit (24, 25).

Lo=L+K1(L+R)e+K2(L-R)e L o = L + K 1 (L + R) e + K 2 (LR) e

Ro=R+K1(L+R)e-K2(L-R)e R o = R + K 1 (L + R) e -K 2 (LR) e

여기서 아래첨자 e는 등화부의 출력임을 나타낸 것이다.Where the subscript e represents the output of the equalizer.

출력된 Lo, Ro신호가 신호변환부(11)로 입력된다.The output L o , R o signals are input to the signal converter 11.

신호변환부(11)는 엠비언스 처리부(10)의 출력신호, 채널 신호 및 좌우측 서라운드 채널신호를 FFT(Fast Fourier Transform)을 통해 주파수 영역의 신호로 변환한다. 신호처리부(12)는 신호변환부(11)에서 변환된 각 신호와 데이터베이스(13)로부터 읽어들인 해당 HRTF 또는 RTF를 곱하고, 신호역변환부(14)는 신호처리부(12)에서 출력되는 신호를 IFFT를 통해 시간영역의 신호로 역변환한다.The signal converter 11 converts the output signal, the channel signal, and the left and right surround channel signals of the ambience processor 10 into signals in the frequency domain through the fast fourier transform (FFT). The signal processor 12 multiplies each signal converted by the signal converter 11 and the corresponding HRTF or RTF read from the database 13, and the signal inverse converter 14 IFFT the signal output from the signal processor 12. Inversely, the signal is transformed into a signal in the time domain.

각 채널신호에 대한 HRTF 또는 RTF는 각 채널의 음원을 특정 위치에 설치하고, 중앙에 위치한 상술한 가짜 머리를 이용하여 머리의 다양한 고도(elevation) 및 방향에 따라 측정할 수 있다. 본 실시예에서는 ITU 국제 위원회에서 권고하는 음원의 위치에서 가상음원을 생성하여 측정하였다. 그 위치는 다음과 같다. 중앙 채널 신호(C)의 음원은 청취자의 정면에 위치하고, 좌측 채널 신호(L)의 음원은 청취자의 정면으로부터 좌측 30°의 각도를 가지며, 우측 채널 신호(L)의 음원은 청취자의 정면으로부터 우측 30°의 각도를 갖는다. 좌측 서라운드 채널 신호(LS)의 음원은 청취자의 정면으로부터 좌측 110°의 각도를 가지며, 우측 서라운드 채널 신호(RS)의 음원은 청취자의 정면으로부터 우측 110°의 각도를 갖는다. HRTF or RTF for each channel signal can be measured according to various elevations and directions of the head by installing the sound source of each channel at a specific position and using the above-described fake head located at the center. In this example, the virtual sound source was generated and measured at the position of the sound source recommended by the ITU International Committee. The location is as follows. The sound source of the center channel signal C is located in front of the listener, the sound source of the left channel signal L has an angle of 30 ° left from the front of the listener, and the sound source of the right channel signal L is right from the front of the listener. It has an angle of 30 degrees. The sound source of the left surround channel signal LS has an angle of 110 ° left from the front of the listener, and the sound source of the right surround channel signal RS has an angle of 110 ° right from the front of the listener.

본 실시예에서는 중앙 채널 신호에 대해 0°에 대한 전달함수가 아닌 소정 각도, 예를 들어 5°~ 10°내의 어느 한 각도에서 좌우 대칭되게 측정한 HRTF 또는 RTF를 사용함으로써 전달함수를 좌, 우 다르게 설정하기로한다. 그 이유는 청취자의 정면, 즉 0°에서의 전달함수는 좌우가 같기때문에 결과적으로 양쪽 헤드폰으로 출력되는 소리는 모노와 같은 효과를 가지므로 청취자의 머리속에서 음상이 느껴지게되기 때문이다. 즉, 0°를 포함하는 모든 평면(median plane)상의 음원은 아무리 전달함수를 이용한 처리를 하더라도 청취자의 머리속에서 음상이 느껴지게된다. 그러나 이 경우 중앙 채널신호에 대해서 양 귀에 대해 각각 두 개의 전달함수를 이용한 것으로 느껴지지않도록 소정 주기로 두 전달함수를 번갈아가며 선택함으로써 귀의 잔청 효과를 이용하여 청취자로 하여금 끊김이 없이 연속된 음향인 것처럼 느끼도록 한다. 여기서 선택주기는 인간이 소리를 에코(echo)로 인지하기 시작하는 시간보다는 큰 것이 바람직하다. 즉, 인간이 소리를 에코로 인지하는 시간이 20ms~50ms라고 알려져있으므로, 선택주기는 20ms보다 크게한다.In this embodiment, the transfer function is left and right by using HRTF or RTF measured symmetrically at a predetermined angle, for example, an angle within 5 ° to 10 °, rather than a transfer function with respect to the center channel signal. Let's set it up differently. The reason is that the forward function at the front of the listener, i.e., 0 °, is the same on the left and right, so that the sound output to both headphones has a mono-like effect, so that the image is felt in the listener's head. That is, the sound source on all planes (median plane) including 0 ° will feel the sound image in the listener's head no matter how the transfer function. However, in this case, the two channel transfer functions are alternately selected at predetermined intervals so that the two channel transfer functions are not used for both ears for the center channel signal. To do that. The selection period here is preferably greater than the time at which a human begins to perceive sound as an echo. That is, it is known that the time for human to perceive sound as an echo is 20ms to 50ms, so the selection period is made larger than 20ms.

제1 및 제2합성기(15, 16)는 신호역변환부(14)에서 출력되는 좌측신호와 우 측신호를 별개로 합성하여 두 채널의 신호로 최종 출력한다.The first and second synthesizers 15 and 16 synthesize the left and right signals separately output from the signal inverse converting unit 14 and finally output the signals of two channels.

본 발명에 따르면, 헤드폰과 같은 2채널 출력의 기기에서 5채널의 음향 재생 효과를 얻을 수 있으므로 최소 비용으로 입체 음향효과를 즐길 수 있다. 또한, 스테레오 신호의 방향 정보를 이용하여 앰비언스 처리함으로써 앰비언스 또는 리버브레이션(reverbration)효과를 얻을 수도 있다.According to the present invention, since a five-channel sound reproduction effect can be obtained in a device having a two-channel output such as a headphone, stereoscopic sound effects can be enjoyed at a minimum cost. In addition, an ambience or reverbration effect may be obtained by ambience processing using the direction information of the stereo signal.

Claims (10)

복수 채널 신호들이 소정 각도로 청취자의 양 귀에 들어올 때 청취자의 양 귀에서 측정되는 전달함수들을 저장하는 데이터베이스;A database for storing transfer functions measured at both ears of the listener when the multi-channel signals enter both ears of the listener at a predetermined angle; 상기 채널들을 통해 입력되는 신호들을 주파수 영역의 신호로 변환하는 신호 변환부;A signal converter converting signals input through the channels into signals in a frequency domain; 상기 주파수 영역의 입력 신호들과 상기 데이터베이스로부터 독출한 상기 입력 신호에 각각 대응하는 전달함수를 곱하여 출력하는 신호 처리부;A signal processor which multiplies and outputs a transfer function corresponding to the input signals in the frequency domain and the input signals read from the database; 상기 신호 처리부에서 출력되는 신호들을 시간 영역의 신호들로 역변환하는 신호 역변환부; 및A signal inverse converter for inversely converting signals output from the signal processor into signals in a time domain; And 상기 신호 역변환부에서 출력되는 채널 신호들을 청취자의 양 귀로 출력되는 두 채널 신호로 각각 합성하는 합성부를 포함함을 특징으로하는 입체 음향 재생 장치.And a synthesizer for synthesizing the channel signals output from the signal inverse converter into two channel signals output to both ears of the listener. 제1항에 있어서, 상기 복수 채널 신호들은The method of claim 1, wherein the multi-channel signals are 청취자의 정면을 중심으로 제1각도로 대칭되어 출력되는 좌우측 스테레오 채널, 청취자의 정면으로 출력되는 중앙 채널 및 청취자의 정면을 중심으로 청취자의 후면에서 제2각도로 대칭되어 출력되는 좌우측 서라운드 채널을 포함함을 특징으로하는 입체 음향 재생 장치.Left and right stereo channels symmetrically output at a first angle around the front of the listener, a center channel output at the front of the listener, and left and right surround channels symmetrically output at a second angle from the back of the listener around the front of the listener Stereo playback device characterized in that. 제2항에 있어서, 상기 전달함수는The method of claim 2, wherein the transfer function 상기 복수의 채널 신호들이 청취자의 양 귀의 고막으로 전달되는 경로를 모델링한 필터 계수임을 특징으로하는 입체 음향 재생 장치.And a filter coefficient modeling a path through which the plurality of channel signals are delivered to the eardrum of both ears of the listener. 제2항에 있어서, 상기 전달함수는The method of claim 2, wherein the transfer function 상기 복수 채널 신호들이 특정 장소에 따른 공간의 크기, 구조, 벽 또는 천정 재질 등에 의해 변형되어 청취자의 양 귀의 고막으로 전달되는 경로를 모델링한 필터 계수임을 특징으로하는 입체 음향 재생 장치. And a filter coefficient modeling a path in which the plurality of channel signals are deformed by a size, a structure, a wall, or a ceiling material, etc. according to a specific place, and transmitted to the eardrum of the listener's ears. 제3항 또는 제4항에 있어서, The method according to claim 3 or 4, 상기 중앙 채널에 대한 전달함수는 상기 제1각도보다 작고, 청취자의 정면을 중심으로 대칭되는 제3각도에서 양 귀에 대해 각각 측정되는 것을 특징으로하는 입체 음향 재생 장치.And the transfer function for the center channel is measured for both ears at a third angle smaller than the first angle and symmetrical about the front of the listener. 제5항에 있어서, 상기 신호 처리부는The method of claim 5, wherein the signal processing unit 양 귀에 대해 각각 상기 중앙 채널 신호에 대응하는 두 전달함수를 소정 주기로 번갈아가면서 선택하여 상기 중앙 채널을 통해 입력되는 신호의 주파수 영역 신호와 연산하여 출력함을 특징으로하는 입체 음향 재생 장치.And two transfer functions corresponding to the center channel signal for both ears are alternately selected at predetermined intervals to be calculated and output with a frequency domain signal of a signal input through the center channel. 제2항에 있어서,The method of claim 2, 상기 좌우측 스테레오 채널 신호의 앰비언스를 복원하여 상기 신호 변환부에 출력하는 앰비언스 처리부를 더 포함함을 특징으로하는 입체 음향 재생 장치.And an ambience processor for restoring the ambience of the left and right stereo channel signals and outputting the ambience to the signal converter. 제7항에 있어서, 상기 앰비언스 처리부는The method of claim 7, wherein the ambience processing unit 상기 좌우측 스테레오 채널 신호들을 가산 및 감산하는 제1 및 제2가산기;First and second adders for adding and subtracting the left and right stereo channel signals; 제1 및 제2가산기의 출력중 소장 파장대역을 출력을 제1신호에 따라 각각 강화 및 감쇠하는 제1 및 제2등화부;First and second equalizers for enhancing and attenuating the small wavelength band of the outputs of the first and second adders according to the first signal, respectively; 상기 제2가산기의 출력신호의 주파수를 분석하여 상기 파장대역을 상기 제1 및 제2등화부에 출력하는 제어부; 및A controller which analyzes a frequency of an output signal of the second adder and outputs the wavelength band to the first and second equalizers; And 상기 좌우측 스테레오 채널 신호들 및 상기 제1 및 제2이득부의 출력을 믹싱하여 수정된 좌우측 스테레오 채널 신호를 출력하는 믹서를 포함함을 특징으로하는 입체 음향 재생 장치.And a mixer for mixing the left and right stereo channel signals and the outputs of the first and second gain units to output a modified left and right stereo channel signal. 제7항에 있어서, The method of claim 7, wherein 상기 제1 및 제2등화부의 출력에 소정 이득을 각각 곱하는 제1 및 제2이득부를 더 포함하고, And first and second gain units multiplying outputs of the first and second equalizers by a predetermined gain, respectively. 상기 제어부는 상기 이득을 상기 제1 및 제2이득부에 제공하는 것을 특징으로하는 입체 음행 재생 장치.And the control unit provides the gain to the first and second gain units. 제8항에 있어서, The method of claim 8, 상기 믹서는 상기 수정된 좌우측 스테레오 채널 신호 Lo, Ro를 The mixer supplies the modified left and right stereo channel signals L o , R o . 다음의 수학식Equation Lo=L+K1(L+R)e+K2(L-R)e L o = L + K 1 (L + R) e + K 2 (LR) e Ro=R+K1(L+R)e-K2(L-R)e R o = R + K 1 (L + R) e -K 2 (LR) e 여기서, L,R은 상기 좌우측 스테레오 채널 신호, K1은 상기 제1이득부의 이득, K2는 상기 제2이득부의 이득, 아래첨자 e는 상기 제1 및 제2등화부의 출력을 나타냄Where L and R are the left and right stereo channel signals, K 1 is the gain of the first gain, K 2 is the gain of the second gain, and subscript e represents the output of the first and second equalizers. 에 따라 생성함을 특징으로하는 입체 음향 재생 장치.Stereo reproduction apparatus characterized in that it is generated according to.
KR1020040075082A 2004-09-20 2004-09-20 3d audio playback system and method thereof KR20060026234A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040075082A KR20060026234A (en) 2004-09-20 2004-09-20 3d audio playback system and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040075082A KR20060026234A (en) 2004-09-20 2004-09-20 3d audio playback system and method thereof

Publications (1)

Publication Number Publication Date
KR20060026234A true KR20060026234A (en) 2006-03-23

Family

ID=37137671

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040075082A KR20060026234A (en) 2004-09-20 2004-09-20 3d audio playback system and method thereof

Country Status (1)

Country Link
KR (1) KR20060026234A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100881732B1 (en) * 2007-07-27 2009-02-06 (주)현대유비스 Navigation with a leisure function

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100881732B1 (en) * 2007-07-27 2009-02-06 (주)현대유비스 Navigation with a leisure function

Similar Documents

Publication Publication Date Title
AU2022202513B2 (en) Generating binaural audio in response to multi-channel audio using at least one feedback delay network
US10555109B2 (en) Generating binaural audio in response to multi-channel audio using at least one feedback delay network
KR101341523B1 (en) Method to generate multi-channel audio signals from stereo signals
KR100636252B1 (en) Method and apparatus for spatial stereo sound
CN113170271B (en) Method and apparatus for processing stereo signals
EP3090573B1 (en) Generating binaural audio in response to multi-channel audio using at least one feedback delay network
Novo Auditory virtual environments
Pulkki et al. Spatial effects
JP5338053B2 (en) Wavefront synthesis signal conversion apparatus and wavefront synthesis signal conversion method
JP4196509B2 (en) Sound field creation device
US20200059750A1 (en) Sound spatialization method
Liitola Headphone sound externalization
Jot et al. Binaural concert hall simulation in real time
KR20060026234A (en) 3d audio playback system and method thereof
EP1319323A2 (en) A method of audio signal processing for a loudspeaker located close to an ear
AU2015238777B2 (en) Apparatus and Method for Generating an Output Signal having at least two Output Channels
JP2023548570A (en) Audio system height channel up mixing
Kim et al. 3D Sound Techniques for Sound Source Elevation in a Loudspeaker Listening Environment
Garba DIGITAL AUDIO-PSYCHOACOUSTICAL LOCALIZATION OF SOUNDS WITHIN THE 3-DIMENSIONAL SOUNDSTAGE

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application