KR102503347B1 - Digital encapsulation of audio signals - Google Patents
Digital encapsulation of audio signals Download PDFInfo
- Publication number
- KR102503347B1 KR102503347B1 KR1020217034245A KR20217034245A KR102503347B1 KR 102503347 B1 KR102503347 B1 KR 102503347B1 KR 1020217034245 A KR1020217034245 A KR 1020217034245A KR 20217034245 A KR20217034245 A KR 20217034245A KR 102503347 B1 KR102503347 B1 KR 102503347B1
- Authority
- KR
- South Korea
- Prior art keywords
- response
- filter
- khz
- signal
- decoder
- Prior art date
Links
- 230000005236 sound signal Effects 0.000 title claims abstract description 24
- 238000005538 encapsulation Methods 0.000 title 1
- 230000004044 response Effects 0.000 claims abstract description 231
- 238000005070 sampling Methods 0.000 claims description 40
- 230000005540 biological transmission Effects 0.000 claims description 30
- 230000001627 detrimental effect Effects 0.000 abstract description 2
- 238000009877 rendering Methods 0.000 abstract 1
- 230000001186 cumulative effect Effects 0.000 description 25
- 238000012937 correction Methods 0.000 description 22
- 230000015556 catabolic process Effects 0.000 description 21
- 238000006731 degradation reaction Methods 0.000 description 21
- 238000000034 method Methods 0.000 description 21
- 238000001228 spectrum Methods 0.000 description 20
- 238000001914 filtration Methods 0.000 description 15
- 238000009499 grossing Methods 0.000 description 15
- 238000012952 Resampling Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 11
- 230000000630 rising effect Effects 0.000 description 9
- 230000002123 temporal effect Effects 0.000 description 8
- 239000000463 material Substances 0.000 description 7
- 238000013461 design Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 230000009286 beneficial effect Effects 0.000 description 5
- 239000006185 dispersion Substances 0.000 description 5
- 230000003595 spectral effect Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000007704 transition Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001537 neural effect Effects 0.000 description 2
- 238000002604 ultrasonography Methods 0.000 description 2
- 230000018199 S phase Effects 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 230000002045 lasting effect Effects 0.000 description 1
- 230000000116 mitigating effect Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 238000010183 spectrum analysis Methods 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/26—Pre-filtering or post-filtering
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/0204—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using subband decomposition
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/022—Blocking, i.e. grouping of samples in time; Choice of analysis windows; Overlap factoring
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
- G10L19/03—Spectral prediction for preventing pre-echo; Temporary noise shaping [TNS], e.g. in MPEG2 or MPEG4
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/038—Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Quality & Reliability (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Transmission Systems Not Characterized By The Medium Used For Transmission (AREA)
Abstract
보통 샘플 레이트에서의 빠른 과도의 정확한 지각적 렌더링을 특히 고려하여 고 품질 오디오 신호의 디지털 표현을 제공하키 위한 인코딩 및 디코딩 시스템들을 설명한다. 이는, 지각적으로 해로운 것으로 발견된 에일리어싱 산물을 적절히 감쇄하면서 임펄스 응답의 길이를 최소화하도록 다운샘플링 및 업샘플링 필터들을 최적화함으로써 달성된다.Encoding and decoding systems for providing a digital representation of a high quality audio signal are described with particular regard to accurate perceptual rendering of fast transients at moderate sample rates. This is achieved by optimizing the downsampling and upsampling filters to minimize the length of the impulse response while appropriately attenuating aliasing artifacts found to be perceptually detrimental.
Description
본 발명은 고 품질 오디오 신호의 디지털 표현의 제공에 관한 것이다.The present invention relates to the provision of a digital representation of a high quality audio signal.
컴팩트 디스크(CD)의 도입 이래 30년 동안, 일반 대중은 "CD 품질"을 디지털오디오의 표준으로서 받아들일 수 있게 되었다. 한편, 오디오 업계에서는 두 가지 유형의 논쟁이 있었다. 한 유형은, CD의 16비트 해상도와 44.1kHz 샘플링 레이트가 데이터 낭비이며 동등한 사운드를 MP3 또는 AAC 등의 더욱 컴팩트한 손실-압축 포맷으로 전달할 수 있다는 명제에 중점을 두고 있다. 나머지 한 유형은, CD의 해상도와 샘플링 레이트가 부적절하며 24비트와 96kHz의 샘플링 레이트, 흔히 96/24로 축약된 사양을 이용하여 청각적으로 더욱 양호한 결과를 얻을 수 있음을 주장하는 정반대의 견해를 취한다.In the 30 years since the introduction of the compact disc (CD), the general public has come to accept "CD quality" as the standard for digital audio. Meanwhile, in the audio industry, there are two types of debate. One type centers around the proposition that CD's 16-bit resolution and 44.1 kHz sampling rate are wasteful of data and equivalent sound can be delivered in a more compact lossy-compressed format such as MP3 or AAC. The other type takes the opposite view, claiming that the resolution and sampling rate of CDs are inadequate and that aurally better results can be obtained using specifications of 24 bits and a sampling rate of 96 kHz, often abbreviated to 96/24. get drunk
44kHz가 실제로 충분히 좋은 것으로 간주되지 않는다면, 96kHz가 해답인지 여부 또는 192kHz 또는 심지어 384kHz가 '궁극적인' 품질의 샘플링 레이트이어야 하는지 여부에 대한 문제가 발생한다. 많은 오디오 애호가들은, 96kHz가 44.1kHz보다 양호한 사운드를 내고 192kHz가 96kHz보다 실제로 양호한 사운드를 낸다고 주장한다.If 44kHz isn't considered good enough in practice, then the question arises whether 96kHz is the answer or whether 192kHz or even 384kHz should be the 'ultimate' quality sampling rate. Many audiophiles claim that 96kHz sounds better than 44.1kHz and that 192kHz actually sounds better than 96kHz.
역사적으로, 아날로그 파형의 연속 시간 표현으로부터 샘플링된 디지털 표현으로의 전환은 샘플링 이론(www.en.wikipedia.org/wiki/Sampling_theorem)에 의해 정당화되었으며, 이 이론은, 최대 fmax까지의 주파수만을 포함하는 연속 시간 파형이 초당 2×fmax개의 샘플을 갖는 샘플링된 표현으로부터 정확하게 재구성될 수 있음을 나타낸다. 샘플 레이트의 절반에 해당하는 주파수는, 나이퀴스트 주파수로 알려져 있으며, 예를 들어, 96kHz에서 샘플링시 48kHz이다.Historically, the transition from continuous-time representations of analog waveforms to sampled digital representations has been justified by the sampling theory ( www.en.wikipedia.org/wiki/Sampling_theorem ), which includes only frequencies up to f max . shows that a continuous-time waveform that can be accurately reconstructed from a sampled representation with 2 × f max samples per second. The frequency at half the sample rate is known as the Nyquist frequency and is, for example, 48 kHz when sampled at 96 kHz.
따라서, 연속 시간 파형은, 우선, 다른 상황에서는 샘플링 프로세스에 의해 '에일리어싱'되고 fmax 미만의 이미지로서 재생될 fmax 초과의 주파수를 제거하도록 대역제한 '안티에일리어싱' 필터에 의해 필터링된다. 표준 통신 실행에 따라, 대역제한 안티에일리어싱 필터는 일반적으로 fmax까지 평탄한 주파수 응답에 근사하므로, 주파수 응답 그래프가 '브릭월' (brickwall)의 외관을 갖는다. 이는 샘플링된 표현으로부터 연속 파형을 재생하는데 사용되는 재구성 필터에 동일하게 적용된다.Thus, the continuous-time waveform will, first of all, be 'aliased' by the sampling process in other circumstances and reproduced as an image below f max . It is filtered by a bandlimited 'antialiasing' filter to remove excess frequencies. According to standard communication practice, bandlimited antialiasing filters generally approximate a flat frequency response up to f max , thus giving the frequency response graph a 'brickwall' appearance. The same applies to reconstruction filters used to reproduce continuous waveforms from sampled representations.
이 방법에 따르면, 샘플링과 후속 재구성의 프로세스는, fmax 초과 주파수를 제거하고 fmax보다 현저히 낮은 주파수를 거의 또는 전혀 변경하지 않는 시불변 선형 필터링 프로세스와 정확하게 동등하다. 따라서, 유일한 차이점이 통상적인 인간의 청각 범위인 20Hz 내지 20kHz를 2배 초과하는 약 40kHz 초과 주파수의 존재 또는 부재이므로, 192kHz에서의 샘플링이 96kHz에서의 샘플링보다 양호한 사운드를 낼 수 있다는 것은 이해하기 어렵다.According to this method, the process of sampling and subsequent reconstruction is exactly equivalent to a time-invariant linear filtering process that removes frequencies above f max and changes little or nothing to frequencies significantly below f max . Therefore, it is difficult to understand that sampling at 192 kHz can sound better than sampling at 96 kHz, since the only difference is the presence or absence of frequencies above about 40 kHz, which exceed the normal human hearing range of 20 Hz to 20 kHz by a factor of 2. .
이러한 역설을 부분적으로 설명하고자 하는 두 개의 논문은, 4734 104th AES convention 1998에서 견본 인쇄된 Dunn J의 "Anti-alias and anti-image filtering: The benefits of 96kHz sampling rate formats for those who cannot hear above 20kHz" 및 http://www.cirlinca.com/include/aes97nv.pdf에서 입수가능한 Story M의 "A Suggested Explanation For (Some Of) The Audible Differences Between High Sample Rate And Conventional Sample Rate Audio Material"이다.Two papers which attempt to partially explain this paradox are Dunn J's "Anti-alias and anti-image filtering: The benefits of 96kHz sampling rate formats for those who cannot hear above 20kHz", sample printed at 4734 104th AES convention 1998. and “A Suggested Explanation For (Some Of) The Audible Differences Between High Sample Rate And Conventional Sample Rate Audio Material” by Story M, available at http://www.cirlinca.com/include/aes97nv.pdf .
두 개의 논문 모두는, 필터의 시간 영역 응답을 보는 관점에 조화가 존재한다는 점을 나타낸다. Dunn은 통과대역 리플이 전/후 에코와 같은 효과를 갖는다는 점을 발견한 반면, Story는 필터가 임펄스의 에너지를 시간 경과에 따라 어떻게 분산시키는지를 검토한다. 이들은 서로 다른 속성들을 언급하고 있지만, 이들 모두에서는, 샘플 레이트가 증가함에 따라 문제점들이 감소된다. 이는, 평탄한 응답이 나이퀴스트 주파수 근처가 아닌 20kHz에서 유지되는 경우에만 특히 그러하며, 따라서, 나이퀴스트 주파수에서 전체 에일리어싱 제거가 필요하기 전에 천이 대역을 증가 시킨다.Both papers indicate that there is harmony in terms of viewing the time domain response of filters. While Dunn found that the passband ripple has the same effect as the before/after echo, Story examines how the filter dissipates the impulse's energy over time. They address different properties, but in all of them the problems decrease as the sample rate increases. This is especially true if a flat response is maintained at 20 kHz and not near the Nyquist frequency, thus increasing the transition band at the Nyquist frequency before full anti-aliasing is required.
Story의 방안은, Craven, P.G.의 "Antialias Filters and System Transient Response at High Sample Rates"에서 추가로 다루어진다. 여기서, Craven은, 96kHz 시스템의 데시메이션 및 보간 시스템들이 임펄스 에너지의 넓은 분산이라는 단점을 제공하는 "브릭월" 응답을 갖더라도, 96kHz 레이트에서 동작하는 "아포다이징(apodising)" 필터가 유효 천이 대역을 넓힐 수 있어서 임펄스 에너지의 분산을 좁힐 수 있음을 교시하고 있다. 도 1은 96kHz로 다운샘플링하는 예시적인 브릭월 필터의 주파수 응답(실선)과 아포다이징 필터의 응답(파선)을 도시한다. 이어서, 필터들의 대응하는 임펄스 응답들은, 도 2a의 브릭월 필터의 고 분산적 시간 응답이 도 2b의 컴팩트한 시간 응답에 대한 아포다이징 필터의 적용에 의해 어떻게 단축되는지를 나타내는, 도 2a와 도 2b에 도시되어 있다.Story's approach is further discussed in "Antialias Filters and System Transient Response at High Sample Rates" by Craven, P.G. Here, Craven shows that an "apodising" filter operating at a rate of 96 kHz has an effective transition, even though the decimation and interpolation systems of the 96 kHz system have a "brickwall" response which presents the disadvantage of wide dispersion of the impulse energy. It teaches that the band can be widened and thus the dispersion of the impulse energy can be narrowed. Figure 1 shows the frequency response of an exemplary brickwall filter (solid line) and the response of an apodizing filter (dashed line) with downsampling to 96 kHz. Corresponding impulse responses of the filters are then shown in FIGS. 2A and 2A, showing how the highly dispersive time response of the brickwall filter of FIG. 2A is shortened by the application of the apodizing filter to the compact time response of FIG. 2B. It is shown in 2b.
그러나, 아포다이징을 적용하더라도, 오늘날, 96kHz보다 빠른 레이트에서의 샘플링에 의해, "덜 혼잡함", "공기가 더욱 많음", "더욱 양호한 hf 상세", 그리고 특히 "더욱 양호한 공간 해상도" 등의 Story 보고서와 동일한 용어들로 설명되는 청취가능한 개선 효과를 얻을 수 있다. 결과적으로, 현재의 첨단 기술은, 이러한 음향 속성들 중 일부의 손실을 유발할 수도 있는 것을 식별하는 데 유용한 진전이 있음에도 불구하고 96kHz 등의 적당한 샘플 레이트를 사용할 때 그 음향 속성들 중 일부를 잃어버린다.However, even with apodization applied, today, with sampling at rates faster than 96 kHz, "less congested", "more airy", "better hf detail", and especially "better spatial resolution", etc. An audible improvement can be achieved, described in the same terms as the Story report. As a result, current state-of-the-art technology loses some of these acoustic properties when using moderate sample rates, such as 96 kHz, despite useful progress in identifying what may cause loss.
결국, 최고 품질의 재생은 매우 높은 샘플 레이트의 사용을 필요로 하여, 결과적으로는 파일 크기와 대역폭 요건들에 영향을 끼친다. 따라서, 고 해상도 사운드로 전체 대중을 흥미롭게 할 가능성은, 포맷의 까다로운 요구 또는 품질이 손실되었다는 인식과 함께 어려워 보인다.After all, highest quality playback requires the use of very high sample rates, which in turn impacts file size and bandwidth requirements. Thus, the possibility of exciting the entire public with high-resolution sound seems difficult, with the format's demanding demands or the perception that quality has been lost.
이에 따라, 더욱 높은 샘플 레이트에 연관된 지각적 이점들을 보존하는 적당한 샘플 레이트로 고 품질의 오디오를 분산하기 위한 대체 방법이 필요하다.Accordingly, there is a need for an alternative method for distributing high quality audio at an appropriate sample rate that preserves the perceptual benefits associated with higher sample rates.
본 발명의 제1 양태에 따르면, 오디오 캡처의 사운드를 전달하기 위한 인코더와 디코더를 포함하는 시스템을 제공하며, 인코더는 오디오 캡처를 나타내는 신호로부터 송신 샘플 레이트에서 디지털 오디오 신호를 제공하도록 조정되고, 디코더는 디지털 오디오 신호를 수신하고 재구성된 신호를 제공하도록 조정되고, 인코더는, 송신 샘플 레이트의 배수인 제1 샘플 레이트에서 오디오 캡처를 나타내는 신호를 수신하고 그 신호를 다운샘플링하여 디지털 오디오 신호를 제공하도록 조정된 다운샘플러를 포함하고, 인코더와 디코더의 결합된 임펄스 응답은, 임펄스 응답의 누적 절대 응답이 송신 샘플 레이트에서의 5 샘플 주기를 초과하지 않는 누적 절대 응답의 최종 값의 1%로부터 95%까지 상승하는 지속기간(duration)을 특징으로 한다.According to a first aspect of the present invention there is provided a system comprising an encoder and a decoder for conveying sound of an audio capture, the encoder adapted to provide a digital audio signal at a transmission sample rate from a signal representative of the audio capture, the decoder is adapted to receive a digital audio signal and provide a reconstructed signal, wherein an encoder receives a signal representing audio capture at a first sample rate that is a multiple of the transmit sample rate and downsamples the signal to provide a digital audio signal. The combined impulse response of the encoder and decoder, including the adjusted downsampler, is from 1% to 95% of the final value of the cumulative absolute response for which the cumulative absolute response of the impulse response does not exceed 5 sample periods at the transmit sample rate. It is characterized by an ascending duration.
본 발명의 제1 양태의 대체 특징에서, 인코더와 디코더의 결합된 임펄스 응답은, 임펄스 응답의 누적 절대 응답이 송신 샘플 레이트에서의 2 샘플 주기를 초과하지 않는 누적 절대 응답의 최종 값의 1%로부터 50%까지 상승하는 지속기간을 갖는다.In an alternative feature of the first aspect of the present invention, the combined impulse response of the encoder and decoder is such that the cumulative absolute response of the impulse response is reduced from 1% of the final value of the cumulative absolute response for which the cumulative absolute response does not exceed 2 sample periods at the transmission sample rate. It has a duration that increases by 50%.
그 결과, 시스템은, 시스템의 특정된 결합된 임펄스 응답에 연관된 안티에일리어싱 제거의 완화에도 불구하고 음질을 손상시키지 않고 오디오의 샘플 레이트 송신을 감소시킬 수 있다. 또한, 인코더와 디코더의 개별적인 응답들은, 합성 임펄스 응답이 컴팩트한 시스템 응답을 위한 특정된 기준을 충족한다면 다양한 적절한 설계들에 부합할 수 있다. 이러한 식으로, 본 발명은, 고 샘플 레이트에 연관된 가청 이점들을 유지하면서 오디오 캡처의 분산을 위한 샘플 레이트를 어떻게 감소시킬 것인지라는 과제를 해결하며, 이를 종래의 관점과는 역행하는 방식으로 행한다.As a result, the system can reduce the sample rate transmission of audio without compromising sound quality despite the mitigation of the antialiasing cancellation associated with the system's specified combined impulse response. Further, the individual responses of the encoder and decoder may conform to a variety of suitable designs if the composite impulse response meets specified criteria for a compact system response. In this way, the present invention solves the problem of how to reduce the sample rate for distribution of audio capture while retaining the audible benefits associated with high sample rates, and does this in a manner contrary to conventional views.
본 발명자들은 일부 관찰에 의해 해결책을 이끌어 냈으며, 이러한 해결책은, 단지 (신경 처리를 포함하여) 인간의 귀가 선형 및 시불변이라고 암시적으로 가정하는 적용분야에서의 종래의 통신 이론보다는 인간의 귀의 관찰된 특징들에 부분적으로 기초한다. 이는, 인간의 귀가 20kHz 미만 주파수에 민감하고 20kHz 대역폭이 나타낼 수 있는 것보다 높은 시간 정밀도를 갖는 임펄스에도 민감하다는 관찰을 포함한다.The inventors have arrived at a solution by some observation, and this solution is only based on observations of the human ear rather than conventional communication theories in applications (including neural processing) which implicitly assume that the human ear is linear and time-invariant. It is based in part on the characteristics of This includes the observation that the human ear is sensitive to frequencies below 20 kHz and also to impulses with higher temporal precision than a 20 kHz bandwidth can represent.
대역 제한 물질에 대한 양호한 필터 성능을 위한 다운샘플링 요건들은, 일반적으로 임펄스 사운드에 대한 양호한 성능을 위한 요건들과 충돌한다. 고전적으로 이상적인 브릭월 필터는, 매우 넓은 시간대에 걸쳐 임펄스 에너지를 분산시켜, 두 귀 사이의 시간차 및 공간 특성들 등의 정확한 특성들을 결정하기 어렵게 한다.The downsampling requirements for good filter performance for band limiting materials generally conflict with the requirements for good performance for impulse sound. A classically ideal brickwall filter spreads the impulse energy over a very wide time span, making it difficult to determine precise properties such as temporal and spatial properties between the ears.
그러나, 본 발명자들은, 192kHz 이상의 샘플 레이트에서 동작함으로써 관찰되는 유익한 음향 특성들이, 적어도 부분적으로, 고주파 신호 체인에서의 다운샘플링 및 업샘플링 필터들의 더욱 컴팩트한 임펄스 응답 덕분이라는 점에 주목하였다. 본 발명자들은, 또한, 유사하게 저 샘플 레이트로의 다운샘플링과 저 샘플 레이트로부터의 업샘플링을 위한 컴팩트한 임펄스 응답을 사용함으로써 96kHz 이하 등의 저 샘플 레이트를 이용하면서 이러한 음향 특성들이 보존될 수도 있다는 점을 인식하였다.However, the inventors have noted that the beneficial acoustic properties observed by operating at sample rates above 192 kHz are due, at least in part, to the more compact impulse response of the downsampling and upsampling filters in the high frequency signal chain. The inventors also similarly suggest that these acoustic properties may be preserved while using low sample rates, such as below 96 kHz, by using a compact impulse response for downsampling to low sample rates and upsampling from low sample rates. point was recognized.
실제로, 본 발명자들은, 고 샘플링 레이트를 이용하는 기존의 장비보다 컴팩트한 임펄스 응답을 이용함으로써 저 샘플링 레이트에도 불구하고 이러한 음향 특성들이 더욱 개선될 수도 있다는 점을 인식하였다.Indeed, the inventors have recognized that these acoustic characteristics may be further improved despite a low sampling rate by using an impulse response that is more compact than existing equipment using a high sampling rate.
본 발명자들은, 또한, 실세계 오디오가 상승 잡음 스펙트럼과 하강 신호 스펙트럼을 가지며, 특히 에일리어싱 요건들이 리샘플링될 실제 오디오의 분석에 의해 결정되는 경우에 종래에 공지되어 있는 문헌들보다 에일리어싱 제거가 훨씬 덜 필요하다는 점을 인식하였다.The inventors also found that real-world audio has a rising noise spectrum and a falling signal spectrum, and much less aliasing removal is needed than in the prior art literature, especially when the aliasing requirements are determined by analysis of the real audio to be resampled. point was recognized.
이러한 매우 컴팩트한 임펄스 응답들은 오디오 업계에서 고 품질 오디오에 필요한 것으로 여기는 것보다 에일리어싱 제거를 덜 나타내지만, 본 발명자들은, 컴팩트한 임펄스 응답의 음향 이점들이 요구되는 레벨로의 에일리어싱 제거의 감소로 인한 임의의 경미한 불리함을 훨씬 능가한다는 점을 인식하였다.Although these very compact impulse responses exhibit less anti-aliasing than what the audio industry considers necessary for high quality audio, the inventors believe that the sonic benefits of compact impulse responses can be reduced to any desired level due to the reduction of anti-aliasing to the desired level. recognized that it far outweighed the minor disadvantages of
마지막으로, 본 발명자들은, 데시메이션과 보간을 모두 포함하는 신호 체인이 양측 필터들을 개별적보다는 쌍으로서 설계함으로써 개선될 수 있다는 점을 인식하였다.Finally, the inventors have recognized that a signal chain that includes both decimation and interpolation can be improved by designing both filters as a pair rather than individually.
본 발명의 개발시, 본 발명자들은, 과도한 포스트-링잉 없이 특히 과도한 프리-링잉 없이 필터들이 컴팩트한 것이 중요하다는 점을 알게 되었다. 이는 직관적인 개념에서 이해되지만, 필터 지속기간들이 비교될 수 있도록 청각적으로 중요한 지속기간의 척도를 확립하는 것이 유익하다. 이상적으로는, 이러한 척도가 연장된 응답의 가청 결과에 해당해야 하지만, 이러한 척도를 임펄스 검출에 관한 기존의 실험 데이터로부터 어떻게 도출할 것인지는 명확하지 않을 수도 있다.In developing the present invention, the inventors found it important that the filters be compact, without excessive post-ringing and in particular without excessive pre-ringing. This makes intuitive sense, but it is beneficial to establish a measure of the perceptually significant duration so that filter durations can be compared. Ideally, this measure should correspond to the audible outcome of the extended response, but it may not be clear how to derive this measure from existing experimental data on impulse detection.
필터의 지원은, 필터의 지속기간의 자연스러운 척도이지만, 등의 마일드 IIR 필터를 고려함으로써 알 수 있듯이, 현재의 목적을 위해서는 만족스럽지 못하다. 이 필터는 임펄스를 거의 분산시키지 못하지만, 무한 지원을 갖는다. 오히려, 임펄스 응답의 대부분이 시간에 있어서 어떻게 연장되는지를 보는 척도가 필요하다.The support of the filter is a natural measure of the duration of the filter, but is unsatisfactory for the present purpose, as can be seen by considering the mild IIR filter of et al. This filter disperses little impulses, but has infinite support. Rather, we need a measure to see how much of the impulse response extends in time.
따라서, 누적 응답을 형성하도록 시스템의 임펄스 응답의 절대 크기를 시간에 대하여 적분하는 방안을 제안한다. 이러한 적분은, 저 레벨에서도 상당히 연장된 링잉을 불리하게 만드는 것이다. 누적 응답이 낮은 제1 임계값(예를 들어, 1%)로부터 높은 제2 임계값(예를 들어, 95%)까지 상승하는 것에 대하여 경과 시간이 측정되며, 이러한 임계값들은 도 14에 도시한 바와 같이 누적 응답의 최종 값의 퍼센트로서 표현된다. 그러나, 누적 응답을 특징화하는 경우 다른 임계값들을 사용할 수도 있으며, 이 경우, 서로 다른 측정을 반영하도록 샘플 주기 면에서 다른 지속기간을 특정할 수도 있다는 점에 주목한다.Therefore, we propose a method of integrating the absolute magnitude of the system's impulse response with respect to time to form a cumulative response. This integration is what penalizes ringing, which is significantly extended even at low levels. Elapsed time is measured for the cumulative response to rise from a first low threshold (eg, 1%) to a high second threshold (eg, 95%), these thresholds shown in FIG. as a percentage of the final value of the cumulative response. Note, however, that other thresholds may be used when characterizing the cumulative response, in which case different durations in terms of the sample period may be specified to reflect different measurements.
시스템으로의 입력을 샘플링하는 경우, 임펄스 응답은 연속적이지 않다. 그러나, 누적값이 샘플 주기를 입력하도록 정량화될 임계값과 언제 교차하는지를 결정하지 않고자 하며, 이에 따라 절대 임펄스 응답 값들은 샘플 주기의 지속기간 동안 일정하게 유지된다. 이는 샘플링 순간들 간의 누적값을 선형 보간하는 것과 균등하다.When sampling the input to the system, the impulse response is not continuous. However, we do not want to determine when the cumulative value crosses a threshold to be quantified to enter the sample period, so that the absolute impulse response values remain constant for the duration of the sample period. This is equivalent to linearly interpolating the cumulative value between sampling instants.
도 14는 도 5b를 참조하여 후술하는 본 발명에 따른 필터에 대한 이러한 방안의 동작을 도시한다. 후술하는 본 발명에 따른 다른 필터들은 유사하게 이러한 방안에 부합한다. 입력 샘플링 레이트는 송신 레이트의 두 배이며, 이에 따라 임펄스 응답이 송신 샘플 주기들의 절반 동안 유지된다. 임펄스 응답의 절대값을 적분하는 누적값은 (필터가 9 탭 FIR이므로) t=0에서의 임펄스 응답의 최종 값의 0%로부터 t=4.5에서의 100%까지 진행된다. 95% 레벨은 t=2.69 송신 레이트 샘플에서 누적값 그래프와 교차한다. 유사하게, 1% 레벨은 t=0.03 샘플에서 그래프와 교차하지만, 좌측 하부 코너의 이러한 스케일에서 보이지 않으므로 해당 도에는 도시되어 있지 않다. 결국, 이러한 방안에 의하면, 이 필터는, 2.69 - 0.03 = 2.66 송신 레이트 샘플의 지속기간을 갖고, 이에 따라 본 발명의 요건들을 충족한다.Fig. 14 shows the operation of this scheme for a filter according to the invention described below with reference to Fig. 5b. Other filters according to the present invention described below similarly fit this approach. The input sampling rate is twice the transmit rate, so that the impulse response is maintained for half of the transmit sample periods. The cumulative value integrating the absolute value of the impulse response goes from 0% of the final value of the impulse response at t=0 (since the filter is a 9-tap FIR) to 100% at t=4.5. The 95% level intersects the cumulative value graph at t=2.69 transmit rate samples. Similarly, the 1% level intersects the graph at t=0.03 samples, but is not shown in the figure as it is not visible at this scale in the lower left corner. After all, according to this scheme, this filter has a duration of 2.69 - 0.03 = 2.66 transmission rate samples, thus meeting the requirements of the present invention.
청취 테스트에서는 짧은 임펄스 응답이 거의 항상 양호한 것임을 나타내었으며, 대부분의 경우에, 5 송신 레이트 샘플 주기를 초과하여 연장되는 이러한 정의에 의해 상당한 응답 지속기간을 갖지 않는 필터를 설계하는 것이 가능한 것으로 증명되었다. 그러나, 다른 모든 것들이 동등한 상황에서는, 짧을수록 더욱 양호하며, 지속기간이 4 송신 레이트 샘플 미만으로 더욱 바람직하게는 3 송신 레이트 샘플 미만으로 되는 것이 바람직하다.Listening tests have shown that short impulse responses are almost always good, and in most cases it has been demonstrated that with this definition extending beyond 5 transmit rate sample periods it is possible to design filters that do not have significant response durations. However, all other things being equal, shorter is better, and it is preferred that the duration be less than 4 transmit rate samples, more preferably less than 3 transmit rate samples.
이러한 시간적 지속기간의 정의는, 기준을 충족하는 시스템을 위한 특정 필터 설계에 비교되는 합성 임펄스 응답의 의미 있는 방안을 제공한다. 또한, 동일한 임펄스 응답의 시간적 지속기간을 위한 정의를 인코더 또는 디코더 또는 개별적인 필터들 등의 시스템 내의 구성요소들의 응답에 적용할 수 있으며, 이에 따라 하나가 다른 하나보다 컴팩트한지 여부에 관한 직접적인 비교 및 결정이 가능해진다.The definition of this temporal duration provides a meaningful way of comparing the synthetic impulse response to a particular filter design for a system that meets the criteria. Also, the definition for the temporal duration of the same impulse response can be applied to the responses of components in the system, such as encoders or decoders or individual filters, so that a direct comparison and determination as to whether one is more compact than the other is made. this becomes possible
전술한 시간적 지속기간의 정의에서의 임계값들은 사후 응답에 대한 필터 사전 응답의 더욱 큰 청취 가능성을 반영하도록 비대칭적이라는 점이 중요하다고 여겨진다. 추가 조사는, 샘플 길이 면에서 지속기간에 대한 대응하는 수정과 함께 청취가능 임팩트에 더욱 양호하게 일치하는 다른 구체적인 임계 레벨을 가리킬 수도 있다.It is considered important that the thresholds in the above definition of temporal duration are asymmetric to reflect the greater audibility of the filter pre-response over the post-response. Further investigation may point to other specific threshold levels that better match audible impact with corresponding modifications to duration in terms of sample length.
예를 들어, 초기에 빠르게 상승하는 누적값의 측정에 집중하는 것이 민감할 수도 있다. 이는, 아직 1%에 있는 제1 임계값으로 행해질 수 있지만, 50%에서의 제2 임계값으로 행해질 수 있다. 도 14에서, 50% 레벨은 t=0.99에서 누적값 그래프와 교차하며, 이에 따라 이 필터의 지속기간은 이러한 대체 방안에 따르면 0.99-0.03=0.96이다. 명백하게, 지속기간은 이러한 대체 방안에서 더욱 짧아서, 이 경우, 시스템 임펄스 응답의 지속기간은, 바람직하게 2 송신 레이트 샘플 미만이고, 더욱 바람직하게는 1.5 송신 레이트 샘플 미만이다.For example, it may be sensitive to initially focus on the measurement of rapidly rising cumulative values. This could be done with the first threshold still at 1%, but with the second threshold at 50%. In Fig. 14, the 50% level intersects the cumulative value graph at t=0.99, so the duration of this filter is 0.99-0.03=0.96 according to this alternative scheme. Obviously, the duration is shorter in this alternative scheme, so in this case the duration of the system impulse response is preferably less than 2 transmission rate samples, more preferably less than 1.5 transmission rate samples.
시불변 선형 필터 또는 시스템을 고려하는 경우, 임펄스 응답은 잘 알려져 있는 특성이다. 그러나, 데시메이션을 포함하는 시스템에 있어서, 임펄스에 대한 응답은, 임펄스가 데시메이션된 처리의 샘플 포인트들에 관하여 언제 제시되는지에 따라 다를 수도 있다. 따라서, 이러한 시스템의 임펄스 응답을 언급하는 경우, 초기 임펄스의 이러한 모든 제시 순간들에 걸쳐 평균화된 응답을 의미하는 것이다.When considering time-invariant linear filters or systems, the impulse response is a well-known property. However, for a system that includes decimation, the response to an impulse may differ depending on when the impulse is presented relative to the sample points of the decimated process. Thus, when referring to the impulse response of such a system, it is meant the response averaged over all these presentation instants of the initial impulse.
바람직하게, 다운샘플러는 제1 샘플 레이트에 특정된 데시메이션 필터를 포함하고, 데시메이션 필터의 에일리어싱 제거는, 데시메이션 수행시, 0 내지 7kHz의 주파수 범위로 에일리어싱하는 주파수들에서 적어도 32dB이다.Preferably, the downsampler comprises a decimation filter specific to the first sample rate, wherein the decimation filter's anti-aliasing, when performing the decimation, is at least 32 dB at frequencies aliasing in the frequency range of 0 to 7 kHz.
0 내지 7kHz 범위는 귀가 가장 민감한 범위이다. 요구되는 감쇄량은, 나이퀴스트 주파수 근처에서 인코딩되는 신호의 스펙트럼에 따라 가변되며, 신호는 32dB를 초과하는 감쇄량을 필요로 할 수도 있다.The 0 to 7 kHz range is where the ear is most sensitive. The required amount of attenuation varies depending on the spectrum of the signal encoded near the Nyquist frequency, and the signal may require an attenuation amount exceeding 32 dB.
또한, 데시메이션 필터와 동일한 에일리어싱 제거, 및 누적 절대 응답이 송신 샘플 레이트의 5 샘플 주기를 초과하지 않는 누적 절대 응답의 최종 값의 1%로부터 95%까지 상승하는 지속기간을 갖는 응답을 갖는 제2 필터가 존재해야 하는 것이 바람직하다. 바람직하게, 지속기간은, 4 샘플 주기를 초과하지 않으며, 더욱 바람직하게는 3 샘플 주기를 초과하지 않는다.Also, a second response having the same anti-aliasing as the decimation filter and a duration in which the cumulative absolute response rises from 1% to 95% of the final value of the cumulative absolute response not exceeding 5 sample periods of the transmission sample rate. Preferably, a filter should be present. Preferably, the duration does not exceed 4 sample periods, more preferably does not exceed 3 sample periods.
이는, 원하는 음향 성능을 갖는 제2 필터를 설계하지만 데시메이션을 위해서는 동일한 에일리어싱 제거를 갖지만 기존 장비를 사용하는 청취자를 위해 통과대역 평탄화를 추가로 포함하는 다른 필터를 사용하는 것이 바람직할 수 있기 때문이다. 따라서, 실제 데시메이션 필터는 더욱 긴 지속기간을 가질 수도 있지만, 일치되는 디코더는 통과대역 평탄화를 취소하고, 이에 따라 초기 설계된 제2 필터의 음질에 대한 접근을 가능하게 한다.This is because it may be desirable to design a second filter with the desired sonic performance, but for decimation, use another filter with the same anti-aliasing but with additional passband smoothing for listeners using existing equipment. . Thus, the actual decimation filter may have a longer duration, but the matched decoder cancels the passband flattening, thus allowing access to the sound quality of the initially designed second filter.
필터 길이의 대체 방안에 의하면, 제2 필터는, 송신 샘플 레이트에서 2 샘플 주기를 초과하지 않는 누적 절대 응답의 최종 값의 1%로부터 50%까지 상승하는 지속기간을 갖는 응답을 특징으로 한다. 바람직하게, 지속기간은 1.5 샘플 주기를 초과하지 않는다.According to the filter length alternative scheme, the second filter is characterized by a response with a duration that rises from 1% to 50% of the final value of the cumulative absolute response not exceeding 2 sample periods at the transmit sample rate. Preferably, the duration does not exceed 1.5 sample periods.
일부 실시예들에서, 인코더는 폴(pole)을 갖는 무한 임펄스 응답(IIR) 필터를 포함하고, 디코더는 z-평면 위치가 폴의 z-평면 위치와 일치하는 제로(zero)를 갖는 필터를 포함하고, 이에 따라 그 영향이 재구성된 신호에서 상쇄된다.In some embodiments, the encoder includes an infinite impulse response (IIR) filter with a pole and the decoder includes a filter with zeros whose z-plane location coincides with the z-plane location of the pole. and thus its effect is canceled out in the reconstructed signal.
다른 실시예들에서, 디코더는 폴을 갖는 무한 임펄스 응답(IIR) 필터를 포함하고, 인코더는 z-평면 위치가 폴의 z-평면 위치와 일치하는 제로를 갖는 필터를 포함하고, 이에 따라 그 영향이 재구성된 신호에서 상쇄된다.In other embodiments, the decoder includes an infinite impulse response (IIR) filter with a pole, and the encoder includes a filter with zeros whose z-plane location coincides with the z-plane location of the pole, and thus its effect. are canceled out in this reconstructed signal.
바람직하게, 디코더는, 송신 샘플 레이트에 대응하는 나이퀴스트 주파수를 둘러싸는 영역에서 상승하는 응답을 갖는 필터를 포함하고, 인코더는 그 영역에 속하는 응답을 갖는 필터를 포함하고, 이에 따라 전체 시스템 주파수 응답 또는 임펄스 응답과 절충하지 않고 나이퀴스트 주파수를 초과하는 주파수들이 나이퀴스트 주파수 미만의 주파수들로 되도록 인코더의 하향 에일리어싱을 감소시킨다. 이러한 특징은, 초기 신호가 급격하게 상승하는 잡음 스펙트럼을 갖는 경우에 특히 유익하다.Preferably, the decoder includes a filter with a response that rises in a region surrounding the Nyquist frequency corresponding to the transmit sample rate, and the encoder includes a filter with a response that falls in that region, so that the overall system frequency Reduce the down-aliasing of the encoder so that frequencies above the Nyquist frequency become frequencies below the Nyquist frequency without compromising the response or impulse response. This feature is particularly advantageous when the initial signal has a rapidly rising noise spectrum.
바람직한 실시예들에서, 송신 샘플 레이트는 88.2kHz와 96kHz 중 하나로부터 선택되고, 제1 샘플 레이트는 176.4kHz, 192kHz, 352.8kHz, 및 384kHz 중 하나로부터 선택되며, 이들은 본 발명에서 청각적으로 유익한 것으로 밝혀진 표준화된 샘플 레이트들이다.In preferred embodiments, the transmit sample rate is selected from one of 88.2 kHz and 96 kHz, and the first sample rate is selected from one of 176.4 kHz, 192 kHz, 352.8 kHz, and 384 kHz, which are considered aurally beneficial in the present invention. Normalized sample rates found.
본 발명의 제2 양태에 따르면, 캡처된 오디오의 사운드를 전달하는 데 필요한 샘플 레이트를 감소시킴으로써 송신 샘플 레이트에서 송신하기 위한 디지털 오디오 신호를 제공하는 방법으로서, 송신 샘플 레이트의 배수인 제1 샘플 레이트에 특정된 데시메이션 필터를 사용하여 제1 샘플 레이트를 갖는 캡처된 오디오의 표현을 필터링하는 단계: 및 필터링된 표현을 데시메이션하여 디지털 오디오 신호를 제공하는 단계를 포함하고, 데시메이션 필터의 임펄스 응답은, 데시메이션 수행시 0 내지 7kHz로 에일리어싱하는 주파수 범위에서 적어도 32dB의 에일리어싱 제거를 갖고, 데시메이션 필터와 동일한 에일리어싱 제거, 및 누적 절대 응답이 송신 샘플 레이트에서의 5 샘플 주기를 초과하지 않는 누적 절대 응답의 최종 값의 1%로부터 95%까지 상승하는 지속기간을 갖는 응답을 갖는 제2 필터가 존재한다.According to a second aspect of the present invention there is provided a method of providing a digital audio signal for transmission at a transmission sample rate by reducing the sample rate required to convey the sound of captured audio, wherein the first sample rate is a multiple of the transmission sample rate filtering a representation of the captured audio having a first sample rate using a decimation filter specified in: and decimating the filtered representation to provide a digital audio signal, comprising: an impulse response of the decimation filter has at least 32 dB of aliasing rejection in the frequency range of aliasing from 0 to 7 kHz when performing decimation, the same aliasing rejection as the decimation filter, and a cumulative absolute response whose cumulative absolute response does not exceed 5 sample periods at the transmit sample rate There is a second filter with a response having a duration that rises from 1% to 95% of the final value of the response.
또한, 제2 필터는, 일치되지 않는 기존의 장비를 사용하는 청취자를 위해 통과대역 평탄화를 포함함으로써 실제 데시메이션 필터가 길어진 지속기간을 가질 수 있도록 사용될 수 있다. 대안으로, 기존 청취자를 위한 통과대역 평탄화가 수행되지 않으면, 데시메이션 필터가 제2 필터와 동일하다.Also, the second filter can be used to allow the actual decimation filter to have a longer duration by including passband flattening for listeners using inconsistent conventional equipment. Alternatively, the decimation filter is the same as the second filter, if passband smoothing for existing listeners is not performed.
따라서, 본 발명은, 시스템 임펄스 응답을 필요 이상으로 연장하지 않으면서 바람직하지 못한 에일리어싱 산물 및 제1 샘플 레이트에서의 표현의 나이퀴스트 주파수 근처의 임의의 링잉을 적절히 제거한다.Thus, the present invention adequately removes undesirable aliasing artifacts and any ringing around the Nyquist frequency of the expression at the first sample rate without extending the system impulse response any longer than necessary.
일부 실시예들에서, 본 발명은, 캡처된 오디오의 스펙트럼을 분석하는 단계, 및 분석된 스펙트럼에 응답하여 데시메이션 필터를 선택하는 단계를 더 포함한다. 이어서, 방법은, 디코더에 의해 사용되도록 데시메이션 필터의 선택에 관한 정보를 제공하는 단계를 더 포함할 수도 있다. 일부 실시예들에서, 방법은, 캡처된 오디오의 잡음 플로어를 분석하는 단계, 및 분석된 잡음 플로어에 응답하여 데시메이션 필터를 선택하는 단계를 더 포함한다. 이러한 식으로, 데시메이션 필터와 디코더의 대응하는 재구성 필터 모두는 전달될 신호의 잡음 스펙트럼 또는 다른 특징들에 최적으로 일치하게 될 수 있다.In some embodiments, the invention further comprises analyzing a spectrum of the captured audio, and selecting a decimation filter in response to the analyzed spectrum. The method may then further include providing information regarding the selection of the decimation filter to be used by the decoder. In some embodiments, the method further includes analyzing a noise floor of the captured audio and selecting a decimation filter in response to the analyzed noise floor. In this way, both the decimation filter and the corresponding reconstruction filter of the decoder can be optimally matched to the noise spectrum or other characteristics of the signal to be conveyed.
바람직한 실시예들에서, 송신 샘플 레이트는 88.2kHz와 96kHz 중 하나로부터 선택되고, 제1 샘플 레이트는 176.4kHz, 192kHz, 352.8kHz, 및 384kHz 중 하나로부터 선택되며, 이들은 본 발명에서 청각적으로 유익한 것으로 밝혀진 표준화된 샘플 레이트들이다.In preferred embodiments, the transmit sample rate is selected from one of 88.2 kHz and 96 kHz, and the first sample rate is selected from one of 176.4 kHz, 192 kHz, 352.8 kHz, and 384 kHz, which are considered aurally beneficial in the present invention. Normalized sample rates found.
본 발명은 송신 샘플 레이트의 6 샘플 주기를 초과하지 않는 정도의 연속 시간 영역으로 동작하는 것이지만, 일부 실시예들에서, 이러한 연속 시간 영역의 정도는, 유리하게, 송신 샘플 레이트의 5 주기, 4 주기, 또는 심지어 3 주기 이하이다. 일부 신호들에 대해서는, 이러한 더욱 짧은 임펄스 응답들이 6 주기만큼 지속되는 임펄스 응답을 갖는 실시예들보다 청각적으로 더욱 유익하다는 점이 밝혀졌다.Although the present invention operates in the continuous time domain on the order of not exceeding 6 sample periods of the transmission sample rate, in some embodiments, the extent of such continuous time domain is advantageously 5 periods, 4 periods of the transmission sample rate. , or even less than 3 cycles. For some signals, it has been found that these shorter impulse responses are aurally more informative than embodiments with an impulse response lasting as long as 6 periods.
본 발명의 제3 양태에 따르면, 데이터 캐리어는 전술한 양태의 방법을 수행함으로써 제공되는 디지털 오디오 신호를 포함한다.According to a third aspect of the invention, a data carrier comprises a digital audio signal provided by carrying out the method of the preceding aspect.
본 발명의 제4 양태에 따르면, 오디오 스트림을 위한 인코더는 제2 양태의 방법을 이용하여 디지털 오디오 신호를 제공하도록 조정된다.According to a fourth aspect of the invention, an encoder for an audio stream is adapted to provide a digital audio signal using the method of the second aspect.
바람직한 실시예들에서, 인코더는 송신 나이퀴스트 주파수를 중심으로 대칭 응답을 갖는 평탄화 필터를 포함한다. 바람직하게, 평탄화 필터는 폴을 갖는다.In preferred embodiments, the encoder includes a flattening filter with a symmetric response about the transmit Nyquist frequency. Preferably, the flattening filter has poles.
본 발명의 제5 양태에 따르면, 오디오 캡처의 사운드를 전달하기 위한 시스템을 제공하며, 시스템은, 오디오 캡처를 나타내는 신호를 수신하고 송신 샘플 레이트에서 디지털 오디오 신호를 제공하도록 조정된 인코더로서, 인코더는, 누적 절대 응답이 누적 절대 응답의 최종 값의 1%로부터 95%까지 상승하는 지속기간을 갖는 임펄스 응답을 특징으로 하는, 인코더; 및 디지털 오디오 신호를 수신하고 재구성된 신호를 제공하도록 조정된 디코더로서, 디코더는, 누적 절대 응답이 누적 절대 응답의 최종 값의 1%로부터 95%까지 상승하는 지속기간을 갖는 임펄스 응답을 특징으로 하는, 디코더를 포함하고, 인코더와 디코더의 결합된 응답은, 인코더만의 임펄스 응답의 특징적인 지속기간 및 디코더만의 임펄스 응답의 특징적인 지속기간보다 짧은, 누적 절대 응답이 1%로부터 95%까지 상승하는 지속기간을 갖는 총 시스템 임펄스 응답을 생성한다.According to a fifth aspect of the present invention there is provided a system for conveying sound of an audio capture, the system comprising: an encoder adapted to receive a signal representative of the audio capture and to provide a digital audio signal at a transmission sample rate, the encoder comprising: , an encoder characterized by an impulse response with a duration for which the cumulative absolute response rises from 1% to 95% of the final value of the cumulative absolute response; and a decoder adapted to receive the digital audio signal and provide a reconstructed signal, the decoder characterized by an impulse response having a duration in which the cumulative absolute response rises from 1% to 95% of the final value of the cumulative absolute response. . generate a total system impulse response with a duration equal to
이 양태는, 캡처된 오디오에 고 레벨의 잡음이 있는 스펙트럼 영역들을 다루도록 인코딩되는 자료의 특별한 특징들이 인코더 주파수 응답에 있어서 추가 폴이나 제로를 필요로 하는 경우에 유익할 수도 있다. 디코더 응답의 대응하는 제로나 폴은, 특별 대책이 완전한 시스템의 통과대역에 영향을 끼치지 않게 하며, 또한, 완전한 시스템 임펄스 응답이 특별 대책에 의해 변하지 않게 한다. 그러나, 개별적인 인코더와 디코더 응답들은, 그 대책에 의해 길어지며, 결합된 시스템 응답보다 모두 길어질 수도 있다.This aspect may be beneficial where special characteristics of the material being encoded require an additional pole or zero in the encoder frequency response to address spectral regions where there is a high level of noise in the captured audio. Corresponding zeros or poles in the decoder response prevent the special measures from affecting the passband of the complete system, and also ensure that the complete system impulse response is not changed by the special measures. However, the individual encoder and decoder responses are longer by that measure, and may all be longer than the combined system response.
바람직하게, 디코더는, 위치가 인코더의 응답에서의 폴의 위치와 일치하는 z-평면 제로를 갖는 필터를 포함한다.Preferably, the decoder includes a filter with z-plane zeros whose position matches the position of the pole in the encoder's response.
바람직하게, 디코더는 인코더로부터 수신되는 정보에 따라 선택되는 필터를 포함한다.Preferably, the decoder includes a filter selected according to information received from the encoder.
일부 실시예들에서, 인코더와 디코더의 결합된 임펄스 응답은, 최고 피크를 갖고, 송신 샘플 레이트의 6 샘플 주기를 초과하지 않는 정도의 연속 시간 영역을 갖고, 이를 벗어나는 평균화된 임펄스 응답의 절대 값은 상기한 최고 피크의 10%를 초과하지 않는 것을 특징으로 한다.In some embodiments, the combined impulse response of the encoder and decoder has a continuous time domain with a highest peak and no more than 6 sample periods of the transmission sample rate, beyond which the absolute value of the averaged impulse response is Characterized in that it does not exceed 10% of the highest peak described above.
본 발명의 제6 양태에 따르면, 오디오 캡처를 나타내는 신호로부터 송신 샘플 레이트에서 디지털 오디오 신호를 제공하도록 조정된 인코더를 제공하며, 인코더는, 주파수 응답이 제로 주파수로 에일리어싱하는 각 주파수에서 두 개의 제로를 갖고 옥타브(octave)당 -13 데시벨보다 +인 송신 나이퀴스트 주파수에서의 기울기를 갖는 필터의 응답의 비대칭 성분과 같은 응답의 비대칭 성분을 갖는 다운샘플링 필터를 포함한다.According to a sixth aspect of the present invention there is provided an encoder adapted to provide a digital audio signal at a transmission sample rate from a signal representative of audio capture, the encoder having two zeros at each frequency whose frequency response aliases to a zero frequency. and a downsampling filter having an asymmetry component of the response equal to an asymmetry component of the filter's response having a slope at the transmit Nyquist frequency of +13 decibels per octave.
인코더는 송신 나이퀴스트 주파수를 중심으로 대칭 응답을 갖는 평탄화 필터를 포함하는 것이 바람직하다. 바람직하게, 평탄화 필터를 폴을 갖는다. 또한, 송신 주파수는 44.1kHz이고, 인코더의 주파수 응답 저하가 20kHz에서 1dB를 초과하지 않는 것이 바람직하다.The encoder preferably includes a flattening filter with a symmetric response about the transmit Nyquist frequency. Preferably, the flattening filter has poles. In addition, it is desirable that the transmission frequency is 44.1 kHz and that the deterioration of the frequency response of the encoder does not exceed 1 dB at 20 kHz.
본 발명의 제7 양태에 따르면, 오디오 캡처의 사운드를 전달하기 위한 인코더와 디코더를 포함하는 시스템을 제공하며, 인코더는 오디오 캡처를 나타내는 신호로부터 송신 샘플 레이트에서 디지털 오디오 신호를 제공하도록 조정되고, 디코더는 디지털 오디오 신호를 수신하고 재구성된 신호를 제공하도록 조정되고, 인코더는, 송신 샘플 레이트의 배수인 제1 샘플 레이트에서 오디오 캡처를 나타내는 신호를 수신하고 그 신호를 다운샘플링하여 디지털 오디오 신호를 제공하도록 조정된 다운샘플러를 포함하고, 인코더는 폴을 갖는 무한 임펄스 응답(IIR) 필터를 포함하고, 디코더는 z-평면 위치가 폴의 z-평면 위치와 일치하는 제로를 갖는 필터를 포함하고, 이에 따라 그 영향이 재구성된 신호에서 상쇄된다.According to a seventh aspect of the present invention there is provided a system comprising an encoder and a decoder for conveying sound of an audio capture, the encoder adapted to provide a digital audio signal at a transmission sample rate from a signal representative of the audio capture, the decoder is adapted to receive a digital audio signal and provide a reconstructed signal, wherein an encoder receives a signal representing audio capture at a first sample rate that is a multiple of the transmit sample rate and downsamples the signal to provide a digital audio signal. The encoder includes an infinite impulse response (IIR) filter with a pole, the decoder includes a filter with zeros whose z-plane location coincides with the z-plane location of the pole, and thus Their influence is canceled out in the reconstructed signal.
바람직하게, 인코더와 디코더의 결합된 임펄스 응답은, 최고 피크를 갖고, 송신 샘플 레이트의 6 샘플 주기를 초과하지 않는 정도의 연속 시간 영역을 갖고, 이를 벗어나는 평균화된 임펄스 응답의 절대 값은 상기한 최고 피크의 10%를 초과하지 않는 것을 특징으로 한다.Preferably, the combined impulse response of the encoder and decoder has a continuous time domain having the highest peak and not exceeding 6 sample periods of the transmission sample rate, and an absolute value of the averaged impulse response outside of which is the highest Characterized in that it does not exceed 10% of the peak.
본 발명의 제8 양태에 따르면, 오디오 캡처를 나타내는 신호로부터 송신 샘플 레이트에서 디지털 오디오 신호를 제공하도록 조정된 인코더를 제공하며, 인코더는, 송신 샘플 레이트의 배수인 제1 샘플 레이트에서 오디오 캡처를 나타내는 신호를 수신하고 그 신호를 다운샘플링하여 디지털 오디오 신호를 제공하도록 조정된 다운샘플링 필터를 포함하고, 인코더는, 캡처된 오디오의 스펙트럼을 분석하고 분석된 스펙트럼에 응답하여 다운샘플링 필터를 선택하도록 조정된다.According to an eighth aspect of the present invention there is provided an encoder adapted to provide a digital audio signal at a transmission sample rate from a signal representing audio capture, the encoder comprising: representing audio capture at a first sample rate that is a multiple of the transmission sample rate. a downsampling filter adapted to receive a signal and downsample the signal to provide a digital audio signal, wherein the encoder is adapted to analyze a spectrum of the captured audio and select the downsampling filter in response to the analyzed spectrum. .
바람직하게, 선택된 다운샘플링 필터는, 분석된 스펙트럼이 송신 나이퀴스트 주파수에서 급격하게 상승하면 송신 나이퀴스트 주파수에서 급격한 감쇄 응답을 갖는다.Preferably, the selected downsampling filter has a sharp attenuation response at the transmit Nyquist frequency if the analyzed spectrum rises sharply at the transmit Nyquist frequency.
인코더는 선택된 다운샘플링 필터를 식별하는 정보를 디코더에 메타데이터로서 송신하도록 조정되는 것이 바람직하다.The encoder is preferably arranged to transmit information identifying the selected downsampling filter as metadata to the decoder.
바람직한 실시예들에서, 인코더는 송신 나이퀴스트 주파수를 중심으로 대칭 응답을 갖는 평탄화 필터를 포함한다. 바람직하게, 평탄화 필터는 폴을 갖는다.In preferred embodiments, the encoder includes a flattening filter with a symmetric response about the transmit Nyquist frequency. Preferably, the flattening filter has poles.
본 발명의 제9 양태에 따르면, 송신 샘플 레이트에서 디지털 오디오 신호를 수신하고 출력 오디오 신호를 제공하는 디코더를 제공하며, 디코더는, 송신 샘플 레이트에 대응하는 나이퀴스트 주파수를 둘러싸는 주파수 영역에서의 주파수와 함께 증가하는 진폭 응답을 갖는 필터를 포함한다.According to a ninth aspect of the present invention, there is provided a decoder for receiving a digital audio signal at a transmission sample rate and providing an output audio signal, the decoder comprising: in a frequency domain surrounding a Nyquist frequency corresponding to the transmission sample rate. It includes a filter with an amplitude response that increases with frequency.
이러한 특징은, 최고 샘플 레이트에서의 표현이 상기 나이퀴스트 주파수에서 강력하게 상승하는 스펙트럼을 나타내고 종래의 오디오 대역인 0 내지 20kHz에 걸쳐 위상 왜곡을 최소화하는 것이 바람직한 경우에 나이퀴스트 주파수 근처의 주파수들에 대하여 신호 대 에일리어싱 비를 최적화하도록 필요하다.This feature is useful for frequencies near the Nyquist frequency where representation at the highest sample rate exhibits a spectrum that rises strongly at the Nyquist frequency and it is desirable to minimize phase distortion over the conventional audio band of 0 to 20 kHz. It is necessary to optimize the signal-to-aliasing ratio for
바람직하게, 필터는, DC에서의 응답에 관하여, 송신 샘플 레이트에 대응하는 나이퀴스트 주파수에서 적어도 +2dB의 진폭 응답을 갖는다. 일반적으로, 상승 디코더 응답은, 오디오 범위에서의 평탄한 주파수 응답을 제공하고 총 시스템 임펄스 응답을 늘리지 않으면서 인코더가 적절한 에일리어싱 감쇄를 제공할 수 있는 경우에 유리할 수 있고, 디코더 응답은, 결국 하강해야 하지만, 일반적으로 상기 나이퀴스트 주파수에서 다소 상승된 상태로 있다.Preferably, the filter has an amplitude response of at least +2 dB at the Nyquist frequency corresponding to the transmit sample rate, with respect to the response at DC. In general, a rising decoder response can be advantageous if the encoder can provide adequate aliasing attenuation while providing a flat frequency response in the audio range and without increasing the total system impulse response, the decoder response should eventually fall, but , which generally remains somewhat elevated at the Nyquist frequency.
일부 실시예들에서, 필터는 인코더로부터 수신되는 정보에 따라 선택되는 응답을 갖는 것이 바람직하다. 이는 인코더가 필터링을 최적으로 케이스마다 선택할 수 있게 한다.In some embodiments, the filter preferably has a response selected according to information received from the encoder. This allows the encoder to choose filtering optimally case by case.
통상의 기술자라면 인식하듯이, 재구성된 신호의 사운드를 최적화하고 특히 바람직하지 못한 방식으로 시스템의 총 임펄스 응답을 늘리지 않고 데시메이션 에일리어싱을 제어하는 다양한 방법들을 개시한다.As those skilled in the art will recognize, various methods are disclosed for optimizing the sound of a reconstructed signal and controlling decimation aliasing without increasing the total impulse response of the system in a particularly undesirable manner.
유리하게, 필터들은 소스 물질의 특징들에 응답하여 선택된다. 유사하게, 올-제로(all-zero), 올-폴(all-phole), 및 다상 등의 서로 다른 필터 구현예들이 각 상황에 적절하게 채택될 수도 있다. 추가 변형예들과 수정예들은 본 개시 내용의 통상의 기술자에게 명백할 것이다.Advantageously, the filters are selected in response to characteristics of the source material. Similarly, different filter implementations such as all-zero, all-pole, and multiphase may be employed as appropriate for each situation. Further variations and modifications will be apparent to those skilled in the art of this disclosure.
본 발명의 예들을 첨부 도면을 참조하여 상세히 설명한다.
도 1은 96kHz 샘플링에서 사용하기 위한 알려져 있는 "브릭월" 안티에일리어싱 필터 응답(실선) 및 아포다이징된 필터 응답(점선)을 나타낸다.
도 2a와 도 2b는 도 1에 도시한 주파수 응답들을 갖는 선형 위상 필터들에 대응하는 알려져 있는 임펄스 응답들을 나타낸다.
도 3은 연속 시간에 대한 후속 재구성과 함께 감소된 샘플 레이트에서 오디오 신호를 송신하기 위한 시스템을 나타낸다.
도 4는 DC에서의 단위 이득을 위해 정규화된 (½, 1, ½) 재구성 필터의 응답을 나타낸다.
도 5a는 비평탄화(unflattened) 다운샘플링 필터의 주파수 응답을 나타낸다.
도 5b는 평탄화를 포함하는 다운샘플링 필터의 주파수 응답을 나타낸다.
도 6은 도 5a의 통과대역 저하(droop)에 대하여 삼차 보정과 연속 시간에 대한 업샘플링을 포함하는 재구성 필터의 응답을 나타낸다.
도 7은 도 4와 도 5b의 필터들이 연속 시간에 대한 추가 업샘플링과 결합된 경우의 총 시스템 임펄스 응답을 나타낸다.
도 8은 강력하게 상승하는 초음파 응답을 갖는 두 개의 상업적 녹음의 스펙트럼을 나타낸다.
도 9는 도 5b의 다운샘플링 필터와 함께 사용하기 위한 약 48kHz를 중심으로 대칭되는 평탄화 필터의 응답을 나타낸다.
도 10은 도 5a의 다운샘플링 필터의 응답(하측 곡선) 및 도 9의 대칭 평탄화기를 이용한 평탄화 후의 응답(상측 곡선)을 나타낸다.
도 11은 선형 B-스플라인 샘플링 커널을 나타낸다.
도 12a는 원본 88.2kHz 스트림의 짝수 샘플들과 정렬된 44.1kHz 적외선 인코딩된 샘플들로부터 88.2kHz에서의 임펄스 재구성을 나타낸다.
도 12b는 원본 88.2kHz 스트림의 홀수 샘플들과 정렬된 44.1kHz 적외선 인코딩된 샘플들로부터 88.2kHz에서의 임펄스 재구성을 나타낸다.
도 13a는 60kHz 근처에서 강력한 감쇄를 제공하도록 제로들을 갖는 다운샘플링 필터의 응답을 나타낸다.
도 13b는 도 13a의 필터의 제로들의 총 응답에 대한 영향을 제거하도록 폴들을 갖는 업샘플링 필터의 응답을 나타낸다.
도 13c는 도 13a, 도 13b의 응답들의 결합으로부터의 종단간 응답, 및 추정되는 외부 저하를 나타낸다.
도 14는 도 5a에 도시한 필터의 정규화된 누적 임펄스 응답 대 샘플 주기의 시간을 나타낸다.Examples of the present invention will be described in detail with reference to the accompanying drawings.
Figure 1 shows the known "brickwall" antialiasing filter response (solid line) and apodized filter response (dotted line) for use at 96 kHz sampling.
2a and 2b show known impulse responses corresponding to linear phase filters with frequency responses shown in FIG.
Figure 3 shows a system for transmitting an audio signal at a reduced sample rate with subsequent reconstruction over continuous time.
Figure 4 shows the response of a normalized (½, 1, ½) reconstruction filter for unity gain at DC.
Figure 5a shows the frequency response of an unflattened downsampling filter.
5b shows the frequency response of a downsampling filter with smoothing.
FIG. 6 shows the response of the reconstruction filter including cubic correction and continuous-time upsampling for the droop in the passband of FIG. 5a.
7 shows the total system impulse response when the filters of FIGS. 4 and 5B are combined with additional upsampling over continuous time.
Figure 8 shows the spectra of two commercial recordings with strongly rising ultrasound responses.
FIG. 9 shows the response of a smoothing filter symmetrical about 48 kHz for use with the downsampling filter of FIG. 5B.
10 shows the response of the downsampling filter of FIG. 5A (lower curve) and the response after smoothing using the symmetric smoother of FIG. 9 (upper curve).
11 shows a linear B-spline sampling kernel.
Figure 12a shows an impulse reconstruction at 88.2 kHz from 44.1 kHz infrared encoded samples aligned with even samples of the original 88.2 kHz stream.
Figure 12b shows an impulse reconstruction at 88.2 kHz from 44.1 kHz infrared encoded samples aligned with the odd samples of the original 88.2 kHz stream.
Figure 13a shows the response of a downsampling filter with zeros to provide strong attenuation around 60 kHz.
13b shows the response of an upsampling filter with poles to remove the effect of the zeros of the filter of FIG. 13a on the total response.
13C shows the end-to-end response from the combination of the responses of FIGS. 13A and 13B, and the estimated external degradation.
Figure 14 shows the normalized cumulative impulse response of the filter shown in Figure 5a versus the time of the sample period.
본 발명은 사용되는 시스템에 따라 서로 다른 많은 방식들로 구현될 수도 있다. 이하에서는 도면을 참조하여 일부 구현예들을 설명한다.The invention may be implemented in many different ways depending on the system used. In the following, some implementations are described with reference to drawings.
공리(Axioms)Axioms
대부분의 성인 청취자들은 20kHz를 초과하는 분리된 사인파를 들을 수 없으며, 이는 또한 지금까지 20kHz를 초과하는 신호의 주파수 성분들이 중요하지 않음을 의미한다고 종종 여겨졌다. 최근 실험에 의하면, 이러한 가정은, 선형 시스템 이론을 이용한 유추에 의해 그럴 듯 하지만, 정확한 것은 아니다.It has often been assumed that most adult listeners cannot hear a discrete sine wave above 20 kHz, which also means that the frequency components of the signal above 20 kHz are unimportant. Recent experiments have shown that this assumption, while plausible by analogy with linear system theory, is not exact.
인간의 청력에 대한 현재 이해는 매우 불완전하다. 따라서, 전진을 이루도록, 부분적으로 또는 간접적으로만 검증된 가설에 의존하였다. 이에 따라, 본 발명은 다음에 따르는 가설에 기초하여 설명한다.Our current understanding of human hearing is very incomplete. Thus, to make progress, we relied on hypotheses that were only partially or indirectly tested. Accordingly, the present invention is explained based on the following hypotheses.
- 귀는 선형 시스템처럼 기능하지 않는다.- The ear does not function like a linear system.
- 귀는, 주파수 영역의 톤을 분석할 뿐만 아니라 시간 영역의 과도 현상도 분석한다. 이는 초음파 영역에서의 지배적 기구일 수도 있다.- The ear not only analyzes tones in the frequency domain, but also transients in the time domain. It may be the dominant instrument in the ultrasound realm.
- 안티에일리어싱과 재구성에 사용되는 필터들의 "링잉"은, 40kHz 내지 100kHz의 고 초음파 범위에서도 바람직하지 못하다.- "Ringing" of filters used for antialiasing and reconstruction is undesirable even in the high ultrasonic range of 40 kHz to 100 kHz.
- 48kHz를 초과하는 주파수를 48kHz 미만의 주파수로 에일리어싱하는 것은, 에일리어싱된 산물들이 통상적인 가청 범위인 0 내지 20kHz 내에 속하지 않는 한 음질에 치명적이지 않다.- Aliasing frequencies above 48 kHz to frequencies below 48 kHz is not detrimental to sound quality as long as the aliased artifacts do not fall within the normal audible range of 0 to 20 kHz.
- 프리-링은, 일반적으로 포스트-링보다 문제이지만, 이들 모두가 불량이다.- Pre-rings are generally more problematic than post-rings, but all of them are bad.
- 총 시스템 임펄스 응답의 시간적 정도가 최소화될 수 있다면 최선으로 보인다.- It seems best if the temporal extent of the total system impulse response can be minimized.
이러한 가설들 중 마지막 것에 관하여, "총 시스템(total system)"은 아날로그-대-디지털 및 디지털-대-아날로그 변환기들 및 이들 사이의 전체 디지털 체인을 포함하고자 하는 것이다. 이상적으로, 트랜듀서 응답들도 포함할 수도 있지만, 이러한 응답들은 본원의 범위를 벗어난다고 여겨진다.Regarding the last of these hypotheses, "total system" is intended to include analog-to-digital and digital-to-analog converters and the entire digital chain between them. Ideally, it may also include transducer responses, but such responses are considered outside the scope of this disclosure.
샘플링 및 에일리어싱Sampling and Aliasing
연속 시간 신호는, 샘플 레이트가 무한대로 되는 경향이 있으므로 샘플링된 신호의 제한 사례라고 볼 수 있다. 이러한 점에서, 초기 신호가 아날로그인지 및 이에 따라 아마도 시간적으로 연속되는지 여부에 대하여 또는 초기 신호가 디지털인지 및 이에 따라 미리 샘플링되어 있는지 여부에 대해서는 관심을 갖지 않는다. 리샘플링에 관하여 논하는 경우, 초기 샘플들에 의해 표현되는 개념상 연속 시간 신호를 샘플링하는 것을 의미한다.Continuous-time signals can be seen as the limiting case of sampled signals because their sample rate tends to infinity. In this regard, it is not of interest whether the initial signal is analog and thus perhaps temporally continuous or whether the initial signal is digital and thus presampled. When we talk about resampling, we conceptually mean sampling a continuous-time signal represented by initial samples.
샘플링 또는 리샘플링의 주파수 영역 설명은, 초기 주파수 성분들이 리샘플링된 신호에 존재하지만 진폭 변조시 생성되는 "측대역(sidebands)"과 유사한 다수의 이미지들이 동반된다는 것이다. 따라서, 초기 45kHz 톤은, 96kHz에서 리샘플링되면 51kHz에서의 이미지를 생성하며, 51kHz는 96kHz에 의한 변조의 하측 측대역이다. 모든 주파수들을 48kHz의 나이퀴스트 주파수 주위에 "미러링"되는 것으로서 고려하는 것이 더욱 직관적일 수도 있으며, 이에 따라, 51kHz는 45kHz의 미러 이미지이고, 동등하게, 초기 51kHz 톤은 리샘플링된 신호에서 45kHz로 하향 미러링된다.The frequency domain description of sampling or resampling is that the initial frequency components are present in the resampled signal but are accompanied by multiple images similar to "sidebands" produced in amplitude modulation. Thus, an initial 45 kHz tone, when resampled at 96 kHz, produces an image at 51 kHz, which is the lower sideband of the modulation by 96 kHz. It may be more intuitive to consider all frequencies as being "mirrored" around the Nyquist frequency of 48 kHz, so that 51 kHz is a mirror image of 45 kHz, and equivalently, the initial 51 kHz tone down to 45 kHz in the resampled signal. mirrored
송신 채널이 서로 다른 레이트에서의 여러 리샘플링들을 포함하면, 초기 스펙트럼의 이미지들이 누적되며, 오디오 톤이 하나의 리샘플링에 의해 상향 미러링되고 이어서 후속 리샘플링에 의해 하향 미러링되어, 초기 주파수와는 다른 주파수이지만 가청 범위 내에 속하게 되는 모든 가능성이 존재한다. 이는 "정확한" 통신 실시를 통해 모든 이미지들이 억제되도록 각 단계에서 안티에일리어싱과 재구성 필터들이 사용되어야 한다는 점을 방지하는 것이다. 이를 행하게 되면, 리샘플링은 아티팩트의 축적 없이 임의로 케스케이딩될 수도 있고, 제한 사항은 주파수 범위가 체인에서 최저 샘플 레이트에 의해 다루어질 수 있는 범위로 제한되는 점뿐이다.If the transmit channel includes several resamplings at different rates, the initial spectral images are accumulated, and the audio tone is mirrored up by one resampling and then mirrored down by a subsequent resampling, so that the audible but at a different frequency than the initial frequency All possibilities for falling within range exist. This is to avoid that anti-aliasing and reconstruction filters have to be used at each stage so that all images are suppressed through a "correct" communication practice. Having done this, the resampling can be arbitrarily cascaded without accumulating artifacts, the only limitation being that the frequency range is limited to what can be covered by the lowest sample rate in the chain.
그러나, 통신 엔지니어링에서 정확하다고 여겨지는 필터들이 적어도 현재 대량 배포에 실용적인 샘플 레이트가 아니더라도 청각적으로 만족스럽지 못하다는 견해가 있다. 에일리어싱이 발생할 수도 있다는 점을 받아들이며, 필터링으로 인한 시스템의 임펄스 응답이 길어짐으로 인해 과도 현상의 '시간 스미어(time-smear)'에 대한 에일리어싱의 균형을 유지할 것을 제안한다.However, there is an opinion that filters that are considered accurate in telecommunications engineering are not acoustically pleasing, at least not at sample rates that are currently practical for mass deployment. Accepting that aliasing may occur, we propose to balance the aliasing against the 'time-smear' of transients due to the lengthening of the system's impulse response due to filtering.
따라서, 통상적인 실시와는 달리, 에일리어싱은, 완전히 제거되지 않으며, 신호의 각 리샘플링시 축적된다. 따라서, 임의의 레이트로의 다수의 리샘플링은 페널티 없이 수행되지 않으며, 신호가 분산에 사용될 레이트의 정수 배인 샘플 레이트에서 항상 표현된다면 최상이다. 예를 들어, 96kHz에서의 분산이 뒤따르는 192kHz에서의 아날로그-대-디지털 변환이 양호하며, 변환기의 대역 잡음 특징에 따라 384kHz에서의 변환이 더욱 더 양호할 수도 있다.Thus, unlike conventional practice, aliasing is not completely eliminated, but accumulates with each resampling of the signal. Thus, multiple resampling at any rate is not performed without penalty, and it is best if the signal is always represented at a sample rate that is an integer multiple of the rate to be used for variance. For example, analog-to-digital conversion at 192 kHz followed by dispersion at 96 kHz is good, and conversion at 384 kHz may be even better depending on the band noise characteristics of the converter.
분산에 이어서, 소비자의 재생 장비도 긴 필터 응답을 도입하지 않도록 설계될 필요가 있으며, 실제로, 인코딩과 디코딩 사양은 바람직하게 총 시스템 응답의 확실성을 제공하도록 함께 설계되어야 한다.Following dispersion, the consumer's playback equipment also needs to be designed to not introduce long filter responses, and in fact, the encoding and decoding specifications should preferably be designed together to provide certainty of the total system response.
96kHz 분산을 위한 192kHz로부터의 다운샘플링Downsampling from 192kHz for 96kHz dispersion
192kHz에서 미리 디지털화된 신호를 취하고, 신호를 송신을 위해 96kHz로 다운샘플링한 후 수신시 192kHz로 다시 업샘플링하는 문제점을 고려한다. 본원에서 설명하는 원리가 송신뿐만 아니라 저장에도 적용되며, "송신"이라는 단어가 저장과 송신 모두를 포함한다는 것이 이해된다.Consider the problem of taking a pre-digitized signal at 192 kHz, downsampling the signal to 96 kHz for transmission and then upsampling it back to 192 kHz for reception. It is understood that the principles described herein apply to storage as well as transmission, and that the word "transmission" includes both storage and transmission.
도 3에 도시한 시스템을 참조하면, 192kHz 등의 샘플링 레이트에서의 입력 신호 1은 다운샘플링 필터(2)에 전달되고 이어서 데시메이터(3)에 전달되어, 96kHz 등의 저 샘플링 레이트에서의 신호 4를 생성하게 된다. 96kHz 신호 6은 송신 또는 저장 디바이스(5)를 통과한 후, 업샘플링되고(7) 필터링되어(8) 192kHz 등의 샘플링 레이트에서의 부분적으로 재구성된 신호 9를 제공하게 된다.Referring to the system shown in FIG. 3, an
본 발명은, 부분적으로 재구성된 신호 9를 생성하는 방법에 중점을 두고 있지만, 연속 시간 아날로그 신호 11을 제공하도록 추가 재구성 10이 필요하다는 점에도 주목한다. 본 발명의 목적은, 신호 11의 사운드를, 입력 신호 1를 제공하도록 디지털화된 아날로그 신호의 사운드에 최대한 가깝게 만드는 것이다. 이는, 반드시 신호 9가 엔지니어링 의미에서 신호 1에 가능한 가까워야 함을 의미하지는 않는다. 또한, 추가 재구성 10은, 필요하다면, 필터들(2, 8)의 설계에서 허용될 수 있는 주파수 응답 저하를 가질 수도 있다.While the present invention focuses on a method for generating a partially reconstructed signal 9, it is also noted that
도 3은 필터(2)와 다운샘플러(3)를 별도의 엔티티들로서 도시하고 있지만, 때로는, 예를 들어, 다상 구현예에 있어서 이들을 결합하는 것이 더욱 효율적일 것이다. 유사하게, 업샘플러(7)와 필터(8)는 개별적으로 식별가능한 기능 유닛들로서 존재하지 않을 수도 있다.Although Figure 3 shows
다운샘플링은, 데시메이션을 이용하며, 이 경우, 192kHz 신호로부터 샘플들을 교대로 폐기하는 한편, 업샘플링은, 패딩을 이용하며, 이 경우, 96kHz 샘플들의 각 연속 쌍 사이에 제로 샘플을 삽입하고 또한 동일한 응답을 저 주파수로 유지하도록 2를 승산한다. 다운샘플링시, 48kHz의 "폴드오버" 주파수를 초과하는 주파수는 폴드오버 주파수 미만의 대응하는 이미지들로 미러링된다. 업샘플링시, 폴드오버 주파수 미만의 주파수는 폴드오버 주파수를 초과하는 대응 주파수로 미러링된다. 따라서, 업샘플링과 다운샘플링은 상향 에일리어싱된 산물과 하향 에일리어싱된 산물을 생성하며, 이는 데시메이션 전에 업샘플링 필터에 의해 및 패딩 후에 다운샘플링 필터에 의해 제어될 수 있다. 업샘플링과 다운샘플링 필터들은 192kHz의 초기 샘플링 주파수에서 특정된다.Downsampling uses decimation, in this case alternately discarding samples from the 192kHz signal, while upsampling uses padding, in this case inserting a zero sample between each successive pair of 96kHz samples and also Multiply by 2 to keep the same response at lower frequencies. When downsampling, frequencies above the "foldover" frequency of 48 kHz are mirrored to corresponding images below the foldover frequency. In upsampling, frequencies below the foldover frequency are mirrored with corresponding frequencies above the foldover frequency. Thus, upsampling and downsampling produce up-aliased and down-aliased products, which can be controlled by the upsampling filter before decimation and by the downsampling filter after padding. The upsampling and downsampling filters are specified at an initial sampling frequency of 192kHz.
에일리어싱된 산물이 무시되면, 총 응답은 업샘플링과 다운샘플링 필터들의 응답들의 결합이다. 시간 영역에서, 이 결합은 컨볼루션이다.If the aliased artifacts are ignored, the total response is the combination of the responses of the upsampling and downsampling filters. In the time domain, this combination is convolutional.
총 응답이 최소 길이의 유한 임펄스 응답(FIR) 필터의 응답으로 되도록 업샘플링과 다운샘플링 필터들을 설계함으로써 양호한 결과를 얻는다는 것을 알게 되었다. Z-변환 영역에서, 제로들은 바람직하지 못한 응답들을 억제하도록 이러한 필터들의 각각에 도입될 수 있다. 구체적으로, 각 필터는 96kHz의 나이퀴스트 주파수 근처의 신호들을 억제하도록 z=-1 근처에 하나 이상의 전달 함수 제로들을 가질 수 있다. 필터링 없는 다운샘플링시, 이러한 신호들은, 귀가 가장 민감한 10kHz 미만의 주파수를 포함하는 오디오 주파수들로 에일리어싱한다. 역으로, 필터링 없이 패딩에 의해 업샘플링이 수행되면, 큰 저 주파수 신호 콘텐츠가 96kHz 근처에서 큰 이미지 에너지를 생성하며, 이는 가청 결과 여부에 상관없이, 후속 전자 장치들의 슬루 레이트에 대하여 허용불가한 요구를 가할 수도 있고 또한 라우드스피커 트위터들을 번아웃할 수도 있다.It has been found that good results are obtained by designing the upsampling and downsampling filters so that the total response is that of a finite impulse response (FIR) filter of minimum length. In the Z-transform domain, zeros can be introduced into each of these filters to suppress undesirable responses. Specifically, each filter may have one or more transfer function zeros near z=-1 to suppress signals near the Nyquist frequency of 96 kHz. When downsampling without filtering, these signals alias to audio frequencies, including those below 10 kHz to which the ear is most sensitive. Conversely, if upsampling is performed by padding without filtering, large low-frequency signal content creates large image energy around 96 kHz, which, regardless of audible results, imposes an unacceptable demand on the slew rate of subsequent electronics. may be applied and may also burn out the loudspeaker tweeters.
제로들이 모두 나이퀴스트에 가까운 FIR 필터들은, 그 자체로는, 오버슈트나 링잉을 야기하지 않으며, 임펄스 응답은 단극성이며 상당히 컴팩트하다. 그러나, 192kHz에서 구현되는 (1 + z-1) 인수는 20kHz에서 0.47dB의 주파수 응답 저하를 가져온다. 이것은, 전문적인 디지털 오디오 장비에서 약간만 허용될 수 있는 것으로 간주되며, 이러한 여러 인수들, 예를 들어, 5개 이상의 인수들이 필요하다면, 통과대역 저하와 그 결과로 인한 사운드의 둔화가 확실하게 허용될 수 없게 된다. 이에 따라, 아래에서 간략히 설명되는 바와 같이 보정 또는 "평탄화" 필터가 요구된다.FIR filters with all zeros close to Nyquist, by themselves, do not cause overshoot or ringing, and the impulse response is unipolar and fairly compact. However, the (1 + z -1 ) factor implemented at 192kHz results in a frequency response degradation of 0.47dB at 20kHz. This is considered to be only marginally acceptable in professional digital audio equipment, and if several of these factors are needed, for example more than 5 factors, passband degradation and resulting dulling of the sound will certainly be acceptable. will not be able to Accordingly, a correction or "smoothing" filter is required, as briefly described below.
재생(Playback)을 위한 96kHz로부터의 업샘플링Upsampling from 96kHz for Playback
'2×' 단계들의 시퀀스를 이용하여 연속 시간 신호로의 재구성을 수행하는 것이 일반적이다. 즉, 샘플링 레이트는 통상적으로 각 단계에서 두 배로 되며, 샘플링 레이트가 384kHz 이상에 도달한 경우 디지털로부터 아날로그로의 변환을 수행한다. 우선, 가장 중요한 제1 단계인, 96kHz로부터 192kHz로의 업샘플링 단계에 집중한다.It is common to perform reconstruction into a continuous-time signal using a sequence of '2x' steps. That is, the sampling rate is usually doubled at each step, and conversion from digital to analog is performed when the sampling rate reaches 384 kHz or higher. First, we focus on the first and most important step, the upsampling step from 96 kHz to 192 kHz.
이러한 업샘플링의 핵심은, 192kHz 스트림을 생성하도록 192kHz 샘플들을 제로-패딩하는 개념적 또는 물리적 동작이다. 즉, 샘플들이 96kHz 신호와 제로를 교대로 이용한 샘플인 192kHz 신호를 생성한다.The essence of this upsampling is the conceptual or physical operation of zero-padding the 192kHz samples to create a 192kHz stream. That is, the samples generate a 192 kHz signal, which is a sample using alternating 96 kHz signals and zeros.
제로-패딩은 에일리어싱된 주파수와 동일한 진폭을 갖는 상향 에일리어싱된 산물을 생성한다. 현재 문맥에서, 이러한 산물들은 모두 48kHz 이상이며, 들리지 않을 것이라고 생각할 수도 있다. 그러나, 일반적으로, 신호는 저 오디오 주파수에서 높은 진폭을 가지며, 이는 96kHz 근처의 주파수에서 고 수준의 에일리어싱 산물을 의미한다. 전술한 바와 같이, 이러한 에일리어싱 산물은 후속 전자 장치들에 과도한 슬루 레이트 요구를 가하지 않고 라우드스피커 트위터들의 번아웃 위험성이 있도록 제어될 필요가 있다. 업샘플링 또는 재구성 필터의 목적은 이러한 제어를 제공하는 것이며, 96kHz 근처에서의 강력한 감쇄가 주요 요건임을 알 수 있다.Zero-padding produces an upward-aliased product with an amplitude equal to the aliased frequency. In the current context, these artifacts are all above 48kHz, and you might think they would be inaudible. However, in general, the signal has high amplitude at low audio frequencies, which means a high level of aliasing artifacts at frequencies around 96 kHz. As mentioned above, these aliasing artifacts need to be controlled to risk burnout of loudspeaker tweeters without imposing excessive slew rate demands on subsequent electronics. The purpose of the upsampling or reconstruction filter is to provide this control, and it can be seen that strong attenuation around 96kHz is a key requirement.
96kHz에서 192kHz로의 재구성에 만족스러운 것으로 여겨지는 가장 단순한 재구성 필터는 192kHz 레이트에서 구현된 탭(½, 1, ½)을 갖는 3-탭 FIR 필터이다. 이러한 필터의 정규화된 응답은 도 4에 도시되어 있다. 이 필터는 96kHz의 나이퀴스트 주파수에 대응하는 z=-1에서의 두 개의 z-평면 제로를 갖는다. 이러한 제로들은, 충분할 수도 있고 또는 충분하지 않을 수도 있는 96kHz 근처에서 감쇄를 제공하며, 이에 따라 나이퀴스트 근처의 추가 제로가 필요할 수도 있다. 또한, (½, 1, ½) 필터는, 20kHz에서 0.95dB의 저하 또는 176.4kHz에서 동작하는 경우엔 1.13dB의 저하를 도입하며, 보정될 필요가 있다.The simplest reconstruction filter considered satisfactory for reconstruction from 96 kHz to 192 kHz is a 3-tap FIR filter with taps (½, 1, ½) implemented at the 192 kHz rate. The normalized response of this filter is shown in FIG. 4 . This filter has two z-plane zeros at z = -1 corresponding to a Nyquist frequency of 96 kHz. These zeros provide attenuation around 96 kHz, which may or may not be sufficient, so an additional zero near Nyquist may be needed. Also, the (½, 1, ½) filter introduces a drop of 0.95 dB at 20 kHz or 1.13 dB when operating at 176.4 kHz, and needs to be calibrated.
통과대역(Passband) 평탄화Passband flattening
시스템은 다운샘플러를 포함하므로, 종래의 0 내지 20kHz 오디오 범위의 최상위를 향하여 저하되는 주파수 응답을 평탄화하기 위한 보정을 초기 샘플 레이트 또는 다운샘플링된 레이트에서 제공할 수 있지만, 업샘플링된 출력에 대한 최단 종단간 임펄스 응답을 제공하기 위해서는, 192kHz 등의 고 샘플 레이트에서 평탄화를 수행해야 한다. 이는 아래와 같은 보정 수행에 관한 선택을 여전히 남겨 둔다.Since the system includes a downsampler, it can provide a correction at either the initial sample rate or the downsampled rate to smooth out the frequency response that degrades toward the top of the conventional 0-20kHz audio range, but at the shortest possible rate for the upsampled output. To provide an end-to-end impulse response, smoothing must be performed at a high sample rate, such as 192 kHz. This still leaves the option of performing the calibration as below.
a. 인코더(다운샘플러)와 디코더(업샘플러) 각각이 자신의 고유한 저하에 대한 보정을 포함한다.a. Each encoder (downsampler) and decoder (upsampler) contain corrections for their own degradation.
b. 인코더가 자신과 디코더를 위한 보정을 제공한다.b. The encoder provides corrections for itself and the decoder.
c. 디코더가 자신과 인코더를 위한 보정을 제공한다.c. The decoder provides corrections for itself and for the encoder.
d. 인코더와 디코더 간의 보정의 임의의 분산d. Random variance of correction between encoder and decoder
옵션 (a)는, 그 결과로 형성되는 다운샘플링된 스트림이 평탄한 주파수 응답을 갖고 특별한 디코더 없이 재생될 수 있으므로, 실제로 편리할 수도 있다. 그러나, 인코더와 디코더의 "종단간(end-to-end)" 임펄스 응답의 결합된 결과는, 단일 보정기가 총 저하를 위해 설계되는 경우보다 길 수 있다.Option (a) may be convenient in practice, as the resulting downsampled stream has a flat frequency response and can be reproduced without a special decoder. However, the combined result of the "end-to-end" impulse response of the encoder and decoder can be longer than if a single compensator is designed for total degradation.
옵션 (b)와 (c)는, 동일한 종단간 임펄스 응답을 제공할 수도 있고, 총 응답에 대하여 단일 보정기가 생성되고, 인수분해되고 인수들이 분산되면 옵션 (d)도 그러할 수도 있다. 그러나, 종단간 응답들은 동일할 수도 있지만, 다운샘플링 전에 평탄화 필터를 인코더에 도입함으로써, 일반적으로, 인코더에서의 하향 에일리어싱을 증가시키며, 청취 테스트는, 업샘플링 후에 디코더에 평탄화 필터를 두는 것을 선호하는 경향이 있지만, 이로 인해 상향 에일리어싱이 강화된다.Options (b) and (c) may give the same end-to-end impulse response, and so may option (d) if a single corrector is generated for the total response, factored and the factors distributed. However, while the end-to-end responses may be the same, introducing a flattening filter into the encoder before downsampling generally increases downward aliasing in the encoder, and a listening test may prefer to have a flattening filter in the decoder after upsampling. tends to, but this results in enhanced upward aliasing.
보정 필터의 설계에 관하여, 통상의 기술자는, 선형 위상 저하의 경우, 저하의 z-변환의 역수를 z=1 근처의 멱급수로서 확장함으로써 선형 위상 보정 필터를 얻을 수 있다는 것을 알 것이다. 따라서, 이러한 총 응답은 멱급수 확장 순서를 조정하여 임의의 원하는 순서로 최대한 평탄하게 될 수 있다. 그러나, 본 문맥에서는, 선 응답(pre-response)을 피하도록 최소 위상 보정 필터가 바람직하다. 이를 위해, 우선, 대칭 필터를 생성하도록 저하를 자신의 고유한 시간 역과 컨볼루션하고 위 절차를 적용한다. 그 결과, 원래의 저하에 필요한 데시벨 단위로 2배의 보정을 제공하는 선형 위상 보정기를 얻게 된다. 이어서, 선형 위상 보정기는 z의 2차 및 선형 다항식들로 인수분해되고, 인수들의 절반은 최소 위상이고 절반은 최대 위상이다. 최소 위상 인수들을 선택 및 결합하고 단일 DC 이득으로 정규화하여 최종 보정 필터를 제공한다. 이러한 방법은, 전술한 2004 paper by Craven, building on the work of Wilkinson (Wilkinson, R.H., "High-fidelity finite-impulse-response filters with optimal stopbands" IEE Proc-G Vol. 120, no. 2, pp. 264-272: 1991 April)의 섹션 3.6에서 예시되었다.Regarding the design of the correction filter, the skilled person will know that in the case of linear phase degradation, a linear phase correction filter can be obtained by extending the reciprocal of the z-transform of the degradation as a power series around z=1. Thus, this aggregate response can be maximally flat in any desired order by adjusting the power series expansion order. However, in this context, a minimum phase correction filter is preferred to avoid pre-response. To do this, first convolve the degradation with its own time inverse to create a symmetric filter and apply the above procedure. The result is a linear phase corrector that provides twice the correction in decibels required for the original degradation. The linear phase corrector is then factored into 2nd order and linear polynomials of z, half of the factors being the minimum phase and half the maximum phase. The minimum phase factors are selected, combined and normalized to a unity DC gain to give the final correction filter. Such a method is described in the aforementioned 2004 paper by Craven, building on the work of Wilkinson (Wilkinson, R.H., "High-fidelity finite-impulse-response filters with optimal stopbands" IEE Proc-G Vol. 120, no. 2, pp. 264-272: 1991 April), exemplified in section 3.6.
보정 필터의 효과는 통과대역을 평탄화하는 것 뿐만 아니라 (b) 경우의 인코더의 또는 (c) 경우의 디코더의, 또는 (d) 경우에는 잠재적으로 인코더와 디코더 모두의 나이퀴스트 근처 응답도 증가시키는 것이며, 이러한 증가는 원하는 나이퀴스트 근처 감쇄 사양을 달성하도록 z=-1 근처에서의 추가 제로들의 도입을 필요로 할 수 있다. 추가 제로들은 보정 필터의 강도 증가를 필요로 한다. 따라서, 나이퀴스트 근처 및 통과대역 보정 필터를 감쇄시키는 제로들은, 만족할만한 결과를 얻을 때까지 함께 조절될 필요가 있다.The effect of the correction filter is not only to smooth the passband, but also to increase the near-Nyquist response of the encoder in case (b), or of the decoder in case (c), or potentially of both the encoder and decoder in case (d). and this increase may require the introduction of additional zeros near z = -1 to achieve the desired near-Nyquist attenuation specification. Additional zeros require an increase in the strength of the correction filter. Therefore, the zero attenuating near Nyquist and passband correction filters need to be adjusted together until satisfactory results are obtained.
총 시스템 응답total system response
제로-패딩된 96kHz 신호가 공급되는 경우, 192kHz 레이트에서 구현된 탭 (½, 1, ½)을 갖는 3-탭 재구성 필터의 출력은, 각 짝수 샘플이 대응 96kHz 샘플과 동일한 값을 갖고 각 홀수 샘플이 두 개의 이웃하는 짝수 샘플들의 평균과 같은 값을 갖는 192kHz 스트림이다. 이제, 연속 시간에 대한 다단 재구성이 각 단계에서 유사하게 3-탭 (½, 1, ½) 재구성 필터를 이용하면, 그 결과는 연속 96kHz 샘플들 간의 선형 보간과 등가일 것이다.When supplied with a zero-padded 96 kHz signal, the output of a 3-tap reconstruction filter with taps (½, 1, ½) implemented at the 192 kHz rate is such that each even sample has the same value as the corresponding 96 kHz sample and each odd sample A 192kHz stream with a value equal to the average of these two neighboring even samples. Now, if the multi-step reconstruction for continuous time uses a similar 3-tap (½, 1, ½) reconstruction filter at each step, the result will be equivalent to linear interpolation between consecutive 96 kHz samples.
주파수 영역에서, 이러한 다단 재구성의 응답은 sinc 함수의 제곱이다.In the frequency domain, the response of this multistage reconstruction is the square of the sinc function.
여기서, f는 주파수이고, 이다.where f is the frequency, am.
통과대역 저하(droop)는, f의 이차식에 의해 근사화될 수도 있다.The passband droop may be approximated by a quadratic expression of f.
이는, 96kHz로부터의 재구성시 20kHz에서 -1.34dB의 응답, 또는 88.2kHz로부터의 재구성시 20kHz에서 -1.61dB의 응답을 의미한다.This means a response of -1.34 dB at 20 kHz when reconstructed from 96 kHz, or a response of -1.61 dB at 20 kHz when reconstructed from 88.2 kHz.
따라서, 연속 시간 신호의 재구성된 슬루(slew) 레이트는 선형 보간에 기초하여 96kHz 샘플들에 의해 암시되는 슬루 레이트보다 절대로 높지 않다. 그러나, 연속 시간 신호의 재구성된 슬루 레이트는 구배(gradient)의 작은 불연속성들을 가질 것이다. 충분히 작은 시간 스케일로 볼 때, 이는 음향적으로는 고사하고 전기적으로 가능하지 않다. 아날로그 프로세싱을 상세하게 고려하는 것은 본원의 범위를 벗어나는 것이지만, 모든 곳에서 +인 임펄스 응답은, Dirac 델타 함수가 아닌 한, 약간의 주파수 응답 저하를 갖는다는 점에 주목한다. 모든 통과대역 보정이 단일 지점에서 적용되는 경우 최단 총 임펄스 응답을 얻을 수 있으므로, 평탄한 총 응답을 생성하도록 아날로그 '피킹' 필터를 사용하지 않을 것을 선호한다. 따라서, 디지털 통과대역 평탄화가 아날로그 저하에 대하여 다소 허용할 수 있어야 함을 선호한다.Thus, the reconstructed slew rate of the continuous-time signal is never higher than the slew rate implied by the 96 kHz samples based on linear interpolation. However, the reconstructed slew rate of the continuous-time signal will have small discontinuities in the gradient. On sufficiently small time scales, this is not possible electrically, let alone acoustically. It is beyond the scope of this application to consider analog processing in detail, but note that an impulse response that is positive everywhere has some frequency response degradation, unless it is a Dirac delta function. The shortest total impulse response can be obtained if all passband corrections are applied at a single point, so I prefer not to use an analog 'peaking' filter to produce a flat total response. Therefore, it is preferred that digital passband smoothing should be somewhat tolerant of analog degradation.
그러나, 보정되는 저하가 많을수록, 업샘플링 필터는 덜 컴팩트하게 된다. 따라서, 본원에서 제시되는 필터들에 있어서, 192kHz 스트림으로부터 연속 시간으로 가정된 다단 재구성에 대하여 sinc(·) 2 저하를 보상하였으며, 이때, 후속 아날로그 처리에 있어서 20kHz에서 0.162dB인 작은 저하를 허용하도록 추가 마진을 두었다. 이러한 마진은, 아날로그 시스템이 직사각형 형상이면서 5㎲ 정도인 엄격하게 음이 아닌 임펄스 응답 또는 대안으로 표준 편차가 약 3㎲인 가우스형 응답을 갖는 것을 허용한다.However, the more degradation that is corrected, the less compact the upsampling filter becomes. Thus, for the filters presented herein, sinc(·) 2 for multi-stage reconstructions assumed to be continuous time from a 192 kHz stream. The degradation was compensated for, with an additional margin to allow for a small degradation of 0.162 dB at 20 kHz for subsequent analog processing. This margin allows the analog system to have a rectangular shape and a strictly non-negative impulse response on the order of 5 μs or, alternatively, a Gaussian response with a standard deviation of about 3 μs.
도 5a는, 72dB의 나이퀴스트 근처 감쇄 및 z-변환 응답을 갖는, 이러한 원리에 따라 설계된 6-탭 다운샘플링 필터의 응답을 도시한다.5A shows the response of a 6-tap downsampling filter designed according to these principles, with a near-Nyquist attenuation of 72 dB and a z-transform response.
응답 (½ + z-1 + ½z- 2)을 갖는 전술한 3-탭 업샘플링 필터와 쌍으로 되면, 아래와 같은 4-탭 보정 필터는, When paired with the aforementioned 3-tap upsampling filter with response (½ + z -1 + ½z - 2 ), the 4-tap correction filter as follows:
다운샘플링 필터와 3-탭 업샘플링 필터로부터의 총 저하를 보정하여, 전술한 바와 같은 아날로그 저하 효과를 포함하여, 20kHz에서 0.1dB 내에서 평탄한 종단간 응답을 제공한다. 이러한 보정 필터가 다운샘플링 필터와 폴딩되면, 결합된 인코딩 필터는 아래와 같은 z-변환, The total degradation from the downsampling filter and the 3-tap upsampling filter is corrected to provide a flat end-to-end response to within 0.1dB at 20kHz, including analog degradation effects as described above. When this correction filter is folded with the downsampling filter, the combined encoding filter gives the following z-transform,
, 및 도 5b에 도시한 바와 같은 응답을 갖고, 이러한 응답은 후속 업샘플링과 재구성으로부터 저하를 미리 보정하도록 20kHz를 초과하여 상승한다., and a response as shown in Fig. 5b, which rises above 20 kHz to precompensate for degradation from subsequent upsampling and reconstruction.
대안으로, 보정은, 도 6에 도시한 응답과 아래의 z-변환을 갖는 디코딩 필터를 생성하도록 업샘플링 필터 (½ + z-1 + ½z- 2)와 폴딩될 수 있으며, 이러한 업샘플링 필터의 응답은 도 4에 도시한 바와 같다.Alternatively, the correction can be folded with an upsampling filter (½ + z -1 + ½z - 2 ) to produce a decoding filter with the response shown in FIG. 6 and the z-transform below; The response is as shown in FIG. 4 .
이 경우, 도 5a의 응답을 갖는 6-탭 인코딩 필터로부터 저하를 보정하도록 상승 응답을 갖는 것은 디코더이다. 청취 테스트에 의하면, 이러한 9-탭 다운샘플링 필터가 긴 필터들에 비해 확실히 뛰어나다는 것을 나타내었으며, 짧은 필터들이 일반적으로 바람직하다고 추론하였다.In this case, it is the decoder that has the rising response to correct the degradation from the 6-tap encoding filter with the response of Fig. 5a. Listening tests indicated that this 9-tap downsampling filter clearly outperformed the long filters, inferring that the shorter filters were generally preferred.
그러나, 더욱 중요한 것은 다운샘플러, 업샘플러 및 가정된 아날로그 응답이 결합된 경우의 총 응답이다. 도 7은, 전술한 바와 같은 다운샘플러, 다단 업샘플러, 및 폭이 5㎲인 직사각형 임펄스 응답을 갖는 아날로그 시스템으로부터의 임펄스 응답을 도시한다. 임계값을 적용하지 않은 경우, 응답의 총 크기는 13 샘플 또는 67.7㎲이지만, 임계값이 -40dB 또는 최대값의 1%인 경우, 응답의 절대값은, 49.5㎲크기의 영역에서만 임계값, 즉, 192kHz 레이트에서의 9.5 샘플 또는 96kHz의 송신 샘플 레이트에서의 4.75 샘플을 초과한다. 유사하게, 임계값이 -20dB 또는 최대값의 10%인 경우, 응답의 절대값은, 32.2㎲ 크기의 영역에서만 임계값, 즉, 192kHz 레이트에서의 6.2 샘플 또는 96kHz의 송신 샘플 레이트에서의 3.1 샘플을 초과한다. 따라서, 이 필터의 시간적 크기는 송신 샘플 레이트의 4 샘플 주기를 초과하지 않는 것이 안전하다고 할 수 있다. 다른 기준들이 강화되는 경우, 임펄스 응답은, 다소 길어질 필요가 있을 수도 있지만, 거의 모든 합리적인 경우에서, 송신 샘플 레이트에서 6 샘플 주기를 초과하지 않는 길이의 임펄스 응답을 달성할 수 있다.More important, however, is the total response when the downsampler, upsampler, and hypothesized analog response are combined. 7 shows the impulse response from an analog system with a downsampler as described above, a multistage upsampler, and a rectangular impulse response with a width of 5 μs. When the threshold is not applied, the total size of the response is 13 samples or 67.7 μs, but when the threshold is -40 dB or 1% of the maximum value, the absolute value of the response is the threshold value only in the area of 49.5 μs, i.e. , 9.5 samples at a rate of 192 kHz or 4.75 samples at a transmit sample rate of 96 kHz. Similarly, if the threshold is -20 dB or 10% of the maximum, the absolute value of the response is the threshold only in a region of size 32.2 μs, i.e. 6.2 samples at a rate of 192 kHz or 3.1 samples at a transmit sample rate of 96 kHz. exceeds Therefore, it can be safely said that the temporal size of this filter does not exceed 4 sample periods of the transmission sample rate. If other criteria are enforced, the impulse response may need to be somewhat longer, but in almost all reasonable cases it is possible to achieve an impulse response of length not exceeding 6 sample periods at the transmit sample rate.
도 7에 도시한 총 시스템 응답과 함께 전술한 다운샘플링과 업샘플링 필터들을 포함하는 인코더와 디코더 결합은, 이용가능한 192kHz 녹음에 있어서 청각적으로 양호한 결과를 생성하는 것으로 밝혀졌다. 실제로, 디코딩된 신호는, 때때로 다운샘플링 없는 192kHz 스트림의 종래의 재생보다 더욱 양호하게 들리며, 이러한 결과는, 192kHz 스트림에 이미 존재하고 있던 96kHz 근처의 임의의 링잉의 다운샘플링 필터에 의한 감쇄 덕분이라 할 수 있다.Combining the encoder and decoder, including the downsampling and upsampling filters described above, together with the total system response shown in FIG. In practice, the decoded signal sometimes sounds better than conventional playback of a 192kHz stream without downsampling, a result of which can be attributed to the downsampling filter's attenuation of any ringing around 96kHz that was already present in the 192kHz stream. can
잡음 스펙트럼 분석에 기초한 에일리어싱 거래(Alias Trading)Alias Trading Based on Noise Spectrum Analysis
대부분의 상업용 소스 자료에는, 아날로그-대-디지털 변환기 및 잡음 쉐이퍼의 동작 때문에 초음파 영역에서 상승하는 잡음 플로어가 있다. 예를 들어, 도 8에서 상측 트레이스로 도시되어 있는, 시판되고 있는 Dave Brubeck Quartet의 "Take 5"의 176.4kHz 편곡의 스펙트럼은 33kHz와 55kHz 사이의 42dB만큼 증가하는 잡음 플로어를 나타내며, 이러한 주파수들은 다운샘플링시 44.1kHz의 폴드오버 주파수로부터 등거리에 있다. 데시메이션 전에 필터링이 없다면, 그 결과 형성되는 88.2kHz 스트림은, 33kHz에서 거의 전적으로 55kHz로부터 에일리어싱된 잡음으로 구성되고 이에 따라 녹음의 175.4kHz 표현보다 훨씬 높은 소정의 42dB의 스펙트럼 밀도를 갖게 된다.Most commercial source material has a rising noise floor in the ultrasonic domain due to the operation of analog-to-digital converters and noise shapers. For example, the spectrum of the commercially available 176.4 kHz arrangement of Dave Brubeck Quartet's "Take 5", shown as the upper trace in Figure 8, shows a noise floor that increases by 42 dB between 33 kHz and 55 kHz; When sampled, it is equidistant from the foldover frequency of 44.1kHz. Without filtering prior to decimation, the resulting 88.2 kHz stream at 33 kHz consists almost entirely of noise aliased from 55 kHz and thus has a spectral density of some 42 dB, much higher than the 175.4 kHz representation of the recording.
도 5b의 다운샘플링 필터는, 192kHz 대신 176.4kHz에서 동작하면, 33kHz와 55kHz에서 +2.3dB과 -6.7dB의 이득을 각각 제공하며, 9dB 의 차가 발생한다. 이 필터로 "Take 5"를 다운샘플링하면, 55kHz로부터 에일리어싱된 성분들이 원래의 33kHz 성분들보다 33dB만큼 우세하게 유지된다. 도 5a의 대체 다운샘플링 필터는 이러한 두 개의 주파수 간에 16.8dB 차별을 제공하여, 원래의 성분들보다 25dB 높은 에일리어싱된 성분들을 발생시킨다. 이것은 다소 예외적인 경우이므로, 더욱 큰 차별을 갖는 (후술할) 필터들이 바람직할 수도 있으며, 그럼에도 불구하고, 도 5a의 필터는, 많은 경우에 만족스러운 것으로 밝혀졌으며, 도 5b의 필터보다 양호한 가청 결과를 제공한다. 따라서, 전술한 옵션 (c)에서와 같이, 보정 필터를 디코더에 배치하는 것은 보정 필터를 인코더에 배치하는 옵션 (b)보다 바람직해 보인다.The downsampling filter of FIG. 5B, when operated at 176.4 kHz instead of 192 kHz, provides gains of +2.3 dB and -6.7 dB at 33 kHz and 55 kHz, respectively, and a difference of 9 dB occurs. Downsampling "Take 5" with this filter keeps the aliased components from 55kHz dominant over the original 33kHz components by 33dB. The alternative downsampling filter of Figure 5a provides 16.8 dB discrimination between these two frequencies, resulting in aliased components 25 dB higher than the original components. Since this is a somewhat exceptional case, filters with greater discrimination (discussed below) may be desirable, nevertheless the filter of Fig. 5a has been found to be satisfactory in many cases, with better audible results than the filter of Fig. 5b. provides Thus, as in option (c) described above, placing the correction filter in the decoder seems preferable to option (b) placing the correction filter in the encoder.
위 설명은 하향 에일리어싱된 신호 성분들에 중점을 두었지만, 보정 필터를디코더에 배치함으로써 상향 에일리어싱된 성분들을 증폭하는 효과를 갖는다는 점에 주목해야 한다. 이것은 상향 에일리어싱에 대한 하향 에일리어싱 및 192kHz에서 96kHz로의 또는 176.4kHz에서 88.2kHz로의 다운샘플링에 대한 거래의 문제이다. 상향 에일리어싱이 증가하더라도 하향 에일리어싱을 감소시키는 것이 청각적으로 나은 것으로 보인다.It should be noted that the above discussion has focused on the down-aliased signal components, but placing a correction filter in the decoder has the effect of amplifying the up-aliased components. This is a matter of trade off down-aliasing for up-aliasing and downsampling from 192kHz to 96kHz or from 176.4kHz to 88.2kHz. It seems aurally better to reduce downward aliasing even if upward aliasing increases.
원래의 성분들에 비해 얼마나 많은 에일리어싱된 성분들을 감소시켜야 하는지에 대한 확립된 기준은 없지만, 오디오 대역의 위상 왜곡과 총 잡음 간의 균형에 기초하여 기준을 도출할 수도 있다. 사전 응답을 피하도록 총 응답이 최소 위상이어야 한다고 가정한다. 평탄화 필터는 4차로 평탄해진 총 진폭 응답을 제공하도록 항상 설계되지만, Bode의 위상 편이 정리에 따르면, 초음파 감쇄가 도입되는 경우, 최소 위상 시스템에서 위상 왜곡이 불가피하다. 위상 응답이 주파수의 시리즈로서 확장되면, 홀수 멱들만이 존재하게 된다. 선형 항은 시간 지연과 동등하므로 관련이 없으며, 이에 따라 입방 항이 지배적으로 된다. 이제, 추가 감쇄 δg 데시벨이 주파수 f를 중심으로 하는 주파수 간격 δf로 도입되면, Bode의 정리로부터, 위상 응답에 있어서 입방 항(cube term)에 대한 가산 결과가 δg.δf/f 4 에 비례한다고 추론할 수 있다. f에 대한 역 4차 멱 의존성으로부터, 소정의 위상 왜곡과 소정의 종단간 주파수 응답에 일치하는 최저 총 잡음에 대하여, 에일리어싱된 잡음 전력에 대한 원래의 잡음 전력의 비가 관련된 두 개의 주파수의 비의 역 4차 멱과 같도록 상향 및 하향 에일리어싱이 균형을 갖추어야 한다고 추론할 수 있다.There is no established criterion for how many aliased components should be reduced relative to the original components, but a criterion may be derived based on a balance between total noise and phase distortion in the audio band. Assume that the total response must be of minimum phase to avoid pre-response. Flattening filters are always designed to give a fourth order flattened total amplitude response, but according to Bode's phase shift theorem, phase distortion is unavoidable in minimum phase systems when ultrasonic attenuation is introduced. When the phase response is expanded as a series of frequencies, only odd powers exist. The linear term is irrelevant as it is equal to the time delay, so the cubic term becomes dominant. Now, the additional attenuation δ g If the decibel is introduced in a frequency interval δ f centered at the frequency f, it can be inferred from Bode's theorem that the result of adding the cube term in the phase response is proportional to δ g .δ f / f 4 there is. From the inverse fourth-order power dependence on f, for a given phase distortion and the lowest total noise matching a given end-to-end frequency response, the ratio of the original noise power to the aliased noise power is the inverse of the ratio of the two frequencies involved. We can infer that upward and downward aliasing must be balanced to equal a 4th order power.
96kHz로의 다운샘플링의 경우, 이 기준은, 원래의 60kHz 잡음으로 인한 36kHz에서의 잡음 스펙트럼 밀도가 원래의 192kHz 샘플링된 신호의 36kHz에서의 잡음 스펙트럼 밀도보다 8.9dB 낮아야 함을 암시한다. 또한, 48kHz의 폴드오버 주파수에서, 다운샘플링 필터에 의한 필터링 후의 잡음의 스펙트럼은 -12dB/9ve인 최적의 기울기를 가져야 한다. 이는, 도 5a의 다운샘플링 필터의 기울기가 이 기준에 따라 "Take 5"의 경우에 충분하지 않으며, 이 기준이 적절하다고 간주되면 48kHz 근처에서 더욱 급격한 기울기를 갖는 다운샘플링 필터가 표시된다는 것이다. "Take 5"는 다소 예외적이지만, 도 8에 또한 도시되어 있는 "Dire Straits"의 "Brothers in Arms"의 스펙트럼도 폴드오버 주파수 근처에서 고 기울기를 갖는다.For downsampling to 96 kHz, this criterion implies that the noise spectral density at 36 kHz due to the original 60 kHz noise must be 8.9 dB lower than the noise spectral density at 36 kHz of the original 192 kHz sampled signal. In addition, at a foldover frequency of 48 kHz, the noise spectrum after filtering by the downsampling filter should have an optimal slope of -12dB/9ve. This means that the slope of the downsampling filter in Fig. 5a is not sufficient in the case of "Take 5" according to this criterion, and a downsampling filter with a steeper slope near 48 kHz is displayed if this criterion is considered appropriate. "Take 5" is somewhat of an exception, but the spectrum of "Brothers in Arms" in "Dire Straits", also shown in Fig. 8, also has a high slope near the foldover frequency.
다운샘플링된 신호의 평탄화Flattening the Downsampled Signal
전술한 바와 같이, 에일리어싱 고려사항은, 다운샘플링 필터가 평탄화되지 않아서 평탄화가 후속 업샘플러로 연기되는 것을 종종 제안한다. 따라서, 송신된 신호는 평탄한 주파수 응답을 갖지 않을 것이며, 이는 평탄하지 않은 기존 장비와의 상호 운용성에 대한 단점이 될 수도 있다.As noted above, aliasing considerations often suggest that the downsampling filter is not flattened, so that smoothing is deferred to the subsequent upsampler. Therefore, the transmitted signal will not have a flat frequency response, which may be a disadvantage for interoperability with non-flat existing equipment.
다운샘플러의 에일리어싱 특성에 영향을 끼치지 않고 그 단점을 피하는 방법은, 송신 나이퀴스트 주파수, 즉, 송신 샘플 주파수의 절반을 중심으로 대칭인 도 9에 도시된 바와 같은 응답을 갖는 필터를 사용하여 평탄화하는 것이다. 송신 나이퀴스트 주파수는, 192kH에서 96kHz로 다운샘플링할 경우 48kHz이며, 평탄하지 않은 응답과 평탄한 다운샘플링된 응답이 도 10에 도시되어 있다.A way to avoid the downsampler's disadvantage without affecting the aliasing characteristics of the downsampler is to use a filter with a response as shown in Fig. 9 symmetric about the transmit Nyquist frequency, i. is to level it. The transmit Nyquist frequency is 48 kHz when downsampled from 192 kHz to 96 kHz, and the non-flat and flat downsampled response are shown in FIG. 10 .
단점을 피할 수 있는 이유는, '기존의 평탄화기'가 각 주파수와 그 주파수의 에일리어싱 이미지를 동등하게 처리하는 대칭 필터이기 때문이다. 두 주파수는 동일한 비로 증폭되거나 절단되므로, 후속하는 데시메이션에서의 상향 대 하향 에일리어싱의 비가 영향을 받지 않는다. 도 9에 도시한 응답은 사실상 필터의 응답이다.The reason the disadvantage can be avoided is that the 'conventional smoother' is a symmetric filter that equally processes each frequency and its aliasing image. Since both frequencies are amplified or cut at the same ratio, the ratio of up-to-down aliasing in subsequent decimation is unaffected. The response shown in Fig. 9 is actually the response of the filter.
이것은, 최소 위상 올-폴이며, z의 짝수 멱들만을 포함한다. 2에 의한 데시메이션 전에 이러한 필터로 필터링하는 것은 올-폴 필터를 사용하여 데시메이션된 스트림을 필터링하는 것과 동등하다.This is the minimum phase all-pole and contains only even powers of z. Filtering with this filter before decimation by 2 is equivalent to filtering the decimated stream using an all-pole filter.
이것은, 예를 들어, 업샘플링 전에, 대응하는 역 필터를 수신된 데시메이션된 신호에 적용함으로써 디코더에서 역으로 될 수 있는 프로세스이다.This is a process that can be reversed at the decoder, for example by applying a corresponding inverse filter to the received decimated signal, prior to upsampling.
따라서, 인코딩 필터의 z-평면 폴들은 디코더의 제로들에 의해 상쇄된다. 시간 영역에서, 인코더에서 기존의 평탄화기에 의해 야기되는 임의의 링잉은 디코더의 대응하는 "기존의 비평탄화"에 의해 소멸되며, 이는, 인코더와 디코더의 결합의 총 임펄스 응답이 인코더 단독만의 임펄스 응답보다 컴팩트하게 되는 방법들 중 하나이다.Thus, the z -plane poles of the encoding filter are canceled by zeros in the decoder. In the time domain, any ringing caused by the conventional smoother in the encoder is canceled by the corresponding "existing desmoothing" in the decoder, which means that the total impulse response of the combination of encoder and decoder is equal to the impulse response of the encoder alone. One of the ways to be more compact.
업샘플링 후에, 디코더는, 기존의 평탄화기가 없는 것처럼 더욱 높은 샘플 레이트에서 최적의 평탄화기를 심리 음향적으로 적용할 수 있다. 따라서, 데시메이션된 신호가 평탄화된 후 다시 평탄화되지 않는다는 것은 확실하게 명백하다.After upsampling, the decoder can psychoacoustically apply an optimal smoother at a higher sample rate as if there were no existing smoother. Thus, it is clearly evident that the decimated signal is not flattened again after being flattened.
대안으로, "기존의 비평탄화기"는 더욱 높은 샘플링 레이트에서Alternatively, a "traditional non-flatter" can be used at higher sampling rates.
를 이용하여 업샘플링 후에 구현될 수 있다. 이것은 FIR 필터이므로, 업샘플링 필터 및 종단간 평탄화기와 함께 병합하는 것이 상당히 편리할 수도 있다. 이 경우, 기존의 비평탄화기는 별도의 식별가능한 기능 유닛이 아닐 수도 있다. 따라서, 기존의 평탄화기와 기존의 비평탄화기 모두에 대하여, 송신 샘플 레이트에서의 또는 더 높은 샘플 레이트에서의 구현 옵션이 있으며, 후자의 경우에는, 응답이 송신 나이퀴스트 주파수를 중심으로 대칭인 필터를 이용한다. 본원에서, 이러한 두 개의 구현 방법들은 동등한 것으로 여겨지며, 단지 이 방법들 중 하나를, 나머지 하나를 포함하도록 참조할 수도 있다. 또한, 더욱 높은 레이트에서 구현되는 경우, 평탄화기 또는 비평탄화기는 다른 필터링과 병합될 수도 있지만, 총 데시메이션 필터링 또는 총 재구성 필터링의 z-변환이 z n 의 멱만을 포함하는 z-변환 인자들을 각각 갖는다면 그 존재를 추론할 수도 있으며, 여기서, n은 데시메이션 또는 보간 비이다.It can be implemented after upsampling using Since this is an FIR filter, it may be quite convenient to merge it with an upsampling filter and an end-to-end smoother. In this case, the existing non-flattener may not be a separate identifiable functional unit. Thus, for both the conventional smoother and the conventional non-flatter, there is an option of implementation at the transmit sample rate or at a higher sample rate, in the latter case a filter whose response is symmetric about the transmit Nyquist frequency Use In this application, these two implementation methods are considered equivalent, and only reference may be made to one of these methods, including the other. Also, when implemented at higher rates, the smoother or desmoothizer may be merged with other filtering, but the z-transform of the total decimation filtering or the total reconstruction filtering uses z-transform factors that include only the power of z n , respectively. If it has, its existence may be inferred, where n is the decimation or interpolation ratio.
기존의 평탄화기는, 올-폴일 필요가 없으며, 그 평탄화기의 응답이 송신 나이퀴스트 주파수를 중심으로 대칭이라면 FIR 또는 일반적인 IIR 필터일 수 있다. 예를 들어, 아래와 같은 FIR 필터는, Existing smoothers do not have to be all-pole, and can be FIR or general IIR filters if their response is symmetric about the transmit Nyquist frequency. For example, the following FIR filter:
인코더에서의 데시메이션 후에 적용될 수 있고 디코더에서의 업샘플링 전에 그 역이 적용될 수 있으며, 이러한 3차 FIR 필터는 송신 신호를 평탄화하는 데 있어서 도 9의 2차 올-폴 필터와 유사하게 효과적이다. 이 경우, 디코더는 인코더의 제로들을 상쇄하는 폴들을 갖는다. 대안으로, 이 FIR 평탄화기는Can be applied after decimation at the encoder and vice versa before upsampling at the decoder, such a 3rd order FIR filter is similarly effective as the 2nd order all-pole filter of FIG. 9 in smoothing the transmitted signal. In this case, the decoder has poles that cancel the encoder's zeros. Alternatively, this FIR smoother
를 이용하여 데시메이션 전에 구현될 수 있으며, 이러한 형태에서, 다운샘플링 필터와 병합될 수 있어서, 별도의 기능 유닛으로서 식별되지 않을 수 있다.Can be implemented prior to decimation using , and in this form can be merged with the downsampling filter, so that it is not identified as a separate functional unit.
본원에서는, 기존의 평탄화기를 2:1 다운샘플링의 문맥으로 설명하였지만, 동일한 원리를 n:1 다운샘플링의 경우에 적용하며, 이때, 기존의 평탄화 및 비평탄화는, 일반적인 최소 위상 필터와 그 역을 이용하여 송신 샘플 레이트에서 수행될 수도 있고, 또는 z n 의 멱만을 포함하는 필터를 이용하여 더욱 높은 샘플 레이트에서 수행될 수도 있다. 양측 모두에 있어서, 기존의 평탄화기는 송신 나이퀴스트를 중심으로 대칭인 데시벨 응답을 갖는다.Although the conventional smoother has been described herein in the context of 2:1 downsampling, the same principle applies to the case of n:1 downsampling, where the conventional smoothing and desmoothing can be used as a general minimum phase filter and vice versa. It may be performed at the transmission sample rate using a filter, or may be performed at a higher sample rate using a filter that includes only the power of z n . In both cases, existing smoothers have decibel responses that are symmetric about the transmit Nyquist.
원래의 샘플 레이트에 적용되는 반전가능한 대칭 필터는 필터링의 에일리어싱 특징에 대하여 영향을 주지 않으며 그 영향이 디코더에서 완전하게 역으로 될 수 있다는 점에 주목하였으므로, 다운샘플링 필터의 한 후보의 적절성을 다른 한 후보와 비교하는 데 있어서, 데시벨 응답에서의 대칭 차이는 관련성이 없다. 따라서, 소정의 필터의 데시벨 응답 dB(f)를 대칭 성분Since it was noted that a reversible symmetric filter applied to the original sample rate has no effect on the aliasing properties of the filtering and that the effect can be completely reversed at the decoder, the appropriateness of one candidate for downsampling filter can be compared to another. In comparing candidates, symmetrical differences in decibel response are irrelevant. Therefore, the decibel response dB(f) of a given filter can be expressed as the symmetric component
과 비대칭 성분and the asymmetric component
으로 분해한다.decompose into
여기서, f는 주파수이고, fs trans 는 송신 샘플링 주파수이고, 두 개의 다운샘플링 필터 간의 비교를 위해, 비대칭 성분에 집중하여, 디코더에서 필요하다면 대칭 성분이 조절되게 한다. 비대칭 성분은, 사실상, 에일리어싱 제거의 절반이다.where f is the frequency, fs trans is the transmit sampling frequency, and for comparison between the two downsampling filters, we focus on the asymmetric component, allowing the symmetric component to be adjusted if necessary in the decoder. The asymmetric component is, in effect, half of the anti-aliasing.
적외선 코딩infrared coding
Dragotti P.L., Vetterli M. 및 Blu T 의 논문인 "Sampling Moments and Reconstructing Signals of Finite Rate of Innovation: Shannon Meets Strang-Fix", IEEE Transactions on Signal Processing, Vol. 55, No. 5, May 2007을 참조해 본다. 이 논문의 섹션 III A는 임의의 위치와 진폭을 갖는 Dirac 펄스들의 스트림으로 이루어지는 신호를 고려하며, Dirac 펄스의 위치와 진폭이 신호의 균일하게 샘플링된 표현으로부터 명백하게 추론될 수도 있도록 어떤 샘플링 커널이 사용될 수 있는지에 대한 질문이 제기된다.Dragotti P.L., Vetterli M. and Blu T, "Sampling Moments and Reconstructing Signals of Finite Rate of Innovation: Shannon Meets Strang-Fix", IEEE Transactions on Signal Processing, Vol. 55, no. 5, May 2007. Section III A of this paper considers a signal consisting of a stream of Dirac pulses of arbitrary position and amplitude, which sampling kernel can be used so that the positions and amplitudes of Dirac pulses may be unambiguously inferred from a uniformly sampled representation of the signal. The question arises as to whether it can be
이러한 질문은, 나뭇가지 부러짐 등의 많은 자연 환경 사운드가 충동적이고 푸리에 표현이 이러한 유형의 신호에 적절하다는 것이 결코 분명하지 않다는 점에서, 오디오의 재생산과 관련될 수도 있다고 여긴다. 도 11에 도시한 선형 B-스플라인 커널은, Dirac 펄스의 위치와 진폭의 명확한 재구성을 가능하게 하는 가장 간단한 다항식 커널이다. 이러한 사상에 기초하여 "적외선 코딩"이라는 이름을 다운샘플링 사양에 부여하였다.We believe that this question may be related to the reproduction of audio, in that many natural environmental sounds, such as broken branches, are impulsive and it is by no means clear that the Fourier representation is appropriate for these types of signals. The linear B-spline kernel shown in Fig. 11 is the simplest polynomial kernel that allows unambiguous reconstruction of the position and amplitude of Dirac pulses. Based on this idea, the name "infrared coding" has been given to the downsampling specification.
다운샘플링시, 이미 샘플링된 신호로 시작하지만, 개념적 모델은, 이것이 원래의 샘플에 Dirac 펄스의 시퀀스를 제공하는 연속 시간 신호라는 것이다. 연속 시간 신호는 커널과 컨벌루션되고 다운 샘플링된 신호의 레이트에서 리샘플링된다. 도 11을 참조해 볼 때, 리샘플링 순간들은, 정수 0, 1, 2, 3 등이 한편 원래의 신호는 더욱 세밀한 그리드로 제시된다. 원래의 샘플과 리샘플링 순간이 정렬된다고 가정하면, 선형 B- 스플라인과 이어지는 리샘플링에 의한 연속 시간 컨볼루션은 데시메이션(decimation) 전에 다음 시퀀스와의 이산 시간 컨볼루션과 동일하다.In downsampling, we start with an already sampled signal, but the conceptual model is that this is a continuous time signal giving the original sample a sequence of Dirac pulses. The continuous-time signal is convolved with the kernel and resampled at the rate of the downsampled signal. Referring to Fig. 11, the resampling instants are
(1, 2, 1) / 4 for decimation by 2(1, 2, 1) / 4 for decimation by 2
(1, 2, 3, 2, 1) / 9 for decimation by 3(1, 2, 3, 2, 1) / 9 for decimation by 3
(1, 2, 3, 4, 3, 2, 1) / 16 for decimation by 4(1, 2, 3, 4, 3, 2, 1) / 16 for decimation by 4
......
(1, 2, 3, 4, 5, 6, 7, 8, 7, 6, 5, 4, 3, 2, 1) / 64 for decimation by 8.(1, 2, 3, 4, 5, 6, 7, 8, 7, 6, 5, 4, 3, 2, 1) / 64 for decimation by 8.
이러한 시퀀스들은 B-스플라인 커널의 원래의 샘플링 레이트에서의 샘플링일 뿐이다. 커널은 다운샘플링된 레이트에서 2 샘플 주기의 시간 정도를 가지므로, 모든 경우에 있어서, 다운샘플링 필터는 다운샘플링된 레이트에서 2 샘플 주기를 초과하지 않는 시간 정도를 갖는다.These sequences are just samples at the original sampling rate of the B-spline kernel. Since the kernel has a timescale of 2 sample periods at the downsampled rate, in all cases the downsampling filter has a timescale not exceeding 2 sample periods at the downsampled rate.
따라서, 2에 의한 데시메이션을 위해, 다운샘플링 필터는 z-변환 (¼ + ½z-1 + ¼z- 2)을 갖는다. 또한 업샘플링 후에 배치될 수 있거나 업샘플러와 병합될 수 있는 적합한 평탄화기와 함께 업샘플링을 위해 진폭이 적절하게 조정된 동일한 필터와 함께 다운샘플링을 위한 이 필터를 사용하여 매우 만족스러운 결과를 얻을 수 있다는 점이 밝혀졌다. 176.4kHz로부터 88.2kHz로의 다운샘플링을 위해, 결합된 다운샘플링과 업샘플링 저하 2.25dB @ 20kHz는, 아래와 같은 짧은 평탄화기를 사용하여 0.12dB로 감소될 수 있다.Thus, for decimation by 2, the downsampling filter has a z-transform (¼ + ½z -1 + ¼z - 2 ). It is also worth noting that very satisfactory results can be obtained by using this filter for downsampling together with the same filter, properly scaled in amplitude, for upsampling together with a suitable smoother that can be placed after upsampling or merged with the upsampler. point was revealed. For downsampling from 176.4kHz to 88.2kHz, the combined downsampling and upsampling drop of 2.25dB @ 20kHz can be reduced to 0.12dB using a short smoother as shown below.
이에 따라, 총 업샘플링과 다운샘플링 응답은 단지 7 탭을 갖는 FIR이며, 따라서, 총 시간의 정도는 176.4 샘플 레이트에서 6 샘플 주기이거나 다운샘플링된 레이트에서 3 샘플 주기이다. 이는, 흔히 청각적으로 만족스럽고 0 내지 20kHz에 걸쳐 평탄한 응답을 유지하는 것으로 알려져 있는 최단 총 필터 응답이다.Thus, the total upsampling and downsampling response is an FIR with only 7 taps, so the total time order is 6 sample periods at the 176.4 sample rate or 3 sample periods at the downsampled rate. This is the shortest total filter response, which is often known to be audibly pleasing and to maintain a flat response over 0-20 kHz.
적외선 방안(infra-red prescription)은 강하게 상승하는 잡음 스펙트럼을 갖는 신호에 대해 바람직한 것으로 고려되는 하향 에일리어싱의 강한 제거를 제공하지 않지만, 그 초음파 잡음 스펙트럼이 평탄한 것에 더욱 가깝거나 떨어지는 많은 상업적 녹음이 존재한다. 2:1의 다운샘플링 비의 경우, 적외선 다운샘플링 필터의 기울기는 다운샘플링된 나이퀴스트 주파수에서 -9.5dB/8ve이며, 4:1의 비인 경우, 그 기울기는 -11.4dB/8ve이고, 연속 시간으로부터의 다운샘플링의 제한적인 경우에는, 그 기울기가 12dB/8ve이다. 이는, 도 5a의 다운샘플링 필터를 위한 -22.7dB/8ve의 기울기와 비교되며, 이러한 유형의 소스 자료에 대해서는, 적외선 인코딩 사양이 적합하지 않을 수도 있다.Infra-red prescriptions do not provide strong rejection of downward aliasing, which is considered desirable for signals with a strongly rising noise spectrum, but there are many commercial recordings whose ultrasonic noise spectrum is closer to or worse than flat. . For a downsampling ratio of 2:1, the slope of the infrared downsampling filter is -9.5dB/8ve at the downsampled Nyquist frequency, and for a ratio of 4:1, the slope is -11.4dB/8ve, continuous In the limiting case of downsampling from time, the slope is 12dB/8ve. This compares to a slope of -22.7dB/8ve for the downsampling filter in Figure 5a, and for this type of source material, the infrared encoding specification may not be suitable.
일상적인 전문적 사용을 위한 인코더는, 이상적으로는, 예를 들어, 조용한 경과 동안 초음파 스펙트럼을 측정함으로써 인코딩을 위해 제시된 자료의 초음파 잡음 스펙트럼을 결정하려 하고, 이에 따라 그러한 특정 녹음을 재구성하도록 통지된 최적의 다운샘플링 및 업샘플링 필터 쌍을 선택해야 한다. 이어서, 그 선택은 대응하는 디코더에 메타데이터로서 통신되어야 하며, 이에 따라 디코더가 적절한 업샘플링 필터를 선택할 수 있다.An encoder for everyday professional use would ideally attempt to determine the ultrasonic noise spectrum of material presented for encoding, for example by measuring the ultrasonic spectrum during a quiet passage, and thus a known best fit to reconstruct that particular recording. of downsampling and upsampling filter pairs. The selection must then be communicated as metadata to the corresponding decoder, so that the decoder can select the appropriate upsampling filter.
위 설명은, 실질적으로 192kHz 또는 176.4kHz 등의 "4×" 샘플링 레이트로부터 96kHz 또는 88.2kHz 등의 "2×" 샘플링 레이트로의 다운샘플링에 중점을 두었지만, 4× 또는 2× 샘플링 레이트로부터 48kHz 또는 44.1kHz 등의 1× 샘플링 레이트로의 다운샘플링도 상업적으로 중요하다. 사실상, 더욱 높은 샘플링 레이트에서 사용하도록 전술한 바와 같은 동일한 "적외선" 계수들 ¼ + ½z-1 + ¼z-2도, 88.2kHz로부터 44.1kHz로의 다운샘플링시 청각적으로 양호한 결과를 제공하는 것으로 밝혀졌다. 이것은 귀에서 이러한 낮은 샘플 레이트에서 원래 주파수의 하향 에일리어싱된 이미지를 더 많이 제거해야 할 것으로 예상했을 수도 있으므로 아마도 놀라운 일일 수 있지만, 청취 테스트를 반복해 보면 이것이 사실이 아닌 것으로 확인되었다. 동일한 필터는 평탄화기와 결합되거나 평탄화기가 후속하는 업샘플링에 사용될 수 있다. 이러한 낮은 샘플 레이트에서는, 탭이 더욱 많이 있는 평탄화기가 필요하며, 예를 들어,The above discussion has focused on downsampling from "4x" sampling rates, such as 192 kHz or 176.4 kHz, to "2x" sampling rates, such as 96 kHz or 88.2 kHz, in practice, but from 4x or 2x sampling rates to 48 kHz. Alternatively, downsampling to 1× sampling rates such as 44.1 kHz is also commercially important. In fact, the same "infrared" coefficients ¼ + ½z -1 + ¼z -2 as described above for use at higher sampling rates have also been found to give aurally good results when downsampling from 88.2kHz to 44.1kHz. . This is perhaps surprising, as the ear might have expected it to have to remove more of the original frequency downward-aliased image at such a low sample rate, but repeated listening tests have confirmed that this is not the case. The same filter can be combined with the smoother or the smoother can be used for subsequent upsampling. At such low sample rates, planarizers with more taps are needed, e.g.
와 같은 88.2kHz에서 동작하는 필터는, 다운샘플러와 업샘플러의 총 응답을 20kHz에서 0.2dB 내로 평탄화하며, 청각적으로 만족할만한 것으로 밝혀졌다.A filter operating at 88.2 kHz, such as , flattened the total response of the downsampler and upsampler to within 0.2dB at 20kHz and was found to be audibly satisfactory.
평탄화기와 비평탄화기 쌍은 44.1kHz 재생 장비와 호환성이 있도록 전술한 바와 같이 제공될 수 있다. 저하가 20kHz에서 0.5dB를 초과하지 않는 최대 평탄 응답을 제공하도록, 아래와 같은 44.1kHz에서 구현된 9-탭 올-폴 평탄화기가 이론적으로 필요하지만,A pair of smoother and non-flattener may be provided as described above to be compatible with 44.1 kHz playback equipment. A 9-tap all-pole smoother implemented at 44.1 kHz as shown below is theoretically required to provide a maximum flat response in which degradation does not exceed 0.5 dB at 20 kHz, but
여기서 제공된 분모의 이후 항들 중 일부는 통과대역 리플을 최소한으로 도입하여 삭제될 수 있다. 어느 경우든, 여기서 제공된 식은 대응하는 FIR 비평탄화기를 제공하도록 역으로 될 수 있다. 고 해상도 디코더는, 통상적으로 44.1kHz에서 비평탄화되고, 88.2kHz로 업샘플링된 후, 위에 주어진 7차 FIR 평탄화기 등의 88.2kHz에서 최적으로 설계된 평탄화기를 사용하여 평탄화된다. 이 경우, 인코더와 고 해상도 디코더 모두의 임펄스 응답은 12개의 비제로(nonzero) 탭을 갖는 반면, 인코더 단독은 -40dB 내지 -60dB 등의 더욱 낮은 레벨에도 더욱 길게 연속되는 임펄스 응답을 갖는다.Some of the later terms in the denominator given here can be eliminated by introducing minimal passband ripple. In either case, the equations provided herein can be reversed to give the corresponding FIR non-flatteners. A high-resolution decoder is typically unsmoothed at 44.1 kHz, upsampled to 88.2 kHz, and then smoothed using an optimally designed planarizer at 88.2 kHz, such as the 7th order FIR smoother given above. In this case, the impulse responses of both the encoder and the high-resolution decoder have 12 nonzero taps, while the encoder alone has a longer continuous impulse response even at lower levels, such as -40dB to -60dB.
44.1kHz 레이트에서 동작하기 위해 본원에 제시된 평탄화 및 비평탄화 필터들 중 하나 또는 모두는, 보다 편리하다면, 88.2kHz 또는 더 높은 레이트에서 동작시 동일한 기능을 제공하도록 전술한 바와 같이 변환될 수 있다.One or both of the smoothing and de-smoothing filters presented herein for operation at the 44.1 kHz rate can be converted as described above to provide the same functionality when operating at 88.2 kHz or higher, if more convenient.
88.2kHz 스트림 내에서 시간 t=0에서 단일 샘플로서 제시되는 임펄스의 44.1kHz 적외선 코딩으로부터의 연속 시간에 대하여 상술한 바와 같은 재구성이 도 12a와 도 12b에 도시되어 있다. 도 12a에서, 재구성은 다이아몬드로 표시된 44.1kHz 샘플로부터 얻어진 것이며, 88.2kHz 스트림의 짝수 샘플들과 시간상 일치하는 반면, 도 12b에서, 재구성은 88.2kHz 스트림 포인트들의 홀수 샘플들과 일치하는 원으로 표시된 44.1kHz 샘플로부터 얻어진 것이다. 수평 축은 88kHz 샘플 주기 단위로 시간 t이며, 수직 축은 멱 0.21로 상승된 진폭을 나타내며, 이는 작은 응답들의 가시성을 제공하지만, 짧은 임펄스에 대하여, 주변 강도가 멱 0.21로 상승된 진폭에 비례함을 제안하는 인간의 청력의 신경생리학적 모델에 따라 소정의 타당성을 가질 수도 있다. 44.1kHz 표현은 기존 장비와의 호환성을 위해 평탄화를 포함하여 전술한 적외선 방법을 이용하여 유도되었지만, 2개의 고 해상도 재구성에서는 유사하게 적외선 재구성이 뒤따르는 기존의 비평탄화기 및 88.2kHz에서 구현되는 평탄화기를 사용한다.A reconstruction as described above for continuous time from a 44.1 kHz infrared coding of an impulse presented as a single sample at time t=0 within an 88.2 kHz stream is shown in FIGS. 12A and 12B. In Fig. 12a, the reconstruction is obtained from the 44.1 kHz sample indicated by the diamond and coincides in time with the even samples of the 88.2 kHz stream, whereas in Fig. 12b the reconstruction is obtained from the 44.1 kHz sample indicated by the circle which coincides with the odd samples of the 88.2 kHz stream points. It is obtained from kHz samples. The horizontal axis is time t in units of 88 kHz sample period, and the vertical axis represents the amplitude raised by a power of 0.21, which provides visibility of small responses, but suggests that for short impulses, the ambient intensity is proportional to the amplitude raised by a power of 0.21. It may have some validity depending on the neurophysiological model of human hearing. The 44.1 kHz representation was derived using the infrared method described above, including smoothing for compatibility with existing equipment, but similarly for the two high-resolution reconstructions, a conventional non-flattener followed by an infrared reconstruction and smoothing implemented at 88.2 kHz. use a gear
44kHz 스트림은 임펄스의 고 해상도 재구성이 중단된 후에도 오랜 시간 지속되는 시간 응답을 나타내며, 따라서 인코더만의 응답보다 더욱 컴팩트한 종단간 응답을 제공하는 데 있어서 폴-제로 상쇄 효과를 입증한다는 점에 주목한다.Note that the 44 kHz stream exhibits a temporal response that persists long after the high-resolution reconstruction of the impulse has ceased, thus demonstrating the pole-zero cancellation effect in providing a more compact end-to-end response than the response of the encoder alone. .
도 12a와 도 12b는, 또한, 데시메이션이 포함될 때 "임펄스 응답"의 개념을 더욱 명확하게 정의할 필요가 있음을 나타낸다. 2에 의한 데시메이션의 경우, 그 결과는, 홀수 샘플에서 제시되는 임펄스에 대하여 짝수 샘플에서 제시되는 임펄스와 다르다. 본원에서는, 이러한 두 가지 경우에서 얻은 응답들의 평균을 나타내도록 "임펄스 응답"이라는 용어를 사용한다.12a and 12b also indicate the need to more clearly define the concept of “impulse response” when decimation is involved. In the case of decimation by 2, the result is different for impulses presented in odd-numbered samples than impulses presented in even-numbered samples. We use the term "impulse response" herein to denote the average of the responses obtained in these two cases.
전술한 바와 같은 적외선 코딩은 다운샘플링된 신호의 샘플링 주파수에서 2 개의 z-평면 제로를 제공하고, 2보다 큰 다운샘플링 비의 경우에는 그 주파수의 모든 배수에서 제공한다는 것을 이해할 것이다. 이것을 적외선 코딩의 정의 특징이라고 간주할 수 있다.It will be appreciated that infrared coding as described above provides two z-plane zeros at the sampling frequency of the downsampled signal and, for downsampling ratios greater than two, at all multiples of that frequency. This can be regarded as a defining feature of infrared coding.
하향 에일리어싱의 억제Suppression of Downward Aliasing
전술한 바와 같이, "take 5"와 같은 항목을 인코딩할 때(예를 들어 도 8 참조), 잡음 스펙트럼이 피크인 55kHz 등의 주파수에서 다운샘플링 필터가 강력한 감쇄를 제공하는 것이 바람직할 수도 있다. 이러한 주파수 근처의 에너지를 억제하도록 하나 이상의 z-평면 제로를 배치하는 것을 생각하는 것은 자연스럽다. 그러나, 이렇게 함으로써, 종단간 임펄스 응답의 총 길이가 증가하게 되며, 그 이유는, 첫째, 각 복소 제로가 다운샘플링 필터에 추가 2개의 탭을 필요로 하기 때문에, 둘째, 55kHz 근처의 제로가 총 저하에 상당히 기여하여 더욱 긴 평탄화 필터도 필요할 수 있기 때문이다.As mentioned above, when encoding an item such as “take 5” (see, for example, FIG. 8), it may be desirable for a downsampling filter to provide strong attenuation at frequencies such as 55 kHz, where the noise spectrum peaks. It is natural to think of placing one or more z-plane zeros to suppress energy around these frequencies. However, doing so increases the total length of the end-to-end impulse response, because first, each complex zero requires two additional taps in the downsampling filter, and second, zeros around 55 kHz reduce the total drop. , so a longer flattening filter may also be required.
하나의 주의 사항으로, 길이의 증가는 폴-제로 상쇄를 이용하여 피할 수 있으며, 인코더의 필터의 복소 제로는 디코더의 폴에 의해 상쇄된다. 일 실시예에서, 이러한 3개의 제로를 포함하는 다운샘플링 필터는 3개의 대응하는 폴을 갖는 업샘플링 필터와 쌍을 이룬다. 그 결과, 다운샘플링과 업샘플링 필터 응답들은 도 13a와 도 13b에 도시되어 있으며, 이러한 두 개의 필터를 가정된 외부 저하와 결합함으로 인한 종단간 응답이 도 13c에 도시되어 있다. 다른 그래프와의 일관성을 위해, 이러한 플롯들은 196kHz의 샘플링 레이트를 가정하므로, 최대 감쇄는 55kHz라기보다는 60kHz에 근접한다.With one caveat, the increase in length can be avoided using pole-zero cancellation, where the complex zeros of the encoder's filter are canceled by the decoder's poles. In one embodiment, a downsampling filter with these three zeros is paired with an upsampling filter with three corresponding poles. The resulting downsampling and upsampling filter responses are shown in Figs. 13a and 13b, and the end-to-end response due to combining these two filters with assumed external degradation is shown in Fig. 13c. For consistency with the other graphs, these plots assume a sampling rate of 196 kHz, so the maximum attenuation is closer to 60 kHz rather than 55 kHz.
여기서 주의해야 할 것은, 하향 에일리어싱이 억제되었지만 상향 에일리어싱은 증가했다는 점이다. "Take 5"와 같은 트랙에서 사용하기 위해, 상승된 에일리어싱된 잡음은 가파르게 상승하는 원래의 잡음에 의해 잘 커버된다. 그러나, 33kHz 근처의 신호 성분들은 또한 55kHz 근처에서 훨씬 더 큰 에일리어싱을 발생시킨다. 따라서, 에일리어싱된 성분들을 무시하는 종단간 주파수 응답을 제시하는 것은 오해의 소지가 있다. 그럼에도 불구하고, 에일리어싱에 적용된 부스트가 과도하지 않다면, 귀는 상향 에일리어싱에 대하여 비교적 관대한 것으로 보인다.It should be noted here that downward aliasing was suppressed, but upward aliasing increased. For use on tracks like “Take 5,” the elevated aliased noise is well covered by the steeply rising original noise. However, signal components around 33 kHz also cause much greater aliasing around 55 kHz. Therefore, it is misleading to present an end-to-end frequency response that ignores the aliased components. Nevertheless, the ear appears to be relatively tolerant of upward aliasing, provided the boost applied to aliasing is not excessive.
도 13b에 도시한 57kHz에서의 38dB의 큰 부스트는 처음에는 바람직하지 못한 것처럼 보일 수도 있지만, 기존의 평탄화기가 전술한 바와 같이 사용된다면, 디코더는 이 부스트의 대부분을 보상할 기존의 비평탄화기를 통합함으로, 디코더는 전체적으로 부스트를 나타내지 않는다.The large boost of 38 dB at 57 kHz shown in Figure 13b may seem undesirable at first, but if a conventional smoother is used as described above, the decoder will incorporate a conventional de-flattener that will compensate for most of this boost. , the decoder does not exhibit a boost as a whole.
결론conclusion
본원에서 설명하는 디코딩 응답들 중 일부는 일반적으로 재구성 필터에 없는 특징들을 갖는다는 점에 주목해야 한다. 이러한 특징들은, 44.kkHz 또는 48kHz인 절반-나이퀴스트 주파수에서 하강하기보다는 상승하는 응답 및 z만의 짝수 멱의 함수들인 하나 이상의 인수를 갖고 이에 따라 절반-나이퀴스트 주파수를 중심으로 대칭되는 개별적인 응답들을 갖는 z-변환을 포함한다.It should be noted that some of the decoding responses described herein have features not normally found in reconstruction filters. These features have a response that rises rather than falls at the half-Nyquist frequency, which is either 44.kkHz or 48kHz, and an individual response having one or more factors that are functions of even powers of z only, and thus symmetrical about the half-Nyquist frequency. Contains the z-transform with the responses.
Claims (4)
상기 송신 샘플 레이트보다 높은 미리 정해진 샘플링 레이트에서 상기 디지털 오디오 신호를 업샘플링하는 업샘플링 필터를 포함하고,
상기 업샘플링 필터는 상기 송신 샘플 레이트에 대응하는 나이퀴스트 주파수를 중심으로 하는 주파수 영역을 거쳐 주파수가 증가함에 따라 단조 증가하는 진폭 응답을 갖는, 디코더.
A decoder receiving a digital audio signal at a transmit sample rate and providing an output audio signal,
an upsampling filter upsampling the digital audio signal at a predetermined sampling rate higher than the transmission sample rate;
and the upsampling filter has an amplitude response that monotonically increases as frequency increases over a frequency domain centered at a Nyquist frequency corresponding to the transmit sample rate.
2. The decoder of claim 1, wherein the upsampling filter has an amplitude response of at least +2 dB at the Nyquist frequency corresponding to the transmit sample rate, in terms of response at DC.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020237005923A KR102661191B1 (en) | 2014-06-10 | 2014-06-10 | Digital encapsulation of audio signals |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020177000795A KR102318581B1 (en) | 2014-06-10 | 2014-06-10 | Digital encapsulation of audio signals |
PCT/GB2014/051789 WO2015189533A1 (en) | 2014-06-10 | 2014-06-10 | Digital encapsulation of audio signals |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020177000795A Division KR102318581B1 (en) | 2014-06-10 | 2014-06-10 | Digital encapsulation of audio signals |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020237005923A Division KR102661191B1 (en) | 2014-06-10 | 2014-06-10 | Digital encapsulation of audio signals |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20210132222A KR20210132222A (en) | 2021-11-03 |
KR102503347B1 true KR102503347B1 (en) | 2023-02-23 |
Family
ID=51014560
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020237005923A KR102661191B1 (en) | 2014-06-10 | 2014-06-10 | Digital encapsulation of audio signals |
KR1020177000795A KR102318581B1 (en) | 2014-06-10 | 2014-06-10 | Digital encapsulation of audio signals |
KR1020217034245A KR102503347B1 (en) | 2014-06-10 | 2014-06-10 | Digital encapsulation of audio signals |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020237005923A KR102661191B1 (en) | 2014-06-10 | 2014-06-10 | Digital encapsulation of audio signals |
KR1020177000795A KR102318581B1 (en) | 2014-06-10 | 2014-06-10 | Digital encapsulation of audio signals |
Country Status (7)
Country | Link |
---|---|
US (4) | US10115410B2 (en) |
EP (3) | EP3998605A1 (en) |
JP (1) | JP6700507B6 (en) |
KR (3) | KR102661191B1 (en) |
CN (1) | CN106575508B (en) |
PL (1) | PL3155617T3 (en) |
WO (1) | WO2015189533A1 (en) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102661191B1 (en) | 2014-06-10 | 2024-04-26 | 렌브룩 인더스트리즈 리미티드 | Digital encapsulation of audio signals |
US9959883B2 (en) * | 2015-10-06 | 2018-05-01 | The Trustees Of Princeton University | Method and system for producing low-noise acoustical impulse responses at high sampling rate |
KR102689087B1 (en) * | 2017-01-26 | 2024-07-29 | 삼성전자주식회사 | Electronic apparatus and control method thereof |
EP3744057A4 (en) * | 2018-01-26 | 2021-10-06 | California Institute of Technology | Systems and methods for communicating by modulating data on zeros |
CN108564957B (en) * | 2018-01-31 | 2020-11-13 | 杭州士兰微电子股份有限公司 | Code stream decoding method and device, storage medium and processor |
US11496350B2 (en) * | 2018-03-27 | 2022-11-08 | University Of South Carolina | Dual-polarization FBMC in wireless communication systems |
SG11202108549YA (en) * | 2019-02-07 | 2021-09-29 | California Inst Of Techn | Systems and methods for communicating by modulating data on zeros in the presence of channel impairments |
EP3977424A1 (en) * | 2019-05-28 | 2022-04-06 | Utility Associates, Inc. | Systems and methods for detecting a gunshot |
US10701486B1 (en) * | 2019-06-07 | 2020-06-30 | Cirrus Logic, Inc. | Low-latency audio output with variable group delay |
US11438697B2 (en) | 2019-06-07 | 2022-09-06 | Cirrus Logic, Inc. | Low-latency audio output with variable group delay |
CN113607269B (en) * | 2021-02-02 | 2023-12-15 | 深圳市冠旭电子股份有限公司 | Sound dose determination method, device, electronic equipment and storage medium |
US20220383858A1 (en) * | 2021-05-28 | 2022-12-01 | Asapp, Inc. | Contextual feature vectors for processing speech |
CN113782043B (en) * | 2021-09-06 | 2024-06-14 | 北京捷通华声科技股份有限公司 | Voice acquisition method, voice acquisition device, electronic equipment and computer readable storage medium |
US11889280B2 (en) * | 2021-10-05 | 2024-01-30 | Cirrus Logic Inc. | Filters and filter chains |
WO2023148540A1 (en) * | 2022-08-16 | 2023-08-10 | Arekat Safwan | A recursive fir digital filter |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080109505A1 (en) | 2004-12-23 | 2008-05-08 | Austriamicrosystems Ag | Fir Decimation Filter and Arrangement Comprising the Same |
Family Cites Families (51)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5121204A (en) * | 1990-10-29 | 1992-06-09 | General Electric Company | Apparatus for scrambling side panel information of a wide aspect ratio image signal |
DE69232729T2 (en) | 1991-05-29 | 2003-04-24 | Pacific Microsonics, Inc. | Improvements in systems to achieve higher frequency resolution |
US5757931A (en) * | 1994-06-15 | 1998-05-26 | Sony Corporation | Signal processing apparatus and acoustic reproducing apparatus |
US5654952A (en) * | 1994-10-28 | 1997-08-05 | Sony Corporation | Digital signal encoding method and apparatus and recording medium |
US5956674A (en) * | 1995-12-01 | 1999-09-21 | Digital Theater Systems, Inc. | Multi-channel predictive subband audio coder using psychoacoustic adaptive bit allocation in frequency, time and over the multiple channels |
US5928313A (en) * | 1997-05-05 | 1999-07-27 | Apple Computer, Inc. | Method and apparatus for sample rate conversion |
US5903872A (en) * | 1997-10-17 | 1999-05-11 | Dolby Laboratories Licensing Corporation | Frame-based audio coding with additional filterbank to attenuate spectral splatter at frame boundaries |
JPH11215006A (en) * | 1998-01-29 | 1999-08-06 | Olympus Optical Co Ltd | Transmitting apparatus and receiving apparatus for digital voice signal |
FR2783651A1 (en) * | 1998-09-22 | 2000-03-24 | Koninkl Philips Electronics Nv | DEVICE AND METHOD FOR FILTERING A SPEECH SIGNAL, RECEIVER AND TELEPHONE COMMUNICATIONS SYSTEM |
JP4386514B2 (en) * | 1998-11-24 | 2009-12-16 | 株式会社アドバンテスト | Semiconductor test equipment |
US6208276B1 (en) * | 1998-12-30 | 2001-03-27 | At&T Corporation | Method and apparatus for sample rate pre- and post-processing to achieve maximal coding gain for transform-based audio encoding and decoding |
US6337645B1 (en) * | 1999-03-23 | 2002-01-08 | Microsoft Corporation | Filter for digital-to-analog converters |
CN1151606C (en) * | 1999-03-23 | 2004-05-26 | 太平洋微超声公司 | Wave filter for digital to analog converter |
JP2002330075A (en) * | 2001-05-07 | 2002-11-15 | Matsushita Electric Ind Co Ltd | Subband adpcm encoding/decoding method, subband adpcm encoder/decoder and wireless microphone transmitting/ receiving system |
US7236839B2 (en) * | 2001-08-23 | 2007-06-26 | Matsushita Electric Industrial Co., Ltd. | Audio decoder with expanded band information |
US7173966B2 (en) * | 2001-08-31 | 2007-02-06 | Broadband Physics, Inc. | Compensation for non-linear distortion in a modem receiver |
US20030187663A1 (en) * | 2002-03-28 | 2003-10-02 | Truman Michael Mead | Broadband frequency translation for high frequency regeneration |
CN100492492C (en) * | 2002-09-19 | 2009-05-27 | 松下电器产业株式会社 | Audio decoding apparatus and method |
JP2004120182A (en) * | 2002-09-25 | 2004-04-15 | Sanyo Electric Co Ltd | Decimation filter and interpolation filter |
US7262716B2 (en) * | 2002-12-20 | 2007-08-28 | Texas Instruments Incoporated | Asynchronous sample rate converter and method |
JP4966013B2 (en) * | 2003-10-30 | 2012-07-04 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | Encode or decode audio signals |
CA2457988A1 (en) * | 2004-02-18 | 2005-08-18 | Voiceage Corporation | Methods and devices for audio compression based on acelp/tcx coding and multi-rate lattice vector quantization |
US7512536B2 (en) * | 2004-05-14 | 2009-03-31 | Texas Instruments Incorporated | Efficient filter bank computation for audio coding |
CN101176148B (en) * | 2005-05-11 | 2011-06-15 | 松下电器产业株式会社 | Encoder, decoder, and their methods |
EP1900102A2 (en) * | 2005-06-27 | 2008-03-19 | Qualcomm Flarion Technologies, Inc. | Methods and apparatus for implementing and/or using amplifiers and/or for performing various amplification related operations |
US7917561B2 (en) * | 2005-09-16 | 2011-03-29 | Coding Technologies Ab | Partially complex modulated filter bank |
US9496850B2 (en) * | 2006-08-04 | 2016-11-15 | Creative Technology Ltd | Alias-free subband processing |
CN101361112B (en) * | 2006-08-15 | 2012-02-15 | 美国博通公司 | Re-phasing of decoder states after packet loss |
CN100487789C (en) * | 2006-09-06 | 2009-05-13 | 华为技术有限公司 | Perception weighting filtering wave method and perception weighting filter thererof |
US8700387B2 (en) * | 2006-09-14 | 2014-04-15 | Nvidia Corporation | Method and system for efficient transcoding of audio data |
CN200962315Y (en) * | 2006-10-18 | 2007-10-17 | 中兴通讯股份有限公司 | A voice processing device |
BRPI0709310B1 (en) * | 2006-10-25 | 2019-11-05 | Fraunhofer Ges Zur Foeerderung Der Angewandten Forschung E V | equipment and method for generating audio subband values and equipment and method for generating time domain audio samples |
DE102006051673A1 (en) * | 2006-11-02 | 2008-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for reworking spectral values and encoders and decoders for audio signals |
US8902365B2 (en) * | 2007-03-14 | 2014-12-02 | Lance Greggain | Interference avoidance in a television receiver |
US7728658B2 (en) | 2007-07-25 | 2010-06-01 | D2Audio Corporation | Low-noise, low-distortion digital PWM amplifier |
EP2144228A1 (en) * | 2008-07-08 | 2010-01-13 | Siemens Medical Instruments Pte. Ltd. | Method and device for low-delay joint-stereo coding |
CN101369898B (en) * | 2008-09-12 | 2011-04-20 | 中国电子科技集团公司第五十四研究所 | Meteor trail self-adapting variable-velocity burst modem |
US7808419B2 (en) * | 2008-10-22 | 2010-10-05 | Mediatek Inc. | Digitizer with variable sampling clock and method using the same |
FR2938688A1 (en) * | 2008-11-18 | 2010-05-21 | France Telecom | ENCODING WITH NOISE FORMING IN A HIERARCHICAL ENCODER |
CN101419800B (en) * | 2008-11-25 | 2011-12-14 | 浙江大学 | Emotional speaker recognition method based on frequency spectrum translation |
CN102414742B (en) * | 2009-04-30 | 2013-12-25 | 杜比实验室特许公司 | Low complexity auditory event boundary detection |
EP2649614B1 (en) * | 2010-12-09 | 2015-11-04 | Dolby International AB | Psychoacoustic filter design for rational resamplers |
US8467141B2 (en) * | 2011-08-23 | 2013-06-18 | Lsi Corporation | Read channel with oversampled analog to digital conversion |
US9236064B2 (en) * | 2012-02-15 | 2016-01-12 | Microsoft Technology Licensing, Llc | Sample rate converter with automatic anti-aliasing filter |
CN102915736B (en) * | 2012-10-16 | 2015-09-02 | 广东威创视讯科技股份有限公司 | Mixed audio processing method and stereo process system |
CN103209152B (en) * | 2013-03-20 | 2015-09-23 | 苏州东奇信息科技股份有限公司 | Based on the MPPSK coherent demodulation method of shock filter at two zero point |
JP6510487B2 (en) * | 2013-03-26 | 2019-05-08 | バラット, ラックラン, ポールBARRATT, Lachlan, Paul | Voice filter using sine function |
FR3011408A1 (en) * | 2013-09-30 | 2015-04-03 | Orange | RE-SAMPLING AN AUDIO SIGNAL FOR LOW DELAY CODING / DECODING |
FR3015754A1 (en) * | 2013-12-20 | 2015-06-26 | Orange | RE-SAMPLING A CADENCE AUDIO SIGNAL AT A VARIABLE SAMPLING FREQUENCY ACCORDING TO THE FRAME |
KR102661191B1 (en) | 2014-06-10 | 2024-04-26 | 렌브룩 인더스트리즈 리미티드 | Digital encapsulation of audio signals |
US9793879B2 (en) * | 2014-09-17 | 2017-10-17 | Avnera Corporation | Rate convertor |
-
2014
- 2014-06-10 KR KR1020237005923A patent/KR102661191B1/en active IP Right Grant
- 2014-06-10 KR KR1020177000795A patent/KR102318581B1/en active IP Right Grant
- 2014-06-10 EP EP21218391.7A patent/EP3998605A1/en active Pending
- 2014-06-10 JP JP2017517426A patent/JP6700507B6/en active Active
- 2014-06-10 CN CN201480081084.4A patent/CN106575508B/en active Active
- 2014-06-10 WO PCT/GB2014/051789 patent/WO2015189533A1/en active Application Filing
- 2014-06-10 US US15/317,794 patent/US10115410B2/en active Active
- 2014-06-10 EP EP14732926.2A patent/EP3155617B1/en active Active
- 2014-06-10 KR KR1020217034245A patent/KR102503347B1/en active IP Right Grant
- 2014-06-10 EP EP21218383.4A patent/EP4002359A1/en active Pending
- 2014-06-10 PL PL14732926T patent/PL3155617T3/en unknown
-
2018
- 2018-10-02 US US16/149,651 patent/US10867614B2/en active Active
-
2020
- 2020-12-14 US US17/120,889 patent/US11710493B2/en active Active
-
2023
- 2023-06-09 US US18/332,148 patent/US20240029749A1/en active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080109505A1 (en) | 2004-12-23 | 2008-05-08 | Austriamicrosystems Ag | Fir Decimation Filter and Arrangement Comprising the Same |
Non-Patent Citations (3)
Title |
---|
HOGENAUER, Eugene. An economical class of digital filters for decimation and interpolation. IEEE transactions on acoustics, speech, and signal processing, 1981, 29.2: 155-162. |
Phanendrababu H, ArvindChoubey, Design Of Multirate Linear Phase Decimation Filters For Oversampling Adcs, INTERNATIONAL JOURNAL OF SCIENTIFIC & TECHNOLOGY RESEARCH, 2013.05. |
STORY, Mike. A suggested explanation for (some of) the audible differences between high sample rate and conventional sample rate audio material. Impulse, 1997, 40: 60. |
Also Published As
Publication number | Publication date |
---|---|
EP3998605A1 (en) | 2022-05-18 |
US10867614B2 (en) | 2020-12-15 |
JP2017521977A (en) | 2017-08-03 |
EP4002359A1 (en) | 2022-05-25 |
PL3155617T3 (en) | 2022-04-19 |
US10115410B2 (en) | 2018-10-30 |
KR20230028594A (en) | 2023-02-28 |
CN106575508A (en) | 2017-04-19 |
US20210193157A1 (en) | 2021-06-24 |
KR20170023941A (en) | 2017-03-06 |
JP6700507B2 (en) | 2020-05-27 |
CN106575508B (en) | 2021-05-25 |
US20190057709A1 (en) | 2019-02-21 |
KR20210132222A (en) | 2021-11-03 |
KR102661191B1 (en) | 2024-04-26 |
US11710493B2 (en) | 2023-07-25 |
US20170110141A1 (en) | 2017-04-20 |
KR102318581B1 (en) | 2021-10-27 |
EP3155617A1 (en) | 2017-04-19 |
EP3155617B1 (en) | 2022-01-05 |
WO2015189533A1 (en) | 2015-12-17 |
US20240029749A1 (en) | 2024-01-25 |
JP6700507B6 (en) | 2020-07-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102503347B1 (en) | Digital encapsulation of audio signals | |
KR100312636B1 (en) | Compensation Filter | |
AU2007280822B2 (en) | Device and method for processing a real subband signal for reducing aliasing effects | |
KR101422368B1 (en) | A method and an apparatus for processing an audio signal | |
CN103262162B (en) | Psychoacoustic filter design for rational resamplers | |
AU2007313442B2 (en) | System and method for compensating memoryless non-linear distortion of an audio transducer | |
JP2005530432A (en) | Method for digital equalization of sound from loudspeakers in a room and use of this method | |
US9076437B2 (en) | Audio signal processing apparatus | |
JP5133172B2 (en) | FM transmission circuit and oversampling processing circuit | |
JP4815986B2 (en) | Interpolation device, audio playback device, interpolation method, and interpolation program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A107 | Divisional application of patent | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
A107 | Divisional application of patent | ||
GRNT | Written decision to grant |