WO2010087582A2 - Decoding apparatus using separate decoding module, and output apparatus adopting the same - Google Patents

Decoding apparatus using separate decoding module, and output apparatus adopting the same Download PDF

Info

Publication number
WO2010087582A2
WO2010087582A2 PCT/KR2009/007675 KR2009007675W WO2010087582A2 WO 2010087582 A2 WO2010087582 A2 WO 2010087582A2 KR 2009007675 W KR2009007675 W KR 2009007675W WO 2010087582 A2 WO2010087582 A2 WO 2010087582A2
Authority
WO
WIPO (PCT)
Prior art keywords
module
decoding
signal processing
audio
voice
Prior art date
Application number
PCT/KR2009/007675
Other languages
French (fr)
Korean (ko)
Other versions
WO2010087582A3 (en
Inventor
김용환
신화선
조충상
김제우
최병호
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Publication of WO2010087582A2 publication Critical patent/WO2010087582A2/en
Publication of WO2010087582A3 publication Critical patent/WO2010087582A3/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring

Definitions

  • the present invention relates to a decoding apparatus and a sound output apparatus using the same, and more particularly, to a decoding apparatus for decoding a compressed audio / audio signal to generate a decompressed audio / audio signal and a sound output apparatus using the same.
  • Conventional audio decoding apparatuses separately design a decoding module that performs decoding for each audio signal format because signal processing required for decoding differs for each audio signal format.
  • the structure of the decoding module is fixed, and the decoding module can only decode one format. In other words, it is impossible for a decoding module to be shared for audio signals of various formats.
  • the present invention has been made to solve the above problems, and an object of the present invention is to provide a decoding device and a sound output device using the same, which enables faster and more economical design for various audio / audio signal format changes. In providing.
  • a decoding apparatus includes a first audio decoding module having first audio signal processing modules for performing signal processing necessary for decoding an audio signal, and decoding an audio signal. At least one of the first audio signal processing modules is used.
  • the decoding apparatus includes a first voice decoding module having first voice signal processing modules which respectively perform signal processing necessary for decoding a voice signal, wherein the first voice decoding module includes a first voice decoding module. At least one of the voice signal processing modules is used.
  • the decoding apparatus comprises: a first audio decoding module having first audio signal processing modules each performing signal processing required for decoding an audio signal; And a first voice decoding module having first voice signal processing modules for respectively performing signal processing necessary for decoding of a voice signal, wherein, when decoding at least one of an audio signal and a voice signal, the first audio signal is included. At least one of the processing modules and the first voice signal processing modules is used.
  • the decoding apparatus includes a first decoding module having first signal processing modules for performing signal processing for decoding an audio signal and signal processing for decoding an audio signal, respectively. In decoding at least one of a signal and an audio signal, at least one of the first signal processing modules is used.
  • the decoding apparatus comprises: a first audio decoding module having first audio signal processing modules each performing signal processing required for decoding an audio signal; And an analyzing unit for analyzing a format of the audio signal to be decoded and controlling the decoded audio signal to be processed by at least one of the first audio signal processing modules according to an analysis result.
  • the decoding apparatus includes: a first voice decoding module having first voice signal processing modules which respectively perform signal processing necessary for decoding a voice signal; And an analyzer configured to analyze a format of a voice signal to be decoded and to control the decoded voice signal to be processed by at least one of the first voice signal processing modules according to an analysis result.
  • the decoding apparatus comprises: a first audio decoding module having first audio signal processing modules each performing signal processing required for decoding an audio signal; And a first voice decoding module having first voice signal processing modules for performing signal processing necessary for decoding the voice signal, respectively, and analyzing at least one format of the audio signal and the voice signal and according to the analysis result. And an analyzer configured to control at least one of the audio signal and the voice signal by at least one of the first audio signal processing modules and the first voice signal processing modules.
  • the decoding apparatus comprises: a first decoding module having first signal processing modules for performing signal processing for decoding an audio signal and signal processing for decoding an audio signal, respectively; And an analyzer configured to analyze at least one format of an audio signal and a voice signal and to control at least one of the audio signal and the voice signal by at least one of the first signal processing modules according to an analysis result.
  • the decoding apparatus comprises: a first audio decoding module having first audio signal processing modules each performing signal processing required for decoding an audio signal; And a second audio decoding module having at least one second audio signal processing module which is required for decoding the audio signal but which can each perform at least one signal processing that the first audio signal processing modules cannot perform. It includes.
  • the decoding apparatus includes: a first voice decoding module having first voice signal processing modules which respectively perform signal processing necessary for decoding a voice signal; And a second voice decoding module having at least one second voice signal processing module, which is required for decoding the voice signal, but which can each perform at least one signal processing that the first voice signal processing modules cannot perform. It includes.
  • the decoding apparatus comprises: a first audio decoding module having first audio signal processing modules each performing signal processing required for decoding an audio signal; A first speech decoding module having first speech signal processing modules each performing signal processing necessary for decoding the speech signal; A second audio decoding module having at least one second audio signal processing module each of which is required for decoding the audio signal but which can perform at least one signal processing that the first audio signal processing modules cannot perform; And a second voice decoding module having at least one second voice signal processing module, which is required for decoding the voice signal, but which can each perform at least one signal processing that the first voice signal processing modules cannot perform. It includes.
  • the output device the decoding unit for decoding the audio signal; And an output unit for outputting audio corresponding to the audio signal decoded by the decoder, wherein the decoder comprises: first audio signal processing modules each of which performs signal processing necessary for decoding the audio signal; And an audio decoding module, wherein at least one of the first audio signal processing modules is used when decoding the audio signal.
  • the decoding unit for decoding a voice signal; And an output unit for outputting a voice corresponding to the voice signal decoded by the decoder, wherein the decoder comprises first voice signal processing modules each of which performs signal processing necessary for decoding the voice signal. And a voice decoding module, wherein at least one of the first voice signal processing modules is used when decoding the voice signal.
  • the decoding unit for decoding at least one of the audio signal and the audio signal; And an output unit configured to output at least one of audio and voice corresponding to at least one of the audio signal and the audio signal decoded by the decoder.
  • the decoder may perform signal processing for decoding the audio signal, respectively.
  • a first audio decoding module having first audio signal processing modules;
  • a first voice decoding module having first voice signal processing modules for respectively performing signal processing necessary for decoding of a voice signal, wherein, when decoding at least one of an audio signal and a voice signal, the first audio signal is included. At least one of the processing modules and the first voice signal processing modules is used.
  • the decoding unit for decoding at least one of the audio signal and the audio signal; And an output unit for outputting at least one of audio and voice corresponding to at least one of an audio signal and a voice signal decoded by the decoder.
  • the decoder includes signal processing and voice signals necessary for decoding the audio signal.
  • a first decoding module having first signal processing modules each performing signal processing required for decoding of the at least one of the at least one of the first signal processing modules. Is used.
  • the decoding method the step of pre-processing the input audio signal; And decoding the preprocessed audio signal using at least one of the first audio signal processing modules provided in the first audio decoding module, wherein the first audio signal processing modules include: decoding the audio signal; Modules that perform the signal processing required for each.
  • the decoding method comprises the steps of: preprocessing the input voice signal; And decoding the preprocessed voice signal using at least one of the first voice signal processing modules provided in the first voice decoding module, wherein the first voice signal processing modules include: decoding the voice signal; Modules that perform the signal processing required for each.
  • the decoding method comprises the steps of: preprocessing at least one of an audio signal and an audio signal; And at least one of the first audio signal processing modules provided in the first audio decoding module and the first audio signal processing modules provided in the first audio decoding module, to perform at least one of the preprocessed audio signal and the voice signal.
  • the first audio signal processing modules are modules that perform signal processing necessary for decoding an audio signal, and the first audio signal processing modules respectively perform signal processing required for a voice signal.
  • the decoding method comprises the steps of: pre-processing at least one of an audio signal and an audio signal; And decoding at least one of a pre-processed audio signal and a voice signal using at least one of the first signal processing modules provided in the first decoding module. These modules perform signal processing necessary for decoding a signal and signal processing necessary for an audio signal, respectively.
  • the present invention it is possible to reduce the time, cost and effort required to develop redundant modules.
  • the addition of a simple module enables decoding of audio / voice signals in a new format, thus allowing more flexibility in responding to a variety of audio / voice signals.
  • FIG. 1 is a block diagram of an audio decoding apparatus according to an embodiment of the present invention.
  • FIG. 2 is a view showing in detail the audio decoding device shown in FIG. 1;
  • FIG. 3 is a flowchart provided to explain an audio decoding method according to another embodiment of the present invention.
  • FIG. 4 is a diagram illustrating an audio decoding device implemented to decode an actual audio signal
  • FIG. 5 is a diagram illustrating in detail a process of decoding an audio signal of MPEG-Layer III format by the audio decoding apparatus shown in FIG. 4;
  • FIG. 6 is a diagram illustrating in detail a process of decoding an audio signal of MPEG-BSAC format by the audio decoding apparatus shown in FIG. 4;
  • FIG. 7 is a diagram illustrating in detail a process of decoding an audio signal of MPEG2-AAC format by the audio decoding apparatus shown in FIG. 4;
  • FIG. 8 is a diagram illustrating in detail a process of decoding an audio signal of MPEG4-AAC format by the audio decoding apparatus shown in FIG. 4;
  • FIG. 9 is a diagram illustrating in detail a process of decoding an audio signal of MPEG4-AAC v1 format by the audio decoding apparatus shown in FIG. 4;
  • FIG. 10 is a detailed diagram illustrating a process of decoding an audio signal of MPEG4-AAC v2 format by the audio decoding apparatus shown in FIG. 4;
  • FIG. 11 is a diagram illustrating in detail a process of decoding an audio signal of MPEG4-SLS format by the audio decoding apparatus shown in FIG. 4;
  • FIG. 12 is a block diagram of an audio decoding apparatus according to another embodiment of the present invention.
  • FIG. 13 is a diagram showing in detail the voice decoding device shown in FIG. 12; FIG.
  • 15 is a diagram illustrating a speech decoding apparatus implemented to decode an actual speech signal
  • FIG. 16 is a diagram illustrating a process of decoding a voice signal of MPEG4-ALS format by the voice decoding apparatus shown in FIG. 15 in detail;
  • FIG. 17 is a diagram illustrating in detail a process of decoding a G.729 format audio signal by the voice decoding apparatus shown in FIG. 15;
  • FIG. 18 is a diagram illustrating in detail a process of decoding a voice signal in AMR-WB format by the voice decoding apparatus shown in FIG. 15;
  • FIG. 19 is a block diagram of an audio / audio decoding device according to another embodiment of the present invention.
  • FIG. 20 is a view showing in more detail the audio / audio decoding device shown in FIG. 19;
  • 21 is a flowchart provided to explain an audio / audio decoding method according to another embodiment of the present invention.
  • 22 is a diagram illustrating an audio / audio decoding device implemented to decode an actual audio / audio signal
  • FIG. 23 is a diagram illustrating a process of decoding an audio signal of a G.729.EV format by the audio / audio decoding apparatus shown in FIG. 22;
  • FIG. 24 is a diagram illustrating an audio decoding device according to another embodiment of the present invention.
  • FIG. 25 is a view showing in detail the audio decoding device shown in FIG. 24, and
  • 26 is a block diagram of a sound output device according to another embodiment of the present invention.
  • the audio decoding apparatus is a device that outputs a decompressed audio signal by decoding an input compressed audio signal.
  • the audio decoding apparatus includes an analyzer 110, a preprocessor 120, and an audio decoder 130.
  • the analyzer 110 analyzes the input compressed audio signal, that is, the audio signal to be decoded, and determines the format of the audio signal.
  • the analyzer 110 controls the preprocessing process of the preprocessor 120 and the decoding process of the audio decoder 130, which will be described later, based on the format of the audio signal. Detailed description of the contents of the analysis unit 110 to control them will be described later.
  • the preprocessor 120 performs pre-processing on the compressed audio signal output from the analyzer 110.
  • the preprocessing is a signal processing to be performed before the decoding in the audio decoding unit 130 is processed, and includes signal processing such as inverse quantization processing, signal amplification, and signal adjustment.
  • the audio decoder 130 decodes the audio signal preprocessed by the preprocessor 120. As a result, the audio decoder 130 outputs the decompressed audio signal.
  • the audio decoder 130 that performs the above function includes a shared audio decoding module 131 and a selective audio decoding module 132.
  • Both of the common audio decoding module 131 and the selective audio decoding module 132 are modules that perform signal processing necessary for decoding the compressed audio signal.
  • the shared audio decoding module 131 is a module that performs signal processing on all audio signals of different formats, whereas the selective audio decoding module 132 selectively performs signal processing according to the format of the audio signal.
  • the two are different in that they are modules (that may or may not perform further signal processing, depending on the format of the audio signal).
  • FIG. 2 is a diagram showing the audio decoding device shown in FIG. 1 in more detail.
  • the preprocessor 120 includes L preprocessor modules 120-1 to 120-L, and 2) the shared audio decoding module 131 processes M shared audio signals.
  • the selection audio decoding module 132 includes N selection audio signal processing modules 132-1 to 132-N.
  • the L preprocessing modules 120-1 to 120-L provided in the preprocessor 120 are in charge of preprocessing audio signals of different formats.
  • the first preprocessing module 120-1 is responsible for preprocessing the audio signals of the first format and the second format
  • the second preprocessing module 120-2 is the third format and the third format. It is responsible for preprocessing audio signals of four formats
  • the third preprocessing module 120-3 may be responsible for preprocessing audio signals of a fifth format.
  • the analyzer 110 controls the preprocessing process of the preprocessor 120 based on the format of the input compressed audio signal. This means that the analysis unit 110 delivers the compressed audio signal having the recognized format to the corresponding preprocessing module.
  • the analyzer 110 transmits the input audio signal of the second format to the first preprocessing module 120-1.
  • the M shared audio signal processing modules 131-1 to 131-M included in the shared audio decoding module 131 are modules that perform signal processing required for decoding the input audio signal. Which of the M shared audio signal processing modules 131-1 to 131-M performs signal processing differs depending on the format of the audio signal.
  • the signal processing performed by the first shared audio signal processing module 131-1 and the second shared audio signal processing module 131-2 is required, while the second format is used.
  • the signal processing performed by the first shared audio signal processing module 131-1, the second shared audio signal processing module 131-2, and the third shared audio signal processing module 131-3 is performed. It may be necessary.
  • the N selection audio signal processing modules 132-1 to 132-N included in the selection audio decoding module 132 are modules that perform signal processing required for decoding the input audio signal. Depending on the format of the audio signal, there are some formats that require signal processing by at least one of the N selection audio signal processing modules 132-1 to 132-N included in the selection audio decoding module 132. There is also a format.
  • the signal processing performed by the N selected audio signal processing modules 132-1 to 132-N is not necessary when decoding the audio signal in the first format, whereas when decoding the audio signal in the second format, the signal processing is performed.
  • Signal processing performed by the first selection audio signal processing module 132-1 and the second selection audio signal processing module 132-2 may be required.
  • the analyzer 110 has been described above to control the decoding process of the audio decoder 130, based on the compressed audio signal format. This is because the analysis unit 110 determines the signal processings required for the compressed audio signal having the format determined, and then the shared audio decoding module 131 provided in the decoder 131 to perform the determined signal processings in order. And control the optional audio decoding module 132.
  • the input compressed audio signal is found to be the first format, and the audio signal of the first format is " signal processing which is handled by the first shared audio signal processing module 131-1 ⁇ second shared audio signal processing. If it is assumed that the module 131-2 is decoded through "signal processing in charge", the analysis unit 110 indicates that the audio signal of the first format pre-processed in the first preprocessing module 120-1 is described in "to".
  • the shared audio decoding module 131 is controlled to be signal processed in order, and the selective audio decoding module 132 is controlled not to perform signal processing.
  • the input compressed audio signal is found to be the first format
  • the audio signal of the first format is " signal processing which is handled by the first shared audio signal processing module 131-1 ⁇ the second shared audio signal processing module.
  • Signal processing in charge of (131-2) ⁇ signal processing in charge of the first selection audio signal processing module 132-1 ⁇ signal processing in charge of the third shared audio signal processing module 131-3 ⁇ second selection
  • the analyzer 110 may determine that the audio signal of the first format pre-processed by the first preprocessing module 120-1 is above.
  • the shared audio decoding module 131 and the selected audio decoding module 132 are controlled to signal the signals in the order described in the following.
  • the selective audio decoding module 132 may be designed to perform signal processing necessary for decoding audio signals of a specific format that cannot be performed by the shared audio decoding module 131.
  • 3 shows an audio decoding process described so far. 3 is a flowchart provided to explain an audio decoding method according to another embodiment of the present invention.
  • the analyzer 110 analyzes an input compressed audio signal, that is, an audio signal to be decoded, and determines a format of an audio signal (S210).
  • the preprocessor 120 performs preprocessing on the compressed audio signal under the control of the analyzer 120 (S220).
  • the audio decoder 130 decodes the audio signal preprocessed in step S420 (S230).
  • FIG. 4 an audio decoding apparatus implemented to decode an actual audio signal using the concept of the audio decoding apparatus according to the embodiment described so far is illustrated.
  • the audio decoding apparatus shown in FIG. 4 includes 1) an audio signal in MPEG-Layer III format, 2) an audio signal in MPEG-BSAC format, 3) an audio signal in MPEG2-AAC format, and 4) an audio signal in MPEG4-AAC format. 5) an audio signal of the MPEG4-AAC v1 format, 6) an audio signal of the MPEG4-AAC v2 format, and 7) an audio signal of the MPEG4-SLS format.
  • the preprocessing unit 120 is provided with preprocessing modules-1, 2, and 3 (120-1, 120-2, and 120-3).
  • the preprocessing module-1 120-1 includes a Huffman Decoding (HD) 120-11 module, an Inverse Quantization (IQ) module 120-12, and a Rescaling (RS) module 120-13
  • the preprocessing module-2 120-2 includes an Arithmetic Decoding (AD) module 120-21, an Inverse Quantization (IQ) module 120-22, and a Rescaling (RS) module 120-23
  • the preprocessing module-3 (120-3) includes a Huffman Decoding (HD) module 120-31, an Inverse Quantization (IQ) module 120-32, a Rescaling (RS) module 120-33, and BPGC / CBAC.
  • a BPGC / CBAC-Decoding (D) module 120-34 and a Low Energy Mode Decoding (LEMD) module 120-35 are provided.
  • the shared audio decoding module 131 is a shared audio signal processing module, which includes 1) MSS (Mid Side) module 131-1, 2) Intensity Stereo (IS) module 131-2, 3) PNS (Perceptual) Noise Substitution (131-3), 4) Temporal Noise Shaping (TNS) module 131-4, and 5) Integer Modified Discrete Cosine Transform (IMDCT) module 131-5.
  • MSS Mobile Side
  • IS Intensity Stereo
  • PNS Personal Noise Substitution
  • TMS Temporal Noise Shaping
  • IMDCT Integer Modified Discrete Cosine Transform
  • the selective audio decoding module 132 is a selective audio signal processing module, which includes: 1) Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module 132-1, and 2) BSAC-Gain Control (BSAC-GC) module.
  • QMF-SF Quadrature Mirror Filtering-Synthesis Filtering
  • BSAC-GC BSAC-Gain Control
  • the SBR module 132-8 includes a Spectral Band Replication-Decoding (SBR-D) module, a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module, and a Quadrature Mirror Filtering-Analysis Filtering (QMF-AF) module.
  • SBR-D Spectral Band Replication-Decoding
  • QMF-SF Quadrature Mirror Filtering-Synthesis Filtering
  • QMF-AF Quadrature Mirror Filtering-Analysis Filtering
  • FIG. 5 is a diagram illustrating a process of decoding an audio signal of MPEG-Layer III format by the audio decoding apparatus shown in FIG. 4 in detail.
  • the audio signal of the MPEG-Layer III format is first preprocessed by the preprocessing module-1 120-1. That is, the MPEG-Layer III format audio signal is Huffman decoded in the HD 120-11 module, inverse quantized in the IQ module 120-12, and rescaled in the RS module 120-13.
  • the preprocessed audio signal is signal-processed in the MSS module 131-1, signal-processed in the IS module 131-2, and then IMDCT in the IMDCT module 131-5, and the QMF-SF module 132. QMF-SF in -1).
  • the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
  • FIG. 6 is a diagram illustrating a process of decoding an audio signal of MPEG-BSAC format by the audio decoding apparatus shown in FIG. 4 in detail.
  • the audio signal of the MPEG-BSAC format is preprocessed by the preprocessing module-2 120-2. That is, the audio signal of the MPEG-BSAC format is signal processed by the AD modules 120-21, inverse quantized by the IQ modules 120-22, and then rescaled by the RS modules 120-23.
  • the preprocessed audio signal is signal-processed by the MSS module 131-1, PNS-processed by the PNS module 131-3, and then signal-processed by the IS module 131-2, and the TNS module 131-.
  • IMDCT is performed in the IMDCT module 131-5, and BSAC-GC processing is performed in the BSAC-GC module 132-2.
  • the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
  • FIG. 7 is a diagram illustrating a process of decoding an audio signal of MPEG2-AAC format by the audio decoding apparatus shown in FIG. 4 in detail.
  • the audio signal of the MPEG2-AAC format is preprocessed by the preprocessing module-1 120-1. That is, the MPEG-Layer III format audio signal is Huffman decoded in the HD 120-11 module, inverse quantized in the IQ module 120-12, and rescaled in the RS module 120-13.
  • the preprocessed audio signal is signal processed by the MSS module 131-1, prediction decoded by the PD module 132-3, and then signal processed by the IS module 131-2.
  • DSC treatment is performed at 132-4.
  • the pre-processed audio signal is TNS-processed in the TNS module 131-4, DSC-processed in the second DSC module 132-5, and then IMDCT in the IMDCT module 131-5, and the AAC-GC module.
  • ISC processing is performed at ISC module 132-7.
  • the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
  • FIG. 8 is a diagram illustrating a process of decoding an audio signal of MPEG4-AAC format by the audio decoding apparatus shown in FIG. 4 in detail.
  • the audio signal of the MPEG4-AAC format is preprocessed by the preprocessing module-1 120-1. That is, the audio signal of the MPEG4-AAC format is Huffman decoded in the HD 120-11 module, inverse quantized in the IQ module 120-12, and then rescaled in the RS module 120-13.
  • the preprocessed audio signal is signal processed by the MSS module 131-1, PNS processed by the PNS module 131-3, and then signal processed by the IS module 131-2. DSC 132-4).
  • the pre-processed audio signal is TNS-processed in the TNS module 131-4, DSC-processed in the second DSC module 132-5, and then IMDCT in the IMDCT module 131-5, and the AAC-GC module.
  • ISC processing is performed at ISC module 132-7.
  • the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
  • FIG. 9 is a diagram illustrating a process of decoding an audio signal of MPEG4-AAC v1 format by the audio decoding apparatus of FIG. 4 in detail.
  • the audio signal of the MPEG4-AAC v1 format is preprocessed by the preprocessing module-1 120-1. That is, the audio signal of the MPEG4-AAC v1 format is Huffman decoded in the HD 120-11 module, inverse quantized in the IQ module 120-12, and then rescaled in the RS module 120-13.
  • the preprocessed audio signal is signal-processed by the MSS module 131-1, PNS-processed by the PNS module 131-3, and then signal-processed by the IS module 131-2.
  • the TNS processing is performed at the TNS module 131-4.
  • IMDCT is performed in the IMDCT module 131-5, and AAC-GC processed in the AAC-GC module 132-6.
  • ISC processing is performed at the ISC module 132-7 and SBR processing is performed at the SBR module 132-8.
  • the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
  • FIG. 10 is a detailed diagram illustrating a process of decoding an audio signal of MPEG4-AAC v2 format by the audio decoding apparatus shown in FIG. 4.
  • the audio signal of the MPEG4-AAC v2 format is preprocessed by the preprocessing module-1 120-1. That is, the MPEG4-AAC v2 format audio signal is Huffman decoded in the HD 120-11 module, inverse quantized in the IQ module 120-12, and rescaled in the RS module 120-13.
  • the preprocessed audio signal is signal-processed by the MSS module 131-1, PNS-processed by the PNS module 131-3, and then signal-processed by the IS module 131-2.
  • the TNS processing is performed at the TNS module 131-4.
  • IMDCT is performed in the IMDCT module 131-5, and AAC-GC processed in the AAC-GC module 132-6.
  • ISC processing is performed in the ISC module 132-7.
  • the preprocessed audio signal is subjected to SBR processing in the SBR module 132-8 and PS processing in the PS module 132-9.
  • the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
  • FIG. 11 is a diagram illustrating a process of decoding an audio signal of MPEG4-SLS format by the audio decoding apparatus of FIG. 4 in detail.
  • the audio signal of the MPEG4-SLS format is preprocessed by the preprocessing module-3 120-3. That is, the audio signal of the MPEG4-SLS format is Huffman decoded in the HD 120-31 module, inverse quantized in the IQ module 120-32, rescaled in the RS module 120-33, and BPGC / CBAC-. After the BPGC / CBAC-Decoding process is performed in the D module 120-34, the LEMD process is performed in the LEMD module 120-35.
  • the pre-processed audio signal is IEM processed in the IEM module 132-10, MSS processed in the MSS module 131-1, and then TNS processed in the TNS module 131-4, and IIMDCT module 132- 11) becomes IIMDCT.
  • the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
  • the audio decoding apparatus that exemplifies and decodes audio signals of a specific format has been described in detail.
  • the formats of the audio signal mentioned herein are merely examples for convenience of description. Therefore, it is a matter of course that an audio decoding device capable of decoding audio signals of other formats can be implemented.
  • the necessary preprocessing module is added to the preprocessor 120
  • the necessary shared audio signal processing module is added to the shared audio decoding module 131
  • the required selective audio signal processing module is added to the selection audio decoding module 132. Just do it.
  • the voice decoding device is a device that outputs a decompressed voice signal by decoding the compressed speech signal.
  • Speech signals have a narrower band than audio signals. That is, the band of the voice signal corresponds to the low band portion of the audio signal.
  • the speech decoding apparatus includes an analyzer 310, a preprocessor 320, and a speech decoder 330.
  • the analyzer 310 analyzes an input compressed voice signal, that is, a voice signal to be decoded, and determines a format of the voice signal.
  • the analysis unit 310 controls the preprocessing process of the preprocessor 320 and the decoding process of the voice decoder 330, which will be described later, on the basis of the recognized format of the voice signal. Detailed description of the contents of the analysis unit 310 to control them will be described later.
  • the preprocessor 320 performs pre-processing on the compressed voice signal output from the analyzer 310.
  • the preprocessing is a signal processing that must be performed before the decoding in the audio decoding unit 330 is processed, and includes signal processing such as inverse quantization processing, signal amplification, and signal adjustment.
  • the speech decoder 330 decodes the speech signal preprocessed by the preprocessor 320. As a result, the speech decoder 330 outputs the decompressed speech signal.
  • the voice decoding unit 330 that performs the above function includes a shared voice decoding module 331 and a selected voice decoding module 332.
  • Both of the common voice decoding module 331 and the selected voice decoding module 332 are modules that perform signal processing necessary for decoding the compressed voice signal.
  • the shared speech decoding module 331 is a module that performs signal processing on all of the speech signals of different formats, whereas the selective speech decoding module 332 selectively performs signal processing according to the format of the speech signal. Both differ in that they are modules (that may or may not perform further signal processing, depending on the format of the voice signal).
  • FIG. 13 is a diagram showing the voice decoding device shown in FIG. 12 in more detail.
  • the preprocessor 320 includes L preprocessing modules 320-1 to 320 -L
  • the shared voice decoding module 331 processes M shared voice signals.
  • Modules 331-1 to 331-M, and 3) the selected speech decoding module 332 includes N selected speech signal processing modules 332-1 to 332-N.
  • the L preprocessing modules 320-1 to 320 -L provided in the preprocessor 320 are in charge of preprocessing voice signals of different formats.
  • the first preprocessing module 320-1 is responsible for preprocessing the audio signals of the first format and the second format
  • the second preprocessing module 320-2 is the third format and the third format. It is responsible for preprocessing the audio signal of the 4 format
  • the third preprocessing module 320-3 may be responsible for the preprocessing for the audio signal of the fifth format.
  • the analyzer 310 controls the preprocessing process of the preprocessor 320 based on the compressed audio signal format. This means that the analysis unit 310 delivers the compressed voice signal having the recognized format to the corresponding preprocessing module.
  • the analyzer 310 transmits the input second voice signal to the first preprocessing module 320-1.
  • the M shared voice signal processing modules 331-1 to 331 -M included in the shared voice decoding module 331 are modules that perform signal processing required for decoding the input voice signal. Which of the M shared voice signal processing modules 331-1 to 331 -M performs signal processing differs depending on the format of the voice signal.
  • the first shared voice signal processing module 331-1 and the second shared voice signal processing module 331-2 are required, while the second format is used.
  • signal processing performed by the first shared voice signal processing module 331-1, the second shared voice signal processing module 331-2, and the third shared voice signal processing module 331-3 is performed. It may be necessary.
  • the N number of selected voice signal processing modules 332-1 to 332-N included in the selected voice decoding module 332 are modules that perform signal processing required for decoding the input voice signal. Depending on the format of the audio signal, there are some formats that require signal processing by at least one of the N selected speech signal processing modules 332-1 to 332-N included in the selected speech decoding module 332. There is also a format.
  • the signal processing performed by the N selected voice signal processing modules 332-1 to 332-N is not necessary when decoding the voice signal of the first format, whereas when decoding the voice signal of the second format, Signal processing performed by the first selective voice signal processing module 332-1 and the second selective voice signal processing module 332-2 may be required.
  • the analyzer 310 has been described above to control the decoding process of the speech decoder 330 based on the compressed voice signal format. This is because the analysis unit 310 determines the signal processings required for the compressed speech signal having the format determined, and then the shared speech decoding module 331 provided in the decoder 331 to perform the determined signal processings in order. And control the selective speech decoding module 332.
  • the input compressed voice signal is found in the first format, and the voice signal of the first format is " signal processing performed by the first shared voice signal processing module 331-1 ⁇ second shared voice signal processing. If it is assumed that the module 331-2 is decoded through "signal processing in charge", the analyzer 310 may determine that the voice signal of the first format preprocessed by the first preprocessing module 320-1 is described in " ⁇ ".
  • the shared voice decoding module 331 is controlled to be signal processed in order, and the selected voice decoding module 332 is controlled not to perform signal processing.
  • the input compressed voice signal is found to be the first format, and the voice signal of the first format is " signal processing performed by the first shared voice signal processing module 331-1 ⁇ the second shared voice signal processing module. Signal processing in charge of 331-2 ⁇ Signal processing in charge of first selection voice signal processing module 332-1 ⁇ Signal processing in charge of third shared voice signal processing module 331-3 ⁇ Second selection If it is assumed that the audio signal processing module 332-3 is decoded through the signal processing that is in charge, the analysis unit 310 may determine that the voice signal of the first format preprocessed by the first preprocessing module 320-1 is " ⁇ ". The shared voice decoding module 331 and the selected voice decoding module 332 are controlled so as to process the signals in the order described.
  • the selected voice decoding module 332 may be designed to perform signal processing necessary for decoding voice signals of a specific format that cannot be performed by the shared voice decoding module 331.
  • 14 shows a voice decoding process described so far. 14 is a flowchart provided to explain a voice decoding method according to another embodiment of the present invention.
  • the analysis unit 310 analyzes an input compressed voice signal, that is, a voice signal to be decoded to determine a format of a voice signal (S410).
  • the preprocessor 320 performs preprocessing on the compressed voice signal under the control of the analyzer 320 (S420).
  • the voice decoder 330 decodes the preprocessed voice signal in step S420 (S430).
  • step S430 necessary signal processing among signal processings performed by the shared voice decoding module 331 and signal processings performed by the selected voice decoding module 332 is performed in order for the preprocessed voice signal.
  • the necessary signal processings and their order are described above by referring to the format of the compressed voice signal, and determined by the analyzer 310.
  • FIG. 15 illustrates a voice decoding device implemented to decode an actual voice signal using the concept of the voice decoding device according to the above-described embodiment.
  • the audio decoding apparatus shown in FIG. 15 may perform decoding on 1) an audio signal of MPEG4-ALS format, 2) an audio signal of G.729 format, and 3) an audio signal of AMR-WB format.
  • the preprocessor 320 is provided with preprocessing modules-1, 2, and 3 (320-1, 320-2, and 320-3).
  • the preprocessing module-1 320-1 is an Entropy Decoding (ED) module 320-1
  • the preprocessing module-2 320-2 is a Decode Adaptive Code Vector (DACV) module 320-21.
  • ED Entropy Decoding
  • DAV Decode Adaptive Code Vector
  • Decode Gain (DG) module (320-22), Decode Fixed Code Vector (DFCV) module (320-23), and Decode-LSP (320-24) module (D-LSP); 3 (320-3) includes the Decode Adaptive Code Vector (DACV) module 320-31, the Decode Gain (DGV) module 320-32, the Decode innovative Code Vector (DICV) module 320-33, and the D-LSP.
  • Decode-LSP (Decode-LSP) modules 320-34 and GS (Gain Scaling) modules 320-35.
  • the shared speech decoding module 331 is a shared speech signal processing module, which includes 1) a CE (Construct Excitation) module 331-1 and 2) a FIR-F (FIR Filtering) module 331-2.
  • the FIR-F module 331-2 includes 21) HB-Synthesis Filtering (HB-SF) modules 331-21, 22) PF (Post Filtering) modules 331-22, and 23) WF (Weighting).
  • STP Short Term Prediction
  • BPF BP Filtering
  • API Adaptive Post Filtering
  • QMF-SF Quadrature Mirror Filtering-Synthesis Filtering
  • the selected voice decoding module 332 is a selected voice signal processing module, which includes 1) Joint Channel Decoding (JCD) module 332-1, 2) Long Term Prediction (LTP) module 332-2, and 3) CLPC. (Conversion to LPC) module (332-3), 4) HP & US (High Pass & UpScaling) module (332-4), 5) LTP-F (LTP-Filtering) module (332-5), 6) PP (Post) Processing (module) 332-6, 7) DE (DeEmphasis) module 332-7, and 8) US (UpSampling) module 332-8.
  • JCD Joint Channel Decoding
  • LTP Long Term Prediction
  • FIG. 16 is a diagram illustrating a process of decoding a voice signal of MPEG4-ALS format by the voice decoding apparatus shown in FIG. 15 in detail.
  • the audio signal of the MPEG4-ALS format is first preprocessed by the preprocessing module-1 320-1. That is, the audio signal of the MPEG4-ALS format is encoded in the ED module 320-1.
  • the preprocessed voice signal is JCD processed in the JCD module 332-1, LTP processed in the LTP module 332-2, and then signal processed in the FIR-F module 331-2.
  • the preprocessed voice signal is signal processed by the STP module 331-24 provided in the FIR-F module 331-2.
  • the speech signal is decompressed, and the speech decoder 330 outputs the decompressed speech signal.
  • FIG. 17 is a diagram illustrating a process of decoding a voice signal of G.729 format by the voice decoding apparatus shown in FIG. 15 in detail.
  • the voice signal of the G.729 format is first preprocessed by the preprocessing module-2 320-2. That is, the G.729 format audio signal includes the DACV module 320-21, the DG module 320-22, the DFCV module 320-23, and the D-LSP module provided in the preprocessing module-2 320-2. 320-24).
  • the outputs of the DACV module 320-21, the DG module 320-22, and the DFCV module 320-23 are signal processed by the CE module 331-1, and the output of the D-LSP module 320-24 is determined.
  • the output is signaled at the CLPC module 332-3.
  • the output of the CE module 331-1 and the output of the CLPC module 332-3 are signal processed by the FIR-F module 331-2. Specifically, these are signal processed by the PF modules 331-22 and STP modules 331-24 provided in the FIR-F module 331-2. Thereafter, the output of the FIR-F module 331-2 is signal processed by the HP & US module 332-4.
  • the speech signal is decompressed, and the speech decoder 330 outputs the decompressed speech signal.
  • FIG. 18 is a diagram illustrating a process of decoding a voice signal in AMR-WB format by the voice decoding apparatus shown in FIG. 15 in detail.
  • the audio signal of the AMR-WB format is first preprocessed by the preprocessing module-3 320-3. That is, the AMR-WB format voice signal includes the DACV module 320-31, the DG module 320-32, the DICV module 320-33, and the D-LSP module provided in the preprocessing module-3 (320-3). 320-34) and GS modules 320-35.
  • the outputs of the DACV modules 320-31 are signal processed by the LTP-F module 332-5 and the CE module 331-1, and are output from the DG modules 320-32 and the DICV modules 320-33.
  • the output is signaled at the CE module 331-1
  • the output of the D-LSP module 320-34 is signaled at the CLPC module 332-3
  • the output of the GS module 320-35 is a PP module. Signal processing at 332-6.
  • outputs of the GS module 320-35, the CE module 331-1, the CLPC module 332-3, and the PP module 332-6 are signal processed by the FIR-F module 331-2. Specifically, they are the HB-SF module 331-21, the PF module 331-22, the BPF module 331-25 and the QMF-SF module 331-27 provided in the FIR-F module 331-2. Signal processing.
  • the output of the FIR-F module 331-2 is signal-processed in the DE module 332-7 and then signal-processed in the US module 332-8.
  • the speech signal is decompressed, and the speech decoder 330 outputs the decompressed speech signal.
  • the necessary preprocessing module is added to the preprocessor 320, the necessary shared voice signal processing module is added to the shared voice decoding module 331, and the required selective voice signal processing module is added to the selected voice decoding module 332. Just do it.
  • An audio / audio decoding device is a device that decodes a compressed audio signal and / or a voice signal and outputs a decompressed audio signal and / or a voice signal.
  • the audio / audio decoding apparatus includes an analyzer 510, a preprocessor 520, and an audio / audio decoder 530.
  • the analyzer 510 analyzes the input compressed audio signal and / or voice signal, that is, the audio signal and / or voice signal to be decoded to determine the format of the signal.
  • the analyzer 510 controls a preprocessing process of the preprocessor 520 and a decoding process of the audio / audio decoder 530, which will be described later, based on the identified signal format. Details of the contents of the analysis unit 510 controlling them will be described later.
  • the preprocessor 520 performs pre-processing on the compressed audio signal and / or the voice signal output from the analyzer 510.
  • the preprocessing is signal processing to be performed first before the decoding in the audio / voice decoding unit 530 is processed, and includes signal processing such as inverse quantization processing, signal amplification, and signal adjustment.
  • the audio / audio decoder 530 decodes the signal preprocessed by the preprocessor 520. As a result, the audio / audio decoder 530 outputs the decompressed audio signal and / or the audio signal.
  • the audio / audio decoding unit 530 that performs the above function includes a shared audio decoding module 531, a shared voice decoding module 532, and a selective decoding module 533.
  • the shared audio decoding module 531 is a module which performs signal processing on all audio signals of different formats
  • the shared voice decoding module 532 is a module which performs signal processing on all audio signals of different formats. to be.
  • the shared audio decoding module 531 may be involved in the decoding of the audio signal, and likewise, the shared audio decoding module 532 may be involved in the decoding of the audio signal.
  • the selective decoding module 533 is a module that selectively performs signal processing according to the format of the signal (that is, may or may not perform further signal processing depending on the format of the signal).
  • the preprocessor 520 includes L preprocessing modules 520-1 to 520 -L
  • the shared audio decoding module 531 processes P shared audio signals.
  • the module 533 includes Q selective audio / audio signal processing modules 533-1 to 533-Q.
  • the L preprocessing modules 520-1 to 520-L included in the preprocessor 520 are in charge of preprocessing audio or voice signals of different formats.
  • the first preprocessing module 520-1 is responsible for preprocessing the signals of the first format and the second format
  • the second preprocessing module 520-2 is the third format and the fourth.
  • the third preprocessing module 520-3 may be responsible for preprocessing the signal of the fifth format.
  • the analyzer 510 controls the preprocessing process of the preprocessor 520 based on the format of the compressed audio signal and / or the voice signal. This means that the analysis unit 510 delivers the compressed audio signal and / or the voice signal having the recognized format to the corresponding preprocessing module.
  • the analyzer 510 transmits the received signal of the second format to the first preprocessing module 520-1.
  • the P shared audio signal processing modules 531-1 to 531-P provided in the shared audio decoding module 531 are modules which perform signal processing required for decoding the input audio signal. Which of the P shared audio signal processing modules 531-1 to 531 -P differs depending on the format of the audio signal.
  • the R shared voice signal processing modules 532-1 to 532-R included in the shared voice decoding module 532 are modules that perform signal processing required for decoding the input voice signal. Which of the R shared voice signal processing modules 532-1 to 532 -R differs depending on the format of the voice signal.
  • the Q selection signal processing modules 533-1 to 533-Q included in the selection decoding module 533 are modules which perform signal processing required for decoding the input signal. Depending on the signal format, some formats require signal processing by at least one of the Q selection signal processing modules 533-1 to 533-Q included in the selection decoding module 533, and some formats are not required. .
  • the shared audio signal processing modules 531-1 to 531 -P included in the shared audio decoding module 531 may perform signal processing required for decoding the input voice signal, and similarly, shared voice decoding.
  • the shared voice signal processing modules 532-1 to 532-R included in the module 532 may also perform signal processing required for decoding the input audio signal.
  • the first shared voice signal processing module 532-1, the second shared voice signal processing module 532-2, and the first shared audio signal processing module 531-1 are used. And signal processing performed by the first selection signal processing module 533-1.
  • signal processing performed by the first shared audio signal processing module 531-1 and the first shared voice signal processing module 532-1 may be required.
  • the analyzer 510 controls the decoding process of the audio / audio decoder 530 based on the compressed signal format. This is because the analysis unit 510 determines the signal processings required for the compressed signal whose format is known, and then the shared audio decoding module provided in the audio / audio decoding unit 530 to perform the determined signal processings in order. 531, the shared voice decoding module 532, and the selective decoding module 533.
  • the signal of the first format is " signal processing performed by the first shared audio signal processing module 531-1 > Signal processing performed by the module 532-1 ⁇ Signal processing performed by the second shared voice signal processing module 532-2 ⁇ Signal processing performed by the first selective signal processing module 533-1 " If it is assumed that the analysis unit 510 is a shared audio decoding module 531, the shared voice so that the first format pre-processed voice signal in the first pre-processing module 520-1 is signal-processed in the order described in the " ⁇ " The decoding module 532 and the selective decoding module 533 are controlled.
  • the selective decoding module 533 may be designed to perform signal processing that cannot be performed by the shared audio decoding module 531 and the shared voice decoding module 532.
  • the selective decoding module 533 may be used. It is possible to change or add a module necessary for decoding.
  • 21 shows an audio / audio decoding process described so far. 21 is a flowchart provided to explain an audio / audio decoding method according to another embodiment of the present invention.
  • the analyzer 510 analyzes an input compressed audio signal and / or a voice signal, that is, an audio signal and / or a voice signal to be decoded to determine a format of a signal (S610). .
  • the preprocessor 520 performs preprocessing on the compressed audio signal and / or the voice signal under the control of the analyzer 520 (S620).
  • the audio / audio decoding unit 530 decodes the pre-processed audio signal and / or voice signal in step S620 (S630).
  • step S630 the signal processing in charge of the shared audio decoding module 531, the signal processing in charge of the shared voice decoding module 532 and the selective decoding module (for the pre-processed audio signal and / or voice signal)
  • the necessary signal processings among the signal processings in charge of 533) are performed in order.
  • the necessary signal processings and their order are described above by referring to the format of the compressed audio signal and / or the voice signal, and determined by the analyzer 510.
  • FIG. 22 illustrates an audio / audio decoding device implemented to decode an actual audio / audio signal using the concept of the audio / audio decoding device according to the embodiment described so far.
  • the preprocessor 520 is provided with a preprocessing module-1 520-1.
  • the preprocessing module-1 520-1 includes a decode adaptive code vector (DACV) module 520-11, a decode gain (DGV) module 520-12, a decode fixed code vector (DFCV) module 520-13, And a Decode-LSP (D-LSP) module 520-14, a TDAC-Decoding (TDAC-D) module 520-15, and a TDBWE-Decoding (TDBWE-D) module 520-15.
  • DACV decode adaptive code vector
  • DDV decode fixed code vector
  • D-LSP Decode-LSP
  • TDAC-D TDAC-Decoding
  • TDBWE-Decoding TDBWE-Decoding
  • the shared audio decoding module 531 is a shared audio signal processing module, which includes 1) MSS (Mid Side Stereo) module 531-1, 2) IS (Intensity Stereo) module 531-2, 3) PNS ( Perceptual Noise Substitution (531-3) module, 4) Temporal Noise Shaping (TNS) module 531-4, and 5) Integer Modified Discrete Cosine Transform (IMDCT) module 531-5.
  • MSS Mobile Side Stereo
  • IS Intensity Stereo
  • PNS Perceptual Noise Substitution
  • TMS Temporal Noise Shaping
  • IMDCT Integer Modified Discrete Cosine Transform
  • the shared voice decoding module 532 is a shared voice signal processing module, which includes 1) a CE (Construct Excitation) module 532-1 and 2) a FIR-F (FIR Filtering) module 532-2.
  • the FIR-F module 532-2 includes 21) HB-Synthesis Filtering (532-21), 22) PF (Post Filtering) module 532-22, 23) WF (Weighting). Filtering (532-23), 24) Short Term Prediction (STP) module (532-24), 25) BPF (BP Filtering) module 532-25, 26) Adaptive Post Filtering (APF) module 532- 26) and 27) QMF-SF (Quadrature Mirror Filtering-Synthesis Filtering) modules 532-27.
  • STP Short Term Prediction
  • BPF BP Filtering
  • API Adaptive Post Filtering
  • QMF-SF Quadrature Mirror Filtering-Synthesis Filtering
  • the selection decoding module 533 is a selection signal processing module, 1) Modified Discrete Cosine Transform (MDCT) module 533-1, 2) Conversion to LPC (533-2) and 3) HP & US ( High Pass & UpScaling) module 533-3.
  • MDCT Modified Discrete Cosine Transform
  • LPC Low Pass & UpScaling
  • FIG. 23 is a diagram illustrating a process of decoding an audio signal of G.729.EV format by the audio / audio decoding apparatus shown in FIG. 22 in detail.
  • the voice signal of the G.729.EV format is first preprocessed by the preprocessing module-1 520-1. That is, the voice signal of the G.729.EV format includes the DACV module 520-11, the DG module 520-12, the DFCV module 520-13, and the D-LSP provided in the preprocessing module-1 520-1. Modules 520-14, TDAC-D (TDAC-Decoding) modules 520-15, and TDBWE-D (TDBWE-Decoding) modules 520-16.
  • the outputs of the DACV module 520-11, the DG module 520-12, and the DFCV module 520-13 are signaled by the CE module 532-1, and the output of the D-LSP module 520-14.
  • the output is signaled at the CLPC module 533-2.
  • the output of the TDAC-D module 520-15 is signal processed by the IMDCT module 531-5, and the output of the TDBWE-D module 520-16 is signal processed by the MDCT module 533-1. Applied to the TDAC-D module 520-15.
  • the output of the CE module 531-1 and the output of the CLPC module 533-2 are signal processed by the FIR-F module 532-2. Specifically, they are signal processed by the PF module 532-22, the WF module 532-23 and the QMF-SF module 532-27 provided in the FIR-F module 532-2. Thereafter, the output of the FIR-F module 532-2 is signaled at the HP & US module 533-3, and the output of the HP & US module 533-3 is signaled again at the FIR-F module 532-2. do.
  • the speech signal is decompressed, and the speech decoder 530 outputs the decompressed speech signal.
  • the audio / voice decoding apparatus capable of decoding the voice signal in the G.729.EV format has been described in detail.
  • the voice signals in the G.729.EV format mentioned here are merely examples for convenience of explanation. Therefore, it is a matter of course that an audio / audio decoding apparatus capable of decoding audio signals and / or voice signals of other formats can be implemented.
  • the necessary preprocessing module is added to the preprocessor 520, the necessary shared audio signal processing module is added to the shared audio decoding module 531, and the necessary shared voice signal processing module is added to the shared voice decoding module 532.
  • the necessary selection signal processing module may be added to the selection decoding module 533.
  • FIG. 24 is a diagram illustrating an audio / audio decoding device according to another embodiment of the present invention.
  • the audio / audio decoding apparatus includes an analyzer 710, a preprocessor 720, and an audio / audio decoder 730.
  • the analyzer 710 analyzes the input compressed audio signal and / or voice signal, that is, the audio signal to be decoded and / or the voice signal to determine the format of the audio signal and / or the voice signal.
  • the analyzer 710 controls a preprocessing process of the preprocessor 720 and a decoding process of the audio / audio decoder 730, which will be described later, based on the format of the audio signal and / or the audio signal. Details of the contents of the analysis unit 710 controlling them will be described later.
  • the preprocessor 720 performs pre-processing on the compressed audio signal and / or the voice signal output from the analyzer 710.
  • the preprocessing is signal processing that must be performed before the decoding in the audio / voice decoding unit 730 is processed, and includes signal processing such as inverse quantization processing, signal amplification, and signal adjustment.
  • the audio / audio decoding unit 730 includes a shared audio decoding module 731, a selective audio decoding module 732, a shared speech decoding module 733, and a selected speech decoding module 734.
  • the shared audio decoding module 731 and the selective audio decoding module 732 decode the audio signal received through the preprocessor 720.
  • the shared speech decoding module 733 and the selected speech decoding module 734 decode the speech signal received through the preprocessor 720.
  • the shared audio decoding module 731 and the selective audio decoding module 732 may be involved in decoding the audio signal.
  • the shared speech decoding module 733 and the selected speech decoding module 734 may also be involved in the decoding of the audio signal.
  • the shared audio decoding module 731 has P shared audio signal processing modules 731-1 to 731-P
  • the selected audio decoding module 732 has Q 3)
  • the shared voice decoding module 733 comprises R shared voice signal processing modules 733-1 through 733-R
  • the selected speech decoding module 734 may be confirmed to include S number of selected speech signal processing modules 734-1 to 734-S.
  • the P shared audio signal processing modules 731-1 to 731-P included in the shared audio decoding module 731 are modules that perform signal processing required for decoding the input audio signal. Which of the P shared audio signal processing modules 731-1 to 731 -P performs signal processing differs for each audio signal format.
  • the first shared audio signal processing module 731-1 and the second shared audio signal processing module 731-2 perform decoding on the audio signal of the two formats. Signal processing may be necessary.
  • the Q selective audio signal processing modules 732-1 to 732-Q included in the selective audio decoding module 732 are modules that perform signal processing required for decoding the input audio signal. Depending on the format of the audio signal, there are some formats that require signal processing by at least one of the Q selective audio signal processing modules 732-1 to 732-Q included in the selective audio decoding module 732. There is also a format.
  • the signal processing performed by the Q selective audio signal processing modules 732-1 to 732-Q is not necessary, while the audio signal of the second format is not required.
  • signal processing performed by the first selective audio signal processing module 732-1 and the second selective audio signal processing module 732-2 may be required.
  • the R shared voice signal processing modules 733-1 to 733-R included in the shared voice decoding module 733 are modules that perform signal processing required for decoding the input voice signal. Which of the R shared voice signal processing modules 733-1 to 733-R performs signal processing differs depending on the format of the audio signal.
  • the first shared voice signal processing module 733-1 and the second shared voice signal processing module 733-2 perform the decoding.
  • Signal processing may be necessary.
  • the S selected voice signal processing modules 734-1 to 734-S included in the selected voice decoding module 734 are modules that perform signal processing required for decoding the input voice signal. Depending on the format of the audio signal, there are some formats that require signal processing by at least one of the S selected speech signal processing modules 734-1 to 734-S included in the selective speech decoding module 734. There is also a format.
  • the signal processing performed by the S selected voice signal processing modules 734-1 to 734-S is not necessary, while the voice signal of the fourth format is not required.
  • Decoding may require signal processing performed by the first selective voice signal processing module 734-1 and the second selective voice signal processing module 734-2.
  • the shared audio signal processing module included in the shared audio decoding module 731 and the selected audio signal processing module included in the selective audio decoding module 732 may perform signal processing required for decoding of a voice signal.
  • the shared speech signal processing module included in the shared speech decoding module 733 and the selected speech signal processing module included in the selective speech decoding module 734 may also perform signal processing required for decoding the audio signal.
  • the analyzer 710 controls the decoding process of the audio / audio decoder 730 based on the compressed signal format.
  • the shared audio decoding module 731 provided in the decoding unit 731, so that the analysis unit 710 determines the signal processings required for the compressed signal having the format determined, and then performs the determined signal processings in order. This means controlling the selective audio decoding module 732, the shared speech decoding module 733, and the selective speech decoding module 734.
  • the input compressed signal is found to be an audio signal of the second format, and the audio signal of the second format is " signal processing ⁇ second shared audio which is handled by the first shared audio signal processing module 731-1.
  • Signal processing in charge of the signal processing module 731-2 ⁇ Signal processing in charge of the first selection audio signal processing module 732-1 ⁇ Signal processing in charge of the third shared audio signal processing module 731-3
  • the analyzing unit 710 may perform a shared audio decoding module such that the preprocessed audio signal is processed in the order described above. 731, the selection audio decoding module 732 is controlled.
  • the input compressed signal is found to be a speech signal of a fourth format
  • the speech signal of the fourth format is " signal processing ⁇ second shared speech signal which is handled by the first shared speech signal processing module 733-1.
  • Signal processing performed by the processing module 733-2 ⁇ Signal processing performed by the first selected voice signal processing module 734-1 ⁇ Signal processing performed by the third shared voice signal processing module 733-3
  • the analyzing unit 710 performs the shared speech decoding module 733 so that the signal processing is performed in the order described above. And select voice decoding module 734.
  • the input compressed signal is found to be a signal of a fifth format in which an audio signal and a voice signal are combined, and the audio signal is " signal processing performed by the first shared audio signal processing module 731-1.
  • Signal processing performed by the shared audio signal processing module 731-2 is decoded through signal processing performed by the first selected audio signal processing module 732-1, and the voice signal is " first shared voice signal processing module.
  • the analysis unit 710 controls and selects the shared audio decoding module 731 and the shared voice decoding module 733 so that the preprocessed audio signal and the voice signal are respectively signal processed in the order described in the above " ⁇ ". Audio Decoding Module 732 and Selective Voice No. module 734 is controlled not to perform signal processing.
  • the shared audio decoding module 731 and the shared voice decoding module 733 are integrated into one shared decoding module. It is possible to implement Similarly, in the audio / audio decoding unit 730, the selection audio decoding module 732 and the selection speech decoding module 734 may be integrated into one selection decoding module.
  • the decoding apparatus described so far assumes that the preprocessing procedure and the decoding procedure are controlled according to the format of the signal detected by the analysis unit. However, this is merely an example for convenience of description, and it is of course possible to implement other components by controlling the preprocessing procedure and the decoding procedure according to the format of the detected signal.
  • the selective audio decoding module is understood as a module having a selective audio signal processing module capable of performing signal processings which are required for decoding the audio signal but cannot be performed by the shared audio signal processing modules. Can be.
  • the selective speech decoding module may be understood as a module having a selective speech signal processing module capable of performing signal processing required for decoding of the speech signal but not shared speech signal processing modules.
  • the selection decoding module may include a selection signal processing module capable of performing signal processing necessary for decoding at least one of an audio signal and a voice signal, but which cannot be performed by the shared audio signal processing modules and the shared voice signal processing modules. It can be understood as a provided module.
  • FIG. 26 is a block diagram of a sound output device according to another embodiment of the present invention.
  • the sound output apparatus includes a receiver 810, a storage 820, a decoder 830, and an output unit 840.
  • the receiver 810 receives an audio signal and / or a voice signal from a connected external device or an external network.
  • the storage unit 820 is a recording medium in which an audio signal and / or an audio signal are stored.
  • the decoder 830 decodes the compressed audio signal and / or the voice signal received through the receiver 810 or stored in the storage 820, and outputs the decompressed audio signal and / or the voice signal.
  • the decoder 830 that performs the above functions may be implemented by the above-described audio / audio decoding device, voice decoding device, or audio / voice decoding device.
  • the output unit 840 outputs audio and / or voice corresponding to the audio signal and / or voice signal output from the decoder 830 so that the user can listen.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Stereophonic System (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)

Abstract

Provided are a decoding apparatus using a separate decoding module and an output apparatus adopting the same. The decoding apparatus according to the present invention comprises: a 1st audio decoding module which includes 1st audio signal processing modules; and a 1st voice decoding module that contains 1st voice signal processing modules, wherein the 1st audio signal processing modules and/or the 1st voice signal processing modules are used when processing an audio signal and/or a voice signal. Therefore, the invention is able to reduce the time, cost, and effort required for the development of overlapped modules.

Description

분리된 복호 모듈을 이용한 복호 장치 및 이를 적용한 사운드 출력 장치Decoding device using separate decoding module and sound output device using same
본 발명은 복호 장치 및 이를 적용한 사운드 출력 장치에 관한 것으로, 더욱 상세하게는 압축된 오디오/음성 신호를 복호하여 압축해제된 오디오/음성 신호를 생성하는 복호 장치 및 이를 적용한 사운드 출력 장치에 관한 것이다.The present invention relates to a decoding apparatus and a sound output apparatus using the same, and more particularly, to a decoding apparatus for decoding a compressed audio / audio signal to generate a decompressed audio / audio signal and a sound output apparatus using the same.
종래의 오디오 복호 장치는, 오디오 신호의 포맷 마다 복호를 담당하는 복호 모듈을 별개로 설계하고 있는데, 이는 오디오 신호의 포맷 마다 복호에 필요한 신호처리가 다르기 때문이다. 또한, 복호 모듈의 구조는 고정적이며, 복호 모듈은 하나의 포맷에 대해서만 복호 가능할 뿐이다. 즉, 여러 포맷의 오디오 신호에 대해 복호 모듈이 공유되는 것이 불가능하다.Conventional audio decoding apparatuses separately design a decoding module that performs decoding for each audio signal format because signal processing required for decoding differs for each audio signal format. In addition, the structure of the decoding module is fixed, and the decoding module can only decode one format. In other words, it is impossible for a decoding module to be shared for audio signals of various formats.
따라서, 새로운 포맷의 오디오 신호가 등장할 때마다, 그를 위한 복호 모듈을 별도로 개발 및 설계하여야 한다. 하지만, 복호 모듈의 개발과 설계는 매우 어려운 작업이다. 따라서, 종래의 방식에 따르면, 나날이 다양해지는 오디오 포맷의 변화에 보다 신속하고 경제적으로 대처할 수 없는 문제가 있다.Therefore, whenever a new format audio signal appears, a decoding module for it must be developed and designed separately. However, the development and design of the decoding module is a very difficult task. Therefore, according to the conventional method, there is a problem in that it is not possible to cope with the change in the audio format that is being varied day by day more quickly and economically.
그리고, 이와 같은 문제점은 음성 복호 장치의 경우에도 마찬가지이다.This problem also applies to the case of the audio decoding device.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은, 다양한 오디오/음성 신호 포맷의 변화에 대해, 보다 신속하고 경제적인 설계를 가능하게 하는 복호 장치 및 이를 적용한 사운드 출력 장치를 제공함에 있다.SUMMARY OF THE INVENTION The present invention has been made to solve the above problems, and an object of the present invention is to provide a decoding device and a sound output device using the same, which enables faster and more economical design for various audio / audio signal format changes. In providing.
상기 목적을 달성하기 위한 본 발명에 따른, 복호 장치는, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈;을 포함하고, 오디오 신호의 복호시에는 상기 제1 오디오 신호처리 모듈들 중 적어도 하나가 이용된다.In accordance with an aspect of the present invention, a decoding apparatus includes a first audio decoding module having first audio signal processing modules for performing signal processing necessary for decoding an audio signal, and decoding an audio signal. At least one of the first audio signal processing modules is used.
그리고, 본 발명에 따른 복호 장치는, 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈;을 포함하고, 음성 신호의 복호시에는 상기 제1 음성 신호처리 모듈들 중 적어도 하나가 이용된다.The decoding apparatus according to the present invention includes a first voice decoding module having first voice signal processing modules which respectively perform signal processing necessary for decoding a voice signal, wherein the first voice decoding module includes a first voice decoding module. At least one of the voice signal processing modules is used.
또한, 본 발명에 따른 복호 장치는, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈; 및 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈;을 포함하고, 오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 제1 오디오 신호처리 모듈들과 상기 제1 음성 신호처리 모듈들 중 적어도 하나가 이용된다.In addition, the decoding apparatus according to the present invention comprises: a first audio decoding module having first audio signal processing modules each performing signal processing required for decoding an audio signal; And a first voice decoding module having first voice signal processing modules for respectively performing signal processing necessary for decoding of a voice signal, wherein, when decoding at least one of an audio signal and a voice signal, the first audio signal is included. At least one of the processing modules and the first voice signal processing modules is used.
그리고, 본 발명에 따른 복호 장치는, 오디오 신호의 복호에 필요한 신호처리들 및 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 신호처리 모듈들을 구비한 제1 복호 모듈;을 포함하고, 오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 제1 신호처리 모듈들 중 적어도 하나가 이용된다.The decoding apparatus according to the present invention includes a first decoding module having first signal processing modules for performing signal processing for decoding an audio signal and signal processing for decoding an audio signal, respectively. In decoding at least one of a signal and an audio signal, at least one of the first signal processing modules is used.
또한, 본 발명에 따른 복호 장치는, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈; 및 복호될 오디오 신호의 포맷을 분석하고, 분석결과에 따라 상기 제1 오디오 신호처리 모듈들 중 적어도 하나에 의해 상기 복호될 오디오 신호가 신호처리되도록 제어하는 분석부;를 포함한다.In addition, the decoding apparatus according to the present invention comprises: a first audio decoding module having first audio signal processing modules each performing signal processing required for decoding an audio signal; And an analyzing unit for analyzing a format of the audio signal to be decoded and controlling the decoded audio signal to be processed by at least one of the first audio signal processing modules according to an analysis result.
그리고, 본 발명에 따른 복호 장치는, 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈; 및 복호될 음성 신호의 포맷을 분석하고, 분석결과에 따라 상기 제1 음성 신호처리 모듈들 중 적어도 하나에 의해 상기 복호될 음성 신호가 신호처리되도록 제어하는 분석부;를 포함한다.In addition, the decoding apparatus according to the present invention includes: a first voice decoding module having first voice signal processing modules which respectively perform signal processing necessary for decoding a voice signal; And an analyzer configured to analyze a format of a voice signal to be decoded and to control the decoded voice signal to be processed by at least one of the first voice signal processing modules according to an analysis result.
또한, 본 발명에 따른 복호 장치는, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈; 및 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈;를 포함하고, 오디오 신호 및 음성 신호 중 적어도 하나의 포맷을 분석하고, 분석결과에 따라 상기 제1 오디오 신호처리 모듈들과 상기 제1 음성 신호처리 모듈들 중 적어도 하나에 의해 상기 오디오 신호 및 음성 신호 중 적어도 하나가 신호처리되도록 제어하는 분석부;를 포함한다.In addition, the decoding apparatus according to the present invention comprises: a first audio decoding module having first audio signal processing modules each performing signal processing required for decoding an audio signal; And a first voice decoding module having first voice signal processing modules for performing signal processing necessary for decoding the voice signal, respectively, and analyzing at least one format of the audio signal and the voice signal and according to the analysis result. And an analyzer configured to control at least one of the audio signal and the voice signal by at least one of the first audio signal processing modules and the first voice signal processing modules.
그리고, 본 발명에 따른 복호 장치는, 오디오 신호의 복호에 필요한 신호처리들 및 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 신호처리 모듈들을 구비한 제1 복호 모듈; 및 오디오 신호 및 음성 신호 중 적어도 하나의 포맷을 분석하고, 분석결과에 따라 상기 제1 신호처리 모듈들 중 적어도 하나에 의해 상기 오디오 신호 및 음성 신호 중 적어도 하나가 신호처리되도록 제어하는 분석부;를 포함한다.In addition, the decoding apparatus according to the present invention comprises: a first decoding module having first signal processing modules for performing signal processing for decoding an audio signal and signal processing for decoding an audio signal, respectively; And an analyzer configured to analyze at least one format of an audio signal and a voice signal and to control at least one of the audio signal and the voice signal by at least one of the first signal processing modules according to an analysis result. Include.
또한, 본 발명에 따른 복호 장치는, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈; 및 상기 오디오 신호의 복호에 필요하지만 상기 제1 오디오 신호처리 모듈들이 수행할 수 없는 적어도 하나의 신호처리들을 각각 수행할 수 있는 적어도 하나의 제2 오디오 신호처리 모듈을 구비한 제2 오디오 복호 모듈;을 포함한다.In addition, the decoding apparatus according to the present invention comprises: a first audio decoding module having first audio signal processing modules each performing signal processing required for decoding an audio signal; And a second audio decoding module having at least one second audio signal processing module which is required for decoding the audio signal but which can each perform at least one signal processing that the first audio signal processing modules cannot perform. It includes.
그리고, 본 발명에 따른 복호 장치는, 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈; 및 상기 음성 신호의 복호에 필요하지만 상기 제1 음성 신호처리 모듈들이 수행할 수 없는 적어도 하나의 신호처리들을 각각 수행할 수 있는 적어도 하나의 제2 음성 신호처리 모듈을 구비한 제2 음성 복호 모듈;을 포함한다.In addition, the decoding apparatus according to the present invention includes: a first voice decoding module having first voice signal processing modules which respectively perform signal processing necessary for decoding a voice signal; And a second voice decoding module having at least one second voice signal processing module, which is required for decoding the voice signal, but which can each perform at least one signal processing that the first voice signal processing modules cannot perform. It includes.
또한, 본 발명에 따른 복호 장치는, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈; 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈; 상기 오디오 신호의 복호에 필요하지만 상기 제1 오디오 신호처리 모듈들이 수행할 수 없는 적어도 하나의 신호처리들을 각각 수행할 수 있는 적어도 하나의 제2 오디오 신호처리 모듈을 구비한 제2 오디오 복호 모듈; 및 상기 음성 신호의 복호에 필요하지만 상기 제1 음성 신호처리 모듈들이 수행할 수 없는 적어도 하나의 신호처리들을 각각 수행할 수 있는 적어도 하나의 제2 음성 신호처리 모듈을 구비한 제2 음성 복호 모듈;을 포함한다.In addition, the decoding apparatus according to the present invention comprises: a first audio decoding module having first audio signal processing modules each performing signal processing required for decoding an audio signal; A first speech decoding module having first speech signal processing modules each performing signal processing necessary for decoding the speech signal; A second audio decoding module having at least one second audio signal processing module each of which is required for decoding the audio signal but which can perform at least one signal processing that the first audio signal processing modules cannot perform; And a second voice decoding module having at least one second voice signal processing module, which is required for decoding the voice signal, but which can each perform at least one signal processing that the first voice signal processing modules cannot perform. It includes.
한편, 본 발명에 따른 출력 장치는, 오디오 신호를 복호하는 복호부; 및 상기 복호부에서 복호된 오디오 신호에 대응하는 오디오를 출력하는 출력부;를 포함하고, 상기 복호부는, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈;을 포함하고, 오디오 신호의 복호시에는 상기 제1 오디오 신호처리 모듈들 중 적어도 하나가 이용된다.On the other hand, the output device according to the invention, the decoding unit for decoding the audio signal; And an output unit for outputting audio corresponding to the audio signal decoded by the decoder, wherein the decoder comprises: first audio signal processing modules each of which performs signal processing necessary for decoding the audio signal; And an audio decoding module, wherein at least one of the first audio signal processing modules is used when decoding the audio signal.
그리고, 본 발명에 따른 출력 장치는, 음성 신호를 복호하는 복호부; 및 상기 복호부에서 복호된 음성 신호에 대응하는 음성을 출력하는 출력부;를 포함하고, 상기 복호부는, 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈;을 포함하고, 음성 신호의 복호시에는 상기 제1 음성 신호처리 모듈들 중 적어도 하나가 이용된다.In addition, the output device according to the present invention, the decoding unit for decoding a voice signal; And an output unit for outputting a voice corresponding to the voice signal decoded by the decoder, wherein the decoder comprises first voice signal processing modules each of which performs signal processing necessary for decoding the voice signal. And a voice decoding module, wherein at least one of the first voice signal processing modules is used when decoding the voice signal.
또한, 본 발명에 따른 출력 장치는, 오디오 신호 및 음성 신호 중 적어도 하나를 복호하는 복호부; 및 상기 복호부에서 복호된 오디오 신호 및 음성 신호 중 적어도 하나에 대응하는 오디오 및 음성 중 적어도 하나를 출력하는 출력부;를 포함하고, 상기 복호부는, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈; 및 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈;을 포함하고, 오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 제1 오디오 신호처리 모듈들과 상기 제1 음성 신호처리 모듈들 중 적어도 하나가 이용된다.In addition, the output device according to the present invention, the decoding unit for decoding at least one of the audio signal and the audio signal; And an output unit configured to output at least one of audio and voice corresponding to at least one of the audio signal and the audio signal decoded by the decoder. The decoder may perform signal processing for decoding the audio signal, respectively. A first audio decoding module having first audio signal processing modules; And a first voice decoding module having first voice signal processing modules for respectively performing signal processing necessary for decoding of a voice signal, wherein, when decoding at least one of an audio signal and a voice signal, the first audio signal is included. At least one of the processing modules and the first voice signal processing modules is used.
그리고, 본 발명에 따른 출력 장치는, 오디오 신호 및 음성 신호 중 적어도 하나를 복호하는 복호부; 및 상기 복호부에서 복호된 오디오 신호 및 음성 신호 중 적어도 하나에 대응하는 오디오 및 음성 중 적어도 하나를 출력하는 출력부;를 포함하고, 상기 복호부는, 오디오 신호의 복호에 필요한 신호처리들 및 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 신호처리 모듈들을 구비한 제1 복호 모듈;을 포함하고, 오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 제1 신호처리 모듈들 중 적어도 하나가 이용된다.In addition, the output device according to the present invention, the decoding unit for decoding at least one of the audio signal and the audio signal; And an output unit for outputting at least one of audio and voice corresponding to at least one of an audio signal and a voice signal decoded by the decoder. The decoder includes signal processing and voice signals necessary for decoding the audio signal. A first decoding module having first signal processing modules each performing signal processing required for decoding of the at least one of the at least one of the first signal processing modules. Is used.
한편, 본 발명에 따른 복호 방법은, 입력된 오디오 신호를 전처리하는 단계; 및 제1 오디오 복호 모듈에 마련된 제1 오디오 신호처리 모듈들 중 적어도 하나의 모듈을 이용하여, 전처리된 오디오 신호를 복호하는 단계;를 포함하며, 상기 제1 오디오 신호처리 모듈들은, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 모듈들이다.On the other hand, the decoding method according to the invention, the step of pre-processing the input audio signal; And decoding the preprocessed audio signal using at least one of the first audio signal processing modules provided in the first audio decoding module, wherein the first audio signal processing modules include: decoding the audio signal; Modules that perform the signal processing required for each.
그리고, 본 발명에 따른 복호 방법은, 입력된 음성 신호를 전처리하는 단계; 및 제1 음성 복호 모듈에 마련된 제1 음성 신호처리 모듈들 중 적어도 하나의 모듈을 이용하여, 전처리된 음성 신호를 복호하는 단계;를 포함하며, 상기 제1 음성 신호처리 모듈들은, 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 모듈들이다.The decoding method according to the present invention comprises the steps of: preprocessing the input voice signal; And decoding the preprocessed voice signal using at least one of the first voice signal processing modules provided in the first voice decoding module, wherein the first voice signal processing modules include: decoding the voice signal; Modules that perform the signal processing required for each.
또한, 본 발명에 따른 복호 방법은, 오디오 신호 및 음성 신호 중 적어도 하나를 전처리하는 단계; 및 제1 오디오 복호 모듈에 마련된 제1 오디오 신호처리 모듈들과 제1 음성 복호 모듈에 마련된 제1 음성 신호처리 모듈들 중 적어도 하나의 모듈을 이용하여, 전처리된 오디오 신호 및 음성 신호 중 적어도 하나를 복호하는 단계;를 포함하며, 상기 제1 오디오 신호처리 모듈들은, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 모듈들이고, 상기 제1 음성 신호처리 모듈들은, 음성 신호에 필요한 신호처리들을 각각 수행하는 모듈들이다.In addition, the decoding method according to the present invention comprises the steps of: preprocessing at least one of an audio signal and an audio signal; And at least one of the first audio signal processing modules provided in the first audio decoding module and the first audio signal processing modules provided in the first audio decoding module, to perform at least one of the preprocessed audio signal and the voice signal. And decoding, wherein the first audio signal processing modules are modules that perform signal processing necessary for decoding an audio signal, and the first audio signal processing modules respectively perform signal processing required for a voice signal. Modules
한편, 본 발명에 따른 복호 방법은, 오디오 신호 및 음성 신호 중 적어도 하나를 전처리하는 단계; 및 제1 복호 모듈에 마련된 제1 신호처리 모듈들 중 적어도 하나의 모듈을 이용하여, 전처리된 오디오 신호 및 음성 신호 중 적어도 하나를 복호하는 단계;를 포함하며, 상기 제1 신호처리 모듈들은, 오디오 신호의 복호에 필요한 신호처리들 및 음성 신호에 필요한 신호처리들을 각각 수행하는 모듈들이다.On the other hand, the decoding method according to the present invention comprises the steps of: pre-processing at least one of an audio signal and an audio signal; And decoding at least one of a pre-processed audio signal and a voice signal using at least one of the first signal processing modules provided in the first decoding module. These modules perform signal processing necessary for decoding a signal and signal processing necessary for an audio signal, respectively.
본 발명에 따르면, 중복되는 모듈 개발에 소요되는 시간, 비용 및 노력을 감소시킬 수 있게 된다. 뿐만 아니라, 간편한 모듈 추가를 통해 새로운 포맷의 오디오/음성 신호에 대한 복호를 가능하게 하므로, 다양해지고 있는 오디오/음성 신호에 보다 유연하게 대응할 수 있게 된다.According to the present invention, it is possible to reduce the time, cost and effort required to develop redundant modules. In addition, the addition of a simple module enables decoding of audio / voice signals in a new format, thus allowing more flexibility in responding to a variety of audio / voice signals.
도 1은 본 발명의 일 실시예에 따른 오디오 복호 장치의 블럭도,1 is a block diagram of an audio decoding apparatus according to an embodiment of the present invention;
도 2는, 도 1에 도시된 오디오 복호 장치를 보다 상세히 도시한 도면,FIG. 2 is a view showing in detail the audio decoding device shown in FIG. 1;
도 3은 본 발명의 다른 실시예에 따른 오디오 복호 방법의 설명에 제공되는 흐름도,3 is a flowchart provided to explain an audio decoding method according to another embodiment of the present invention;
도 4는 실제 오디오 신호를 복호할 수 있도록 구현한 오디오 복호 장치를 예시한 도면,4 is a diagram illustrating an audio decoding device implemented to decode an actual audio signal;
도 5는, 도 4에 도시된 오디오 복호 장치가 MPEG-Layer Ⅲ 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면,5 is a diagram illustrating in detail a process of decoding an audio signal of MPEG-Layer III format by the audio decoding apparatus shown in FIG. 4;
도 6은, 도 4에 도시된 오디오 복호 장치가 MPEG-BSAC 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면,6 is a diagram illustrating in detail a process of decoding an audio signal of MPEG-BSAC format by the audio decoding apparatus shown in FIG. 4;
도 7은, 도 4에 도시된 오디오 복호 장치가 MPEG2-AAC 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면,7 is a diagram illustrating in detail a process of decoding an audio signal of MPEG2-AAC format by the audio decoding apparatus shown in FIG. 4;
도 8은, 도 4에 도시된 오디오 복호 장치가 MPEG4-AAC 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면,8 is a diagram illustrating in detail a process of decoding an audio signal of MPEG4-AAC format by the audio decoding apparatus shown in FIG. 4;
도 9는, 도 4에 도시된 오디오 복호 장치가 MPEG4-AAC v1 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면,9 is a diagram illustrating in detail a process of decoding an audio signal of MPEG4-AAC v1 format by the audio decoding apparatus shown in FIG. 4;
도 10은, 도 4에 도시된 오디오 복호 장치가 MPEG4-AAC v2 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면,FIG. 10 is a detailed diagram illustrating a process of decoding an audio signal of MPEG4-AAC v2 format by the audio decoding apparatus shown in FIG. 4;
도 11은, 도 4에 도시된 오디오 복호 장치가 MPEG4-SLS 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면,11 is a diagram illustrating in detail a process of decoding an audio signal of MPEG4-SLS format by the audio decoding apparatus shown in FIG. 4;
도 12는 본 발명의 또 다른 실시예에 따른 음성 복호 장치의 블럭도,12 is a block diagram of an audio decoding apparatus according to another embodiment of the present invention;
도 13은, 도 12에 도시된 음성 복호 장치를 보다 상세히 도시한 도면,FIG. 13 is a diagram showing in detail the voice decoding device shown in FIG. 12; FIG.
도 14는 본 발명의 또 다른 실시예에 따른 음성 복호 방법의 설명에 제공되는 흐름도,14 is a flowchart provided to explain a voice decoding method according to another embodiment of the present invention;
도 15는 실제 음성 신호를 복호할 수 있도록 구현한 음성 복호 장치를 예시한 도면,15 is a diagram illustrating a speech decoding apparatus implemented to decode an actual speech signal;
도 16은, 도 15에 도시된 음성 복호 장치가 MPEG4-ALS 포맷의 음성 신호를 복호하는 과정을 상세히 나타낸 도면,FIG. 16 is a diagram illustrating a process of decoding a voice signal of MPEG4-ALS format by the voice decoding apparatus shown in FIG. 15 in detail;
도 17은, 도 15에 도시된 음성 복호 장치가 G.729 포맷의 음성 신호를 복호하는 과정을 상세히 나타낸 도면,FIG. 17 is a diagram illustrating in detail a process of decoding a G.729 format audio signal by the voice decoding apparatus shown in FIG. 15;
도 18은, 도 15에 도시된 음성 복호 장치가 AMR-WB 포맷의 음성 신호를 복호하는 과정을 상세히 나타낸 도면,18 is a diagram illustrating in detail a process of decoding a voice signal in AMR-WB format by the voice decoding apparatus shown in FIG. 15;
도 19는 본 발명의 또 다른 실시예에 따른 오디오/음성 복호 장치의 블럭도,19 is a block diagram of an audio / audio decoding device according to another embodiment of the present invention;
도 20은, 도 19에 도시된 오디오/음성 복호 장치를 보다 상세히 도시한 도면,20 is a view showing in more detail the audio / audio decoding device shown in FIG. 19;
도 21은 본 발명의 또 다른 실시예에 따른 오디오/음성 복호 방법의 설명에 제공되는 흐름도,21 is a flowchart provided to explain an audio / audio decoding method according to another embodiment of the present invention;
도 22는 실제 오디오/음성 신호를 복호할 수 있도록 구현한 오디오/음성 복호 장치를 예시한 도면,22 is a diagram illustrating an audio / audio decoding device implemented to decode an actual audio / audio signal;
도 23은 도 22에 도시된 오디오/음성 복호 장치가 G.729.EV 포맷의 음성 신호를 복호하는 과정을 상세히 나타낸 도면,FIG. 23 is a diagram illustrating a process of decoding an audio signal of a G.729.EV format by the audio / audio decoding apparatus shown in FIG. 22;
도 24는 본 발명의 또 다른 실시예에 따른 오디오 복호 장치를 도시한 도면,24 is a diagram illustrating an audio decoding device according to another embodiment of the present invention;
도 25는, 도 24에 도시된 오디오 복호 장치를 보다 상세히 도시한 도면, 그리고,25 is a view showing in detail the audio decoding device shown in FIG. 24, and
도 26은 본 발명의 또 다른 실시예에 따른 사운드 출력 장치의 블럭도이다.26 is a block diagram of a sound output device according to another embodiment of the present invention.
이하에서는 도면을 참조하여 본 발명을 보다 상세하게 설명한다.Hereinafter, with reference to the drawings will be described the present invention in more detail.
도 1은 본 발명의 일 실시예에 따른 오디오 복호 장치의 블럭도이다. 본 실시예에 따른 오디오 복호 장치는, 입력되는 압축된 오디오(Audio) 신호를 복호하여 압축해제된 오디오 신호를 출력하는 장치이다.1 is a block diagram of an audio decoding apparatus according to an embodiment of the present invention. The audio decoding apparatus according to the present embodiment is a device that outputs a decompressed audio signal by decoding an input compressed audio signal.
본 실시예에 따른 오디오 복호 장치는, 도 1에 도시된 바와 같이, 분석부(110), 전처리부(120) 및 오디오 복호부(130)를 구비한다.As shown in FIG. 1, the audio decoding apparatus according to the present exemplary embodiment includes an analyzer 110, a preprocessor 120, and an audio decoder 130.
분석부(110)는 입력되는 압축된 오디오 신호, 즉 복호할 오디오 신호를 분석하여 오디오 신호의 포맷을 파악한다. 분석부(110)는 파악된 오디오 신호의 포맷을 토대로, 후술할 전처리부(120)의 전처리 과정과 오디오 복호부(130)의 복호 과정을 제어한다. 분석부(110)가 이들을 제어하는 내용에 대한 구체적인 설명은 후술한다.The analyzer 110 analyzes the input compressed audio signal, that is, the audio signal to be decoded, and determines the format of the audio signal. The analyzer 110 controls the preprocessing process of the preprocessor 120 and the decoding process of the audio decoder 130, which will be described later, based on the format of the audio signal. Detailed description of the contents of the analysis unit 110 to control them will be described later.
전처리부(120)는 분석부(110)에서 출력되는 압축된 오디오 신호에 대한 전처리(Pre-Processing)를 수행한다. 전처리는 오디오 복호부(130)에서의 복호가 처리되기 전에 먼저 수행되어져야 할 신호처리로, 역양자화 처리, 신호 증폭, 신호 조정 등의 신호처리가 포함된다.The preprocessor 120 performs pre-processing on the compressed audio signal output from the analyzer 110. The preprocessing is a signal processing to be performed before the decoding in the audio decoding unit 130 is processed, and includes signal processing such as inverse quantization processing, signal amplification, and signal adjustment.
오디오 복호부(130)는 전처리부(120)에서 전처리된 오디오 신호를 복호한다. 그 결과, 오디오 복호부(130)에서는 압축해제된 오디오 신호가 출력된다. 이와 같은 기능을 수행하는 오디오 복호부(130)는 공유 오디오 복호 모듈(131)과 선택 오디오 복호 모듈(132)을 구비한다.The audio decoder 130 decodes the audio signal preprocessed by the preprocessor 120. As a result, the audio decoder 130 outputs the decompressed audio signal. The audio decoder 130 that performs the above function includes a shared audio decoding module 131 and a selective audio decoding module 132.
공유 오디오 복호 모듈(131)과 선택 오디오 복호 모듈(132) 모두 압축된 오디오 신호를 복호하는데 필요한 신호처리를 수행하는 모듈이라는 점에서는, 양자가 공통된다.Both of the common audio decoding module 131 and the selective audio decoding module 132 are modules that perform signal processing necessary for decoding the compressed audio signal.
하지만, 공유 오디오 복호 모듈(131)은 각기 다른 포맷의 오디오 신호들 모두에 대해 신호처리를 수행하는 모듈인 반면, 선택 오디오 복호 모듈(132)은 오디오 신호의 포맷에 따라 선택적으로 신호처리를 수행하는(즉, 오디오 신호의 포맷에 따라, 신호처리를 더 수행할 수도 있고 수행하지 않을 수도 있는) 모듈이라는 점에서, 양자는 차이가 있다.However, the shared audio decoding module 131 is a module that performs signal processing on all audio signals of different formats, whereas the selective audio decoding module 132 selectively performs signal processing according to the format of the audio signal. The two are different in that they are modules (that may or may not perform further signal processing, depending on the format of the audio signal).
도 2는, 도 1에 도시된 오디오 복호 장치를 보다 상세히 도시한 도면이다. 도 2에 도시된 바에 따르면, 1) 전처리부(120)는 L개의 전처리 모듈(120-1 내지 120-L)을 구비하고 있고, 2) 공유 오디오 복호 모듈(131)은 M개의 공유 오디오 신호처리 모듈(131-1 내지 131-M)을 구비하고 있으며, 3) 선택 오디오 복호 모듈(132)은 N개의 선택 오디오 신호처리 모듈(132-1 내지 132-N)을 구비하고 있음을 확인할 수 있다.FIG. 2 is a diagram showing the audio decoding device shown in FIG. 1 in more detail. As shown in FIG. 2, 1) the preprocessor 120 includes L preprocessor modules 120-1 to 120-L, and 2) the shared audio decoding module 131 processes M shared audio signals. 3) The selection audio decoding module 132 includes N selection audio signal processing modules 132-1 to 132-N.
전처리부(120)에 구비된 L개의 전처리 모듈(120-1 내지 120-L)은 각기 다른 포맷의 오디오 신호에 대한 전처리를 각각 담당한다. 예를 들어, 1) 제1 전처리 모듈(120-1)은 제1 포맷과 제2 포맷의 오디오 신호에 대한 전처리를 담당하고, 2) 제2 전처리 모듈(120-2)은 제3 포맷과 제4 포맷의 오디오 신호에 대한 전처리를 담당하며, 3) 제3 전처리 모듈(120-3)은 제5 포맷의 오디오 신호에 대한 전처리를 담당할 수 있다.The L preprocessing modules 120-1 to 120-L provided in the preprocessor 120 are in charge of preprocessing audio signals of different formats. For example, 1) the first preprocessing module 120-1 is responsible for preprocessing the audio signals of the first format and the second format, and 2) the second preprocessing module 120-2 is the third format and the third format. It is responsible for preprocessing audio signals of four formats, and 3) the third preprocessing module 120-3 may be responsible for preprocessing audio signals of a fifth format.
분석부(110)는 입력되는 압축된 오디오 신호의 포맷을 토대로, 전처리부(120)의 전처리 과정을 제어한다고 전술한 바 있다. 이는, 분석부(110)가 포맷이 파악된 압축된 오디오 신호를 해당 전처리 모듈로 전달하는 것을 의미한다.As described above, the analyzer 110 controls the preprocessing process of the preprocessor 120 based on the format of the input compressed audio signal. This means that the analysis unit 110 delivers the compressed audio signal having the recognized format to the corresponding preprocessing module.
예를 들어, 입력되는 압축된 오디오 신호가 제2 포맷으로 밝혀진 경우, 분석부(110)는 입력받은 제2 포맷의 오디오 신호를 제1 전처리 모듈(120-1)로 전달하게 된다.For example, when the input compressed audio signal is found to be the second format, the analyzer 110 transmits the input audio signal of the second format to the first preprocessing module 120-1.
공유 오디오 복호 모듈(131)에 구비된 M개의 공유 오디오 신호처리 모듈(131-1 내지 131-M)은 입력되는 오디오 신호의 복호에 요구되는 신호처리를 수행하는 모듈들이다. M개의 공유 오디오 신호처리 모듈(131-1 내지 131-M) 중 어느 모듈들에 의해 신호처리가 수행되는지는 오디오 신호의 포맷마다 차이가 있다.The M shared audio signal processing modules 131-1 to 131-M included in the shared audio decoding module 131 are modules that perform signal processing required for decoding the input audio signal. Which of the M shared audio signal processing modules 131-1 to 131-M performs signal processing differs depending on the format of the audio signal.
예를 들어, 제1 포맷의 오디오 신호 복호시에는 제1 공유 오디오 신호처리 모듈(131-1) 및 제2 공유 오디오 신호처리 모듈(131-2)이 수행하는 신호처리가 필요한 반면, 제2 포맷의 오디오 신호 복호시에는 제1 공유 오디오 신호처리 모듈(131-1), 제2 공유 오디오 신호처리 모듈(131-2) 및 제3 공유 오디오 신호처리 모듈(131-3)이 수행하는 신호처리가 필요할 수 있다.For example, when decoding the audio signal of the first format, signal processing performed by the first shared audio signal processing module 131-1 and the second shared audio signal processing module 131-2 is required, while the second format is used. When decoding the audio signal, the signal processing performed by the first shared audio signal processing module 131-1, the second shared audio signal processing module 131-2, and the third shared audio signal processing module 131-3 is performed. It may be necessary.
선택 오디오 복호 모듈(132)에 구비된 N개의 선택 오디오 신호처리 모듈(132-1 내지 132-N)도 입력되는 오디오 신호의 복호에 요구되는 신호처리를 수행하는 모듈들이다. 오디오 신호의 포맷에 따라서는, 선택 오디오 복호 모듈(132)에 구비된 N개의 선택 오디오 신호처리 모듈(132-1 내지 132-N) 중 적어도 하나에 의한 신호처리가 필요한 포맷도 있고, 필요하지 않은 포맷도 있다.The N selection audio signal processing modules 132-1 to 132-N included in the selection audio decoding module 132 are modules that perform signal processing required for decoding the input audio signal. Depending on the format of the audio signal, there are some formats that require signal processing by at least one of the N selection audio signal processing modules 132-1 to 132-N included in the selection audio decoding module 132. There is also a format.
예를 들어, 제1 포맷의 오디오 신호 복호시에는 N개의 선택 오디오 신호처리 모듈(132-1 내지 132-N)이 수행하는 신호처리가 필요하지 않은 반면, 제2 포맷의 오디오 신호 복호시에는 제1 선택 오디오 신호처리 모듈(132-1) 및 제2 선택 오디오 신호처리 모듈(132-2)이 수행하는 신호처리가 필요할 수 있다.For example, the signal processing performed by the N selected audio signal processing modules 132-1 to 132-N is not necessary when decoding the audio signal in the first format, whereas when decoding the audio signal in the second format, the signal processing is performed. Signal processing performed by the first selection audio signal processing module 132-1 and the second selection audio signal processing module 132-2 may be required.
한편, 분석부(110)는 압축된 오디오 신호의 포맷을 토대로, 오디오 복호부(130)의 복호과정을 제어한다고 전술한 바 있다. 이는, 분석부(110)가 포맷이 파악된 압축된 오디오 신호에 필요한 신호처리들을 판별한 후, 판별된 신호처리들이 순서에 맞게 수행되도록, 복호부(131)에 마련된 공유 오디오 복호 모듈(131)과 선택 오디오 복호 모듈(132)을 제어하는 것을 의미한다.On the other hand, the analyzer 110 has been described above to control the decoding process of the audio decoder 130, based on the compressed audio signal format. This is because the analysis unit 110 determines the signal processings required for the compressed audio signal having the format determined, and then the shared audio decoding module 131 provided in the decoder 131 to perform the determined signal processings in order. And control the optional audio decoding module 132.
예를 들어, 입력되는 압축된 오디오 신호가 제1 포맷으로 밝혀졌는데, 제1 포맷의 오디오 신호는 "제1 공유 오디오 신호처리 모듈(131-1)이 담당하는 신호처리 → 제2 공유 오디오 신호처리 모듈(131-2)이 담당하는 신호처리"를 통해 복호된다고 가정한다면, 분석부(110)는 제1 전처리 모듈(120-1)에서 전처리된 제1 포맷의 오디오 신호가 위 " ~ "에 기재된 순서대로 신호처리되도록 공유 오디오 복호 모듈(131)을 제어하고, 선택 오디오 복호 모듈(132)은 신호처리를 수행하지 않도록 제어하게 된다.For example, the input compressed audio signal is found to be the first format, and the audio signal of the first format is " signal processing which is handled by the first shared audio signal processing module 131-1 → second shared audio signal processing. If it is assumed that the module 131-2 is decoded through "signal processing in charge", the analysis unit 110 indicates that the audio signal of the first format pre-processed in the first preprocessing module 120-1 is described in "to". The shared audio decoding module 131 is controlled to be signal processed in order, and the selective audio decoding module 132 is controlled not to perform signal processing.
다른 예로, 입력되는 압축된 오디오 신호가 제1 포맷으로 밝혀졌는데, 제1 포맷의 오디오 신호는 "제1 공유 오디오 신호처리 모듈(131-1)이 담당하는 신호처리 → 제2 공유 오디오 신호처리 모듈(131-2)이 담당하는 신호처리 → 제1 선택 오디오 신호처리 모듈(132-1)이 담당하는 신호처리 → 제3 공유 오디오 신호처리 모듈(131-3)이 담당하는 신호처리 → 제2 선택 오디오 신호처리 모듈(132-3)이 담당하는 신호처리"를 통해 복호된다고 가정한다면, 분석부(110)는 제1 전처리 모듈(120-1)에서 전처리된 제1 포맷의 오디오 신호가 위 " ~ "에 기재된 순서대로 신호처리되도록 공유 오디오 복호 모듈(131)과 선택 오디오 복호 모듈(132)을 제어하게 된다.As another example, the input compressed audio signal is found to be the first format, and the audio signal of the first format is " signal processing which is handled by the first shared audio signal processing module 131-1 → the second shared audio signal processing module. Signal processing in charge of (131-2) → signal processing in charge of the first selection audio signal processing module 132-1 → signal processing in charge of the third shared audio signal processing module 131-3 → second selection If it is assumed that the audio signal processing module 132-3 is decoded through a signal processing that is in charge of the audio signal processing module 132-3, the analyzer 110 may determine that the audio signal of the first format pre-processed by the first preprocessing module 120-1 is above. The shared audio decoding module 131 and the selected audio decoding module 132 are controlled to signal the signals in the order described in the following.
지금까지, 본 발명의 바람직한 실시예에 대해 상세히 설명하였다. 본 실시예에 따르면, 오디오 복호 장치를 설계할 때, 범용화된 공유 오디오 복호 모듈(131)에 선택 오디오 복호 모듈(132)를 추가하는 방식으로 설계가능함을 알 수 있다.So far, the preferred embodiment of the present invention has been described in detail. According to the present embodiment, when designing the audio decoding apparatus, it can be seen that the design is possible by adding the selection audio decoding module 132 to the generalized shared audio decoding module 131.
즉, 선택 오디오 복호 모듈(132)은 공유 오디오 복호 모듈(131)에서 수행할 수 없는 특정 포맷의 오디오 신호들의 복호에 필요한 신호처리를 수행할 수 있도록 설계하면 된다.That is, the selective audio decoding module 132 may be designed to perform signal processing necessary for decoding audio signals of a specific format that cannot be performed by the shared audio decoding module 131.
이에 따라, 규격이나 제조업체의 스펙에 의해 공유 오디오 복호 모듈(131)에 마련된 모듈들을 변경하거나, 다른 모듈을 추가하는 것이 불가능한 경우에도, 선택 오디오 복호 모듈(132)을 통해 복호에 필요한 모듈을 변경하거나 추가하는 것이 가능해진다.Accordingly, even if it is impossible to change modules provided in the shared audio decoding module 131 according to a specification or a manufacturer's specification, or add another module, it is possible to change the module required for decoding through the selective audio decoding module 132. It becomes possible to add.
도 3에는 지금까지 설명한 오디오 복호 과정을 나타내었다. 도 3은 본 발명의 다른 실시예에 따른 오디오 복호 방법의 설명에 제공되는 흐름도이다.3 shows an audio decoding process described so far. 3 is a flowchart provided to explain an audio decoding method according to another embodiment of the present invention.
도 3에 도시된 바와 같이, 먼저, 분석부(110)는 입력되는 압축된 오디오 신호, 즉 복호할 오디오 신호를 분석하여 오디오 신호의 포맷을 파악한다(S210).As shown in FIG. 3, first, the analyzer 110 analyzes an input compressed audio signal, that is, an audio signal to be decoded, and determines a format of an audio signal (S210).
이후, 전처리부(120)는 분석부(120)의 제어에 따라, 압축된 오디오 신호에 대한 전처리를 수행한다(S220).Thereafter, the preprocessor 120 performs preprocessing on the compressed audio signal under the control of the analyzer 120 (S220).
그러면, 오디오 복호부(130)는 S420단계에서 전처리된 오디오 신호에 대해 복호를 수행한다(S230).Then, the audio decoder 130 decodes the audio signal preprocessed in step S420 (S230).
구체적으로, S230단계에서는, 전처리된 오디오 신호에 대해 공유 오디오 복호 모듈(131)이 담당하는 신호처리들과 선택 오디오 복호 모듈(132)이 담당하는 신호처리들 중 필요한 신호처리들이 순서에 맞게 수행된다. 이때, 필요한 신호처리들과 이들의 순서는 압축된 오디오 신호의 포맷을 참조하여, 분석부(110)가 결정함은 전술한 바 있다.Specifically, in operation S230, necessary signal processing among signal processings handled by the shared audio decoding module 131 and signal processings performed by the selective audio decoding module 132 are performed in order for the preprocessed audio signal. . In this case, the necessary signal processings and the order thereof are described above by referring to the format of the compressed audio signal and determined by the analyzer 110.
도 4에는, 지금까지 설명한 실시예에 따른 오디오 복호 장치의 개념을 이용하여, 실제 오디오 신호를 복호할 수 있도록 구현한 오디오 복호 장치를 예시하였다.In FIG. 4, an audio decoding apparatus implemented to decode an actual audio signal using the concept of the audio decoding apparatus according to the embodiment described so far is illustrated.
도 4에 도시된 오디오 복호 장치는, 1) MPEG-Layer Ⅲ 포맷의 오디오 신호, 2) MPEG-BSAC 포맷의 오디오 신호, 3) MPEG2-AAC 포맷의 오디오 신호, 4) MPEG4-AAC 포맷의 오디오 신호, 5) MPEG4-AAC v1 포맷의 오디오 신호, 6) MPEG4-AAC v2 포맷의 오디오 신호, 7) MPEG4-SLS 포맷의 오디오 신호에 대해 복호를 수행할 수 있다.The audio decoding apparatus shown in FIG. 4 includes 1) an audio signal in MPEG-Layer III format, 2) an audio signal in MPEG-BSAC format, 3) an audio signal in MPEG2-AAC format, and 4) an audio signal in MPEG4-AAC format. 5) an audio signal of the MPEG4-AAC v1 format, 6) an audio signal of the MPEG4-AAC v2 format, and 7) an audio signal of the MPEG4-SLS format.
도 4에 도시된 바에 따르면, 전처리부(120)에는 전처리 모듈-1,2,3(120-1, 120-2, 120-3)이 마련되어 있다. 1) 전처리 모듈-1(120-1)은 HD(Huffman Decoding)(120-11) 모듈, IQ(Inverse Quantization) 모듈(120-12) 및 RS(ReScaling) 모듈(120-13)을 구비하고, 2) 전처리 모듈-2(120-2)는 AD(Arithmetic Decoding) 모듈(120-21), IQ(Inverse Quantization) 모듈(120-22) 및 RS(ReScaling) 모듈(120-23)을 구비하며, 3) 전처리 모듈-3(120-3)은 HD(Huffman Decoding) 모듈(120-31), IQ(Inverse Quantization) 모듈(120-32), RS(ReScaling) 모듈(120-33), BPGC/CBAC-D(BPGC/CBAC-Decoding) 모듈(120-34) 및 LEMD(Low Energy Mode Decoding) 모듈(120-35)을 구비하고 있다.As shown in FIG. 4, the preprocessing unit 120 is provided with preprocessing modules-1, 2, and 3 (120-1, 120-2, and 120-3). 1) The preprocessing module-1 120-1 includes a Huffman Decoding (HD) 120-11 module, an Inverse Quantization (IQ) module 120-12, and a Rescaling (RS) module 120-13, 2) the preprocessing module-2 120-2 includes an Arithmetic Decoding (AD) module 120-21, an Inverse Quantization (IQ) module 120-22, and a Rescaling (RS) module 120-23, 3) The preprocessing module-3 (120-3) includes a Huffman Decoding (HD) module 120-31, an Inverse Quantization (IQ) module 120-32, a Rescaling (RS) module 120-33, and BPGC / CBAC. A BPGC / CBAC-Decoding (D) module 120-34 and a Low Energy Mode Decoding (LEMD) module 120-35 are provided.
또한, 공유 오디오 복호 모듈(131)은 공유 오디오 신호처리 모듈로, 1) MSS(Mid Side) 모듈(131-1), 2) IS(Intensity Stereo) 모듈(131-2), 3) PNS(Perceptual Noise Substitution) 모듈(131-3), 4) TNS(Temporal Noise Shaping) 모듈(131-4) 및 5) IMDCT(Integer Modified Discrete Cosine Transform) 모듈(131-5)을 구비하고 있다.In addition, the shared audio decoding module 131 is a shared audio signal processing module, which includes 1) MSS (Mid Side) module 131-1, 2) Intensity Stereo (IS) module 131-2, 3) PNS (Perceptual) Noise Substitution (131-3), 4) Temporal Noise Shaping (TNS) module 131-4, and 5) Integer Modified Discrete Cosine Transform (IMDCT) module 131-5.
그리고, 선택 오디오 복호 모듈(132)은 선택 오디오 신호처리 모듈로, 1) QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈(132-1), 2) BSAC-GC(BSAC-Gain Control) 모듈(132-2), 3) PD(Prediction Decoding) 모듈(132-3), 4) 제1 DSC(Dependently Switched Coupling) 모듈(132-4), 5) 제2 DSC(Dependently Switched Coupling) 모듈(132-5), 6) AAC-GC(AAC-Gain Control) 모듈(132-6), 7) ISC(Independently Switched Coupling) 모듈(132-7), 8) SBR(Spectral Band Replication) 모듈(132-8), 9) PS(Prametric Stereo) 모듈(132-9), 10) IEM(Inverse Error Mapping) 모듈(132-10) 및 11) IIMDCT(Integer Modified Discrete Cosine Transform) 모듈(132-11)을 구비하고 있다.The selective audio decoding module 132 is a selective audio signal processing module, which includes: 1) Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module 132-1, and 2) BSAC-Gain Control (BSAC-GC) module. 132-2), 3) PD (Prediction Decoding) module 132-3, 4) first DSC (Dependently Switched Coupling) module 132-4, 5) second DSC (Dependently Switched Coupling) module 132- 5), 6) AAC-Gain Control module (132-6), 7) Independently Switched Coupling (ISC) module (132-7), 8) Spectral Band Replication (SBR) module (132-8) 9) PS (Prametric Stereo) module (132-9), 10) Inverse Error Mapping (IEM) module 132-10, and 11) Integer Modified Discrete Cosine Transform (IIMDCT) module 132-11. .
한편, SBR 모듈(132-8)은 SBR-D(Spectral Band Replication - Decoding) 모듈, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 및 QMF-AF(Quadrature Mirror Filtering - Analysis Filtering) 모듈을 포함한다.Meanwhile, the SBR module 132-8 includes a Spectral Band Replication-Decoding (SBR-D) module, a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module, and a Quadrature Mirror Filtering-Analysis Filtering (QMF-AF) module. .
도 5에는 도 4에 도시된 오디오 복호 장치가 MPEG-Layer Ⅲ 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면이다.FIG. 5 is a diagram illustrating a process of decoding an audio signal of MPEG-Layer III format by the audio decoding apparatus shown in FIG. 4 in detail.
도 5에 도시된 바에 따르면, MPEG-Layer Ⅲ 포맷의 오디오 신호는 먼저 전처리 모듈-1(120-1)에서 전처리됨을 알 수 있다. 즉, MPEG-Layer Ⅲ 포맷의 오디오 신호는 HD(120-11) 모듈에서 Huffman Decoding 되고, IQ 모듈(120-12)에서 Inverse Quantization 된 후, RS 모듈(120-13)에서 Rescaling 된다.As shown in FIG. 5, it can be seen that the audio signal of the MPEG-Layer III format is first preprocessed by the preprocessing module-1 120-1. That is, the MPEG-Layer III format audio signal is Huffman decoded in the HD 120-11 module, inverse quantized in the IQ module 120-12, and rescaled in the RS module 120-13.
이후, 전처리된 오디오 신호는, MSS 모듈(131-1)에서 신호처리되고, IS 모듈(131-2)에서 신호처리된 후, IMDCT 모듈(131-5)에서 IMDCT 되고, QMF-SF 모듈(132-1)에서 QMF-SF 된다.Thereafter, the preprocessed audio signal is signal-processed in the MSS module 131-1, signal-processed in the IS module 131-2, and then IMDCT in the IMDCT module 131-5, and the QMF-SF module 132. QMF-SF in -1).
이와 같은 과정에 의해, 오디오 신호가 압축해제되어, 오디오 복호부(130)에서는 압축해제된 오디오 신호가 출력되게 된다.By this process, the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
도 6에는 도 4에 도시된 오디오 복호 장치가 MPEG-BSAC 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면이다.FIG. 6 is a diagram illustrating a process of decoding an audio signal of MPEG-BSAC format by the audio decoding apparatus shown in FIG. 4 in detail.
도 6에 도시된 바에 따르면, MPEG-BSAC 포맷의 오디오 신호는 전처리 모듈-2(120-2)에서 전처리됨을 알 수 있다. 즉, MPEG-BSAC 포맷의 오디오 신호는 AD 모듈(120-21)에서 신호처리되고, IQ 모듈(120-22)에서 Inverse Quantization 된 후, RS 모듈(120-23)에서 Rescaling 된다.As shown in FIG. 6, it can be seen that the audio signal of the MPEG-BSAC format is preprocessed by the preprocessing module-2 120-2. That is, the audio signal of the MPEG-BSAC format is signal processed by the AD modules 120-21, inverse quantized by the IQ modules 120-22, and then rescaled by the RS modules 120-23.
이후, 전처리된 오디오 신호는, MSS 모듈(131-1)에서 신호처리되고, PNS 모듈(131-3)에서 PNS 처리된 후, IS 모듈(131-2)에서 신호처리되며, TNS 모듈(131-4)에서 TNS 처리된 후, IMDCT 모듈(131-5)에서 IMDCT 되고, BSAC-GC 모듈(132-2)에서 BSAC-GC 처리된다.Thereafter, the preprocessed audio signal is signal-processed by the MSS module 131-1, PNS-processed by the PNS module 131-3, and then signal-processed by the IS module 131-2, and the TNS module 131-. After TNS processing in 4), IMDCT is performed in the IMDCT module 131-5, and BSAC-GC processing is performed in the BSAC-GC module 132-2.
이와 같은 과정에 의해, 오디오 신호가 압축해제되어, 오디오 복호부(130)에서는 압축해제된 오디오 신호가 출력되게 된다.By this process, the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
도 7에는 도 4에 도시된 오디오 복호 장치가 MPEG2-AAC 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면이다.FIG. 7 is a diagram illustrating a process of decoding an audio signal of MPEG2-AAC format by the audio decoding apparatus shown in FIG. 4 in detail.
도 7에 도시된 바에 따르면, MPEG2-AAC 포맷의 오디오 신호는 전처리 모듈-1(120-1)에서 전처리됨을 알 수 있다. 즉, MPEG-Layer Ⅲ 포맷의 오디오 신호는 HD(120-11) 모듈에서 Huffman Decoding 되고, IQ 모듈(120-12)에서 Inverse Quantization 된 후, RS 모듈(120-13)에서 Rescaling 된다.As shown in FIG. 7, it can be seen that the audio signal of the MPEG2-AAC format is preprocessed by the preprocessing module-1 120-1. That is, the MPEG-Layer III format audio signal is Huffman decoded in the HD 120-11 module, inverse quantized in the IQ module 120-12, and rescaled in the RS module 120-13.
이후, 전처리된 오디오 신호는, MSS 모듈(131-1)에서 신호처리되고, PD 모듈(132-3)에서 Prediction Decoding 처리된 후, IS 모듈(131-2)에서 신호처리되며, 제1 DSC 모듈(132-4)에서 DSC 처리된다. 그리고, 전처리된 오디오 신호는, TNS 모듈(131-4)에서 TNS 처리되고, 제2 DSC 모듈(132-5)에서 DSC 처리된 후, IMDCT 모듈(131-5)에서 IMDCT 되며, AAC-GC 모듈(132-6)에서 AAC-GC 처리된 후, ISC 모듈(132-7)에서 ISC 처리된다.Subsequently, the preprocessed audio signal is signal processed by the MSS module 131-1, prediction decoded by the PD module 132-3, and then signal processed by the IS module 131-2. DSC treatment is performed at 132-4. The pre-processed audio signal is TNS-processed in the TNS module 131-4, DSC-processed in the second DSC module 132-5, and then IMDCT in the IMDCT module 131-5, and the AAC-GC module. After AAC-GC processing at 132-6, ISC processing is performed at ISC module 132-7.
이와 같은 과정에 의해, 오디오 신호가 압축해제되어, 오디오 복호부(130)에서는 압축해제된 오디오 신호가 출력되게 된다.By this process, the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
도 8에는 도 4에 도시된 오디오 복호 장치가 MPEG4-AAC 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면이다.8 is a diagram illustrating a process of decoding an audio signal of MPEG4-AAC format by the audio decoding apparatus shown in FIG. 4 in detail.
도 8에 도시된 바에 따르면, MPEG4-AAC 포맷의 오디오 신호는 전처리 모듈-1(120-1)에서 전처리됨을 알 수 있다. 즉, MPEG4-AAC 포맷의 오디오 신호는 HD(120-11) 모듈에서 Huffman Decoding 되고, IQ 모듈(120-12)에서 Inverse Quantization 된 후, RS 모듈(120-13)에서 Rescaling 된다.As shown in FIG. 8, it can be seen that the audio signal of the MPEG4-AAC format is preprocessed by the preprocessing module-1 120-1. That is, the audio signal of the MPEG4-AAC format is Huffman decoded in the HD 120-11 module, inverse quantized in the IQ module 120-12, and then rescaled in the RS module 120-13.
이후, 전처리된 오디오 신호는, MSS 모듈(131-1)에서 신호처리되고, PNS 모듈(131-3)에서 PNS 처리된 후, IS 모듈(131-2)에서 신호처리되며, 제1 DSC 모듈(132-4)에서 DSC 처리된다. 그리고, 전처리된 오디오 신호는, TNS 모듈(131-4)에서 TNS 처리되고, 제2 DSC 모듈(132-5)에서 DSC 처리된 후, IMDCT 모듈(131-5)에서 IMDCT 되며, AAC-GC 모듈(132-6)에서 AAC-GC 처리된 후, ISC 모듈(132-7)에서 ISC 처리된다.Subsequently, the preprocessed audio signal is signal processed by the MSS module 131-1, PNS processed by the PNS module 131-3, and then signal processed by the IS module 131-2. DSC 132-4). The pre-processed audio signal is TNS-processed in the TNS module 131-4, DSC-processed in the second DSC module 132-5, and then IMDCT in the IMDCT module 131-5, and the AAC-GC module. After AAC-GC processing at 132-6, ISC processing is performed at ISC module 132-7.
이와 같은 과정에 의해, 오디오 신호가 압축해제되어, 오디오 복호부(130)에서는 압축해제된 오디오 신호가 출력되게 된다.By this process, the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
도 9에는 도 4에 도시된 오디오 복호 장치가 MPEG4-AAC v1 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면이다.9 is a diagram illustrating a process of decoding an audio signal of MPEG4-AAC v1 format by the audio decoding apparatus of FIG. 4 in detail.
도 9에 도시된 바에 따르면, MPEG4-AAC v1 포맷의 오디오 신호는 전처리 모듈-1(120-1)에서 전처리됨을 알 수 있다. 즉, MPEG4-AAC v1 포맷의 오디오 신호는 HD(120-11) 모듈에서 Huffman Decoding 되고, IQ 모듈(120-12)에서 Inverse Quantization 된 후, RS 모듈(120-13)에서 Rescaling 된다.As shown in FIG. 9, it can be seen that the audio signal of the MPEG4-AAC v1 format is preprocessed by the preprocessing module-1 120-1. That is, the audio signal of the MPEG4-AAC v1 format is Huffman decoded in the HD 120-11 module, inverse quantized in the IQ module 120-12, and then rescaled in the RS module 120-13.
이후, 전처리된 오디오 신호는, MSS 모듈(131-1)에서 신호처리되고, PNS 모듈(131-3)에서 PNS 처리된 후, IS 모듈(131-2)에서 신호처리되며, 제1 DSC 모듈(132-4)에서 DSC 처리된 후, TNS 모듈(131-4)에서 TNS 처리된다. 그리고, 전처리된 오디오 신호는, 제2 DSC 모듈(132-5)에서 DSC 처리된 후, IMDCT 모듈(131-5)에서 IMDCT 되며, AAC-GC 모듈(132-6)에서 AAC-GC 처리된 후, ISC 모듈(132-7)에서 ISC 처리되고, SBR 모듈(132-8)에서 SBR 처리된다.Subsequently, the preprocessed audio signal is signal-processed by the MSS module 131-1, PNS-processed by the PNS module 131-3, and then signal-processed by the IS module 131-2. After DSC processing at 132-4, the TNS processing is performed at the TNS module 131-4. After the preprocessed audio signal is DSC processed in the second DSC module 132-5, IMDCT is performed in the IMDCT module 131-5, and AAC-GC processed in the AAC-GC module 132-6. ISC processing is performed at the ISC module 132-7 and SBR processing is performed at the SBR module 132-8.
이와 같은 과정에 의해, 오디오 신호가 압축해제되어, 오디오 복호부(130)에서는 압축해제된 오디오 신호가 출력되게 된다.By this process, the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
도 10에는 도 4에 도시된 오디오 복호 장치가 MPEG4-AAC v2 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면이다.FIG. 10 is a detailed diagram illustrating a process of decoding an audio signal of MPEG4-AAC v2 format by the audio decoding apparatus shown in FIG. 4.
도 10에 도시된 바에 따르면, MPEG4-AAC v2 포맷의 오디오 신호는 전처리 모듈-1(120-1)에서 전처리됨을 알 수 있다. 즉, MPEG4-AAC v2 포맷의 오디오 신호는 HD(120-11) 모듈에서 Huffman Decoding 되고, IQ 모듈(120-12)에서 Inverse Quantization 된 후, RS 모듈(120-13)에서 Rescaling 된다.As shown in FIG. 10, it can be seen that the audio signal of the MPEG4-AAC v2 format is preprocessed by the preprocessing module-1 120-1. That is, the MPEG4-AAC v2 format audio signal is Huffman decoded in the HD 120-11 module, inverse quantized in the IQ module 120-12, and rescaled in the RS module 120-13.
이후, 전처리된 오디오 신호는, MSS 모듈(131-1)에서 신호처리되고, PNS 모듈(131-3)에서 PNS 처리된 후, IS 모듈(131-2)에서 신호처리되며, 제1 DSC 모듈(132-4)에서 DSC 처리된 후, TNS 모듈(131-4)에서 TNS 처리된다. 그리고, 전처리된 오디오 신호는, 제2 DSC 모듈(132-5)에서 DSC 처리된 후, IMDCT 모듈(131-5)에서 IMDCT 되며, AAC-GC 모듈(132-6)에서 AAC-GC 처리된 후, ISC 모듈(132-7)에서 ISC 처리된다. 그리고, 전처리된 오디오 신호는, SBR 모듈(132-8)에서 SBR 처리되고, PS 모듈(132-9)에서 PS 처리된다.Subsequently, the preprocessed audio signal is signal-processed by the MSS module 131-1, PNS-processed by the PNS module 131-3, and then signal-processed by the IS module 131-2. After DSC processing at 132-4, the TNS processing is performed at the TNS module 131-4. After the preprocessed audio signal is DSC processed in the second DSC module 132-5, IMDCT is performed in the IMDCT module 131-5, and AAC-GC processed in the AAC-GC module 132-6. ISC processing is performed in the ISC module 132-7. The preprocessed audio signal is subjected to SBR processing in the SBR module 132-8 and PS processing in the PS module 132-9.
이와 같은 과정에 의해, 오디오 신호가 압축해제되어, 오디오 복호부(130)에서는 압축해제된 오디오 신호가 출력되게 된다.By this process, the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
도 11에는 도 4에 도시된 오디오 복호 장치가 MPEG4-SLS 포맷의 오디오 신호를 복호하는 과정을 상세히 나타낸 도면이다.FIG. 11 is a diagram illustrating a process of decoding an audio signal of MPEG4-SLS format by the audio decoding apparatus of FIG. 4 in detail.
도 11에 도시된 바에 따르면, MPEG4-SLS 포맷의 오디오 신호는 전처리 모듈-3(120-3)에서 전처리됨을 알 수 있다. 즉, MPEG4-SLS 포맷의 오디오 신호는 HD(120-31) 모듈에서 Huffman Decoding 되고, IQ 모듈(120-32)에서 Inverse Quantization 된 후, RS 모듈(120-33)에서 Rescaling 되며, BPGC/CBAC-D 모듈(120-34)에서 BPGC/CBAC-Decoding 처리된 후 LEMD 모듈(120-35)에서 LEMD 처리된다.As shown in FIG. 11, it can be seen that the audio signal of the MPEG4-SLS format is preprocessed by the preprocessing module-3 120-3. That is, the audio signal of the MPEG4-SLS format is Huffman decoded in the HD 120-31 module, inverse quantized in the IQ module 120-32, rescaled in the RS module 120-33, and BPGC / CBAC-. After the BPGC / CBAC-Decoding process is performed in the D module 120-34, the LEMD process is performed in the LEMD module 120-35.
이후, 전처리된 오디오 신호는, IEM 모듈(132-10)에서 IEM 처리되고, MSS 모듈(131-1)에서 MSS 처리된 후, TNS 모듈(131-4)에서 TNS 처리되며, IIMDCT 모듈(132-11)에서 IIMDCT 된다.Thereafter, the pre-processed audio signal is IEM processed in the IEM module 132-10, MSS processed in the MSS module 131-1, and then TNS processed in the TNS module 131-4, and IIMDCT module 132- 11) becomes IIMDCT.
이와 같은 과정에 의해, 오디오 신호가 압축해제되어, 오디오 복호부(130)에서는 압축해제된 오디오 신호가 출력되게 된다.By this process, the audio signal is decompressed, and the audio decoder 130 outputs the decompressed audio signal.
지금까지, 특정 포맷의 오디오 신호들을 예시하고 이들을 복호할 수 있는 오디오 복호 장치에 대해 상세히 설명하였다. 여기서 언급한 오디오 신호의 포맷들은 설명의 편의를 위해 든 예에 불과하다. 따라서, 다른 포맷의 오디오 신호들에 대해서도 복호 가능한 오디오 복호 장치를 구현할 수 있음은 물론이다. 이를 위해서는, 필요한 전처리 모듈을 전처리부(120)에 추가시키고, 필요한 공유 오디오 신호처리 모듈을 공유 오디오 복호 모듈(131)에 추가시키며, 필요한 선택 오디오 신호처리 모듈을 선택 오디오 복호 모듈(132)에 추가시키면 된다.So far, the audio decoding apparatus that exemplifies and decodes audio signals of a specific format has been described in detail. The formats of the audio signal mentioned herein are merely examples for convenience of description. Therefore, it is a matter of course that an audio decoding device capable of decoding audio signals of other formats can be implemented. To this end, the necessary preprocessing module is added to the preprocessor 120, the necessary shared audio signal processing module is added to the shared audio decoding module 131, and the required selective audio signal processing module is added to the selection audio decoding module 132. Just do it.
이하에서는, 본 발명의 다른 실시예에 따른 음성 복호 장치에 대해 상세히 설명한다. 음성 복호 장치는, 압축된 음성(Speech) 신호를 복호하여 압축해제된 음성 신호를 출력하는 장치이다. 음성(Speech) 신호는 오디오(Audio) 신호 보다 대역이 좁다. 즉, 음성 신호의 대역은 오디오 신호의 저대역 부분에 해당한다.Hereinafter, a voice decoding apparatus according to another embodiment of the present invention will be described in detail. The voice decoding device is a device that outputs a decompressed voice signal by decoding the compressed speech signal. Speech signals have a narrower band than audio signals. That is, the band of the voice signal corresponds to the low band portion of the audio signal.
도 12는 본 발명의 또 다른 실시예에 따른 음성 복호 장치의 블럭도이다. 본 실시예에 따른 음성 복호 장치는, 도 12에 도시된 바와 같이, 분석부(310), 전처리부(320) 및 음성 복호부(330)를 구비한다.12 is a block diagram of an audio decoding apparatus according to another embodiment of the present invention. As shown in FIG. 12, the speech decoding apparatus according to the present exemplary embodiment includes an analyzer 310, a preprocessor 320, and a speech decoder 330.
분석부(310)는 입력되는 압축된 음성 신호, 즉 복호할 음성 신호를 분석하여 음성 신호의 포맷을 파악한다. 분석부(310)는 파악된 음성 신호의 포맷을 토대로, 후술할 전처리부(320)의 전처리 과정과 음성 복호부(330)의 복호 과정을 제어한다. 분석부(310)가 이들을 제어하는 내용에 대한 구체적인 설명은 후술한다.The analyzer 310 analyzes an input compressed voice signal, that is, a voice signal to be decoded, and determines a format of the voice signal. The analysis unit 310 controls the preprocessing process of the preprocessor 320 and the decoding process of the voice decoder 330, which will be described later, on the basis of the recognized format of the voice signal. Detailed description of the contents of the analysis unit 310 to control them will be described later.
전처리부(320)는 분석부(310)에서 출력되는 압축된 음성 신호에 대한 전처리(Pre-Processing)를 수행한다. 전처리는 음성 복호부(330)에서의 복호가 처리되기 전에 먼저 수행되어져야 할 신호처리로, 역양자화 처리, 신호 증폭, 신호 조정 등의 신호처리가 포함된다.The preprocessor 320 performs pre-processing on the compressed voice signal output from the analyzer 310. The preprocessing is a signal processing that must be performed before the decoding in the audio decoding unit 330 is processed, and includes signal processing such as inverse quantization processing, signal amplification, and signal adjustment.
음성 복호부(330)는 전처리부(320)에서 전처리된 음성 신호를 복호한다. 그 결과, 음성 복호부(330)에서는 압축해제된 음성 신호가 출력된다. 이와 같은 기능을 수행하는 음성 복호부(330)는 공유 음성 복호 모듈(331)과 선택 음성 복호 모듈(332)을 구비한다.The speech decoder 330 decodes the speech signal preprocessed by the preprocessor 320. As a result, the speech decoder 330 outputs the decompressed speech signal. The voice decoding unit 330 that performs the above function includes a shared voice decoding module 331 and a selected voice decoding module 332.
공유 음성 복호 모듈(331)과 선택 음성 복호 모듈(332) 모두 압축된 음성 신호를 복호하는데 필요한 신호처리를 수행하는 모듈이라는 점에서는, 양자가 공통된다.Both of the common voice decoding module 331 and the selected voice decoding module 332 are modules that perform signal processing necessary for decoding the compressed voice signal.
하지만, 공유 음성 복호 모듈(331)은 각기 다른 포맷의 음성 신호들 모두에 대해 신호처리를 수행하는 모듈인 반면, 선택 음성 복호 모듈(332)은 음성 신호의 포맷에 따라 선택적으로 신호처리를 수행하는(즉, 음성 신호의 포맷에 따라, 신호처리를 더 수행할 수도 있고 수행하지 않을 수도 있는) 모듈이라는 점에서, 양자는 차이가 있다.However, the shared speech decoding module 331 is a module that performs signal processing on all of the speech signals of different formats, whereas the selective speech decoding module 332 selectively performs signal processing according to the format of the speech signal. Both differ in that they are modules (that may or may not perform further signal processing, depending on the format of the voice signal).
도 13은, 도 12에 도시된 음성 복호 장치를 보다 상세히 도시한 도면이다. 도 13에 도시된 바에 따르면, 1) 전처리부(320)는 L개의 전처리 모듈(320-1 내지 320-L)을 구비하고 있고, 2) 공유 음성 복호 모듈(331)은 M개의 공유 음성 신호처리 모듈(331-1 내지 331-M)을 구비하고 있으며, 3) 선택 음성 복호 모듈(332)은 N개의 선택 음성 신호처리 모듈(332-1 내지 332-N)을 구비하고 있음을 확인할 수 있다.FIG. 13 is a diagram showing the voice decoding device shown in FIG. 12 in more detail. As shown in FIG. 13, 1) the preprocessor 320 includes L preprocessing modules 320-1 to 320 -L, and 2) the shared voice decoding module 331 processes M shared voice signals. Modules 331-1 to 331-M, and 3) the selected speech decoding module 332 includes N selected speech signal processing modules 332-1 to 332-N.
전처리부(320)에 구비된 L개의 전처리 모듈(320-1 내지 320-L)은 각기 다른 포맷의 음성 신호에 대한 전처리를 각각 담당한다. 예를 들어, 1) 제1 전처리 모듈(320-1)은 제1 포맷과 제2 포맷의 음성 신호에 대한 전처리를 담당하고, 2) 제2 전처리 모듈(320-2)은 제3 포맷과 제4 포맷의 음성 신호에 대한 전처리를 담당하며, 3) 제3 전처리 모듈(320-3)은 제5 포맷의 음성 신호에 대한 전처리를 담당할 수 있다.The L preprocessing modules 320-1 to 320 -L provided in the preprocessor 320 are in charge of preprocessing voice signals of different formats. For example, 1) the first preprocessing module 320-1 is responsible for preprocessing the audio signals of the first format and the second format, and 2) the second preprocessing module 320-2 is the third format and the third format. It is responsible for preprocessing the audio signal of the 4 format, and 3) the third preprocessing module 320-3 may be responsible for the preprocessing for the audio signal of the fifth format.
분석부(310)는 입력되는 압축된 음성 신호의 포맷을 토대로, 전처리부(320)의 전처리 과정을 제어한다고 전술한 바 있다. 이는, 분석부(310)가 포맷이 파악된 압축된 음성 신호를 해당 전처리 모듈로 전달하는 것을 의미한다.As described above, the analyzer 310 controls the preprocessing process of the preprocessor 320 based on the compressed audio signal format. This means that the analysis unit 310 delivers the compressed voice signal having the recognized format to the corresponding preprocessing module.
예를 들어, 입력되는 압축된 음성 신호가 제2 포맷으로 밝혀진 경우, 분석부(310)는 입력받은 제2 포맷의 음성 신호를 제1 전처리 모듈(320-1)로 전달하게 된다.For example, when the input compressed voice signal is found to be in the second format, the analyzer 310 transmits the input second voice signal to the first preprocessing module 320-1.
공유 음성 복호 모듈(331)에 구비된 M개의 공유 음성 신호처리 모듈(331-1 내지 331-M)은 입력되는 음성 신호의 복호에 요구되는 신호처리를 수행하는 모듈들이다. M개의 공유 음성 신호처리 모듈(331-1 내지 331-M) 중 어느 모듈들에 의해 신호처리가 수행되는지는 음성 신호의 포맷마다 차이가 있다.The M shared voice signal processing modules 331-1 to 331 -M included in the shared voice decoding module 331 are modules that perform signal processing required for decoding the input voice signal. Which of the M shared voice signal processing modules 331-1 to 331 -M performs signal processing differs depending on the format of the voice signal.
예를 들어, 제1 포맷의 음성 신호 복호시에는 제1 공유 음성 신호처리 모듈(331-1) 및 제2 공유 음성 신호처리 모듈(331-2)이 수행하는 신호처리가 필요한 반면, 제2 포맷의 음성 신호 복호시에는 제1 공유 음성 신호처리 모듈(331-1), 제2 공유 음성 신호처리 모듈(331-2) 및 제3 공유 음성 신호처리 모듈(331-3)이 수행하는 신호처리가 필요할 수 있다.For example, when decoding a voice signal of the first format, signal processing performed by the first shared voice signal processing module 331-1 and the second shared voice signal processing module 331-2 is required, while the second format is used. When decoding a voice signal, signal processing performed by the first shared voice signal processing module 331-1, the second shared voice signal processing module 331-2, and the third shared voice signal processing module 331-3 is performed. It may be necessary.
선택 음성 복호 모듈(332)에 구비된 N개의 선택 음성 신호처리 모듈(332-1 내지 332-N)도 입력되는 음성 신호의 복호에 요구되는 신호처리를 수행하는 모듈들이다. 음성 신호의 포맷에 따라서는, 선택 음성 복호 모듈(332)에 구비된 N개의 선택 음성 신호처리 모듈(332-1 내지 332-N) 중 적어도 하나에 의한 신호처리가 필요한 포맷도 있고, 필요하지 않은 포맷도 있다.The N number of selected voice signal processing modules 332-1 to 332-N included in the selected voice decoding module 332 are modules that perform signal processing required for decoding the input voice signal. Depending on the format of the audio signal, there are some formats that require signal processing by at least one of the N selected speech signal processing modules 332-1 to 332-N included in the selected speech decoding module 332. There is also a format.
예를 들어, 제1 포맷의 음성 신호 복호시에는 N개의 선택 음성 신호처리 모듈(332-1 내지 332-N)이 수행하는 신호처리가 필요하지 않은 반면, 제2 포맷의 음성 신호 복호시에는 제1 선택 음성 신호처리 모듈(332-1) 및 제2 선택 음성 신호처리 모듈(332-2)이 수행하는 신호처리가 필요할 수 있다.For example, the signal processing performed by the N selected voice signal processing modules 332-1 to 332-N is not necessary when decoding the voice signal of the first format, whereas when decoding the voice signal of the second format, Signal processing performed by the first selective voice signal processing module 332-1 and the second selective voice signal processing module 332-2 may be required.
한편, 분석부(310)는 압축된 음성 신호의 포맷을 토대로, 음성 복호부(330)의 복호과정을 제어한다고 전술한 바 있다. 이는, 분석부(310)가 포맷이 파악된 압축된 음성 신호에 필요한 신호처리들을 판별한 후, 판별된 신호처리들이 순서에 맞게 수행되도록, 복호부(331)에 마련된 공유 음성 복호 모듈(331)과 선택 음성 복호 모듈(332)을 제어하는 것을 의미한다.On the other hand, the analyzer 310 has been described above to control the decoding process of the speech decoder 330 based on the compressed voice signal format. This is because the analysis unit 310 determines the signal processings required for the compressed speech signal having the format determined, and then the shared speech decoding module 331 provided in the decoder 331 to perform the determined signal processings in order. And control the selective speech decoding module 332.
예를 들어, 입력되는 압축된 음성 신호가 제1 포맷으로 밝혀졌는데, 제1 포맷의 음성 신호는 "제1 공유 음성 신호처리 모듈(331-1)이 담당하는 신호처리 → 제2 공유 음성 신호처리 모듈(331-2)이 담당하는 신호처리"를 통해 복호된다고 가정한다면, 분석부(310)는 제1 전처리 모듈(320-1)에서 전처리된 제1 포맷의 음성 신호가 위 " ~ "에 기재된 순서대로 신호처리되도록 공유 음성 복호 모듈(331)을 제어하고, 선택 음성 복호 모듈(332)은 신호처리를 수행하지 않도록 제어하게 된다.For example, the input compressed voice signal is found in the first format, and the voice signal of the first format is " signal processing performed by the first shared voice signal processing module 331-1 → second shared voice signal processing. If it is assumed that the module 331-2 is decoded through "signal processing in charge", the analyzer 310 may determine that the voice signal of the first format preprocessed by the first preprocessing module 320-1 is described in "~". The shared voice decoding module 331 is controlled to be signal processed in order, and the selected voice decoding module 332 is controlled not to perform signal processing.
다른 예로, 입력되는 압축된 음성 신호가 제1 포맷으로 밝혀졌는데, 제1 포맷의 음성 신호는 "제1 공유 음성 신호처리 모듈(331-1)이 담당하는 신호처리 → 제2 공유 음성 신호처리 모듈(331-2)이 담당하는 신호처리 → 제1 선택 음성 신호처리 모듈(332-1)이 담당하는 신호처리 → 제3 공유 음성 신호처리 모듈(331-3)이 담당하는 신호처리 → 제2 선택 음성 신호처리 모듈(332-3)이 담당하는 신호처리"를 통해 복호된다고 가정한다면, 분석부(310)는 제1 전처리 모듈(320-1)에서 전처리된 제1 포맷의 음성 신호가 위 " ~ "에 기재된 순서대로 신호처리되도록 공유 음성 복호 모듈(331)과 선택 음성 복호 모듈(332)을 제어하게 된다.As another example, the input compressed voice signal is found to be the first format, and the voice signal of the first format is " signal processing performed by the first shared voice signal processing module 331-1 → the second shared voice signal processing module. Signal processing in charge of 331-2 → Signal processing in charge of first selection voice signal processing module 332-1 → Signal processing in charge of third shared voice signal processing module 331-3 → Second selection If it is assumed that the audio signal processing module 332-3 is decoded through the signal processing that is in charge, the analysis unit 310 may determine that the voice signal of the first format preprocessed by the first preprocessing module 320-1 is "~". The shared voice decoding module 331 and the selected voice decoding module 332 are controlled so as to process the signals in the order described.
지금까지, 본 발명의 바람직한 실시예에 대해 상세히 설명하였다. 본 실시예에 따르면, 음성 복호 장치를 설계할 때, 범용화된 공유 음성 복호 모듈(331)에 선택 음성 복호 모듈(332)를 추가하는 방식으로 설계가능함을 알 수 있다.So far, the preferred embodiment of the present invention has been described in detail. According to the present embodiment, when designing a voice decoding apparatus, it can be seen that it is possible to design by adding the selected voice decoding module 332 to the generalized shared voice decoding module 331.
즉, 선택 음성 복호 모듈(332)은 공유 음성 복호 모듈(331)에서 수행할 수 없는 특정 포맷의 음성 신호들의 복호에 필요한 신호처리를 수행할 수 있도록 설계하면 된다.That is, the selected voice decoding module 332 may be designed to perform signal processing necessary for decoding voice signals of a specific format that cannot be performed by the shared voice decoding module 331.
이에 따라, 규격이나 제조업체의 스펙에 의해 공유 음성 복호 모듈(331)에 마련된 모듈들을 변경하거나, 다른 모듈을 추가하는 것이 불가능한 경우에도, 선택 음성 복호 모듈(332)을 통해 복호에 필요한 모듈을 변경하거나 추가하는 것이 가능해진다.Accordingly, even if it is impossible to change the modules provided in the shared voice decoding module 331 according to the specification or the manufacturer's specification, or add another module, it is possible to change the module necessary for decoding through the selected voice decoding module 332. It becomes possible to add.
도 14에는 지금까지 설명한 음성 복호 과정을 나타내었다. 도 14는 본 발명의 다른 실시예에 따른 음성 복호 방법의 설명에 제공되는 흐름도이다.14 shows a voice decoding process described so far. 14 is a flowchart provided to explain a voice decoding method according to another embodiment of the present invention.
도 14에 도시된 바와 같이, 먼저, 분석부(310)는 입력되는 압축된 음성 신호, 즉 복호할 음성 신호를 분석하여 음성 신호의 포맷을 파악한다(S410).As shown in FIG. 14, first, the analysis unit 310 analyzes an input compressed voice signal, that is, a voice signal to be decoded to determine a format of a voice signal (S410).
이후, 전처리부(320)는 분석부(320)의 제어에 따라, 압축된 음성 신호에 대한 전처리를 수행한다(S420).Thereafter, the preprocessor 320 performs preprocessing on the compressed voice signal under the control of the analyzer 320 (S420).
그러면, 음성 복호부(330)는 S420단계에서 전처리된 음성 신호에 대해 복호를 수행한다(S430).Then, the voice decoder 330 decodes the preprocessed voice signal in step S420 (S430).
구체적으로, S430단계에서는, 전처리된 음성 신호에 대해 공유 음성 복호 모듈(331)이 담당하는 신호처리들과 선택 음성 복호 모듈(332)이 담당하는 신호처리들 중 필요한 신호처리들이 순서에 맞게 수행된다. 이때, 필요한 신호처리들과 이들의 순서는 압축된 음성 신호의 포맷을 참조하여, 분석부(310)가 결정함은 전술한 바 있다.Specifically, in step S430, necessary signal processing among signal processings performed by the shared voice decoding module 331 and signal processings performed by the selected voice decoding module 332 is performed in order for the preprocessed voice signal. . In this case, the necessary signal processings and their order are described above by referring to the format of the compressed voice signal, and determined by the analyzer 310.
도 15에는, 지금까지 설명한 실시예에 따른 음성 복호 장치의 개념을 이용하여, 실제 음성 신호를 복호할 수 있도록 구현한 음성 복호 장치를 예시하였다.FIG. 15 illustrates a voice decoding device implemented to decode an actual voice signal using the concept of the voice decoding device according to the above-described embodiment.
도 15에 도시된 음성 복호 장치는, 1) MPEG4-ALS 포맷의 음성 신호, 2) G.729 포맷의 음성 신호 및 3) AMR-WB 포맷의 음성 신호에 대해 복호를 수행할 수 있다.The audio decoding apparatus shown in FIG. 15 may perform decoding on 1) an audio signal of MPEG4-ALS format, 2) an audio signal of G.729 format, and 3) an audio signal of AMR-WB format.
도 15에 도시된 바에 따르면, 전처리부(320)에는 전처리 모듈-1,2,3(320-1, 320-2, 320-3)이 마련되어 있다. 1) 전처리 모듈-1(320-1)은 ED(Entropy Decoding) 모듈(320-1)이고, 2) 전처리 모듈-2(320-2)는 DACV(Decode Adaptive Code Vector) 모듈(320-21), DG(Decode Gain) 모듈(320-22), DFCV(Decode Fixed Code Vector) 모듈(320-23) 및 D-LSP(Decode-LSP) 모듈(320-24)를 구비하며, 3) 전처리 모듈-3(320-3)은 DACV(Decode Adaptive Code Vector) 모듈(320-31), DG(Decode Gain) 모듈(320-32), DICV(Decode Innovative Code Vector) 모듈(320-33), D-LSP(Decode-LSP) 모듈(320-34) 및 GS(Gain Scaling) 모듈(320-35)을 구비한다.As shown in FIG. 15, the preprocessor 320 is provided with preprocessing modules-1, 2, and 3 (320-1, 320-2, and 320-3). 1) The preprocessing module-1 320-1 is an Entropy Decoding (ED) module 320-1, and 2) the preprocessing module-2 320-2 is a Decode Adaptive Code Vector (DACV) module 320-21. , Decode Gain (DG) module (320-22), Decode Fixed Code Vector (DFCV) module (320-23), and Decode-LSP (320-24) module (D-LSP); 3 (320-3) includes the Decode Adaptive Code Vector (DACV) module 320-31, the Decode Gain (DGV) module 320-32, the Decode Innovative Code Vector (DICV) module 320-33, and the D-LSP. (Decode-LSP) modules 320-34 and GS (Gain Scaling) modules 320-35.
또한, 공유 음성 복호 모듈(331)은 공유 음성 신호처리 모듈로, 1) CE(Construct Excitation) 모듈(331-1) 및 2) FIR-F(FIR Filtering) 모듈(331-2)을 구비하고 있다. 여기서, FIR-F 모듈(331-2)은, 21) HB-SF(HB-Synthesis Filtering) 모듈(331-21), 22) PF(Post Filtering) 모듈(331-22), 23) WF(Weighting Filtering) 모듈(331-23), 24) STP(Short Term Prediction) 모듈(331-24), 25) BPF(BP Filtering) 모듈(331-25), 26) APF(Adaptive Post Filtering) 모듈(331-26) 및 27) QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈(331-27)을 구비하고 있다.In addition, the shared speech decoding module 331 is a shared speech signal processing module, which includes 1) a CE (Construct Excitation) module 331-1 and 2) a FIR-F (FIR Filtering) module 331-2. . Here, the FIR-F module 331-2 includes 21) HB-Synthesis Filtering (HB-SF) modules 331-21, 22) PF (Post Filtering) modules 331-22, and 23) WF (Weighting). Filtering (331-23), 24) Short Term Prediction (STP) module (331-24), 25) BPF (BP Filtering) module (331-25), 26) Adaptive Post Filtering (APF) module (331-) 26) and 27) QMF-SF (Quadrature Mirror Filtering-Synthesis Filtering) modules 331-27.
그리고, 선택 음성 복호 모듈(332)은 선택 음성 신호처리 모듈로, 1) JCD(Joint Channel Decoding) 모듈(332-1), 2) LTP(Long Term Prediction) 모듈(332-2), 3) CLPC(Conversion to LPC) 모듈(332-3), 4) HP&US(High Pass & UpScaling) 모듈(332-4), 5) LTP-F(LTP-Filtering) 모듈(332-5), 6) PP(Post Processing) 모듈(332-6), 7) DE(DeEmphasis) 모듈(332-7) 및 8) US(UpSampling) 모듈(332-8)를 구비하고 있다.The selected voice decoding module 332 is a selected voice signal processing module, which includes 1) Joint Channel Decoding (JCD) module 332-1, 2) Long Term Prediction (LTP) module 332-2, and 3) CLPC. (Conversion to LPC) module (332-3), 4) HP & US (High Pass & UpScaling) module (332-4), 5) LTP-F (LTP-Filtering) module (332-5), 6) PP (Post) Processing (module) 332-6, 7) DE (DeEmphasis) module 332-7, and 8) US (UpSampling) module 332-8.
도 16에는 도 15에 도시된 음성 복호 장치가 MPEG4-ALS 포맷의 음성 신호를 복호하는 과정을 상세히 나타낸 도면이다.FIG. 16 is a diagram illustrating a process of decoding a voice signal of MPEG4-ALS format by the voice decoding apparatus shown in FIG. 15 in detail.
도 16에 도시된 바에 따르면, MPEG4-ALS 포맷의 음성 신호는 먼저 전처리 모듈-1(320-1)에서 전처리됨을 알 수 있다. 즉, MPEG4-ALS 포맷의 음성 신호는 ED 모듈(320-1) 모듈에서 Entropy Decoding 된다.As shown in FIG. 16, it can be seen that the audio signal of the MPEG4-ALS format is first preprocessed by the preprocessing module-1 320-1. That is, the audio signal of the MPEG4-ALS format is encoded in the ED module 320-1.
이후, 전처리된 음성 신호는, JCD 모듈(332-1)에서 JCD 처리되고, LTP 모듈(332-2)에서 LTP 처리된 후, FIR-F 모듈(331-2)에서 신호처리된다. 구체적으로, 전처리된 음성 신호는 FIR-F 모듈(331-2)에 마련된 STP 모듈(331-24)에 의해 신호처리된다.Thereafter, the preprocessed voice signal is JCD processed in the JCD module 332-1, LTP processed in the LTP module 332-2, and then signal processed in the FIR-F module 331-2. Specifically, the preprocessed voice signal is signal processed by the STP module 331-24 provided in the FIR-F module 331-2.
이와 같은 과정에 의해, 음성 신호가 압축해제되어, 음성 복호부(330)에서는 압축해제된 음성 신호가 출력되게 된다.By this process, the speech signal is decompressed, and the speech decoder 330 outputs the decompressed speech signal.
도 17에는 도 15에 도시된 음성 복호 장치가 G.729 포맷의 음성 신호를 복호하는 과정을 상세히 나타낸 도면이다.FIG. 17 is a diagram illustrating a process of decoding a voice signal of G.729 format by the voice decoding apparatus shown in FIG. 15 in detail.
도 16에 도시된 바에 따르면, G.729 포맷의 음성 신호는 먼저 전처리 모듈-2(320-2)에서 전처리됨을 알 수 있다. 즉, G.729 포맷의 음성 신호는 전처리 모듈-2(320-2)에 마련된 DACV 모듈(320-21), DG 모듈(320-22), DFCV 모듈(320-23) 및 D-LSP 모듈(320-24)로 인가된다.As shown in FIG. 16, it can be seen that the voice signal of the G.729 format is first preprocessed by the preprocessing module-2 320-2. That is, the G.729 format audio signal includes the DACV module 320-21, the DG module 320-22, the DFCV module 320-23, and the D-LSP module provided in the preprocessing module-2 320-2. 320-24).
이후, DACV 모듈(320-21), DG 모듈(320-22) 및 DFCV 모듈(320-23)의 출력은 CE 모듈(331-1)에서 신호처리되고, D-LSP 모듈(320-24)의 출력은 CLPC 모듈(332-3)에서 신호처리된다. 그리고, CE 모듈(331-1)의 출력과 CLPC 모듈(332-3)의 출력은 FIR-F 모듈(331-2)에서 신호처리된다. 구체적으로, 이들은 FIR-F 모듈(331-2)에 마련된 PF 모듈(331-22)과 STP 모듈(331-24)에 의해 신호처리된다. 이후, FIR-F 모듈(331-2)의 출력은 HP&US 모듈(332-4)에서 신호처리된다.Thereafter, the outputs of the DACV module 320-21, the DG module 320-22, and the DFCV module 320-23 are signal processed by the CE module 331-1, and the output of the D-LSP module 320-24 is determined. The output is signaled at the CLPC module 332-3. The output of the CE module 331-1 and the output of the CLPC module 332-3 are signal processed by the FIR-F module 331-2. Specifically, these are signal processed by the PF modules 331-22 and STP modules 331-24 provided in the FIR-F module 331-2. Thereafter, the output of the FIR-F module 331-2 is signal processed by the HP & US module 332-4.
이와 같은 과정에 의해, 음성 신호가 압축해제되어, 음성 복호부(330)에서는 압축해제된 음성 신호가 출력되게 된다.By this process, the speech signal is decompressed, and the speech decoder 330 outputs the decompressed speech signal.
도 18에는 도 15에 도시된 음성 복호 장치가 AMR-WB 포맷의 음성 신호를 복호하는 과정을 상세히 나타낸 도면이다.FIG. 18 is a diagram illustrating a process of decoding a voice signal in AMR-WB format by the voice decoding apparatus shown in FIG. 15 in detail.
도 18에 도시된 바에 따르면, AMR-WB 포맷의 음성 신호는 먼저 전처리 모듈-3(320-3)에서 전처리됨을 알 수 있다. 즉, AMR-WB 포맷의 음성 신호는 전처리 모듈-3(320-3)에 마련된 DACV 모듈(320-31), DG 모듈(320-32), DICV 모듈(320-33), D-LSP 모듈(320-34) 및 GS 모듈(320-35)로 인가된다.As shown in FIG. 18, it can be seen that the audio signal of the AMR-WB format is first preprocessed by the preprocessing module-3 320-3. That is, the AMR-WB format voice signal includes the DACV module 320-31, the DG module 320-32, the DICV module 320-33, and the D-LSP module provided in the preprocessing module-3 (320-3). 320-34) and GS modules 320-35.
이후, DACV 모듈(320-31)의 출력은 LTP-F 모듈(332-5)과 CE 모듈(331-1)에서 신호처리되고, DG 모듈(320-32)과 DICV 모듈(320-33)의 출력은 CE 모듈(331-1)에서 신호처리되며, D-LSP 모듈(320-34)의 출력은 CLPC 모듈(332-3)에서 신호처리되고, GS 모듈(320-35)의 출력은 PP 모듈(332-6)에서 신호처리된다.Thereafter, the outputs of the DACV modules 320-31 are signal processed by the LTP-F module 332-5 and the CE module 331-1, and are output from the DG modules 320-32 and the DICV modules 320-33. The output is signaled at the CE module 331-1, the output of the D-LSP module 320-34 is signaled at the CLPC module 332-3, and the output of the GS module 320-35 is a PP module. Signal processing at 332-6.
그리고, GS 모듈(320-35), CE 모듈(331-1), CLPC 모듈(332-3) 및 PP 모듈(332-6)의 출력은 FIR-F 모듈(331-2)에서 신호처리된다. 구체적으로, 이들은 FIR-F 모듈(331-2)에 마련된 HB-SF 모듈(331-21), PF 모듈(331-22), BPF 모듈(331-25) 및 QMF-SF 모듈(331-27)에 의해 신호처리된다.In addition, outputs of the GS module 320-35, the CE module 331-1, the CLPC module 332-3, and the PP module 332-6 are signal processed by the FIR-F module 331-2. Specifically, they are the HB-SF module 331-21, the PF module 331-22, the BPF module 331-25 and the QMF-SF module 331-27 provided in the FIR-F module 331-2. Signal processing.
이후, FIR-F 모듈(331-2)의 출력은 DE 모듈(332-7)에서 신호처리 된 후, US 모듈(332-8)에서 신호처리된다.Thereafter, the output of the FIR-F module 331-2 is signal-processed in the DE module 332-7 and then signal-processed in the US module 332-8.
이와 같은 과정에 의해, 음성 신호가 압축해제되어, 음성 복호부(330)에서는 압축해제된 음성 신호가 출력되게 된다.By this process, the speech signal is decompressed, and the speech decoder 330 outputs the decompressed speech signal.
지금까지, 특정 포맷의 음성 신호들을 예시하고 이들을 복호할 수 있는 음성 복호 장치에 대해 상세히 설명하였다. 여기서 언급한 음성 신호의 포맷들은 설명의 편의를 위해 든 예에 불과하다. 따라서, 다른 포맷의 음성 신호들에 대해서도 복호 가능한 음성 복호 장치를 구현할 수 있음은 물론이다. 이를 위해서는, 필요한 전처리 모듈을 전처리부(320)에 추가시키고, 필요한 공유 음성 신호처리 모듈을 공유 음성 복호 모듈(331)에 추가시키며, 필요한 선택 음성 신호처리 모듈을 선택 음성 복호 모듈(332)에 추가시키면 된다.So far, a description has been given of a speech decoding apparatus that can exemplify and decode speech signals of a specific format. The formats of the voice signal mentioned herein are merely examples for convenience of description. Therefore, it is a matter of course that a voice decoding device capable of decoding the voice signals of other formats can be implemented. To this end, the necessary preprocessing module is added to the preprocessor 320, the necessary shared voice signal processing module is added to the shared voice decoding module 331, and the required selective voice signal processing module is added to the selected voice decoding module 332. Just do it.
이하에서는, 본 발명의 또 다른 실시예에 따른 오디오/음성 복호 장치에 대해 설명한다. 오디오/음성 복호 장치는, 압축된 오디오 신호 및/또는 음성 신호를 복호하여 압축해제된 오디오 신호 및/또는 음성 신호를 출력하는 장치이다.Hereinafter, an audio / audio decoding apparatus according to another embodiment of the present invention will be described. An audio / audio decoding device is a device that decodes a compressed audio signal and / or a voice signal and outputs a decompressed audio signal and / or a voice signal.
도 19는 본 발명의 또 다른 실시예에 따른 오디오/음성 복호 장치의 블럭도이다. 본 실시예에 따른 오디오/음성 복호 장치는, 도 19에 도시된 바와 같이, 분석부(510), 전처리부(520) 및 오디오/음성 복호부(530)를 구비한다.19 is a block diagram of an audio / audio decoding device according to another embodiment of the present invention. As shown in FIG. 19, the audio / audio decoding apparatus according to the present embodiment includes an analyzer 510, a preprocessor 520, and an audio / audio decoder 530.
분석부(510)는 입력되는 압축된 오디오 신호 및/또는 음성 신호, 즉 복호할 오디오 신호 및/또는 음성 신호를 분석하여 신호의 포맷을 파악한다.The analyzer 510 analyzes the input compressed audio signal and / or voice signal, that is, the audio signal and / or voice signal to be decoded to determine the format of the signal.
분석부(510)는 파악된 신호의 포맷을 토대로, 후술할 전처리부(520)의 전처리 과정과 오디오/음성 복호부(530)의 복호 과정을 제어한다. 분석부(510)가 이들을 제어하는 내용에 대한 구체적인 설명은 후술한다.The analyzer 510 controls a preprocessing process of the preprocessor 520 and a decoding process of the audio / audio decoder 530, which will be described later, based on the identified signal format. Details of the contents of the analysis unit 510 controlling them will be described later.
전처리부(520)는 분석부(510)에서 출력되는 압축된 오디오 신호 및/또는 음성 신호에 대한 전처리(Pre-Processing)를 수행한다. 전처리는 오디오/음성 복호부(530)에서의 복호가 처리되기 전에 먼저 수행되어져야 할 신호처리로, 역양자화 처리, 신호 증폭, 신호 조정 등의 신호처리가 포함된다.The preprocessor 520 performs pre-processing on the compressed audio signal and / or the voice signal output from the analyzer 510. The preprocessing is signal processing to be performed first before the decoding in the audio / voice decoding unit 530 is processed, and includes signal processing such as inverse quantization processing, signal amplification, and signal adjustment.
오디오/음성 복호부(530)는 전처리부(520)에서 전처리된 신호를 복호한다. 그 결과, 오디오/음성 복호부(530)에서는 압축해제된 오디오 신호 및/또는 음성 신호가 출력된다. 이와 같은 기능을 수행하는 오디오/음성 복호부(530)는 공유 오디오 복호 모듈(531)과 공유 음성 복호 모듈(532) 및 선택 복호 모듈(533)을 구비한다.The audio / audio decoder 530 decodes the signal preprocessed by the preprocessor 520. As a result, the audio / audio decoder 530 outputs the decompressed audio signal and / or the audio signal. The audio / audio decoding unit 530 that performs the above function includes a shared audio decoding module 531, a shared voice decoding module 532, and a selective decoding module 533.
공유 오디오 복호 모듈(531)은 각기 다른 포맷의 오디오 신호들 모두에 대해 신호처리를 수행하는 모듈이고, 공유 음성 복호 모듈(532)은 각기 다른 포맷의 음성 신호들 모두에 대해 신호처리를 수행하는 모듈이다.The shared audio decoding module 531 is a module which performs signal processing on all audio signals of different formats, and the shared voice decoding module 532 is a module which performs signal processing on all audio signals of different formats. to be.
한편, 공유 오디오 복호 모듈(531)은 음성 신호의 복호에 관여할 수도 있고, 마찬가지로 공유 음성 복호 모듈(532)도 오디오 신호의 복호에 관여할 수도 있다.Meanwhile, the shared audio decoding module 531 may be involved in the decoding of the audio signal, and likewise, the shared audio decoding module 532 may be involved in the decoding of the audio signal.
선택 복호 모듈(533)은 신호의 포맷에 따라 선택적으로 신호처리를 수행하는(즉, 신호의 포맷에 따라, 신호처리를 더 수행할 수도 있고 수행하지 않을 수도 있는) 모듈이다.The selective decoding module 533 is a module that selectively performs signal processing according to the format of the signal (that is, may or may not perform further signal processing depending on the format of the signal).
도 20은, 도 19에 도시된 오디오/음성 복호 장치를 보다 상세히 도시한 도면이다. 도 20에 도시된 바에 따르면, 1) 전처리부(520)는 L개의 전처리 모듈(520-1 내지 520-L)을 구비하고 있고, 2) 공유 오디오 복호 모듈(531)은 P개의 공유 오디오 신호처리 모듈(531-1 내지 531-P)을 구비하고 있으며, 3) 공유 음성 복호 모듈(532)은 R개의 공유 음성 신호처리 모듈(532-1 내지 532-R)을 구비하고 있고, 4) 선택 복호 모듈(533)은 Q개의 선택 오디오/음성 신호처리 모듈(533-1 내지 533-Q)을 구비하고 있음을 확인할 수 있다.20 is a diagram showing the audio / audio decoding device shown in FIG. 19 in more detail. As shown in FIG. 20, 1) the preprocessor 520 includes L preprocessing modules 520-1 to 520 -L, and 2) the shared audio decoding module 531 processes P shared audio signals. Modules 531-1 to 531-P, 3) shared voice decoding module 532 includes R shared voice signal processing modules 532-1 to 532-R, and 4) selective decoding. It can be seen that the module 533 includes Q selective audio / audio signal processing modules 533-1 to 533-Q.
전처리부(520)에 구비된 L개의 전처리 모듈(520-1 내지 520-L)은 각기 다른 포맷의 오디오 신호 또는 음성 신호에 대한 전처리를 각각 담당한다. 예를 들어, 1) 제1 전처리 모듈(520-1)은 제1 포맷과 제2 포맷의 신호에 대한 전처리를 담당하고, 2) 제2 전처리 모듈(520-2)은 제3 포맷과 제4 포맷의 신호에 대한 전처리를 담당하며, 3) 제3 전처리 모듈(520-3)은 제5 포맷의 신호에 대한 전처리를 담당할 수 있다.The L preprocessing modules 520-1 to 520-L included in the preprocessor 520 are in charge of preprocessing audio or voice signals of different formats. For example, 1) the first preprocessing module 520-1 is responsible for preprocessing the signals of the first format and the second format, and 2) the second preprocessing module 520-2 is the third format and the fourth. 3) The third preprocessing module 520-3 may be responsible for preprocessing the signal of the fifth format.
분석부(510)는 입력되는 압축된 오디오 신호 및/또는 음성 신호의 포맷을 토대로, 전처리부(520)의 전처리 과정을 제어한다고 전술한 바 있다. 이는, 분석부(510)가 포맷이 파악된 압축된 오디오 신호 및/또는 음성 신호를 해당 전처리 모듈로 전달하는 것을 의미한다.As described above, the analyzer 510 controls the preprocessing process of the preprocessor 520 based on the format of the compressed audio signal and / or the voice signal. This means that the analysis unit 510 delivers the compressed audio signal and / or the voice signal having the recognized format to the corresponding preprocessing module.
예를 들어, 입력되는 압축된 신호가 제2 포맷의 신호로 밝혀진 경우, 분석부(510)는 입력받은 제2 포맷의 신호를 제1 전처리 모듈(520-1)로 전달하게 된다.For example, when the input compressed signal is found to be a signal of a second format, the analyzer 510 transmits the received signal of the second format to the first preprocessing module 520-1.
공유 오디오 복호 모듈(531)에 구비된 P개의 공유 오디오 신호처리 모듈(531-1 내지 531-P)은 입력되는 오디오 신호의 복호에 요구되는 신호처리를 수행하는 모듈들이다. P개의 공유 오디오 신호처리 모듈(531-1 내지 531-P) 중 어느 모듈들에 의해 신호처리가 수행되는지는 오디오 신호의 포맷마다 차이가 있다.The P shared audio signal processing modules 531-1 to 531-P provided in the shared audio decoding module 531 are modules which perform signal processing required for decoding the input audio signal. Which of the P shared audio signal processing modules 531-1 to 531 -P differs depending on the format of the audio signal.
또한, 공유 음성 복호 모듈(532)에 구비된 R개의 공유 음성 신호처리 모듈(532-1 내지 532-R)은 입력되는 음성 신호의 복호에 요구되는 신호처리를 수행하는 모듈들이다. R개의 공유 음성 신호처리 모듈(532-1 내지 532-R) 중 어느 모듈들에 의해 신호처리가 수행되는지는 음성 신호의 포맷마다 차이가 있다.In addition, the R shared voice signal processing modules 532-1 to 532-R included in the shared voice decoding module 532 are modules that perform signal processing required for decoding the input voice signal. Which of the R shared voice signal processing modules 532-1 to 532 -R differs depending on the format of the voice signal.
선택 복호 모듈(533)에 구비된 Q개의 선택 신호처리 모듈(533-1 내지 533-Q)은 입력되는 신호의 복호에 요구되는 신호처리를 수행하는 모듈들이다. 신호의 포맷에 따라서는, 선택 복호 모듈(533)에 구비된 Q개의 선택 신호처리 모듈(533-1 내지 533-Q) 중 적어도 하나에 의한 신호처리가 필요한 포맷도 있고, 필요하지 않은 포맷도 있다.The Q selection signal processing modules 533-1 to 533-Q included in the selection decoding module 533 are modules which perform signal processing required for decoding the input signal. Depending on the signal format, some formats require signal processing by at least one of the Q selection signal processing modules 533-1 to 533-Q included in the selection decoding module 533, and some formats are not required. .
뿐만 아니라, 공유 오디오 복호 모듈(531)에 구비된 공유 오디오 신호처리 모듈(531-1 내지 531-P)은 입력되는 음성 신호의 복호에 요구되는 신호처리를 수행하는 것도 가능하며, 마찬가지로 공유 음성 복호 모듈(532)에 구비된 공유 음성 신호처리 모듈(532-1 내지 532-R)도 입력되는 오디오 신호의 복호에 요구되는 신호처리를 수행하는 것도 가능하다.In addition, the shared audio signal processing modules 531-1 to 531 -P included in the shared audio decoding module 531 may perform signal processing required for decoding the input voice signal, and similarly, shared voice decoding. The shared voice signal processing modules 532-1 to 532-R included in the module 532 may also perform signal processing required for decoding the input audio signal.
예를 들어, 제1 포맷의 신호 복호시에는 제1 공유 음성 신호처리 모듈(532-1), 제2 공유 음성 신호처리 모듈(532-2), 제1 공유 오디오 신호처리 모듈(531-1) 및 제1 선택 신호처리 모듈(533-1)이 수행하는 신호처리가 필요할 수 있다.For example, when decoding a signal of the first format, the first shared voice signal processing module 532-1, the second shared voice signal processing module 532-2, and the first shared audio signal processing module 531-1 are used. And signal processing performed by the first selection signal processing module 533-1.
다른 예로, 제3 포맷의 신호 복호시에는 제1 공유 오디오 신호처리 모듈(531-1) 및 제1 공유 음성 신호처리 모듈(532-1)이 수행하는 신호처리가 필요할 수 있다.As another example, when the signal of the third format is decoded, signal processing performed by the first shared audio signal processing module 531-1 and the first shared voice signal processing module 532-1 may be required.
한편, 분석부(510)는 압축된 신호의 포맷을 토대로, 오디오/음성 복호부(530)의 복호과정을 제어한다고 전술한 바 있다. 이는, 분석부(510)가 포맷이 파악된 압축된 신호에 필요한 신호처리들을 판별한 후, 판별된 신호처리들이 순서에 맞게 수행되도록, 오디오/음성 복호부(530)에 마련된 공유 오디오 복호 모듈(531), 공유 음성 복호 모듈(532) 및 선택 복호 모듈(533)을 제어하는 것을 의미한다.Meanwhile, the analyzer 510 controls the decoding process of the audio / audio decoder 530 based on the compressed signal format. This is because the analysis unit 510 determines the signal processings required for the compressed signal whose format is known, and then the shared audio decoding module provided in the audio / audio decoding unit 530 to perform the determined signal processings in order. 531, the shared voice decoding module 532, and the selective decoding module 533.
예를 들어, 입력되는 신호가 압축된 제1 포맷의 신호로 밝혀졌는데, 제1 포맷의 신호는 "제1 공유 오디오 신호처리 모듈(531-1)이 담당하는 신호처리 → 제1 공유 음성 신호처리 모듈(532-1)이 담당하는 신호처리 → 제2 공유 음성 신호처리 모듈(532-2)이 담당하는 신호처리 → 제1 선택 신호처리 모듈(533-1)이 담당하는 신호처리"를 통해 복호된다고 가정한다면, 분석부(510)는 제1 전처리 모듈(520-1)에서 전처리된 제1 포맷의 음성 신호가 위 " ~ "에 기재된 순서대로 신호처리되도록 공유 오디오 복호 모듈(531), 공유 음성 복호 모듈(532) 및 선택 복호 모듈(533)을 제어하게 된다.For example, when the input signal is found to be a signal of a compressed first format, the signal of the first format is " signal processing performed by the first shared audio signal processing module 531-1 > Signal processing performed by the module 532-1 → Signal processing performed by the second shared voice signal processing module 532-2 → Signal processing performed by the first selective signal processing module 533-1 " If it is assumed that the analysis unit 510 is a shared audio decoding module 531, the shared voice so that the first format pre-processed voice signal in the first pre-processing module 520-1 is signal-processed in the order described in the "~" The decoding module 532 and the selective decoding module 533 are controlled.
지금까지, 본 발명의 바람직한 실시예에 대해 상세히 설명하였다. 본 실시예에 따르면, 오디오/음성 복호 장치를 설계할 때, 범용화된 공유 오디오 복호 모듈(531)과 공유 음성 복호 모듈(532)에 선택 복호 모듈(533)을 추가하는 방식으로 설계가능함을 알 수 있다.So far, the preferred embodiment of the present invention has been described in detail. According to the present embodiment, it can be seen that when designing an audio / audio decoding device, it is possible to design by adding a selective decoding module 533 to the generalized shared audio decoding module 531 and the shared voice decoding module 532. have.
즉, 선택 복호 모듈(533)은 공유 오디오 복호 모듈(531)과 공유 음성 복호 모듈(532)에서 수행할 수 없는 신호처리를 수행할 수 있도록 설계하면 된다.That is, the selective decoding module 533 may be designed to perform signal processing that cannot be performed by the shared audio decoding module 531 and the shared voice decoding module 532.
이에 따라, 규격이나 제조업체의 스펙에 의해 공유 오디오 복호 모듈(531)과 공유 음성 복호 모듈(532)에 마련된 모듈들을 변경하거나, 다른 모듈을 추가하는 것이 불가능한 경우에도, 선택 복호 모듈(533)을 통해 복호에 필요한 모듈을 변경하거나 추가하는 것이 가능해진다.Accordingly, even if it is impossible to change the modules provided in the shared audio decoding module 531 and the shared voice decoding module 532 or add another module according to the specification or the manufacturer's specifications, the selective decoding module 533 may be used. It is possible to change or add a module necessary for decoding.
도 21에는 지금까지 설명한 오디오/음성 복호 과정을 나타내었다. 도 21은 본 발명의 또 다른 실시예에 따른 오디오/음성 복호 방법의 설명에 제공되는 흐름도이다.21 shows an audio / audio decoding process described so far. 21 is a flowchart provided to explain an audio / audio decoding method according to another embodiment of the present invention.
도 21에 도시된 바와 같이, 먼저, 분석부(510)는 입력되는 압축된 오디오 신호 및/또는 음성 신호, 즉 복호할 오디오 신호 및/또는 음성 신호를 분석하여 신호의 포맷을 파악한다(S610).As shown in FIG. 21, first, the analyzer 510 analyzes an input compressed audio signal and / or a voice signal, that is, an audio signal and / or a voice signal to be decoded to determine a format of a signal (S610). .
이후, 전처리부(520)는 분석부(520)의 제어에 따라, 압축된 오디오 신호 및/또는 음성 신호에 대한 전처리를 수행한다(S620).Thereafter, the preprocessor 520 performs preprocessing on the compressed audio signal and / or the voice signal under the control of the analyzer 520 (S620).
그러면, 오디오/음성 복호부(530)는 S620단계에서 전처리된 오디오 신호 및/또는 음성 신호에 대해 복호를 수행한다(S630).Then, the audio / audio decoding unit 530 decodes the pre-processed audio signal and / or voice signal in step S620 (S630).
구체적으로, S630단계에서는, 전처리된 오디오 신호 및/또는 음성 신호에 대해 공유 오디오 복호 모듈(531)이 담당하는 신호처리들, 공유 음성 복호 모듈(532)이 담당하는 신호처리들 및 선택 복호 모듈(533)이 담당하는 신호처리들 중 필요한 신호처리들이 순서에 맞게 수행된다. 이때, 필요한 신호처리들과 이들의 순서는 압축된 오디오 신호 및/또는 음성 신호의 포맷을 참조하여, 분석부(510)가 결정함은 전술한 바 있다.Specifically, in step S630, the signal processing in charge of the shared audio decoding module 531, the signal processing in charge of the shared voice decoding module 532 and the selective decoding module (for the pre-processed audio signal and / or voice signal) The necessary signal processings among the signal processings in charge of 533) are performed in order. In this case, the necessary signal processings and their order are described above by referring to the format of the compressed audio signal and / or the voice signal, and determined by the analyzer 510.
도 22에는, 지금까지 설명한 실시예에 따른 오디오/음성 복호 장치의 개념을 이용하여, 실제 오디오/음성 신호를 복호할 수 있도록 구현한 오디오/음성 복호 장치를 예시하였다.FIG. 22 illustrates an audio / audio decoding device implemented to decode an actual audio / audio signal using the concept of the audio / audio decoding device according to the embodiment described so far.
도 22에 도시된 바에 따르면, 전처리부(520)에는 전처리 모듈-1(520-1)이 마련되어 있다. 전처리 모듈-1(520-1)은 DACV(Decode Adaptive Code Vector) 모듈(520-11), DG(Decode Gain) 모듈(520-12), DFCV(Decode Fixed Code Vector) 모듈(520-13), D-LSP(Decode-LSP) 모듈(520-14), TDAC-D(TDAC-Decoding) 모듈(520-15) 및 TDBWE-D(TDBWE-Decoding) 모듈(520-15)을 구비한다.As shown in FIG. 22, the preprocessor 520 is provided with a preprocessing module-1 520-1. The preprocessing module-1 520-1 includes a decode adaptive code vector (DACV) module 520-11, a decode gain (DGV) module 520-12, a decode fixed code vector (DFCV) module 520-13, And a Decode-LSP (D-LSP) module 520-14, a TDAC-Decoding (TDAC-D) module 520-15, and a TDBWE-Decoding (TDBWE-D) module 520-15.
또한, 공유 오디오 복호 모듈(531)은 공유 오디오 신호처리 모듈로, 1) MSS(Mid Side Stereo) 모듈(531-1), 2) IS(Intensity Stereo) 모듈(531-2), 3) PNS(Perceptual Noise Substitution) 모듈(531-3), 4) TNS(Temporal Noise Shaping) 모듈(531-4) 및 5) IMDCT(Integer Modified Discrete Cosine Transform) 모듈(531-5)을 구비하고 있다.In addition, the shared audio decoding module 531 is a shared audio signal processing module, which includes 1) MSS (Mid Side Stereo) module 531-1, 2) IS (Intensity Stereo) module 531-2, 3) PNS ( Perceptual Noise Substitution (531-3) module, 4) Temporal Noise Shaping (TNS) module 531-4, and 5) Integer Modified Discrete Cosine Transform (IMDCT) module 531-5.
그리고, 공유 음성 복호 모듈(532)은 공유 음성 신호처리 모듈로, 1) CE(Construct Excitation) 모듈(532-1) 및 2) FIR-F(FIR Filtering) 모듈(532-2)을 구비하고 있다. 여기서, FIR-F 모듈(532-2)은, 21) HB-SF(HB-Synthesis Filtering) 모듈(532-21), 22) PF(Post Filtering) 모듈(532-22), 23) WF(Weighting Filtering) 모듈(532-23), 24) STP(Short Term Prediction) 모듈(532-24), 25) BPF(BP Filtering) 모듈(532-25), 26) APF(Adaptive Post Filtering) 모듈(532-26) 및 27) QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈(532-27)을 구비하고 있다.The shared voice decoding module 532 is a shared voice signal processing module, which includes 1) a CE (Construct Excitation) module 532-1 and 2) a FIR-F (FIR Filtering) module 532-2. . Here, the FIR-F module 532-2 includes 21) HB-Synthesis Filtering (532-21), 22) PF (Post Filtering) module 532-22, 23) WF (Weighting). Filtering (532-23), 24) Short Term Prediction (STP) module (532-24), 25) BPF (BP Filtering) module 532-25, 26) Adaptive Post Filtering (APF) module 532- 26) and 27) QMF-SF (Quadrature Mirror Filtering-Synthesis Filtering) modules 532-27.
한편, 선택 복호 모듈(533)은 선택 신호처리 모듈로, 1) MDCT(Modified Discrete Cosine Transform) 모듈(533-1), 2) CLPC(Conversion to LPC) 모듈(533-2) 및 3) HP&US(High Pass & UpScaling) 모듈(533-3)을 구비하고 있다.On the other hand, the selection decoding module 533 is a selection signal processing module, 1) Modified Discrete Cosine Transform (MDCT) module 533-1, 2) Conversion to LPC (533-2) and 3) HP & US ( High Pass & UpScaling) module 533-3.
도 23에는 도 22에 도시된 오디오/음성 복호 장치가 G.729.EV 포맷의 음성 신호를 복호하는 과정을 상세히 나타낸 도면이다.FIG. 23 is a diagram illustrating a process of decoding an audio signal of G.729.EV format by the audio / audio decoding apparatus shown in FIG. 22 in detail.
도 23에 도시된 바에 따르면, G.729.EV 포맷의 음성 신호는 먼저 전처리 모듈-1(520-1)에서 전처리됨을 알 수 있다. 즉, G.729.EV 포맷의 음성 신호는 전처리 모듈-1(520-1)에 마련된 DACV 모듈(520-11), DG 모듈(520-12), DFCV 모듈(520-13), D-LSP 모듈(520-14), TDAC-D(TDAC-Decoding) 모듈(520-15) 및 TDBWE-D(TDBWE-Decoding) 모듈(520-16)로 인가된다.As shown in FIG. 23, it can be seen that the voice signal of the G.729.EV format is first preprocessed by the preprocessing module-1 520-1. That is, the voice signal of the G.729.EV format includes the DACV module 520-11, the DG module 520-12, the DFCV module 520-13, and the D-LSP provided in the preprocessing module-1 520-1. Modules 520-14, TDAC-D (TDAC-Decoding) modules 520-15, and TDBWE-D (TDBWE-Decoding) modules 520-16.
이후, DACV 모듈(520-11), DG 모듈(520-12) 및 DFCV 모듈(520-13)의 출력은 CE 모듈(532-1)에서 신호처리되고, D-LSP 모듈(520-14)의 출력은 CLPC 모듈(533-2)에서 신호처리된다. 그리고, TDAC-D 모듈(520-15)의 출력은 IMDCT 모듈(531-5)에서 신호처리되고, TDBWE-D 모듈(520-16)의 출력은 MDCT 모듈(533-1)에서 신호처리된 후 TDAC-D 모듈(520-15)로 인가된다.Thereafter, the outputs of the DACV module 520-11, the DG module 520-12, and the DFCV module 520-13 are signaled by the CE module 532-1, and the output of the D-LSP module 520-14. The output is signaled at the CLPC module 533-2. The output of the TDAC-D module 520-15 is signal processed by the IMDCT module 531-5, and the output of the TDBWE-D module 520-16 is signal processed by the MDCT module 533-1. Applied to the TDAC-D module 520-15.
그리고, CE 모듈(531-1)의 출력과 CLPC 모듈(533-2)의 출력은 FIR-F 모듈(532-2)에서 신호처리된다. 구체적으로, 이들은 FIR-F 모듈(532-2)에 마련된 PF 모듈(532-22), WF 모듈(532-23) 및 QMF-SF 모듈(532-27)에 의해 신호처리된다. 이후, FIR-F 모듈(532-2)의 출력은 HP&US 모듈(533-3)에서 신호처리되며, HP&US 모듈(533-3)의 출력은 FIR-F 모듈(532-2)에서 다시 한번 신호처리된다.The output of the CE module 531-1 and the output of the CLPC module 533-2 are signal processed by the FIR-F module 532-2. Specifically, they are signal processed by the PF module 532-22, the WF module 532-23 and the QMF-SF module 532-27 provided in the FIR-F module 532-2. Thereafter, the output of the FIR-F module 532-2 is signaled at the HP & US module 533-3, and the output of the HP & US module 533-3 is signaled again at the FIR-F module 532-2. do.
이와 같은 과정에 의해, 음성 신호가 압축해제되어, 음성 복호부(530)에서는 압축해제된 음성 신호가 출력되게 된다.By this process, the speech signal is decompressed, and the speech decoder 530 outputs the decompressed speech signal.
지금까지, G.729.EV 포맷의 음성 신호를 복호할 수 있는 오디오/음성 복호 장치에 대해 상세히 설명하였다. 여기서 언급한 G.729.EV 포맷의 음성 신호는 설명의 편의를 위해 든 예에 불과하다. 따라서, 다른 포맷의 오디오 신호 및/또는 음성 신호에 대해서도 복호 가능한 오디오/음성 복호 장치를 구현할 수 있음은 물론이다. 이를 위해서는, 필요한 전처리 모듈을 전처리부(520)에 추가시키고, 필요한 공유 오디오 신호처리 모듈을 공유 오디오 복호 모듈(531)에 추가시키며, 필요한 공유 음성 신호처리 모듈을 공유 음성 복호 모듈(532)에 추가시키며, 필요한 선택 신호처리 모듈을 선택 복호 모듈(533)에 추가시키면 된다.So far, the audio / voice decoding apparatus capable of decoding the voice signal in the G.729.EV format has been described in detail. The voice signals in the G.729.EV format mentioned here are merely examples for convenience of explanation. Therefore, it is a matter of course that an audio / audio decoding apparatus capable of decoding audio signals and / or voice signals of other formats can be implemented. To this end, the necessary preprocessing module is added to the preprocessor 520, the necessary shared audio signal processing module is added to the shared audio decoding module 531, and the necessary shared voice signal processing module is added to the shared voice decoding module 532. In this case, the necessary selection signal processing module may be added to the selection decoding module 533.
이하에서는, 도 19에 도시된 오디오/음성 복호 장치와 다른 형태의 오디오/음성 복호 장치에 대해 설명한다. 도 24는 본 발명의 또 다른 실시예에 따른 오디오/음성 복호 장치를 도시한 도면이다.Hereinafter, an audio / audio decoding device different from the audio / audio decoding device shown in FIG. 19 will be described. 24 is a diagram illustrating an audio / audio decoding device according to another embodiment of the present invention.
본 실시예에 따른 오디오/음성 복호 장치는, 도 24에 도시된 바와 같이, 분석부(710), 전처리부(720) 및 오디오/음성 복호부(730)를 구비한다.As shown in FIG. 24, the audio / audio decoding apparatus according to the present embodiment includes an analyzer 710, a preprocessor 720, and an audio / audio decoder 730.
분석부(710)는 입력되는 압축된 오디오 신호 및/또는 음성 신호, 즉 복호할 오디오 신호 및/또는 음성 신호를 분석하여 오디오 신호 및/또는 음성 신호의 포맷을 파악한다. 분석부(710)는 파악된 오디오 신호 및/또는 음성 신호의 포맷을 토대로, 후술할 전처리부(720)의 전처리 과정과 오디오/음성 복호부(730)의 복호 과정을 제어한다. 분석부(710)가 이들을 제어하는 내용에 대한 구체적인 설명은 후술한다.The analyzer 710 analyzes the input compressed audio signal and / or voice signal, that is, the audio signal to be decoded and / or the voice signal to determine the format of the audio signal and / or the voice signal. The analyzer 710 controls a preprocessing process of the preprocessor 720 and a decoding process of the audio / audio decoder 730, which will be described later, based on the format of the audio signal and / or the audio signal. Details of the contents of the analysis unit 710 controlling them will be described later.
전처리부(720)는 분석부(710)에서 출력되는 압축된 오디오 신호 및/또는 음성 신호에 대한 전처리(Pre-Processing)를 수행한다. 전처리는 오디오/음성 복호부(730)에서의 복호가 처리되기 전에 먼저 수행되어져야 할 신호처리로, 역양자화 처리, 신호 증폭, 신호 조정 등의 신호처리가 포함된다.The preprocessor 720 performs pre-processing on the compressed audio signal and / or the voice signal output from the analyzer 710. The preprocessing is signal processing that must be performed before the decoding in the audio / voice decoding unit 730 is processed, and includes signal processing such as inverse quantization processing, signal amplification, and signal adjustment.
오디오/음성 복호부(730)는 공유 오디오 복호 모듈(731), 선택 오디오 복호 모듈(732), 공유 음성 복호 모듈(733), 선택 음성 복호 모듈(734)을 구비한다.The audio / audio decoding unit 730 includes a shared audio decoding module 731, a selective audio decoding module 732, a shared speech decoding module 733, and a selected speech decoding module 734.
공유 오디오 복호 모듈(731)과 선택 오디오 복호 모듈(732)은 전처리부(720)를 통해 입력받은 오디오 신호에 대해 복호를 수행한다. 반면, 공유 음성 복호 모듈(733)과 선택 음성 복호 모듈(734)은 전처리부(720)를 통해 입력받은 음성 신호에 대해 복호를 수행한다.The shared audio decoding module 731 and the selective audio decoding module 732 decode the audio signal received through the preprocessor 720. In contrast, the shared speech decoding module 733 and the selected speech decoding module 734 decode the speech signal received through the preprocessor 720.
한편, 공유 오디오 복호 모듈(731)과 선택 오디오 복호 모듈(732)은 음성 신호의 복호에 관여할 수도 있다. 마찬가지로, 공유 음성 복호 모듈(733)과 선택 음성 복호 모듈(734)도 오디오 신호의 복호에 관여할 수도 있다.On the other hand, the shared audio decoding module 731 and the selective audio decoding module 732 may be involved in decoding the audio signal. Similarly, the shared speech decoding module 733 and the selected speech decoding module 734 may also be involved in the decoding of the audio signal.
도 25는, 도 24에 도시된 오디오/음성 복호 장치를 보다 상세히 도시한 도면이다. 도 25에 도시된 바에 따르면, 1) 공유 오디오 복호 모듈(731)은 P개의 공유 오디오 신호처리 모듈(731-1 내지 731-P)을 구비하고, 2) 선택 오디오 복호 모듈(732)은 Q개의 선택 오디오 신호처리 모듈(732-1 내지 732-N)을 구비하며, 3) 공유 음성 복호 모듈(733)은 R개의 공유 음성 신호처리 모듈(733-1 내지 733-R)을 구비하고, 4) 선택 음성 복호 모듈(734)은 S개의 선택 음성 신호처리 모듈(734-1 내지 734-S)을 구비하고 있음을 확인할 수 있다.25 is a diagram showing the audio / audio decoding device shown in FIG. 24 in more detail. As shown in Fig. 25, 1) the shared audio decoding module 731 has P shared audio signal processing modules 731-1 to 731-P, and 2) the selected audio decoding module 732 has Q 3) the shared voice decoding module 733 comprises R shared voice signal processing modules 733-1 through 733-R, and 4) The selected speech decoding module 734 may be confirmed to include S number of selected speech signal processing modules 734-1 to 734-S.
공유 오디오 복호 모듈(731)에 구비된 P개의 공유 오디오 신호처리 모듈(731-1 내지 731-P)은 입력되는 오디오 신호에 대한 복호에 요구되는 신호처리를 수행하는 모듈들이다. P개의 공유 오디오 신호처리 모듈(731-1 내지 731-P) 중 어느 모듈들에 의해 신호처리가 수행되는지는 오디오 신호의 포맷마다 차이가 있다.The P shared audio signal processing modules 731-1 to 731-P included in the shared audio decoding module 731 are modules that perform signal processing required for decoding the input audio signal. Which of the P shared audio signal processing modules 731-1 to 731 -P performs signal processing differs for each audio signal format.
예를 들어, 제1 포맷의 오디오 신호에 대한 복호시에는 제1 공유 오디오 신호처리 모듈(731-1) 및 제2 공유 오디오 신호처리 모듈(731-2)이 수행하는 신호처리가 필요한 반면, 제2 포맷의 오디오 신호에 대한 복호시에는 제1 공유 오디오 신호처리 모듈(731-1), 제2 공유 오디오 신호처리 모듈(731-2) 및 제3 공유 오디오 신호처리 모듈(731-3)이 수행하는 신호처리가 필요할 수 있다.For example, when decoding the audio signal of the first format, signal processing performed by the first shared audio signal processing module 731-1 and the second shared audio signal processing module 731-2 is required. The first shared audio signal processing module 731-1, the second shared audio signal processing module 731-2, and the third shared audio signal processing module 731-3 perform decoding on the audio signal of the two formats. Signal processing may be necessary.
선택 오디오 복호 모듈(732)에 구비된 Q개의 선택 오디오 신호처리 모듈(732-1 내지 732-Q)도 입력되는 오디오 신호에 대한 복호에 요구되는 신호처리를 수행하는 모듈들이다. 오디오 신호의 포맷에 따라서는, 선택 오디오 복호 모듈(732)에 구비된 Q개의 선택 오디오 신호처리 모듈(732-1 내지 732-Q) 중 적어도 하나에 의한 신호처리가 필요한 포맷도 있고, 필요하지 않은 포맷도 있다.The Q selective audio signal processing modules 732-1 to 732-Q included in the selective audio decoding module 732 are modules that perform signal processing required for decoding the input audio signal. Depending on the format of the audio signal, there are some formats that require signal processing by at least one of the Q selective audio signal processing modules 732-1 to 732-Q included in the selective audio decoding module 732. There is also a format.
예를 들어, 제1 포맷의 오디오 신호에 대한 복호시에는 Q개의 선택 오디오 신호처리 모듈(732-1 내지 732-Q)이 수행하는 신호처리가 필요하지 않은 반면, 제2 포맷의 오디오 신호에 대한 복호시에는 제1 선택 오디오 신호처리 모듈(732-1) 및 제2 선택 오디오 신호처리 모듈(732-2)이 수행하는 신호처리가 필요할 수 있다.For example, when decoding the audio signal of the first format, the signal processing performed by the Q selective audio signal processing modules 732-1 to 732-Q is not necessary, while the audio signal of the second format is not required. In decoding, signal processing performed by the first selective audio signal processing module 732-1 and the second selective audio signal processing module 732-2 may be required.
공유 음성 복호 모듈(733)에 구비된 R개의 공유 음성 신호처리 모듈(733-1 내지 733-R)은 입력되는 음성 신호에 대한 복호에 요구되는 신호처리를 수행하는 모듈들이다. R개의 공유 음성 신호처리 모듈(733-1 내지 733-R) 중 어느 모듈들에 의해 신호처리가 수행되는지는 오디오 신호의 포맷마다 차이가 있다.The R shared voice signal processing modules 733-1 to 733-R included in the shared voice decoding module 733 are modules that perform signal processing required for decoding the input voice signal. Which of the R shared voice signal processing modules 733-1 to 733-R performs signal processing differs depending on the format of the audio signal.
예를 들어, 제3 포맷의 음성 신호에 대한 복호시에는 제1 공유 음성 신호처리 모듈(733-1) 및 제2 공유 음성 신호처리 모듈(733-2)이 수행하는 신호처리가 필요한 반면, 제4 포맷의 음성 신호에 대한 복호시에는 제1 공유 음성 신호처리 모듈(733-1), 제2 공유 음성 신호처리 모듈(733-2) 및 제3 공유 음성 신호처리 모듈(733-3)이 수행하는 신호처리가 필요할 수 있다.For example, when decoding the voice signal of the third format, signal processing performed by the first shared voice signal processing module 733-1 and the second shared voice signal processing module 733-2 is required. When decoding the 4 format voice signal, the first shared voice signal processing module 733-1, the second shared voice signal processing module 733-2, and the third shared voice signal processing module 733-3 perform the decoding. Signal processing may be necessary.
선택 음성 복호 모듈(734)에 구비된 S개의 선택 음성 신호처리 모듈(734-1 내지 734-S)도 입력되는 음성 신호에 대한 복호에 요구되는 신호처리를 수행하는 모듈들이다. 오디오 신호의 포맷에 따라서는, 선택 음성 복호 모듈(734)에 구비된 S개의 선택 음성 신호처리 모듈(734-1 내지 734-S) 중 적어도 하나에 의한 신호처리가 필요한 포맷도 있고, 필요하지 않은 포맷도 있다.The S selected voice signal processing modules 734-1 to 734-S included in the selected voice decoding module 734 are modules that perform signal processing required for decoding the input voice signal. Depending on the format of the audio signal, there are some formats that require signal processing by at least one of the S selected speech signal processing modules 734-1 to 734-S included in the selective speech decoding module 734. There is also a format.
예를 들어, 제3 포맷의 음성 신호에 대한 복호시에는 S개의 선택 음성 신호처리 모듈(734-1 내지 734-S)이 수행하는 신호처리가 필요하지 않은 반면, 제4 포맷의 음성 신호에 대한 복호시에는 제1 선택 음성 신호처리 모듈(734-1) 및 제2 선택 음성 신호처리 모듈(734-2)이 수행하는 신호처리가 필요할 수 있다.For example, when decoding the voice signal of the third format, the signal processing performed by the S selected voice signal processing modules 734-1 to 734-S is not necessary, while the voice signal of the fourth format is not required. Decoding may require signal processing performed by the first selective voice signal processing module 734-1 and the second selective voice signal processing module 734-2.
뿐만 아니라, 공유 오디오 복호 모듈(731)에 구비된 공유 오디오 신호처리 모듈과 선택 오디오 복호 모듈(732)에 구비된 선택 오디오 신호처리 모듈이 음성 신호의 복호에 요구되는 신호처리를 수행하는 것도 가능하다. 마찬가지로, 공유 음성 복호 모듈(733)에 구비된 공유 음성 신호처리 모듈과 선택 음성 복호 모듈(734)에 구비된 선택 음성 신호처리 모듈도 오디오 신호의 복호에 요구되는 신호처리를 수행하는 것도 가능하다.In addition, the shared audio signal processing module included in the shared audio decoding module 731 and the selected audio signal processing module included in the selective audio decoding module 732 may perform signal processing required for decoding of a voice signal. . Similarly, the shared speech signal processing module included in the shared speech decoding module 733 and the selected speech signal processing module included in the selective speech decoding module 734 may also perform signal processing required for decoding the audio signal.
한편, 분석부(710)는 압축된 신호의 포맷을 토대로, 오디오/음성 복호부(730)의 복호과정을 제어한다. 이는, 분석부(710)가 포맷이 파악된 압축된 신호에 필요한 신호처리들을 판별한 후, 판별된 신호처리들이 순서에 맞게 수행되도록, 복호부(731)에 마련된 공유 오디오 복호 모듈(731), 선택 오디오 복호 모듈(732), 공유 음성 복호 모듈(733), 선택 음성 복호 모듈(734)을 제어하는 것을 의미한다.On the other hand, the analyzer 710 controls the decoding process of the audio / audio decoder 730 based on the compressed signal format. The shared audio decoding module 731 provided in the decoding unit 731, so that the analysis unit 710 determines the signal processings required for the compressed signal having the format determined, and then performs the determined signal processings in order. This means controlling the selective audio decoding module 732, the shared speech decoding module 733, and the selective speech decoding module 734.
예를 들어, 입력되는 압축된 신호가 제2 포맷의 오디오 신호로 밝혀졌는데, 제2 포맷의 오디오 신호는 "제1 공유 오디오 신호처리 모듈(731-1)이 담당하는 신호처리 → 제2 공유 오디오 신호처리 모듈(731-2)이 담당하는 신호처리 → 제1 선택 오디오 신호처리 모듈(732-1)이 담당하는 신호처리 → 제3 공유 오디오 신호처리 모듈(731-3)이 담당하는 신호처리 → 제2 선택 오디오 신호처리 모듈(732-3)이 담당하는 신호처리"를 통해 복호된다고 가정한다면, 분석부(710)는 전처리된 오디오 신호가 위에 기재된 순서대로 신호처리가 수행되도록 공유 오디오 복호 모듈(731), 선택 오디오 복호 모듈(732)을 제어하게 된다.For example, the input compressed signal is found to be an audio signal of the second format, and the audio signal of the second format is " signal processing → second shared audio which is handled by the first shared audio signal processing module 731-1. Signal processing in charge of the signal processing module 731-2 → Signal processing in charge of the first selection audio signal processing module 732-1 → Signal processing in charge of the third shared audio signal processing module 731-3 If it is assumed that the second selective audio signal processing module 732-3 is decoded through "signal processing that is in charge," the analyzing unit 710 may perform a shared audio decoding module such that the preprocessed audio signal is processed in the order described above. 731, the selection audio decoding module 732 is controlled.
다른 예로, 입력되는 압축된 신호가 제4 포맷의 음성 신호로 밝혀졌는데, 제4 포맷의 음성 신호는 "제1 공유 음성 신호처리 모듈(733-1)이 담당하는 신호처리 → 제2 공유 음성 신호처리 모듈(733-2)이 담당하는 신호처리 → 제1 선택 음성 신호처리 모듈(734-1)이 담당하는 신호처리 → 제3 공유 음성 신호처리 모듈(733-3)이 담당하는 신호처리 → 제2 선택 음성 신호처리 모듈(734-3)이 담당하는 신호처리"를 통해 복호된다고 가정한다면, 분석부(710)는 전처리된 신호가 위에 기재된 순서대로 신호처리가 수행되도록 공유 음성 복호 모듈(733) 및 선택 음성 복호 모듈(734)을 제어하게 된다.As another example, the input compressed signal is found to be a speech signal of a fourth format, and the speech signal of the fourth format is " signal processing → second shared speech signal which is handled by the first shared speech signal processing module 733-1. Signal processing performed by the processing module 733-2 → Signal processing performed by the first selected voice signal processing module 734-1 → Signal processing performed by the third shared voice signal processing module 733-3 Assuming that the two-selected speech signal processing module 734-3 is decoded through "signal processing in charge", the analyzing unit 710 performs the shared speech decoding module 733 so that the signal processing is performed in the order described above. And select voice decoding module 734.
또 다른 예로, 입력되는 압축된 신호가 오디오 신호와 음성 신호가 합쳐진 제5 포맷의 신호로 밝혀졌는데, 오디오 신호는 "제1 공유 오디오 신호처리 모듈(731-1)이 담당하는 신호처리 → 제2 공유 오디오 신호처리 모듈(731-2)이 담당하는 신호처리 → 제1 선택 오디오 신호처리 모듈(732-1)이 담당하는 신호처리"를 통해 복호되고, 음성 신호는 "제1 공유 음성 신호처리 모듈(733-1)이 담당하는 신호처리 → 제2 공유 음성 신호처리 모듈(733-2)이 담당하는 신호처리 → 제1 선택 음성 신호처리 모듈(734-1)이 담당하는 신호처리"를 통해 복호된다고 가정한다면, 분석부(710)는 전처리된 오디오 신호와 음성 신호가 위 " ~ "에 기재된 순서대로 각각 신호처리되도록 공유 오디오 복호 모듈(731)과 공유 음성 복호 모듈(733)을 제어하고, 선택 오디오 복호 모듈(732)과 선택 음성 복호 모듈(734)은 신호처리를 수행하지 않도록 제어하게 된다.As another example, the input compressed signal is found to be a signal of a fifth format in which an audio signal and a voice signal are combined, and the audio signal is " signal processing performed by the first shared audio signal processing module 731-1. Signal processing performed by the shared audio signal processing module 731-2 is decoded through signal processing performed by the first selected audio signal processing module 732-1, and the voice signal is " first shared voice signal processing module. Signal processing in charge of (733-1) → Signal processing in charge of the second shared voice signal processing module 733-2 → Signal processing in charge of the first selected voice signal processing module 734-1 " If it is assumed, the analysis unit 710 controls and selects the shared audio decoding module 731 and the shared voice decoding module 733 so that the preprocessed audio signal and the voice signal are respectively signal processed in the order described in the above "~". Audio Decoding Module 732 and Selective Voice No. module 734 is controlled not to perform signal processing.
한편, 도 24와 도 25에 도시된 오디오/음성 복호 장치의 오디오/음성 복호부(730)에서, 공유 오디오 복호 모듈(731)과 공유 음성 복호 모듈(733)을 통합하여 하나의 공유 복호 모듈로 구현하는 것이 가능하다. 마찬가지로, 오디오/음성 복호부(730)에서, 선택 오디오 복호 모듈(732)과 선택 음성 복호 모듈(734)을 통합하여 하나의 선택 복호 모듈로 구현하는 것도 가능하다.Meanwhile, in the audio / voice decoding unit 730 of the audio / audio decoding apparatus shown in FIGS. 24 and 25, the shared audio decoding module 731 and the shared voice decoding module 733 are integrated into one shared decoding module. It is possible to implement Similarly, in the audio / audio decoding unit 730, the selection audio decoding module 732 and the selection speech decoding module 734 may be integrated into one selection decoding module.
지금까지, 오디오 신호, 음성 신호, 오디오 신호와 음성 신호를 복호 하는 복호 장치들에 대해, 다양한 실시예를 제시하여 설명하였다. 지금까지 설명한 복호 장치에서는 분석부가 파악된 신호의 포맷에 따라, 전처리 절차와 복호 절차를 제어하는 것으로 상정하였다. 하지만, 이는 설명의 편의를 위한 예에 불과한 것으로, 이 밖의 다른 소자가 파악된 신호의 포맷에 따라 전처리 절차와 복호 절차를 제어하는 것으로 구현하는 것도 가능함은 물론이다.Up to now, various embodiments of the decoding apparatuses for decoding the audio signal, the audio signal, the audio signal, and the audio signal have been described. The decoding apparatus described so far assumes that the preprocessing procedure and the decoding procedure are controlled according to the format of the signal detected by the analysis unit. However, this is merely an example for convenience of description, and it is of course possible to implement other components by controlling the preprocessing procedure and the decoding procedure according to the format of the detected signal.
그리고, 본 실시예들에서, 선택 오디오 복호 모듈은, 오디오 신호의 복호에 필요하지만 공유 오디오 신호처리 모듈들이 수행할 수 없는 신호처리들을 각각 수행할 수 있는 선택 오디오 신호처리 모듈을 구비한 모듈로 이해될 수 있다. 또한, 선택 음성 복호 모듈은, 음성 신호의 복호에 필요하지만 공유 음성 신호처리 모듈들이 수행할 수 없는 신호처리들을 각각 수행할 수 있는 선택 음성 신호처리 모듈을 구비한 모듈로 이해될 수 있다. 아울러, 선택 복호 모듈은, 오디오 신호 및 음성 신호 중 적어도 하나의 복호에 필요하지만 공유 오디오 신호처리 모듈들과 공유 음성 신호처리 모듈들이 수행할 수 없는 신호처리들을 각각 수행할 수 있는 선택 신호처리 모듈을 구비한 모듈로 이해될 수 있다.And, in the present embodiments, the selective audio decoding module is understood as a module having a selective audio signal processing module capable of performing signal processings which are required for decoding the audio signal but cannot be performed by the shared audio signal processing modules. Can be. In addition, the selective speech decoding module may be understood as a module having a selective speech signal processing module capable of performing signal processing required for decoding of the speech signal but not shared speech signal processing modules. In addition, the selection decoding module may include a selection signal processing module capable of performing signal processing necessary for decoding at least one of an audio signal and a voice signal, but which cannot be performed by the shared audio signal processing modules and the shared voice signal processing modules. It can be understood as a provided module.
이하에서는, 지금까지 설명한 오디오/음성 복호 장치, 음성 복호 장치 또는 오디오/음성 복호 장치를 적용한 사운드 출력 장치에 대해, 도 26을 참조하여 상세히 설명한다. 도 26은 본 발명의 또 다른 실시예에 따른 사운드 출력 장치의 블럭도이다.Hereinafter, a sound output device to which the audio / audio decoding device, the audio decoding device, or the audio / audio decoding device described so far will be described in detail with reference to FIG. 26. 26 is a block diagram of a sound output device according to another embodiment of the present invention.
도 26에 도시된 바와 같이, 사운드 출력 장치는 수신부(810), 저장부(820), 복호부(830) 및 출력부(840)를 구비한다.As illustrated in FIG. 26, the sound output apparatus includes a receiver 810, a storage 820, a decoder 830, and an output unit 840.
수신부(810)는 연결된 외부기기 또는 외부 네트워크로부터 오디오 신호 및/또는 음성 신호를 수신한다. 저장부(820)는 오디오 신호 및/또는 음성 신호가 저장되는 기록매체이다.The receiver 810 receives an audio signal and / or a voice signal from a connected external device or an external network. The storage unit 820 is a recording medium in which an audio signal and / or an audio signal are stored.
복호부(830)는 수신부(810)를 통해 수신되거나 저장부(820)에 저장되어 있는 압축된 오디오 신호 및/또는 음성 신호를 복호하여, 압축해제된 오디오 신호 및/또는 음성 신호를 출력한다. 이와 같은 기능을 수행하는 복호부(830)는 전술한 오디오/음성 복호 장치, 음성 복호 장치 또는 오디오/음성 복호 장치로 구현가능하다.The decoder 830 decodes the compressed audio signal and / or the voice signal received through the receiver 810 or stored in the storage 820, and outputs the decompressed audio signal and / or the voice signal. The decoder 830 that performs the above functions may be implemented by the above-described audio / audio decoding device, voice decoding device, or audio / voice decoding device.
출력부(840)는 복호부(830)에서 출력되는 오디오 신호 및/또는 음성 신호에 대응하는 오디오 및/또는 음성을 출력하여, 사용자가 들을 수 있도록 한다.The output unit 840 outputs audio and / or voice corresponding to the audio signal and / or voice signal output from the decoder 830 so that the user can listen.
또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.In addition, although the preferred embodiment of the present invention has been shown and described above, the present invention is not limited to the specific embodiments described above, but the technical field to which the invention belongs without departing from the spirit of the invention claimed in the claims. Of course, various modifications can be made by those skilled in the art, and these modifications should not be individually understood from the technical spirit or the prospect of the present invention.

Claims (86)

  1. 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈;을 포함하고,A first audio decoding module having first audio signal processing modules which respectively perform signal processing necessary for decoding the audio signal;
    오디오 신호의 복호시에는 상기 제1 오디오 신호처리 모듈들 중 적어도 하나가 이용되는 것을 특징으로 하는 복호 장치.And at least one of the first audio signal processing modules is used to decode the audio signal.
  2. 제 1항에 있어서,The method of claim 1,
    오디오 신호의 복호시 이용되는 상기 제1 오디오 신호처리 모듈들 중 적어도 하나는 오디오 신호의 포맷 마다 다른 것을 특징으로 하는 복호 장치.And at least one of the first audio signal processing modules used for decoding an audio signal is different for each format of the audio signal.
  3. 제 1항에 있어서,The method of claim 1,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈;을 더 포함하고,A second audio decoding module having second audio signal processing modules which respectively perform signal processing more necessary for decoding of the audio signals;
    오디오 신호의 복호시에는, 오디오 신호의 포맷에 따라 상기 제2 오디오 신호처리 모듈들 중 적어도 하나가 더 이용되는 것을 특징으로 하는 복호 장치.In decoding the audio signal, at least one of the second audio signal processing modules is further used according to a format of the audio signal.
  4. 제 3항에 있어서,The method of claim 3,
    오디오 신호의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 오디오 복호 모듈 및 상기 제2 오디오 복호 모듈이 제어되는 것을 특징으로 하는 복호 장치.And the first audio decoding module and the second audio decoding module are controlled so that signal processing for decoding an audio signal is performed in order.
  5. 제 1항에 있어서,The method of claim 1,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈;을 더 포함하고,A second audio decoding module having second audio signal processing modules which respectively perform signal processing more necessary for decoding of the audio signals;
    오디오 신호의 복호시에는, 오디오 신호의 포맷에 따라 상기 제2 오디오 신호처리 모듈들이 이용되지 않는 것을 특징으로 하는 복호 장치.And, when decoding the audio signal, the second audio signal processing modules are not used according to the format of the audio signal.
  6. 제 1항에 있어서,The method of claim 1,
    상기 제1 오디오 복호 모듈은, 상기 제1 오디오 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈 및 IMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The first audio decoding module includes, as the first audio signal processing modules, a mid side (MSS) module, an intensity stereo (IS) module, a perceptual noise substitution (PNS) module, a temporal noise shaping (NTS) module, and an IMDCT (IMDCT) module. An decoding apparatus comprising at least one of an Integer Modified Discrete Cosine Transform module.
  7. 제 6항에 있어서,The method of claim 6,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈;을 더 포함하고,A second audio decoding module having second audio signal processing modules which respectively perform signal processing more necessary for decoding of the audio signals;
    상기 제2 오디오 복호 모듈은, 상기 제2 오디오 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈 및 IIMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second audio decoding module is a second audio signal processing module, and includes a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module, a BSAC-Gain Control (BSAC-GC) module, and a Prediction Decoding (PD) module. Dependently Switched Coupling (DSC) Module, 2nd Dependently Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Parametric Stereo (PS) A decoding apparatus comprising at least one of a module, an inverse error mapping (IEM) module, and an integer modified disc cosine transform (IIMDCT) module.
  8. 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈;을 포함하고,And a first voice decoding module having first voice signal processing modules respectively performing signal processing necessary for decoding the voice signal.
    음성 신호의 복호시에는 상기 제1 음성 신호처리 모듈들 중 적어도 하나가 이용되는 것을 특징으로 하는 복호 장치.And at least one of the first voice signal processing modules is used to decode the voice signal.
  9. 제 8항에 있어서,The method of claim 8,
    음성 신호의 복호시 이용되는 상기 제1 음성 신호처리 모듈들 중 적어도 하나는 음성 신호의 포맷 마다 다른 것을 특징으로 하는 복호 장치.And at least one of the first voice signal processing modules used for decoding a voice signal is different for each format of the voice signal.
  10. 제 8항에 있어서,The method of claim 8,
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    음성 신호의 복호시에는, 음성 신호의 포맷에 따라 상기 제2 음성 신호처리 모듈들 중 적어도 하나가 더 이용되는 것을 특징으로 하는 복호 장치.In decoding the voice signal, at least one of the second voice signal processing modules is further used according to a format of the voice signal.
  11. 제 10항에 있어서,The method of claim 10,
    음성 신호의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 음성 복호 모듈 및 상기 제2 음성 복호 모듈이 제어되는 것을 특징으로 하는 복호 장치.And the first voice decoding module and the second voice decoding module are controlled so that signal processing for decoding of a voice signal is performed in order.
  12. 제 8항에 있어서,The method of claim 8,
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    음성 신호의 복호시에는, 음성 신호의 포맷에 따라 상기 제2 음성 신호처리 모듈들이 이용되지 않는 것을 특징으로 하는 복호 장치.And the second speech signal processing modules are not used according to the format of the speech signal.
  13. 제 8항에 있어서,The method of claim 8,
    상기 제1 음성 복호 모듈은, 상기 제1 음성 신호처리 모듈들로, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first voice decoding module may include, as the first voice signal processing modules, at least one of a CE (Construct Excitation) module and a FIR-F (FIR Filtering) module.
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). A decoding apparatus comprising at least one of a Post Filtering (QD) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module.
  14. 제 13항에 있어서,The method of claim 13,
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    상기 제2 음성 복호 모듈은, 상기 제2 음성 신호처리 모듈로, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second voice decoding module is the second voice signal processing module, and includes a JCD (Joint Channel Decoding) module, a Long Term Prediction (LTP) module, a Conversion to LPC (CLPC) module, a High Pass & UpScaling (HP & US) module, A decoding device comprising at least one of an LTP-F filtering module, a post processing module, a de-emphasis module, and an upsampling module.
  15. 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈; 및A first audio decoding module having first audio signal processing modules each performing signal processing necessary for decoding the audio signal; And
    음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈;을 포함하고,And a first voice decoding module having first voice signal processing modules respectively performing signal processing necessary for decoding the voice signal.
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 제1 오디오 신호처리 모듈들과 상기 제1 음성 신호처리 모듈들 중 적어도 하나가 이용되는 것을 특징으로 하는 복호 장치.And at least one of the first audio signal processing modules and the first voice signal processing modules is used for decoding at least one of an audio signal and a voice signal.
  16. 제 15항에 있어서,The method of claim 15,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시 이용되는 상기 제1 오디오 신호처리 모듈들과 상기 제1 음성 신호처리 모듈들 중 적어도 하나는, 상기 오디오 신호 및 음성 신호 중 적어도 하나의 포맷 마다 다른 것을 특징으로 하는 복호 장치.At least one of the first audio signal processing modules and the first voice signal processing modules used for decoding at least one of an audio signal and a voice signal is different for at least one format of the audio signal and the voice signal. Decoding device.
  17. 제 15항에 있어서,The method of claim 15,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 오디오 복호 모듈과 상기 제1 음성 복호 모듈이 제어되는 것을 특징으로 하는 복호 장치.And the first audio decoding module and the first voice decoding module are controlled such that signal processing for decoding at least one of an audio signal and a voice signal is performed in order.
  18. 제 15항에 있어서,The method of claim 15,
    상기 제1 오디오 복호 모듈은, 상기 제1 오디오 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈 및 IMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The first audio decoding module includes, as the first audio signal processing modules, a mid side (MSS) module, an intensity stereo (IS) module, a perceptual noise substitution (PNS) module, a temporal noise shaping (NTS) module, and an IMDCT (IMDCT) module. At least one of the Integer Modified Discrete Cosine Transform) module,
    상기 제1 음성 복호 모듈은, 상기 제1 음성 신호처리 모듈들로, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first voice decoding module may include, as the first voice signal processing modules, at least one of a CE (Construct Excitation) module and a FIR-F (FIR Filtering) module.
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). A decoding apparatus comprising at least one of a Post Filtering (QD) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module.
  19. 제 15항에 있어서,The method of claim 15,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 신호처리 모듈들을 구비한 제2 복호 모듈;을 더 포함하고,A second decoding module having second signal processing modules which respectively perform signal processing necessary for decoding at least one of an audio signal and an audio signal;
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 오디오 신호 및 음성 신호 중 적어도 하나의 포맷에 따라 상기 제2 신호처리 모듈들 중 적어도 하나가 더 이용되는 것을 특징으로 하는 복호 장치.And at least one of the second signal processing modules is further used according to a format of at least one of the audio signal and the voice signal when decoding at least one of an audio signal and a voice signal.
  20. 제 19항에 있어서,The method of claim 19,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 오디오 복호 모듈, 상기 제1 음성 복호 모듈 및 상기 제2 복호 모듈이 제어되는 것을 특징으로 하는 복호 장치.And the first audio decoding module, the first voice decoding module and the second decoding module are controlled such that signal processing for decoding at least one of an audio signal and an audio signal is performed in order.
  21. 제 19항에 있어서,The method of claim 19,
    상기 제1 오디오 복호 모듈은, 상기 제1 오디오 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈 및 IMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The first audio decoding module includes, as the first audio signal processing modules, a mid side (MSS) module, an intensity stereo (IS) module, a perceptual noise substitution (PNS) module, a temporal noise shaping (NTS) module, and an IMDCT (IMDCT) module. At least one of the Integer Modified Discrete Cosine Transform) module,
    상기 제1 음성 복호 모듈은, 상기 제1 음성 신호처리 모듈들로, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first voice decoding module may include, as the first voice signal processing modules, at least one of a CE (Construct Excitation) module and a FIR-F (FIR Filtering) module.
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하고,The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). At least one of a Post Filtering (QF-SF) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module,
    상기 제2 복호 모듈은, 상기 제2 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈, IIMDCT(Integer Modified Discrete Cosine Transform) 모듈, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second decoding module may include a quadrature mirror filtering-synthesis filtering (QMF-SF) module, a BSAC-Gain control (BSAC-GC) module, a prediction decoding module (PD), and a first DSC ( Dependently Switched Coupling (DSC) Module, Secondly Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Prametric Stereo (PS) Module, Inverse Error Mapping (IEM) module, Integer Modified Discrete Cosine Transform (IIMDCT) module, Joint Channel Decoding (JCD) module, Long Term Prediction (LTP) module, Conversion to LPC (CLPC) module, High Pass & UpScaling (HP & US) module And at least one of an LTP-F (LTP-Filtering) module, a Post Processing (PP) module, a DeEmphasis (DE) module, and an UpSampling (US) module.
  22. 제 15항에 있어서,The method of claim 15,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 신호처리 모듈들을 구비한 제2 복호 모듈;을 더 포함하고,A second decoding module having second signal processing modules which respectively perform signal processing necessary for decoding at least one of an audio signal and an audio signal;
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 오디오 신호 및 음성 신호 중 적어도 하나의 포맷에 따라 상기 제2 오디오 신호처리 모듈들이 이용되지 않는 것을 특징으로 하는 복호 장치.And decoding the at least one of an audio signal and a voice signal, wherein the second audio signal processing modules are not used according to a format of at least one of the audio signal and the voice signal.
  23. 제 15항에 있어서,The method of claim 15,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈; 및A second audio decoding module having second audio signal processing modules each performing signal processing more necessary for decoding of audio signals; And
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 제2 오디오 신호처리 모듈들과 상기 제2 음성 신호처리 모듈들 중 적어도 하나가 더 이용되는 것을 특징으로 하는 복호 장치.And at least one of the second audio signal processing modules and the second voice signal processing modules is further used for decoding at least one of an audio signal and a voice signal.
  24. 제 23항에 있어서,The method of claim 23,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 오디오 복호 모듈, 상기 제1 음성 복호 모듈, 상기 제2 오디오 복호 모듈 및 상기 제2 음성 복호 모듈이 제어되는 것을 특징으로 하는 복호 장치.The first audio decoding module, the first voice decoding module, the second audio decoding module and the second voice decoding module are controlled so that signal processing for decoding at least one of an audio signal and a voice signal is performed in order. Decoding device characterized in that.
  25. 제 23항에 있어서,The method of claim 23,
    상기 제1 오디오 복호 모듈은, 상기 제1 오디오 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈 및 IMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The first audio decoding module includes, as the first audio signal processing modules, a mid side (MSS) module, an intensity stereo (IS) module, a perceptual noise substitution (PNS) module, a temporal noise shaping (NTS) module, and an IMDCT (IMDCT) module. At least one of the Integer Modified Discrete Cosine Transform) module,
    상기 제1 음성 복호 모듈은, 상기 제1 음성 신호처리 모듈들로, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first voice decoding module may include, as the first voice signal processing modules, at least one of a CE (Construct Excitation) module and a FIR-F (FIR Filtering) module.
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하고,The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). At least one of a Post Filtering (QF-SF) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module,
    상기 제2 오디오 복호 모듈은, 상기 제2 오디오 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈 및 IIMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The second audio decoding module may include a quadrature mirror filtering-synthesis filtering (QMF-SF) module, a BSAC-Gain control (BSAC-GC) module, a prediction decoding module (PD), and a first audio signal processing module. Dependently Switched Coupling (DSC) Module, 2nd Dependently Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Parametric Stereo (PS) At least one of a module, an inverse error mapping (IEM) module, and an integer modified discrete cosine transform (IIMDCT) module,
    상기 제2 음성 복호 모듈은, 상기 제2 음성 신호처리 모듈로, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second voice decoding module is the second voice signal processing module, and includes a JCD (Joint Channel Decoding) module, a Long Term Prediction (LTP) module, a Conversion to LPC (CLPC) module, a High Pass & UpScaling (HP & US) module, A decoding device comprising at least one of an LTP-F filtering module, a post processing module, a de-emphasis module, and an upsampling module.
  26. 제 15항에 있어서,The method of claim 15,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈; 및A second audio decoding module having second audio signal processing modules each performing signal processing more necessary for decoding of audio signals; And
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 오디오 신호 및 음성 신호 중 적어도 하나의 포맷에 따라 상기 제2 오디오 신호처리 모듈들과 상기 제2 음성 신호처리 모듈들이 이용되지 않는 것을 특징으로 하는 복호 장치.In decoding at least one of an audio signal and a voice signal, the second audio signal processing modules and the second voice signal processing modules are not used according to a format of at least one of the audio signal and the voice signal. Decoding device.
  27. 오디오 신호의 복호에 필요한 신호처리들 및 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 신호처리 모듈들을 구비한 제1 복호 모듈;을 포함하고,And a first decoding module having first signal processing modules which respectively perform signal processing necessary for decoding the audio signal and signal processing necessary for decoding the audio signal.
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 제1 신호처리 모듈들 중 적어도 하나가 이용되는 것을 특징으로 하는 복호 장치.And at least one of the first signal processing modules is used for decoding at least one of an audio signal and an audio signal.
  28. 제 27항에 있어서,The method of claim 27,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시 이용되는 상기 제1 신호처리 모듈들 중 적어도 하나는, 상기 오디오 신호 및 음성 신호 중 적어도 하나의 포맷 마다 다른 것을 특징으로 하는 복호 장치.And at least one of the first signal processing modules used for decoding at least one of an audio signal and a voice signal is different for at least one format of the audio signal and the voice signal.
  29. 제 27항에 있어서,The method of claim 27,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 복호 모듈이 제어되는 것을 특징으로 하는 복호 장치.And the first decoding module is controlled such that signal processing for decoding at least one of an audio signal and an audio signal is performed in order.
  30. 제 27항에 있어서,The method of claim 27,
    상기 제1 복호 모듈은, 상기 제1 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈, IMDCT(Integer Modified Discrete Cosine Transform) 모듈, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first decoding module may include, as the first signal processing modules, an MSS module, an intensity stereo module, a Perceptual Noise Substitution (PNS) module, a Temporal Noise Shaping (NTS) module, and an Integer Modified IMDCT. At least one of a Discrete Cosine Transform (CRE) module, a Construct Excitation (CE) module, and a FIR-F (FIR Filtering) module,
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). A decoding apparatus comprising at least one of a Post Filtering (QD) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module.
  31. 제 27항에 있어서,The method of claim 27,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 신호처리 모듈들을 구비한 제2 복호 모듈;을 더 포함하고,A second decoding module having second signal processing modules which respectively perform signal processing necessary for decoding at least one of an audio signal and an audio signal;
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 오디오 신호 및 음성 신호 중 적어도 하나의 포맷에 따라 상기 제2 신호처리 모듈들 중 적어도 하나가 더 이용되는 것을 특징으로 하는 복호 장치.And at least one of the second signal processing modules is further used according to a format of at least one of the audio signal and the voice signal when decoding at least one of an audio signal and a voice signal.
  32. 제 31항에 있어서,The method of claim 31, wherein
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 오디오 복호 모듈, 상기 제1 음성 복호 모듈 및 상기 제2 복호 모듈이 제어되는 것을 특징으로 하는 복호 장치.And the first audio decoding module, the first voice decoding module and the second decoding module are controlled such that signal processing for decoding at least one of an audio signal and an audio signal is performed in order.
  33. 제 31항에 있어서,The method of claim 31, wherein
    상기 제1 복호 모듈은, 상기 제1 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈, IMDCT(Integer Modified Discrete Cosine Transform) 모듈, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first decoding module may include, as the first signal processing modules, an MSS module, an intensity stereo module, a Perceptual Noise Substitution (PNS) module, a Temporal Noise Shaping (NTS) module, and an Integer Modified IMDCT. At least one of a Discrete Cosine Transform (CRE) module, a Construct Excitation (CE) module, and a FIR-F (FIR Filtering) module,
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하고,The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). At least one of a Post Filtering (QF-SF) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module,
    상기 제2 복호 모듈은, 상기 제2 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈, IIMDCT(Integer Modified Discrete Cosine Transform) 모듈, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second decoding module may include a quadrature mirror filtering-synthesis filtering (QMF-SF) module, a BSAC-Gain control (BSAC-GC) module, a prediction decoding module (PD), and a first DSC ( Dependently Switched Coupling (DSC) Module, Secondly Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Prametric Stereo (PS) Module, Inverse Error Mapping (IEM) module, Integer Modified Discrete Cosine Transform (IIMDCT) module, Joint Channel Decoding (JCD) module, Long Term Prediction (LTP) module, Conversion to LPC (CLPC) module, High Pass & UpScaling (HP & US) module And at least one of an LTP-F (LTP-Filtering) module, a Post Processing (PP) module, a DeEmphasis (DE) module, and an UpSampling (US) module.
  34. 제 27항에 있어서,The method of claim 27,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 신호처리 모듈들을 구비한 제2 복호 모듈;을 더 포함하고,A second decoding module having second signal processing modules which respectively perform signal processing necessary for decoding at least one of an audio signal and an audio signal;
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 오디오 신호 및 음성 신호 중 적어도 하나의 포맷에 따라 상기 제2 신호처리 모듈들이 이용되지 않는 것을 특징으로 하는 복호 장치.And decoding the at least one of an audio signal and an audio signal according to the format of at least one of the audio signal and the audio signal.
  35. 제 27항에 있어서,The method of claim 27,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈; 및A second audio decoding module having second audio signal processing modules each performing signal processing more necessary for decoding of audio signals; And
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 제2 오디오 신호처리 모듈들과 상기 제2 음성 신호처리 모듈들 중 적어도 하나가 더 이용되는 것을 특징으로 하는 복호 장치.And at least one of the second audio signal processing modules and the second voice signal processing modules is further used for decoding at least one of an audio signal and a voice signal.
  36. 제 35항에 있어서,The method of claim 35,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 복호 모듈, 상기 제2 오디오 복호 모듈 및 상기 제2 음성 복호 모듈이 제어되는 것을 특징으로 하는 복호 장치.And the first decoding module, the second audio decoding module and the second voice decoding module are controlled such that signal processing for decoding at least one of an audio signal and an audio signal is performed in order.
  37. 제 35항에 있어서,The method of claim 35,
    상기 제1 복호 모듈은, 상기 제1 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈, IMDCT(Integer Modified Discrete Cosine Transform) 모듈, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first decoding module may include, as the first signal processing modules, an MSS module, an intensity stereo module, a Perceptual Noise Substitution (PNS) module, a Temporal Noise Shaping (NTS) module, and an Integer Modified IMDCT. At least one of a Discrete Cosine Transform (CRE) module, a Construct Excitation (CE) module, and a FIR-F (FIR Filtering) module,
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하고,The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). At least one of a Post Filtering (QF-SF) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module,
    상기 제2 오디오 복호 모듈은, 상기 제2 오디오 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈 및 IIMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The second audio decoding module may include a quadrature mirror filtering-synthesis filtering (QMF-SF) module, a BSAC-Gain control (BSAC-GC) module, a prediction decoding module (PD), and a first audio signal processing module. Dependently Switched Coupling (DSC) Module, 2nd Dependently Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Parametric Stereo (PS) At least one of a module, an inverse error mapping (IEM) module, and an integer modified discrete cosine transform (IIMDCT) module,
    상기 제2 음성 복호 모듈은, 상기 제2 음성 신호처리 모듈로, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second voice decoding module is the second voice signal processing module, and includes a JCD (Joint Channel Decoding) module, a Long Term Prediction (LTP) module, a Conversion to LPC (CLPC) module, a High Pass & UpScaling (HP & US) module, A decoding device comprising at least one of an LTP-F filtering module, a post processing module, a de-emphasis module, and an upsampling module.
  38. 제 27항에 있어서,The method of claim 27,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈; 및A second audio decoding module having second audio signal processing modules each performing signal processing more necessary for decoding of audio signals; And
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 오디오 신호 및 음성 신호 중 적어도 하나의 포맷에 따라 상기 제2 오디오 신호처리 모듈들과 상기 제2 음성 신호처리 모듈들이 이용되지 않는 것을 특징으로 하는 복호 장치.In decoding at least one of an audio signal and a voice signal, the second audio signal processing modules and the second voice signal processing modules are not used according to a format of at least one of the audio signal and the voice signal. Decoding device.
  39. 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈; 및A first audio decoding module having first audio signal processing modules each performing signal processing necessary for decoding the audio signal; And
    복호될 오디오 신호의 포맷을 분석하고, 분석결과에 따라 상기 제1 오디오 신호처리 모듈들 중 적어도 하나에 의해 상기 복호될 오디오 신호가 신호처리되도록 제어하는 분석부;를 포함하는 것을 특징으로 하는 복호 장치.An analysis unit for analyzing a format of the audio signal to be decoded and controlling the audio signal to be decoded by at least one of the first audio signal processing modules according to an analysis result; .
  40. 제 39항에 있어서,The method of claim 39,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈;을 더 포함하고,A second audio decoding module having second audio signal processing modules which respectively perform signal processing more necessary for decoding of the audio signals;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라 상기 제2 오디오 신호처리 모듈들 중 적어도 하나에 의해 상기 복호될 오디오 신호가 더 신호처리되도록 제어하는 것을 특징으로 하는 복호 장치.And the audio signal to be decoded is further signal-processed by at least one of the second audio signal processing modules according to the analysis result.
  41. 제 40항에 있어서,The method of claim 40,
    상기 분석부는,The analysis unit,
    오디오 신호의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 오디오 복호 모듈 및 상기 제2 오디오 복호 모듈을 제어하는 것을 특징으로 하는 복호 장치.And controlling the first audio decoding module and the second audio decoding module so that signal processing for decoding an audio signal is performed in order.
  42. 제 39항에 있어서,The method of claim 39,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈;을 더 포함하고,A second audio decoding module having second audio signal processing modules which respectively perform signal processing more necessary for decoding of the audio signals;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라 상기 제2 오디오 신호처리 모듈들 중 적어도 하나에 의해 상기 복호될 오디오 신호가 신호처리되지 않도록 제어하는 것을 특징으로 하는 복호 장치.And decoding the audio signal to be decoded by at least one of the second audio signal processing modules according to the analysis result.
  43. 제 39항에 있어서,The method of claim 39,
    상기 제1 오디오 복호 모듈은, 상기 제1 오디오 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈 및 IMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The first audio decoding module includes, as the first audio signal processing modules, a mid side (MSS) module, an intensity stereo (IS) module, a perceptual noise substitution (PNS) module, a temporal noise shaping (NTS) module, and an IMDCT (IMDCT) module. An decoding apparatus comprising at least one of an Integer Modified Discrete Cosine Transform module.
  44. 제 43항에 있어서,The method of claim 43,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈;을 더 포함하고,A second audio decoding module having second audio signal processing modules which respectively perform signal processing more necessary for decoding of the audio signals;
    상기 제2 오디오 복호 모듈은, 상기 제2 오디오 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈 및 IIMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second audio decoding module is a second audio signal processing module, and includes a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module, a BSAC-Gain Control (BSAC-GC) module, and a Prediction Decoding (PD) module. Dependently Switched Coupling (DSC) Module, 2nd Dependently Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Parametric Stereo (PS) A decoding apparatus comprising at least one of a module, an inverse error mapping (IEM) module, and an integer modified disc cosine transform (IIMDCT) module.
  45. 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈; 및A first speech decoding module having first speech signal processing modules each performing signal processing necessary for decoding the speech signal; And
    복호될 음성 신호의 포맷을 분석하고, 분석결과에 따라 상기 제1 음성 신호처리 모듈들 중 적어도 하나에 의해 상기 복호될 음성 신호가 신호처리되도록 제어하는 분석부;를 포함하는 것을 특징으로 하는 복호 장치.And an analyzer configured to analyze a format of a voice signal to be decoded and to control the decoded voice signal to be processed by at least one of the first voice signal processing modules according to an analysis result. .
  46. 제 45항에 있어서,The method of claim 45,
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라 상기 제2 음성 신호처리 모듈들 중 적어도 하나에 의해 상기 복호될 음성 신호가 더 신호처리되도록 제어하는 것을 특징으로 하는 복호 장치.And decoding the voice signal to be decoded by at least one of the second voice signal processing modules according to the analysis result.
  47. 제 46항에 있어서,The method of claim 46,
    상기 분석부는,The analysis unit,
    음성 신호의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 음성 복호 모듈 및 상기 제2 음성 복호 모듈을 제어하는 것을 특징으로 하는 복호 장치.And controlling the first voice decoding module and the second voice decoding module so that signal processing for decoding of a voice signal is performed in order.
  48. 제 35항에 있어서,The method of claim 35,
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라 상기 제2 음성 신호처리 모듈들 중 적어도 하나에 의해 상기 복호될 음성 신호가 신호처리되지 않도록 제어하는 것을 특징으로 하는 복호 장치.And decoding the audio signal to be decoded by at least one of the second voice signal processing modules according to the analysis result.
  49. 제 45항에 있어서,The method of claim 45,
    상기 제1 음성 복호 모듈은, 상기 제1 음성 신호처리 모듈들로, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first voice decoding module may include, as the first voice signal processing modules, at least one of a CE (Construct Excitation) module and a FIR-F (FIR Filtering) module.
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). A decoding apparatus comprising at least one of a Post Filtering (QD) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module.
  50. 제 49항에 있어서,The method of claim 49,
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    상기 제2 음성 복호 모듈은, 상기 제2 음성 신호처리 모듈로, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second voice decoding module is the second voice signal processing module, and includes a JCD (Joint Channel Decoding) module, a Long Term Prediction (LTP) module, a Conversion to LPC (CLPC) module, a High Pass & UpScaling (HP & US) module, A decoding device comprising at least one of an LTP-F filtering module, a post processing module, a de-emphasis module, and an upsampling module.
  51. 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈; 및A first audio decoding module having first audio signal processing modules each performing signal processing necessary for decoding the audio signal; And
    음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈;를 포함하고,And a first voice decoding module having first voice signal processing modules respectively performing signal processing necessary for decoding the voice signal.
    오디오 신호 및 음성 신호 중 적어도 하나의 포맷을 분석하고, 분석결과에 따라 상기 제1 오디오 신호처리 모듈들과 상기 제1 음성 신호처리 모듈들 중 적어도 하나에 의해 상기 오디오 신호 및 음성 신호 중 적어도 하나가 신호처리되도록 제어하는 분석부;를 포함하는 것을 특징으로 하는 복호 장치.Analyzing at least one format of an audio signal and a voice signal, and at least one of the audio signal and the voice signal by at least one of the first audio signal processing module and the first voice signal processing module according to the analysis result And a analyzer configured to control signal processing.
  52. 제 51항에 있어서,The method of claim 51,
    상기 분석부는,The analysis unit,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 오디오 복호 모듈 및 상기 제1 음성 복호 모듈을 제어하는 것을 특징으로 하는 복호 장치.And controlling the first audio decoding module and the first voice decoding module so that signal processing for decoding at least one of an audio signal and a voice signal is performed in order.
  53. 제 51항에 있어서,The method of claim 51,
    상기 제1 오디오 복호 모듈은, 상기 제1 오디오 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈 및 IMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The first audio decoding module includes, as the first audio signal processing modules, a mid side (MSS) module, an intensity stereo (IS) module, a perceptual noise substitution (PNS) module, a temporal noise shaping (NTS) module, and an IMDCT (IMDCT) module. At least one of the Integer Modified Discrete Cosine Transform) module,
    상기 제1 음성 복호 모듈은, 상기 제1 음성 신호처리 모듈들로, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first voice decoding module may include, as the first voice signal processing modules, at least one of a CE (Construct Excitation) module and a FIR-F (FIR Filtering) module.
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). A decoding apparatus comprising at least one of a Post Filtering (QD) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module.
  54. 제 51항에 있어서,The method of claim 51,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 신호처리 모듈들을 구비한 제2 복호 모듈;을 더 포함하고,A second decoding module having second signal processing modules which respectively perform signal processing necessary for decoding at least one of an audio signal and an audio signal;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라, 상기 제2 신호처리 모듈들 중 적어도 하나에 의해 상기 오디오 신호 및 음성 신호 중 적어도 하나가 더 신호처리되도록 제어하는 것을 특징으로 하는 복호 장치.And at least one of the audio signal and the audio signal is further signal-processed by at least one of the second signal processing modules according to the analysis result.
  55. 제 54항에 있어서,The method of claim 54, wherein
    상기 분석부는,The analysis unit,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 오디오 복호 모듈, 상기 제1 음성 복호 모듈 및 상기 제2 복호 모듈을 제어하는 것을 특징으로 하는 복호 장치.And controlling the first audio decoding module, the first voice decoding module and the second decoding module so that signal processing for decoding at least one of an audio signal and an audio signal is performed in order.
  56. 제 54항에 있어서,The method of claim 54, wherein
    상기 제1 오디오 복호 모듈은, 상기 제1 오디오 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈 및 IMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The first audio decoding module includes, as the first audio signal processing modules, a mid side (MSS) module, an intensity stereo (IS) module, a perceptual noise substitution (PNS) module, a temporal noise shaping (NTS) module, and an IMDCT (IMDCT) module. At least one of the Integer Modified Discrete Cosine Transform) module,
    상기 제1 음성 복호 모듈은, 상기 제1 음성 신호처리 모듈들로, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first voice decoding module may include, as the first voice signal processing modules, at least one of a CE (Construct Excitation) module and a FIR-F (FIR Filtering) module.
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하고,The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). At least one of a Post Filtering (QF-SF) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module,
    상기 제2 복호 모듈은, 상기 제2 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈, IIMDCT(Integer Modified Discrete Cosine Transform) 모듈, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second decoding module may include a quadrature mirror filtering-synthesis filtering (QMF-SF) module, a BSAC-Gain control (BSAC-GC) module, a prediction decoding module (PD), and a first DSC ( Dependently Switched Coupling (DSC) Module, Secondly Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Prametric Stereo (PS) Module, Inverse Error Mapping (IEM) module, Integer Modified Discrete Cosine Transform (IIMDCT) module, Joint Channel Decoding (JCD) module, Long Term Prediction (LTP) module, Conversion to LPC (CLPC) module, High Pass & UpScaling (HP & US) module And at least one of an LTP-F (LTP-Filtering) module, a Post Processing (PP) module, a DeEmphasis (DE) module, and an UpSampling (US) module.
  57. 제 51항에 있어서,The method of claim 51,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 신호처리 모듈들을 구비한 제2 복호 모듈;을 더 포함하고,A second decoding module having second signal processing modules which respectively perform signal processing necessary for decoding at least one of an audio signal and an audio signal;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라 상기 제2 신호처리 모듈들 중 적어도 하나에 의해 상기 복호될 오디오 신호가 신호처리되지 않도록 제어하는 것을 특징으로 하는 복호 장치.And decoding the audio signal to be decoded by at least one of the second signal processing modules according to the analysis result.
  58. 제 51항에 있어서,The method of claim 51,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈; 및A second audio decoding module having second audio signal processing modules each performing signal processing more necessary for decoding of audio signals; And
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라 상기 제2 오디오 신호처리 모듈들과 상기 제2 음성 복호 모듈들 중 적어도 하나에 의해 상기 오디오 신호 및 음성 신호 중 적어도 하나가 더 신호처리되도록 제어하는 것을 특징으로 하는 복호 장치.And at least one of the audio signal and the voice signal is further signal-processed by at least one of the second audio signal processing modules and the second voice decoding modules according to the analysis result.
  59. 제 58항에 있어서,The method of claim 58,
    상기 분석부는,The analysis unit,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 오디오 복호 모듈, 상기 제1 음성 복호 모듈, 상기 제2 오디오 복호 모듈 및 상기 제2 음성 복호 모듈이 제어되는 것을 특징으로 하는 복호 장치.The first audio decoding module, the first voice decoding module, the second audio decoding module and the second voice decoding module are controlled so that signal processing for decoding at least one of an audio signal and a voice signal is performed in order. Decoding device characterized in that.
  60. 제 58항에 있어서,The method of claim 58,
    상기 제1 오디오 복호 모듈은, 상기 제1 오디오 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈 및 IMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The first audio decoding module includes, as the first audio signal processing modules, a mid side (MSS) module, an intensity stereo (IS) module, a perceptual noise substitution (PNS) module, a temporal noise shaping (NTS) module, and an IMDCT (IMDCT) module. At least one of the Integer Modified Discrete Cosine Transform) module,
    상기 제1 음성 복호 모듈은, 상기 제1 음성 신호처리 모듈들로, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first voice decoding module may include, as the first voice signal processing modules, at least one of a CE (Construct Excitation) module and a FIR-F (FIR Filtering) module.
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하고,The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). At least one of a Post Filtering (QF-SF) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module,
    상기 제2 오디오 복호 모듈은, 상기 제2 오디오 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈 및 IIMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The second audio decoding module may include a quadrature mirror filtering-synthesis filtering (QMF-SF) module, a BSAC-Gain control (BSAC-GC) module, a prediction decoding module (PD), and a first audio signal processing module. Dependently Switched Coupling (DSC) Module, 2nd Dependently Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Parametric Stereo (PS) At least one of a module, an inverse error mapping (IEM) module, and an integer modified discrete cosine transform (IIMDCT) module,
    상기 제2 음성 복호 모듈은, 상기 제2 음성 신호처리 모듈로, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second voice decoding module is the second voice signal processing module, and includes a JCD (Joint Channel Decoding) module, a Long Term Prediction (LTP) module, a Conversion to LPC (CLPC) module, a High Pass & UpScaling (HP & US) module, A decoding device comprising at least one of an LTP-F filtering module, a post processing module, a de-emphasis module, and an upsampling module.
  61. 제 51항에 있어서,The method of claim 51,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈; 및A second audio decoding module having second audio signal processing modules each performing signal processing more necessary for decoding of audio signals; And
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라, 상기 제2 오디오 신호처리 모듈들과 상기 제2 음성 신호처리 모듈들에 의해 상기 오디오 신호 및 음성 신호 중 적어도 하나가 신호처리되지 않도록 제어하는 것을 특징으로 하는 복호 장치.And at least one of the audio signal and the voice signal is not processed by the second audio signal processing modules and the second voice signal processing modules according to the analysis result.
  62. 오디오 신호의 복호에 필요한 신호처리들 및 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 신호처리 모듈들을 구비한 제1 복호 모듈; 및A first decoding module having first signal processing modules for performing signal processing for decoding an audio signal and signal processing for decoding an audio signal, respectively; And
    오디오 신호 및 음성 신호 중 적어도 하나의 포맷을 분석하고, 분석결과에 따라 상기 제1 신호처리 모듈들 중 적어도 하나에 의해 상기 오디오 신호 및 음성 신호 중 적어도 하나가 신호처리되도록 제어하는 분석부;를 포함하는 것을 특징으로 하는 복호 장치.An analysis unit for analyzing at least one format of an audio signal and a voice signal and controlling at least one of the audio signal and the voice signal to be processed by at least one of the first signal processing modules according to an analysis result; Decoding device, characterized in that.
  63. 제 62항에 있어서,The method of claim 62,
    상기 분석부는,The analysis unit,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 복호 모듈을 제어하는 것을 특징으로 하는 복호 장치.And decoding the first decoding module so that signal processing for decoding at least one of an audio signal and an audio signal is performed in order.
  64. 제 62항에 있어서,The method of claim 62,
    상기 제1 복호 모듈은, 상기 제1 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈, IMDCT(Integer Modified Discrete Cosine Transform) 모듈, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first decoding module may include, as the first signal processing modules, an MSS module, an intensity stereo module, a Perceptual Noise Substitution (PNS) module, a Temporal Noise Shaping (NTS) module, and an Integer Modified IMDCT. At least one of a Discrete Cosine Transform (CRE) module, a Construct Excitation (CE) module, and a FIR-F (FIR Filtering) module,
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). A decoding apparatus comprising at least one of a Post Filtering (QD) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module.
  65. 제 62항에 있어서,The method of claim 62,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 신호처리 모듈들을 구비한 제2 복호 모듈;을 더 포함하고,A second decoding module having second signal processing modules which respectively perform signal processing necessary for decoding at least one of an audio signal and an audio signal;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라, 상기 제2 신호처리 모듈들 중 적어도 하나에 의해 상기 오디오 신호 및 음성 신호 중 적어도 하나가 더 신호처리되도록 제어하는 것을 특징으로 하는 복호 장치.And at least one of the audio signal and the audio signal is further signal-processed by at least one of the second signal processing modules according to the analysis result.
  66. 제 65항에 있어서,66. The method of claim 65,
    상기 분석부는,The analysis unit,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 복호 모듈 및 상기 제2 복호 모듈을 제어하는 것을 특징으로 하는 복호 장치.And controlling the first decoding module and the second decoding module so that signal processing for decoding at least one of an audio signal and an audio signal is performed in order.
  67. 제 65항에 있어서,66. The method of claim 65,
    상기 제1 복호 모듈은, 상기 제1 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈, IMDCT(Integer Modified Discrete Cosine Transform) 모듈, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first decoding module may include, as the first signal processing modules, an MSS module, an intensity stereo module, a Perceptual Noise Substitution (PNS) module, a Temporal Noise Shaping (NTS) module, and an Integer Modified IMDCT. At least one of a Discrete Cosine Transform (CRE) module, a Construct Excitation (CE) module, and a FIR-F (FIR Filtering) module,
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하고,The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). At least one of a Post Filtering (QF-SF) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module,
    상기 제2 복호 모듈은, 상기 제2 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈, IIMDCT(Integer Modified Discrete Cosine Transform) 모듈, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second decoding module may include a quadrature mirror filtering-synthesis filtering (QMF-SF) module, a BSAC-Gain control (BSAC-GC) module, a prediction decoding module (PD), and a first DSC ( Dependently Switched Coupling (DSC) Module, Secondly Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Prametric Stereo (PS) Module, Inverse Error Mapping (IEM) module, Integer Modified Discrete Cosine Transform (IIMDCT) module, Joint Channel Decoding (JCD) module, Long Term Prediction (LTP) module, Conversion to LPC (CLPC) module, High Pass & UpScaling (HP & US) module And at least one of an LTP-F (LTP-Filtering) module, a Post Processing (PP) module, a DeEmphasis (DE) module, and an UpSampling (US) module.
  68. 제 62항에 있어서,The method of claim 62,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 신호처리 모듈들을 구비한 제2 복호 모듈;을 더 포함하고,A second decoding module having second signal processing modules which respectively perform signal processing necessary for decoding at least one of an audio signal and an audio signal;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라 상기 제2 신호처리 모듈들 중 적어도 하나에 의해 상기 복호될 오디오 신호가 신호처리되지 않도록 제어하는 것을 특징으로 하는 복호 장치.And decoding the audio signal to be decoded by at least one of the second signal processing modules according to the analysis result.
  69. 제 62항에 있어서,The method of claim 62,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈; 및A second audio decoding module having second audio signal processing modules each performing signal processing more necessary for decoding of audio signals; And
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라 상기 제2 오디오 신호처리 모듈들과 상기 제2 음성 복호 모듈들 중 적어도 하나에 의해 상기 오디오 신호 및 음성 신호 중 적어도 하나가 더 신호처리되도록 제어하는 것을 특징으로 하는 복호 장치.And at least one of the audio signal and the voice signal is further signal-processed by at least one of the second audio signal processing modules and the second voice decoding modules according to the analysis result.
  70. 제 69항에 있어서,The method of claim 69,
    상기 분석부는,The analysis unit,
    오디오 신호 및 음성 신호 중 적어도 하나의 복호를 위한 신호처리들이 순서에 맞게 수행되도록, 상기 제1 복호 모듈, 상기 제2 오디오 복호 모듈 및 상기 제2 음성 복호 모듈이 제어되는 것을 특징으로 하는 복호 장치.And the first decoding module, the second audio decoding module and the second voice decoding module are controlled such that signal processing for decoding at least one of an audio signal and an audio signal is performed in order.
  71. 제 69항에 있어서,The method of claim 69,
    상기 제1 복호 모듈은, 상기 제1 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈, IMDCT(Integer Modified Discrete Cosine Transform) 모듈, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first decoding module may include, as the first signal processing modules, an MSS module, an intensity stereo module, a Perceptual Noise Substitution (PNS) module, a Temporal Noise Shaping (NTS) module, and an Integer Modified IMDCT. At least one of a Discrete Cosine Transform (CRE) module, a Construct Excitation (CE) module, and a FIR-F (FIR Filtering) module,
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하고,The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). At least one of a Post Filtering (QF-SF) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module,
    상기 제2 오디오 복호 모듈은, 상기 제2 오디오 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈 및 IIMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The second audio decoding module may include a quadrature mirror filtering-synthesis filtering (QMF-SF) module, a BSAC-Gain control (BSAC-GC) module, a prediction decoding module (PD), and a first audio signal processing module. Dependently Switched Coupling (DSC) Module, 2nd Dependently Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Parametric Stereo (PS) At least one of a module, an inverse error mapping (IEM) module, and an integer modified discrete cosine transform (IIMDCT) module,
    상기 제2 음성 복호 모듈은, 상기 제2 음성 신호처리 모듈로, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second voice decoding module is the second voice signal processing module, and includes a JCD (Joint Channel Decoding) module, a Long Term Prediction (LTP) module, a Conversion to LPC (CLPC) module, a High Pass & UpScaling (HP & US) module, A decoding device comprising at least one of an LTP-F filtering module, a post processing module, a de-emphasis module, and an upsampling module.
  72. 제 62항에 있어서,The method of claim 62,
    오디오 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 오디오 신호처리 모듈들을 구비한 제2 오디오 복호 모듈; 및A second audio decoding module having second audio signal processing modules each performing signal processing more necessary for decoding of audio signals; And
    음성 신호들의 복호에 더 필요한 신호처리들을 각각 수행하는 제2 음성 신호처리 모듈들을 구비한 제2 음성 복호 모듈;을 더 포함하고,A second voice decoding module having second voice signal processing modules each performing signal processing more necessary for decoding of voice signals;
    상기 분석부는,The analysis unit,
    상기 분석결과에 따라, 상기 제2 오디오 신호처리 모듈들과 상기 제2 음성 신호처리 모듈들에 의해 상기 오디오 신호 및 음성 신호 중 적어도 하나가 신호처리되지 않도록 제어하는 것을 특징으로 하는 복호 장치.And at least one of the audio signal and the voice signal is not processed by the second audio signal processing modules and the second voice signal processing modules according to the analysis result.
  73. 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈; 및A first audio decoding module having first audio signal processing modules each performing signal processing necessary for decoding the audio signal; And
    상기 오디오 신호의 복호에 필요하지만 상기 제1 오디오 신호처리 모듈들이 수행할 수 없는 적어도 하나의 신호처리들을 각각 수행할 수 있는 적어도 하나의 제2 오디오 신호처리 모듈을 구비한 제2 오디오 복호 모듈;을 포함하는 것을 특징으로 하는 복호 장치.A second audio decoding module having at least one second audio signal processing module which is required for decoding the audio signal, but which can each perform at least one signal processing that the first audio signal processing modules cannot perform. Decoding device comprising a.
  74. 제 73항에 있어서,The method of claim 73,
    상기 제1 오디오 복호 모듈은, 상기 제1 오디오 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈 및 IMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The first audio decoding module includes, as the first audio signal processing modules, a mid side (MSS) module, an intensity stereo (IS) module, a perceptual noise substitution (PNS) module, a temporal noise shaping (NTS) module, and an IMDCT (IMDCT) module. At least one of the Integer Modified Discrete Cosine Transform) module,
    상기 제2 오디오 복호 모듈은, 상기 제2 오디오 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈 및 IIMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second audio decoding module is a second audio signal processing module, and includes a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module, a BSAC-Gain Control (BSAC-GC) module, and a Prediction Decoding (PD) module. Dependently Switched Coupling (DSC) Module, 2nd Dependently Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Parametric Stereo (PS) A decoding apparatus comprising at least one of a module, an inverse error mapping (IEM) module, and an integer modified disc cosine transform (IIMDCT) module.
  75. 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈; 및A first speech decoding module having first speech signal processing modules each performing signal processing necessary for decoding the speech signal; And
    상기 음성 신호의 복호에 필요하지만 상기 제1 음성 신호처리 모듈들이 수행할 수 없는 적어도 하나의 신호처리들을 각각 수행할 수 있는 적어도 하나의 제2 음성 신호처리 모듈을 구비한 제2 음성 복호 모듈;을 포함하는 것을 특징으로 하는 복호 장치.A second voice decoding module having at least one second voice signal processing module, which is required for decoding the voice signal, but which can each perform at least one signal processing that the first voice signal processing modules cannot perform. Decoding device comprising a.
  76. 제 75항에 있어서,76. The method of claim 75 wherein
    상기 제1 음성 복호 모듈은, 상기 제1 음성 신호처리 모듈들로, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first voice decoding module may include, as the first voice signal processing modules, at least one of a CE (Construct Excitation) module and a FIR-F (FIR Filtering) module.
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하며,The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). At least one of a Post Filtering (Quad Filtering) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module,
    상기 제2 음성 복호 모듈은, 상기 제2 음성 신호처리 모듈로, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second voice decoding module is the second voice signal processing module, and includes a JCD (Joint Channel Decoding) module, a Long Term Prediction (LTP) module, a Conversion to LPC (CLPC) module, a High Pass & UpScaling (HP & US) module, A decoding device comprising at least one of an LTP-F filtering module, a post processing module, a de-emphasis module, and an upsampling module.
  77. 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈;A first audio decoding module having first audio signal processing modules each performing signal processing necessary for decoding the audio signal;
    음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈;A first speech decoding module having first speech signal processing modules each performing signal processing necessary for decoding the speech signal;
    상기 오디오 신호의 복호에 필요하지만 상기 제1 오디오 신호처리 모듈들이 수행할 수 없는 적어도 하나의 신호처리들을 각각 수행할 수 있는 적어도 하나의 제2 오디오 신호처리 모듈을 구비한 제2 오디오 복호 모듈; 및A second audio decoding module having at least one second audio signal processing module each of which is required for decoding the audio signal but which can perform at least one signal processing that the first audio signal processing modules cannot perform; And
    상기 음성 신호의 복호에 필요하지만 상기 제1 음성 신호처리 모듈들이 수행할 수 없는 적어도 하나의 신호처리들을 각각 수행할 수 있는 적어도 하나의 제2 음성 신호처리 모듈을 구비한 제2 음성 복호 모듈;을 포함하는 것을 특징으로 하는 복호 장치.A second voice decoding module having at least one second voice signal processing module, which is required for decoding the voice signal, but which can each perform at least one signal processing that the first voice signal processing modules cannot perform. Decoding device comprising a.
  78. 제 77항에 있어서,78. The method of claim 77 wherein
    상기 제1 오디오 복호 모듈은, 상기 제1 오디오 신호처리 모듈들로, MSS(Mid Side) 모듈, IS(Intensity Stereo) 모듈, PNS(Perceptual Noise Substitution) 모듈, TNS(Temporal Noise Shaping) 모듈 및 IMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하고,The first audio decoding module includes, as the first audio signal processing modules, a mid side (MSS) module, an intensity stereo (IS) module, a perceptual noise substitution (PNS) module, a temporal noise shaping (NTS) module, and an IMDCT (IMDCT) module. At least one of the Integer Modified Discrete Cosine Transform) module,
    상기 제2 오디오 복호 모듈은, 상기 제2 오디오 신호처리 모듈로, QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈, BSAC-GC(BSAC-Gain Control) 모듈, PD(Prediction Decoding) 모듈, 제1 DSC(Dependently Switched Coupling) 모듈, 제2 DSC(Dependently Switched Coupling) 모듈, AAC-GC(AAC-Gain Control) 모듈, ISC(Independently Switched Coupling) 모듈, SBR(Spectral Band Replication) 모듈, PS(Prametric Stereo) 모듈, IEM(Inverse Error Mapping) 모듈 및 IIMDCT(Integer Modified Discrete Cosine Transform) 모듈 중 적어도 하나를 포함하며,The second audio decoding module is a second audio signal processing module, and includes a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module, a BSAC-Gain Control (BSAC-GC) module, and a Prediction Decoding (PD) module. Dependently Switched Coupling (DSC) Module, 2nd Dependently Switched Coupling (DSC) Module, AAC-Gain Control (AAC-GC) Module, Independently Switched Coupling (ISC) Module, Spectral Band Replication (SBR) Module, Parametric Stereo (PS) At least one of a module, an inverse error mapping (IEM) module, and an integer modified discrete cosine transform (IIMDCT) module,
    상기 제1 음성 복호 모듈은, 상기 제1 음성 신호처리 모듈들로, CE(Construct Excitation) 모듈 및 FIR-F(FIR Filtering) 모듈 중 적어도 하나를 포함하고,The first voice decoding module may include, as the first voice signal processing modules, at least one of a CE (Construct Excitation) module and a FIR-F (FIR Filtering) module.
    상기 FIR-F 모듈은, HB-SF(HB-Synthesis Filtering) 모듈, PF(Post Filtering) 모듈, WF(Weighting Filtering) 모듈, STP(Short Term Prediction) 모듈, BPF(BP Filtering) 모듈, APF(Adaptive Post Filtering) 모듈 및 QMF-SF(Quadrature Mirror Filtering - Synthesis Filtering) 모듈 중 적어도 하나를 포함하며,The FIR-F module includes an HB-Synthesis Filtering (HB-SF) module, a Post Filtering (PF) module, a Weighting Filtering (WF) module, a Short Term Prediction (STP) module, a BPF (BP Filtering) module, and an APF (Adaptive). At least one of a Post Filtering (Quad Filtering) module and a Quadrature Mirror Filtering-Synthesis Filtering (QMF-SF) module,
    상기 제2 음성 복호 모듈은, 상기 제2 음성 신호처리 모듈로, JCD(Joint Channel Decoding) 모듈, LTP(Long Term Prediction) 모듈, CLPC(Conversion to LPC) 모듈, HP&US(High Pass & UpScaling) 모듈, LTP-F(LTP-Filtering) 모듈, PP(Post Processing) 모듈, DE(DeEmphasis) 모듈 및 US(UpSampling) 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 복호 장치.The second voice decoding module is the second voice signal processing module, and includes a JCD (Joint Channel Decoding) module, a Long Term Prediction (LTP) module, a Conversion to LPC (CLPC) module, a High Pass & UpScaling (HP & US) module, A decoding device comprising at least one of an LTP-F filtering module, a post processing module, a de-emphasis module, and an upsampling module.
  79. 오디오 신호를 복호하는 복호부; 및A decoder for decoding an audio signal; And
    상기 복호부에서 복호된 오디오 신호에 대응하는 오디오를 출력하는 출력부;를 포함하고,And an output unit for outputting audio corresponding to the audio signal decoded by the decoder.
    상기 복호부는,The decoding unit,
    오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈;을 포함하고,A first audio decoding module having first audio signal processing modules which respectively perform signal processing necessary for decoding the audio signal;
    오디오 신호의 복호시에는 상기 제1 오디오 신호처리 모듈들 중 적어도 하나가 이용되는 것을 특징으로 하는 출력 장치.At least one of the first audio signal processing modules is used when decoding an audio signal.
  80. 음성 신호를 복호하는 복호부; 및A decoder which decodes an audio signal; And
    상기 복호부에서 복호된 음성 신호에 대응하는 음성을 출력하는 출력부;를 포함하고,And an output unit configured to output a voice corresponding to the voice signal decoded by the decoder.
    상기 복호부는,The decoding unit,
    음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈;을 포함하고,And a first voice decoding module having first voice signal processing modules respectively performing signal processing necessary for decoding the voice signal.
    음성 신호의 복호시에는 상기 제1 음성 신호처리 모듈들 중 적어도 하나가 이용되는 것을 특징으로 하는 출력 장치.At least one of the first voice signal processing modules is used when decoding a voice signal.
  81. 오디오 신호 및 음성 신호 중 적어도 하나를 복호하는 복호부; 및A decoder which decodes at least one of an audio signal and an audio signal; And
    상기 복호부에서 복호된 오디오 신호 및 음성 신호 중 적어도 하나에 대응하는 오디오 및 음성 중 적어도 하나를 출력하는 출력부;를 포함하고,And an output unit configured to output at least one of audio and voice corresponding to at least one of an audio signal and a voice signal decoded by the decoder.
    상기 복호부는,The decoding unit,
    오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 오디오 신호처리 모듈들을 구비한 제1 오디오 복호 모듈; 및A first audio decoding module having first audio signal processing modules each performing signal processing necessary for decoding the audio signal; And
    음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 음성 신호처리 모듈들을 구비한 제1 음성 복호 모듈;을 포함하고,And a first voice decoding module having first voice signal processing modules respectively performing signal processing necessary for decoding the voice signal.
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 제1 오디오 신호처리 모듈들과 상기 제1 음성 신호처리 모듈들 중 적어도 하나가 이용되는 것을 특징으로 하는 출력 장치.And at least one of the first audio signal processing modules and the first voice signal processing modules is used for decoding at least one of an audio signal and a voice signal.
  82. 오디오 신호 및 음성 신호 중 적어도 하나를 복호하는 복호부; 및A decoder which decodes at least one of an audio signal and an audio signal; And
    상기 복호부에서 복호된 오디오 신호 및 음성 신호 중 적어도 하나에 대응하는 오디오 및 음성 중 적어도 하나를 출력하는 출력부;를 포함하고,And an output unit configured to output at least one of audio and voice corresponding to at least one of an audio signal and a voice signal decoded by the decoder.
    상기 복호부는,The decoding unit,
    오디오 신호의 복호에 필요한 신호처리들 및 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 제1 신호처리 모듈들을 구비한 제1 복호 모듈;을 포함하고,And a first decoding module having first signal processing modules which respectively perform signal processing necessary for decoding the audio signal and signal processing necessary for decoding the audio signal.
    오디오 신호 및 음성 신호 중 적어도 하나의 복호시에는, 상기 제1 신호처리 모듈들 중 적어도 하나가 이용되는 것을 특징으로 하는 출력 장치.When decoding at least one of an audio signal and an audio signal, at least one of the first signal processing modules is used.
  83. 입력된 오디오 신호를 전처리하는 단계; 및Preprocessing the input audio signal; And
    제1 오디오 복호 모듈에 마련된 제1 오디오 신호처리 모듈들 중 적어도 하나의 모듈을 이용하여, 전처리된 오디오 신호를 복호하는 단계;를 포함하며,And decoding the preprocessed audio signal using at least one of the first audio signal processing modules provided in the first audio decoding module.
    상기 제1 오디오 신호처리 모듈들은, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 모듈들인 것을 특징으로 하는 복호 방법.And the first audio signal processing modules are modules which perform signal processing necessary for decoding an audio signal, respectively.
  84. 입력된 음성 신호를 전처리하는 단계; 및Preprocessing the input voice signal; And
    제1 음성 복호 모듈에 마련된 제1 음성 신호처리 모듈들 중 적어도 하나의 모듈을 이용하여, 전처리된 음성 신호를 복호하는 단계;를 포함하며,And decoding the preprocessed voice signal using at least one of the first voice signal processing modules provided in the first voice decoding module.
    상기 제1 음성 신호처리 모듈들은, 음성 신호의 복호에 필요한 신호처리들을 각각 수행하는 모듈들인 것을 특징으로 하는 복호 방법.And the first voice signal processing modules are modules that perform signal processing necessary for decoding of a voice signal, respectively.
  85. 오디오 신호 및 음성 신호 중 적어도 하나를 전처리하는 단계; 및Preprocessing at least one of an audio signal and a voice signal; And
    제1 오디오 복호 모듈에 마련된 제1 오디오 신호처리 모듈들과 제1 음성 복호 모듈에 마련된 제1 음성 신호처리 모듈들 중 적어도 하나의 모듈을 이용하여, 전처리된 오디오 신호 및 음성 신호 중 적어도 하나를 복호하는 단계;를 포함하며,Decode at least one of the preprocessed audio signal and the voice signal using at least one of the first audio signal processing modules provided in the first audio decoding module and the first voice signal processing modules provided in the first audio decoding module. Comprising;
    상기 제1 오디오 신호처리 모듈들은, 오디오 신호의 복호에 필요한 신호처리들을 각각 수행하는 모듈들이고,The first audio signal processing modules are modules which respectively perform signal processing necessary for decoding an audio signal.
    상기 제1 음성 신호처리 모듈들은, 음성 신호에 필요한 신호처리들을 각각 수행하는 모듈들인 것을 특징으로 하는 복호 방법.And the first voice signal processing modules are modules which perform signal processing required for a voice signal, respectively.
  86. 오디오 신호 및 음성 신호 중 적어도 하나를 전처리하는 단계; 및Preprocessing at least one of an audio signal and a voice signal; And
    제1 복호 모듈에 마련된 제1 신호처리 모듈들 중 적어도 하나의 모듈을 이용하여, 전처리된 오디오 신호 및 음성 신호 중 적어도 하나를 복호하는 단계;를 포함하며,And decoding at least one of a preprocessed audio signal and a voice signal using at least one of the first signal processing modules provided in the first decoding module.
    상기 제1 신호처리 모듈들은, 오디오 신호의 복호에 필요한 신호처리들 및 음성 신호에 필요한 신호처리들을 각각 수행하는 모듈들인 것을 특징으로 하는 복호 방법.And the first signal processing modules are modules that perform signal processing necessary for decoding an audio signal and signal processing necessary for an audio signal, respectively.
PCT/KR2009/007675 2009-02-02 2009-12-22 Decoding apparatus using separate decoding module, and output apparatus adopting the same WO2010087582A2 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2009-0008121 2009-02-02
KR1020090008121A KR20100088959A (en) 2009-02-02 2009-02-02 Device for decoding signal with separate decoding modules and apparatus for outputting sound using the same

Publications (2)

Publication Number Publication Date
WO2010087582A2 true WO2010087582A2 (en) 2010-08-05
WO2010087582A3 WO2010087582A3 (en) 2010-09-30

Family

ID=42396154

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2009/007675 WO2010087582A2 (en) 2009-02-02 2009-12-22 Decoding apparatus using separate decoding module, and output apparatus adopting the same

Country Status (2)

Country Link
KR (1) KR20100088959A (en)
WO (1) WO2010087582A2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR0149776B1 (en) * 1995-05-25 1998-10-15 김광호 Video telephone having plural video codec and method of operating the same
KR100386116B1 (en) * 2000-12-15 2003-06-02 (주) 멀티비아 multimedia data coding and decoding system
US20060036436A1 (en) * 2004-08-12 2006-02-16 International Business Machines Corp. Method for dynamic selection of optimized codec for streaming audio content
KR100604032B1 (en) * 2003-01-08 2006-07-24 엘지전자 주식회사 Apparatus for supporting plural codec and Method thereof
KR20080092823A (en) * 2007-04-13 2008-10-16 엘지전자 주식회사 Apparatus and method for encoding and decoding signal

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR0149776B1 (en) * 1995-05-25 1998-10-15 김광호 Video telephone having plural video codec and method of operating the same
KR100386116B1 (en) * 2000-12-15 2003-06-02 (주) 멀티비아 multimedia data coding and decoding system
KR100604032B1 (en) * 2003-01-08 2006-07-24 엘지전자 주식회사 Apparatus for supporting plural codec and Method thereof
US20060036436A1 (en) * 2004-08-12 2006-02-16 International Business Machines Corp. Method for dynamic selection of optimized codec for streaming audio content
KR20080092823A (en) * 2007-04-13 2008-10-16 엘지전자 주식회사 Apparatus and method for encoding and decoding signal

Also Published As

Publication number Publication date
WO2010087582A3 (en) 2010-09-30
KR20100088959A (en) 2010-08-11

Similar Documents

Publication Publication Date Title
WO2010107269A2 (en) Apparatus and method for encoding/decoding a multichannel signal
WO2014107097A1 (en) Display apparatus and method for controlling the display apparatus
WO2011025199A2 (en) Contents reproducing device and method
EP2941894A1 (en) Display apparatus and method for controlling the same
WO2014003283A1 (en) Display apparatus, method for controlling display apparatus, and interactive system
WO2015174753A1 (en) Content output apparatus, mobile apparatus, and controlling methods thereof
WO2017005066A1 (en) Method and apparatus for recording audio and video synchronization timestamp
EP3138300A1 (en) Content output apparatus, mobile apparatus, and controlling methods thereof
WO2017177524A1 (en) Audio and video playing synchronization method and device
WO2018028124A1 (en) Television set and signal source switching method thereof
WO2014187158A1 (en) Method, server, and terminal for controlling cloud sharing of terminal data
WO2018192253A1 (en) Video signal transmission method and apparatus
WO2017054488A1 (en) Television play control method, server and television play control system
WO2018032680A1 (en) Method and system for playing audio and video
WO2014148845A1 (en) Audio signal size control method and device
WO2020145631A1 (en) Content reproducing apparatus and content reproducing method
WO2017045441A1 (en) Smart television-based audio playback method and apparatus
WO2017020649A1 (en) Audio/video playback control method and device thereof
WO2009116815A2 (en) Apparatus and method for encoding and decoding using bandwidth extension in portable terminal
WO2015093742A1 (en) Method and apparatus for encoding/decoding an audio signal
WO2019091128A1 (en) Signal preview method for new access source and television set
WO2022169116A1 (en) Electronic device and control method therefor
WO2016204581A1 (en) Method and device for processing internal channels for low complexity format conversion
WO2021107695A1 (en) Method, device and electronic apparatus for transmitting and receiving speech signal
WO2014148848A2 (en) Audio signal size control method and device

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09839342

Country of ref document: EP

Kind code of ref document: A2

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09839342

Country of ref document: EP

Kind code of ref document: A2