KR20100095585A - 신호 처리 방법 및 장치 - Google Patents

신호 처리 방법 및 장치 Download PDF

Info

Publication number
KR20100095585A
KR20100095585A KR1020107012823A KR20107012823A KR20100095585A KR 20100095585 A KR20100095585 A KR 20100095585A KR 1020107012823 A KR1020107012823 A KR 1020107012823A KR 20107012823 A KR20107012823 A KR 20107012823A KR 20100095585 A KR20100095585 A KR 20100095585A
Authority
KR
South Korea
Prior art keywords
signal
extension
information
coding scheme
extended
Prior art date
Application number
KR1020107012823A
Other languages
English (en)
Other versions
KR101221918B1 (ko
Inventor
오현오
정양원
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Publication of KR20100095585A publication Critical patent/KR20100095585A/ko
Application granted granted Critical
Publication of KR101221918B1 publication Critical patent/KR101221918B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/022—Blocking, i.e. grouping of samples in time; Choice of analysis windows; Overlap factoring
    • G10L19/025—Detection of transients or attacks for time/frequency resolution switching
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/18—Vocoders using multiple modes
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/038—Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2383—Channel coding or modulation of digital bit-stream, e.g. QPSK modulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/637—Control signals issued by the client directed to the server or network components
    • H04N21/6377—Control signals issued by the client directed to the server or network components directed to server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Mathematical Physics (AREA)
  • Quality & Reliability (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

본 발명은 오디오 코딩 방식으로 디코딩된 제 1 신호와 음성 코딩 방식으로 디코딩된 제 2 신호 중 하나 이상의 다운믹스 신호 및 확장정보를 수신하는 단계; 상기 확장정보에 기초하여 상기 다운믹스 신호의 일부 영역인 확장 기초 신호를 결정하는 단계; 및 상기 확장 기초 신호 및 상기 확장정보를 이용하여 고주파 영역 신호를 복원함으로써 대역폭이 확장된 확장 다운믹스 신호를 생성하는 단계를 포함하는 신호 처리 방법을 개시한다.
본 발명의 신호 처리 방법 및 장치에 따르면, 대역폭 확장시 확장 기초 신호로 신호의 특성에 따라 다운믹스 신호의 일부 주파수 영역에 해당하는 신호를 이용함으로써, 다양한 대역폭을 갖는 확장 기초 신호를 이용하여 다운믹스 신호의 고주파 영역을 복원할 수 있다.

Description

신호 처리 방법 및 장치{A METHOD AND AN APPARATUS FOR PROCESSING A SIGNAL}
본 발명은 신호의 특성에 따라 적절한 방식으로 신호를 코딩하거나 디코딩할수 있는 신호 처리 방법 및 장치에 관한 것이다.
일반적으로, 오디오 인코더는 48kps 이상의 높은 비트율에서 고음질의 오디오 신호를 제공할 수 있지만, 음성 인코더는 12kps 이하의 낮은 비트율에서 음성 신호를 코딩할 수 있다.
Technical Problem
종래의 오디오 인코더는 음성 신호의 처리에 있어서 비효율적이고, 종래의 음성 인코더는 오디오 신호의 처리에 있어 적합하지 아니한 문제점이 있다.
Technical Solution
본 발명은 상기와 같은 문제점을 해결하기 위해 창안된 것으로서, 코딩 방식을 결정하는 모드정보 및 제 1 신호의 시간 도메인상의 간격을 조절하는 변형복원 정보를 이용하여, 음원의 특성에 따른 효율적인 신호의 처리 장치 및 방법을 제공하는데 그 목적이 있다.
본 발명의 또 다른 목적은, 대역폭 확장 기술을 이용하는데 있어서, 인코더단에서 제거된 고주파 영역의 복원에 이용되는 확장 기초 신호를 다양하게 결정함으로써, 음원의 특성에 따라 효과적인 신호 처리 방법 및 장치를 제공하는데 그 목적이 있다.
Advantageous Effects
본 발명은 다음과 같은 효과와 이점을 제공한다.
첫째, 본 발명의 신호 처리 장치 및 방법은, 제 1 신호를 제 1 코딩 방식으로 인코딩하기 이전에, 상기 제 1 신호의 시간 도메인의 시간 간격의 크기를 변형시킨 후, 제 1 코딩 방식으로 인코딩함으로써, 음원의 특성에 따라 코딩 효율을 향상시키는 효과를 갖는다.
둘째, 본 발명의 신호 처리 장치 및 방법은, 대역폭 확장시 확장 기초 신호로 신호의 특성에 따라 다운믹스 신호의 일부 주파수 영역에 해당하는 신호를 이용함으로써, 다양한 대역폭을 갖는 확장 기초 신호를 이용하여 다운믹스 신호의 고주파 영역을 복원할 수 있게 된다.
도 1 은 본 발명의 일실시예에 따른 신호 인코딩 장치를 나타내는 개략도이다.
도 2 는 본 발명의 일실시예 따른 대역폭 확장 인코딩부를 나타내는 개략도이다.
도 3 은 도 2 의 대역폭확장 인코딩부에서의 신호 인코딩 방법을나타내는 순 서도이다.
도 4 는 본 발명의 다른실시예에 따른 도 1 의 신호 인코딩 장치 중 일부를 나타내는 개략도이다.
도 5 는 도 2 의 신호 인코딩 장치에서의 신호 인코딩 방법을 나타내는 순서도이다.
도 6 은 본 발명의 다른 실시예에 따른 신호 디코딩 장치를 나타내는 개략도이다.
도 7 은 본 발명의 다른 실시 예에 따른 제 1 코딩방식 디코딩부 및 제 1 신호 수정부에서의 신호 흐름을 나타내는 개략도이다.
도 8 은 도 7 에 따른 신호 디코딩 방법을 나타내는 순서도이다.
도 9A 내지 도 9G 는 본 발명의 다른 실시예에 따른 변형 신호의 처리 방법을 나타내는 것이다.
도 10A 및 도 10B 는 도 9 의 신호 처리 방법을 적용하기 전과 후의 프리 에코 발생여부를 측정한 그래프이다.
도 11 은 본 발명의 다른 실시예에 따른 대역폭 확장 신호 디코딩부를 나타내는 개략도이다.
도 12 는 도 11 의 대역폭 확장 신호 디코딩부에서의 신호 디코딩 방법을 나타내는 순서도이다.
도 13A 내지 도 13D 는 본 발명의 또다른 실시예에 따른 대역폭 확장 신호를 생성하는 방법을 나타내는 것이다.
도 14A 내지 도 14D 는 본 발명의 또다른 실시예에 따른 멀티채널 신호를 생성하는 방법을 나타내는 것이다.
도 15 는 본 발명의 또다른 실시예에 따른 멀티채널 신호를 생성하는 방법을 나타내는 것이다.
Best Mode for Carrying Out the Invention
상기와 같은 목적을 달성하기 위하여 본 발명에 따른 신호 처리 방법은, 제 1 신호 및 제 2 신호 중 어느 하나 이상을 수신하는 단계; 모드정보 및 상기 제 1 신호가 변형되었는지 여부를 나타내는 변형 플래그 정보를 획득하는 단계; 상기 모드정보에 따라 오디오 코딩 방식으로 결정되는 경우, 상기 제 1 신호를 상기 오디오 코딩 방식으로 디코딩하는 단계; 상기 변형 플래그 정보에 기초하여 상기 제 1 신호가 변형된 경우, 상기 제 1 신호에 변형복원 정보를 적용하여 상기 제 1 신호를 복원하는 단계; 확장정보에 기초하여 상기 제 1 신호의 일부 영역인 확장 기초 신호를 결정하는 단계; 및 상기 확장기초신호및 상기 확장정보를 이용하여 고주파 영역 신호를 복원함으로써 대역폭이 확장된 확장 다운믹스 신호를 생성하는 단계를 포함할 수 있다.
본 발명에 따르면, 상기 오디오 코딩 방식은 시간 주파수 변환에 근거한 주파수 도메인에서의 코딩 방식이고, 상기 음성 코딩 방식은 선형 예측 코딩 방법에 근거한 코딩 방식일 수 있다.
본 발명에 따르면, 상기 오디오 코딩 방식은 상기 제 1 신호를 시간 도메인 으로 복원하는 단계를 포함하고, 상기 변형복원 정보는 상기 제 1 신호에 적용될 수 있다.
본 발명에 따르면, 상기 변형 플래그 정보는 상기 제 1 신호가 시간 도메인상에서 변형되었는지 나타낼 수 있다.
본 발명의 다른 측면에 따르면, 제 1 신호 및 제 2 신호 중 어느 하나 이상을 수신하는 수신부; 코딩 방식을 결정하는 모드정보 및 상기 제 1 신호가 변형되었는지 여부를 나타내는 변형 플래그 정보를 획득하는 정보 획득부, 상기 모드정보에 따라 오디오 코딩 방식으로 결정되는 경우, 상기 제 1 신호를 상기 오디오 코딩 방식으로 디코딩하는 오디오 코딩 방식 디코딩부; 상기 변형 플래그 정보에 기초하여 상기 제 1 신호가 변형된 경우, 상기 제 1 신호에 변형복원 정보를 적용하여 수정하는 제 1 신호 수정부; 상기 확장정보에 기초하여 상기 다운믹스 신호 중 확장 기초 신호를 결정하는 확장 기초 영역 결정부; 및 상기 확장 기초 신호 및 상기 확장정보를 이용하여 고주파 영역 신호를 복원함으로써 대역폭이 확장된 확장 다운믹스 신호를 생성하는 고주파 영역 신호 복원부를 포함할 수 있다.
본 발명에 따른 또다른 신호 처리 방법은, 오디오 코딩 방식으로 디코딩된 제 1 신호와 음성 코딩 방식으로 디코딩된 제 2 신호 중 어느 하나 이상의 다운믹스 신호 및 확장정보를 수신하는 단계; 상기 확장정보에 기초하여 상기 다운믹스 신호의 일부 영역인 확장 기초 신호를 결정하는 단계; 및 상기 확장 기초 신호 및 상기 확장정보를 이용하여 고주파 영역 신호를 복원함으로써 대역폭이 확장된 확장 다운믹스 신호를 생성하는 단계를 포함할 수 있다.
본 발명에 따르면, 상기 고주파 영역 신호의 대역폭은 상기 확장 기초 신호의 대역폭과 동일하지 아니할 수 있다.
본 발명에 따르면, 상기 확장정보는 상기 다운믹스 신호에 적용되는 필터의 범위, 상기 확장 기초 신호의 시작 주파수 및 상기 확장 기초 신호의 종료 주파수 중 하나 이상을 포함할 수 있다.
본 발명에 따르면, 상기 확장 기초 신호는 상기 다운믹스 신호 중 일부 주파수 영역에 대응하는 신호일 수 있다.
본 발명에 따르면, 상기 확장정보를 이용하여 상기 확장 기초 영역을 결정하는 단계는, 상기 확장정보를 이용하여 상기 다운믹스 신호의 고주파 영역 신호를 복원하는지 여부를 나타내는 대역폭 확장 플래그 정보에 기초하여 수행될 수 있다.
본 발명의 다른 측면에 따르면, 신호 처리 장치는, 오디오 코딩 방식으로 디코딩된 제 1 신호와 음성 코딩 방식으로 디코딩된 제 2 신호 중 어느 하나 이상의 신호, 및 확장정보를 수신하는 신호 수신부; 상기 확장정보에 기초하여 상기 다운믹스 신호 중 확장 기초 신호를 결정하는 확장 기초 영역 결정부; 및 상기 확장 기초 신호 및 상기 확장정보를 이용하여 고주파 영역 신호를 복원함으로써 대역폭이 확장된 확장 다운믹스 신호를 생성하는 고주파 영역 신호 복원부를 포함할 수 있다.
Mode for the Invention
이하 첨부된 도면을 참조로 본 발명의 바람직한 실시예를 상세히 설명하기로 한다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사 전적인 의미로 한정해서 해석되어서는 아니되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서, 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.
특히, 본 발명에서 코딩이라 함은, 인코딩 및 디코딩을 모두 포함하는 개념으로 이해되어야 한다.
또한, 본 명세서에서 정보(information)란, 값(values), 파라미터(parameter), 계수(coetficients), 성분(elements) 등을 모두 아우르는 용어로서, 경우에 따라 의미는 달리 해석될 수 있는 바, 그러나 본 발명은 이에 한정되지 아니한다. 그리고, 본 명세서에서 신호의 일 예로 스테레오 신호를 설명하나, 이에 한정되지 아니하고, 3 개 이상의 복수 개의 채널을 갖는 멀티채널 신호일 수 있다.
본 명세서에서 제 1 신호는 제 1 코딩방식에 따라 코딩되는 신호를 지칭하며, 제 2 신호는 제 2 코딩방식에 따라 코딩되는 신호를 지칭하는 것이다. 상기 제 1 신호는 오디오 신호일 수 있고, 상기 제 2 신호는 음성 신호일 수 있으나, 이에 한정되지 아니한다. 또한, 후술하는 제 1 코딩 방식은 오디오 코딩 방식과 동일한 의미로 이용되고, 제 2 코딩 방식은 음성 코딩 방식과 동일한 의미로 이용된다.
도 1 은 본 발명의 실시예에 따른 신호 인코딩 장치(100)를 나타낸다. 도 1 을 참조하면, 신호 인코딩 장치(100)는 멀티채널 인코딩부(110), 대역폭 확장신호 인코딩부(120), 신호 변형부(130), 제 1 코딩방식 인코딩부(140), 제 2 코딩방식 인코딩부(150), 및 다중화부(160)를 포함한다.
멀티채널 인코딩부(110)는 복수개의 채널을 갖는(이하, 멀티채널) 신호를 입력받는다. 입력된 멀티채널 신호로부터 다운믹싱을 수행하여 다운믹스신호를 생성하는 한편, 멀티채널 신호에 대응하는 공간정보를 생성한다. 상기 공간정보는 채널 레벨 차이정보, 채널 예측 계수, 채널간 상관정보, 및 다운믹스 게인 정보 등을 포함할 수 있다.
대역폭 확장신호 인코딩부(120)는 상기 다운믹스 신호를 입력받아, 고주파에 해당하는 영 역을 제거하여 저주파 영역에 해당하는 신호만을 인코딩한다. 또한, 대역폭 확장신호 인코딩부(120)는 상기 제거된 고주파 영역에 관한 정보인 확장정보를 생성하여 상기 공간정보에 포함하여 전송하는데, 이 과정에 대한 구체적인 설명은 도 2 및 도 3 에서 후술하기로 한다.
또한, 입력신호는 신호의 특성에 기초하여 제 1 코딩 방식 또는 제 2 코딩 방식으로 코딩될지 결정되고, 상기 코딩방식을 결정하는 모드정보를 생성한다(미도시). 이 때, 제 1 코딩 방식은 오디오 코딩 방식(audio signal scheme)에 해당될 수 있다. 상기 오디오 코딩 방식은 MDCT(Modilied Discrete Cosine Transform)을 이용하는 것일 수 있으나, 본 발명은 이에 한정되지 아니한다. 제 2 코딩 방식은 음성 코딩 방식(speech coding scheme)에 해당될 수 있다. 이 음성 코딩 방식은, AMR-WB(Adaptive multi-rate Wide-Band) 표준에 따른 것일 수 있으나, 본 발명은 이에 한정되지 아니한다. 상기 모드정보는 제 1 코딩 방식에 따라 코딩되는 것을 나타내는 제 1 모드 및 제 2 코딩 방식에 따라 코딩되는 것을 나타내는 제 2 모드를 포함할 수 있다.
신호 변형부(130)는 제 1 코딩 방식으로 코딩되도록 결정된 신호를 입력받아, 제 1 코딩 방식으로 코딩되기 이전에, 신호의 특성(예, 신호의 크기, 세그먼트 길이 등)에 기초하여 변형복원 정보를 생성하고, 이를 적용함으로써 신호를 변형할 수 있는데, 이 과정에 대한 구체적 인 설명은 도 4 및 도 5 에서 후술하기로 한다.
제 1 코딩 방식 인코딩부(140)는 신호 변형부(130)에서 변형된 신호를 상기 제 1 코딩 방식에 따라 인코딩한다. 제 1 코딩 방식 인코딩부(140)에서 생성된 신호를 제 1 신호라 지칭하며, 이는 오디오 신호일 수 있고, 오디오 신호에 일부 음성 신호가 포함된 신호일 수 있다. 또한, 제 1 코딩 방식 인코딩부(140)는 주파수 도메인 인코딩부일 수 있다.
제 2 코딩 방식 인코딩부(150)는, 신호의 특성에 기초하여 제 2 코딩 방식에 따르는 것으로 결정된 신호를 인코딩한다. 제 2 코딩 방식 인코딩부(150)에서 생성된 신호는 제 2 신호라 지칭하며, 이는 음성 신호일 수 있고, 음성 신호에 일부 오디오 신호가 포함된 신호일 수 있다. 또한, 제 2 코딩 방식 인코딩부(150)는 선형 예측 부호화(LPC: Linear Prediction Coding) 방식을 더 이용할 수 있다. 입력 신호가 시간축 상에서 높은 중복성을 가지는 경우, 과거 신호로부터 현재 신호를 예측하는 선형 예측에 의해 모델링될 수 있는데, 이 경우 선형 예측 부호화 방식을 채택하면 부호화 효율을 높일 수 있다. 한편, 제 2 코딩 방식 인코딩부(150)는 시 간 도메인 인코딩부일 수 있다.
다중화부(160)는 인코딩된 모드 정보, 변형복원 정보, 및 확장 정보를 포함하는 공간 정보, 제 1 신호, 제 2 신호를 이용하여 전송할 비트스트림을 생성한다. 이 때, 모드 정보는 플래그 정보로서 표현될 수 있다. 또한, 신호 변형부(130)에서 신호가 변형되었는지를 나타내는 변형 플래그 정보를 더 포함한다.
도 2 는 본 발명의 일실시예 따른 대역폭 확장 인코딩부(120)를 나타내는 것이고, 도 3 은 대역폭 확장 인코딩부(120)에서 다운믹스 신호 및 공간정보를 수정하는 방법을 나타내는 순서도이다.
먼저 도 2 를 참조하면, 대역폭 확장 인코딩부(120)는 고주파 영역 제거부(121), 확장 정보 생성부(122), 및 공간 정보 삽입부(123)를 포함한다. 고주파 영역 제거부(121)는 멀티채널 인코딩부(110)에서 생성된 다운믹스 신호 및 공간정보를 입력받는다. 상기 다운믹스 신호는 주파수 도메인상의 신호일 수 있으며, 저주파 신호 및 고주파 신호를 포함할 수 있다. 고주파 영역 제거부(121)는 상기 다운믹스 신호의 주파수 신호 중 고주파 영역에 해당하는 고주파 신호를 제거한 제거 다운믹스 신호(이하에서 다운믹스 신호란 고주파 영역 제거부(121)에서 저주파 신호가 제거된 다운믹스 신호를 지칭한다.) 및 상기 고주파 영역의 시작 주파수 및 종료 주파수를 포함하는 복원정보를 생성한다.
상기 복원정보는 입력 신호의 특성에 기초하여 결정될 수 있다. 일반적으로 상기 고주파신호의 시작주파수는 입력신호의 전체 대역폭의 절반에 해당하는 주파수이다. 반면, 상기 복원정보는 입력 신호의 특성에 따라 시작 주파수를 전체 대역 폭의 절반 이하 또는 이상에 해당하는 주파수로 결정할 수 있다. 예를 들어, 멀티채널 인코딩된 상기 다운믹스 신호에 대하여 대역폭 확장 기술을 이용하여 고주파 영역을 제거하여 인코딩하는 것보다. 상기 다운믹스신호의 전체 대역폭 신호를 이용하는 것이 효율적인 경우, 상기 복원정보는 시작 주파수로 대역폭의 끝단에 위치하는 주파수를 나타낼 수 있다. 상기 복원정보는 신호의 크기, 코딩시 이용되는 세그먼트의 길이, 및 소스의 종류 중 하나 이상을 이용하여 결정될 수 있으나, 이에 한정되지 아니한다.
확장 정보 생성부(122)는 다운믹스 신호 및 공간 정보를 이용하여, 디코딩시 이용될 확장 기초 신호를 결정하는 확장 정보를 생성한다. 상기 확장 기초 신호는 디코딩시 고주파 영역 제거부(121)에서 제거된 다운믹스 신호의 고주파 신호를 복원하기 위하여 이용되는 다운믹스 신호의 주파수 신호로서,저주파 신호 또는 저주파 신호 중 일부 신호일 수 있다.
상기 확장 정보는 고주파 영역 제거부(121)에서 제거되지 아니한 다운믹스 신호에 관한 정보와 일치할 수 있으나, 이에 한정되지 아니하며, 상기 확장 정보는 상기 다운믹스 신호 중 일부 신호에 관한 정보일 수 있다. 또한, 상기 확장 정보는 상기 다운믹스 신호 중 일부 신호에 관한 정보인 경우, 상기 확장 기초 신호의 시작 주파수 및 상기 확장 기초 신호의 종료 주파수를 포함할 수 있으며, 상기 다운믹스 신호의 주파수 신호에 적용되는 필터의 범위를 더 포함할 수 있다.
공간정보 삽입부(123)는 멀티채널 인코딩부(110)에서 생성된 공간 정보에 고주파 영역 제거부(121)에서 생성된 복원정보 및 확장 정보 생성부(122)에서 생성된 확장 정보가 삽입된 공간 정보를 생성한다.
도 3 을 참조하면, 먼저 입력신호로부터 다운믹스 신호 및 공간 정보를 생성한다(S310). 상기 다운믹스 신호의 고주파 영역을 제거하고 복원 정보를 생성한다(S320). 상술한 바와 같이, 복원 정보는 신호의 크기, 코딩시 이용되는 세그먼트의 길이, 및 음원의 종류 중 하나 이상을 이용하여 결정될 수 있으며, 제거된 신호의 시작주파수 및 종료 주파수를 나타낸다.
이후, 입력신호의 특성에 기초하여 다운믹스 신호 및 공간 정보를 이용하여, 디코딩시 이용될 확장 기초 신호를 결정하는 확장 정보를 생성한다(S330). 상기 확장 정보는 상기 다운믹스 신호 중 일부 신호에 관한 정보일 수 있고, 상기 확장 기초 신호의 시작 주파수 및 상기 확장 기초 신호의 종료 주파수를 포함할 수 있으며, 상기 다운믹스 신호의 주파수 신호에 적용되는 필터의 범위를 더 포함할 수 있다. 상기 복원 정보 및 상기 확장 정보는 상기 공간 정보에 삽입될 수 있다(S340).
본 발명의 일실시예에 따른 신호 인코딩 장치(100)는, 대역폭 확장 인코딩부(120)에서 제거되는 다운믹스 신호의 고주파 영역 신호를 가변적으로 결정할 수 있어 입력 신호의 특성에 따라 보다 효율적으로 코딩할 수 있고, 확장 정보를 생성하여 전송함으로써, 고주파 영역 신호의 복원시 저주파 신호를 가변적으로 이용할 수 있게 된다.
도 4 는 본 발명의 다른실시예에 따른 도 1 의 신호 인코딩 장치 중 일부를 나타내는 것이고, 도 5 는 본 발명의 다른 실시예에 따른 신호 인코딩 방법을 나타내는 순서도이다.
먼저, 도 4 를 참조하면, 입력신호의 코딩방식을 나타내는 모드정보에 따라, 입력신호를 제 1 코딩 방식으로 코딩할지 또는 제 2 코딩 방식으로 코딩할지 결정한다. 제 2 코딩 방식으로 결정된 경우, 제 2 코딩 방식 인코딩부(420)는 신호 인코딩 장치(100)의 제 2 코딩 방식 인코딩부(150)와 동일하므로, 이와 관련된 설명은 생략하기로 한다.
신호 변형부(410)는 모드정보에 따라 입력신호가 제 1 코딩 방식으로 코딩하기로 결정된 경우, 입력신호의 특성에 기초하여 신호를 변형한다. 상기 특성은 상기 신호의 크기, 코딩시 분할되는 세그먼트의 길이 등일 수 있다. 예를 들어, 제 1 코딩 방식 인코딩부에서 이용하는 MDCT 의 변환 단위의 크기는 음성 신호의 코딩시 이용하는 세그먼트의 크기와 상이하므로, 코딩시 효율이 현저히 떨어질 수 있다. 이러한 경우, 신호 변형부(410)는 상기 세그먼트의 크기를 변형시키거나 추후 제 1 코딩 방식 인코딩부(430)에서 적용되는 윈도우의 크기를 변형시킴으로써 추후 제 1 코딩 방식 인코딩부(430)에서의 코딩 효율을 향상시킬 수 있다. 상기 세그먼트의 크기 또는 적용되는 윈도우의 크기를 변형하기 위하여, 시간 도메인상의 단위 시간 간격을 조절할 수 있다. 이 때, 변형된 신호를 생성하기 위하여 필요한 정보를 변형복원 정보로 생성할 수 있다. 또한, 신호 변형부(410)는 신호가 변형되었는지 여부를 나타내는 변형 플래그 정보를 생성할 수 있다.
제 1 코딩 방식으로 결정된 경우, 제 1 코딩 방식 인코딩부(430)는 신호 인코딩 장치(100)의 제 1 코딩 방식 인코딩부(140)와 동일하고, 다중화부(440)는 신호 인코딩 장치의 다중화부(160)와 동일하므로, 이와 관련된 설명은 생략하기로 한 다. 도 5 를 참조하면, 입력신호의 특성에 기초하여 모드를 결정하고, 결정된 모드를 나타내는 모드정보를 생성한다(S510). 상기 모드정보는 제 1 코딩방식을 따르는 제 1 모드 또는 제 2 코딩방식을 따르는 제 2 모드를 나타낼 수 있다. 상기 모드정보가 제 1 모드를 나타내는지 여부를 판단한다(S520).
제 1 모드인 경우, 입력신호의 특성에 기초하여 입력신호를 변형할지 여부를 결정한다(S530). 상술한 바와 같이, 변형여부를 결정하기 위하여 상기 입력신호의 크기, 코딩시 분할되는 세그먼트의 길이 등을 고려할 수 있다. 예를 들어, 제 1 코딩 방식 인코딩부에서 이용하는 윈도우의 크기가 입력신호의 코딩시 이용하는 세그먼트의 크기와 상이한 경우 또는 프리에코가 발생하는 경우, 입력신호를 변형하여 제 1 코딩 방식에 따라 인코딩함으로써, 프리에코를 해결하거나 보다 효율적으로 입력신호를 코딩할 수 있게 된다.
입력신호의 변형이 결정되는 경우, 입력신호를 제 1 코딩 방식에 따라 인코딩하기 이전에 변형복원 정보를 적용하여 신호를 변형시키고, 신호를 변형시켰는지 여부를 나타내는 변형 플래그 정보를 생성할 수 있다(S540). 상기 변형복원 정보는 제 1 코딩 방식에 따른 인코딩시 적용되는 윈도우의 길이를 조절하는 것일 수 있으며, 상기 변형복원 정보는 시간 도메인에서 적용되는 것일 수 있다. 또한, 상기 변형복원 정보는 상기 입력신호의 크기를 조절하는 게인 값일 수 있으며, 상기 게인 값은 선형 예측 도메인 계수(LPC)에 기초하여 결정되는 것일 수 있다.
상기 변형복원 정보를 적용하여 변형된 신호는 제 1 코딩 방식으로 인코딩한다(S550). 상술한 바와 같이, 제 1 코딩 방식으로 인코딩된 신호는 제 1 신호일 수 있고, 상기 제 1 신호는 오디오 신호 또는 오디오 신호에 일부 음성 신호가 포함된 신호일 수 있다.
제 1 모드인지 판단하는 단계(S520)에서 제 1 모드가 아닌 것으로 판단된 신호는, 신호를 변형하는 단계를 수행하지 아니하고, 제 2 코딩 방식에 따라 인코딩되며(S535), 인코딩된 신호는 제 2 신호일 수 있고, 상기 제 2 신호는 음성 신호 또는 음성 신호에 일부 오디오 신호가 포함된 신호일 수 있다.
도 6 은 본 발명의 일실시예에 따른 신호 디코딩 장치(600)를 나타내는 것이다. 도 6 을 참조하면, 신호 디코딩 장치(600)은 수신부(610), 정보획득부(620), 제 1 코딩 방식 디코딩부(630), 제 1신호 수정부(640), 제 2 코딩 방식 디코딩부(650), 대역폭 확장 디코딩부(660), 및 멀티채널 디코딩부(670)를 포함한다.
수신부(610)는 신호 인코딩 장치(100)에서 인코딩된 모든 신호를 수신할 수 있다. 제 1 신호 및 제 2 신호 중 어느 하나 이상을 수신할 수 있고, 모드정보, 변형 플래그 정보, 확장 정보, 다운믹스 신호, 및 공간정보 중 어느 하나 이상을 더 수신할 수 있다.
정보획득부(620)는 수신부(610)로부터 코딩 방식을 결정하는 모드정보 및 상기 제 1 신호가 변형되었는지 여부를 나타내는 변형 플래그 정보, 및 확장정보를 획득할 수 있다.
제 1 코딩 방식 디코딩부(630)는 신호를 제 1 코딩 방식에 따라 디코딩하며, 상기 변형복원 정보를 이용하여 신호를 수정하여 디코딩할 수 있다. 상기 제 1 코딩 방식 디코딩부(630)에서 디코딩되는 신호는 제 1 신호일 수 있고, 상기 제 1 신 호는 오디오 신호일 수 있으며, 오디오 신호에 일부 음성 신호가 포함된 신호일 수 있다. 또한, 제 1 코딩 방식 디코딩부(630)는 오디오 코딩 방식 디코딩부로서, 주파수 도메인 디코딩부일 수 있고, MDCT를 이용할 수 있다.
제 1 신호 수정부(640)는 상기 변형 플래그 정보에 기초하여 제 1 신호가 인코딩시 변형된 경우에만 수행될 수 있다. 제 1 신호 수정부(640)는 상기 제 1 신호에 적용될 변형복원 정보를 이용할 수 있는데, 이 과정에 대한 구체적 인 설명은 도 7 및 도 8 에서 후술하기로 한다.
제 2 코딩 방식 디코딩부(650)는, 신호를 제 2 코딩 방식에 따라 디코딩한다. 제 2 코딩 방식 디코딩부(650)에서 디코딩되는 신호는 제 2 신호일 수 있고, 상기 제 2 신호는 음성 신호일 수 있으며, 음성 신호에 일분 오디오 신호가 포함된 신호일 수 있다. 또한, 제 2 코딩 방식 디코딩부(650)는 음성 코딩 방식 디코딩부로, 시간 도매인 디코딩부일 수 있고, 선형 예측 부호화(LPC: Linear Prediction Coding) 방식을 더 이용할 수 있다.
대역폭 확장 디코딩부(660)는 제 1 코딩 방식 디코딩부(630)로 디코딩된 신호 및 제 2 코딩 방식 디코딩부(650)로 디코딩된 신호 중 어느 하나 이상의 다운믹스 신호를 입력받아, 인코딩시 제거된 고주파 영역에 해당하는 신호를 복원할 수 있는데, 이 과정에 대한 구체적인 설명은 도 11 내지 도 13 에서 후술하기로 한다.
멀티채널 디코딩부(670)는 고주파 영역이 복원된 다운믹스 신호 및 공간정보를 입력받아, 상기 공간정보를 상기 다운믹스 신호에 적용하여 멀티채널을 갖는 신호를 디코딩한다.
도 7 은 본 발명의 다른 실시예에 따른 제 1 코딩 방식 디코딩부 및 제 1 신호 수정부에서의 개략적인 흐름을 나타내는 것이고, 도 8 은 도 7 에 따른 신호 디코딩 방법을 나타내는 순서도이다.
먼저, 도 7 을 참조하면, 제 1 코딩 방식 디코딩부(730)에 모드 정보 및 변형 플래그 정보가 입력된다. 상기 변형 플래그 정보는 인코딩시 상기 제 1 신호에 변형복원 정보가 적용되어 변형되었는지 여부를 나타내고, 더 상세하게는, 상기 제 1 신호가 시간 도메인상에서 변형되었는지, 또는 주파수 도메인상에서 변형되었는지를 나타내는 것을 특징으로 한다. 만일, 상기 변형 플래그 정보에 기초하여 상기 제 1 신호가 변형되지 아니한 것으로 판단되면, 상기 제 1 신호를 제 1 코딩 디코딩부(730)에서 제 1 코딩 방식으로 디코딩하고, 제 1 신호 수정부(740)로 입력되지 아니하고 출력된다. 제 1 코딩 디코딩부(730)는 상술한 바와 같이, 오디오 코딩 방식으로 디코딩을 수행한다.
상기 변형 플래그 정보에 기초하여 상기 제 1 신호가 변형된 것으로 판단된 경우, 입력된 제 1 신호를 제 1 코딩 방식으로 디코딩함과 동시에 변형복원 정보를 생성한다. 상기 변형복원 정보가 인코더로부터 전송된 것인 경우에는 상기 변형복원 정보를 비트스트림으로부터 추출할 수 있다. 반면, 상기 변형복원 정보가 인코더로부터 전송되지 아니한 경우에는, 제 1 신호의 특성에 기초하여 제 1 코딩 방식 디코딩부(730)에서 생성된 것일 수 있다. 상기 변형복원 정보는 제 1 코딩 방식에 따른 인코딩시 상기 제 1 신호를 시간 도메인상에서 단위 시간 간격을 조절하는 것일 수 있고, 상기 제 1 신호에 적용되는 윈도우의 길이를 조절하는 것일 수 있으 며, 상기 변형복원 정보는 시간 도메인에서 적용되는 것일 수 있다. 또한, 상기 변형복원 정보는 상기 입력신호의 크기를 조절하는 게인 값일 수 있으며, 상기 게인 값은 선형 예측도메인 계수(LPC)에 기초하여 결정되는 것일 수 있다.
제 1 신호 수정부(740)는 변형복원 정보 및 제 1 신호를 입력받아, 시간 도메인상에서 상기 제 1 신호의 변형된 단위 시간 간격을 복원함으로써 원 신호를 디코딩할 수 있다.
도 8 을 참조하면, 먼저 모드 정보 및 변형 플래그 정보를 획득한다(S810). 모드 정보가 제 1 모드인 경우, 제 1 코딩 방식으로 제 1 신호를 디코딩한다(S820). 이후, 제 1 신호가 변형되었는지를 나타내는 변형 플래그 정보를 획득한다(S830). 상기 변형 플래그 정보가 1 인 경우(S830 의 예), 변형복원 정보를 적용하여 제 1 신호를 수정한다(S840). 상술한 바와 같이, 변형복원 정보는 제 1 신호의 시간 도메인상의 단위 시간 간격을 조절하는 값일 수 있고, 제 1 신호의 크기를 조절하는 게인 값일 수 있으며, 제 1 신호에 적용되는 윈도우의 길이를 조절하는 값일 수 있다.
반면, 변형 플래그 정보가 1 이 아닌 경우(S830 의 아니오), 제 1 신호를 수정되는 과정없이 그대로 출력할 수 있다(S840).
이와 같이, 본 발명의 신호 디코딩 장치 및 방법은, 제 1 코딩 방식으로 디코딩된 제 1 신호가 인코딩시 시간 도메인상의 단위 시간 간격이 변형된 경우, 변형복원 정보를 이용하여 변형된 제 1 신호를 변형 전 신호로 복원함으로써, 신호의 특성에 따른 효율적인 디코딩이 가능할 수 있다.
한편, 제 1 신호가 제 1 코딩 방식 인코딩부에서 천이 구간에서 신호보다 긴 길이의 윈도우를 이용하여 변환(transform)하는 경우, 주파수 영역에서 비트 할당(bit allocation)에 의하여 잡음이 조절된다. 반면, 시간 영역에서는 윈도우 내에 잡음이 고르게 분포하게 되므로 제 1 신호 중 에너지 레벨이 작은 구간이 앞쪽에 위치하는 경우, 잡음의 크기가 신호의 크기보다 상대적으로 커 잡음이 사용자의 귀에 들리는 프리 에코 현상이 발생하게 된다.
따라서, 본 발명의 다른 일실시예에 따르면, 프리 에코 문제를 해결하기 위하여 시간 영역에서도 종래의 주파수 영역과 같이 잡음을 조절하는 방법 (noise shaping)을 제시한다.
도 9 는 본 발명의 다른 실시예에 따른 제 1 신호를 처리하는 방법을 나타낸 것이다. 도 9A 내지 도 9D 는 본 발명의 다른 실시예에 따른 제 1 신호를 인코딩하는 방법을 나타내고, 도 9E 내지 도 9G 는 상기 인코딩 방법에 대응하는 디코딩 방법을 나타내는 것이다.
도 9A 에서 입력 신호(x(t))를 시간 영역에서 처리를 위한 단위 신호(X)로 분할한다. 도 9A 에서 도시된 바와 같이, 입력 신호(x(t))는 4 개의 서브 블록으로 분할될 수 있고, 각 서브 블록에 해당하는 신호는 분할 신호(X0, X1, X2, X3)일 수 있다. 도 9B 에서 도시된 바와 같이, 각 서브 블록의 분할 신호들에 대하여 시간 영역에서 크기를 조절하기 위한 변형복원정보(W:wo, w1, w2, w3)를 결정할 수 있다. 상기 변형복원정보는 각 분할 신호마다 결정되는 시간 영역에서의 게인 값일 수 있고, 상기 게인 값은 실제 상기 분할 신호에 적용되는 값 또는 이의 역의 형태 일 수 있으며, 상기 분할 신호에 적용되는 게인 값이 클수록 많은 비트를 이용하여 양자화함으로써 더 적은 양자화 잡음이 발생할 수 있다.
도 9C 를 참조하면, 상기 변형복원정보(w0, w1, w2, w3)를 상기 분할 신호(X0,X1,X2,X3)에 적용하여 조절 신호(X')를 생성할 수 있다. 도 9D 는 상기 조절신호가 주파수 영역으로 변환되고, 종래의 주파수 영역 마스킹 특성을 이용한 지각적 코딩 (perceptual coding)을 수행하여 얻어진 양자화 잡음(Qt)을 나타내는 것이다. 도 9D 에 도시된 바와 같이, 상기 양자화 잡음은 전 시간 영역에서 고른 에너지를 갖는 형태의 신호일 수 있다. 또한, 주파수 영역에서의 비트 할당을 위한 심리음향 모델 연산은 상기 조절 신호(X')가 아닌 분할 신호(X)를 이용하는 것이 바람직할 수 있다.
디코더단에 전송된 제 1 신호를 주파수 영역에서 복원한 후, 이를 역변환하면 상기 조절 신호(X')에 상기 양자화 잡음(Qt)이 포함된 전송 신호를 얻을 수 있다(미도시). 도 9E 는 상기 신호에 적용되는 상기 변형복원 정보(V)를 나타낸다. 상기 변형복원 정보(V)는 인코더단에서 상기 블록 신호에 적용된 게인 값의 역 (1/w0, 1/w1, 1/w2, 1/w3)일 수 있다. 도 9F 는 상기 전송 신호에 상기 변형복원 정보(V)를 적용하여 얻은 복원 신호(Y)이다. 상기 복원 신호(V)는 인코더단에서의 상기 조절 신호(X')와 동일한 형태의 신호일 수 있다. 그러나, 상기 변형복원 정보에 의하여 인코딩된 양자화 잡음(Qt)이 조절됨으로써, 도 9G 에 도시된 바와 같이, 시간 영역에서 조절된 조절 양자화 잡음(Qr)을 얻을 수 있다. 따라서, 본 발명의 다른 실시예에 따르면 시간 영역에서 신호에 적용되는 변형복원 정보를 결정하고, 상기 변형복원 정보를 이용하여 각 블록의 시간적 비트 할당 정보를 결정할 수 있게 된다. 또한, 신호의 크기가 작은 영역에서 양자화 잡음의 크기를 감소시켜 프리 에코(pre-echo) 현상을 방지할 수 있게 된다.
도 10A 및 도 10B 는 도 9A 내지 도 9G 의 신호처리 방법을 적용하기 전과 후의 프리 에코 발생여부를 측정한 그래프이다.
도 10A 에 도시된 바와 같이, 종래의 신호 처리 장치는 시간 영역에서 전 대역에 걸쳐 잡음이 고르게 분포하므로 신호의 에너지 레벨이 작은 구간이 앞에 존재하는 경우는, 그 부분의 잡음이 귀에 들리는 프리-에코 현상이 발생하게 된다. 한편, 도 10B 에 도시된 바와 같이, 시간 영역에서 변형복원 정보를 이용하여 양자화 잡음을 조절하는 경우, 에너지 레벨이 작은 구간에서 양자화 잡음의 크기도 작아지도록 조절됨으로써 프리 에코 현상이 해결되게 된다.
도 11 은 본 발명의 다른 실시예에 따른 대역폭 확장 신호 디코딩부를 나타낸다. 도 11 을 참조하면, 대역폭 확장 신호 디코딩부(1100)는 신호수신부(1110), 확장기초 영역 결정부(1120), 고주파수 영역 복원부(1130), 및 대역폭 확장부(1140)을 포함한다.
신호수신부(1110)는 제 1 코딩 방식으로 디코딩된 제 1 신호와 제 2 코딩 방식으로 디코딩된 제 2 신호 중 어느 하나 이상의 다운믹스 신호, 및 확장 정보를 수신한다. 신호수신부(1110)에 입력된 상기 다운믹스 신호는 인코더단에서 고주파 영역이 제거되어 원신호의 저주파영역의 신호로 구성된 신호이다.
확장 기초영역 결정부(1120)는 신호 수신부에서 수신한 확장정보에 기초하여 상기 다운믹스 신호 중 확장 기초 신호를 결정할 수 있다. 상기 다운믹스 신호는 주파수 도메인으로 나타난 신호일 수 있고, 상기 확장 기초 신호는 주파수 도메인의 상기 다운믹스 신호 중 일부 주파수 영역에 위치하는 신호일 수 있다. 상기 확장 정보는 상기 확장 기초 신호를 결정하기 위하여 이용되고, 상기 확장 기초 신호의 시작 주파수 및 종료 주파수, 또는 상기 다운믹스 신호의 일부를 필터링하는 필터의 범위 일 수 있다.
고주파수 영역 복원부(1130)는 신호수신부(1110)로부터 상기 다운믹스 신호 및 상기 확장정보를 입력받고, 확장기초 영역 결정부(1120)로부터 상기 확장 기초 신호가 입력된다. 상기 확장 기초 신호는 상기 확장정보를 이용하여 인코더단에서 제거된 상기 다운믹스 신호의 고주파 영역 신호를 복원할수 있다. 이 때, 전송받은 복원정보를 더 이용할 수 있다. 상기 고주파 영역 신호는 상기 다운믹스 신호에는 포함되지 아니하며, 원 신호에는 포함된 고주파 영역 신호일 수 있다. 상기 고주파 영역 신호가 복원됨으로써, 대역폭이 확장된 확장 다운믹스 신호가 생성될 수 있다.
상기 고주파 영역 신호는 상기 다운믹스 신호의 정수배가 아닐 수 있고, 상기 고주파 영역 신호의 대역폭은 상기 확장 기초 신호의 대역폭과 동일하지 아니할 수 있다.
본 발명의 일실시예에 따른 신호 처리 장치 및 방법은, 상기 확장 기초 신호로 인코더단에서 고주파 영역을 제거된 다운믹스 신호 전부를 이용하지 아니하고, 상기 다운믹스 신호 중 일부 주파수 영역에 해당하는 신호를 이용함으로써, 복원되 는 고주파 영역이 상기 다운믹스 신호의 정수배가 아닌 경우에도 대역폭 확장 기술을 이용할 수 있게 한다.
또한, 고주파수 영역 복원부(1130)는 시간 확장 다운믹스 신호 생성부 및 주파수 신호 확장부를 더 포함할 수 있다. 시간 확장 다운믹스 신호 생성부는, 상기 확장 기초 신호에 상기 확장정보를 적용하여 상기 다운믹스 신호를 시간영역으로 확장할 수 있다. 주파수 신호 확장부는, 상기 시간 확장 다운믹스 신호의 샘플 수를 감소함으로써(decomation) 상기 다운믹스 신호의 주파수 영역에서의 신호를 확장할 수 있다. 따라서, 시간 확장 다운믹스 신호 생성부 및 주파수 신호 확장부를 더 포함하는 본 발명의 다른 실시예에 따른 대역폭 확장 디코딩부(1100)는, 상기 변형복원 정보에 따라 대역폭 확장 정도를 조절할 수 있게 된다.
또한, 만일 고주파수 영역 복원부(1130)가 복원된 고주파 영역 신호만을 포함하고, 저주파 영역 신호를 포함하지 하니하는 경우는, 대역폭 확장부(1140)가 상기 다운믹스 신호 및 상기 고주파 영역 신호를 결합하여 대역폭이 확장된 확장 다운믹스 신호를 생성한다. 상기 고주파 영역 신호는 상기 다운믹스 신호의 정수배가 아닐 수 있다. 따라서, 본 발명의 일실시예에 따른 대역폭 확장 기술은 배수 관계가 아닌 신호로의 업샘플링(upsampling)에 이용될 수 있다.
도 12 는 본 발명의 다른 실시예에 따른 대역폭 확장 신호 디코딩부에서의 신호 디코딩 방법을 나타내는 순서도이다. 도 12 를 참조하면, 다운믹스 신호 및 확장정보를 수신한다(S1210). 상기 다운믹스 신호는 주파수 도메인의 신호일 수 있고, 인코더단에서 생성된 다운믹스 신호로부터 고주파 영역의 신호가 제거된 저주 파 영역 신호만을 포함하는 신호일 수 있다. 상기 확장 정보는 상기 다운믹스 신호에 적용되는 필터의 범위, 확장 기초 신호의 시작 주파수 및 확장 기초 신호의 종료 주파수 중 하나 이상일 수 있다.
이후, 상기 다운믹스 신호 및 상기 확장정보를 이용하여 확장 기초 신호를 결정한다(S1220). 상기 확장 기초 신호는 상기 다운믹스 신호 중 일부 주파수 영역에 대응하는 신호일 수 있다. 또한, 상기 확장 기초 신호를 결정하는 것은, 상기 확장정보를 이용하여 상기 다운믹스 신호의 고주파 영역 신호를 복원하는지 여부를 나타내는 대역폭 확장 플래그 정보에 기초하여 수행될 수 있고, 더 상세하게는, 상기 대역폭 확장 플래그 정보가 1 인 경우에만 상기 확장 기초 신호를 결정하는 단계를 수행할 수 있다.
상기 확장 기초 신호 및 상기 확장 정보를 이용하여 고주파 영역 신호를 복원한다(S1230). 상기 고주파 영역 신호는 인코더단으로부터 전송된 상기 다운믹스 신호에는 포함되지 아니하며, 원 신호에는 포함되는 신호일 수 있다. 상술한 바와 같이, 상기 확장 기초 신호는 상기 다운믹스 신호의 전부가 아닌 일부 주파수 영역에 대응하는 신호이기 때문에, 상기 고주파 영역 신호는 상기 다운믹스 신호와 정수배가 아닌 신호일 수 있다. 이후, 상기 다운믹스 신호와 상기 복원된 고주파 영역 신호를 결합하여 대역폭이 확장된 확장 다운믹스 신호를 생성한다(S1240).
만일, 상기 대역폭 확장 플래그 정보에 기초하여 상기 확장 기초 신호를 결정하지 아니하는 경우, 즉, 상기 대역폭 확장 플래그 정보가 0 인 경우, 상기 다운믹스 신호 및 복원 정보를 이용하여 고주파 영역 신호를 생성하고,(S1245) 상기 다 운믹스 신호와 상기 고주파 영역 신호를 결합하여 확장 다운믹스 신호를 생성한다(S1240). 이 경우, 상기 확장 다운믹스 신호는 상기 다운믹스 신호와 정수배, 더 상세하게는, 2 배의 대역폭을 갖는 신호일 수 있다. 또한, 상기 확장 다운믹스 신호를 생성하는 단계(S124O)는, 별도로 수행되지 아니하고, 고주파 영역 신호의 복원시 동시에 수행될 수 있다.
도 13A 내지 도 13D 는 본 발명의 또다른 실시예에 따른 대역폭 확장 신호를 처리하는 방법을 나타낸다. 여기서, Fc 는 확장 기초 신호의 종료 주파수를 나타낸다. 도 13A 는 종래의 대역폭 확장 처리 방법을 나타내는 것으로, 인코딩시 전체 주파수 대역을 1/2 로 나누고, 확장 기초 신호(전체 주파수의 1/2에 해당하는 저주파 영역의 신호)는 제 1 코딩 방식 또는 제 2 코딩 방식으로 인코딩하여 전송하고, 나머지 전체 신호의 1/2인 고주파 영역에 해당하는 확장 신호는 확장 정보로 인코딩하여 전송한다. 디코딩시에는 이와 반대로, 제 1 코딩 방식 또는 제 2 코딩 방식으로 디코딩된 확장 기초 신호 및 확장 정보를 이용하여 확장 신호를 디코딩하여 전체 신호를 복원하게 된다.
한편, 도 13B 를 참조하면, 확장 기초 신호를 전체 주파수 대역의 1/4 에 해당하는 신호만을 선택하여 인코딩하고, 상기 확장 기초 신호를 이용하여 전체 주파수 대역의 2/4 내지 3/4 영역에 해당하는 신호(확장 신호 1) 와 주파수 대역의 를 확장 정보로 인코딩한다. 이후, 상기 확장 기초 신호를 이용하여 전체 주파수 대역의 4/4 영역에 해당하는 신호(재확장 신호)도 확장 정보로 인코딩한다. 따라서, 디코딩시에는 먼저 상기 확장 기초 신호를 제 1 코딩 방식 또는 제 2 코딩 방식으로 디코딩하고, 상기 확장 기초 신호 및 상기 확장 정보를 이용하여 상기 확장 신호 1 을 복원한다. 이후, 상기 확장 정보 및 상기 확장 신호 1 을 이용하여 다운믹스 신호의 고주파 영역에 해당하는 재확장 신호를 복원한다. 이는 대역폭 확장 코딩에 있어서, 확장 기초 신호로 전체 주파수 영역의 1/4 에 해당하는 신호만을 이용함으로써 압축율을 높일 수 있게 된다.
도 13C 를 참조하면, 전체 주파수 영역의 1/4 에 해당하는 확장 기초 신호를 이용하여 2/4, 3/4, 4/4 영역에 해당하는 확장신호 1, 확장신호 2, 확장신호 3 을 확장정보로 인코딩하고, 디코딩시 순차적으로 확장 기초 신호 및 확장 정보를 이용하여 상기 확장신호 1, 확장신호 2, 확장신호 3 을 디코딩하는 방법을 나타낸다. 도 13C 에 도시된 바와 같이, 본 발명의 다른 실시예에 따른 대역폭 확장 방법은 확장 기초 신호, 확장신호 1, 확장신호 2, 확장신호 3 가 각각 동일한 대역폭을 가질 수 있으나, 이에 한정되지 아니하며, 각각 동일하지 아니한 대역폭을 가질 수도 있다. 또한, 상기 확장 기초 신호에 스케일팩터(scalefactor)를 주파수 영역을 크거나 작게 수정하여 상기 확장신호 1, 확장신호 2, 확장신호 3 을 디코딩할 수 있다.
도 13D는 본 발명의 다른 실시예에 따른 신호 디코딩 방법을 나타낸다. 확장 기초 신호는 제 1 코딩 방식 또는 제 2 코딩 방식에 따라 디코딩된 신호 중 일부 신호(Fb 내지 Fc 영역)를 선택할 수 있다. 따라서, 상기 확장 기초 신호를 이용하여 인코딩된 다운믹스 신호의 정수배가 아닌 고주파 영역을 복원할 수 있다.
도 14A 내지 도 14D 는 본 발명의 또다른 실시예에 따른 멀티채널 신호를 생 성하는 방법을 나타내는 것이다. 여기서, 대역폭 확장을 통하여 얻어진 신호를 확장신호 또는 확장신호 1, 확장신호 2 라고 하고, 멀티채널 디코더 등 채널 확장을 통하여 얻어진 신호를 스테레오 신호라고 한다. 도 14A 를 참조하면, 확장 기초 신호는 대역폭 확장을 통하여 다운믹스 신호의 고주파 영역 신호를 복원한다(1 단계). 이후, 복원된 확장 다운믹스 신호로부터 채널 확장을 통하여 스테레오 신호를 디코딩한다(2 단계).
도 14B 에 도시된 바와같이, 먼저 확장 기초 신호로부터 채널 확장을 통하여 스테레오 신호를 생성한다(1 단계). 이후, 스테레오 신호를 기초로 대역폭을 확장하여 전체 주파수 영역의 스테레오 신호를 복원한다(2,3 단계). 이는 다운믹스 신호의 전체 중 저주파 영역에 보다 많은 정보 및 음상을 갖는 신호에 적합하다.
도 14C 를 참조하면, 상기 방법과 유사하게 확장 기초 신호로부터 채널 확장을 통하여 스테레오 신호를 생성한다(1 단계). 이후, 대역폭을 확장하여 전체 주파수 영역의 스트레오 신호를 복원하기 위하여, 확장 기초 신호를 이용하여 확장신호 1 및 확장신호 2 를 디코딩한다(2,3 단계). 확장 기초 신호가 신호의 핵심적인 특성을 갖는 신호이기 때문에, 확장신호 2 를 확장 기초 신호로부터 디코딩하는 것이 적합하다. 더 상세하게는, 스테레오 신호의 왼쪽 채널 신호 및 오른쪽 신호사이의 상관정도가 높은 신호의 복호화에 적합하고, 예를 들어, 음성 신호의 디코딩에 적합하다.
도 14D 에 도시된 바와 같이, 확장 기초 신호로부터 채널 확장을 통하여 스테레오 신호를 디코딩하고(1 단계), 확장 기초 신호로부터 대역폭 확장을 통하여 확장신호 1 을 복원한다(2 단계). 이후, 확장 기초 신호, 확장신호 1, 및 스테레오 신호를 이용하여 확장신호 2 를 복원한다(3-1,3-2,3-3 단계). 따라서, 보다 유기적인 스테레오 신호를 코딩할 수 있다.
도 15 는 본 발명의 또다른 실시예에 따른 멀티채널 신호를 생성하는 방법을 나타낸다. 도 15 를 참조하면, 본 발명의 멀티채널 신호를 생성하는 방법은, 기초 신호를 이용하여 모노 신호, 모노 확장 신호, 스테레오 신호, 및 스테레오 확장 신호를 복원하는 방법을 포함한다. 상기 기초 신호는 레지듀얼 신호일 수 있다.
본 발명이 적용되는 디코딩/인코딩 방법은 컴퓨터에서 실행되기 위한 프로그램으로 제작되어 컴퓨터가 읽을 수 있는 기록 매체에 저장될 수 있으며, 본 발명에 따른 데이터 구조를 가지는 멀티미디어 데이터도 컴퓨터가 읽을 수 있는 기록 매체에 저장될 수 있다. 상기 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 저장 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 인코딩 방법에 의해 생성된 비트스트림은 컴퓨터가 읽을 수 있는 기록 매체에 저장되거나, 유/무선 통신망을 이용해 전송될 수 있다.
이상과 같이, 본 발명은 비록 한정된 실시 예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술사상과 아래에 기재될 특허청구범위의 균등범 위 내에서 다양한 수정 및 변형이 가능함은 물론이다.
본 발명은 신호를 인코딩하고 디코딩하는 데 적용될 수 있다.

Claims (13)

  1. 오디오 코딩 방식으로 디코딩된 제 1 신호와 음성 코딩 방식으로 디코딩된 제 2 신호 중 하나 이상의 다운믹스 신호 및 확장정보를 수신하는 단계;
    상기 확장정보에 기초하여 상기 다운믹스 신호의 일부 영역인 확장 기초 신호를 결정하는 단계; 및
    상기 확장 기초 신호 및 상기 확장정보를 이용하여 고주파 영역 신호를 복원함으로써 대역폭이 확장된 확장 다운믹스 신호를 생성하는 단계를 포함하는 신호 처리 방법.
  2. 제 1 항에 있어서,
    상기 고주파 영역 신호의 대역폭은 상기 확장 기초 신호의 대역폭과 동일하지 아니한 것을 특징으로 하는 신호 처리 방법.
  3. 제 1 항에 있어서,
    상기 확장정보는 상기 다운믹스 신호에 적용되는 필터의 범위, 상기 확장 기초 신호의 시작 주파수 및 상기 확장 기초 신호의 종료 주파수 중 하나 이상인 것을 특징으로 하는 신호 처리 방법.
  4. 제 1 항에 있어서, 상기 확장 기초 신호는 상기 다운믹스 신호 중 일부 주파 수 영역에 대응하는 신호인 것을 특징으로 하는 신호 처리 방법.
  5. 제 1 항에 있어서, 상기 확장 다운믹스 신호를 생성하는 단계 이후에,
    상기 확장 다운믹스 신호 및 상기 확장정보를 이용하여 상기 확장 다운믹스 신호의 고주파 영역 신호를 생성하는 단계; 및
    상기 확장 다운믹스 신호의 주파수 신호 및 상기 고주파 영역 신호를 결합하여 대역폭이 확장된 재확장 다운믹스 신호를 생성하는 단계를 더 포함하는 것을 특징으로 하는 신호 처리 방법.
  6. 제 1 항에 있어서,
    상기 오디오 코딩 방식은 시간 주파수 변환에 근거한 주파수 도메인에서의 코딩 방식이고, 상기 음성 코딩 방식은 선형 예측 코딩 방법에 근거한 코딩 방식인 것을 특징으로 하는 신호 처리 방법.
  7. 제 1 항에 있어서,
    상기 확장정보를 이용하여 상기 확장 기초 영역을 결정하는 단계는,
    상기 확장정보를 이용하여 상기 다운믹스 신호의 고주파 영역 신호를 복원하는지 여부를 나타내는 대역폭 확장 플래그 정보에 기초하여 수행되는 것을 특징으로 하는 신호 처리 방법.
  8. 오디오 코딩 방식으로 디코딩된 제 1 신호와 음성 코딩 방식으로 디코딩된 제 2 신호 중 하나 이상의 신호, 및 확장정보를 수신하는 신호 수신부;
    상기 확장정보에 기초하여 상기 다운믹스 신호 중 확장 기초 신호를 결정하는 확장 기초 영역 결정부; 및
    상기 확장 기초 신호 및 상기 확장정보를 이용하여 고주파 영역 신호를 복원함으로써 대역폭이 확장된 확장 다운 믹스 신호를 생성하는 고주파 영역 신호 복원부를 포함하는 것을 특징으로 하는 신호 처리 장치.
  9. 제 8 항에 있어서,
    상기 확장 정보는 상기 다운믹스 신호에 적용되는 필터의 범위, 상기 확장 기초 신호의 시작주파수, 및 상기 확장 기초 신호의 종료 주파수 중 하나 이상인 것을 특징으로 하는 신호 처리 장치.
  10. 제 8 항에 있어서,
    상기 확장 기초 영역 결정부는 상기 다운믹스 신호 중 일부 주파수 영역에 위치하는 신호를 상기 확장 기초 신호로 결정하는 것을 특징으로 하는 신호 처리 장치.
  11. 제 8 항에 있어서,
    상기 고주파 영역 복원부는 상기 다운믹스 신호에는 포함되지 아니하며, 원 신호에는 포함된 고주파 영역 신호를 복원하는 것을 특징으로 하는 신호 처리 장치.
  12. 제 8 항에 있어서,
    상기 고주파 영역 복원부는 상기 확장 기초 신호의 대역폭과 동일하지 아니한 대역폭을 갖는 상기 고주파 영역 신호를 복원하는 것을 특징으로 하는 신호 처리 장치.
  13. 제 8 항에 있어서,
    상기 오디오 코딩 방식은 시간 주파수 변환에 근거한 주파수 도메인에서의 코딩 방식이고, 상기 음성 코딩 방식은 선형 예측 코딩 방법에 근거한 코딩 방식인 것을 특징으로 하는 신호 처리 장치.
KR1020107012823A 2007-11-21 2008-11-21 신호 처리 방법 및 장치 KR101221918B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US98945207P 2007-11-21 2007-11-21
US98945007P 2007-11-21 2007-11-21
US60/989,452 2007-11-21
US60/989,450 2007-11-21
PCT/KR2008/006884 WO2009066960A1 (en) 2007-11-21 2008-11-21 A method and an apparatus for processing a signal

Publications (2)

Publication Number Publication Date
KR20100095585A true KR20100095585A (ko) 2010-08-31
KR101221918B1 KR101221918B1 (ko) 2013-01-15

Family

ID=40667696

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020107006643A KR101586317B1 (ko) 2007-11-21 2008-11-21 신호 처리 방법 및 장치
KR1020107012823A KR101221918B1 (ko) 2007-11-21 2008-11-21 신호 처리 방법 및 장치

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020107006643A KR101586317B1 (ko) 2007-11-21 2008-11-21 신호 처리 방법 및 장치

Country Status (11)

Country Link
US (3) US8504377B2 (ko)
EP (2) EP2218068A4 (ko)
JP (2) JP2011504250A (ko)
KR (2) KR101586317B1 (ko)
CN (2) CN101836250B (ko)
AU (2) AU2008326957B2 (ko)
BR (1) BRPI0820488A2 (ko)
CA (2) CA2697830C (ko)
MX (1) MX2010002629A (ko)
RU (2) RU2010125221A (ko)
WO (2) WO2009066959A1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012036487A3 (en) * 2010-09-15 2012-06-21 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding signal for high frequency bandwidth extension
WO2012091464A1 (ko) * 2010-12-29 2012-07-05 삼성전자 주식회사 고주파수 대역폭 확장을 위한 부호화/복호화 장치 및 방법
US9596542B2 (en) 2012-04-16 2017-03-14 Samsung Electronics Co., Ltd. Apparatus and method with enhancement of sound quality
KR20200015614A (ko) 2017-06-01 2020-02-12 닛토 가세이 가부시끼 가이샤 방오도료 조성물, 이 조성물을 이용하여 형성되는 방오 도막을 표면에 갖는 도장물

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BRPI0820488A2 (pt) * 2007-11-21 2017-05-23 Lg Electronics Inc método e equipamento para processar um sinal
CA2754671C (en) * 2009-03-17 2017-01-10 Dolby International Ab Advanced stereo coding based on a combination of adaptively selectable left/right or mid/side stereo coding and of parametric stereo coding
AU2015246158B2 (en) * 2009-03-17 2017-10-26 Dolby International Ab Advanced stereo coding based on a combination of adaptively selectable left/right or mid/side stereo coding and of parametric stereo coding.
JP5754899B2 (ja) 2009-10-07 2015-07-29 ソニー株式会社 復号装置および方法、並びにプログラム
KR101710113B1 (ko) * 2009-10-23 2017-02-27 삼성전자주식회사 위상 정보와 잔여 신호를 이용한 부호화／복호화 장치 및 방법
JP5850216B2 (ja) 2010-04-13 2016-02-03 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
JP5609737B2 (ja) * 2010-04-13 2014-10-22 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
JP5652658B2 (ja) 2010-04-13 2015-01-14 ソニー株式会社 信号処理装置および方法、符号化装置および方法、復号装置および方法、並びにプログラム
IL205394A (en) * 2010-04-28 2016-09-29 Verint Systems Ltd A system and method for automatically identifying a speech encoding scheme
US12002476B2 (en) 2010-07-19 2024-06-04 Dolby International Ab Processing of audio signals during high frequency reconstruction
ES2644974T3 (es) 2010-07-19 2017-12-01 Dolby International Ab Procesamiento de señales de audio durante la reconstrucción de alta frecuencia
KR101697550B1 (ko) 2010-09-16 2017-02-02 삼성전자주식회사 멀티채널 오디오 대역폭 확장 장치 및 방법
JP5707842B2 (ja) 2010-10-15 2015-04-30 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
EP2710588B1 (en) * 2011-05-19 2015-09-09 Dolby Laboratories Licensing Corporation Forensic detection of parametric audio coding schemes
US9070361B2 (en) * 2011-06-10 2015-06-30 Google Technology Holdings LLC Method and apparatus for encoding a wideband speech signal utilizing downmixing of a highband component
CN104380376B (zh) * 2012-06-14 2017-03-15 杜比国际公司 解码系统、重构方法和设备、编码系统、方法和设备及音频发布系统
ES2654792T3 (es) 2012-08-03 2018-02-15 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Procedimiento y decodificador para codificación de objeto de audio espacial de multi-instancias que emplea un concepto paramétrico para casos de mezcla descendente/mezcla ascendente de multicanal
MX341885B (es) 2012-12-13 2016-09-07 Panasonic Ip Corp America Dispositivo de codificacion de sonido de voz, dispositivo de decodificacion de sonido de voz, metodo de codificacion de sonido de voz y metodo de decodificacion de sonido de voz.
PT2951825T (pt) 2013-01-29 2022-02-02 Fraunhofer Ges Forschung Aparelho e método para geração de um sinal aprimorado em frequência utilizando suavização temporal de sub-bandas
US8804971B1 (en) * 2013-04-30 2014-08-12 Dolby International Ab Hybrid encoding of higher frequency and downmixed low frequency content of multichannel audio
EP2830051A3 (en) 2013-07-22 2015-03-04 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio encoder, audio decoder, methods and computer program using jointly encoded residual signals
EP2830049A1 (en) 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for efficient object metadata coding
EP2830065A1 (en) 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for decoding an encoded audio signal using a cross-over filter around a transition frequency
EP2830045A1 (en) 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Concept for audio encoding and decoding for audio channels and audio objects
EP2830048A1 (en) 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for realizing a SAOC downmix of 3D audio content
US9666202B2 (en) * 2013-09-10 2017-05-30 Huawei Technologies Co., Ltd. Adaptive bandwidth extension and apparatus for the same
EP3048609A4 (en) 2013-09-19 2017-05-03 Sony Corporation Encoding device and method, decoding device and method, and program
RU2667627C1 (ru) 2013-12-27 2018-09-21 Сони Корпорейшн Устройство и способ декодирования и программа
EP2980792A1 (en) 2014-07-28 2016-02-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for generating an enhanced signal using independent noise-filling
EP3067886A1 (en) 2015-03-09 2016-09-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio encoder for encoding a multichannel signal and audio decoder for decoding an encoded audio signal
JP6797187B2 (ja) 2015-08-25 2020-12-09 ドルビー ラボラトリーズ ライセンシング コーポレイション オーディオ・デコーダおよびデコード方法
CN105792031B (zh) * 2016-03-08 2019-01-11 烽火通信科技股份有限公司 一种OTN中GMP映射产生Cn值的方法
CN108140393B (zh) 2016-09-28 2023-10-20 华为技术有限公司 一种处理多声道音频信号的方法、装置和系统

Family Cites Families (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US127729A (en) * 1872-06-11 Improvement in power-indicators for steam-engines
US6131084A (en) 1997-03-14 2000-10-10 Digital Voice Systems, Inc. Dual subframe quantization of spectral magnitudes
SE512719C2 (sv) 1997-06-10 2000-05-02 Lars Gustaf Liljeryd En metod och anordning för reduktion av dataflöde baserad på harmonisk bandbreddsexpansion
DE19900819A1 (de) 1999-01-12 2000-07-13 Bosch Gmbh Robert Verfahren zum Dekodieren gestörter Funksignale von Mehrkanal-Audiosendungen
JP2000267699A (ja) 1999-03-19 2000-09-29 Nippon Telegr & Teleph Corp <Ntt> 音響信号符号化方法および装置、そのプログラム記録媒体、および音響信号復号装置
US7039044B1 (en) * 1999-10-14 2006-05-02 Mindspeed Technologies, Inc. Method and apparatus for early detection of DTMF signals in voice transmissions over an IP network
US6351733B1 (en) 2000-03-02 2002-02-26 Hearing Enhancement Company, Llc Method and apparatus for accommodating primary content audio and secondary content remaining audio capability in the digital audio production process
EP1336175A1 (en) * 2000-11-09 2003-08-20 Koninklijke Philips Electronics N.V. Wideband extension of telephone speech for higher perceptual quality
JP3926726B2 (ja) 2001-11-14 2007-06-06 松下電器産業株式会社 符号化装置および復号化装置
CN100395817C (zh) 2001-11-14 2008-06-18 松下电器产业株式会社 编码设备、解码设备和解码方法
CN1669358A (zh) 2002-07-16 2005-09-14 皇家飞利浦电子股份有限公司 音频编码
JP2004198485A (ja) 2002-12-16 2004-07-15 Victor Co Of Japan Ltd 音響符号化信号復号化装置及び音響符号化信号復号化プログラム
DE602004002390T2 (de) 2003-02-11 2007-09-06 Koninklijke Philips Electronics N.V. Audiocodierung
AU2003208517A1 (en) * 2003-03-11 2004-09-30 Nokia Corporation Switching between coding schemes
US8311809B2 (en) 2003-04-17 2012-11-13 Koninklijke Philips Electronics N.V. Converting decoded sub-band signal into a stereo signal
ATE359687T1 (de) 2003-04-17 2007-05-15 Koninkl Philips Electronics Nv Audiosignalgenerierung
RU2316059C2 (ru) 2003-05-01 2008-01-27 Нокиа Корпорейшн Способ и устройство для квантования усиления в широкополосном речевом кодировании с переменной битовой скоростью передачи
US7447317B2 (en) * 2003-10-02 2008-11-04 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V Compatible multi-channel coding/decoding by weighting the downmix channel
WO2005040749A1 (ja) 2003-10-23 2005-05-06 Matsushita Electric Industrial Co., Ltd. スペクトル符号化装置、スペクトル復号化装置、音響信号送信装置、音響信号受信装置、およびこれらの方法
US7613607B2 (en) * 2003-12-18 2009-11-03 Nokia Corporation Audio enhancement in coded domain
FI118834B (fi) * 2004-02-23 2008-03-31 Nokia Corp Audiosignaalien luokittelu
FI119533B (fi) 2004-04-15 2008-12-15 Nokia Corp Audiosignaalien koodaus
DE102004021062A1 (de) 2004-04-29 2005-11-24 Siemens Ag Verfahren zur Herstellung von Leiterplatten und/oder entsprechenden Konstrukten
CN1954365B (zh) 2004-05-17 2011-04-06 诺基亚公司 使用不同编码模型的音频编码
EP1747554B1 (en) 2004-05-17 2010-02-10 Nokia Corporation Audio encoding with different coding frame lengths
ATE474310T1 (de) 2004-05-28 2010-07-15 Nokia Corp Mehrkanalige audio-erweiterung
US7930184B2 (en) * 2004-08-04 2011-04-19 Dts, Inc. Multi-channel audio coding/decoding of random access points and transients
ATE429698T1 (de) 2004-09-17 2009-05-15 Harman Becker Automotive Sys Bandbreitenerweiterung von bandbegrenzten tonsignalen
US7720230B2 (en) 2004-10-20 2010-05-18 Agere Systems, Inc. Individual channel shaping for BCC schemes and the like
SE0402652D0 (sv) * 2004-11-02 2004-11-02 Coding Tech Ab Methods for improved performance of prediction based multi- channel reconstruction
EP1691348A1 (en) 2005-02-14 2006-08-16 Ecole Polytechnique Federale De Lausanne Parametric joint-coding of audio sources
US7573912B2 (en) * 2005-02-22 2009-08-11 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschunng E.V. Near-transparent or transparent multi-channel encoder/decoder scheme
AU2006232361B2 (en) * 2005-04-01 2010-12-23 Qualcomm Incorporated Methods and apparatus for encoding and decoding an highband portion of a speech signal
WO2006126843A2 (en) 2005-05-26 2006-11-30 Lg Electronics Inc. Method and apparatus for decoding audio signal
AU2006266655B2 (en) 2005-06-30 2009-08-20 Lg Electronics Inc. Apparatus for encoding and decoding audio signal and method thereof
JP4699117B2 (ja) * 2005-07-11 2011-06-08 株式会社エヌ・ティ・ティ・ドコモ 信号符号化装置、信号復号化装置、信号符号化方法、及び信号復号化方法。
US7630882B2 (en) * 2005-07-15 2009-12-08 Microsoft Corporation Frequency segmentation to obtain bands for efficient coding of digital media
US7974713B2 (en) * 2005-10-12 2011-07-05 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Temporal and spatial shaping of multi-channel audio signals
WO2007083931A1 (en) 2006-01-18 2007-07-26 Lg Electronics Inc. Apparatus and method for encoding and decoding signal
JP5147727B2 (ja) 2006-01-19 2013-02-20 エルジー エレクトロニクス インコーポレイティド 信号デコーディング方法及び装置
KR20070081735A (ko) * 2006-02-13 2007-08-17 엘지전자 주식회사 오디오 신호의 인코딩/디코딩 방법 및 장치
ATE527833T1 (de) 2006-05-04 2011-10-15 Lg Electronics Inc Verbesserung von stereo-audiosignalen mittels neuabmischung
US8135047B2 (en) 2006-07-31 2012-03-13 Qualcomm Incorporated Systems and methods for including an identifier with a packet associated with a speech signal
US8260609B2 (en) 2006-07-31 2012-09-04 Qualcomm Incorporated Systems, methods, and apparatus for wideband encoding and decoding of inactive frames
TWI333346B (en) * 2006-11-28 2010-11-11 Inst Information Industry Communication apparatus, method, application program, and computer readable medium thereof for switching channels in a beacon network
WO2008110143A1 (de) * 2007-03-09 2008-09-18 Beru Ag Verfahren und vorrichtung zur glühkerzenerregungssteuerung
DE102007018032B4 (de) 2007-04-17 2010-11-11 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Erzeugung dekorrelierter Signale
BRPI0820488A2 (pt) * 2007-11-21 2017-05-23 Lg Electronics Inc método e equipamento para processar um sinal
US8538764B2 (en) * 2008-10-06 2013-09-17 Telefonaktiebolaget L M Ericsson (Publ) Method and apparatus for delivery of aligned multi-channel audio

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012036487A3 (en) * 2010-09-15 2012-06-21 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding signal for high frequency bandwidth extension
US9183847B2 (en) 2010-09-15 2015-11-10 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding signal for high frequency bandwidth extension
US9837090B2 (en) 2010-09-15 2017-12-05 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding signal for high frequency bandwidth extension
RU2639694C1 (ru) * 2010-09-15 2017-12-21 Самсунг Электроникс Ко., Лтд. Устройство и способ для кодирования/декодирования для расширения диапазона высоких частот
US10152983B2 (en) 2010-09-15 2018-12-11 Samsung Electronics Co., Ltd. Apparatus and method for encoding/decoding for high frequency bandwidth extension
US10418043B2 (en) 2010-09-15 2019-09-17 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding signal for high frequency bandwidth extension
WO2012091464A1 (ko) * 2010-12-29 2012-07-05 삼성전자 주식회사 고주파수 대역폭 확장을 위한 부호화/복호화 장치 및 방법
RU2672133C1 (ru) * 2010-12-29 2018-11-12 Самсунг Электроникс Ко., Лтд. Устройство и способ для кодирования/декодирования для расширения диапазона высоких частот
US10453466B2 (en) 2010-12-29 2019-10-22 Samsung Electronics Co., Ltd. Apparatus and method for encoding/decoding for high frequency bandwidth extension
US10811022B2 (en) 2010-12-29 2020-10-20 Samsung Electronics Co., Ltd. Apparatus and method for encoding/decoding for high frequency bandwidth extension
US9596542B2 (en) 2012-04-16 2017-03-14 Samsung Electronics Co., Ltd. Apparatus and method with enhancement of sound quality
KR20200015614A (ko) 2017-06-01 2020-02-12 닛토 가세이 가부시끼 가이샤 방오도료 조성물, 이 조성물을 이용하여 형성되는 방오 도막을 표면에 갖는 도장물

Also Published As

Publication number Publication date
CN101868821B (zh) 2015-09-23
WO2009066960A1 (en) 2009-05-28
CA2705968A1 (en) 2009-05-28
US20100211400A1 (en) 2010-08-19
EP2210253A1 (en) 2010-07-28
EP2210253A4 (en) 2010-12-01
US20100305956A1 (en) 2010-12-02
CA2705968C (en) 2016-01-26
CN101868821A (zh) 2010-10-20
US8527282B2 (en) 2013-09-03
CA2697830A1 (en) 2009-05-28
KR101221918B1 (ko) 2013-01-15
KR20100085018A (ko) 2010-07-28
KR101586317B1 (ko) 2016-01-18
AU2008326956B2 (en) 2011-02-17
EP2218068A1 (en) 2010-08-18
JP2011504249A (ja) 2011-02-03
WO2009066959A1 (en) 2009-05-28
AU2008326956A1 (en) 2009-05-28
CN101836250A (zh) 2010-09-15
RU2449387C2 (ru) 2012-04-27
RU2010125221A (ru) 2011-12-27
US8583445B2 (en) 2013-11-12
US20100274557A1 (en) 2010-10-28
AU2008326957A1 (en) 2009-05-28
RU2010125251A (ru) 2011-12-27
CN101836250B (zh) 2012-11-28
US8504377B2 (en) 2013-08-06
AU2008326957B2 (en) 2011-06-30
CA2697830C (en) 2013-12-31
MX2010002629A (es) 2010-06-02
BRPI0820488A2 (pt) 2017-05-23
JP2011504250A (ja) 2011-02-03
EP2218068A4 (en) 2010-11-24

Similar Documents

Publication Publication Date Title
KR101221918B1 (ko) 신호 처리 방법 및 장치
KR101967122B1 (ko) 신호 처리 장치 및 방법, 및 프로그램
KR101162275B1 (ko) 오디오 신호 처리 방법 및 장치
EP2998957B1 (en) Methods, apparatuses and system for encoding and decoding signal
IL201469A (en) Formulation of a temporary envelope for spatial drilling using WIENER DOMAIN filter for frequency
KR20190047114A (ko) 신호 처리 장치 및 방법, 및 컴퓨터 판독가능 기록 매체
JP2004046179A (ja) 少計算量で高周波数成分を復元するオーディオデコーディング法及び装置
JP2007187905A (ja) 信号符号化装置及び方法、信号復号装置及び方法、並びにプログラム及び記録媒体
JP2004184975A (ja) 少ない計算量で高周波数成分を復元するオーディオデコーディング方法及び装置
US20120123788A1 (en) Coding method, decoding method, and device and program using the methods
KR20080066537A (ko) 부가정보를 가지는 오디오신호의 부호화/복호화 방법 및장치
JP2007178529A (ja) 符号化オーディオ信号再生装置及び符号化オーディオ信号再生方法
JP2005148539A (ja) オーディオ信号符号化装置およびオーディオ信号符号化方法
KR20100054749A (ko) 신호의 처리 방법 및 이의 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20151224

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20161214

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20171214

Year of fee payment: 6