KR20210143177A - 오류 은닉 모드를 선택하는 디코더와 디코딩 방법, 및 인코더와 인코딩 방법 - Google Patents

오류 은닉 모드를 선택하는 디코더와 디코딩 방법, 및 인코더와 인코딩 방법 Download PDF

Info

Publication number
KR20210143177A
KR20210143177A KR1020217028182A KR20217028182A KR20210143177A KR 20210143177 A KR20210143177 A KR 20210143177A KR 1020217028182 A KR1020217028182 A KR 1020217028182A KR 20217028182 A KR20217028182 A KR 20217028182A KR 20210143177 A KR20210143177 A KR 20210143177A
Authority
KR
South Korea
Prior art keywords
bits
bitstream payload
payload
current
decoding module
Prior art date
Application number
KR1020217028182A
Other languages
English (en)
Inventor
아드리안 토마세크
랄프 스페르슈나이더
얀 뷔테
콘라드 벤도르프
마틴 디에츠
마르쿠스 슈넬
막시밀리안 슐레겔
Original Assignee
프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from EP19156997.9A external-priority patent/EP3697005A1/en
Application filed by 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. filed Critical 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베.
Priority claimed from PCT/EP2020/053618 external-priority patent/WO2020165263A2/en
Publication of KR20210143177A publication Critical patent/KR20210143177A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0041—Arrangements at the transmitter end
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/032—Quantisation or dequantisation of spectral components
    • G10L19/035—Scalar quantisation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/005—Correction of errors induced by the transmission channel, if related to the coding algorithm
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/0212—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using orthogonal transformation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/022—Blocking, i.e. grouping of samples in time; Choice of analysis windows; Overlap factoring
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/032—Quantisation or dequantisation of spectral components
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16—Vocoder architecture
    • G10L19/18—Vocoders using multiple modes
    • G10L19/20—Vocoders using multiple modes using sound class specific coding, hybrid encoders or object based coding
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
    • G10L21/0324—Details of processing therefor
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
    • H03M13/03—Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words
    • H03M13/05—Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words using block codes, i.e. a predetermined number of check bits joined to a predetermined number of information bits
    • H03M13/07—Arithmetic codes
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
    • H03M13/03—Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words
    • H03M13/05—Error detection or forward error correction by redundancy in data representation, i.e. code words containing more digits than the source words using block codes, i.e. a predetermined number of check bits joined to a predetermined number of information bits
    • H03M13/13—Linear codes
    • H03M13/15—Cyclic codes, i.e. cyclic shifts of codewords produce other codewords, e.g. codes defined by a generator polynomial, Bose-Chaudhuri-Hocquenghem [BCH] codes
    • H03M13/151—Cyclic codes, i.e. cyclic shifts of codewords produce other codewords, e.g. codes defined by a generator polynomial, Bose-Chaudhuri-Hocquenghem [BCH] codes using error location or error correction polynomials
    • H03M13/1515—Reed-Solomon codes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B17/00—Monitoring; Testing
    • H04B17/30—Monitoring; Testing of propagation channels
    • H04B17/309—Measuring or estimating channel quality parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0009—Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the channel coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/0001—Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0023—Systems modifying transmission characteristics according to link quality, e.g. power backoff characterised by the signalling
    • H04L1/0032—Without explicit signalling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0041—Arrangements at the transmitter end
    • H04L1/0042—Encoding specially adapted to other signal generation operation, e.g. in order to reduce transmit distortions, jitter, or to improve signal shape
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0045—Arrangements at the receiver end
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0045—Arrangements at the receiver end
    • H04L1/0046—Code rate detection or code type detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0045—Arrangements at the receiver end
    • H04L1/0047—Decoding adapted to other signal detection operation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0056—Systems characterized by the type of code used
    • H04L1/0057—Block codes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/0078—Avoidance of errors by organising the transmitted data in a format specifically designed to deal with errors, e.g. location
    • H04L1/0083—Formatting with frames or packets; Protocol or part of protocol for error control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/0078—Avoidance of errors by organising the transmitted data in a format specifically designed to deal with errors, e.g. location
    • H04L1/0084—Formats for payload data
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/93—Discriminating between voiced and unvoiced parts of speech signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/08—Arrangements for detecting or preventing errors in the information received by repeating transmission, e.g. Verdan system

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Quality & Reliability (AREA)
  • Mathematical Physics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Theoretical Computer Science (AREA)
  • Electromagnetism (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Error Detection And Correction (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)
  • Electrophonic Musical Instruments (AREA)
  • Alarm Systems (AREA)
  • Micro-Organisms Or Cultivation Processes Thereof (AREA)
  • Color Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

신호의 신호 부분을 재구성하기 위해 프레임을 디코딩하는 디코더(100)가 제공된다. 신호 부분은 프레임 내에서 인코딩되며, 프레임은 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하며, 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 페이로드 비트 각각은 비트스트림 페이로드 내의 위치를 나타낸다. 디코더(100)는, 2개 이상의 리던던시 비트에 따라, 비트스트림 페이로드가, 왜곡되거나, 또는 왜곡될 가능성이 있는 페이로드 비트 중 하나 이상인 하나 이상의 손상된 비트를 포함하는지 여부를 검출하도록 구성된 채널 디코딩 모듈(110)을 포함한다. 또한, 디코더(100)는 소스 디코딩 모듈(120)을 포함한다. 채널 디코딩 모듈(110)이 비트스트림 페이로드 내의 임의의 손상된 비트를 검출하지 않은 경우, 소스 디코딩 모듈(120)은 신호 부분을 재구성하기 위해 오류 은닉을 수행하지 않고 비트스트림 페이로드를 디코딩하도록 구성된다. 채널 디코딩 모듈(110)이 비트스트림 페이로드 내에서 하나 이상의 손상된 비트를 검출한 경우, 소스 디코딩 모듈(120)은, 비트스트림 페이로드 내의 하나 이상의 손상된 비트 중 적어도 하나의 위치에 따라, 그리고 신호의 신호 부분의 신호 특성에 따라 둘 이상의 오류 은닉 모드 중 선택된 오류 은닉 모드를 선택하도록 구성되고, 신호 부분을 재구성하기 위해 선택된 오류 은닉 모드에 따라 오류 은닉을 수행하도록 구성된다.

Description

오류 은닉 모드를 선택하는 디코더와 디코딩 방법, 및 인코더와 인코딩 방법
본 발명은 오류 은닉 모드를 선택하는 디코더 및 디코딩 방법, 및 인코더 및 인코딩 방법에 관한 것이다.
인코더와 디코더 사이의 전송 체인에서 비트 오류가 발생될 수 있다. 처리되지 않은 비트 오류는 성가신 아티팩트(artefact)로 이어질 수 있고, 따라서 많은 오디오 디코더는, 이 프레임 내에서 비트 오류가 검출되는 경우, 전체 프레임에서 단순히 프레임 손실/패킷 손실 은닉(PLC: packet loss concealment)(이후에는, 전체 프레임 손실 은닉(FFLC: full frame loss concealment)이라 함)을 트리거한다. 이것은 특히 신호가 정상(stationary)인 경우 좋은 오디오 품질을 얻는 경우가 많다.
MPEG-4 파트 3 오디오[1]는 AAC의 비트스트림 페이로드에 대한 오류 민감도 범주를 정의한다(표 4.94). 표 1은 AAC 주요 데이터의 범주를 도시한다. 특히, 표 1은 AAC에 대한 오류 민감도 범주를 나타낸다.
범주 페이로드 의무 하나 마다 인스턴스로 이어짐/이어질 수 있음 설명
0 메인 예 CPE / 스테레오 층 일반적으로 사용되는 사이드 정보
1 메인 예 ICS 채널 종속 사이드 정보
2 메인 아니오 ICS 오류에 강인한 스케일 팩터 데이터
3 메인 아니오 ICS TNS 데이터
4 메인 예 ICS 스펙트럼 데이터
왜곡된 클래스에 따라, 개별 은닉 전략이 표 2에서와 같이 선택된다. 표 2는 AAC 오류 민감도 범주에 대한 은닉 전략을 보여준다.
범주 은닉 전략
0 프레임 손실 은닉
1 채널 은닉(다채널 신호의 경우)
2 왜곡된 스케일 팩터 밴드의 스펙트럼 라인만 은닉 [2]
3 비트 오류의 경우 TNS를 적용하지 않음
4 비트 오류에 관계없이 스펙트럼을 디코딩
MPEG-4 파트 3 오디오는 또한 비트 슬라이스 산술 부호화(BSAC: Bit Sliced Arithmetic Coding)를 지정하며, 이는 많은 수의 층을 갖는 미세 계층 스케일러빌리티(fine-grain scalability)을 허용한다. 오류 강인(error resilience)을 향상시키기 위해, 세그먼트 이진 산술(SBA: Segmented Binary Arithmetic) 코딩이 도입되었으며, 이는 다수의 층을 세그먼트로 그룹화한다. 산술 코딩은 오류 전파를 피하기 위해 각각의 세그먼트의 시작 부분에서 다시 초기화된다.
시간 영역 또는 주파수 영역 은닉의 적응적 선택이 [3]에서 제안된다. [3]에서는, 세 가지 오류 검출 방법이 설명된다.
제1 오류 검출 방법은 주기적 덧붙임 검사(CRC: Cyclic Redundancy Check)를 사용한다.
제2 오류 검출 방법은 인코더로부터 전송된 비트스트림 페이로드의 길이와 디코더에 주어진 비트스트림 페이로드의 길이를 비교한다.
제3 오류 검출 방법은 인코더로부터 전송된 비트스트림 페이로드의 길이와 비트스트림 페이로드의 디코딩 과정에서 소비된 비트의 길이를 비교한다: BSAC에서는, 산술 디코딩의 특성 때문에, 32개 이하의 추가적인 비트가 디코딩될 수 있다. 따라서, 비트 차이가 32비트보다 더 큰 경우, 오류가 있는 점이 결정된다.
후속적으로, [3]에서 복수의 오류 측위(location) 방법이 설명된다.
[3]의 제1 오류 측위 방법에 따르면, 현재 프레임의 스펙트럼 에너지와 이전 프레임의 스펙트럼 에너지의 비교가 수행된다.
[3]의 제2 오류 측위 방법에 따르면, 산술 디코더에 의해서 소비되는 비트의 수를 기준으로 디코딩된 비트스트림 페이로드의 각각의 계층에 할당된 비트의 조사가 수행된다. 계층에 오류가 있는 경우, 산술 디코딩에 더 많거나 더 적은 비트가 사용될 수 있다. 따라서, 비트를 더 많이 사용하거나 더 적게 사용하는 층은 이 층 또는 이전 층에 오류가 존재할 가능성이 높다는 것을 나타낸다.
이러한 측위에 후속하여, [3]에서 다양한 은닉 전략이 제안된다: 검출된 위치가 제1 임계 위치 이전인 경우, 시간 도메인 은닉이 적용된다. 검출된 위치가 제1 임계 위치 이후이지만, 제2 임계 위치 이전인 경우, 주파수 도메인 은닉이 적용된다. 검출된 위치가 제2 임계 위치 이후인 경우, 은닉이 적용되지 않는다.
주파수 도메인에서 사용 가능한 다양한 프레임 손실 은닉 기술은 [4]에서 논의된다. 특히 뮤팅(muting), 반복(repetition), 잡음 대체(noise substitution) 및 예측(prediction)이 [4]에서 언급된다.
본 발명의 목적은 오류 은닉에 대한 개선된 개념을 제공하는 것이다.
본 발명의 목적은 청구항 1에 따른 디코더에 의해서, 청구항 28에 따른 인코더에 의해서, 청구항 29에 따른 방법에 의해서, 청구항 30에 따른 방법에 의해서, 청구항 31에 따른 방법에 의해서, 제32항에 따른 컴퓨터 프로그램에 의해서, 제33항에 따른 프레임에 의해서 해결된다.
신호의 신호 부분을 재구성하기 위해 프레임을 디코딩하는 디코더가 제공된다. 신호 부분은 프레임 내에서 인코딩되며, 프레임은 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하며, 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 페이로드 비트 각각은 비트스트림 페이로드 내의 위치를 나타낸다. 디코더는 채널 디코딩 모듈을 포함하며, 2개 이상의 리던던시 비트에 따라, 비트스트림 페이로드가, 왜곡되거나, 또는 왜곡될 가능성이 있는 페이로드 비트 중 하나 이상인 하나 이상의 손상된 비트를 포함하는지 여부를 검출하도록 구성된다. 또한, 디코더는 소스 디코딩 모듈을 포함한다. 채널 디코딩 모듈이 비트스트림 페이로드 내의 임의의 손상된 비트를 검출하지 않은 경우, 소스 디코딩 모듈은 신호 부분을 재구성하기 위해 오류 은닉을 수행하지 않고 비트스트림 페이로드를 디코딩하도록 구성된다. 채널 디코딩 모듈이 비트스트림 페이로드 내에서 하나 이상의 손상된 비트를 검출한 경우, 소스 디코딩 모듈은, 비트스트림 페이로드 내의 하나 이상의 손상된 비트 중 적어도 하나의 위치에 따라, 그리고 신호의 신호 부분의 신호 특성에 따라 둘 이상의 오류 은닉 모드 중 선택된 오류 은닉 모드를 선택하도록 구성되고, 신호 부분을 재구성하기 위해 선택된 오류 은닉 모드에 따라 오류 은닉을 수행하도록 구성된다.
또한, 인코더가 제공된다. 인코더는 프레임 내의 신호의 신호 부분을 인코딩하기 위한 소스 인코딩 모듈을 포함하고, 여기서 소스 인코딩 모듈은, 프레임이 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하게끔 프레임을 생성하도록 구성되며, 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 페이로드 비트 각각은 비트스트림 페이로드 내의 위치를 나타내며, 소스 인코딩 모듈에 의해 생성되는 프레임은 위에서 설명된 디코더에 의해 처리되기에 적합하다. 또한, 인코더는 비트스트림 페이로드에 따라 2개 이상의 리던던시 비트를 생성하도록 구성되는 채널 인코딩 모듈을 포함한다.
또한, 신호의 신호 부분을 재구성하기 위해 프레임을 디코딩하는 방법이 제공된다. 신호 부분은 프레임 내에서 인코딩되며, 프레임은 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하며, 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 페이로드 비트 각각은 비트스트림 페이로드 내의 위치를 나타낸다. 방법은,
상기 2개 이상의 리던던시 비트에 따라, 비트스트림 페이로드가, 왜곡되거나, 또는 왜곡될 가능성이 있는 페이로드 비트 중 하나 이상인 하나 이상의 손상된 비트를 포함하는지 여부를 검출하는 단계,
상기 비트스트림 페이로드 내에서 손상된 비트가 검출되지 않은 경우, 신호 부분을 재구성하기 위해 오류 은닉을 수행하지 않고 비트스트림 페이로드를 디코딩하는 단계, 및
상기 비트스트림 페이로드 내에서 하나 이상의 손상된 비트가 검출된 경우, 비트스트림 페이로드 내의 하나 이상의 손상된 비트 중 적어도 하나의 위치에 따라, 그리고 신호의 신호 부분의 신호 특성에 따라 둘 이상의 오류 은닉 모드 중 선택된 오류 은닉 모드를 선택하고, 신호 부분을 재구성하기 위해 선택된 오류 은닉 모드에 따라 오류 은닉을 수행하는 단계를 포함한다.
또한, 다른 방법이 제공된다. 방법은,
프레임 내의 신호의 신호 부분을 인코딩하는 단계 - 인코더는, 프레임이 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하게끔 프레임을 생성하도록 구성되며, 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 페이로드 비트 각각은 비트스트림 페이로드 내의 위치를 나타냄 -; 및
프레임을 사용하여, 프레임을 디코딩하기 위한 상술된 방법을 실행하는 단계를 포함한다.
또한, 프레임 내 신호의 신호 부분을 인코딩하기 위한 방법이 제공된다. 방법은,
상기 프레임이 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하도록 프레임을 생성하는 단계 - 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 페이로드 비트 각각은 비트스트림 페이로드 내의 위치를 나타내며, 프레임은 프레임을 디코딩하기 위한 상술된 방법에 의해 디코딩되기에 적합함 -; 및
상기 비트스트림 페이로드에 따라 2개 이상의 리던던시 비트를 생성하는 단계를 포함한다.
또한, 방법 중 하나를 구현하기 위한 컴퓨터 프로그램은 방법이 컴퓨터 또는 신호 프로세서 상에서 실행될 때 제공된다.
또한, 프레임 내 신호의 신호 부분을 인코딩하기 위한 상술된 방법에 따라 생성되는 프레임이 제공된다.
다음에서, 본 발명의 실시형태가 도면을 참조하여 보다 상세하게 설명된다.
도 1은 일 실시형태에 따른 신호의 신호 부분을 재구성하기 위해 프레임을 디코딩하기 위한 디코더를 예시한다.
도 2는 일 실시형태에 따른 인코더를 예시한다.
도 3은 일 실시형태에 따른 시스템을 예시한다.
도 4는 일 실시형태에 따른 코드 워드의 페이로드 데이터를 분석하기 위한 실시예를 예시한다.
도 1은 일 실시형태에 따른 신호의 신호 부분을 재구성하기 위해 프레임을 디코딩하기 위한 디코더(100)를 예시한다.
신호 부분은 프레임 내에서 인코딩되며, 프레임은 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하며, 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 페이로드 비트 각각은 비트스트림 페이로드 내의 위치를 나타낸다.
디코더(100)는 채널 디코딩 모듈(110)을 포함하며, 2개 이상의 리던던시 비트에 따라, 비트스트림 페이로드가, 왜곡되거나, 또는 왜곡될 가능성이 있는 페이로드 비트 중 하나 이상인 하나 이상의 손상된 비트를 포함하는지 여부를 검출하도록 구성된다.
또한, 디코더(100)는 소스 디코딩 모듈(120)을 포함한다.
채널 디코딩 모듈(110)이 비트스트림 페이로드 내의 임의의 손상된 비트를 검출하지 않은 경우, 소스 디코딩 모듈(120)은 신호 부분을 재구성하기 위해 오류 은닉을 수행하지 않고 비트스트림 페이로드를 디코딩하도록 구성된다.
채널 디코딩 모듈(110)이 비트스트림 페이로드 내에서 하나 이상의 손상된 비트를 검출한 경우, 소스 디코딩 모듈(120)은, 비트스트림 페이로드 내의 하나 이상의 손상된 비트 중 적어도 하나의 위치에 따라, 그리고 신호의 신호 부분의 신호 특성에 따라 둘 이상의 오류 은닉 모드 중 선택된 오류 은닉 모드를 선택하도록 구성되고, 신호 부분을 재구성하기 위해 선택된 오류 은닉 모드에 따라 오류 은닉을 수행하도록 구성된다.
일 실시형태에 따르면, 채널 디코딩 모듈은, 예를 들어, 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함하는지 여부를 검출하기 전에 비트스트림 페이로드에 대한 오류 정정을 수행하도록 구성되는 오류 검출 및 오류 정정 모듈일 수 있다.
일 실시형태에서, 채널 디코딩 모듈(110)이 비트스트림 페이로드에 대한 오류 정정을 성공적으로 수행할 수 없다고 결정하면, 채널 디코딩 모듈(110)은, 예를 들어, 비트스트림 페이로드 내의 상기 하나 이상의 손상된 비트를 결정하도록 구성될 수 있다.
일 실시형태에 따르면, 2개 이상의 오류 은닉 모드 중 제1 오류 은닉 모드는, 예를 들어, 전체 프레임 손실 은닉 모드일 수 있다. 채널 디코딩 모듈(110)이, 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 그리고 선택된 오류 은닉 모드가 전체 프레임 손실 은닉 모드인 경우, 소스 디코딩 모듈(120)은, 예를 들어, 비트스트림 페이로드를 사용하지 않고 오류 은닉을 수행하도록 구성될 수 있다.
일 실시형태에 따르면, 2개 이상의 오류 은닉 모드 중 제2 모드는, 예를 들어, 부분 프레임 손실 은닉 모드일 수 있다. 채널 디코딩 모듈(110)이, 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 그리고 선택된 오류 은닉 모드가 부분 프레임 손실 은닉 모드인 경우, 소스 디코딩 모듈(120)은, 예를 들어, 다른 비트에 대한 오류 은닉을 수행하지 않으면서, 채널 디코딩 모듈(110)에 의해 하나 이상의 손상된 비트로 표시되지 않은 페이로드 비트의 다른 비트를 디코딩함으로써, 그리고 채널 디코딩 모듈(110)에 의해 하나 이상의 손상된 비트인 것으로 표시된 하나 이상의 페이로드 비트에 대해 오류 은닉을 수행함으로써, 디코딩된 신호를 얻도록 구성될 수 있다.
일 실시형태에 따르면, 2개 이상의 오류 은닉 모드는, 예를 들어, 정확히 2개의 오류 은닉 모드를 포함할 수 있으며, 여기서 정확히 2개의 오류 은닉 모드 중 제1 모드는, 예를 들어, 전체 프레임 손실 은닉 모드일 수 있으며, 여기서 정확히 2개의 오류 은닉 모드 중 제2 모드는 부분 프레임 손실 은닉 모드이다.
일 실시형태에서, 비트스트림 페이로드는, 예를 들어, 비트스트림 페이로드의 복수의 페이로드 비트의 제1 부분으로, 그리고 비트스트림 페이로드의 복수의 페이로드 비트의 제2 부분으로 분할될 수 있다. 채널 디코딩 모듈(110)이, 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 비트스트림 페이로드의 제1 부분이 하나 이상의 손상된 비트 중 적어도 하나를 포함하는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 선택된 오류 은닉 모드로서 전체 프레임 손실 은닉 모드를 선택하도록 구성될 수 있다. 채널 디코딩 모듈(110)이, 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 비트스트림 페이로드의 제1 부분이 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 신호의 신호 부분의 신호 특성에 따라 선택된 오류 은닉 모드를 선택하도록 구성될 수 있다.
일 실시형태에 따르면, 프레임은 현재 프레임이며, 비트스트림 페이로드는 현재 비트스트림 페이로드이며, 복수의 페이로드 비트는 복수의 현재 페이로드 비트이며, 신호의 신호 부분은 신호의 현재 신호 부분이며, 신호 특성은 현재 신호 특성이다. 채널 디코딩 모듈(110)이, 현재 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 현재 프레임의 복수의 현재 페이로드 비트에 의해 인코딩되는 신호의 현재 신호 부분의 현재 신호 특성에 따라, 그리고 이전 프레임의 이전 비트스트림 페이로드의 복수의 이전 페이로드 비트에 의해 인코딩되는 신호의 이전 신호 부분의 이전 신호 특성에 따라, 2개 이상의 오류 은닉 모드 중 선택된 오류 은닉 모드를 선택하도록 구성될 수 있다.
일 실시형태에서, 현재 비트스트림 페이로드의 복수의 현재 페이로드 비트에 의해 인코딩되는 신호의 현재 신호 부분은, 예를 들어, 오디오 신호의 현재 오디오 신호 부분일 수 있고, 이전 비트스트림 페이로드의 복수의 이전 페이로드 비트에 의해 인코딩되는 신호의 이전 신호 부분은, 예를 들어, 오디오 신호의 이전 오디오 신호 부분일 수 있다. 현재 비트스트림 페이로드는, 예를 들어, 현재 오디오 신호 부분의 복수의 스펙트럼 라인을 인코딩할 수 있다.
일 실시형태에서, 손상된 비트가 잔여 비트에만 영향을 미치는 경우, 오류 은닉이 수행되지 않고, 프레임은 손상된 잔여 비트를 고려하지 않으면서 정상 프레임으로서 디코딩된다.
안정성 인자는 두 신호 간의, 예를 들어 현재 신호와 과거 신호 간의 유사성을 나타낸다. 예를 들어, 안정성 인자는, 예를 들어, [0:1]에 의해서 제한될 수 있다. 1 또는 1에 가까운 안정성 인자는, 예를 들어, 두 신호가 모두 매우 유사하다는 점을 의미할 수 있고, 0 또는 0에 가까운 안정성 인자는, 예를 들어, 두 신호가 매우 다르다는 점을 의미할 수 있다. 유사성은, 예를 들어, 2개의 오디오 신호의 스펙트럼 엔벨로프에 대해 계산될 수 있다.
일 실시형태에서, 안정성 인자가 임계값, 예를 들어, 임계값 0.5보다 낮은 경우, 전체 프레임 손실 은닉이 수행된다.
일 실시형태에 따르면, 채널 디코딩 모듈(110)이, 현재 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 이전 프레임이 전체 프레임 손실 은닉을 사용하여 은닉되었던 경우, 전체 프레임 손실 은닉 모드를 선택된 오류 은닉 모드로서 선택하도록 구성될 수 있다.
일 실시형태에서, 채널 디코딩 모듈(110)이, 현재 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 임계 주파수보다 더 작거나 동일한 주파수를 나타내는 경우, 전체 프레임 손실 은닉 모드를 선택된 오류 은닉 모드로서 선택하도록 구성될 수 있다.
일 실시형태에 따르면, 채널 디코딩 모듈(110)이, 현재 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 안정성 인자가 미리 정의된 임계값보다 작은 경우, 전체 프레임 손실 은닉 모드를 선택된 오류 은닉 모드로서 선택하도록 구성될 수 있으며, 여기서 상기 안정성 인자는 현재 오디오 신호 부분의, 그리고 이전 오디오 신호 부분의 안정성을 나타낸다. 예를 들어, 미리 정의된 임계값은, 예를 들어, 0.5와 같을 수 있다.
일 실시형태에 따르면, 여기서, 채널 디코딩 모듈(110)이, 현재 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 전체 프레임 손실 은닉을 사용하여 이전 프레임이 은닉되었던 경우; 또는 안정성 인자가 미리 정의된 임계값보다 작은 경우, 전체 프레임 손실 은닉 모드를 선택된 오류 은닉 모드로서 선택하도록 구성될 수 있으며, 여기서 상기 안정성 인자는 현재 오디오 신호 부분의, 그리고 이전 오디오 신호 부분의 안정성을 나타낸다. 예를 들어, 미리 정의된 임계값은, 예를 들어, 0.5와 같을 수 있다.
일 실시형태에서, 채널 디코딩 모듈(110)이, 현재 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 주파수가 상기 임계 주파수보다 작거나 동일한 것을 나타내는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 음조(tonal) 또는 하모닉인 오디오 신호의 신호 성분을 인코딩하는 경우, 그리고 이전 신호 부분이, 피크 임계값보다 더 크고, 현재 오디오 신호 부분의 복수의 스펙트럼 라인에 의해 표시되는 모든 주파수보다 더 큰 주파수에 대응되는 오디오 신호의 적어도 하나의 피크를 인코딩하는 경우, 전체 프레임 손실 은닉 모드를 선택된 오류 은닉 모드로서 선택하도록 구성될 수 있다.
다른 실시형태에서, 오디오 신호의 피치는, 예를 들어, 피치 주파수를 보일 수 있다. 채널 디코딩 모듈(110)이, 현재 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 주파수가 상기 임계 주파수보다 작거나 동일한 것을 나타내는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 음조 또는 하모닉인 오디오 신호의 신호 성분을 인코딩하는 경우, 그리고 현재 오디오 신호 부분의 복수의 스펙트럼 라인에 의해 표시되는 모든 주파수가 지원되는 최대 피치 주파수보다 작은 경우, 전체 프레임 손실 은닉 모드를 선택된 오류 은닉 모드로서 선택하도록 구성될 수 있다.
일 실시형태에서, 안정성 인자가 임계값, 예를 들어, 임계값 0.5보다 더 높거나 동일한 경우, 그리고 비트스트림 페이로드가 음조 또는 하모닉 오디오 신호의 신호 성분을 인코딩하지 않는 경우, 그리고 이전 오디오 신호의 이전 양자화된 스펙트럼의 0으로부터 주파수 빈 kbe-1까지의 에너지 대 이전 오디오 신호의 이전 양자화된 스펙트럼의 0으로부터 최고치의 에너지 사이의 비율이 제2 임계값, 예를 들어, 제2 임계값 0.3보다 더 낮은 경우, 전체 프레임 손실 은폐가 수행된다.
채널 디코딩 모듈(110)이, 현재 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 주파수가 상기 임계 주파수보다 작거나 동일한 것을 나타내는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 음조 또는 하모닉인 오디오 신호의 신호 성분을 인코딩하는 경우, 그리고 현재 오디오 신호 부분의 복수의 스펙트럼 라인에 의해 표시되는 모든 주파수가 지원되는 최대 피치 주파수보다 작은 경우, 전체 프레임 손실 은닉 모드를 선택된 오류 은닉 모드로서 선택하도록 구성될 수 있다.
일 실시형태에서, 채널 디코딩 모듈(110)이, 현재 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 전체 프레임 손실 은닉을 사용하여 이전 프레임이 은닉되지 않았던 경우, 그리고 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 임계 주파수보다 더 큰 상기 주파수를 나타내는 경우, 그리고 상기 안정성 인자가 상기 미리 정의된 임계값보다 더 크거나 동일한 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 음조 또는 하모닉인 오디오 신호의 신호 성분을 인코딩하지 않는 경우, 그리고 이전 오디오 신호의 이전 양자화된 스펙트럼의 0으로부터 주파수 빈 kbe-1까지의 에너지 대 이전 오디오 신호의 이전 양자화된 스펙트럼의 0으로부터 최고치의 에너지 사이의 비율이 상기 비율 임계값보다 크거나 동일한 경우, 부분 프레임 손실 은닉 모드를 선택된 오류 은닉 모드로서 선택하도록 구성될 수 있다.
일 실시형태에 따르면, 채널 디코딩 모듈(110)이, 현재 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다고 표시하는 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 소스 디코딩 모듈(120)은, 예를 들어, 전체 프레임 손실 은닉을 사용하여 이전 프레임이 은닉되지 않았던 경우, 그리고 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 임계 주파수보다 더 큰 상기 주파수를 나타내는 경우, 그리고 상기 안정성 인자가 상기 미리 정의된 임계값보다 더 크거나 동일한 경우, 그리고 현재 비트스트림 페이로드의 제1 부분이 음조 또는 하모닉 신호 성분을 인코딩하는 경우, 그리고 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 상기 가장 높은 스펙트럼 라인이 피치 주파수보다 더 큰 주파수를 나타내는 경우, 그리고 이전 신호 부분이, 상기 피크 임계값보다 더 크고, 현재 오디오 신호 부분의 복수의 스펙트럼 라인에 의해 표시되는 모든 주파수보다 더 큰 상기 신호에 대응되는 오디오 신호의 임의의 피크를 인코딩하지 않는 경우, 부분 프레임 손실 은닉 모드를 선택된 오류 은닉 모드로서 선택하도록 구성될 수 있다.
일 실시형태에서, 선택된 오류 은닉 모드가 부분 프레임 손실 은닉 모드인 경우, 소스 디코딩 모듈(120)은, 예를 들어, 비트스트림 페이로드의 제2 부분의 복수의 코드 워드의 각각의 코드 워드에 대해, 상기 코드 워드의 수정된 심볼의 수에 따라, 상기 코드 워드에 의해 표현되는 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 라인에 대한 오류 은닉을 수행할지 여부를, 그리고 소스 디코딩 모듈(120)이 오류 은닉이 수행되어야 한다고 결정한 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 상기 라인에 대해 오류 은닉을 수행할지 여부를 결정하도록 구성될 수 있다.
일 실시형태에 따르면, 비트스트림 페이로드의 제2 부분의 복수의 코드 워드의 각각의 코드 워드에 대해, 소스 디코딩 모듈(120)은, 예를 들어, 상기 코드 워드가 손상될 확률의 근사치를 나타내는 위험 값을 결정하도록, 그리고 상기 위험 값이 위험 임계값보다 더 큰지 여부를 결정하도록 구성될 수 있다.
일 실시형태에서, 소스 디코딩 모듈(120)은, 예를 들어, 순방향 오류 정정 코딩 모드에 따라 위험 값을 추가로 결정하도록 구성될 수 있다.
일 실시형태에 따르면, 위험 임계값은, 예를 들어, 2-16일 수 있다.
다른 실시형태에서, 다른 위험 임계값, 예를 들어, 2-12, 또는 예를 들어, 2-18, 또는 예를 들어, 2-20이 사용될 수 있다.
일 실시형태에서, 소스 디코딩 모듈(120)은, 예를 들어, 다음과 같이 위험 값을 계산하도록 구성될 수 있다:
Figure pct00001
여기서 는 epmode(예를 들어, 순방향 오류 정정 코딩 모드)를 나타내고, τ은 심볼 오류의 수(예를 들어, 정정된 심볼의 수)를 나타낸다.
위의 공식은, 예를 들어, m = 2, 3, 4 및 τ = 0, .., m-1에 대해 유효할 수 있다.
다른 실시형태에서, 소스 디코딩 모듈(120)은, 예를 들어, 심볼 오류의 수(예: 수정된 심볼의 수)에 따라, 그리고 epmode(예: 순방향 오류 정정 코딩 모드)에 따라 위험 값을 결정하기 위해 룩업 테이블을 사용하도록 구성될 수 있다.
예를 들어, 일 실시형태에서, 예를 들어, 다음과 같은 룩업 테이블이 사용될 수 있다.
epmode ＼ 오류 수 0 1 2 3
3 2^-16 13385*2^-22 20475*2^-16 사용 불가
4 2^-24 13385*2^-30 20475*2^-24 19195*2^-18
위의 실시예에서, 예를 들어, 위험 임계값이 2-16인 경우, epmode 3에서는, 오류가 허용되지 않고, epmode 4에서는, 최대 1개의 오류가 허용된다.
다른 실시형태에서, 룩업 테이블은 위험 값에 대해, epmode에 대해, 그리고 오류 카운트에 대해 다른 값을 취할 수 있다(예를 들어, 더 많은 오류 4, 5, 6 등, 또는 더 적은 오류만 고려함).
다른 실시형태에서, 위험 값은, 예를 들어, 코드워드 길이에 의해, 또는 다른 방식으로 결정될 수 있다.
예를 들어, 일부 실시형태는, 예를 들어, 다음의 위험 값의 다른 계산을 사용할 수 있다:
Figure pct00002
또는, 예를 들어,
Figure pct00003
또한, 추가 실시형태는, 예를 들어, 심볼 오류의 수에만 의존할 수 있지만, 순방향 오류 정정 코딩 모드에는 의존하지 않을 수 있다.
예를 들어, 이러한 실시형태에서, 위험 값은, 예를 들어, 다음과 같이 계산될 수 있다:
Figure pct00004
또는, 다음에 따라,
Figure pct00005
또는, 다음에 따라,
Figure pct00006
.
일 실시형태에서, 상기 위험 값이, 상기 위험 임계값보다 더 큰 경우, 소스 디코딩 모듈(120)은, 예를 들어, 상기 코드 워드에 의해 표현되는 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 라인에 대한 오류 은닉을 수행하도록 구성될 수 있다.
일 실시형태에서, 소스 디코딩 모듈(120)은 부분 프레임 손실 오류 은닉 모드에서 상기 코드 워드에 대해 상기 오류 은닉을 수행하도록 구성된다.
일 실시형태에 따르면, 채널 디코딩 모듈(110)은, 예를 들어, 채널 디코딩 모듈(110)이 비트스트림 페이로드 내에서 정정 불가능한 코드 워드를 만나는 경우, 그리고/또는 채널 디코딩 모듈(110)이, 비트스트림 페이로드의 복수의 코드 워드에 대한 오류 정정을 수행한 후, 오류 정정 후의 상기 복수의 코드 워드에 의존하는, 수신된 해시 값과 다른, 재계산된 해시 값을 결정하는 경우, 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함한다는 점을 검출하도록 구성될 수 있다.
도 2는 일 실시형태에 따른 인코더(150)를 예시한다.
인코더(150)는 프레임 내의 신호의 신호 부분을 인코딩하기 위한 소스 인코딩 모듈(160)을 포함하고, 여기서 소스 인코딩 모듈(160)은, 프레임이 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하게끔 프레임을 생성하도록 구성되며, 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 페이로드 비트 각각은 비트스트림 페이로드 내의 위치를 나타내며, 소스 인코딩 모듈(160)에 의해 생성되는 프레임은 위에서 설명된 디코더(100)에 의해 처리되기에 적합하다.
또한, 인코더(150)는 비트스트림 페이로드에 따라 2개 이상의 리던던시 비트를 생성하도록 구성되는 채널 인코딩 모듈(170)을 포함한다.
도 3은 일 실시형태에 따른 시스템(190)을 예시한다.
시스템(190)은 프레임 내의 신호의 신호 부분을 인코딩하기 위한 도 2의 인코더(150)를 포함하고, 여기서 인코더(150)는, 프레임이 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하게끔 프레임을 생성하도록 구성되며, 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 페이로드 비트 각각은 비트스트림 페이로드 내의 위치를 나타낸다.
또한, 시스템(190)은 도 1의 디코더(100)를 포함한다.
다음에서, 실시형태에 따른 모드 결정 개념이 설명된다. 특히, 모드 결정 개념 및 비트 오류 은닉의 적용 개념이 설명된다.
일부 실시형태는, 신호가 정상(stationary)이지 않고 비트 오류가 음향심리학적으로(psychoacoustically) 덜 중요한 신호 데이터에만 나타날 때, 전체 프레임 손실 은닉을 사용하는 대신, 부분 프레임 손실 은닉(PFLC: partial frame loss concealment), 즉 왜곡된 데이터만 은닉하는 것이, 은닉 아티팩트가 음향심리학적으로 덜 중요한 부분에만 나타나기 때문에, 바람직할 것이며, 더 나은 오디오 품질로 이어질 것이라는 점의 발견에 기반한다.
일부 실시형태에서, 비트 오류 손상 전송에서 최선의 오디오 품질을 달성하기 위해, FFLC와 PFLC 사이에서 선택하는 모드 결정이 발명된다. 이러한 결정은 음향심리학적으로 더 중요한 신호 데이터 내의 오류의 가능성 및 마지막과 현재 프레임의 신호 특성에 의존된다.
전체 프레임 손실 은닉을, 또는 부분 프레임 손실 은닉을 적용할지 여부는 채널 코딩과 소스 코딩의 공동 결정이다:
채널 디코딩 모듈은 다음을 적용할 것을 제안한다:
비트스트림 페이로드의 덜 민감한 부분의 오류 가능성에 관계없이, 비트스트림 페이로드의 더 민감한 부분에 있는 비트가 손상될 가능성이 있는 경우, 전체 프레임 손실 은닉.
비트스트림의 더 민감한 부분의 비트가 정확할 가능성이 높지만, 비트스트림 페이로드의 덜 민감한 부분의 비트가 손상될 가능성이 있는 경우, 부분 프레임 손실 은닉.
비트스트림의 특정 부분이 손상될 가능성은 채널 디코딩 모듈에 의해 제공된다. 채널 코딩은 블록 코드를 사용하여 수행된다. 오류 수정 기능뿐만 아니라, 고유한 오류 감지 기능이 또한 제공된다. 또한, 개별 해시는 비트스트림의 더 민감한, 그리고 덜 민감한 부분에서 유도된다. 이러한 해시의 평가는 앞서 언급된 가능성에 대한 추가 확실성을 제공한다.
예를 들어, 채널 코딩이 부분 프레임 손실 은닉을 선택하는 경우, 소스 코딩은 다음에서 설명된다.
일 실시형태에서, 소스 디코딩 모듈(120)은, 예를 들어, 다음과 같은 경우, 전체 프레임 손실 은닉을 적용하는 것을 선택하도록 구성될 수 있다:
·이전 프레임이 전체 프레임 손실 은닉으로 은닉되었을 경우, 또는
·양자화된 스펙트럼에서 가장 높은 스펙트럼 라인이 임계 주파수(즉, 2 kHz)보다 더 작거나 동일한 주파수를 나타내는 경우, 그리고
·현재와 마지막 신호의 안정성이 주어진 임계값보다 더 낮은 경우, 또는
·피치가 전송되는 경우(더 민감한 비트스트림 페이로드에서), 그리고
·양자화된 스펙트럼에서 사용 가능한 가장 높은 스펙트럼 라인이 피치 주파수보다 더 작은 주파수를 나타내는 경우, 또는
·사용 가능한 가장 높은 스펙트럼 라인 위의 이전 디코딩된 스펙트럼 부분에 관련 피크가 있는 경우,
또는,
·피치가 전송되지 않고(더 민감한 비트스트림 페이로드에서), 충분한 스펙트럼 라인이 양자화된 스펙트럼에서 사용가능하지 않는 경우.
대조적으로, 소스 디코딩 모듈(120)은, 예를 들어, 부분 프레임 손실 은닉을 적용하는 것을 선택하도록 구성될 수 있고,
·상기 이전 프레임이 전체 프레임 손실 은닉으로 은닉되지 않았을 경우, 그리고
·양자화된 스펙트럼에서 가장 높은 스펙트럼 라인이 임계 주파수(즉, 2 kHz)보다 더 높은 주파수를 나타내는 경우, 또는
·현재와 마지막 신호의 안정성이 주어진 임계값보다 더 높거나 동일한 경우, 그리고
·피치가 전송되지 않고, 적어도 특정 양의 스펙트럼 라인이 양자화된 스펙트럼에서 사용 가능할 경우, 또는
·피치가 전송되는 경우, 그리고
양자화된 스펙트럼에서 사용 가능한 가장 높은 스펙트럼 라인이 피치 주파수보다 더 높은 주파수를 나타내는 경우, 그리고
사용 가능한 가장 높은 스펙트럼 라인 위의 이전 디코딩된 스펙트럼 부분에 관련 피크가 없는 경우,
이러한 실시형태는, 시간 도메인 은닉과 같은 전체 프레임 피치 기반 은닉이, 예를 들어, 신호가 정상이고 모노(monophonic)인 경우(사용 가능한 피치에 의해서 표시됨), 그리고 검색된 스펙트럼이 대표성이지 않은 경우(위에서 언급된 두 가지 기준 중 적어도 하나에 의해 표시됨), 이러한 조건 하에서 전체 프레임 피치 기반 은닉이 부분 프레임 손실 은닉보다 일반적으로 더 나은 결과를 제공하기 때문에, 적용될 수 있다는 점의 발견에 기반한다.
부분 프레임 손실 은닉은, 예를 들어, 신호가 비정상 또는 다음(polyphonic)(피치 부재로 표시)인 경우, 또는 신호가 정상 및 모노(사용 가능한 피치로 표시됨)이고 검색된 스펙트럼이 대표성(위에서 언급한 두 가지 기준에 의해서 표시됨)인 경우, 이러한 조건 하에서 부분 프레임 손실 은닉이 일반적으로 전체 프레임 손실 은닉보다 더 나은 결과를 제공하기 때문에, 적용될 수 있다.
다음에서, 일부 실시형태에 따른 모드 결정 개념이 더 상세하게 설명된다.
일부 실시형태에서, 부분 프레임 손실 은닉을 위해 지정된 비트스트림의 부분은, 예를 들어, 다수의 코드 워드로 인코딩될 수 있고, 또한, 예를 들어, 비트스트림과 함께 채널 디코딩 모듈로 전송될 수 있는, 해시 값에 의해 전체적로서 보호될 수 있다. 각각의 코드는, 예를 들어, 특정 오류 수정 기능을 가질 수 있다. 실시형태에서, 채널 디코딩 모듈은, 예를 들어, 지정된 코드 워드에 대한 오류 정정을 먼저 수행하려고 시도할 수 있고, 이에 의해 지정된 코드 워드 각각에 대한 정정된 심볼의 수를 추적할 수 있다.
이러한 실시형태에서, 모든 오류가 정정되지 않았을 경우, 또는 모든 오류가 정정되지 않았을 가능성이 있는 경우, 적절한 오류 은닉 모드가 선택될 것이고, 선택된 오류 은닉 모드에 따라 오류 은닉이 수행될 것이다.
일부 실시형태에서, 부분 프레임 손실 은닉은, 예를 들어, 정정 불가능한 코드 워드가 직면된 경우, 또는 모든 코드 워드가 수정되었고 재계산된 해시 값이 수신된 해시 값과 매칭되지 않는 경우, 트리거될 수 있다.
후자는, 예를 들어, 채널 디코딩 모듈이 기본 코드(underlying code)에 의해 제공되는 오류 수정 기능의 한계를 넘어 손상된, 수신된 코드 워드를 잘못 수정한 경우이다.
이러한 경우 중 하나가 발생되는 경우, 개별 코드 워드의 분석은 다음과 같다.
각 코드 워드에 대한 수정된 심볼의 수를 평가함으로써, 부분 프레임 손실 은닉을 위해 지정되는 비트스트림 부분의 하위 부분이 여전히 신뢰될 수 있는지 여부가 결정된다. 이를 위해, 주어진 수의 수정된 심볼을 갖는 유효한 코드 워드로 정정될 수 있는 랜덤 워드를 도출할 확률이 평가된다(예를 들어, 위험 값으로 지칭될 수 있음). 이러한 확률이 특정 임계값(예: 2^{-16})(예를 들어, 위험 임계값으로 지칭될 수 있음)을 초과하는 경우, 대응되는 비트스트림 영역은 손상된 것으로 표시되고, 그렇지 않으면 올바른 것으로 처리된다. 즉, 이것은, 부분 프레임 손실 은닉(손상된 것으로 표시된 코드 워드)으로 은닉되는 것으로 표시된 부분이 축소되는 점을 의미한다. 이것은, 부분적 프레임 손실 은닉을 위해 지정된 비트스트림의 부분 중 정확한 것으로 표시된 비트가 음향심리학적으로 더 중요한 신호 데이터를 나타내는 비트스트림의 비트와 함께 디코더(100)에 의해 사용될 수 있기 때문에 더 나은 오디오 품질로 이어진다.
도 4는 일 실시형태에 따른 코드 워드의 페이로드 데이터를 분석하기 위한 실시예를 예시한다.
도 4의 실시예에서는, 16개의 코드 워드(1~16번까지)가 표시되며, 십자형 블록(210 및 230)은 비트스트림의 더 민감한 부분에 대응되는 반면, 다른 블록(블록 220, 222, 223)은 부분 프레임 손실 은닉을 위해 지정된 덜 민감한 부분에 대응된다. 예시된 코드워드 7 내지 12 내에는, 수정된 심볼의 개수가 표시된다.
"1"까지의 수정된 심볼의 수는 임계값보다 더 낮은 오류 검출 확률을 남기고, "1"보다 더 높은 수정된 심볼의 수는 임계값보다 더 높은 오류 검출 확률을 남긴다고 가정될 수 있다.
도 4의 실시예에서, "1" 이하의 수를 갖는 코드 워드는 올바른 것으로 표시하고(코드 워드 7, 8, 9 및 12: 좌하단 대 우상단 형상), 나머지 코드 워드, 즉 "1"보다 큰 수를 가진 코드 워드는 손상된 것으로 표시된다(코드 워드: 10 및 11: 좌상단 대 우하단 모양)(도 4 참조). 도 4의 주어진 실시예에서, 이것은, 코드워드 7, 8, 9 및 12 내부에 코딩된 신호 부분이 여전히 디코딩될 수 있고, 코드워드 10 및 11 내부에 코딩된 신호 부분만이 부분 프레임 손실 은닉에 의해 은닉되어야 함을 의미한다.
실시예에서, 디코더(100)는, 예를 들어, 이전 프레임이 프레임 손실 은닉으로 은닉된 경우, 또는 또는 다음 5개의 이벤트(이벤트 1 내지 이벤트 5)에 대해, 전체 프레임 손실 은닉(FFLC)을 적용할 수 있다:
이벤트 1: 비트스트림 페이로드의 더 민감한 부분에 있는 비트가 손상될 가능성이 있는 경우.
이벤트 2: 현재 및 마지막 신호의 안정성이 0.5 미만인 경우, LC3에 대한 실시형태에서, 안정성은 다음과 같이 계산되는 안정성 인자 Θ에 의해 제공된다:
Figure pct00007
여기서:
Figure pct00008
현재 프레임의 스케일팩터 벡터(scalefactor vector)를 나타내고,
Figure pct00009
이전 프레임의 스케일팩터 벡터를 나타내고,
Figure pct00010
스케일팩터 벡터 내의 스케일팩터의 수를 나타내고,
Figure pct00011
0≤θ≤1에 의해서 경계가 지정된 안정성 인자를 나타내고,
Figure pct00012
스케일팩터 벡터에 대한 인덱스를 나타낸다.
이벤트 3: 안정성 인자가 0.5 이상인 경우, 그리고 더 민감한 비트스트림 페이로드 및 양자화된 스펙트럼에서 가장 높은 이용 가능한 스펙트럼 라인에서 전송되는 피치가 최대로 가능한 피치 주파수 또는 더 민감한 비트스트림 페이로드에서 전송된 피치 주파수(사용된 실시형태에 따라 다름)보다 더 작은 주파수를 나타내는 경우.
이벤트 4: 안정성 인자가 0.5 이상인 경우, 그리고 더 민감한 비트스트림 페이로드에서 전송되는 피치,및 덜 민감한 비트스트림 페이로드에서 복구될 수 없었던 제1 스펙트럼 빈인 kbe는 계산된 스펙트럼 빈 인덱스 kpeak보다 더 낮은 경우.
이러한 인덱스는 이전에 디코딩된 스펙트럼에서 가장 관련성이 높은 피크에 대응되고, 피크 검출기 알고리즘을 통해 결정된다. 피크 검출기의 구현은 다음의 예시적인 의사 코드에서 보여진다.
Figure pct00013
Figure pct00014
여기서:
k 스펙트럼 빈을 나타내고,
Figure pct00015
스펙트럼 라인의 수를 나타내고,
Figure pct00016
마지막 비FFLC 프레임의 디코딩된 스펙트럼을 나타낸다.
이벤트 5: 안정성 인자가 0.5 이상인 경우, 그리고 더 민감한 비트스트림 페이로드에서 피치가 전송되지 않고 마지막 양자화된 스펙트럼에서 계산된 부분 에너지 대 전체 에너지의 비율이 0.3보다 낮은 경우:
Figure pct00017
여기서:
k 스펙트럼 빈을 나타내고,
Figure pct00018
복원될 수 없었던 제1 스펙트럼 빈을 나타내고,
Figure pct00019
스펙트럼 라인의 수를 나타내고,
Figure pct00020
마지막 비FFLC 프레임의 양자화된 스펙트럼을 나타낸다.
5가지 이벤트 중 어느 것도 트리거되지 않거나 전체 프레임 손실 은닉으로 이전 프레임이 은닉되지 않았고 복원될 수 없었던 제1 스펙트럼 빈은 임계값(즉, 2 kHz의 주파수를 나타냄)보다 더 높은 경우, 부분 프레임 손실 은닉(PFLC)이 적용되어야 한다.
다음 예시적인 의사 코드는 위 설명을 나타낸다:
Figure pct00021
Figure pct00022
여기서:
prevBfi - 이전 프레임의 은닉 방법(적용된 경우)을 나타내고,
concealMode - FFLC이 적용되어야 하는지 또는 PFLC 이 적용되어야 하는지를 나타내고,
pitch_present - 현재 프레임에 피치가 존재하는지 여부를 나타내고,
pitchThresholdBin - PFLC를 수행하기 위해 적어도 사용 가능해야 하는 빈을 나타내고,
currPitchBin - 현재 피치를 나타내고,
maxPitchBin - 지원되는 가장 높은(최대) 피치 값을 나타내고,
대역폭 - 다섯 가지 조건을 분석하지 않기 위해서 적어도 사용 가능해야 하는 대역폭 빈을 나타내고,
Figure pct00023
- 복원될 수 없었던 제1 스펙트럼 빈
Figure pct00024
- 스펙트럼 라인의 수
Figure pct00025
- 마지막 비FFLC 프레임의 디코딩된 스펙트럼
Figure pct00026
- 마지막 비FFLC 프레임의 양자화된 스펙트럼.
다음에서, 소스 코딩에 따른 은닉 방법 선택을 위한 카르노 맵(Karnaugh-Map)이 설명된다.
어떤 은닉 방법이 적용되어야 하는지를 집합적으로 결정하는 다섯 가지 조건이 있다. 이들은 다음과 같이 논리 변수에 할당된다.
a = "현재 비트스트림 페이로드의 제1 부분은 음조 또는 하모닉 신호 성분을 인코딩하지 않는다"
b = "0으로부터 이전 양자화된 스펙트럼의 주파수 빈 kbe-1까지의 에너지 대 0으로부터 이전 양자화된 스펙트럼의 상부까지의 에너지 사이의 비율이 임계값 이상이다"
c = "안정성 인자가 임계값 이상이다"
d = "모든 주파수가 피치 주파수 또는 지원되는 최대 피치 주파수보다 더 작다"
e= "이전 신호 부분은 피크 임계값보다 더 큰 오디오 신호의 적어도 하나의 피크를 인코딩한다"
이러한 변수를 사용하여, 표 3에 표시된 바와 같이 32(=25) 셀 K-맵이 생성된다.
Figure pct00027
표 3은 은닉 방법 중 하나를 트리거하는 논리를 그래픽으로 보여주는 32 셀 K-맵을 예시한다
대응되는 부울식(Boolean equation)은 다음과 같다:
PFLC (1) = a'cd'e' + abc = c(a'd'e' + ab)
FFLC (0) = ab' + c' + a'e + a'd = ab'+ c' + a'(e+d)
일부 양태는 장치의 맥락에서 설명되었지만, 이러한 양태가 또한 대응되는 방법의 설명을 나타내며, 여기서 블록 또는 디바이스가 방법 단계, 또는 방법 단계의 피처에 대응된다는 점이 명확하다. 유사하게, 방법 단계의 맥락에서 설명 된 양태는 또한, 대응되는 장치의 대응되는 블록 또는 항목 또는 피처의 설명을 나타낸다. 방법 단계의 일부 또는 전부는, 예를 들어, 마이크로 프로세서, 프로그램 가능한 컴퓨터 또는 전자 회로와 같은 하드웨어 장치에 의해서(또는 사용하여) 수행될 수 있다. 일부 실시형태에서, 가장 중요한 방법 단계 중 하나 이상은 이러한 장치에 의해서 수행될 수 있다.
특정 구현 요구 사항에 따라, 본 발명의 실시형태는 하드웨어로 또는 소프트웨어로 또는 적어도 부분적으로 하드웨어로 또는 적어도 부분적으로 소프크웨어로 구현될 수 있다. 구현은, 각각의 방법이 수행되도록 프로그래밍 가능한 컴퓨터 시스템과 협력하는(또는 협력할 수 있는) 전자적으로 판독 가능한 제어 신호가 저장되어 있는 디지털 저장 매체, 예를 들어, 플로피 디스크, DVD, 블루레이(Blu-Ray), CD, ROM, PROM, EPROM, EEPROM 또는 FLASH 메모리를 사용하여 수행 될 수 있다. 따라서, 디지털 저장 매체는 컴퓨터 판독 가능할 수 있다.
본 발명에 따른 일부 실시형태는, 본원에 설명 된 방법 중 하나가 수행되도록 프로그래밍 가능한 컴퓨터 시스템과 협력할 수 있는 전자적으로 판독 가능한 제어 신호를 갖는 데이터 캐리어를 포함한다.
일반적으로, 본 발명의 실시형태는 프로그램 코드를 갖는 컴퓨터 프로그램 제품으로 구현될 수 있으며, 프로그램 코드는 컴퓨터 프로그램 제품이 컴퓨터에서 실행될 때 방법들 중 하나를 수행하도록 동작된다. 프로그램 코드는, 예를 들어, 기계 판독 가능 캐리어 상에 저장될 수 있다.
다른 실시형태는 기계 판독 가능 캐리어 상에 저장된, 본원에 설명 된 방법들 중 하나를 수행하기 위한 컴퓨터 프로그램을 포함한다.
바꾸어 말하면, 본 발명의 방법의 실시형태는, 컴퓨터 프로그램이 컴퓨터에서 실행될 때 본원에 설명 된 방법들 중 하나를 수행하기 위한 프로그램 코드를 갖는 컴퓨터 프로그램이다.
따라서, 본 발명의 방법의 추가 실시형태는 본원에 설명 된 방법들 중 하나를 수행하기 위한 컴퓨터 프로그램을 포함하는 데이터 캐리어(또는, 디지털 저장 매체, 또는 컴퓨터 판독 가능 매체)이다. 데이터 캐리어, 디지털 저장 매체 또는 기록 매체는 일반적으로 유형 및/또는 비일시적이다.
따라서 본 발명의 방법의 추가 실시형태는 본원에 설명 된 방법들 중 하나를 수행하기 위한 컴퓨터 프로그램을 나타내는 데이터 스트림 또는 신호 시퀀스이다. 데이터 스트림 또는 신호 시퀀스는, 예를 들어, 데이터 통신 연결을 통해, 예를 들어 인터넷을 통해 전송되도록 구성 될 수 있다.
추가 실시형태는 본원에 설명된 방법들 중 하나를 수행하도록 구성되거나 적응된 프로세싱 수단, 예를 들어 컴퓨터, 또는 프로그래밍 가능한 논리 디바이스를 포함한다.
추가 실시형태는 본원에 설명 된 방법들 중 하나를 수행하기 위한 컴퓨터 프로그램이 설치된 컴퓨터를 포함한다.
본 발명에 따른 추가 실시형태는 본원에 설명된 방법들 중 하나를 수행하기 위한 컴퓨터 프로그램을 수신기에(예를 들어, 전자적으로 또는 광학적으로) 전송하도록 구성된 장치 또는 시스템을 포함한다. 수신기는, 예를 들어, 컴퓨터, 모바일 디바이스, 메모리 디바이스 등일 수 있다. 장치 또는 시스템은, 예를 들어, 컴퓨터 프로그램을 수신기로 전송하기 위한 파일 서버를 포함할 수 있다.
일부 실시형태에서, 프로그래밍 가능 논리 디바이스(예를 들어, 필드 프로그래밍 가능 게이트 어레이)는 본원에 설명된 방법의 기능들 중 일부 또는 전부를 수행하기 위해서 사용될 수 있다. 일부 실시형태에서, 필드 프로그래밍 가능 게이트 어레이는 본원에 설명된 방법들 중 하나를 수행하기 위해 마이크로 프로세서와 협력할 수 있다. 일반적으로, 방법은 바람직하게는 임의의 하드웨어 장치에 의해 수행된다.
본원에 설명된 장치는 하드웨어 장치를 사용하여, 또는 컴퓨터를 사용하여, 또는 하드웨어 장치와 컴퓨터의 조합을 사용하여 구현될 수 있다.
본원에 설명된 방법은 하드웨어 장치를 사용하여, 또는 컴퓨터를 사용하여, 또는 하드웨어 장치와 컴퓨터의 조합을 사용하여 수행될 수 있다.
상술된 실시형태는 본 발명의 원리에 대한 예시일 뿐이다. 본원에 설명된 배열 및 세부 사항의 수정 및 변경이 당업자에게 명백할 것이라는 점이 이해된다. 따라서, 본원의 실시형태의 설명 및 해설에 의해 제시된 특정 세부 사항이 아니라 곧 이어질 특허청구범위에 의해서만 제한되는 것이 의도된다.
참고문헌:
[1] "ISO/IEC14496-3 MPEG-4 Information technology ― Coding of audio-visual objects - Part 3: Audio," 2009.
[2] R. Sperschneider, D. Homm and L.-H. Chambat, "Error Resilient Source Coding with Differential Variable Length Codes and its Application to MPEG Advance Audio Coding," in Audio Engineering Societey, Munich, 2002.
[3] E.-m. Oh, H.-s. Sung, K.-h. Choo and J.-h. Kim, "Method and apparatus to conceal error in decoded audio signal". Patent US8,798,172 B2, 22 Nov. 2007.
[4] P. Lauber and R. Sperschneider, "Error Concealment for Compressed Digital Audio," in Audio Engineering Society, 2001.

Claims (33)

  1. 신호의 신호 부분을 재구성하기 위해 프레임을 디코딩하기 위한 디코더(100)에 있어서,
    상기 신호 부분은 상기 프레임 내에서 인코딩되며, 상기 프레임은 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하며, 상기 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 상기 페이로드 비트 각각은 상기 비트스트림 페이로드 내의 위치를 나타내며,
    상기 디코더(100)는,
    상기 2개 이상의 리던던시 비트에 따라, 상기 비트스트림 페이로드가, 왜곡되거나, 또는 왜곡될 가능성이 있는 상기 페이로드 비트 중 하나 이상인 하나 이상의 손상된 비트를 포함하는지 여부를 검출하도록 구성된 채널 디코딩 모듈(110); 및
    소스 디코딩 모듈(120)을 포함하되,
    상기 채널 디코딩 모듈(110)이 상기 비트스트림 페이로드 내의 임의의 손상된 비트를 검출하지 않은 경우, 상기 소스 디코딩 모듈(120)은 상기 신호 부분을 재구성하기 위해 오류 은닉을 수행하지 않고 상기 비트스트림 페이로드를 디코딩하도록 구성되며,
    상기 채널 디코딩 모듈(110)이 상기 비트스트림 페이로드 내에서 상기 하나 이상의 손상된 비트를 검출한 경우, 상기 소스 디코딩 모듈(120)은, 상기 비트스트림 페이로드 내의 상기 하나 이상의 손상된 비트 중 적어도 하나의 위치에 따라, 그리고 상기 신호의 상기 신호 부분의 신호 특성에 따라 둘 이상의 오류 은닉 모드 중 선택된 오류 은닉 모드를 선택하도록 구성되고, 상기 신호 부분을 재구성하기 위해 상기 선택된 오류 은닉 모드에 따라 오류 은닉을 수행하도록 구성된, 디코더(100).
  2. 제1항에 있어서,
    상기 채널 디코딩 모듈(110)은 상기 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함하는지 여부를 검출하기 전에 상기 비트스트림 페이로드에 대한 오류 정정을 수행하도록 구성되는 오류 검출 및 오류 정정 모듈인, 디코더(100).
  3. 제1항 또는 제2항에 있어서,
    상기 2개 이상의 오류 은닉 모드 중 제1 오류 은닉 모드는 전체 프레임 손실 은닉 모드이며,
    상기 채널 디코딩 모듈(110)이, 상기 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 선택된 오류 은닉 모드가 상기 전체 프레임 손실 은닉 모드인 경우, 상기 소스 디코딩 모듈(120)은 상기 비트스트림 페이로드를 사용하지 않고 오류 은닉을 수행하도록 구성된, 디코더(100).
  4. 제3항에 있어서,
    상기 2개 이상의 오류 은닉 모드 중 제2 오류 은닉 모드는 부분 프레임 손실 은닉 모드이며,
    상기 채널 디코딩 모듈(110)이, 상기 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 선택된 오류 은닉 모드가 상기 부분 프레임 손실 은닉 모드인 경우, 상기 소스 디코딩 모듈(120)은, 상기 채널 디코딩 모듈(110)에 의해 상기 하나 이상의 손상된 비트로 표시되지 않은 상기 페이로드 비트의 다른 비트에 대한 오류 은닉을 수행하지 않으면서, 상기 다른 비트를 디코딩함으로써, 그리고 상기 채널 디코딩 모듈(110)에 의해 상기 하나 이상의 손상된 비트인 것으로 표시된 상기 하나 이상의 페이로드 비트에 대해 오류 은닉을 수행함으로써, 상기 디코딩된 신호를 얻도록 구성된, 디코더(100).
  5. 제4항에 있어서,
    상기 2개 이상의 오류 은닉 모드는 정확히 2개의 오류 은닉 모드를 포함하며,
    상기 정확히 2개의 오류 은닉 모드 중 제1 오류 은닉 모드는 상기 전체 프레임 손실 은닉 모드이며,
    상기 정확히 2개의 오류 은닉 모드 중 제2 오류 은닉 모드는 상기 부분 프레임 손실 은닉 모드인, 디코더(100).
  6. 제4항 또는 제5항에 있어서,
    상기 비트스트림 페이로드는 상기 비트스트림 페이로드의 복수의 페이로드 비트의 제1 부분으로, 그리고 상기 비트스트림 페이로드의 복수의 페이로드 비트의 제2 부분으로 분할되며,
    상기 채널 디코딩 모듈(110)이, 상기 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 적어도 하나를 포함하는 경우, 상기 소스 디코딩 모듈(120)은 상기 선택된 오류 은닉 모드로서 상기 전체 프레임 손실 은닉 모드를 선택하도록 구성되며,
    상기 채널 디코딩 모듈(110)이, 상기 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은 상기 신호의 상기 신호 부분의 상기 신호 특성에 따라 상기 선택된 오류 은닉 모드를 선택하도록 구성된, 디코더(100).
  7. 제6항에 있어서,
    상기 프레임은 현재 프레임이며, 상기 비트스트림 페이로드는 현재 비트스트림 페이로드이며, 상기 복수의 페이로드 비트는 복수의 현재 페이로드 비트이며, 상기 신호의 상기 신호 부분은 상기 신호의 현재 신호 부분이며, 상기 신호 특성은 현재 신호 특성이며,
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 상기 소스 디코딩 모듈(120)은 상기 현재 프레임의 상기 복수의 현재 페이로드 비트에 의해 인코딩되는 상기 신호의 상기 현재 신호 부분의 상기 현재 신호 특성에 따라, 그리고 이전 프레임의 이전 비트스트림 페이로드의 복수의 이전 페이로드 비트에 의해 인코딩되는 상기 신호의 이전 신호 부분의 이전 신호 특성에 따라, 2개 이상의 오류 은닉 모드 중 상기 선택된 오류 은닉 모드를 선택하도록 구성된, 디코더(100).
  8. 제7항에 있어서, 상기 디코더(100)는 오디오 디코더이며,
    상기 현재 비트스트림 페이로드의 복수의 현재 페이로드 비트에 의해 인코딩되는 상기 신호의 상기 현재 신호 부분은 오디오 신호의 현재 오디오 신호 부분이며,
    상기 이전 비트스트림 페이로드의 복수의 이전 페이로드 비트에 의해 인코딩되는 상기 신호의 상기 이전 신호 부분은 상기 오디오 신호의 이전 오디오 신호 부분이며,
    상기 현재 비트스트림 페이로드는 상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인을 인코딩하는, 디코더(100).
  9. 제8항에 있어서,
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은, 상기 이전 프레임이 전체 프레임 손실 은닉을 사용하여 은닉되었던 경우, 상기 전체 프레임 손실 은닉 모드를 상기 선택된 오류 은닉 모드로서 선택하도록 구성된, 디코더(100).
  10. 제8항에 있어서,
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은, 상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 임계 주파수보다 더 작거나 동일한 주파수를 나타내는 경우, 상기 선택된 오류 은닉 모드로서 상기 전체 프레임 손실 은닉 모드를 선택하도록 구성된, 디코더(100).
  11. 제8항에 있어서,
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은, 안정성 인자가 미리 정의된 임계값보다 더 작은 경우, 상기 선택된 오류 은닉 모드로서 상기 전체 프레임 손실 은닉 모드를 선택하도록 구성되며, 상기 안정성 인자는 상기 현재 오디오 신호 부분의, 그리고 상기 이전 오디오 신호 부분의 안정성을 나타낸, 디코더(100).
  12. 제8항에 있어서,
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은,
    상기 이전 프레임이 전체 프레임 손실 은닉을 사용하여 은닉되었을 경우, 또는
    안정성 인자가 미리 정의된 임계값보다 작은 경우,
    상기 선택된 오류 은닉 모드로서 상기 전체 프레임 손실 은닉 모드를 선택하도록 구성되며,
    상기 안정성 인자는 상기 현재 오디오 신호 부분의 그리고 상기 이전 오디오 신호 부분의 안정성을 나타내는, 디코더(100).
  13. 제11항 또는 제12항에 있어서,
    상기 미리 정의된 임계값은 0.5와 동일한, 디코더.
  14. 제8항 내지 제13항 중 한 항에 있어서,
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은,
    상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 임계 주파수보다 더 작거나 동일한 상기 주파수를 나타내는 경우, 그리고
    상기 현재 비트스트림 페이로드의 상기 제1 부분이 음조(tonal) 또는 하모닉(harmonic) 신호 성분을 인코딩하는 경우, 그리고
    상기 이전 신호 부분이, 피크 임계값보다 더 크고, 상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인에 의해 표시되는 모든 주파수보다 더 큰 주파수에 대응되는 상기 오디오 신호의 적어도 하나의 피크를 인코딩하는 경우,
    상기 선택된 오류 은닉 모드로서 상기 전체 프레임 손실 은닉 모드를 선택하도록 구성된, 디코더(100).
  15. 제14항에 있어서,
    상기 오디오 신호의 피치는 피치 주파수를 나타내며,
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은,
    상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 임계 주파수보다 더 작거나 동일한 상기 주파수를 나타내는 경우, 그리고
    상기 현재 비트스트림 페이로드의 상기 제1 부분이 음조 또는 하모닉 신호 성분을 인코딩하는 경우, 그리고
    상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인에 의해 표시되는 모든 주파수가 상기 피치 주파수보다 더 작은 경우,
    상기 선택된 오류 은닉 모드로서 상기 전체 프레임 손실 은닉 모드를 선택하도록 구성되거나, 또는
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은,
    상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 임계 주파수보다 더 작거나 동일한 상기 주파수를 나타내는 경우, 그리고
    상기 현재 비트스트림 페이로드의 상기 제1 부분이 음조 또는 하모닉 신호 성분을 인코딩하는 경우, 그리고
    상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인에 의해 표시되는 모든 주파수가 지원되는 최대 피치 주파수보다 더 작은 경우,
    상기 선택된 오류 은닉 모드로서 상기 전체 프레임 손실 은닉 모드를 선택하도록 구성된, 디코더(100).
  16. 제15항에 있어서,
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은, 상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 임계 주파수보다 더 작거나 동일한 상기 주파수를 나타내는 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 음조 또는 하모닉인 상기 오디오 신호의 신호 성분을 인코딩하지 않는 경우, 그리고 상기 이전 오디오 신호의 상기 이전 양자화된 스펙트럼의 0으로부터 주파수 빈 kbe-1까지의 에너지 대 상기 이전 오디오 신호의 상기 이전 양자화된 스펙트럼의 0으로부터 최고치의 에너지 사이의 비율이 비율 임계값보다 더 작은 경우, 상기 선택된 오류 은닉 모드로서 상기 전체 프레임 손실 은닉 모드를 선택하도록 구성되며, kbe는 복원될 수 없는 제1 프펙트럼 빈인, 디코더(100).
  17. 제16항에 있어서,
    상기 비율 임계치는 0.3인, 디코더(100).
  18. 제16항 또는 제17항에 있어서,
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은,
    상기 이전 프레임이 전체 프레임 손실 은닉을 사용하여 은닉되지 않았을 경우, 그리고
    상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 임계 주파수보다 더 큰 주파수를 나타내는 경우,
    상기 선택된 오류 은닉 모드로서 상기 부분 프레임 손실 은닉 모드를 선택하도록 구성된, 디코더(100).
  19. 제18항에 있어서,
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은,
    상기 이전 프레임이 전체 프레임 손실 은닉을 사용하여 은닉되지 않았을 경우, 그리고
    상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 임계 주파수보다 더 큰 상기 주파수를 나타내는 경우, 그리고
    상기 안정성 인자가 상기 미리 정의된 임계값보다 더 크거나 동일한 경우, 그리고
    상기 현재 비트스트림 페이로드의 상기 제1 부분이 음조 또는 하모닉인 상기 오디오 신호의 신호 성분을 인코딩하지 않는 경우, 그리고 상기 이전 오디오 신호의 이전 양자화된 스펙트럼의 0으로부터 주파수 빈 kbe-1까지의 에너지 대 상기 이전 오디오 신호의 이전 양자화된 스펙트럼의 0으로부터 최고치의 에너지 사이의 비율이 상기 비율 임계값보다 더 크거나 동일한 경우,
    상기 선택된 오류 은닉 모드로서 상기 부분 프레임 손실 은닉 모드를 선택하도록 구성된, 디코더(100).
  20. 제18항 또는 제19항에 있어서,
    상기 채널 디코딩 모듈(110)이, 상기 현재 비트스트림 페이로드가 상기 하나 이상의 손상된 비트를 포함한다고 표시한 경우, 그리고 상기 현재 비트스트림 페이로드의 상기 제1 부분이 상기 하나 이상의 손상된 비트 중 어느 것도 포함하지 않는 경우, 상기 소스 디코딩 모듈(120)은,
    상기 이전 프레임이 전체 프레임 손실 은닉을 사용하여 은닉되지 않았을 경우, 그리고
    상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 가장 높은 스펙트럼 라인이 상기 임계 주파수보다 더 큰 상기 주파수를 나타내는 경우, 그리고
    상기 안정성 인자가 상기 미리 정의된 임계값보다 더 크거나 동일한 경우, 그리고
    상기 현재 비트스트림 페이로드의 상기 제1 부분이 음조 또는 하모닉 신호 성분을 인코딩하는 경우, 그리고 상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 상기 가장 높은 스펙트럼 라인이 상기 피치 주파수보다 더 큰 주파수를 나타내는 경우, 그리고 상기 이전 신호 부분이, 상기 피크 임계값보다 더 크고, 상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인에 의해 표시되는 모든 주파수보다 더 큰 상기 신호에 대응되는 상기 오디오 신호의 임의의 피크를 인코딩하지 않는 경우,
    상기 선택된 오류 은닉 모드로서 상기 부분 프레임 손실 은닉 모드를 선택하도록 구성된, 디코더(100).
  21. 제8항 내지 제20항 중 한 항에 있어서,
    상기 선택된 오류 은닉 모드가 상기 부분 프레임 손실 은닉 모드인 경우, 상기 소스 디코딩 모듈(120)은, 상기 비트스트림 페이로드의 상기 제2 부분의 복수의 코드 워드의 각각의 코드 워드에 대해, 상기 코드 워드의 수정된 심볼의 수에 따라, 상기 코드 워드에 의해 표현되는 상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 라인에 대해 오류 은닉을 수행할지 여부를, 그리고 상기 소스 디코딩 모듈(120)이 상기 오류 은닉이 수행되어야 한다고 결정한 상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 상기 라인에 대해 오류 은닉을 수행할지 여부를 결정하도록 구성된, 디코더(100).
  22. 제21항에 있어서,
    상기 비트스트림 페이로드의 상기 제2 부분의 복수의 코드 워드의 각각의 코드 워드에 대해, 상기 소스 디코딩 모듈(120)은, 상기 코드 워드가 손상될 확률의 근사치를 나타내는 위험 값을 결정하도록, 그리고 상기 위험 값이 위험 임계값보다 더 큰지 여부를 결정하도록 구성된, 디코더(100).
  23. 제21항 또는 제22항에 있어서,
    상기 위험 값이 상기 위험 임계값보다 더 큰 경우, 상기 소스 디코딩 모듈(120)은, 상기 코드 워드에 의해 표현되는 상기 현재 오디오 신호 부분의 복수의 스펙트럼 라인 중 라인에 대해 오류 은닉을 수행하도록 구성된, 디코더(100).
  24. 제23항에 있어서,
    상기 위험 임계값은 2-16인, 디코더(100).
  25. 제21항 내지 제24항 중 한 항에 있어서,
    상기 소스 디코딩 모듈(120)은 상기 부분 프레임 손실 오류 은닉 모드에서 상기 코드 워드에 대해 상기 오류 은닉을 수행하도록 구성된, 디코더(100).
  26. 제1항 내지 제25항 중 한 항에 있어서,
    상기 채널 디코딩 모듈(110)은,
    상기 채널 디코딩 모듈(110)이 상기 비트스트림 페이로드 내의 정정 불가능한 코드 워드를 직면하는 경우, 그리고/또는
    상기 채널 디코딩 모듈(110)이, 상기 비트스트림 페이로드의 복수의 코드 워드에 대한 오류 정정을 수행한 후, 상기 오류 정정 후의 상기 복수의 코드 워드에 의존하는, 수신된 해시 값과 다른, 재계산된 해시 값을 결정하는 경우,
    상기 비트스트림 페이로드가 하나 이상의 손상된 비트를 포함하는 점을 검출하도록 구성된, 디코더(100).
  27. 시스템(190)에 있어서,
    프레임 내의 신호의 신호 부분을 인코딩하기 위한 인코더(150) - 상기 인코더(150)는, 상기 프레임이 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하게끔 상기 프레임을 생성하도록 구성되며, 상기 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 상기 페이로드 비트 각각은 상기 비트스트림 페이로드 내의 위치를 나타냄 -; 및
    제1항 내지 제26항 중 한 항에 따른 디코더(100)를 포함하는, 시스템(190).
  28. 인코더(150)에 있어서,
    프레임 내의 신호의 신호 부분을 인코딩하기 위한 소스 인코딩 모듈(160) - 상기 소스 인코딩 모듈(160)은, 상기 프레임이 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하게끔 상기 프레임을 생성하도록 구성되며, 상기 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 상기 페이로드 비트 각각은 상기 비트스트림 페이로드 내의 위치를 나타내며, 상기 소스 인코딩 모듈(160)에 의해 생성되는 상기 프레임은 제1항 내지 제26항 중 한 항에 따른 디코더(100)에 의해 처리되기에 적합함 -; 및
    상기 비트스트림 페이로드에 따라 상기 2개 이상의 리던던시 비트를 생성하도록 구성된 채널 인코딩 모듈(170)을 포함하는, 인코더(150).
  29. 신호의 신호 부분을 재구성하기 위해 프레임을 디코딩하기 위한 방법에 있어서,
    상기 신호 부분은 상기 프레임 내에서 인코딩되며, 상기 프레임은 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하며, 상기 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 상기 페이로드 비트 각각은 상기 비트스트림 페이로드 내의 위치를 나타내며,
    상기 방법는,
    상기 2개 이상의 리던던시 비트에 따라, 상기 비트스트림 페이로드가, 왜곡되거나, 또는 왜곡될 가능성이 있는 상기 페이로드 비트 중 하나 이상인 하나 이상의 손상된 비트를 포함하는지 여부를 검출하는 단계,
    상기 비트스트림 페이로드 내에서 손상된 비트가 검출되지 않은 경우, 상기 신호 부분을 재구성하기 위해 오류 은닉을 수행하지 않고 상기 비트스트림 페이로드를 디코딩하는 단계, 및
    상기 비트스트림 페이로드 내에서 하나 이상의 손상된 비트가 검출된 경우, 상기 비트스트림 페이로드 내의 상기 하나 이상의 손상된 비트 중 적어도 하나의 위치에 따라, 그리고 상기 신호의 상기 신호 부분의 신호 특성에 따라 둘 이상의 오류 은닉 모드 중 선택된 오류 은닉 모드를 선택하고, 상기 신호 부분을 재구성하기 위해 상기 선택된 오류 은닉 모드에 따라 오류 은닉을 수행하는 단계를 포함하는, 방법.
  30. 방법에 있어서,
    프레임 내의 신호의 신호 부분을 인코딩하는 단계 - 상기 프레임이 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하도록 상기 프레임이 생성되며, 상기 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 상기 페이로드 비트 각각은 상기 비트스트림 페이로드 내의 위치를 나타냄 - ; 및
    상기 프레임을 사용하여 제29항의 디코딩을 위한 방법을 수행하는 단계를 포함하는, 방법.
  31. 프레임 내 신호의 신호 부분을 인코딩하기 위한 방법에 있어서,
    상기 프레임이 비트스트림 페이로드 및 2개 이상의 리던던시 비트를 포함하도록 프레임을 생성하는 단계 - 상기 비트스트림 페이로드는 복수의 페이로드 비트를 포함하며, 상기 페이로드 비트 각각은 상기 비트스트림 페이로드 내의 위치를 나타내며, 상기 프레임은 제29항의 방법에 의해 디코딩되기에 적합함 -; 및
    상기 비트스트림 페이로드에 따라 2개 이상의 리던던시 비트를 생성하는 단계를 포함하는, 방법.
  32. 컴퓨터 또는 신호 프로세서에서 실행될 때 제29항 내지 제31항 중 한 항에 따른 방법을 실시하기 위한 컴퓨터 프로그램.
  33. 제31항의 방법에 따라 생성된 프레임.
KR1020217028182A 2019-02-13 2020-02-12 오류 은닉 모드를 선택하는 디코더와 디코딩 방법, 및 인코더와 인코딩 방법 KR20210143177A (ko)

Applications Claiming Priority (15)

Application Number Priority Date Filing Date Title
EP19157047.2 2019-02-13
EP19157047 2019-02-13
EP19157036.5 2019-02-13
EP19156997.9A EP3697005A1 (en) 2019-02-13 2019-02-13 Multi-mode channel coding with mode specific coloration sequences
EP19157042 2019-02-13
EP19156997.9 2019-02-13
EP19157042.3 2019-02-13
EP19157036 2019-02-13
PCT/EP2019/065205 WO2020164752A1 (en) 2019-02-13 2019-06-11 Audio transmitter processor, audio receiver processor and related methods and computer programs
EPPCT/EP2019/065209 2019-06-11
EPPCT/EP2019/065172 2019-06-11
EPPCT/EP2019/065205 2019-06-11
PCT/EP2019/065172 WO2020164751A1 (en) 2019-02-13 2019-06-11 Decoder and decoding method for lc3 concealment including full frame loss concealment and partial frame loss concealment
PCT/EP2019/065209 WO2020164753A1 (en) 2019-02-13 2019-06-11 Decoder and decoding method selecting an error concealment mode, and encoder and encoding method
PCT/EP2020/053618 WO2020165263A2 (en) 2019-02-13 2020-02-12 Decoder and decoding method selecting an error concealment mode, and encoder and encoding method

Publications (1)

Publication Number Publication Date
KR20210143177A true KR20210143177A (ko) 2021-11-26

Family

ID=66776368

Family Applications (7)

Application Number Title Priority Date Filing Date
KR1020237034158A KR20230147747A (ko) 2019-02-13 2020-02-12 모드 특이적 컬러레이션 시퀀스가 있는 멀티-모드 채널 코딩
KR1020217029147A KR102637530B1 (ko) 2019-02-13 2020-02-12 오디오 송신기 프로세서, 오디오 수신기 프로세서 및 관련 방법 및 컴퓨터 프로그램
KR1020217029146A KR102640740B1 (ko) 2019-02-13 2020-02-12 모드 특이적 컬러레이션 시퀀스가 있는 멀티-모드 채널 코딩
KR1020237034159A KR102662188B1 (ko) 2019-02-13 2020-02-12 모드 특이적 컬러레이션 시퀀스가 있는 멀티-모드 채널 코딩
KR1020217028812A KR20210125534A (ko) 2019-02-13 2020-02-12 전 프레임 손실 은닉 및 부분 프레임 손실 은닉을 포함하는 lc3 은닉을 위한 디코더 및 디코딩 방법
KR1020217028182A KR20210143177A (ko) 2019-02-13 2020-02-12 오류 은닉 모드를 선택하는 디코더와 디코딩 방법, 및 인코더와 인코딩 방법
KR1020237021253A KR20230098370A (ko) 2019-02-13 2020-02-12 오디오 송신기 프로세서, 오디오 수신기 프로세서 및 관련 방법 및 컴퓨터 프로그램

Family Applications Before (5)

Application Number Title Priority Date Filing Date
KR1020237034158A KR20230147747A (ko) 2019-02-13 2020-02-12 모드 특이적 컬러레이션 시퀀스가 있는 멀티-모드 채널 코딩
KR1020217029147A KR102637530B1 (ko) 2019-02-13 2020-02-12 오디오 송신기 프로세서, 오디오 수신기 프로세서 및 관련 방법 및 컴퓨터 프로그램
KR1020217029146A KR102640740B1 (ko) 2019-02-13 2020-02-12 모드 특이적 컬러레이션 시퀀스가 있는 멀티-모드 채널 코딩
KR1020237034159A KR102662188B1 (ko) 2019-02-13 2020-02-12 모드 특이적 컬러레이션 시퀀스가 있는 멀티-모드 채널 코딩
KR1020217028812A KR20210125534A (ko) 2019-02-13 2020-02-12 전 프레임 손실 은닉 및 부분 프레임 손실 은닉을 포함하는 lc3 은닉을 위한 디코더 및 디코딩 방법

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020237021253A KR20230098370A (ko) 2019-02-13 2020-02-12 오디오 송신기 프로세서, 오디오 수신기 프로세서 및 관련 방법 및 컴퓨터 프로그램

Country Status (13)

Country Link
US (5) US20210366498A1 (ko)
EP (7) EP3925103A1 (ko)
JP (7) JP7472154B2 (ko)
KR (7) KR20230147747A (ko)
CN (3) CN113491079A (ko)
AU (8) AU2020223488A1 (ko)
BR (4) BR112021015608A2 (ko)
CA (7) CA3129610A1 (ko)
MX (4) MX2021009731A (ko)
SG (4) SG11202108672XA (ko)
TW (4) TWI785309B (ko)
WO (3) WO2020164752A1 (ko)
ZA (4) ZA202105721B (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018178877A1 (en) 2017-03-27 2018-10-04 Clearpath Robotics, Inc. Systems and methods for autonomous lineside parts delivery to an assembly line process
CN112151044A (zh) * 2020-09-23 2020-12-29 北京百瑞互联技术有限公司 在lc3音频编码器中自动调节蓝牙播放设备频响曲线的方法、装置及存储介质
CN112735446B (zh) * 2020-12-30 2022-05-17 北京百瑞互联技术有限公司 在lc3音频码流中添加额外信息的方法、系统及介质
US20220342582A1 (en) * 2021-04-27 2022-10-27 Microchip Technology Inc. System and method for double data rate (ddr) chip-kill recovery
CN112992160B (zh) * 2021-05-08 2021-07-27 北京百瑞互联技术有限公司 一种音频错误隐藏方法及装置
US11934696B2 (en) 2021-05-18 2024-03-19 Microchip Technology Inc. Machine learning assisted quality of service (QoS) for solid state drives
US20230326473A1 (en) * 2022-04-08 2023-10-12 Digital Voice Systems, Inc. Tone Frame Detector for Digital Speech

Family Cites Families (101)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NL8402411A (nl) * 1984-08-02 1986-03-03 Philips Nv Inrichting voor het korrigeren en maskeren van fouten in een informatiestroom, en weergeeftoestel voor het weergeven van beeld en/of geluid voorzien van zo een inrichting.
JP2998254B2 (ja) * 1990-04-17 2000-01-11 松下電器産業株式会社 可変長符号化データの伝送方法
EP0453229B1 (en) * 1990-04-17 1997-06-18 Matsushita Electric Industrial Co., Ltd. Method for transmission of variable length code
US5230003A (en) * 1991-02-08 1993-07-20 Ericsson-Ge Mobile Communications Holding, Inc. Decoding system for distinguishing different types of convolutionally-encoded signals
JP2746033B2 (ja) 1992-12-24 1998-04-28 日本電気株式会社 音声復号化装置
JP3171973B2 (ja) * 1993-01-07 2001-06-04 株式会社東芝 音声符号化の誤り制御方法
JP3328093B2 (ja) 1994-07-12 2002-09-24 三菱電機株式会社 エラー訂正装置
US6104754A (en) 1995-03-15 2000-08-15 Kabushiki Kaisha Toshiba Moving picture coding and/or decoding systems, and variable-length coding and/or decoding system
JP2003289539A (ja) 1995-03-15 2003-10-10 Toshiba Corp 動画像符号化装置および方法
EP1802129A3 (en) 1995-03-15 2008-10-22 Kabushiki Kaisha Toshiba Moving picture coding and/or decoding systems
WO1997011535A1 (en) * 1995-09-22 1997-03-27 Pacific Communication Sciences, Inc. Cellular communication system with multiple code rates
US6415398B1 (en) 1995-09-29 2002-07-02 Kabushiki Kaisha Toshiba Coding system and decoding system
GB2311699B (en) * 1996-03-29 2000-09-20 Nokia Mobile Phones Ltd Method and apparatus for digital communication
JP3583551B2 (ja) * 1996-07-01 2004-11-04 松下電器産業株式会社 誤り補償装置
JPH10233692A (ja) * 1997-01-16 1998-09-02 Sony Corp オーディオ信号符号化装置および符号化方法並びにオーディオ信号復号装置および復号方法
JP3184868B2 (ja) * 1997-06-05 2001-07-09 株式会社日立製作所 Ｗｅｂページの真正性確認システム
US6279133B1 (en) * 1997-12-31 2001-08-21 Kawasaki Steel Corporation Method and apparatus for significantly improving the reliability of multilevel memory architecture
US6405338B1 (en) * 1998-02-11 2002-06-11 Lucent Technologies Inc. Unequal error protection for perceptual audio coders
US6256487B1 (en) 1998-09-01 2001-07-03 Telefonaktiebolaget Lm Ericsson (Publ) Multiple mode transmitter using multiple speech/channel coding modes wherein the coding mode is conveyed to the receiver with the transmitted signal
JP2000123083A (ja) * 1998-10-15 2000-04-28 Sony Corp 情報提供システムおよび方法、並びに提供媒体
AU754877B2 (en) * 1998-12-28 2002-11-28 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Method and devices for coding or decoding an audio signal or bit stream
DE19907728C2 (de) 1999-02-23 2001-03-01 Fraunhofer Ges Forschung Vorrichtung und Verfahren zum Erzeugen eines Datenstroms und Vorrichtung und Verfahren zum Lesen eines Datenstroms
FI107676B (fi) * 1999-06-21 2001-09-14 Nokia Mobile Phones Ltd Menetelmä ja järjestely tietyn signaalinkäsittelymetodin käyttämiseksi informaation välittämiseen
US6570509B2 (en) * 2000-03-03 2003-05-27 Motorola, Inc. Method and system for encoding to mitigate decoding errors in a receiver
EP1199709A1 (en) * 2000-10-20 2002-04-24 Telefonaktiebolaget Lm Ericsson Error Concealment in relation to decoding of encoded acoustic signals
US6810078B2 (en) * 2000-12-08 2004-10-26 Prairiecomm, Inc. Blind rate determination
US6970506B2 (en) 2001-03-05 2005-11-29 Intervideo, Inc. Systems and methods for reducing frame rates in a video data stream
US6694474B2 (en) * 2001-03-22 2004-02-17 Agere Systems Inc. Channel coding with unequal error protection for multi-mode source coded information
EP1471756B8 (en) * 2002-01-31 2012-02-15 Research in Motion Limited Information communication method
US7266750B1 (en) * 2002-07-10 2007-09-04 Maxtor Corporation Error recovery strategies for iterative decoders
US7536305B2 (en) * 2002-09-04 2009-05-19 Microsoft Corporation Mixed lossless audio compression
US6985856B2 (en) * 2002-12-31 2006-01-10 Nokia Corporation Method and device for compressed-domain packet loss concealment
US7356748B2 (en) * 2003-12-19 2008-04-08 Telefonaktiebolaget Lm Ericsson (Publ) Partial spectral loss concealment in transform codecs
WO2005086436A1 (ja) * 2004-03-03 2005-09-15 Mitsubishi Denki Kabushiki Kaisha パケット転送装置、パケット転送ネットワークシステム、および、端末装置
CN1989548B (zh) 2004-07-20 2010-12-08 松下电器产业株式会社 语音解码装置及补偿帧生成方法
US7738561B2 (en) * 2004-11-16 2010-06-15 Industrial Technology Research Institute MPEG-4 streaming system with adaptive error concealment
KR20060101889A (ko) * 2005-03-22 2006-09-27 엘지전자 주식회사 디지털 오디오의 신호 처리 방법 및 장치
JP4261506B2 (ja) * 2005-03-31 2009-04-30 株式会社東芝 無線通信装置及び適法制御方法
US7177804B2 (en) 2005-05-31 2007-02-13 Microsoft Corporation Sub-band voice codec with multi-stage codebooks and redundant coding
US7411528B2 (en) * 2005-07-11 2008-08-12 Lg Electronics Co., Ltd. Apparatus and method of processing an audio signal
US7623725B2 (en) * 2005-10-14 2009-11-24 Hewlett-Packard Development Company, L.P. Method and system for denoising pairs of mutually interfering signals
CN101331733B (zh) 2005-12-16 2011-12-07 杜比瑞典公司 用于使用后续数据帧中的数据来产生和解释具有一系列段的数据流的设备和方法
WO2007084475A2 (en) * 2006-01-17 2007-07-26 Thomson Licensing Methods and apparatus for low complexity error resilient motion estimation and coding mode selection
KR100763207B1 (ko) 2006-05-03 2007-10-04 삼성전자주식회사 비압축 ａⅴ 데이터를 송수신하는 방법, 장치, 및 전송프레임 구조
US8798172B2 (en) * 2006-05-16 2014-08-05 Samsung Electronics Co., Ltd. Method and apparatus to conceal error in decoded audio signal
US7610195B2 (en) 2006-06-01 2009-10-27 Nokia Corporation Decoding of predictively coded data using buffer adaptation
EP1901496B1 (en) 2006-09-12 2010-09-01 Panasonic Corporation Link adaptation dependent on control signaling
KR101292771B1 (ko) * 2006-11-24 2013-08-16 삼성전자주식회사 오디오 신호의 오류은폐방법 및 장치
KR100862662B1 (ko) * 2006-11-28 2008-10-10 삼성전자주식회사 프레임 오류 은닉 방법 및 장치, 이를 이용한 오디오 신호복호화 방법 및 장치
KR101291193B1 (ko) * 2006-11-30 2013-07-31 삼성전자주식회사 프레임 오류은닉방법
CN101569198A (zh) * 2007-05-07 2009-10-28 松下电器产业株式会社 解码装置以及解码方法
US20080301536A1 (en) * 2007-05-31 2008-12-04 Interdigital Technology Corporation Channel coding and rate matching for lte control channels
CN100524462C (zh) 2007-09-15 2009-08-05 华为技术有限公司 对高带信号进行帧错误隐藏的方法及装置
CN101261833B (zh) * 2008-01-24 2011-04-27 清华大学 一种使用正弦模型进行音频错误隐藏处理的方法
US8301440B2 (en) * 2008-05-09 2012-10-30 Broadcom Corporation Bit error concealment for audio coding systems
JP2009276890A (ja) 2008-05-13 2009-11-26 Hitachi Systems & Services Ltd データ通信の誤り検出方法
KR101228165B1 (ko) * 2008-06-13 2013-01-30 노키아 코포레이션 프레임 에러 은폐 방법, 장치 및 컴퓨터 판독가능한 저장 매체
WO2010000303A1 (en) * 2008-06-30 2010-01-07 Nokia Corporation Speech decoder with error concealment
KR101250309B1 (ko) 2008-07-11 2013-04-04 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 에일리어싱 스위치 기법을 이용하여 오디오 신호를 인코딩/디코딩하는 장치 및 방법
PL2304719T3 (pl) * 2008-07-11 2017-12-29 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Koder audio, sposoby dostarczania strumienia audio oraz program komputerowy
KR101756834B1 (ko) 2008-07-14 2017-07-12 삼성전자주식회사 오디오/스피치 신호의 부호화 및 복호화 방법 및 장치
EP2329654B1 (en) * 2008-09-26 2014-08-06 Telegent Systems, Inc. Devices of digital video reception and output having error detection and concealment circuitry and techniques
TWI580272B (zh) 2009-01-30 2017-04-21 英特矽爾美國有限公司 混合格式媒體傳輸的系統及方法
EP2408132A4 (en) * 2009-03-09 2014-07-09 Fujitsu Ltd DATA TRANSFER DEVICE AND DATA TRANSFER DEVICE CONTROL METHOD
US8300979B2 (en) * 2009-07-29 2012-10-30 Hewlett-Packard Development Company, L.P. Method and system for robust universal denoising of noisy data sets
US8625692B2 (en) * 2009-09-28 2014-01-07 Samsung Electronics Co., Ltd. Transmission/reception apparatus and method for improving throughput in a multi-input multi-output communication system
RU2591011C2 (ru) * 2009-10-20 2016-07-10 Фраунхофер-Гезелльшафт цур Фёрдерунг дер ангевандтен Форшунг Е.Ф. Кодер аудиосигнала, декодер аудиосигнала, способ кодирования или декодирования аудиосигнала с удалением алиасинга (наложения спектров)
US8428959B2 (en) * 2010-01-29 2013-04-23 Polycom, Inc. Audio packet loss concealment by transform interpolation
EP2362658A1 (en) * 2010-02-26 2011-08-31 Research In Motion Limited Encoding and decoding methods and devices employing dual codesets
EP2614592B1 (en) * 2010-09-09 2018-06-27 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Entropy encoding and decoding scheme
CN102034478B (zh) * 2010-11-17 2013-10-30 南京邮电大学 基于压缩感知和信息隐藏的语音保密通信系统设计方法
BR112013020324B8 (pt) * 2011-02-14 2022-02-08 Fraunhofer Ges Forschung Aparelho e método para supressão de erro em fala unificada de baixo atraso e codificação de áudio
CN102163430B (zh) * 2011-05-06 2012-09-26 中国科学技术大学苏州研究院 采用信息隐藏技术进行amr-wb语音编码或解码的方法
CN103688306B (zh) * 2011-05-16 2017-05-17 谷歌公司 对被编码为连续帧序列的音频信号进行解码的方法和装置
JP2012242785A (ja) * 2011-05-24 2012-12-10 Sony Corp 信号処理装置、信号処理方法、およびプログラム
KR102172279B1 (ko) 2011-11-14 2020-10-30 한국전자통신연구원 스케일러블 다채널 오디오 신호를 지원하는 부호화 장치 및 복호화 장치, 상기 장치가 수행하는 방법
US9203757B2 (en) * 2012-03-22 2015-12-01 Texas Instruments Incorporated Network throughput using multiple reed-solomon blocks
PL2874149T3 (pl) * 2012-06-08 2024-01-29 Samsung Electronics Co., Ltd. Sposób i urządzenie do ukrywania błędu ramki oraz sposób i urządzenie do dekodowania audio
US9823745B1 (en) * 2012-08-30 2017-11-21 Atheer, Inc. Method and apparatus for selectively presenting content
US10147232B2 (en) * 2012-08-30 2018-12-04 Atheer, Inc. Method and apparatus for selectively presenting content
WO2014045739A1 (ja) * 2012-09-19 2014-03-27 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及び画像処理プログラム
CN107481725B (zh) 2012-09-24 2020-11-06 三星电子株式会社 时域帧错误隐藏设备和时域帧错误隐藏方法
KR101726205B1 (ko) 2012-11-07 2017-04-12 돌비 인터네셔널 에이비 감소된 복잡성 변환기 ｓｎｒ 계산
TWM487509U (zh) * 2013-06-19 2014-10-01 杜比實驗室特許公司 音訊處理設備及電子裝置
CA2916150C (en) 2013-06-21 2019-06-18 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Apparatus and method realizing improved concepts for tcx ltp
MX355091B (es) * 2013-10-18 2018-04-04 Fraunhofer Ges Forschung Concepto para codificar una señal de audio y decodificar una señal de audio usando información de conformación espectral relacionada con la voz.
PT3285254T (pt) 2013-10-31 2019-07-09 Fraunhofer Ges Forschung Descodificador de áudio e método para fornecer uma informação de áudio descodificada utilizando uma ocultação de erro com base num sinal de excitação no domínio de tempo
EP2922056A1 (en) * 2014-03-19 2015-09-23 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus, method and corresponding computer program for generating an error concealment signal using power compensation
NO2780522T3 (ko) 2014-05-15 2018-06-09
CN104021769B (zh) * 2014-05-30 2016-06-15 京东方科技集团股份有限公司 一种移位寄存器、栅线集成驱动电路及显示屏
TWI602172B (zh) * 2014-08-27 2017-10-11 弗勞恩霍夫爾協會 使用參數以加強隱蔽之用於編碼及解碼音訊內容的編碼器、解碼器及方法
KR102547480B1 (ko) 2014-12-09 2023-06-26 돌비 인터네셔널 에이비 Ｍｄｃｔ-도메인 에러 은닉
US20160171740A1 (en) 2014-12-15 2016-06-16 Calay Venture S.à r.l. Real-time method for collaborative animation
US10756997B2 (en) 2015-09-28 2020-08-25 Cybrook Inc. Bandwidth adjustment for real-time video transmission
WO2017081874A1 (ja) 2015-11-13 2017-05-18 株式会社日立国際電気 音声通信システム
WO2017129270A1 (en) 2016-01-29 2017-08-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for improving a transition from a concealed audio signal portion to a succeeding audio signal portion of an audio signal
CN109313905B (zh) * 2016-03-07 2023-05-23 弗劳恩霍夫应用研究促进协会 隐藏音频帧丢失的错误隐藏单元、音频解码器及相关方法
CN109155134B (zh) * 2016-03-07 2023-05-23 弗劳恩霍夫应用研究促进协会 隐藏音频帧丢失的错误隐藏单元、音频解码器和相关方法
BR112018067944B1 (pt) * 2016-03-07 2024-03-05 Fraunhofer - Gesellschaft Zur Förderung Der Angewandten Forschung E.V Unidade de ocultação de erro, método de ocultação de erro,decodificador de áudio, codificador de áudio, método para fornecer uma representação de áudio codificada e sistema
EP3273602B1 (en) * 2016-07-19 2022-01-26 MediaTek Inc. Low complexity rate matching design for polar codes
US10312945B2 (en) * 2017-02-13 2019-06-04 Lg Electronics Inc. Channel coding method using concatenated code structure and apparatus therefor

Also Published As

Publication number Publication date
KR20230098370A (ko) 2023-07-03
CA3129610A1 (en) 2020-08-20
JP2023145493A (ja) 2023-10-11
KR102640740B1 (ko) 2024-02-27
KR102662188B1 (ko) 2024-05-03
EP3924963A1 (en) 2021-12-22
JP7358490B2 (ja) 2023-10-10
ZA202105722B (en) 2022-07-27
TWI748339B (zh) 2021-12-01
MX2021009731A (es) 2021-09-08
KR20230147747A (ko) 2023-10-23
TWI745862B (zh) 2021-11-11
AU2020220383C1 (en) 2023-07-06
WO2020164753A1 (en) 2020-08-20
KR20210125555A (ko) 2021-10-18
JP2022520609A (ja) 2022-03-31
WO2020164752A1 (en) 2020-08-20
US20210375295A1 (en) 2021-12-02
SG11202108673QA (en) 2021-09-29
KR20210125534A (ko) 2021-10-18
AU2023204176A1 (en) 2023-07-20
JP7472154B2 (ja) 2024-04-22
KR20210118948A (ko) 2021-10-01
AU2023226770A1 (en) 2023-09-28
EP4109444A1 (en) 2022-12-28
BR112021016022A2 (pt) 2021-10-05
JP2022521487A (ja) 2022-04-08
CN113491080A (zh) 2021-10-08
AU2020221993A1 (en) 2021-10-07
BR112021015608A2 (pt) 2021-10-05
TW202101426A (zh) 2021-01-01
US20230274750A1 (en) 2023-08-31
AU2020221602A1 (en) 2021-10-07
CA3129616A1 (en) 2020-08-20
ZA202105721B (en) 2022-07-27
AU2023204659A1 (en) 2023-08-03
WO2020164751A1 (en) 2020-08-20
JP2023175750A (ja) 2023-12-12
JP2022520608A (ja) 2022-03-31
EP4369334A2 (en) 2024-05-15
BR112021015533A2 (pt) 2021-10-05
TW202044779A (zh) 2020-12-01
AU2020220383B2 (en) 2023-04-13
SG11202108674TA (en) 2021-09-29
CN113490981A (zh) 2021-10-08
KR102637530B1 (ko) 2024-02-19
AU2020220383A1 (en) 2021-10-07
JP7348297B2 (ja) 2023-09-20
US20210385012A1 (en) 2021-12-09
MX2021009733A (es) 2021-09-08
SG11202108672XA (en) 2021-09-29
TW202044777A (zh) 2020-12-01
CA3205152A1 (en) 2020-08-20
BR112021015532A2 (pt) 2021-10-05
AU2020221993B2 (en) 2023-05-18
CA3128781A1 (en) 2020-08-20
US11875806B2 (en) 2024-01-16
AU2023216863A1 (en) 2023-09-07
EP3925103A1 (en) 2021-12-22
ZA202105719B (en) 2022-06-29
CN113544773A (zh) 2021-10-22
TW202044231A (zh) 2020-12-01
US20210366498A1 (en) 2021-11-25
KR20230147748A (ko) 2023-10-23
TWI797422B (zh) 2023-04-01
EP4239924A3 (en) 2023-11-15
US20230230606A1 (en) 2023-07-20
MX2021009728A (es) 2021-10-13
US20220014310A1 (en) 2022-01-13
AU2020223488A1 (en) 2021-10-07
EP3925105A2 (en) 2021-12-22
CN113491079A (zh) 2021-10-08
CA3231332A1 (en) 2020-08-20
CA3128783A1 (en) 2020-08-20
JP2024026178A (ja) 2024-02-28
EP3925104A2 (en) 2021-12-22
SG11202108537YA (en) 2021-09-29
EP4239924A2 (en) 2023-09-06
MX2021009729A (es) 2021-10-26
TWI785309B (zh) 2022-12-01
CA3231339A1 (en) 2020-08-20
JP2022520816A (ja) 2022-04-01
ZA202105720B (en) 2022-07-27

Similar Documents

Publication Publication Date Title
KR20210143177A (ko) 오류 은닉 모드를 선택하는 디코더와 디코딩 방법, 및 인코더와 인코딩 방법
WO2020165263A2 (en) Decoder and decoding method selecting an error concealment mode, and encoder and encoding method
JP3417479B2 (ja) 情報ワードのエントロピーコード化のための装置及び方法並びにエントロピーコード化された情報ワードのデコード化のための装置及び方法
US4802171A (en) Method for error correction in digitally encoded speech
US8219393B2 (en) Error concealment method and apparatus for audio signal and decoding method and apparatus for audio signal using the same
US7882357B1 (en) System and method of retrieving a watermark within a signal
US7016846B2 (en) Robust checksums
JPH10510689A (ja) 特質データをメインデータのエラーチェック記号にエンコードおよびデコードするデジタル伝送システム
US5960010A (en) Error detection and error concealment of convolutionally encoded data
KR100743575B1 (ko) 코딩된 음성 통신에서 오염된 신호 파라미터를 검출하고 보정하는 방법, 수신기, 컴퓨터 프로그램을 포함한 기록 매체, 및 무선 전화
RU2807683C2 (ru) Декодер и способ декодирования с выбором режима скрытия ошибок, а также кодер и способ кодирования
JP2004500599A (ja) ディジタルオーディオデータの復号方法
KR100259296B1 (ko) 오류정정 방법
RU2021126527A (ru) Декодер и способ декодирования с выбором режима скрытия ошибок, а также кодер и способ кодирования
EP1356598B1 (en) Robust checksums
Bauer et al. List-Decoding of MPEG coded audio signals
JPH04278727A (ja) 誤り訂正方法とそれを用いた音声復号方法およびａｒｑ　　　　　　　　　　　伝送方法
Yesha Parameter replacement for CELP coded speech in land mobile radio
KR20130069682A (ko) 오디오 복호화방법
KR20080036749A (ko) 음원의 오류 검출 장치

Legal Events

Date Code Title Description
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X601 Decision of rejection after re-examination