KR20070035029A - 신호 복호화 장치 - Google Patents
신호 복호화 장치 Download PDFInfo
- Publication number
- KR20070035029A KR20070035029A KR20077000350A KR20077000350A KR20070035029A KR 20070035029 A KR20070035029 A KR 20070035029A KR 20077000350 A KR20077000350 A KR 20077000350A KR 20077000350 A KR20077000350 A KR 20077000350A KR 20070035029 A KR20070035029 A KR 20070035029A
- Authority
- KR
- South Korea
- Prior art keywords
- information
- additional
- unit
- mode
- encoding
- Prior art date
Links
- 238000012545 processing Methods 0.000 claims abstract description 259
- 238000005070 sampling Methods 0.000 claims description 28
- 230000015572 biosynthetic process Effects 0.000 claims description 8
- 238000003786 synthesis reaction Methods 0.000 claims description 8
- 230000002194 synthesizing effect Effects 0.000 claims 1
- 230000005540 biological transmission Effects 0.000 abstract description 554
- 238000004458 analytical method Methods 0.000 abstract description 116
- 238000004891 communication Methods 0.000 abstract description 18
- 238000004364 calculation method Methods 0.000 abstract description 4
- 238000000034 method Methods 0.000 description 156
- 230000008569 process Effects 0.000 description 60
- 238000012546 transfer Methods 0.000 description 45
- 238000010586 diagram Methods 0.000 description 35
- 230000010354 integration Effects 0.000 description 31
- 230000005236 sound signal Effects 0.000 description 27
- 230000003044 adaptive effect Effects 0.000 description 22
- 239000013598 vector Substances 0.000 description 22
- 238000013139 quantization Methods 0.000 description 14
- 238000006243 chemical reaction Methods 0.000 description 9
- 230000003321 amplification Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 7
- 238000003199 nucleic acid amplification method Methods 0.000 description 7
- 230000006798 recombination Effects 0.000 description 5
- 238000005215 recombination Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000007423 decrease Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000001629 suppression Effects 0.000 description 3
- 230000010365 information processing Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000008054 signal transmission Effects 0.000 description 2
- XPRGFWCOARUGAL-UHFFFAOYSA-N 3-anilino-1-phenylpyrrolidine-2,5-dione Chemical compound O=C1N(C=2C=CC=CC=2)C(=O)CC1NC1=CC=CC=C1 XPRGFWCOARUGAL-UHFFFAOYSA-N 0.000 description 1
- 102100024484 Codanin-1 Human genes 0.000 description 1
- 101000980888 Homo sapiens Codanin-1 Proteins 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000007493 shaping process Methods 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/18—Vocoders using multiple modes
- G10L19/24—Variable rate codecs, e.g. for generating different qualities using a scalable representation such as hierarchical encoding or layered encoding
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/005—Correction of errors induced by the transmission channel, if related to the coding algorithm
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
통신 비용 및 회선 사용률을 억제하고, 복호화 처리에 있어서의 계산 비용을 증대시키는 일 없이, 음성 정보, 문자 정보, 화상 정보 등의 여러 가지 부가 정보를 동시에 전송하는 중계 장치. 이 중계 장치에서는, 부호화 정보 해석부(602)는, 전송 모드 정보, 및 부가 정보 플래그를 부가 처리부(603)에 출력하며, 전송 모드 정보에 따라서 각 레이어의 정보원 부호를 부가 처리부(603)에 출력한다. 부가 처리부(603)는, 전송 모드 정보 및 부가 모드 정보의 조합에 따라서, 각 레이어의 정보원 부호에 대하여, 부가 정보의 부가 처리를 실시한다. 부호화 정보 통합부(604)는, 부가 처리부(603)로부터 입력된 전송 모드 정보, 부가 모드 정보, 부가 정보 플래그 및 각종의 정보원 부호를 통합한다.
Description
본 발명은, 신호를 부호화하여 전송하는 통신 시스템에 이용되는 신호 복호화 장치에 관한 것이다.
인터넷 통신으로 대표되는 패킷 통신 시스템이나, 음성·악음(樂音) 신호를 전송하는 이동 통신 시스템의 분야에서는, 음성·악음 신호를 전송하는 동시에, 뉴스 정보 등의 부가적인 음성·악음 정보, 문자 정보, 혹은 화상 정보 등을 전송하는 기술이 요망되고 있다.
이에 반하여, 중계 장치(배신(配信) 장치)에 있어서, 부호화 장치에서 부호화된 음성·악음 신호에, 부호화한 부가 정보를 단순히 다중화하여 송신하는 것만으로는, 전송하는 정보량이 대폭 늘어나게 되고, 통신 비용 및 회선 사용률도 대폭 증가되어 버리기 때문에, 무엇인가 고안이 필요하게 된다.
이 분야의 종래 기술로서, 휴대 단말끼리 음성 신호를 전송하고 있을 때에, 중계 장치(배신 장치)가, 통신 단말간에 전송하는 음성·악음 신호를 복호화하여, 이것과 부가 정보를 중첩(합성)하고, 중첩한 신호를 재차 부호화하여, 상대측 통신 단말로 전송한다고 하는 방법이 개시되어 있다(예컨대, 특허문헌 1).
또한, 최근, 음성 신호, 악음 신호의 부호화에 있어서, 부호화 정보의 일부로부터도 음성·악음 신호를 복호화할 수 있어, 패킷 손실이 발생하는 것과 같은 상황에 있어서도 음질 열화를 억제할 수 있는 스케일러블 부호화 기술이 개발되어 있다(예컨대, 특허문헌 2).
이 스케일러블 부호화 기술의 대표적인 것으로서, 제 1 계층의 부호화부에서 입력 신호를 부호화하여 부호화 정보를 취득하고, 또한 상위의 계층에 대하여 제 (i-1) 계층(i는 2 이상의 정수)의 부호화부의 입력 신호와 제 (i-1) 계층의 부호화 정보의 복호화 신호와의 차인 잔차 신호를 제 i 계층의 입력 신호로 하여 이것을 제 i 계층의 부호화부에서 부호화하여 부호화 정보를 취득하는 것을 반복하는 방법이 알려져 있다.
(특허문헌 1) 일본 공개 특허 공보 제 2003-304336호
(특허문헌 2) 일본 공개 특허 공보 평10-97295호
(발명이 해결하고자 하는 과제)
그러나, 상기 특허문헌 1의 방법에서는, 중계 장치(배신 장치)에 있어서, 부호화되어 있는 신호를 한번 복호화하지 않으면 안되어, 그 복호화 처리에 막대한 계산 비용이 필요하게 된다. 또한, 상기 특허문헌 1은 부가 정보를 음성·악음 신호와 중첩하는 방법이기 때문에, 부가 정보는 음성·악음 신호이지 않으면 안되어, 문자 정보나 화상 정보 등의 부가 정보를 취급할 수 없다.
또한, 상기 특허문헌 2와 같이 부호화 장치에서 스케일러블 부호화하는 방법과, 중계 장치에서 부가 정보를 중첩하는 방법을 조합하는 것을 고려할 수 있지만, 지금까지 이러한 기술의 구체적인 형태의 개시는 이루어져 있지 않다.
또한, 상기 특허 문헌 2의 방법에서는, 전송 중에 패킷 손실이 발생한 경우, 복호화시에 이용하는 계층의 수가 변하는 것에 의해, 전송 비트레이트가 급격히 변화되고, 그것에 수반하여 큰 이음(異音)이 발생한다고 하는 문제가 있다.
본 발명의 목적은, 스케일러블 부호화/복호화 기술을 이용하는 통신에 있어서, 패킷 손실 등에 의해 복호화시에 이용하는 계층수가 변화된 경우에 대해서도, 큰 이음을 억제하여, 청감적으로 보다 양호한 복호화 신호를 얻을 수 있는 신호 복호화 장치를 제공하는 것이다.
(과제를 해결하기 위한 수단)
본 발명의 신호 복호화 장치는, 복수 계층으로 구성된 부호화 정보를 복호화하는 신호 복호화 장치로서, 각 계층의 부호화 정보를 복호화하여 복수의 복호화 신호를 생성하는 복호화 수단과, 상기 각 복호화 신호를 가산하여 가산 신호를 생성하는 가산 수단과, 상기 각 복호화 신호 혹은 상기 가산 신호의 이득을 조정하는 이득 조정 수단과, 전후의 프레임에 있어서의 각 계층의 부호화 정보의 유무에 근거하여 상기 이득 조정 수단을 제어하는 제어 수단을 구비하는 구성을 채용한다.
(발명의 효과)
본 발명에 따르면, 스케일러블 부호화/복호화 방식으로 통신이 행해지고 있는 상황에 있어서, 패킷 손실 등에 의해 복호화시에 이용하는 계층수가 변화된 경우에 대해서도, 시간적으로 전후의 프레임의 부호화 정보를 이용하여 현(現) 프레임의 각 계층의 복호화 신호의 이득을 조정함으로써, 큰 이음을 억제하여, 청감적으로 보다 양호한 복호화 신호를 얻을 수 있다.
도 1은 본 발명의 실시예 1에 따른 통신 시스템의 구성을 나타내는 블록도,
도 2는 본 발명의 실시예 1에 따른 신호 부호화 장치의 내부 구성을 나타내는 블록도,
도 3은 본 발명의 실시예 1에 따른 신호 부호화 장치로부터 전송되는 데이터 구조를 나타내는 블록도,
도 4는 본 발명의 실시예 1에 따른 신호 부호화 장치의 기본 레이어 부호화부의 내부 구성을 나타내는 블록도,
도 5는 본 발명의 실시예 1에 따른 신호 부호화 장치의 기본 레이어 복호화부의 내부 구성을 나타내는 블록도,
도 6은 본 발명의 실시예 1에 따른 중계 장치의 내부 구성을 나타내는 블록도,
도 7은 본 발명의 실시예 1에 따른 중계 장치의 부가 처리부의 내부 구성을 나타내는 블록도,
도 8은 본 발명의 실시예 1에 따른 중계 장치로부터 전송되는 데이터 구조를 나타내는 블록도,
도 9는 본 발명의 실시예 1에 따른 신호 복호화 장치의 내부 구성을 나타내는 블록도,
도 10은 본 발명의 실시예 2에 따른 신호 복호화 장치의 내부 구성을 나타내는 블록도,
도 11은 본 발명의 실시예 3에 따른 신호 부호화 장치로부터 전송되는 데이터 구조를 나타내는 블록도,
도 12는 본 발명의 실시예 3에 따른 중계 장치의 부가 처리부의 내부 구성을 나타내는 블록도,
도 13은 본 발명의 실시예 3에 따른 중계 장치로부터 전송되는 데이터 구조를 나타내는 블록도,
도 14는 본 발명의 실시예 3에 따른 신호 복호화 장치의 내부 구성을 나타내는 블록도,
도 15는 본 발명의 실시예 4에 따른 통신 시스템의 구성을 나타내는 블록도,
도 16은 본 발명의 실시예 4에 따른 중계 장치의 내부 구성을 나타내는 블록도,
도 17은 본 발명의 실시예 4에 따른 중계 장치의 부가 처리부의 내부 구성을 나타내는 블록도,
도 18은 본 발명의 실시예 4에 따른 중계 장치로부터 전송되는 데이터 구조를 나타내는 블록도,
도 19는 본 발명의 실시예 5에 따른 신호 송신 장치, 중계 장치 및 신호 수신 장치의 구성을 나타내는 블록도,
도 20은 본 발명의 실시예 6에 따른 통신 시스템의 구성을 나타내는 블록도,
도 21은 본 발명의 실시예 6에 따른 신호 부호화 장치의 내부 구성을 나타내는 블록도,
도 22는 본 발명의 실시예 6에 따른 신호 부호화 장치로부터 전송되는 데이터 구조를 나타내는 블록도,
도 23은 본 발명의 실시예 6에 따른 신호 복호화 장치의 내부 구성을 나타내는 블록도,
도 24는 본 발명의 실시예 7에 따른 신호 부호화 장치의 내부 구성을 나타내는 블록도,
도 25는 본 발명의 실시예 7에 따른 신호 복호화 장치의 내부 구성을 나타내는 블록도,
도 26은 본 발명의 실시예 8에 따른 신호 부호화 장치로부터 전송되는 데이터 구조를 나타내는 블록도,
도 27은 본 발명의 실시예 8에 따른 신호 복호화 장치의 내부 구성을 나타내는 블록도이다.
이하, 본 발명의 실시예에 대하여, 첨부 도면을 참조하여 상세히 설명한다. 또, 이하의 각 실시예에서는, 3 계층으로 구성된 계층적인 신호 부호화/복호화 방법에 의해 CELP 타입의 음성 부호화/복호화를 하는 경우에 대하여 설명한다. 또, 계층적인 신호 부호화 방법이란, 하위 레이어에서의 입력 신호와 출력 신호와의 차분 신호를 부호화하여, 부호화 정보를 출력하는 신호 부호화 방법이, 상위 레이어에 복수 존재하여 계층 구조를 이루고 있는 방법이다. 또한, 이하의 설명에 있어서, 최하위 레이어(제 1 계층)를 「기본 레이어」라고 하고, 기본 레이어보다 상위에 존재하는 레이어를 「확장 레이어」라고 한다.
(실시예 1)
본 발명의 실시예 1에서는, 부가 정보로서 즉시성이 요구되는 음성 정보(예컨대, 지역의 긴급 재해 정보 등)를 대상으로 하며, 전송되는 음성·악음 신호보다도 부가 정보를 우선하는 경우에 대하여 설명한다.
도 1은 본 실시예에 따른 중계 장치를 포함하는 시스템 구성을 나타내는 도면이다. 신호 부호화 장치(101)는, 전송 모드 정보(SMI)에 따라서, 입력 신호에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 부호화 정보를, 전송로 A(102)를 거쳐 중계 장치(103)에 송신한다.
중계 장치(103)는, 부가 모드 정보(AMI) 및 부가 정보가 입력된 경우에는, 전송로 A(102)를 거쳐서 전송되는 부호화 정보에 부가 정보를 부가하는 처리를 수 행하고, 부가 처리 후의 부호화 정보(이하, 「변환후 부호화 정보」라고 함)를 전송로 B(104)에 송신한다. 또, 중계 장치(103)는, 부가 모드 정보 및 부가 정보가 입력되지 않은 경우에는, 전송로 A(102)를 거쳐서 전송되는 부호화 정보를 전송로 B(104)로 출력한다.
신호 복호화 장치(105)는, 전송로 B(104)를 거쳐서 수신한 부호화 정보 또는 변환후 부호화 정보에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호를 출력 신호로서 출력한다.
다음에, 도 1의 신호 부호화 장치(101)의 구성에 대하여, 도 2의 블록도를 이용하여 설명한다. 또, 신호 부호화 장치(101)는, 입력 신호를 N 샘플씩 구획하고(N은 자연수), N 샘플을 1 프레임으로 하여 프레임마다 부호화를 실시한다.
신호 부호화 장치(101)는, 전송 비트레이트 제어부(201)와, 제어 스위치(202∼205)와, 기본 레이어 부호화부(206)와, 기본 레이어 복호화부(208)와, 가산부(207, 211)와, 제 1 확장 레이어 부호화부(209)와, 제 1 확장 레이어 복호화부(210)와, 제 2 확장 레이어 부호화부(212)와, 부호화 정보 통합부(213)로 주로 구성된다.
전송 모드 정보는 전송 비트레이트 제어부(201)에 입력된다. 여기서, 전송 모드 정보란, 입력 신호를 부호화하여 전송할 때의 전송 비트레이트를 지시하는 정보이며, 미리 정해진 2개 이상의 전송 비트레이트 중에서 1개의 전송 비트레이트가 전송 모드 정보로서 선택된다. 또, 본 실시예에 있어서는, 전송 모드 정보는, 미리 정해진 4 종류의 전송 비트레이트 bitrate0, bitrate1, bitrate2, bitrate3(bitrate0=0, bitrate3<bitrate2<bitrate1)의 값을 취할 수 있는 것으로 한다. 단, bitrate0만이 중계 장치(103)에 있어서만 설정될 수 있는 것이고, 전송 비트레이트 제어부(201)에 입력되는 시점에서는 전송 모드 정보는 bitrate1, bitrate2, bitrate3의 3 종류의 전송 비트레이트 중 어느 하나인 것으로 한다.
전송 비트레이트 제어부(201)는, 입력된 전송 모드 정보에 따라서, 제어 스위치(202∼205)의 온/오프 제어를 한다. 구체적으로는, 전송 비트레이트 제어부(201)는, 전송 모드 정보가 bitrate1인 경우, 제어 스위치(202∼205)를 모두 온 상태로 한다. 또한, 전송 비트레이트 제어부(201)는, 전송 모드 정보가 bitrate2인 경우, 제어 스위치(202, 203)를 온 상태로 하고, 제어 스위치(204, 205)를 오프 상태로 한다. 또한, 전송 비트레이트 제어부(201)는, 전송 모드 정보가 bitrate3인 경우, 제어 스위치(202∼205)를 모두 오프 상태로 한다. 또한, 전송 비트레이트 제어부(201)는, 전송 모드 정보를 부호화 정보 통합부(213)에 출력한다. 이와 같이, 전송 비트레이트 제어부(201)가 전송 모드 정보에 따라 제어 스위치를 온/오프 제어함으로써, 입력 신호의 부호화에 이용하는 부호화부의 조합이 결정된다.
입력 신호는, 제어 스위치(202) 및 기본 레이어 부호화부(206)에 입력된다.
기본 레이어 부호화부(206)는, 입력 신호에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 정보원 부호(이하, 「기본 레이어 정보원 부호(DDCL)」라고 함)를 부호화 정보 통합부(213) 및 제어 스위치(203)에 출력한다. 또, 기본 레이어 부호화부(206)의 내부 구성에 있어서는 후술하기로 한다.
기본 레이어 복호화부(208)는, 제어 스위치(203)가 온 상태인 경우, 기본 레이어 부호화부(206)로부터 출력된 기본 레이어 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「기본 레이어 복호화 신호」라고 함)를 가산부(207)에 출력한다. 또, 기본 레이어 복호화부(208)는, 제어 스위치(203)가 오프 상태인 경우에는 아무것도 동작하지 않는다. 또, 기본 레이어 복호화부(208)의 내부 구성에 있어서는 후술하기로 한다.
가산부(207)는, 제어 스위치(202, 203)가 온 상태인 경우, 입력 신호에, 기본 레이어 복호화 신호의 극성을 반전시킨 신호를 가산하여, 가산 결과인 제 1 차분 신호를 제 1 확장 레이어 부호화부(209) 및 제어 스위치(204)에 출력한다. 또, 가산부(207)는, 제어 스위치(202, 203)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 1 확장 레이어 부호화부(209)는, 제어 스위치(202, 203)가 온 상태인 경우, 가산부(207)로부터 얻어지는 제 1 차분 신호에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 정보원 부호(이하, 「제 1 확장 레이어 정보원 부호(CDFEL)」라고 함)를 제어 스위치(205) 및 부호화 정보 통합부(213)에 출력한다. 또, 제 1 확장 레이어 부호화부(209)는, 제어 스위치(202, 203)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 1 확장 레이어 복호화부(210)는, 제어 스위치(205)가 온 상태인 경우, 제 1 확장 레이어 부호화부(209)로부터 출력된 제 1 확장 레이어 정보원 부호에 대하 여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「제 1 확장 레이어 복호화 신호」라고 함)를 가산부(211)에 출력한다. 또, 제 1 확장 레이어 복호화부(210)는, 제어 스위치(205)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
가산부(211)는, 제어 스위치(204, 205)가 온 상태인 경우, 제어 스위치(204)로부터 얻어지는 제 1 차분 신호에, 제 1 확장 레이어 복호화 신호의 극성을 반전시킨 신호를 가산하여, 가산 결과인 제 2 차분 신호를 제 2 확장 레이어 부호화부(212)에 출력한다. 또, 가산부(211)는, 제어 스위치(204, 205)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 2 확장 레이어 부호화부(212)는, 제어 스위치(204, 205)가 온 상태인 경우, 가산부(211)로부터 출력되는 제 2 차분 신호에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 정보원 부호(이하, 「제 2 확장 레이어 정보원 부호(CDSEL)」라고 함)를 부호화 정보 통합부(213)에 출력한다. 또, 제 2 확장 레이어 부호화부(212)는, 제어 스위치(204, 205)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
부호화 정보 통합부(213)는, 기본 레이어 부호화부(206), 제 1 확장 레이어 부호화부(209), 및 제 2 확장 레이어 부호화부(212)로부터 출력된 정보원 부호와 전송 비트레이트 제어부(201)로부터 출력되는 전송 모드 정보를 통합하고, 부호화 정보 중에 포함되는 1 비트의 부가 정보 플래그(AIF)에 「0」을 대입하여, 이것을 부호화 정보로서 전송로 A(102)에 출력한다.
여기서, 부가 정보 플래그란, 중계 장치(103)에 있어서, 부가 정보가 부가된 경우에는 「1」, 부가 정보가 부가되지 않는 경우에는 「0」의 값을 취하는 1 비트의 플래그이며, 부호화 장치로부터 전송된 시점에서의 디폴트값은 0으로 한다.
이상이, 도 1의 신호 부호화 장치(101)의 구성의 설명이다.
다음에, 전송전 부호화 정보의 데이터 구조(비트 스트림)에 대하여 도 3을 이용하여 설명한다.
전송 모드 정보가 bitrate3인 경우, 부호화 정보는, 도 3(a)에 나타내는 바와 같이, 전송 모드 정보, 기본 레이어 정보원 부호, 및 부가 정보 플래그(값은 0)를 포함하는 용장부(RP)로 구성된다.
전송 모드 정보가 bitrate2인 경우, 부호화 정보는, 도 3(b)에 나타내는 바와 같이, 전송 모드 정보, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 및 부가 정보 플래그(값은 0)를 포함하는 용장부로 구성된다.
전송 모드 정보가 bitrate1인 경우, 부호화 정보는, 도 3(c)에 나타내는 바와 같이, 전송 모드 정보, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 제 2 확장 레이어 정보원 부호, 및 부가 정보 플래그(값은 0)를 포함하는 용장부로 구성된다.
여기서, 도 3 중의 데이터 구조에 있어서의 용장부란, 비트 스트림 중에 마련되는 용장적인 데이터 저장부이며, 통상은 전송 오류 검출·정정 등에 이용된다. 본 발명에서는, 중계 장치(103), 및 신호 복호화 장치(105)에 있어서, 그 중의 1 비트를 부가 정보 플래그로서 이용하는 것으로 한다. 상세한 설명은 후술한다.
다음에, 도 2의 기본 레이어 부호화부(206)의 내부 구성에 대하여 도 4를 이용하여 설명한다. 여기서는, 기본 레이어 부호화부(206)에 있어서, CELP 타입의 음성 부호화를 실시하는 경우에 대하여 설명한다.
전(前) 처리부(401)는, 입력 신호에 대하여, DC 성분을 제거하는 하이패스 필터 처리나 후속하는 부호화 처리의 성능 개선으로 이어지도록 하는 파형 정형 처리나 프리엠퍼시스 처리를 실시하고, 이들 처리 후의 신호(Xin)를 LPC 분석부(402) 및 가산부(405)에 출력한다.
LPC 분석부(402)는, Xin을 이용하여 선형 예측 분석을 하고, 분석 결과(선형 예측 계수)를 LPC 양자화부(403)에 출력한다. LPC 양자화부(403)는, LPC 분석부(402)로부터 출력된 선형 예측 계수(LPC)의 양자화 처리를 실시하여, 양자화 LPC를 합성 필터(404)에 출력하는 동시에 양자화 LPC를 나타내는 부호(L)를 다중화부(414)에 출력한다.
합성 필터(404)는, 양자화 LPC에 근거한 필터 계수에 의해, 후술하는 가산부(411)로부터 출력되는 구동 음원에 대하여 필터 합성을 함으로써 합성 신호를 생성하여, 합성 신호를 가산부(405)에 출력한다.
가산부(405)는, 합성 신호의 극성을 반전시켜 Xin에 가산함으로써 오차 신호를 산출하여, 오차 신호를 청각 가중치 부여부(412)에 출력한다.
적응 음원 부호 리스트(406)는, 과거에 가산부(411)에 의해 출력된 구동 음원을 버퍼에 기억하고 있고, 파라미터 결정부(413)로부터 출력된 신호에 의해 특정되는 과거의 구동 음원으로부터 1 프레임분의 샘플을 적응 음원 벡터로서 잘라내어 승산부(409)에 출력한다.
양자화 이득 생성부(407)는, 파라미터 결정부(413)로부터 출력된 신호에 의해서 특정되는 양자화 적응 음원 이득과 양자화 고정 음원 이득을 각각 승산부(409)와 승산부(410)에 출력한다.
고정 음원 부호 리스트(408)는, 파라미터 결정부(413)로부터 출력된 신호에 의해서 특정되는 형상을 갖는 펄스 음원 벡터에 확산 벡터를 승산하여 얻어진 고정 음원 벡터를 승산부(410)에 출력한다.
승산부(409)는, 양자화 이득 생성부(407)로부터 출력된 양자화 적응 음원 이득을, 적응 음원 부호 리스트(406)로부터 출력된 적응 음원 벡터에 곱해서 가산부(411)에 출력한다. 승산부(410)는, 양자화 이득 생성부(407)로부터 출력된 양자화 고정 음원 이득을, 고정 음원 부호 리스트(408)로부터 출력된 고정 음원 벡터에 곱해서 가산부(411)에 출력한다.
가산부(411)는, 이득 승산 후의 적응 음원 벡터와 고정 음원 벡터를 각각 승산부(409)와 승산부(410)로부터 입력하고, 이들을 벡터 가산하여, 가산 결과인 구동 음원을 합성 필터(404) 및 적응 음원 부호 리스트(406)에 출력한다. 또, 적응 음원 부호 리스트(406)에 입력된 구동 음원은, 버퍼에 기억된다.
청각 가중치 부여부(412)는, 가산부(405)로부터 출력된 오차 신호에 대하여 청각적인 가중치 부여를 실시하여 부호화 왜곡으로서 파라미터 결정부(413)에 출력한다.
파라미터 결정부(413)는, 청각 가중치 부여부(412)로부터 출력된 부호화 왜 곡을 최소로 하는 적응 음원 벡터, 고정 음원 벡터 및 양자화 이득을, 각각 적응 음원 부호 리스트(406), 고정 음원 부호 리스트(408) 및 양자화 이득 생성부(407)로부터 선택하여, 선택 결과를 나타내는 적응 음원 벡터 부호(A), 고정 음원 벡터 부호(F) 및 음원 이득 부호(G)를 다중화부(414)에 출력한다.
다중화부(414)는, LPC 양자화부(403)로부터 양자화 LPC를 나타내는 부호(L)를 입력하고, 파라미터 결정부(413)로부터 적응 음원 벡터를 나타내는 부호(A), 고정 음원 벡터를 나타내는 부호(F) 및 양자화 이득을 나타내는 부호(G)를 입력하여, 이들의 정보를 다중화해서 기본 레이어 정보원 부호로서 출력한다.
이상이, 도 2의 기본 레이어 부호화부(206)의 내부 구성의 설명이다.
또, 도 2의 제 1 확장 레이어 부호화부(209) 및 제 2 확장 레이어 부호화부(212)의 내부 구성은, 기본 레이어 부호화부(206)와 동일하고, 입력되는 신호의 종류 및 출력되는 정보원 부호의 종류만이 다르기 때문에, 그 설명은 생략한다.
다음에, 도 2의 기본 레이어 복호화부(208)의 내부 구성에 대하여 도 5를 이용하여 설명한다. 여기서는, 기본 레이어 복호화부(208)에 있어서, CELP 타입의 음성 복호화를 수행하는 경우에 대하여 설명한다.
도 5에 있어서, 기본 레이어 복호화부(208)에 입력된 기본 레이어 정보원 부호는, 다중화 분리부(501)에 의해서 각각의 부호(L, A, G, F)로 분리된다. 분리된 LPC 부호(L)는 LPC 복호화부(502)에 출력되고, 분리된 적응 음원 벡터 부호(A)는 적응 음원 부호 리스트(505)에 출력되며, 분리된 음원 이득 부호(G)는 양자화 이득 생성부(506)에 출력되고, 분리된 고정 음원 벡터 부호(F)는 고정 음원 부호 리스 트(507)에 출력된다.
LPC 복호화부(502)는, 다중화 분리부(501)로부터 출력된 부호(L)로부터 양자화 LPC를 복호화하여, 합성 필터(503)에 출력한다.
적응 음원 부호 리스트(505)는, 다중화 분리부(501)로부터 출력된 부호(A)에 의해 지정되는 과거의 구동 음원으로부터 1 프레임분의 샘플을 적응 음원 벡터로서 취득하여 승산부(508)에 출력한다.
양자화 이득 생성부(506)는, 다중화 분리부(501)로부터 출력된 음원 이득 부호(G)에 의해 지정되는 양자화 적응 음원 이득과 양자화 고정 음원 이득을 복호화하여 승산부(508) 및 승산부(509)에 출력한다.
고정 음원 부호 리스트(507)는, 다중화 분리부(501)로부터 출력된 부호(F)에 의해 지정되는 고정 음원 벡터를 생성하여, 승산부(509)에 출력한다.
승산부(508)는, 적응 음원 벡터에 양자화 적응 음원 이득을 승산하여, 가산부(510)에 출력한다. 승산부(509)는, 고정 음원 벡터에 양자화 고정 음원 이득을 승산하여, 가산부(510)에 출력한다.
가산부(510)는, 승산부(508, 509)로부터 출력된 이득 승산 후의 적응 음원 벡터와 고정 음원 벡터와의 가산을 하여 구동 음원을 생성하고, 이것을 합성 필터(503) 및 적응 음원 부호 리스트(505)에 출력한다.
합성 필터(503)는, LPC 복호화부(502)에 의해 복호화된 필터 계수를 이용하여, 가산부(510)로부터 출력된 구동 음원의 필터 합성을 하고, 합성한 신호를 후(後)처리부(504)에 출력한다.
후처리부(504)는, 합성 필터(503)로부터 출력된 신호에 대하여, 포먼트 강조나 피치 강조와 같은 음성의 주관적인 품질을 개선하는 처리나, 정상 잡음의 주관적 품질을 개선하는 처리 등을 실시하여, 기본 레이어 복호화 신호로서 출력한다.
이상이, 도 2의 기본 레이어 복호화부(208)의 내부 구성의 설명이다.
또, 도 2의 제 1 확장 레이어 복호화부(210)의 내부 구성은, 기본 레이어 복호화부(208)의 내부 구성과 동일하고, 입력되는 정보원 부호의 종류 및 출력되는 신호의 종류만이 다르기 때문에, 그 설명은 생략한다.
다음에, 도 1의 중계 장치(103)의 구성에 대하여 도 6을 이용하여 설명한다.
중계 장치(103)는, 부가 정보 수신부(601)와, 부호화 정보 해석부(602)와, 부가 처리부(603)와, 부호화 정보 통합부(604)와, 제어 스위치(605, 606)로 주로 구성된다.
부가 모드 정보 및 부가 정보는, 부가 정보 수신부(601)에 입력된다. 여기서, 부가 모드 정보란, 부가 정보를 부호화하여 전송할 때의 전송 비트레이트를 지시하는 정보이며, 미리 정해진 2개 이상의 전송 비트레이트 중에서, 부가 정보의 종류(카테고리) 등에 따라서, 1개의 전송 비트레이트가 부가 모드 정보로서 선택된다. 또, 본 실시예에 있어서는, 부가 모드 정보는, 미리 정해진 3 종류의 전송 비트레이트 bitrate1', bitrate2', bitrate3'(bitrate3'<bitrate2'<bitrate1')의 값을 취할 수 있는 것으로 한다. 이 전송 비트레이트의 값은, 부가 정보를 적당한 품질로 부호화하기 위하여 필요한 정보량을 나타내며, 예컨대, 클린(clean) 음성(1인)의 경우에는 bitrate3'이 선택되고, 노이즈 있는 음성 또는 클린 음성(적은 사 람수)의 경우에는 bitrate2'이 선택되며, 악음 또는 다인(多人) 음성의 경우에는 bitrate1'이 선택된다고 하는 것과 같이, 부가 정보의 카테고리에 대응하여 적절히 지정되는 것으로 한다.
부가 정보 수신부(601)는, 부가 모드 정보 및 부가 정보가 입력되었는지 여부에 따라서, 제어 스위치(605, 606)의 온/오프 제어를 한다. 구체적으로는, 부가 정보 수신부(601)는, 중계 장치(103)에 부가 모드 정보 및 부가 정보가 입력된 경우에는, 제어 스위치(605)를 부호화 정보 해석부(602) 측에 접속하고, 제어 스위치(606)를 부호화 정보 통합부(604) 측에 접속한다. 또한, 부가 정보 수신부(601)는, 중계 장치(103)에 부가 모드 정보 및 부가 정보가 입력되지 않은 경우에는, 제어 스위치(605)를 제어 스위치(606) 측에 접속하고, 제어 스위치(606)를 제어 스위치(605) 측에 접속한다. 이와 같이, 중계 장치(103)에 부가 정보가 입력되는지 여부에 따라 제어 스위치(605, 606)를 온/오프 제어함으로써, 중계 장치(103)의 동작이 결정된다. 또한, 부가 정보 수신부(601)는, 중계 장치(103)에 부가 모드 정보 및 부가 정보가 입력된 경우에는, 입력된 부가 모드 정보 및 부가 정보를 부가 처리부(603)에 출력한다. 또한, 부가 정보 수신부(601)는, 중계 장치(103)에 부가 모드 정보 및 부가 정보가 입력되지 않은 경우에는, 부가 처리부(603)에는 아무것도 출력하지 않는다.
부호화 정보 해석부(602)는, 제어 스위치(605)가 부호화 정보 해석부(602) 측에 접속되어 있는 경우, 입력된 부호화 정보를, 전송 모드 정보, 각 레이어의 정보원 부호, 및 부가 정보 플래그로 분리하여, 전송 모드 정보, 및 부가 정보 플래 그를 부가 처리부(603)에 출력하고, 또한, 전송 모드 정보에 따라서, 각 레이어의 정보원 부호를 부가 처리부(603)에 출력한다. 구체적으로는, 부호화 정보로부터 얻어지는 전송 모드 정보가 bitrate1인 경우, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호 및 제 2 확장 레이어 정보원 부호를 부가 처리부(603)에 출력한다. 또한, 전송 모드 정보가 bitrate2인 경우, 기본 레이어 정보원 부호 및 제 1 확장 레이어 정보원 부호를 부가 처리부(603)에 출력한다. 또한, 전송 모드 정보가 bitrate3인 경우, 기본 레이어 정보원 부호를 부가 처리부(603)에 출력한다. 또, 부호화 정보 해석부(602)는, 제어 스위치(605)가 제어 스위치(606) 측에 접속되어 있는 경우에는, 아무것도 동작하지 않는다.
부가 처리부(603)는, 부호화 정보 해석부(602)로부터, 전송 모드 정보, 부가 정보 플래그 및 전송 모드 정보에 따른 각 레이어의 정보원 부호가 입력되고, 또한 부가 정보 수신부(601)로부터 부가 모드 정보, 및 부가 정보가 입력된 경우에는, 전송 모드 정보 및 부가 모드 정보의 조합에 따라서, 각 레이어의 정보원 부호에 대하여, 부가 정보의 부가 처리를 실시하여, 얻어진 정보원 부호, 전송 모드 정보, 부가 모드 정보, 및 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다. 또한, 부가 처리부(603)는, 부호화 정보 해석부(602)로부터, 전송 모드 정보, 부가 정보 플래그 및 전송 모드 정보에 따른 각 레이어의 정보원 부호가 입력되지 않고, 또한 부가 정보 수신부(601)로부터 부가 모드 정보, 및 부가 정보가 입력되지 않은 경우에는, 아무것도 동작하지 않는다.
부호화 정보 통합부(604)는, 부가 처리부(603)로부터 전송 모드 정보, 부가 모드 정보, 부가 정보 플래그, 및 각종의 정보원 부호가 입력된 경우, 그들을 통합한 후, 변환후 부호화 정보로서 제어 스위치(606)에 출력한다. 또한, 부호화 정보 통합부(604)는, 부가 처리부(603)로부터 전송 모드 정보, 부가 모드 정보, 부가 정보 플래그, 및 각종의 정보원 부호가 입력되지 않은 경우에는 아무것도 동작하지 않는다.
이상이, 도 1의 중계 장치(103)의 구성에 대한 설명이다.
다음에, 도 6의 부가 처리부(603)의 구성에 대하여 도 7을 이용하여 설명한다. 부가 처리부(603)는, 부가 정보 부호화부(701)와, 부가 정보 통합부(702)로 주로 구성된다.
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 부가 모드 정보 및 부가 정보가 입력되고, 부호화 정보 해석부(602)로부터 전송 모드 정보 및 부가 정보 플래그가 입력된 경우, 부가 모드 정보 및 전송 모드 정보의 조합에 따른 전송 비트레이트에 의해, 부가 정보에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 정보원 부호(이하, 「부가 정보 정보원 부호(CDAI)」라고 함), 전송 모드 정보 및 부가 모드 정보를 부가 정보 통합부(702)에 출력한다. 또, 부가 정보 부호화부(701)는, 부가 모드 정보, 부가 정보, 전송 모드 정보 및 부가 정보 플래그가 입력되지 않은 경우에는 아무것도 동작하지 않는다.
이하, 부가 정보 부호화부(701)에 있어서의 부호화 처리에 대하여 전송 모드 정보 및 부가 모드 정보의 조합에 따른 9 패턴으로 나누어, 구체적으로 설명한다.
부가 정보 부호화부(701)는, 입력되는 정보(신호)를 복수의 전송 비트레이트로 부호화 가능한 멀티레이트 부호화 방법을 구비한다. 본 실시예에서는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보와 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보와의 조합에 따라서, 미리 정해진 6 종류의 전송 비트레이트 bitrate1", bitrate2", bitrate3", bitrate4", bitrate5", bitrate6"의 값을 취할 수 있는 것으로 한다. 또한, 이 6 종류의 전송 비트레이트의 값은, bitrate1, bitrate2 및 bitrate3을 이용하여 이하의 수학식 1과 같이 나타낼 수 있다.
(패턴 1)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate3인 경우에는, 부가 정보를 bitrate3"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다.
(패턴 2)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate2인 경우에는, 부가 정보를 bitrate5"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다.
(패턴 3)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate1인 경우에는, 부가 정보를 bitrate6"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다.
(패턴 4)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate3인 경우에는, bitrate3"이 나타내는 전송 비트레이트는, 부가 정보를 부호화하기 위하여 충분하지는 않다고 판단하여, 부가 정보의 부호화 처리는 하지 않고서, 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다.
(패턴 5)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate2인 경우에는, 부가 정보를 bitrate2"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다.
(패턴 6)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate1인 경우에는, 부가 정보를 bitrate4"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다.
(패턴 7)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate3인 경우에는, bitrate3"이 나타내는 전송 비트레이트는, 부가 정보를 부호화하기 위하여 충분하지는 않다고 판단하여, 부가 정보의 부호화 처리는 하지 않고서, 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다.
(패턴 8)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate2인 경우에는, bitrate2"이 나타내는 전송 비트레이트는, 부가 정보를 부호화하기 위하여 충분하지는 않다고 판단하여, 부가 정보의 부호화 처리는 하지 않고서, 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다.
(패턴 9)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate1인 경우에는, 부가 정보를 bitrate1"이 나타내는 전송 비트레이 트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다.
이상이, 부가 정보 부호화부(701)에 있어서의 부호화 처리에 대한 설명이다.
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 부가 모드 정보, 부가 정보 정보원 부호, 전송 모드 정보 및 부가 정보 플래그가 입력되고, 부호화 정보 해석부(602)로부터 각 레이어의 정보원 부호가 입력된 경우, 부가 모드 정보 및 전송 모드 정보의 조합에 따라서, 각 레이어의 정보원 부호와 부가 정보 정보원 부호와의 통합 처리를 실시하여, 얻어진 정보원 부호, 부가 정보 정보원 부호, 전송 모드 정보, 부가 정보 플래그 및 부가 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또, 부가 정보 통합부(702)는, 부가 모드 정보, 부가 정보 정보원 부호, 전송 모드 정보, 부가 정보 플래그 및 각 레이어의 정보원 부호가 입력되지 않은 경우에는 아무것도 동작하지 않는다.
이하, 부가 정보 통합부(702)에 있어서의 통합 처리에 대하여 전송 모드 정보 및 부가 모드 정보의 조합에 따른 9 패턴으로 나누어, 구체적으로 설명한다.
(패턴 1)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 또한 전송 모드 정보가 bitrate3인 경우에는, 기본 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0 을 대입하고, 부가 모드 정보에 bitrate3"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 1의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다.
(패턴 2)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 또한 전송 모드 정보가 bitrate2인 경우에는, 제 1 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate3을 대입하고, 부가 모드 정보에 bitrate5"을 대입하여, 기본 레이어 정보원 부호, 부가 정보 정보원 부호, 부가 모드 정보, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 1의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다.
(패턴 3)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 또한 전송 모드 정보가 bitrate1인 경우에는, 제 2 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate2를 대입하고, 부가 모드 정보에 bitrate6"을 대입하여, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 부가 정보 정보원 부호, 부가 모드 정보, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 1의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다.
(패턴 4)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 또한 전송 모드 정보가 bitrate3인 경우에는, 통합 처리는 하지 않고, 기본 레이어 정보원 부호, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 0의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다.
(패턴 5)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 또한 전송 모드 정보가 bitrate2인 경우에는, 기본 레이어 정보원 부호, 및 제 1 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0을 대입하고, 부가 모드 정보에 bitrate2"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 1의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다.
(패턴 6)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 또한 전송 모드 정보가 bitrate1인 경우에는, 제 1 확장 레이어 정보원 부호, 및 제 2 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate3을 대입하고, 부가 모드 정보에 bitrate4"을 대입하여, 기본 레이어 정보원 부호, 부가 정보 정보원 부호, 부가 모드 정보, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 1의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다.
(패턴 7)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 또한 전송 모드 정보가 bitrate3인 경우에는, 통합 처리는 하지 않고, 기본 레이어 정보원 부호, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 0의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다.
(패턴 8)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 또한 전송 모드 정보가 bitrate2인 경우에는, 통합 처리 는 하지 않고, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 0의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다.
(패턴 9)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 또한 전송 모드 정보가 bitrate1인 경우에는, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 및 제 2 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0을 대입하고, 부가 모드 정보에 bitrate1"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 1의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다.
이상이, 부가 정보 통합부(702)에 있어서의 통합 처리에 대한 설명이다.
또, 부호화 정보 통합부(604)로부터 출력되는 부호화 정보의 데이터 구조(비트 스트림)은, 부가 정보 통합부(702)에 있어서의 (패턴 1)∼(패턴 9)에 따라서, 각각 도 8 중의 (a)∼(i)와 같은 데이터 구조로 된다.
다음에, 도 1의 신호 복호화 장치(105)의 구성에 대하여 도 9를 이용하여 설명한다.
신호 복호화 장치(105)는, 부호화 정보 해석부(901)와, 복호화 동작 제어부(902)와, 기본 레이어 복호화부(903)와, 제 1 확장 레이어 복호화부(904)와, 제 2 확장 레이어 복호화부(905)와, 부가 정보 복호화부(906)와, 제어 스위치(907∼910)와, 가산부(911∼913)로 주로 구성된다.
부호화 정보는, 부호화 정보 해석부(901)에 입력된다. 부호화 정보 해석부(901)는, 입력된 부호화 정보의 부가 정보 플래그의 값이 1인 경우에는, 부호화 정보를 전송 모드 정보, 부가 모드 정보, 각 레이어의 정보원 부호, 및 부가 정보 정보원 부호로 분리하여, 얻어진 부가 모드 정보, 전송 모드 정보 및 각 레이어의 정보원 부호를 복호화 동작 제어부(902)에 출력하고, 부가 모드 정보 및 부가 정보 정보원 부호를 부가 정보 복호화부(906)에 출력한다. 또한, 부호화 정보 해석부(901)는, 입력된 부호화 정보의 부가 정보 플래그의 값이 0인 경우에는, 부호화 정보를 전송 모드 정보, 각 레이어의 정보원 부호로 분리하여, 얻어진 전송 모드 정보 및 각 레이어의 정보원 부호를 복호화 동작 제어부(902)에 출력한다. 또한, 부호화 정보 해석부(901)는, 부호화 정보의 해석 결과에 따라 제어 스위치(910)의 온/오프 상태의 제어를 한다. 구체적으로는, 부호화 정보 해석부(901)는, 입력된 부호화 정보의 부가 정보 플래그의 값이 0인 경우에는, 제어 스위치(910)를 오프 상태로 하고, 입력된 부호화 정보의 부가 정보 플래그의 값이 1인 경우에는 제어 스위치(910)를 온 상태로 한다.
복호화 동작 제어부(902)는, 부호화 정보 해석부(901)로부터 얻어지는 전송 모드 정보에 따라서, 제어 스위치(907∼909)의 온/오프 상태의 제어를 하고, 또한 각 레이어의 정보원 부호를, 기본 레이어 복호화부(903), 제 1 확장 레이어 복호화부(904) 및 제 2 확장 레이어 복호화부(905)에 출력한다. 구체적으로는, 복호화 동작 제어부(902)는, 부호화 정보 해석부(901)로부터 얻어지는 전송 모드 정보가 bitrate3인 경우에는, 제어 스위치(907)를 온 상태로 하고, 제어 스위치(908, 909)를 오프 상태로 하여, 기본 레이어 복호화부(903)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(904) 및 제 2 확장 레이어 복호화부(905)에는 아무것도 출력하지 않는다. 또한, 복호화 동작 제어부(902)는, 부호화 정보 해석부(901)로부터 얻어지는 전송 모드 정보가 bitrate2인 경우에는, 제어 스위치(907, 908)를 온 상태로 하고, 제어 스위치(909)를 오프 상태로 하여, 기본 레이어 복호화부(903)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(904)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(905)에는 아무것도 출력하지 않는다. 또한, 복호화 동작 제어부(902)는, 부호화 정보 해석부(901)로부터 얻어지는 전송 모드 정보가 bitrate1인 경우에는, 제어 스위치(907∼909)를 모두 온 상태로 하여, 기본 레이어 복호화부(903)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(904)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(905)에 제 2 확장 레이어 정보원 부호를 출력한다. 또한, 복호화 동작 제어부(902)는, 부호화 정보 해석부(901)로부터 얻어지는 전송 모드 정보가 bitrate0인 경우에는, 제어 스위치(907∼909)를 모두 오프 상태로 하여, 기본 레이어 복호화부(903), 제 1 확장 레이어 복호화부(904), 및 제 2 확장 레이어 복호화부(905)에는 아무것도 출력하지 않는 다.
기본 레이어 복호화부(903)는, 제어 스위치(907)가 온 상태인 경우, 복호화 동작 제어부(902)로부터 출력된 기본 레이어 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「기본 레이어 복호화 신호」라고 함)를 가산부(912)에 출력한다. 또, 기본 레이어 복호화부(903)는, 제어 스위치(907)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 1 확장 레이어 복호화부(904)는, 제어 스위치(908)가 온 상태인 경우, 복호화 동작 제어부(902)로부터 출력된 제 1 확장 레이어 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「제 1 확장 레이어 복호화 신호」라고 함)를 가산부(911)에 출력한다. 또, 제 1 확장 레이어 복호화부(904)는, 제어 스위치(908)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 2 확장 레이어 복호화부(905)는, 제어 스위치(909)가 온 상태인 경우, 복호화 동작 제어부(902)로부터 출력된 제 2 확장 레이어 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「제 2 확장 레이어 복호화 신호」라고 함)를 가산부(911)에 출력한다. 또, 제 2 확장 레이어 복호화부(905)는, 제어 스위치(909)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
부가 정보 복호화부(906)는, 입력된 정보원 부호를, 복수의 종류의 전송 비 트레이트로 복호화 가능한 멀티레이트 복호화 수법을 구비한다. 본 실시예에서는, 부호화 정보 해석부(901)로부터 얻어지는 부가 모드 정보에 따라서, 미리 정해진 6 종류의 전송 비트레이트 bitrate1", bitrate2", bitrate3", bitrate4", bitrate5", bitrate6"으로 복호화 가능한 것으로 한다. 또한, 이 6 종류의 전송 비트레이트의 값은, 부가 정보 부호화부(701)에 있어서의 예와 마찬가지로, bitrate1, bitrate2 및 bitrate3을 이용하여 상기 수학식 1과 같이 나타낼 수 있다. 부가 정보 복호화부(906)는, 제어 스위치(910)가 온 상태인 경우, 부호화 정보 해석부(901)로부터 얻어지는 부가 모드 정보에 따른 전송 비트레이트에 의해, 부호화 정보 해석부(901)로부터 얻어지는 부가 정보 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「부가 정보 복호화 신호」라고 함)를 가산부(913)에 출력한다. 또, 부가 정보 복호화부(906)는, 제어 스위치(910)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
또, 기본 레이어 복호화부(903), 제 1 확장 레이어 복호화부(904), 제 2 확장 레이어 복호화부(905) 및 부가 정보 복호화부(906)의 내부 구성은, 전술한 기본 레이어 복호화부(208)와 동일하고, 입력되는 정보원 부호의 종류 및 출력되는 신호의 종류만이 다르기 때문에, 그 설명은 생략한다.
가산부(911)는, 제어 스위치(908, 909)가 온 상태인 경우, 제 2 확장 레이어 복호화부(905)로부터 출력된 제 2 확장 레이어 복호화 신호와 제 1 확장 레이어 복호화부(904)로부터 출력된 제 1 확장 레이어 복호화 신호를 가산하여, 가산 후의 신호를 가산부(912)에 출력한다. 또한, 가산부(911)는, 제어 스위치(909)가 오프 상태이고, 또한, 제어 스위치(908)가 온 상태인 경우, 제 1 확장 레이어 복호화부(904)로부터 출력된 제 1 확장 레이어 복호화 신호를 가산부(912)에 출력한다. 또, 가산부(911)는, 제어 스위치(908, 909)가 오프 상태인 경우, 아무것도 동작하지 않는다.
가산부(912)는, 제어 스위치(907, 908)가 온 상태인 경우, 기본 레이어 복호화부(903)로부터 출력된 기본 레이어 복호화 신호와 가산부(911)의 출력 신호를 가산하여, 가산 후의 신호를 가산부(913)에 출력한다. 또한, 가산부(912)는, 제어 스위치(907)가 온 상태이고, 제어 스위치(908)가 오프 상태인 경우, 기본 레이어 복호화부(903)로부터 출력된 기본 레이어 복호화 신호를 가산부(913)에 출력한다. 또한, 가산부(912)는, 제어 스위치(907, 908)가 오프 상태인 경우, 아무것도 동작하지 않는다.
가산부(913)는, 제어 스위치(907, 910)가 온 상태인 경우, 가산부(912)의 출력 신호와 부가 정보 복호화부(906)로부터 얻어지는 부가 정보 복호화 신호를 가산하여, 가산 후의 신호를 출력 신호로서 출력한다. 또한, 가산부(913)는, 제어 스위치(907)가 온 상태이고, 제어 스위치(910)가 오프 상태인 경우, 가산부(912)의 출력 신호를 출력한다. 또한, 가산부(913)는, 제어 스위치(907)가 오프 상태이고, 제어 스위치(910)가 온 상태인 경우, 부가 정보 복호화부(906)로부터 얻어지는 부가 정보 복호화 신호를 출력 신호로서 출력한다. 또한, 가산부(913)는, 제어 스위치(907, 910)가 오프 상태인 경우, 아무것도 동작하지 않는다.
이상이, 도 1의 신호 복호화 장치(105)의 내부 구성의 설명이다.
이와 같이, 본 실시예에 따르면, 스케일러블 부호화 기술을 이용하여 음성·악음 신호 등을 전송하고 있는 중계 장치를 포함한 통신 시스템에 있어서, 중계 장치에 입력된 부가 정보의 종류에 따라 적절한 정보량분의 계층을 할당하고, 그 정보량을 이용하여 부호화된 부가 정보와 음성·악음 신호의 부호화 정보를 통합하여, 신호 복호화 장치에 전송한다. 이에 따라, 복호화 처리에 있어서의 계산 비용을 억제할 수 있고, 또한 전송하는 정보량을 증가시키는 일 없이, 신호 부호화 장치로부터의 음성·신호와 동시에 긴급 재해 정보 등의 즉시성이 요구되는 부가 정보를 전송할 수 있다.
또, 본 실시예에서는, 부호화 장치에 있어서의 부호화 방법으로서, CELP 타입의 음성 부호화/복호화를 실시하는 경우에 대하여 설명하였지만, 본 발명은 이것에 한정되지 않고, 정지 화상, 동화상 등의 음성·악음 신호 이외의 신호에 대해서도 마찬가지로 적용할 수 있다.
또한, 본 발명은 계층을 한정하는 것은 아니며, 복수 계층으로 구성된 계층적인 신호 부호화/복호화 방법에 있어서, 하위 레이어에서의 입력 신호와 출력 신호와의 차인 잔차 신호를 상위 레이어에서 부호화하는 경우에 대하여 적용할 수 있다.
또한, 본 실시예에서는, 중계 장치에 입력되는 부가 정보는, 마찬가지로 중계 장치에 입력되는 부가 모드 정보에 따른 전송 비트레이트로 부호화하는 것을 원칙으로 하고 있었기 때문에, 입력된 부가 모드 정보에 따른 전송 비트레이트가, 신 호 부호화 장치로부터 중계 장치에 전송되는 음성·악음 신호의 전송 비트레이트보다도 큰 경우(부가 정보 부호화부(701)에 있어서의 패턴 4, 패턴 7 및 패턴 8)에는, 부가 정보를 보낼 수 없는 것으로 하여 설명하였다. 그러나, 본 발명은 이것에 한정되지 않고, 상기한 바와 같은 경우에 대해서도, 부가 모드 정보에 따른 전송 비트레이트가 아니라, 신호 부호화 장치로부터 중계 장치에 전송되는 음성·악음 신호의 전송 비트레이트 이하의 비트레이트로, 부가 정보를 부호화한다고 하는 수법을 채용하는 것도 가능하다. 또한, 이 때, 중계 장치에 입력된 부가 모드 정보를, 부호화에 이용한 전송 비트레이트에 대응하는 부가 모드 정보로 치환할 필요가 있다.
또한, 본 실시예에서는, 중계 장치에 입력되는 부가 정보로서, 즉시성이 높은 지역 재해 정보 등을 예로 들어, 부가 정보가 입력되어, 부호화 장치측으로부터 전송되어 온 음성 정보와 부가 정보의 양쪽을 동시에 보낼 수 없는 것과 같은 경우(부가 정보 부호화부(701)에 있어서의 패턴 1, 패턴 5 및 패턴 9)에는, 부가 정보를 우선하는 것과 같은 형태를 설명하였다. 그러나, 본 발명은 이것에 한정되지 않고, 상기한 바와 같은 경우에는, 반대로 음성 정보를 우선하여 복호화측에 전송한다고 하는 경우에 대해서도, 상기 패턴시에, 부가 정보원 부호와, 송신 장치로부터 전송되는 음성·악음 신호의 정보원 부호에 대한 전송 비트레이트의 할당을 치환하는 것에 의해, 마찬가지로 적용할 수 있다. 또한, 이 때, 복호화 장치측에 있어서도 각각 부호화측의 비트레이트 제어와 대응하는 복호화 방법을 수행할 필요가 있다.
또한, 본 실시예의 도 6에 나타낸 구성을, 메모리, 디스크, 테이프, CD, DVD 등의 기계 판독 가능한 기록 매체에 기록, 기입을 하고, 동작을 실행하는 경우에 대해서도 본 발명은 적용할 수 있으며, 본 실시예와 마찬가지의 작용·효과를 얻을 수 있다.
(실시예 2)
전술한 실시예 1에서는, 중계 장치에 입력되는 부가 정보로서, 음성·악음 정보를 대상으로 한 경우에 대하여 설명하였지만, 본 발명은 이것에 한정되지 않고, 부가 정보로서, 문자 정보, 정지 화상 정보, 동화상 정보 등의 음성·악음 정보 이외의 신호를 대상으로 한 경우에 대해서도 마찬가지로 적용할 수 있다.
그러나, 화상 정보 등의 비교적 정보량이 많은 부가 정보에 대해서는, 부호화의 압축률 등을 고려한 경우, 1 프레임 중의 정보량만으로는 부족한 경우, 복수의 프레임으로 분할하여 부가하지 않으면 안된다. 또한, 음성·악음 신호 등에 대해서도, 송신측으로부터 전송되는 부호화 방식의 전송 비트레이트가 작기 때문에, 지정된 부가 정보 모드에서는, 1 프레임 내에는 부가할 수 없다고 하는 것도 고려할 수 있다.
그래서, 본 발명의 실시예 2에서는, 중계 장치에 있어서 부가 정보를 복수의 프레임으로 분할하여 부가하고, 이것을 신호 복호화 장치에 전송하는 경우에 대하여 설명한다. 또, 이하에 있어서는, 부가 정보로서, 음성·악음 신호를 대상으로 한 경우에 대하여 설명하고, 화상 정보, 문자 정보에 대해서는 후술하기로 한다.
본 실시예에 있어서의 전체적인 시스템의 구성은, 실시예 1의 도 1과 마찬가지이며, 신호 부호화 장치(101)의 작용은 실시예 1과 동일하다.
이하, 본 실시예에 있어서의 중계 장치(103)의 작용에 대하여 설명한다. 부가 모드, 정보 및 부가 정보는, 중계 장치(103)에 입력된다. 중계 장치(103)는, 부가 모드 정보 및 부가 정보가 입력된 경우에는, 전송로 A(102)를 거쳐서 전송되는 부호화 정보에 대하여, 부가 정보의 부가 처리를 실시하고, 얻어지는 부가 처리 후의 부호화 정보(변환후 부호화 정보)를 전송로 B(104)에 송신한다. 중계 장치(103)는, 부가 모드 정보 및 부가 정보가 입력되지 않은 경우에는, 전송로 A(102)를 거쳐서 전송되는 부호화 정보를 전송로 B(104)로 출력한다.
여기서, 중계 장치(103)에 입력되는 부가 모드 정보는, 전술한 부가 정보를 부호화하여 전송할 때의 비트레이트를 지시하는 정보(bitrate1', bitrate2', bitrate3')와, 중계 장치로부터 부가 정보를 전송하는 수법이 실시간인지, 비 실시간인지를 지시하는 실시간 플래그로 구성된다. 여기서, 실시간 플래그의 값이 1인 것은, 부가 정보의 출력 정보를 1 프레임으로 전송하는 것을 의미하고, 실시간 플래그의 값이 0인 것은, 부가 정보의 출력 정보를 복수 프레임으로 분할하여 전송하는 것을 의미한다.
다음에, 본 실시예에 있어서의 중계 장치(103)의 내부 구성에 대하여 설명한다. 단, 중계 장치(103)의 구성 자체는, 실시예 1의 도 6과 마찬가지이며, 중계 장치(103)에 있어서의 부가 처리부(603)의 부가 정보 부호화부(701), 부가 정보 통합부(702) 및 부호화 정보 통합부(604) 이외의 각 구성 부분의 작용에 대해서는 실 시예 1과 동일하기 때문에, 설명을 생략한다.
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 부가 모드 정보, 부가 정보 및 부호화 정보 해석부(602)로부터 전송 모드 정보 및 부가 정보 플래그가 입력된 경우, 부가 모드 정보 및 전송 모드 정보의 조합에 따른 전송 비트레이트에 의해, 부가 정보에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 정보원 부호(이하, 「부가 정보 정보원 부호」라고 함), 전송 모드 정보 및 부가 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다. 또한, 부가 정보 부호화부(701)는, 내부에 정보를 축적할 수 있는 메모리를 구비한다.
이하, 본 실시예에 있어서의 부가 정보 부호화부(701)의 부호화 처리를 전송 모드 정보 및 부가 모드 정보의 조합에 따른 9 패턴으로 나누어, 구체적으로 설명한다. 단, 패턴 4, 패턴 7 및 패턴 8 이외의 패턴에 대해서는, 실시간 플래그의 값에 관계없이, 실시예 1에서 설명한 처리와 동일하기 때문에, 설명을 생략한다.
(패턴 4)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate3이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 1인 경우에는, bitrate3이 나타내는 전송 비트레이트는, 부가 정보를 부호화하기 위하여 충분하지는 않다고 판단하여, 부가 정보의 부호화 처리는 하지 않고서, 부가 모 드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다(패턴 4a). 또한, 부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate3이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 0인 경우에는, 부가 정보를 bitrate2"이 나타내는 전송 비트레이트에 의해, CELP 타입의 음성 복호화 방법을 이용하여 부호화를 실시하고, 얻어진 부가 정보 정보원 부호 중의 bitrate3"에 상당하는 부가 정보 정보원 부호의 부분 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다. 또한, 부가 정보 부호화부(701)는, 이 경우, 몇 개의 프레임으로 분할하여, 이 프레임 중의 부가 정보가 그 몇 번째인지를 나타내는 프레임 인덱스를 나타내는 정보(프레임 인덱스 정보)를 부가 모드 정보에 부가하고, 이것을 새로운 부가 모드 정보로서 부가 정보 통합부(702)에 출력한다(패턴 4b).
(패턴 7)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate3이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 1인 경우에는, bitrate3"이 나타내는 전송 비트레이트는, 부가 정보를 부호화하기 위하여 충분하지는 않다고 판단하여, 부가 정보의 부호화 처리는 하지 않고서, 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한 다(패턴 7a). 또한, 부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate3이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 0인 경우에는, 부가 정보를 bitrate1"이 나타내는 전송 비트레이트를 이용하여 부호화를 실시하고, 얻어진 부가 정보 정보원 부호 중의 bitrate3"에 상당하는 부가 정보 정보원 부호의 부분 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다. 또한, 부가 정보 부호화부(701)는, 이 경우, 몇 개의 프레임으로 분할하여, 이 프레임 중의 부가 정보가 그 몇 번째인지를 나타내는 프레임 인덱스를 나타내는 정보(프레임 인덱스 정보)를 부가 모드 정보에 부가하고, 이것을 새로운 부가 모드 정보로서 부가 정보 통합부(702)에 출력한다(패턴 7b).
(패턴 8)
부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate2이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 1인 경우에는, bitrate2"이 나타내는 전송 비트레이트는, 부가 정보를 부호화하기 위하여 충분하지는 않다고 판단하여, 부가 정보의 부호화 처리는 하지 않고서, 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다(패턴 8a). 또한, 부가 정보 부호화부(701)는, 부가 정보 수신부(601)로부터 얻 어지는 부가 모드 정보가 bitrate1'이고, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate2이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 0인 경우에는, 부가 정보를 bitrate1"이 나타내는 전송 비트레이트를 이용하여 부호화를 실시하고, 얻어진 부가 정보 정보원 부호 중의 bitrate2"에 상당하는 부가 정보 정보원 부호의 부분 정보, 전송 모드 정보 및 부가 정보 플래그를 부가 정보 통합부(702)에 출력한다. 또한, 부가 정보 부호화부(701)는, 이 경우, 몇 개의 프레임으로 분할하여, 이 프레임 중의 부가 정보가 그 몇 번째인지를 나타내는 프레임 인덱스를 나타내는 정보(프레임 인덱스 정보)를 부가 모드 정보에 부가하고, 이것을 새로운 부가 모드 정보로서 부가 정보 통합부(702)에 출력한다(패턴 8b).
또, 패턴 4a, 4b, 7a, 7b, 8a, 8b에 있어서, 당해 프레임에서 전송하지 못했던 부가 정보 정보원 부호의 나머지 부분 정보, 및, 그 시점에서의 부가 모드 정보, 전송 모드 정보 및 부가 정보 플래그는, 부가 정보 부호화부(701) 내에 구비된 메모리에 축적되어, 중계 장치(103)로의 새로운 부가 정보의 입력이 없어지는 즉시 축적된 순서대로, 차례로 부가 정보 통합부(702)에 출력하는 것으로 한다.
다음에, 본 실시예에 있어서의 부가 정보 통합부(702)의 작용에 대하여 설명한다. 부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 부가 모드 정보, 부가 정보 정보원 부호, 전송 모드 정보, 부가 정보 플래그 및 부호화 정보 해석부(602)로부터 각 레이어의 정보원 부호가 입력된 경우, 부가 모드 정보 및 전송 모드 정보의 조합에 따라서, 각 레이어의 정보원 부호와 부가 정보 정보원 부호와 의 통합 처리를 수행하고, 얻어진 정보원 부호, 부가 정보 정보원 부호, 전송 모드 정보, 부가 모드 정보 및 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다. 또한, 부가 정보 부호화부(701)로부터 부가 모드 정보, 부가 정보 정보원 부호, 전송 모드 정보, 부가 정보 플래그 및 부호화 정보 해석부(602)로부터 각 레이어의 정보원 부호가 입력되지 않은 경우에는 아무것도 동작하지 않는다.
이하, 본 실시예에 있어서의 부가 정보 통합부(702)에 있어서의 통합 처리를 전송 모드 정보 및 부가 모드 정보의 조합에 따른 9 패턴으로 나누어, 구체적으로 설명한다. 단, 패턴 4, 패턴 7, 및 패턴 8 이외의 패턴에 대해서는, 실시간 플래그의 값에 관계없이, 실시예 1에서 설명한 처리와 동일하기 때문에, 설명을 생략한다.
(패턴 4)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 전송 모드 정보가 bitrate3이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 1인 경우에는, 통합 처리는 하지 않고, 기본 레이어 정보원 부호, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 0의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다(패턴 4a). 또한, 부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 전송 모드 정보가 bitrate3이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 0인 경우에는, 기본 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0을 대입하고, 부가 모드 정보에 bitrate2"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 1의 값을 대입 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다(패턴 4b).
(패턴 7)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 전송 모드 정보가 bitrate3이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 1인 경우에는, 통합 처리는 하지 않고, 기본 레이어 정보원 부호, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 0의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다(패턴 7a). 또한, 부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 전송 모드 정보가 bitrate3이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 0인 경우에는, 기본 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0을 대입하고, 부가 모드 정보에 bitrate1"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 1의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다(패턴 7b).
(패턴 8)
부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 전송 모드 정보가 bitrate2이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 1인 경우에는, 통합 처리는 하지 않고, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 0의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다(패턴 8a). 또한, 부가 정보 통합부(702)는, 부가 정보 부호화부(701)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 전송 모드 정보가 bitrate2이며, 또한, 부가 모드 정보에 포함되는 실시간 플래그의 값이 0인 경우에는, 기본 레이어 정보원 부호, 및 제 1 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0을 대입하고, 부가 모드 정보에 bitrate1"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보, 및 전송 모드 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 이 때 부가 정보 통합부(702)는, 1의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(604)에 출력한다(패턴 8b).
부호화 정보 통합부(604)는, 부가 정보 통합부(702)로부터 전송 모드 정보, 부가 모드 정보, 부가 정보 플래그, 및 각종의 정보원 부호가 입력된 경우, 그들을 통합한 후, 변환후 부호화 정보로서 제어 스위치(606)에 출력한다. 또한, 부호화 정보 통합부(604)는, 부가 정보 통합부(702)로부터 전송 모드 정보, 부가 모드 정보, 부가 정보 플래그, 및 각종의 정보원 부호가 입력되지 않은 경우에는 아무것도 동작하지 않는다.
다음에, 본 실시예에 있어서의 신호 복호화 장치(105)에 대하여 설명한다. 또, 본 실시예에 있어서의 신호 복호화 장치(105)의 구성은 도 9와 동일하고, 부가 정보 복호화부(906) 이외의 작용은, 전술한 실시예 1과 동일하기 때문에, 설명을 생략한다.
부가 정보 복호화부(906)는, 내부에 정보원 부호를 축적할 수 있는 메모리를 갖고, 또한, 입력된 정보원 부호를, 복수의 종류의 전송 비트레이트로 복호화 가능한 멀티레이트 복호화 수법을 구비한다. 본 실시예에서는, 부호화 정보 해석부(901)로부터 얻어지는 부가 모드 정보에 따라서, 미리 정해진 6 종류의 전송 비트레이트 bitrate1", bitrate2", bitrate3", bitrate4", bitrate5", bitrate6"으로 복호화 가능한 것으로 한다. 또한, 이 6 종류의 전송 비트레이트의 값은, 부가 정보 부호화부(701)에 있어서의 예와 마찬가지로, bitrate1, bitrate2 및 bitrate3을 이용하여 상기 수학식 1과 같이 나타낼 수 있다.
부가 정보 복호화부(906)는, 제어 스위치(910)가 온 상태인 경우, 부호화 정보 해석부(901)로부터 얻어지는 부가 모드 정보에 따른 전송 비트레이트에 의해, 부호화 정보 해석부(901)로부터 얻어지는 부가 정보 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「부가 정보 복호화 신호」라고 함)를 가산부(913)에 출력한다. 또, 부가 정보 복호화부(906)는, 제어 스위치(910)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
이하에, 부가 모드 정보에 따른 복호화 방법을 설명한다. 부가 정보 복호화부(906)는, 부호화 정보 해석부(901)로부터 얻어지는 부가 모드 정보에 포함되는 실시간 플래그가 1인 경우에는, 부가 모드 정보(bitrate1"∼bitrate6")가 나타내는 전송 비트레이트로 부가 정보, 정보원을 복호화하여, 얻어진 부가 정보 복호화 신호를 가산부(913)에 출력한다. 또한, 부가 정보 복호화부(906)는, 부호화 정보 해석부(901)로부터 얻어지는 부가 모드 정보에 포함되는 실시간 플래그가 0인 경우에는, 부가 모드 정보에 포함되는 프레임 인덱스 정보를 참조하여, 복수의 프레임으로 분할된 부가 정보 정보원 부호를 모두 수신할 때까지는, 내부에 구비하는 메모리에 부가 정보 정보원 부호를 저장하고, 분할된 부가 정보 정보원 부호를 모두 수신한 시점에서, 모든 부가 정보 정보원 부호를 부가 모드 정보(bitrate1"∼bitrate6")가 나타내는 전송 비트레이트로 부가 정보, 정보원을 복호화하여, 얻어진 부가 정보 복호화 신호를 가산부(913)에 출력한다.
이와 같이, 본 실시예에 따르면, 전송 중인 전송 모드 정보가 나타내는 전송 비트레이트와 부가 정보를 부호화할 때의 전송 비트레이트를 비교하여, 부가 정보의 전송 비트레이트가 부호화 정보의 전송 비트레이트보다도 높은 경우에, 부가 정보를 복수의 프레임으로 분할하여 부호화 정보에 부가해서, 신호 복호화 장치(105)에 전송할 수 있다.
또한, 전술한 설명은, 전송되는 부호화 정보보다도 부가 정보를 우선하여, 부가 정보를 분할하여 전송할 때에, 모든 비트레이트를 부가 정보에 할당하는 경우에 있어서의 처리이지만, 부호화 정보의 일부와 분할한 부가 정보를 조합시켜 전송 한다고 하는 수법도, 전술한 설명과 동일한 처리를 함으로써 가능하다.
또한, 전술한 설명에 있어서의 분할 수법 외에, 부가 정보의 전송 비트레이트를 항상 bitrate3"에 고정하고, 분할하여 전송한다(부가 정보 부호화부(701)에 있어서의 패턴 1, 패턴 2, 및 패턴 3이 해당)고 하는 수법도 가능하다.
또한, 화상(동화상, 정지 화상), 문자 정보 등을 부가 정보로서 전송하는 경우에 있어서도, 지금까지 설명한 수법을 마찬가지로 적용하는 것이 가능하다. 단, 화상 정보, 및 문자 정보를 부가 정보로 한 경우, 신호 복호화 장치(105) 내에는 각각의 부가 정보원 부호를 복호화하는 수법, 또한 복호화된 부가 정보를 표시하는 기능, 혹은, 정보의 착신을 사용자에게 알리는 기능 등을 가질 필요가 있다. 이 때, 부가 정보 복호화부(906)는, 복호화한 부가 정보 복호화 신호를 가산부(913)가 아니라, 적절한 표시 기능, 통지 기능을 갖는 장치에 출력하게 된다. 부가 정보가, 음성 신호가 아닌 경우(화상 정보 및 부가 정보)의 복호화 장치의 블록도를 도 10에 나타낸다. 도 10은, 도 9와 비교하여, 가산부(913)를 삭제한 구성을 채용하며, 부가 정보 복호화부(906)의 출력 신호가 가산부(912)의 출력과 가산되지 않고서 출력된다.
(실시예 3)
본 발명의 실시예 3에서는, 전술한 실시예 1 및 실시예 2에 있어서, 부가 정보를 부가했을 때, 부호화 정보의 레이어수의 전환에 수반하여 발생한다고 생각되는 이음을 경감하는 처리를 추가하는 경우에 대하여 설명한다. 또, 본 실시예의 전체적인 시스템의 구성은, 실시예 1에서 설명한 도 1과 마찬가지이다.
본 실시예에서는, 신호 부호화 장치(101)로부터 출력되는 데이터 구조를 도 11에 나타내는 것으로 하고, 실시예 1에 있어서의 부가 정보 플래그를 확장하여, 새롭게 부가 처리 상태 정보(초기값은 0)로서 할당하는 것으로 한다. 부가 처리 상태 정보(APSI)의 설명에 관해서는 후술하기로 한다.
이하, 본 실시예에 있어서의 중계 장치(103)의 작용에 대하여 설명한다. 부가 모드 정보 및 부가 정보는, 중계 장치(103)에 입력된다. 중계 장치(103)는, 부가 모드 정보 및 부가 정보가 입력된 경우에는, 전송로 A(102)를 거쳐서 전송되는 부호화 정보에 대하여, 부가 정보의 부가 처리를 실시하고, 얻어지는 부가 처리 후의 부호화 정보(변환후 부호화 정보)를 전송로 B(104)에 송신한다. 중계 장치(103)는, 부가 모드 정보 및 부가 정보가 입력되지 않은 경우에는, 전송로 A(102)를 거쳐서 전송되는 부호화 정보를 전송로 B(104)로 출력한다.
다음에, 본 실시예에 있어서의 중계 장치(103)의 내부 구성에 대하여 설명한다. 단, 중계 장치(103)의 구성 자체는, 실시예 1의 도 6과 마찬가지이며, 중계 장치(103)에 있어서의 부가 정보 수신부(601), 부가 처리부(603)의 부가 정보 부호화부(701), 부가 정보 통합부(702) 및 부호화 정보 통합부(604) 이외의 각 구성 부분의 작용에 대해서는 실시예 1과 동일하기 때문에, 설명을 생략한다.
부가 정보 수신부(601)는, 그 내부에 부가 정보, 및 부가 모드 정보를 저장할 수 있는 버퍼(내부 버퍼)를 구비하고, 중계 장치(103)에 부가 모드 정보 및 부가 정보가 입력된 경우에는, 입력된 시점으로부터 일정 시간 이내에 있어서, 입력 된 부가 모드 정보와, 값을 1로 한 부가 처리 상태 정보를 부가 처리부(603)에 출력하고, 입력된 부가 정보를 내부 버퍼에 저장한다. 여기서, 부가 처리 상태 정보란, 「부가 정보가 입력되어 있지 않음(값은 0)」, 「부가 정보의 입력 개시로부터 일정 시간 내(값은 1)」, 「부가 정보의 입력 개시로부터 일정 시간 후(값은 2)」, 「부가 정보의 입력 종료로부터 일정 시간 내(값은 3)」라고 하는 4 종류의 상태를 나타내는 정보이며, 디폴트값은 0으로 한다. 그리고, 부가 정보 수신부(601)는, 중계 장치(103)에 부가 모드 정보 및 부가 정보가 입력된 경우, 입력된 시점으로부터 일정 시간 경과 후에, 값을 2로 한 부가 처리 상태 정보와 함께, 내부 버퍼에 저장되어 있는 부가 모드 정보 및 부가 정보를 저장한 순서대로 부가 처리부(603)에 출력한다. 또한, 부가 정보 수신부(601)는, 내부 버퍼에 저장되어 있는 부가 정보를 모두 부가 처리부(603)에 출력한 후, 일정 시간 이내에는, 직전에 내부 버퍼에 저장되어 있던 부가 모드 정보, 및 값을 3으로 한 부가 처리 상태 정보를 부가 처리부(603)에 출력한다. 또한, 부가 정보 수신부(601)는, 중계 장치(103)에 부가 모드 정보 및 부가 정보가 입력되지 않은 경우에는, 부가 처리부(603)에는 아무것도 출력하지 않는다.
또한, 부가 정보 수신부(601)는, 중계 장치(103)에 입력되는 부가 모드 정보 및 부가 정보를 수신하여, 부가 모드 정보 및 부가 정보가 입력되었는지 여부에 따라서, 제어 스위치(605, 606)의 온/오프 제어를 한다. 구체적으로는, 부가 정보 수신부(601)는, 중계 장치(103)에 부가 모드 정보 및 부가 정보가 입력되고 나서 일정 시간 이내인 경우(부가 처리 상태 정보의 값이 1), 혹은 내부 버퍼에 아직 부 가 정보가 저장되어 있는 경우(부가 처리 상태 정보의 값이 2), 혹은 내부 버퍼가 비어 있게 되고 나서 일정 시간 경과 이내인 경우(부가 처리 상태 정보의 값이 3)에는, 제어 스위치(605)를 부호화 정보 해석부(602) 측에 접속하고, 제어 스위치(606)를 부호화 정보 통합부(604) 측에 접속한다. 또한, 부가 정보 수신부(601)는, 중계 장치(103)에 부가 모드 정보 및 부가 정보가 입력되지 않은 경우, 혹은 내부 버퍼가 비어 있게 되고 나서 일정 시간 경과한 경우(부가 처리 상태 정보의 값이 0)에는, 제어 스위치(605)를 제어 스위치(606) 측에 접속하고, 제어 스위치(606)를 제어 스위치(605) 측에 접속한다. 이와 같이, 중계 장치(103)에 부가 정보가 입력되는지 여부에 따라 제어 스위치(605, 606)를 온/오프 제어함으로써, 중계 장치(103)의 동작이 결정된다.
부가 처리부(603)는, 부호화 정보 해석부(602)로부터, 전송 모드 정보, 및 전송 모드 정보에 따른 각 레이어의 정보원 부호가 입력되고, 또한 부가 정보 수신부(601)로부터 부가 모드 정보 및 부가 처리 상태 정보가 입력된 경우에는, 전송 모드 정보, 부가 모드 정보 및 부가 처리 상태 정보의 조합에 따라서, 각 레이어의 정보원 부호에 대하여, 부가 정보의 부가 처리를 실시하고, 얻어진 정보원 부호, 전송 모드 정보, 부가 모드 정보 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 부가 처리부(603)는, 부호화 정보 해석부(602)로부터, 전송 모드 정보 및 전송 모드 정보에 따른 각 레이어의 정보원 부호가 입력되지 않고, 또한 부가 정보 수신부(601)로부터 부가 모드 정보, 및 부가 처리 상태 정보가 입력되지 않은 경우에는, 아무것도 동작하지 않는다.
다음에, 도 6의 부가 처리부(603)의 구성에 대하여 도 12를 이용하여 설명한다. 부가 처리부(603)는, 부가 정보 부호화부(1201)와, 부가 정보 통합부(1202)로 주로 구성된다.
부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 부가 모드 정보 및 부가 처리 상태 정보가 입력되고, 부호화 정보 해석부(602)로부터 전송 모드 정보가 입력된 경우, 부가 모드 정보, 부가 처리 상태 정보 및 전송 모드 정보의 조합에 따른 전송 비트레이트에 의해, 부가 정보에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 정보원 부호(이하, 「부가 정보 정보원 부호」라고 함), 전송 모드 정보, 부가 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다. 또, 부가 정보 부호화부(1201)는, 부가 모드 정보, 부가 처리 상태 정보, 전송 모드 정보가 입력되지 않은 경우에는 아무것도 동작하지 않는다.
부가 정보 부호화부(1201)는, 입력되는 정보(신호)를 복수의 전송 비트레이트로 부호화 가능한 멀티레이트 부호화 방법을 구비한다. 본 실시예에서는, 부가 정보 수신부로부터 얻어지는 부가 모드 정보와 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보와의 조합에 따라서, 미리 정해진 6 종류의 전송 비트레이트 bitrate1", bitrate2", bitrate3", bitrate4", bitrate5", bitrate6"의 값을 취할 수 있는 것으로 한다. 또한, 이 6 종류의 전송 비트레이트의 값은, bitrate1, bitrate2 및 bitrate3을 이용하여 상기 수학식 1과 같이 나타낼 수 있다.
이하, 부가 정보 부호화부(1201)에 있어서의 부호화 처리에 대하여 전송 모 드 정보, 부가 모드 정보, 및 부가 처리 상태 정보의 조합에 따른 9 패턴으로 나누어, 구체적으로 설명한다.
(패턴 1)
부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate3이며, 또한 부가 정보 수신부(601)로부터 얻어진 부가 처리 상태 정보의 값이 2인 경우에는, 부가 정보를 bitrate3"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다(패턴 1a). 또한, 부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate3이며, 또한 부가 정보 수신부(601)로부터 얻어지는 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다(패턴 1b).
(패턴 2)
부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate2이며, 또한 부가 정보 수신부(601)로부터 얻어진 부가 처리 상태 정보의 값이 2인 경우에는, 부가 정보를 bitrate5"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다(패턴 2a). 또한, 부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate3'이며, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate2이고, 또한 부가 정보 수신부(601)로부터 얻어지는 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다(패턴 2b).
(패턴 3)
부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate3'이며, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate1이고, 또한 부가 정보 수신부(601)로부터 얻어진 부가 처리 상태 정보의 값이 2인 경우에는, 부가 정보를 bitrate6"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다(패턴 3a). 또한, 부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate1이며, 또한 부가 정보 수신부(601)로부터 얻어지는 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다(패턴 3b).
(패턴 4)
부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate3인 경우에는, bitrate3"이 나타내는 전송 비트레이트는, 부가 정보를 부호화하기 위하여 충분하지는 않다고 판단하여, 부가 정보의 부호화 처리는 하지 않고서, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다.
(패턴 5)
부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate2'이며, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate2이고, 또한 부가 정보 수신부(601)로부터 얻어진 부가 처리 상태 정보의 값이 2인 경우에는, 부가 정보를 bitrate2"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부 가 정보 통합부(1202)에 출력한다(패턴 5a). 또한, 부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate2'이며, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate2이고, 또한 부가 정보 수신부(601)로부터 얻어지는 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다(패턴 5b).
(패턴 6)
부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate2'이며, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate1이고, 또한 부가 정보 수신부(601)로부터 부가 정보가 입력된 경우에는, 부가 정보를 bitrate4"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다(패턴 6a). 또한, 부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate2'이며, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate1이고, 또한 부가 정보 수신부(601)로부터 얻어지는 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다(패턴 6b).
(패턴 7)
부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate3인 경우에는, bitrate3"이 나타내는 전송 비트레이트는, 부가 정보를 부호화하기 위하여 충분하지는 않다고 판단하여, 부가 정보의 부호화 처리는 하지 않고서, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다.
(패턴 8)
부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 또한 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate2인 경우에는, bitrate2"이 나타내는 전송 비트레이트는, 부가 정보를 부호화하기 위하여 충분하지는 않다고 판단하여, 부가 정보의 부호화 처리는 하지 않고서, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다.
(패턴 9)
부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate1'이며, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate1이고, 또한 부가 정보 수신부(601)로부터 얻어지는 부가 처리 상태 정보의 값이 2인 경우에는, 부가 정보를 bitrate1"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다(패턴 9a). 또한, 부가 정보 부호화부(1201)는, 부가 정보 수신부(601)로부터 얻어지는 부가 모드 정보가 bitrate1'이며, 부호화 정보 해석부(602)로부터 얻어지는 전송 모드 정보가 bitrate1이고, 또한 부가 정보 수신부(601)로부터 얻어지는 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부가 정보 통합부(1202)에 출력한다(패턴 9b).
이상이, 부가 정보 부호화부(1201)에 있어서의 부호화 처리에 대한 설명이다.
부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 부가 모드 정보, 전송 모드 정보, 부가 처리 상태 정보, 및 부호화 정보 해석부(602)로부터 각 레이어의 정보원 부호가 입력된 경우, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보의 조합에 따라서, 각 레이어의 정보원 부호와 부가 정보 정보원 부호와의 통합 처리를 실시하고, 얻어진 각 정보원 부호, 전송 모드 정보, 부가 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다. 또한, 부가 정보 부호화부(1201)로부터 부가 모드 정보, 전송 모드 정보, 부가 처리 상태 정보 및 부호화 정보 해석부(602)로부터 각 레이어의 정보원 정보원 부호가 입력되지 않은 경우에는 아무것도 동작하지 않는다.
이하, 부가 정보 통합부(1202)에 있어서의 통합 처리에 대하여 전송 모드 정보, 부가 모드 정보, 및 부가 처리 상태 정보의 조합에 따른 9 패턴으로 나누어, 구체적으로 설명한다.
(패턴 1)
부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 전송 모드 정보가 bitrate3이며, 또한 부가 처리 상태 정보의 값이 2인 경우에는, 기본 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0을 대입하고, 부가 모드 정보에 bitrate3"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 1a). 또한, 부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 전송 모드 정보가 bitrate3이며, 또한 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 기본 레이어 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 1b).
(패턴 2)
부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 전송 모드 정보가 bitrate2이며, 또한 부가 처리 상태 정보의 값이 2인 경우에는, 제 1 확장 레이어 정보원 부호를 부가 정보 정보원 부 호로 치환하고, 전송 모드 정보에 bitrate3을 대입하고, 부가 모드 정보에 bitrate5"을 대입하여, 기본 레이어 정보원 부호, 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 2a). 또한, 부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 전송 모드 정보가 bitrate2이며, 또한 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 2b).
(패턴 3)
부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 전송 모드 정보가 bitrate1이며, 또한 부가 처리 상태 정보의 값이 2인 경우에는, 제 2 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate2를 대입하고, 부가 모드 정보에 bitrate6"을 대입하여, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 3a). 또한, 부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 전송 모드 정보가 bitrate1이며, 또한 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 제 2 확장 레이 어 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 3b).
(패턴 4)
부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 또한 전송 모드 정보가 bitrate3인 경우에는, 통합 처리는 하지 않고, 기본 레이어 정보원 부호, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다.
(패턴 5)
부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 전송 모드 정보가 bitrate2이며, 또한 부가 처리 상태 정보의 값이 2인 경우에는, 기본 레이어 정보원 부호, 및 제 1 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0을 대입하고, 부가 모드 정보에 bitrate2"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 5a). 또한, 부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 전송 모드 정보가 bitrate2이며, 또한 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상 태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 5b).
(패턴 6)
부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 전송 모드 정보가 bitrate1이며, 또한 부가 처리 상태 정보의 값이 2인 경우에는, 제 1 확장 레이어 정보원 부호, 및 제 2 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate3을 대입하고, 부가 모드 정보에 bitrate4"을 대입하여, 기본 레이어 정보원 부호, 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 6a). 또한, 부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 전송 모드 정보가 bitrate1이며, 또한 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 제 2 확장 레이어 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 6b).
(패턴 7)
부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 또한 전송 모드 정보가 bitrate3인 경우에는, 통합 처리는 하지 않고, 기본 레이어 정보원 부호, 전송 모드 정보, 및 부가 처리 상태 정 보를 부호화 정보 통합부(604)에 출력한다.
(패턴 8)
부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 또한 전송 모드 정보가 bitrate2인 경우에는, 통합 처리는 하지 않고, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다.
(패턴 9)
부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 전송 모드 정보가 bitrate1이며, 또한 부가 처리 상태 정보의 값이 2인 경우에는, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 및 제 2 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0을 대입하고, 부가 모드 정보에 bitrate1"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 9a). 또한, 부가 정보 통합부(1202)는, 부가 정보 부호화부(1201)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 전송 모드 정보가 bitrate1이며, 또한 부가 정보 상태 정보의 값이 1 또는 3인 경우에는, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 제 2 확장 레이어 정보원 부호, 부가 모드 정보, 전송 모드 정보, 및 부가 처리 상태 정보를 부호화 정보 통합부(604)에 출력한다(패턴 9b).
이상이, 부가 정보 통합부(1202)에 있어서의 통합 처리에 대한 설명이다.
부호화 정보 통합부(604)는, 부가 정보 통합부(1202)로부터 전송 모드 정보, 부가 모드 정보, 부가 처리 상태 정보, 및 각종의 정보원 부호가 입력된 경우, 그들을 통합한 후, 얻어진 부호화 정보를, 변환후 부호화 정보로서 제어 스위치(606)에 출력한다. 또한, 부호화 정보 통합부(604)는, 부가 정보 통합부(1202)로부터 전송 모드 정보, 부가 모드 정보, 및 각종의 정보원 부호가 입력되지 않은 경우에는 아무것도 동작하지 않는다.
또한, 이 때, 부호화 정보 통합부(604)로부터 출력되는 부호화 정보의 데이터 구조(비트 스트림)는, 부가 정보 통합부(1202)에 있어서의 패턴에 따라서, 각각 도 13 중의 (a)∼(o)와 같은 데이터 구조로 된다.
다음에, 본 실시예에 있어서의 신호 복호화 장치(105)의 구성에 대하여 도 14를 이용하여 설명한다. 신호 복호화 장치(105)는, 부호화 정보 해석부(1401)와, 복호화 동작 제어부(1402)와, 기본 레이어 복호화부(1403)와, 제 1 확장 레이어 복호화부(1404)와, 제 2 확장 레이어 복호화부(1405)와, 부가 정보 복호화부(1406)와, 제어 스위치(1407∼1410)와, 이득 조정부(1411∼1413)와, 가산부(1414∼1416)로 주로 구성된다.
부호화 정보는, 부호화 정보 해석부(1401)에 입력된다. 부호화 정보 해석부(1401)는, 입력된 부호화 정보 중의 부가 처리 상태 정보의 값이 2인 경우에는, 부호화 정보를 전송 모드 정보, 부가 모드 정보, 각 레이어의 정보원 부호, 부가 정보 정보원 부호, 및 부가 처리 상태 정보로 분리하여, 얻어진 전송 모드 정보, 부가 모드 정보, 각 레이어의 정보원 부호, 및 부가 처리 상태 정보를 복호화 동작 제어부(1402)에 출력하고, 부가 모드 정보, 및 부가 정보 정보원 부호를 부가 정보 복호화부(1406)에 출력한다. 또한, 부호화 정보 해석부(1401)는, 입력된 부호화 정보 중의 부가 처리 상태 정보의 값이 0인 경우에는, 부호화 정보를 전송 모드 정보, 각 레이어의 정보원 부호, 및 부가 처리 상태 정보로 분리하여, 얻어진 전송 모드 정보, 각 레이어의 정보원 부호, 및 부가 처리 상태 정보를 복호화 동작 제어부(1402)에 출력한다. 또한, 부호화 정보 해석부(1401)는, 입력된 부호화 정보 중의 부가 처리 상태 정보의 값이 1 또는 3인 경우에는, 부호화 정보를 전송 모드 정보, 부가 모드 정보, 각 레이어의 정보원 부호, 및 부가 처리 상태 정보로 분리하여, 얻어진 전송 모드 정보, 부가 모드 정보, 각 레이어의 정보원 부호, 및 부가 처리 상태 정보를 복호화 동작 제어부(1402)에 출력한다. 또한, 부호화 정보 해석부(1401)는, 부호화 정보의 해석 결과에 따라서 제어 스위치(1410)의 온/오프 상태의 제어를 한다. 구체적으로는, 부호화 정보 해석부(1401)는, 입력된 부호화 정보 중의 부가 처리 상태 정보의 값이 2가 아닌 경우에는 제어 스위치(1410)를 오프 상태로 하고, 입력된 부호화 정보 중의 부가 처리 상태 정보의 값이 2인 경우에는 제어 스위치(1410)를 온 상태로 한다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보, 부가 모드 정보, 및 부가 처리 상태 정보에 따라서, 제어 스위치(1407∼1409)의 상태의 제어, 및 이득 조정부(1411∼1413)의 제어(페이드 인(fade in)/페이드 아웃(fade out)/오프)를 하고, 또한 각 레이어 정보원 부호를, 기본 레이어 복호화부(1403), 제 1 확장 레이어 복호화부(1404), 및 제 2 확장 레이어 복호화부(1405)에 출력한다.
복호화 동작 제어부(1402)의 처리는, 통상의 복호화 처리, 페이드 아웃 처리, 페이드 인 처리의 3 패턴으로 크게 나누어진다. 여기서는 각 패턴별로 각각의 처리를 상세히 설명한다.
(통상의 복호화 처리, 부가 처리 상태 정보의 값이 0 혹은 2일 때)
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 0 또는 2이고, 또한 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate0인 경우에는, 아무것도 동작하지 않는다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 0 또는 2이고, 또한 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate3인 경우에는, 제어 스위치(1407)를 온 상태로 하고, 제어 스위치(1408, 1409)를 오프 상태로 하며, 또한, 이득 조정부(1411∼1413)를 모두 오프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404), 및 제 2 확장 레이어 복호화부(1405)에는 아무것도 출력하지 않는다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 0 또는 2이고, 또한 부호화 정보 해석부(1401)로부터 얻 어지는 전송 모드 정보가 bitrate2인 경우에는, 제어 스위치(1407, 1408)를 온 상태로 하고, 제어 스위치(1409)를 오프 상태로 하며, 또한, 이득 조정부(1411∼1413)를 모두 오프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(1405)에는 아무것도 출력하지 않는다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 0 또는 2이고, 또한 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate1인 경우에는, 제어 스위치(1407∼1409)를 모두 온 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(1405)에 제 2 확장 레이어 정보원 부호를 출력한다.
(페이드 아웃 처리=부가 처리 개시시, 부가 처리 상태 정보의 값이 1일 때)
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 1이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate3이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate3"인 경우에는, 제어 스위치(1407)를 온 상태로 하고, 제어 스위치(1408, 1409)를 오프 상태로 하며, 또한, 이득 조정부(1411)를 페이드 아웃 상 태로 하고, 이득 조정부(1412, 1413)를 오프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404), 및 제 2 확장 레이어 복호화부(1405)에는 아무것도 출력하지 않는다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 1이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate2이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate5"인 경우에는, 제어 스위치(1407, 1408)를 온 상태로 하고, 제어 스위치(1409)를 오프 상태로 하며, 또한, 이득 조정부(1412)를 페이드 아웃 상태로 하고, 이득 조정부(1411, 1413)를 오프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(1405)에는 아무것도 출력하지 않는다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 1이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate2이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate2"인 경우에는, 제어 스위치(1407, 1408)를 온 상태로 하고, 제어 스위치(1409)를 오프 상태로 하며, 또한, 이득 조정부(1411, 1412)를 페이드 아웃 상태로 하고, 이득 조정부(1413)를 오프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화 부(1405)에는 아무것도 출력하지 않는다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 1이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate1이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate6"인 경우에는, 제어 스위치(1407∼1409)를 온 상태로 하고, 또한, 이득 조정부(1413)를 페이드 아웃 상태로 하며, 이득 조정부(1411, 1412)를 오프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(1405)에 제 2 확장 레이어 정보원 부호를 출력한다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 1이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate1이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate4"인 경우에는, 제어 스위치(1407∼1409)를 온 상태로 하고, 또한, 이득 조정부(1412, 1413)를 페이드 아웃 상태로 하며, 이득 조정부(1411)를 오프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(1405)에 제 2 확장 레이어 정보원 부호를 출력한다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부 가 처리 상태 정보의 값이 1이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate1이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate1"인 경우에는, 제어 스위치(1407∼1409)를 온 상태로 하고, 또한, 이득 조정부(1411∼1413)를 페이드 아웃 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(1405)에 제 2 확장 레이어 정보원 부호를 출력한다.
(페이드 인 처리=부가 처리 종료시, 부가 처리 상태 정보의 값이 3일 때)
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 3이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate3이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate3"인 경우에는, 제어 스위치(1407)를 온 상태로 하고, 제어 스위치(1408, 1409)를 오프 상태로 하며, 또한, 이득 조정부(1411)를 페이드 인 상태로 하고, 이득 조정부(1412, 1413)를 오프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404), 및 제 2 확장 레이어 복호화부(1405)에는 아무것도 출력하지 않는다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 1이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate2이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate5"인 경우에는, 제어 스위치(1407, 1408)를 온 상태로 하고, 제어 스위치(1409)를 오프 상태로 하며, 또한, 이득 조정부(1412)를 페이드 인 상태로 하고, 이득 조정부(1411, 1413)를 오프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(1405)에는 아무것도 출력하지 않는다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 1이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate2이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate2"인 경우에는, 제어 스위치(1407, 1408)를 온 상태로 하고, 제어 스위치(1409)를 오프 상태로 하며, 또한, 이득 조정부(1411, 1412)를 페이드 인 상태로 하고, 이득 조정부(1413)를 오프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(1405)에는 아무것도 출력하지 않는다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 1이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate1이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate6"인 경우에는, 제어 스위치(1407∼1409)를 온 상태로 하고, 또한, 이득 조정부(1413)를 페이드 인 상태로 하며, 이득 조정부(1411, 1412)를 오 프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(1405)에 제 2 확장 레이어 정보원 부호를 출력한다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 1이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate1이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate4"인 경우에는, 제어 스위치(1407∼1409)를 온 상태로 하고, 또한, 이득 조정부(1412, 1413)를 페이드 인 상태로 하며, 이득 조정부(1411)를 오프 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화부(1405)에 제 2 확장 레이어 정보원 부호를 출력한다.
복호화 동작 제어부(1402)는, 부호화 정보 해석부(1401)로부터 얻어지는 부가 처리 상태 정보의 값이 1이고, 부호화 정보 해석부(1401)로부터 얻어지는 전송 모드 정보가 bitrate1이며, 또한 부호화 정보 해석부(1401)로부터 얻어지는 부가 모드 정보가 bitrate1"인 경우에는, 제어 스위치(1407∼1409)를 온 상태로 하고, 또한, 이득 조정부(1411∼1413)를 페이드 인 상태로 하여, 기본 레이어 복호화부(1403)에 기본 레이어 정보원 부호를 출력하고, 제 1 확장 레이어 복호화부(1404)에 제 1 확장 레이어 정보원 부호를 출력하며, 제 2 확장 레이어 복호화 부(1405)에 제 2 확장 레이어 정보원 부호를 출력한다.
기본 레이어 복호화부(1403), 제 1 확장 레이어 복호화부(1404), 및 제 2 확장 레이어 복호화부(1405)는, 각각 전술한 기본 레이어 복호화부(903), 제 1 확장 레이어 복호화부(904), 및 제 2 확장 레이어 복호화부(905)의 구성과 동일하기 때문에, 설명은 생략한다.
이득 조정부(1411)는, 기본 레이어 복호화부(1403)로부터 기본 레이어 복호화 신호가 입력된다. 또한, 이득 조정부(1411)는, 복호화 동작 제어부(1402)에 의해 페이드 아웃/페이드 인/오프 상태가 제어된다.
이득 조정부(1411)는, 복호화 동작 제어부(1402)에 의해 오프 상태로 제어된 경우에는, 기본 레이어 복호화부(1403)로부터 얻어지는 기본 레이어 복호화 신호를 그대로 가산부(1415)에 출력한다. 또한, 이득 조정부(1411)는, 복호화 동작 제어부(1402)에 의해 페이드 아웃 상태로 제어된 경우에는, 이하의 수학식 2에 의해, 기본 레이어 복호화부(1403)로부터 얻어지는 기본 레이어 복호화 신호에 대하여 감쇠 처리를 실시하고, 얻어진 신호를 가산부(1415)에 출력한다.
여기서, N은 중계 장치(103)에 있어서, 부가 처리를 지연시키는 일정 시간 및 1 프레임에 있어서의 샘플수에 의해 정해지는 값이며, Xbasei는 기본 레이어 복호화 신호, Xbase'i는 감쇠 후의 복호화 신호이다.
또한, 이득 조정부(1411)는, 복호화 동작 제어부(1402)에 의해 페이드 인 상태로 제어된 경우에는, 이하의 수학식 3에 의해, 기본 레이어 복호화부(1403)로부터 얻어지는 기본 레이어 복호화 신호에 대하여 증폭 처리를 실시하고, 얻어진 신호를 가산부(1415)에 출력한다.
여기서, 상기 수학식 2와 마찬가지로, N은 중계 장치(103)에 있어서, 부가 처리를 지연시키는 일정 시간 및 1 프레임에 있어서의 샘플수에 의해 정해지는 값이며, Xbasei는 기본 레이어 복호화 신호, Xbase"i는 증폭 후의 복호화 신호이다.
이득 조정부(1412)는, 이득 조정부(1411)에 있어서, 입력 신호를 제 1 확장 레이어 복호화 신호로 치환하는 것 이외에는 이득 조정부(1411)의 구성과 마찬가지이며, 설명은 생략한다. 또한 이득 조정부(1413)는, 이득 조정부(1411)에 있어서, 입력 신호를 제 2 확장 레이어 복호화 신호로 치환하는 것 이외에는 이득 조정부(1411)의 구성과 마찬가지이며, 설명은 생략한다.
부가 정보 복호화부(1406)의 구성은, 전술한 부가 정보 복호화부(906)와 동일하며, 여기서는 설명은 생략한다.
가산부(1414)는, 제어 스위치(1408, 1409)가 온 상태인 경우, 이득 조정부(1413)로부터 출력된 제 2 확장 레이어 복호화 신호와 이득 조정부(1412)로부터 출력된 제 1 확장 레이어 복호화 신호를 가산하여, 가산 후의 신호를 가산부(1415) 에 출력한다. 또한, 가산부(1414)는, 제어 스위치(1409)가 오프 상태이고, 또한, 제어 스위치(1408)가 온 상태인 경우, 이득 조정부(1412)로부터 출력된 제 1 확장 레이어 복호화 신호를 가산부(1415)에 출력한다. 또, 가산부(1414)는, 제어 스위치(1408, 1409)가 오프 상태인 경우, 아무것도 동작하지 않는다.
가산부(1415)는, 제어 스위치(1407, 1408)가 온 상태인 경우, 이득 조정부(1411)로부터 출력된 기본 레이어 복호화 신호와 가산부(1414)의 출력 신호를 가산하여, 가산 후의 신호를 가산부(1416)에 출력한다. 또한, 가산부(1415)는, 제어 스위치(1407)가 온 상태이고, 제어 스위치(1408)가 오프 상태인 경우, 이득 조정부(1411)로부터 출력된 기본 레이어 복호화 신호를 가산부(1416)에 출력한다. 또한, 가산부(1415)는, 제어 스위치(1407, 1408)가 오프 상태인 경우, 아무것도 동작하지 않는다.
가산부(1416)는, 제어 스위치(1407, 1410)가 온 상태인 경우, 가산부(1415)의 출력 신호와 부가 정보 복호화부(1406)로부터 얻어지는 부가 정보 복호화 신호를 가산하여, 가산 후의 신호를 출력 신호로서 출력한다. 또한, 가산부(1416)는, 제어 스위치(1407)가 온 상태이고, 제어 스위치(1410)가 오프 상태인 경우, 가산부(1415)의 출력 신호를 출력한다. 또한, 가산부(1416)는, 제어 스위치(1407)가 오프 상태이고, 제어 스위치(1410)가 온 상태인 경우, 부가 정보 복호화부(1406)로부터 얻어지는 부가 정보 복호화 신호를 출력 신호로서 출력한다. 또한, 가산부(1416)는, 제어 스위치(1407, 1410)가 오프 상태인 경우, 아무것도 동작하지 않는다.
이상이, 본 실시예에 있어서의 신호 복호화 장치(105)의 내부 구성의 설명이다.
이와 같이, 본 실시예에 따르면, 중계 장치에 부가 정보가 입력된 시점으로부터 일정 시간 지연시켜 부가 처리를 실시하고, 신호 복호화 장치에 있어서 각 레이어의 복호화 신호에 대하여 감쇠·증폭 처리를 실시함으로써, 신호 부호화 장치로부터 전송되는 음성·악음 신호에 부가 정보를 부가하는 것에 의해 발생할 수 있는 복호화 신호의 이음을 경감할 수 있다.
(실시예 4)
상기 실시예 1에서는, 중계 장치에 입력되는 부가 정보로서, 즉시성이 높은 지역 재해 정보 등을 예로 들어, 부가 정보가 입력되어, 부호화 장치 측으로부터 전송되어 온 음성 정보와 부가 정보의 양쪽을 동시에 보낼 수 없는 것과 같은 경우(부가 정보 부호화부(701)에 있어서의 패턴 1, 패턴 5 및 패턴 9)에는, 부가 정보를 우선하는 형태를 설명하였다. 그러나, 긴급성이 없는 부가 정보를 부가하는 경우에는, 전술한 처리가 아니라, 반대로 음성 정보를 우선해야 한다.
그래서, 본 발명의 실시예 4에서는, 중계 장치로의 입력으로서, 부가 정보, 부가 모드 정보 외에, 음성 정보와 부가 정보의 우선도를 나타내는 우선도 정보를 부가하여, 이 우선도 정보에 근거해 음성 정보 혹은 부가 정보 중 어느 쪽인가를 선택하여 전송하는 경우에 대하여 설명한다. 또, 이하에 있어서는, 부가 정보로서, 음성·악음 신호를 대상으로 한 경우에 대하여 설명한다.
본 실시예에 있어서의 전체적인 시스템의 구성을 도 15에 나타낸다. 중계 장치(1501)는, 부가 모드 정보, 부가 정보 및 우선도 정보가 입력된 경우에는, 전송로 A(102)를 거쳐서 전송되는 부호화 정보에 부가 정보를 부가하는 처리를 실시하여, 부가 처리 후의 부호화 정보(이하, 「변환후 부호화 정보」라고 함)를 전송로 B(104)에 송신한다. 또, 중계 장치(1501)는, 부가 모드 정보, 부가 정보 및 우선도 정보가 입력되지 않은 경우에는, 전송로 A(102)를 거쳐서 전송되는 부호화 정보를 전송로 B(104)로 출력한다. 여기서, 우선도 정보란, 음성 정보와 부가 정보의 우선도를 나타내는 「0.0」에서 「5.0」까지의 수치이며, 「0.0」에 가까울수록 음성 정보를 우선하고, 「5.0」에 가까울수록 부가 정보를 우선하는 것을 나타낸다.
다음에, 본 실시예의 중계 장치(1501)의 구성에 대하여 도 16을 이용하여 설명한다. 또, 본 실시예에 있어서, 중계 장치(1501) 이외의 구성은, 실시예 1에 있어서의 도 1의 구성과 마찬가지이며, 설명을 생략한다.
중계 장치(1501)는, 부가 정보 수신부(1601)와, 부호화 정보 해석부(1602)와, 부가 처리부(1603)와, 부호화 정보 통합부(1604)와, 제어 스위치(1605, 1606)로 주로 구성된다.
부가 모드 정보, 부가 정보 및 우선도 정보는, 부가 정보 수신부(1601)에 입력된다.
부가 정보 수신부(1601)는, 부가 모드 정보, 부가 정보 및 우선도 정보가 입력되었는지 여부에 따라서, 제어 스위치(1605, 1606)의 온/오프 제어를 한다. 구 체적으로는, 부가 정보 수신부(1601)는, 중계 장치(1501)에 부가 모드 정보, 부가 정보 및 우선도 정보가 입력된 경우에는, 제어 스위치(1605)를 부호화 정보 해석부(1602) 측에 접속하고, 제어 스위치(1606)를 부호화 정보 통합부(1604) 측에 접속한다. 또한, 부가 정보 수신부(1601)는, 중계 장치(1501)에 부가 모드 정보, 부가 정보 및 우선도 정보가 입력되지 않은 경우에는, 제어 스위치(1605)를 제어 스위치(1606) 측에 접속하고, 제어 스위치(1606)를 제어 스위치(1605) 측에 접속한다. 이와 같이, 중계 장치(1501)에 부가 정보가 입력되는지 여부에 따라 제어 스위치(1605, 1606)를 온/오프 제어함으로써, 중계 장치(1501)의 동작이 결정된다. 또한, 부가 정보 수신부(1601)는, 중계 장치(1501)에 부가 모드 정보, 부가 정보 및 우선도 정보가 입력된 경우에는, 입력된 부가 모드 정보, 부가 정보 및 우선도 정보를 부가 처리부(1603)에 출력한다. 또한, 부가 정보 수신부(1601)는, 중계 장치(1501)에 부가 모드 정보, 부가 정보 및 우선도 정보가 입력되지 않은 경우에는, 부가 처리부(1603)에는 아무것도 출력하지 않는다.
부호화 정보 해석부(1602)의 구성은, 상기 실시예 1에 있어서의 부호화 정보 해석부(602)와 동일하기 때문에, 여기서는 설명은 생략한다.
부가 처리부(1603)는, 부호화 정보 해석부(1602)로부터, 전송 모드 정보, 부가 정보 플래그 및 전송 모드 정보에 따른 각 레이어의 정보원 부호가 입력되고, 또한 부가 정보 수신부(1601)로부터 부가 모드 정보, 부가 정보 및 우선도 정보가 입력된 경우에는, 우선 우선도 정보로부터, 음성 정보와 부가 정보 중 어느 쪽을 우선하는가를 의미하는 우선 모드 정보를 결정하고, 전송 모드 정보, 부가 모드 정 보 및 우선 모드 정보의 조합에 따라서, 각 레이어의 정보원 부호에 대하여, 부가 정보의 부가 처리를 실시하고, 얻어진 정보원 부호, 전송 모드 정보, 부가 모드 정보, 부가 정보 플래그 및 우선 모드 정보를 부호화 정보 통합부(1604)에 출력한다. 또한, 부가 처리부(1603)는, 부호화 정보 해석부(1602)로부터, 전송 모드 정보, 부가 정보 플래그 및 전송 모드 정보에 따른 각 레이어의 정보원 부호가 입력되지 않고, 또한 부가 정보 수신부(1601)로부터 부가 모드 정보, 부가 정보 및 우선도 정보가 입력되지 않은 경우에는, 아무것도 동작하지 않는다.
부호화 정보 통합부(1604)는, 부가 처리부(1603)로부터 전송 모드 정보, 부가 모드 정보, 부가 정보 플래그 및 각종의 정보원 부호가 입력된 경우, 그들을 통합한 후, 변환후 부호화 정보로서 제어 스위치(1606)에 출력한다. 또한, 부호화 정보 통합부(1604)는, 부가 처리부(1603)로부터 전송 모드 정보, 부가 모드 정보, 부가 정보 플래그 및 각종의 정보원 부호가 입력되지 않은 경우에는 아무것도 동작하지 않는다.
이상이, 도 15의 중계 장치(1501)의 구성에 대한 설명이다.
다음에, 도 16의 부가 처리부(1603)의 구성에 대하여 도 17을 이용하여 설명한다. 부가 처리부(1603)는, 부가 정보 부호화부(1701)와, 부가 정보 통합부(1702)와, 우선 모드 정보 결정부(1703)로 주로 구성된다.
우선 모드 정보 결정부(1703)는, 부가 정보 수신부(1601)로부터 우선도 정보가 입력되어, 우선도 정보 P와, 우선 모드 정보 결정 임계값 Pthr을 비교하고, 우선 모드 정보 Pmode를 결정하여, 이것을 부가 정보 부호화부(1701)에 출력한다. 여기서 우선 모드 정보 결정 임계값 Pthr은, 0.0∼5.0까지의 미리 정해진 값으로 한다. 또한, 이 우선 모드 정보 결정 임계값 Pthr은, 전송 모드 정보, 부가 모드 정보, 부가 정보의 카테고리, 부가 정보가 음성 신호였을 경우에 부가 정보 중에 포함되는 키워드, 부가 정보의 평균 이득, 운율 특성, 또한 사용자(송수신) 측의 지시에 따라 변할 수 있는 값으로 한다. 예컨대, 부가 모드 정보의 값이 큰 경우(bitrate1' 등)에는, 부가 정보가 중요하기 때문에, 우선 모드 정보 결정 임계값 Pthr을 작게 하고, 반대로 전송 모드 정보의 값이 큰 경우에는 우선 모드 정보 결정 임계값 Pthr을 크게 한다고 하는 수법을 들 수 있다. 또한, 우선 모드 정보 Pmode는, 「0」 또는 「1」의 2 종류의 값을 취하며, 우선 모드 정보 Pmode가 「0」인 경우에는 음성 정보를 우선하고, 우선 모드 정보 Pmode가 「1」인 경우에는 부가 정보를 우선한다는 것을 의미한다. 또한, 우선 모드 정보 Pmode는, 이하의 수학식 4에 의해 결정된다.
부가 정보 부호화부(1701)는, 부가 정보 수신부(1601)로부터 부가 모드 정보, 부가 정보가 입력되고, 부호화 정보 해석부(1602)로부터 전송 모드 정보 및 부가 정보 플래그가 입력되며, 또한 우선 모드 정보 결정부(1703)로부터 우선 모드 정보가 입력된 경우, 부가 모드 정보, 전송 모드 정보 및 우선 모드 정보의 조합에 따른 전송 비트레이트에 의해, 부가 정보에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 정보원 부호(이하, 「부가 정보 정보원 부호」라고 함), 전송 모드 정보, 부가 모드 정보 및 우선 모드 정보를 부가 정보 통합부(1702)에 출력한다. 또, 부가 정보 부호화부(1701)는, 부가 모드 정보, 부가 정보, 전송 모드 정보, 부가 정보 플래그 및 우선 모드 정보가 입력되지 않은 경우에는 아무것도 동작하지 않는다.
이하, 부가 정보 부호화부(1701)에 있어서의 부호화 처리에 대하여 전송 모드 정보 및 부가 모드 정보의 조합에 따른 9 패턴으로 나누어, 구체적으로 설명한다. 단, 패턴 1, 5, 9 이외의 패턴에 대해서는, 우선 모드 정보 Pmode의 값에 관계없이, 전술한 실시예 1의 부가 정보 부호화부(701)의 처리 패턴과 동일하기 때문에, 여기서는 설명은 생략한다.
부가 정보 부호화부(1701)는, 입력되는 정보(신호)를 복수의 전송 비트레이트로 부호화 가능한 멀티레이트 부호화 방법을 구비한다. 본 실시예에서는, 부가 정보 수신부(1601)로부터 얻어지는 부가 모드 정보와 부호화 정보 해석부(1602)로부터 얻어지는 전송 모드 정보와의 조합에 따라서, 미리 정해진 6 종류의 전송 비트레이트 bitrate1", bitrate2", bitrate3", bitrate4", bitrate5", bitrate6"의 값을 취할 수 있는 것으로 한다. 또한, 이 6 종류의 전송 비트레이트의 값은, bitrate1, bitrate2 및 bitrate3을 이용하여 상기 수학식 1과 같이 나타낼 수 있 다.
(패턴 1)
부가 정보 부호화부(1701)는, 부가 정보 수신부(1601)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 부호화 정보 해석부(1602)로부터 얻어지는 전송 모드 정보가 bitrate3이며, 또한 우선 모드 정보 결정부(1703)로부터 얻어지는 우선 모드 정보 Pmode의 값이 「1」인 경우에는, 부가 정보를 bitrate3"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 부가 정보 플래그 및 우선 모드 정보를 부가 정보 통합부(1702)에 출력한다(패턴 1a).
또한, 부가 정보 부호화부(1701)는, 부가 정보 수신부(1601)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 부호화 정보 해석부(1602)로부터 얻어지는 전송 모드 정보가 bitrate3이며, 또한 우선 모드 정보 결정부(1703)로부터 얻어지는 우선 모드 정보 Pmode의 값이 「0」인 경우에는, 부가 정보의 부호화 처리는 하지 않고, 부가 모드 정보, 전송 모드 정보, 부가 정보 플래그 및 우선 모드 정보를 부가 정보 통합부(1702)에 출력한다(패턴 1b).
(패턴 5)
부가 정보 부호화부(1701)는, 부가 정보 수신부(1601)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 부호화 정보 해석부(1602)로부터 얻어지는 전송 모드 정보가 bitrate2이며, 우선 모드 정보 결정부(1703)로부터 얻어지는 우선 모드 정보 Pmode의 값이 「1」인 경우에는, 부가 정보를 bitrate2"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 부가 정보 플래그 및 우선 모드 정보를 부가 정보 통합부(1702)에 출력한다(패턴 5a).
또한, 부가 정보 부호화부(1701)는, 부가 정보 수신부(1601)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 부호화 정보 해석부(1602)로부터 얻어지는 전송 모드 정보가 bitrate2이며, 우선 모드 정보 결정부(1703)로부터 얻어지는 우선 모드 정보 Pmode의 값이 「0」인 경우에는, 부가 정보의 부호화 처리는 하지 않고, 부가 모드 정보, 전송 모드 정보, 부가 정보 플래그 및 우선 모드 정보를 부가 정보 통합부(1702)에 출력한다(패턴 5b).
(패턴 9)
부가 정보 부호화부(1701)는, 부가 정보 수신부(1601)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 부호화 정보 해석부(1602)로부터 얻어지는 전송 모드 정보가 bitrate1이며, 우선 모드 정보 결정부(1703)로부터 얻어지는 우선 모드 정보 Pmode의 값이 「1」인 경우에는, 부가 정보를 bitrate1"이 나타내는 전송 비트레이트를 이용하여, CELP 타입의 음성 부호화 방법에 의해 부호화를 실시하고, 얻어 진 부가 정보 정보원 부호, 부가 모드 정보, 전송 모드 정보, 부가 정보 플래그, 우선 모드 정보를 부가 정보 통합부(1702)에 출력한다(패턴 9a).
또한, 부가 정보 부호화부(1701)는, 부가 정보 수신부(1601)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 또한 부호화 정보 해석부(1602)로부터 얻어지는 전송 모드 정보가 bitrate1이며, 우선 모드 정보 결정부(1703)로부터 얻어지는 우선 모드 정보 Pmode의 값이 「1」인 경우에는, 부가 정보의 부호화 처리는 하지 않고, 부가 모드 정보, 전송 모드 정보, 부가 정보 플래그 및 우선 모드 정보를 부가 정보 통합부(1702)에 출력한다(패턴 9b).
이상이, 부가 정보 부호화부(1701)에 있어서의 부호화 처리에 대한 설명이다.
부가 정보 통합부(1702)는, 부가 정보 부호화부(1701)로부터 부가 모드 정보, 부가 정보 정보원 부호, 전송 모드 정보, 부가 정보 플래그, 및 우선 모드 정보가 입력되고, 부호화 정보 해석부(1602)로부터 각 레이어의 정보원 부호가 입력된 경우, 부가 모드 정보, 전송 모드 정보, 및 우선 모드 정보의 조합에 따라서, 각 레이어의 정보원 부호와 부가 정보 정보원 부호와의 통합 처리를 실시하고, 얻어진 정보원 부호, 부가 정보 정보원 부호, 전송 모드 정보, 부가 정보 플래그 및 부가 모드 정보를 부호화 정보 통합부(1604)에 출력한다. 또, 부가 정보 통합부(1702)는, 부가 모드 정보, 부가 정보 정보원 부호, 전송 모드 정보, 부가 정보 플래그, 우선 모드 정보 및 각 레이어의 정보원 부호가 입력되지 않은 경우에는 아 무것도 동작하지 않는다.
이하, 부가 정보 통합부(1702)에 있어서의 통합 처리에 대하여 전송 모드 정보, 부가 모드 정보, 및 우선 모드 정보의 조합에 따른 9 패턴으로 나누어, 구체적으로 설명한다. 단, 패턴 1, 5, 9 이외의 패턴에 대해서는, 우선 모드 정보 Pmode의 값에 관계없이, 전술한 실시예 1의 부가 정보 통합부(702)의 처리 패턴과 동일하기 때문에, 여기서는 설명은 생략한다.
(패턴 1)
부가 정보 통합부(1702)는, 부가 정보 부호화부(1701)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 전송 모드 정보가 bitrate3이며, 또한 우선 모드 정보 Pmode의 값이 「1」인 경우에는, 기본 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0을 대입하고, 부가 모드 정보에 bitrate3"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보, 및 전송 모드 정보를 부호화 정보 통합부(1604)에 출력한다. 또한, 이 때 부가 정보 통합부(1702)는, 「1」의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(1604)에 출력한다(패턴 1a).
또한, 부가 정보 통합부(1702)는, 부가 정보 부호화부(1701)로부터 얻어지는 부가 모드 정보가 bitrate3'이고, 전송 모드 정보가 bitrate3이며, 또한 우선 모드 정보 Pmode의 값이 「0」인 경우에는, 통합 처리는 하지 않고, 기본 레이어 정보원 부호, 및 전송 모드 정보를 부호화 정보 통합부(1604)에 출력한다. 또한, 이 때 부가 정보 통합부(1702)는, 0의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(1604)에 출력한다(패턴 1b).
(패턴 5)
부가 정보 통합부(1702)는, 부가 정보 부호화부(1701)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 전송 모드 정보가 bitrate2이며, 또한 우선 모드 정보 Pmode의 값이 「1」인 경우에는, 기본 레이어 정보원 부호, 및 제 1 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0을 대입하고, 부가 모드 정보에 bitrate2"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보, 및 전송 모드 정보를 부호화 정보 통합부(1604)에 출력한다. 또한, 이 때 부가 정보 통합부(1702)는, 「1」의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(1604)에 출력한다(패턴 5a).
또한, 부가 정보 통합부(1702)는, 부가 정보 부호화부(1701)로부터 얻어지는 부가 모드 정보가 bitrate2'이고, 전송 모드 정보가 bitrate2이며, 또한 우선 모드 정보 Pmode의 값이 「0」인 경우에는, 통합 처리는 하지 않고, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호 및 전송 모드 정보를 부호화 정보 통합부(1604)에 출력한다. 또한, 이 때 부가 정보 통합부(1702)는, 「0」의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(1604)에 출력한다(패턴 5b).
(패턴 9)
부가 정보 통합부(1702)는, 부가 정보 부호화부(1701)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 전송 모드 정보가 bitrate1이며, 또한 우선 모드 정보 Pmode의 값이 1인 경우에는, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 및 제 2 확장 레이어 정보원 부호를 부가 정보 정보원 부호로 치환하고, 전송 모드 정보에 bitrate0을 대입하고, 부가 모드 정보에 bitrate1"을 대입하여, 부가 정보 정보원 부호, 부가 모드 정보 및 전송 모드 정보를 부호화 정보 통합부(1604)에 출력한다. 또한, 이 때 부가 정보 통합부(1702)는, 「1」의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(1604)에 출력한다(패턴 9a).
또한, 부가 정보 통합부(1702)는, 부가 정보 부호화부(1701)로부터 얻어지는 부가 모드 정보가 bitrate1'이고, 전송 모드 정보가 bitrate1이며, 또한 우선 모드 정보 Pmode의 값이 0인 경우에는, 통합 처리는 하지 않고, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 제 2 확장 레이어 정보원 부호, 및 전송 모드 정보를 부호화 정보 통합부(1604)에 출력한다. 또한, 이 때 부가 정보 통합부(1702)는, 「0」의 값을 대입한 부가 정보 플래그를 부호화 정보 통합부(1604)에 출력한다(패턴 9b).
이상이, 부가 정보 통합부(1702)에 있어서의 통합 처리에 대한 설명이다.
또, 부호화 정보 통합부(1604)로부터 출력되는 부호화 정보의 데이터 구조(비트 스트림)는, 부가 정보 통합부(1702)에 있어서의 (패턴 1)∼(패턴 9)에 따라 서, 각각 도 18 중의 (a)∼(l)과 같은 데이터 구조로 된다.
이와 같이, 본 실시예에 따르면, 부가 정보에 긴급성이 있는지 여부를 의미하는 우선도 정보에 따라서 음성 정보와 부가 정보 중 어느 쪽을 전송할 것인지를 결정함으로써, 보다 유연한 전송 방식이 가능하게 된다.
(실시예 5)
도 19는, 상기 실시예 1 내지 실시예 4에서 설명한 신호 부호화 장치, 중계 장치 및 신호 복호화 장치를 포함하는 신호 송신 장치, 중계 장치 및 신호 수신 장치의 구성을 나타내는 블록도이다. 이하, 도 19를 이용하여, 음성 신호를 송수신하는 경우에 대하여 설명한다.
도 19에 있어서, 음성 신호는, 입력 장치(1901)에 의해서 전기적 신호로 변환되어 A/D 변환 장치(1902)에 출력된다. A/D 변환 장치(1902)는 입력 장치(1901)로부터 출력된 (아날로그)신호를 디지털 신호로 변환하여 음성 부호화 장치(1903)에 출력한다. 음성 부호화 장치(1903)는, 도 1에 나타낸 신호 부호화 장치(101)를 실장하고, A/D 변환 장치(1902)로부터 출력된 디지털 음성 신호를 부호화하여 부호화 정보를 RF 변조 장치(1904)에 출력한다. RF 변조 장치(1904)는 음성 부호화 장치(1903)로부터 출력된 부호화 정보를 전파(電波) 등의 전파(傳播) 매체에 실어 송출하기 위한 신호로 변환하여 송신 안테나(1905)에 출력한다. 송신 안테나(1905)는 RF 변조 장치(1904)로부터 출력된 출력 신호를 전파(RF 신호)로서 송출한다. 또, 도면 중의 RF 신호(1906)는 송신 안테나(1905)로부터 송출된 전 파(RF 신호)를 나타낸다.
RF 신호(1907)는 중계 장치 수신 안테나(1908)에 의해서 수신되어 RF 복조 장치(1909)에 출력된다. 또, 도면 중의 RF 신호(1907)는 중계 장치 수신 안테나(1908)에 수신된 전파를 나타내며, 전파로에 있어서 신호의 감쇠나 잡음의 중첩이 없으면 RF 신호(1906)와 완전히 동일한 것으로 된다.
RF 복조 장치(1909)는 중계 장치 수신 안테나(1908)로부터 출력된 RF 신호로부터 부호화 정보를 복조하여 중계 장치(1910)에 출력한다. 중계 장치(1910)는, 도 1에 나타낸 중계 장치(103)를 실장하고, RF 복조 장치(1909)로부터 출력된 음성 부호화 정보에 포함되는 전송 모드 정보 및 중계 장치(1910)에 입력되는 부가 정보에 따라서, 음성 부호화 정보에 부가 정보를 부가하여, 부가 처리 후 얻어진 부호화 정보(또는 변환후 부호화 정보)를, RF 변조 장치(1911)에 출력한다. RF 변조 장치(1911)는 중계 장치(1910)로부터 출력된 부호화 정보(또는 변환후 부호화 정보)를 전파 등의 전파 매체에 실어 송출하기 위한 신호로 변환하여 중계 장치 송신 안테나(1912)에 출력한다. 중계 장치 송신 안테나(1912)는 RF 변조 장치(1911)로부터 출력된 출력 신호를 전파(RF 신호)로서 송출한다. 또, 도면 중의 RF 신호(1913)는 중계 장치 송신 안테나(1912)로부터 송출된 전파(RF 신호)를 나타낸다.
RF 신호(1914)는 수신 안테나(1915)에 의해서 수신되어 RF 복조 장치(1916)에 출력된다. 또, 도면 중의 RF 신호(1914)는 수신 안테나(1915)에 수신된 전파를 나타내며, 전파로에 있어서 신호의 감쇠나 잡음의 중첩이 없으면 RF 신호(1913)와 완전히 동일한 것으로 된다.
RF 복조 장치(1916)는 수신 안테나(1915)로부터 출력된 RF 신호로부터 부호화 정보를 복조하여 음성 복호화 장치(1917)에 출력한다. 음성 복호화 장치(1917)는, 도 1에 나타낸 신호 복호화 장치(105)를 실장하고, RF 복조 장치(1916)로부터 출력된 음성 부호화 정보로부터 음성 신호를 복호화하여, 얻어진 디지털 복호화 음성 신호를, D/A 변환 장치(1918)에 출력한다. D/A 변환 장치(1918)는 음성 복호화 장치(1917)로부터 출력된 디지털 음성 신호를 아날로그의 전기적 신호로 변환하여 출력 장치(1919)에 출력한다.
출력 장치(1919)는 전기적 신호를 공기의 진동으로 변환하여 음파로서 인간의 귀에 들리도록 출력한다.
무선 통신 시스템에 있어서의 기지국 장치 및 통신 단말 장치에, 상기한 바와 같은 음성 신호 송신 장치 및 음성 신호 수신 장치를 구비하는 것에 의해, 고품질의 출력 신호를 얻을 수 있다.
또, 본 실시예에서는, 입력 신호로서 음성 신호를 대상으로 한 경우에 대하여 설명하였지만, 본 발명은, 음성 신호 이외의 신호에 대해서도 마찬가지로 적용할 수 있다.
(실시예 6)
상기 실시예 3에서는, 중계 장치에 있어서 부가 처리를 할 때에, 신호 복호화 장치에 있어서 각 레이어의 복호화 신호에 대하여 감쇠·증폭 처리를 하는 것에 의해 복호화시에 발생하는 이음을 억제하는 경우에 대하여 설명하였지만, 감쇠·증 폭 처리를 하여 복호화시에 발생하는 이음을 억제하는 것은, 간단히 신호 부호화 장치에 의해 부호화된 신호를 복호할 때에도 적용할 수 있다. 실시예 6에서는, 신호 부호화 장치에 의해 부호화된 신호를 복호할 때에, 감쇠·증폭 처리를 실시하여 복호화시에 발생하는 이음을 억제하는 경우에 대하여 설명한다.
도 20은 본 실시예에 따른 신호 복호화 장치를 포함하는 시스템 구성을 나타내는 도면이다. 신호 부호화 장치(2001)는, 전송 모드 정보에 따라서, 입력 신호에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 부호화 정보를, 전송로(2002)를 거쳐서 신호 복호화 장치(2003)에 송신한다. 또, 여기서, 전송로(2002)에는, 신호 중계 장치가 개재되는 경우도 있다.
신호 복호화 장치(2003)는, 전송로(2002)를 거쳐 수신한 부호화 정보에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호를 출력 신호로서 출력한다.
다음에, 도 20의 신호 부호화 장치(2001)의 구성에 대하여, 도 21의 블록도를 이용하여 설명한다. 또, 신호 부호화 장치(2001)는, 입력 신호를 N 샘플씩 구획하고(N은 자연수), N 샘플을 1 프레임으로 하여 프레임마다 부호화를 한다.
신호 부호화 장치(2001)는, 전송 비트레이트 제어부(2101)와, 제어 스위치(2102∼2105)와, 기본 레이어 부호화부(2106)와, 기본 레이어 복호화부(2108)와, 가산부(2107, 2111)와, 제 1 확장 레이어 부호화부(2109)와, 제 1 확장 레이어 복호화부(2110)와, 제 2 확장 레이어 부호화부(2112)와, 부호화 정보 통합부(2113)로 주로 구성된다.
전송 모드 정보는, 전송 비트레이트 제어부(2101)에 입력된다. 여기서, 전송 모드 정보란, 입력 신호를 부호화하여 전송할 때의 전송 비트레이트를 지시하는 정보이며, 미리 정해진 2개 이상의 전송 비트레이트 중에서 1개의 전송 비트레이트가 전송 모드 정보로서 선택된다. 또, 본 실시예에 있어서는, 전송 모드 정보는, 미리 정해진 4 종류의 전송 비트레이트 bitrate0, bitrate1, bitrate2, bitrate3(bitrate3<bitrate2<bitrate1)의 값을 취할 수 있는 것으로 한다. 단, bitrate0이란, 부호화 장치(2001)에 입력 신호가 입력되지 않은 경우를 의미한다. 또한, 본 실시예에서는, 현 프레임에 대한 전송 모드 정보(이하, "Modecur"이라고 함)에 부가하여, 미리 다음 프레임에 대한 전송 모드 정보(이하, "Modenext"라고 함)도 동시에 입력되는 것으로 한다.
전송 비트레이트 제어부(2101)는, 입력된 현 프레임에 대한 전송 모드 정보 Modecur에 따라서, 제어 스위치(2102∼2105)의 온/오프 제어를 한다. 구체적으로는, 전송 비트레이트 제어부(2101)는, 전송 모드 정보 Modecur이 bitrate1인 경우, 제어 스위치(2102∼2105)를 모두 온 상태로 한다. 또한, 전송 비트레이트 제어부(2101)는, 전송 모드 정보 Modecur이 bitrate2인 경우, 제어 스위치(2102, 2103)를 온 상태로 하고, 제어 스위치(2104, 2105)를 오프 상태로 한다. 또한, 전송 비트레이트 제어부(2101)는, 전송 모드 정보 Modecur이 bitrate3인 경우, 제어 스위치(2102∼2105)를 모두 오프 상태로 한다. 또한, 전송 비트레이트 제어부(2101) 는, 전송 모드 정보 Modecur 및 Modenext를 부호화 정보 통합부(2113)에 출력한다. 이와 같이, 전송 비트레이트 제어부(2101)가 전송 모드 정보 Modecur에 따라서 제어 스위치를 온/오프 제어함으로써, 입력 신호의 부호화에 이용하는 부호화부의 조합이 결정된다.
입력 신호는, 제어 스위치(2102) 및 기본 레이어 부호화부(2106)에 입력된다.
기본 레이어 부호화부(2106)는, 입력 신호에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 정보원 부호(이하, 「기본 레이어 정보원 부호」라고 함)를 부호화 정보 통합부(2113) 및 제어 스위치(2103)에 출력한다.
기본 레이어 복호화부(2108)는, 제어 스위치(2103)가 온 상태인 경우, 기본 레이어 부호화부(2106)로부터 출력된 기본 레이어 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「기본 레이어 복호화 신호」라고 함)를 가산부(2107)에 출력한다. 또, 기본 레이어 복호화부(2108)는, 제어 스위치(2103)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
가산부(2107)는, 제어 스위치(2102, 2103)가 온 상태인 경우, 입력 신호에, 기본 레이어 복호화 신호의 극성을 반전시킨 신호를 가산하여, 가산 결과인 제 1 차분 신호를 제 1 확장 레이어 부호화부(2109) 및 제어 스위치(2104)에 출력한다. 또, 가산부(2107)는, 제어 스위치(2102, 2103)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 1 확장 레이어 부호화부(2109)는, 제어 스위치(2102, 2103)가 온 상태인 경우, 가산부(2107)로부터 얻어지는 제 1 차분 신호에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 정보원 부호(이하, 「제 1 확장 레이어 정보원 부호」라고 함)를 제어 스위치(2105) 및 부호화 정보 통합부(2113)에 출력한다. 또, 제 1 확장 레이어 부호화부(2109)는, 제어 스위치(2102, 2103)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 1 확장 레이어 복호화부(2110)는, 제어 스위치(2105)가 온 상태인 경우, 제 1 확장 레이어 부호화부(2109)로부터 출력된 제 1 확장 레이어 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「제 1 확장 레이어 복호화 신호」라고 함)를 가산부(2111)에 출력한다. 또, 제 1 확장 레이어 복호화부(2110)는, 제어 스위치(2105)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
가산부(2111)는, 제어 스위치(2104, 2105)가 온 상태인 경우, 제어 스위치(2104)로부터 얻어지는 제 1 차분 신호에, 제 1 확장 레이어 복호화 신호의 극성을 반전시킨 신호를 가산하여, 가산 결과인 제 2 차분 신호를 제 2 확장 레이어 부호화부(2112)에 출력한다. 또, 가산부(2111)는, 제어 스위치(2104, 2105)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 2 확장 레이어 부호화부(2112)는, 제어 스위치(2104, 2105)가 온 상태인 경우, 가산부(2111)로부터 출력되는 제 2 차분 신호에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 정보원 부호(이하, 「제 2 확장 레이어 정보원 부호」라고 함)를 부호화 정보 통합부(2113)에 출력한다. 또, 제 2 확장 레이어 부호화부(2112)는, 제어 스위치(2104, 2105)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
부호화 정보 통합부(2113)는, 기본 레이어 부호화부(2106), 제 1 확장 레이어 부호화부(2109), 및 제 2 확장 레이어 부호화부(2112)로부터 출력된 정보원 부호, 및 전송 비트레이트 제어부(2101)로부터 출력되는 전송 모드 정보 Modecur, Modenext를 통합하여, 이것을 부호화 정보로서 전송로(2002)에 출력한다.
이상이, 도 20의 신호 부호화 장치(2001)의 구성의 설명이다. 또, 기본 레이어 부호화부(2106)의 내부 구성은, 도 4에 나타낸 기본 레이어 부호화부(206)와 동일하기 때문에 설명을 생략한다. 또한, 제 1 확장 레이어 부호화부(2109) 및 제 2 확장 레이어 부호화부(2112)의 내부 구성은, 기본 레이어 부호화부(2106)와 동일하고, 입력되는 신호의 종류 및 출력되는 정보원 부호의 종류만이 다르기 때문에, 그 설명을 생략한다.
또한, 기본 레이어 복호화부(2108)의 내부 구성은, 도 5에 나타낸 기본 레이어 복호화부(208)와 동일하기 때문에 설명을 생략한다. 또한, 제 1 확장 레이어 복호화부(2110)의 내부 구성은, 기본 레이어 복호화부(2108)의 내부 구성과 동일하고, 입력되는 정보원 부호의 종류 및 출력되는 신호의 종류만이 다르기 때문에, 그 설명을 생략한다.
다음에, 부호화 정보의 데이터 구조(비트 스트림)에 대하여 도 22를 이용하여 설명한다. 전송 모드 정보 Modecur이 bitrate3인 경우, 부호화 정보는, 도 22(a)에 나타내는 바와 같이 전송 모드 정보 Modecur 및 Modenext, 및 기본 레이어 정보원 부호로 구성된다. 전송 모드 정보 Modecur이 bitrate2인 경우, 부호화 정보는, 도 22(b)에 나타내는 바와 같이 전송 모드 정보 Modecur 및 Modenext, 기본 레이어 정보원 부호, 및 제 1 확장 레이어 정보원 부호로 구성된다. 전송 모드 정보 Modecur이 bitrate1인 경우, 부호화 정보는, 도 22(c)에 나타내는 바와 같이 전송 모드 정보 Modecur 및 Modenext, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 및 제 2 확장 레이어 정보원 부호로 구성된다.
다음에, 도 20의 신호 복호화 장치(2003)의 구성에 대하여 도 23을 이용하여 설명한다.
신호 복호화 장치(2003)는, 복호화 동작 제어부(2301)와, 기본 레이어 복호화부(2302)와, 제 1 확장 레이어 복호화부(2303)와, 제 2 확장 레이어 복호화부(2304)와, 이득 조정부(2308∼2310)와, 제어 스위치(2305∼2307)와, 가산부(2311, 2312)로 주로 구성된다.
부호화 정보는, 복호화 동작 제어부(2301)에 입력된다.
복호화 동작 제어부(2301)는, 전(前) 프레임에 대한 전송 모드 정보(초기값 은 bitrate0으로 하고, 이하 "Modepre"라고 함)를 기억하는 메모리를 내부에 갖고, 입력된 부호화 정보를 전송 모드 정보 Modecur 및 Modenext, 각 레이어의 정보원 부호로 분리하여, 전송 모드 정보 Modepre, Modecur, Modenext에 따라서, 이득 조정부(2308∼2310), 및 제어 스위치(2305∼2307)의 제어를 한다. 또한, 각 레이어의 정보원 부호를 기본 레이어 복호화부(2302), 제 1 확장 레이어 복호화부(2303) 및 제 2 확장 레이어 복호화부(2304)에 출력한다.
다음에, 전송 모드 정보 Modepre, Modecur, Modenext에 따른, 복호화 동작 제어부(2301)의 동작에 대하여 상세히 설명한다.
(패턴 1)
복호화 동작 제어부(2301)는, 전송 모드 정보 Modepre, Modecur, Modenext가 이하의 수학식 5를 만족하는 경우, 현 프레임에 대하여, Modepre와 Modenext의 값을 이용하여, Modepre가 나타내는 전송 비트레이트를 상한으로 하고, Modenext가 나타내는 전송 비트레이트를 하한으로 한 페이드 아웃 처리를 실시한다.
이 때, 복호화 동작 제어부(2301)는, Modepre가 나타내는 전송 비트레이트에 따라 제어 스위치(2305∼2307)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2301)는, Modepre가 bitrate2인 경우에는, 제어 스위치(2305, 2306)를 온 상태로 하고, 제어 스위치(2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2303)에 출력한다. 또한, Modepre가 bitprerate3인 경우에는, 제어 스위치(2305)를 온 상태로 하고, 제어 스위치(2306, 2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2301)는, Modepre, Modenext가 나타내는 전송 비트레이트에 따라서 이득 조정부(2308∼2310)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2301)는, Modepre가 bitrate2이고, 또한 Modenext가 bitrate3인 경우에는, 이득 조정부(2309)를 페이드 아웃 상태로 하고, 이득 조정부(2308, 2310)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modepre가 bitrate2이고, 또한 Modenext가 bitrate0인 경우에는, 이득 조정부(2308, 2309)를 페이드 아웃 상태로 하고, 이득 조정부(2310)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modepre가 bitrate3이고, 또한 Modenext가 bitrate0인 경우에는, 이득 조정부(2308)를 페이드 아웃 상태로 하고, 이득 조정부(2309, 2310)를 오프 상태로 한다.
(패턴 2)
복호화 동작 제어부(2301)는, 전송 모드 정보 Modepre, Modecur, Modenext가 이하의 수학식 6을 만족하는 경우, 현 프레임에 대하여, Modepre(=Modenext)가 나타내는 전송 비트레이트로 통상의 복호화를 수행한다.
이 때, 복호화 동작 제어부(2301)는, Modepre가 나타내는 전송 비트레이트에 따라 제어 스위치(2305∼2307)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2301)는, Modepre가 bitrate2인 경우에는, 제어 스위치(2305, 2306)를 온 상태로 하고, 제어 스위치(2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2303)에 출력한다. 또한, Modepre가 bitrate3인 경우에는, 제어 스위치(2305)를 온 상태로 하고, 제어 스위치(2306, 2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2301)는, 이득 조정부(2308∼2310)를 모두 오프 상태로 한다.
(패턴 3)
복호화 동작 제어부(2301)는, 전송 모드 정보 Modepre, Modecur, Modenext가 이하의 수학식 7을 만족하는 경우, 현 프레임에 대하여, Modepre와 Modenext의 값을 이용하여, Modepre가 나타내는 전송 비트레이트를 하한으로 하고, Modenext가 나타내는 전송 비트레이트를 상한으로 한 페이드 인 처리를 한다.
이 때, 복호화 동작 제어부(2301)는, Modenext가 나타내는 전송 비트레이트에 따라서 제어 스위치(2305∼2307)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2301)는, Modenext가 bitrate2인 경우에는, 제어 스위치(2305, 2306)를 온 상태로 하고, 제어 스위치(2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력하여, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2303)에 출력한다. 또한, Modenext가 bitrate3인 경우에는, 제어 스위치(2305)를 온 상태로 하고, 제어 스위치(2306, 2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2301)는, Modepre, Modenext가 나타내는 전송 비트레이트에 따라서 이득 조정부(2308∼2310)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2301)는, Modepre가 bitrate3이고, 또한 Modenext가 bitrate2인 경우에는, 이득 조정부(2309)를 페이드 인 상태로 하고, 이득 조정부(2308, 2310)을 오프 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modepre가 bitrate0이고, 또한 Modenext가 bitrate2인 경우에는, 이득 조정부(2308, 2309)를 페이드 인 상태로 하고, 이득 조정부(2310)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modepre가 bitrate0이고, 또한 Modenext가 bitrate3인 경우에는, 이득 조정부(2308)를 페이드 인 상태로 하고, 이득 조정부(2309, 2310)를 오프 상태로 한다.
(패턴 4)
복호화 동작 제어부(2301)는, 전송 모드 정보 Modepre, Modecur, Modenext가 이하의 수학식 8을 만족하는 경우, 현 프레임에 대하여, Modecur과 Modenext의 값을 이용하여, Modecur이 나타내는 전송 비트레이트를 상한으로 하고, Modenext가 나타내는 전송 비트레이트를 하한으로 한 페이드 아웃 처리를 한다.
이 때, 복호화 동작 제어부(2301)는, Modecur이 나타내는 전송 비트레이트에 따라서 제어 스위치(2305∼2307)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2301)는, Modecur이 bitrate1인 경우에는, 제어 스위치(2305∼2307)를 모두 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2303)에 출력하며, 제 2 확장 레이어 정보원 부호를 제 2 확장 레이어 복호화부(3304)에 출력하고, Modecur이 bitrate2인 경우에는, 제어 스위치(2305, 2306)를 온 상태로 하고, 제어 스위치(2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2303)에 출력한다. 또한, Modecur이 bitrate3인 경우에는, 제어 스위치(2305)를 온 상태로 하고, 제어 스위치(2306, 2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2301)는, Modecur, Modenext가 나타내는 전송 비트레이트에 따라서 이득 조정부(2305∼2307)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2301)는, Modecur이 bitrate1이고, 또한 Modenext가 bitrate2인 경우에는, 이득 조정부(2310)를 페이드 아웃 상태로 하고, 이득 조정부(2308, 2309)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modecur이 bitrate1이고, 또한 Modenext가 bitrate3인 경우에는, 이득 조정부(2309, 2310)를 페이드 아웃 상태로 하고, 이득 조정부(2308)를 오프 상태로 한다. 또한, 복호화 동 작 제어부(2301)는, Modecur이 bitrate1이고, 또한 Modenext가 bitrate0인 경우에는, 이득 조정부(2308∼2310)를 모두 페이드 아웃 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modecur이 bitrate2이고, 또한 Modenext가 bitrate3인 경우에는, 이득 조정부(2309)를 페이드 아웃 상태로 하고, 이득 조정부(2308, 2310)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modecur이 bitrate2이고, 또한 Modenext가 bitrate0인 경우에는, 이득 조정부(2308, 2309)를 페이드 아웃 상태로 하고, 이득 조정부(2310)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modecur이 bitrate3이고, 또한 Modenext가 bitrate0인 경우에는, 이득 조정부(2308)를 페이드 아웃 상태로 하고, 이득 조정부(2309, 2310)를 오프 상태로 한다.
(패턴 5)
복호화 동작 제어부(2301)는, 전송 모드 정보 Modepre, Modecur, Modenext가 이하의 수학식 9를 만족하는 경우, 현 프레임에 대하여, Modepre와 Modecur의 값을 이용하여, Modepre가 나타내는 전송 비트레이트를 하한으로 하고, Modecur이 나타내는 전송 비트레이트를 상한으로 한 페이드 인 처리를 한다.
이 때, 복호화 동작 제어부(2301)는, Modecur이 나타내는 전송 비트레이트에 따라서 제어 스위치(2305∼2307)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2301)는, Modecur이 bitrate1인 경우에는, 제어 스위치(2305∼2307)를 모두 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2303)에 출력하며, 제 2 확장 레이어 정보원 부호를 제 2 확장 레이어 복호화부(2304)에 출력한다. Modecur이 bitrate2인 경우에는, 제어 스위치(2305, 2306)를 온 상태로 하고, 제어 스위치(2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2303)에 출력한다. 또한, Modecur이 bitrate3인 경우에는, 제어 스위치(2305)를 온 상태로 하고, 제어 스위치(2306, 2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2301)는, Modepre, Modecur이 나타내는 전송 비트레이트에 따라서 이득 조정부(2308∼2310)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2301)는, Modepre가 bitrate2이고, 또한 Modecur이 bitrate1인 경우에는, 이득 조정부(2310)를 페이드 인 상태로 하고, 이득 조정부(2308, 2309)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modepre가 bitrate3이고, 또한 Modecur이 bitrate1인 경우에는, 이득 조정부(2309, 2310)를 페이드 인 상태로 하고, 이득 조정부(2308)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modepre가 bitrate0이고, 또한 Modecur이 bitrate1인 경우에는, 이득 조정부(2308∼2310)를 모두 페이드 인 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modepre가 bitrate3이고, 또한 Modecur이 bitrate2인 경우에는, 이득 조정부(2309)를 페이드 인 상태로 하고, 이득 조정부(2308, 2310)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modepre가 bitrate0이고, 또한 Modecur이 bitrate2인 경우에는, 이득 조정부(2308, 2309)를 페이드 인 상태로 하고, 이득 조정부(2310)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2301)는, Modepre가 bitrate0이고, 또한 Modecur이 bitrate3인 경우에는, 이득 조정부(2308)를 페이드 인 상태로 하고, 이득 조정부(2309, 2310)를 오프 상태로 한다.
(패턴 6)
복호화 동작 제어부(2301)는, 전송 모드 정보 Modepre, Modecur, Modenext가 패턴 1∼5 중의 수학식 5∼수학식 9 중의 어느 것도 만족시키지 못하는 경우, 현 프레임에 대하여, Modecur이 나타내는 전송 비트레이트로 통상의 복호화를 수행한다.
이 때, 복호화 동작 제어부(2301)는, Modecur이 나타내는 전송 비트레이트에 따라서 제어 스위치(2305∼2307)의 제어를 한다. 구체적으로는, 복호화 동작 제어 부(2301)는, Modecur이 bitrate1인 경우에는, 제어 스위치(2305∼2307)를 모두 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2303)에 출력하며, 제 2 확장 레이어 정보원 부호를 제 2 확장 레이어 복호화부(2304)에 출력한다. Modecur이 bitrate2인 경우에는, 제어 스위치(2305, 2306)를 온 상태로 하고, 제어 스위치(2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2303)에 출력한다. 또한, Modecur이 bitrate3인 경우에는, 제어 스위치(2305)를 온 상태로 하고, 제어 스위치(2306, 2307)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2302)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2301)는, 이득 조정부(2308∼2310)를 모두 오프 상태로 한다.
이상이, 복호화 동작 제어부(2301)에 의한 제어 스위치(2305∼2307), 이득 조정부(2308∼2310)의 제어 방법, 및 각 레이어의 복호화부에 출력하는 정보원 부호의 결정 방법의 설명이다.
다음에, 복호화 동작 제어부(2301)는, 전 프레임에 대한 전송 모드 정보 Modepre를 기억하는 메모리에, 현 프레임에 대한 전송 모드 정보 Modecur을 대입하여, 값을 갱신한다.
기본 레이어 복호화부(2302)는, 제어 스위치(2305)가 온 상태인 경우, 복호 화 동작 제어부(2301)로부터 출력된 기본 레이어 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「기본 레이어 복호화 신호」라고 함)를 이득 조정부(2308)에 출력한다. 또, 기본 레이어 복호화부(2302)는, 제어 스위치(2305)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 1 확장 레이어 복호화부(2303)는, 제어 스위치(2306)가 온 상태인 경우, 복호화 동작 제어부(2301)로부터 출력된 제 1 확장 레이어 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「제 1 확장 레이어 복호화 신호」라고 함)를 이득 조정부(2309)에 출력한다. 또, 제 1 확장 레이어 복호화부(2303)는, 제어 스위치(2306)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 2 확장 레이어 복호화부(2304)는, 제어 스위치(2307)가 온 상태인 경우, 복호화 동작 제어부(2301)로부터 출력된 제 2 확장 레이어 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「제 2 확장 레이어 복호화 신호」라고 함)를 이득 조정부(2310)에 출력한다. 또, 제 2 확장 레이어 복호화부(2304)는, 제어 스위치(2307)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
또, 기본 레이어 복호화부(2302), 제 1 확장 레이어 복호화부(2303), 및 제 2 확장 레이어 복호화부(2304)의 내부 구성은, 전술한 기본 레이어 복호화부(208)와 동일하고, 입력되는 정보원 부호의 종류 및 출력되는 신호의 종류만이 다르기 때문에, 그 설명은 생략한다.
이득 조정부(2308)는, 기본 레이어 복호화부(2302)로부터 기본 레이어 복호화 신호가 입력된다. 또한, 이득 조정부(2308)는, 복호화 동작 제어부(2301)에 의해 페이드 아웃/페이드 인/오프 상태가 제어된다.
이득 조정부(2308)는, 복호화 동작 제어부(2301)에 의해 오프 상태로 제어된 경우에는, 기본 레이어 복호화부(2302)로부터 얻어지는 기본 레이어 복호화 신호를 그대로 가산부(2312)에 출력한다. 또한, 이득 조정부(2308)는, 복호화 동작 제어부(2301)에 의해 페이드 아웃 상태로 제어된 경우에는, 이하의 수학식 10에 의해, 기본 레이어 복호화부(2302)로부터 얻어지는 기본 레이어 복호화 신호에 대하여 감쇠 처리를 하고, 얻어진 신호를 가산부(2312)에 출력한다.
여기서, Ns는 1 프레임에 있어서의 샘플수 N에 의해 정해지는 값이며, Xbasei는 기본 레이어 복호화 신호, Xbase'i는 감쇠 후의 복호화 신호이다.
또한, 이득 조정부(2308)는, 복호화 동작 제어부(2301)에 의해 페이드 인 상태로 제어된 경우에는, 이하의 수학식 11에 의해, 기본 레이어 복호화부(2302)로부터 얻어지는 기본 레이어 복호화 신호에 대하여 증폭 처리를 실시하고, 얻어진 신호를 가산부(2312)에 출력한다.
여기서, 상기 수학식 10과 마찬가지로, Ns는 1 프레임에 있어서의 샘플수 N에 의해 정해지는 값이며, Xbasei는 기본 레이어 복호화 신호, Xbase"i는 증폭 후의 복호화 신호이다.
이득 조정부(2309)는, 이득 조정부(2308)에 있어서, 입력 신호를 제 1 확장 레이어 복호화 신호로 치환하고, 가산부(2312)를 가산부(2311)로 치환하는 것 이외에는, 이득 조정부(2308)의 구성과 마찬가지이며, 설명은 생략한다. 또한, 이득 조정부(2310)는, 이득 조정부(2308)에 있어서, 입력 신호를 제 2 확장 레이어 복호화 신호로 치환하고, 가산부(2312)를 가산부(2311)로 치환하는 것 이외에는 이득 조정부(2308)의 구성과 마찬가지이며, 설명은 생략한다.
가산부(2311)는, 제어 스위치(2306, 2307)가 온 상태인 경우, 제 2 확장 레이어 복호화부(2304)로부터 출력된 제 2 확장 레이어 복호화 신호와 제 1 확장 레이어 복호화부(2303)로부터 출력된 제 1 확장 레이어 복호화 신호를 가산하여, 가산 후의 신호를 가산부(2312)에 출력한다. 또한, 가산부(2311)는, 제어 스위치(2307)가 오프 상태이고, 또한, 제어 스위치(2306)가 온 상태인 경우, 제 1 확장 레이어 복호화부(2303)로부터 출력된 제 1 확장 레이어 복호화 신호를 가산부(2312)에 출력한다. 또, 가산부(2311)는, 제어 스위치(2306, 2307)가 오프 상태인 경우, 아무것도 동작하지 않는다.
가산부(2312)는, 제어 스위치(2305, 2306)가 온 상태인 경우, 기본 레이어 복호화부(2302)로부터 출력된 기본 레이어 복호화 신호와 가산부(2311)의 출력 신호를 가산하여, 가산 후의 신호를 출력 신호로서 출력한다. 또한, 가산부(2312)는, 제어 스위치(2305)가 온 상태이고, 제어 스위치(2306)가 오프 상태인 경우, 기본 레이어 복호화부(2302)로부터 출력된 기본 레이어 복호화 신호를 출력 신호로서 출력한다. 또한, 가산부(2312)는, 제어 스위치(2305, 2306)가 오프 상태인 경우, 아무것도 동작하지 않는다.
이상이, 도 20의 신호 복호화 장치(2003)의 내부 구성의 설명이다.
이러한 구성에 의해, 본 실시예에 따르면, 스케일러블 부호화 방식/복호화 방식으로의 통신시에 있어서, 복호화시에 이용하는 레이어수가 증감하는 것에 의해 발생하는 이음을 억제할 수 있다.
또, 본 실시예에서는, 신호 부호화 장치에 있어서, 연속하는 프레임 간의 전송 모드 정보의 전환을 검지하여, 그 정보를 부호화 정보에 포함시킴으로써, 신호 복호화 장치에서 레이어수(전송 비트레이트)가 변경될 때의 이음을 억제하는 경우에 대하여 설명하였지만, 본 발명은 이것에 한정되지 않고, 전송로 중에 존재하는 신호 중계 장치에 있어서 전송 비트레이트를 전환하는 것과 같은 상황에 대해서도, 신호 부호화 장치에 있어서의 처리와 동일한 처리를 하는 것에 의해, 신호 복호화 장치에서 레이어수(전송 비트레이트)가 변경될 때의 이음을 억제한다고 하는 경우에 대해서도 마찬가지로 적용할 수 있다.
또한, 본 실시예에서는, 다음 프레임의 전송 모드 정보가 미리 얻어지는 상 황에 있어서, 신호 복호화 장치가, 입력된 부호화 정보에 포함되는 다음 프레임, 전 프레임, 현 프레임의 전송 모드 정보에 따라서 복호화에 이용하는 레이어수를 전환하는 경우에 대하여 설명하였다. 또, 본 발명은 이것에 한정되지 않고, 부호화 정보 중에 전송 오류 검출 비트 등을 포함하여, 신호 복호화 장치 내에 구비된 전송 오류 검출부에 의해 전송 오류를 검출하고, 그 결과, 복호화시에 이용하는 레이어수를 변경하여, 1 프레임분 지연시킨 부호화 정보(내부 버퍼에 저장함으로써)를 복호화하는 경우에 대해서도 마찬가지로 적용할 수 있다. 예컨대, 2개 전(前)의 프레임의 전송 모드 정보가 bitrate1이고, 또한 1개 전의 프레임의 전송 모드 정보가 bitrate2이며, 또한 현 프레임의 전송 모드 정보가 bitrate2로 전송되는 부호화 정보에 있어서, 신호 복호화 장치 내의 전송 오류 검출부가, 현 프레임(bitrate2)의 최상위 레이어(제 1 확장 레이어)의 정보원 부호에 전송 오류를 검출한 경우에는, 내부 버퍼에 저장한 전 프레임의 부호화 정보에 대하여, 전술한 (패턴 4)의 페이드 아웃 처리를 실시함으로써, 레이어수의 변화에 의한 이음을 억제할 수 있다.
또, 본 실시예에서는, 부호화 장치에 있어서의 부호화 방법으로서, CELP 타입의 음성 부호화/복호화를 실시하는 경우에 대하여 설명하였지만, 본 발명은 이것에 한정되지 않고, 정지 화상, 동화상 등의 음성·악음 신호 이외의 신호에 대해서도 마찬가지로 적용할 수 있다.
또한, 본 발명은 계층을 한정하는 것은 아니며, 복수 계층으로 구성된 계층적인 신호 부호화/복호화 방법에 있어서, 하위 레이어에서의 입력 신호와 출력 신 호와의 차인 잔차 신호를 상위 레이어에서 부호화하는 경우에 대하여 적용할 수 있다.
또한, 본 실시예의 도 23에 나타낸 구성을, 메모리, 디스크, 테이프, CD, DVD 등의 기계 판독 가능한 기록 매체에 기록, 기입을 하여, 동작을 하는 경우에 대해서도 본 발명은 적용할 수 있으며, 본 실시예와 마찬가지의 작용·효과를 얻을 수 있다.
(실시예 7)
전술한 실시예 1에서는, 각 레이어에서 취급하는 신호의 샘플링 주파수가 동일한 스케일러블 부호화/복호화 방식에 있어서, 신호의 복호화시의 레이어수(전송 비트레이트)가 변동된 경우에 대한 이음 억제 처리에 대하여 설명하였지만, 본 발명은 이것에 한정되지 않고, 각 레이어에서 취급하는 신호의 샘플링 주파수가 서로 다른 스케일러블 부호화/복호화 방식(주파수 스케일러블 부호화/복호화 방식)에 대해서도 마찬가지로 적용할 수 있다.
본 발명의 실시예 7에서는, 주파수 스케일러블 부호화/복호화 방식에 있어서, 신호의 복호화시의 레이어수(전송 비트레이트)가 변동된 경우에 대한 이음 억제 처리에 대하여 설명한다.
또, 본 실시예에 있어서의 전체적인 시스템의 구성은 실시예 6의 도 20과 마찬가지이며, 신호 부호화 장치(2001)의 작용은 실시예 6과 동일하다.
도 24는, 본 실시예에 따른 신호 부호화 장치(2001)의 구성을 나타내는 블록 도이다. 또, 신호 부호화 장치(2001)는, 입력 신호를 N 샘플씩 구획하고(N은 자연수), N 샘플을 1 프레임으로 하여 프레임마다 부호화를 한다.
신호 부호화 장치(2001)는, 전송 비트레이트 제어부(2401)와, 제어 스위치(2402∼2405)와, 다운 샘플링 처리부(2406, 2410)와, 기본 레이어 부호화부(2407)와, 기본 레이어 복호화부(2408)와, 업 샘플링 처리부(2409, 2414)와, 가산부(2411, 2415)와, 제 1 확장 레이어 부호화부(2412)와, 제 1 확장 레이어 복호화부(2413)와, 제 2 확장 레이어 부호화부(2416)와, 부호화 정보 통합부(2417)로 주로 구성된다.
전송 모드 정보는, 전송 비트레이트 제어부(2401)에 입력된다. 여기서, 전송 모드 정보란, 입력 신호를 부호화하여 전송할 때의 전송 비트레이트를 지시하는 정보이며, 미리 정해진 2개 이상의 전송 비트레이트 중에서 1개의 전송 비트레이트가 전송 모드 정보로서 선택된다. 또, 본 실시예에 있어서는, 전송 모드 정보는, 미리 정해진 4 종류의 전송 비트레이트 bitrate0, bitrate1, bitrate2, bitrate3(bitrate3<bitrate2<bitrate1)의 값을 취할 수 있는 것으로 한다. 단, bitrate0이란, 부호화 장치(2001)에 입력 신호가 입력되지 않은 경우를 의미한다. 또한, 본 실시예에서는, 현 프레임에 대한 전송 모드 정보(이하, "Modecur"이라고 함)에 부가하여, 미리 다음 프레임에 대한 전송 모드 정보(이하, "Modenext"라고 함)도 동시에 입력되는 것으로 한다.
전송 비트레이트 제어부(2401)는, 입력된 현 프레임에 대한 전송 모드 정보 Modecur에 따라서, 제어 스위치(2402∼2405)의 온/오프 제어를 한다. 구체적으로는, 전송 비트레이트 제어부(2401)는, 전송 모드 정보 Modecur이 bitrate1인 경우, 제어 스위치(2402∼2405)를 모두 온 상태로 한다. 또한, 전송 비트레이트 제어부(2401)는, 전송 모드 정보 Modecur이 bitrate2인 경우, 제어 스위치(2402, 2403)을 온 상태로 하고, 제어 스위치(2404, 2405)를 오프 상태로 한다. 또한, 전송 비트레이트 제어부(2401)는, 전송 모드 정보 Modecur이 bitrate3인 경우, 제어 스위치(2402∼2405)를 모두 오프 상태로 한다. 또한, 전송 비트레이트 제어부(2401)는, 전송 모드 정보 Modecur 및 Modenext를 부호화 정보 통합부(2417)에 출력한다. 이와 같이, 전송 비트레이트 제어부(2401)가 전송 모드 정보 Modecur에 따라서 제어 스위치를 온/오프 제어함으로써, 입력 신호의 부호화에 이용하는 부호화부의 조합이 결정된다.
입력 신호는, 제어 스위치(2402) 및 다운 샘플링 처리부(2406)에 입력된다. 이하, 입력 신호의 샘플링 주파수를 「입력 샘플링 주파수」라고 한다.
다운 샘플링 처리부(2406)는, 입력 신호를 다운 샘플링하여, 기본 레이어 부호화부(2407)에 출력한다. 이하, 다운 샘플링 처리부(2406)에 있어서의 다운 샘플링 후의 샘플링 주파수를 「기본 레이어 샘플링 주파수」라고 한다.
기본 레이어 부호화부(2407)는, 다운 샘플링 처리부(2406)의 출력 신호에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 부호화 정보(이하, 「기본 레이어 정보원 부호」라고 함)를 부호화 정보 통합부(2417) 및 제어 스위치(2403)에 출력한다.
기본 레이어 복호화부(2408)는, 제어 스위치(2403)가 온 상태인 경우, 기본 레이어 부호화부(2407)로부터 출력된 기본 레이어 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「기본 레이어 복호화 신호」라고 함)를 업 샘플링 처리부(2409)에 출력한다. 또, 기본 레이어 복호화부(2408)는, 제어 스위치(2403)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
업 샘플링 처리부(2409)는, 제어 스위치(2403)가 온 상태인 경우, 기본 레이어 복호화부(2408)로부터 출력된 기본 레이어 복호화 신호를 제 1 확장 레이어 주파수로 업 샘플링하여, 업 샘플링 후의 신호를 가산부(2411)에 출력한다. 또, 업 샘플링 처리부(2409)는, 제어 스위치(2403)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
다운 샘플링 처리부(2410)는, 제어 스위치(2402, 2403)가 온 상태인 경우, 제어 스위치(2402)를 거쳐서 출력되는 입력 신호의 샘플링 주파수를 다운 샘플링하여, 다운 샘플링 후의 신호를 가산부(2411)에 출력한다. 이하, 다운 샘플링 처리부(2410)에 있어서의 다운 샘플링 후의 샘플링 주파수를 「제 1 확장 레이어 샘플링 주파수」라고 한다. 또, 다운 샘플링 처리부(2410)는, 제어 스위치(2402, 2403)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
가산부(2411)는, 제어 스위치(2402, 2403)가 온 상태인 경우, 다운 샘플링 처리부(2410)로부터 출력되는 신호에, 업 샘플링 처리부(2409)의 출력 신호의 극성을 반전시킨 신호를 가산하여, 가산 결과인 제 1 차분 신호를 제 1 확장 레이어 부호화부(2412)에 출력한다. 또, 가산부(2411)는, 제어 스위치(2402, 2403)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 1 확장 레이어 부호화부(2412)는, 제어 스위치(2402, 2403)가 온 상태인 경우, 가산부(2411)의 출력 신호에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 부호화 정보(이하, 「제 1 확장 레이어 정보원 부호」라고 함)를 제어 스위치(2405) 및 부호화 정보 통합부(2417)에 출력한다. 또, 제 1 확장 레이어 부호화부(2412)는, 제어 스위치(2402, 2403)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 1 확장 레이어 복호화부(2413)는, 제어 스위치(2405)가 온 상태인 경우, 제 1 확장 레이어 부호화부(2412)로부터 출력된 제 1 확장 레이어 정보원 부호에 대하여 CELP 타입의 음성 복호화 방법을 이용하여 복호화를 실시하고, 복호화에 의해 얻어진 복호화 신호(이하, 「제 1 확장 레이어 복호화 신호」라고 함)를 업 샘플링 처리부(2414)에 출력한다. 또, 제 1 확장 레이어 복호화부(2413)는, 제어 스위치(2405)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
업 샘플링 처리부(2414)는, 제어 스위치(2405)가 온 상태인 경우, 제 1 확장 레이어 복호화부(2413)로부터 출력된 제 1 확장 레이어 복호화 신호를 입력 샘플링 주파수로 업 샘플링하여, 업 샘플링 후의 신호를 가산부(2415)에 출력한다. 또, 업 샘플링 처리부(2414)는, 제어 스위치(2405)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
가산부(2415)는, 제어 스위치(2404, 2405)가 온 상태인 경우, 입력 신호에, 업 샘플링 처리부(2414)의 출력 신호의 극성을 반전시킨 신호를 가산하여, 가산 결과인 제 2 차분 신호를 제 2 확장 레이어 부호화부(2416)에 출력한다. 또, 가산부(2415)는, 제어 스위치(2404, 2405)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
제 2 확장 레이어 부호화부(2416)는, 제어 스위치(2404, 2405)가 온 상태인 경우, 가산부(2415)로부터 출력되는 제 2 차분 신호에 대하여 CELP 타입의 음성 부호화 방법을 이용하여 부호화를 실시하고, 부호화에 의해 얻어진 부호화 정보(이하, 「제 2 확장 레이어 정보원 부호」라고 함)를 부호화 정보 통합부(2417)에 출력한다. 또, 제 2 확장 레이어 부호화부(2416)는, 제어 스위치(2404, 2405)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
부호화 정보 통합부(2417)는, 기본 레이어 부호화부(2407), 제 1 확장 레이어 부호화부(2412), 및 제 2 확장 레이어 부호화부(2416)로부터 출력된 정보원 부호와 전송 비트레이트 제어부(2401)로부터 출력되는 전송 모드 정보 Modecur, Modenext를 통합하여, 이것을 부호화 정보로서 전송로(2002)에 출력한다.
또, 기본 레이어 부호화부(2407), 기본 레이어 복호화부(2408), 제 1 확장 레이어 부호화부(2412), 제 1 확장 레이어 복호화부(2413), 및 제 2 확장 레이어 부호화부(2416)의 내부 구성에 대해서는 전술한 것과 동일하며, 여기서는 설명은 생략한다.
또한, 신호 부호화 장치(2001)로부터 출력되는 부호화 정보의 데이터 구조(비트 스트림)는 도 22와 동일하기 때문에 설명은 생략한다.
이상이, 본 실시예에 있어서의 도 20의 신호 부호화 장치(2001)의 구성의 설명이다.
다음에, 도 20의 신호 복호화 장치(2003)의 구성에 대하여 도 25를 이용하여 설명한다.
신호 복호화 장치(2003)는, 복호화 동작 제어부(2501)와, 기본 레이어 복호화부(2502)와, 제 1 확장 레이어 복호화부(2503)와, 제 2 확장 레이어 복호화부(2504)와, 이득 조정부(2505∼2507)와, 업 샘플링 처리부(2508, 2509)와, 가산부(2510, 2511)와, 제어 스위치(2512∼2519)로 주로 구성된다.
부호화 정보는, 복호화 동작 제어부(2501)에 입력된다.
복호화 동작 제어부(2501)는, 전 프레임에 대한 전송 모드 정보(초기값은 bitrate0으로 하고, 이하 "Modepre"라고 함)를 기억하는 메모리를 내부에 갖고, 입력된 부호화 정보를 전송 모드 정보 Modecur 및 Modenext, 각 레이어의 정보원 부호로 분리하여, 전송 모드 정보 Modepre, Modecur, Modenext에 따라서, 이득 조정부(2505∼2507), 및 제어 스위치(2512∼2519)의 제어를 하고, 또한 각 레이어의 정보원 부호를 기본 레이어 복호화부(2502), 제 1 확장 레이어 복호화부(2503) 및 제 2 확장 레이어 복호화부(2504)에 출력한다.
다음에, 전송 모드 정보 Modepre, Modecur, Modenext에 따른, 복호화 동작 제어부(2501)의 동작에 대하여 상세히 설명한다.
(패턴 1)
복호화 동작 제어부(2501)는, 전송 모드 정보 Modepre, Modecur, Modenext가 이하의 수학식 12를 만족하는 경우, 현 프레임에 대하여, Modepre와 Modenext의 값을 이용하여, Modepre가 나타내는 전송 비트레이트를 상한으로 하고, Modenext가 나타내는 전송 비트레이트를 하한으로 한 페이드 아웃 처리를 한다.
이 때, 복호화 동작 제어부(2501)는, Modepre가 나타내는 전송 비트레이트에 따라 제어 스위치(2512∼2519)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2501)는, Modepre가 bitrate2인 경우에는, 제어 스위치(2512, 2513, 2515, 2516)를 온 상태로 하고, 제어 스위치(2514, 2517, 2518)를 오프 상태로 하며, 제어 스위치(2519)를 가산부(2510) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2503)에 출력한다. 또한, Modepre가 bitrate3인 경우에는, 제어 스위 치(2512)를 온 상태로 하고, 제어 스위치(2513∼2518)를 오프 상태로 하며, 제어 스위치(2519)를 이득 조정부(2505) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2501)는, Modepre, Modenext가 나타내는 전송 비트레이트에 따라서 이득 조정부(2505∼2507)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2501)는, Modepre가 bitrate2이고, 또한 Modenext가 bitrate3인 경우에는, 이득 조정부(2506)를 페이드 아웃 상태로 하고, 이득 조정부(2505, 2507)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modepre가 bitrate2이고, 또한 Modenext가 bitrate0인 경우에는, 이득 조정부(2505, 2506)를 페이드 아웃 상태로 하고, 이득 조정부(2507)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modepre가 bitrate3이고, 또한 Modenext가 bitrate0인 경우에는, 이득 조정부(2505)를 페이드 아웃 상태로 하고, 이득 조정부(2506, 2507)를 오프 상태로 한다.
(패턴 2)
복호화 동작 제어부(2501)는, 전송 모드 정보 Modepre, Modecur, Modenext가 이하의 수학식 13을 만족하는 경우, 현 프레임에 대하여, Modepre(=Modenext)가 나타내는 전송 비트레이트로 통상의 복호화를 수행한다.
이 때, 복호화 동작 제어부(2501)는, Modepre가 나타내는 전송 비트레이트에 따라서 제어 스위치(2512∼2519)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2501)는, Modepre가 bitrate2인 경우에는, 제어 스위치(2512, 2513, 2515, 2516)를 온 상태로 하고, 제어 스위치(2514, 2517, 2518)를 오프 상태로 하며, 제어 스위치(2519)를 가산부(2510) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2503)에 출력한다. 또한, Modepre가 bitrate3인 경우에는, 제어 스위치(2512)를 온 상태로 하고, 제어 스위치(2512∼2518)를 오프 상태로 하며, 제어 스위치(2519)를 이득 조정부(2505) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2501)는, 이득 조정부(2505∼2507)를 모두 오프 상태로 한다.
(패턴 3)
복호화 동작 제어부(2501)는, 전송 모드 정보 Modepre, Modecur, Modenext가 이 하의 수학식 14를 만족하는 경우, 현 프레임에 대하여, Modepre와 Modenext의 값을 이용하여, Modepre가 나타내는 전송 비트레이트를 하한으로 하고, Modenext가 나타내는 전송 비트레이트를 상한으로 한 페이드 인 처리를 한다.
이 때, 복호화 동작 제어부(2501)는, Modenext가 나타내는 전송 비트레이트에 따라 제어 스위치(2512∼2519)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2501)는, Modenext가 bitrate2인 경우에는, 제어 스위치(2512, 2513, 2515, 2516)를 온 상태로 하고, 제어 스위치(2514, 2517, 2518)를 오프 상태로 하며, 제어 스위치(2519)를 가산부(2510) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2503)에 출력한다. 또한, Modenext가 bitrate3인 경우에는, 제어 스위치(2512)를 온 상태로 하고, 제어 스위치(2513∼2518)를 오프 상태로 하며, 제어 스위치(2519)를 이득 조정부(2505) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2501)는, Modepre, Modenext가 나타내는 전송 비트레이트에 따라서 이득 조정부(2505∼2507)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2501)는, Modepre가 bitrate3이고, 또한 Modenext가 bitrate2인 경우에는, 이득 조정부(2506)를 페이드 인 상태로 하고, 이득 조정부(2505, 2507)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modepre가 bitrate0이고, 또한 Modenext가 bitrate2인 경우에는, 이득 조정부(2505, 2506)를 페이드 인 상태로 하고, 이득 조정부(2507)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modepre가 bitrate0이고, 또한 Modenext가 bitrate3인 경우에는, 이득 조정부(2505)를 페이드 인 상태로 하고, 이득 조정부(2506, 2507)를 오프 상태로 한다.
(패턴 4)
복호화 동작 제어부(2501)는, 전송 모드 정보 Modepre, Modecur, Modenext가 이하의 수학식 15를 만족하는 경우, 현 프레임에 대하여, Modecur과 Modenext의 값을 이용하여, Modecur이 나타내는 전송 비트레이트를 상한으로 하고, Modenext가 나타내는 전송 비트레이트를 하한으로 한 페이드 아웃 처리를 한다.
이 때, 복호화 동작 제어부(2501)는, Modecur이 나타내는 전송 비트레이트에 따라서 제어 스위치(2512∼2519)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2501)는, Modecur이 bitrate1인 경우에는, 제어 스위치(2512∼2518)를 모두 온 상태로 하고, 제어 스위치(2519)를 가산부(2511) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2503)에 출력하며, 제 2 확장 레이어 정보원 부호를 제 2 확장 레이어 복호화부(2504)에 출력한다. Modecur이 bitrate2인 경우에는, 제어 스위치(2512, 2513, 2515, 2516)를 온 상태로 하고, 제어 스위치(2514, 2517, 2518)를 오프 상태로 하며, 제어 스위치(2519)를 가산부(2510) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2503)에 출력한다. 또한, Modecur이 bitrate3인 경우에는, 제어 스위치(2512)를 온 상태로 하고, 제어 스위치(2513∼2518)를 오프 상태로 하며, 제어 스위치(2519)를 이득 조정부(2505) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2501)는, Modecur, Modenext가 나타내는 전송 비트레이트에 따라서 이득 조정부(2505∼2507)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2501)는, Modecur이 bitrate1이고, 또한 Modenext가 bitrate2인 경우에는, 이득 조정부(2507)를 페이드 아웃 상태로 하고, 이득 조정부(2505, 2506)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modecur이 bitrate1이고, 또한 Modenext가 bitrate3인 경우에는, 이득 조정부(2506, 2507)를 페이드 아웃 상태로 하고, 이득 조정부(2505)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modecur이 bitrate1이고, 또한 Modenext가 bitrate0인 경우에는, 이득 조정부(2505∼2507)를 모두 페이드 아웃 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modecur이 bitrate2이고, 또한 Modenext가 bitrate3인 경우에는, 이득 조정부(2506)를 페이드 아웃 상태로 하고, 이득 조정부(2505, 2507)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modecur이 bitrate2이고, 또한 Modenext이 bitrate0인 경우에는, 이득 조정부(2505, 2506)를 페이드 아웃 상태로 하고, 이득 조정부(2507)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modecur이 bitrate3이고, 또한 Modenext가 bitrate0인 경우에는, 이득 조정부(2505)를 페이드 아웃 상태로 하고, 이득 조정부(2506, 2507)를 오프 상태로 한다.
(패턴 5)
복호화 동작 제어부(2501)는, 전송 모드 정보 Modepre, Modecur, Modenext가 이하의 수학식 16을 만족하는 경우, 현 프레임에 대하여, Modepre와 Modecur의 값을 이용하여, Modepre가 나타내는 전송 비트레이트를 하한으로 하고, Modecur이 나타내는 전송 비트레이트를 상한으로 한 페이드 인 처리를 한다.
이 때, 복호화 동작 제어부(2501)는, Modecur이 나타내는 전송 비트레이트에 따라서 제어 스위치(2512∼2519)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2501)는, Modecur이 bitrate1인 경우에는, 제어 스위치(2512∼2518)를 모두 온 상태로 하고, 제어 스위치(2519)를 가산부(2511) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2503)에 출력하며, 제 2 확장 레이어 정보원 부호를 제 2 확장 레이어 복호화부(2504)에 출력한다. Modecur이 bitrate2인 경우에는, 제어 스위치(2512, 2513, 2515, 2516)를 온 상태로 하고, 제어 스위치(2514, 2517, 2518)를 오프 상태로 하며, 제어 스위치(2519)를 가산부(2510) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2503)에 출력한다. 또한, Modecur이 bitrate3인 경우에는, 제어 스위치(2512)를 온 상태로 하고, 제어 스위치(2513∼2518)를 오프 상태로 하며, 제어 스위치(2519)를 이득 조정부(2505) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2501)는, Modepre, Modecur이 나타내는 전송 비트레이트에 따라서 이득 조정부(2505∼2507)의 제어를 한다. 구체적으로는, 복 호화 동작 제어부(2501)는, Modepre가 bitrate2이고, 또한 Modecur이 bitrate1인 경우에는, 이득 조정부(2507)를 페이드 인 상태로 하고, 이득 조정부(2505, 2506)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modepre가 bitrate3이고, 또한 Modecur이 bitrate1인 경우에는, 이득 조정부(2506, 2507)를 페이드 인 상태로 하고, 이득 조정부(2505)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modepre가 bitrate0이고, 또한 Modecur이 bitrate1인 경우에는, 이득 조정부(2505∼2507)를 모두 페이드 인 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modepre가 bitrate3이고, 또한 Modecur이 bitrate2인 경우에는, 이득 조정부(2506)를 페이드 인 상태로 하고, 이득 조정부(2505, 2507)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modepre가 bitrate0이고, 또한 Modecur이 bitrate2인 경우에는, 이득 조정부(2505, 2506)를 페이드 인 상태로 하고, 이득 조정부(2507)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2501)는, Modepre가 bitrate0이고, 또한 Modecur이 bitrate3인 경우에는, 이득 조정부(2505)를 페이드 인 상태로 하고, 이득 조정부(2506, 2507)를 오프 상태로 한다.
(패턴 6)
복호화 동작 제어부(2501)는, 전송 모드 정보 Modepre, Modecur, Modenext가 패 턴 1∼5 중의 수학식 12∼수학식 16 중의 어느 것도 만족하지 못하는 경우, 현 프레임에 대하여, Modecur이 나타내는 전송 비트레이트로 통상의 복호화를 수행한다.
이 때, 복호화 동작 제어부(2501)는, Modecur이 나타내는 전송 비트레이트에 따라서 제어 스위치(2512∼2519)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2501)는, Modecur이 bitrate1인 경우에는, 제어 스위치(2512∼2518)를 모두 온 상태로 하고, 제어 스위치(2519)를 가산부(2511) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2503)에 출력하며, 제 2 확장 레이어 정보원 부호를 제 2 확장 레이어 복호화부(2504)에 출력한다. Modecur이 bitrate2인 경우에는, 제어 스위치(2512, 2513, 2515, 2516)를 온 상태로 하고, 제어 스위치(2514, 2517, 2518)를 오프 상태로 하며, 제어 스위치(2519)를 가산부(2510) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2503)에 출력한다. 또한, Modecur이 bitrate3인 경우에는, 제어 스위치(2512)를 온 상태로 하고, 제어 스위치(2513∼2518)를 오프 상태로 하며, 제어 스위치(2519)를 이득 조정부(2505) 측 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2502)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2501)는, 이득 조정부(2505∼2507)를 모두 오프 상태로 한다.
이상이, 복호화 동작 제어부(2501)에 의한 제어 스위치(2512∼2519), 이득 조정부(2505∼2507)의 제어 방법, 및 각 레이어의 복호화부에 출력하는 정보원 부호의 결정 방법의 설명이다.
다음에, 복호화 동작 제어부(2501)는, 전 프레임에 대한 전송 모드 정보 Modepre를 기억하는 메모리에, 현 프레임에 대한 전송 모드 정보 Modecur을 대입하고, 값을 갱신한다.
기본 레이어 복호화부(2502)는, 제어 스위치(2512)가 온 상태인 경우에는, 복호화 동작 제어부(2501)로부터 출력되는 기본 레이어 정보원 부호를 복호화하여, 이것을 기본 레이어 복호화 신호로서 이득 조정부(2505)에 출력한다. 또한, 기본 레이어 복호화부(2502)는, 제어 스위치(2512)가 오프 상태인 경우에는, 아무것도 동작하지 않는다.
제 1 확장 레이어 복호화부(2503)는, 제어 스위치(2513)가 온 상태인 경우에는, 복호화 동작 제어부(2501)로부터 출력되는 제 1 확장 레이어 정보원 부호를 복호화하여, 이것을 제 1 확장 레이어 복호화 신호로서 이득 조정부(2506)에 출력한다. 또한, 제 1 확장 레이어 복호화부(2503)는, 제어 스위치(2513)가 오프 상태인 경우에는, 아무것도 동작하지 않는다.
제 2 확장 레이어 복호화부(2504)는, 제어 스위치(2514)가 온 상태인 경우에는, 복호화 동작 제어부(2501)로부터 출력되는 제 2 확장 레이어 정보원 부호를 복호화하여, 이것을 제 2 확장 레이어 복호화 신호로서 이득 조정부(2507)에 출력한 다. 또한, 제 2 확장 레이어 복호화부(2504)는, 제어 스위치(2514)가 오프 상태인 경우에는, 아무것도 동작하지 않는다.
또한, 기본 레이어 복호화부(2502), 제 1 확장 레이어 복호화부(2503), 제 2 확장 레이어 복호화부(2504)의 내부 구성은, 전술한 설명과 동일하며, 여기서는 설명을 생략한다.
이득 조정부(2505)는, 기본 레이어 복호화부(2502)로부터 기본 레이어 복호화 신호가 입력된다. 또한, 이득 조정부(2505)는, 복호화 동작 제어부(2501)에 의해 페이드 아웃/페이드 인/오프 상태가 제어된다.
이득 조정부(2505)는, 복호화 동작 제어부(2501)에 의해 오프 상태로 제어된 경우에는, 기본 레이어 복호화부(2502)로부터 얻어지는 기본 레이어 복호화 신호를 그대로 제어 스위치(2515, 2519)에 출력한다. 또한, 이득 조정부(2505)는, 복호화 동작 제어부(2501)에 의해 페이드 아웃 상태로 제어된 경우에는, 이하의 수학식 17에 의해, 기본 레이어 복호화부(2502)로부터 얻어지는 기본 레이어 복호화 신호에 대하여 감쇠 처리를 실시하고, 얻어진 신호를 제어 스위치(2515, 2519)에 출력한다.
여기서, Ns는 1 프레임에 있어서의 샘플수 N에 의해 정해지는 값이며, Xbasei는 기본 레이어 복호화 신호, Xbase'i는 감쇠 후의 복호화 신호이다.
또한, 이득 조정부(2505)는, 복호화 동작 제어부(2501)에 의해 페이드 인 상태로 제어된 경우에는, 이하의 수학식 18에 의해, 기본 레이어 복호화부(2502)로부터 얻어지는 기본 레이어 복호화 신호에 대하여 증폭 처리를 실시하고, 얻어진 신호를 제어 스위치(2515, 2519)에 출력한다.
여기서, 상기 수학식 17과 마찬가지로, Ns는 1 프레임에 있어서의 샘플수 N에 의해 정해지는 값이며, Xbasei는 기본 레이어 복호화 신호, Xbase"i는 증폭 후의 복호화 신호이다.
이득 조정부(2506)는, 이득 조정부(2505)에 있어서, 입력 신호를 제 1 확장 레이어 복호화 신호로 치환하고, 제어 스위치(2515, 2519)를 제어 스위치(2516)로 치환하는 것 이외에는 이득 조정부(2505)의 구성과 마찬가지이며, 설명은 생략한다. 또한, 이득 조정부(2507)는, 이득 조정부(2505)에 있어서, 입력 신호를 제 2 확장 레이어 복호화 신호로 치환하고, 제어 스위치(2515, 2519)를 제어 스위치(2518)로 치환하는 것 이외에는 이득 조정부(2505)의 구성과 마찬가지이며, 설명은 생략한다.
업 샘플링 처리부(2508)는, 제어 스위치(2515)가 온 상태인 경우, 이득 조정부(2505)로부터 출력된 기본 레이어 복호화 신호를 제 1 확장 레이어 샘플링 주파수로 업 샘플링하여, 업 샘플링 후의 신호를 가산부(2510)에 출력한다. 또, 업 샘 플링 처리부(2508)는, 제어 스위치(2515)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
가산부(2510)는, 제어 스위치(2515, 2516)가 온 상태인 경우, 업 샘플링 처리부(2508)로부터 출력되는 신호와, 이득 조정부(2506)로부터 출력되는 제 1 확장 레이어 복호화 신호를 가산하여, 이것을 제어 스위치(2517, 2519)에 출력한다. 또, 가산부(2510)는, 제어 스위치(2515, 2516)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
업 샘플링 처리부(2509)는, 제어 스위치(2517)가 온 상태인 경우, 가산부(2510)로부터 출력된 신호를 입력 샘플링 주파수로 업 샘플링하여, 업 샘플링 후의 신호를 가산부(2511)에 출력한다. 또, 업 샘플링 처리부(2509)는, 제어 스위치(2517)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
가산부(2511)는, 제어 스위치(2517, 2518)가 온 상태인 경우, 샘플링 조정부(2509)로부터 출력되는 신호와, 이득 조정부(2507)로부터 출력되는 제 2 확장 레이어 복호화 신호를 가산하여, 이것을 제어 스위치(2519)에 출력한다. 또, 가산부(2511)는, 제어 스위치(2517, 2518)가 오프 상태인 경우에는 아무것도 동작하지 않는다.
이상이, 본 실시예에 있어서의 도 20의 신호 복호화 장치(2002)의 구성의 설명이다.
이와 같이, 본 실시예에 따르면, 각 레이어에서 취급하는 신호의 샘플링 주파수가 서로 다른 스케일러블 부호화/복호화 방식(주파수 스케일러블 부호화/복 호화 방식)에 대해서도, 복호화시에 이용하는 레이어수가 증감하는 것에 의해 발생하는 이음을 억제할 수 있다.
또, 본 실시예에서는, 신호 부호화 장치에 있어서, 연속하는 프레임 간의 전송 모드의 전환을 검지하여, 그 정보를 부호화 정보에 포함시키는 것에 의해, 신호 복호화 장치에서 레이어수(전송 비트레이트)가 변경될 때의 이음을 억제하는 경우에 대하여 설명하였다. 또, 본 발명은 이것에 한정되지 않고, 전송로 중에 존재하는 신호 중계 장치에 있어서 전송 비트레이트를 전환하는 것과 같은 상황에 대해서도, 신호 부호화 장치에 있어서의 처리와 동일한 처리를 함으로써, 신호 복호화 장치에서 레이어수(전송 비트레이트)가 변경될 때의 이음을 억제한다고 하는 경우에 대해서도 마찬가지로 적용할 수 있다.
(실시예 8)
전술한 실시예 6 및 실시예 7에서는, 신호 부호화 장치(2001)에 입력하는 정보로서, 현 프레임에 대한 전송 모드 정보, 및 다음 프레임에 대한 전송 모드 정보가 필요하였다. 그러나, 시스템 상, 미리 다음 프레임의 전송 모드 정보를 입력할 수가 없는 경우나, 전송 오류 등에 의해 예기치 않게 전송 비트레이트가 전환된다고 하는 것도 충분히 고려할 수 있다.
본 발명은, 신호 부호화 장치에 있어서, 또한 전송로 중에 존재하는 신호 중계 장치에 있어서, 다음 프레임에 대한 전송 모드 정보를 얻을 수 없는 경우에 대해서도 마찬가지로 적용할 수 있으며, 본 실시예 8에서는, 상기한 바와 같은 상황 에 있어서, 신호 복호화시에 레이어수(전송 비트레이트)가 변경될 때의 이음을 억제하는 경우에 대하여 설명한다.
본 실시예에 있어서의 전체적인 시스템의 구성은 실시예 6의 도 20과 마찬가지이며, 신호 부호화 장치(2001)의 작용은 실시예 6과 동일하다.
도 20의 신호 부호화 장치(2001)의 구성은, 실시예 6에 있어서의 신호 부호화 장치의 설명과 동일하고, 여기서는 그 설명은 생략한다. 단, 신호 부호화 장치(2001)에 입력되는 전송 모드 정보란, 현 프레임에 대한 전송 모드 정보 Modecur만으로 한다.
또한, 본 실시예에 있어서, 신호 부호화 장치(2001)로부터 전송로(2002)에 출력되는 부호화 정보의 데이터 구조를 도 26에 나타낸다.
전송 모드 정보 Modecur이 bitrate3인 경우, 부호화 정보는, 도 26(a)에 나타내는 바와 같이, 전송 모드 정보 Modecur, 및 기본 레이어 정보원 부호로 구성된다.
전송 모드 정보 Modecur이 bitrate2인 경우, 부호화 정보는, 도 26(b)에 나타내는 바와 같이, 전송 모드 정보 Modecur, 기본 레이어 정보원 부호, 및 제 1 확장 레이어 정보원 부호로 구성된다.
전송 모드 정보 Modecur이 bitrate1인 경우, 부호화 정보는, 도 26(c)에 나타내는 바와 같이, 전송 모드 정보 Modecur, 기본 레이어 정보원 부호, 제 1 확장 레이어 정보원 부호, 및 제 2 확장 레이어 정보원 부호로 구성된다.
다음에, 도 20의 신호 복호화 장치(2003)의 구성에 대하여 도 27의 블록도를 이용하여 설명한다.
신호 복호화 장치(2003)는, 복호화 동작 제어부(2701)와, 제어 스위치(2702∼2704)와, 기본 레이어 복호화부(2705)와, 제 1 확장 레이어 복호화부(2706)와, 제 2 확장 레이어 복호화부(2707)와 이득 조정부(2708∼2710)와, 합성음 보존부(2711∼2713)와, 가산부(2714, 2715)와 재합성 처리부(2716)로 주로 구성된다.
부호화 정보는, 복호화 동작 제어부(2701)에 입력된다.
복호화 동작 제어부(2701)는, 전 프레임에 대한 전송 모드 정보(초기값은 bitrate0으로 하고, 이하 "Modepre"라고 함)를 기억하는 메모리를 내부에 갖고, 입력된 부호화 정보를 전송 모드 정보 Modecur, 및 각 레이어의 정보원 부호로 분리하여, 전송 모드 정보 Modepre, Modecur에 따라서, 이득 조정부(2708∼2710), 제어 스위치(2702∼2704), 합성음 보존부(2711∼2713), 및 재합성 처리부(2716)의 제어를 하며, 또한 각 레이어의 정보원 부호를 기본 레이어 복호화부(2705), 제 1 확장 레이어 복호화부(2706) 및 제 2 확장 레이어 복호화부(2707)에 출력한다.
다음에, 전송 모드 정보 Modepre, Modecur에 따른, 복호화 동작 제어부(2701)의 동작에 대하여 상세히 설명한다. 복호화 동작 제어부(2701)는 이하의 규칙(rule)에 따라서, 이득 조정부(2708∼2710), 제어 스위치(2702∼2704), 합성음 보존부(2711∼2713), 및 재합성 처리부(2716), 출력하는 정보원 부호의 제어/결정을 수행한다.
(패턴 1)
복호화 동작 제어부(2701)는, 전송 모드 정보 Modepre, Modecur이 이하의 수학식 19를 만족하는 경우, 현 프레임에 대하여, Modepre와 Modecur의 값을 이용하여, Modepre가 나타내는 전송 비트레이트를 하한으로 하고, Modecur이 나타내는 전송 비트레이트를 상한으로 한 페이드 인 처리를 한다.
이 때, 복호화 동작 제어부(2701)는, Modecur이 나타내는 전송 비트레이트에 따라서 제어 스위치(2702∼2704)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2701)는, Modecur이 bitrate1인 경우에는, 제어 스위치(2702∼2704)를 모두 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2705)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2706)에 출력하며, 제 2 확장 레이어 정보원 부호를 제 2 확장 레이어 복호화부(2707)에 출력한다. Modecur이 bitrate2인 경우에는, 제어 스위치(2702, 2703)를 온 상태로 하고, 제어 스위치(2704)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2705)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2706)에 출력한다. 또한, Modecur이 bitrate3인 경우에는, 제어 스위치(2702)를 온 상태로 하고, 제어 스위치(2703, 2704)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2705)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2701)는, Modepre, Modecur이 나타내는 전송 비트레이트에 따라서 이득 조정부(2708∼2710)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2701)는, Modecur이 bitrate1이고, 또한 Modepre가 bitrate2인 경우에는, 이득 조정부(2710)를 페이드 인 상태로 하고, 이득 조정부(2708, 2709)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2701)는, Modecur이 bitrate1이고, 또한 Modepre가 bitrate3인 경우에는, 이득 조정부(2709, 2710)를 페이드 인 상태로 하고, 이득 조정부(2708)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2701)는, Modecur이 bitrate1이고, 또한 Modepre가 bitrate0인 경우에는, 이득 조정부(2708∼2710)를 모두 페이드 인 상태로 한다. 또한, 복호화 동작 제어부(2701)는, Modecur이 bitrate2이고, 또한 Modepre가 bitrate3인 경우에는, 이득 조정부(2709)를 페이드 인 상태로 하고, 이득 조정부(2708, 2710)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2701)는, Modecur이 bitrate2이고, 또한 Modepre가 bitrate0인 경우에는, 이득 조정부(2708, 2709)를 페이드 인 상태로 하고, 이득 조정부(2710)를 오프 상태로 한다. 또한, 복호화 동작 제어부(2701)는, Modecur이 bitrate3이고, 또한 Modepre가 bitrate0인 경우에는, 이득 조정부(2708)를 페이드 인 상태로 하고, 이득 조정부(2709, 2710)를 오프 상태로 한다.
또한, 이 때, 복호화 동작 제어부(2701)는, 합성음 보존부(2711∼2713), 및 재합성 처리부(2716)를 모두 오프 상태로 한다.
(패턴 2)
복호화 동작 제어부(2701)는, 전송 모드 정보 Modepre, Modecur이 이하의 수학식 20을 만족하는 경우, 현 프레임에 대하여, Modepre와 Modecur의 값을 이용하여, 재합성 처리를 수행한다.
이 때, 복호화 동작 제어부(2701)는, Modecur이 나타내는 전송 비트레이트에 따라서 제어 스위치(2702∼2704)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2701)는, Modecur이 bitrate1인 경우에는, 제어 스위치(2702∼2704)를 모두 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2705)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2706)에 출력하며, 제 2 확장 레이어 정보원 부호를 제 2 확장 레이어 복호화부(2707)에 출력한다. Modecur이 bitrate2인 경우에는, 제어 스위치(2702, 2703)를 온 상태로 하고, 제어 스위치(2704)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2705)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2706)에 출력한다. 또한, Modecur이 bitrate3인 경우에는, 제어 스위치(2702)를 온 상태로 하고, 제어 스위치(2703, 2704)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2705)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2701)는, 이득 조정부(2708∼2710)를 모두 오프 상태로 한다.
또한, 이 때, 복호화 동작 제어부(2701)는, Modepre, Modecur이 나타내는 전송 비트레이트에 따라서, 합성음 보존부(2711∼2713)의 제어(온/오프 상태), 및 재합성 처리부(2716)의 제어(제 1 확장 레이어 재합성 상태/기본 레이어 재합성 상태 1/기본 레이어 재합성 상태 2)를 한다. 구체적으로는, 복호화 동작 제어부(2701)는, Modecur이 bitrate2이고, 또한 Modepre가 bitrate1인 경우에는, 합성음 보존부(2712, 2713)를 온 상태로 하고, 합성음 보존부(2711)를 오프 상태로 하며, 재합성 처리부(2716)를 제 1 확장 레이어 재합성 상태로 한다. 또한, 복호화 동작 제어부(2701)는, Modecur이 bitrate3이고, 또한 Modepre가 bitrate1인 경우에는, 합성음 보존부(2711, 2713)를 온 상태로 하고, 합성음 보존부(2712)를 오프 상태로 하며, 재합성 처리부(2716)를 기본 레이어 재합성 상태 1로 한다. 또한, 복호화 동작 제어부(2701)는, Modecur이 bitrate3이고, 또한 Modepre가 bitrate2인 경우에는, 합성음 보존부(2711, 2712)를 온 상태로 하고, 합성음 보존부(2713)를 오프 상태로 하며, 재합성 처리부(2716)를 기본 레이어 재합성 상태 2로 한다.
(패턴 3)
복호화 동작 제어부(2701)는, 전송 모드 정보 Modepre, Modecur이 이하의 수학식 21을 만족하는 경우, 현 프레임에 대하여, Modecur의 값을 이용하여, 통상의 복호화 처리를 수행한다.
이 때, 복호화 동작 제어부(2701)는, Modecur이 나타내는 전송 비트레이트에 따라서 제어 스위치(2702∼2704)의 제어를 한다. 구체적으로는, 복호화 동작 제어부(2701)는, Modecur이 bitrate1인 경우에는, 제어 스위치(2702∼2704)를 모두 온 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2705)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2706)에 출력하며, 제 2 확장 레이어 정보원 부호를 제 2 확장 레이어 복호화부(2707)에 출력한다. Modecur이 bitrate2인 경우에는, 제어 스위치(2702, 2703)를 온 상태로 하고, 제어 스위치(2704)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2705)에 출력하고, 제 1 확장 레이어 정보원 부호를 제 1 확장 레이어 복호화부(2706)에 출력한다. 또한, Modecur이 bitrate3인 경우에는, 제어 스위치(2702)를 온 상태로 하고, 제어 스위치(2703, 2704)를 오프 상태로 하여, 기본 레이어 정보원을 기본 레이어 복호화부(2705)에 출력한다.
또한, 이 때, 복호화 동작 제어부(2701)는, 이득 조정부(2708∼2710)를 모두 오프 상태로 한다.
또한, 이 때, 복호화 동작 제어부(2701)는, 합성음 보존부(2711∼2713), 및 재합성 처리부(2716)를 모두 오프 상태로 한다.
기본 레이어 복호화부(2705)는, 제어 스위치(2702)가 온 상태인 경우에는, 복호화 동작 제어부(2701)로부터 출력되는 기본 레이어 정보원 부호를 복호화하여, 이것을 기본 레이어 복호화 신호로서 이득 조정부(2708)에 출력한다. 또한, 기본 레이어 복호화부(2705)는, 제어 스위치(2702)가 오프 상태인 경우에는, 아무것도 동작하지 않는다.
제 1 확장 레이어 복호화부(2706)는, 제어 스위치(2703)가 온 상태인 경우에는, 복호화 동작 제어부(2701)로부터 출력되는 제 1 확장 레이어 정보원 부호를 복호화하여, 이것을 제 1 확장 레이어 복호화 신호로서 이득 조정부(2709)에 출력한다. 또한, 제 1 확장 레이어 복호화부(2706)는, 제어 스위치(2703)가 오프 상태인 경우에는, 아무것도 동작하지 않는다.
제 2 확장 레이어 복호화부(2707)는, 제어 스위치(2704)가 온 상태인 경우에는, 복호화 동작 제어부(2701)로부터 출력되는 제 2 확장 레이어 정보원 부호를 복호화하여, 이것을 제 2 확장 레이어 복호화 신호로서 이득 조정부(2710)에 출력한다. 또한, 제 2 확장 레이어 복호화부(2707)는, 제어 스위치(2704)가 오프 상태인 경우에는, 아무것도 동작하지 않는다.
또한, 기본 레이어 복호화부(2705), 제 1 확장 레이어 복호화부(2706), 제 2 확장 레이어 복호화부(2707)의 내부 구성은, 전술한 설명과 동일하며, 여기서는 설명을 생략한다.
이득 조정부(2708)는, 기본 레이어 복호화부(2705)로부터 기본 레이어 복호화 신호가 입력된다. 또한, 이득 조정부(2708)는, 복호화 동작 제어부(2701)에 의해 페이드 인/오프 상태가 제어된다.
이득 조정부(2708)는, 복호화 동작 제어부(2701)에 의해 오프 상태로 제어된 경우에는, 기본 레이어 복호화부(2705)로부터 얻어지는 기본 레이어 복호화 신호를 그대로 합성음 보존부(2711)에 출력한다. 또한, 이득 조정부(2708)는, 복호화 동작 제어부(2701)에 의해 페이드 인 상태로 제어된 경우에는, 이하의 수학식 22에 의해, 기본 레이어 복호화부(2705)로부터 얻어지는 기본 레이어 복호화 신호에 대하여 증폭 처리를 하고, 얻어진 신호를 합성음 보존부(2711)에 출력한다.
여기서, Ns는 1 프레임에 있어서의 샘플수 N에 의해 정해지는 값이며, Xbasei는 기본 레이어 복호화 신호, Xbase"i는 증폭 후의 복호화 신호이다.
이득 조정부(2709)는, 이득 조정부(2708)에 있어서, 입력 신호를 제 1 확장 레이어 복호화 신호로 치환하고, 합성음 보존부(2711)를 가산부(2714)로 치환하는 것 이외에는 이득 조정부(2708)의 구성과 마찬가지이며, 설명은 생략한다. 또한 이득 조정부(2710)는, 이득 조정부(2708)에 있어서, 입력 신호를 제 2 확장 레이어 복호화 신호로 치환하고, 합성음 보존부(2711)를 가산부(2715)로 치환하는 것 이외에는 이득 조정부(2708)의 구성과 마찬가지이며, 설명은 생략한다.
합성음 보존부(2711)는, 내부에 전 프레임 처리시의 복호화 신호를 기억하는 내부 버퍼를 갖고, 복호화 동작 제어부(2701)에 의해, 온/오프 상태가 제어된다. 합성음 보존부(2711)는, 온/오프 상태의 어느 쪽의 경우에도, 이득 조정부(2708)로부터 출력되는 신호를 입력하여, 이것을 가산부(2714)에 출력한다. 또한, 합성음 보존부(2711)는, 복호화 동작 제어부(2701)에 의해, 온 상태로 제어된 경우에 있어서만, 내부 버퍼에 저장되어 있는 전 프레임 처리시에 이득 조정부(2708)로부터 출력된 신호를 재합성 처리부(2716)에 출력한다. 다음에, 합성음 보존부(2711)는, 온/오프 상태의 어느 쪽의 경우에도, 1 프레임 처리마다, 이득 조정부(2708)로부터 출력되는 신호를 내부 버퍼에 저장한다. 여기서, 합성음 보존부(2711)는, 복호화 동작 제어부(2701)에 의해 온 상태로 제어된 경우, 우선 내부 버퍼에 저장되어 있는 전 프레임 처리시의 신호를 재합성 처리부(2716)에 출력한 후에, 현 프레임의 신호를 내부 버퍼에 저장함으로써, 전 프레임의 신호를 적절히 재합성 처리부(2716)에 출력할 수 있다.
가산부(2714)는, 제어 스위치(2702, 2703)가 모두 온 상태인 경우에는, 합성음 보존부(2711)로부터 출력되는 신호와, 이득 조정부(2709)로부터 출력되는 신호를 가산하여, 이것을 합성음 보존부(2712)로 출력한다. 또한, 가산부(2714)는, 제어 스위치(2702)가 온 상태이고, 또한 제어 스위치(2703)가 오프 상태인 경우에는, 합성음 보존부(2711)로부터 출력되는 신호를, 그대로 합성음 보존부(2712)로 출력 한다. 또한, 가산부(2714)는, 제어 스위치(2702, 2703)가 모두 오프 상태인 경우에는, 아무것도 동작하지 않는다.
합성음 보존부(2712)는, 내부에 전 프레임 처리시의 복호화 신호를 기억하는 내부 버퍼를 갖고, 복호화 동작 제어부(2701)에 의해, 온/오프 상태가 제어된다. 합성음 보존부(2712)는, 온/오프 상태의 어느 쪽의 경우에도, 가산부(2714)로부터 출력되는 신호를 입력하여, 이것을 가산부(2715)에 출력한다. 또한, 합성음 보존부(2712)는, 복호화 동작 제어부(2701)에 의해, 온 상태로 제어된 경우에 있어서만, 내부 버퍼에 저장되어 있는 전 프레임 처리시에 가산부(2714)로부터 출력된 신호를 재합성 처리부(2716)에 출력한다. 다음에, 합성음 보존부(2712)는, 온/오프 상태의 어느 쪽의 경우에도, 1 프레임 처리마다, 가산부(2714)로부터 출력되는 신호를 버퍼에 저장한다. 여기서, 합성음 보존부(2712)는, 복호화 동작 제어부(2701)에 의해 온 상태로 제어된 경우, 우선 내부 버퍼에 저장되어 있는 전 프레임 처리시의 신호를 재합성 처리부(2716)에 출력한 후에, 현 프레임의 신호를 내부 버퍼에 저장함으로써, 전 프레임의 신호를 적절히 재합성 처리부(2716)에 출력할 수 있다.
가산부(2715)는, 제어 스위치(2702∼2704)가 모두 온 상태인 경우에는, 합성음 보존부(2712)로부터 출력되는 신호와, 이득 조정부(2710)로부터 출력되는 신호를 가산하여, 이것을 합성음 보존부(2713)로 출력한다. 또한, 가산부(2715)는, 제어 스위치(2704)가 오프 상태인 경우에는, 합성음 보존부(2712)로부터 출력되는 신호를, 그대로 합성음 보존부(2713)로 출력한다. 또한, 가산부(2715)는, 제어 스위 치(2702∼2704)가 모두 오프 상태인 경우에는, 아무것도 동작하지 않는다.
합성음 보존부(2713)는, 내부에 전 프레임 처리시의 복호화 신호를 기억하는 내부 버퍼를 갖고, 복호화 동작 제어부(2701)에 의해, 온/오프 상태가 제어된다. 합성음 보존부(2713)는, 온/오프 상태의 어느 쪽의 경우에도, 가산부(2715)로부터 출력되는 신호를 입력하여, 이것을 재합성 처리부(2716)에 출력한다. 또한, 합성음 보존부(2713)는, 복호화 동작 제어부(2701)에 의해, 온 상태로 제어된 경우에 있어서만, 내부 버퍼에 저장되어 있는 전 프레임 처리시에 가산부(2715)로부터 출력된 신호를 재합성 처리부(2716)에 출력한다. 다음에, 합성음 보존부(2713)는, 온/오프 상태의 어느 쪽의 경우에도, 1 프레임 처리마다, 가산부(2715)로부터 출력되는 신호를 버퍼에 저장한다. 여기서, 합성음 보존부(2713)는, 복호화 동작 제어부(2701)에 의해 온 상태로 제어된 경우, 우선 내부 버퍼에 저장되어 있는 전 프레임 처리시의 신호를 재합성 처리부(2716)에 출력한 후에, 현 프레임의 신호를 내부 버퍼에 저장함으로써, 전 프레임의 신호를 적절히 재합성 처리부(2716)에 출력할 수 있다.
재합성 처리부(2716)는, 복호화 동작 제어부(2701)에 의해, 기본 레이어 재합성 상태 1/기본 레이어 재합성 상태 2/제 1 확장 레이어 재합성 상태 중 어느 하나의 상태로 제어된다. 이하, 각 상태로 제어된 경우의 재합성 처리부(2716)의 동작에 대하여 상세히 설명한다.
(제 1 확장 레이어 재합성 상태)
재합성 처리부(2716)는, 복호화 동작 제어부(2701)에 의해, 제 1 확장 레이어 재합성 상태로 제어된 경우, 합성음 보존부(2713)로부터 출력되는 현 프레임의 복호화 신호, 합성음 보존부(2712)로부터 출력되는 전 프레임의 합성음(제 1 합성음), 및 합성음 보존부(2713)로부터 출력되는 전 프레임의 합성음(제 2 합성음)을 입력하여, 현 프레임의 복호화 신호에 대하여 재합성 처리를 한다. 구체적으로는, 재합성 처리부(2716)는, 우선, 합성음 보존부(2713)로부터 출력되는 현 프레임의 복호화 신호에 대하여, 각 음성 정보 처리 관련서(J.D.마켈 저(著) 「음성의 선형 예측」(코로나사) 등)에 기재된 방법으로 Np차(次)의 선형 예측 분석을 하여, 선형 예측 계수(LPC 계수)αi(i=0∼Np)를 산출한다. 또, 이 때, 현 프레임의 복호화 신호의 선두에서부터 Np-1개째까지의 샘플에 대해서는, 합성음 보존부(2712)로부터 출력되는 제 1 합성음의 최후에서부터 Np개의 샘플을 이용한다. 다음에, 재합성 처리부(2716)는, 합성음 보존부(2713)로부터 출력되는 현 프레임의 복호화 신호 Si(i=0∼Np)에 대하여, 산출한 선형 예측 계수를 이용하여 수학식 23과 같이 하여, 선형 예측 오차 신호 Zi(i=0∼Np)를 산출한다. 또, 이 때에도, 현 프레임의 복호화 신호의 선두에서부터 Np-1개째까지의 샘플에 대해서는, 합성음 보존부(2712)로부터 출력되는 제 1 합성음의 최후에서부터 Np개의 샘플을 이용한다. 또한, 수학식 23 중 의 N은 1 프레임 중의 샘플수이다.
다음에, 재합성 처리부(2716)는, 산출한 선형 예측 오차 신호를 이용하여 수학식 24와 같이 하여 복호화 신호를 재합성한다. 또, 이 때, 선형 예측 오차 신호의 선두에서부터 Np-1개째까지의 샘플에 대해서는, 합성음 보존부(2713)로부터 출력되는 제 2 합성음의 최후에서부터 Np개의 샘플을 이용한다.
다음에, 재합성 처리부(2716)는, 수학식 24의 결과 얻어지는 신호를 출력 신호로서 출력한다.
(기본 레이어 재합성 상태 1)
또한, 재합성 처리부(2716)는, 복호화 동작 제어부(2701)에 의해, 기본 레이어 재합성 상태 1로 제어된 경우, 합성음 보존부(2713)로부터 출력되는 현 프레임의 복호화 신호, 합성음 보존부(2711)로부터 출력되는 전 프레임의 합성음(제 1 합성음), 및 합성음 보존부(2713)로부터 출력되는 전 프레임의 합성음(제 2 합성음)을 입력하여, 현 프레임의 복호화 신호에 대하여 재합성 처리를 한다. 구체적으로 는, 재합성 처리부(2716)는, 우선, 합성음 보존부(2713)로부터 출력되는 현 프레임의 복호화 신호에 대하여, 주지의 방식으로 Ns차의 선형 예측 분석을 하여, 선형 예측 계수(LPC 계수)αi(i=0∼Np)를 산출한다. 또, 이 때, 현 프레임의 복호화 신호의 선두에서부터 Np-1개째까지의 샘플에 대해서는, 합성음 보존부(2711)로부터 출력되는 제 1 합성음의 최후에서부터 Np개의 샘플을 이용한다. 다음에, 재합성 처리부(2716)는, 합성음 보존부(2713)로부터 출력되는 현 프레임의 복호화 신호에 대하여, 산출한 선형 예측 계수를 이용하여 수학식 23과 같이 하여 선형 예측 오차 신호를 산출한다. 또, 이 때에도, 현 프레임의 복호화 신호의 선두에서부터 Np-1개째까지의 샘플에 대해서는, 합성음 보존부(2711)로부터 출력되는 제 1 합성음의 최후에서부터 Np개의 샘플을 이용한다. 다음에, 재합성 처리부(2716)는, 산출한 선형 예측 오차 신호를 이용하여 수학식 24와 같이 하여, 복호화 신호를 재합성한다. 또, 이 때, 선형 예측 오차 신호의 선두에서부터 Np-1개째까지의 샘플에 대해서는, 합성음 보존부(2713)로부터 출력되는 제 2 합성음의 최후에서부터 Np개의 샘플을 이용한다.
다음에, 재합성 처리부(2716)는, 수학식 24의 결과 얻어지는 신호를 출력 신호로서 출력한다.
(기본 레이어 재합성 상태 2)
또한, 재합성 처리부(2716)는, 복호화 동작 제어부(2701)에 의해, 기본 레이어 재합성 상태 2로 제어된 경우, 합성음 보존부(2713)로부터 출력되는 현 프레임의 복호화 신호, 합성음 보존부(2711)로부터 출력되는 전 프레임의 합성음(제 1 합성음), 및 합성음 보존부(2712)로부터 출력되는 전 프레임의 합성음(제 2 합성음)을 입력하여, 현 프레임의 복호화 신호에 대하여 재합성 처리를 한다. 구체적으로는, 재합성 처리부(2716)는, 우선, 합성음 보존부(2713)로부터 출력되는 현 프레임의 복호화 신호에 대하여, 주지의 방식으로 Ns차의 선형 예측 분석을 하여, 선형 예측 계수(LPC 계수)αi(i=0∼Np)를 산출한다. 또, 이 때, 현 프레임의 복호화 신호의 선두에서부터 Np-1개째까지의 샘플에 대해서는, 합성음 보존부(2711)로부터 출력되는 제 1 합성음의 최후에서부터 Np개의 샘플을 이용한다. 다음에, 재합성 처리부(2716)는, 합성음 보존부(2713)로부터 출력되는 현 프레임의 복호화 신호에 대하여, 산출한 선형 예측 계수를 이용하여 수학식 23과 같이 하여, 선형 예측 오차 신호를 산출한다. 또, 이 때에도, 현 프레임의 복호화 신호의 선두에서부터 Np-1개째까지의 샘플에 대해서는, 합성음 보존부(2711)로부터 출력되는 제 1 합성음의 최후에서부터 Np개의 샘플을 이용한다. 다음에, 재합성 처리부(2716)는, 산출한 선형 예측 오차 신호를 이용하여 수학식 24와 같이 하여, 복호화 신호를 재합성한다. 또, 이 때, 선형 예측 오차 신호의 선두에서부터 Np-1개째까지의 샘플에 대해서는, 합성음 보존부(2712)로부터 출력되는 제 2 합성음의 최후에서부터 Np개의 샘플을 이용한다.
다음에, 재합성 처리부(2716)는, 수학식 24의 결과 얻어지는 신호를 출력 신호로서 출력한다.
이상이, 본 실시예에 있어서의 신호 복호화 장치(2003)의 내부 구성의 설명이다.
이와 같이, 본 실시예에 따르면, 신호 부호화 장치에 있어서, 또한 전송로 중에 존재하는 신호 중계 장치에 있어서, 다음 프레임에 대한 전송 모드 정보를 얻을 수 없는 경우에 대해서도, 복호화시에 이용하는 레이어수가 증감하는 것에 의해 발생하는 이음을 억제하는 것이 가능하게 된다. 특히, 복호화시에 이용하는 레이어수가 감소한 경우에 대해서는, 전 프레임의 각 레이어까지의 복호화 신호를 퇴피시켜 두고, 그 전 프레임의 복호화 신호를 이용하여 레이어수가 감소한 프레임의 복호화 신호를 재합성함으로써, 전송 오류나 돌연한 레이어수 감소 등 예기치 않은 사태에 대해서도 이음을 억제할 수 있다.
또한, 본 실시예에서는, 전송 중인 전송 오류 등은 신호 복호화 장치에 입력하기 전까지 검출하고, 신호 복호화 장치는 이미 전송 모드 정보가 변경된 후의 부호화 정보에 대하여 복호화 처리를 하는 경우를 설명하였지만, 본 발명은 이것에 한정되지 않고, 일반적으로 전송 오류를 검출할 때의 구성과 마찬가지로, 부호화 정보 중에 전송 오류 검출 비트 등을 포함하여, 신호 복호화 장치 내에 구비된 전 송 오류 검출부에 의해 전송 오류를 검출하고, 그 결과, 복호화시에 이용하는 레이어수를 변경하는 경우에 대해서도 마찬가지로 적용할 수 있다. 예컨대, 전 프레임의 전송 모드 정보가 bitrate1이고, 또한 현 프레임의 전송 모드 정보가 bitrate1로 전송되는 부호화 정보에 있어서, 신호 복호화 장치 내의 전송 오류 검출부가, 최상위 레이어(제 2 확장 레이어)의 정보원 부호에 전송 오류를 검출한 경우에는, 전술한 (제 1 확장 레이어 재합성 상태)와 같이 재합성 처리를 함으로써, 레이어수의 변화에 의한 이음을 억제할 수 있다.
본 명세서는, 2004년 7월 28일에 출원한 일본 특허 출원 제 2004-220867호 및 2005년 1월 11일에 출원한 일본 특허 출원 제 2005-004540호에 기초한다. 그 내용은 모두 여기에 포함시켜 둔다.
본 발명은, 패킷 통신 시스템이나 이동 통신 시스템의 통신 장치에 이용하는 데에 바람직하다.
Claims (3)
- 복수 계층으로 구성된 부호화 정보를 복호화하는 신호 복호화 장치로서,각 계층의 부호화 정보를 복호화하여 복수의 복호화 신호를 생성하는 복호화 수단과,상기 각 복호화 신호를 가산하여 가산 신호를 생성하는 가산 수단과,상기 가산 신호의 이득을 조정하는 이득 조정 수단과,전후의 프레임에 있어서의 각 계층의 부호화 정보의 유무에 근거하여 상기 이득 조정 수단의 이득폭을 제어하는 제어 수단을 구비하는 신호 복호화 장치.
- 복수 계층으로 구성된 부호화 정보를 복호화하는 신호 복호화 장치로서,각 계층의 부호화 정보를 복호화하여 복수의 복호화 신호를 생성하는 복호화 수단과,상기 각 복호화 신호의 샘플링 주파수를 조정하는 복수의 샘플링 조정 수단과,상기 샘플링 조정 후의 각 복호화 신호를 가산하여 가산 신호를 생성하는 가산 수단과,상기 가산 신호의 이득을 조정하는 이득 조정 수단과,전후의 프레임에 있어서의 각 계층의 부호화 정보의 유무에 근거하여 상기 이득 조정 수단의 이득폭을 제어하는 제어 수단을 구비하는 신호 복호화 장치.
- 복수 계층으로 구성된 부호화 정보를 복호화하는 신호 복호화 장치로서,각 계층의 부호화 정보를 복호화하여 복수의 복호화 신호를 생성하는 복호화 수단과,상기 각 복호화 신호를 가산하여 가산 신호를 생성하는 가산 수단과,상기 가산 신호의 이득을 조정하는 이득 조정 수단과,전(前) 프레임의 이득 조정 후의 가산 신호를 기억하는 보존 수단과,상기 보존 수단에 의해 보존되는 전 프레임의 가산 신호와 상기 가산 수단에 의해 가산된 현(現) 프레임의 가산 신호를 합성하는 합성 처리 수단과,전 프레임에 있어서의 각 계층의 부호화 정보의 유무에 근거하여 상기 이득 조정 수단의 이득폭을 제어하고, 상기 합성 처리 수단에 의한 합성 처리를 행할지 여부를 제어하는 제어 수단을 구비하는 신호 복호화 장치.
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JPJP-P-2004-00220867 | 2004-07-28 | ||
JP2004220867 | 2004-07-28 | ||
JP2005004540 | 2005-01-11 | ||
JPJP-P-2005-00004540 | 2005-01-11 | ||
PCT/JP2005/013568 WO2006011445A1 (ja) | 2004-07-28 | 2005-07-25 | 信号復号化装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20070035029A true KR20070035029A (ko) | 2007-03-29 |
Family
ID=35786194
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR20077000350A KR20070035029A (ko) | 2004-07-28 | 2005-07-25 | 신호 복호화 장치 |
KR20077000330A KR20070042142A (ko) | 2004-07-28 | 2005-07-25 | 중계 장치 및 신호 복호화 장치 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR20077000330A KR20070042142A (ko) | 2004-07-28 | 2005-07-25 | 중계 장치 및 신호 복호화 장치 |
Country Status (6)
Country | Link |
---|---|
US (2) | US8018993B2 (ko) |
EP (2) | EP1780895B1 (ko) |
JP (2) | JP4558734B2 (ko) |
KR (2) | KR20070035029A (ko) |
CA (2) | CA2575379A1 (ko) |
WO (2) | WO2006011444A1 (ko) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101622950B1 (ko) * | 2009-01-28 | 2016-05-23 | 삼성전자주식회사 | 오디오 신호의 부호화 및 복호화 방법 및 그 장치 |
FR2941829B1 (fr) * | 2009-01-30 | 2012-06-01 | Get Enst Bretagne Groupe Des Ecoles Des Telecomm Ecole Nationale Superieure Des Telecomm Bretagne | Procede de codage de donnees a au moins deux etapes d'encodage a et au moins une etape de permutation, dispositif de codage, programme d'ordinateur et signal correspondants. |
JP5141633B2 (ja) * | 2009-04-24 | 2013-02-13 | ソニー株式会社 | 画像処理方法及びそれを用いた画像情報符号化装置 |
CN101964189B (zh) * | 2010-04-28 | 2012-08-08 | 华为技术有限公司 | 语音频信号切换方法及装置 |
JP5749462B2 (ja) | 2010-08-13 | 2015-07-15 | 株式会社Nttドコモ | オーディオ復号装置、オーディオ復号方法、オーディオ復号プログラム、オーディオ符号化装置、オーディオ符号化方法、及び、オーディオ符号化プログラム |
US20160352793A1 (en) * | 2014-02-17 | 2016-12-01 | Lg Electronics Inc. | Apparatus for processing a hybrid broadcast service, and method for processing a hybrid broadcast service |
EP3382700A1 (en) * | 2017-03-31 | 2018-10-03 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for post-processing an audio signal using a transient location detection |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08328599A (ja) * | 1995-06-01 | 1996-12-13 | Mitsubishi Electric Corp | Mpegオーディオ復号器 |
JPH0923289A (ja) | 1995-07-10 | 1997-01-21 | Nippon Telegr & Teleph Corp <Ntt> | マルチメディアデータ同期方法 |
US6148030A (en) * | 1996-02-07 | 2000-11-14 | Sharp Kabushiki Kaisha | Motion picture coding and decoding apparatus |
JPH1097295A (ja) | 1996-09-24 | 1998-04-14 | Nippon Telegr & Teleph Corp <Ntt> | 音響信号符号化方法及び復号化方法 |
KR100261253B1 (ko) * | 1997-04-02 | 2000-07-01 | 윤종용 | 비트율 조절이 가능한 오디오 부호화/복호화 방법및 장치 |
JPH10294940A (ja) * | 1997-04-22 | 1998-11-04 | Canon Inc | 画像伝送システム及び画像伝送装置 |
DE19804564A1 (de) * | 1998-02-05 | 1999-08-12 | Fraunhofer Ges Forschung | Kommunikationsnetz, Verfahren zum Übertragen eines Signals, Netzverbindungseinheit und Verfahren zum Anpassen der Datenrate eines skalierten Datenstroms |
US6115689A (en) * | 1998-05-27 | 2000-09-05 | Microsoft Corporation | Scalable audio coder and decoder |
US6182031B1 (en) * | 1998-09-15 | 2001-01-30 | Intel Corp. | Scalable audio coding system |
JP2000115113A (ja) | 1998-10-08 | 2000-04-21 | Sony Corp | 多重化装置及び方法、受信装置及び方法並びにデジタル放送システム |
JP2000324488A (ja) | 1999-05-13 | 2000-11-24 | Victor Co Of Japan Ltd | 静止画伝送方法及び再生方法 |
US6549147B1 (en) * | 1999-05-21 | 2003-04-15 | Nippon Telegraph And Telephone Corporation | Methods, apparatuses and recorded medium for reversible encoding and decoding |
JP3406275B2 (ja) * | 1999-05-21 | 2003-05-12 | 日本電信電話株式会社 | ディジタル信号符号化方法、ディジタル信号復号化方法、これらの装置及びその各プログラム記録媒体 |
US6757654B1 (en) * | 2000-05-11 | 2004-06-29 | Telefonaktiebolaget Lm Ericsson | Forward error correction in speech coding |
JP4290917B2 (ja) * | 2002-02-08 | 2009-07-08 | 株式会社エヌ・ティ・ティ・ドコモ | 復号装置、符号化装置、復号方法、及び、符号化方法 |
US6934679B2 (en) * | 2002-03-07 | 2005-08-23 | Microsoft Corporation | Error resilient scalable audio coding |
JP3863053B2 (ja) | 2002-04-12 | 2006-12-27 | シャープ株式会社 | 情報配信方法、情報配信装置、情報配信プログラムならびにそれを記録したコンピュータ読み取り可能な記録媒体 |
JP3881946B2 (ja) | 2002-09-12 | 2007-02-14 | 松下電器産業株式会社 | 音響符号化装置及び音響符号化方法 |
WO2003091989A1 (en) * | 2002-04-26 | 2003-11-06 | Matsushita Electric Industrial Co., Ltd. | Coding device, decoding device, coding method, and decoding method |
DE10236694A1 (de) * | 2002-08-09 | 2004-02-26 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Vorrichtung und Verfahren zum skalierbaren Codieren und Vorrichtung und Verfahren zum skalierbaren Decodieren |
JP2005151176A (ja) | 2003-11-14 | 2005-06-09 | Matsushita Electric Ind Co Ltd | 画像伝送方法および装置 |
JP4733939B2 (ja) | 2004-01-08 | 2011-07-27 | パナソニック株式会社 | 信号復号化装置及び信号復号化方法 |
US7668712B2 (en) * | 2004-03-31 | 2010-02-23 | Microsoft Corporation | Audio encoding and decoding with intra frames and adaptive forward error correction |
-
2005
- 2005-07-25 EP EP05761717.7A patent/EP1780895B1/en active Active
- 2005-07-25 WO PCT/JP2005/013567 patent/WO2006011444A1/ja active Application Filing
- 2005-07-25 WO PCT/JP2005/013568 patent/WO2006011445A1/ja active Application Filing
- 2005-07-25 CA CA 2575379 patent/CA2575379A1/en not_active Abandoned
- 2005-07-25 KR KR20077000350A patent/KR20070035029A/ko not_active Application Discontinuation
- 2005-07-25 JP JP2006529315A patent/JP4558734B2/ja not_active Expired - Fee Related
- 2005-07-25 KR KR20077000330A patent/KR20070042142A/ko not_active Application Discontinuation
- 2005-07-25 US US11/658,494 patent/US8018993B2/en active Active
- 2005-07-25 CA CA 2575215 patent/CA2575215A1/en not_active Abandoned
- 2005-07-25 US US11/658,585 patent/US8099291B2/en active Active
- 2005-07-25 EP EP05761769A patent/EP1780896A4/en not_active Withdrawn
-
2010
- 2010-06-11 JP JP2010134118A patent/JP2010213350A/ja active Pending
Also Published As
Publication number | Publication date |
---|---|
EP1780896A1 (en) | 2007-05-02 |
CA2575215A1 (en) | 2006-02-02 |
EP1780895A4 (en) | 2009-02-25 |
US20080298457A1 (en) | 2008-12-04 |
JPWO2006011445A1 (ja) | 2008-05-01 |
KR20070042142A (ko) | 2007-04-20 |
EP1780895B1 (en) | 2020-07-01 |
WO2006011445A1 (ja) | 2006-02-02 |
CA2575379A1 (en) | 2006-02-02 |
US20090006086A1 (en) | 2009-01-01 |
US8018993B2 (en) | 2011-09-13 |
JP4558734B2 (ja) | 2010-10-06 |
JP2010213350A (ja) | 2010-09-24 |
EP1780895A1 (en) | 2007-05-02 |
WO2006011444A1 (ja) | 2006-02-02 |
EP1780896A4 (en) | 2009-02-18 |
US8099291B2 (en) | 2012-01-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4589366B2 (ja) | 忠実度最適化可変フレーム長符号化 | |
US7636055B2 (en) | Signal decoding apparatus and signal decoding method | |
JP5730303B2 (ja) | 復号装置、符号化装置およびこれらの方法 | |
KR20070035029A (ko) | 신호 복호화 장치 | |
JP4216364B2 (ja) | 音声符号化/復号化方法および音声信号の成分分離方法 | |
JP2002330075A (ja) | サブバンドadpcm符号化方法、復号方法、サブバンドadpcm符号化装置、復号装置およびワイヤレスマイクロホン送信システム、受信システム | |
US7974839B2 (en) | Method, medium, and apparatus encoding scalable wideband audio signal | |
JP4365653B2 (ja) | 音声信号送信装置、音声信号伝送システム及び音声信号送信方法 | |
US20090129576A1 (en) | Relay device, communication terminal, signal decoder, signal processing method, and signal processing program | |
CN1993891B (zh) | 信号解码装置 | |
JP4108396B2 (ja) | 多地点制御装置の音声符号化伝送システム | |
JP3649854B2 (ja) | 音声符号化装置 | |
JP4597360B2 (ja) | 音声復号装置及び音声復号方法 | |
JP2006345289A (ja) | 中継装置および端末装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |