CN113966530A - 声音信号接收解码方法、声音信号解码方法、声音信号接收侧装置、解码装置、程序以及记录介质 - Google Patents
声音信号接收解码方法、声音信号解码方法、声音信号接收侧装置、解码装置、程序以及记录介质 Download PDFInfo
- Publication number
- CN113966530A CN113966530A CN201980097320.4A CN201980097320A CN113966530A CN 113966530 A CN113966530 A CN 113966530A CN 201980097320 A CN201980097320 A CN 201980097320A CN 113966530 A CN113966530 A CN 113966530A
- Authority
- CN
- China
- Prior art keywords
- code
- communication line
- code string
- monaural
- limit time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005236 sound signal Effects 0.000 title claims abstract description 575
- 238000000034 method Methods 0.000 title claims abstract description 67
- 238000004891 communication Methods 0.000 claims abstract description 573
- 238000012545 processing Methods 0.000 description 30
- 238000012986 modification Methods 0.000 description 24
- 230000004048 modification Effects 0.000 description 24
- 230000002123 temporal effect Effects 0.000 description 18
- 230000005540 biological transmission Effects 0.000 description 17
- 238000006243 chemical reaction Methods 0.000 description 16
- 238000010586 diagram Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 11
- 238000012935 Averaging Methods 0.000 description 5
- 230000002542 deteriorative effect Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/005—Correction of errors induced by the transmission channel, if related to the coding algorithm
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/167—Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/038—Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Mathematical Physics (AREA)
- Quality & Reliability (AREA)
- Telephonic Communication Services (AREA)
- Telephone Function (AREA)
Abstract
提供与仅得到所需最低限度的音质的解码声音信号的结构相比不使延迟时间大幅增长,就能够得到高音质的解码声音信号的技术。一种终端装置,与第一通信线路和优先级比其低的第二通信线路连接,基于从第一通信线路输入的第一码串中包含的单声道码、以及从第二通信线路输入的第二码串之中的、帧号与该单声道码最接近的第二码串中包含的扩展码,得到多个声道的声音信号并输出。
Description
技术领域
本发明涉及与信息传输的优先级不同的至少两个通信网连接的终端装置中的声音信号的解码技术、与其对应的声音信号的编码技术的至少其中一个。
背景技术
作为与信息传输的优先级不同的两个通信网连接的终端装置间的声音信号的编码和解码的在先技术,有专利文献1的技术。专利文献1的编码装置按每个特定的时间区间即每帧,对被输入的声音信号进行可扩展编码而得到作为基础层的码的低带域码1、作为扩展层的码的低带域码2和高带域码,将低带域码1包含在优先级高的分组中并至少向带域得到保证的网络B送出,将低带域码2和高带域码包含在优先级低的分组中并向带域未得到保证的网络A送出。专利文献1的解码装置在接收到优先级高的分组时开始对限制时间经过进行监视,如果经过了限制时间,则在该时刻使用接收完毕的分组进行解码。即,如果设为通常网络A与网络B相比延迟较大,则专利文献1的解码装置在实质上,从基础层的码到达起经过了上述的限制时间之后,如果低带域码2和高带域码也到达,则还使用低带域码2和高带域码进行解码处理而得到高音质的解码声音信号,如果低带域码2和高带域码未到达,则仅使用低带域码1进行解码处理而得到需要最低限度的音质的解码声音信号。
现有技术文献
专利文献
专利文献1:日本特开2005-117132公报
发明内容
发明要解决的课题
在专利文献1的技术中,为了在多数的帧中得到高音质的解码声音信号,需要设定远比仅得到需要最低限度的音质的解码声音信号的结构中产生的延迟时间长的时间,作为上述的限制时间。从而,在专利文献1的技术中存在如下课题:如果想要在多数的帧中得到高音质的解码声音信号,则不得不将上述的限制时间设定得长到在双向通话时产生不协调感的延迟时间。此外,在专利文献1的技术中,如果使该限制时间接近于0以使在双向通话时不产生不协调感,则优先级高的分组在限制时间内到达的帧的比例非常小。从而,在专利文献1的技术中存在如下课题:如果以在双向通话时不产生不协调感的方式设定限制时间,则几乎在所有帧中都无法得到高音质的解码声音信号。
因此,在本发明中,其目的在于,提供与仅得到所需最低限度的音质的解码声音信号的结构相比不使延迟时间大幅增长,就能够得到高音质的解码声音信号的技术。
用于解决课题的手段
本发明的一方式是一种声音信号接收解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:接收步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是否小于预先决定的限制时间Tmin,在所述判断中所述平均值小于所述限制时间Tmin的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码相同的扩展码,在所述判断中所述平均值不小于所述限制时间Tmin的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码;以及解码步骤,关于所述判断以后的帧,基于在所述接收步骤中输出的单声道码、以及在所述接收步骤中输出的扩展码,得到C个(C为2以上的整数)声道的解码数字声音信号并输出。
本发明的一方式是一种声音信号接收解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:接收步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是否小于预先决定的限制时间Tmax,在所述判断中所述平均值小于所述限制时间Tmax的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,在所述判断中所述平均值不小于所述限制时间Tmax的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码;以及解码步骤,在所述判断中所述平均值小于所述限制时间Tmax的情况下,关于所述判断以后的帧,基于在所述接收步骤中输出的单声道码、以及在所述接收步骤中输出的扩展码,得到C个(C为2以上的整数)声道的解码数字声音信号并输出,在所述判断中所述平均值不小于所述限制时间Tmax的情况下,关于所述判断以后的帧,将基于在所述接收步骤中输出的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
本发明的一方式是一种声音信号接收解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:接收步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是小于预先决定的第一限制时间Tmin,还是为比所述第一限制时间Tmin大的预先决定的第二限制时间Tmax以上,还是为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax,在所述判断中所述平均值小于所述第一限制时间Tmin的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码相同的扩展码,在所述判断中所述平均值为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,在所述判断中所述平均值为所述第二限制时间Tmax以上的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码;以及解码步骤,在所述判断中所述平均值小于所述第一限制时间Tmin的情况、以及在所述判断中所述平均值为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax的情况下,关于所述判断以后的帧,基于在所述接收步骤中输出的单声道码、以及在所述接收步骤中输出的扩展码,得到C个(C为2以上的整数)声道的解码数字声音信号并输出,在所述判断中所述平均值为所述第二限制时间Tmax以上的情况下,关于所述判断以后的帧,将基于在所述接收步骤中输出的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
本发明的一方式是一种声音信号接收解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:接收步骤,关于从所述第一通信线路输入的第一码串中包含的单声道码与从所述第二通信线路输入的第二码串中包含的扩展码之中的帧号与该单声道码最接近的扩展码之间的帧号之差小于预先决定的值的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,关于所述差不小于所述预先决定的值小于的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码;以及解码步骤,关于所述差小于所述预先决定的值的帧,基于在所述接收步骤中输出的单声道码、以及在所述接收步骤中输出的扩展码,得到C个(C为2以上的整数)声道的解码数字声音信号并输出,关于所述差不小于所述预先决定的值的帧,将基于在所述接收步骤中输出的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
本发明的一方式是一种声音信号解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:解码步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmin的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的帧号与该单声道码相同的扩展码,得到C个(C为2以上的整数)声道的解码数字声音信号并输出,在所述平均值不小于所述限制时间Tmin的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的帧号与该单声道码最接近的扩展码,得到C个声道的解码数字声音信号并输出。
本发明的一方式是一种声音信号解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:解码步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmax的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的帧号与该单声道码最接近的扩展码,得到C个(C为2以上的整数)声道的解码数字声音信号并输出,在所述平均值不小于所述限制时间Tmax的情况下,将基于从所述第一通信线路输入的第一码串中包含的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
本发明的一方式是一种声音信号解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:解码步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的第一限制时间Tmin的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的帧号与该单声道码相同的扩展码,得到C个(C为2以上的整数)声道的解码数字声音信号并输出,在所述平均值为比所述第一限制时间Tmin大的预先决定的第二限制时间Tmax以上的情况下,将基于从所述第一通信线路输入的第一码串中包含的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出,在所述平均值为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的帧号与该单声道码最接近的扩展码,得到C个声道的解码数字声音信号并输出。
本发明的一方式是一种声音信号解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:解码步骤,关于从所述第一通信线路输入的第一码串中包含的单声道码与从所述第二通信线路输入的第二码串中包含的帧号与该单声道码最接近的扩展码之间的帧号之差小于预先决定的值的帧,基于所述单声道码和所述扩展码得到C个(C为2以上的整数)声道的解码数字声音信号并输出,关于所述差不小于所述预先决定的值的帧,将基于所述单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
发明效果
根据本发明,与仅得到所需最低限度的音质的解码声音信号的结构相比不使延迟时间大幅增长,就能够得到高音质的解码声音信号。
附图说明
图1是表示电话系统的例的框图。
图2是表示多线路支持终端装置的例的框图。
图3是表示多线路支持终端装置的声音信号发送侧装置的处理例的流程图。
图4是表示多线路支持终端装置的声音信号接收侧装置的处理例的流程图。
图5是示意性地表示多线路支持终端装置的声音信号接收侧装置中的被输入的码与输出的信号之间的时间性关系的图。
图6是示意性地表示使用现有技术的声音信号接收侧装置中的被输入的码与输出的信号之间的时间性关系的图。
图7是表示多地点控制装置的例的框图。
图8是表示多地点控制装置的处理例的流程图。
图9是表示多地点控制装置的例的框图。
图10是表示多地点控制装置的处理例的流程图。
图11是表示电话线路专用终端装置的例的框图。
图12是表示电话线路专用终端装置的声音信号发送侧装置的处理例的流程图。
图13是表示电话线路专用终端装置的声音信号接收侧装置的处理例的流程图。
图14是表示用于实现本发明的实施方式中的各装置的计算机的功能结构的一例的图。
具体实施方式
<电话系统100>
电话系统100如图1所示,包含多线路支持终端装置200-m(m为1以上且M以下的各整数,M为2以上的整数)、第一通信网400和第二通信网500。电话系统100也可以如图1中虚线所示,包含电话线路专用终端装置300-n(n为1以上且N以下的各整数,N为1以上的整数)。各多线路支持终端装置200-m能够经由作为第一通信网400的各通信线路的第一通信线路410-m与别的终端装置连接。进而,各多线路支持终端装置200-m能够经由作为第二通信网500的各通信线路的第二通信线路510-m与别的多线路支持终端装置连接。各电话线路专用终端装置300-n能够经由作为第一通信网400的各通信线路的第一通信线路420-n与别的终端装置连接。
<第一通信网400、第二通信网500>
第一通信网400与第二通信网500是信息传输的优先级不同的通信网。第一通信网400是与第二通信网500相比信息传输的优先级高的通信网,是能够从某终端装置向别的终端装置以较短的延迟时间传输特定的比特率的码串的通信网。第一通信网400例如是用于作为现有型便携电话或智能手机的终端装置与作为现有型便携电话或智能手机的别的终端装置之间的双向通话的通信网,是具备一般被称为电话线路的通信线路的通信网。第二通信网500是与第一通信网400相比信息传输的优先级低的通信网,是能够从某终端装置向别的终端装置以不设置延迟时间的约束的方式传输码串的通信网。第二通信网500例如是在从作为智能手机的终端装置向作为智能手机的别的终端装置传输影像或字符串等数据的情况下使用的通信网,是具备一般被称为互联网线路的通信线路的通信网。
在图1中分为第一通信网400和第二通信网500记载,但第一通信网400与第二通信网500无需在物理上分开,只要在逻辑上分开即可。同样,在终端装置与第一通信线路410-m和第二通信线路510-m这双方连接的情况下,第一通信线路410-m与第二通信线路510-m无需在物理上分开,只要在逻辑上分开即可。即,各终端装置也可以通过一个IP通信线路与一个IP通信网连接,通过分组的优先控制等,在逻辑上构筑作为信息传输的优先级高的通信网以及通信线路的第一通信网400以及第一通信线路410-m、以及作为与第一通信网400以及第一通信线路410-m相比信息传输的优先级低的通信网以及通信线路的第二通信网500以及第二通信线路510-m。例如也可以是,多线路支持终端装置200-m是支持VoLTE(长期演进语音承载(Voice over LTE,Voice over Long Term Evolution))的智能手机,第一通信网400以及第一通信线路410-m的例子是LTE通信网以及LTE线路中的VoLTE通信网以及VoLTE线路,第二通信网500以及第二通信线路510-m的例子是LTE通信网以及LTE线路中的互联网通信网以及互联网线路。
另外,上述的通信网、通信线路、终端装置的例子全部是移动通信的例子,但各通信网是固定通信用的通信网还是移动通信用的通信网,各通信线路是有线还是无线,各终端装置是固定电话还是便携电话等都不作限定。
<第一实施方式>
针对第一实施方式的多线路支持终端装置进行说明。
<多线路支持终端装置200-m>
多线路支持终端装置200-m例如是支持VoLTE的智能手机,如图2所示,包含声音信号发送侧装置210-m和声音信号接收侧装置220-m。声音信号发送侧装置210-m包含收音单元211-m、编码装置212-m和发送单元213-m。声音信号接收侧装置220-m包含接收单元221-m、解码装置222-m和播放单元223-m。编码装置212-m包含信号分析单元2121-m和单声道编码单元2122-m。解码装置222-m包含单声道解码单元2221-m和扩展解码单元2222-m。另外,如图中点线所示,将信号分析单元2121-m和单声道编码单元2122-m汇总称为编码单元2129-m,将单声道解码单元2221-m和扩展解码单元2222-m汇总称为解码单元2229-m。此外,有时也将编码装置212-m、解码装置222-m分别称为声音信号编码装置212-m、声音信号解码装置222-m。多线路支持终端装置200-m的声音信号发送侧装置210-m进行图3以及以下所例示的步骤S211至步骤S213的处理,多线路支持终端装置200-m的声音信号接收侧装置220-m进行图4以及以下所例示的步骤S221至步骤S223的处理。
[声音信号发送侧装置210-m]
声音信号发送侧装置210-m例如按每个20ms的特定的时间区间即每帧,得到包含与2个声道的数字声音信号对应的单声道码的码串即第一码串并向第一通信线路410-m输出,得到包含与该2个声道的数字声音信号对应的扩展码的码串即第二码串并向第二通信线路510-m输出。
[[收音单元211-m]]
收音单元211-m包含2个麦克风和2个AD变换单元。各麦克风与各AD变换单元一对一地被进行关联。麦克风对麦克风的周边的空间域中产生的声音进行收音,变换为模拟的电信号并向AD变换单元输出。AD变换单元将被输入的模拟的电信号变换为例如作为采样频率是8kHz的PCM信号的数字声音信号并输出。即,收音单元211-m向编码装置212-m输出与由2个麦克风各自收音的声音对应的2个声道的数字声音信号、例如左声道和右声道的2声道立体声的数字声音信号(步骤S211)。
另外,收音单元211-m的全部或者一部分也可以不被配置在声音信号发送侧装置210-m的内部,而设为与声音信号发送侧装置210-m连接。例如,声音信号发送侧装置210-m的收音单元211-m也可以不具备麦克风,而从与声音信号发送侧装置210-m连接的麦克风向声音信号发送侧装置210-m的收音单元211-m的AD变换单元输入2个模拟的电信号。或者,声音信号发送侧装置210-m也可以不具备收音单元211-m,而从与声音信号发送侧装置210-m连接的AD变换器等收音机器向声音信号发送侧装置210-m的编码装置212-m输入2个声道的数字声音信号。
[[编码装置212-m]]
从收音单元211-m、或者与声音信号发送侧装置210-m连接的收音机器,向编码装置212-m输入2个声道的数字声音信号。编码装置212-m按每帧得到与被输入的2个声道的数字声音信号对应的单声道码和扩展码,并向发送单元213-m输出(步骤S212)。
[[[信号分析单元2121-m]]]
信号分析单元2121-m按每帧,根据被输入的2个声道的数字声音信号,得到作为将被输入的2个声道的数字声音信号混合而成的信号的单声道信号、以及表现特征参数的扩展码,该特征参数是表现被输入的2个声道的数字声音信号的差分的特征且时间性变动小的参数。信号分析单元2121-m将得到的单声道信号向单声道编码单元2122-m输出,将得到的扩展码向发送单元213-m输出。时间性变动小的参数,是对时刻的依赖性低的参数,是时间分辨率低的参数。
〔信号分析单元2121-m的第一例〕
作为第一例,说明将表现被输入的2个声道的数字声音信号的时间差的信息作为特征参数的情况下的信号分析单元2121-m的每帧的操作。信号分析单元2121-m首先得到作为表现被输入的2个声道的数字声音信号的时间差的信息的特征参数(步骤S2121-11)。被输入的2个声道的数字声音信号的时间差可以用周知的任意方法求出。例如,信号分析单元2121-m关于预先决定的范围内的各时间差的候选样本数,计算一方的声道(第一声道)的数字声音信号的样本列与使另一方的声道(第二声道)的数字声音信号的样本列超前该候选样本数而得到的样本列之间的相关值,得到作为相关值最大的候选样本数的时间差样本数,来作为特征参数。
信号分析单元2121-m接着关于第一声道的数字声音信号的样本列以及对第二声道的数字声音信号的样本列赋予特征参数所表示的时间差而得到的样本列,得到对应的样本彼此相加的序列、对应的样本彼此的平均值的序列、对上述相加或平均值的序列进行变形而得到的序列的其中一个,作为将2个声道的数字声音信号混合而成的信号即单声道信号(步骤S2121-12)。对第二声道的数字声音信号的样本列赋予特征参数所表示的时间差而得到的样本列,例如是使第二声道的数字声音信号的样本列超前特征参数所表示的时间差样本数而得到的样本列。
信号分析单元2121-m进而得到作为表现特征参数的码的扩展码(步骤S2121-13)。作为表现特征参数的码的扩展码利用周知的方法得到即可。例如,信号分析单元2121-m对被输入的2个声道的数字声音信号的时间差样本数进行标量量化而得到码,将得到的码作为扩展码输出。或者,例如,信号分析单元2121-m将表现被输入的2个声道的数字声音信号的时间差样本数本身的2进制数作为扩展码输出。
〔信号分析单元2121-m的第二例〕
作为第二例,说明将表现被输入的2个声道的数字声音信号的每个频带的强度差的信息作为特征参数的情况下的信号分析单元2121-m的每帧的操作。另外,在以下说明使用复DFT(离散傅里叶变换(Discrete Fourier Transformation))的具体例,但也可以使用复DFT以外的周知的向频域的变换方法。
信号分析单元2121-m首先对被输入的2个声道的数字声音信号分别进行复DFT来得到复DFT系数列(步骤S2121-21)。复DFT系数列也可以通过使用施加在帧间有重叠的窗的处理、考虑了通过复DFT得到的复数的对称性的处理等周知的方法来得到。例如,如果在帧由128点的样本构成的情况下,则对包含紧前的帧的最后64点的样本和紧后的帧的最初64点的样本在内的连续256点的数字声音信号的样本列进行复DFT,并将得到的256个复数的序列之中的前半的128个复数的序列作为复DFT系数列来得到即可。以后,将f设为1以上且128以下的各整数,将第一声道的复DFT系数列的各复DFT系数设为V1(f),将第二声道的复DFT系数列的各复DFT系数设为V2(f)。信号分析单元2121-m接着根据2个声道的复DFT系数列,得到各复DFT系数在复平面上的半径的值的序列(步骤S2121-22)。各声道的各复DFT系数在复平面上的半径的值,相当于各声道的数字声音信号的每个频率仓的强度。以后,将第一声道的复DFT系数V1(f)在复平面上的半径的值设为V1r(f),将第二声道的复DFT系数V2(f)在复平面上的半径的值设为V2r(f)。信号分析单元2121-m接着关于各个频带得到一方的声道的半径的值与另一方的声道的半径的值之比的平均值,将平均值的序列作为特征参数来得到(步骤S2121-23)。该平均值的序列,是相当于表现被输入的2个声道的数字声音信号的每个频带的强度差的信息的特征参数。例如,如果在设为4个带域的情况下,关于f从1至32、从33至64、从65至96、从97至128这4个带域,分别用第一声道的半径的值V1r(f)除以第二声道的半径的值V2r(f)而得到32个值的平均值Mr(1)、Mr(2)、Mr(3)、Mr(4),得到平均值的序列{Mr(1),Mr(2),Mr(3),Mr(4)}作为特征参数。
另外,带域数只要是频率仓的数量以下的值即可,既可以使用与频率仓数相同的值作为带域数,也可以使用1作为带域数。在使用与频率仓数相同的值作为带域数的情况下,信号分析单元2121-m得到各频率仓的一方的声道的半径的值与另一方的声道的半径的值之比的值,将得到的比的值的序列作为特征参数得到即可。在使用1作为带域数的情况下,信号分析单元2121-m得到各频率仓的一方的声道的半径的值与另一方的声道的半径的值之比的值,将得到的比的值的整个带域的平均值作为特征参数得到即可。此外,在将带域数设为多个的情况下的各频带中包含的频率仓数是任意的,例如,也可以使频率低的带域中包含的频率仓数比频率高的带域中包含的频率仓数少。
此外,信号分析单元2121-m也可以使用一方的声道的半径的值与另一方的声道的半径的值之差,来代替一方的声道的半径的值与另一方的声道的半径的值之比。即,在上述的例的情况下,也可以使用从第一声道的半径的值V1r(f)减去第二声道的半径的值V2r(f)而得到的值,来代替用第一声道的半径的值V1r(f)除以第二声道的半径的值V2r(f)而得到的值。
信号分析单元2121-m此外关于第一声道的数字声音信号的样本列与第二声道的数字声音信号的样本列,得到对应的样本彼此相加的序列、对应的样本彼此的平均值的序列、对上述相加或平均值的序列变形而得到的序列的其中一个,作为将2个声道的数字声音信号混合而成的信号即单声道信号(步骤S2121-24)。另外,信号分析单元2121-m也可以得到在步骤S2121-21中得到的第一声道的复DFT系数列的各复DFT系数V1(f)和第二声道的复DFT系数列的各复DFT系数V2(f)的半径的平均值VMr(f)和角度的平均值VMθ(f),对复平面上的半径为VMr(f)且角度为VMθ(f)的复数VM(f)的序列进行逆复DFT,得到将2个声道的数字声音信号混合而成的信号即单声道信号(步骤S2121-24’)。
信号分析单元2121-m进而得到作为表现特征参数的码的扩展码(步骤S2121-25)。作为表现特征参数的码的扩展码利用周知的方法得到即可。例如,信号分析单元2121-m对在步骤S2121-23中得到的值的序列进行矢量量化来得到码,将得到的码作为扩展码输出。或者,例如,信号分析单元2121-m对在步骤S2121-23中得到的值的序列中包含的值分别进行标量量化来得到码,将得到的码结合来作为扩展码输出。另外,信号分析单元2121-m在步骤S2121-23中得到的是一个值的情况下,将对该一个值进行标量量化而得到的码作为扩展码输出即可。
在信号分析单元2121-m的第一例中说明的被输入的2个声道的数字声音信号的时间差、或者在信号分析单元2121-m的第二例中说明的被输入的2个声道的数字声音信号的每个频带的强度差,依赖于音源的位置。如果是人或乐器等一般的音源,音源的位置随时间变化少,即使在音源的位置随时间变化的情况下,只要音源不急剧移动,被输入的2个声道的数字声音信号的时间差或每个频带的强度差就不太变化。
从而,信号分析单元2121-m也可以关于包含作为处理对象的帧的连续的多个帧,得到根据各帧的被输入的2个声道的数字声音信号得到的特征参数的平均或者加权平均来作为特征参数,并输出表现所得到的特征参数的扩展码。用于加权平均的权重对作为处理对象的帧设为最大的值,对越远离作为处理对象的帧的帧设为越小的值即可。另外,如果使用比作为处理对象的帧更靠未来的帧的特征参数,则需要预读而延迟增加,因此信号分析单元2121-m使用包含作为处理对象的帧的过去侧的连续多个帧为佳。另外,当然,在像表现多个频带各自的强度差的信息那样在特征参数中包含多个元素的情况下,特征参数的平均或者加权平均,是以特征参数的每个元素的平均值或者加权平均值作为元素的数值列。
另外,例如,对被输入的2个声道的数字声音信号的波形的差分、即被输入的2个声道的数字声音信号的对应的样本彼此之差的样本列而言,即使仅使各样本的时刻错开1个样本,也会成为与被输入的2个声道的数字声音信号的波形的差分完全不同的样本列,因此是对时刻的依赖性高的信息,是时间分辨率高的信息,是时间性变动大的信息。同样,被输入的2个声道的数字声音信号的相位差、例如在步骤S2121-21中得到的第一声道的复DFT系数列的各复DFT系数V1(f)在复平面上的角度与第二声道的复DFT系数列的各复DFT系数V2(f)在复平面上的角度之差,是对时刻的依赖性高的信息,是时间分辨率高的信息,是时间性变动大的信息。
即,信号分析单元2121-m所得到的扩展码所表示的特征参数,不是像紧前所例示的被输入的2个声道的数字声音信号的波形的差分或被输入的2个声道的数字声音信号的相位差那样的、表现被输入的2个声道的数字声音信号的差分之中的依赖于音源所发出的声音信号的波形的信息的参数,而是像信号分析单元2121-m的第一例所示的被输入的2个声道的数字声音信号的时间差或信号分析单元2121-m的第二例所示的被输入的2个声道的数字声音信号的每个频带的强度差那样的、表现被输入的2个声道的数字声音信号的差分之中的依赖于音源与麦克风的空间的相对位置的信息的参数。总之,信号分析单元2121-m所得到的扩展码所表示的特征参数也可以说是表现被输入的2个声道的数字声音信号的差分的特征且时间分辨率低的参数,也可以说是表现被输入的2个声道的数字声音信号的差分的特征且时间性变动小的参数,也可以说是表现被输入的2个声道的数字声音信号的差分的特征且对时刻的依赖性低的参数,也可以说是表现被输入的2个声道的数字声音信号的声道间的差分的特征且依赖于音源与麦克风的空间的相对位置的信息的参数。
[[[单声道编码单元2122-m]]]
单声道编码单元2122-m按每帧对被输入的单声道信号以特定的编码方式进行编码,得到单声道码并向发送单元213-m输出。作为编码方式,需要使用单声道码的比特率为第一通信线路410-m的通信容量以下的编码方式,例如使用3GPP EVS标准(3GPP TS26.442)的13.2kbps模式那样的便携电话用的电话带域声音的编码方式即可。
即,编码装置212-m按每帧得到表现将被输入的2个声道的数字声音信号混合而成的信号的单声道码、以及表现特征参数的扩展码,该特征参数是表现被输入的2个声道的数字声音信号的声道间的差分的特征且时间分辨率低的参数。另外,如后所述,编码装置212-m所得到的单声道码是包含在第一码串中向第一通信线路输出的码,编码装置212-m所得到的扩展码是包含在第二码串中向第二通信线路输出的码。
另外,编码装置212-m也可以将表现根据作为处理对象的帧即当前帧的2个声道的数字声音信号而得到的特征参数与根据比作为处理对象的当前帧靠过去的帧的2个声道的数字声音信号而得到的特征参数的平均或者加权平均的码,作为扩展码。
[[发送单元213-m]]
发送单元213-m按每帧将包含从编码装置221-m输入的单声道码的码串即第一码串向第一通信线路410-m输出,将包含从编码装置221-m输入的扩展码的码串即第二码串向第二通信线路510-m输出(步骤S213)。
发送单元213-m以能够确定第一码串包含哪帧的单声道码的方式输出。例如,发送单元213-m将帧号或帧所对应的时刻等能够确定帧的信息作为辅助信息包含在第一码串中并输出。同样,发送单元213-m以能够确定第二码串包含哪帧的扩展码的方式输出。例如,发送单元213-m将帧号或帧所对应的时刻等能够确定帧的信息作为辅助信息包含在第二码串中并输出。另外,在本第一实施方式的声音信号接收侧装置220-m以及以后的各实施方式以及变形例中,说明在第一码串中和在第二码串中都包含帧号作为辅助信息的例子。
[声音信号接收侧装置220-m]
声音信号接收侧装置220-m例如按每个20ms的特定的时间区间、即每帧,输出基于从第一通信线路410-m输入的第一码串中包含的单声道码以及从第二通信线路510-m输入的第二码串中包含的扩展码的声音。
[[接收单元221-m]]
接收单元221-m按每帧将从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,向解码装置222-m输出(步骤S221)。
第一通信线路410-m是用于双向通话的优先级高的通信网,因此,从第一通信线路410-m向接收单元221-m输入包含单声道码的第一码串,以使能够将通话对方的多线路支持终端装置200-m’(m’是与m不同的1以上且M以下的整数)的声音信号发送侧装置210-m’的编码装置212-m’按照帧号顺序输出的单声道码,按照该帧号顺序以帧长度的时间间隔(即以例如20ms的特定的时间间隔)输出。此外,电话系统100的目的在于顺利地实现双向通话,因此接收单元221-m优选将通话对方的声音信号发送侧装置210-m’的编码装置212-m’所输出的码以尽可能低的延迟向解码装置222-m输出。因此,接收单元221-m将通话对方的声音信号发送侧装置210-m’所输出的第一码串中包含的单声道码,按照该通话对方的声音信号发送侧装置210-m’所输出的帧号顺序,以帧长度的时间间隔,与包含帧号与各单声道码相同的扩展码的第二码串是否被输入至接收单元221-m无关地向解码装置222-m输出。
第二通信线路510-m是优先级低的通信网,因此,通常,通话对方的声音信号发送侧装置210-m’所输出的某帧的第二码串在该帧的第一码串从第一通信线路410-m输入至接收单元221-m之后,从第二通信线路510-m输入至接收单元221-m。即,在接收单元221-m向解码装置222-m输出单声道码的时刻,通常,包含帧号与该单声道码相同的扩展码的第二码串未被输入至接收单元221-m,无法将帧号与该单声道码相同的扩展码向解码装置222-m输出。此外,第二通信线路510-m是优先级低的通信网,因此,通话对方的声音信号发送侧装置210-m’所输出的各帧的第二码串不一定按照帧号顺序从第二通信线路510-m输入。当然,取决于第二通信网500的状况,例如在第二通信网500空闲的情况等下,通话对方的声音信号发送侧装置210-m’所输出的某帧的第二码串也有可能与该帧的第一码串从第一通信线路410-m输入至接收单元221-m同时或者在其以前,从第二通信线路510-m输入至接收单元221-m。即,也有如下情况:在接收单元221-m向解码装置222-m输出单声道码的时刻,包含帧号与该单声道码相同的扩展码的第二码串已经被输入至接收单元221-m,能够将帧号与该单声道码相同的扩展码向解码装置222-m输出。因此,接收单元221-m按每帧,代替从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与向解码装置222-m输出的单声道码相同的扩展码,而将从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与向解码装置222-m输出的单声道码最接近的扩展码,向解码装置222-m输出。换言之,接收单元221-m按每帧,将从第二通信线路510-m输入的第二码串之中的、帧号与向解码装置222-m输出的单声道码所包含的第一码串最接近的第二码串中包含的扩展码,向解码装置222-m输出。
在此,作为从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与向解码装置222-m输出的单声道码最接近的扩展码,在从第二通信线路510-m输入的第二码串中包含的扩展码包含帧号与向解码装置222-m输出的单声道码相同的扩展码的情况下,是从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与向解码装置222-m输出的单声道码相同的扩展码,在从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与向解码装置222-m输出的单声道码相同的扩展码的情况下,是帧号与向解码装置222-m输出的单声道码最接近的扩展码(即,从第二通信线路510-m输入的第二码串中包含的扩展码之中的、虽然帧号与向解码装置222-m输出的单声道码不相同但帧号与向解码装置222-m输出的单声道码最接近的扩展码)。这在后述的实施方式或变形例中也是同样的。
即,接收单元221-m按每帧,输出从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码。当然,接收单元221-m将单声道码按照帧号顺序输出。更具体而言,接收单元221-m受理第一码串从第一通信线路410-m的输入以及第二码串从第二通信线路510-m的输入,按每帧,输出从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码),在从第二通信线路510-m输入完毕的第二码串中包含的扩展码包含帧号与该单声道码相同的扩展码的情况下,输出帧号与该单声道码相同的扩展码,在从第二通信线路510-m输入完毕的第二码串中包含的扩展码不包含帧号与该单声道码相同的扩展码的情况下,输出从第二通信线路输入完毕的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码(即,从第二通信线路输入的第二码串中包含的扩展码之中的、虽然帧号与该单声道码不同但帧号与该单声道码最接近的扩展码)。
另外,虽然由于是周知技术因而不进行详述,但在接收单元221-m中具备未图示的存储单元,该存储单元将由于进行包含起伏(揺らぎ)或重发控制等的通信而从各通信线路非同步接收的码串积蓄多个帧的量,虽然码串不一定从各通信线路向接收单元221-m以特定的时间区间间隔或按照帧号顺序输入,但接收单元221-m只要是存储单元中积蓄的码串中包含的码就能够输出。即,接收单元221-m受理第一码串从第一通信线路410-m的输入并存储,存储输入完毕的第一码串,只要是存储的第一码串就能够输出。此外,接收单元221-m受理第二码串从第二通信线路510-m的输入并存储,存储输入完毕的第二码串,只要是存储的第二码串就能够输出。从而,接收单元221-m能够按每个特定的时间区间、即每帧,按照帧号顺序取出单声道码,或取出帧号与该单声道码最接近的扩展码。
[[解码装置222-m]]
向解码装置222-m按每帧输入由接收单元221-m输出的单声道码和扩展码。解码装置222-m按每帧,得到与被输入的单声道码和扩展码对应的2个声道的解码数字声音信号并向播放单元223-m输出(步骤S222)。
向解码装置222-m输入的是从第一通信线路410-m按照帧号顺序输入的第一码串分别包含的帧号顺序的单声道码、以及从第二通信线路510-m输入的第二码串中包含的帧号与各单声道码最接近的扩展码。即,解码装置222-m按每帧,基于从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码,得到2个声道的解码数字声音信号并输出。另外,解码装置222-m所使用的单声道码当然按照帧号顺序。
换言之,向解码装置222-m输入的是通话对方的声音信号发送侧装置210-m’的编码装置212-m’所输出的帧号顺序的单声道码、以及帧号与该单声道码最接近的扩展码。即,解码装置222-m按每帧,根据通话对方的声音信号发送侧装置210-m’的编码装置212-m’所输出的帧号顺序的单声道码、以及帧号与该单声道码最接近的扩展码,得到2个声道的解码数字声音信号并向播放单元223-m输出。
在此,作为向解码装置222-m输入的扩展码,在从第二通信线路510-m输入的第二码串中包含的扩展码包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码相同的扩展码的帧的情况下,是从第二通信线路510-m输入的第二码串中包含的帧号与该帧的单声道码相同的扩展码,在从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码相同的扩展码的帧的情况下,是从第二通信线路510-m输入的第二码串中包含的帧号与该帧的单声道码最接近的扩展码(即,虽然帧号与该帧的单声道码不同但帧号与该帧的单声道码最接近的扩展码)。这在后述的实施方式或变形例中也是同样的。
从而,解码装置222-m按每帧,在从第二通信线路510-m输入的第二码串中包含的扩展码包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及帧号与该单声道码相同的扩展码,得到2个声道的解码数字声音信号并输出,在从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码(即,虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码),得到2个声道的解码数字声音信号并输出。
[[[单声道解码单元2221-m]]]
向单声道解码单元2221-m按每帧输入被输入到解码装置222-m的单声道码。单声道解码单元2221-m按每帧,对被输入的单声道码以特定的解码方式进行解码,得到单声道的解码数字声音信号并向扩展解码单元2222-m输出。作为特定的解码方式,使用与在通话对方的声音信号发送侧装置210-m’的编码装置212-m’的单声道编码单元2122-m’中使用的编码方式对应的解码方式。
向单声道解码单元2221-m输入的是通话对方的声音信号发送侧装置210-m’的编码装置212-m’所输出的帧号顺序的单声道码。即,单声道解码单元2221-m按每帧,得到通话对方的声音信号发送侧装置210-m’的编码装置212-m’所编码的帧号顺序的单声道的解码数字声音信号并向扩展解码单元2222-m输出。
[[[扩展解码单元2222-m]]]
向扩展解码单元2222-m按每帧输入单声道解码单元2221-m所输出的单声道的解码数字声音信号、以及被输入至解码装置222-m的扩展码。扩展解码单元2222-m按每帧,根据被输入的单声道的解码数字声音信号和扩展码,得到2个声道的解码数字声音信号并向播放单元223-m输出。
向扩展解码单元2222-m输入的单声道的解码数字声音信号按照通话对方的声音信号发送侧装置210-m’的编码装置212-m’所编码的帧号顺序,向解码装置222-m输入的扩展码是帧号与该单声道的解码数字声音信号最接近的扩展码。即,扩展解码单元2222-m按每帧,根据通话对方的声音信号发送侧装置210-m’的编码装置212-m’所输出的帧号顺序的单声道的解码数字声音信号、以及帧号与该单声道的解码数字声音信号最接近的扩展码,得到2个声道的解码数字声音信号并向播放单元223-m输出。另外,扩展码表现通话对方的多线路支持终端装置200-m’的声音信号发送侧装置210-m’的编码装置212-m’所得到的特征参数,因此表现如下参数,该参数表现2个声道的数字声音信号的差分的特征。即,扩展解码单元2222-m按每帧,将被输入的单声道的解码数字声音信号视为将2个声道的解码数字声音信号混合而成的信号,将根据扩展码得到的特征参数视为表现2个声道的数字声音信号的差分的特征的信息,得到2个声道的解码数字声音信号并向播放单元223-m输出。
〔扩展解码单元2222-m的第一例〕
作为第一例,说明特征参数是表现2个声道的数字声音信号的时间差的信息的情况下的扩展解码单元2222-m的每帧的操作。扩展解码单元2222-m首先根据被输入的扩展码,得到表现作为该扩展码所表示的特征参数的时间差的信息(步骤S2222-11)。扩展解码单元2222-m以与通话对方的声音信号发送侧装置210-m’的编码装置212-m’的信号分析单元2121-m’根据特征参数得到扩展码的方式对应的方式,根据扩展码得到特征参数。作为特征参数的表现时间差的信息例如是时间差样本数。例如,扩展解码单元2222-m对被输入的扩展码进行标量解码,得到与被输入的扩展码对应的标量值作为时间差样本数。或者,例如,扩展解码单元2222-m将被输入的扩展码作为2进制数的值,得到与该2进制数对应的10进制数作为时间差样本数。
扩展解码单元2222-m接着根据被输入的单声道的解码数字声音信号和在步骤S2222-11中得到的特征参数,将被输入的单声道的解码数字声音信号视为将2个解码数字声音信号混合而成的信号,将特征参数视为表现2个解码数字声音信号的时间差的信息,得到2个解码数字声音信号并输出(步骤S2222-12)。更具体而言,扩展解码单元2222-m得到被输入的单声道的数字声音信号的样本列本身、用被输入的单声道的数字声音信号的样本列的各样本的值除以2而得到的值的序列、对上述的其中一个的样本列进行变形而得到的序列的其中一个,作为第一声道的数字声音信号并输出(步骤S2222-121)。扩展解码单元2222-m进而得到使第一声道的数字声音信号延迟特征参数所表示的时间差样本数而得到的样本列,作为第二声道的数字声音信号的样本列并输出(步骤S2222-122)。
〔扩展解码单元2222-m的第二例〕
作为第二例,说明特征参数是表现2个声道的数字声音信号的每个频带的强度差的信息的情况下的扩展解码单元2222-m的每帧的操作。扩展解码单元2222-m首先对被输入的扩展码进行解码,得到表现每个频带的强度差的信息(步骤S2222-21)。扩展解码单元2222-m以与通话对方的声音信号发送侧装置210-m’的编码装置212-m’的信号分析单元2121-m’根据表现每个频带的强度差的信息得到扩展码的方式对应的方式,根据扩展码得到特征参数。例如,扩展解码单元2222-m对被输入的扩展码进行矢量解码,得到与被输入的扩展码对应的矢量的各元素值,作为表现多个频带各自的强度差的信息。或者,例如,扩展解码单元2222-m对被输入的扩展码中包含的码分别进行标量解码,得到表现每个频带的强度差的信息。另外,在带域数为1的情况下,扩展解码单元2222-m对被输入的扩展码进行标量解码,得到表现一个频带即整个带域的强度差的信息。
扩展解码单元2222-m接着根据被输入的单声道的解码数字声音信号和在步骤S2222-21中得到的特征参数,将被输入的单声道的解码数字声音信号视为将2个解码数字声音信号混合而成的信号,将特征参数视为表现2个解码数字声音信号的每个频带的强度差的信息,得到2个解码数字声音信号并输出(步骤S2222-22)。如果在通话对方的声音信号发送侧装置210-m’的编码装置212-m’的信号分析单元2121-m’进行了使用复DFT的上述的具体例的操作的情况下,扩展解码单元2222-m进行以下的操作。
扩展解码单元2222-m首先对被输入的单声道的解码数字声音信号进行复DFT来得到复DFT系数列(步骤S2222-221)。以后,将扩展解码单元2222-m所得到的单声道的复DFT系数列的各复DFT系数设为MQ(f)。扩展解码单元2222-m接着根据单声道的复DFT系数列,得到各复DFT系数在复平面上的半径的值MQr(f)、以及各复DFT系数在复平面上的角度的值MQθ(f)(步骤S2222-222)。扩展解码单元2222-m接着得到将各半径的值MQr(f)与特征参数之中的对应的值的平方根相乘而得到的值,作为第一声道的各半径的值VLQr(f),得到用各半径的值MQr(f)除以特征参数之中的对应的值的平方根而得到的值,作为第二声道的各半径的值VRQr(f)(步骤S2222-223)。如果是上述的4个带域的例子,则各频率仓的特征参数之中的对应的值对于f从1至32是Mr(1),对于f从33至64是Mr(2),对于f从65至96是Mr(3),对于f从97至128是Mr(4)。另外,在通话对方的声音信号发送侧装置210-m’的编码装置212-m’的信号分析单元2121-m’代替第一声道的半径的值与第二声道的半径的值之比而使用了第一声道的半径的值与第二的声道的半径的值之差的情况下,扩展解码单元2222-m得到各半径的值MQr(f)与用特征参数之中的对应的值除以2而得到的值相加而得到的值,来作为第一声道的各半径的值VLQr(f),得到从各半径的值MQr(f)将用特征参数之中的对应的值除以2而得到的值减去而得到的值,来作为第二声道的各半径的值VRQr(f)即可。扩展解码单元2222-m接着对复平面上的半径为VLQr(f)且角度为MQθ(f)的复数的序列进行逆复DFT,来得到第一声道的解码数字声音信号并输出,对复平面上的半径为VRQr(f)且角度为MQθ(f)的复数的序列进行逆复DFT,来得到第二声道的解码数字声音信号并输出(步骤S2222-224)。
[[播放单元223-m]]
播放单元223-m输出与被输入的2个声道的解码数字声音信号对应的声音(步骤S223)。
播放单元223-m例如包含2个DA变换单元和2个扬声器。DA变换单元将被输入的解码数字声音信号变换为模拟的电信号并输出。扬声器产生与从DA变换单元输入的模拟的电信号对应的声音。扬声器也可以被配置于立体声头戴式耳机或立体声耳机。在该情况下,例如,播放单元223-m将DA变换单元与扬声器一对一进行关联,从2个扬声器分别产生与2个解码数字声音信号分别对应的声音(解码声音信号)。
另外,播放单元223-m的全部或者一部分也可以不被配置在声音信号接收侧装置220-m的内部,而与声音信号接收侧装置220-m连接。例如,声音信号接收侧装置220-m的播放单元223-m也可以不具备扬声器,而向与声音信号接收侧装置220-m连接的扬声器输出由声音信号接收侧装置220-m的播放单元223-m的DA变换单元得到的2个模拟的电信号。或者,声音信号接收侧装置220-m也可以不具备播放单元223-m,而由声音信号接收侧装置220-m的解码装置222-m向与声音信号接收侧装置220-m连接的DA变换器等播放机器输出2个声道的解码数字声音信号。
〔声音信号接收侧装置220-m的操作例〕
图5是排除了依赖于装置的处理能力的处理延迟而示意性地表示从第一通信线路410-m向声音信号接收侧装置220-m输入的第一码串中包含的单声道码、从第二通信线路510-m向声音信号接收侧装置220-m输入的第二码串中包含的扩展码、与声音信号接收侧装置220-m所输出的解码声音信号之间的时间性关系的图。图5的横轴是时间轴。括号内的序号i是通话对方的多线路支持终端装置200-m’的声音信号发送侧装置210-m’的编码装置212-m’中的帧号。CM(i)是从第一通信线路410-m向声音信号接收侧装置220-m输入的第一码串中包含的单声道码。CE(i)是从第二通信线路510-m向声音信号接收侧装置220-m输入的第二码串中包含的扩展码。YS'(i)是声音信号接收侧装置220-m所输出的解码声音信号。图5是虽然从作为优先级低的通信网的第二通信线路510-m向声音信号接收侧装置220-m按照帧号顺序输入第二码串,但第二码串比来自作为优先级高的通信网的第一通信线路410-m的帧号顺序的第一码串靠后5帧输入的例子。
接收单元221-m在从第一通信线路410-m接收完包含帧号6的单声道码CM(6)的第一码串的时刻,将从第一通信线路410-m输入的第一码串中包含的单声道码CM(6)、以及从第二通信线路510-m输入的第二码串之中的、帧号与单声道码CM(6)最接近的第二码串中包含的扩展码CE(1),向解码装置222-m输出。解码装置222-m在被输入了单声道码CM(6)和扩展码CE(1)的时刻,得到与被输入的单声道码CM(6)和扩展码CE(1)对应的2个声道的解码数字声音信号并向播放单元223-m输出。播放单元223-m从被输入了与单声道码CM(6)和扩展码CE(1)对应的2个声道的解码数字声音信号的时刻,开始输出与被输入的2个解码数字声音信号对应的2个声道的解码声音信号YS'(6)。由此,声音信号接收侧装置220-m能够在接收单元221-m从第一通信线路410-m接收完包含帧号6的单声道码CM(6)的第一码串的时刻,根据帧号6的单声道码CM(6)、以及帧号与其最接近的第二码串中包含的扩展码CE(1),得到2个声道的解码声音信号YS'(6)并开始输出。
声音信号接收侧装置220-m以后也同样地,在接收单元221-m从第一通信线路410-m接收完包含帧号7的单声道码CM(7)的第一码串的时刻,根据帧号7的单声道码CM(7)、以及帧号与其最接近的第二码串中包含的扩展码CE(2),得到2个声道的解码声音信号YS'(7)并开始输出,在接收单元221-m从第一通信线路410-m接收完包含帧号8的单声道码CM(8)的第一码串的时刻,根据帧号8的单声道码CM(8)、以及帧号与其最接近的第二码串中包含的扩展码CE(3),得到2个声道的解码声音信号YS'(8)并开始输出……,以这样的方式操作。
图6是排除了依赖于装置的处理能力的处理延迟而示意性地表示在使用专利文献1的技术的情况下的从第一通信线路410-m向声音信号接收侧装置输入的第一码串中包含的单声道码、从第二通信线路510-m向声音信号接收侧装置220-m输入的第二码串中包含的扩展码、与声音信号接收侧装置所输出的解码声音信号之间的时间性关系的图。图6的横轴、括号内的序号i、CM(i)、CE(i)与图5相同。YS(i)是使用专利文献1的技术的声音信号接收侧装置所输出的解码声音信号。图6也与图5同样地,是虽然从作为优先级低的通信网的第二通信线路510-m向声音信号接收侧装置按照帧号顺序输入第二码串,但第二码串比来自作为优先级高的通信网的第一通信线路410-m的帧号顺序的第一码串靠后5帧输入的例子。图6是使用专利文献1的技术的声音信号接收侧装置中的上述的限制时间是5帧量的时间的例子。
使用专利文献1的技术的声音信号接收侧装置得到与从第一通信线路410-m输入的单声道码CM(6)以及从单声道码CM(6)被输入起正好经过5帧的限制时间而从第二通信线路510-m输入的扩展码CE(6)对应的2个声道的解码声音信号YS(6),并开始输出。使用专利文献1的技术的声音信号接收侧装置以后也同样地,根据帧号7的单声道码CM(7)、以及在从第一通信线路410-m接收完单声道码CM(7)起经过了5帧的时刻从第二通信线路510-m输入的帧号7的扩展码CE(7),得到2个声道的解码声音信号YS(7)并开始输出,根据帧号8的单声道码CM(8)、以及在从第一通信线路410-m接收完单声道码CM(8)起经过了5帧的时刻从第二通信线路510-m输入的帧号8的扩展码CE(8),得到2个声道的解码声音信号YS(8)并开始输出……,以这样的方式进行操作。
〔效果〕
根据图6和图5也能够确定,在专利文献1的技术中,为了得到高音质的解码声音信号,与得到最低限度的音质的解码声音信号相比,5帧的延迟较多,但在第一实施方式的技术中,与得到最低限度的音质的解码声音信号的情况相比不使延迟时间大幅增加,即以在双向通话时不产生不协调感的程度的延迟时间,就能够得到高音质的解码声音信号。
<第二实施方式>
在第一实施方式中,得到每帧的扩展码并输出,但也可以对多个帧仅得到1次扩展码并输出。将该方式作为第二实施方式进行说明。
第二实施方式与第一实施方式不同之处是声音信号发送侧装置210-m的编码装置212-m的信号分析单元2121-m和发送单元213-m的操作。在以下,针对第二实施方式与第一实施方式的不同点进行说明。
[[[信号分析单元2121-m]]]
信号分析单元2121-m与第一实施方式的信号分析单元2121-m同样地,关于各帧,根据被输入的2个声道的数字声音信号,得到作为将被输入的2个声道的数字声音信号混合而成的信号的单声道信号并输出,但与第一实施方式的信号分析单元2121-m不同,仅关于多个帧之中的预先决定的帧,得到表现特征参数的扩展码并输出,该特征参数是表现被输入的2个声道的数字声音信号的差分的特征且时间性变动小的参数。
例如,信号分析单元2121-m关于帧号为奇数的帧,根据被输入的2个声道的数字声音信号得到特征参数,得到表现该特征参数的扩展码并输出,但关于帧号为偶数的帧,不得到特征参数,也不得到表现特征参数的扩展码且不输出。另外,在信号分析单元2121-m采用了在得到单声道信号时使用特征参数的结构的情况下,信号分析单元2121-m关于未得到特征参数的帧,使用该帧的被输入的2个声道的数字声音信号、以及与已经被输出的扩展码之中的最新的扩展码对应的特征参数,得到单声道信号。
或者,例如,信号分析单元2121-m关于帧号为奇数的帧,根据被输入的2个声道的数字声音信号得到特征参数,但不得到表现该特征参数的扩展码且不输出,关于帧号为偶数的帧,根据被输入的2个声道的数字声音信号得到特征参数,得到表现紧前的帧的特征参数与该帧的特征参数的平均或者加权平均的扩展码并输出,其中该紧前的帧未得到表现特征参数的扩展码且未输出。用于加权平均的权重设为该帧的权重比紧前的帧的权重大的值即可。
上述的两例构成为对2帧得到1次扩展码并输出,但也可以构成为对3帧以上得到1次扩展码并输出,也可以构成为关于多个帧之中的预先决定的帧得到扩展码并输出。
即,本第二实施方式的编码装置212-m按每帧,得到表现将被输入的2个声道的数字声音信号混合而成的信号的单声道码,关于多个帧之中的预先决定的帧,得到表现特征参数的扩展码,该特征参数是表现被输入的2个声道的数字声音信号的声道间的差分的特征且时间分辨率低的参数。
或者,本第二实施方式的编码装置212-m按每帧,得到表现将被输入的2个声道的数字声音信号混合而成的信号的单声道码,按每帧,得到作为表现被输入的2个声道的数字声音信号的声道间的差分的特征且时间分辨率低的参数的特征参数,关于多个帧之中的预先决定的帧,得到表现比紧前的预先决定的帧靠后的各帧中得到的特征参数的平均或者加权平均的扩展码。用于加权平均的权重对该帧设为最大的值,对越远离该帧的帧设为越小的值即可。
另外,如后所述,编码装置212-m所得到的单声道码是包含在第一码串中向第一通信线路输出的码,编码装置212-m所得到的扩展码是包含在第二码串中向第二通信线路输出的码。
[[发送单元213-m]]
发送单元213-m与第一实施方式的发送单元213-m同样地,关于各帧,将包含被输入的单声道码的码串即第一码串向第一通信线路410-m输出,但与第一实施方式的发送单元213不同,仅关于被输入了扩展码的帧,即仅关于多个帧之中的预先决定的帧,将包含被输入的扩展码的码串即第二码串向第二通信线路510-m输出。
〔效果〕
如在第一实施方式中说明的那样,在声音信号接收侧装置220-m中使用的扩展码是帧号与单声道码最接近的扩展码,因此帧号与单声道码相同的扩展码不一定被输入至声音信号接收侧装置220-m。此外,特征参数原本是时间性变动小的参数。从而,根据本实施方式,通过采用对多个帧仅得到1次扩展码并输出的结构,与第一实施方式相比不会使解码声音信号的质量大为恶化,而能够减少信号分析单元2121-m的运算处理量,此外,与第一实施方式相比能够减少用于传输特征参数的码量。
<第三实施方式>
在第一实施方式中声音信号接收侧装置220-m按每帧得到用于解码的扩展码,但声音信号接收侧装置220-m也可以对多个帧仅得到1次用于解码的扩展码。将该方式作为第三实施方式进行说明。
第三实施方式的声音信号接收侧装置220-m与第一实施方式的声音信号接收侧装置220-m不同之处是接收单元221-m和解码装置222-m的扩展解码单元2222-m的操作。在以下,针对第三实施方式与第一实施方式的不同点进行说明。
[[接收单元221-m]]
接收单元221-m与第一实施方式的接收单元221-m同样地,关于各帧,将从第一通信线路410-m输入的第一码串中包含的单声道码向解码装置222-m输出,但与第一实施方式的接收单元221-m不同,仅关于多个帧之中的预先决定的帧,得到被输入的第二码串中包含的扩展码之中的、帧号与单声道码最接近的扩展码并输出。即,更具体而言,接收单元221-m仅关于多个帧之中的预先决定的帧,从接收单元221-m内的未图示的存储单元得到被输入的第二码串中包含的扩展码之中的、帧号与单声道码最接近的扩展码并输出。
[[[扩展解码单元2222-m]]]
与第一实施方式的扩展解码单元2222-m同样,关于各帧,向扩展解码单元2222-m输入由单声道解码单元2221-m输出的单声道的解码数字声音信号,但与第一实施方式的扩展解码单元2222-m不同,仅关于多个帧之中的预先决定的帧,向扩展解码单元2222-m输入扩展码。扩展解码单元2222-m关于多个帧之中的预先决定的帧、即也被输入了扩展码的帧,与第一实施方式的扩展解码单元2222-m同样,根据被输入的单声道的解码数字声音信号和扩展码,得到2个声道的解码数字声音信号并输出,关于多个帧之中的除了预先决定的帧以外的帧、即未被输入扩展码的帧,与第一实施方式的扩展解码单元2222-m不同,根据被输入的单声道的解码数字声音信号、以及已经被输入的扩展码之中的最新的扩展码,得到2个声道的解码数字声音信号并输出。
即,解码装置222-m关于多个帧之中的预先决定的帧,基于从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码,得到2个声道的解码数字声音信号并输出,关于除了预先决定的帧以外的帧,基于从第一通信线路410-m输入的第一码串中包含的单声道码、以及在预先决定的帧中使用的最新的扩展码,得到2个声道的解码数字声音信号并输出。具体而言,解码装置222-m关于多个帧之中的预先决定的帧,在从第二通信线路510-m输入的第二码串中包含的扩展码包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及帧号与该单声道码相同的扩展码,得到2个声道的解码数字声音信号并输出,在从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码(即,虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码),得到2个声道的解码数字声音信号并输出,关于除了预先决定的帧以外的帧,基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及在预先决定的帧中使用的最新的扩展码,得到2个声道的解码数字声音信号并输出。
更具体而言,解码装置222-m的单声道解码单元2221-m按每帧,对从第一通信线路410-m输入的第一码串中包含的单声道码进行解码来得到单声道的解码数字声音信号,解码装置222-m的扩展解码单元2222-m关于多个帧之中的预先决定的帧,将单声道的解码数字声音信号视为将2个声道的解码数字声音信号混合而成的信号,将基于从第二通信线路510-m输入的第二码串中包含的帧号与从第一通信线路410-m输入的第一码串中包含的单声道码最接近的扩展码而得到的特征参数,视为表现2个声道的解码数字声音信号中的声道间的差分的特征的信息,得到2个声道的解码数字声音信号并输出。另外,扩展解码单元2222-m在预先决定的帧中使用基于扩展码而得到的特征参数,因此能够事先存储该特征参数,并在预先决定的帧以外的帧使用。即,扩展解码单元2222-m在除了预先决定的帧以外的帧中,将单声道的解码数字声音信号视为将2个声道的解码数字声音信号混合而成的信号,将在预先决定的帧中得到的最新的特征参数视为表现2个声道的解码数字声音信号中的声道间的差分的特征的信息,得到2个声道的解码数字声音信号并输出。
即,解码装置222-m的单声道解码单元2221-m按每帧,对从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)进行解码来得到单声道的解码数字声音信号,解码装置222-m的扩展解码单元2222-m关于多个帧之中的预先决定的帧,在从第二通信线路510-m输入的第二码串中包含的扩展码包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,将单声道的解码数字声音信号视为将2个声道的解码数字声音信号混合而成的信号,将基于帧号与该单声道码相同的扩展码而得到的特征参数,视为表现2个声道的解码数字声音信号中的声道间的差分的特征的信息,得到2个声道的解码数字声音信号并输出,在从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,将单声道的解码数字声音信号视为将2个声道的解码数字声音信号混合而成的信号,将基于从第二通信线路510-m输入的第二码串中包含的帧号与从第一通信线路410-m输入的第一码串中包含的单声道码最接近的扩展码(即,虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码)而得到特征参数,视为表现2个声道的解码数字声音信号中的声道间的差分的特征的信息,得到2个声道的解码数字声音信号并输出,在除了预先决定的帧以外的帧中,将单声道的解码数字声音信号视为将2个声道的解码数字声音信号混合而成的信号,将在预先决定的帧中得到的最新的特征参数视为表现2个声道的解码数字声音信号中的声道间的差分的特征的信息,得到2个声道的解码数字声音信号并输出。
<第三实施方式的变形例>
另外,也可以代替第三实施方式,扩展解码单元2222-m进行与第一实施方式同样的操作,而接收单元221-m关于多个帧之中的预先决定的帧,输出从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的帧号与该单声道码最接近的扩展码,关于多个帧之中的除了预先决定的帧以外的帧,输出从第一通信线路410-m输入的第一码串中包含的单声道码、以及已经输出的扩展码之中的最新的扩展码。
更具体而言,接收单元221-m也可以关于多个帧之中的预先决定的帧,在从第二通信线路510-m输入的第二码串中包含的扩展码包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,输出该单声道码、以及帧号与该单声道码相同的扩展码,在从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,输出从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码(即,从第二通信线路510-m输入的第二码串中包含的扩展码之中的、虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码),关于多个帧之中的除了预先决定的帧以外的帧,输出从第一通信线路410-m输入的第一码串中包含的单声道码(帧号顺序的单声道码)、以及已经输出的扩展码之中的最新的扩展码。
〔效果〕
如在第一实施方式中说明的那样,在声音信号接收侧装置220-m中使用的扩展码是帧号与单声道码最接近的扩展码,因此帧号与单声道码相同的扩展码不一定被输入至扩展解码单元2222-m。此外,特征参数原本是时间性变动小的参数。从而,根据本实施方式以及该变形例,通过采用对多个帧仅得到1次扩展码的结构,与第一实施方式相比不会使解码声音信号的质量大为恶化,而能够减少接收单元221-m的运算处理量或输出的信息的量。
<第四实施方式>
作为第一实施方式的声音信号接收侧装置220-m在得到2个解码数字声音信号时使用的特征参数,也可以使用在处理对象的帧中输入的扩展码所表示的特征参数与过去的帧的特征参数的平均或加权平均。将该方式作为第四实施方式进行说明。
第四实施方式与第一实施方式不同之处是声音信号接收侧装置220-m的解码装置222-m的扩展解码单元2222-m的操作。在以下,针对第四实施方式与第一实施方式的不同点进行说明。在以下,将按每帧进行处理的扩展解码单元2222-m在该时刻作为处理对象的帧称为当前帧,将其过去的帧称为过去帧。
[[[扩展解码单元2222-m]]]
与第一实施方式的扩展解码单元2222-m同样地,按每帧,向扩展解码单元2222-m输入由单声道解码单元2221-m输出的单声道的解码数字声音信号、以及被输入至解码装置222-m的扩展码。扩展解码单元2222-m具备未图示的存储单元。在存储单元中,存储了扩展解码单元2222-m在过去帧中得到的特征参数。扩展解码单元2222-m按每帧,根据被输入的单声道的解码数字声音信号、被输入的扩展码、以及存储单元中存储的过去帧的特征参数,得到2个声道的解码数字声音信号并向播放单元223-m输出。扩展解码单元2222-m具体而言,按每帧进行以下的步骤S2222-31至步骤S2222-35。
扩展解码单元2222-m首先根据被输入的扩展码得到该扩展码所表示的特征参数(步骤S2222-31),将得到的特征参数存储至存储单元(步骤S2222-32)。扩展解码单元2222-m接着读出存储单元中存储的过去帧的特征参数之中的K个(K为1以上的整数)(步骤S2222-33)。例如,读出与当前帧连续的过去K个过去帧的特征参数。扩展解码单元2222-m接着得到从存储单元读出的K个过去帧的特征参数与当前帧的特征参数的平均或者加权平均(步骤S2222-34)。用于加权平均的权重只要对当前帧的特征参数设为最大的值,且对越远离当前帧的帧设为越小的值即可。扩展解码单元2222-m接着根据被输入的单声道的解码数字声音信号、以及在步骤S2222-34中得到的特征参数的平均或者加权平均,将被输入的单声道的解码数字声音信号视为将2个解码数字声音信号混合而成的信号,将在步骤S2222-34中得到的特征参数的平均或者加权平均视为表现2个解码数字声音信号的差分的特征的信息,得到2个解码数字声音信号并向播放单元223-m输出(步骤S2222-35)。另外,扩展解码单元2222-m也可以代替将扩展码所表示的特征参数存储至存储单元的步骤S2222-32,而将在步骤S2222-34中得到的平均或者加权平均作为当前帧的特征参数存储至存储单元。此外,在扩展解码单元2222-m的存储单元中过去帧的特征参数仅存储K个即可,因此在当前帧的下一帧的处理中可以将回溯K+1个以上的过去帧的特征参数从存储单元删除。
<第四实施方式的变形例>
与第一实施方式的声音信号接收侧装置220-m同样地,在第三实施方式的声音信号接收侧装置220-m中,作为在得到2个解码数字声音信号时使用的特征参数,也可以使用在处理对象的帧中输入的扩展码所表示的特征参数与过去的帧的特征参数的平均或加权平均。即,在第三实施方式的声音信号接收侧装置220-m的解码装置222-m的扩展解码单元2222-m中,关于多个帧之中的预先决定的帧,作为在得到2个解码数字声音信号时使用的特征参数,也可以使用在处理对象的帧中输入的扩展码所表示的特征参数与过去的帧的特征参数的平均或加权平均。将该方式作为第四实施方式的变形例进行说明。
第四实施方式的变形例与第三实施方式不同之处是声音信号接收侧装置220-m的解码装置222-m的扩展解码单元2222-m的操作。在以下,针对第四实施方式的变形例与第三实施方式的不同点进行说明。在以下,将按每帧进行处理的扩展解码单元2222-m在该时刻作为处理对象的帧称为当前帧,将其过去的帧称为过去帧。
[[[扩展解码单元2222-m]]]
与第三实施方式的扩展解码单元2222-m同样地,关于各帧,向扩展解码单元2222-m输入由单声道解码单元2221-m输出的单声道的解码数字声音信号,仅关于多个帧之中的预先决定的帧,向扩展解码单元2222-m输入扩展码。扩展解码单元2222-m具备未图示的存储单元。在存储单元中,至少存储了扩展解码单元2222-m在过去帧中得到的特征参数的平均或者加权平均,有时也存储了过去帧的扩展码所表示的特征参数。
扩展解码单元2222-m关于多个帧之中的预先决定的帧、即也被输入了扩展码的帧,进行以下的步骤S2222-41至步骤S2222-46。
扩展解码单元2222-m首先根据被输入的扩展码得到该扩展码所表示的特征参数(步骤S2222-41),将得到的特征参数存储至存储单元(步骤S2222-42)。扩展解码单元2222-m接着读出存储单元中存储的过去帧的特征参数之中的K个(K为1以上的整数)(步骤S2222-43)。例如,读出与当前帧最接近的过去K个过去帧的特征参数。仅关于也被输入了扩展码的帧将特征参数存储至存储单元,因此被读出的特征参数是也被输入了扩展码的帧之中的与当前帧连续的K个帧的特征参数。扩展解码单元2222-m接着得到从存储单元读出的K个过去帧的特征参数与当前帧的特征参数的平均或者加权平均(步骤S2222-44),并将得到的特征参数的平均或者加权平均存储至存储单元(步骤S2222-45)。用于加权平均的权重只要对当前帧的特征参数设为最大的值,且对越远离当前帧的帧设为越小的值即可。扩展解码单元2222-m接着根据被输入的单声道的解码数字声音信号以及在步骤S2222-44中得到的特征参数的平均或者加权平均,将被输入的单声道的解码数字声音信号视为将2个解码数字声音信号混合而成的信号,将在步骤S2222-44中得到的特征参数的平均或者加权平均视为表现2个解码数字声音信号的差分的信息,得到2个解码数字声音信号并向播放单元223-m输出(步骤S2222-46)。另外,扩展解码单元2222-m也可以不进行将扩展码所表示的特征参数存储至存储单元的步骤S2222-42,而将在步骤S2222-45中存储至存储单元的平均或者加权平均,在步骤S2222-43中作为过去帧的特征参数读出。此外,在扩展解码单元2222-m的存储单元中过去帧的特征参数仅存储K个即可,因此在当前帧的下一帧的处理中可以将回溯K+1个以上的过去帧的特征参数从存储单元删除。此外,向扩展解码单元2222-m的存储单元仅事先存储在步骤S2222-44中得到的特征参数的平均或者加权平均之中的最新的对象即可,因此在进行步骤S2222-45的时刻在存储单元中存储的特征参数的平均或者加权平均可以从存储单元删除。
第四实施方式的变形例的扩展解码单元2222-m关于多个帧之中的除了预先决定的帧以外的帧,即未被输入扩展码的帧,进行以下的步骤S2222-47至步骤S2222-48。
扩展解码单元2222-m首先从存储单元读出存储单元中存储的最新的特征参数的平均或者加权平均(步骤S2222-47)。扩展解码单元2222-m接着根据被输入的单声道的解码数字声音信号以及在步骤S2222-47中得到的特征参数的平均或者加权平均,将被输入的单声道的解码数字声音信号视为将2个解码数字声音信号混合而成的信号,将在步骤S2222-47中得到的特征参数的平均或者加权平均视为表现2个解码数字声音信号的差分的信息,得到2个解码数字声音信号并向播放单元223-m输出(步骤S2222-48)。
〔效果〕
特征参数虽然在统计上是时间性变动小的参数,但反映了各帧的声音信号的特征,因此很少跨多个帧是完全相同的值,此外,也有时值在帧间大为不同。从而,在声音信号接收侧装置220-m中,与使用与该帧本来的扩展码不同的某一个扩展码所表示的特征参数相比,通过如本第四实施方式以及变形例那样使用在时间上接近的多个扩展码所表示的特征参数的平均或加权平均等,能够抑制解码声音信号在声道间的急剧的变动或异响发生等。
<第五实施方式>
在第一实施方式中,声音信号接收侧装置220-m关于各帧使用单声道码以及帧号最接近的扩展码得到2个声道的解码数字声音信号,但关于没有与单声道码处于特定的限制时间范围内的扩展码的帧,也可以对单声道码进行解码并将得到的解码数字声音信号作为2个声道的解码数字声音信号。将该方式作为第五实施方式进行说明。
第五实施方式与第一实施方式不同之处是声音信号接收侧装置220-m的接收单元221-m和解码装置222-m的操作。此外,在解码装置222-m中,第五实施方式进行与第一实施方式不同的操作的是扩展解码单元2222-m。在以下,针对第五实施方式与第一实施方式的不同点进行说明。
[[接收单元221-m]]
接收单元221-m关于从第一通信线路410-m输入的第一码串中包含的单声道码与从第二通信线路510-m输入的第二码串中包含的扩展码之中的帧号与该单声道码最接近的扩展码之间的帧号之差小于预先决定的值的帧,输出从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,关于上述的帧号之差不小于预先决定的值的帧,输出从第一通信线路410-m输入的第一码串中包含的单声道码。接收单元221-m具体而言,按每帧进行以下的步骤S221-11至步骤S221-15。
接收单元221-m将从第一通信线路410-m输入的第一码串中包含的单声道码向解码装置222-m输出(步骤S221-11)。接收单元221-m接着得到在步骤S221-11中输出的单声道码的帧号(步骤S221-12)。接收单元221-m接着得到从第二通信线路510-m输入的第二码串之中的、帧号与在步骤S221-12中得到的单声道码的帧号最接近的第二码串中包含的扩展码、以及该扩展码的帧号(步骤S221-13)。接收单元221-m接着判断在步骤S221-12中得到的单声道码的帧号与在步骤S221-13中得到的扩展码的帧号之差是否小于预先决定的值(步骤S221-14)。接收单元221-m接着在步骤S221-14中单声道码的帧号与扩展码的帧号之差小于预先决定的值的情况下,将扩展码向解码装置222-m输出(步骤S221-15)。接收单元221-m在步骤S221-14中单声道码的帧号与扩展码的帧号之差不小于预先决定的值的情况下,不输出扩展码。即,接收单元221-m在步骤S221-14中单声道码的帧号与扩展码的帧号之差不小于预先决定的值的情况下,仅输出单声道码即可。
在此,预先决定的值是2以上的值。即,接收单元221-m关于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)与从第二通信线路510-m输入的第二码串中包含的扩展码之中的帧号与该单声道码最接近的扩展码之间的帧号之差为0的帧(即,在从第二通信线路510-m输入的第二码串中包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码相同的扩展码的帧),输出从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码相同的扩展码,关于上述的帧号之差大于0且小于预先决定的值的帧,输出从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码(即,从第二通信线路510-m输入的第二码串中包含的扩展码之中的、虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码),关于上述的帧号之差不小于预先决定的值的帧,仅输出从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)。
[[解码装置222-m]]
向解码装置222-m按每帧一定输入由接收单元221-m输出的单声道码,也有时输入由接收单元221-m输出的扩展码。解码装置222-m按每帧得到与被输入的单声道码和扩展码或者被输入的单声道码对应的2个声道的解码数字声音信号,并向播放单元223-m输出。具体而言,解码装置222-m关于上述的帧号之差小于预先决定的值的帧,基于接收单元221-m所输出的单声道码、以及接收单元221-m所输出的扩展码,得到2个声道的解码数字声音信号并输出,关于上述的帧号之差不小于预先决定的值的帧,将基于接收单元221-m所输出的单声道码的单声道数字信号原样作为2个声道的解码数字声音信号输出。
[[[扩展解码单元2222-m]]]
向扩展解码单元2222-m按每帧一定输入由单声道解码单元2221-m输出的单声道的解码数字声音信号,也有时输入被输入至解码装置222-m的扩展码。扩展解码单元2222-m关于被输入了单声道的解码数字声音信号和扩展码的帧,根据被输入的单声道的解码数字声音信号和扩展码,通过与第一实施方式的扩展解码单元2222-m相同的操作,得到2个声道的解码数字声音信号并向播放单元223-m输出。扩展解码单元2222-m关于仅被输入了单声道的解码数字声音信号的帧,将被输入的单声道的解码数字声音信号原样作为2个声道的解码数字声音信号得到并向播放单元223-m输出。
即,解码装置222-m关于从第一通信线路410-m输入的第一码串中包含的单声道码与从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码之间的帧号之差小于预先决定的值的帧,基于该单声道码、以及帧号与该单声道码最接近的扩展码,得到2个声道的解码数字声音信号并输出,关于上述的帧号之差不小于预先决定的值的帧,将基于从第一通信线路410-m输入的第一码串中包含的单声道码的解码数字声音信号原样作为2个声道的解码数字声音信号输出。
更具体而言,解码装置222-m关于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)与从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码之间的帧号之差为0的帧(即,在从第二通信线路510-m输入的第二码串中包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码相同的扩展码的帧),基于该单声道码、以及帧号与该单声道码相同的扩展码,得到2个声道的解码数字声音信号并输出,关于上述的帧号之差大于0且小于预先决定的值的帧,基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及帧号与该单声道码最接近的扩展码(即,从第二通信线路510-m输入的第二码串中包含的扩展码之中的、虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码),得到2个声道的解码数字声音信号并输出,关于上述的帧号之差不小于预先决定的值的帧,将基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)的解码数字声音信号作为2个声道的解码数字声音信号输出。
<第五实施方式的变形例>
以上说明了基于第一实施方式的声音信号接收侧装置220-m的结构的第五实施方式的声音信号接收侧装置220-m及其操作,但也可以构成基于第三实施方式以及第四实施方式以及它们的变形例的其中一个的声音信号接收侧装置220-m的第五实施方式的声音信号接收侧装置220-m并使其操作。
〔效果〕
通话对方的多线路支持终端装置200-m’的声音信号发送侧装置210-m’的编码装置212-m’按每个特定的时间区间的帧进行编码,因此单声道码的帧号与扩展码的帧号之差对应于通话对方的多线路支持终端装置200-m’的声音信号发送侧装置210-m’的编码装置212-m’所编码的数字声音信号的时间差。例如,如果帧长度是20ms,如果帧号之差是150,则得到单声道码的数字声音信号与得到扩展码的数字声音信号存在3秒的时间差。即使是时间性变动小的参数,如果时刻大为不同,则值也有可能大为变化。从而,在存在使得扩展码所表示的特征参数大为不同的程度的时间差的情况下,有可能在反映了2个声道的差分的特征的2个声道的解码声音信号中,声道间的信号的切分发生大的错误。根据本第五实施方式,通过关于从第一通信线路接收的第一码串中包含的单声道码与从第二通信线路接收的第二码串中包含的扩展码之中的帧号与该单声道码最接近的扩展码之间的帧号之差大的帧,不对2个声道的解码声音信号赋予差,能够抑制解码声音信号的声道间的信号的切分的大的错误。例如,如果设想为在时间差为400ms以上的情况下特征参数大为不同,则在帧长度是20ms的情况下如果帧号之差成为20以上则特征参数大为不同,因此上述的预先决定的值例如设为20即可。
<第六实施方式>
声音信号接收侧装置220-m也可以基于在特定的时间范围中测量的从第一通信线路410-m输入的第一码串和帧号与该第一码串相同的从第二通信线路510-m输入的第二码串之间的时间差的平均值,在该时间差的平均值不处于预先决定的限制时间内的情况下,将对单声道码进行解码而得到的解码数字声音信号作为2个声道的解码数字声音信号。将该方式作为第六实施方式进行说明。
第六实施方式与第一实施方式的不同之处是声音信号接收侧装置220-m的接收单元221-m和解码装置222-m的操作。此外,在解码装置222-m中,第六实施方式进行与第一实施方式不同的操作的是扩展解码单元2222-m。在以下,针对第六实施方式与第一实施方式的不同点进行说明。
[[接收单元221-m]]
从第一通信线路410-m向接收单元221-m输入由通话对方的声音信号发送侧装置210-m’输出的第一码串,从第二通信线路510-m向接收单元221-m输入由通话对方的声音信号发送侧装置210-m’输出的第二码串。第二通信线路是优先级低的通信网,因此,通常,由通话对方的声音信号发送侧装置210-m’输出的某帧的第二码串在该帧的第一码串从第一通信线路410-m输入至接收单元221-m之后从第二通信线路510-m输入至接收单元221-m。
接收单元221-m首先关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是否小于预先决定的限制时间Tmax。另外,限制时间Tmax例如是400ms。
例如,接收单元221-m进行以下的步骤S221-21至步骤S221-24。接收单元221-m关于从开始接收第一码串起预先决定的个数的第一码串,读出帧号,对接收的时刻进行测量,并将帧号与第一码串被接收的时刻进行关联地存储至接收单元221-m内的未图示的存储单元(步骤S221-21)。接收单元221-m此外关于被接收的第二码串,读出帧号,在读出的帧号与存储单元中存储的帧号的其中一个一致的情况下,对接收的时刻进行测量,将第二码串被接收的时刻也与存储单元中存储的帧号和第一码串被接收的时刻进行关联地存储至存储单元(步骤S221-22)。接收单元221-m接着使用存储单元中相关联地存储的帧号、第一码串被接收的时刻和第二码串被接收的时刻,得到从每个帧号的第二码串被接收的时刻减去第一码串被接收的时刻而得到的值在上述的预先决定的个数中的平均值(步骤S221-23)。接收单元221-m接着,判断在步骤S221-23中得到的平均值是否小于预先决定的限制时间Tmax(步骤S221-24)。
接收单元221-m接着,在上述的判断中平均值小于限制时间Tmax的情况下,关于其后的帧,将从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,向解码装置222-m输出,在上述的判断中平均值不小于限制时间Tmax的情况下,关于其后的帧,将从第一通信线路410-m输入的第一码串中包含的单声道码向解码装置222-m输出。接收单元221-m在上述的判断中平均值不小于限制时间Tmax的情况下,关于其后的帧,不输出扩展码。即,接收单元221-m在上述的判断中平均值不小于限制时间Tmax的情况下,仅输出单声道码即可。
即,接收单元221-m关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmax的情况下,关于其后的帧,在从第二通信线路510-m输入的第二码串中包含的扩展码中包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,将该单声道码、以及帧号与该单声道码相同的扩展码向解码装置222-m输出,在从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,将从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码(即,从第二通信线路510-m输入的第二码串中包含的扩展码之中的、虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码),向解码装置222-m输出,在上述的平均值不小于限制时间Tmax的情况下,关于其后的帧,仅将从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)向解码装置222-m输出。
另外,接收单元221-m直到上述的判断结束为止,既可以什么也不输出,也可以与第一实施方式同样地将单声道码和扩展码向解码装置222-m输出,也可以不输出扩展码而将单声道码向解码装置222-m输出,也可以与第五实施方式同样地,一定将单声道码向解码装置222-m,而仅在单声道码与扩展码的帧号之差小的情况下将扩展码也向解码装置222-m输出。
[[解码装置222-m]]
在接收单元221-m所进行的上述的判断中平均值小于预先决定的限制时间Tmax的情况下,与第一实施方式的解码装置222-m同样地,向解码装置222-m按每帧输入单声道码和扩展码。另一方面,在接收单元221-m所进行的上述的判断中平均值不小于预先决定的限制时间Tmax的情况下,向解码装置222-m按每帧输入由接收单元221-m输出的单声道码,而不输入扩展码。
另外,直到接收单元221-m所进行的上述的判断结束为止,向解码装置222-m什么也不输入,或者不输入扩展码而输入单声道码,或者输入单声道码和扩展码。解码装置222-m按每帧得到与被输入的单声道码和扩展码或者被输入的单声道码对应的2个声道的解码数字声音信号,并向播放单元223-m输出。
[[[扩展解码单元2222-m]]]
扩展解码单元2222-m在被输入了单声道的解码数字声音信号和扩展码的情况下,即在上述的判断中平均值小于预先决定的限制时间Tmax的情况下,按每帧,根据被输入的单声道的解码数字声音信号和扩展码,通过与第一实施方式的扩展解码单元2222-m相同的操作,得到2个声道的解码数字声音信号并向播放单元223-m输出。扩展解码单元2222-m在被输入了单声道的解码数字声音信号的情况下,即在上述的判断中平均值不小于预先决定的限制时间Tmax的情况下,将被输入的单声道的解码数字声音信号原样作为2个声道的解码数字声音信号得到并向播放单元223-m输出。
即,解码装置222-m关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmax的情况下,基于从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码,得到2个声道的解码数字声音信号并输出,在上述的平均值不小于限制时间Tmax的情况下,将基于从第一通信线路410-m输入的第一码串中包含的单声道码的单声道的解码数字声音信号原样作为2个声道的解码数字声音信号输出。
更具体而言,解码装置222-m关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmax的情况下,关于从第二通信线路510-m输入的第二码串中包含的扩展码包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的帧,基于该单声道码、以及帧号与该单声道码相同的扩展码,得到2个声道的解码数字声音信号并输出,关于从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的帧,基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码(即,从第二通信线路510-m输入的第二码串中包含的扩展码之中的、虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码),得到2个声道的解码数字声音信号并输出,在上述的平均值不小于限制时间Tmax的情况下,将基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)的单声道的解码数字声音信号原样作为2个声道的解码数字声音信号输出。
另外,直到接收单元221-m所进行的上述的判断结束为止,扩展解码单元2222-m关于被输入了单声道的解码数字声音信号和扩展码的帧,根据被输入的单声道的解码数字声音信号和扩展码,通过与第一实施方式的扩展解码单元2222-m相同的操作,得到2个声道的解码数字声音信号并向播放单元223-m输出,或者将被输入的单声道的解码数字声音信号原样作为2个声道的解码数字声音信号得到并向播放单元223-m输出,或者什么也不输出。
<第六实施方式的变形例>
以上说明了基于第一实施方式的声音信号接收侧装置220-m的结构的第六实施方式的声音信号接收侧装置220-m及其操作,但也可以构成基于第三实施方式至第五实施方式以及它们的变形例的其中一个的声音信号接收侧装置220-m的第六实施方式的声音信号接收侧装置220-m并使其操作。此外,在上述的例中,将从开始接收第一码串起直到接收到预先决定的个数的第一码串为止,用作特定的时间范围,但特定的时间范围也可以将任意时刻作为起点,例如,既可以将从开始接收第一码串之后的某时刻开始的区间用作特定的时间范围,也可以将从开始接收第一码串之后的多个时刻各自开始的各个区间设定为特定的时间范围。
〔效果〕
如在第五实施方式中也说明的那样,即使是时间性变动小的特征参数,如果时刻大为不同,则值有可能大为变化。从而,在判断为在第一通信线路与第二通信线路之间存在使得扩展码所表示的特征参数大为不同的程度的时间差的情况下,有可能在反映了2个声道的差分的特征的2个声道的解码声音信号中,声道间的信号的切分发生大的错误。根据本第六实施方式,通过在关于相同的帧的第一码串被从第一通信线路接收的时刻与第二码串被从第二通信线路接收的时刻之差大的情况下,不对2个声道的解码声音信号赋予差,能够抑制解码声音信号的声道间的信号的切分的大的错误。
<第七实施方式>
声音信号接收侧装置220-m也可以基于在特定的时间范围中测量的从第一通信线路410-m输入的第一码串和帧号与该第一码串相同的从第二通信线路510-m输入的第二码串之间的时间差的平均值,在该时间差的平均值处于预先决定的限制时间内的情况下,使用单声道码、以及帧号与该单声道码相同的扩展码,作为2个声道的解码数字声音信号。将该方式作为第七实施方式进行说明。
第七实施方式与第一实施方式的不同之处是声音信号接收侧装置220-m的接收单元221-m的操作。在以下,针对第七实施方式与第一实施方式的不同点进行说明。
[[接收单元221-m]]
从第一通信线路410-m向接收单元221-m输入由通话对方的声音信号发送侧装置210-m’输出的第一码串,从第二通信线路510-m向接收单元221-m输入由通话对方的声音信号发送侧装置210-m’输出的第二码串。第二通信线路是优先级低的通信网,因此通常,由通话对方的声音信号发送侧装置210-m’输出的某帧的第二码串在该帧的第一码串从第一通信线路410-m输入至接收单元221-m之后从第二通信线路510-m输入至接收单元221-m。
接收单元221-m首先关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是否小于预先决定的限制时间Tmin。另外,限制时间Tmin例如是帧长度的2倍的值。即,如果帧长度是20ms,则限制时间Tmin例如是40ms。
例如,接收单元221-m进行以下的步骤S221-31至步骤S221-34。接收单元221-m关于从开始接收第一码串起预先决定的个数的第一码串,读出帧号,对接收的时刻进行测量,将帧号与第一码串被接收的时刻进行关联地存储至接收单元221-m内的未图示的存储单元(步骤S221-31)。接收单元221-m此外关于被接收的第二码串,读出帧号,在读出的帧号与存储单元中存储的帧号的其中一个一致的情况下,对接收的时刻进行测量,将第二码串被接收的时刻也与存储单元中存储的帧号和第一码串被接收的时刻进行关联地存储至存储单元(步骤S221-32)。接收单元221-m接着使用存储单元中相关联地存储的帧号、第一码串被接收的时刻和第二码串被接收的时刻,得到从每个帧号的第二码串被接收的时刻减去第一码串被接收的时刻而得到的值在上述的预先决定的个数中的平均值(步骤S221-33)。接收单元221-m接着判断在步骤S221-33中得到的平均值是否小于预先决定的限制时间Tmin(步骤S221-34)。
接收单元221-m接着在上述的判断中平均值小于限制时间Tmin的情况下,关于其后的帧,将从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码相同的扩展码,向解码装置222-m输出,在上述的判断中平均值不小于限制时间Tmin的情况下,关于其后的帧,将从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,向解码装置222-m输出。其中,从第一通信线路410-m接收到第一码串起直到该帧的从第二通信线路510-m接收到第二码串为止,设想为平均需要在步骤S221-33中得到的平均值的时间,因此接收单元221-m需要进行操作,以使从第一通信线路410-m接收到第一码串起直到向解码装置222-m输出为止的时间,成为在步骤S221-33中得到的平均值或者比其大的值。
即,接收单元221-m关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmin的情况下,关于其后的帧,将从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码相同的扩展码,向解码装置222-m输出,在上述的平均值不小于限制时间Tmin的情况下,关于其后的帧,在从第二通信线路510-m输入的第二码串中包含的扩展码包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,将该单声道码、以及帧号与该单声道码相同的扩展码向解码装置222-m输出,在从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,将第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码(即,从第二通信线路510-m输入的第二码串中包含的扩展码之中的、虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码),向解码装置222-m输出。
第七实施方式的声音信号接收侧装置220-m的解码装置222-m的操作与第一实施方式的声音信号接收侧装置220-m的解码装置222-m的操作相同,解码装置222-m基于接收单元221-m所输出的单声道码、以及接收单元221-m所输出的扩展码,得到2个声道的解码数字声音信号并输出。其中,第七实施方式的接收单元221-m所输出的扩展码根据情况,与第一实施方式的接收单元221-m所输出的扩展码不同,因此解码装置222-m具体进行下述的操作。
即,解码装置222-m关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmin的情况下,基于从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码相同的扩展码,得到2个声道的解码数字声音信号并输出,在上述的平均值不小于限制时间Tmin的情况下,基于从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码,得到2个声道的解码数字声音信号并输出。
更具体而言,解码装置222-m关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmin的情况下,基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码相同的扩展码,得到2个声道的解码数字声音信号并输出,在上述的平均值不小于限制时间Tmin的情况下,关于从第二通信线路510-m输入的第二码串中包含的扩展码包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的帧,基于该单声道码、以及帧号与该单声道码相同的扩展码,得到2个声道的解码数字声音信号并输出,关于从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的帧,基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码(即,从第二通信线路510-m输入的第二码串中包含的扩展码之中的、虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码),得到2个声道的解码数字声音信号并输出。
另外,直到接收单元221-m所进行的上述的判断结束为止,例如,接收单元221-m与第一实施方式同样地将单声道码和扩展码向解码装置222-m输出即可,解码装置222-m与第一实施方式同样地使用单声道码和扩展码得到2个声道的解码数字声音信号并向播放单元223-m输出即可。
<第七实施方式的变形例>
以上说明了基于第一实施方式的声音信号接收侧装置220-m的结构的第七实施方式的声音信号接收侧装置220-m及其操作,但也可以构成基于第三实施方式至第五实施方式以及它们的变形例的其中一个的声音信号接收侧装置220-m的第七实施方式的声音信号接收侧装置220-m并使其操作。此外,在上述的例中,将从开始接收第一码串起直到接收到预先决定的个数的第一码串为止,用作特定的时间范围,但特定的时间范围也可以将任意时刻作为起点,例如,既可以将从开始接收第一码串之后的某时刻开始的区间用作特定的时间范围,也可以将从开始接收第一码串之后的多个时刻各自开始的各个区间设定为特定的时间范围。
〔效果〕
即使是时间性变动小的特征参数,如果时刻不同,则值也有可能稍许不同。从而,如果仅通过稍许增加延迟就能够使用相同的帧的特征参数进行解码,则有可能能够得到高音质的解码声音信号。因此,在本第七实施方式中,对关于相同的帧的第一码串被从第一通信线路接收的时刻与第二码串被从第二通信线路接收的时刻之差的特定的时间范围的平均值,设置作为预先决定的值的限制时间,在小于限制时间的情况下,在有意地稍许增加延迟的基础上,使用单声道码、以及与该单声道码相同的帧的扩展码,作为2个声道的解码数字声音信号,由此能够得到高音质的解码声音信号。
<第八实施方式>
声音信号接收侧装置220-m也可以基于在特定的时间范围中测量的从第一通信线路410-m输入的第一码串和帧号与该第一码串相同的从第二通信线路510-m输入的第二码串之间的时间差的平均值,在该时间差的平均值小于第一限制时间的情况下,使用单声道码、以及帧号与该单声道码相同的扩展码,得到2个声道的解码数字声音信号,在该时间差的平均值为比第一限制时间大的预先决定的第二限制时间以上的情况下,将对单声道码进行解码而得到的解码数字声音信号作为2个声道的解码数字声音信号,在该时间差的平均值为第一限制时间以上且小于第二限制时间的情况下,使用单声道码、以及帧号与该单声道码最接近的扩展码,得到2个声道的解码数字声音信号。总之,也可以将第六实施方式与第七实施方式结合实施。将该方式作为第八实施方式进行说明。
第八实施方式与第一实施方式不同之处是声音信号接收侧装置220-m的接收单元221-m和解码装置222-m的操作。其中,声音信号接收侧装置220-m的解码装置222-m的操作与第六实施方式的解码装置222-m的操作相同。在以下,针对第八实施方式与第一实施方式和第六实施方式都不同的接收单元221-m的操作进行说明。
[[接收单元221-m]]
从第一通信线路410-m向接收单元221-m输入由通话对方的声音信号发送侧装置210-m’输出的第一码串,从第二通信线路510-m向接收单元221-m输入由通话对方的声音信号发送侧装置210-m’输出的第二码串。第二通信线路是优先级低的通信网,因此通常,由通话对方的声音信号发送侧装置210-m’输出的某帧的第二码串在该帧的第一码串从第一通信线路410-m输入至接收单元221-m之后从第二通信线路510-m输入至接收单元221-m。
接收单元221-m首先关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是小于预先决定的第一限制时间Tmin,还是为比第一限制时间Tmin大的预先决定的第二限制时间Tmax以上,还是为第一限制时间Tmin以上且小于第二限制时间Tmax。另外,第一限制时间Tmin例如是帧长度的2倍的值。即,如果帧长度是20ms,则第一限制时间Tmin例如是40ms。此外,第二限制时间Tmax例如是400ms。
例如,接收单元221-m进行以下的步骤S221-41至步骤S221-44。接收单元221-m关于从开始接收第一码串起预先决定的个数的第一码串,读出帧号,对接收的时刻进行测量,将帧号与第一码串被接收的时刻进行关联地存储至接收单元221-m内的未图示的存储单元(步骤S221-41)。接收单元221-m此外关于被接收的第二码串,读出帧号,在读出的帧号与存储单元中存储的帧号的其中一个一致的情况下,对接收的时刻进行测量,将第二码串被接收的时刻也与存储单元中存储的帧号和第一码串被接收的时刻进行关联地存储至存储单元(步骤S221-42)。接收单元221-m接着使用存储单元中相关联地存储的帧号、第一码串被接收的时刻和第二码串被接收的时刻,得到从每个帧号的第二码串被接收的时刻减去第一码串被接收的时刻而得到的值在上述的预先决定的个数中的平均值(步骤S221-43)。接收单元221-m接着判断在步骤S221-43中得到的平均值是小于预先决定的第一限制时间Tmin,还是为比第一限制时间Tmin大的预先决定的第二限制时间Tmax以上,还是为第一限制时间Tmin以上且小于第二限制时间Tmax(步骤S221-44)。
接收单元221-m接着在上述的判断中平均值小于第一限制时间Tmin的情况下,关于其后的帧,将从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码相同的扩展码,向解码装置222-m输出,在上述的判断中平均值为第一限制时间Tmin以上且小于第二限制时间Tmax的情况下,关于其后的帧,将从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,向解码装置222-m输出,在上述的判断中平均值不小于第二限制时间Tmax的情况下,关于其后的帧,将从第一通信线路410-m输入的第一码串中包含的单声道码向解码装置222-m输出。接收单元221-m在上述的判断中平均值不小于第二限制时间Tmax的情况下,关于其后的帧,不输出扩展码。即,接收单元221-m在上述的判断中平均值不小于第二限制时间Tmax的情况下,仅输出单声道码即可。其中,从第一通信线路接收到第一码串起直到该帧的从第二通信线路接收到第二码串为止,设想为平均需要在步骤S221-43中得到的平均值的时间,因此接收单元221-m需要进行操作,以使从第一通信线路接收到第一码串起直到向解码装置222-m输出为止的时间,成为在步骤S221-43中得到的平均值或者比其大的值。
即,接收单元221-m关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmin的情况下,关于其后的帧,将从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码相同的扩展码,向解码装置222-m输出,在上述的平均值为第一限制时间Tmin以上且小于第二限制时间Tmax的情况下,关于其后的帧,在从第二通信线路510-m输入的第二码串中包含的扩展码包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,将该单声道码、以及帧号与该单声道码相同的扩展码向解码装置222-m输出,在从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的情况下,将从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码(即,从第二通信线路510-m输入的第二码串中包含的扩展码之中的、虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码),向解码装置222-m输出,在上述的平均值不小于第二限制时间Tmax的情况下,关于其后的帧,仅将从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)向解码装置222-m输出。
另外,接收单元221-m直到上述的判断结束为止,既可以什么也不输出,也可以与第一实施方式同样地将单声道码和扩展码向解码装置222-m输出,也可以不输出扩展码而将单声道码向解码装置222-m输出,也可以与第五实施方式同样地,一定将单声道码向解码装置222-m,而仅在单声道码与扩展码的帧号之差小的情况下将扩展码也向解码装置222-m输出。
第八实施方式的声音信号接收侧装置220-m的解码装置222-m的操作与第六实施方式的声音信号接收侧装置220-m的解码装置222-m的操作相同。其中,第八实施方式的接收单元221-m所输出的扩展码根据情况,与第六实施方式的接收单元221-m所输出的扩展码不同,因此解码装置222-m具体进行下述的操作。
即,解码装置222-m在上述的判断中平均值小于第一限制时间Tmin的情况、以及在上述的判断中平均值为第一限制时间Tmin以上且小于第二限制时间Tmax的情况下,关于其后的帧,基于接收单元221-m所输出的单声道码以及接收单元221-m所输出的扩展码,得到2个声道的解码数字声音信号并输出,在上述的判断中平均值为第二限制时间Tmax以上的情况下,关于其后的帧,将基于接收单元221-m所输出的单声道码的单声道的解码数字声音信号原样作为2个声道的解码数字声音信号输出。
更具体而言,解码装置222-m关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的第一限制时间Tmin的情况下,基于从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码相同的扩展码,得到2个声道的解码数字声音信号并输出,在上述的平均值为比第一限制时间Tmin大的预先决定的第二限制时间Tmax以上的情况下,将基于从第一通信线路410-m输入的第一码串中包含的单声道码的单声道的解码数字声音信号原样作为2个声道的解码数字声音信号输出,在上述的平均值为第一限制时间Tmin以上且小于第二限制时间Tmax的情况下,基于从第一通信线路410-m输入的第一码串中包含的单声道码、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码,得到2个声道的解码数字声音信号并输出。
再具体而言,解码装置222-m关于从第一通信线路410-m接收的第一码串和与该第一码串对应的从第二通信线路510-m接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的第一限制时间Tmin的情况下,基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码相同的扩展码,得到2个声道的解码数字声音信号并输出,在上述的平均值为比第一限制时间Tmin大的预先决定的第二限制时间Tmax以上的情况下,将基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)的单声道的解码数字声音信号原样作为2个声道的解码数字声音信号输出,在上述的平均值为第一限制时间Tmin以上且小于第二限制时间Tmax的情况下,关于从第二通信线路510-m输入的第二码串中包含的扩展码包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的帧,基于该单声道码、以及帧号与该单声道码相同的扩展码,得到2个声道的解码数字声音信号并输出,关于从第二通信线路510-m输入的第二码串中包含的扩展码不包含帧号与从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)相同的扩展码的帧,基于从第一通信线路410-m输入的第一码串中包含的单声道码(即,帧号顺序的单声道码)、以及从第二通信线路510-m输入的第二码串中包含的帧号与该单声道码最接近的扩展码(即,从第二通信线路510-m输入的第二码串中包含的扩展码之中的、虽然帧号与该单声道码不相同但帧号与该单声道码最接近的扩展码),得到2个声道的解码数字声音信号并输出。
另外,直到接收单元221-m所进行的上述的判断结束为止,向解码装置222-m什么也不输入,或者不输入扩展码而输入单声道码,或者输入单声道码和扩展码。解码装置222-m按每帧得到与被输入的单声道码和扩展码或者被输入的单声道码对应的2个声道的解码数字声音信号,并向播放单元223-m输出。
<第八实施方式的变形例>
以上说明了基于第一实施方式的声音信号接收侧装置220-m的结构的第八实施方式的声音信号接收侧装置220-m及其操作,但也可以构成基于第三实施方式至第五实施方式以及它们的变形例的其中一个的声音信号接收侧装置220-m的第八实施方式的声音信号接收侧装置220-m并使其操作。此外,在上述的例中,将从开始接收第一码串起直到接收到预先决定的个数的第一码串为止,用作特定的时间范围,但特定的时间范围也可以利用任意时刻来设定,例如,既可以将从开始接收第一码串之后的某时刻开始的区间,用作特定的时间范围,也可以将从开始接收第一码串之后的多个时刻各自开始的各个区间,设定为特定的时间范围。
〔效果〕
根据本第八实施方式,在关于相同的帧的第一码串被从第一通信线路接收的时刻与第二码串被从第二通信线路接收的时刻之差大时抑制解码声音信号的声道间的信号的切分的大的错误,而且在上述的差小时能够得到高音质的解码声音信号。
<第九实施方式>
在用于在多地点进行电话会议的多地点控制装置(多点控制装置(MCU,Multipoint Control Unit))中,也可以将与不同的2个地点的声音信号分别对应的数字声音信号作为2个声道的数字声音信号,进行与上述的各实施方式的声音信号发送侧装置210-m同样的操作。将该方式作为第九实施方式进行说明。
<多地点控制装置600>
多地点控制装置600如图7所示,包含接收单元610、单声道解码单元620、地点选择单元630、信号分析单元640、单声道编码单元650和发送单元660。在以下,说明多地点控制装置600与P个地点(P为3以上的整数)的终端装置连接,且向多线路支持终端装置200-m 1传递地点m2至地点m P的P-1个地点之中的最多2个地点的声音信号的例子。多地点控制装置600例如按作为20ms的特定的时间区间的每个帧,进行图8以及以下所例示的步骤S610至步骤S660的处理。
[接收单元610]
向接收单元610输入由多线路支持终端装置200-m else(else为2以上且P以下的各整数)经由第一通信线路输出的P-1个第一码串。接收单元610将被输入的P-1个第一码串分别包含的单声道码向单声道解码单元620输出(步骤S610)。
[单声道解码单元620]
单声道解码单元620对从接收单元610输入的P-1个单声道码分别以特定的解码方式进行解码,得到作为单声道的解码数字声音信号的解码单声道信号并向地点选择单元630输出(步骤S620)。关于特定的解码方式,如在第一实施方式中说明的那样。
[地点选择单元630]
地点选择单元630基于预先决定的选择基准,选择从单声道解码单元620输入的P-1个解码单声道信号之中的2个解码单声道信号并向信号分析单元640输出(步骤S630)。作为预先决定的选择基准,只要预先决定能够选择重要程度高的地点的解码单声道信号的基准,且地点选择单元630能够执行选择即可。例如,如果使用声音信号的功率作为选择基准,则地点选择单元630按每帧,将被输入的P-1个解码单声道信号之中的功率最大的解码单声道信号、以及功率第2大的解码单声道信号,向信号分析单元640输出。
[信号分析单元640]
信号分析单元640根据被输入的2个解码单声道信号,得到作为将被输入的2个解码单声道信号混合而成的信号的单声道信号并向单声道编码单元650输出,得到表现特征参数的扩展码并向发送单元660输出,该特征参数是表现被输入的2个解码单声道信号的差分的特征且时间性变动小的参数(步骤S640)。信号分析单元640进行与第一实施方式的多线路支持终端装置200-m的声音信号发送侧装置210-m的编码装置212-m的信号分析单元2121-m相同的操作即可。其中,在本第九实施方式的情况下,由于被输入的2个解码单声道信号对应于在各自不同的地点发出的声音信号,因此作为特征参数,与在信号分析单元2121-m的第一例中示出的表现时间差的信息相比,使用在第二例中示出的表现按每个频带的强度差的信息更好。另外,也可以将表现被输入的2个解码单声道信号的功率之比或差的信息作为特征参数。
[单声道编码单元650]
单声道编码单元650对被输入的单声道信号以特定的编码方式进行编码,得到单声道码并向发送单元660输出(步骤S650)。关于特定的编码方式,如在第一实施方式中说明的那样。
[发送单元660]
发送单元660按每帧,将包含从单声道编码单元650输入的单声道码的码串即第一码串,经由第一通信线路向多线路支持终端装置200-m1输出,将包含从信号分析单元640输入的扩展码的码串即第二码串,经由第二通信线路向多线路支持终端装置200-m 1输出(步骤S660)。
〔效果〕
通过使多地点控制装置600进行本第九实施方式的操作,在多线路支持终端装置200-m 1中能够虚拟地将2个地点的声音信号分配到左和右并播放,能够明确是在哪一地点的发言或者是在不同地点的发言。
<第九实施方式的变形例>
在第九实施方式的多地点控制装置600的地点选择单元630中,由于使用功率来选择2个解码单声道信号,因此也可以不是由信号分析单元640而是由地点选择单元630得到扩展码。将该方式作为第九实施方式的变形例,针对与第九实施方式的不同点进行说明。
<多地点控制装置600>
第九实施方式的变形例的多地点控制装置600如图9所示,代替第九实施方式的多地点控制装置600所包含的信号分析单元640而包含信号混合单元670。多地点控制装置600按每帧进行图10所例示的步骤S610至步骤S630、步骤S670、步骤S650至步骤S660的处理。它们之中的与第九实施方式在实质上不同的是地点选择单元630所进行的步骤S630和信号混合单元670所进行的步骤S670。发送单元660所进行的步骤S660除了扩展码不是从信号分析单元640而是从地点选择单元630输入以外,与第九实施方式相同。
[地点选择单元630]
地点选择单元630选择从单声道解码单元620输入的P-1个解码单声道信号之中的功率最大的解码单声道信号、以及功率第2大的解码单声道信号,并向信号分析单元640输出,进而,得到所选择的2个解码单声道信号的功率之比或者差作为特征参数,得到作为表现所得到的特征参数的码的扩展码并向发送单元660输出(步骤S630)。
[信号混合单元670]
信号混合单元670根据被输入的2个解码单声道信号,得到作为将被输入的2个解码单声道信号混合而成的信号的单声道信号,并向单声道编码单元650输出(步骤S670)。
另外,为了对多线路支持终端装置200-m 1中将2个地点的声音信号虚拟地向左和右分配进行强调,地点选择单元630也可以得到用于确定所选择的2个解码单声道信号之中的功率较大的一方的地点的信息作为特征参数,得到作为表现所得到的特征参数的码的扩展码并向发送单元660输出。在该情况下,在多线路支持终端装置200-m 1的声音信号接收侧装置220-m 1的解码装置222-m 1的扩展解码单元2222-m1中,得到2个声道的解码数字声音信号以使声音信号定位于针对各地点预先决定的左右位置即可。此外,在该情况下,信号混合单元670既可以选择被输入的2个解码单声道信号之中的功率较大的一方并向单声道编码单元650输出,也可以根本不具备信号混合单元670,而由地点选择单元630仅选择功率最大的一个解码单声道信号并输出。
<第十实施方式>
在上述的各实施方式以及变形例中,为了简化说明,说明了对多线路支持终端装置200-m的2个声道的声音信号进行处理的例子。但是,声道数不限于此,只要是2以上即可。如果将该声道数设为C(C为2以上的整数),则上述的各实施方式以及变形例能够将2个声道替换为C个(C为2以上的整数)声道来实施。
例如,多线路支持终端装置200-m的声音信号发送侧装置210-m的收音单元211-m包含C个麦克风和C个AD变换单元即可,多线路支持终端装置200-m的声音信号发送侧装置210-m的编码装置212-m根据被输入的C个声道的数字声音信号得到单声道码和扩展码即可。具体而言,编码装置212-m对被输入的C个声道的数字声音信号混合而成的信号以特定的第一编码方式进行编码来得到单声道码,得到包含表现如下信息的码的扩展码即可,该信息是相当于被输入的C个声道的数字声音信号的声道间的差分的信息。相当于C个声道的数字声音信号的声道间的差分的信息,例如是相当于除了作为基准的声道以外的C-1个声道各自的数字声音信号与作为基准的声道的数字声音信号之间的差分的信息。
此外,多线路支持装置200-m的声音信号接收侧装置220-m的解码装置222-m基于被输入的单声道码以及扩展码,得到C个声道的解码数字声音信号并输出即可。具体而言,解码装置222-m的单声道解码单元2221-m对被输入的单声道码进行解码来得到单声道的解码数字声音信号,解码装置222-m的扩展解码单元2222-m将单声道的解码数字声音信号视为将C个声道的解码数字声音信号混合而成的信号,将基于被输入的扩展码而得到的特征参数视为表现C个声道的解码数字声音信号中的声道间的差分的特征的信息,得到C个声道的解码数字声音信号并输出即可。此外,在该情况下,多线路终端装置200-m的声音信号接收侧装置220-m的播放单元223-m也可以包含最大C个DA变换单元和最大C个扬声器。
<其他实施方式>
<<在电话系统中也包含电话线路专用终端装置的方式>>
在电话系统100中也包含电话线路专用终端装置300-n的情况下,电话线路专用终端装置300-n如下进行周知的操作。
<电话线路专用终端装置300-n>
电话线路专用终端装置300-n例如是现有型的便携电话或现有型的智能手机,如图11所示,包含声音信号发送侧装置310-n和声音信号接收侧装置320-n。声音信号发送侧装置310-n包含收音单元311-n、编码装置312-n和发送单元313-n。声音信号接收侧装置320-n包含接收单元321-n、解码装置322-n和播放单元323-n。电话线路专用终端装置300-n的声音信号发送侧装置310-n进行图12以及以下所例示的步骤S311至步骤S313的处理,电话线路专用终端装置300-n的声音信号接收侧装置320-n进行图13以及以下所例示的步骤S321至步骤S323的处理。
[声音信号发送侧装置310-n]
声音信号发送侧装置310-n例如按每个20ms的特定的时间区间,即按每帧,得到包含与1个声道的数字声音信号对应的单声道码的码串即第一码串并向第一通信线路420-n输出。
[[收音单元311-n]]
收音单元311-n包含1个麦克风和1个AD变换单元。麦克风对麦克风的周边的空间域中产生的声音进行收音,变换为模拟的电信号并向AD变换单元输出。AD变换单元将被输入的模拟的电信号变换为例如作为采样频率是8kHz的PCM信号的数字声音信号并输出。即,收音单元311-n将与1个麦克风收音的声音对应的1个声道的数字声音信号向编码装置312-n输出(步骤S311)。
[[编码装置312-n]]
编码装置312-n按每帧,对从收音单元311-n输入的1个声道的数字声音信号以上述的特定的编码方式进行编码,得到单声道码并向发送单元313-n输出(步骤S312)。
[[发送单元313-n]]
发送单元313-n按每帧,将包含从编码装置312-n输入的单声道码的码串即第一码串向第一通信线路420-n输出(步骤S313)。
[声音信号接收侧装置320-n]
声音信号接收侧装置320-n例如按每个20ms的特定的时间区间,即按每帧,输出基于从第一通信线路420-n输入的第一码串中包含的单声道码的声音。
[[接收单元321-n]]
接收单元321-n按每帧,将从第一通信线路420-n输入的第一码串中包含的单声道码向解码装置322-n输出(步骤S321)。
[[解码装置322-n]]
向解码装置322-n按每帧输入由接收单元321-n输出的单声道码。解码装置322-n按每帧,对被输入的单声道码以上述的特定的解码方式进行解码,得到1个解码数字声音信号并向播放单元323-n输出(步骤S322)。
[[播放单元323-n]]
播放单元323-n输出与被输入的1个解码数字声音信号对应的声音(步骤S323)。
播放单元323-n例如包含1个DA变换单元和1个扬声器。DA变换单元将被输入的解码数字声音信号变换为模拟的电信号并输出。扬声器产生与从DA变换单元输入的模拟的电信号对应的声音。扬声器也可以被配置于立体声头戴式耳机或立体声耳机。在使用立体声头戴式耳机或立体声耳机所具备的扬声器、即2个扬声器的情况下,例如,播放单元323-n将DA变换单元所输出的电信号向2个扬声器输入,从2个扬声器产生与1个解码数字声音信号对应的声音(解码声音信号)。
〔效果〕
在电话线路专用终端装置300-n中,也使用与多线路支持终端装置200-m相同的编码方式和解码方式,因此在电话线路专用终端装置300-n中确保了兼容性以使能够得到最低限度的音质的解码声音信号的基础上,在多线路支持终端装置200-m中,以与得到最低限度的音质的解码声音信号的情况几乎相同的延迟时间,即在双向通话时不产生不协调感的延迟时间,能够得到高音质的解码声音信号。
<<还存在既不是单声道码也不是扩展码的码的方式>>
多线路支持终端装置200-m的声音信号发送侧装置210-m也可以得到既不是上述的单声道码也不是上述的扩展码的码(追加码)并输出。具体而言,也可以是,编码装置212-m还得到追加码并向发送单元213-m输出,发送单元213-m将从编码装置212-m输入的追加码向第一通信线路410-m和第二通信线路510-m的其中一个输出。追加码例如是表现被输入的C个(C为2以上的整数)的声道的数字声音信号混合而成的信号的高带域成分的特征的码。
同样,也可以向多线路支持终端装置200-m的声音信号接收侧装置220-m输入既不是上述的单声道码也不是上述的扩展码的码(追加码),多线路支持终端装置200-m的声音信号接收侧装置220-m还使用追加码来得到解码声音信号并输出。具体而言,也可以是,接收单元221-m将从第一通信线路410-m和第二通信线路510-m的其中一个输入的追加码向解码装置222-m输出,解码装置222-m还使用从接收单元221-m输入的追加码来得到解码声音信号。
<程序以及记录介质>
也可以通过计算机来实现多线路支持终端装置200-m的各单元的处理。换言之,也可以由计算机执行多线路支持终端装置200-m中的编码方法、多线路支持终端装置200-m中的解码方法各自的各步骤的处理。在该情况下,各步骤的处理通过程序被描述。并且,通过由计算机执行该程序,各步骤的处理在计算机上实现。图14是表示用于实现上述的处理的计算机的功能结构的一例的图。该处理能够通过使记录单元2020读入用于使计算机作为上述的装置发挥功能的程序,并使控制单元2010、输入单元2030、输出单元2040等进行操作来实施。
描述了这些处理内容的程序各自能够事先记录于能够由计算机读取的记录介质。作为能够由计算机读取的记录介质,例如也可以是磁记录装置、光盘、光磁记录介质、半导体存储器等任何介质。
此外,各单元的处理既可以通过在计算机上执行特定的程序来构成,也可以将这些处理的至少一部分以硬件实现。
在不脱离本发明的宗旨的范围内,显然也能够适宜地进行其他变更。
Claims (20)
1.一种声音信号接收解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:
接收步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是否小于预先决定的限制时间Tmin,
在所述判断中所述平均值小于所述限制时间Tmin的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码相同的扩展码,
在所述判断中所述平均值不小于所述限制时间Tmin的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码;以及
解码步骤,关于所述判断以后的帧,基于在所述接收步骤中输出的单声道码、以及在所述接收步骤中输出的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数。
2.一种声音信号接收解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:
接收步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是否小于预先决定的限制时间Tmax,
在所述判断中所述平均值小于所述限制时间Tmax的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,
在所述判断中所述平均值不小于所述限制时间Tmax的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码;以及
解码步骤,在所述判断中所述平均值小于所述限制时间Tmax的情况下,关于所述判断以后的帧,基于在所述接收步骤中输出的单声道码、以及在所述接收步骤中输出的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
在所述判断中所述平均值不小于所述限制时间Tmax的情况下,关于所述判断以后的帧,将基于在所述接收步骤中输出的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
3.一种声音信号接收解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:
接收步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是小于预先决定的第一限制时间Tmin,还是为比所述第一限制时间Tmin大的预先决定的第二限制时间Tmax以上,还是为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax,
在所述判断中所述平均值小于所述第一限制时间Tmin的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码相同的扩展码,
在所述判断中所述平均值为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,
在所述判断中所述平均值为所述第二限制时间Tmax以上的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码;以及
解码步骤,在所述判断中所述平均值小于所述第一限制时间Tmin的情况、以及在所述判断中所述平均值为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax的情况下,关于所述判断以后的帧,基于在所述接收步骤中输出的单声道码、以及在所述接收步骤中输出的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
在所述判断中所述平均值为所述第二限制时间Tmax以上的情况下,关于所述判断以后的帧,将基于在所述接收步骤中输出的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
4.一种声音信号接收解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:
接收步骤,关于从所述第一通信线路输入的第一码串中包含的单声道码与从所述第二通信线路输入的第二码串中包含的扩展码之中的帧号与该单声道码最接近的扩展码之间的帧号之差小于预先决定的值的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,
关于所述差不小于所述预先决定的值的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码;以及
解码步骤,关于所述差小于所述预先决定的值的帧,基于在所述接收步骤中输出的单声道码、以及在所述接收步骤中输出的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
关于所述差不小于所述预先决定的值的帧,将基于在所述接收步骤中输出的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
5.一种声音信号解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:
解码步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmin的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码相同的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
在所述平均值不小于所述限制时间Tmin的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码最接近的扩展码,得到C个声道的解码数字声音信号并输出。
6.一种声音信号解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:
解码步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmax的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码最接近的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
在所述平均值不小于所述限制时间Tmax的情况下,将基于从所述第一通信线路输入的第一码串中包含的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
7.一种声音信号解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:
解码步骤,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的第一限制时间Tmin的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码相同的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
在所述平均值为比所述第一限制时间Tmin大的预先决定的第二限制时间Tmax以上的情况下,将基于从所述第一通信线路输入的第一码串中包含的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出,
在所述平均值为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码最接近的扩展码,得到C个声道的解码数字声音信号并输出。
8.一种声音信号解码方法,由与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置进行,包含:
解码步骤,关于从所述第一通信线路输入的第一码串中包含的单声道码与从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码最接近的扩展码之间的帧号之差小于预先决定的值的帧,基于所述单声道码和所述扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
关于所述差不小于所述预先决定的值的帧,将基于所述单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
9.一种声音信号接收侧装置,被包含在与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置中,包含:
接收单元,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是否小于预先决定的限制时间Tmin,
在所述判断中所述平均值小于所述限制时间Tmin的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码相同的扩展码,
在所述判断中所述平均值不小于所述限制时间Tmin的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码;以及
解码单元,关于所述判断以后的帧,基于所述接收单元所输出的单声道码、以及所述接收单元所输出的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数。
10.一种声音信号接收侧装置,被包含在与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置中,包含:
接收单元,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是否小于预先决定的限制时间Tmax,
在所述判断中所述平均值小于所述限制时间Tmax的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,
在所述判断中所述平均值不小于所述限制时间Tmax的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码;以及
解码单元,在所述判断中所述平均值小于所述限制时间Tmax的情况下,关于所述判断以后的帧,基于所述接收单元所输出的单声道码、以及所述接收单元所输出的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
在所述判断中所述平均值不小于所述限制时间Tmax的情况下,关于所述判断以后的帧,将基于所述接收单元所输出的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
11.一种声音信号接收侧装置,被包含在与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置中,包含:
接收单元,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,判断该第一码串与该第二码串被接收的时刻之差在多个组间的平均值是小于预先决定的第一限制时间Tmin,还是为比所述第一限制时间Tmin大的预先决定的第二限制时间Tmax以上,还是为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax,
在所述判断中所述平均值小于所述第一限制时间Tmin的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码相同的扩展码,
在所述判断中所述平均值为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,
在所述判断中所述平均值为所述第二限制时间Tmax以上的情况下,关于所述判断以后的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码;以及
解码单元,在所述判断中所述平均值小于所述第一限制时间Tmin的情况、以及在所述判断中所述平均值为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax的情况下,关于所述判断以后的帧,基于所述接收单元所输出的单声道码、以及所述接收单元所输出的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
在所述判断中所述平均值为所述第二限制时间Tmax以上的情况下,关于所述判断以后的帧,将基于所述接收单元所输出的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
12.一种声音信号接收侧装置,被包含在与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置中,包含:
接收单元,关于从所述第一通信线路输入的第一码串中包含的单声道码与从所述第二通信线路输入的第二码串中包含的扩展码之中的帧号与该单声道码最接近的扩展码之间的帧号之差小于预先决定的值的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的扩展码之中的、帧号与该单声道码最接近的扩展码,
关于所述差不小于所述预先决定的值的帧,输出从所述第一通信线路输入的第一码串中包含的单声道码;以及
解码单元,关于所述差小于所述预先决定的值的帧,基于所述接收单元所输出的单声道码、以及所述接收单元所输出的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
关于所述差不小于所述预先决定的值的帧,将基于所述接收单元所输出的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
13.一种解码装置,被包含在与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置中,包含:
解码单元,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmin的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码相同的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
在所述平均值不小于所述限制时间Tmin的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码最接近的扩展码,得到C个声道的解码数字声音信号并输出。
14.一种解码装置,被包含在与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置中,包含:
解码单元,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的限制时间Tmax的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码最接近的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
在所述平均值不小于所述限制时间Tmax的情况下,将基于从所述第一通信线路输入的第一码串中包含的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
15.一种解码装置,被包含在与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置中,包含:
解码单元,关于从所述第一通信线路接收的第一码串以及与该第一码串对应的从所述第二通信线路接收的第二码串所成的组,在该第一码串与该第二码串被接收的时刻之差在多个组间的平均值小于预先决定的第一限制时间Tmin的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码相同的扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
在所述平均值为比所述第一限制时间Tmin大的预先决定的第二限制时间Tmax以上的情况下,将基于从所述第一通信线路输入的第一码串中包含的单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出,
在所述平均值为所述第一限制时间Tmin以上且小于所述第二限制时间Tmax的情况下,基于从所述第一通信线路输入的第一码串中包含的单声道码、以及从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码最接近的扩展码,得到C个声道的解码数字声音信号并输出。
16.一种解码装置,被包含在与第一通信线路和优先级比所述第一通信线路低的第二通信线路连接的终端装置中,包含:
解码单元,关于从所述第一通信线路输入的第一码串中包含的单声道码与从所述第二通信线路输入的第二码串中包含的、帧号与该单声道码最接近的扩展码之间的帧号之差小于预先决定的值的帧,基于所述单声道码和所述扩展码,得到C个声道的解码数字声音信号并输出,其中C为2以上的整数,
关于所述差不小于所述预先决定的值的帧,将基于所述单声道码的解码数字声音信号作为C个声道的解码数字声音信号输出。
17.一种使计算机执行如权利要求1至4中任1项所述的声音信号接收解码方法的程序。
18.一种使计算机执行如权利要求5至8中任1项所述的声音信号解码方法的程序。
19.一种记录了用于使计算机执行如权利要求1至4中任1项所述的声音信号接收解码方法的程序的计算机可读取的记录介质。
20.一种记录了用于使计算机执行如权利要求5至8中任1项所述的声音信号解码方法的程序的计算机可读取的记录介质。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JPPCT/JP2019/023424 | 2019-06-13 | ||
PCT/JP2019/023424 WO2020250370A1 (ja) | 2019-06-13 | 2019-06-13 | 音信号受信復号方法、音信号復号方法、音信号受信側装置、復号装置、プログラム及び記録媒体 |
PCT/JP2019/051596 WO2020250471A1 (ja) | 2019-06-13 | 2019-12-27 | 音信号受信復号方法、音信号復号方法、音信号受信側装置、復号装置、プログラム及び記録媒体 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113966530A true CN113966530A (zh) | 2022-01-21 |
Family
ID=73781711
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980097320.4A Pending CN113966530A (zh) | 2019-06-13 | 2019-12-27 | 声音信号接收解码方法、声音信号解码方法、声音信号接收侧装置、解码装置、程序以及记录介质 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20220246157A1 (zh) |
EP (1) | EP3985662A4 (zh) |
JP (1) | JP7192987B2 (zh) |
CN (1) | CN113966530A (zh) |
WO (2) | WO2020250370A1 (zh) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11251917A (ja) * | 1998-02-26 | 1999-09-17 | Sony Corp | 符号化装置及び方法、復号化装置及び方法、並びに記録媒体 |
JP3960932B2 (ja) * | 2002-03-08 | 2007-08-15 | 日本電信電話株式会社 | ディジタル信号符号化方法、復号化方法、符号化装置、復号化装置及びディジタル信号符号化プログラム、復号化プログラム |
JP4065827B2 (ja) * | 2003-10-03 | 2008-03-26 | 日本電信電話株式会社 | 音声信号パケット通信方法、音声信号パケット送信方法、受信方法、これらの装置、そのプログラムおよび記録媒体 |
ATE545131T1 (de) * | 2004-12-27 | 2012-02-15 | Panasonic Corp | Tonkodierungsvorrichtung und tonkodierungsmethode |
WO2008102527A1 (ja) * | 2007-02-20 | 2008-08-28 | Panasonic Corporation | マルチチャンネル復号装置、マルチチャンネル復号方法、プログラム及び半導体集積回路 |
WO2009129822A1 (en) * | 2008-04-22 | 2009-10-29 | Nokia Corporation | Efficient encoding and decoding for multi-channel signals |
-
2019
- 2019-06-13 WO PCT/JP2019/023424 patent/WO2020250370A1/ja active Application Filing
- 2019-12-27 WO PCT/JP2019/051596 patent/WO2020250471A1/ja active Application Filing
- 2019-12-27 JP JP2021525901A patent/JP7192987B2/ja active Active
- 2019-12-27 US US17/617,840 patent/US20220246157A1/en active Pending
- 2019-12-27 EP EP19932417.9A patent/EP3985662A4/en active Pending
- 2019-12-27 CN CN201980097320.4A patent/CN113966530A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
EP3985662A4 (en) | 2023-07-19 |
JPWO2020250471A1 (zh) | 2020-12-17 |
US20220246157A1 (en) | 2022-08-04 |
WO2020250471A1 (ja) | 2020-12-17 |
JP7192987B2 (ja) | 2022-12-20 |
WO2020250370A1 (ja) | 2020-12-17 |
EP3985662A1 (en) | 2022-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5163545B2 (ja) | オーディオ復号装置及びオーディオ復号方法 | |
CN114144832A (zh) | 声音信号接收解码方法、声音信号编码发送方法、声音信号解码方法、声音信号编码方法、声音信号接收侧装置、声音信号发送侧装置、解码装置、编码装置、程序以及记录介质 | |
JP7192986B2 (ja) | 音信号受信復号方法、音信号復号方法、音信号受信側装置、復号装置、プログラム及び記録媒体 | |
CN113966530A (zh) | 声音信号接收解码方法、声音信号解码方法、声音信号接收侧装置、解码装置、程序以及记录介质 | |
CN116458172A (zh) | 空间音频参数编码和相关解码 | |
CN113366568B (zh) | 多点控制方法、系统及记录介质 | |
CN113330514B (zh) | 多点控制方法、多点电话连接系统及记录介质 | |
CN113302687B (zh) | 多点控制方法、多点电话连接系统及记录介质 | |
JP7176418B2 (ja) | 多地点制御方法、装置及びプログラム | |
EP3913620B1 (en) | Encoding/decoding method, decoding method, and device and program for said methods | |
EP4396814A1 (en) | Silence descriptor using spatial parameters |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |