CN115244618A - 声音信号编码方法、声音信号解码方法、声音信号编码装置、声音信号解码装置、程序以及记录介质 - Google Patents

声音信号编码方法、声音信号解码方法、声音信号编码装置、声音信号解码装置、程序以及记录介质 Download PDF

Info

Publication number
CN115244618A
CN115244618A CN202080098103.XA CN202080098103A CN115244618A CN 115244618 A CN115244618 A CN 115244618A CN 202080098103 A CN202080098103 A CN 202080098103A CN 115244618 A CN115244618 A CN 115244618A
Authority
CN
China
Prior art keywords
signal
channel
subtraction gain
left channel
right channel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080098103.XA
Other languages
English (en)
Inventor
杉浦亮介
守谷健弘
镰本优
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Publication of CN115244618A publication Critical patent/CN115244618A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Stereophonic System (AREA)

Abstract

降混部110获得降混信号,该降混信号是将输入的左声道的输入声音信号和输入的右声道的输入声音信号混合得到的信号。在左声道处于前导的情况下,决定在左声道减法增益估计部120和左声道信号减法部130中保持原样地使用降混信号,并决定在右声道减法增益估计部140和右声道信号减法部150中使用延迟降混信号。在右声道处于前导的情况下,决定在右声道减法增益估计部140和右声道信号减法部150中保持原样地使用降混信号,并决定在左声道减法增益估计部120和左声道信号减法部130中使用延迟降混信号。

Description

声音信号编码方法、声音信号解码方法、声音信号编码装置、 声音信号解码装置、程序以及记录介质
技术领域
本发明涉及对双声道的声音信号进行嵌入式编码/解码的技术。
背景技术
作为对双声道的声音信号和单声道的声音信号进行嵌入式编码/解码的技术,有专利文献1的技术。在专利文献1中公开了,获得将输入的左声道的声音信号和输入的右声道的声音信号相加而得的单声道信号,对单声道信号进行编码(单声道编码)来获得单声道编码,对单声道编码进行解码(单声道解码)来获得单声道局部解码信号,对于左声道和右声道的每个声道,对输入的声音信号与从单声道局部解码信号得到的预测信号的差分(预测残差信号)进行编码的技术。在专利文献1的技术中,通过针对每个声道,将对单声道局部解码信号施加延迟并施加振幅比而得的信号作为预测信号,选择具有输入的声音信号与预测信号的误差最小的延迟和振幅比的预测信号,或者,使用具有输入的声音信号与单声道局部解码信号之间的相互相关最大的延迟差和振幅比的预测信号,从输入的声音信号减去预测信号来获得预测残差信号,并将预测残差信号设为编码/解码的对象,从而抑制各声道的解码声音信号的音质劣化。
现有技术文献
专利文献
专利文献1:WO2006/070751
发明内容
发明要解决的课题
在专利文献1的技术中,即使在输入的声音信号的声道信号间的相关性较小的情况下,也能够高效地进行编码。然而,在专利文献1的技术中,例如在电话会议等主要设想的利用方式,即利用配置在某个空间内的2个麦克风对该空间内的一个音源发出的声音进行拾音得到的双声道的声音信号为编码的对象的利用方式中,存在运算处理量、码量变得冗长的课题。
在本发明中,其目的在于,提供:对于双声道的声音信号,以比以往少的运算处理量、码量,抑制了在双声道的声音信号为利用配置在某个空间内的2个麦克风对该空间内的一个音源发出的声音进行拾音得到的声音信号的情况下等的各声道的解码声音信号的音质劣化的嵌入式编码/解码。
本发明的一方式是按每个帧对输入的声音信号进行编码的声音信号编码方法,其特征在于,包括:降混步骤,获得降混信号,上述降混信号是将输入的左声道输入声音信号和输入的右声道输入声音信号混合得到的信号;单声道编码步骤,对上述降混信号进行编码来获得单声道码CM;左右关系估计步骤,从上述左声道输入声音信号和上述右声道输入声音信号获得左右时间差τ和左右时间差码Cτ,上述左右时间差码是表示上述左右时间差τ的码;时间移位步骤,在上述左右时间差τ表示左声道处于前导的情况下,决定在左声道减法增益估计步骤和左声道信号减法步骤保持原样地使用上述降混信号,并决定在右声道减法增益估计步骤和右声道信号减法步骤使用使上述降混信号延迟了上述左右时间差τ表示的大小的量而得的信号亦即延迟降混信号,在上述左右时间差τ表示右声道处于前导的情况下,决定在上述右声道减法增益估计步骤和上述右声道信号减法步骤保持原样地使用上述降混信号,并决定在上述左声道减法增益估计步骤和上述左声道信号减法步骤使用使上述降混信号延迟了上述左右时间差τ表示的大小的量而得的信号亦即延迟降混信号,在上述左右时间差τ表示任何的声道都不处于前导的情况下,决定在上述左声道减法增益估计步骤、上述左声道信号减法步骤、上述右声道减法增益估计步骤以及上述右声道信号减法步骤保持原样地使用上述降混信号;上述左声道减法增益估计步骤,从上述左声道输入声音信号和在上述时间移位步骤所决定的上述降混信号或者上述延迟降混信号获得左声道减法增益α和左声道减法增益码Cα,上述左声道减法增益码是表示上述左声道减法增益α的码;上述左声道信号减法步骤,按对应的每个样本t,获得基于从上述左声道输入声音信号的样本值减去将在上述时间移位步骤所决定的上述降混信号或者上述延迟降混信号的样本值与上述左声道减法增益α相乘后的值而得到的值的序列,作为左声道差分信号;上述右声道减法增益估计步骤,从上述右声道输入声音信号和在上述时间移位步骤所决定的上述降混信号或者上述延迟降混信号获得右声道减法增益β和右声道减法增益码Cβ,上述右声道减法增益码是表示上述右声道减法增益β的码;上述右声道信号减法步骤,按对应的每个样本t,获得基于从上述右声道输入声音信号的样本值减去将在上述时间移位步骤所决定的上述降混信号或者上述延迟降混信号的样本值与上述右声道减法增益β相乘后的值而得到的值的序列,作为右声道差分信号;以及立体声编码步骤,对上述左声道差分信号和上述右声道差分信号进行编码来获得立体声码CS。
本发明的一方式是按每个帧对输入的声音信号进行编码的声音信号编码方法,其特征在于,包括:降混步骤,获得降混信号,上述降混信号是将输入的左声道输入声音信号和输入的右声道输入声音信号混合得到的信号;单声道编码步骤,对上述降混信号进行编码来获得单声道码CM和量化完毕降混信号;左右关系估计步骤,从上述左声道输入声音信号和上述右声道输入声音信号获得左右时间差τ和左右时间差码Cτ,上述左右时间差码是表示上述左右时间差τ的码;时间移位步骤,在上述左右时间差τ表示左声道处于前导的情况下,决定在左声道减法增益估计步骤和左声道信号减法步骤保持原样地使用上述量化完毕降混信号,并决定在右声道减法增益估计步骤和右声道信号减法步骤使用使上述量化完毕降混信号延迟了上述左右时间差τ表示的大小的量而得的信号亦即延迟量化完毕降混信号,在上述左右时间差τ表示右声道处于前导的情况下,决定在上述右声道减法增益估计步骤和上述右声道信号减法步骤保持原样地使用上述量化完毕降混信号,并决定在上述左声道减法增益估计步骤和上述左声道信号减法步骤使用使上述量化完毕降混信号延迟了上述左右时间差τ表示的大小的量而得的信号亦即延迟量化完毕降混信号,在上述左右时间差τ表示任何的声道都不处于前导的情况下,决定在上述左声道减法增益估计步骤、上述左声道信号减法步骤、上述右声道减法增益估计步骤以及上述右声道信号减法步骤保持原样地使用上述量化完毕降混信号;上述左声道减法增益估计步骤,从上述左声道输入声音信号和在上述时间移位步骤所决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号获得左声道减法增益α和左声道减法增益码Cα,上述左声道减法增益码是表示上述左声道减法增益α的码;上述左声道信号减法步骤,按对应的每个样本t,获得基于从上述左声道输入声音信号的样本值减去将在上述时间移位步骤所决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号的样本值与上述左声道减法增益α相乘后的值而得到的值的序列,作为左声道差分信号;上述右声道减法增益估计步骤,从上述右声道输入声音信号和在上述时间移位步骤所决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号获得右声道减法增益β和右声道减法增益码Cβ,上述右声道减法增益码是表示上述右声道减法增益β的码;上述右声道信号减法步骤,按对应的每个样本t,获得基于从上述右声道输入声音信号的样本值减去将在上述时间移位步骤所决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号的样本值与上述右声道减法增益β相乘后的值而得到的值的序列,作为右声道差分信号;以及立体声编码步骤,对上述左声道差分信号和上述右声道差分信号进行编码来获得立体声码CS。
本发明的一方式是按每个帧对输入的码进行解码来获得声音信号的声音信号解码方法,其特征在于,包括:单声道解码步骤,对输入的单声道码CM进行解码来获得单声道解码声音信号;立体声解码步骤,对输入的立体声码CS进行解码来获得左声道解码差分信号和右声道解码差分信号;左右时间差解码步骤,从输入的左右时间差码Cτ获得左右时间差τ;时间移位步骤,在上述左右时间差τ表示左声道处于前导的情况下,决定在左声道信号加法步骤中保持原样地使用上述单声道解码声音信号,并决定在右声道信号加法步骤中使用使上述单声道解码声音信号延迟了上述左右时间差τ表示的大小的量而得的信号亦即延迟单声道解码声音信号,在上述左右时间差τ表示右声道处于前导的情况下,决定在上述右声道信号加法步骤中保持原样地使用上述单声道解码声音信号,并决定在上述左声道信号加法步骤中使用使上述单声道解码声音信号延迟了上述左右时间差τ表示的大小的量而得的信号亦即延迟单声道解码声音信号,在上述左右时间差τ表示任何的声道都不处于前导的情况下,决定在上述左声道信号加法步骤和上述右声道信号加法步骤中保持原样地使用上述单声道解码声音信号;左声道减法增益解码步骤,对输入的左声道减法增益码Cα进行解码来获得左声道减法增益α;上述左声道信号加法步骤,按对应的每个样本t,获得基于将上述左声道解码差分信号的样本值和在上述时间移位步骤所决定的上述单声道解码声音信号或者上述延迟单声道解码声音信号的样本值与上述左声道减法增益α相乘后的值相加而得到的值的序列,作为左声道解码声音信号;右声道减法增益解码步骤,对输入的右声道减法增益码Cβ进行解码来获得右声道减法增益β;以及上述右声道信号加法步骤,按对应的每个样本t,获得基于将上述右声道解码差分信号的样本值和在上述时间移位步骤所决定的上述单声道解码声音信号或者上述延迟单声道解码声音信号的样本值与上述右声道减法增益β相乘后的值相加而得到的值的序列,作为右声道解码声音信号。
根据本发明,能够提供:对于双声道的声音信号,以比以往少的运算处理量、码量,抑制在双声道的声音信号为利用配置在某个空间内的2个麦克风对该空间内的一个音源发出的声音进行拾音得到的声音信号的情况下等的各声道的解码声音信号的音质劣化的嵌入式编码/解码。
附图说明
图1是表示参考方式的编码装置的例子的框图。
图2是表示参考方式的编码装置的处理的例子的流程图。
图3是表示参考方式的解码装置的例子的框图。
图4是表示参考方式的解码装置的处理的例子的流程图。
图5是表示参考方式的左声道减法增益估计部和右声道减法增益估计部的处理的例子的流程图。
图6是表示参考方式的左声道减法增益估计部和右声道减法增益估计部的处理的例子的流程图。
图7是表示参考方式的左声道减法增益解码部和右声道减法增益解码部的处理的例子的流程图。
图8是表示参考方式的左声道减法增益估计部和右声道减法增益估计部的处理的例子的流程图。
图9是表示参考方式的左声道减法增益估计部和右声道减法增益估计部的处理的例子的流程图。
图10是表示第1实施方式和第2实施方式的编码装置的例子的框图。
图11是表示第1实施方式的编码装置的处理的例子的流程图。
图12是表示第1实施方式的解码装置的例子的框图。
图13是表示第1实施方式的解码装置的处理的例子的流程图。
图14是表示第2实施方式的编码装置的处理的例子的流程图。
图15是表示实现本发明的实施方式中的各装置的计算机的功能构成的一个例子的图。
具体实施方式
<参考方式>
在对发明的实施方式进行说明前,作为参考方式,对成为用于实施发明的基础的方式的编码装置和解码装置进行说明。此外,在说明书以及权利要求中,也有时将编码装置称为声音信号编码装置,将编码方法称为声音信号编码方法,将解码装置称为声音信号解码装置,将解码方法称为声音信号解码方法。
《编码装置100》
如图1所示那样,参考方式的编码装置100包括:降混部110、左声道减法增益估计部120、左声道信号减法部130、右声道减法增益估计部140、右声道信号减法部150、单声道编码部160以及立体声编码部170。编码装置100例如按照20ms的规定的时间长度的帧单位,对输入的2声道立体声的时间区域的声音信号进行编码,获得后述的单声道码CM、左声道减法增益码Cα、右声道减法增益码Cβ以及立体声码CS并输出。输入至编码装置的2声道立体声的时间区域的声音信号例如是分别利用2个麦克风对声音、音乐等声音进行拾音并进行AD转换而得到的数字的语音信号或者声学信号,由左声道的输入声音信号和右声道的输入声音信号构成。编码装置输出的码,即,单声道码CM、左声道减法增益码Cα、右声道减法增益码Cβ以及立体声码CS被输入至解码装置。编码装置100针对各帧进行图2所例示的步骤S110~步骤S170的处理。
[降混部110]
输入到编码装置100的左声道的输入声音信号和输入到编码装置100的右声道的输入声音信号被输入到降混部110。降混部110从输入的左声道的输入声音信号和右声道的输入声音信号,获得降混信号并输出,该降混信号是将左声道的输入声音信号和右声道的输入声音信号混合得到的信号(步骤S110)。
例如,若将每帧的样本数设为T,则向降混部110输入按帧单位输入到编码装置100的左声道的输入声音信号xL(1)、xL(2)、...、xL(T)和右声道的输入声音信号xR(1)、xR(2)、...、xR(T)。此处,如果T为正的整数,例如,帧长度为20ms,取样频率为32kHz,则T为640。降混部110获得输入的左声道的输入声音信号和右声道的输入声音信号所对应的每个样本的基于样本值的平均值的序列,作为降混信号xM(1)、xM(2)、...、xM(T),并进行输出。即,若将各样本编号设为t,则xM(t)=(xL(t)+xR(t))/2。
[左声道减法增益估计部120]
向左声道减法增益估计部120输入:输入到编码装置100的左声道的输入声音信号xL(1)、xL(2)、...、xL(T)和降混部110所输出的降混信号xM(1)、xM(2)、...、xM(T)。左声道减法增益估计部120从输入的左声道的输入声音信号和降混信号,获得左声道减法增益α和左声道减法增益码Cα并输出,该左声道减法增益码是表示左声道减法增益α的码(步骤S120)。左声道减法增益估计部120通过专利文献1中求出振幅比g的方法、对该振幅比g进行编码的方法中所例示的公知方法、或者新提出的基于使量化误差最小化的原理的方法,来求出左声道减法增益α和左声道减法增益码Cα。关于使量化误差最小化的原理和基于该原理的方法,后述说明。
[左声道信号减法部130]
向左声道信号减法部130输入:输入到编码装置100的左声道的输入声音信号xL(1)、xL(2)、...、xL(T)、降混部110输出的降混信号xM(1)、xM(2)、...、xM(T)、以及左声道减法增益估计部120输出的左声道减法增益α。左声道信号减法部130按照对应的每个样本t,获得基于将降混信号的样本值xM(t)和左声道减法增益α相乘而得的值α×xM(t),从左声道的输入声音信号的样本值xL(t)中减去而得到的值xL(t)-α×xM(t)的序列,作为左声道差分信号yL(1)、yL(2)、...、yL(T),并进行输出(步骤S130)。即,yL(t)=xL(t)-α×xM(t)。为了在编码装置100中不需要用于获得局部解码信号的延迟、运算处理量,在左声道信号减法部130中,可以使用降混部110得到的未被量化的降混信号xM(t),而不是使用单声道编码的局部解码信号亦即量化完毕的降混信号。但是,在左声道减法增益估计部120不是通过基于使量化误差最小化的原理的方法而是通过专利文献1所例示的公知的方法而获得左声道减法增益α的情况下,也可以是,在编码装置100的单声道编码部160的后级或者单声道编码部160内具备获得与单声道码CM对应的局部解码信号的单元,在左声道信号减法部130中,代替降混信号xM(1)、xM(2)、...、xM(T),与专利文献1等以往的编码装置同样地使用单声道编码的局部解码信号亦即量化完毕的降混信号^xM(1)、^xM(2)、...、^xM(T)来获得左声道差分信号。
[右声道减法增益估计部140]
向右声道减法增益估计部140输入:输入到编码装置100的右声道的输入声音信号xR(1)、xR(2)、...、xR(T)和降混部110输出的降混信号xM(1)、xM(2)、...、xM(T)。右声道减法增益估计部140从输入的右声道的输入声音信号和降混信号获得右声道减法增益β和右声道减法增益码Cβ并输出,该右声道减法增益码是表示右声道减法增益β的码(步骤S140)。右声道减法增益估计部140通过在专利文献1中求出振幅比g的方法、对该振幅比g进行编码的方法中所例示的公知方法、或者新提出的基于使量化误差最小化的原理的方法,来求出右声道减法增益β和右声道减法增益码Cβ。关于使量化误差最小化的原理和基于该原理的方法,后述说明。
[右声道信号减法部150]
向右声道信号减法部150输入:输入到编码装置100的右声道的输入声音信号xR(1)、xR(2)、...、xR(T)、降混部110输出的降混信号xM(1)、xM(2)、...、xM(T)以及右声道减法增益估计部140输出的右声道减法增益β。右声道信号减法部150,按照对应的每个样本t,获得基于将降混信号的样本值xM(t)和右声道减法增益β相乘后的值β×xM(t)从右声道的输入声音信号的样本值xR(t)减去而得到的值xR(t)-β×xM(t)的序列,作为右声道差分信号yR(1)、yR(2)、...、yR(T),并进行输出(步骤S150)。即,yR(t)=xR(t)-β×xM(t)。在右声道信号减法部150中,与左声道信号减法部130同样地,为了在编码装置100中不需要用于获得局部解码信号的延迟、运算处理量,可以使用降混部110得到的未被量化的降混信号xM(t),而不是使用单声道编码的局部解码信号亦即量化完毕的降混信号。但是,在右声道减法增益估计部140不是通过基于使量化误差最小化的原理的方法而是通过专利文献1所例示的公知方法来获得右声道减法增益β的情况下,也可以是,在编码装置100的单声道编码部160的后级或者单声道编码部160内具备获得与单声道码CM对应的局部解码信号的单元,与左声道信号减法部130同样地,在右声道信号减法部150中,代替降混信号xM(1)、xM(2)、...、xM(T),而与专利文献1等的以往的编码装置同样地,使用单声道编码的局部解码信号亦即量化完毕的降混信号^xM(1)、^xM(2)、...、^xM(T)来获得右声道差分信号。
[单声道编码部160]
向单声道编码部160输入:降混部110输出的降混信号xM(1)、xM(2)、...、xM(T)。单声道编码部160通过规定的编码方式以bM比特对输入的降混信号进行编码,获得单声道码CM,并进行输出(步骤S160)。即,从输入的T个样本的降混信号xM(1)、xM(2)、...、xM(T)获得bM比特的单声道码CM,并进行输出。作为编码方式,可以使用任何的方式,例如使用3GPPEVS标准那样的编码方式即可。
[立体声编码部170]
向立体声编码部170输入:左声道信号减法部130输出的左声道差分信号yL(1)、yL(2)、...、yL(T)和右声道信号减法部150输出的右声道差分信号yR(1)、yR(2)、...、yR(T)。立体声编码部170通过规定的编码方式以合计bs比特对输入的左声道差分信号和右声道差分信号进行编码,获得立体声码CS并输出(步骤S170)。即,从输入的T个样本的左声道差分信号yL(1)、yL(2)、...、yL(T)和输入的T个样本的右声道差分信号yR(1)、yR(2)、...、yR(T)获得合计bS比特的立体声码CS,并进行输出。作为编码方式,可以使用任何的方式,例如可以使用与MPEG-4AAC标准的立体声解码方式对应的立体声编码方式,也可以使用分别对输入的左声道差分信号和右声道差分信号独立进行编码的方式,只要将通过编码得到的码全部合在一起而得的码,设为立体声码CS即可。
在分别对输入的左声道差分信号和右声道差分信号独立进行编码的情况下,立体声编码部170以bL比特对左声道差分信号进行编码,以bR比特对右声道差分信号进行编码。即,立体声编码部170从输入的T个样本的左声道差分信号yL(1)、yL(2)、...、yL(T)获得bL比特的左声道差分码CL,从输入的T个样本的右声道差分信号yR(1)、yR(2)、...、yR(T)获得bR比特的右声道差分码CR,将左声道差分码CL和右声道差分码CR合在一起而得的码作为立体声码CS输出。此处,bL比特与bR比特的合计为bS比特。
在一个编码方式中将输入的左声道差分信号和右声道差分信号合在一起编码的情况下,立体声编码部170以合计bS比特对左声道差分信号和右声道差分信号进行编码。即,立体声编码部170从输入的T个样本的左声道差分信号yL(1)、yL(2)、...、yL(T)和输入的T个样本的右声道差分信号yR(1)、yR(2)、...、yR(T)获得bS比特的立体声码CS并输出。
《解码装置200》
如图3所示那样,参考方式的解码装置200包括:单声道解码部210、立体声解码部220、左声道减法增益解码部230、左声道信号加法部240、右声道减法增益解码部250以及右声道信号加法部260。解码装置200按照与对应的编码装置100相同的时间长度的帧单位对输入的单声道码CM、左声道减法增益码Cα、右声道减法增益码Cβ以及立体声码CS进行解码,获得帧单位的2声道立体声的时间区域的解码声音信号(后述的左声道解码声音信号和右声道解码声音信号)并输出。如图3中虚线所示,解码装置200也可以输出单声道的时间区域的解码声音信号(后述的单声道解码声音信号)。解码装置200所输出的解码声音信号例如通过被进行DA转换,并利用扬声器再生,从而能够听到。解码装置200针对各帧进行图4所例示的步骤S210~步骤S260的处理。
[单声道解码部210]
向单声道解码部210输入:输入到解码装置200的单声道码CM。单声道解码部210通过规定的解码方式对输入的单声道码CM进行解码,获得单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)并输出(步骤S210)。作为规定的解码方式,使用与在对应的编码装置100的单声道编码部160中所使用的编码方式对应的解码方式。单声道码CM的比特数为bM
[立体声解码部220]
向立体声解码部220输入:输入到解码装置200的立体声码CS。立体声解码部220通过规定的解码方式对输入的立体声码CS进行解码,获得左声道解码差分信号^yL(1)、^yL(2)、...、^yL(T)和右声道解码差分信号^yR(1)、^yR(2)、...、^yR(T),并进行输出(步骤S220)。作为规定的解码方式,使用与在对应的编码装置100的立体声编码部170中所使用的编码方式对应的解码方式。立体声码CS的合计比特数为bS
[左声道减法增益解码部230]
向左声道减法增益解码部230输入:输入到解码装置200的左声道减法增益码Cα。左声道减法增益解码部230对左声道减法增益码Cα进行解码,获得左声道减法增益α并输出(步骤S230)。左声道减法增益解码部230通过与在对应的编码装置100的左声道减法增益估计部120中所使用的方法对应的解码方法,对左声道减法增益码Cα进行解码,来获得左声道减法增益α。在对应的编码装置100的左声道减法增益估计部120通过基于使量化误差最小化的原理的方法得到左声道减法增益α和左声道减法增益码Cα的情况下的、左声道减法增益解码部230对左声道减法增益码Cα进行解码来获得左声道减法增益α的方法,后文进行说明。
[左声道信号加法部240]
向左声道信号加法部240输入:单声道解码部210输出的单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)、立体声解码部220输出的左声道解码差分信号^yL(1)、^yL(2)、...、^yL(T)以及左声道减法增益解码部230输出的左声道减法增益α。左声道信号加法部240按照对应的每个样本t,获得基于将单声道解码声音信号的样本值^xM(t)与左声道减法增益α相乘后的值α×^xM(t),与左声道解码差分信号的样本值^yL(t)相加而得到的值^yL(t)+α×^xM(t)的序列,作为左声道解码声音信号^xL(1)、^xL(2)、...、^xL(T),并输出(步骤S240)。即,^xL(t)=^yL(t)+α×^xM(t)。
[右声道减法增益解码部250]
向右声道减法增益解码部250输入:输入到解码装置200的右声道减法增益码Cβ。右声道减法增益解码部250对右声道减法增益码Cβ进行解码,获得右声道减法增益β并输出(步骤S250)。右声道减法增益解码部250通过与对应的编码装置100的右声道减法增益估计部140中所使用的方法对应的解码方法,对右声道减法增益码Cβ进行解码来获得右声道减法增益β。对应的编码装置100的右声道减法增益估计部140通过基于使量化误差最小化的原理的方法得到右声道减法增益β和右声道减法增益码Cβ的情况下的、右声道减法增益解码部250对右声道减法增益码Cβ进行解码来获得右声道减法增益β的方法,后文进行说明。
[右声道信号加法部260]
向右声道信号加法部260输入:单声道解码部210输出的单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)、立体声解码部220输出的右声道解码差分信号^yR(1)、^yR(2)、...、^yR(T)以及右声道减法增益解码部250输出的右声道减法增益β。右声道信号加法部260按照对应的每个样本t,获得基于将单声道解码声音信号的样本值^xM(t)与右声道减法增益β相乘后的值β×^xM(t),与右声道解码差分信号的样本值^yR(t)相加而得到的值^yR(t)+β×^xM(t)的序列,作为右声道解码声音信号^xR(1)、^xR(2)、...、^xR(T),并输出(步骤S260)。即,^xR(t)=^yR(t)+β×^xM(t)。
〔使量化误差最小化的原理〕
以下,对使量化误差最小化的原理进行说明。在立体声编码部170中将输入的左声道差分信号和右声道差分信号在一个编码方式中合在一起编码的情况下,左声道差分信号的编码中所使用的比特数bL和右声道差分信号的编码中所使用的比特数bR可能无法明确地被确定,但以下,设为左声道差分信号的编码中所使用的比特数为bL,右声道差分信号的编码中所使用的比特数为bR,进行说明。另外,以下,主要对左声道进行说明,但右声道也是同样的。
上述编码装置100以bL比特,对由将降混信号xM(1)、xM(2)、...、xM(T)的各样本值乘以左声道减法增益α得到的值从左声道的输入声音信号xL(1)、xL(2)、...、xL(T)的各样本值减去后而得到的值所构成的左声道差分信号yL(1)、yL(2)、...、yL(T)进行编码,以bM比特对降混信号xM(1)、xM(2)、...、xM(T)进行编码。另外,上述的解码装置200在从bL比特的码而解码左声道解码差分信号^yL(1)、^yL(2)、...、^yL(T)(以下,也称为“量化完毕左声道差分信号”),从bM比特的码而解码单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)(以下,也称为“量化完毕降混信号”)后,将通过解码得到的量化完毕降混信号^xM(1)、^xM(2)、...、^xM(T)的各样本值乘以左声道减法增益α得到的值与通过解码得到的量化完毕左声道差分信号^yL(1)、^yL(2)、...、^yL(T)的各样本值相加,从而获得左声道的解码声音信号亦即左声道解码声音信号^xL(1)、^xL(2)、...、^xL(T)。编码装置100以及解码装置200应设计成,通过上述的处理而获得的左声道的解码声音信号所具有的量化误差的能量变小。
大多数情况下,对输入信号进行编码/解码获得的解码信号具有的量化误差(以下,为了便于说明而称为“由于编码而产生的量化误差”)的能量与输入信号的能量大致成比例,并相对于编码中所使用的每个样本的比特数的值呈指数地变小的趋势。因此,左声道差分信号的由于编码而产生的量化误差的每个样本的平均能量,能够使用正的数σL 2如下述的式(1-0-1)那样进行估计,降混信号的由于编码而产生的量化误差的每个样本的平均能量能够使用正的数σM 2如下述的式(1-0-2)那样进行估计。
[数学式1]
Figure BDA0003831849340000131
[数学式2]
Figure BDA0003831849340000132
此处,假设各样本值成为接近的值,以至于左声道的输入声音信号xL(1)、xL(2)、...、xL(T)和降混信号xM(1)、xM(2)、...、xM(T)视为相同的序列。例如,左声道的输入声音信号xL(1)、xL(2)、...、xL(T)和右声道的输入信号xR(1)、xR(2)、...、xR(T)是在背景噪音、回音不多的环境下,对处于与2个麦克风等距离的音源发出的声音进行拾音得到的信号的情形等,相当于该条件。在该条件下,左声道差分信号yL(1)、yL(2)、...、yL(T)的各样本值等效于将降混信号xM(1)、xM(2)、...、xM(T)的各样本值乘以(1-α)得到的值。因此,由于用降混信号的能量的(1-α)2倍表现左声道差分信号的能量,所以上述的σL 2能够使用上述的σM 2而置换为(1-α)2×σM 2,因此左声道差分信号的由于编码而产生的量化误差的每个样本的平均能量能够如下述的式(1-1)那样进行估计。
[数学式3]
Figure BDA0003831849340000133
另外,在解码装置中与量化完毕左声道差分信号相加的信号所具有的量化误差的每个样本的平均能量,即,将通过解码得到的量化完毕降混信号的各样本值与左声道减法增益α相乘而得到的值的序列所具有的量化误差的每个样本的平均能量,能够如下述的式(1-2)那样进行估计。
[数学式4]
Figure BDA0003831849340000134
如果假定左声道差分信号的由于编码而产生的量化误差、和将通过解码得到的量化完毕降混信号的各样本值乘以左声道减法增益α而得到的值的序列所具有的量化误差相互不具有相关性,则左声道的解码声音信号所具有的量化误差的每个样本的平均能量能够用式(1-1)和式(1-2)的和来进行估计。如下述的式(1-3)那样,求出使左声道的解码声音信号所具有的量化误差的能量最小化的左声道减法增益α。
[数学式5]
Figure BDA0003831849340000141
换句话说,在各样本值成为接近的值以至于左声道的输入声音信号xL(1)、xL(2)、...、xL(T)和降混信号xM(1)、xM(2)、...、xM(T)视为相同的序列的条件中,为了使左声道的解码声音信号具有的量化误差最小化,左声道减法增益估计部120通过式(1-3)求出左声道减法增益α即可。通过式(1-3)获得的左声道减法增益α是大于0且小于1的值,在二者的编码所使用的比特数亦即bL与bM相等时,为0.5,用于对左声道差分信号进行编码的比特数bL越是大于用于对降混信号进行编码的比特数bM,则是与0.5相比越靠近0的值,用于对降混信号进行编码的比特数bM越是大于用于对左声道差分信号进行编码的比特数bL,则是与0.5相比越靠近1的值。
右声道也是同样的,在各样本值成为接近的值以至于右声道的输入声音信号xR(1)、xR(2)、...、xR(T)和降混信号xM(1)、xM(2)、...、xM(T)视为同一序列的条件中,为了使右声道的解码声音信号具有的量化误差最小化,右声道减法增益估计部140通过下述的式(1-3-2)求出右声道减法增益β即可。
[数学式6]
Figure BDA0003831849340000142
通过式(1-3-2)获得的右声道减法增益β是大于0且小于1的值,在二者的编码所使用的比特数亦即bR与bM相等时,为0.5,用于对右声道差分信号进行编码的比特数bR越是大于用于对降混信号进行编码的比特数bM,则是与0.5相比越靠近0的值,用于对降混信号进行编码的比特数bM越是大于用于对右声道差分信号进行编码的比特数bR,则是与0.5相比越靠近1的值。
接下来,对也包括左声道的输入声音信号xL(1)、xL(2)、...、xL(T)和降混信号xM(1)、xM(2)、...、xM(T)不视为同一序列的情况的、使左声道的解码声音信号具有的量化误差的能量最小化的原理进行说明。
左声道的输入声音信号xL(1)、xL(2)、...、xL(T)和降混信号xM(1)、xM(2)、...、xM(T)的被归一化的内积值rL由下述的式(1-4)表示。
[数学式7]
Figure BDA0003831849340000151
通过式(1-4)获得的归一化的内积值rL是实数值,在降混信号xM(1)、xM(2)、...、xM(T)的各样本值乘以实数值rL'来得到样本值的序列rL'×xM(1)、rL'×xM(2)、...、rL'×xM(T)时,是与通过所得到的样本值的序列与左声道的输入声音信号的各样本值的差分而获得的序列xL(1)-rL'×xM(1)、xL(2)-rL'×xM(2)、...、xL(T)-rL'×xM(T)的能量成为最小的实数值rL'相同的值。
左声道的输入声音信号xL(1)、xL(2)、...、xL(T)能够针对各样本编号t,分解为xL(t)=rL×xM(t)+(xL(t)-rL×xM(t))。此处,如果将由xL(t)-rL×xM(t)的各值构成的序列设为正交信号xL’(1)、xL’(2)、...、xL’(T),则根据该分解,关于左声道差分信号的各样本值yL(t)=xL(t)-αxM(t),等效于将降混信号xM(1)、xM(2)、...、xM(T)的各样本值xM(t)乘以使用了归一化的内积值rL和左声道减法增益α的(rL-α)得到的值(rL-α)×xM(t)再与正交信号的各样本值xL’(t)的和即(rL-α)×xM(t)+xL’(t)。正交信号xL’(1)、xL’(2)、...、xL’(T)针对降混信号xM(1)、xM(2)、...、xM(T)显示出正交性,换句话说,显示出内积为0的性质,所以左声道差分信号的能量通过对降混信号的能量进行(rL-α)2倍的处理而得的能量与正交信号的能量的和,来表示。因此,由于以bL比特对左声道差分信号进行编码而产生的量化误差的每个样本的平均能量,能够使用正的数σ2如下述的式(1-5)那样进行估计。
[数学式8]
Figure BDA0003831849340000152
若假定为左声道差分信号的由于编码而产生的量化误差、与将通过解码得到的量化完毕降混信号的各样本值乘以左声道减法增益α得到的值的序列所具有的量化误差,相互不具有相关性,则左声道的解码声音信号具有的量化误差的每个样本的平均能量通过式(1-5)和式(1-2)的和来进行估计。使左声道的解码声音信号具有的量化误差的能量最小化的左声道减法增益α如下述的式(1-6)那样求出。
[数学式9]
Figure BDA0003831849340000153
换句话说,为了使左声道的解码声音信号具有的量化误差最小化,左声道减法增益估计部120通过式(1-6)求出左声道减法增益α即可。即,若考虑使该量化误差的能量最小化的原理,则关于左声道减法增益α,应当使用将归一化的内积值rL和由编码所使用的比特数亦即bL和bM而决定的值亦即修正系数相乘得到的值。该修正系数是大于0且小于1的值,在用于对左声道差分信号进行编码的比特数bL和用于对降混信号进行编码的比特数bM相同时,为0.5,用于对左声道差分信号进行编码的比特数bL越是大于用于对降混信号进行编码的比特数bM,则与0.5相比越接近0,用于对左声道差分信号进行编码的比特数bL越是小于用于对降混信号进行编码的比特数bM,则是与0.5相比越靠近1的值。
右声道也是同样的,为了使右声道的解码声音信号具有的量化误差最小化,右声道减法增益估计部140通过下述的式(1-6-2)求出右声道减法增益β即可。
[数学式10]
Figure BDA0003831849340000161
此处,rR是右声道的输入声音信号xR(1)、xR(2)、...、xR(T)和降混信号xM(1)、xM(2)、...、xM(T)的被归一化的内积值,由下述的式(1-4-2)表示。
[数学式11]
Figure BDA0003831849340000162
即,若考虑使该量化误差的能量最小化的原理,则关于右声道减法增益β,应当使用将归一化的内积值rR与由编码中所使用的比特数亦即bR和bM而决定的值亦即修正系数相乘而得到的值。该修正系数是大于0且小于1的值,用于对右声道差分信号进行编码的比特数bR越是大于用于对降混信号进行编码的比特数bM,则与0.5相比越靠近0,用于对右声道差分信号进行编码的比特数越是少于用于对降混信号进行编码的比特数,则是与0.5相比越靠近1的值。
〔基于使量化误差最小化的原理的减法增益的估计和解码〕
对基于上述的使量化误差最小化的原理的减法增益的估计和解码的具体例进行说明。在各例子中,对在编码装置100中进行减法增益的估计的左声道减法增益估计部120和右声道减法增益估计部140、在解码装置200中进行减法增益的解码的左声道减法增益解码部230和右声道减法增益解码部250进行说明。
〔〔例子1〕〕
例子1是基于也包括左声道的输入声音信号xL(1)、xL(2)、...、xL(T)和降混信号xM(1)、xM(2)、...、xM(T)不视为同一序列的情况下的使左声道的解码声音信号具有的量化误差的能量最小化的原理、以及也包括右声道的输入声音信号xR(1)、xR(2)、...、xR(T)和降混信号xM(1)、xM(2)、...、xM(T)不视为同一序列的情况下的使右声道的解码声音信号具有的量化误差的能量最小化的原理的情况。
〔〔〔左声道减法增益估计部120〕〕〕
在左声道减法增益估计部120中预先存储有多组(A组,a=1、...、A)的左声道减法增益的候选αcand(a)与该候选所对应的码Cαcand(a)的组。左声道减法增益估计部120进行图5所示的以下的步骤S120-11至步骤S120-14。
左声道减法增益估计部120首先从输入的左声道的输入声音信号xL(1)、xL(2)、...、xL(T)和降混信号xM(1)、xM(2)、...、xM(T),通过式(1-4),获得对于降混信号的左声道的输入声音信号的被归一化的内积值rL(步骤S120-11)。另外,左声道减法增益估计部120使用立体声编码部170中左声道差分信号yL(1)、yL(2)、...、yL(T)的编码中所使用的比特数bL、单声道编码部160中降混信号xM(1)、xM(2)、...、xM(T)的编码中所使用的比特数bM、以及每帧的样本数T,通过下述的式(1-7)获得左声道修正系数cL(步骤S120-12)。
[数学式12]
Figure BDA0003831849340000171
左声道减法增益估计部120接下来获得将在步骤S120-11所得到的归一化的内积值rL和在步骤S120-12所得到的左声道修正系数cL相乘后的值(步骤S120-13)。左声道减法增益估计部120接下来获得存储的左声道减法增益的候选αcand(1)、...、αcand(A)中的最接近在步骤S120-13所得到的乘法值cL×rL的候选(乘法值cL×rL的量化值),作为左声道减法增益α,并获得存储的码Cαcand(1)、...、Cαcand(A)中的与左声道减法增益α对应的码,作为左声道减法增益码Cα(步骤S120-14)。
此外,立体声编码部170中左声道差分信号yL(1)、yL(2)、...、yL(T)的编码中所使用的比特数bL无法明确地确定的情况下,将立体声编码部170输出的立体声码CS的比特数bs的二分之一(即,bs/2)用作比特数bL即可。另外,左声道修正系数cL可以并不是通过式(1-7)其本身获得的值,而是大于0且小于1的值,在左声道差分信号yL(1)、yL(2)、...、yL(T)的编码所使用的比特数bL与降混信号xM(1)、xM(2)、...、xM(T)的编码所使用的比特数bM相同时,为0.5,比特数bL越是大于比特数bM,则与0.5相比越靠近0,比特数bL越是小于比特数bM,则为与0.5相比越靠近1的值。这些在后述的各例中也是同样的。
〔〔〔右声道减法增益估计部140〕〕〕
在右声道减法增益估计部140中预先存储有多组(B组,b=1、...、B)的右声道减法增益的候选βcand(b)与该候选所对应的码Cβcand(b)的组。右声道减法增益估计部140进行图5所示的以下的步骤S140-11至步骤S140-14。
右声道减法增益估计部140首先从输入的右声道的输入声音信号xR(1)、xR(2)、...、xR(T)和降混信号xM(1)、xM(2)、...、xM(T),通过式(1-4-2),获得对于降混信号的右声道的输入声音信号的被归一化的内积值rR(步骤S140-11)。另外,右声道减法增益估计部140使用立体声编码部170中右声道差分信号yR(1)、yR(2)、...、yR(T)的编码中所使用的比特数bR、单声道编码部160中降混信号xM(1)、xM(2)、...、xM(T)的编码中所使用的比特数bM以及每帧的样本数T,通过下述的式(1-7-2)获得右声道修正系数cR(步骤S140-12)。
[数学式13]
Figure BDA0003831849340000181
右声道减法增益估计部140接下来获得将在步骤S140-11所得到的归一化的内积值rR和在步骤S140-12所得到的右声道修正系数cR相乘后的值(步骤S140-13)。右声道减法增益估计部140接下来获得存储的右声道减法增益的候选βcand(1)、...、βcand(B)中的最接近在步骤S140-13所得到的乘法值cR×rR的候选(乘法值cR×rR的量化值),作为右声道减法增益β,获得存储的码Cβcand(1)、...、Cβcand(B)中的与右声道减法增益β对应的码,作为右声道减法增益码Cβ(步骤S140-14)。
此外,立体声编码部170中右声道差分信号yR(1)、yR(2)、...、yR(T)的编码中所使用的比特数bR无法明确地被确定的情况下,将立体声编码部170输出的立体声码CS的比特数bs的二分之一(即,bs/2)用作比特数bR即可。另外,右声道修正系数cR可以不是通过式(1-7-2)其本身获得的值,而是大于0且小于1的值,在右声道差分信号yR(1)、yR(2)、...、yR(T)的编码所使用的比特数bR与降混信号xM(1)、xM(2)、...、xM(T)的编码所使用的比特数bM相同时,为0.5,比特数bR越是大于比特数bM,则与0.5相比越靠近0,比特数bR越是小于比特数bM,则为与0.5相比越靠近1的值。这些在后述的各例子中也是同样的。
〔〔〔左声道减法增益解码部230〕〕〕
在左声道减法增益解码部230中,与对应的编码装置100的左声道减法增益估计部120中所存储的相同地,预先存储有多组(A组,a=1、...、A)的左声道减法增益的候选αcand(a)与该候选所对应的码Cαcand(a)的组。左声道减法增益解码部230获得存储的码Cαcand(1)、...、Cαcand(A)中的与输入的左声道减法增益码Cα对应的左声道减法增益的候选,作为左声道减法增益α(步骤S230-11)。
〔〔〔右声道减法增益解码部250〕〕〕
在右声道减法增益解码部250中,与对应的编码装置100的右声道减法增益估计部140中所存储的相同地,预先存储有多组(B组,b=1、...、B)的右声道减法增益的候选βcand(b)与该候选所对应的码Cβcand(b)的组。右声道减法增益解码部250获得存储的码Cβcand(1)、...、Cβcand(B)中的与输入的右声道减法增益码Cβ对应的右声道减法增益的候选,作为右声道减法增益β(步骤S250-11)。
此外,在左声道和右声道中使用相同的减法增益的候选、码即可,可以将上述的A和B设为相同的值,并使左声道减法增益估计部120和左声道减法增益解码部230中所存储的左声道减法增益的候选αcand(a)与该候选所对应的码Cαcand(a)的组、和右声道减法增益估计部140和右声道减法增益解码部250中所存储的右声道减法增益的候选βcand(b)与该候选所对应的码Cβcand(b)的组相同。
〔〔例子1的变形例〕〕
由于在编码装置100中左声道差分信号的编码所使用的比特数bL是在解码装置200中左声道差分信号的解码所使用的比特数,且在编码装置100中降混信号的编码所使用的比特数bM的值是在解码装置200中降混信号的解码所使用的比特数,所以对于修正系数cL,不管编码装置100还是解码装置200都能够计算出相同的值。因此,可以将归一化的内积值rL设为编码和解码的对象,将在编码装置100和解码装置200中被归一化的内积值的量化值^rL乘以修正系数cL来获得左声道减法增益α。右声道也是同样的。将该方式作为例子1的变形例进行说明。
〔〔〔左声道减法增益估计部120〕〕〕
在左声道减法增益估计部120中预先存储有多组(A组,a=1、...、A)的左声道的被归一化的内积值的候选rLcand(a)与该候选所对应的码Cαcand(a)的组。如图6所示那样,左声道减法增益估计部120进行在例子1中也说明了的步骤S120-11和步骤S120-12以及下述的步骤S120-15和步骤S120-16。
左声道减法增益估计部120首先与例子1的左声道减法增益估计部120的步骤S120-11同样地,从输入的左声道的输入声音信号xL(1)、xL(2)、...、xL(T)和降混信号xM(1)、xM(2)、...、xM(T),通过式(1-4)获得对降混信号的左声道的输入声音信号的归一化的内积值rL(步骤S120-11)。左声道减法增益估计部120接下来获得存储的左声道的被归一化的内积值的候选rLcand(1)、...、rLcand(A)中的最接近在步骤S120-11所得到的归一化的内积值rL的候选(归一化的内积值rL的量化值)^rL,并获得存储的码Cαcand(1)、...、Cαcand(A)中的与该最接近的候选^rL对应的码,作为左声道减法增益码Cα(步骤S120-15)。另外,左声道减法增益估计部120与例子1的左声道减法增益估计部120的步骤S120-12同样地,使用在立体声编码部170中左声道差分信号yL(1)、yL(2)、...、yL(T)的编码所使用的比特数bL、在单声道编码部160中降混信号xM(1)、xM(2)、...、xM(T)的编码所使用的比特数bM以及每帧的样本数T,通过式(1-7)获得左声道修正系数cL(步骤S120-12)。左声道减法增益估计部120接下来获得将步骤S120-15所得到的归一化的内积值的量化值^rL与步骤S120-12所得到的左声道修正系数cL相乘后的值,作为左声道减法增益α(步骤S120-16)。
〔〔〔右声道减法增益估计部140〕〕〕
在右声道减法增益估计部140中预先存储有多组(B组,b=1、...、B)右声道的被归一化的内积值的候选rRcand(b)与该候选所对应的码Cβcand(b)的组。如图6所示那样,右声道减法增益估计部140进行例子1中也说明了的步骤S140-11和步骤S140-12以及下述的步骤S140-15和步骤S140-16。
右声道减法增益估计部140首先与例子1的右声道减法增益估计部140的步骤S140-11同样地,从输入的右声道的输入声音信号xR(1)、xR(2)、...、xR(T)和降混信号xM(1)、xM(2)、...、xM(T),通过式(1-4-2)获得对降混信号的右声道的输入声音信号的归一化的内积值rR(步骤S140-11)。右声道减法增益估计部140接下来获得存储的右声道的被归一化的内积值的候选rRcand(1)、...、rRcand(B)中的最接近在步骤S140-11所得到的归一化的内积值rR的候选(归一化的内积值rR的量化值)^rR,并获得存储的码Cβcand(1)、...、Cβcand(B)中的与该最接近的候选^rR对应的码,作为右声道减法增益码Cβ(步骤S140-15)。另外,右声道减法增益估计部140与例子1的右声道减法增益估计部140的步骤S140-12同样地,使用立体声编码部170中右声道差分信号yR(1)、yR(2)、...、yR(T)的编码所使用的比特数bR、单声道编码部160中降混信号xM(1)、xM(2)、...、xM(T)的编码所使用的比特数bM以及每帧的样本数T,通过式(1-7-2)获得右声道修正系数cR(步骤S140-12)。右声道减法增益估计部140接下来获得将在步骤S140-15所得到的归一化的内积值的量化值^rR与在步骤S140-12所得到的右声道修正系数cR相乘后的值,作为右声道减法增益β(步骤S140-16)。
〔〔〔左声道减法增益解码部230〕〕〕
在左声道减法增益解码部230中,与对应的编码装置100的左声道减法增益估计部120中所存储的相同地,预先存储有多组(A组,a=1、...、A)的左声道的被归一化的内积值的候选rLcand(a)与该候选所对应的码Cαcand(a)的组。左声道减法增益解码部230进行图7所示的以下的步骤S230-12至步骤S230-14。
左声道减法增益解码部230获得存储的码Cαcand(1)、...、Cαcand(A)中的与输入的左声道减法增益码Cα对应的左声道的被归一化的内积值的候选,作为左声道的被归一化的内积值的解码值^rL(步骤S230-12)。另外,左声道减法增益解码部230使用立体声解码部220中左声道解码差分信号^yL(1)、^yL(2)、...、^yL(T)的解码所使用的比特数bL、单声道解码部210中单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)的解码所使用的比特数bM以及每帧的样本数T,通过式(1-7)获得左声道修正系数cL(步骤S230-13)。左声道减法增益解码部230接下来获得将在步骤S230-12所得到的归一化的内积值的解码值^rL与在步骤S230-13所得到的左声道修正系数cL相乘后的值,作为左声道减法增益α(步骤S230-14)。
此外,在立体声码CS为将左声道差分码CL与右声道差分码CR合在一起而得的码的情况下,立体声解码部220中左声道解码差分信号^yL(1)、^yL(2)、...、^yL(T)的解码所使用的比特数bL是指左声道差分码CL的比特数。在立体声解码部220中左声道解码差分信号^yL(1)、^yL(2)、...、^yL(T)的解码所使用的比特数bL无法明确地确定的情况下,将输入至立体声解码部220的立体声码CS的比特数bs的二分之一(即,bs/2)用作比特数bL即可。单声道解码部210中单声道解码声音信号^xM(1),^xM(2)、...、^xM(T)的解码所使用的比特数bM是指单声道码CM的比特数。左声道修正系数cL可以不是通过式(1-7)其本身获得的值,而是大于0且小于1的值,在左声道解码差分信号^yL(1)、^yL(2)、...、^yL(T)的解码所使用的比特数bL与单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)的解码所使用的比特数bM相同时,为0.5,比特数bL越是大于比特数bM,则与0.5相比更靠近0,比特数bL越是小于比特数bM,则为与0.5相比更靠近1的值。
〔〔〔右声道减法增益解码部250〕〕〕
在右声道减法增益解码部250中,与对应的编码装置100的右声道减法增益估计部140中所存储的相同地,预先存储有多组(B组,b=1、...、B)的右声道的归一化的内积值的候选rRcand(b)与该候选所对应的码Cβcand(b)的组。右声道减法增益解码部250进行图7所示的以下的步骤S250-12至步骤S250-14。
右声道减法增益解码部250获得存储的码Cβcand(1)、...、Cβcand(B)中的与输入的右声道减法增益码Cβ对应的右声道的被归一化的内积值的候选,作为右声道的被归一化的内积值的解码值^rR(步骤S250-12)。另外,右声道减法增益解码部250使用立体声解码部220中右声道解码差分信号^yR(1)、^yR(2)、...、^yR(T)的解码所使用的比特数bR、单声道解码部210中单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)的解码所使用的比特数bM以及每帧的样本数T,通过式(1-7-2)获得右声道修正系数cR(步骤S250-13)。右声道减法增益解码部250接下来获得将在步骤S250-12所得到的归一化的内积值的解码值^rR与在步骤S250-13所得到的右声道修正系数cR相乘后的值,作为右声道减法增益β(步骤S250-14)。
此外,在立体声码CS为将左声道差分码CL与右声道差分码CR合在一起而得的码的情况下,立体声解码部220中右声道解码差分信号^yR(1)、^yR(2)、...、^yR(T)的解码所使用的比特数bR是指右声道差分码CR的比特数。在立体声解码部220中右声道解码差分信号^yR(1)、^yR(2)、...、^yR(T)的解码所使用的比特数bR无法明确地被确定的情况下,将输入至立体声解码部220的立体声码CS的比特数bs的二分之一(即,bs/2)用作比特数bR即可。单声道解码部210中单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)的解码所使用的比特数bM是指单声道码CM的比特数。右声道修正系数cR可以不是通过式(1-7-2)其本身获得的值,而是大于0且小于1的值,在右声道解码差分信号^yR(1)、^yR(2)、...、^yR(T)的解码所使用的比特数bR与单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)的解码所使用的比特数bM相同时,为0.5,比特数bR越是大于比特数bM,则与0.5相比更靠近0,比特数bR越是小于比特数bM,则为与0.5相比更靠近1的值。
此外,在左声道和右声道使用相同的归一化的内积值的候选、码即可,可以将上述的A和B设为相同的值,使左声道减法增益估计部120和左声道减法增益解码部230中所存储的左声道的被归一化的内积值的候选rLcand(a)与该候选所对应的码Cαcand(a)的组、和右声道减法增益估计部140和右声道减法增益解码部250中所存储的右声道的被归一化的内积值的候选rRcand(b)与该候选所对应的码Cβcand(b)的组相同。
此外,关于码Cα,由于实际是与左声道减法增益α对应的码、并基于使编码装置100和解码装置200的说明中用语匹配的目的等,而称为左声道减法增益码,但从是表示归一化的内积值的码这一点来看,也可以称为左声道内积码等。码Cβ也是同样的,也可以称为右声道内积码等。
〔〔例子2〕〕
作为例子2,说明使用也考虑到过去的帧的输入值的情况下的值,作为归一化的内积值的例子。严格来说,在例子2中,虽然无法严格保证帧内的最优性,即,左声道的解码声音信号具有的量化误差的能量的最小化和右声道的解码声音信号具有的量化误差的能量的最小化,然而,减少了左声道减法增益α的帧间的急剧的变动和右声道减法增益β的帧间的急剧的变动,从而减少了源于该变动而在解码声音信号中产生的噪声。即,例子2除了减少解码声音信号具有的量化误差的能量之外,还考虑到解码声音信号的听觉质量。
例子2的编码侧,即,左声道减法增益估计部120和右声道减法增益估计部140与例子1不同,但解码侧,即左声道减法增益解码部230和右声道减法增益解码部250与例子1相同。以下,以例子2与例子1不同点为中心进行说明。
〔〔〔左声道减法增益估计部120〕〕〕
如图8所示那样,左声道减法增益估计部120进行下述的步骤S120-111至步骤S120-113和例子1中所说明了的步骤S120-12至步骤S120-14。
左声道减法增益估计部120首先使用输入的左声道的输入声音信号xL(1)、xL(2)、...、xL(T)、输入的降混信号xM(1)、xM(2)、...、xM(T)以及在前一帧中所使用的内积值EL(-1),通过下述的式(1-8)获得在当前的帧中所使用的内积值EL(0)(步骤S120-111)。
[数学式14]
Figure BDA0003831849340000241
此处,εL是大于0且小于1的预先决定的值,并预先存储到左声道减法增益估计部120。此外,左声道减法增益估计部120将得到的内积值EL(0)存储在左声道减法增益估计部120内,以作为“在前一帧中所使用的内积值EL(-1)」而在下一个帧使用。
左声道减法增益估计部120还使用输入的降混信号xM(1)、xM(2)、...、xM(T)和在前一帧中所使用的降混信号的能量EM(-1),通过下述的式(1-9)获得在当前的帧所使用的降混信号的能量EM(0)(步骤S120-112)。
[数学式15]
Figure BDA0003831849340000251
此处,εM是大于0且小于1且预先决定的值,并预先存储到左声道减法增益估计部120。此外,左声道减法增益估计部120将得到的降混信号的能量EM(0)存储在左声道减法增益估计部120内,以便于作为“在前一帧中所使用的降混信号的能量EM(-1)”而在下一个帧使用。
左声道减法增益估计部120接下来使用在步骤S120-111所得到的在当前的帧所使用的内积值EL(0)和在步骤S120-112所得到的在当前的帧所使用的降混信号的能量EM(0),通过下述的式(1-10)获得归一化的内积值rL(步骤S120-113)。
[数学式16]
rL=EL(0)/EM(0)…(1-10)
左声道减法增益估计部120还进行步骤S120-12,接下来,代替在步骤S120-11所得到的归一化的内积值rL而使用在上述的步骤S120-113所得到的归一化的内积值rL进行步骤S120-13,并且进行步骤S120-14。
此外,上述的εL以及εM越接近1,则归一化的内积值rL越容易包含过去的帧的左声道的输入声音信号和降混信号的影响,且归一化的内积值rL、通过归一化的内积值rL获得的左声道减法增益α的帧间的变动变得越小。
〔〔〔右声道减法增益估计部140〕〕〕
如图8所示那样,右声道减法增益估计部140进行以下的步骤S140-111至步骤S140-113和在例子1中说明的步骤S140-12至步骤S140-14。
右声道减法增益估计部140首先使用输入的右声道的输入声音信号xR(1)、xR(2)、...、xR(T)、输入的降混信号xM(1)、xM(2)、...、xM(T)以及在前一帧所使用的内积值ER(-1),通过下述的式(1-8-2)获得在当前的帧所使用的内积值ER(0)(步骤S140-111)。
[数学式17]
Figure BDA0003831849340000252
此处,εR是大于0且小于1的预先决定的值,并预先存储到右声道减法增益估计部140。此外,右声道减法增益估计部140将得到的内积值ER(0)存储在右声道减法增益估计部140内,以作为“在前一帧所使用的内积值ER(-1)”而在下一个帧使用。
右声道减法增益估计部140还使用输入的降混信号xM(1)、xM(2)、...、xM(T)和在前一帧所使用的降混信号的能量EM(-1),通过式(1-9)获得在当前的帧所使用的降混信号的能量EM(0)(步骤S140-112)。右声道减法增益估计部140将得到的降混信号的能量EM(0)存储在右声道减法增益估计部140内,以作为“在前一帧所使用的降混信号的能量EM(-1)”而在下一个帧使用。此外,在左声道减法增益估计部120中也通过式(1-9)获得在当前的帧所使用的降混信号的能量EM(0),所以,可以设为仅进行左声道减法增益估计部120进行的步骤S120-112和右声道减法增益估计部140进行的步骤S140-112这二者中的任意一方。
右声道减法增益估计部140接下来使用在步骤S140-111所得到的在当前的帧所使用的内积值ER(0)和在步骤S140-112所得到的在当前的帧所使用的降混信号的能量EM(0),通过下述的式(1-10-2)获得归一化的内积值rR(步骤S140-113)。
[数学式18]
rR=ER(0)/EM(0)…(1-10-2)
右声道减法增益估计部140还进行步骤S140-12,接下来,代替在步骤S140-11所得到的归一化的内积值rR而使用在上述的步骤S140-113所得到的归一化的内积值rR进行步骤S140-13,并且进行步骤S140-14。
此外,上述的εR以及εM越接近1,则归一化的内积值rR越容易包含过去的帧的右声道的输入声音信号和降混信号的影响,且归一化的内积值rR、通过归一化的内积值rR获得的右声道减法增益β的帧间的变动变得越小。
〔〔例子2的变形例〕〕
关于例子2,也能够进行与针对例子1的例子1变形例同样的变形。将该方式作为例子2的变形例进行说明。例子2的变形例的编码侧,即,左声道减法增益估计部120和右声道减法增益估计部140与例子1的变形例不同,但解码侧,即左声道减法增益解码部230和右声道减法增益解码部250与例子1的变形例相同。关于例子2的变形例与例子1的变形例的不同点,与例子2同样,所以,以下对于例子2的变形例,适当地参照例子1的变形例和例子2进行说明。
〔〔〔左声道减法增益估计部120〕〕〕
在左声道减法增益估计部120中,与例子1的变形例的左声道减法增益估计部120同样地,预先存储有多组(A组,a=1、...、A)的左声道的被归一化的内积值的候选rLcand(a)与该候选所对应的码Cαcand(a)的组。如图9所示那样,左声道减法增益估计部120进行与例子2相同的步骤S120-111~步骤S120-113、与例子1的变形例相同的步骤S120-12、步骤S120-15以及步骤S120-16。具体而言,如以下那样。
左声道减法增益估计部120首先使用输入的左声道的输入声音信号xL(1)、xL(2)、...、xL(T)、输入的降混信号xM(1)、xM(2)、...、xM(T)以及在前一帧所使用的内积值EL(-1),通过式(1-8)获得在当前的帧所使用的内积值EL(0)(步骤S120-111)。左声道减法增益估计部120还使用输入的降混信号xM(1)、xM(2)、...、xM(T)和在前一帧所使用的降混信号的能量EM(-1),通过式(1-9),获得在当前的帧所使用的降混信号的能量EM(0)(步骤S120-112)。左声道减法增益估计部120接下来使用在步骤S120-111所得到的在当前的帧所使用的内积值EL(0)和在步骤S120-112所得到的在当前的帧所使用的降混信号的能量EM(0),通过式(1-10)获得归一化的内积值rL(步骤S120-113)。左声道减法增益估计部120接下来获得存储的左声道的被归一化的内积值的候选rLcand(1)、...、rLcand(A)中的最接近在步骤S120-113所得到的归一化的内积值rL的候选(归一化的内积值rL的量化值)^rL,并获得存储的码Cαcand(1)、...、Cαcand(A)中的与该最接近的候选^rL对应的码,作为左声道减法增益码Cα(步骤S120-15)。另外,左声道减法增益估计部120使用立体声编码部170中左声道差分信号yL(1)、yL(2)、...、yL(T)的编码所使用的比特数bL、单声道编码部160中降混信号xM(1)、xM(2)、...、xM(T)的编码所使用的比特数bM以及每帧的样本数T,通过式(1-7)获得左声道修正系数cL(步骤S120-12)。左声道减法增益估计部120接下来获得将在步骤S120-15所得到的归一化的内积值的量化值^rL与在步骤S120-12所得到的左声道修正系数cL相乘后的值,作为左声道减法增益α(步骤S120-16)。
〔〔〔右声道减法增益估计部140〕〕〕
在右声道减法增益估计部140中,与例子1的变形例的右声道减法增益估计部140同样地,预先存储有多组(B组,b=1、...、B)的右声道的被归一化的内积值的候选rRcand(b)与该候选所对应的码Cβcand(b)的组。如图9所示那样,右声道减法增益估计部140进行与例子2相同的步骤S140-111~步骤S140-113、与例子1的变形例相同的步骤S140-12、步骤S140-15以及步骤S140-16。具体而言,如以下那样。
右声道减法增益估计部140首先使用输入的右声道的输入声音信号xR(1)、xR(2)、...、xR(T)、输入的降混信号xM(1)、xM(2)、...、xM(T)以及在前一帧所使用的内积值ER(-1),通过式(1-8-2)获得在当前的帧所使用的内积值ER(0)(步骤S140-111)。右声道减法增益估计部140还使用输入的降混信号xM(1)、xM(2)、...、xM(T)和在前一帧所使用的降混信号的能量EM(-1),通过式(1-9)获得在当前的帧所使用的降混信号的能量EM(0)(步骤S140-112)。右声道减法增益估计部140接下来使用在步骤S140-111所得到的在当前的帧所使用的内积值ER(0)和在步骤S140-112所得到的在当前的帧所使用的降混信号的能量EM(0),通过式(1-10-2)获得归一化的内积值rR(步骤S140-113)。右声道减法增益估计部140接下来获得存储的右声道的被归一化的内积值的候选rRcand(1)、...、rRcand(B)中的最接近在步骤S140-113所得到的归一化的内积值rR的候选(归一化的内积值rR的量化值)^rR,并获得存储的码Cβcand(1)、...、Cβcand(B)中的与该最接近的候选^rR对应的码,作为右声道减法增益码Cβ(步骤S140-15)。另外,右声道减法增益估计部140使用立体声编码部170中右声道差分信号yR(1)、yR(2)、...、yR(T)的编码所使用的比特数bR、单声道编码部160中降混信号xM(1)、xM(2)、...、xM(T)的编码所使用的比特数bM以及每帧的样本数T,通过式(1-7-2)获得右声道修正系数cR(步骤S140-12)。右声道减法增益估计部140接下来获得将在步骤S140-15所得到的归一化的内积值的量化值^rR与在步骤S140-12所得到的右声道修正系数cR相乘后的值,作为右声道减法增益β(步骤S140-16)。
〔〔例子3〕〕
例如,存在如下的课题:当左声道的输入声音信号所包含的语音、音乐等声音,和右声道的输入声音信号所包含的语音、音乐等声音不同的情况下,降混信号中可能包含左声道的输入声音信号的成分和右声道的输入声音信号的成分双方,所以,使用越大的值作为左声道减法增益α,则听起来越像在左声道解码声音信号中包含源自原本不应被听到的右声道的输入声音信号的声音;使用越大的值作为右声道减法增益β,则听起来越像在右声道解码声音信号中包含源自原本不应被听到的左声道的输入声音信号的声音。因此,虽然没有严格保证解码声音信号具有的量化误差的能量的最小化,然而考虑听觉质量,可以将左声道减法增益α和右声道减法增益β设为比通过例子1求出的值更小的值。另外,同样地,可以将左声道减法增益α和右声道减法增益β设为比通过例子2求出的值更小的值。
具体而言,对于左声道,在例子1以及例子2中,将归一化的内积值rL与左声道修正系数cL的乘法值cL×rL的量化值,设为左声道减法增益α,但在例子3中,将归一化的内积值rL、左声道修正系数cL以及大于0且小于1的预先决定的值亦即λL的乘法值λL×cL×rL的量化值,设为左声道减法增益α。因此,与例子1、例子2同样地,也可以设为,将乘法值cL×rL作为左声道减法增益估计部120中的编码和左声道减法增益解码部230中的解码的对象,由左声道减法增益码Cα表示乘法值cL×rL的量化值,左声道减法增益估计部120和左声道减法增益解码部230将乘法值cL×rL的量化值和λL相乘来获得左声道减法增益α。或者,也可以将归一化的内积值rL、左声道修正系数cL以及预先决定的值λL的乘法值λL×cL×rL作为左声道减法增益估计部120中的编码和左声道减法增益解码部230中的解码的对象,左声道减法增益码Cα表示乘法值λL×cL×rL的量化值。
同样地,对于右声道,在例子1以及例子2中,将归一化的内积值rR与右声道修正系数cR的乘法值cR×rR的量化值,作为右声道减法增益β,在例子3中,将归一化的内积值rR、右声道修正系数cR以及大于0且小于1的预先决定的值亦即λR的乘法值λR×cR×rR的量化值,作为右声道减法增益β。因此,与例子1、例子2同样地,可以设为,将乘法值cR×rR作为右声道减法增益估计部140中的编码和右声道减法增益解码部250中的解码的对象,右声道减法增益码Cβ表示乘法值cR×rR的量化值,右声道减法增益估计部140和右声道减法增益解码部250将乘法值cR×rR的量化值与λR相乘来获得右声道减法增益β。或者,可以将归一化的内积值rR、左声道修正系数cR以及预先决定的值λR的乘法值λR×cR×rR,作为右声道减法增益估计部140中的编码和右声道减法增益解码部250中的解码的对象,右声道减法增益码Cβ表示乘法值λR×cR×rR的量化值。此外,λR可以设为与λL相同的值。
〔〔例子3的变形例〕〕
如上述那样,对于修正系数cL,不管在编码装置100还是在解码装置200都能够计算出相同的值。因此,与例子1的变形例、例子2的变形例同样地,可以设为,将归一化的内积值rL作为左声道减法增益估计部120中的编码和左声道减法增益解码部230中的解码的对象,左声道减法增益码Cα表示归一化的内积值rL的量化值,左声道减法增益估计部120和左声道减法增益解码部230将归一化的内积值rL的量化值、左声道修正系数cL以及大于0且小于1的预先决定的值亦即λL相乘来获得左声道减法增益α。或者,也可以设为,将归一化的内积值rL和大于0且小于1的预先决定的值亦即λL的乘法值λL×rL作为左声道减法增益估计部120中的编码和左声道减法增益解码部230中的解码的对象,左声道减法增益码Cα表示乘法值λL×rL的量化值,左声道减法增益估计部120和左声道减法增益解码部230将乘法值λL×rL的量化值与左声道修正系数cL相乘来获得左声道减法增益α。
右声道也是同样的,对于修正系数cR,不管在编码装置100还是在解码装置200都能够计算出相同的值。因此,与例子1的变形例、例子2的变形例同样地,可以设为,将归一化的内积值rR作为右声道减法增益估计部140中的编码和右声道减法增益解码部250中的解码的对象,右声道减法增益码Cβ表示归一化的内积值rR的量化值,右声道减法增益估计部140和右声道减法增益解码部250将归一化的内积值rR的量化值、右声道修正系数cR以及大于0且小于1的预先决定的值亦即λR相乘来获得右声道减法增益β。或者,可以设为,将归一化的内积值rR和大于0且小于1的预先决定的值亦即λR的乘法值λR×rR作为右声道减法增益估计部140中的编码和右声道减法增益解码部250中的解码的对象,右声道减法增益码Cβ表示乘法值λR×rR的量化值,右声道减法增益估计部140和右声道减法增益解码部250将乘法值λR×rR的量化值与右声道修正系数cR相乘来获得右声道减法增益β。
〔〔例子4〕〕
产生在例子3的开头部分说明的听觉质量的课题是在左声道的输入声音信号与右声道的输入声音信号的相关性较小时,该课题在左声道的输入声音信号与右声道的输入声音信号的相关性较大时不大会产生。因此,在例子4中,使用左声道的输入声音信号与右声道的输入声音信号的相关系数亦即左右相关系数γ,来代替例子3的预先决定的值,从而左声道的输入声音信号与右声道的输入声音信号的相关性越大,则越优先减小解码声音信号具有的量化误差的能量,左声道的输入声音信号与右声道的输入声音信号的相关性越小,则越优先抑制听觉质量的劣化。
例子4的编码侧与例子1以及例子2不同,但解码侧,即左声道减法增益解码部230和右声道减法增益解码部250与例子1以及例子2相同。以下,对例子4与例子1以及例子2的不同点进行说明。
〔〔〔左右关系信息估计部180〕〕〕
如图1中虚线所示,例子4的编码装置100也包括左右关系信息估计部180。向左右关系信息估计部180输入:输入到编码装置100的左声道的输入声音信号和输入到编码装置100的右声道的输入声音信号。左右关系信息估计部180从输入的左声道的输入声音信号和右声道的输入声音信号获得左右相关系数γ并输出(步骤S180)。
左右相关系数γ是左声道的输入声音信号和右声道的输入声音信号的相关系数,也可以是左声道的输入声音信号的样本列xL(1)、xL(2)、...、xL(T)和右声道的输入声音信号的样本列xR(1)、xR(2)、...、xR(T)的相关系数γ0,也可以是考虑到时间差的相关系数,例如左声道的输入声音信号的样本列与处于与该样本列相比向后错开τ个样本的位置的右声道的输入声音信号的样本列的相关系数γτ
该τ是在假定为对利用配置在某个空间的左声道用的麦克风拾音而得的声音进行AD转换而得到的声音信号为左声道的输入声音信号,对利用配置在该空间的右声道用的麦克风拾音而得的声音进行AD转换而得到的声音信号为右声道的输入声音信号的情况下的、从在该空间主要发出声音的音源到左声道用的麦克风的到达时间、与从该音源到右声道用的麦克风的到达时间之差(所谓的到来时间差)所相当的信息,以下,称为左右时间差。左右时间差τ可以通过公知的任何方法求出,由第1实施方式的左右关系信息估计部181通过说明的方法等求出即可。即,上述的相关系数γτ是从音源到达左声道用的麦克风而被拾音的声音信号、与从该音源到达右声道用的麦克风而被拾音的声音信号的相关系数所相当的信息。
〔〔〔左声道减法增益估计部120〕〕〕
左声道减法增益估计部120,代替步骤S120-13,而获得将步骤S120-11或者步骤S120-113中所得到的归一化的内积值rL、在步骤S120-12所得到的左声道修正系数cL以及在步骤S180所得到的左右相关系数γ相乘后的值(步骤S120-13”)。左声道减法增益估计部120接下来,代替步骤S120-14,而获得存储的左声道减法增益的候选αcand(1)、...、αcand(A)中的最接近在步骤S120-13”所得到的乘法值γ×cL×rL的候选(乘法值γ×cL×rL的量化值),作为左声道减法增益α,并获得存储的码Cαcand(1)、...、Cαcand(A)中的与左声道减法增益α对应的码,作为左声道减法增益码Cα(步骤S120-14”)。
〔〔〔右声道减法增益估计部140〕〕〕
右声道减法增益估计部140代替步骤S140-13而获得将在步骤S140-11或者步骤S140-113所得到的归一化的内积值rR、在步骤S140-12所得到的右声道修正系数cR以及在步骤S180所得到的左右相关系数γ相乘后的值(步骤S140-13”)。右声道减法增益估计部140接下来代替步骤S140-14而获得存储的右声道减法增益的候选βcand(1)、...、βcand(B)中的最接近在步骤S140-13”所得到的乘法值γ×cR×rR的候选(乘法值γ×cR×rR的量化值),作为右声道减法增益β,并获得存储的码Cβcand(1)、...、Cβcand(B)中的与右声道减法增益β对应的码,作为右声道减法增益码Cβ(步骤S140-14”)。
〔〔例子4的变形例〕〕
如上述那样,对于修正系数cL,不管在编码装置100还是在解码装置200都能够计算出相同的值。因此,可以设为,将归一化的内积值rL和左右相关系数γ的乘法值γ×rL作为左声道减法增益估计部120中的编码和左声道减法增益解码部230中的解码的对象,左声道减法增益码Cα表示乘法值γ×rL的量化值,左声道减法增益估计部120和左声道减法增益解码部230将乘法值γ×rL的量化值与左声道修正系数cL相乘来获得左声道减法增益α。
右声道也是同样的,对于修正系数cR,不管在编码装置100还是在解码装置200都能够计算出相同的值。因此,可以设为,将归一化的内积值rR和左右相关系数γ的乘法值γ×rR作为右声道减法增益估计部140中的编码和右声道减法增益解码部250中的解码的对象,右声道减法增益码Cβ表示乘法值γ×rR的量化值,右声道减法增益估计部140和右声道减法增益解码部250将乘法值γ×rR的量化值与右声道修正系数cR相乘来获得右声道减法增益β。
<第1实施方式>
对第1实施方式的编码装置和解码装置进行说明。
《编码装置101》
如图10所示那样,第1实施方式的编码装置101包括降混部110、左声道减法增益估计部120、左声道信号减法部130、右声道减法增益估计部140、右声道信号减法部150、单声道编码部160、立体声编码部170、左右关系信息估计部181以及时间移位部191。第1实施方式的编码装置101与参考方式的编码装置100的不同之处在于:包括左右关系信息估计部181和时间移位部191,并且代替降混部110输出的信号地,左声道减法增益估计部120、左声道信号减法部130、右声道减法增益估计部140以及右声道信号减法部150使用由时间移位部191输出的信号,并且除了上述的各码之外还输出后述的左右时间差码Cτ。第1实施方式的编码装置101的其他结构以及动作与参考方式的编码装置100相同。第1实施方式的编码装置101针对各帧进行图11所例示的步骤S110~步骤S191的处理。以下,对第1实施方式的编码装置101与参考方式的编码装置100不同点进行说明。
[左右关系信息估计部181]
向左右关系信息估计部181输入:输入到编码装置101的左声道的输入声音信号和输入到编码装置101的右声道的输入声音信号。左右关系信息估计部181从输入的左声道的输入声音信号和右声道的输入声音信号获得左右时间差τ和左右时间差码Cτ并输出,该左右时间差码是表示左右时间差τ的码(步骤S181)。
左右时间差τ是在假定为对利用配置在某个空间的左声道用的麦克风而拾音到的声音进行AD转换而得到的声音信号为左声道的输入声音信号,对利用配置在该空间的右声道用的麦克风而拾音到的声音进行AD转换而得到的声音信号为右声道的输入声音信号的情况下的、从在该空间主要发出声音的音源到左声道用的麦克风的到达时间、与从该音源到右声道用的麦克风的到达时间之差(所谓的到来时间差)所相当的信息。此外,不仅到来时间差,较早到达哪个麦克风的信息也包含在左右时间差τ中,所以左右时间差τ设为以任意一方的输入声音信号为基准而取正的值或负的值。即,左右时间差τ是表示相同的声音信号以何种程度更早包含在左声道的输入声音信号和右声道的输入声音信号的哪个信号中的信息。以下,在与右声道的输入声音信号相比,相同的声音信号更早包含在左声道的输入声音信号中的情况下,也称为左声道处于前导,在相同的声音信号在与左声道的输入声音信号相比而更早包含在右声道的输入声音信号中的情况下,也称为右声道处于前导。
左右时间差τ可以通过公知的任何方法求出。例如,左右关系信息估计部181针对预先决定的从τmax到τmin(例如,τmax为正的数,τmin为负的数)的各候选样本数τcand,计算表示左声道的输入声音信号的样本列与处于相比于该样本列而以候选样本数τcand的量向后错开的位置的右声道的输入声音信号的样本列的相关性的大小的值(以下,称为相关值)γcand,获得相关值γcand成为最大的候选样本数τcand作为左右时间差τ。即,在该例子中,在左声道处于前导的情况下,左右时间差τ为正的值,在右声道处于前导的情况下,左右时间差τ为负的值,左右时间差τ的绝对值是表示前导的声道相对于另一方的声道以何种程度处于前导的值(处于前导的样本数)。例如,在仅使用帧内的样本来计算相关值γcand的情况下,在τcand为正的值的情况下,计算右声道的输入声音信号的部分样本列xR(1+τcand)、xR(2+τcand)、...、xR(T)与处于相比于该部分样本列以候选样本数τcand的量向前错开的位置的左声道的输入声音信号的部分样本列xL(1)、xL(2)、...、xL(T-τcand)的相关系数的绝对值,作为相关值γcand,在τcand为负的值的情况下,左声道的输入声音信号的部分样本列xL(1-τcand)、xL(2-τcand)、...、xL(T)与处于相比于该部分样本列以候选样本数-τcand的量向前错开的位置的右声道的输入声音信号的部分样本列xR(1)、xR(2)、...、xR(T+τcand)的相关系数的绝对值,作为相关值γcand即可。当然,为了计算相关值γcand,也可以使用与当前的帧的输入声音信号的样本列连续的过去的输入声音信号的一个以上的样本,此时,以预先决定的帧数的量,将过去的帧的输入声音信号的样本列存储至左右关系信息估计部181内的未图示的存储部即可。
另外,例如,也可以代替相关系数的绝对值,而如以下那样使用信号的相位的信息来计算相关值γcand。在该例子中,左右关系信息估计部181首先如下述的式(3-1)以及式(3-2)那样分别对左声道的输入声音信号xL(1)、xL(2)、...、xL(T)以及右声道的输入声音信号xR(1)、xR(2)、...、xR(T)进行傅里叶变换,从而获得0~T-1的各频率k下的频谱XL(k)以及XR(k)。
[数学式19]
Figure BDA0003831849340000341
[数学式20]
Figure BDA0003831849340000351
左右关系信息估计部181使用得到的频谱XL(k)以及XR(k),通过下述的式(3-3)获得各频率k下的相位差的谱图
Figure BDA0003831849340000356
[数学式21]
Figure BDA0003831849340000352
通过对得到的相位差的谱图进行傅里叶逆变换,从而如下述的式(3-4)那样,针对τmax~τmin的各候选样本数τcand,而获得相位差信号ψ(τcand)。
[数学式22]
Figure BDA0003831849340000353
得到的相位差信号ψ(τcand)的绝对值表示左声道的输入声音信号xL(1)、xL(2)、...、xL(T)以及右声道的输入声音信号xR(1)、xR(2)、...、xR(T)的时间差的似然性所对应的某种相关性,将相对于各候选样本数τcand的该相位差信号ψ(τcand)的绝对值用作相关值γcand。左右关系信息估计部181获得该相位差信号ψ(τcand)的绝对值亦即相关值γcand成为最大的候选样本数τcand作为左右时间差τ。此外,也可以代替保持原样地使用相位差信号ψ(τcand)的绝对值作为相关值γcand这一点,例如对各τcand,使用针对对于相位差信号ψ(τcand)的绝对值的在τcand前后的多个的候选样本数的每一个,而得到的与相位差信号的绝对值的平均的相对差、那样的归一化的值。换句话说,对于各τcand,也可以使用预先决定的正的数τrange,通过下述的式(3-5)获得平均值,并将使用得到的平均值ψccand)和相位差信号ψ(τcand)通过下述的式(3-6)而获得的归一化的相关值用作γcand
[数学式23]
Figure BDA0003831849340000354
[数学式24]
Figure BDA0003831849340000355
此外,通过式(3-6)获得的归一化的相关值是0以上且1以下的值,是表示τcand作为左右时间差而越似然则越接近1,τcand作为左右时间差而越不似然则越接近0的性质的值。
另外,左右关系信息估计部181通过规定的编码方式对左右时间差τ进行编码,获得左右时间差码Cτ即可,该左右时间差码是能够唯一地确定左右时间差τ的码。作为规定的编码方式,使用标量量化等公知编码方式即可。此外,预先决定的各候选样本数可以是从τmax至τmin的各整数值,也可以包括处于τmax至τmin之间的分数值、小数值,也可以不包括处于τmax至τmin之间的任何的整数值。另外,既可以是τmax=-τmin,也可以不是这样。另外,在将任意的声道必须处于前导那样的特殊的输入声音信号作为对象的情况下,可以设为τmax和τmin都为正的数,或者τmax和τmin都为负的数。
此外,在编码装置101进行参考方式中说明的例子4或者例子4的变形例的基于使量化误差最小化的原理的减法增益的估计的情况下,左右关系信息估计部181还将左声道的输入声音信号的样本列与处于相比于该样本列以左右时间差τ的量而向后错开的位置的右声道的输入声音信号的样本列的相关值,即针对从τmax至τmin的各候选样本数τcand而计算出的相关值γcand中的最大值,作为左右相关系数γ,而进行输出(步骤S180)。
[时间移位部191]
向时间移位部191输入:降混部110输出的降混信号xM(1)、xM(2)、...、xM(T)和左右关系信息估计部181输出的左右时间差τ。在左右时间差τ为正的值的情况下(即,左右时间差τ表示左声道处于前导的情况下),时间移位部191将降混信号xM(1)、xM(2)、...、xM(T)保持原样地输出至左声道减法增益估计部120和左声道信号减法部130(即,决定在左声道减法增益估计部120和左声道信号减法部130中使用),并将使降混信号延迟了|τ|个样本(左右时间差τ的绝对值量的样本数、左右时间差τ表示的大小的量的样本数)而得的信号xM(1-|τ|)、xM(2-|τ|)、...、xM(T-|τ|)亦即延迟降混信号xM'(1)、xM'(2)、...、xM'(T),输出至右声道减法增益估计部140和右声道信号减法部150(即,决定在右声道减法增益估计部140和右声道信号减法部150中使用),在左右时间差τ为负的值的情况下(即,左右时间差τ表示右声道处于前导的情况下),将使降混信号延迟了|τ|个样本而得的信号xM(1-|τ|)、xM(2-|τ|)、...、xM(T-|τ|)亦即延迟降混信号xM'(1)、xM'(2)、...、xM'(T)输出至左声道减法增益估计部120和左声道信号减法部130(即,决定在左声道减法增益估计部120和左声道信号减法部130中使用),并将降混信号xM(1)、xM(2)、...、xM(T)保持原样地输出至右声道减法增益估计部140和右声道信号减法部150(即,决定在右声道减法增益估计部140和右声道信号减法部150中使用),在左右时间差τ为0的情况下(即,左右时间差τ表示任何的声道都不处于前导的情况下),将降混信号xM(1)、xM(2)、...、xM(T)保持原样地输出至左声道减法增益估计部120、左声道信号减法部130、右声道减法增益估计部140以及右声道信号减法部150(即,决定在左声道减法增益估计部120、左声道信号减法部130、右声道减法增益估计部140以及右声道信号减法部150中使用)(步骤S191)。即,对于左声道和右声道中的上述的到达时间较短的声道,将输入的降混信号保持原样地输出至该声道的减法增益估计部和该声道的信号减法部,对于在左声道和右声道中的上述的到达时间较长的声道,将使输入的降混信号以左右时间差τ的绝对值|τ|的量而延迟后的信号,输出至该声道的减法增益估计部和该声道的信号减法部。此外,在时间移位部191中,为了获得延迟降混信号而使用过去的帧的降混信号,所以在时间移位部191内的未图示的存储部存储有预先决定的帧数的量的在过去的帧所输入的降混信号。另外,左声道减法增益估计部120和右声道减法增益估计部140不是通过基于使量化误差最小化的原理的方法而是通过专利文献1所例示的公知方法,来获得左声道减法增益α和右声道减法增益β的情况下,在编码装置101的单声道编码部160的后级或者单声道编码部160内具备获得与单声道码CM对应的局部解码信号的单元,在时间移位部191中,也可以代替降混信号xM(1)、xM(2)、...、xM(T),而使用单声道编码的局部解码信号亦即量化完毕降混信号^xM(1)、^xM(2)、...、^xM(T)来进行上述的处理。此时,时间移位部191代替降混信号xM(1)、xM(2)、...、xM(T)而输出量化完毕降混信号^xM(1)、^xM(2)、...、^xM(T),代替延迟降混信号xM'(1)、xM'(2)、...、xM'(T)而输出延迟量化完毕降混信号^xM'(1)、^xM'(2)、...、^xM'(T)。
[左声道减法增益估计部120、左声道信号减法部130、右声道减法增益估计部140、右声道信号减法部150]
左声道减法增益估计部120、左声道信号减法部130、右声道减法增益估计部140以及右声道信号减法部150代替降混部110输出的降混信号xM(1)、xM(2)、...、xM(T),而使用从时间移位部191输入的降混信号xM(1)、xM(2)、...、xM(T)或者延迟降混信号xM'(1),xM'(2)、...、xM'(T),来进行与在参考方式所说明的相同的动作(步骤S120、S130、S140、S150)。即,左声道减法增益估计部120、左声道信号减法部130、右声道减法增益估计部140以及右声道信号减法部150使用由时间移位部191决定的降混信号xM(1)、xM(2)、...、xM(T)或者延迟降混信号xM'(1)、xM'(2)、...、xM'(T)来进行与在参考方式所说明的相同的动作。此外,在时间移位部191代替降混信号xM(1)、xM(2)、...、xM(T)而输出量化完毕降混信号^xM(1)、^xM(2)、...、^xM(T),代替延迟降混信号xM'(1)、xM'(2)、...、xM'(T)而输出延迟量化完毕降混信号^xM'(1)、^xM'(2)、...、^xM'(T)的情况下,左声道减法增益估计部120、左声道信号减法部130、右声道减法增益估计部140以及右声道信号减法部150使用从时间移位部191输入的量化完毕降混信号^xM(1)、^xM(2)、...、^xM(T)或者延迟量化完毕降混信号^xM'(1)、^xM'(2)、...、^xM'(T)来进行上述的处理。
《解码装置201》
如图12所示那样,第1实施方式的解码装置201包括:单声道解码部210、立体声解码部220、左声道减法增益解码部230、左声道信号加法部240、右声道减法增益解码部250、右声道信号加法部260、左右时间差解码部271以及时间移位部281。第1实施方式的解码装置201与参考方式的解码装置200的不同之处在于:除了上述的各码之外还输入后述的左右时间差码Cτ、包括左右时间差解码部271和时间移位部281、以及左声道信号加法部240和右声道信号加法部260使用时间移位部281输出的信号来代替单声道解码部210输出的信号。第1实施方式的解码装置201的其他的结构以及动作与参考方式的解码装置200相同。第1实施方式的解码装置201针对各帧进行图13所例示的步骤S210~步骤S281的处理。以下,针对第1实施方式的解码装置201与参考方式的解码装置200的不同点进行说明。
[左右时间差解码部271]
向左右时间差解码部271输入:输入到解码装置201的左右时间差码Cτ。左右时间差解码部271通过规定的解码方式对左右时间差码Cτ进行解码,得左右时间差τ并输出(步骤S271)。作为规定的解码方式,使用与在对应的编码装置101的左右关系信息估计部181中所使用的编码方式对应的解码方式。左右时间差解码部271获得的左右时间差τ是与对应的编码装置101的左右关系信息估计部181得到的左右时间差τ相同的值,是从τmax至τmin的范围内的任意的值。
[时间移位部281]
向时间移位部281输入:单声道解码部210输出的单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)和左右时间差解码部271输出的左右时间差τ。在左右时间差τ为正的值的情况下(即,左右时间差τ表示左声道处于前导的情况下),时间移位部281将单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)保持原样地输出至左声道信号加法部240(即,决定在左声道信号加法部240中使用),并将使单声道解码声音信号延迟了|τ|个样本而得的信号^xM(1-|τ|)、^xM(2-|τ|)、...、^xM(T-|τ|)亦即延迟单声道解码声音信号^xM'(1)、^xM'(2)、...、^xM'(T),输出至右声道信号加法部260(即,决定在右声道信号加法部260中使用),在左右时间差τ为负的值的情况下(即,左右时间差τ表示右声道处于前导的情况下),将使单声道解码声音信号延迟了|τ|个样本而得的信号^xM(1-|τ|)、^xM(2-|τ|)、...、^xM(T-|τ|)亦即延迟单声道解码声音信号^xM'(1)、^xM'(2)、...、^xM'(T)输出至左声道信号加法部240(即,决定在左声道信号加法部240中使用),并将单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)保持原样地输出至右声道信号加法部260(即,决定在右声道信号加法部260中使用),在左右时间差τ为0的情况下(即,左右时间差τ表示任何的声道都不处于前导的情况下),将单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)保持原样地输出至左声道信号加法部240和右声道信号加法部260(即,决定在左声道信号加法部240和右声道信号加法部260中使用)(步骤S281)。此外,在时间移位部281中为了获得延迟单声道解码声音信号而使用过去的帧的单声道解码声音信号,所以在时间移位部281内的未图示的存储部中存储预先决定的帧数的量的在过去的帧所输入的单声道解码声音信号。
[左声道信号加法部240、右声道信号加法部260]
左声道信号加法部240和右声道信号加法部260中,代替单声道解码部210输出的单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T),而使用从时间移位部281输入的单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)或者延迟单声道解码声音信号^xM'(1)、^xM'(2)、...、^xM'(T),来进行与在参考方式所说明的相同的动作(步骤S240,S260)。即,左声道信号加法部240和右声道信号加法部260使用由时间移位部281决定的单声道解码声音信号^xM(1)、^xM(2)、...、^xM(T)或者延迟单声道解码声音信号^xM'(1)、^xM'(2)、...、^xM'(T),来进行与在参考方式所说明的相同的动作。
<第2实施方式>
针对第1实施方式的编码装置101,可以进行如下变形,即考虑左声道的输入声音信号与右声道的输入声音信号的关系来生成降混信号,并将该方式作为第2实施方式进行说明。此外,第2实施方式的编码装置得到的码能够通过第1实施方式的解码装置201进行解码,所以省略解码装置的说明。
《编码装置102》
如图10所示那样,第2实施方式的编码装置102包括:降混部112、左声道减法增益估计部120、左声道信号减法部130、右声道减法增益估计部140、右声道信号减法部150、单声道编码部160、立体声编码部170、左右关系信息估计部182以及时间移位部191。第2实施方式的编码装置102与第1实施方式的编码装置101不同之处在于:代替左右关系信息估计部181而包括左右关系信息估计部182,代替降混部110而包括降混部112,如图10中虚线所示那样,左右关系信息估计部182获得左右相关系数γ和前导声道信息并进行输出,所输出的左右相关系数γ和前导声道信息被输入至降混部112来使用。第2实施方式的编码装置102的其他结构以及动作与第1实施方式的编码装置101相同。第3实施方式的编码装置102针对各帧进行图14所例示的步骤S112~步骤S191的处理。以下,对第2实施方式的编码装置102与第1实施方式的编码装置101的不同点进行说明。
[左右关系信息估计部182]
向左右关系信息估计部182输入:输入到编码装置102的左声道的输入声音信号和输入到编码装置102的右声道的输入声音信号。左右关系信息估计部182从输入的左声道的输入声音信号和右声道的输入声音信号,获得左右时间差τ、表示左右时间差τ的码亦即左右时间差码Cτ、左右相关系数γ以及前导声道信息,并进行输出(步骤S182)。左右关系信息估计部182获得左右时间差τ和左右时间差码Cτ的处理与第1实施方式的左右关系信息估计部181同样。
左右相关系数γ是在第1实施方式的左右关系信息估计部181的说明部分中上述的假定中的、从音源到达左声道用的麦克风而被拾音的声音信号与从该音源到达右声道用的麦克风而被拾音的声音信号的相关系数所相当的信息。前导声道信息是相当于音源发出的声音较早到达哪个麦克风的信息,是表示相同的声音信号先包含在左声道的输入声音信号和右声道的输入声音信号的哪一个中的信息,是表示左声道和右声道的哪个声道处于前导的信息。
如果是在第1实施方式的左右关系信息估计部181的说明部分中的上述的例子,则左右关系信息估计部182获得左声道的输入声音信号的样本列与处于相比于该样本列而向后错开左右时间差τ的量的位置的右声道的输入声音信号的样本列的相关值,即针对τmax~τmin的各候选样本数τcand而计算出的相关值γcand中的最大值,作为左右相关系数γ,并进行输出。另外,在左右时间差τ为正的值的情况下,左右关系信息估计部182获得表示左声道处于前导的信息作为前导声道信息并进行输出,在左右时间差τ为负的值的情况下,获得表示右声道处于前导的信息作为前导声道信息并进行输出。在左右时间差τ为0的情况下,左右关系信息估计部182可以获得表示左声道处于前导的信息作为前导声道信息并输出,也可以获得表示右声道处于前导的信息作为前导声道信息并输出,但也可以获得表示任何的声道都不处于前导的信息作为前导声道信息并输出。
[降混部112]
向降混部112输入:输入到编码装置102的左声道的输入声音信号、输入到编码装置102的右声道的输入声音信号、左右关系信息估计部182输出的左右相关系数γ以及左右关系信息估计部182输出的前导声道信息。降混部112对左声道的输入声音信号和右声道的输入声音信号进行加权平均,获得降混信号并输出,以使得左右相关系数γ越大则降混信号中包含左声道的输入声音信号与右声道的输入声音信号中的处于前导的声道的输入声音信号越大(步骤S112)。
例如,如果在第1实施方式的左右关系信息估计部181的说明部分如上述的例子那样,针对相关值而使用相关系数的绝对值、归一化的值,则获得的左右相关系数γ为0以上且1以下的值,所以降混部112针对对应的各样本编号t,将使用由左右相关系数γ规定的权重来对左声道的输入声音信号xL(t)和右声道的输入声音信号xR(t)进行加权求和而得到的信号,设为降混信号xM(t)即可。具体而言,前导声道信息是表示左声道处于前导的信息的情况下,即,在左声道处于前导的情况下,降混部112获得xM(t)=((1+γ)/2)×xL(t)+((1-γ)/2)×xR(t);前导导声道信息是表示右声道处于前导的信息的情况下,即,在右声道处于前导的情况下,获得xM(t)=((1-γ)/2)×xL(t)+((1+γ)/2)×xR(t),作为降混信号xM(t)即可。通过由降混部112这样获得降混信号,左右相关系数γ越小,换句话说,左声道的输入声音信号与右声道的输入声音信号的相关性越小,则该降混信号越接近通过左声道的输入声音信号和右声道的输入声音信号的平均而获得的信号;左右相关系数γ越大,换句话说,左声道的输入声音信号与右声道的输入声音信号的相关性越大,则越接近左声道的输入声音信号和右声道的输入声音信号中的处于前导的声道的输入声音信号。
此外,在任何的声道都不处于前导的情况下,降混部112可以对左声道的输入声音信号和右声道的输入声音信号进行平均来获得降混信号并输出,以使得左声道的输入声音信号和右声道的输入声音信号以相同的权重包含在降混信号中。因此,前导导声道信息表示任何的声道都不处于前导的情况下,降混部112针对各样本编号t,将对左声道的输入声音信号xL(t)和右声道的输入声音信号xR(t)进行平均得到的xM(t)=(xL(t)+xR(t))/2,设为降混信号xM(t)。
<程序以及记录介质>
另外,可以通过计算机来实现上述的各编码装置和各解码装置的各部的处理,该情况下,通过程序描述各装置应具有的功能的处理内容。而且,通过使该程序读入到图15所示的计算机的存储部1020,并使运算处理部1010、输入部1030、输出部1040等进行动作,从而由计算机上实现上述各装置中的各种处理功能。
描述该处理内容的程序能够记录于计算机可读取的记录介质。作为计算机可读取的记录介质,例如可以是非暂时的记录介质,具体而言,是磁记录装置、光盘等。
另外,该程序的流通例如通过对记录了该程序的DVD、CD-ROM等可移动记录介质进行销售、转让、借出等来进行。进而,也可以通过将该程序储存至服务器计算机的存储装置,经由网络从服务器计算机向其它计算机转发该程序,从而使该程序流通。
执行这样的程序的计算机例如首先将在可移动记录介质中记录的程序或者从服务器计算机转发的程序暂时储存至自己的非暂时的存储装置亦即辅助记录部1050。而且,在执行处理时,该计算机将在自己的非暂时的存储装置亦即辅助记录部1050中储存的程序读取至存储部1020,执行按照所读取到的程序的处理。另外,作为该程序的其它执行方式,也可以是计算机从可移动记录介质直接将程序读取至存储部1020,执行按照该程序的处理。进而,也可以设为在每次从服务器计算机向该计算机转发程序时,逐次执行按照所获取的程序的处理。另外,也可以设为不进行从服务器计算机向该计算机转发程序,而是通过仅由该执行指示和结果获取来实现处理功能的所谓ASP(Application Service Provider:应用服务提供商)型的服务,执行上述的处理的结构。此外,本方式中的程序包括以供电子计算机的处理用的信息亦即按照程序的信息(并不是对计算机的直接指令但具有规定计算机的处理的性质的数据等)。
另外,在该方式中,可以通过在计算机上执行规定的程序来构成本装置,也可以以硬件方式来实现这些处理的至少一部分。
此外,当然可以在不脱离本发明的宗旨的范围内进行适当变更。

Claims (12)

1.一种声音信号编码方法,是按每个帧对输入的声音信号进行编码的声音信号编码方法,其特征在于,包括:
降混步骤,获得降混信号,上述降混信号是将输入的左声道输入声音信号和输入的右声道输入声音信号混合得到的信号;
单声道编码步骤,对上述降混信号进行编码来获得单声道码CM;
左右关系估计步骤,从上述左声道输入声音信号和上述右声道输入声音信号获得左右时间差τ和左右时间差码Cτ,上述左右时间差码是表示上述左右时间差τ的码;
时间移位步骤,在上述左右时间差τ表示左声道处于前导的情况下,决定在左声道减法增益估计步骤和左声道信号减法步骤中保持原样地使用上述降混信号,并决定在右声道减法增益估计步骤和右声道信号减法步骤中使用延迟降混信号,该延迟降混信号是使上述降混信号以上述左右时间差τ表示的大小的量而延迟后的信号,
在上述左右时间差τ表示右声道处于前导的情况下,决定在上述右声道减法增益估计步骤和上述右声道信号减法步骤中保持原样地使用上述降混信号,并决定在上述左声道减法增益估计步骤和上述左声道信号减法步骤中使用延迟降混信号,该延迟降混信号是使上述降混信号以上述左右时间差τ表示的大小的量而延迟后的信号,
在上述左右时间差τ表示任何的声道都不处于前导的情况下,决定在上述左声道减法增益估计步骤、上述左声道信号减法步骤、上述右声道减法增益估计步骤以及上述右声道信号减法步骤中保持原样地使用上述降混信号;
上述左声道减法增益估计步骤,从上述左声道输入声音信号和在上述时间移位步骤中所决定的上述降混信号或者上述延迟降混信号,获得左声道减法增益α和左声道减法增益码Cα,上述左声道减法增益码是表示上述左声道减法增益α的码;
上述左声道信号减法步骤,按对应的每个样本t,获得基于将在上述时间移位步骤中所决定的上述降混信号或者上述延迟降混信号的样本值与上述左声道减法增益α相乘后的值,从上述左声道输入声音信号的样本值减去,而得到的值的序列,作为左声道差分信号;
上述右声道减法增益估计步骤,从上述右声道输入声音信号和在上述时间移位步骤中所决定的上述降混信号或者上述延迟降混信号,获得右声道减法增益β和右声道减法增益码Cβ,上述右声道减法增益码是表示上述右声道减法增益β的码;
上述右声道信号减法步骤,按对应的每个样本t,获得基于将在上述时间移位步骤中所决定的上述降混信号或者上述延迟降混信号的样本值与上述右声道减法增益β相乘后的值,从上述右声道输入声音信号的样本值减去,而得到的值的序列,作为右声道差分信号;以及
立体声编码步骤,对上述左声道差分信号和上述右声道差分信号进行编码来获得立体声码CS。
2.一种声音信号编码方法,是按每个帧对输入的声音信号进行编码的声音信号编码方法,其特征在于,包括:
降混步骤,获得降混信号,上述降混信号是将输入的左声道输入声音信号和输入的右声道输入声音信号混合得到的信号;
单声道编码步骤,对上述降混信号进行编码来获得单声道码CM和量化完毕降混信号;
左右关系估计步骤,从上述左声道输入声音信号和上述右声道输入声音信号获得左右时间差τ和左右时间差码Cτ,上述左右时间差码是表示上述左右时间差τ的码;
时间移位步骤,在上述左右时间差τ表示左声道处于前导的情况下,决定在左声道减法增益估计步骤和左声道信号减法步骤中保持原样地使用上述量化完毕降混信号,并决定在右声道减法增益估计步骤和右声道信号减法步骤中使用延迟量化完毕降混信号,该延迟量化完毕降混信号是使上述量化完毕降混信号以上述左右时间差τ表示的大小的量而延迟后的信号,
在上述左右时间差τ表示右声道处于前导的情况下,决定在上述右声道减法增益估计步骤和上述右声道信号减法步骤中保持原样地使用上述量化完毕降混信号,并决定在上述左声道减法增益估计步骤和上述左声道信号减法步骤中使用延迟量化完毕降混信号,该延迟量化完毕降混信号是使上述量化完毕降混信号以上述左右时间差τ表示的大小的量而延迟后的信号,
在上述左右时间差τ表示任何的声道都不处于前导的情况下,决定在上述左声道减法增益估计步骤、上述左声道信号减法步骤、上述右声道减法增益估计步骤以及上述右声道信号减法步骤中保持原样地使用上述量化完毕降混信号;
上述左声道减法增益估计步骤,从上述左声道输入声音信号和在上述时间移位步骤中所决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号,获得左声道减法增益α和左声道减法增益码Cα,上述左声道减法增益码是表示上述左声道减法增益α的码;
上述左声道信号减法步骤,按对应的每个样本t,获得基于将在上述时间移位步骤中所决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号的样本值与上述左声道减法增益α相乘后的值,从上述左声道输入声音信号的样本值减去,而得到的值的序列,作为左声道差分信号;
上述右声道减法增益估计步骤,从上述右声道输入声音信号和在上述时间移位步骤中所决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号,获得右声道减法增益β和右声道减法增益码Cβ,上述右声道减法增益码是表示上述右声道减法增益β的码;
上述右声道信号减法步骤,按对应的每个样本t,获得基于将在上述时间移位步骤中所决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号的样本值与上述右声道减法增益β相乘后的值,从上述右声道输入声音信号的样本值减去,而得到的值的序列,作为右声道差分信号;以及
立体声编码步骤,对上述左声道差分信号和上述右声道差分信号进行编码来获得立体声码CS。
3.根据权利要求1或者2所述的声音信号编码方法,其特征在于,
还包括:获得前导声道信息和左右相关系数的步骤,其中,上述前导声道信息是表示上述左声道输入声音信号和上述右声道的输入声音信号中的哪一个处于前导的信息,上述左右相关系数是上述左声道输入声音信号与上述右声道的输入声音信号的相关系数,
在上述降混步骤中,基于上述前导声道信息和上述左右相关系数,对上述左声道输入声音信号和上述右声道输入声音信号进行加权平均来获得上述降混信号,以使得上述左右相关系数越大则包含的上述左声道输入声音信号和上述右声道输入声音信号中的处于前导的声道的输入声音信号越大。
4.一种声音信号解码方法,是按每个帧对输入的码进行解码来获得声音信号的声音信号解码方法,其特征在于,包括:
单声道解码步骤,对输入的单声道码CM进行解码来获得单声道解码声音信号;
立体声解码步骤,对输入的立体声码CS进行解码来获得左声道解码差分信号和右声道解码差分信号;
左右时间差解码步骤,从输入的左右时间差码Cτ获得左右时间差τ;
时间移位步骤,在上述左右时间差τ表示左声道处于前导的情况下,决定在左声道信号加法步骤中保持原样地使用上述单声道解码声音信号,并决定在右声道信号加法步骤中使用延迟单声道解码声音信号,该延迟单声道解码声音信号是使上述单声道解码声音信号以上述左右时间差τ表示的大小的量而延迟后的信号,
在上述左右时间差τ表示右声道处于前导的情况下,决定在上述右声道信号加法步骤中保持原样地使用上述单声道解码声音信号,并决定在上述左声道信号加法步骤中使用延迟单声道解码声音信号,该延迟单声道解码声音信号是使上述单声道解码声音信号以上述左右时间差τ表示的大小的量而延迟后的信号,
在上述左右时间差τ表示任何的声道都不处于前导的情况下,决定在上述左声道信号加法步骤和上述右声道信号加法步骤中保持原样地使用上述单声道解码声音信号;
左声道减法增益解码步骤,对输入的左声道减法增益码Cα进行解码来获得左声道减法增益α;
上述左声道信号加法步骤,按对应的每个样本t,获得基于将在上述时间移位步骤中所决定的上述单声道解码声音信号或者上述延迟单声道解码声音信号的样本值与上述左声道减法增益α相乘后的值,与上述左声道解码差分信号的样本值相加,而得到的值的序列,作为左声道解码声音信号;
右声道减法增益解码步骤,对输入的右声道减法增益码Cβ进行解码来获得右声道减法增益β;以及
上述右声道信号加法步骤,按对应的每个样本t,获得基于将在上述时间移位步骤中所决定的上述单声道解码声音信号或者上述延迟单声道解码声音信号的样本值与上述右声道减法增益β相乘后的值,与上述右声道解码差分信号的样本值相加,而得到的值的序列,作为右声道解码声音信号。
5.一种声音信号编码装置,是按每个帧对输入的声音信号进行编码的声音信号编码装置,其特征在于,包括:
降混部,获得降混信号,上述降混信号是将输入的左声道输入声音信号和输入的右声道输入声音信号混合得到的信号;
单声道编码部,对上述降混信号进行编码来获得单声道码CM;
左右关系估计部,从上述左声道输入声音信号和上述右声道输入声音信号获得左右时间差τ和左右时间差码Cτ,上述左右时间差码是表示上述左右时间差τ的码;
时间移位部,在上述左右时间差τ表示左声道处于前导的情况下,决定在左声道减法增益估计部和左声道信号减法部保持原样地使用上述降混信号,并决定在右声道减法增益估计部和右声道信号减法部使用迟降混信号,该迟降混信号是使上述降混信号以上述左右时间差τ表示的大小的量延迟后的信号,
在上述左右时间差τ表示右声道处于前导的情况下,决定在上述右声道减法增益估计部和上述右声道信号减法部保持原样地使用上述降混信号,并决定在上述左声道减法增益估计部和上述左声道信号减法部使用延迟降混信号,该延迟降混信号是使上述降混信号以上述左右时间差τ表示的大小的量延迟后的信号,
在上述左右时间差τ表示任何的声道都不处于前导的情况下,决定在上述左声道减法增益估计部、上述左声道信号减法部、上述右声道减法增益估计部以及上述右声道信号减法部保持原样地使用上述降混信号,
上述左声道减法增益估计部,从上述左声道输入声音信号和由上述时间移位部决定的上述降混信号或者上述延迟降混信号,获得左声道减法增益α和左声道减法增益码Cα,上述左声道减法增益码是表示上述左声道减法增益α的码;
上述左声道信号减法部,按对应的每个样本t,获得基于将由上述时间移位部决定的上述降混信号或者上述延迟降混信号的样本值与上述左声道减法增益α相乘后的值,从上述左声道输入声音信号的样本值减去,而得到的值的序列,作为左声道差分信号;
上述右声道减法增益估计部,从上述右声道输入声音信号和由上述时间移位部决定的上述降混信号或者上述延迟降混信号,获得右声道减法增益β和右声道减法增益码Cβ,上述右声道减法增益码是表示上述右声道减法增益β的码;
上述右声道信号减法部,按对应的每个样本t,获得基于将由上述时间移位部决定的上述降混信号或者上述延迟降混信号的样本值与上述右声道减法增益β相乘后的值,从上述右声道输入声音信号的样本值减去,而得到的值的序列,作为右声道差分信号;以及
立体声编码部,对上述左声道差分信号和上述右声道差分信号进行编码来获得立体声码CS。
6.一种声音信号编码装置,是按每个帧对输入的声音信号进行编码的声音信号编码装置,其特征在于,包括:
降混部,获得降混信号,上述降混信号是将输入的左声道输入声音信号和输入的右声道输入声音信号混合得到的信号;
单声道编码部,对上述降混信号进行编码来获得单声道码CM和量化完毕降混信号;
左右关系估计部,从上述左声道输入声音信号和上述右声道输入声音信号获得左右时间差τ和左右时间差码Cτ,上述左右时间差码是表示上述左右时间差τ的码;
时间移位部,在上述左右时间差τ表示左声道处于前导的情况下,决定在左声道减法增益估计部和左声道信号减法部保持原样地使用上述量化完毕降混信号,并决定在右声道减法增益估计部和右声道信号减法部使用延迟量化完毕降混信号,该延迟量化完毕降混信号是使上述量化完毕降混信号以上述左右时间差τ表示的大小的量而延迟后的信号,
在上述左右时间差τ表示右声道处于前导的情况下,决定在上述右声道减法增益估计部和上述右声道信号减法部保持原样地使用上述量化完毕降混信号,并决定在上述左声道减法增益估计部和上述左声道信号减法部使用延迟量化完毕降混信号,该延迟量化完毕降混信号是使上述量化完毕降混信号以上述左右时间差τ表示的大小的量延迟后的信号,
在上述左右时间差τ表示任何的声道都不处于前导的情况下,决定在上述左声道减法增益估计部、上述左声道信号减法部、上述右声道减法增益估计部以及上述右声道信号减法部保持原样地使用上述量化完毕降混信号;
上述左声道减法增益估计部,从上述左声道输入声音信号和由上述时间移位部决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号,获得左声道减法增益α和左声道减法增益码Cα,上述左声道减法增益码是表示上述左声道减法增益α的码;
上述左声道信号减法部,按对应的每个样本t,获得基于将由上述时间移位部决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号的样本值与上述左声道减法增益α相乘后的值,从上述左声道输入声音信号的样本值减去,而得到的值的序列,作为左声道差分信号;
上述右声道减法增益估计部,从上述右声道输入声音信号和由上述时间移位部决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号,获得右声道减法增益β和右声道减法增益码Cβ,上述右声道减法增益码是表示上述右声道减法增益β的码;
上述右声道信号减法部,按对应的每个样本t,获得基于将由上述时间移位部决定的上述量化完毕降混信号或者上述延迟量化完毕降混信号的样本值与上述右声道减法增益β相乘后的值,从上述右声道输入声音信号的样本值减去,而得到的值的序列,作为右声道差分信号;以及
立体声编码部,对上述左声道差分信号和上述右声道差分信号进行编码来获得立体声码CS。
7.根据权利要求5或者6所述的声音信号编码装置,其中,
还包括:获得前导声道信息和左右相关系数的部,其中,上述前导声道信息是表示上述左声道输入声音信号和上述右声道的输入声音信号的哪一个处于前导的信息,上述左右相关系数是上述左声道输入声音信号和上述右声道的输入声音信号的相关系数,
上述降混部基于上述前导声道信息和上述左右相关系数,对上述左声道输入声音信号和上述右声道输入声音信号进行加权平均来获得上述降混信号,以使得上述左右相关系数越大则包括上述左声道输入声音信号和上述右声道输入声音信号中的处于前导的声道的输入声音信号越大。
8.一种声音信号解码装置,是按每个帧对输入的码进行解码来获得声音信号的声音信号解码装置,其特征在于,包括:
单声道解码部,对输入的单声道码CM进行解码来获得单声道解码声音信号;
立体声解码部,对输入的立体声码CS进行解码来获得左声道解码差分信号和右声道解码差分信号;
左右时间差解码部,从输入的左右时间差码Cτ获得左右时间差τ;
时间移位部,在上述左右时间差τ表示左声道处于前导的情况下,决定在左声道信号加法部保持原样地使用上述单声道解码声音信号,并决定在右声道信号加法部使用延迟单声道解码声音信号,该延迟单声道解码声音信号是使上述单声道解码声音信号以上述左右时间差τ表示的大小的量而延迟后的信号,
在上述左右时间差τ表示右声道处于前导的情况下,决定在上述右声道信号加法部保持原样地使用上述单声道解码声音信号,并决定在上述左声道信号加法部使用延迟单声道解码声音信号,该延迟单声道解码声音信号是使上述单声道解码声音信号以上述左右时间差τ表示的大小的量而延迟后的信号,
在上述左右时间差τ表示任何的声道都不处于前导的情况下,决定在上述左声道信号加法部和上述右声道信号加法部保持原样地使用上述单声道解码声音信号;
左声道减法增益解码部,对输入的左声道减法增益码Cα进行解码来获得左声道减法增益α;
上述左声道信号加法部,按对应的每个样本t,获得基于将由上述时间移位部决定的上述单声道解码声音信号或者上述延迟单声道解码声音信号的样本值与上述左声道减法增益α相乘后的值,与上述左声道解码差分信号的样本值相加,而得到的值的序列,作为左声道解码声音信号;
右声道减法增益解码部,对输入的右声道减法增益码Cβ进行解码来获得右声道减法增益β;以及
上述右声道信号加法部,按对应的每个样本t,获得基于将由上述时间移位部决定的上述单声道解码声音信号或者上述延迟单声道解码声音信号的样本值与上述右声道减法增益β相乘后的值,与上述右声道解码差分信号的样本值相加,而得到的值的序列,作为右声道解码声音信号。
9.一种程序,用于使计算机执行权利要求1~3中的任意一项所述的编码方法的各步骤。
10.一种程序,用于使计算机执行权利要求4所述的解码方法的各步骤。
11.一种计算机可读取的记录介质,记录有程序,上述程序用于使计算机执行权利要求1~3中的任意一项所述的编码方法的各步骤。
12.一种计算机可读取的记录介质,记录有程序,上述程序用于使计算机执行权利要求4所述的解码方法的各步骤。
CN202080098103.XA 2020-03-09 2020-03-09 声音信号编码方法、声音信号解码方法、声音信号编码装置、声音信号解码装置、程序以及记录介质 Pending CN115244618A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/010081 WO2021181473A1 (ja) 2020-03-09 2020-03-09 音信号符号化方法、音信号復号方法、音信号符号化装置、音信号復号装置、プログラム及び記録媒体

Publications (1)

Publication Number Publication Date
CN115244618A true CN115244618A (zh) 2022-10-25

Family

ID=77671265

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080098103.XA Pending CN115244618A (zh) 2020-03-09 2020-03-09 声音信号编码方法、声音信号解码方法、声音信号编码装置、声音信号解码装置、程序以及记录介质

Country Status (5)

Country Link
US (1) US20230086460A1 (zh)
EP (1) EP4120251A4 (zh)
JP (1) JP7380838B2 (zh)
CN (1) CN115244618A (zh)
WO (1) WO2021181473A1 (zh)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2439719C2 (ru) * 2007-04-26 2012-01-10 Долби Свиден АБ Устройство и способ для синтезирования выходного сигнала
KR101629862B1 (ko) * 2008-05-23 2016-06-24 코닌클리케 필립스 엔.브이. 파라메트릭 스테레오 업믹스 장치, 파라메트릭 스테레오 디코더, 파라메트릭 스테레오 다운믹스 장치, 파라메트릭 스테레오 인코더
WO2010097748A1 (en) * 2009-02-27 2010-09-02 Koninklijke Philips Electronics N.V. Parametric stereo encoding and decoding
US20120072207A1 (en) * 2009-06-02 2012-03-22 Panasonic Corporation Down-mixing device, encoder, and method therefor
ES2955962T3 (es) * 2015-09-25 2023-12-11 Voiceage Corp Método y sistema que utiliza una diferencia de correlación a largo plazo entre los canales izquierdo y derecho para mezcla descendente en el dominio del tiempo de una señal de sonido estéreo en canales primarios y secundarios
CN110100279B (zh) * 2016-11-08 2024-03-08 弗劳恩霍夫应用研究促进协会 对多声道信号进行编码或解码的装置和方法
EP3588495A1 (en) * 2018-06-22 2020-01-01 FRAUNHOFER-GESELLSCHAFT zur Förderung der angewandten Forschung e.V. Multichannel audio coding

Also Published As

Publication number Publication date
WO2021181473A1 (ja) 2021-09-16
JPWO2021181473A1 (zh) 2021-09-16
US20230086460A1 (en) 2023-03-23
EP4120251A4 (en) 2023-11-15
JP7380838B2 (ja) 2023-11-15
EP4120251A1 (en) 2023-01-18

Similar Documents

Publication Publication Date Title
JP4616349B2 (ja) ステレオ互換性のあるマルチチャネルオーディオ符号化
KR101015037B1 (ko) 오디오 디코딩
JP5737077B2 (ja) オーディオ符号化装置、オーディオ符号化方法及びオーディオ符号化用コンピュータプログラム
WO2021181746A1 (ja) 音信号ダウンミックス方法、音信号符号化方法、音信号ダウンミックス装置、音信号符号化装置、プログラム及び記録媒体
WO2005098824A1 (en) Multi-channel encoder
JP2012516596A (ja) ダウンミックスオーディオ信号をアップミックスするためのアップミキサー、方法、および、コンピュータ・プログラム
JP6520937B2 (ja) オーディオ信号処理装置および方法、符号化装置および方法、並びにプログラム
JP2024023484A (ja) 音信号ダウンミックス方法、音信号ダウンミックス装置及びプログラム
BR112020020457A2 (pt) Aparelho, método ou programa de computador para estimar uma diferença de tempo intercanal
KR20170063657A (ko) 오디오 인코더 및 디코더
CN112823534B (zh) 信号处理设备和方法以及程序
US11004455B2 (en) Apparatus and method for processing an encoded audio signal
CN115244618A (zh) 声音信号编码方法、声音信号解码方法、声音信号编码装置、声音信号解码装置、程序以及记录介质
JP7380837B2 (ja) 音信号符号化方法、音信号復号方法、音信号符号化装置、音信号復号装置、プログラム及び記録媒体
WO2023032065A1 (ja) 音信号ダウンミックス方法、音信号符号化方法、音信号ダウンミックス装置、音信号符号化装置、プログラム
US12100403B2 (en) Sound signal downmixing method, sound signal coding method, sound signal downmixing apparatus, sound signal coding apparatus, program and recording medium
US20230386480A1 (en) Sound signal refinement method, sound signal decode method, apparatus thereof, program, and storage medium
WO2024142357A1 (ja) 音信号処理装置、音信号処理方法、プログラム
US20230377585A1 (en) Sound signal refinement method, sound signal decode method, apparatus thereof, program, and storage medium
US20230410832A1 (en) Sound signal high frequency compensation method, sound signal post processing method, sound signal decode method, apparatus thereof, program, and storage medium
US20230402051A1 (en) Sound signal high frequency compensation method, sound signal post processing method, sound signal decode method, apparatus thereof, program, and storage medium
CN113614827A (zh) 用于预测性译码中的低成本错误恢复的方法和设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination