CN114127844A - 一种信号编解码方法、装置、编码设备、解码设备及存储介质 - Google Patents

一种信号编解码方法、装置、编码设备、解码设备及存储介质 Download PDF

Info

Publication number
CN114127844A
CN114127844A CN202180003452.3A CN202180003452A CN114127844A CN 114127844 A CN114127844 A CN 114127844A CN 202180003452 A CN202180003452 A CN 202180003452A CN 114127844 A CN114127844 A CN 114127844A
Authority
CN
China
Prior art keywords
object signal
encoding
signal
coding
decoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180003452.3A
Other languages
English (en)
Inventor
高硕�
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Publication of CN114127844A publication Critical patent/CN114127844A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/16Vocoder architecture
    • G10L19/167Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

本公开提出一种信号编解码方法、装置、解码端、编码端及存储介质,属于通信技术领域。该方法包括:采集音频信号,该音频信号包括至少一个对象信号,对对象信号进行信号特征分析得到分析结果,并基于分析结果对至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,其中,该对象信号集中包括至少一个对象信号,最后对对象信号集中的对象信号采用对应的编码模式进行编码得到至少一个编码后的对象信号参数信息,并将所述对象信号参数信息写入编码码流发送至解码端。在本公开提供的方法可以提升压缩数据的效率,节约带宽。

Description

一种信号编解码方法、装置、编码设备、解码设备及存储介质
技术领域
本公开涉及通信技术领域,尤其涉及一种信号编解码方法、装置、编码设备、解码设备及存储介质。
背景技术
由于3D音频可以使得用户有更好的立体和空间沉浸感受,因此3D音频得到了广泛的应用。其中,在搭建3D音频体验时,通常需要对所采集到的音频信号进行编码并将编码后的信号传输至播放设备端进行播放。
相关技术中,当音频信号中包括大量对象信号时,其编码方法可以包括:
方法一、对每个对象信号进行单独编码,将所有的编码后比特复用形成编码码流;
方法二、对每个对象信号进行联合编码,将联合编码后比特复用形成编码码流;
方法三、对其中一部分对象信号进行单独编码,另一部分对象每个对象信号进行联合编码,将编码后比特复用形成编码码流。
但是,相关技术中的方法一、方法二、方法三均没有考虑到对象信号间的相关性,则会导致数据压缩率低,无法节约带宽。
发明内容
本公开提出的一种信号编解码方法、装置、用户设备、网络侧设备及存储介质,以解决相关技术中的编码方法导致数据压缩率低,无法节约带宽的技术问题。
本公开一方面实施例提出的信号编解码方法,应用于编码端,包括:
采集音频信号,所述音频信号包括至少一个对象信号;
对所述对象信号进行信号特征分析得到分析结果;
基于所述分析结果对所述至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,其中,所述对象信号集中包括至少一个对象信号;
对所述对象信号集中的对象信号采用对应的编码模式进行编码得到至少一个编码后的对象信号参数信息,并将所述对象信号参数信息写入编码码流发送至解码端。
本公开另一方面实施例提出的信号编解码方法,应用于解码端,包括:
接收编码端发送的编码码流;
对所述编码码流进行解码以得到至少一个解码后的对象信号集。
本公开又一方面实施例提出的信号编解码装置,包括:
分析模块,用于对所述对象信号进行信号特征分析得到分析结果;
处理模块,用于基于所述分析结果对所述至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,其中,所述对象信号集中包括至少一个对象信号;
编码模块,用于对所述对象信号集中的对象信号采用对应的编码模式进行编码得到至少一个编码后的对象信号参数信息,并将所述对象信号参数信息写入编码码流发送至解码端。
本公开又一方面实施例提出的信号编解码装置,包括:
接收模块,用于接收编码端发送的编码码流;
解码模块,用于对所述编码码流进行解码以得到至少一个解码后的对象信号集。
本公开又一方面实施例提出的一种通信装置,所述装置包括处理器和存储器,所述存储器中存储有计算机程序,所述处理器执行所述存储器中存储的计算机程序,以使所述装置执行如上一方面实施例提出的方法。
本公开又一方面实施例提出的一种通信装置,所述装置包括处理器和存储器,所述存储器中存储有计算机程序,所述处理器执行所述存储器中存储的计算机程序,以使所述装置执行如上另一方面实施例提出的方法。
本公开又一方面实施例提出的通信装置,包括:处理器和接口电路;
所述接口电路,用于接收代码指令并传输至所述处理器;
所述处理器,用于运行所述代码指令以执行如一方面实施例提出的方法。
本公开又一方面实施例提出的通信装置,包括:处理器和接口电路;
所述接口电路,用于接收代码指令并传输至所述处理器;
所述处理器,用于运行所述代码指令以执行如另一方面实施例提出的方法。
本公开又一方面实施例提出的计算机可读存储介质,用于存储有指令,当所述指令被执行时,使如一方面实施例提出的方法被实现。
本公开又一方面实施例提出的计算机可读存储介质,用于存储有指令,当所述指令被执行时,使如另一方面实施例提出的方法被实现。
综上所述,在本公开实施例提供的信号编解码方法、装置、编码设备、解码设备及存储介质之中,会对采集的音频信号中的至少一个对象信号进行信号特征分析得到分析结果,之后,会基于分析结果对对象信号进行分类得到至少一个对象信号集,同时,还会基于分类结果确定各个对象信号集对应的编码模式,之后,会对对象信号集中的对象信号采用对应的编码模式进行编码。其中,本公开实施例中的信号特征分析包括信号的互相关性参数值分析或信号的频带带宽范围分析。由此可知,本公开实施例之中,在确定编码模式时,会考虑到信号的互相关性参数值或信号的频带带宽范围,从而可以确保对信号的压缩率,节约了带宽。
附图说明
本公开上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本公开一个实施例所提供的信号编解码方法的流程示意图;
图2a为本公开另一个实施例所提供的信号编解码方法的流程示意图;
图2b为本公开一个实施例提供的一种ACELP编码原理框图;
图2c为本公开一个实施例提供的一种频域编码原理框图;
图2d为本公开一个实施例提供的一种信号编码方法的流程框图;
图3a为本公开再一个实施例所提供的信号编解码方法的流程示意图;
图3b为本公开另一个实施例提供的一种信号编码方法的流程框图;
图4a为本公开又一个实施例所提供的信号编解码方法的流程示意图;
图4b为本公开有一个实施例提供的一种信号编码方法的流程框图;
图5为本公开又一个实施例所提供的信号编解码方法的流程示意图;
图6为本公开又一个实施例所提供的信号编解码方法的流程示意图;
图7为本公开又一个实施例所提供的信号编解码方法的流程示意图;
图8a为本公开又一个实施例所提供的信号编解码方法的流程示意图;
图8b为本公开一个实施例提供的一种信号解码方法的流程框图;
图8c为本公开又一个实施例提供的一种信号解码方法的流程框图;
图9为本公开一个实施例所提供的信号编解码装置的结构示意图;
图10为本公开另一个实施例所提供的信号编解码装置的结构示意图;
图11是本公开一个实施例所提供的一种用户设备的框图;
图12为本公开一个实施例所提供的一种网络侧设备的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开实施例相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开实施例的一些方面相一致的装置和方法的例子。
在本公开实施例使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本公开实施例。在本公开实施例和所附权利要求书中所使用的单数形式的“一种”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本公开实施例可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本公开实施例范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”及“若”可以被解释成为“在……时”或“当……时”或“响应于确定”。
下面参考附图对本公开实施例所提供的信号编解码方法、装置、编码设备、解码设备及存储介质进行详细描述。
图1为本公开实施例所提供的一种信号编解码方法的流程示意图,该方法由编码端执行,如图1所示,该信号编解码方法可以包括以下步骤:
步骤101、采集音频信号,音频信号包括至少一个对象信号。
其中,在本公开的一个实施例之中,该编码端可以为UE(User Equipment,终端设备)或基站,UE可以是指向用户提供语音和/或数据连通性的设备。终端设备可以经RAN(Radio Access Network,无线接入网)与一个或多个核心网进行通信,UE可以是物联网终端,如传感器设备、移动电话(或称为“蜂窝”电话)和具有物联网终端的计算机,例如,可以是固定式、便携式、袖珍式、手持式、计算机内置的或者车载的装置。例如,站(Station,STA)、订户单元(subscriber unit)、订户站(subscriber station),移动站(mobilestation)、移动台(mobile)、远程站(remote station)、接入点、远程终端(remoteterminal)、接入终端(access terminal)、用户装置(user terminal)或用户代理(useragent)。或者,UE也可以是无人飞行器的设备。或者,UE也可以是车载设备,比如,可以是具有无线通信功能的行车电脑,或者是外接行车电脑的无线终端。或者,UE也可以是路边设备,比如,可以是具有无线通信功能的路灯、信号灯或者其它路边设备等。
以及,在本公开的一个实施例之中,对象信号可以为各种乐器对应的对象信号或者歌声信号。其中,乐器对应的对象信号例如可以为钢琴对象信号、长笛对象信号、短笛对象信号、单簧管对象信号等。
步骤102、对对象信号进行信号特征分析得到分析结果。
其中,在本公开的一个实施例之中,该信号特征分析可以为信号的互相关性参数值分析。在本公开的另一个实施例之中,该特征分析可以为信号的频带带宽范围分析。以及,关于互相关性参数值分析和频带带宽范围分析在后续实施例会进行详细介绍。
步骤103、基于分析结果对至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,其中,对象信号集中包括至少一个对象信号。
其中,步骤102中所采用的信号特征分析方法不同时,本步骤中对对象信号的分类方法、以及确定各个对象信号集对应的编码模式的方法也会有所不同。
具体的,在本公开的一个实施例之中,若步骤102中所采用的信号特征分析方法为信号的互相关性参数值分析方法,则本步骤中对象信号的分类方法可以为:基于信号的互相关性参数值的分类方法;确定各个对象信号集对应的编码模式的方法可以为:基于信号的互相关性参数值来确定各个对象信号集对应的编码模式。
在本公开的另一个实施例之中,若步骤102中所采用的信号特征分析方法为信号的频带带宽范围分析方法,则本步骤中对象信号的分类方法可以为:基于信号的频带带宽范围的分类方法;确定各个对象信号集对应的编码模式的方法可以为:基于信号的频带带宽范围来确定各个对象信号集对应的编码模式。
以及,上述的“基于信号的互相关性参数值或信号的频带带宽范围的分类方法”、“基于信号的互相关性参数值或信号的频带带宽范围来确定各个对象信号集对应的编码模式”的详细介绍同样会在后续实施例进行介绍。
需要说明的是,在本公开的一个实施例之中,当分类得出至少一个对象信号集之后,还可以对该各个对象信号集进行预处理。其中,预处理例如可以包括高通处理,预加重处理,归一化处理中的至少一种。
步骤104、对对象信号集中的对象信号采用对应的编码模式进行编码得到至少一个编码后的对象信号参数信息,并将编码后的对象信号参数信息写入编码码流发送至解码端。
其中,需要说明的是,在本公开的一个实施例之中,当步骤103中的对象信号的分类方式不同时,对至少一个对象信号集的编码情况也会有不同。
进一步地,在本公开的一个实施例之中,具体是对预处理之后的对象信号集中的对象信号采用对应的编码模式进行编码。
以及,在本公开的一个实施例之中,上述的将编码后的对象信号参数信息写入编码码流发送至解码端的方法具体可以包括:
步骤1、确定分类边信息参数,该分类边信息参数用于指示对象信号的分类方式。例如,该分类边信息参数可以指示对象信号的分类方式为:基于信号的互相关性参数值的分类方法或基于信号的频带带宽范围的分类方法。
步骤2、确定各个对象信号集对应的边信息参数,该边信息参数用于指示对象信号集对应的编码模式。
步骤3、将分类边信息参数、各个对象信号集对应的边信息参数、编码后的对象信号参数信息进行码流复用以得到码流,将码流发送至解码端。
其中,在本公开的一个实施例之中,通过将分类边信息参数、各个对象信号集对应的边信息参数发送至解码端,以便解码端可以基于分类边信息参数确定出对应的编码情况,以及基于各个对象信号集对应的边信息参数确定出各个对象信号集对应的编码模式,以便后续可以基于该编码情况和编码模式对各个对象信号集采用对应的解码模式和解码模式进行解码。
综上所述,在本公开实施例提供的信号编解码方法之中,会对采集的音频信号中的至少一个对象信号进行信号特征分析得到分析结果,之后,会基于分析结果对对象信号进行分类得到至少一个对象信号集,同时,还会基于分类结果确定各个对象信号集对应的编码模式,之后,会对对象信号集中的对象信号采用对应的编码模式进行编码。其中,本公开实施例中的信号特征分析包括信号的互相关性参数值分析或信号的频带带宽范围分析。由此可知,本公开实施例之中,在确定编码模式时,会考虑到信号的互相关性参数值或信号的频带带宽范围,从而可以确保对信号的压缩率,节约了带宽。
图2a为本公开实施例所提供的一种信号编解码方法的流程示意图,该方法由编码端执行,如图2a所示,该信号编解码方法可以包括以下步骤:
步骤201、采集音频信号,音频信号包括至少一个对象信号。
可以理解的是,在本实施例中,所述至少一个对象信号为两个或两个以上对象信号。
步骤202、对至少一个对象信号进行高通滤波处理。
在本公开的一个实施例之中,可以采用一滤波器来对对象信号进行高通滤波处理。
其中,该滤波器的截止频率设置为20Hz(赫兹)。该滤波器采用的滤波公式可以为如下公式(1)所示:
Figure BDA0003361137030000041
其中,a1、a2、b0、b1、b2均为常数,示例的,b0=0.9981492,b1=-1.9963008,b2=0.9981498,a1=1.9962990,a2=-0.9963056。
步骤203、对高通滤波处理之后的对象信号进行相关性分析,以确定各个对象信号之间的互相关性参数值。
其中,在本公开的一个实施例之中,上述的相关性分析具体可以采用如下公式(2)计算:
Figure BDA0003361137030000051
其中,ηxy用于指示对象信号X和对象信号Y的互相关性参数值,Xi、Yi均用于指示第i个对象信号,
Figure BDA0003361137030000052
用于指示对象信号X的信号序列的平均值,
Figure BDA0003361137030000053
用于指示对象信号Y的信号序列的平均值。
需要说明的是,上述的“采用公式(2)计算互相关性参数值”的方法为本公开实施例提供的一个可选方式,以及,应当认识到,本领域中其他的计算对象信号之间的互相关性参数值的方法也可以适用于本公开中。
步骤204、基于分析结果对至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,其中,对象信号集中包括至少一个对象信号。
在本公开的一个实施例之中,基于分析结果对至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,包括:
依据相关程度,设置归一化相关程度区间,基于信号的互相关性参数、归一化相关程度区间,对至少一个对象信号进行分类以得到至少一个对象信号集。之后,可以基于对象信号集所对应的相关程度确定出对应的编码模式。
可以理解的是,所述归一化相关程度区间的个数根据相关程度的划分方式来确定,本公开不对相关程度的划分方式进行限制,并且对不同的归一化相关程度区间的长度也不作限制,可以依据不同的相关程度的划分方式,来设置对应个数个归一化相关程度区间,以及不同的区间长度。
在本公开的一个实施例之中,将相关程度划分为微弱相关、实相关、显著相关、高度相关四种相关程度,表1为本公开实施例提供的一种归一化相关程度区间分类表。
归一化相关程度区间 相关程度
0.00~±0.30 微弱相关
±0.30-±0.50 实相关
±0.50-±0.80 显著相关
±0.80-±1.00 高度相关
基于上述内容,作为一种示例,可以将互相关性参数值介于第一区间的对象信号划分为对象信号集1,确定对象信号集1对应独立编码模式;
将互相关性参数值介于第二区间的对象信号划分为对象信号集2,确定对象信号集2对应联合编码模式1;
将互相关性参数值介于第三区间的对象信号划分为对象信号集3,确定对象信号集3对应联合编码模式2;
将互相关性参数值介于第四区间的对象信号划分为对象信号集4,确定对象信号集4对应联合编码模式3。
其中,在本公开的一个实施例之中,第一区间可以为[0.00~±0.30),第二区间可以为[±0.30-±0.50),第三区间可以为[±0.50-±0.80),第四区间可以为[±0.80-±1.00]。以及,当对象信号之间的互相关性参数值介于第一区间时,说明对象信号之间微弱相关,此时为了确保编码准确率,则应当采用独立编码模式进行编码。当对象信号之间的互相关性参数值介于第二区间、第三区间、第四区间时,说明对象信号之间的互相关性较高,此时可以采用联合编码模式进行编码,以确保压缩率,节约带宽。
进一步地,在本公开的一个实施例之中,独立编码模式对应有时域处理方式或者频域处理方式;其中,当对象信号集1中的对象信号为语音信号或者类语音信号时,独立编码模式采用时域处理方式;当对象信号集1中的对象信号为除语音信号或者类语音信号的其他音频信号(例如音乐信号或语音和音乐混合信号或噪声信号和语音、音乐信号的混合信号)时,独立编码模式采用频域处理方式。
在本公开的一个实施例之中,上述的时域处理方式可以采用ACELP编码模型实现,图2b为本公开实施例提供的一种ACELP编码原理框图。以及,关于ACELP编码器原理具体可以参见现有技术中介绍,本公开实施例在此不做赘述。
在本公开的一个实施例之中,上述的频域处理方式可以包括变换域处理方式,图2c为本公开实施例提供的一种频域编码原理框图。参考图2c,可以先通过变换模块对输入的对象信号进行MDCT变换以变换到频域,其中,MDCT变换的变换公式和逆变换公式分别如下公式(3)和公式(4)。
Figure BDA0003361137030000061
Figure BDA0003361137030000062
之后,针对变换到频域的对象信号利用心理声学模型对各频段进行调整,在利用量化模块通过比特分配对各频段包络系数进行量化得到量化参数,最后利用熵编码模块对量化参数通过熵编码以输出编码后的对象信号。
步骤205、采用同一编码核来对所有对象信号集采用对应的编码模式进行编码得到至少一个编码后的对象信号参数信息,并将编码后的对象信号参数信息写入编码码流发送至解码端。
在本公开的一个实施例之中,对所有对象信号集采用对应的编码模式进行编码的方法可以包括:
采用独立编码模式对对象信号集1进行编码;
采用联合编码模式1对对象信号集2进行编码;
采用联合编码模式2对对象信号集3进行编码;
采用联合编码模式3对对象信号集4进行编码。
以及,关于“将编码后的对象信号参数信息写入编码码流发送至解码端”的相关介绍可以参考上述实施例,本实施例在此不做赘述。
最后,基于上述描述内容,图2d为本公开实施例提供的一种信号编码方法的流程框图。
综上所述,在本公开实施例提供的信号编解码方法之中,会对采集的音频信号中的至少一个对象信号进行信号特征分析得到分析结果,之后,会基于分析结果对对象信号进行分类得到至少一个对象信号集,同时,还会基于分类结果确定各个对象信号集对应的编码模式,之后,会对对象信号集中的对象信号采用对应的编码模式进行编码。其中,本公开实施例中的信号特征分析包括信号的互相关性参数值分析。由此可知,本公开实施例之中,在确定编码模式时,会考虑到信号的互相关性参数值,从而可以确保对信号的压缩率,节约了带宽。
图3a为本公开实施例所提供的一种信号编解码方法的流程示意图,该方法由编码端执行,如图3a所示,该信号编解码方法可以包括以下步骤:
步骤301、采集音频信号,音频信号包括至少一个对象信号。
步骤302、分析至少一个对象信号的频带带宽范围。
步骤303、基于分析结果对至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,其中,对象信号集中包括至少一个对象信号。
在本公开的一个实施例之中,基于分析结果对至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式的方法可以包括:
确定不同频带带宽对应的带宽区间;
基于所述对象信号的频带带宽范围、不同频带带宽对应的带宽区间,对至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于至少一个对象信号集对应的频带带宽确定对应的编码模式。
其中,信号的频带带宽通常包括有窄带、宽带、超宽带和全带。以及,窄带对应的带宽区间可以为第一区间、宽带对应的带宽区间可以为第二区间、超宽带对应的带宽区间可以为第三区间、全带对应的带宽区间可以为第四区间。则可以通过判断对象信号的频带带宽范围所属的带宽区间来对至少一个对象信号进行分类以得到至少一个对象信号集。之后,根据至少一个对象信号集对应的频带带宽确定对应的编码模式,其中,窄带、宽带、超宽带和全带分别对应窄带编码模式、宽带编码模式、超宽带编码模式和全带编码模式。
需要说明的是,本公开实施例中对不同的带宽区间的长度不做限制,并且,不同频带带宽之间的带宽区间可以重叠。
以及,作为一种示例,可以将频带带宽范围介于第一区间的对象信号划分为对象信号集1,确定对象信号集1对应窄带编码模式;
将频带带宽范围介于第二区间的对象信号划分为对象信号集2,确定对象信号集2对应宽带编码模式;
将频带带宽范围介于第三区间的对象信号划分为对象信号集3,确定对象信号集3对应超宽带编码模式;
将频带带宽范围介于第四区间的对象信号划分为对象信号集4,确定对象信号集4对应全带编码模式。
其中,在本公开的一个实施例之中,第一区间可以为0~4kHz,第二区间可以为0~8kHz,第三区间可以为0~16kHz,第四区间可以为0~20kHz。以及,当对象信号的频带带宽介于第一区间时,说明对象信号为窄带信号,则可以确定该对象信号对应的编码模式为:采用比较少的比特进行编码(即采用窄带编码模式);当对象信号的频带带宽介于第二区间时,说明对象信号为宽带信号,则可以确定该对象信号对应的编码模式为:采用较多的比特进行编码(即采用宽带编码模式);当对象信号的频带带宽介于第三区间时,说明对象信号为超宽带信号,则可以确定该对象信号对应的编码模式为:采用相对较多的比特进行编码(即采用超宽带编码模式);当对象信号的频带带宽介于第四区间时,说明对象信号为全带信号,则可以确定该对象信号对应的编码模式为:采用更多的比特进行编码(即采用全带编码模式)。
由此,通过对不同频带带宽信号采用不同比特进行编码,则可以确保对信号的压缩率,节约了带宽。
步骤304、采用不同的编码核对不同的对象信号集采用对应的编码模式进行编码得到至少一个编码后的对象信号参数信息,并将编码后的对象信号参数信息发送至解码端。
在本公开的一个实施例之中,采用不同的编码核对不同的对象信号集采用对应的编码模式进行编码的方法可以包括:
在上述步骤302中基于对象信号集所对应的频带带宽确定出具体的编码模式之后,可以基于该编码模式确定出采用该编码模式对应的的编码核,之后,即可基于该编码核对对应的对象信号集进行编码。
示例的,对象信号集1对应的编码模式为:窄带编码模式,则可以采用窄带编码核对对象信号集1进行编码;
对象信号集2对应的编码模式为:宽带编码模式,则可以采用宽带编码核对对象信号集2进行编码;
对象信号集3对应的编码模式为:超宽带编码模式,则可以采用超宽带编码核对对象信号集3进行编码;
对象信号集4对应的编码模式为:全带编码模式,则可以采用全带编码核对对象信号集4进行编码。
以及,关于“将编码后的对象信号参数信息写入编码码流发送至解码端”的相关介绍可以参考上述实施例,本公开实施例在此不做赘述
最后,基于上述描述内容,图3b为本公开实施例提供的一种信号编码方法的流程框图。
综上所述,在本公开实施例提供的信号编解码方法之中,会对采集的音频信号中的至少一个对象信号进行信号特征分析得到分析结果,之后,会基于分析结果对对象信号进行分类得到至少一个对象信号集,同时,还会基于分类结果确定各个对象信号集对应的编码模式,之后,会对对象信号集中的对象信号采用对应的编码模式进行编码。其中,本公开实施例中的信号特征分析包括信号的频带带宽范围分析。由此可知,本公开实施例之中,在确定编码模式时,会考虑到信号的频带带宽范围,从而可以确保对信号的压缩率,节约了带宽。
图4a为本公开实施例所提供的一种信号编解码方法的流程示意图,该方法由编码端执行,如图4a所示,该信号编解码方法可以包括以下步骤:
步骤401、采集音频信号,音频信号包括至少一个对象信号。
步骤402、分析至少一个对象信号的频带带宽范围。
步骤403、获取输入的命令行控制信息,命令行控制信息用于指示对象信号对应的待编码频带带宽范围。
其中,在本公开的一个实施例之中,该命令行控制信息可以是人为输入至编码端的。以及,该命令行控制信息所指示的对象信号对应的待编码频带带宽范围并非是该对象信号的实际频带带宽范围,而是用户自定义的。
示例的,在本公开的一个实施例之中,若针对某一对象信号,其实际频带带宽范围为窄宽,但用户希望该对象信号进行高精度处理,则可以使得该对象信号对应的命令行控制信息所指示的频带带宽范围为宽带。以及,若针对某一对象信号,其实际频带带宽范围为宽带,但用户希望该对象信号进行低精度处理,则可以使得该对象信号对应的命令行控制信息所指示的频带带宽范围为窄带。
步骤404、综合所述命令行控制信息和所述分析结果对所述至少一个对象信号进行分类以得到至少一个对象信号集,基于分类结果确定各个对象信号集对应的编码模式。
其中,在本公开的一个实施例之中,综合命令行控制信息和分析结果对所述至少一个对象信号进行分类以得到至少一个对象信号集,以及基于分类结果确定各个对象信号集对应的编码模式的方法可以包括:
当命令行控制信息指示的频带带宽范围与分析结果得出的频带带宽范围范围不同时,优先以命令行控制信息指示的频带带宽范围对至少一个对象信号进行分类,并基于分类结果确定各个对象信号集对应的编码模式。
当命令行控制信息指示的频带带宽范围与分析结果得出的频带带宽范围范围相同时,以命令行控制信息指示的频带带宽范围或分析结果得出的频带带宽范围对至少一个对象信号进行分类,并基于分类结果确定各个对象信号集对应的编码模式
示例的,在本公开的一个实施例之中,假设对象信号的分析结果为超宽带信号,对象信号的命令行控制信息指示的频带带宽范围为全带信号,此时,可以基于命令行控制信息将该对象信号划分至对象信号集4,并确定该对象信号集4对应的编码模式为:全带编码模式。
步骤405、对对象信号集中的对象信号采用对应的编码模式进行编码得到至少一个编码后的对象信号参数信息,并将编码后的对象信号参数信息发送至解码端。
其中,关于步骤405的相关介绍可以参考上述实施例描述,本公开是实施例在此不做赘述。
最后,基于上述描述内容,图4b为本公开实施例提供的一种信号编码方法的流程框图。
综上所述,在本公开实施例提供的信号编解码方法之中,会对采集的音频信号中的至少一个对象信号进行信号特征分析得到分析结果,之后,会基于分析结果对对象信号进行分类得到至少一个对象信号集,同时,还会基于分类结果确定各个对象信号集对应的编码模式,之后,会对对象信号集中的对象信号采用对应的编码模式进行编码。其中,本公开实施例中的信号特征分析包括信号的频带带宽范围分析。由此可知,本公开实施例之中,在确定编码模式时,会考虑到信号的频带带宽范围,从而可以确保对信号的压缩率,节约了带宽。
图5为本公开实施例所提供的一种信号编解码方法的流程示意图,该方法由解码端执行,如图7所示,该信号编解码方法可以包括以下步骤:
步骤501、接收编码端发送的至少一个编码后的对象信号参数信息。
其中,在本公开的一个实施例之中,该解码端可以为UE(User Equipment,终端设备)或基站。
步骤502、对至少一个编码后的对象信号参数信息进行解码以得到至少一个解码后的对象信号集。
综上所述,在本公开实施例提供的信号编解码方法之中,在编码过程中,会对采集的音频信号中的至少一个对象信号进行信号特征分析得到分析结果,之后,会基于分析结果对对象信号进行分类得到至少一个对象信号集,同时,还会基于分类结果确定各个对象信号集对应的编码模式,之后,会对对象信号集中的对象信号采用对应的编码模式进行编码。其中,本公开实施例中的信号特征分析包括信号的频带带宽范围分析。由此可知,本公开实施例之中,在确定编码模式时,会考虑到信号的频带带宽范围,从而可以确保对信号的压缩率,节约了带宽。
图6为本公开实施例所提供的一种信号编解码方法的流程示意图,该方法由解码端执行,如图6所示,该信号编解码方法可以包括以下步骤:
步骤601、接收编码端发送的编码码流。
步骤602、对编码码流进行码流解析以得到分类边信息参数、各个对象信号集合对应的边信息参数、至少一个编码后的对象信号参数信息。
其中,分类边信息参数用于指示对象信号的分类方式,边信息参数用于指示对象信号集对应的编码模式。以及,关于分类边信息和边信息参数的相关介绍可以参考上述实施例描述,本公开实施例在此不做赘述。
步骤603、对至少一个编码后的对象信号参数信息进行解码以得到至少一个解码后的对象信号集。
在本公开的一个实施例之中,具体是基于分类边信息和边信息参数来对编码后的对象信号参数进行解码以得到至少一个解码后的对象信号集。其中,关于具体的解码方法会在后续实施例进行详细介绍。
综上所述,在本公开实施例提供的信号编解码方法之中,在编码过程中,会对采集的音频信号中的至少一个对象信号进行信号特征分析得到分析结果,之后,会基于分析结果对对象信号进行分类得到至少一个对象信号集,同时,还会基于分类结果确定各个对象信号集对应的编码模式,之后,会对对象信号集中的对象信号采用对应的编码模式进行编码。其中,本公开实施例中的信号特征分析包括信号的频带带宽范围分析。由此可知,本公开实施例之中,在确定编码模式时,会考虑到信号的频带带宽范围,从而可以确保对信号的压缩率,节约了带宽。
图7为本公开实施例所提供的一种信号编解码方法的流程示意图,该方法由解码端执行,如图7所示,该信号编解码方法可以包括以下步骤:
步骤701、接收编码端发送的编码码流。
步骤702、对编码码流进行码流解析以得到分类边信息参数、各个对象信号集合对应的边信息参数、至少一个编码后的对象信号参数信息。
其中,分类边信息参数用于指示对对象信号的分类方式,边信息参数用于指示对象信号集对应的编码模式。以及,关于分类边信息和边信息参数的相关介绍可以参考上述实施例描述,本公开实施例在此不做赘述。
步骤703、基于分类边信息参数确定对象信号的分类方式。
其中,参考上述实施例描述可知,当对象信号的分类方式不同时,对应的编码情况也会不同。具体的,在本公开的一个实施例之中,当对象信号的分类方式为:基于信号的互相关性参数值的分类方法时,则编码端所对应的编码情况为:采用同一编码核来对所有所述对象信号集采用对应的编码模式进行编码。
在本公开的另一个实施例之中,当对象信号的分类方式为:基于频带带宽范围的分类方法时,则编码端所对应的编码情况为:采用不同的编码核对不同的对象信号集采用对应的编码模式进行编码
因此,在本步骤中需要先基于分类边信息参数确定出在编码过程中的对象信号的分类方式,以便确定出编码过程中的编码情况,则后续即可基于该编码情况进行解码。
步骤704、基于边信息参数确定各个编码后的对象信号参数信息对应的编码模式。
步骤705、基于对象信号的分类方式和各个编码后的对象信号参数信息对应的编码模式来采用对应的解码模式对各个编码后的对象信号参数信息进行解码。
其中,在本公开的一个实施例之中,基于对象信号的分类方式和各个编码后的对象信号参数信息对应的编码模式来采用对应的解码模式对各个编码后的对象信号参数信息进行解码的方法可以包括:
先基于分类方式确定出编码过程中的编码情况,再基于编码情况确定出对应的解码模式,之后,根据对应的编解码模式基于各个编码后的对象信号参数信息对应的编码模式来采用对应的解码模式对各个编码后的对象信号参数信息进行解码的。
具体而言,在本公开的一个实施例之中,若基于分类模式确定出编码过程中的编码情况为:采用同一编码核来对所有对象信号集采用对应的编码模式进行编码,则确定解码过程的解码模式为:采用同一解码核来对所有的编码后的对象信号参数信息进行解码。其中,在解码过程中,具体是基于各个编码后的对象信号参数信息对应的编码模式采用对应的解码模式对各个编码后的对象信号参数信息进行解码,得到至少一个解码后的对象信号集。
以及,在本公开的另一个实施例之中,若基于分类模式确定出编码过程中的编码情况为:采用不同的编码核对不同的对象信号集采用对应的编码模式进行编码,则确定解码过程的解码模式为:采用不同的解码核来基于各个编码后的对象信号参数信息进行解码。其中,在解码过程中,具体是基于各个编码后的对象信号参数信息对应的编码模式采用对应的解码模式对各个编码后的对象信号参数信息进行解码,得到至少一个解码后的对象信号集。
综上所述,在本公开实施例提供的信号编解码方法之中,在编码过程中,会对采集的音频信号中的至少一个对象信号进行信号特征分析得到分析结果,之后,会基于分析结果对对象信号进行分类得到至少一个对象信号集,同时,还会基于分类结果确定各个对象信号集对应的编码模式,之后,会对对象信号集中的对象信号采用对应的编码模式进行编码。其中,本公开实施例中的信号特征分析包括信号的频带带宽范围分析。由此可知,本公开实施例之中,在确定编码模式时,会考虑到信号的频带带宽范围,从而可以确保对信号的压缩率,节约了带宽。
图8a为本公开实施例所提供的一种信号编解码方法的流程示意图,该方法由解码端执行,如图8a所示,该信号编解码方法可以包括以下步骤:
步骤801、接收编码端发送的编码码流。
步骤802、对所述编码码流进行解码以得到至少一个解码后的对象信号集。
步骤803、对至少一个解码后的对象信号集进行后处理。
其中,在本公开的一个实施例之中,后处理具体可以是前述实施例中的预处理的逆过程。
以及,关于步骤801-803的具体详细介绍可以参考上述实施例描述,本公开实施例在此不做赘述。
最后,基于上述描述,图8b为本公开实施例提供的一种信号解码方法的流程框图。图8c为本公开实施例提供的一种信号解码方法的流程框图。
综上所述,在本公开实施例提供的信号编解码方法之中,在编码过程中,会对采集的音频信号中的至少一个对象信号进行信号特征分析得到分析结果,之后,会基于分析结果对对象信号进行分类得到至少一个对象信号集,同时,还会基于分类结果确定各个对象信号集对应的编码模式,之后,会对对象信号集中的对象信号采用对应的编码模式进行编码。其中,本公开实施例中的信号特征分析包括信号的频带带宽范围分析。由此可知,本公开实施例之中,在确定编码模式时,会考虑到信号的频带带宽范围,从而可以确保对信号的压缩率,节约了带宽。
图9为本公开实施例所提供的一种信号编解码方法装置的结构示意图,应用于编码端,如图9所示,装置900可以包括:
采集模块,用于采集音频信号,所述音频信号包括至少一个对象信号;
分析模块,用于对对象信号进行信号特征分析得到分析结果;
处理模块,用于基于分析结果对至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,其中,对象信号集中包括至少一个对象信号;
编码模块,用于对对象信号集中的对象信号采用对应的编码模式进行编码得到至少一个编码后的对象信号参数信息,并将编码后的对象信号参数信息发送至解码端。
综上所述,在本公开实施例提供的信号编解码装置之中,对采集的音频信号中的至少一个对象信号进行信号特征分析得到分析结果,之后,会基于分析结果对对象信号进行分类得到至少一个对象信号集,同时,还会基于分类结果确定各个对象信号集对应的编码模式,之后,会对对象信号集中的对象信号采用对应的编码模式进行编码。其中,本公开实施例中的信号特征分析包括信号的频带带宽范围分析。由此可知,本公开实施例之中,在确定编码模式时,会考虑到信号的频带带宽范围,从而可以确保对信号的压缩率,节约了带宽。
可选的,在本公开的一个实施例之中,所述装置还用于:
对所述至少一个对象信号集进行预处理。
可选的,在本公开的一个实施例之中,所述编码模块,还用于:
对预处理之后的对象信号集中的对象信号采用对应的编码模式进行编码。
可选的,在本公开的一个实施例之中,所述编码模块,还用于:
确定分类边信息参数,所述分类边信息参数用于指示对所述对象信号的分类方式;
确定各个对象信号集对应的边信息参数,所述边信息参数用于指示所述对象信号集对应的编码模式;
将所述分类边信息参数、各个对象信号集对应的边信息参数、编码后的对象信号参数信息进行码流复用以得到编码码流,将所述编码码流发送至解码端。
可选的,在本公开的一个实施例之中,所述分析模块,还用于:
对所述至少一个对象信号进行高通滤波处理;
对高通滤波处理之后的对象信号进行相关性分析,以确定各个对象信号之间的互相关性参数值。
可选的,在本公开的一个实施例之中,所述处理模块,还用于:
依据相关程度,设置归一化相关程度区间;
基于所述对象信号的互相关性参数、归一化相关程度区间,对至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于所述至少一个对象信号集对应的相关程度确定对应的编码模式。
可选的,在本公开的一个实施例之中,所述对象信号集对应的编码模式包括独立编码模式或联合编码模式。
可选的,在本公开的一个实施例之中,所述独立编码模式对应有时域处理方式或者频域处理方式;
其中,当所述对象信号集中的对象信号为语音信号或者类语音信号,所述独立编码模式采用时域处理方式;
当所述对象信号集中的对象信号为除语音信号或者类语音信号的其他音频信号,所述独立编码模式采用频域处理方式。
可选的,在本公开的一个实施例之中,所述编码模块,还用于:
采用同一编码核来对所有所述对象信号集采用对应的编码模式进行编码。
可选的,在本公开的一个实施例之中,所述分析模块,还用于:
分析所述对象信号的频带带宽范围。
可选的,在本公开的一个实施例之中,所述处理模块,还用于:
确定不同频带带宽对应的带宽区间;
基于所述对象信号的频带带宽范围、不同频带带宽对应的带宽区间,对所述至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于所述至少一个对象信号集对应的频带带宽确定对应的编码模式。
可选的,在本公开的一个实施例之中,所述处理模块,还用于:
获取输入的命令行控制信息,所述命令行控制信息用于指示所述对象信号对应的待编码频带带宽范围;
综合所述命令行控制信息和所述分析结果对所述至少一个对象信号进行分类以得到至少一个对象信号集,并基于分类结果确定各个对象信号集对应的编码模式。
可选的,在本公开的一个实施例之中,所述编码模块,还用于:
采用不同的编码核对不同的对象信号集采用对应的编码模式进行编码。
图10为本公开实施例所提供的一种信号编解码方法装置的结构示意图,应用于解码端如图10所示,装置1000可以包括:
接收模块,用于接收编码端发送的至少一个编码后的对象信号参数信息;
解码模块,用于对所述至少一个编码后的对象信号参数信息进行解码以得到至少一个解码后的对象信号集。
综上所述,在本公开实施例提供的信号编解码装置之中,对采集的音频信号中的至少一个对象信号进行信号特征分析得到分析结果,之后,会基于分析结果对对象信号进行分类得到至少一个对象信号集,同时,还会基于分类结果确定各个对象信号集对应的编码模式,之后,会对对象信号集中的对象信号采用对应的编码模式进行编码。其中,本公开实施例中的信号特征分析包括信号的频带带宽范围分析。由此可知,本公开实施例之中,在确定编码模式时,会考虑到信号的频带带宽范围,从而可以确保对信号的压缩率,节约了带宽。
可选的,在本公开的一个实施例之中,所述装置还用于:
对所述编码码流进行码流解析以得到分类边信息参数、各个对象信号集合对应的边信息参数、至少一个编码后的对象信号参数信息;
其中,所述分类边信息参数用于指示对象信号的分类方式,所述边信息参数用于指示所述对象信号集对应的编码模式。
可选的,在本公开的一个实施例之中,所述解码模块,还用于:
基于所述分类边信息参数确定所述对象信号的分类方式;
基于所述边信息参数确定各个编码后的对象信号参数信息对应的编码模式;
基于所述对象信号的分类方式和各个编码后的对象信号参数信息对应的编码模式来采用对应的解码模式对各个编码后的对象信号参数信息进行解码。
可选的,在本公开的一个实施例之中,所述分类边信息参数指示所述对象信号的分类方式为:基于互相关性参数值进行分类;
所述解码模块,还用于:
采用同一解码核来基于各个编码后的对象信号参数信息对应的编码模式采用对应的解码模式对各个编码后的对象信号参数信息进行解码,得到至少一个解码后的对象信号集。
可选的,在本公开的一个实施例之中,所述分类边信息参数指示所述对象信号的分类方式为:基于频带带宽范围进行分类;
所述解码模块,还用于:
采用不同的解码核来基于各个编码后的对象信号参数信息对应的编码模式采用对应的解码模式对不同的编码后的对象信号参数信息进行解码,得到至少一个解码后的对象信号集。
可选的,在本公开的一个实施例之中,所述装置还用于:
对所述至少一个解码后的对象信号集进行后处理。
图11是本公开一个实施例所提供的一种用户设备UE1100的框图。例如,UE1100可以是移动电话,计算机,数字广播终端设备,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图11,UE1100可以包括以下至少一个组件:处理组件1102,存储器1104,电源组件1106,多媒体组件1108,音频组件1110,输入/输出(I/O)的接口1112,传感器组件1113,以及通信组件1116。
处理组件1102通常控制UE1100的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件1102可以包括至少一个处理器1120来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件1102可以包括至少一个模块,便于处理组件1102和其他组件之间的交互。例如,处理组件1102可以包括多媒体模块,以方便多媒体组件1108和处理组件1102之间的交互。
存储器1104被配置为存储各种类型的数据以支持在UE1100的操作。这些数据的示例包括用于在UE1100上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器1104可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件1106为UE1100的各种组件提供电力。电源组件1106可以包括电源管理系统,至少一个电源,及其他与为UE1100生成、管理和分配电力相关联的组件。
多媒体组件1108包括在所述UE1100和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括至少一个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的唤醒时间和压力。在一些实施例中,多媒体组件1108包括一个前置摄像头和/或后置摄像头。当UE1100处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件1110被配置为输出和/或输入音频信号。例如,音频组件1110包括一个麦克风(MIC),当UE1100处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1104或经由通信组件1116发送。在一些实施例中,音频组件1110还包括一个扬声器,用于输出音频信号。
I/O接口1112为处理组件1102和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件1113包括至少一个传感器,用于为UE1100提供各个方面的状态评估。例如,传感器组件1113可以检测到设备1100的打开/关闭状态,组件的相对定位,例如所述组件为UE1100的显示器和小键盘,传感器组件1113还可以检测UE1100或UE1100一个组件的位置改变,用户与UE1100接触的存在或不存在,UE1100方位或加速/减速和UE1100的温度变化。传感器组件1113可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1113还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件1113还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件1116被配置为便于UE1100和其他设备之间有线或无线方式的通信。UE1100可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件1116经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件1116还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,UE1100可以被至少一个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
图12是本公开实施例所提供的一种网络侧设备1200的框图。例如,网络侧设备1200可以被提供为一网络侧设备。参照图12,网络侧设备1200包括处理组件1211,其进一步包括至少一个处理器,以及由存储器1232所代表的存储器资源,用于存储可由处理组件1222的执行的指令,例如应用程序。存储器1232中存储的应用程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理组件1210被配置为执行指令,以执行上述方法前述应用在所述网络侧设备的任意方法,例如,如图1所示方法。
网络侧设备1200还可以包括一个电源组件1226被配置为执行网络侧设备1200的电源管理,一个有线或无线网络接口1250被配置为将网络侧设备1200连接到网络,和一个输入输出(I/O)接口1258。网络侧设备1200可以操作基于存储在存储器1232的操作系统,例如Windows Server TM,Mac OS XTM,Unix TM,Linux TM,Free BSDTM或类似。
上述本公开提供的实施例中,分别从网络侧设备、UE的角度对本公开实施例提供的方法进行了介绍。为了实现上述本公开实施例提供的方法中的各功能,网络侧设备和UE可以包括硬件结构、软件模块,以硬件结构、软件模块、或硬件结构加软件模块的形式来实现上述各功能。上述各功能中的某个功能可以以硬件结构、软件模块、或者硬件结构加软件模块的方式来执行。
上述本公开提供的实施例中,分别从网络侧设备、UE的角度对本公开实施例提供的方法进行了介绍。为了实现上述本公开实施例提供的方法中的各功能,网络侧设备和UE可以包括硬件结构、软件模块,以硬件结构、软件模块、或硬件结构加软件模块的形式来实现上述各功能。上述各功能中的某个功能可以以硬件结构、软件模块、或者硬件结构加软件模块的方式来执行。
本公开实施例提供的一种通信装置。通信装置可包括收发模块和处理模块。收发模块可包括发送模块和/或接收模块,发送模块用于实现发送功能,接收模块用于实现接收功能,收发模块可以实现发送功能和/或接收功能。
通信装置可以是终端设备(如前述方法实施例中的终端设备),也可以是终端设备中的装置,还可以是能够与终端设备匹配使用的装置。或者,通信装置可以是网络设备,也可以是网络设备中的装置,还可以是能够与网络设备匹配使用的装置。
本公开实施例提供的另一种通信装置。通信装置可以是网络设备,也可以是终端设备(如前述方法实施例中的终端设备),也可以是支持网络设备实现上述方法的芯片、芯片系统、或处理器等,还可以是支持终端设备实现上述方法的芯片、芯片系统、或处理器等。该装置可用于实现上述方法实施例中描述的方法,具体可以参见上述方法实施例中的说明。
通信装置可以包括一个或多个处理器。处理器可以是通用处理器或者专用处理器等。例如可以是基带处理器或中央处理器。基带处理器可以用于对通信协议以及通信数据进行处理,中央处理器可以用于对通信装置(如,网络侧设备、基带芯片,终端设备、终端设备芯片,DU或CU等)进行控制,执行计算机程序,处理计算机程序的数据。
可选的,通信装置中还可以包括一个或多个存储器,其上可以存有计算机程序,处理器执行所述计算机程序,以使得通信装置执行上述方法实施例中描述的方法。可选的,所述存储器中还可以存储有数据。通信装置和存储器可以单独设置,也可以集成在一起。
可选的,通信装置还可以包括收发器、天线。收发器可以称为收发单元、收发机、或收发电路等,用于实现收发功能。收发器可以包括接收器和发送器,接收器可以称为接收机或接收电路等,用于实现接收功能;发送器可以称为发送机或发送电路等,用于实现发送功能。
可选的,通信装置中还可以包括一个或多个接口电路。接口电路用于接收代码指令并传输至处理器。处理器运行所述代码指令以使通信装置执行上述方法实施例中描述的方法。
通信装置为终端设备(如前述方法实施例中的终端设备):处理器用于执行图1-图4a任一所示的方法。
通信装置为网络设备:收发器用于执行图5-图7任一所示的方法。
在一种实现方式中,处理器中可以包括用于实现接收和发送功能的收发器。例如该收发器可以是收发电路,或者是接口,或者是接口电路。用于实现接收和发送功能的收发电路、接口或接口电路可以是分开的,也可以集成在一起。上述收发电路、接口或接口电路可以用于代码/数据的读写,或者,上述收发电路、接口或接口电路可以用于信号的传输或传递。
在一种实现方式中,处理器可以存有计算机程序,计算机程序在处理器上运行,可使得通信装置执行上述方法实施例中描述的方法。计算机程序可能固化在处理器中,该种情况下,处理器可能由硬件实现。
在一种实现方式中,通信装置可以包括电路,所述电路可以实现前述方法实施例中发送或接收或者通信的功能。本公开中描述的处理器和收发器可实现在集成电路(integrated circuit,IC)、模拟IC、射频集成电路RFIC、混合信号IC、专用集成电路(application specific integrated circuit,ASIC)、印刷电路板(printed circuitboard,PCB)、电子设备等上。该处理器和收发器也可以用各种IC工艺技术来制造,例如互补金属氧化物半导体(complementary metal oxide semiconductor,CMOS)、N型金属氧化物半导体(nMetal-oxide-semiconductor,NMOS)、P型金属氧化物半导体(positive channelmetal oxide semiconductor,PMOS)、双极结型晶体管(bipolar junction transistor,BJT)、双极CMOS(BiCMOS)、硅锗(SiGe)、砷化镓(Gas)等。
以上实施例描述中的通信装置可以是网络设备或者终端设备(如前述方法实施例中的终端设备),但本公开中描述的通信装置的范围并不限于此,而且通信装置的结构可以不受的限制。通信装置可以是独立的设备或者可以是较大设备的一部分。例如所述通信装置可以是:
(1)独立的集成电路IC,或芯片,或,芯片系统或子系统;
(2)具有一个或多个IC的集合,可选的,该IC集合也可以包括用于存储数据,计算机程序的存储部件;
(3)ASIC,例如调制解调器(Modem);
(4)可嵌入在其他设备内的模块;
(5)接收机、终端设备、智能终端设备、蜂窝电话、无线设备、手持机、移动单元、车载设备、网络设备、云设备、人工智能设备等等;
(6)其他等等。
对于通信装置可以是芯片或芯片系统的情况,芯片包括处理器和接口。其中,处理器的数量可以是一个或多个,接口的数量可以是多个。
可选的,芯片还包括存储器,存储器用于存储必要的计算机程序和数据。
本领域技术人员还可以了解到本公开实施例列出的各种说明性逻辑块(illustrative logical block)和步骤(step)可以通过电子硬件、电脑软件,或两者的结合进行实现。这样的功能是通过硬件还是软件来实现取决于特定的应用和整个系统的设计要求。本领域技术人员可以对于每种特定的应用,可以使用各种方法实现所述的功能,但这种实现不应被理解为超出本公开实施例保护的范围。
本公开实施例还提供一种确定侧链路时长的系统,该系统包括前述实施例中作为终端设备(如前述方法实施例中的第一终端设备)的通信装置和作为网络设备的通信装置,或者,该系统包括前述实施例中作为终端设备(如前述方法实施例中的第一终端设备)的通信装置和作为网络设备的通信装置。
本公开还提供一种可读存储介质,其上存储有指令,该指令被计算机执行时实现上述任一方法实施例的功能。
本公开还提供一种计算机程序产品,该计算机程序产品被计算机执行时实现上述任一方法实施例的功能。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机程序。在计算机上加载和执行所述计算机程序时,全部或部分地产生按照本公开实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机程序可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机程序可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriber line,DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如,软盘、硬盘、磁带)、光介质(例如,高密度数字视频光盘(digital video disc,DVD))、或者半导体介质(例如,固态硬盘(solid state disk,SSD))等。
本领域普通技术人员可以理解:本公开中涉及的第一、第二等各种数字编号仅为描述方便进行的区分,并不用来限制本公开实施例的范围,也表示先后顺序。
本公开中的至少一个还可以描述为一个或多个,多个可以是两个、三个、四个或者更多个,本公开不做限制。在本公开实施例中,对于一种技术特征,通过“第一”、“第二”、“第三”、“A”、“B”、“C”和“D”等区分该种技术特征中的技术特征,该“第一”、“第二”、“第三”、“A”、“B”、“C”和“D”描述的技术特征间无先后顺序或者大小顺序。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本公开旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (27)

1.一种信号编解码方法,其特征在于,应用于编码端,包括:
采集音频信号,所述音频信号包括至少一个对象信号;
对所述对象信号进行信号特征分析得到分析结果;
基于所述分析结果对所述至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,其中,所述对象信号集中包括至少一个对象信号;
对所述对象信号集中的对象信号采用对应的编码模式进行编码得到至少一个编码后的对象信号参数信息,并将所述对象信号参数信息写入编码码流发送至解码端。
2.如权利要求1所述的方法,其特征在于,所述方法还包括:
对所述至少一个对象信号集进行预处理。
3.如权利要求2所述的方法,其特征在于,所述对所述对象信号集中的对象信号采用对应的编码模式进行编码,包括:
对预处理之后的对象信号集中的对象信号采用对应的编码模式进行编码。
4.如权利要求2或3所述的方法,其特征在于,所述将所述对象信号参数信息写入编码码流发送至解码端,包括:
确定分类边信息参数,所述分类边信息参数用于指示对所述对象信号的分类方式;
确定各个对象信号集对应的边信息参数,所述边信息参数用于指示所述对象信号集对应的编码模式;
将所述分类边信息参数、各个对象信号集对应的边信息参数、编码后的对象信号参数信息进行码流复用以得到编码码流,将所述编码码流发送至解码端。
5.如权利要求1所述的方法,其特征在于,所述对所述对象信号进行信号特征分析得到分析结果,包括:
对所述至少一个对象信号进行高通滤波处理;
对高通滤波处理之后的对象信号进行相关性分析,以确定各个对象信号之间的互相关性参数值。
所述至少一个对象信号为两个或两个以上对象信号。
6.如权利要求5所述的方法,其特征在于,所述基于所述分析结果对所述至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,包括:
依据相关程度,设置归一化相关程度区间;
基于所述对象信号的互相关性参数值、归一化相关程度区间,对至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于所述至少一个对象信号集对应的相关程度确定对应的编码模式。
7.如权利要求5所述的方法,其特征在于,所述对象信号集对应的编码模式包括独立编码模式或联合编码模式。
8.如权利要求7所述的方法,其特征在于,所述独立编码模式对应有时域处理方式或者频域处理方式;
其中,当所述对象信号集中的对象信号为语音信号或者类语音信号,所述独立编码模式采用时域处理方式;
当所述对象信号集中的对象信号为除语音信号或者类语音信号的其他音频信号,所述独立编码模式采用频域处理方式。
9.如权利要求5-8任一所述的方法,其特征在于,所述对所述对象信号集采用对应的编码模式进行编码,包括:
采用同一编码核来对所有所述对象信号集采用对应的编码模式进行编码。
10.如权利要求1所述的方法,其特征在于,所述对所述对象信号进行信号特征分析得到分析结果,包括:
分析所述对象信号的频带带宽范围。
11.如权利要求10所述的方法,其特征在于,所述基于所述分析结果对所述至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,包括:
确定不同频带带宽对应的带宽区间;
基于所述对象信号的频带带宽范围、不同频带带宽对应的带宽区间,对所述至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于所述至少一个对象信号集对应的频带带宽确定对应的编码模式。
12.如权利要求10所述的方法,其特征在于,所述基于所述分析结果对所述至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,包括:
获取输入的命令行控制信息,所述命令行控制信息用于指示所述对象信号对应的待编码频带带宽范围;
综合所述命令行控制信息和所述分析结果对所述至少一个对象信号进行分类以得到至少一个对象信号集,并基于分类结果确定各个对象信号集对应的编码模式。
13.如权利要求8-12任一所述的方法,其特征在于,所述对所述对象信号集采用对应的编码模式进行编码,包括:
采用不同的编码核对不同的对象信号集采用对应的编码模式进行编码。
14.一种信号编解码方法,其特征在于,应用于解码端,包括:
接收编码端发送的编码码流;
对所述编码码流进行解码以得到至少一个解码后的对象信号集。
15.如权利要求14所述的方法,其特征在于,所述方法还包括:
对所述编码码流进行码流解析以得到分类边信息参数、各个对象信号集合对应的边信息参数、至少一个编码后的对象信号参数信息;
其中,所述分类边信息参数用于指示对象信号的分类方式,所述边信息参数用于指示所述对象信号集对应的编码模式。
16.如权利要求15所述的方法,其特征在于,所述对所述编码码流进行解码以得到至少一个对象信号集,包括:
基于所述分类边信息参数确定所述对象信号的分类方式;
基于所述边信息参数确定各个编码后的对象信号参数信息对应的编码模式;
基于所述对象信号的分类方式和各个编码后的对象信号参数信息对应的编码模式来采用对应的解码模式对各个编码后的对象信号参数信息进行解码。
17.如权利要求16所述的方法,其特征在于,所述分类边信息参数指示所述对象信号的分类方式为:基于互相关性参数值进行分类;
所述基于所述对象信号的分类方式和各个编码后的对象信号参数信息对应的编码模式来采用对应的解码模式对各个编码后的对象信号参数信息进行解码,包括:
采用同一解码核来基于各个编码后的对象信号参数信息对应的编码模式采用对应的解码模式对各个编码后的对象信号参数信息进行解码,得到至少一个解码后的对象信号集。
18.如权利要求16所述的方法,其特征在于,所述分类边信息参数指示所述对象信号的分类方式为:基于频带带宽范围进行分类;
所述基于所述对象信号的分类方式和各个编码后的对象信号参数信息对应的编码模式来采用对应的解码模式对各个编码后的对象信号参数信息进行解码,包括:
采用不同的解码核来基于各个编码后的对象信号参数信息对应的编码模式采用对应的解码模式对不同的编码后的对象信号参数信息进行解码,得到至少一个解码后的对象信号集。
19.如权利要求17或18所述的方法,其特征在于,所述方法还包括:
对所述至少一个解码后的对象信号集进行后处理。
20.一种基于信号编解码的装置,其特征在于,包括:
分析模块,用于对所述对象信号进行信号特征分析得到分析结果;
处理模块,用于基于所述分析结果对所述至少一个对象信号进行分类以得到至少一个对象信号集,以及,基于分类结果确定各个对象信号集对应的编码模式,其中,所述对象信号集中包括至少一个对象信号;
编码模块,用于对所述对象信号集中的对象信号采用对应的编码模式进行编码得到至少一个编码后的对象信号参数信息,并将所述对象信号参数信息写入编码码流发送至解码端。
21.一种基于信号编解码的装置,其特征在于,包括:
接收模块,用于接收编码端发送的编码码流;
解码模块,用于对所述编码码流进行解码以得到至少一个解码后的对象信号集。
22.一种通信装置,其特征在于,所述装置包括处理器和存储器,所述存储器中存储有计算机程序,所述处理器执行所述存储器中存储的计算机程序,以使所述装置执行如权利要求1至13中任一项所述的方法。
23.一种通信装置,其特征在于,所述装置包括处理器和存储器,所述存储器中存储有计算机程序,所述处理器执行所述存储器中存储的计算机程序,以使所述装置执行如权利要求14至19中任一项所述的方法。
24.一种通信装置,其特征在于,包括:处理器和接口电路;
所述接口电路,用于接收代码指令并传输至所述处理器;
所述处理器,用于运行所述代码指令以执行如权利要求1至13中任一项所述的方法。
25.一种通信装置,其特征在于,包括:处理器和接口电路;
所述接口电路,用于接收代码指令并传输至所述处理器;
所述处理器,用于运行所述代码指令以执行如权利要求14至19任一所述的方法。
26.一种计算机可读存储介质,用于存储有指令,当所述指令被执行时,使如权利要求1至13中任一项所述的方法被实现。
27.一种计算机可读存储介质,用于存储有指令,当所述指令被执行时,使如权利要求14至19中任一项所述的方法被实现。
CN202180003452.3A 2021-10-21 2021-10-21 一种信号编解码方法、装置、编码设备、解码设备及存储介质 Pending CN114127844A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2021/125432 WO2023065254A1 (zh) 2021-10-21 2021-10-21 一种信号编解码方法、装置、编码设备、解码设备及存储介质

Publications (1)

Publication Number Publication Date
CN114127844A true CN114127844A (zh) 2022-03-01

Family

ID=80364085

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180003452.3A Pending CN114127844A (zh) 2021-10-21 2021-10-21 一种信号编解码方法、装置、编码设备、解码设备及存储介质

Country Status (2)

Country Link
CN (1) CN114127844A (zh)
WO (1) WO2023065254A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5793675B2 (ja) * 2009-07-31 2015-10-14 パナソニックIpマネジメント株式会社 符号化装置および復号装置
EP2717265A1 (en) * 2012-10-05 2014-04-09 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Encoder, decoder and methods for backward compatible dynamic adaption of time/frequency resolution in spatial-audio-object-coding
EP3997697A4 (en) * 2019-07-08 2023-09-06 VoiceAge Corporation METHOD AND SYSTEM FOR ENCODING METADATA IN AUDIO DATA STREAMS AND FOR EFFICIENT BIT RATE ALLOCATION FOR ENCODING AUDIO DATA STREAMS
CN113192523A (zh) * 2020-01-13 2021-07-30 华为技术有限公司 一种音频编解码方法和音频编解码设备

Also Published As

Publication number Publication date
WO2023065254A1 (zh) 2023-04-27

Similar Documents

Publication Publication Date Title
CN102460462B (zh) 用于隐私设置的直观管理的方法和装置
KR101615421B1 (ko) 유사한 사운드 환경 내의 모바일 디바이스들을 식별하는 방법 및 장치
CN104067341A (zh) 在存在背景噪声的情况下的语音活动检测
WO2023077284A1 (zh) 一种信号编解码方法、装置、用户设备、网络侧设备及存储介质
WO2021232995A1 (zh) 基于心理声学的音频编码方法及装置
CN114127844A (zh) 一种信号编解码方法、装置、编码设备、解码设备及存储介质
CN116665692A (zh) 语音降噪方法和终端设备
CN114667744B (zh) 实时通信方法、装置和系统
CN108401535A (zh) 信息配置方法及装置、接收功率的确定方法及装置和基站
WO2023097686A1 (zh) 一种立体声音频信号处理方法及设备/存储介质/装置
WO2023092505A1 (zh) 一种立体声音频信号处理方法、装置、编码设备、解码设备及存储介质
KR20240100384A (ko) 신호 부호화/복호화 방법, 장치, 사용자 기기, 네트워크측 기기 및 저장 매체
WO2023240653A1 (zh) 音频信号格式确定方法、装置
WO2023212880A1 (zh) 音频处理方法、装置及存储介质
WO2023193148A1 (zh) 音频回放方法/装置/设备及存储介质
WO2023092602A1 (zh) 一种预编码方法、装置、用户设备、ris阵列、基站及存储介质
WO2023164850A1 (zh) 一种功率确定方法/装置/用户设备/网络侧设备及存储介质
WO2023070407A1 (zh) 一种预编码方法、装置、用户设备、可重构智能表面ris阵列及存储介质
WO2023168718A1 (zh) 一种模型训练部署方法/装置/设备及存储介质
WO2023130283A1 (zh) 一种映射方式确定方法/装置/设备及存储介质
WO2023193276A1 (zh) 一种上报方法/装置/设备及存储介质
WO2023173433A1 (zh) 一种信道估计方法/装置/设备及存储介质
WO2023039728A1 (zh) 一种基于用户设备ue能力的模型处理方法、装置、用户设备、基站及存储介质
WO2023206176A1 (zh) 测量报告发送方法、测量报告接收方法、装置
WO2023206177A1 (zh) Ai波束模型确定方法、装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination