CN112073890A - 音频数据处理方法、装置和终端设备 - Google Patents

音频数据处理方法、装置和终端设备 Download PDF

Info

Publication number
CN112073890A
CN112073890A CN202010954352.6A CN202010954352A CN112073890A CN 112073890 A CN112073890 A CN 112073890A CN 202010954352 A CN202010954352 A CN 202010954352A CN 112073890 A CN112073890 A CN 112073890A
Authority
CN
China
Prior art keywords
data
channel data
audio
inner channel
audio data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010954352.6A
Other languages
English (en)
Other versions
CN112073890B (zh
Inventor
何志刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Jimi Technology Co Ltd
Original Assignee
Chengdu Jimi Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Jimi Technology Co Ltd filed Critical Chengdu Jimi Technology Co Ltd
Priority to CN202010954352.6A priority Critical patent/CN112073890B/zh
Publication of CN112073890A publication Critical patent/CN112073890A/zh
Application granted granted Critical
Publication of CN112073890B publication Critical patent/CN112073890B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S1/00Two-channel systems
    • H04S1/007Two-channel systems in which the audio signals are in digital form
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13Aspects of volume control, not necessarily automatic, in stereophonic sound systems

Abstract

本申请提供一种音频数据处理方法、装置和终端设备,通过对获取的音频数据进行数据拆分,得到内通道数据以及外通道数据,并对内通道数据和外通道数据进行音量调整以及音效匹配处理,再对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据通过内置扬声器进行播放、将外通道数据通过外置扬声器进行播放。如此,通过对音频数据按通道进行拆分以及音量调整、音效匹配、延迟同步处理等,可得到优良的分别与内置扬声器和外置扬声器匹配的音频数据,提高音频播放效果。

Description

音频数据处理方法、装置和终端设备
技术领域
本申请涉及音频技术领域,具体而言,涉及一种音频数据处理方法、装置和终端设备。
背景技术
针对电视、投影仪等播放设备,其原生音频系统存在多种局限性,例如喇叭功率过小、低音缺失或左右声道挨得太近等。如果通过另外配置外置音箱的方式来改善这些问题,将造成本机音箱的浪费。
因此,目前常用的方式是进行音箱组合的方式来改善上述问题,即扩展一个外置扬声器以与本机扬声器组成多样的音频系统,如2.1、5.1、7.1等音频系统。在这种场景下,则需要对音频数据进行处理以分别送至内置扬声器和外部扬声器。但是,目前在进行外置扬声器的扩展后,由于未对音频数据进行合理地处理,导致该场景下的音频播放效果不佳。
发明内容
本申请的目的包括,例如,提供了一种音频数据处理方法、装置和终端设备,其能够通过得到分别与内置扬声器和外置扬声器匹配的音频数据,从而提高音频播放效果。
本申请的实施例可以这样实现:
第一方面,本申请实施例提供一种音频数据处理方法,应用于包括内置扬声器和外置扬声器的终端设备,所述方法包括:
对获取的音频数据进行数据拆分,得到内通道数据以及外通道数据;
对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理;
对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据通过所述内置扬声器进行播放、将所述外通道数据通过所述外置扬声器进行播放。
在可选的实施方式中,所述终端设备还包括与所述Audio Hal连接的信号处理设备以及与所述信号处理设备连接的解码器,所述内置扬声器与所述信号处理设备连接;
所述信号处理设备和所述内置扬声器之间包括用于传输第一类型数据的第一通道和用于传输第二类型数据的第二通道,其中,所述第一类型数据为所述信号处理设备从所述解码器处获取的音频数据,所述第二类型数据为所述信号处理设备从所述Audio Hal获取的音频数据,所述第一通道截断、所述第二通道导通;
所述将所述同步处理后的内通道数据通过所述内置扬声器进行播放的步骤,包括:
将所述同步处理后的内通道数据发送至所述信号处理设备,以使所述信号处理设备通过所述第二通道将所述内通道数据传输至所述内置扬声器并进行播放。
在可选的实施方式中,所述对获取的音频数据进行数据拆分之前,所述方法还包括:
检测获取的音频数据的通道是否与当前音频系统匹配,若不匹配,则对所述音频数据进行通道转换,以使转换后的通道与所述当前音频系统匹配。
在可选的实施方式中,所述对所述音频数据进行通道转换,以使转换后的通道与所述当前音频系统匹配的步骤,包括:
获取基于所述内置扬声器和所述外置扬声器构成的当前音频系统所需的通道;
对所述音频数据的通道进行上混处理,以使得到的音频数据的通道与所述当前音频系统所需的通道一致。
在可选的实施方式中,所述对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理的步骤,包括:
根据预设的音量分贝范围及预设调整公式,分别对所述内通道数据和所述外通道数据进行音量调整;
根据预设的不同调整参数,对所述内通道数据和所述外通道数据的幅度进行调整,以使调整后的内通道数据和外通道数据分别与预设的频率特性曲线相匹配。
在可选的实施方式中,所述根据预设的不同调整参数,对所述内通道数据和所述外通道数据的幅度进行调整的步骤,包括:
将所述内通道数据和所述外通道数据分别划分多个频段;
根据所述内通道数据的各个频段以及预设的与各所述频段对应的调整参数,对所述内通道数据的幅度进行调整,所述调整参数包括与各所述频段对应的增益和带通滤波器传递函数;
根据所述外通道数据的各个频段以及预设的与各所述频段对应的调整参数,对所述外通道数据的幅度进行调整。
在可选的实施方式中,所述对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理的步骤,包括:
比对所述内通道数据和所述外通道数据的相对速度,确定相对速度较快的通道数据;
将相对速度较快的通道数据进行数据缓存,在缓存数据达到需求数量时,将所述内通道数据和所述外通道数据输出,其中,所述需求数量为根据所述内通道数据和所述外通道数据的相对速度所确定。
第二方面,本申请实施例提供一种音频数据处理装置,应用于终端设备中硬件抽象层Audio Hal,所述终端设备还包括内置扬声器和外置扬声器,所述装置包括:
拆分模块,用于对获取的音频数据进行数据拆分,得到内通道数据以及外通道数据;
调整模块,用于对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理;
处理模块,用于对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据通过所述内置扬声器进行播放、将所述外通道数据通过所述外置扬声器进行播放。
第三方面,本申请实施例提供一种终端设备,包括相互连接的硬件抽象层AudioHal和信号处理设备,以及与所述Audio Hal连接的外置扬声器、与所述信号处理设备连接的内置扬声器和解码器;
所述信号处理设备用于从所述解码器获取解码后的音频数据;
所述Audio Hal用于从所述信号处理设备获取所述音频数据,并对所述音频数据进行数据拆分,得到内通道数据以及外通道数据;
所述Audio Hal还用于对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理,对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据发送至所述信号处理设备、将外通道数据发送至所述外置扬声器;
所述信号处理设备还用于将接收到的内通道数据发送至所述内置扬声器。
在可选的实施方式中,所述信号处理设备和所述内置扬声器之间包括用于传输第一类型数据的第一通道和用于传输第二类型数据的第二通道,其中,所述第一类型数据为所述信号处理设备从所述解码器处获取的音频数据,所述第二类型数据为所述信号处理设备从所述Audio Hal获取的音频数据,所述第一通道截断、所述第二通道导通;
所述信号处理设备用于通过所述第二通道将接收到的内通道数据发送至所述内置扬声器。
在可选的实施方式中,在从所述信号处理设备获取所述音频数据之前,所述AudioHal还用于:
检测获取的音频数据的通道是否与当前音频系统匹配;
若不匹配,获取基于所述内置扬声器和所述外置扬声器构成的当前音频系统所需的通道;
对所述音频数据的通道进行上混处理,以使得到的音频数据的通道与所述当前音频系统所需的通道一致。
在可选的实施方式中,所述Audio Hal用于通过以下方式对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理:
根据预设的音量分贝范围及预设调整公式,分别对所述内通道数据和所述外通道数据进行音量调整;
根据预设的不同调整参数,对所述内通道数据和所述外通道数据的幅度进行调整,以使调整后的内通道数据和外通道数据分别与预设的频率特性曲线相匹配。
本申请实施例的有益效果包括,例如:
本申请提供的音频数据处理方法、装置和终端设备,通过对获取的音频数据进行数据拆分,得到与内置扬声器的通道对应的内通道数据以及外置扬声器对应的外通道数据,并对内通道数据和外通道数据进行音量调整以及音效匹配处理,再对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据通过内置扬声器进行播放、将外通道数据通过外置扬声器进行播放。如此,通过对音频数据按通道进行拆分以及音量调整、音效匹配、延迟同步处理等,可得到优良的分别与内置扬声器和外置扬声器匹配的音频数据,提高音频播放效果。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本申请实施例提供的终端设备的结构框图;
图2为本申请实施例提供的音频数据处理方法的流程图;
图3为本申请实施例提供的终端设备的另一结构框图;
图4为本申请实施例提供的音频数据处理方法的另一流程图;
图5为本申请实施例提供的音频数据处理方法中,音量调整及音效匹配方法的流程图;
图6为本申请实施例提供的音效匹配方法的流程图;
图7为本申请实施例提供的同步处理方法的流程图;
图8为本申请实施例提供的音频数据处理装置的功能模块框图。
图标:10-终端设备;100-内置扬声器;200-外置扬声器;300-信号处理设备;400-硬件抽象层;410-拆分模块;420-调整模块;430-处理模块;500-解码器。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。
因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
需要说明的是,在不冲突的情况下,本申请的实施例中的特征可以相互结合。
请参阅图1,为本申请实施例提供的终端设备10的示意性结构框图,该终端设备10可以是例如电视机、投影仪、个人计算机、游戏主机等设备。该终端设备10包括内置扬声器100,为终端设备10的原生音放系统。但是,考虑到只包含内置扬声器100的原生音放系统通常存在如喇叭功率过小、低音缺失及左右声道挨得太近的缺陷,因此,本实施例所提供的终端设备10还包括扩展的外置扬声器200。内置扬声器100和外置扬声器200构成本实施例的终端设备10的音放系统。
此外,该终端设备10还包括解码器500以及与该解码器500连接的信号处理设备300,例如数字信号处理(Digital Signal Processing,DSP)设备。此外,还包括与所述信号处理设备300连接的硬件抽象层400Audio Hal。上述内置扬声器100与信号处理设备300连接,外置扬声器200与Audio Hal连接。
其中,上述解码器500可通过终端设备10包含的高清多媒体接口(HighDefinition Multimedia Interface,HDMI)获取音视频数据,并对其中的音频数据进行解码,并将解码后的音频数据发送至信号处理设备300。此外,本申请提供的方案也可以应用于除HDMI接口之外的其他接口类型,例如USB接口。
在通常的处理方式中,信号处理设备300在获得解码后的音频数据后,将会直接将音频数据发送至内置扬声器100进行播放,但是,这种处理方式将不适用于本申请的扩展有外置扬声器200的场景,这种处理方式将导致内置扬声器100和外置扬声器200所播放的音频数据不能相匹配,从而导致播放问题。
因此,本实施例中,在信号处理设备300获得解码后的音频数据后,Audio Hal将从信号处理设备300处获取音频数据,并对音频数据进行数据处理,最后再将处理后的音频数据返回至信号处理设备300,通过信号处理设备300将处理后的音频数据发送至内置扬声器100,同时,Audio Hal将处理后的音频数据发送至外置扬声器200,从而通过内置扬声器100和外置扬声器200进行音频数据的播放。避免了原有方式中存在的播放的音频数据无法与分别与内置扬声器100、外置扬声器200匹配,导致的影响播放效果的问题。
在上述终端设备10的架构基础上,本申请实施例还提供一种音频数据处理方法,该音频数据处理方法可以应用于上述终端设备10中的Audio Hal。如图2所示,为本申请实施例所提供的音频数据处理方法的流程图,所应说明的是,本实施例提供的方法不以图2及以下所述的顺序为限制,下面将对图2所示的具体流程进行详细阐述。
步骤S210,对获取的音频数据进行数据拆分,得到内通道数据以及外通道数据。
步骤S220,对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理。
步骤S230,对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据通过所述内置扬声器100进行播放、将所述外通道数据通过所述外置扬声器200进行播放。
本实施例中,Audio Hal可从信号处理设备300获得音频数据,例如可通过信号处理设备300的录音接口获得音频数据。该音频数据为解码器500对获得的音视频数据经过解码处理后所获得并发送信号处理设备300的。
由于终端设备10的原生音频系统中内置扬声器100包含的音频通道往往存在不足的缺陷,因此,才会有需要扩展外置扬声器200以构成组合音放系统的需求。可见,内置扬声器100和外置扬声器200的数据通道应当是不同的,以分别负责不同的音频通道,从而后续进行组合播放。
本实施例中,获取的音频数据中包含多个通道的音频数据,为了内置扬声器100和外置扬声器200能够获得对应通道的音频数据,进而实现播放,因此,Audio Hal在获取音频数据后,将对音频数据进行数据拆分,拆分时,可按音频数据中包含的对应不同音频通道的数据进行拆分。在拆分得到各个音频通道的音频数据后,将与内置扬声器100的通道对应的音频数据作为内通道数据,与外置扬声器200的通道对应的音频数据作为外通道数据。
例如,以构成的当前音频系统为5.1环境为例,5.1的音频系统包含的数据通道为前左通道、前右通道、中置通道、低音炮通道、后左通道以及后右通道。若内置扬声器100作为中置场景时,则将拆分得到的对应中置通道的音频数据分配给内置扬声器100,而对应其余通道的音频数据分配给外置扬声器200。
此外,获得的内通道数据和外通道数据的音量往往不能在符合规范的要求内,并且,未经处理的音频数据的音效也难以达到良好效果。因此,在拆分得到内通道数据好外通道数据后,可对内通道数据和外通道数据进行音频调整以及音效匹配处理。
在此基础上,由于进行了数据的拆分、不同通道的数据将分别发至内置扬声器100和外置扬声器200进行播放,而不同通道的数据可能存在不同的延迟,将导致后续播放不能同步,影响播放效果。因此,本实施例中,在经过上述处理后,可对内通道数据和外通道数据进行延迟同步处理,再将延迟同步处理后的内通道数据通过内置扬声器100进行播放,将外通道数据通过外置扬声器200进行播放。
可选地,Audio Hal可将内通道数据发送至信号处理设备300,信号处理设备300再将内通道数据发送至与其连接的内置扬声器100,同时,Audio Hal将外通道数据直接发送至与其连接的外置扬声器200。从而,内置扬声器100和外置扬声器200实现音频数据的同步播放。
本实施例所提供的音频数据处理方法,通过对获取的音频数据进行一系列地处理,例如按音频通道进行数据拆分、音量调整、音效匹配以及延迟同步处理等,以此得到优良的分别与内置扬声器100和外置扬声器200匹配的音频数据,提高音频播放效果。
请结合参阅图3,在本实施例中,在信号处理设备300和内置扬声器100之间包括第一通道和第二通道。除了第一通道和第二通道之外,信号处理设备300和内置扬声器100之间还可包括其他通道。其中,第一通道可用于传输第一类型数据,第二通道可用于传输第二类型数据。第一类型数据为信号处理设备300直接从解码器500处获取的音频数据,而第二类型数据为信号处理设备300从Audio Hal处获取的经过处理后的音频数据。
在应用于HDMI接口的情况下,由于在这种场景下,信号处理设备300会将解码器500解码后的音频数据直接发往内置扬声器100,因此,在此场景下,信号处理设备300和内置扬声器100之间的第一通道将被截断。如此,信号处理设备300从解码器500处获取的音频数据将被消音,而无法传输至内置扬声器100。
而在Audio Hal处理获得内通道数据后,再将内通道数据发送至信号处理设备300,以使信号处理设备300通过第二通道将内通道数据传输至内置扬声器100并进行播放。
在本实施例中,考虑到由于音频系统扩展了外置扬声器200,因此,当前的音频系统环境有所改变,获取的音频数据可能不一定能够与当前音频系统环境匹配,导致难以进行后续处理,因此,请参阅图4,本实施例中,在执行对音频数据的拆分处理之前,所提供的方法还包括以下步骤:
步骤S110,检测获取的音频数据的通道是否与当前音频系统匹配,若不匹配,则执行以下步骤S120,若匹配,则执行步骤S210。
步骤S120,对所述音频数据进行通道转换,以使转换后的通道与所述当前音频系统匹配。
本实施例中,往往所获取到的音频数据的通道数量是小于当前音频系统所对应的通道数量的。也即,需要对获取的音频数据进行上混Upmix处理。
可选地,可获取基于内置扬声器100和外置扬声器200构成的当前音频系统所需的通道,对获取的音频数据的通道进行上混处理,以使得到的音频数据的通道与当前音频系统所需的通道一致。
其中,在对获取的音频数据的通道进行上混处理的步骤中,可获得外置扬声器所需的第一音频通道以及内置扬声器对应的第二音频通道,将获得的音频数据中包含的与所述内置扬声器的通道对应的音频数据作为所述第二音频通道的音频数据,并将获得的音频数据按预设方式进行转换处理后作为所述第一音频通道对应的音频数据,以使得到的音频数据的通道与当前音频系统所需的通道一致。其中,预设方式可为获得的音频数据的叠加、音频数据的延时处理等。
例如,进行扩展之后的当前音频系统可以是5.1环境或7.1环境等,而获取到的音频数据往往可能是2.0的两通道立体声数据,因此,需要将2.0的音频数据进行上混处理,转换为与5.1音频系统匹配的音频数据。
以将获取的2.0的音频数据转换为与当前为5.1音频系统匹配的音频数据为例。若当前组合后的音频系统为5.1环境,内置扬声器100的通道为前左通道、前右通道,而外置扬声器200的通道可为中置通道、低音炮通道、后左通道和后右通道。获取的2.0的两通道立体声音频数据中包含左通道数据L以及右通道数据R,则可以通过以下方式对获取的音频数据进行上混处理,从而得到内置扬声器100、外置扬声器200所需的通道数据:
前左通道=L
前右通道=R
中置通道=(L+R)/2
低音炮通道=(L+R)/2
后左通道=L(延时20ms)
后右通道=R(延时20ms)
如此,在扩展了外置扬声器200的场景下,可预先通过检测音频数据的通道与当前音频系统所需通道的匹配性以及通道调整处理,从而可得到满足当前音频系数所需通道要求的音频数据,避免后续处理的障碍。
在本实施例中,考虑到用户对于音频数据的音量需求往往在一定范围内,例如-100~0分贝之间,为了避免音频数据的音量不符合规范要求,因此,可对音频数据的音量进行调整。此外,由于用户对于最终的音频数据的音效往往有较高的要求,因此,最终呈现给用户的音频数据往往需要是一个复合音,即由基音和泛音所构成,这样的音频在音效上将达到良好的效果。
因此,请参阅图5,在本实施例中,可通过以下方式对获得的音频数据进行音量调整和音效匹配处理:
步骤S221,根据预设的音量分贝范围及预设调整公式,分别对所述内通道数据和所述外通道数据进行音量调整。
步骤S222,根据预设的不同调整参数,对所述内通道数据和所述外通道数据的幅度进行调整,以使调整后的内通道数据和外通道数据分别与预设的频率特性曲线相匹配。
由上述可知,用户最终所需的音频的音量在一定范围内,因此,在对内通道数据和外通道数据的音量进行调整时,其预设的音量分贝范围则可以设定用户所需的音量范围,例如-100~0分贝。在对音频数据进行音量调整时,即可通过对音频数据的声压进行调整的方式实现。可选地,可基于预设调整公式以及该音量分贝范围按以下方式进行调整:
dataout=datain*e(db*ln(10)/20)
其中,dataout表示调整后的音频数据的声压,datain表示调整之前的内通道数据的声压或外通道数据的声压,e为自然底数,db表示预设的音量分贝范围。
如此,按上述方式调整之后的内通道数据和外通道数据的音量可达到满足用户所需要求范围的目的。
在此基础上,在对音频数据进行音效匹配时,可采用EQ(Equaliser)匹配的方式实现。终端设备10中往往预存有标准的频率特性曲线,EQ匹配的目的就是通过对音频数据的幅度进行调整,从而使得调整后的音频数据能够符合预设的频率特性曲线。可选地,请参阅图6,可通过以下方式进行音频数据的音效匹配:
步骤S2221,将所述内通道数据和所述外通道数据分别划分多个频段。
步骤S2222,根据所述内通道数据的各个频段以及预设的与各所述频段对应的调整参数,对所述内通道数据的幅度进行调整,所述调整参数包括与各所述频段对应的增益和带通滤波器传递函数。
步骤S2223,根据所述外通道数据的各个频段以及预设的与各所述频段对应的调整参数,对所述外通道数据的幅度进行调整。
音频数据可以包括多个频段,例如可包括高频(HF)、中高频(MID HF)、中低频(MIDLF)、低频(LF),其中,高频一般在6kHZ-16kHZ,往往影响音色的表现力、解析力,中高频一般在600HZ-6kHZ,往往影响音色的明亮度、清晰度等,中低频一般在200HZ-600HZ,往往影响音色的结实度,而低频一般在20HZ-200HZ,往往影响音色的浑厚度和丰满度。
而各个频段的音频在进行调整时,所需采用的调整参数存在差别,因此,可预先将内通道数据和外通道数据分别划分为多个频段,划分的方式可以按照上述频段区别进行划分。
在进行音效处理时,可在Audio Hal中通过滤波器对每个声音频段的幅度进行调节控制,从而实现调整。例如,针对内通道数据而言,可根据内通道数据的各个频段以及预设的与各个频段对应的调整参数,按以下方式对内通道数据的幅度进行调整:
Figure BDA0002678093910000141
其中,Y(w)表示输出信号,X(w)表示输入信号,BandCount表示划分的频段数量,a表示对应频段的增益,H(w)表示对应频段的带通滤波器传递函数。
同理,对于外通道数据,可采用上述同样方式对外通道数据进行音效调整,本实施例在此不作赘述。
通过以上方式,则可以对内通道数据和外通道数据的音效进行匹配调整,使得调整后的音效可以符合预设的标准、良好的频率特性曲线,提高音频播放效果。
实施时,在不同的播放模式下所需的音效不同,例如电影模式、音乐模式等,对应所需的音频音效要求不同。因此,在进行处理时,可根据对应的播放模式的要求进行处理,以得到满足不同播放模式的音效要求的音频数据。例如,按预存的不同播放模式的频率特性曲线、不同播放模式的对应各个频段的调整参数,进行数据的幅度调整。
在对内通道数据和外通道数据的音量、音效分别进行调整之后,本实施例中,考虑到不同通道数据可能存在不同延时,为了保证各个通道数据后续可同步播放,因此,还需对内通道数据和外通道数据进行同步处理。可选地,请参阅图7,可按以下方式执行:
步骤S231,比对所述内通道数据和所述外通道数据的相对速度,确定相对速度较快的通道数据。
步骤S232,将相对速度较快的通道数据进行数据缓存,在缓存数据达到需求数量时,将所述内通道数据和所述外通道数据输出,其中,所述需求数量为根据所述内通道数据和所述外通道数据的相对速度所确定。
本实施例中,通过对内通道数据和外通道数据进行数据延迟的方式来达到对两路数据的播放同步。在进行延迟处理时,可通过对相对速度较快的那一路数据进行缓存的方式来实现同步。例如,若内通道数据相对速度较快,则可对内通道数据进行数据缓存,而若外通道数据的相对速度较快,则可对外通道数据进行数据缓存。
本实施例中,在进行数据缓存以在缓存数据达到需求数据时,再进行数据的播放,其中,缓存数据的数据量可通过以下方式来确定:
缓存数据量(字节/秒)=(采样频率(Hz)*采样位数(bit)*声道数)/8
本实施例中,在经过上述一系列处理之后,Audio Hal可将处理后的内通道数据发送至信号处理设备300,再通过信号处理设备300发送至内置扬声器100进行播放,并且,将处理后的外通道数据发送至外置扬声器200进行播放。
以上对数据的处理过程主要是在Audio Hal中执行,而终端设备10中其他部件,例如信号处理设备300在上述整体音频数据处理过程中,也通过相应的处理操作以配合实现上述方法实现。
以下将对本实施例所提供的终端设备10中各个部件在实现上述的音频数据处理方法中,所起到的功能用途进行介绍:
所述信号处理设备300用于从所述解码器500获取解码后的音频数据;
所述Audio Hal用于从所述信号处理设备300获取所述音频数据,并对所述音频数据进行数据拆分,得到内通道数据以及外通道数据;
所述Audio Hal还用于对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理,对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据发送至所述信号处理设备300、将外通道数据发送至所述外置扬声器200;
所述信号处理设备300还用于将接收到的内通道数据发送至所述内置扬声器100。
在本实施例中,在信号处理设备300和内置扬声器100之间包括第一通道和第二通道。当然应当理解,除了第一通道和第二通道之外,信号处理设备300和内置扬声器100之间还可包括其他通道。其中,第一通道可用于传输第一类型数据,第二通道可用于传输第二类型数据。第一类型数据为信号处理设备300直接从解码器500处获取的音频数据,而第二类型数据为信号处理设备300从Audio Hal处获取的经过处理后的音频数据。
在应用于HDMI接口的情况下,由于在这种场景下,信号处理设备300会将解码器500解码后的音频数据直接发往内置扬声器100,因此,在此场景下,信号处理设备300和内置扬声器100之间的第一通道将被截断。如此,信号处理设备300从解码器500处获取的音频数据将被消音,而无法传输至内置扬声器100。
在上述基础上,信号处理设备300可以用于通过第二通道将接收到的内通道数据发送至内置扬声器100。本实施例中,信号处理设备300在获取到音频数据但还未进行处理时,由于第一通道截断,因此,该音频数据将被消音而无法传输至内置扬声器100。而在Audio Hal对音频数据进行处理之后,信号处理设备300在获得该处理后的音频数据后,可通过用于传输该类型数据的第二通道将内通道数据传输至内置扬声器100,从而通过内置扬声器100实现音频数据的播放。如此,提高播放效果。
此外,在一种实现方式中,在从所述信号处理设备300获取所述音频数据之前,所述Audio Hal还用于:
检测获取的音频数据的通道是否与当前音频系统匹配;
若不匹配,获取基于所述内置扬声器100和所述外置扬声器200构成的当前音频系统所需的通道;
对所述音频数据的通道进行上混处理,以使得到的音频数据的通道与所述当前音频系统所需的通道一致。
在一种实现方式中,所述Audio Hal用于通过以下方式对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理:
根据预设的音量分贝范围及预设调整公式,分别对所述内通道数据和所述外通道数据进行音量调整;
根据预设的不同调整参数,对所述内通道数据和所述外通道数据的幅度进行调整,以使调整后的内通道数据和外通道数据分别与预设的频率特性曲线相匹配。
需要说明的是,实施例中终端设备10各个部件的用途未详尽之处,可参见上述实施例对于音频数据处理方法中的描述,在此不再作赘述。
此外,请参阅图8,本申请实施例还提供一种对应于上述音频数据处理方法的应用于Audio Hal的音频数据处理装置,该装置用于执行本申请实施例上述内容所提供的音频数据处理方法,以下为本申请实施例提供的音频数据处理装置的具体介绍。
拆分模块410,用于对获取的音频数据进行数据拆分,得到内通道数据以及外通道数据。
可以理解,该拆分模块410可以用于执行上述步骤S210,关于该拆分模块410的详细实现方式可以参照上述对步骤S210有关的内容。
调整模块420,用于对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理。
可以理解,该调整模块420可以用于执行上述步骤S220,关于该调整模块420的详细实现方式可以参照上述对步骤S220有关的内容。
处理模块430,用于对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据通过所述内置扬声器100进行播放、将所述外通道数据通过所述外置扬声器200进行播放。
可以理解,该处理模块430可以用于执行上述步骤S230,关于该处理模块430的详细实现方式可以参照上述对步骤S230有关的内容。
前述音频数据处理装置中各个模块执行的详细过程,在此不再一一赘述,可参考前文对所述音频数据处理方法的解释说明。
综上所述,本申请实施例提供的音频数据处理方法、装置和终端设备10,本申请提供的音频数据处理方法、装置和终端设备10,通过对获取的音频数据进行数据拆分,得到与内置扬声器100的通道对应的内通道数据以及与外置扬声器200的通道对应的外通道数据,并对内通道数据和外通道数据进行音量调整以及音效匹配处理,再对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据通过内置扬声器100进行播放、将外通道数据通过外置扬声器200进行播放。如此,通过对音频数据按通道进行拆分以及音量调整、音效匹配、延迟同步处理等,可得到优良的分别与内置扬声器100和外置扬声器200匹配的音频数据,提高音频播放效果。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (12)

1.一种音频数据处理方法,其特征在于,应用于终端设备中硬件抽象层Audio Hal,所述终端设备还包括内置扬声器和外置扬声器,所述方法包括:
对获取的音频数据进行数据拆分,得到内通道数据以及外通道数据;
对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理;
对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据通过所述内置扬声器进行播放、将所述外通道数据通过所述外置扬声器进行播放。
2.根据权利要求1所述的音频数据处理方法,其特征在于,所述终端设备还包括与所述Audio Hal连接的信号处理设备以及与所述信号处理设备连接的解码器,所述内置扬声器与所述信号处理设备连接;
所述信号处理设备和所述内置扬声器之间包括用于传输第一类型数据的第一通道和用于传输第二类型数据的第二通道,其中,所述第一类型数据为所述信号处理设备从所述解码器处获取的音频数据,所述第二类型数据为所述信号处理设备从所述Audio Hal获取的音频数据,所述第一通道截断、所述第二通道导通;
所述将所述同步处理后的内通道数据通过所述内置扬声器进行播放的步骤,包括:
将所述同步处理后的内通道数据发送至所述信号处理设备,以使所述信号处理设备通过所述第二通道将所述内通道数据传输至所述内置扬声器并进行播放。
3.根据权利要求1所述的音频数据处理方法,其特征在于,所述对获取的音频数据进行数据拆分之前,所述方法还包括:
检测获取的音频数据的通道是否与当前音频系统匹配,若不匹配,则对所述音频数据进行通道转换,以使转换后的通道与所述当前音频系统匹配。
4.根据权利要求3所述的音频数据处理方法,其特征在于,所述对所述音频数据进行通道转换,以使转换后的通道与所述当前音频系统匹配的步骤,包括:
获取基于所述内置扬声器和所述外置扬声器构成的当前音频系统所需的音频;
对所述音频数据的通道进行上混处理,以使得到的音频数据的通道与所述当前音频系统所需的通道一致。
5.根据权利要求1所述的音频数据处理方法,其特征在于,所述对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理的步骤,包括:
根据预设的音量分贝范围及预设调整公式,分别对所述内通道数据和所述外通道数据进行音量调整;
根据预设的不同调整参数,对所述内通道数据和所述外通道数据的幅度进行调整,以使调整后的内通道数据和外通道数据分别与预设的频率特性曲线相匹配。
6.根据权利要求5所述的音频数据处理方法,其特征在于,所述根据预设的不同调整参数,对所述内通道数据和所述外通道数据的幅度进行调整的步骤,包括:
将所述内通道数据和所述外通道数据分别划分多个频段;
根据所述内通道数据的各个频段以及预设的与各所述频段对应的调整参数,对所述内通道数据的幅度进行调整,所述调整参数包括与各所述频段对应的增益和带通滤波器传递函数;
根据所述外通道数据的各个频段以及预设的与各所述频段对应的调整参数,对所述外通道数据的幅度进行调整。
7.根据权利要求1所述的音频数据处理方法,其特征在于,所述对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理的步骤,包括:
比对所述内通道数据和所述外通道数据的相对速度,确定相对速度较快的通道数据;
将相对速度较快的通道数据进行数据缓存,在缓存数据达到需求数量时,将所述内通道数据和所述外通道数据输出,其中,所述需求数量为根据所述内通道数据和所述外通道数据的相对速度所确定。
8.一种音频数据处理装置,其特征在于,应用于终端设备中硬件抽象层Audio Hal,所述终端设备还包括内置扬声器和外置扬声器,所述装置包括:
拆分模块,用于对获取的音频数据进行数据拆分,得到内通道数据以及外通道数据;
调整模块,用于对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理;
处理模块,用于对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据通过所述内置扬声器进行播放、将所述外通道数据通过所述外置扬声器进行播放。
9.一种终端设备,其特征在于,包括相互连接的硬件抽象层Audio Hal和信号处理设备,以及与所述Audio Hal连接的外置扬声器、与所述信号处理设备连接的内置扬声器和解码器;
所述信号处理设备用于从所述解码器获取解码后的音频数据;
所述Audio Hal用于从所述信号处理设备获取所述音频数据,并对所述音频数据进行数据拆分,得到内通道数据以及外通道数据;
所述Audio Hal还用于对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理,对音效匹配处理后的内通道数据和外通道数据进行延迟同步处理,并将同步处理后的内通道数据发送至所述信号处理设备、将外通道数据发送至所述外置扬声器;
所述信号处理设备还用于将接收到的内通道数据发送至所述内置扬声器。
10.根据权利要求9所述的终端设备,其特征在于,所述信号处理设备和所述内置扬声器之间包括用于传输第一类型数据的第一通道和用于传输第二类型数据的第二通道,其中,所述第一类型数据为所述信号处理设备从所述解码器处获取的音频数据,所述第二类型数据为所述信号处理设备从所述Audio Hal获取的音频数据,所述第一通道截断、所述第二通道导通;
所述信号处理设备用于通过所述第二通道将接收到的内通道数据发送至所述内置扬声器。
11.根据权利要求9所述的终端设备,其特征在于,在从所述信号处理设备获取所述音频数据之前,所述Audio Hal还用于:
检测获取的音频数据的通道是否与当前音频系统匹配;
若不匹配,获取基于所述内置扬声器和所述外置扬声器构成的当前音频系统所需的通道;
对所述音频数据的通道进行上混处理,以使得到的音频数据的通道与所述当前音频系统所需的通道一致。
12.根据权利要求9所述的终端设备,其特征在于,所述Audio Hal用于通过以下方式对所述内通道数据和所述外通道数据进行音量调整以及音效匹配处理:
根据预设的音量分贝范围及预设调整公式,分别对所述内通道数据和所述外通道数据进行音量调整;
根据预设的不同调整参数,对所述内通道数据和所述外通道数据的幅度进行调整,以使调整后的内通道数据和外通道数据分别与预设的频率特性曲线相匹配。
CN202010954352.6A 2020-09-11 2020-09-11 音频数据处理方法、装置和终端设备 Active CN112073890B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010954352.6A CN112073890B (zh) 2020-09-11 2020-09-11 音频数据处理方法、装置和终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010954352.6A CN112073890B (zh) 2020-09-11 2020-09-11 音频数据处理方法、装置和终端设备

Publications (2)

Publication Number Publication Date
CN112073890A true CN112073890A (zh) 2020-12-11
CN112073890B CN112073890B (zh) 2022-08-02

Family

ID=73696223

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010954352.6A Active CN112073890B (zh) 2020-09-11 2020-09-11 音频数据处理方法、装置和终端设备

Country Status (1)

Country Link
CN (1) CN112073890B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210377687A1 (en) * 2020-06-02 2021-12-02 Sagemcom Broadband Sas Centralized processing of an incoming audio stream

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101448186A (zh) * 2007-11-26 2009-06-03 鸿富锦精密工业(深圳)有限公司 扬声器音效自动调整系统及方法
US20150237441A1 (en) * 2012-12-19 2015-08-20 Yamaha Corporation Acoustic Processing Device
CN104867507A (zh) * 2014-02-24 2015-08-26 三星电子(中国)研发中心 播放音频文件的方法和设备
US20150363411A1 (en) * 2014-06-12 2015-12-17 Huawei Technologies Co., Ltd. Synchronous Audio Playback Method, Apparatus and System
WO2016078255A1 (zh) * 2014-11-18 2016-05-26 惠州Tcl移动通信有限公司 一种无线多设备组合实现多声道输出音频的方法及系统
US20160277791A1 (en) * 2014-07-21 2016-09-22 Boe Technology Group Co., Ltd. Display system, and method of playing bluetooth audio and apparatus of display system
CN106210312A (zh) * 2016-07-11 2016-12-07 深圳天珑无线科技有限公司 一种基于移动终端的立体声播放方法、移动终端及系统
CN106375921A (zh) * 2012-04-26 2017-02-01 搜诺思公司 媒体系统中的多通道配对
CN108093359A (zh) * 2017-11-30 2018-05-29 青岛海尔多媒体有限公司 基于无线传输的多声道播放方法及播放设备和无线音箱
CN108419183A (zh) * 2018-03-29 2018-08-17 联想(北京)有限公司 一种电子设备的音频处理方法及电子设备
CN108462895A (zh) * 2017-02-21 2018-08-28 阿里巴巴集团控股有限公司 音效处理方法、装置和机器可读介质
JP6425790B1 (ja) * 2017-11-30 2018-11-21 三菱電機株式会社 車載オーディオ装置
WO2019071555A1 (zh) * 2017-10-13 2019-04-18 深圳传音通讯有限公司 一种基于智能终端的音频电路及音频播放系统
EP3624463A1 (en) * 2017-12-26 2020-03-18 Guangzhou Kugou Computer Technology Co., Ltd. Audio signal processing method and device, terminal and storage medium

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101448186A (zh) * 2007-11-26 2009-06-03 鸿富锦精密工业(深圳)有限公司 扬声器音效自动调整系统及方法
CN106375921A (zh) * 2012-04-26 2017-02-01 搜诺思公司 媒体系统中的多通道配对
US20150237441A1 (en) * 2012-12-19 2015-08-20 Yamaha Corporation Acoustic Processing Device
CN104867507A (zh) * 2014-02-24 2015-08-26 三星电子(中国)研发中心 播放音频文件的方法和设备
US20150363411A1 (en) * 2014-06-12 2015-12-17 Huawei Technologies Co., Ltd. Synchronous Audio Playback Method, Apparatus and System
US20160277791A1 (en) * 2014-07-21 2016-09-22 Boe Technology Group Co., Ltd. Display system, and method of playing bluetooth audio and apparatus of display system
WO2016078255A1 (zh) * 2014-11-18 2016-05-26 惠州Tcl移动通信有限公司 一种无线多设备组合实现多声道输出音频的方法及系统
CN106210312A (zh) * 2016-07-11 2016-12-07 深圳天珑无线科技有限公司 一种基于移动终端的立体声播放方法、移动终端及系统
CN108462895A (zh) * 2017-02-21 2018-08-28 阿里巴巴集团控股有限公司 音效处理方法、装置和机器可读介质
WO2019071555A1 (zh) * 2017-10-13 2019-04-18 深圳传音通讯有限公司 一种基于智能终端的音频电路及音频播放系统
CN108093359A (zh) * 2017-11-30 2018-05-29 青岛海尔多媒体有限公司 基于无线传输的多声道播放方法及播放设备和无线音箱
JP6425790B1 (ja) * 2017-11-30 2018-11-21 三菱電機株式会社 車載オーディオ装置
EP3624463A1 (en) * 2017-12-26 2020-03-18 Guangzhou Kugou Computer Technology Co., Ltd. Audio signal processing method and device, terminal and storage medium
CN108419183A (zh) * 2018-03-29 2018-08-17 联想(北京)有限公司 一种电子设备的音频处理方法及电子设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
徐永键: "基于网络反馈的无线多终端音频同步方案", 《无线互联科技》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210377687A1 (en) * 2020-06-02 2021-12-02 Sagemcom Broadband Sas Centralized processing of an incoming audio stream
US11924622B2 (en) * 2020-06-02 2024-03-05 Sagemcom Broadband Sas Centralized processing of an incoming audio stream

Also Published As

Publication number Publication date
CN112073890B (zh) 2022-08-02

Similar Documents

Publication Publication Date Title
KR0135850B1 (ko) 음성재생장치
US8532306B2 (en) Method and an apparatus of decoding an audio signal
US7599498B2 (en) Apparatus and method for producing 3D sound
CN109165005B (zh) 音效增强方法、装置、电子设备及存储介质
US20070121956A1 (en) Device and method for integrating sound effect processing and active noise control
WO2020182020A1 (zh) 一种音频信号播放方法及显示设备
US9076452B2 (en) Apparatus and method for generating audio signal having sound enhancement effect
CN101924317B (zh) 双声道处理装置及其方法与声音播放系统
CN106792365B (zh) 一种音频播放方法及装置
CN112073890B (zh) 音频数据处理方法、装置和终端设备
KR20050064442A (ko) 이동통신 시스템에서 입체음향 신호 생성 장치 및 방법
JP3888239B2 (ja) デジタル音声処理方法及び装置、並びにコンピュータプログラム
JP2022548400A (ja) ハイブリッド式近距離/遠距離場スピーカー仮想化
JP2523366B2 (ja) 音声再生方式
US11924622B2 (en) Centralized processing of an incoming audio stream
CN114915874A (zh) 音频处理方法、装置、设备、介质及程序产品
CN111510847A (zh) 微型扬声器阵列、车内声场控制方法及装置、存储装置
CN113115178B (zh) 音频信号处理方法及装置
CN111263272B (zh) 一种音频信号分流回传方法及系统
CN111128104B (zh) 一种无线k歌方法、音频设备及智能终端
CN219834335U (zh) 一种蓝牙音响系统
TWI784594B (zh) 會議終端及聲音浮水印的嵌入方法
US20240029755A1 (en) Intelligent speech or dialogue enhancement
KR100566115B1 (ko) 입체 음향을 생성하는 장치 및 방법
WO2023026555A1 (ja) 情報処理装置、および情報処理方法、並びにプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant