CN112346700B - 音频传输方法、装置及计算机可读存储介质 - Google Patents

音频传输方法、装置及计算机可读存储介质 Download PDF

Info

Publication number
CN112346700B
CN112346700B CN202011219132.5A CN202011219132A CN112346700B CN 112346700 B CN112346700 B CN 112346700B CN 202011219132 A CN202011219132 A CN 202011219132A CN 112346700 B CN112346700 B CN 112346700B
Authority
CN
China
Prior art keywords
channel
signal
audio
channels
splicing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011219132.5A
Other languages
English (en)
Other versions
CN112346700A (zh
Inventor
任鹏冲
贾天婕
杨国全
曹亚曦
王克彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Huachuang Video Signal Technology Co Ltd
Original Assignee
Zhejiang Huachuang Video Signal Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Huachuang Video Signal Technology Co Ltd filed Critical Zhejiang Huachuang Video Signal Technology Co Ltd
Priority to CN202011219132.5A priority Critical patent/CN112346700B/zh
Publication of CN112346700A publication Critical patent/CN112346700A/zh
Application granted granted Critical
Publication of CN112346700B publication Critical patent/CN112346700B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/307—Frequency adjustment, e.g. tone control
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Abstract

本发明实施例提供了一种音频传输方法、装置及计算机可读存储介质。该方法包括：获取多个通道的音频信号；将上述多个通道的音频信号进行信号拼接以得到单通道的混音信号，并确定信号拼接信息，其中，上述信号拼接信息包括：每个通道的音频信号在上述单通道的混音信号中对应的位置；将上述单通道的混音信号以及上述信号拼接信息传输至音频处理器。通过本发明，解决了多通道的不同或相同采样频率的音频信号数据向数字音频处理器的传输受限的问题，该方案可以克服数字音频处理器的硬件接口的硬件条件的限制，提升传输效率。

Description

音频传输方法、装置及计算机可读存储介质
技术领域
本发明实施例涉及音频处理领域，具体而言，涉及一种音频传输方法、装置及计算机可读存储介质。
背景技术
随着互联网新技术和人工智能(Artificial Intelligence，简称为AI)应用的发展和普及，智能语音的应用越来越普及和重要，对音频采样设备的速率可变性和多采样通道的需求也日趋旺盛。
从前端多通道的不同或相同采样频率的音频信号数据都需要经过各自对应的音频通道(例如Inter-IC Sound(I2S)的音频通道)传输给数字音频处理器，然而数字音频处理器的硬件接口往往有限，这就从音频处理器的硬件接口条件上限制了多通道的不同或相同采样频率的音频信号数据向数字音频处理器的传输。
发明内容
本发明实施例提供了一种音频传输方法、装置及计算机可读存储介质，以至少解决相关技术中多通道的不同或相同采样频率的音频信号数据无法快速、并行地进入数字音频处理器的问题。
根据本发明的一个实施例，提供了一种音频传输方法，包括：获取多个通道的音频信号；将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号，并确定信号拼接信息，其中，所述信号拼接信息包括：每个通道的音频信号在所述单通道的混音信号中对应的位置；将所述单通道的混音信号以及所述信号拼接信息传输至音频处理器。
在至少一个示例性实施例中，将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号包括以下至少之一：在所述多个通道的音频信号为左声道音频信号的情况下，将所述多个通道的左声道音频信号进行信号拼接以得到单通道的左声道混音信号；在所述多个通道的音频信号为右声道音频信号的情况下，将所述多个通道的右声道音频信号进行信号拼接以得到单通道的右声道混音信号；
在所述多个通道的音频信号为单声道音频信号的情况下，将所述多个通道的单声道音频信号进行信号拼接以得到单通道的单声道混音信号；在所述多个通道的音频信号包括所述多个通道的左声道音频信号和右声道音频信号的情况下，将所述多个通道的左声道音频信号和右声道音频信号进行信号拼接以得到单通道的左右混合声道混音信号，其中，所述信号拼接信息包括：每个通道的所述左声道音频信号和所述右声道音频信号在所述单通道的混音信号中分别对应的位置。
在至少一个示例性实施例中，所述多个通道的音频信号分别对应有各自的原始采样频率，且所述多个通道的音频信号的所述原始采样频率均相同或至少部分不相同。
在至少一个示例性实施例中，将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号包括：将所述多个通道的音频信号按照各自的所述原始采样频率进行信号拼接以得到所述单通道的混音信号。
在至少一个示例性实施例中，将所述多个通道的音频信号按照各自的所述原始采样频率进行信号拼接以得到所述单通道的混音信号包括以下之一：将所述多个通道的音频信号按照各自的所述原始采样频率进行连续且无空隙的信号拼接以得到所述单通道的混音信号，其中，所述单通道的混音信号对应的采样频率等于所述多个通道的音频信号分别对应的所述原始采样频率的总和；将所述多个通道的音频信号按照各自的所述原始采样频率执行M次预定采样频率信号拼接并将所述M次预定采样频率信号拼接的拼接结果进行拼接，以得到对应的采样频率为预定采样频率的M倍的所述单通道的混音信号，其中，M大于或等于1，所述预定采样频率大于或等于所述多个通道的音频信号的所述原始采样频率中的最大原始采样频率，每次预定采样频率信号拼接包括以下过程：在当前预定采样频率内进行连续且无空隙的信号拼接，直到当前预定采样频率内未被占用的采样频率小于所有尚未参与信号拼接的音频信号时，将当前预定采样频率内所述未被占用的采样频率预留为空隙，得到本次预定采样频率信号拼接的拼接结果。
在至少一个示例性实施例中，将所述单通道的混音信号以及所述信号拼接信息传输至音频处理器包括：将所述单通道的混音信号通过单个音频通道传输至所述音频处理器，并将所述信号拼接信息通过通信通道传输至所述音频处理器。
在至少一个示例性实施例中，所述信号拼接信息还包括以下至少之一：所述单通道的混音信号对应的采样频率，所述多个通道的数量，所述多个通道的音频信号的类型标识，所述信号拼接的方式标识。
在至少一个示例性实施例中，在将所述单通道的混音信号以及所述信号拼接信息传输至音频处理器之后，还包括：所述音频处理器根据所述信号拼接信息，从所述单通道的混音信号中解析出所述多个通道的音频信号。
根据本发明的另一个方面，提供了一种音频传输装置，包括通道拼接模块和音频处理器，所述通道拼接模块包括输入接口和输出接口，其中，所述通道拼接模块设置为：从所述通道拼接模块的所述输入接口接收多个通道的音频信号；将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号，并确定信号拼接信息，其中，所述信号拼接信息包括：每个通道的音频信号在所述单通道的混音信号中对应的位置；将所述单通道的混音信号以及所述信号拼接信息从所述通道拼接模块的所述输出接口传输至所述音频处理器。
在至少一个示例性实施例中，所述音频处理器包括协议接收模块、通道解析模块和音频处理模块，其中：所述协议接收模块，设置为接收所述信号拼接信息，并将所述信号拼接信息提供给所述通道解析模块；所述通道解析模块，设置为接收所述单通道的混音信号，根据所述信号拼接信息从所述单通道的混音信号中解析出所述多个通道的音频信号，并将所述多个通道的音频信号发送给所述音频处理模块。
在至少一个示例性实施例中，所述通道拼接模块的所述输出接口包括第一输出接口和第二输出接口，其中：所述第一输出接口连接至音频通道，所述通道拼接模块设置为将所述单通道的混音信号从所述第一输出接口通过单个音频通道传输至所述音频处理器；所述第二输出接口连接至通信通道，所述通道拼接模块设置为将所述信号拼接信息从所述第二输出接口通过所述通信通道传输至所述音频处理器。
在至少一个示例性实施例中，所述通道拼接模块包括以下之一：复杂可编程逻辑器件、现场可编程门阵列。
根据本发明的又一个实施例，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
根据本发明的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。
通过本发明，由于能够将多个通道的音频信号进行信号拼接从而得到单通道的混音信号，并将单通道的混音信号以及包含每个通道的音频信号在所述单通道的混音信号中对应的位置的信号拼接信息发送给音频处理器，该过程将多个通道的音频信号转化为单通道的混音信号传送到音频处理器，因此不再需要大量的硬件接口，能够传输的多通道的数量不再受限于音频处理器的硬件接口条件，因此，可以解决多通道的不同或相同采样频率的音频信号数据向数字音频处理器的传输受限的问题，该方案可以克服数字音频处理器的硬件接口的硬件条件的限制，提升传输效率。
附图说明
图1是根据本发明实施例的一种音频传输方法的原理示意图；
图2是根据本发明实施例的一种音频传输方法的以所有通道的音频信号的采样频率中的最大采样频率来进行拼接的方案的波形示意图；
图3是根据本发明实施例的音频传输方法的流程图；
图4是根据本发明实施例的音频传输方法的示例性流程图；
图5是根据本发明实施例的音频传输装置的结构框图；
图6是根据本发明实施例的音频传输装置的示例性结构框图一；
图7是根据本发明实施例的音频传输装置的示例性结构框图二；
图8是根据本发明实施例的音频传输方法的原理示意图；
图9是根据本发明实施例的一种音频传输方法的分别以多个通道的音频信号各自的采样频率来进行拼接的方案的波形示意图。
具体实施方式
目前，从前端多通道的不同或相同采样频率的音频信号数据需要通过各自对应的I2S通道传输给数字音频处理器，然而，由于数字音频处理器的硬件接口往往有限，这就从硬件条件上限制了多通道的不同或相同采样频率的音频信号数据无法快速、并行地进入数字音频处理器。因此，如果能够通过一路I2S通道将前端多通道的不同或相同采样频率的音频信号数据传输给数字音频处理器就能够克服硬件条件的限制。为了实现这一目的，需要考虑支持多采样频率的I2S语音信号采集的同时支持数字混频，将数字混频后的信号由一路I2S通道传输给数字音频处理器，这样就可以在满足多通道不同或相同采样频率I2S信号音频采集需求的前提下，实现将信号由一路I2S通道传输给数字音频处理器。不仅是基于I2S的音频数据传输方案，其他的音频数据传输方案也面临类似的问题。
考虑到将多通道音频数据由一路通道传输给数字音频处理器的需求，一种处理方式是将多通道音频信号(包括I2S左右声道)拼接到一路更高采样速率的I2S后传输。图1是根据本发明实施例的一种音频传输方法的原理示意图，图2是根据本发明实施例的一种音频传输方法的以所有通道的音频信号的采样频率中的最大采样频率来进行拼接的方案的波形示意图，如图1和2所示，为了实现上述构思，比较简单的一种实现方式是以所有通道的音频信号的采样频率中的最大采样频率来进行拼接，也就是说，即使某通道的音频信号的采样频率小于甚至远远小于该最大采样频率，该通道的音频信号仍然要占用最大采样频率，该最大采样频率内的剩余部分预留空隙，这样输出端的采样速率必须是输入最大采样速率的N倍(其中N为多通道的数量)，拼接起来成本较高。该方法统一基于最高速率的最高采样频率去实现语音信号的拼接，这仅仅是一种单纯加大采样速率的传输方式，并未实现真正的数字混频。该方法支持的I2S输出采样频率必须是最大输入采样频率的整数倍(通道数N的倍数)，且不带数字混频效果，随着多通道技术的路数和采样频率的提升，I2S的传输速率越来越高，就超过了I2S的传输能力。
为此，本发明实施例还提供了一种音频传输方法，该方法基于多通道可变采样频率，能够在满足多通道不同或相同采样频率信号音频采集需求的前提下，将信号经过数字混频后由一路通道传输给的数字音频处理器。该方案通过系统性数字混频的方法，遵循I2S协议有效利用了传输速率，在数字混频的基础上在增加较少的硬件线路基础上，解决了I2S混频的问题，有效提高资源利用率。
下文中将参考附图并结合实施例来详细说明本发明的实施例。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
本申请实施例中所提供的方法实施例可以在任何包括音频处理器(例如数字音频处理器)的且涉及将输入音频传输到音频处理器的装置中执行。
在本实施例中提供了一种音频传输方法，图3是根据本发明实施例的音频传输方法的流程图，如图3所示，该流程包括如下步骤S302-S306。
步骤S302，获取多个通道的音频信号。
在具体实施中，音频信号可以为数字音频信号，例如，可以是从多个音频源输入的多个通道上的数字音频信号。
对于双声道的音频，每个通道的音频信号可以同时包括左声道音频信号和右声道音频信号；或者，每个通道传输的音频信号可以包括左声道音频信号或右声道音频信号，也就是说左声道音频信号和右声道音频信号可以分别属于不同通道。对于单声道的音频，每个通道的音频信号可以包括单声道音频信号。
步骤S304，将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号，并确定信号拼接信息，其中，所述信号拼接信息包括：每个通道的音频信号在所述单通道的混音信号中对应的位置，在至少一个示例性实施例中，所述信号拼接信息还可以进一步包括以下至少之一：所述单通道的混音信号对应的采样频率，所述多个通道的数量，所述多个通道的音频信号的类型标识，所述信号拼接的方式标识。
在步骤S304中，在音频信号为数字音频信号的情况下，将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号包括：将所述多个通道的音频信号进行数字混频以得到单通道的混音信号。
在至少一个示例性实施例中，在步骤S304中，将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号可以包括以下至少之一：
在所述多个通道的音频信号为左声道音频信号的情况下，将所述多个通道的左声道音频信号进行信号拼接以得到单通道的左声道混音信号，此时，所有通道的左声道音频信号可以经过拼接后形成左声道混音信号；
在所述多个通道的音频信号为右声道音频信号的情况下，将所述多个通道的右声道音频信号进行信号拼接以得到单通道的右声道混音信号，此时，所有通道的右声道音频信号可以经过拼接后形成右声道混音信号；
在所述多个通道的音频信号为单声道音频信号的情况下，将所述多个通道的单声道音频信号进行信号拼接以得到单通道的单声道混音信号，此时，所有通道的单声道音频信号可以经过拼接后形成单声道混音信号；
在所述多个通道的音频信号包括所述多个通道的左声道音频信号和右声道音频信号的情况下，将所述多个通道的左声道音频信号和右声道音频信号进行信号拼接以得到单通道的左右混合声道混音信号，其中，所述信号拼接信息包括：每个通道的所述左声道音频信号和所述右声道音频信号在所述单通道的混音信号中分别对应的位置，此时，所有通道的左声道音频信号和右声道音频信号可以拼接在一起形成左右混合声道混音信号。在具体的拼接过程中，可以先将所有通道的左(或右)声道音频信号拼接在一起，在此之后拼接所有通道的右(或左)声道音频信号，从而形成左右混合声道混音信号。或者还可以将单个通道的左右声道音频信号拼接在一起，之后再依次拼接其他声道的左右声道音频信号。不论采用何种拼接过程，只要信号拼接信息能够提供每个通道的所述左声道音频信号和所述右声道音频信号在所述单通道的混音信号中分别对应的位置，就能够对各个左或右声道音频信号进行定位，从而恢复出原始音频信号。
为了尽量节约采样频率资源，相对于统一按照最大采样频率进行混频的方案，本发明实施例提供了一种更优化更加灵活的优选的混频方案，以下进行详细的描述。
在至少一个示例性实施例中，在步骤S304中，所述多个通道的音频信号分别对应有各自的原始采样频率，且所述多个通道的音频信号的所述原始采样频率均相同或至少部分不相同。在此条件下，步骤S304中，将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号可以包括以下处理：
将所述多个通道的音频信号按照各自的所述原始采样频率进行信号拼接以得到所述单通道的混音信号，此时，由于信号拼接是按照所述多个通道的音频信号各自的原始采样频率进行的，而不是统一按照最高采样频率进行拼接，大大节省了采样频率资源，具有更高效的混频效果。
在步骤S304中，在音频信号为数字音频信号的情况下，将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号可以包括：将所述多个通道的音频信号按照各自的所述原始采样频率进行数字混频以得到单通道的混音信号，此时，由于数字混频是按照所述多个通道的音频信号各自的原始采样频率进行的，而不是统一按照最高采样频率进行，大大节省了采样频率资源，具有更高效的混频效果。
在至少一个示例性实施例中，步骤S304中，将所述多个通道的音频信号按照各自的所述原始采样频率进行信号拼接以得到所述单通道的混音信号可以包括以下方式之一：
(1)将所述多个通道的音频信号按照各自的所述原始采样频率进行连续且无空隙的信号拼接以得到所述单通道的混音信号，其中，所述单通道的混音信号对应的采样频率等于所述多个通道的音频信号分别对应的所述原始采样频率的总和。通过该方案，能够实现连续且无空隙的信号拼接，具有最高的传输效率，但是对接收端的音频处理器的解析和重采样过程具有较高的技术要求。
(2)将所述多个通道的音频信号按照各自的所述原始采样频率执行M次预定采样频率信号拼接并将所述M次预定采样频率信号拼接的拼接结果进行拼接，以得到对应的采样频率为预定采样频率的M倍的所述单通道的混音信号，其中，M大于或等于1，所述预定采样频率大于或等于所述多个通道的音频信号的所述原始采样频率中的最大原始采样频率，每次预定采样频率信号拼接包括以下过程：在当前预定采样频率内进行连续且无空隙的信号拼接，直到当前预定采样频率内未被占用的采样频率小于所有尚未参与信号拼接的音频信号时，将当前预定采样频率内所述未被占用的采样频率预留为空隙，得到本次预定采样频率信号拼接的拼接结果。在该过程中，假设第i次预定采样频率信号拼接的过程中拼接了mi个通道的音频信号，则
Figure BDA0002761457470000091
等于多个通道的数量N，其中M小于N。由于可能的少量空隙的存在，所述单通道的混音信号对应的采样频率一般会大于所述多个通道的音频信号分别对应的所述原始采样频率的总和，当然，如果原始采样频率正好能够完全填充到多个预定采样频率而无需留有空隙，所述单通道的混音信号对应的采样频率也可能等于所述多个通道的音频信号分别对应的所述原始采样频率的总和。上述的预定采样频率，可以根据接收端音频处理器在对音频信号进行处理的过程中所涉及的采样频率来确定，其可以是一个固定的设置值，也可以是一个适应性调整的值。
步骤S306，将所述单通道的混音信号以及所述信号拼接信息传输至音频处理器。
在至少一个示例性实施例中，步骤S306可以包括：将所述单通道的混音信号通过单个音频通道传输至所述音频处理器，并将所述信号拼接信息通过通信通道传输至所述音频处理器。在I2S相关系统中，所述音频通道可以是I2S音频通道，所述通信通道可以是I2S通信通道。
其中，上述步骤S302-S306的执行主体可以为设备中的通道拼接模块，其可以通过复杂可编程逻辑器件(CPLD)、现场可编程门阵列(FPGA)来实现，但不限于此。
图4是根据本发明实施例的音频传输方法的示例性流程图，如图4所示，在至少一个示例性实施例中，在步骤S304之后，所述方法还可以包括：
步骤S402，所述音频处理器根据所述信号拼接信息，从所述单通道的混音信号中解析出所述多个通道的音频信号。
由于信号拼接信息中包括了每个通道的音频信号在所述单通道的混音信号中对应的位置，所以所述音频处理器在接收到单通道的混音信号后，就可以根据信号拼接信息从混音信号中解析出多个通道的音频信号。
上述步骤S402可以由所述音频处理器中的输入接口侧的通道解析模块来执行，在步骤S402之后，所述通道解析模块可以相应地通过多个通道，将所述多个通道的音频信号传输至所述音频处理器的音频处理模块。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
在本实施例中还提供了一种音频传输装置，该装置用于实现上述实施例及优选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图5是根据本发明实施例的音频传输装置的结构框图，如图5所示，该装置包括通道拼接模块52和音频处理器54，所述通道拼接模块52包括输入接口521和输出接口522，其中，所述通道拼接模块52设置为：
从所述通道拼接模块52的所述输入接口521接收多个通道的音频信号，在具体实施中，音频信号可以为数字音频信号，例如，可以是从多个音频源输入的多个通道上的数字音频信号；
将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号，并确定信号拼接信息，其中，所述信号拼接信息包括：每个通道的音频信号在所述单通道的混音信号中对应的位置，在至少一个示例性实施例中，所述信号拼接信息还可以进一步包括以下至少之一：所述单通道的混音信号对应的采样频率，所述多个通道的数量，所述多个通道的音频信号的类型标识，所述信号拼接的方式标识；
将所述单通道的混音信号以及所述信号拼接信息从所述通道拼接模块52的所述输出接口522传输至所述音频处理器54，例如，将所述单通道的混音信号通过单个音频通道传输至所述音频处理器，并将所述信号拼接信息通过通信通道传输至所述音频处理器。在I2S相关系统中，所述音频通道可以是I2S音频通道，所述通信通道可以是I2S通信通道。
在至少一个示例性实施例中，所述通道拼接模块52可以包括以下之一：复杂可编程逻辑器件、现场可编程门阵列。也就是说，所述通道拼接模块52可以通过复杂可编程逻辑器件或现场可编程门阵列来实现。
图6是根据本发明实施例的音频传输装置的示例性结构框图一，如图6所示，在至少一个示例性实施例中，该装置除包括图5所示的所有模块外，所述音频处理器54还可以包括协议接收模块541、通道解析模块542和音频处理模块543，其中：
所述协议接收模块541，设置为接收所述信号拼接信息，并将所述信号拼接信息提供给所述通道解析模块542；
所述通道解析模块542，设置为接收所述单通道的混音信号，根据所述信号拼接信息从所述单通道的混音信号中解析出所述多个通道的音频信号，并将所述多个通道的音频信号发送给所述音频处理模块543。
所述音频处理模块543可以设置为接收所述多个通道的音频信号，并基于接收到的所述多个通道的音频信号进行相应的音频处理。
图7是根据本发明实施例的音频传输装置的示例性结构框图二，如图7所示，在至少一个示例性实施例中，所述通道拼接模块52的所述输出接口522包括第一输出接口5221和第二输出接口5222，其中：
所述第一输出接口5221连接至音频通道，所述通道拼接模块52设置为将所述单通道的混音信号从所述第一输出接口5221通过单个音频通道传输至所述音频处理器54；
所述第二输出接口5222连接至通信通道，所述通道拼接模块52设置为将所述信号拼接信息从所述第二输出接口5222通过所述通信通道传输至所述音频处理器54。
在将图6和图7进行结合的情况下，所述第一输出接口5221连接至音频通道，所述音频通道连接至所述通道解析模块542，而所述第二输出接口5222连接至通信通道，所述通信通道连接至所述协议接收模块541。
需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述各个模块以任意组合的形式分别位于不同的处理器中。
本发明的实施例还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
在本实施例中，上述计算机可读存储介质可以被设置为存储用于执行以下步骤的计算机程序：
S1，获取多个通道的音频信号；
S2，将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号，并确定信号拼接信息，其中，所述信号拼接信息包括：每个通道的音频信号在所述单通道的混音信号中对应的位置，在至少一个示例性实施例中，所述信号拼接信息还可以进一步包括以下至少之一：所述单通道的混音信号对应的采样频率，所述多个通道的数量，所述多个通道的音频信号的类型标识，所述信号拼接的方式标识；
S3，将所述单通道的混音信号以及所述信号拼接信息传输至音频处理器。
计算机可读存储介质还被设置为存储用于执行以下步骤的计算机程序：
S4，所述音频处理器根据所述信号拼接信息，从所述单通道的混音信号中解析出所述多个通道的音频信号。
在一个示例性实施例中，上述计算机可读存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，简称为ROM)、随机存取存储器(Random Access Memory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
本发明的实施例还提供了一种电子装置，包括存储器和处理器，该存储器中存储有计算机程序，该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
在一个示例性实施例中，上述电子装置还可以包括传输设备以及输入输出设备，其中，该传输设备和上述处理器连接，该输入输出设备和上述处理器连接。
在一个示例性实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：
S1，获取多个通道的音频信号；
S2，将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号，并确定信号拼接信息，其中，所述信号拼接信息包括：每个通道的音频信号在所述单通道的混音信号中对应的位置，在至少一个示例性实施例中，所述信号拼接信息还可以进一步包括以下至少之一：所述单通道的混音信号对应的采样频率，所述多个通道的数量，所述多个通道的音频信号的类型标识，所述信号拼接的方式标识；
S3，将所述单通道的混音信号以及所述信号拼接信息传输至音频处理器。
在一个示例性实施例中，上述处理器还可以被设置为通过计算机程序执行以下步骤：
S4，所述音频处理器根据所述信号拼接信息，从所述单通道的混音信号中解析出所述多个通道的音频信号。
本实施例中的具体示例可以参考上述实施例及示例性实施方式中所描述的示例，本实施例在此不再赘述。
以下以应用在I2S系统中且通过CPLD/FPGA来实现通道拼接模块为例，详细说明本发明实施例的音频传输方案。
图8是根据本发明实施例的音频传输方法的原理示意图，图9是根据本发明实施例的一种音频传输方法的分别以多个通道的音频信号各自的采样频率来进行拼接的方案的波形示意图。如图8和9所示，该方法主要包括以下内容：
I2S_Source_1、I2S_Source_2......可以有多个I2S源头进入CPLD/FPGA，在CPLD/FPGA内部进行多通道数据拼接后，在CPLD/FPGA输出端只有一个较高采样频率的I2S信号传输给音频接收模块，音频接收模块内部先通过协议接收模块获取通道拼接信息，由通道解析模块将各个通道的音频信号解析出各个源头的数据，经重采样传输给音频处理器。
多通道数据拼接：I2S信号源输入左和/或右声道的数据在CPLD/FPGA内部进行数字混音算法处理后合并为一路音频数据，作为Source_n的音频。
在CPLD/FPGA的I2S信号输入端，支持多通道不同采样频率的信号输入，无需像传统方案一样以最大采样频率倍数进行融合，只需按原数据采样频率进行多通道拼接，极大节省了I2S传输采样速率，可以支持更多通道的数据采集；前提是CPLD/FPGA输出端I2S采样频率比输入端加起来还高，这样就不会造成信号拥塞。
综上所述，本方法注重应用场景是多采样频率的I2S多通道采样融合传输，采用了多通道I2S融合为一个通道实现音频传输，可支持多通道不同I2S采样频率融合，利用多通道不同采样频率I2S融合传输解决了多通道采样、硬件I2S硬件通道不足以及I2S传输速率较低的问题，节约了硬件传输成本。该方法对比传统的设计方法，最大限度的去掉了对I2S信号传输速率的要求，降低了硬件成本，增加了设备稳定和可靠性。
显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (11)

1.一种音频传输方法，其特征在于，包括：
获取多个通道的音频信号；
将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号，并确定信号拼接信息，其中，所述信号拼接信息包括：每个通道的音频信号在所述单通道的混音信号中对应的位置；
将所述单通道的混音信号以及所述信号拼接信息传输至音频处理器；
其中，所述多个通道的音频信号分别对应有各自的原始采样频率，且所述多个通道的音频信号的所述原始采样频率至少部分不相同；
将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号包括：将所述多个通道的音频信号按照各自的所述原始采样频率进行信号拼接以得到所述单通道的混音信号。
2.根据权利要求1所述的音频传输方法，其特征在于，将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号包括以下至少之一：
在所述多个通道的音频信号为左声道音频信号的情况下，将所述多个通道的左声道音频信号进行信号拼接以得到单通道的左声道混音信号；
在所述多个通道的音频信号为右声道音频信号的情况下，将所述多个通道的右声道音频信号进行信号拼接以得到单通道的右声道混音信号；
在所述多个通道的音频信号为单声道音频信号的情况下，将所述多个通道的单声道音频信号进行信号拼接以得到单通道的单声道混音信号；
在所述多个通道的音频信号包括所述多个通道的左声道音频信号和右声道音频信号的情况下，将所述多个通道的左声道音频信号和右声道音频信号进行信号拼接以得到单通道的左右混合声道混音信号，其中，所述信号拼接信息包括：每个通道的所述左声道音频信号和所述右声道音频信号在所述单通道的混音信号中分别对应的位置。
3.根据权利要求1所述的音频传输方法，其特征在于，将所述多个通道的音频信号按照各自的所述原始采样频率进行信号拼接以得到所述单通道的混音信号包括以下之一：
将所述多个通道的音频信号按照各自的所述原始采样频率进行连续且无空隙的信号拼接以得到所述单通道的混音信号，其中，所述单通道的混音信号对应的采样频率等于所述多个通道的音频信号分别对应的所述原始采样频率的总和；
将所述多个通道的音频信号按照各自的所述原始采样频率执行M次预定采样频率信号拼接并将所述M次预定采样频率信号拼接的拼接结果进行拼接，以得到对应的采样频率为预定采样频率的M倍的所述单通道的混音信号，其中，M大于或等于1，所述预定采样频率大于或等于所述多个通道的音频信号的所述原始采样频率中的最大原始采样频率，每次预定采样频率信号拼接包括以下过程：在当前预定采样频率内进行连续且无空隙的信号拼接，直到当前预定采样频率内未被占用的采样频率小于所有尚未参与信号拼接的音频信号时，将当前预定采样频率内所述未被占用的采样频率预留为空隙，得到本次预定采样频率信号拼接的拼接结果。
4.根据权利要求1所述的音频传输方法，其特征在于，将所述单通道的混音信号以及所述信号拼接信息传输至音频处理器包括：
将所述单通道的混音信号通过单个音频通道传输至所述音频处理器，并将所述信号拼接信息通过通信通道传输至所述音频处理器。
5.根据权利要求1所述的音频传输方法，其特征在于，所述信号拼接信息还包括以下至少之一：所述单通道的混音信号对应的采样频率，所述多个通道的数量，所述多个通道的音频信号的类型标识，所述信号拼接的方式标识。
6.根据权利要求1-5中任一项所述的音频传输方法，其特征在于，在将所述单通道的混音信号以及所述信号拼接信息传输至音频处理器之后，还包括：
所述音频处理器根据所述信号拼接信息，从所述单通道的混音信号中解析出所述多个通道的音频信号。
7.一种音频传输装置，其特征在于，包括通道拼接模块和音频处理器，所述通道拼接模块包括输入接口和输出接口，其中，所述通道拼接模块设置为：
从所述通道拼接模块的所述输入接口接收多个通道的音频信号；
将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号，并确定信号拼接信息，其中，所述信号拼接信息包括：每个通道的音频信号在所述单通道的混音信号中对应的位置；
将所述单通道的混音信号以及所述信号拼接信息从所述通道拼接模块的所述输出接口传输至所述音频处理器；
其中，所述多个通道的音频信号分别对应有各自的原始采样频率，且所述多个通道的音频信号的所述原始采样频率至少部分不相同；
所述通道拼接模块还用于通过如下操作将所述多个通道的音频信号进行信号拼接以得到单通道的混音信号：将所述多个通道的音频信号按照各自的所述原始采样频率进行信号拼接以得到所述单通道的混音信号。
8.根据权利要求7所述的音频传输装置，其特征在于，所述音频处理器包括协议接收模块、通道解析模块和音频处理模块，其中：
所述协议接收模块，设置为接收所述信号拼接信息，并将所述信号拼接信息提供给所述通道解析模块；
所述通道解析模块，设置为接收所述单通道的混音信号，根据所述信号拼接信息从所述单通道的混音信号中解析出所述多个通道的音频信号，并将所述多个通道的音频信号发送给所述音频处理模块。
9.根据权利要求7所述的音频传输装置，其特征在于，所述通道拼接模块的所述输出接口包括第一输出接口和第二输出接口，其中：
所述第一输出接口连接至音频通道，所述通道拼接模块设置为将所述单通道的混音信号从所述第一输出接口通过单个音频通道传输至所述音频处理器；
所述第二输出接口连接至通信通道，所述通道拼接模块设置为将所述信号拼接信息从所述第二输出接口通过所述通信通道传输至所述音频处理器。
10.根据权利要求7-9中任一项所述的音频传输装置，其特征在于，所述通道拼接模块包括以下之一：复杂可编程逻辑器件、现场可编程门阵列。
11.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行所述权利要求1至6任一项中所述的音频传输方法。
CN202011219132.5A 2020-11-04 2020-11-04 音频传输方法、装置及计算机可读存储介质 Active CN112346700B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011219132.5A CN112346700B (zh) 2020-11-04 2020-11-04 音频传输方法、装置及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011219132.5A CN112346700B (zh) 2020-11-04 2020-11-04 音频传输方法、装置及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN112346700A CN112346700A (zh) 2021-02-09
CN112346700B true CN112346700B (zh) 2023-06-13

Family

ID=74428307

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011219132.5A Active CN112346700B (zh) 2020-11-04 2020-11-04 音频传输方法、装置及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN112346700B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107749299A (zh) * 2017-09-28 2018-03-02 福州瑞芯微电子股份有限公司 一种多音频输出方法和装置
CN108769786A (zh) * 2018-05-25 2018-11-06 网宿科技股份有限公司 一种合成音视频数据流的方法和装置
CN109243472A (zh) * 2018-09-28 2019-01-18 广州小鹏汽车科技有限公司 一种音频处理方法及音频处理系统
CN109660933A (zh) * 2019-01-30 2019-04-19 北京视通科技有限公司 一种同时传输多路模拟音频的装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101319549B1 (ko) * 2007-07-16 2013-10-21 삼성전자주식회사 오디오 데이터 송수신방법 및 이 방법을 이용한 전자장치
CA2908435C (en) * 2013-04-08 2021-02-09 Nokia Technologies Oy Audio apparatus
CN106126186B (zh) * 2016-08-29 2023-07-11 北京声智科技有限公司 一种多通道音频信号并行采集装置
CN110837487A (zh) * 2019-09-24 2020-02-25 福建星网智慧科技股份有限公司 一种基于i2s总线采集播放多通道音频的系统和方法
CN110838298A (zh) * 2019-11-15 2020-02-25 闻泰科技(无锡)有限公司 多声道音频数据的处理方法、装置、设备和存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107749299A (zh) * 2017-09-28 2018-03-02 福州瑞芯微电子股份有限公司 一种多音频输出方法和装置
CN108769786A (zh) * 2018-05-25 2018-11-06 网宿科技股份有限公司 一种合成音视频数据流的方法和装置
CN109243472A (zh) * 2018-09-28 2019-01-18 广州小鹏汽车科技有限公司 一种音频处理方法及音频处理系统
CN109660933A (zh) * 2019-01-30 2019-04-19 北京视通科技有限公司 一种同时传输多路模拟音频的装置

Also Published As

Publication number Publication date
CN112346700A (zh) 2021-02-09

Similar Documents

Publication Publication Date Title
JP2019102064A (ja) スマート装置のタスク処理方法および装置
CN110852882B (zh) 用于区块链网络的分组共识方法、装置、设备和介质
JP2018029372A (ja) 通信方法及びデバイス
CN114466226B (zh) 带宽时长占比确定方法、装置、设备和计算机可读介质
CN110839286A (zh) 数据传输方法、装置、基站、终端及计算机可读存储介质
CN112346700B (zh) 音频传输方法、装置及计算机可读存储介质
CN112511621B (zh) 数据发送方法及装置、存储介质、电子装置
CN113485842A (zh) 一种基于设备集群进行数据分析的方法及设备
CN108289165B (zh) 一种基于手机控制相机的实现方法、装置及终端设备
CN115905067A (zh) 数据传输控制方法、芯片、装置及存储介质
CN114979058A (zh) 一种can多邮箱复用处理方法及系统
CN105354080A (zh) 一种任务处理方法及装置
CN105915286B (zh) 数据分流方法及分流器
CN211930647U (zh) 一种100g插卡
WO2023243102A1 (ja) 無線通信システム、無線通信方法、及び基地局装置
CN116320858A (zh) 传输音频的方法及装置
CN115953282B (zh) 一种视频任务的处理方法及装置
CN116668370B (zh) 一种电力通信系统中plc通信和无线通信智能融合方法
CN113852484B (zh) 终端设备配网方法、装置、电子设备和计算机可读介质
CN113535428B (zh) 请求消息和响应消息的处理方法、装置、设备和介质
CN212628385U (zh) 音频输出控制装置、音响装置和分布式音响控制装置
CN215729726U (zh) 5g边缘计算平台架构
CN110139377B (zh) 信息的处理方法及装置、存储介质和电子装置
CN112217593B (zh) 一种新前传网络的管理控制方法和设备
CN114866808A (zh) 一种高性能视频处理系统、方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant