CN110096250A - 一种音频数据处理方法、装置、电子设备及存储介质 - Google Patents

一种音频数据处理方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN110096250A
CN110096250A CN201810099469.3A CN201810099469A CN110096250A CN 110096250 A CN110096250 A CN 110096250A CN 201810099469 A CN201810099469 A CN 201810099469A CN 110096250 A CN110096250 A CN 110096250A
Authority
CN
China
Prior art keywords
audio
audio data
pointer
layer module
low latency
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810099469.3A
Other languages
English (en)
Other versions
CN110096250B (zh
Inventor
程乐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jin Bo Xunrui Network Technology Co Ltd
Beijing Jinxun Ruibo Network Technology Co Ltd
Beijing Kingsoft Cloud Network Technology Co Ltd
Beijing Kingsoft Cloud Technology Co Ltd
Original Assignee
Beijing Jin Bo Xunrui Network Technology Co Ltd
Beijing Kingsoft Cloud Network Technology Co Ltd
Beijing Kingsoft Cloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jin Bo Xunrui Network Technology Co Ltd, Beijing Kingsoft Cloud Network Technology Co Ltd, Beijing Kingsoft Cloud Technology Co Ltd filed Critical Beijing Jin Bo Xunrui Network Technology Co Ltd
Priority to CN201810099469.3A priority Critical patent/CN110096250B/zh
Priority to PCT/CN2018/125945 priority patent/WO2019149017A1/zh
Publication of CN110096250A publication Critical patent/CN110096250A/zh
Application granted granted Critical
Publication of CN110096250B publication Critical patent/CN110096250B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Telephone Function (AREA)

Abstract

本发明实施例提供了一种音频数据处理方法、装置、电子设备及存储介质。包括：客户端接收操作系统发送的音频数据和第一实现指针，当第一实现指针为NULL时，对所述音频数据进行音效处理，得到非低延迟音效音频数据；当第一实现指针为非NULL时，对所述音频数据进行音效处理，得到低延迟音效音频数据，客户端将非低延迟音效音频数据或低延迟音效音频数据及第二实现指针发送至操作系统，操作系统根据第二实现指针，对接收到的非低延迟音效音频数据或低延迟音效音频数据进行播放。本申请可以通过一套方法或装置分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。

Description

一种音频数据处理方法、装置、电子设备及存储介质
技术领域
本发明涉及数据处理技术领域，特别是涉及一种音频数据处理方法、装置、电子设备及存储介质。
背景技术
目前，移动直播的发展比较迅速，在移动直播场景下，主播跟唱歌曲的场景非常常见。但由于传播过程中会出现声音的延迟或变质，导致主播听到伴奏的时间有延迟或根本听不清楚伴奏，影响直播效果，因此，主播需要佩戴耳返，通过耳返听到伴奏以及自己的声音，从而对自己的唱歌方式进行调节，同时还可以加入一些声音特效(比如混响、变调等)来增强趣味性，取得比较好的直播效果。
耳返的延时是一个非常重要的参数，延时过大会大幅降低跟唱的体验。在Android平台上，一般直播App使用非低延迟耳返模式实现耳返效果，其延时基本都在200ms以上，这么高的延时对于耳返的实用性大打折扣。
目前，要想使用普通的耳机在Android平台上使用低延迟耳返模式，实现低延迟耳返效果，常采用的低延迟耳返模式进行音频数据，现有技术是：操作系统在C语言层模块进行音频数据采集，得到音频数据，音频处理客户端通过回调函数对操作系统C语言层模块采集的音频数据进行处理，得到处理后的音频数据，操作系统再通过回调函数对处理后的音频数据进行播放。
但是，由于终端设备不支持低延迟特性，对于该类终端设备，在其客户端上使用上述现有技术实现低延迟耳返时，会出现耳返有杂音或者声音不正常的问题，也就是说，部分机型可能不支持低延迟特性，因此，为避免上述问题的发生，开发者需要同时实现非低延迟耳返模式和低延迟耳返模式，在支持低延迟特性的终端设备上使用低延迟耳返模式，在不支持的终端设备上使用非低延迟耳返模式。
但由于低延迟耳返模式要求音频数据在采集、处理、播放的过程中不经过JAVA层，而非低延迟耳返模式的音频数据则是通过JAVA层传递的，因此同时实现低延迟耳返模式和非低延迟耳返模式，会大大增加App的实现复杂度和后期的维护复杂度和维护成本。
发明内容
本发明实施例的目的在于提供一种音频数据处理方法、装置、电子设备及计算机可读存储介质，以降低非低延迟耳返模式与低延迟耳返模式共存时，软件的维护成本。具体技术方案如下：
第一方面，本发明实施例提供了一种音频数据处理方法，应用于客户端，所述客户端包括第二JAVA语言层模块和第二C语言层模块，包括：
所述第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针；其中，若当前采用的音效处理模式为非低延迟耳返模式，则所述第一实现指针为空NULL；若当前采用的音效处理模式为低延迟耳返模式时，则所述第一实现指针为非NULL；
当所述第一实现指针为NULL时，所述第二JAVA语言层模块将所述音频数据发送至第二C语言层模块；当所述第一实现指针为非NULL时，所述第二JAVA语言层模块将所述第一实现指针发送至所述第二C语言层模块；
所述第二C语言层模块在接收到所述音频数据后，对所述音频数据进行音效处理，得到非低延迟音效音频数据，并将所述非低延迟音效音频数据发送至所述第二JAVA语言层模块；
所述第二C语言层模块在接收到为非NULL的所述第一实现指针之后，通过第一回调函数调用所述音频数据，对所述音频数据进行音效处理，得到低延迟音效音频数据，并将所述低延迟音效音频数据发送至所述第二JAVA语言层模块；
所述第二JAVA语言层模块在接收到所述非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将所述第二实现指针及接收到的所述非低延迟音效音频数据发送至所述操作系统，用于触发所述操作系统根据所述第二实现指针，对所述非低延迟音效音频数据进行播放；
所述第二JAVA语言层模块在接收到所述低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将所述第二实现指针及接收到的所述低延迟音效音频数据发送至所述操作系统，用于触发所述操作系统根据所述第二实现指针，对所述低延迟音效音频数据进行播放。
进一步的，所述操作系统包括第一JAVA语言层模块和第一C语言层模块；
所述第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针，包括：
所述第二JAVA语言层模块接收所述第一JAVA语言层模块发送的音频数据和第一实现指针。
进一步的，所述第二C语言层模块在接收到为非NULL的所述第一实现指针之后，通过第一回调函数调用所述音频数据，对所述音频数据进行音效处理，得到低延迟音效音频数据，包括：
所述第二C语言层模块在接收到为非NULL的所述第一实现指针之后，通过第一回调函数，从所述第一C语言层模块调用所述第一C语言层模块采集的音频数据，对所述音频数据进行音效处理，得到低延迟音效音频数据。
第二方面，本发明实施例提供了一种音频数据处理方法，应用于终端的操作系统，所述操作系统包括第一C语言层模块和第一JAVA语言层模块，包括：
从非低延迟耳返模式和低延迟耳返模式中确定出当前采用的音效处理模式；
当所述音效处理模式为低延迟耳返模式时，所述第一C语言层模块采集音频数据，并将所述音频数据发送至所述第一JAVA语言层模块；当所述音效处理模式为非低延迟耳返模式时，所述第一JAVA语言层模块采集音频数据；
所述第一JAVA语言层模块在接收到所述一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将所述音频数据和所述非NULL的第一实现指针发送至客户端，用于触发所述客户端对所述音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将所述低延迟音效音频数据和非NULL的第二实现指针返回至所述第一JAVA语言层模块；
所述第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将所述音频数据和所述为空NULL的第一实现指针发送至客户端，用于触发所述客户端对所述音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将所述非低延迟音效音频数据和为NULL的第二实现指针返回至所述第一JAVA语言层模块；
所述第一JAVA语言层模块在接收到所述客户端发送的所述低延迟音效音频数据和非NULL的第二实现指针之后，将所述非NULL的第二实现指针发送至所述第一C语言层模块；
所述第一JAVA语言层模块在接收到所述客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将所述为NULL的第二实现指针和所述非低延迟音效音频数据发送至所述第一C语言层模块；
所述第一C语言层模块在接收到所述非NULL的第二实现指针之后，根据所述非NULL的第二实现指针，播放所述低延迟音效音频数据；
所述第一C语言层模块在接收到所述为NULL的第二实现指针和所述非低延迟音效音频数据之后，根据所述为NULL的第二实现指针，播放所述非低延迟音效音频数据。
进一步的，所述客户端包括第二JAVA语言层模块和第二C语言层模块；
所述第一JAVA语言层模块在接收到所述一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将所述音频数据和所述非NULL的第一实现指针发送至客户端，包括：
所述第一JAVA语言层模块在接收到所述一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将所述音频数据和所述非NULL的第一实现指针发送至所述第二JAVA语言层模块。
进一步的，所述第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将所述音频数据和所述为空NULL的第一实现指针发送至客户端，包括：
所述第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将所述音频数据和所述为空NULL的第一实现指针发送至所述第二JAVA语言层模块。
第三方面，本发明实施例提供了一种音频数据处理装置，位于客户端，包括：
第二JAVA语言层模块和第二C语言层模块；
所述第二JAVA语言层模块，用于接收操作系统发送的音频数据和第一实现指针；其中，若当前采用的音效处理模式为非低延迟耳返模式，则所述第一实现指针为空NULL；若当前采用的音效处理模式为低延迟耳返模式时，则所述第一实现指针为非NULL；若当前采用的音效处理模式为低延迟耳返模式时，则所述第一实现指针为非NULL；并当所述第一实现指针为NULL时，将所述音频数据发送至第二C语言层模块；当所述第一实现指针为非NULL时，将所述第一实现指针发送至所述第二C语言层模块；
所述第二C语言层模块，用于在接收到所述音频数据后，对所述音频数据进行音效处理，得到非低延迟音效音频数据，并将所述非低延迟音效音频数据发送至所述第二JAVA语言层模块；以及，在接收到为非NULL的所述第一实现指针之后，通过第一回调函数调用所述音频数据，对所述音频数据进行音效处理，得到低延迟音效音频数据，并将所述低延迟音效音频数据发送至所述第二JAVA语言层模块；
所述第二JAVA语言层模块，还用于在接收到所述非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将所述第二实现指针及接收到的所述非低延迟音效音频数据发送至所述操作系统，用于触发所述操作系统根据所述第二实现指针，对所述非低延迟音效音频数据进行播放；以及在接收到所述低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将所述第二实现指针及接收到的所述低延迟音效音频数据发送至所述操作系统，用于触发所述操作系统根据所述第二实现指针，对所述低延迟音效音频数据进行播放。
进一步的，所述操作系统包括第一JAVA语言层模块和第一C语言层模块；
所述第二JAVA语言层模块，具体用于接收所述第一JAVA语言层模块发送的音频数据和第一实现指针。
进一步的，所述第二C语言层模块，具体用于在接收到为非NULL的所述第一实现指针之后，通过第一回调函数，从所述第一C语言层模块调用所述第一C语言层模块采集的音频数据，对所述音频数据进行音效处理，得到低延迟音效音频数据。
第四方面，本发明实施例提供了一种音频数据处理装置，位于终端的操作系统，包括：
模式确定模块、第一C语言层模块和第一JAVA语言层模块；
所述模式确定模块，用于从非低延迟耳返模式和低延迟耳返模式中确定出当前采用的音效处理模式；
所述第一C语言层模块，用于当所述音效处理模式为低延迟耳返模式时，采集音频数据，并将所述音频数据发送至所述第一JAVA语言层模块；
所述第一JAVA语言层模块，用于当所述音效处理模式为非低延迟耳返模式时，采集音频数据；在接收到所述一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将所述音频数据和所述非NULL的第一实现指针发送至客户端，用于触发所述客户端对所述音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将所述低延迟音效音频数据和非NULL的第二实现指针返回至所述第一JAVA语言层模块；在采集到音频数据之后，生成为NULL的第一实现指针，并将所述音频数据和所述为空NULL的第一实现指针发送至客户端，用于触发所述客户端对所述音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将所述非低延迟音效音频数据和为NULL的第二实现指针返回至所述第一JAVA语言层模块；以及在接收到所述客户端发送的所述低延迟音效音频数据和非NULL的第二实现指针之后，将所述非NULL的第二实现指针发送至所述第一C语言层模块；在接收到所述客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将所述为NULL的第二实现指针和所述非低延迟音效音频数据发送至所述第一C语言层模块；
所述第一C语言层模块，还用于在接收到所述非NULL的第二实现指针之后，根据所述非NULL的第二实现指针，播放所述低延迟音效音频数据；在接收到所述为NULL的第二实现指针和所述非低延迟音效音频数据之后，根据所述为NULL的第二实现指针，播放所述非低延迟音效音频数据。
进一步的，所述客户端包括第二JAVA语言层模块和第二C语言层模块；
所述第一JAVA语言层模块，具体用于在接收到所述一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将所述音频数据和所述非NULL的第一实现指针发送至所述第二JAVA语言层模块。
进一步的，所述第一JAVA语言层模块，具体用于在采集到音频数据之后，生成为NULL的第一实现指针，并将所述音频数据和所述为空NULL的第一实现指针发送至所述第二JAVA语言层模块。
第五方面，本发明实施例提供了一种电子设备，包括处理器和存储器；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现上述任一应用于客户端的音频数据处理方法的步骤。
第六方面，本发明实施例提供了一种电子设备，包括处理器和存储器；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现上述任一应用于终端操作系统的音频数据处理方法的步骤。
第七方面，本发明实施例提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述任一应用于客户端的音频数据处理方法。
第八方面，本发明实施例提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述任一应用于终端操作系统的音频数据处理方法。
第九方面，本发明实施例提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述任一应用于客户端的音频数据处理方法。
第十方面，本发明实施例提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述任一应用于终端操作系统的音频数据处理方法。
第十一方面，本发明实施例还提供了一种计算机程序，当其在计算机上运行时，使得计算机执行上述任一应用于客户端的音频数据处理方法。
第十二方面，本发明实施例还提供了一种计算机程序，当其在计算机上运行时，使得计算机执行上述任一应用于终端操作系统的音频数据处理方法。
本发明实施例提供的一种音频数据处理方法及装置中，客户端接收操作系统发送的音频数据和第一实现指针，当第一实现指针为NULL时，对所述音频数据进行音效处理，得到非低延迟音效音频数据；当第一实现指针为非NULL时，对所述音频数据进行音效处理，得到低延迟音效音频数据，客户端将非低延迟音效音频数据或低延迟音效音频数据及第二实现指针发送至操作系统，操作系统根据第二实现指针，对接收到的非低延迟音效音频数据或低延迟音效音频数据进行播放。本申请可以通过一套方法或装置分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
当然，实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明一个实施例提供的音频数据处理方法的流程示意图；
图2为本发明另一个实施例提供的音频数据处理方法的流程示意图；
图3为本发明又一个实施例提供的音频数据处理方法的流程示意图；
图4为本发明一个实施例提供的音频数据处理装置的结构示意图；
图5为本发明另一个实施例提供的音频数据处理装置的结构示意图；
图6为本发明一个实施例提供的电子设备的结构示意图；
图7为本发明另一个实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1为本发明一个实施例提供的音频数据处理方法的流程示意图，该音频数据处理方法应用于包括第二JAVA语言层模块和第二C语言层模块的客户端中，包括：
步骤101，第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针；其中，若当前采用的音效处理模式为非低延迟耳返模式，则第一实现指针为空NULL；若当前采用的音效处理模式为低延迟耳返模式时，则第一实现指针为非NULL。
使用耳返进行移动直播时，耳返的延时越低，则直播效果越好，目前，与传统的非低延迟耳返模式相比，常采用音频数据在采集、处理、播放的过程中不经过JAVA语言层的低延迟耳返模式来降低耳返延时，但对于不支持低延迟特性的终端设备，采用上述模式进行耳返实现时，会导致出现杂音或者声音不正常的情况。
在本实施例的方案中，可以根据用户实际需要或者终端设备的属性，通过一套方法分别选择非低延迟耳返模式和低延迟耳返模式进行移动直播：在支持低延迟特性的终端设备上使用低延迟耳返模式，在不支持的终端设备上使用非低延迟耳返模式，降低了软件的维护成本。
本步骤中，当指定耳返模式为低延迟耳返模式时，客户端的第二JAVA语言层模块可以接收操作系统发送的音频数据和非NULL的第一实现指针；当指定耳返模式为非低延迟耳返模式时，客户端的第二JAVA语言层模块可以接收操作系统发送的音频数据和非NULL的第一实现指针。其中，操作系统发送的音频数据可以为由操作系统调用音频数据采集接口，采集到的音频数据，上述音频数据可以是PCM格式的音频数据，也可以是其他格式的音频数据，对此不作限制。
步骤102，当第一实现指针为NULL时，第二JAVA语言层模块将音频数据发送至第二C语言层模块；
与步骤101相对应地，第一实现指针为NULL，即采用传统的非低延迟耳返模式时，客户端将接收到的音频数据从第二JAVA语言层模块发送至第二C语言层模块，以备第二C语言层模块对音频数据进行音效处理。
步骤103，当第一实现指针为非NULL时，第二JAVA语言层模块将第一实现指针发送至第二C语言层模块。
第一实现指针为非NULL，即采用传统的低延迟耳返模式时，客户端将上述非NULL的第一实现指针发送至第二C语言层模块。
步骤104，第二C语言层模块在接收到音频数据后，对音频数据进行音效处理，得到非低延迟音效音频数据，并将非低延迟音效音频数据发送至第二JAVA语言层模块。
与步骤102对应地，客户端的第二C语言层模块在接收到音频数据后，可以对上述音频数据进行音效处理，得到非低延迟音效音频数据。其中，音效处理的方式可以包括：对音频数据进行混音、录制、音量增益、高潮截取、男女变声、节奏快慢调节、声音淡入淡出处理等，上述处理过程为现有技术，在此不再赘述。
步骤105，第二C语言层模块在接收到为非NULL的第一实现指针之后，通过第一回调函数调用音频数据，对音频数据进行音效处理，得到低延迟音效音频数据，并将低延迟音效音频数据发送至第二JAVA语言层模块。
与步骤103对应地，客户端的第二C语言层模块在接收到非NULL的第一实现指针之后，则可以通过回调函数直接调用操作系统中采集的音频数据，并进行音效处理，这样，可以避免因音频数据经过第二JAVA语言层模块，而引起的延迟增加的问题，降低音频数据从采集到音效处理这一过程所花费的时长。同样地，本步骤中的音效处理方式可以包括：对音频数据进行混音、录制、音量增益、高潮截取、男女变声、节奏快慢调节、声音淡入淡出处理等，上述处理过程为现有技术，在此不再赘述。
步骤106，第二JAVA语言层模块在接收到非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将第二实现指针及接收到的非低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对非低延迟音效音频数据进行播放。
步骤107，第二JAVA语言层模块在接收到低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将第二实现指针及接收到的低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对低延迟音效音频数据进行播放。
步骤106和步骤107中，客户端分别针对非低延迟耳返模式和低延迟耳返模式，将音效处理后的音频数据发送给操作系统，以使操作系统对上述处理后的音频数据进行播放。
在本发明实施例提供的图1所示的音频数据处理方法中，客户端的第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针，当第一实现指针为NULL时，第二JAVA语言层模块将音频数据发送至第二C语言层模块；当第一实现指针为非NULL时，第二JAVA语言层模块将第一实现指针发送至第二C语言层模块；第二C语言层模块在接收到音频数据后，对音频数据进行音效处理，得到非低延迟音效音频数据，并将非低延迟音效音频数据发送至第二JAVA语言层模块；第二C语言层模块在接收到为非NULL的第一实现指针之后，通过第一回调函数调用音频数据，对音频数据进行音效处理，得到低延迟音效音频数据，并将低延迟音效音频数据发送至第二JAVA语言层模块；第二JAVA语言层模块在接收到非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将第二实现指针及接收到的非低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对非低延迟音效音频数据进行播放；第二JAVA语言层模块在接收到低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将第二实现指针及接收到的低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对低延迟音效音频数据进行播放。本申请可以通过一套方法分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
图2为本发明另一个实施例提供的音频数据处理方法的流程示意图，该音频数据处理方法应用于包括第一JAVA语言层模块和第一C语言层模块的操作系统中，包括：
步骤201，从非低延迟耳返模式和低延迟耳返模式中确定出当前采用的音效处理模式。
在步骤中，可以根据用户实际需要或者终端设备的属性，选择非低延迟耳返模式或者低延迟耳返模式作为当前音效处理模式进行移动直播：在支持低延迟特性的终端设备上使用低延迟耳返模式，在不支持的终端设备上使用非低延迟耳返模式。
步骤202，当音效处理模式为低延迟耳返模式时，第一C语言层模块采集音频数据，并将音频数据发送至第一JAVA语言层模块。
可以将操作系统中用于完成音频数据采集的部分称为音频采集单元，针对不同的音效处理模式，上述音频采集单元采集音频数据的方式有所不同。在本步骤中，音效处理模式为低延迟耳返模式，相应的，上述音频采集单元主要通过如下步骤，完成音频数据的采集：首先获取操作系统的名义采样率和原子缓冲区大小，然后按照上述名义采样率，采用OpenSL ES(操作系统中的一种调用接口，具有音频数据采集和播放功能)进行音频数据采集。
采集到的音频数据可以是PCM格式的音频数据，也可以是其他格式的音频数据，对此不作限制。
步骤203，当音效处理模式为非低延迟耳返模式时，第一JAVA语言层模块采集音频数据。
与步骤202对应地，音效处理模式为非低延迟耳返模式，上述音频采集单元主要通过如下步骤，完成音频数据的采集：首先获取操作系统的名义采样率和缓冲区大小，按照上述名义采样率，采用Audio Record(操作系统中的一种调用接口，具有音频数据采集功能)进行音频数据采集。
采集到的音频数据可以是PCM格式的音频数据，也可以是其他格式的音频数据，对此不作限制。
步骤204，第一JAVA语言层模块在接收到第一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将低延迟音效音频数据和非NULL的第二实现指针返回至第一JAVA语言层模块。
在低延迟耳返模式下，操作系统的第一JAVA语言层模块在接收到第一C语言层模块采集的音频数据后，可以将上述音频数据及非NULL的第一实现指针发送给客户端，以使客户端对音频数据进行低延迟音效处理，同样地，本步骤中的音效处理方式可以包括：对音频数据进行混音、录制、音量增益、高潮截取、男女变声、节奏快慢调节、声音淡入淡出处理等，上述处理过程为现有技术，在此不再赘述。
本步骤中，使用操作系统的第一C语言层模块采集音频数据，可以使操作系统在将音频数据发送至客户端进行音效处理时，避免经过第一JAVA语言层模块，从而可以缩短音频数据传播过程所需时长。
步骤205，第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将非低延迟音效音频数据和为NULL的第二实现指针返回至第一JAVA语言层模块。
在非低延迟耳返模式下，操作系统可以将其第一JAVA语言层模块采集的音频数据及为NULL的第一实现指针发送给客户端，以使客户端对音频数据进行非低延迟音效处理，同样地，本步骤中的音效处理方式可以包括：对音频数据进行混音、录制、音量增益、高潮截取、男女变声、节奏快慢调节、声音淡入淡出处理等，上述处理过程为现有技术，在此不再赘述。
步骤206，第一JAVA语言层模块在接收到客户端发送的低延迟音效音频数据和非NULL的第二实现指针之后，将非NULL的第二实现指针发送至第一C语言层模块。
低延迟耳返模式下，操作系统的第一JAVA语言层模块可以将客户端发送的非NULL的第二实现指针发送给第一C语言层模块。
步骤207，第一JAVA语言层模块在接收到客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将为NULL的第二实现指针和非低延迟音效音频数据发送至第一C语言层模块。
非低延迟耳返模式下，操作系统的第一JAVA语言层模块可以将客户端发送的非低延迟音效音频数据和为NULL的第二实现指针发送给第一C语言层模块。
步骤208，第一C语言层模块在接收到非NULL的第二实现指针之后，根据非NULL的第二实现指针，播放低延迟音效音频数据。
步骤209，第一C语言层模块在接收到为NULL的第二实现指针和非低延迟音效音频数据之后，根据为NULL的第二实现指针，播放非低延迟音效音频数据。
步骤208和209中，操作系统的第一C语言层模块可以根据为NULL的或者非NULL的第二实现指针，对非低延迟音效音频数据或者低延迟音效音频数据，采用OpenSL ES进行播放。
在本发明实施例提供的图2所示的音频数据处理方法中，首先确定当前采用的音效处理模式。当音效处理模式为低延迟耳返模式时，第一C语言层模块采集音频数据，并将音频数据发送至第一JAVA语言层模块；当音效处理模式为非低延迟耳返模式时，第一JAVA语言层模块采集音频数据；第一JAVA语言层模块在接收到第一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将低延迟音效音频数据和非NULL的第二实现指针返回至第一JAVA语言层模块；第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将非低延迟音效音频数据和为NULL的第二实现指针返回至第一JAVA语言层模块；第一JAVA语言层模块在接收到客户端发送的低延迟音效音频数据和非NULL的第二实现指针之后，将非NULL的第二实现指针发送至第一C语言层模块；第一JAVA语言层模块在接收到客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将为NULL的第二实现指针和非低延迟音效音频数据发送至第一C语言层模块；第一C语言层模块在接收到非NULL的第二实现指针之后，根据非NULL的第二实现指针，播放低延迟音效音频数据；第一C语言层模块在接收到为NULL的第二实现指针和非低延迟音效音频数据之后，根据为NULL的第二实现指针，播放非低延迟音效音频数据。本申请可以通过一套方法分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
下面结合附图，对本发明实施例提供的音频数据处理方法、装置、电子设备及存储介质进行详细描述。
如附图3所示，本发明实施例提供的一种音频数据处理方法，应用于用户终端，该用户终端上运行了包括第一JAVA语言层模块和第一C语言层模块的操作系统，同时，该用户终端上还安装有包括第二JAVA语言层模块和第二C语言层模块的客户端，具体包括如下步骤：
步骤301，从非低延迟耳返模式和低延迟耳返模式中确定出当前采用的音效处理模式。若当前采用的音效处理模式为低延迟耳返模式，进入步骤302；若当前采用的音效处理模式为非低延迟耳返模式，进入步骤309。
本实施例中，可以通过一套方法，分别获得普通非低延迟音效音频数据和低延迟音效音频数据，若当前采用的音效处理模式为非低延迟耳返模式时，则可以获得非低延迟音效音频数据；若当前采用的音效处理模式为低延迟耳返模式时，则可以获得低延迟音效音频数据。
步骤302，当音效处理模式为低延迟耳返模式时，操作系统的第一C语言层模块采集音频数据，并将音频数据同步至操作系统的第一JAVA语言层模块。
可以将操作系统中用于完成音频数据采集的部分称为音频采集单元，针对不同的音效处理模式，上述音频采集单元采集音频数据的方式有所不同。在本步骤中，音效处理模式为低延迟耳返模式，相应的，上述音频采集单元主要通过如下步骤，完成音频数据的采集：首先获取操作系统的名义采样率和原子缓冲区大小，然后按照上述名义采样率，采用OpenSL ES(操作系统中的一种调用接口，具有音频数据采集和播放功能)进行音频数据采集。
采集到的音频数据可以是PCM格式的音频数据，也可以是其他格式的音频数据，对此不作限制。
步骤303，第一JAVA语言层模块在接收到第一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至客户端的第二JAVA语言层模块。
步骤304，第二JAVA语言层模块在收到音频数据和非NULL的第一实现指针后，将非NULL的实现指针发送至第二C语言层模块。
步骤305，第二C语言层模块在接收到为非NULL的第一实现指针之后，通过第一回调函数调用音频数据，对音频数据进行音效处理，得到低延迟音效音频数据，并将低延迟音效音频数据发送至第二JAVA语言层模块。
在本步骤中，第二C语言层模块接收到非NULL第一实现指针后，会采用第一回调函数，通过在操作系统的第一C语言层模块中设置的第一回调函数的接口，直接调用操作系统第一C语言层模块采集的音频数据，并根据用户需求，对上述音频数据进行音效处理，得到低延迟音效音频数据，具体的音效处理方式可以包括：对音频数据进行混音、录制、音量增益、高潮截取、男女变声、节奏快慢调节、声音淡入淡出处理等，对此不作限制。此处，可以将客户端中用于完成音效处理的部分称为音效处理单元，音效处理单元可以为单独的一个，用于完成上述音效处理方式中的某一项；同时，音效处理单元也可以有多个，如：可以命名为第一音效处理单元、第二音效处理单元、第三音效处理单元等，其中各个音效处理单元分别用于完成上述音效处理方式中的某一项。当音效处理单元有多个时，多个音效处理单元产生的音效可以相互叠加，也就是说：可以将第一音效处理单元的输出结果，作为第二音效处理单元的输入；将第二音效处理单元的输出结果，作为第三音效处理单元的输入，依次类推，得到最终的低延迟音效音频数据。
步骤306，第二JAVA语言层模块在接收到低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将第二实现指针及接收到的低延迟音效音频数据发送至第一JAVA语言层模块。
步骤307，第一JAVA语言层模块在接收到第二JAVA语言层模块发送的低延迟音效音频数据和非NULL的第二实现指针之后，将非NULL的第二实现指针发送至第一C语言层模块。
步骤308，第一C语言层模块在接收到非NULL的第二实现指针之后，根据非NULL的第二实现指针，播放低延迟音效音频数据
可以将操作系统中用于完成音频数据播放的部分称为音频播放单元，在本步骤中，第二实现指针非NULL，上述音频播放模块可以通过如下步骤，完成音频数据的播放：在接收到为非NULL的第二实现指针后，采用第二回调函数，直接调用经音效处理单元处理得到的低延迟音效音频数据，并采用OpenSL ES对上述低延迟音效音频数据进行播放。
步骤309，当音效处理模式为非低延迟耳返模式时，操作系统的第一JAVA语言层模块采集音频数据。
如步骤302中所述，可以将操作系统中用于完成音频数据采集的部分称为音频采集单元，针对不同的音效处理模式，上述音频采集单元采集音频数据的方式有所不同。在本步骤中，音效处理模式为非低延迟耳返模式，相应的，上述音频采集单元主要通过如下步骤，完成音频数据的采集：首先获取操作系统的名义采样率和缓冲区大小，按照上述名义采样率，采用Audio Record(操作系统中的一种调用接口，具有音频数据采集功能)进行音频数据采集。
采集到的音频数据可以是PCM格式的音频数据，也可以是其他格式的音频数据，对此不作限制。
步骤3010，第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至客户端的第二JAVA语言层模块。
步骤3011，第二JAVA语言层模块在接收到音频数据和为空NULL的第一实现指针后，将音频数据发送至第二C语言层模块。
步骤3012，第二C语言层模块在接收到音频数据后，对音频数据进行音效处理，得到非低延迟音效音频数据，并将非低延迟音效音频数据发送至第二JAVA语言层模块。
在本步骤中，当第一实现指针为NULL时，第二C语言层模块接收到音频数据后，根据用户需求，对上述音频数据进行音效处理，得到非低延迟音效音频数据。具体的音效处理方式可以包括：对音频数据进行混音、录制、音量增益、高潮截取、男女变声、节奏快慢调节、声音淡入淡出处理等，对此不作限制。与步骤305相同，此步骤也可以由音效处理单元执行，音效处理单元可以为单独的一个，用于完成上述音效处理方式中的某一项；同时，音效处理单元也可以有多个，如：可以命名为第一音效处理单元、第二音效处理单元、第三音效处理单元等，其中各个音效处理单元分别用于完成上述音效处理方式中的某一项。当音效处理单元有多个时，多个音效处理单元产生的音效可以相互叠加，也就是说：可以将第一音效处理单元的输出结果，作为第二音效处理单元的输入；将第二音效处理单元的输出结果，作为第三音效处理单元的输入，依次类推，得到最终的非低延迟音效音频数据。
第二C语言层模块可以通过本地接口(JNI)调用将经过音效处理后得到的非低延迟音效音频数据发送给第二JAVA语言层模块。
步骤3013，第二JAVA语言层模块在接收到非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将第二实现指针及接收到的非低延迟音效音频数据发送至操作系统的第一JAVA语言层模块。
步骤3014，第一JAVA语言层模块在接收到客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将为NULL的第二实现指针和非低延迟音效音频数据发送至第一C语言层模块。
步骤3015，第一C语言层模块在接收到为NULL的第二实现指针和非低延迟音效音频数据之后，根据为NULL的第二实现指针，播放非低延迟音效音频数据。
如步骤308中所述，可以将操作系统中用于完成音频数据播放的部分称为音频播放单元，在本步骤中，第二实现指针为NULL，上述音频播放单元可以通过如下步骤，完成音频数据的播放：在接收到为非NULL的第二实现指针和非低延迟音效音频数据之后，采用OpenSL ES对非低延迟音效音频数据进行播放。
在本发明实施例中，客户端接收操作系统发送的音频数据和第一实现指针，当第一实现指针为NULL时，对音频数据进行音效处理，得到非低延迟音效音频数据；当第一实现指针为非NULL时，对音频数据进行音效处理，得到低延迟音效音频数据，客户端将非低延迟音效音频数据或低延迟音效音频数据及第二实现指针发送至操作系统，操作系统根据第二实现指针，对接收到的非低延迟音效音频数据或低延迟音效音频数据进行播放。本申请可以通过一套方法分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
基于同一发明构思，根据本发明上述实施例提供的应用于包括第二JAVA语言层模块和第二C语言层模块的客户端的音频数据处理方法，相应地，本发明一个实施例还提供了一种音频数据处理装置，位于客户端，其结构示意图如图4所示，包括：
第二JAVA语言层模块401和第二C语言层模块402。
第二JAVA语言层模块401，用于接收操作系统发送的音频数据和第一实现指针；其中，若当前采用的音效处理模式为非低延迟耳返模式，则第一实现指针为空NULL；若当前采用的音效处理模式为低延迟耳返模式时，则第一实现指针为非NULL；并当第一实现指针为NULL时，将音频数据发送至第二C语言层模块402；当第一实现指针为非NULL时，将第一实现指针发送至第二C语言层模块402；
第二C语言层模块402，用于在接收到音频数据后，对音频数据进行音效处理，得到非低延迟音效音频数据，并将非低延迟音效音频数据发送至第二JAVA语言层模块401；以及，在接收到为非NULL的第一实现指针之后，通过第一回调函数调用音频数据，对音频数据进行音效处理，得到低延迟音效音频数据，并将低延迟音效音频数据发送至第二JAVA语言层模块401；
第二JAVA语言层模块401，还用于在接收到非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将第二实现指针及接收到的非低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对非低延迟音效音频数据进行播放；以及在接收到低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将第二实现指针及接收到的低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对低延迟音效音频数据进行播放。
进一步的，操作系统包括第一JAVA语言层模块和第一C语言层模块；
第二JAVA语言层模块401，具体用于接收第一JAVA语言层模块发送的音频数据和第一实现指针。
进一步的，第二C语言层模块402，具体用于在接收到为非NULL的第一实现指针之后，通过第一回调函数，从第一C语言层模块调用第一C语言层模块采集的音频数据，对音频数据进行音效处理，得到低延迟音效音频数据。
上述各模块的功能可对应于图1和图3所示流程中的相应处理步骤，在此不再赘述。
在本发明实施例中，第二JAVA语言层模块401接收操作系统发送的音频数据和第一实现指针，当第一实现指针为NULL时，再将音频数据发送给第二C语言层模块402；当第一实现指针为非NULL时，将第一实现指针发送至第二C语言层模块402；第二C语言层模块402在接收到音频数据后，对音频数据进行音效处理，得到非低延迟音效音频数据，并将非低延迟音效音频数据发送至第二JAVA语言层模块401；以及，在接收到为非NULL的第一实现指针之后，通过第一回调函数调用音频数据，对音频数据进行音效处理，得到低延迟音效音频数据，并将低延迟音效音频数据发送至第二JAVA语言层模块401；最后，第二JAVA语言层模块401在接收到非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将第二实现指针及接收到的非低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对非低延迟音效音频数据进行播放；在接收到低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将第二实现指针及接收到的低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对低延迟音效音频数据进行播放。本实施例可以通过一套装置分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
基于同一发明构思，根据本发明上述实施例提供的应用于包括第一C语言层模块和第一JAVA语言层模块的终端操作系统的音频数据处理方法，相应地，本发明一个实施例还提供了一种音频数据处理装置，位于终端的操作系统，其结构示意图如图5所示，包括：
模式确定模块501、第一JAVA语言层模块502和第一C语言层模块503。
模式确定模块501，用于从非低延迟耳返模式和低延迟耳返模式中确定出当前采用的音效处理模式；
第一C语言层模块503，用于当音效处理模式为低延迟耳返模式时，采集音频数据，并将音频数据发送至第一JAVA语言层模块；
第一JAVA语言层模块502，用于当音效处理模式为非低延迟耳返模式时，采集音频数据；在接收到一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将低延迟音效音频数据和非NULL的第二实现指针返回至第一JAVA语言层模块；在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将非低延迟音效音频数据和为NULL的第二实现指针返回至第一JAVA语言层模块；以及在接收到客户端发送的低延迟音效音频数据和非NULL的第二实现指针之后，将非NULL的第二实现指针发送至第一C语言层模块；在接收到客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将为NULL的第二实现指针和非低延迟音效音频数据发送至第一C语言层模块；
第一C语言层模块503，还用于在接收到非NULL的第二实现指针之后，根据非NULL的第二实现指针，播放低延迟音效音频数据；在接收到为NULL的第二实现指针和非低延迟音效音频数据之后，根据为NULL的第二实现指针，播放非低延迟音效音频数据。
进一步的，客户端包括第二JAVA语言层模块和第二C语言层模块；
第一JAVA语言层模块502，具体用于在接收到一C语言层模块503采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至第二JAVA语言层模块。
进一步的，第一JAVA语言层模块502，具体用于在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至第二JAVA语言层模块。
上述各模块的功能可对应于图2和图3所示流程中的相应处理步骤，在此不再赘述。
在本发明实施例中，首先通过模式确定模块501确定出当前采用的音效处理模式，当音效处理模式为低延迟耳返模式时，采用第一C语言层模块503采集音频数据，并将音频数据发送至第一JAVA语言层模块502；当音效处理模式为非低延迟耳返模式时，第一JAVA语言层模块502采集音频数据；第一JAVA语言层模块502在接收到一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将低延迟音效音频数据和非NULL的第二实现指针返回至第一JAVA语言层模块；在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将非低延迟音效音频数据和为NULL的第二实现指针返回至第一JAVA语言层模块；以及在接收到客户端发送的低延迟音效音频数据和非NULL的第二实现指针之后，将非NULL的第二实现指针发送至第一C语言层模块；在接收到客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将为NULL的第二实现指针和非低延迟音效音频数据发送至第一C语言层模块；最后，第一C语言层模块503在接收到非NULL的第二实现指针之后，根据非NULL的第二实现指针，播放低延迟音效音频数据；在接收到为NULL的第二实现指针和非低延迟音效音频数据之后，根据为NULL的第二实现指针，播放非低延迟音效音频数据。本实施例可以通过一套装置分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
基于同一发明构思，根据本发明上述实施例提供的应用于包括第二JAVA语言层模块和第二C语言层模块的客户端的音频数据处理方法，相应地，本发明实施例还提供了一种电子设备，如图6所示，包括处理器601和存储器602，
存储器602，用于存放计算机程序；
处理器601，用于执行存储器602上所存放的程序时，本发明实施例提供的上述应用于客户端的音频数据处理方法。
例如，可以包括如下步骤：
第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针；其中，若当前采用的音效处理模式为非低延迟耳返模式，则第一实现指针为空NULL；若当前采用的音效处理模式为低延迟耳返模式时，则第一实现指针为非NULL；
当第一实现指针为NULL时，第二JAVA语言层模块将音频数据发送至第二C语言层模块；当第一实现指针为非NULL时，第二JAVA语言层模块将第一实现指针发送至第二C语言层模块；
第二C语言层模块在接收到音频数据后，并对音频数据进行音效处理，得到非低延迟音效音频数据，并将非低延迟音效音频数据发送至第二JAVA语言层模块；
第二C语言层模块在接收到为非NULL的第一实现指针之后，通过第一回调函数调用音频数据，对音频数据进行音效处理，得到低延迟音效音频数据，并将低延迟音效音频数据发送至第二JAVA语言层模块；
第二JAVA语言层模块在接收到非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将第二实现指针及接收到的非低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对非低延迟音效音频数据进行播放；
第二JAVA语言层模块在接收到低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将第二实现指针及接收到的低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对低延迟音效音频数据进行播放。
进一步的，操作系统可以包括第一JAVA语言层模块和第一C语言层模块；
第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针，包括：
第二JAVA语言层模块接收第一JAVA语言层模块发送的音频数据和第一实现指针。
进一步的，第二C语言层模块在接收到为非NULL的第一实现指针之后，通过第一回调函数调用音频数据，对音频数据进行音效处理，得到低延迟音效音频数据，包括：
第二C语言层模块在接收到为非NULL的第一实现指针之后，通过第一回调函数，从第一C语言层模块调用第一C语言层模块采集的音频数据，对上述音频数据进行音效处理，得到低延迟音效音频数据。
进一步的，还可以包括本发明实施例提供的上述应用于包括第二JAVA语言层模块和第二C语言层模块的客户端的音频数据处理方法的其他处理流程，在此不再进行详细描述。
在本发明实施例提供的电子设备中，客户端的第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针，当第一实现指针为NULL时，第二JAVA语言层模块将音频数据发送至第二C语言层模块；当第一实现指针为非NULL时，第二JAVA语言层模块将第一实现指针发送至第二C语言层模块；第二C语言层模块在接收到音频数据后，对音频数据进行音效处理，得到非低延迟音效音频数据，并将非低延迟音效音频数据发送至第二JAVA语言层模块；第二C语言层模块在接收到为非NULL的第一实现指针之后，通过第一回调函数调用音频数据，对音频数据进行音效处理，得到低延迟音效音频数据，并将低延迟音效音频数据发送至第二JAVA语言层模块；第二JAVA语言层模块在接收到非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将第二实现指针及接收到的非低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对非低延迟音效音频数据进行播放；第二JAVA语言层模块在接收到低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将第二实现指针及接收到的低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对低延迟音效音频数据进行播放。本实施例可以通过一套电子设备分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
上述电子设备提到的存储器可以包括随机存取存储器(Random AccessMemory，简称RAM)，也可以包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。进一步的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(Central ProcessingUnit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(DigitalSignal Processing，简称DSP)、专用集成电路(ApplicationSpecific IntegratedCircuit，简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
基于同一发明构思，根据本发明上述实施例提供的应用于包括第一C语言层模块和第一JAVA语言层模块的终端操作系统的音频数据处理方法，相应地，本发明实施例还提供了一种电子设备，如图7所示，包括处理器701和存储器702，
存储器702，用于存放计算机程序；
处理器701，用于执行存储器702上所存放的程序时，实现本发明实施例提供的上述应用于包括第一C语言层模块和第一JAVA语言层模块的终端操作系统的音频数据处理方法。
例如，可以包括如下步骤：
从非低延迟耳返模式和低延迟耳返模式中确定出当前采用的音效处理模式；
当音效处理模式为低延迟耳返模式时，第一C语言层模块采集音频数据，并将音频数据发送至第一JAVA语言层模块；当音效处理模式为非低延迟耳返模式时，第一JAVA语言层模块采集音频数据；
第一JAVA语言层模块在接收到第一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将低延迟音效音频数据和非NULL的第二实现指针返回至第一JAVA语言层模块；
第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将非低延迟音效音频数据和为NULL的第二实现指针返回至第一JAVA语言层模块；
第一JAVA语言层模块在接收到客户端发送的低延迟音效音频数据和非NULL的第二实现指针之后，将非NULL的第二实现指针发送至第一C语言层模块；
第一JAVA语言层模块在接收到客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将为NULL的第二实现指针和非低延迟音效音频数据发送至第一C语言层模块；
第一C语言层模块在接收到非NULL的第二实现指针之后，根据非NULL的第二实现指针，播放低延迟音效音频数据；
第一C语言层模块在接收到为NULL的第二实现指针和非低延迟音效音频数据之后，根据为NULL的第二实现指针，播放非低延迟音效音频数据。
进一步的，客户端包括第二JAVA语言层模块和第二C语言层模块；
第一JAVA语言层模块在接收到一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至客户端，包括：
第一JAVA语言层模块在接收到一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至第二JAVA语言层模块。
进一步的，第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至客户端，包括：
第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至第二JAVA语言层模块。
进一步的，还可以包括本发明实施例提供的上述应用于包括第一C语言层模块和第一JAVA语言层模块的终端操作系统的音频数据处理方法的其他处理流程，在此不再进行详细描述。
在本发明实施例提供的电子设备中，首先确定当前采用的音效处理模式。当音效处理模式为低延迟耳返模式时，第一C语言层模块采集音频数据，并将音频数据发送至第一JAVA语言层模块；当音效处理模式为非低延迟耳返模式时，第一JAVA语言层模块采集音频数据；第一JAVA语言层模块在接收到第一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将低延迟音效音频数据和非NULL的第二实现指针返回至第一JAVA语言层模块；第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将非低延迟音效音频数据和为NULL的第二实现指针返回至第一JAVA语言层模块；第一JAVA语言层模块在接收到客户端发送的低延迟音效音频数据和非NULL的第二实现指针之后，将非NULL的第二实现指针发送至第一C语言层模块；第一JAVA语言层模块在接收到客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将为NULL的第二实现指针和非低延迟音效音频数据发送至第一C语言层模块；第一C语言层模块在接收到非NULL的第二实现指针之后，根据非NULL的第二实现指针，播放低延迟音效音频数据；第一C语言层模块在接收到为NULL的第二实现指针和非低延迟音效音频数据之后，根据为NULL的第二实现指针，播放非低延迟音效音频数据。本实施例可以通过一套电子设备分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
上述电子设备提到的存储器可以包括随机存取存储器(Random AccessMemory，简称RAM)，也可以包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。进一步的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(Central ProcessingUnit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(DigitalSignal Processing，简称DSP)、专用集成电路(ApplicationSpecific IntegratedCircuit，简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中任一上述应用于包括第二JAVA语言层模块和第二C语言层模块的客户端的音频数据处理方法。
在本发明实施例提供的计算机可读存储介质中，客户端的第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针，当第一实现指针为NULL时，第二JAVA语言层模块将音频数据发送至第二C语言层模块；当第一实现指针为非NULL时，第二JAVA语言层模块将第一实现指针发送至第二C语言层模块；第二C语言层模块在接收到音频数据后，对音频数据进行音效处理，得到非低延迟音效音频数据，并将非低延迟音效音频数据发送至第二JAVA语言层模块；第二C语言层模块在接收到为非NULL的第一实现指针之后，通过第一回调函数调用音频数据，对音频数据进行音效处理，得到低延迟音效音频数据，并将低延迟音效音频数据发送至第二JAVA语言层模块；第二JAVA语言层模块在接收到非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将第二实现指针及接收到的非低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对非低延迟音效音频数据进行播放；第二JAVA语言层模块在接收到低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将第二实现指针及接收到的低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对低延迟音效音频数据进行播放。本实施例可以通过一套计算机可读存储介质分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中任一上述应用于包括第一C语言层模块和第一JAVA语言层模块的终端操作系统的音频数据处理方法。
在本发明实施例提供的计算机可读存储介质中，首先确定当前采用的音效处理模式。当音效处理模式为低延迟耳返模式时，第一C语言层模块采集音频数据，并将音频数据发送至第一JAVA语言层模块；当音效处理模式为非低延迟耳返模式时，第一JAVA语言层模块采集音频数据；第一JAVA语言层模块在接收到第一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将低延迟音效音频数据和非NULL的第二实现指针返回至第一JAVA语言层模块；第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将非低延迟音效音频数据和为NULL的第二实现指针返回至第一JAVA语言层模块；第一JAVA语言层模块在接收到客户端发送的低延迟音效音频数据和非NULL的第二实现指针之后，将非NULL的第二实现指针发送至第一C语言层模块；第一JAVA语言层模块在接收到客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将为NULL的第二实现指针和非低延迟音效音频数据发送至第一C语言层模块；第一C语言层模块在接收到非NULL的第二实现指针之后，根据非NULL的第二实现指针，播放低延迟音效音频数据；第一C语言层模块在接收到为NULL的第二实现指针和非低延迟音效音频数据之后，根据为NULL的第二实现指针，播放非低延迟音效音频数据。本实施例可以通过一套计算机可读存储介质分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一上述应用于包括第二JAVA语言层模块和第二C语言层模块的客户端的音频数据处理方法。
本发明实施例提供的包含指令的计算机程序产品，其采用的方法为：客户端的第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针，当第一实现指针为NULL时，第二JAVA语言层模块将音频数据发送至第二C语言层模块；当第一实现指针为非NULL时，第二JAVA语言层模块将第一实现指针发送至第二C语言层模块；第二C语言层模块在接收到音频数据后，对音频数据进行音效处理，得到非低延迟音效音频数据，并将非低延迟音效音频数据发送至第二JAVA语言层模块；第二C语言层模块在接收到为非NULL的第一实现指针之后，通过第一回调函数调用音频数据，对音频数据进行音效处理，得到低延迟音效音频数据，并将低延迟音效音频数据发送至第二JAVA语言层模块；第二JAVA语言层模块在接收到非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将第二实现指针及接收到的非低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对非低延迟音效音频数据进行播放；第二JAVA语言层模块在接收到低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将第二实现指针及接收到的低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对低延迟音效音频数据进行播放。本实施例可以通过一套包含指令的计算机程序产品分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一上述应用于包括第一C语言层模块和第一JAVA语言层模块的终端操作系统的音频数据处理方法。
本发明实施例提供的包含指令的计算机程序产品，其采用的方法为：首先确定当前采用的音效处理模式。当音效处理模式为低延迟耳返模式时，第一C语言层模块采集音频数据，并将音频数据发送至第一JAVA语言层模块；当音效处理模式为非低延迟耳返模式时，第一JAVA语言层模块采集音频数据；第一JAVA语言层模块在接收到第一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将低延迟音效音频数据和非NULL的第二实现指针返回至第一JAVA语言层模块；第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将非低延迟音效音频数据和为NULL的第二实现指针返回至第一JAVA语言层模块；第一JAVA语言层模块在接收到客户端发送的低延迟音效音频数据和非NULL的第二实现指针之后，将非NULL的第二实现指针发送至第一C语言层模块；第一JAVA语言层模块在接收到客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将为NULL的第二实现指针和非低延迟音效音频数据发送至第一C语言层模块；第一C语言层模块在接收到非NULL的第二实现指针之后，根据非NULL的第二实现指针，播放低延迟音效音频数据；第一C语言层模块在接收到为NULL的第二实现指针和非低延迟音效音频数据之后，根据为NULL的第二实现指针，播放非低延迟音效音频数据。本实施例可以通过一套包含指令的计算机程序产品分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序，当其在计算机上运行时，使得计算机执行上述实施例中任一上述应用于包括第一C语言层模块和第一JAVA语言层模块的终端操作系统的音频数据处理方法。
本发明实施例提供的包含指令的计算机程序，其采用的方法为：首先确定当前采用的音效处理模式。当音效处理模式为低延迟耳返模式时，第一C语言层模块采集音频数据，并将音频数据发送至第一JAVA语言层模块；当音效处理模式为非低延迟耳返模式时，第一JAVA语言层模块采集音频数据；第一JAVA语言层模块在接收到第一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将音频数据和非NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将低延迟音效音频数据和非NULL的第二实现指针返回至第一JAVA语言层模块；第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将音频数据和为空NULL的第一实现指针发送至客户端，用于触发客户端对音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将非低延迟音效音频数据和为NULL的第二实现指针返回至第一JAVA语言层模块；第一JAVA语言层模块在接收到客户端发送的低延迟音效音频数据和非NULL的第二实现指针之后，将非NULL的第二实现指针发送至第一C语言层模块；第一JAVA语言层模块在接收到客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将为NULL的第二实现指针和非低延迟音效音频数据发送至第一C语言层模块；第一C语言层模块在接收到非NULL的第二实现指针之后，根据非NULL的第二实现指针，播放低延迟音效音频数据；第一C语言层模块在接收到为NULL的第二实现指针和非低延迟音效音频数据之后，根据为NULL的第二实现指针，播放非低延迟音效音频数据。本实施例可以通过一套包含指令的计算机程序产品分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序，当其在计算机上运行时，使得计算机执行上述实施例中任一上述应用于包括第二JAVA语言层模块和第二C语言层模块的客户端的音频数据处理方法。
本发明实施例提供的包含指令的计算机程序，其采用的方法为：客户端的第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针，当第一实现指针为NULL时，第二JAVA语言层模块将音频数据发送至第二C语言层模块；当第一实现指针为非NULL时，第二JAVA语言层模块将第一实现指针发送至第二C语言层模块；第二C语言层模块在接收到音频数据后，对音频数据进行音效处理，得到非低延迟音效音频数据，并将非低延迟音效音频数据发送至第二JAVA语言层模块；第二C语言层模块在接收到为非NULL的第一实现指针之后，通过第一回调函数调用音频数据，对音频数据进行音效处理，得到低延迟音效音频数据，并将低延迟音效音频数据发送至第二JAVA语言层模块；第二JAVA语言层模块在接收到非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将第二实现指针及接收到的非低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对非低延迟音效音频数据进行播放；第二JAVA语言层模块在接收到低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将第二实现指针及接收到的低延迟音效音频数据发送至操作系统，用于触发操作系统根据第二实现指针，对低延迟音效音频数据进行播放。本实施例可以通过一套包含指令的计算机程序产品分别获得非低延迟音效音频数据和低延迟音效音频数据，并对上述不同音频数据进行播放，降低了软件的维护成本。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行上述计算机程序指令时，全部或部分地产生按照本发明实施例上述的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。上述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。上述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个......”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置和电子设备实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (16)

1.一种音频数据处理方法，应用于客户端，所述客户端包括第二JAVA语言层模块和第二C语言层模块，其特征在于，包括：
所述第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针；其中，若当前采用的音效处理模式为非低延迟耳返模式，则所述第一实现指针为空NULL；若当前采用的音效处理模式为低延迟耳返模式，则所述第一实现指针为非NULL；
判断所述第一实现指针的类型；
若判定所述第一实现指针为NULL，所述第二JAVA语言层模块将所述音频数据发送至所述第二C语言层模块；
若判定所述第一实现指针为非NULL，所述第二JAVA语言层模块将所述第一实现指针发送至所述第二C语言层模块；
所述第二C语言层模块在接收到所述音频数据后，对所述音频数据进行音效处理，得到非低延迟音效音频数据，并将所述非低延迟音效音频数据发送至所述第二JAVA语言层模块；
所述第二C语言层模块在接收到为非NULL的所述第一实现指针之后，通过第一回调函数调用所述音频数据，对所述音频数据进行音效处理，得到低延迟音效音频数据，并将所述低延迟音效音频数据发送至所述第二JAVA语言层模块；
所述第二JAVA语言层模块在接收到所述非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将所述第二实现指针及接收到的所述非低延迟音效音频数据发送至所述操作系统，用于触发所述操作系统根据所述第二实现指针，对所述非低延迟音效音频数据进行播放；
所述第二JAVA语言层模块在接收到所述低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将所述第二实现指针及接收到的所述低延迟音效音频数据发送至所述操作系统，用于触发所述操作系统根据所述第二实现指针，对所述低延迟音效音频数据进行播放。
2.根据权利要求1所述的方法，其特征在于，所述操作系统包括第一JAVA语言层模块和第一C语言层模块；
所述第二JAVA语言层模块接收操作系统发送的音频数据和第一实现指针，包括：
所述第二JAVA语言层模块接收所述第一JAVA语言层模块发送的音频数据和第一实现指针。
3.根据权利要求2所述的方法，其特征在于，所述第二C语言层模块在接收到为非NULL的所述第一实现指针之后，通过第一回调函数调用所述音频数据，对所述音频数据进行音效处理，得到低延迟音效音频数据，包括：
所述第二C语言层模块在接收到为非NULL的所述第一实现指针之后，通过第一回调函数，从所述第一C语言层模块调用所述第一C语言层模块采集的音频数据，对所述音频数据进行音效处理，得到低延迟音效音频数据。
4.一种音频数据处理方法，应用于终端的操作系统，所述操作系统包括第一C语言层模块和第一JAVA语言层模块，其特征在于，包括：
从非低延迟耳返模式和低延迟耳返模式中确定出当前采用的音效处理模式；
当所述音效处理模式为低延迟耳返模式时，所述第一C语言层模块采集音频数据，并将所述音频数据发送至所述第一JAVA语言层模块；当所述音效处理模式为非低延迟耳返模式时，所述第一JAVA语言层模块采集音频数据；
所述第一JAVA语言层模块在接收到所述第一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将所述音频数据和所述非NULL的第一实现指针发送至客户端，用于触发所述客户端对所述音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将所述低延迟音效音频数据和非NULL的第二实现指针返回至所述第一JAVA语言层模块；
所述第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将所述音频数据和所述为空NULL的第一实现指针发送至客户端，用于触发所述客户端对所述音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将所述非低延迟音效音频数据和为NULL的第二实现指针返回至所述第一JAVA语言层模块；
所述第一JAVA语言层模块在接收到所述客户端发送的所述低延迟音效音频数据和非NULL的第二实现指针之后，将所述非NULL的第二实现指针发送至所述第一C语言层模块；
所述第一JAVA语言层模块在接收到所述客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将所述为NULL的第二实现指针和所述非低延迟音效音频数据发送至所述第一C语言层模块；
所述第一C语言层模块在接收到所述非NULL的第二实现指针之后，根据所述非NULL的第二实现指针，播放所述低延迟音效音频数据；
所述第一C语言层模块在接收到所述为NULL的第二实现指针和所述非低延迟音效音频数据之后，根据所述为NULL的第二实现指针，播放所述非低延迟音效音频数据。
5.根据权利要求4所述的方法，其特征在于，所述客户端包括第二JAVA语言层模块和第二C语言层模块；
所述第一JAVA语言层模块在接收到所述一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将所述音频数据和所述非NULL的第一实现指针发送至客户端，包括：
所述第一JAVA语言层模块在接收到所述一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将所述音频数据和所述非NULL的第一实现指针发送至所述第二JAVA语言层模块。
6.根据权利要求5所述的方法，其特征在于，所述第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将所述音频数据和所述为空NULL的第一实现指针发送至客户端，包括：
所述第一JAVA语言层模块在采集到音频数据之后，生成为NULL的第一实现指针，并将所述音频数据和所述为空NULL的第一实现指针发送至所述第二JAVA语言层模块。
7.一种音频数据处理装置，位于客户端，其特征在于，包括：
第二JAVA语言层模块和第二C语言层模块；
所述第二JAVA语言层模块，用于接收操作系统发送的音频数据和第一实现指针；其中，若当前采用的音效处理模式为非低延迟耳返模式，则所述第一实现指针为空NULL；若当前采用的音效处理模式为低延迟耳返模式时，则所述第一实现指针为非NULL；并当所述第一实现指针为NULL时，将所述音频数据发送至第二C语言层模块；当所述第一实现指针为非NULL时，将所述第一实现指针发送至所述第二C语言层模块；
所述第二C语言层模块，用于在接收到所述音频数据后，对所述音频数据进行音效处理，得到非低延迟音效音频数据，并将所述非低延迟音效音频数据发送至所述第二JAVA语言层模块；以及，在接收到为非NULL的所述第一实现指针之后，通过第一回调函数调用所述音频数据，对所述音频数据进行音效处理，得到低延迟音效音频数据，并将所述低延迟音效音频数据发送至所述第二JAVA语言层模块；
所述第二JAVA语言层模块，还用于在接收到所述非低延迟音效音频数据之后，生成为NULL的第二实现指针，并将所述第二实现指针及接收到的所述非低延迟音效音频数据发送至所述操作系统，用于触发所述操作系统根据所述第二实现指针，对所述非低延迟音效音频数据进行播放；以及在接收到所述低延迟音效音频数据之后，生成为非NULL的第二实现指针，并将所述第二实现指针及接收到的所述低延迟音效音频数据发送至所述操作系统，用于触发所述操作系统根据所述第二实现指针，对所述低延迟音效音频数据进行播放。
8.根据权利要求7所述的装置，其特征在于，所述操作系统包括第一JAVA语言层模块和第一C语言层模块；
所述第二JAVA语言层模块，具体用于接收所述第一JAVA语言层模块发送的音频数据和第一实现指针。
9.根据权利要求8所述的装置，其特征在于，所述第二C语言层模块，具体用于在接收到为非NULL的所述第一实现指针之后，通过第一回调函数，从所述第一C语言层模块调用所述第一C语言层模块采集的音频数据，对所述音频数据进行音效处理，得到低延迟音效音频数据。
10.一种音频数据处理装置，位于终端的操作系统，其特征在于，包括：
模式确定模块、第一C语言层模块和第一JAVA语言层模块；
所述模式确定模块，用于从非低延迟耳返模式和低延迟耳返模式中确定出当前采用的音效处理模式；
所述第一C语言层模块，用于当所述音效处理模式为低延迟耳返模式时，采集音频数据，并将所述音频数据发送至所述第一JAVA语言层模块；
所述第一JAVA语言层模块，用于当所述音效处理模式为非低延迟耳返模式时，采集音频数据；在接收到所述一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将所述音频数据和所述非NULL的第一实现指针发送至客户端，用于触发所述客户端对所述音频数据进行低延迟音效处理，得到低延迟音效音频数据，生成非NULL的第二实现指针，并将所述低延迟音效音频数据和非NULL的第二实现指针返回至所述第一JAVA语言层模块；在采集到音频数据之后，生成为NULL的第一实现指针，并将所述音频数据和所述为空NULL的第一实现指针发送至客户端，用于触发所述客户端对所述音频数据进行非低延迟音效处理，得到非低延迟音效音频数据，生成为NULL的第二实现指针，并将所述非低延迟音效音频数据和为NULL的第二实现指针返回至所述第一JAVA语言层模块；以及在接收到所述客户端发送的所述低延迟音效音频数据和非NULL的第二实现指针之后，将所述非NULL的第二实现指针发送至所述第一C语言层模块；在接收到所述客户端发送的非低延迟音效音频数据和为NULL的第二实现指针之后，将所述为NULL的第二实现指针和所述非低延迟音效音频数据发送至所述第一C语言层模块；
所述第一C语言层模块，还用于在接收到所述非NULL的第二实现指针之后，根据所述非NULL的第二实现指针，播放所述低延迟音效音频数据；在接收到所述为NULL的第二实现指针和所述非低延迟音效音频数据之后，根据所述为NULL的第二实现指针，播放所述非低延迟音效音频数据。
11.根据权利要求10所述的装置，其特征在于，所述客户端包括第二JAVA语言层模块和第二C语言层模块；
所述第一JAVA语言层模块，具体用于在接收到所述一C语言层模块采集的音频数据后，生成非NULL的第一实现指针，并将所述音频数据和所述非NULL的第一实现指针发送至所述第二JAVA语言层模块。
12.根据权利要求11所述的装置，其特征在于，所述第一JAVA语言层模块，具体用于在采集到音频数据之后，生成为NULL的第一实现指针，并将所述音频数据和所述为空NULL的第一实现指针发送至所述第二JAVA语言层模块。
13.一种电子设备，其特征在于，包括处理器和存储器；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求1-3任一所述的方法步骤。
14.一种电子设备，其特征在于，包括处理器和存储器；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求4-6任一所述的方法步骤。
15.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-3任一所述的方法步骤。
16.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求4-6任一所述的方法步骤。
CN201810099469.3A 2018-01-31 2018-01-31 一种音频数据处理方法、装置、电子设备及存储介质 Active CN110096250B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810099469.3A CN110096250B (zh) 2018-01-31 2018-01-31 一种音频数据处理方法、装置、电子设备及存储介质
PCT/CN2018/125945 WO2019149017A1 (zh) 2018-01-31 2018-12-30 一种音频数据处理方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810099469.3A CN110096250B (zh) 2018-01-31 2018-01-31 一种音频数据处理方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN110096250A true CN110096250A (zh) 2019-08-06
CN110096250B CN110096250B (zh) 2020-05-29

Family

ID=67443372

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810099469.3A Active CN110096250B (zh) 2018-01-31 2018-01-31 一种音频数据处理方法、装置、电子设备及存储介质

Country Status (2)

Country Link
CN (1) CN110096250B (zh)
WO (1) WO2019149017A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114615536A (zh) * 2022-02-25 2022-06-10 海信视像科技股份有限公司 显示设备及音效处理方法
WO2023160100A1 (zh) * 2022-02-25 2023-08-31 海信视像科技股份有限公司 显示设备、外接设备、音频播放及音效处理方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102710857A (zh) * 2012-05-24 2012-10-03 武汉诚迈科技有限公司 一种适用于android智能手机的K歌方法
US20160353197A1 (en) * 2013-12-03 2016-12-01 Bose Corporation Active noise reduction headphone
CN106205580A (zh) * 2016-06-30 2016-12-07 维沃移动通信有限公司 一种音频数据处理方法及终端
CN106325804A (zh) * 2015-07-03 2017-01-11 深圳市中兴微电子技术有限公司 音频处理方法及系统
CN107329726A (zh) * 2017-06-09 2017-11-07 青岛海信电器股份有限公司 Android系统中对输入的音频数据的处理方法和装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101192203A (zh) * 2006-11-30 2008-06-04 中兴通讯股份有限公司 手机音频播放方法
US9271096B2 (en) * 2009-09-03 2016-02-23 Robert Bosch Gmbh Delay unit for a conference audio system, method for delaying audio input signals, computer program and conference audio system
CN106293659A (zh) * 2015-05-21 2017-01-04 阿里巴巴集团控股有限公司 一种音频实时处理方法、装置及智能终端
CN105786441B (zh) * 2016-01-29 2019-01-25 腾讯科技（深圳）有限公司 一种音频处理的方法、服务器、用户设备及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102710857A (zh) * 2012-05-24 2012-10-03 武汉诚迈科技有限公司 一种适用于android智能手机的K歌方法
US20160353197A1 (en) * 2013-12-03 2016-12-01 Bose Corporation Active noise reduction headphone
CN106325804A (zh) * 2015-07-03 2017-01-11 深圳市中兴微电子技术有限公司 音频处理方法及系统
CN106205580A (zh) * 2016-06-30 2016-12-07 维沃移动通信有限公司 一种音频数据处理方法及终端
CN107329726A (zh) * 2017-06-09 2017-11-07 青岛海信电器股份有限公司 Android系统中对输入的音频数据的处理方法和装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114615536A (zh) * 2022-02-25 2022-06-10 海信视像科技股份有限公司 显示设备及音效处理方法
WO2023160100A1 (zh) * 2022-02-25 2023-08-31 海信视像科技股份有限公司 显示设备、外接设备、音频播放及音效处理方法
CN114615536B (zh) * 2022-02-25 2024-05-28 海信视像科技股份有限公司 显示设备及音效处理方法

Also Published As

Publication number Publication date
CN110096250B (zh) 2020-05-29
WO2019149017A1 (zh) 2019-08-08

Similar Documents

Publication Publication Date Title
CN107992282A (zh) 音频数据处理方法及装置、计算机装置及可读存储装置
CN105989165B (zh) 在即时聊天工具中播放表情信息的方法、装置及系统
JP2018519538A (ja) カラオケ処理方法およびシステム
CN104392711A (zh) 一种实现卡拉ok功能的方法及装置
CN107911361A (zh) 支持多会话的语音管理方法、装置、终端设备及存储介质
CN104867513B (zh) 一种播放控制方法及设备
CN103177743B (zh) 一种歌曲播放方法及装置
CN110503981A (zh) 无参考音频客观质量评价方法、装置及存储介质
CN108737648B (zh) 音乐音量自适应调节方法、装置、存储介质及终端
CN103915086A (zh) 信息处理的方法、装置和系统
CN104464743B (zh) 一种在语音聊天室中播放背景音乐的方法及移动终端
CN107665703A (zh) 一种多用户的音频合成方法和系统以及远程服务器
CN109658935A (zh) 多通道带噪语音的生成方法及系统
CN110096250A (zh) 一种音频数据处理方法、装置、电子设备及存储介质
CN107948623A (zh) 投影仪及其音乐关联信息显示方法
CN113286161A (zh) 一种直播方法、装置、设备及存储介质
CN105391563B (zh) 信息通知方法及装置
CN106686431A (zh) 一种音频文件的合成方法和设备
CN110299144A (zh) 音频混音方法、服务器及客户端
CN104883619B (zh) 音视频内容推荐系统、方法及装置
CN109830247A (zh) 用于测试通话质量的方法和装置
CN105190741A (zh) 音乐合奏管理方法及音乐合奏管理装置
CN106407353B (zh) 一种播放动画的方法和装置
CN109246664A (zh) 一种语音测试方法及装置
CN106664432A (zh) 多媒体信息播放方法及系统、采集设备、标准化服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant