CN116700660A - 音频播放方法和电子设备 - Google Patents

音频播放方法和电子设备 Download PDF

Info

Publication number
CN116700660A
CN116700660A CN202211423981.1A CN202211423981A CN116700660A CN 116700660 A CN116700660 A CN 116700660A CN 202211423981 A CN202211423981 A CN 202211423981A CN 116700660 A CN116700660 A CN 116700660A
Authority
CN
China
Prior art keywords
audio
audio data
control
queue
terminal equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211423981.1A
Other languages
English (en)
Other versions
CN116700660B (zh
Inventor
王祺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202211423981.1A priority Critical patent/CN116700660B/zh
Publication of CN116700660A publication Critical patent/CN116700660A/zh
Application granted granted Critical
Publication of CN116700660B publication Critical patent/CN116700660B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/546—Message passing systems or structures, e.g. queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/54—Indexing scheme relating to G06F9/54
    • G06F2209/548—Queue

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Telephone Function (AREA)

Abstract

本申请实施例提供了一种音频播放方法和电子设备。该方法包括：在第一时刻，终端设备创建控件的实例、音频资源管理器的实例、音频队列的实例和音频播放器的实例，其中，控件用于关联音频数据，音频资源管理器用于管理控件对应的音频数据，音频队列用于存储待播放的音频数据，音频播放器用于调用播放音频的硬件；在第二时刻，终端设备接收到用于指示播放第一控件对应的第一音频数据的指令；第二时刻晚于第一时刻；终端设备的音频资源管理器将第一音频数据推入音频队列；终端设备根据第一音频数据在音频队列中的位置播放第一音频数据。这样，在播放多个音频时，不需要多次创建WASAPI会话以及初始化音频终结点，进而减小了音频播放时的功耗与占用资源。

Description

音频播放方法和电子设备
技术领域
本申请涉及终端技术领域，尤其涉及一种音频播放方法和电子设备。
背景技术
随着终端技术的发展，终端设备可支持多种多样的应用程序。一些应用程序可提供音频播放的功能，例如：一些应用程序的界面上可显示多个控件，每个控件可以对应一条或多条音频，音频例如可以包括播放提示音、警示提示音等音频，当终端设备接收到针对某个控件的触发操作时，终端设备可播放该被触发的控件相应的音频。一些情况下，终端设备可能触发了多个控件，终端设备可根据触发顺序播放这些控件所对应的音频。
可能的实现中，终端设备播放这些音频的流程可如下：终端设备在应用程序界面接收到针对第一控件的触发操作之后，终端设备再通过第一控件的线程创建微软音频会话应用程序接口(windows audio session application programming interface，WASAPI)的会话，并基于WASAPI会话连接音频终结点(例如扬声器)以及初始化音频终结点。随后经音频解码器解码得到第一控件对应的音频的音频流，由音频终结点播放第一控件对应的音频。终端设备执行完毕上述流程后，结束WASAPI会话。后续，如果终端设备在应用程序界面接收到针对第二控件的触发操作，终端设备再通过第二控件的线程创建WASAPI会话等，类似于第一控件被触发的过程，基于WASAPI会话实现对第二控件对应的音频的播放，且在完成第二控件对应的音频的播放后，结束WASAPI会话。
但上述实现中，终端设备需要播放音频存在占用较多资源的情况，增加了终端设备的功耗。
发明内容
本申请实施例提供一种音频播放方法和电子设备，应用于终端技术领域，通过预先创建音频资源管理器的实例、音频播放器的实例与音频队列的实例，以及初始化音频终结点。当终端设备在接收到任一用于播放控件对应的音频的触发指令时，终端设备均可复用音频资源管理器、音频队列与音频播放器来播放该控件对应的音频数据。进而减小了终端设备播放音频数据时的功耗以及占用资源。
第一方面，本申请实施例提出一种音频播放方法，应用于终端设备，该方法包括：在第一时刻，终端设备创建控件的实例、音频资源管理器的实例、音频队列的实例和音频播放器的实例；在第二时刻，终端设备接收到用于指示播放第一控件对应的第一音频数据的指令；终端设备的音频资源管理器将第一音频数据推入音频队列；终端设备根据第一音频数据在音频队列中的位置播放第一音频数据。这样，终端设备基于音频资源管理器、音频队列以及音频播放器实现播放控件对应的音频数据的效果；同时，在接收到对任一控件的触发指令时，终端设备均可复用上述实例完成播放该控件对应的音频数据的播放流程，不需要频繁创建WASAPI会话，进而降低了播放音频过程中终端设备的功耗与占用资源。
在一种可能的实现方式中，方法还包括：在第三时刻，终端设备接收到用于指示播放第二控件对应的第二音频数据的指令；第三时刻晚于第二时刻；终端设备的音频资源管理器将第二音频数据推入音频队列；终端设备根据第二音频数据在音频队列中的位置播放第二音频数据。这样，终端设备可在接收到针对第二控件的触发指令时，可重复调用音频资源管理器、音频播放器和音频队列，从而减少创建WASAPI会话以及初始化音频终结点的次数，进而减小终端设备的功耗以及占用资源。
在一种可能的实现方式中，终端设备创建音频队列的实例时，还设置音频队列处于就绪状态；终端设备创建音频播放器的实例时，还初始化播放音频的硬件；终端设备创建控件的实例时，还通过音频资源管理器获取控件对应的原始音频数据。这样，终端设备可对音频处理模块进行初始化，以使终端设备在接收到对任一控件的触发指令时，可以播放该控件对应的音频数据。
在一种可能的实现方式中，终端设备通过音频资源管理器获取控件对应的原始音频数据之后，还包括：终端设备得到音频设备参数，音频设备参数包括终端设备支持的音频码率；终端设备调用音频解码器并基于音频码率对控件对应的原始音频数据进行解码，得到控件对应的音频数据；终端设备基于音频资源管理器管理解码后的控件对应的音频数据。这样，音频资源管理器可预先管理解码后的控件对应的音频数据，以使终端设备在接收到对任一控件的触发指令时，终端设备可使用解码后的该控件对应的音频数据。
在一种可能的实现方式中，终端设备基于音频资源管理器管理解码后的控件对应的音频数据，包括：音频资源管理器将解码后的控件对应的音频数据加载到内存，以及基于控件对应的音频数据的ID查询和/或使用内存中的控件对应的音频数据。这样，音频资源管理器可预先将解码后的控件对应的音频数据加载到内存，以使终端设备在接收到对任一控件的触发指令时，音频资源管理器可查询并使用内存中的控件对应的音频数据。
在一种可能的实现方式中，终端设备的音频资源管理器将第一音频数据推入音频队列，包括：当第一音频数据的播放标识为用于指示终端设备立即播放音频的标识时，音频资源管理器将第一音频数据置于音频队列中的顶层；当第一音频数据的播放标识为用于指示终端设备正常播放音频的标识时，音频资源管理器将第一音频数据置于音频队列中的底层。这样，终端设备可设置控件对应的音频数据的播放优先级，终端设备可按预设的播放顺序来有序的播放多个音频数据。
在一种可能的实现方式中，当第一音频数据的播放标识为用于指示终端设备立即播放音频的标识时，音频资源管理器将第一音频数据置于音频队列中的顶层，包括：当第一音频数据的播放标识为用于指示终端设备立即播放音频的标识时，音频资源管理器清空音频队列后，将第一音频数据置于音频队列中；当第一音频数据的播放标识为用于指示终端设备正常播放音频的标识时，音频资源管理器将第一音频数据置于音频队列中的底层，包括：当第一音频数据的播放标识为用于指示终端设备正常播放音频的标识时，音频资源管理器将第一音频数据顺序推入音频队列中。这样，终端设备可设置控件对应的音频数据的播放优先级，终端设备可按预设的播放顺序来有序的播放多个音频数据。
在一种可能的实现方式中，终端设备根据第一音频数据在音频队列中的位置播放第一音频数据，包括：当第一音频数据为音频队列中的第一个音频时，音频队列将第一音频数据推入音频播放器；音频播放器调用用于播放音频的设备，以播放第一音频数据。这样，终端设备可根据第一音频数据在音频队列中的位置来播放第一音频数据。
在一种可能的实现方式中，音频资源管理器、音频队列和音频播放器由目标线程管理，管理控件的线程不同于目标线程。这样，由于音频资源管理器、音频队列和音频播放器处于独立线程中，当终端设备接收到对任一控件的触发指令时，终端设备均可复用目标线程中的音频资源管理器、音频队列和音频播放器。不需要频繁创建WASAPI会话，进而降低了播放音频过程中终端设备的功耗与占用资源。
在一种可能的实现方式中，方法还包括：当音频队列中无音频数据时，音频播放器进入睡眠状态。这样，当终端设备无需播放音频数据时，音频播放器可进入睡眠状态，以降低功耗。
第二方面，本申请实施例提供一种终端设备，终端设备也可以称为终端(terminal)、用户设备(user equipment，UE)、移动台(mobile station，MS)、移动终端(mobile terminal，MT)等。终端设备可以是手机(mobile phone)、智能电视、穿戴式设备、平板电脑(Pad)、带无线收发功能的电脑、虚拟现实(virtual reality，VR)终端设备、增强现实(augmented reality，AR)终端设备、工业控制(industrial control)中的无线终端、无人驾驶(self-driving)中的无线终端、远程手术(remote medical surgery)中的无线终端、智能电网(smart grid)中的无线终端、运输安全(transportation safety)中的无线终端、智慧城市(smart city)中的无线终端、智慧家庭(smart home)中的无线终端等等。
该终端设备包括：包括：处理器和存储器；存储器存储计算机执行指令；处理器执行存储器存储的计算机执行指令，使得终端设备执行如第一方面的方法。
第三方面，本申请实施例提供一种计算机可读存储介质，计算机可读存储介质存储有计算机程序。计算机程序被处理器执行时实现如第一方面的方法。
第四方面，本申请实施例提供一种计算机程序产品，计算机程序产品包括计算机程序，当计算机程序被运行时，使得计算机执行如第一方面的方法。
第五方面，本申请实施例提供了一种芯片，芯片包括处理器，处理器用于调用存储器中的计算机程序，以执行如第一方面的方法。
应当理解的是，本申请的第二方面至第五方面与本申请的第一方面的技术方案相对应，各方面及对应的可行实施方式所取得的有益效果相似，不再赘述。
附图说明
图1为可能的实现中的终端设备播放多个音频数据的流程示意图；
图2为本申请实施例提供的一种终端设备的结构示意图；
图3为本申请实施例提供的一种终端设备的软件结构示意图；
图4为本申请实施例提供的一种音频播放方法的流程示意图；
图5为本申请实施例提供的一种音频播放方法的界面示意图；
图6为本申请实施例提供的一种音频播放方法的流程示意图；
图7为本申请实施例提供的音频队列的示意图；
图8为本申请实施例提供的一种音频播放方法的流程示意图；
图9为本申请实施例提供的一种终端设备的内部交互的流程示意图；
图10为本申请实施例提供的一种音频播放装置的结构示意图。
具体实施方式
为了便于清楚描述本申请实施例的技术方案，以下，对本申请实施例中所涉及的部分术语和技术进行简单介绍：
1)进程：进程指在终端设备的内存中运行的一个应用程序，是系统进行资源分配和调度的基本单位。进程是线程的容器，一个进程中可包括多个线程。
2)线程：是操作系统能够进行运算调度的最小单位，线程是进程中一个单一顺序的控制流，一个进程中可以并行多个线程，每条线程并行执行不同的任务。例如：终端设备正运行的应用程序可理解为一个进程，其中，多个线程可包括用于显示该应用程序的用户界面(user interface，UI)的主线程以及用于协同处理后台任务的子线程等。
3)微软音频会话应用程序接口(windows audio session applicationprogramming interface，WASAPI)：应用层的应用程序可通过调用Windows API来调用音频硬件。
为了便于清楚描述本申请实施例的技术方案，本申请实施例中，“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其他实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
本申请实施例中，“至少一个”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B的情况，其中A，B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达，是指的这些项中的任意组合，包括单项(个)或复数项(个)的任意组合。例如，a，b，或c中的至少一项(个)，可以表示：a，b，c，a-b，a-c，b-c，或a-b-c，其中a，b，c可以是单个，也可以是多个。
需要说明的是，本申请实施例中的“在……时”，可以为在某种情况发生的瞬时，也可以为在某种情况发生后的一段时间内，本申请实施例对此不作具体限定。此外，本申请实施例提供的显示界面仅作为示例，显示界面还可以包括更多或更少的内容。
随着终端技术的发展，终端设备可支持多种应用程序，应用程序可提供音频播放的功能。示例性的，应用程序中可包括多个控件，控件可用于关联音频数据，其中，控件可以包括一些在用户界面对应有显示的按钮的控件；控件也可以包括一些虚拟控件，这些虚拟控件不显示在用户界面中，用户也不能直观的看到虚拟控件。一些情况下，应用程序的UI界面中显示有控件，终端设备可接收到针对控件的触发操作，响应于该触发操作，终端设备可播放与该控件对应的音频。或者，另一些情况下，应用程序中的控件为虚拟控件，终端设备也可在接收到用于指示该虚拟控件对应的音频的触发指令时，播放该虚拟控件对应的音频。例如，应用程序在执行下载文件的流程，虚拟控件关联有下载完成的提示音。当文件下载完毕时，终端设备可接收到用于播放下载完成的提示音的触发指令，终端设备响应于该触发指令，播放下载完成的提示音。
一些情况下，终端设备可能需要播放多个控件对应的音频，终端设备可根据触发指令的触发时间顺序依次播放这些控件所对应的音频，终端设备也可根据音频的播放优先级进行播放。例如：在启动应用程序后，终端设备在先接收到了针对第一控件的触发操作，较短时间内，又接收到了针对第二控件的触发操作。这时，终端设备可先播放第一控件对应的音频，再播放第二控件对应的音频。或者，当第二控件的音频为优先播放的音频时，例如，第二控件的音频为警告提示音或错误提示音等，终端设备可先播放第二控件的音频，再播放第一控件的音频。
下面以终端设备启动应用程序后，先播放第一控件的音频，再播放第二控件的音频为例，对其播放流程进行说明。示例性的，如图1所示：
S101、终端设备接收到对第一控件的触发操作之后，终端设备创建第一WASAPI会话。
S102、终端设备连接到音频终结点。
音频终结点用于播放第一控件的音频，这里终端设备在创建第一WASAPI会话后，可连接到音频终结点，并对音频终结点进行初始化。例如，音频终结点可以包括扬声器。
S103、终端设备对第一控件的音频进行解码。
可以理解的是，在创建WASAPI会话后，终端设备得到的第一控件的音频为原始音频数据，例如MP3音频文件、WAV音频文件等，终端设备通过调用音频解码器对原始音频数据进行解码处理，得到支持WASAPI播放的音频流。
S104、终端设备播放第一控件的音频。
终端设备的音频终结点得到第一控件对应的音频流，并播放第一控件对应的音频流，以实现终端设备播放第一控件对应的音频的效果。
其中，在执行S101至S104的任意时刻，终端设备均可能接收到对第二控件的触发。但是，由于一个程序内的相同进程不能创建多个WASAPI会话并连接同一个物理的音频终结点，否则会导致音频终结点播放音频错误。而若在执行多个音频播放任务时分别创建多个音频终结点，多个音频终结点间要解决如何序列化播放音频，使一个音频终结点播放完成前一音频、另一个音频终结点同步开始播放下一音频的效果，该过程较为繁琐。
因此，在接收到对第二控件的触发时，终端设备可以不中断S101至S104的执行，直到终端设备播放完毕第一控件的音频，终端设备结束第一WASAPI会话。终端设备再开始执行播放第二控件的音频的流程。
终端设备播放第二控件的音频的流程，可以如步骤S105-S108所示：
S105、终端设备创建第二WASAPI会话。
S106、终端设备连接到音频终结点。
S107、终端设备对第二控件的音频进行解码。
S108、终端设备播放第二控件的音频。
可以理解的是，步骤S105-S108可参考步骤S101-S104的说明，此处不再赘述。终端设备播放完毕第二控件的音频，终端设备仍需要结束第二WASAPI会话。
可见，上述实现中，当终端设备需要执行音频播放任务时，均需要执行步骤S101-S104的音频播放流程。该流程的实现也可以成为基于图形用户界面(graphical userinterface，GUI)框架的实现。
在音频播放任务较多时，终端设备需要多次创建WASAPI会话并初始化音频终结点，这将导致终端设备出现功耗高、占用资源多、耗电快等问题。
有鉴于此，本申请实施例提供了一种音频播放方法，终端设备可以预先创建音频资源管理器的实例、音频播放器的实例与音频队列的实例，以及初始化音频终结点。当终端设备在接收到任一用于播放控件对应的音频的触发指令时，终端设备均可复用音频资源管理器、音频队列与音频播放器，该控件对应的音频数据依次经过音频资源管理器、音频队列、音频播放器以及音频终结点，并由音频终结点播放该控件对应的音频。在播放该控件对应的音频后，终端设备还可继续使用上述实例播放其他控件对应的音频。这样，本申请实施例提供的音频播放方法在播放多个音频时，不需要多次创建WASAPI会话以及初始化音频终结点，进而减小了音频播放时的功耗与占用资源。同时，本申请实施例通过音频队列的实例对待播放音频进行播放调度，实现了播放多个音频的效果。
本申请实施例的终端设备也可以为任意形式的电子设备，例如，电子设备可以包括手持式设备、车载设备等。例如，一些电子设备为：手机(mobile phone)、平板电脑、掌上电脑、笔记本电脑、移动互联网设备(mobile internet device，MID)、可穿戴设备，虚拟现实(virtual reality，VR)设备、增强现实(augmented reality，AR)设备、工业控制(industrial control)中的无线终端、无人驾驶(self driving)中的无线终端、远程手术(remote medical surgery)中的无线终端、智能电网(smart grid)中的无线终端、运输安全(transportation safety)中的无线终端、智慧城市(smart city)中的无线终端、智慧家庭(smart home)中的无线终端、用户设备(user equipment，UE)、移动台(mobile station，MS)、移动终端(mobile terminal，MT)、接入终端、用户单元、用户站、移动站、移动台、远方站、远程终端、移动设备、终端、无线通信设备、用户代理或用户装置蜂窝电话、无绳电话、会话启动协议(session initiation protocol，SIP)电话、无线本地环路(wireless localloop，WLL)站、个人数字助理(personal digital assistant，PDA)、具有无线通信功能的手持设备、计算设备或连接到无线调制解调器的其它处理设备、车载设备、可穿戴设备，5G网络中的终端设备或者未来演进的公用陆地移动通信网络(public land mobile network，PLMN)中的终端设备等，本申请实施例对此并不限定。
作为示例而非限定，在本申请实施例中，该终端设备还可以是可穿戴设备。可穿戴设备也可以称为穿戴式智能设备，是应用穿戴式技术对日常穿戴进行智能化设计、开发出可以穿戴的设备的总称，如眼镜、手套、手表、服饰及鞋等。可穿戴设备即直接穿在身上，或是整合到用户的衣服或配件的一种便携式设备。可穿戴设备不仅仅是一种硬件设备，更是通过软件支持以及数据交互、云端交互来实现强大的功能。广义穿戴式智能设备包括功能全、尺寸大、可不依赖智能手机实现完整或者部分的功能，例如：智能手表或智能眼镜等，以及只专注于某一类应用功能，需要和其它设备如智能手机配合使用，如各类进行体征监测的智能手环、智能首饰等。
此外，在本申请实施例中，终端设备还可以是物联网(internet of things，IoT)系统中的终端设备，IoT是未来信息技术发展的重要组成部分，其主要技术特点是将物品通过通信技术与网络连接，从而实现人机互连，物物互连的智能化网络。
在本申请实施例中，终端设备或各个网络设备包括硬件层、运行在硬件层之上的操作系统层，以及运行在操作系统层上的应用层。该硬件层包括CPU、内存管理单元(memorymanagement unit，MMU)和内存(也称为主存)等硬件。该操作系统可以是任意一种或多种通过进程(process)实现业务处理的计算机操作系统，例如，Linux操作系统、Unix操作系统、Android操作系统、iOS操作系统或windows操作系统等。该应用层包含浏览器、通讯录、文字处理软件、即时通信软件等应用。
示例性的，图2示出了终端设备的结构示意图。
终端设备可以包括处理器110，外部存储器接口120，内部存储器121，通用串行总线(universal serial bus，USB)接口130，充电管理模块140，电源管理模块141，电池142，无线通信模块160，音频模块170，扬声器170A，受话器170B，麦克风170C，耳机接口170D，按键190，指示器192，摄像头193，以及显示屏194等。
可以理解的是，本发明实施例示意的结构并不构成对终端设备的具体限定。在本申请另一些实施例中，终端设备可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元，例如：处理器110可以包括应用处理器(application processor，AP)，调制解调处理器，图形处理器(graphics processingunit，GPU)，图像信号处理器(image signal processor，ISP)，控制器，视频编解码器，数字信号处理器(digital signal processor，DSP)，基带处理器，和/或神经网络处理器(neural-network processing unit，NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。控制器可以是终端设备的神经中枢和指挥中心，控制器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。
处理器110中还可以设置存储器，用于存储指令和数据。在一些实施例中，处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据，可从上述存储器中直接调用。避免了重复存取，减少了处理器110的等待时间，因而提高了系统的效率。
在一些实施例中，处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit，I2C)接口，集成电路内置音频(inter-integrated circuitsound，I2S)接口，脉冲编码调制(pulse code modulation，PCM)接口，通用异步收发传输器(universal asynchronous receiver/transmitter，UART)接口，移动产业处理器接口(mobile industry processor interface，MIPI)，通用输入输出(general-purposeinput/output，GPIO)接口，用户标识模块(subscriber identity module，SIM)接口，和/或USB接口等。
可以理解的是，本发明实施例示意的各模块间的接口连接关系，只是示意性说明，并不构成对终端设备的结构限定。在本申请另一些实施例中，终端设备也可以采用上述实施例中不同的接口连接方式，或多种接口连接方式的组合。
外部存储器接口120可以用于连接外部存储卡，例如Micro SD卡，实现扩展终端设备的存储能力。外部存储卡通过外部存储器接口120与处理器110通信，实现数据存储功能。例如将音乐，视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码，可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统，至少一个功能所需的应用程序(比如声音播放功能，图像播放功能等)等。存储数据区可存储终端设备使用过程中所创建的数据(比如音频数据，电话本等)等。此外，内部存储器121可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(universal flash storage，UFS)等。处理器110通过运行存储在内部存储器121的指令，和/或存储在设置于处理器中的存储器的指令，执行终端设备的各种功能应用以及数据处理。例如，本申请实施例中，处理器可以通过运行内部存储器中存储的指令，使终端设备执行本申请实施例提供的音频播放方法。
USB接口130是符合USB标准规范的接口，具体可以是Mini USB接口，Micro USB接口，USB Type C接口等。USB接口130可以用于连接充电器为终端设备充电，也可以用于终端设备与外围设备之间传输数据。也可以用于连接耳机，通过耳机播放音频。该接口还可以用于连接其他终端设备，例如AR设备等。
充电管理模块140用于从充电器接收充电输入。其中，充电器可以是无线充电器，也可以是有线充电器。充电管理模块140为电池142充电的同时，还可以通过电源管理模块141为终端设备供电。
电源管理模块141用于连接电池142，充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入，为处理器110，内部存储器121，外部存储器120，显示屏194，以及无线通信模块160等供电。在一些实施例中，电源管理模块141和充电管理模块140也可以设置于同一个器件中。
无线通信模块160可以提供应用在终端设备上的包括无线局域网(wirelesslocal area networks，WLAN)(如无线保真(wireless fidelity，Wi-Fi)网络)，蓝牙(bluetooth，BT)，全球导航卫星系统(global navigation satellite system，GNSS)，调频(frequency modulation，FM)，近距离无线通信技术(near field communication，NFC)，红外技术(infrared，IR)等无线通信的解决方案。
无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线接收电磁波，将电磁波信号调频以及滤波处理，将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号，对其进行调频，放大，经天线转为电磁波辐射出去。
终端设备通过GPU，显示屏194，以及应用处理器等实现显示功能。GPU为图像处理的微处理器，连接显示屏194和应用处理器。GPU用于执行数学和几何计算，用于图形渲染。处理器110可包括一个或多个GPU，其执行程序指令以生成或改变显示信息。终端设备可以通过ISP，摄像头193，视频编解码器，GPU，显示屏194以及应用处理器等实现拍摄功能。
终端设备可以通过音频模块170，扬声器170A，受话器170B，麦克风170C，耳机接口170D，以及应用处理器等实现音频功能。例如音频播放或录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。扬声器170A，也称“喇叭”，用于将音频电信号转换为声音信号，终端设备中可以包括1个或N个扬声器170A，N为大于1的正整数。终端设备可以通过扬声器170A收听音乐、视频，或收听免提通话等。受话器170B，也称“听筒”，用于将音频电信号转换成声音信号。当终端设备接听电话或语音信息时，可以通过将受话器170B靠近人耳接听语音。麦克风170C，也称“话筒”或“传声器”，用于将声音信号转换为电信号。耳机接口170D用于连接有线耳机。
按键190包括开机键，音量键等。按键190可以是机械按键，也可以是触摸式按键。终端设备可以接收按键输入，产生与终端设备的用户设置以及功能控制有关的键信号输入。
指示器192可以是指示灯，可以用于指示充电状态，或电量变化等。
摄像头193用于捕获静态图像或视频。在一些实施例中，终端设备可以包括1个或N个摄像头193，N为大于1的正整数。
显示屏194用于显示图像，视频等。显示屏194包括显示面板。在一些实施例中，终端设备可以包括1个或N个显示屏194，N为大于1的正整数。终端设备通过GPU，显示屏194，以及应用处理器等实现显示功能。GPU为图像处理的微处理器，连接显示屏194和应用处理器。
上述终端设备的软件系统可以采用分层架构，事件驱动架构，微核架构，微服务架构，或云架构。本发明实施例以分层架构的Windows系统为例，示例性说明终端设备的软件结构。
图3是本申请实施例的终端设备的软件结构示意图。
分层架构将软件分成若干个层，每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中，将Windows系统分为用户态和内核态。其中，用户态包括应用层以及子系统动态链接库。内核态自上而下分为执行体、内核和设备驱动，以及硬件抽象层(hardware abstraction layer，HAL)等。
如图3所示，应用层包括办公、浏览器、社交等应用程序。应用程序可以包括系统应用和三方应用。应用层还可以包括音频处理模块，音频处理模块用于调用应用程序接(application programming interface，API)层的音频API对应用程序中的音频资源进行播放。音频处理模块可包括音频资源管理器、音频队列以及音频播放器；应用程序中还可包括控件。
其中，控件，用于根据控件交互事件或音频播放的触发代码来添加、调用或删除音频管理器中的资源以及控制音频播放。
音频资源播放器，用于根据控件的逻辑，将本地磁盘中的音频文件加载到内存中，并对其进行管理。
音频队列，用于以队列的方式存储待播放的音频资源，让软件或其中控件的交互事件能够通过队列以多种模式缓存、播放音频。
音频播放器，用于对WASAPI播放的音频流进行调用，并调用音频终结点播放音频流。该模块是基于WASAPI开发的音频播放器，并部署于独立线程中运行。音频播放器包括睡眠状态及唤醒状态。
子系统动态链接库可以包括应用程序接口(application programminginterface，API)模块，该API模块包括Windows API，Windows原生API等。其中，Windows API和Windows原生API均可以为应用程序提供系统调用入口及内部函数支持，区别在于Windows原生API为Windows系统原生的API。例如，Windows API可包括user.dll、kernel.dll，Windows原生API可包括ntdll.dll。其中，user.dll是Windows用户界面接口，可用于执行创建窗口、发送消息等操作。kernel.dll用于为应用程序提供访问内核的接口。ntdll.dll是重要的Windows NT内核级文件。当Windows启动时，ntdll.dll就驻留在内存中特定的写保护区域，使其他程序无法占用这个内存区域。
其中，Windows API中包括音频API，音频API可包括多媒体设备(MMDevice)API、WASAPI、设备拓扑(device topology)API和终结点卷(endpoint volume)API等应用程序接口。其中，WASAPI为音频API中的底层的API，使用WAS API开发应用音频播放功能可以获取较好的播放效果以及较高的性能表现。
执行体可以包括进程管理器、虚拟内存管理器、I/O管理器、电源管理器、系统事件驱动(operating system event driver，OsEventDriver)节点、音频引擎(audio engine)等。
进程管理器用于创建及中止进程和线程。
虚拟内存管理器实现“虚拟内存”。虚拟内存管理器也为高速缓存管理器提供基本的支持。
I/O管理器执行独立于设备的输入/输出，并进一步处理调用适当的设备驱动程序。
电源管理器可管理所有支持电源状态更改的设备的电源状态更改。
系统事件驱动节点可以与内核和驱动层进行交互，例如与显卡驱动进行交互，在确定存在GPU视频解码事件后，向场景识别引擎上报该GPU视频解码事件。
音频引擎，用于在应用程序将音频数据写入终结点缓冲区之后，将音频数据从缓冲区传输到音频终结点设备的详细信息。
内核和驱动层包括内核以及设备驱动程序。
内核是对处理器体系结构的抽象，将执行体与处理器体系结构的差异相隔离，保证系统的可移植性。内核可以进行线程安排和调度、陷阱处理和异常调度、中断处理和调度等。
设备驱动程序运行在内核模式下，为I/O系统和相关硬件之间的接口。设备驱动程序可包括显卡驱动、音频驱动、视频驱动、摄像头驱动、键盘驱动等。
HAL是一个核心态模块，可以隐藏各种与硬件有关的细节，例如I/O接口、中断控制器以及多处理器通信机制等，为运行Windows的不同硬件平台提供统一的服务接口，实现多种硬件平台上的可移植性。需要说明的是，为了维护Windows的可移植性，Windows内部组件和用户编写的设备驱动程序并不直接访问硬件，而是通过调用HAL中的例程。
HAL可包括蓝牙模块、WIFI模块和硬件配置模块等，本申请实施例中硬件配置模块中包括扬声器的配置模块。
可以理解的是，本申请实施例中的音频终结点可理解为音频引擎、音频驱动以及扬声器的组合，本申请实施例中的音频终结点不特指软件架构中具体模块。
需要说明的是，本申请实施例仅以Windows系统举例来说明，在其他操作系统中(例如安卓系统，IOS系统等)，只要各个功能模块实现的功能和本申请的实施例类似，也能实现本申请的方案。
下面结合图4对本申请实施例提供的音频播放方法进行说明。示例性的：
S401、在第一时刻，终端设备创建控件的实例、音频资源管理器的实例、音频队列的实例和音频播放器的实例。
第一时刻可以是终端设备启动应用程序后的一段预设时间内的时间点。在终端设备启动应用程序后，终端设备可调用图3中应用层的音频处理模块，对该模块进行初始化处理。
终端设备创建音频资源管理器的实例；音频资源管理器用于管理控件对应的音频数据。终端设备创建音频队列的实例，并设置音频队列处于就绪状态；音频队列可用于存储待播放的音频数据。终端设备创建音频播放器的实例时，并初始化播放音频的硬件；音频播放器用于调用播放音频的硬件，播放音频的硬件可以是音频终结点。
终端设备创建控件的实例；控件用于关联音频数据。当终端设备创建控件的实例时，终端设备可通过音频资源管理器获取控件对应的原始音频数据，原始音频数据可包括mp3格式、wav格式的音频文件。
S402、在第二时刻，终端设备接收到用于指示播放第一控件对应的第一音频数据的指令；第二时刻晚于第一时刻。
第一控件对应的第一音频数据可以为支持音频播放器使用WASAPI播放的音频流，例如第一音频数据可以为脉冲编码调制(pulse code modulation，PCM)数据。用于指示播放第一控件对应的第一音频数据的指令可以为响应于对第一控件的触发操作后终端设备接收到的指令，也可以当第一控件为虚拟控件时的用于触发第一控件的代码指令。第一控件关联有第一音频数据，终端设备可基于对第一控件的触发指令来播放第一控件对应的第一音频数据。
S403、终端设备的音频资源管理器将第一音频数据推入音频队列。
音频队列用于存储待播放的音频数据。终端设备响应于用于指示播放第一控件对应的第一音频数据的指令，终端设备的音频资源管理器基于该指令获取第一音频数据，并将第一音频数据推入到音频队列。可以理解的是，音频资源管理器中存储有控件对应的音频数据，其中，控件可包括第一控件，音频资源管理器可将第一控件对应的第一音频数据推入音频队列。
音频队列可通过不同的排列方式达到多种模式的播放音频的效果，例如：紧急模式、正常模式、插播模式和轮循模式等，紧急模式可用于指示终端设备播放音频后停止播放其他音频；正常模式可用于指示终端设备依次播放音频队列中的音频；插播模式用于指示终端设备停止播放当前音频，并播放插播的音频；轮循模式用于指示终端设备循环播放音频。本申请实施例后续会对音频队列中音频数据的排列方式以及上述模式做进一步说明，此处不再赘述。
S404、终端设备根据第一音频数据在音频队列中的位置播放第一音频数据。
终端设备可根据第一音频数据在音频队列中的位置来播放第一音频数据。示例性的，当第一音频数据为音频队列中的第一个音频时，终端设备的音频队列可将第一音频数据推入音频播放器。音频播放器调用用于播放音频的设备，以播放第一音频数据。例如：音频播放器可使用WASAPI连接音频终结点，并由音频终结点播放第一音频数据。
本申请实施例提供的音频播放方法，通过在第一时刻，终端设备创建控件的实例、音频资源管理器的实例、音频队列的实例和音频播放器的实例；在第二时刻，终端设备接收到用于指示播放第一控件对应的第一音频数据的指令；第二时刻晚于第一时刻；终端设备的音频资源管理器将第一音频数据推入音频队列；终端设备根据第一音频数据在音频队列中的位置播放第一音频数据。这样，终端设备基于音频资源管理器、音频队列以及音频播放器实现播放控件对应的音频数据的效果；同时，终端设备创建上述实例的时刻早于接收到对控件的触发指令的时刻，因此，在接收到对任一控件的触发指令时，终端设备均可复用上述实例完成播放该控件对应的音频数据的播放流程，不需要频繁创建WASAPI会话，进而降低了播放音频过程中终端设备的功耗与占用资源。
以上实施例以终端设备接收到针对一个控件的触发指令的场景为例对本申请实施例的音频播放方法进行了描述，下面对结合终端设备先后接收到针对多个控件的触发指令的场景对本申请实施例的音频播放方法做进一步说明。
示例性的，以终端设备为PC为例，图5示出了本申请实施例提供的一种音频播放方法的界面示意图，如图5所示：
当终端设备接收到用于启动应用程序的触发操作后，终端设备可显示如图5中的a所示界面。在图5中的a所示界面中，终端设备可显示多个控件，例如：控件可包括第一控件(控件1)、第二控件(控件2)和第三控件(控件3)。每个控件可关联有对应的音频，任一控件对应的音频可以相同，也可以不同，本申请实施例对此不作限定。当终端设备接收到针对控件1的触发操作时，终端设备可播放控件1所对应的音频。例如，触发操作可以是光标指针悬浮在控件1的图标上方的操作、也可以是单击、双击控件1的图标的操作、也可以是按下并拖动控件1的操作、还可以是通过键盘控制控件1的操作，本申请实施例对此不做限制。随后，如图5中的b界面所示，终端设备接收到针对控件2的触发操作，响应于该触发操作，终端设备播放控件2对应的音频。
下面结合上述场景对终端设备分别播放第一控件对应的音频与播放第二控件对应的音频的播放流程进行说明。
在终端设备启动应用程序后，在第一时刻，终端设备可执行步骤S401，在音频处理模块中创建音频资源管理器的实例、音频队列的实例和音频播放器的实例，以及创建控件1、控件2和控件3的实例。终端设备创建这些实例并初始化实例，以供后续采用这些实例执行音频播放流程。
在第二时刻，终端设备接收到针对控件1的触发操作；响应于该触发操作，终端设备执行步骤S402-S404。终端设备播放控件1对应的音频数据。
可以理解的是，上述播放控件1对应的音频数据的过程可参考步骤S401-S404的相关描述，此处不再赘述。
随后，终端设备接收到针对控件2的触发操作，终端设备可执行下述步骤S501-S503：
S501、在第三时刻，终端设备接收到用于指示播放第二控件对应的第二音频数据的指令；第三时刻晚于第二时刻。
第三时刻可以是终端设备接收到对第一控件的触发操作后的某一时刻。用于指示播放第二控件对应的第二音频数据的指令可以为响应于对第二控件的触发操作后终端设备接收到的指令(例如，如图5中的b界面所示，终端设备接收到针对控件2的触发操作)，也可以当第二控件为虚拟控件时的用于触发第二控件的代码指令。第二控件关联有第二音频数据，终端设备可基于对第二控件的触发指令来播放第二控件对应的第二音频数据。
可以理解的是，终端设备在接收到针对第二控件的触发指令时，终端设备可不重新创建音频处理模块中的各个实例，而是复用步骤S401中的音频处理模块中的音频资源管理器、音频播放器和音频队列执行第二控件对应的音频数据的播放流程。
S502、终端设备的音频资源管理器将第二音频数据推入音频队列。
终端设备响应于用于指示播放第二控件对应的第二音频数据的指令，终端设备的音频资源管理器基于该指令获取第二音频数据，并将第二音频数据推入到音频队列。可以理解的是，音频资源管理器中存储有控件对应的音频数据，其中，控件可包括第二控件，音频资源管理器可将第二控件对应的第二音频数据推入音频队列。
需要说明的是，当终端设备正在播放控件1对应的音频时，终端设备接收到针对控件2的触发操作。这时，若控件2对应的音频的播放优先级未高于控件1对应的音频的播放优先级的话，终端设备可将控件2对应的音频推入音频队列并置于控件1的下一位置。待控件1的音频播放完成，再播放控件2对应的音频。本申请实施例后续会对音频的播放优先级的设置方式进行说明，此处不做赘述。
S503、终端设备根据第二音频数据在音频队列中的位置播放第二音频数据。
本申请实施例提供的音频播放方法，通过在第三时刻，终端设备接收到用于指示播放第二控件对应的第二音频数据的指令；第三时刻晚于第二时刻；终端设备的音频资源管理器将第二音频数据推入音频队列；终端设备根据第二音频数据在音频队列中的位置播放第二音频数据。这样，终端设备可在接收到针对第二控件的触发指令时，可重复调用音频资源管理器、音频播放器和音频队列，从而减少创建WASAPI会话以及初始化音频终结点的次数，进而减小终端设备的功耗以及占用资源。
下面结合图6对本申请实施例提供的音频播放方法做进一步说明，如图6所示：
S601、终端设备创建音频资源管理器的实例、音频队列的实例、音频播放器的实例以及控件的实例；其中，控件的实例中包括第一控件的实例。
具体的，终端设备在创建音频队列的实例时，还设置音频队列处于就绪状态；终端设备在创建音频播放器的实例时，还初始化播放音频的硬件；其中播放音频的硬件可以是音频终结点。
终端设备得到音频设备参数，音频设备参数包括终端设备支持的音频码率。可以理解的是，终端设备获取音频设备参数的步骤可以在终端设备创建多个实例之前，也可以在终端设备创建多个实例之后，本申请实施例对此不做限制。
需要说明的是，音频资源管理器、音频队列和音频播放器由目标线程管理，且管理控件的线程不同于目标线程。目标线程可以为一条或多条线程，例如，终端设备可将音频资源管理器、音频队列和音频播放器部署在同一线程中；终端设备也可将音频资源管理器、音频队列和音频播放器分别部署于各自独立的线程中；或者，终端设备也可将任一实例部署在一条线程，另两个实例部署在另一线程。本申请实施例对此不做限制。
终端设备执行完毕上述过程后，音频处理模块初始化完成，终端设备可继续执行下述步骤S602-S609：
S602、音频资源管理器获取控件对应的原始音频数据。
原始音频数据可以是mp3格式、wav格式的音频文件。控件关联有对应的原始音频数据，控件对应的原始音频数据被预先存储在磁盘中。当控件对象被实例化时，音频资源管理器可从本地磁盘中读取控件对应的原始音频数据。
S603、音频解码器基于音频码率对控件对应的原始音频数据进行解码，得到控件对应的音频数据。
音频解码器得到控件对应的原始音频数据后，对控件对应的原始音频数据进行解码。例如，音频解码器将mp3格式、wav格式的音频文件解码为可被音频播放器基于WASAPI使用的音频流buffer，音频流可以为PCM流。
S604、音频资源管理器管理解码后的控件对应的音频数据。
音频资源管理器将解码后的控件对应的音频数据加载到内存，以及基于控件对应的音频数据的ID查询和/或使用内存中的控件对应的音频数据。示例性的，音频资源管理器的控件对应的音频数据可以是Map[ID,音频流buffer]的形式。
一种可能的实现方式中，控件对象被实例化时，控件对应的音频数据已经绑定了用于指示控件与音频数据的关联关系的ID，音频资源管理器可基于控件对应的音频资源的ID查询和/或使用该控件对应的音频数据。另一种可能的实现方式中，音频资源管理器获取到控件对应的音频数据后，为该音频数据绑定音频ID。音频ID可以是key-value值、名称、数字等，本申请实施例对音频ID的格式以及设置音频ID的方法不做限制。
S605、终端设备接收到用于指示播放第一控件对应的第一音频数据的指令。
S606、响应于该指令，音频资源管理器将第一音频数据推入音频队列。
控件中可包括用于指示对应的音频数据播放顺序的标识，音频资源管理器根据第一控件的触发指令中第一音频数据的标识确定将第一音频数据推入音频队列的位置。音频队列可根据第一音频数据的标识提供多种第一音频数据的播放模式。示例性的：
音频数据的标识包括紧急标识、正常normal标识、插播标识和轮循标识，其中，紧急标识与插播标识可用于指示终端设备立即播放音频，紧急标识的音频数据可以是警告音、错误音等；插播标识可以是相对于其他音频数据优先播放的音频数据，例如，终端设备使用杀毒软件进行杀毒，在杀毒过程中，终端设备可循环播放杀毒音频；随后，用户点击了杀毒软件中的其他控件，其他控件对应有点击音频。这时，终端设备可暂停播放杀毒音频，优先播放其他控件对应的点击音频，待播放完毕点击音频后，再继续播放杀毒音频。正常标识可指示终端设备用于指示终端设备正常播放音频，例如，终端设备先后接收到针对控件A和控件B的点击操作，控件A和控件B均对应有点击音频，这时，终端设备可先播放控件A的点击音频，后播放控件B的点击音频。轮循标识可用于指示终端设备循环播放音频数据，例如，终端设备使用杀毒软件进行杀毒，在杀毒过程中，终端设备可循环播放杀毒音频。
上述标识中，紧急标识的播放优先级高于插播标识的播放优先级，插播标识的播放优先级高于正常标识和轮循标识的播放优先级。
下面结合图7对第一音频数据在音频队列中的位置进行说明。
一些实施例中，音频资源管理器在将第一音频数据推入音频队列之前，音频队列中存在其他音频数据，终端设备在播放其他音频数据，如图7中的a图所示，例如：音频队列中包括音频数据A、音频数据B、音频数据C和音频数据D。这时，音频资源管理器判断第一音频数据的音频标识，并根据音频标识将第一音频数据推入音频队列中的相应位置。
一种可能的实现方式中，当第一音频数据的播放标识为用于指示终端设备立即播放音频的标识时，音频资源管理器将第一音频数据置于音频队列中的顶层。
示例性的，当第一音频数据的音频标识为紧急标识时，音频资源管理器清空音频队列后，将第一音频数据置于音频队列中。例如，如图7中的d图所示：音频队列中的音频数据A、音频数据B、音频数据C和音频数据D被清除后，音频资源管理器将第一音频数据推入音频队列中。
可以理解的是，紧急标识的音频数据可以为警告音、错误音等，这些音频可标识当前进程或线程执行流程时出现错误，终端设备可能需要执行重新启动应用程序等操作，终端设备可能不会再需要播放其他音频。因此，当第一音频数据的音频标识为紧急标识时，终端设备会清空音频队列中的音频数据。
可选的，当第一音频数据的音频标识为插播标识时，终端设备暂停当前播放的音频数据，并将第一音频数据置于当前播放的音频数据之前，如图7中的c图所示，以实现插播第一音频数据的效果。
另一种可能的实现方式中，当第一音频数据的播放标识为用于指示终端设备正常播放音频的标识时，音频资源管理器将第一音频数据置于音频队列中的底层。
示例性的，当第一音频数据的播放标识为正常标识时，音频资源管理器将第一音频数据顺序推入音频队列中。如图7中的b图所示，音频资源管理器将第一音频数据推入到音频数据D之后。
需要说明的是，第一音频数据也可以是轮循播放的音频数据，例如，当第一音频数据在音频队列中的第一个音频的位置时，终端设备播放第一音频数据；待第一音频数据播放完毕后，第一音频数据可重新被推入音频队列，以执行循环播放。本申请实施例对此不做限制。
可以理解的是，图7示例性的对第一音频数据在音频队列中的位置进行了说明，本申请实施例并不对音频队列中的音频数据造成限制。
S607、当第一音频数据为音频队列中的第一个音频时，音频队列将第一音频数据推入音频播放器。
例如：如图7中的d图所示，当第一音频数据的音频标识为紧急标识时，音频队列中的音频数据A、音频数据B、音频数据C和音频数据D均被清空，第一音频数据为音频队列中的第一个音频，这时，终端设备将第一音频数据推入音频播放器。
又例如：如图7中的c图所示，当第一音频数据的音频标识为插播标识时，音频资源管理器将第一音频数据推入音频队列中第一个音频的位置上，这时，终端设备将第一音频数据推入音频播放器。
又例如：如图7中的b图所示，当第一音频数据的音频标识为正常标识时，音频队列优先将音频数据A、音频数据B、音频数据C和音频数据D依次推入音频播放器，等待终端设备播放完毕音频资源D后，第一音频数据可位于音频队列中第一个音频的位置上，这时，终端设备可将第一音频数据推入到音频播放器。
再例如：当第一音频数据的音频标识为轮循标识且第一音频数据位于音频队列中的第一个音频的位置时，音频队列将第一音频数据推入音频播放器；待终端设备播放完毕第一音频数据，音频资源管理器可将第一音频数据重新推入音频队列，以使第一音频数据被循环播放。
S608、音频播放器调用用于播放音频的设备，以播放第一音频数据。
终端设备基于WASAPI创建的音频播放器，并将音频播放器部署于目标线程中。当第一音频数据被推入音频播放器时，音频播放器处于唤醒状态。音频播放器可连接音频终结点，并调用音频终结点播放第一音频数据。
S609、当音频队列中无音频数据时，音频播放器进入睡眠状态。
当音频播放器确定音频终结点播放完毕第一音频数据时，音频播放器可查询音频队列中的音频数据的数量。若音频队列中的音频数据的数量为零，音频播放器进入睡眠状态，以降低功耗。
以上实施例对本申请实施例中终端设备播放第一音频数据的流程做了描述，下面以终端设备播放完毕第一音频数据后，又接收针对第二控件的触发指令的场景为例，结合图8以及步骤S801-S806对终端设备播放第二音频数据的流程进行说明。
S801、终端设备接收到用于指示播放第二控件对应的第二音频数据的指令。
S802、响应于该指令，音频资源管理器将第二音频数据推入音频队列。
音频资源管理器根据第二控件的触发指令中第二音频数据的标识确定将第二音频数据推入音频队列的位置。可参考步骤S606的相关说明，此处不再赘述。
S803、音频播放器进入唤醒状态。
示例性的，当空的音频队列被推入音频数据时，终端设备可指示音频播放器进入唤醒状态。或者，音频资源管理器、音频队列和音频播放器部署在同一目标线程，当终端设备调用音频资源管理器时，目标线程唤醒音频播放器。可以理解的是，本申请实施例中步骤S803可以在步骤S802之后执行，也可在步骤S802之前执行，本申请实施例对此不作限制。
S804、当第二音频数据为音频队列中的第一个音频时，音频队列将第二音频数据推入音频播放器。
S805、音频播放器调用用于播放音频的设备，以播放第二音频数据。
S806、当音频队列中无音频数据时，音频播放器再次进入睡眠状态。
步骤S804-S806可参考步骤S607-S609的相关描述，此处不再赘述。
本申请实施例提供的音频播放方法，通过终端设备可以预先创建音频资源管理器的实例、音频播放器的实例与音频队列的实例，以及初始化音频终结点。当终端设备在接收到任一用于播放控件对应的音频的触发指令时，终端设备均可复用音频资源管理器、音频队列与音频播放器，该控件对应的音频依次经过音频资源管理器、音频队列、音频播放器以及音频终结点，并由音频终结点播放该控件对应的音频。在播放该控件对应的音频后，终端设备还可继续使用上述实例播放其他控件对应的音频。这样，本申请实施例提供的音频播放方法在播放多个音频时，不需要多次创建WASAPI会话以及初始化音频终结点，进而减小了音频播放时的功耗与占用资源。同时，本申请实施例通过音频队列实例对待播放音频进行播放调度，实现了播放多个音频的效果。
下面结合图9对本申请实施例中终端设备的内部交互流程进行说明，如图9所示：
示例性的，终端设备创建音频资源管理器的实例、音频队列的实例、音频播放器的实例、以及控件A和控件B的实例；例如：控件A中关联有音频数据A与音频数据B，其中音频数据A可以为光标指针悬浮在控件A的图标时的音频，音频数据B可以为点击控件A的图标时的音频。控件B中关联有音频数据C与音频数据D，其中音频数据A可以为光标指针悬浮在控件A的图标时的音频，音频数据B可以为点击控件A的图标时的音频。
控件对象被实例化后，音频资源管理器从磁盘中获取控件A与控件B的原始音频数据，并调用音频解码器对原始音频数据进行解码，得到控件对应的音频流(音频数据)。音频资源管理器将控件A对应的音频流和控件B对应的音频流加载到内存。
一种可能的实现方式中，终端设备在短时间内接收到光标指针悬浮在控件A的图标上并点击了控件A的图标的操作，以及光标指针悬浮在控件B的图标上并点击了控件B的图标的操作。这时，音频资源管理器可将上述触发操作对应的音频流依次推入音频队列。其中，音频队列中包括音频数据A、音频数据B、音频数据C和音频数据D。音频队列依次将音频数据A、音频数据B、音频数据C和音频数据D推入音频播放器，使得音频播放器调用音频终结点播放音频数据。
上述主要从方法的角度对本申请实施例提供的方案进行了介绍。为了实现上述功能，其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到，结合本文中所公开的实施例描述的各示例的方法步骤，本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
下面对本申请实施例提供的执行上述音频播放方法的装置进行描述。本领域技术人员可以理解，方法和装置可以相互结合和引用，本申请实施例提供的相关装置可以执行上述音频播放方法中的步骤。
如图10所示，音频播放装置1000可以用于通信设备、电路、硬件组件或者芯片中，该音频播放装置包括：显示单元1001、以及处理单元1002。其中，显示单元1001用于支持音频播放装置1000执行的显示的步骤；处理单元1002用于支持音频播放装置1000执行音频处理的步骤。
可能的实现方式中，该音频播放装置1000中也可以包括通信单元1003。具体的，通信单元用于支持音频播放装置1000执行数据的发送以及数据的接收的步骤。其中，该通信单元1003可以是输入或者输出接口、管脚或者电路等。
可能的实施例中，音频播放装置还可以包括：存储单元1004。处理单元1002、存储单元1004通过线路相连。存储单元1004可以包括一个或者多个存储器，存储器可以是一个或者多个设备、电路中用于存储程序或者数据的器件。存储单元1004可以独立存在，通过通信线路与音频播放装置具有的处理单元1002相连。存储单元1004也可以和处理单元1002集成在一起。
存储单元1004可以存储终端设备中的方法的计算机执行指令，以使处理单元1002执行上述实施例中的方法。存储单元1004可以是寄存器、缓存或者RAM等，存储单元1004可以和处理单元1002集成在一起。存储单元1004可以是只读存储器(read-only memory，ROM)或者可存储静态信息和指令的其他类型的静态存储设备，存储单元1004可以与处理单元1002相独立。
本申请实施例提供的音频播放方法，可以应用在具备通信功能的电子设备中。电子设备包括终端设备，终端设备的具体设备形态等可以参照上述相关说明，此处不再赘述。
本申请实施例提供一种终端设备，该终端设备包括：包括：处理器和存储器；存储器存储计算机执行指令；处理器执行存储器存储的计算机执行指令，使得终端设备执行上述方法。
本申请实施例提供一种芯片。芯片包括处理器，处理器用于调用存储器中的计算机程序，以执行上述实施例中的技术方案。其实现原理和技术效果与上述相关实施例类似，此处不再赘述。
本申请实施例还提供了一种计算机可读存储介质。计算机可读存储介质存储有计算机程序。计算机程序被处理器执行时实现上述方法。上述实施例中描述的方法可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。如果在软件中实现，则功能可以作为一个或多个指令或代码存储在计算机可读介质上或者在计算机可读介质上传输。计算机可读介质可以包括计算机存储介质和通信介质，还可以包括任何可以将计算机程序从一个地方传送到另一个地方的介质。存储介质可以是可由计算机访问的任何目标介质。
一种可能的实现方式中，计算机可读介质可以包括RAM，ROM，只读光盘(compactdisc read-only memory，CD-ROM)或其它光盘存储器，磁盘存储器或其它磁存储设备，或目标于承载的任何其它介质或以指令或数据结构的形式存储所需的程序代码，并且可由计算机访问。而且，任何连接被适当地称为计算机可读介质。例如，如果使用同轴电缆，光纤电缆，双绞线，数字用户线(Digital Subscriber Line，DSL)或无线技术(如红外，无线电和微波)从网站，服务器或其它远程源传输软件，则同轴电缆，光纤电缆，双绞线，DSL或诸如红外，无线电和微波之类的无线技术包括在介质的定义中。如本文所使用的磁盘和光盘包括光盘，激光盘，光盘，数字通用光盘(Digital Versatile Disc，DVD)，软盘和蓝光盘，其中磁盘通常以磁性方式再现数据，而光盘利用激光光学地再现数据。上述的组合也应包括在计算机可读介质的范围内。
本申请实施例提供一种计算机程序产品，计算机程序产品包括计算机程序，当计算机程序被运行时，使得计算机执行上述方法。
本申请实施例是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程设备的处理单元以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理单元执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
以上的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的技术方案的基础之上，所做的任何修改、等同替换、改进等，均应包括在本发明的保护范围之内。

Claims (13)

1.一种音频播放方法，其特征在于，应用于终端设备，所述方法包括：
在第一时刻，所述终端设备创建控件的实例、音频资源管理器的实例、音频队列的实例和音频播放器的实例，其中，所述控件用于关联音频数据，所述音频资源管理器用于管理所述控件对应的音频数据，所述音频队列用于存储待播放的音频数据，所述音频播放器用于调用播放音频的硬件；
在第二时刻，所述终端设备接收到用于指示播放第一控件对应的第一音频数据的指令；所述第二时刻晚于所述第一时刻；
所述终端设备的所述音频资源管理器将所述第一音频数据推入所述音频队列；
所述终端设备根据所述第一音频数据在所述音频队列中的位置播放所述第一音频数据。
2.根据权利要求1所述的方法，其特征在于，还包括：
在第三时刻，所述终端设备接收到用于指示播放第二控件对应的第二音频数据的指令；所述第三时刻晚于所述第二时刻；
所述终端设备的所述音频资源管理器将所述第二音频数据推入所述音频队列；
所述终端设备根据所述第二音频数据在所述音频队列中的位置播放所述第二音频数据。
3.根据权利要求1或2所述的方法，其特征在于，
所述终端设备创建所述音频队列的实例时，还设置所述音频队列处于就绪状态；
所述终端设备创建所述音频播放器的实例时，还初始化所述播放音频的硬件；
所述终端设备创建所述控件的实例时，还通过所述音频资源管理器获取所述控件对应的原始音频数据。
4.根据权利要求3所述的方法，其特征在于，所述终端设备通过所述音频资源管理器获取所述控件对应的原始音频数据之后，还包括：
所述终端设备得到音频设备参数，所述音频设备参数包括所述终端设备支持的音频码率；
所述终端设备调用音频解码器并基于所述音频码率对所述控件对应的原始音频数据进行解码，得到所述控件对应的音频数据；
所述终端设备基于所述音频资源管理器管理解码后的所述控件对应的音频数据。
5.根据权利要求4所述的方法，其特征在于，所述终端设备基于所述音频资源管理器管理解码后的所述控件对应的音频数据，包括：
所述音频资源管理器将解码后的所述控件对应的音频数据加载到内存，以及基于所述控件对应的音频数据的ID查询和/或使用内存中的所述控件对应的音频数据。
6.根据权利要求1-5任一项所述的方法，其特征在于，所述终端设备的所述音频资源管理器将所述第一音频数据推入所述音频队列，包括：
当所述第一音频数据的播放标识为用于指示所述终端设备立即播放音频的标识时，所述音频资源管理器将所述第一音频数据置于所述音频队列中的顶层；
当所述第一音频数据的播放标识为用于指示所述终端设备正常播放音频的标识时，所述音频资源管理器将所述第一音频数据置于所述音频队列中的底层。
7.根据权利要求6所述的方法，其特征在于，当所述第一音频数据的播放标识为用于指示所述终端设备立即播放音频的标识时，所述音频资源管理器将所述第一音频数据置于所述音频队列中的顶层，包括：
当所述第一音频数据的播放标识为用于指示所述终端设备立即播放音频的标识时，所述音频资源管理器清空所述音频队列后，将所述第一音频数据置于所述音频队列中；
当所述第一音频数据的播放标识为用于指示所述终端设备正常播放音频的标识时，所述音频资源管理器将所述第一音频数据置于所述音频队列中的底层，包括：
当所述第一音频数据的播放标识为用于指示所述终端设备正常播放音频的标识时，所述音频资源管理器将所述第一音频数据顺序推入所述音频队列中。
8.根据权利要求1-7任一项所述的方法，其特征在于，所述终端设备根据所述第一音频数据在所述音频队列中的位置播放所述第一音频数据，包括：
当所述第一音频数据为所述音频队列中的第一个音频时，所述音频队列将所述第一音频数据推入所述音频播放器；
所述音频播放器调用所述用于播放音频的设备，以播放所述第一音频数据。
9.根据权利要求1-8任一项所述的方法，其特征在于，所述音频资源管理器、所述音频队列和所述音频播放器由目标线程管理，管理所述控件的线程不同于所述目标线程。
10.根据权利要求1-9任一项所述的方法，其特征在于，还包括：
当所述音频队列中无音频数据时，所述音频播放器进入睡眠状态。
11.一种终端设备，其特征在于，包括：处理器和存储器；
所述存储器存储计算机执行指令；
所述处理器执行所述存储器存储的计算机执行指令，使得所述终端设备执行如权利要求1-10中任一项所述的方法。
12.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-10任一项所述的方法。
13.一种计算机程序产品，其特征在于，包括计算机程序，当所述计算机程序被运行时，使得计算机执行如权利要求1-10任一项所述的方法。
CN202211423981.1A 2022-11-15 2022-11-15 音频播放方法和电子设备 Active CN116700660B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211423981.1A CN116700660B (zh) 2022-11-15 2022-11-15 音频播放方法和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211423981.1A CN116700660B (zh) 2022-11-15 2022-11-15 音频播放方法和电子设备

Publications (2)

Publication Number Publication Date
CN116700660A true CN116700660A (zh) 2023-09-05
CN116700660B CN116700660B (zh) 2024-05-14

Family

ID=87843961

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211423981.1A Active CN116700660B (zh) 2022-11-15 2022-11-15 音频播放方法和电子设备

Country Status (1)

Country Link
CN (1) CN116700660B (zh)

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030200452A1 (en) * 1999-05-28 2003-10-23 Kenji Tagawa Playback apparatus and playback method
CN1933594A (zh) * 2005-09-14 2007-03-21 王世刚 多路音视频数据网络传输与同步播放的方法
CN103237191A (zh) * 2013-04-16 2013-08-07 成都飞视美视频技术有限公司 在视频会议中同步推送音视频的方法
CN107197393A (zh) * 2017-06-16 2017-09-22 广州荔枝网络有限公司 一种单例视频播放器的实现方法
US20180095706A1 (en) * 2015-05-18 2018-04-05 Tao-Sheng CHU Audio and video processors
CN109068177A (zh) * 2018-07-23 2018-12-21 青岛海信电器股份有限公司 音视频播放器资源管理方法及装置、智能电视、存储介质
CN109254751A (zh) * 2018-08-29 2019-01-22 北京轩辕联科技有限公司 用于车辆的音频分播方法及装置
CN110708602A (zh) * 2019-10-15 2020-01-17 北京字节跳动网络技术有限公司 视频启动方法、装置、电子设备及存储介质
CN111460211A (zh) * 2020-04-03 2020-07-28 北京字节跳动网络技术有限公司 音频信息播放方法、装置和电子设备
CN112911392A (zh) * 2021-01-14 2021-06-04 海信视像科技股份有限公司 一种音视频播放控制方法和显示装置
CN113934397A (zh) * 2021-10-15 2022-01-14 深圳市一诺成电子有限公司 电子设备中播音控制方法及电子设备
CN114125560A (zh) * 2021-11-23 2022-03-01 北京字节跳动网络技术有限公司 一种视频播放方法、装置、电子设备及存储介质
CN114666652A (zh) * 2022-03-07 2022-06-24 上海连尚网络科技有限公司 一种用于播放视频的方法、设备、介质及程序产品
WO2022135553A1 (zh) * 2020-12-24 2022-06-30 花瓣云科技有限公司 连续播放视频的投屏方法、装置及系统
CN114968167A (zh) * 2022-04-24 2022-08-30 展讯通信（上海）有限公司 音频处理方法、装置、介质和终端设备
CN115086473A (zh) * 2022-08-19 2022-09-20 荣耀终端有限公司 出声通道选择系统、方法及相关装置
WO2022206825A1 (zh) * 2021-03-31 2022-10-06 华为技术有限公司 一种调节音量的方法、系统及电子设备

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030200452A1 (en) * 1999-05-28 2003-10-23 Kenji Tagawa Playback apparatus and playback method
CN1933594A (zh) * 2005-09-14 2007-03-21 王世刚 多路音视频数据网络传输与同步播放的方法
CN103237191A (zh) * 2013-04-16 2013-08-07 成都飞视美视频技术有限公司 在视频会议中同步推送音视频的方法
US20180095706A1 (en) * 2015-05-18 2018-04-05 Tao-Sheng CHU Audio and video processors
CN107197393A (zh) * 2017-06-16 2017-09-22 广州荔枝网络有限公司 一种单例视频播放器的实现方法
CN109068177A (zh) * 2018-07-23 2018-12-21 青岛海信电器股份有限公司 音视频播放器资源管理方法及装置、智能电视、存储介质
CN109254751A (zh) * 2018-08-29 2019-01-22 北京轩辕联科技有限公司 用于车辆的音频分播方法及装置
CN110708602A (zh) * 2019-10-15 2020-01-17 北京字节跳动网络技术有限公司 视频启动方法、装置、电子设备及存储介质
CN111460211A (zh) * 2020-04-03 2020-07-28 北京字节跳动网络技术有限公司 音频信息播放方法、装置和电子设备
WO2022135553A1 (zh) * 2020-12-24 2022-06-30 花瓣云科技有限公司 连续播放视频的投屏方法、装置及系统
CN112911392A (zh) * 2021-01-14 2021-06-04 海信视像科技股份有限公司 一种音视频播放控制方法和显示装置
WO2022206825A1 (zh) * 2021-03-31 2022-10-06 华为技术有限公司 一种调节音量的方法、系统及电子设备
CN113934397A (zh) * 2021-10-15 2022-01-14 深圳市一诺成电子有限公司 电子设备中播音控制方法及电子设备
CN114125560A (zh) * 2021-11-23 2022-03-01 北京字节跳动网络技术有限公司 一种视频播放方法、装置、电子设备及存储介质
CN114666652A (zh) * 2022-03-07 2022-06-24 上海连尚网络科技有限公司 一种用于播放视频的方法、设备、介质及程序产品
CN114968167A (zh) * 2022-04-24 2022-08-30 展讯通信（上海）有限公司 音频处理方法、装置、介质和终端设备
CN115086473A (zh) * 2022-08-19 2022-09-20 荣耀终端有限公司 出声通道选择系统、方法及相关装置

Also Published As

Publication number Publication date
CN116700660B (zh) 2024-05-14

Similar Documents

Publication Publication Date Title
US11947974B2 (en) Application start method and electronic device
CN115486087A (zh) 多窗口投屏场景下的应用界面显示方法及电子设备
WO2021121052A1 (zh) 一种多屏协同方法、系统及电子设备
CN116126201B (zh) 应用启动方法、电子设备及可读存储介质
CN116360725B (zh) 显示交互系统、显示方法及设备
CN115016706B (zh) 一种线程的调度方法及电子设备
CN114625525A (zh) 一种资源管控方法及设备
CN116017388B (zh) 一种基于音频业务的弹窗显示方法和电子设备
WO2023005711A1 (zh) 一种服务的推荐方法及电子设备
CN116700660B (zh) 音频播放方法和电子设备
CN113835802A (zh) 设备交互方法、系统、设备及计算机可读存储介质
CN115531889A (zh) 一种多应用录屏方法及装置
CN116302291B (zh) 应用显示方法、电子设备以及存储介质
CN114006969B (zh) 一种窗口启动方法和电子设备
CN116709557B (zh) 业务处理方法、设备及存储介质
CN117009023B (zh) 显示通知信息的方法及相关装置
CN116743908B (zh) 壁纸显示方法及相关装置
WO2023051056A1 (zh) 内存管理方法、电子设备、计算机存储介质和程序产品
WO2024093703A1 (zh) 一种实例的管理方法、装置、电子设备及存储介质
WO2023169276A1 (zh) 投屏方法、终端设备及计算机可读存储介质
CN116737104A (zh) 音量调节方法和相关装置
CN117724640A (zh) 分屏显示方法、电子设备及存储介质
CN117827043A (zh) 一种内容接续方法及相关装置
CN116737258A (zh) 卸载应用的方法及相关装置
CN117729561A (zh) 系统升级方法、终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant