CN117939358A - 音频处理方法、装置、终端与存储介质 - Google Patents
音频处理方法、装置、终端与存储介质 Download PDFInfo
- Publication number
- CN117939358A CN117939358A CN202311833043.3A CN202311833043A CN117939358A CN 117939358 A CN117939358 A CN 117939358A CN 202311833043 A CN202311833043 A CN 202311833043A CN 117939358 A CN117939358 A CN 117939358A
- Authority
- CN
- China
- Prior art keywords
- audio
- terminal
- type
- focus
- playing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 25
- 238000011217 control strategy Methods 0.000 claims abstract description 93
- 238000012545 processing Methods 0.000 claims abstract description 28
- 238000013507 mapping Methods 0.000 claims abstract description 20
- 238000000034 method Methods 0.000 claims description 35
- 238000004590 computer program Methods 0.000 claims description 6
- 230000003993 interaction Effects 0.000 abstract description 14
- 238000004891 communication Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 10
- 230000008569 process Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000005236 sound signal Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000000725 suspension Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2430/00—Signal processing covered by H04R, not provided for in its groups
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Telephone Function (AREA)
Abstract
本公开涉及一种音频处理方法、装置、终端与存储介质,涉及音频投射技术领域。由第一终端执行,包括:发送第一终端的音频焦点信息至第二终端;该音频焦点信息携带有该第一终端申请的音频焦点类型;通过音频通道发送第一音频至该第二终端;该音频通道用于指示该第二终端根据该音频通道与音频类型之间的映射关系,确定与该音频通道对应的音频类型;该第二终端用于确定与该音频类型和该音频焦点类型对应的音频控制策略,并根据该音频控制策略对该第一音频的状态与该第二终端播放的第二音频的状态进行控制。使用本公开提出的音频处理方法,可以根据不同的交互场景,适应性地切换不同的音频控制策略,从而提高用户使用体验。
Description
技术领域
本公开涉及音频投射技术领域,尤其涉及一种音频处理方法、装置、终端与存储介质。
背景技术
音频投射是终端上常见的功能,其支持用户将第一终端上播放的音频投射至第二终端上,以第一终端是手机,第二终端是车机为例,手机可以将播放的音频投射至车机上播放。
目前,音频投射的过程中,需要通过音频控制策略协调第一终端投射给第二终端的第一音频的状态,以及第二终端当前播放的第二音频的状态,相关技术中,只能使用一种音频控制策略,来协调控制第一音频的状态与第二音频的状态,导致用户使用体验相对较低。
发明内容
为克服相关技术中存在的问题,本公开提供一种音频处理方法、装置、终端与存储介质。
根据本公开实施例的第一方面,提供一种音频处理方法,由第一终端执行,包括:
发送第一终端的音频焦点信息至第二终端;所述音频焦点信息携带有所述第一终端申请的音频焦点类型;
通过音频通道发送第一音频至所述第二终端;所述音频通道用于指示所述第二终端根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的音频类型;所述第二终端用于确定与所述音频类型和所述音频焦点类型对应的音频控制策略,并根据所述音频控制策略对所述第一音频的状态与所述第二终端播放的第二音频的状态进行控制。
可选地,所述音频控制策略包括以下任意一者:
所述音频焦点类型为长音频焦点,对应的所述音频控制策略包括在所述第一终端释放所述长音频焦点的情况下,控制所述第一音频与所述第二音频禁止播放;
所述音频焦点类型为短音频焦点,对应的所述音频控制策略包括在所述第一终端释放所述短音频焦点的情况下,控制所述第一音频禁止播放,恢复播放所述第二音频。
可选地,所述音频控制策略包括以下任意一者:
所述第一音频的音频类型的优先级大于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量大于所述第二音频的播放音量,或者控制所述第一音频播放且控制所述第二音频暂停播放;
所述第一音频的音频类型的优先级小于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量。
可选地,所述第一音频的音频类型的优先级大于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量大于所述第二音频的播放音量,或者控制所述第二音频暂停播放且控制所述第一音频播放,包括以下任意一者:
所述第一音频的音频类型是导航类型,所述第二音频的音频类型是第二媒体类型的情况下,控制所述第一音频播放的音量大于所述第二音频播放的音量;
所述第一音频的音频类型是第一媒体类型、通知类型与通话类型中的任意一种,所述第二音频的音频类型是所述第二媒体类型的情况下,控制所述第一音频播放且控制所述第二音频停止播放。
可选地,所述第一音频的音频类型的优先级小于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量,包括以下任意一者:
所述第一音频的音频类型是媒体类型,所述第二音频的音频类型是导航类型的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量。
可选地,所述发送第一终端的音频焦点信息至第二终端,包括:
在所述第一终端的应用程序待发声的情况下,发送所述音频焦点信息至所述第二终端。
可选地,所述通过音频通道发送第一音频至所述第二终端,包括:
在所述第二终端允许播放所述第一音频的情况下,通过所述音频通道发送所述第一音频至所述第二终端。
可选地,所述方法还包括:
接收所述第二终端发送的禁止播放指令,所述禁止播放指令是所述第二终端禁止播放所述第一音频的情况下发送的;
响应于所述禁止播放指令,禁止所述第一音频播放。
可选地,所述方法还包括:
在所述第一终端的应用程序停止发声的情况下,将释放的音频焦点信息发送至所述第二终端;所述第二终端用于根据释放的所述音频焦点信息对应的音频控制策略,来确定是否恢复播放所述第二音频。
可选地,不同的所述音频通道对应不同的所述音频类型。
根据本公开实施例的第二方面,提供一种音频处理方法,由第二终端执行,包括:
接收所述第一终端发送的音频焦点信息与所述第一终端通过音频通道发送的第一音频;所述音频焦点信息携带有所述第一终端申请的音频焦点类型;
根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的所述第一音频的音频类型;
根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制。
可选地,所述音频焦点类型为长音频焦点;所述根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制,包括:
在接收到所述第一终端释放所述长音频焦点的信息的情况下,禁止所述第一音频与所述第二音频播放。
可选地,所述音频焦点类型为短音频焦点;所述根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制,包括:
在接收所述第一终端释放所述短音频焦点的信息的情况下,禁止所述第一音频播放,恢复所述第二音频播放。
可选地,所述根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制,包括:
在所述第一音频的音频类型的优先级大于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量大于所述第二音频的播放音量,或者控制所述第一音频播放且控制所述第二音频暂停播放。
可选地,所述根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制,包括:
在所述第一音频的音频类型的优先级小于第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量。
根据本公开实施例的第三方面,提供一种音频处理装置,包括:
第一发送模块,被配置为发送第一终端的音频焦点信息至第二终端;所述音频焦点信息携带有所述第一终端申请的音频焦点类型;
第二发送模块,被配置为通过音频通道发送第一音频至所述第二终端;所述音频通道用于指示所述第二终端根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的音频类型;所述第二终端用于确定与所述音频类型和所述音频焦点类型对应的音频控制策略,并根据所述音频控制策略对所述第一音频的状态与所述第二终端播放的第二音频的状态进行控制。
根据本公开实施例的第四方面,提供一种音频处理装置,包括:
第一接收模块,被配置为接收所述第一终端发送的音频焦点信息与所述第一终端通过音频通道发送的第一音频;所述音频焦点信息携带有所述第一终端申请的音频焦点类型;
音频类型确定模块,被配置为根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的所述第一音频的音频类型;
控制模块,被配置为根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制。
根据本公开实施例的第五方面,提供一种终端,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
执行本公开实施例的第一方面提供的音频处理方法的步骤,或执行本公开实施例的第二方面提供的音频处理方法的步骤。
根据本公开实施例的第六方面,提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开实施例的第一方面提供的音频处理方法的步骤,或实现本公开实施例的第二方面提供的音频处理方法的步骤。
本公开的实施例提供的技术方案可以包括以下有益效果:
第二终端可以识别不同的音频通道对应的音频类型,进而根据不同的音频类型与第一终端请求的音频焦点类型,来切换不同的音频控制策略。在此过程中,第二终端并非是按照单一的音频控制策略来控制第一音频与第二音频的状态,而是会根据不同的音频类型与音频焦点类型,来适应性地切换不同的音频控制策略,从而更加适应当前的交互场景,提高了用户使用体验。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的一种音频处理方法的流程图。
图2是根据一示例性实施例示出的一种第一终端与第二终端之间具有一条音频通道的示意图。
图3是根据一示例性实施例示出的一种第一终端与第二终端之间具有多条音频通道的示意图。
图4是根据一示例性实施例示出的一种音频处理方法的流程图。
图5是根据一示例性实施例示出的一种音频处理装置的框图。
图6是根据一示例性实施例示出的一种音频处理装置的框图。
图7是根据一示例性实施例示出的一种音频处理装置的框图。
图8是根据一示例性实施例示出的一种车辆的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
需要说明的是,本申请中所有获取信号、信息或数据的动作都是在遵照所在地国家相应的数据保护法规政策的前提下,并获得由相应装置所有者给予授权的情况下进行的。
目前,音频投射的过程中,需要通过音频控制策略,来协调第一终端投射给第二终端的第一音频的状态,以及第二终端当前播放的第二音频的状态,而第二终端只能选择一种音频控制策略来协调控制第一音频的状态与第二音频的状态,其无法根据不同的交互场景来采用不同的音频控制策略控制第一音频与第二音频的状态,导致用户使用体验较差。
例如,同一个第二终端在选择以下三种音频控制策略中的一种音频控制策略后,就无法选择其他音频控制策略来协调控制第一音频与第二音频的状态。
第一种音频控制策略是混音控制策略:第一终端需要通过第二终端发声时,第一终端不向第二终端申请音频焦点,也可以理解为第一终端不通知第二终端暂停第二终端正在播放的第二音频,第二终端也无需暂停第一终端需要待播放的第一音频,第一音频与第二音频混合播放。
第二种音频控制策略是打断策略:第一终端需要通过第二终端发声时,第一终端统一申请长音频焦点,也可以理解为第一终端通知第二终端暂停第二终端正在播放的第二音频,且第二终端播放第一终端需要待播放的第一音频。
第三种音频控制策略是短暂打断策略:第一终端需要通过第二终端发声时,第一终端统一申请短音频焦点,也可以理解为第一终端通知第二终端暂停第二终端正在播放的第二音频,且第二终端播放第一终端需要待播放的第一音频,在第一音频播放完毕后,恢复第二音频的播放。
短暂打断策略与打断策略的区别之处在于,打断策略中第二终端不会恢复第二音频的播放,短暂打断策略中第二终端会恢复第二音频的播放。
只采用上面三种音频控制策略的其中一种控制策略,无法适应性地满足不同的交互场景,导致用户使用体验较低。
若统一采用第一种音频控制策略,会导致第二终端播放不同声音,例如同时播放第一终端的音乐、社交软件通知、导航等不同应用程序的声音,导致各个声音混合在一起,用户听感较差。
若统一采用第二种音频控制策略,导致即使第一终端播放短音频也会打断第二终端正在播放的媒体音,而不会恢复媒体音。例如,在第二终端正在播放音乐,第一终端收到一条社交软件的通知音需要第二终端播放,此时第二终端会播放社交软件的通知音,并打断正在播放的音乐,在通知音播放完毕后,不会自动恢复音乐播放,导致用户使用体验较差。
若统一采用第三种音频控制策略,会导致即使第一终端播放长音频结束后,第二终端也会自动恢复之前正在播放的媒体音。例如,在第二终端正在播放音乐,第一终端需要第二终端播放影视音频,此时第二终端会播放影视音频,并打断正在播放的音乐,当影视音频在两小时播放完毕之后,第一终端会退出影视音频,第二终端会自动恢复音乐播放。而在日常生活中,当用户观看或听完一个影视音频之后,通常会集体讨论或者仔细体会影视音频中的内容,此时若第二终端突然恢复音乐播放,会突然打断用户的讨论或者思考,也会导致用户使用体验较低。
可见,若第二终端采用单一的音频控制策略,无法适应多种交互场景,导致用户使用体验感较低。
而第二终端只能采用单一的音频控制策略的原因在于:请参阅图2所示,第一终端与第二终端仅有一个音频通道,且音频通道用于传输音频数据,第一终端无法将第一终端待播放的第一音频的音频类型通过音频通道传输给第二终端,所以第二终端无法知道第一终端通过音频通道传输过来的第一音频的音频类型,进而无法基于不同的音频类型来切换不同的音频控制策略,其只能统一地采用一种音频控制策略来覆盖所有的交互场景,导致用户使用体验较低。
基于此,本公开提出一种音频处理方法,图1是根据一示例性实施例示出的一种音频处理方法的流程图,如图1所示,音频处理方法用于第一终端中,第一终端可以是平板、手机、便携式电脑等,包括以下步骤。
在步骤S11中,发送第一终端的音频焦点信息至第二终端。
第一终端开启音频投射功能后,第一终端会监听系统中的音频焦点事件,该音频焦点事件指的是系统中哪些应用程序需要第二终端发声的事件。
音频焦点信息携带有第一终端申请的音频焦点类型以及第一终端中申请音频焦点的应用程序信息。应用程序信息可以是应用程序标识,用于唯一标记一个应用程序。音频焦点类型包括长音频焦点与短音频焦点。
例如,若第一终端的导航应用程序申请长音频焦点,那么音频焦点信息中会携带音频焦点类型为长音频焦点,且携带申请长音频焦点的应用程序是导航的应用程序信息。
音频焦点指的是在第一终端中的多个应用程序同时需要第二终端发声时,即第一终端中的多个应用程序同时请求第二终端播放音频时,音频焦点可以决定哪个应用程序优先播放音频。当第一终端的应用程序需要第二终端发声时,第一终端都会向第二终端申请该应用程序的音频焦点,但音频焦点配置给哪个应用程序是第二终端决定的。
长音频焦点指的是应用程序会在较长时间内持有音频焦点,当应用程序获得长音频焦点时,第一终端通过第二终端发声的其他应用程序的音频会自动暂停或降低音量。
短音频焦点指的是应用程序会在短时间内持有音频焦点,当应用程序获得短音频焦点时,其他应用程序的音频也会自动暂停。
第二终端可以是蓝牙音响、车载音响、智能音响、车载电脑等,第二终端可以接收第一终端发送的音频并同步播放音频。
在步骤S12中,通过音频通道发送第一音频至第二终端,所述音频通道用于指示所述第二终端根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的音频类型;第二终端用于确定与音频类型和音频焦点类型对应的音频控制策略,并根据音频控制策略对第一音频的状态与第二终端播放的第二音频的状态进行控制。
第一音频是第一终端当前等待播放的音频,第二音频是第一终端通过第二终端正在播放的音频。
音频通道用于指示第一音频的音频类型,不同的音频通道用于指示不同的音频类型,音频类型指的是音频流类型(AudioAttributes.usage)。例如,请参阅图3所示,第一音频通道对应的音频类型是媒体类型,第二音频通道对应的音频类型是导航类型,第三音频通道对应的音频类型是通知类型,第四音频通道对应的音频类型是通话类型。
第一终端内配置有不同音频通道与音频类型之间的映射关系,第一终端可以根据该映射关系,确定与音频类型对应的音频通道,并通过与音频类型对应的音频通道发送第一音频。
例如,当第一终端的媒体软件需要第二终端发声时,第一终端会将音频数据通过第一音频通道传输给第二终端,媒体软件可以是音乐播放软件与视频播放软件等;当第一终端的导航软件需要第二终端发声时,第一终端会将音频数据通过第二音频通道传输给第二终端;当第一终端的通知软件需要第二终端发声时,第一终端会将音频数据通过第三音频通道传输给第二终端,通知软件可以是即时通讯软件等;当第一终端的通话软件需要第二终端发声时,第一终端会将音频数据通过第四音频通道传输给第二终端,通话软件可以是即时通信软件与电话等通话软件。
音频焦点类型用于决定在第一音频播放完毕后是否恢复第二终端上一播放的第二音频;音频类型用于决定第二终端在播放第一音频时,是控制第一音频的音量大于第二音频的音量,还是控制第一音频播放且控制第二音频暂停,当然音频类型也可以与音频焦点类型结合,来确定是否恢复上一播放的第二音频。第二音频的恢复与否以及第一音频与第二音频之间的音量关系共同组成了不同的音频控制策略。
目前,第一终端与第二终端之间常见的音频投射协议有以下几种:
蓝牙协议,大部分第一终端支持蓝牙协议,蓝牙协议包括多媒体(A2DP)协议与通话(HFP)协议。蓝牙协议是属于通道级别的音频投射,第一终端与第二终端建立蓝牙连接之后,第一终端的音频会被发送到第二终端播放。通道级别的映射指的是第一终端的音频内容都可以通过音频通道投射至第二终端上。
隔空播放(Airplay)协议,部分第一终端支持隔空播放协议,隔空播放协议是属于内容级别的音频投射,是第一终端将视频或音频发送到第二终端进行投射,其投射的是第一终端中某个媒体的内容。
跨屏协同协议,第一终端将应用程序的画面与声音录制后,投射到第二终端上播放,同时用户在第二终端上的操作也可以回传给第一终端,实现对第一终端的反向控制。跨屏协同协议是应用级别的音频投射,其投射的是第一终端中某个应用的内容。
而本公开中,第一终端与第二终端之间采用RTSP(实时流媒体传输)协议,RTSP协议支持第一终端通过发送命令来控制第二终端,例如播放、暂停、通知、快进与快退等操作,也提供了传输音频数据与视频数据的机制,所以第一终端与第二终端可以采用RTSP协议来传输音频数据。
相关技术中,请参阅图2所示,第一终端与第二终端只有一条音频通道,所以第二终端无法对第一终端发送的第一音频的音频类型进行识别,从而无法切换不同的音频控制策略,导致用户使用体验较差。
而本公开中,请参阅图3所示不同的音频类型对应建立有不同的音频通道,如此,可以在第二终端中配置音频通道与音频类型之间的映射关系,第二终端便可以根据映射关系,来识别不同的音频通道对应的音频类型,进而根据不同的音频类型与第一终端请求的音频焦点类型,来切换不同的音频控制策略。在此过程中,第二终端并非是按照单一的音频控制策略来控制第一音频与第二音频的状态,而是会根据不同的音频类型与音频焦点类型,来适应性地切换不同的音频控制策略,从而更加适应当前的交互场景,提高了用户使用体验。
下面介绍上述步骤中的音频控制策略的示例性实施例,该实施例用于释义不同交互场景下的音频控制策略,从而提高用户使用体验。由于音频控制策略包括两部分音频控制策略,第一部分音频控制策略是在第一终端结束播放第一音频后,第二终端是否会恢复第二音频的播放;第二部分音频控制策略是第二终端接收到第一音频后,协调第一音频与第二音频之间的音量关系。
对于第一部分音频控制策略而言,可以根据音频焦点类型,来决定是否恢复第二音频的播放。
音频焦点类型为长音频焦点,对应的音频控制策略包括在第一终端释放长音频焦点的情况下,控制第一音频与第二音频禁止播放。
该音频控制策略下,当第二终端正在播放第二音频,且第二终端确定第一终端的应用程序申请的音频焦点类型是长音频焦点的情况下,会先控制第一音频播放且控制第二音频停止播放;当第二终端接收到第一终端释放长音频焦点的事件的情况下,控制第一音频停止播放,且控制第二音频不恢复播放。可以理解的是,第一终端释放的长音频焦点指的是第一音频不再占用该长音频焦点,那么第二终端则无需播放第一音频。
例如,以第一音频是电影,第二音频是音乐为例。在该音频控制策略下,若第二终端正在播放音乐,且第二终端确定第一终端的影视软件申请的音频焦点类型是长音频焦点的情况下,会先控制电影播放且控制音乐暂停;当第二终端接收到第一终端释放影视软件占用的长音频焦点的事件的情况下,控制影视音频停止播放,且不恢复音乐播放。
当然,第一终端释放长音频焦点后,并非是均是控制第二音频禁止播放,也需要结合音频类型进行判断。例如,以第一音频是导航音,第二音频是音乐为例,在第一终端释放导航音占用的长音频焦点后,则可以恢复音乐播放。以第一音频是影视音,第二音频是音乐为例,在第一终端释放影视音占用的长音频焦点后,第二终端不恢复音乐播放。
可以理解的是,第一终端释放长音频焦点指的是第一终端的应用程序停止发声时,第一终端会将释放长音频焦点的事件发送给第二终端,以便第二终端确定第一终端的应用程序不再占用该长音频焦点。通常情况下,占用长音频焦点的应用程序是影视软件与导航软件等需要长时间占用音频焦点的应用程序。
若第二终端统一采用上述第三种音频控制策略,会导致第一终端的影视软件释放长音频焦点后,第二终端恢复音乐播放。而本公开中,在第一终端的影视软件申请的音频焦点类型是长音频焦点的情况下,在第一终端释放长音频焦点之后,则不会恢复音乐播放,从而提升了用户使用体验。
音频焦点类型为短音频焦点,对应的音频控制策略包括在第一终端释放短音频焦点的情况下,控制第一音频禁止播放,恢复播放第二音频。
该音频控制策略下,当第二终端正在播放第二音频,且第二终端确定第一终端的应用程序申请的是短音频焦点的情况下,会先控制第一音频播放且控制第二音频停止播放;当第二终端接收到第一终端释放短音频焦点的事件的情况下,控制第一音频停止播放,且恢复第二音频播放。可以理解的是,第一终端释放的短音频焦点指的是第一音频不再占用该短音频焦点,那么第二终端则无需播放第一音频。
例如,以第一音频是通知,第二音频是音乐为例。在该音频控制策略下,若第二终端正在播放音乐,且第二终端确定第一终端的通知软件申请的音频焦点类型是短音频焦点的情况下,会先控制通知音播放且控制音乐暂停;当第二终端接收到第一终端的通知软件释放短音频焦点的事件的情况下,控制通知音停止播放,且恢复音乐播放。
可以理解的是,第一终端释放短音频焦点指的是第一终端的应用程序停止发声时,第一终端会将释放短音频焦点的事件发送给第二终端,以便第二终端确定第一终端的应用程序不再占用该短音频焦点。通常情况下,占用短音频焦点的应用程序是即时通讯软件、社交软件等短时间占用音频焦点的通知软件。
若第二终端统一采用上述第二种音频控制策略,会导致第一终端的通知软件释放短音频焦点后,不恢复音乐播放。而本公开中,在第一终端的通知软件申请的音频焦点类型是短音频焦点的情况下,在第一终端释放短音频焦点之后,会恢复音乐播放,从而避免用户再重新点击音乐播放,提升了用户使用体验。
在上述方案中,当第一终端释放应用程序占用的音频焦点后,第二终端可以决定被释放的音频焦点是否分配给第二音频。若将释放的音频焦点分配给第二音频,则恢复了第二音频播放;若未将释放的音频焦点分配给第二音频,则未恢复第二音频播放。
对于第二部分音频控制策略而言,可以根据音频类型,来确定第一音频与第二音频之间的音量关系。
第一音频的音频类型的优先级大于第二音频的音频类型的优先级的情况下,控制第一音频的播放音量与第二音频的播放音量之间的音量关系,该音量关系为第一音频的播放音量大于第二音频的播放音量,或者第一音频播放且第二音频暂停播放。
可以在第二终端内配置各个音频类型的优先级,例如在图3中,从上到下的四种音频类型的优先级依次增大,通话类型的优先级大于通知类型的优先级,通知类型的优先级大于导航类型的优先级,导航类型的优先级大于媒体类型的优先级,媒体类型中包括第一媒体类型与第二媒体类型,第一媒体类型的优先级大于第二媒体类型的优先级。以第一媒体类型是影视类型,第二媒体类型是音乐类型为例,影视类型的优先级大于音乐类型的优先级。
在一些场景下,第一音频的音频类型是导航类型,第二音频的音频类型是第二媒体类型的情况下,控制第一音频播放的音量大于第二音频播放的音量。
例如,以第二媒体类型是音乐类型为例,导航类型的第一音频是导航音频,第二媒体类型的第二音频是音乐。若第二终端正在播放音乐,当第二终端确定第一终端的导航软件申请音频焦点时,确定待播放的导航音频的优先级大于正在播放的音乐的优先级,则可以控制导航音频的音量大于音乐的音量。
在一些场景下,第一音频的音频类型是第一媒体类型、通知类型与通话类型中的任意一种,第二音频的音频类型是第二媒体类型的情况下,控制第一音频播放且控制第二音频停止播放。
例如,以第一媒体类型是影视类型为例,第一媒体类型的第一音频是影视,第二媒体类型的第二音频是音乐。若第二终端正在播放音乐,当第二终端确定第一终端的影视软件申请音频焦点时,确定待播放的影视音频的优先级的大于正在播放的音乐的优先级,则可以控制影视音频播放且控制音乐停止播放。
例如,以通知类型是即时通讯软件的消息通知为例,通知类型的第一音频是消息通知音,第二媒体类型的第二音频是音乐。若第二终端正在播放音乐,当第二终端确定第一终端的即时通讯软件申请音频焦点时,确定待播放的消息通知音的优先级大于正在播放的音乐的优先级,则可以控制消息通知音播放且控制音乐停止播放。
例如,以通知类型是即时通讯软件的消息通知为例,通话类型的第一音频是通话音,第二媒体类型的第二音频是音乐。若第二终端正在播放音乐,当第二终端确定第一终端的即时通讯软件申请音频焦点时,确定待播放的通话音频的优先级大于正在播放的音乐的优先级,则可以控制通话音播放且控制音乐停止播放。
在一些场景下,第一音频的音频类型是通话类型与通知类型中的任意一种,第二音频的音频类型是导航类型的情况下,可以控制第一音频播放且控制第二音频暂停播放。
第一音频的音频类型的优先级小于第二音频的音频类型的优先级的情况下,控制第一音频的播放音量小于第二音频的播放音量。
在一些场景下,第一音频的音频类型是媒体类型,第二音频的音频类型是导航类型的情况下,控制第一音频的播放音量小于第二音频的播放音量。
例如,以媒体类型的第一音频是音乐,第二音频是导航音频为例。若第二终端正在播放导航音频,当第二终端接收到第一终端的音乐软件申请音频焦点时,确定待播放的音乐的优先级小于正在播放的导航音频的优先级,则会控制音乐的播放音量小于导航音频的播放音量。
在一些场景下,第一音频的音频类型是通知类型,第二音频的音频类型是通话类型的情况下,控制第一音频的播放音量小于第二音频的播放音量。
可以理解的是,上述第一音频与第二音频之间的音量协调都是在第二终端允许播放第一音频的情况下,才会对第一音频与第二音频的音量进行协调。
当第二终端接收到音频焦点信息后,可以根据音频焦点信息中携带的应用程序标识,来决定是否允许该应用程序播放第一音频。
例如,当第二终端正在播放通话软件的第二音频时,可以允许播放通知软件的第一音频,不允许播放媒体软件与导航软件的第一音频。从而使得用户可以在通话的过程中,听到消息通知,避免错过消息通知;也能够使得用户在通话的过程中,不听到导航音频与媒体音频,避免导航音频与媒体音频影响到用户通话。
当第二终端正在播放通知软件的第二音频时,可以允许播放通话软件的第一音频,不允许播放媒体软件与导航软件的第一音频。从而使得用户在听到通知的过程中也能够听到其余用户的来电;不允许播放媒体软件与导航软件的第一音频,可以避免导航音频与媒体音频影响到用户听到消息通知。
当第二终端正在播放导航软件与媒体软件的第二音频时,可以允许任意一个软件播放第一音频。
在第二终端接收到音频焦点信息之后,在根据音频焦点信息中携带的应用程序信息,允许该应用程序播放第一音频的情况下,第一终端才能通过音频通道发送第一音频至第二终端。
在第二终端接收到音频焦点信息之后,在根据音频焦点信息中携带的应用程序信息,不允许该应用程序播放第一音频的情况下,则会向第一终端发送禁止播放指令,第一终端再响应于禁止播放指令,禁止第一音频播放。
例如,第二终端当前正在播放通话音,若第二终端接收到第一终端发送的音频焦点信息中携带的应用程序信息是媒体软件,则不允许媒体软件播放,第二终端会向第一终端发送禁止播放指令,第一终端响应于禁止播放指令,禁止媒体音播放,从而避免影响到用户之间的正常通话。
可以理解的是,上述第一部分音频控制策略与第二部分音频控制策略可以相互组合,即第二音频是否恢复播放,以及第一音频与第二音频之间的音量关系可以相互组合,从而形成多种音频控制策略。
示例地,音频控制策略A是控制第一音频的音量大于第二音频的音量,且在第一终端释放音频焦点后,控制第一音频停止播放且恢复第二音频播放。
例如,以第一音频是导航音,第二音频是音乐为例,第一终端的导航软件向第二终端申请长音频焦点,且第二终端接收第一终端通过第二音频通道传输的音频数据时,第二终端确定第一终端传输的音频数据的音频类型是导航类型,确定是导航软件申请的长音频焦点,则可以控制导航音的音量大于音乐的音量,在第一终端释放长音频焦点后,控制导航音停止播放且恢复音乐播放。
示例地,音频控制策略B是控制第一音频的音量大于第二音频的音量,且在第一终端释放音频焦点后,控制第一音频停止播放且不恢复第二音频播放。
示例地,音频控制策略C是控制第一音频播放且控制第二音频暂停,在第一终端释放音频焦点后,控制第一音频停止播放且恢复第二音频播放。
例如,以第一音频是通知音,第二音频是音乐为例,第一终端的即时通讯软件向第二终端申请短音频焦点,且第二终端接收第一终端通过第三音频通道传输的音频数据时,第二终端确定第一终端传输的音频数据的音频类型是通知类型,确定是通知软件申请的短音频焦点,则可以控制通知音播放且控制音乐暂停播放,在第一终端释放短音频焦点之后,控制通知音停止播放且恢复音乐播放。
示例地,音频控制策略D是控制第一音频播放且控制第二音频暂停,在第一终端释放音频焦点后,控制第一音频停止播放且不恢复第二音频播放。
例如,以第一音频是影视音,第二音频是音乐为例,第一终端的影视软件向第二终端申请长音频焦点,且第二终端通过第一音频通道传输的音频数据时,确定第一终端传输的音频数据的音频类型是媒体类型,确定是影视软件申请的长音频焦点,则可以控制影视音播放且控制音乐暂停播放,在第一终端释放长音频焦点后,控制影视音停止播放且不恢复音乐播放。
通过上述技术方案,可以在不同的交互场景下,根据不同的音频类型与音频焦点类型来执行音频控制策略A至音频控制策略D中的任意一种策略,从而满足适应性地切换音频控制策略,满足当前的交互场景,提升用户使用体验。
图4是本公开实施例提出的一种音频处理方法的流程图,该方法用于第二终端中,第二终端可以是蓝牙音响、车载影响与智能音响等车机,包括以下步骤:
在步骤S21中,接收所述第一终端发送的音频焦点信息与所述第一终端通过音频通道发送的第一音频;所述音频焦点信息携带有所述第一终端申请的音频焦点类型。
第二终端在接收到音频焦点信息之后,由于音频焦点信息中携带有第一终端申请的音频焦点类型以及申请音频焦点的应用程序信息,所以第二终端可以基于音频焦点信息确定第一终端申请的音频焦点类型。
在步骤S22中,根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的所述第一音频的音频类型。
第二终端内配置有不同的音频通道与音频焦点之间的映射关系,第二终端可以根据该映射关系,确定与音频通道对应的音频类型。
在步骤S23中,根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制。
第二终端可以结合音频类型与音频焦点类型唯一确定一个音频控制策略,从而对第一音频的状态与第二音频的状态进行控制,该音频控制策略可以是上述音频控制策略A到D中的任意一种。
通过上述技术方案,第二终端并非是按照单一的音频控制策略来控制第一音频与第二音频的状态,而是会根据不同的音频类型与音频焦点类型,来适应性地切换不同的音频控制策略,从而更加适应当前的交互场景,提高了用户使用体验。
下面介绍上述步骤S23涉及到的具体实施例,该实施例用于释义在不同的音频控制策略下,如何对第一音频的状态与第二音频的状态进行控制。
控制方式A1,在接收到所述第一终端释放所述长音频焦点的信息的情况下,禁止所述第一音频与所述第二音频播放。
在确定第一终端释放应用程序占用的长音频焦点的情况下,则向车机系统申请释放音频焦点,以便于车机系统将空闲的音频焦点分配给其余应用程序。
控制方式A2,在接收所述第一终端释放所述短音频焦点的信息的情况下,禁止所述第一音频播放,恢复所述第二音频播放。
在确定第一终端释放应用程序占用的短音频焦点的情况下,则向车机系统申请释放音频焦点,以便于车机系统将空闲的音频焦点分配给其余应用程序。
控制方式B1,在所述第一音频的音频类型的优先级大于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量大于所述第二音频的播放音量,或者控制所述第一音频播放且控制所述第二音频暂停播放。
控制方式B2,在所述第一音频的音频类型的优先级小于第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量。
可以理解的是,上述音频类型不仅可以决定第一音频的播放音量与第二音频的播放音量之间的音量关系,还可以决定是否会恢复第二音频播放。
上述控制方式中的控制方式A1与控制方式A2,可以与控制方式B1与B2两两组合,形成上述音频控制策略A至音频控制策略D,以供本公开中的第二终端在四种音频控制策略中切换,更加适应当前的交互环境。
可选地,在第二终端接收到第一终端发送的音频焦点信息之后,可以根据音频焦点信息携带的应用程序信息,来确定是否允许第一终端播放第一音频。其具体如何根据应用程序信息来确定是否允许播放第一音频,已经在上述方案中阐述,在此不再赘述。
第二终端在接收到音频焦点信息之后,可以向车机系统申请音频焦点,由车机系统来决定第一音频是否被允许播放。
可选地,在第二终端允许播放第一音频的情况下,发送允许播放指令至第一终端,第一终端用于根据允许播放指令,通过音频通道发送第一音频至第二终端。
可选地,在第二终端不允许播放第一音频的情况下,发送禁止播放指令至第一终端,第一终端用于根据禁止播放指令,禁止第一音频播放。
可选地,第二终端用于接收第一终端释放的音频焦点信息,并根据音频类型与释放的音频焦点信息来决定是否恢复播放第二音频。
图5是根据一示例性实施例示出的一种音频处理装置的框图。参照图5,该音频处理装置500包括第一发送模块510与第二发送模块520。
第一发送模块510,被配置为发送第一终端的音频焦点信息至第二终端;所述音频焦点信息携带有所述第一终端申请的音频焦点类型;
第二发送模块520,被配置为通过音频通道发送第一音频至所述第二终端;所述音频通道用于指示所述第二终端根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的音频类型;所述第二终端用于确定与所述音频类型和所述音频焦点类型对应的音频控制策略,并根据所述音频控制策略对所述第一音频的状态与所述第二终端播放的第二音频的状态进行控制。
可选地,所述音频控制策略包括以下任意一者:
所述音频焦点类型为长音频焦点,对应的所述音频控制策略包括在所述第一终端释放所述长音频焦点的情况下,控制所述第一音频与所述第二音频禁止播放;
所述音频焦点类型为短音频焦点,对应的所述音频控制策略包括在所述第一终端释放所述短音频焦点的情况下,控制所述第一音频禁止播放,恢复播放所述第二音频。
可选地,所述音频控制策略包括以下任意一者:
所述第一音频的音频类型的优先级大于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量大于所述第二音频的播放音量,或者控制所述第一音频播放且控制所述第二音频暂停播放;
所述第一音频的音频类型的优先级小于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量。
可选地,所述第一音频的音频类型的优先级大于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量大于所述第二音频的播放音量,或者控制所述第二音频暂停播放且控制所述第一音频播放,包括以下任意一者:
所述第一音频的音频类型是导航类型,所述第二音频的音频类型是第二媒体类型的情况下,控制所述第一音频播放的音量大于所述第二音频播放的音量;
所述第一音频的音频类型是第一媒体类型、通知类型与通话类型中的任意一种,所述第二音频的音频类型是所述第二媒体类型的情况下,控制所述第一音频播放且控制所述第二音频停止播放。
可选地,所述第一音频的音频类型的优先级小于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量,包括以下任意一者:
所述第一音频的音频类型是媒体类型,所述第二音频的音频类型是导航类型的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量。
可选地,第一发送模块510包括:
第一发送子模块,被配置为在所述第一终端的应用程序待发声的情况下,发送所述音频焦点信息至所述第二终端。
可选地,第二发送模块520包括:
第二发送子模块,被配置为在所述第二终端允许播放所述第一音频的情况下,通过所述音频通道发送所述第一音频至所述第二终端。
可选地,音频处理装置500包括:
禁止播放指令接收模块,被配置为接收所述第二终端发送的禁止播放指令,所述禁止播放指令是所述第二终端禁止播放所述第一音频的情况下发送的;
响应模块,被配置为响应于所述禁止播放指令,禁止所述第一音频播放。
可选地,音频处理装置500包括:
释放模块,被配置为在所述第一终端的应用程序停止发声的情况下,将释放的音频焦点信息发送至所述第二终端;所述第二终端用于根据释放的所述音频焦点信息对应的音频控制策略,来确定是否恢复播放所述第二音频。
可选地,不同的所述音频通道对应不同的所述音频类型。
图6是根据一示例性实施例示出的一种音频处理装置的框图。参照图6,该音频处理装置600包括:第一接收模块610、音频类型确定模块620与控制模块630。
第一接收模块610,被配置为接收所述第一终端发送的音频焦点信息与所述第一终端通过音频通道发送的第一音频;所述音频焦点信息携带有所述第一终端申请的音频焦点类型;
音频类型确定模块620,被配置为根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的所述第一音频的音频类型;
控制模块630,被配置为根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制。
可选地,所述音频焦点类型为长音频焦点;控制模块630包括:
第一控制子模块,被配置为在接收到所述第一终端释放所述长音频焦点的信息的情况下,禁止所述第一音频与所述第二音频播放。
可选地,所述音频焦点类型为短音频焦点;控制模块630包括:
第二控制子模块,被配置为在接收所述第一终端释放所述短音频焦点的信息的情况下,禁止所述第一音频播放,恢复所述第二音频播放。
可选地,控制模块630包括:
第三控制子模块,被配置为在所述第一音频的音频类型的优先级大于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量大于所述第二音频的播放音量,或者控制所述第一音频播放且控制所述第二音频暂停播放。
可选地,控制模块630包括:
第四控制子模块,被配置为在所述第一音频的音频类型的优先级小于第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本公开还提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开提供的音频处理方法的步骤。
图7是根据一示例性实施例示出的一种用于音频处理的装置700的框图。例如,装置700可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等第一终端。
参照图7,装置700可以包括以下一个或多个组件:处理组件702,存储器704,电源组件706,多媒体组件708,音频组件710,输入/输出接口712,传感器组件714,以及通信组件716。
处理组件702通常控制装置700的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件702可以包括一个或多个处理器720来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件702可以包括一个或多个模块,便于处理组件702和其他组件之间的交互。例如,处理组件702可以包括多媒体模块,以方便多媒体组件708和处理组件702之间的交互。
存储器704被配置为存储各种类型的数据以支持在装置700的操作。这些数据的示例包括用于在装置700上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器704可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件706为装置700的各种组件提供电力。电源组件706可以包括电源管理系统,一个或多个电源,及其他与为装置700生成、管理和分配电力相关联的组件。
多媒体组件708包括在所述装置700和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件708包括一个前置摄像头和/或后置摄像头。当装置700处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件710被配置为输出和/或输入音频信号。例如,音频组件710包括一个麦克风(MIC),当装置700处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器704或经由通信组件716发送。在一些实施例中,音频组件710还包括一个扬声器,用于输出音频信号。
输入/输出接口712为处理组件702和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件714包括一个或多个传感器,用于为装置700提供各个方面的状态评估。例如,传感器组件714可以检测到装置700的打开/关闭状态,组件的相对定位,例如所述组件为装置700的显示器和小键盘,传感器组件714还可以检测装置700或装置700一个组件的位置改变,用户与装置700接触的存在或不存在,装置700方位或加速/减速和装置700的温度变化。传感器组件714可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件714还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件714还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件716被配置为便于装置700和其他设备之间有线或无线方式的通信。装置700可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件716经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件716还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置700可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器704,上述指令可由装置700的处理器720执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
上述装置除了可以是独立的电子设备外,也可是独立电子设备的一部分,例如在一种实施例中,该装置可以是集成电路(Integrated Circuit,IC)或芯片,其中该集成电路可以是一个IC,也可以是多个IC的集合;该芯片可以包括但不限于以下种类:GPU(GraphicsProcessing Unit,图形处理器)、CPU(Central Processing Unit,中央处理器)、FPGA(Field Programmable Gate Array,可编程逻辑阵列)、DSP(Digital Signal Processor,数字信号处理器)、ASIC(Application Specific Integrated Circuit,专用集成电路)、SOC(System on Chip,SoC,片上系统或系统级芯片)等。上述的集成电路或芯片中可以用于执行可执行指令(或代码),以实现上述的音频处理方法。其中该可执行指令可以存储在该集成电路或芯片中,也可以从其他的装置或设备获取,例如该集成电路或芯片中包括处理器、存储器,以及用于与其他的装置通信的接口。该可执行指令可以存储于该存储器中,当该可执行指令被处理器执行时实现上述的音频处理方法;或者,该集成电路或芯片可以通过该接口接收可执行指令并传输给该处理器执行,以实现上述的音频处理方法。
在另一示例性实施例中,还提供一种计算机程序产品,该计算机程序产品包含能够由可编程的装置执行的计算机程序,该计算机程序具有当由该可编程的装置执行时用于执行上述的音频处理方法的代码部分。
图8是根据一示例性实施例示出的一种车辆800的框图。例如,车辆800可以是混合动力车辆,也可以是非混合动力车辆、电动车辆、燃料电池车辆或者其他类型的车辆。车辆800可以是自动驾驶车辆、半自动驾驶车辆或者非自动驾驶车辆。车辆800上配置有智能音响、蓝牙音响与车载音响等车机,这些车机为上述的第二终端。
参照图8,车辆800可包括各种子系统,例如,信息娱乐系统810、感知系统820、决策控制系统830、驱动系统840以及计算平台850。其中,车辆800还可以包括更多或更少的子系统,并且每个子系统都可包括多个部件。另外,车辆800的每个子系统之间和每个部件之间可以通过有线或者无线的方式实现互连。
在一些实施例中,信息娱乐系统810可以包括通信系统,娱乐系统以及导航系统等。
感知系统820可以包括若干种传感器,用于感测车辆800周边的环境的信息。例如,感知系统820可包括全球定位系统(全球定位系统可以是GPS系统,也可以是北斗系统或者其他定位系统)、惯性测量单元(inertial measurement unit,IMU)、激光雷达、毫米波雷达、超声雷达以及摄像装置。
决策控制系统830可以包括计算系统、整车控制器、转向系统、油门以及制动系统。
驱动系统840可以包括为车辆800提供动力运动的组件。在一个实施例中,驱动系统840可以包括引擎、能量源、传动系统和车轮。引擎可以是内燃机、电动机、空气压缩引擎中的一种或者多种的组合。引擎能够将能量源提供的能量转换成机械能量。
车辆800的部分或所有功能受计算平台850控制。计算平台850可包括至少一个处理器851和存储器852,处理器851可以执行存储在存储器852中的指令853。
处理器851可以是任何常规的处理器,诸如商业可获得的CPU。处理器还可以包括诸如图像处理器(Graphic Process Unit,GPU),现场可编程门阵列(Field ProgrammableGate Array,FPGA)、片上系统(System on Chip,SOC)、专用集成芯片(ApplicationSpecific Integrated Circuit,ASIC)或它们的组合。
存储器852可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
除了指令853以外,存储器852还可存储数据,例如道路地图,路线信息,车辆的位置、方向、速度等数据。存储器852存储的数据可以被计算平台850使用。
在本公开实施例中,处理器851可以执行指令853,以完成上述的音频处理方法的全部或部分步骤。
本领域技术人员在考虑说明书及实践本公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
Claims (19)
1.一种音频处理方法,其特征在于,由第一终端执行,包括:
发送第一终端的音频焦点信息至第二终端;所述音频焦点信息携带有所述第一终端申请的音频焦点类型;
通过音频通道发送第一音频至所述第二终端;所述音频通道用于指示所述第二终端根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的音频类型;所述第二终端用于确定与所述音频类型和所述音频焦点类型对应的音频控制策略,并根据所述音频控制策略对所述第一音频的状态与所述第二终端播放的第二音频的状态进行控制。
2.根据权利要求1所述的方法,其特征在于,所述音频控制策略包括以下任意一者:
所述音频焦点类型为长音频焦点,对应的所述音频控制策略包括在所述第一终端释放所述长音频焦点的情况下,控制所述第一音频与所述第二音频禁止播放;
所述音频焦点类型为短音频焦点,对应的所述音频控制策略包括在所述第一终端释放所述短音频焦点的情况下,控制所述第一音频禁止播放,恢复播放所述第二音频。
3.根据权利要求1所述的方法,其特征在于,所述音频控制策略包括以下任意一者:
所述第一音频的音频类型的优先级大于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量大于所述第二音频的播放音量,或者控制所述第一音频播放且控制所述第二音频暂停播放;
所述第一音频的音频类型的优先级小于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量。
4.根据权利要求3所述的方法,其特征在于,所述第一音频的音频类型的优先级大于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量大于所述第二音频的播放音量,或者控制所述第二音频暂停播放且控制所述第一音频播放,包括以下任意一者:
所述第一音频的音频类型是导航类型,所述第二音频的音频类型是第二媒体类型的情况下,控制所述第一音频播放的音量大于所述第二音频播放的音量;
所述第一音频的音频类型是第一媒体类型、通知类型与通话类型中的任意一种,所述第二音频的音频类型是所述第二媒体类型的情况下,控制所述第一音频播放且控制所述第二音频停止播放。
5.根据权利要求3所述的方法,其特征在于,所述第一音频的音频类型的优先级小于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量,包括以下任意一者:
所述第一音频的音频类型是媒体类型,所述第二音频的音频类型是导航类型的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量。
6.根据权利要求1所述的方法,其特征在于,所述发送第一终端的音频焦点信息至第二终端,包括:
在所述第一终端的应用程序待发声的情况下,发送所述音频焦点信息至所述第二终端。
7.根据权利要求1所述的方法,其特征在于,所述通过音频通道发送第一音频至所述第二终端,包括:
在所述第二终端允许播放所述第一音频的情况下,通过所述音频通道发送所述第一音频至所述第二终端。
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收所述第二终端发送的禁止播放指令,所述禁止播放指令是所述第二终端禁止播放所述第一音频的情况下发送的;
响应于所述禁止播放指令,禁止所述第一音频播放。
9.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述第一终端的应用程序停止发声的情况下,将释放的音频焦点信息发送至所述第二终端;所述第二终端用于根据释放的所述音频焦点信息对应的音频控制策略,来确定是否恢复播放所述第二音频。
10.根据权利要求1~9任一所述的方法,其特征在于,不同的所述音频通道对应不同的所述音频类型。
11.一种音频处理方法,其特征在于,由第二终端执行,包括:
接收所述第一终端发送的音频焦点信息与所述第一终端通过音频通道发送的第一音频;所述音频焦点信息携带有所述第一终端申请的音频焦点类型;
根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的所述第一音频的音频类型;
根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制。
12.根据权利要求11所述的方法,其特征在于,所述音频焦点类型为长音频焦点;所述根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制,包括:
在接收到所述第一终端释放所述长音频焦点的信息的情况下,禁止所述第一音频与所述第二音频播放。
13.根据权利要求11所述的方法,其特征在于,所述音频焦点类型为短音频焦点;所述根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制,包括:
在接收所述第一终端释放所述短音频焦点的信息的情况下,禁止所述第一音频播放,恢复所述第二音频播放。
14.根据权利要求11所述的方法,其特征在于,所述根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制,包括:
在所述第一音频的音频类型的优先级大于所述第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量大于所述第二音频的播放音量,或者控制所述第一音频播放且控制所述第二音频暂停播放。
15.根据权利要求11所述的方法,其特征在于,所述根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制,包括:
在所述第一音频的音频类型的优先级小于第二音频的音频类型的优先级的情况下,控制所述第一音频的播放音量小于所述第二音频的播放音量。
16.一种音频处理装置,其特征在于,包括:
第一发送模块,被配置为发送第一终端的音频焦点信息至第二终端;所述音频焦点信息携带有所述第一终端申请的音频焦点类型;
第二发送模块,被配置为通过音频通道发送第一音频至所述第二终端;所述音频通道用于指示所述第二终端根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的音频类型;所述第二终端用于确定与所述音频类型和所述音频焦点类型对应的音频控制策略,并根据所述音频控制策略对所述第一音频的状态与所述第二终端播放的第二音频的状态进行控制。
17.一种音频处理装置,其特征在于,包括:
第一接收模块,被配置为接收所述第一终端发送的音频焦点信息与所述第一终端通过音频通道发送的第一音频;所述音频焦点信息携带有所述第一终端申请的音频焦点类型;
音频类型确定模块,被配置为根据所述音频通道与音频类型之间的映射关系,确定与所述音频通道对应的所述第一音频的音频类型;
控制模块,被配置为根据与所述音频类型和所述音频焦点类型对应的音频控制策略,对所述第一音频的状态与播放的第二音频的状态进行控制。
18.一种终端,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
执行权利要求1~10或11~15任一所述的方法。
19.一种计算机可读存储介质,其上存储有计算机程序指令,其特征在于,该程序指令被处理器执行时实现权利要求1~10或11~15中任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311833043.3A CN117939358A (zh) | 2023-12-27 | 2023-12-27 | 音频处理方法、装置、终端与存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311833043.3A CN117939358A (zh) | 2023-12-27 | 2023-12-27 | 音频处理方法、装置、终端与存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117939358A true CN117939358A (zh) | 2024-04-26 |
Family
ID=90767984
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311833043.3A Pending CN117939358A (zh) | 2023-12-27 | 2023-12-27 | 音频处理方法、装置、终端与存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117939358A (zh) |
-
2023
- 2023-12-27 CN CN202311833043.3A patent/CN117939358A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110995929B (zh) | 终端控制方法、装置、终端及存储介质 | |
US11146854B2 (en) | Method for playing videos and electronic device | |
EP4246957A1 (en) | Photographing method, system, and electronic device | |
CN112351235A (zh) | 一种视频通话的方法 | |
US11825134B2 (en) | Method for interacting in live-streaming and server | |
CN106131615A (zh) | 视频播放方法及装置 | |
CN112019893A (zh) | 终端的投屏方法和终端的投屏装置 | |
KR20170023769A (ko) | 이벤트 알림 방법 및 디바이스 | |
WO2020077583A1 (zh) | 基于物物直连建立单播连接和数据传输的方法及装置 | |
CN105139874A (zh) | 导航提示方法和装置 | |
CN107272896B (zh) | Vr模式与非vr模式之间切换的方法及装置 | |
RU2643528C2 (ru) | Способ и устройство для совершения вызова | |
CN113660301A (zh) | 汽车中控的控制方法、装置、汽车中控和存储介质 | |
CN113703849A (zh) | 投屏应用打开方法和装置 | |
US11956492B2 (en) | Media stream playing method and apparatus | |
CN117939358A (zh) | 音频处理方法、装置、终端与存储介质 | |
CN109461461B (zh) | 音频播放方法、装置、电子设备及储存介质 | |
KR20180105676A (ko) | 서비스 연결의 설정 방법, 장치, 프로그램 및 저장매체 | |
CN107039054B (zh) | 录音方法及装置 | |
EP3823238A1 (en) | Method and apparatus for controlling devices and storage medium | |
CN118474454A (zh) | 直播数据的处理方法、装置、介质、程序产品以及车辆 | |
WO2024065116A1 (zh) | 资源选择方法、装置、用户设备、基站、存储介质与芯片 | |
CN118264707B (zh) | 通信系统、方法与车辆 | |
US20230239396A1 (en) | Incoming Call Prompting Method and Electronic Device | |
CN115938407A (zh) | 播放控制方法、装置、设备、用户终端和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |