CN105912295A - 一种音频数据处理方法及装置 - Google Patents
一种音频数据处理方法及装置 Download PDFInfo
- Publication number
- CN105912295A CN105912295A CN201510872732.4A CN201510872732A CN105912295A CN 105912295 A CN105912295 A CN 105912295A CN 201510872732 A CN201510872732 A CN 201510872732A CN 105912295 A CN105912295 A CN 105912295A
- Authority
- CN
- China
- Prior art keywords
- data
- equipment
- audio
- putting
- application layer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B31/00—Arrangements for the associated working of recording or reproducing apparatus with related apparatus
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
本发明实施例提供一种音频数据处理方法及装置,包括:实时监听到外部输入的启动发言指令时,建立与外放设备的无线数据连接,并启动便携终端的麦克;调用所述麦克持续录制音频数据,并将所述音频数据传送至应用层播放器,之后捕获所述应用层播放器播放的音频数据并生成音频流;通过无线数据连接将所述音频流发送至所述外放设备进行同步播放。通过调用便携终端的麦克,并建立便携终端与外方设备之间的无线数据连接,将便携终端作为会场中的无线麦克风使用,解决了现有技术中同一会场中有限数量的无线麦克风无法满足多人快捷发言需求的问题。
Description
技术领域
本发明实施例涉及音频技术领域,尤其涉及一种音频数据处理方法及装置。
背景技术
在我们的日常生活中,经常需要参加一些大型或小型的会议,为了能让参会者在会议期间能够更方便地互动和交流,麦克风就成为会议上必备的设备之一。现有的麦克风包括有线和无线两种类型,有线麦克风的成本低,但传递起来及其不方便;无线麦克风虽可方便地进行传递,但其成本较高,而且,一般的无线麦克风系统配置的麦克风数量很少,如果需要发言的人较多,或者主讲者较多的情况下,少数几个无线麦克风显然是不够用的,影响了会议效果。
因此,在控制成本的前提下,如何能给参会者或者主讲者每人提供一个发言设备以供其随时发言使用成为亟待解决的问题。
发明内容
本发明实施例提供一种音频数据处理方法及装置,用以解决现有技术中同一会场中有限数量的无线麦克风无法满足多人快捷发言需求的问题。
本发明实施例提供一种音频数据处理方法,包括:
实时监听到外部输入的启动发言指令时,建立与外放设备的无线数据连接,并启动便携终端的麦克;
调用所述麦克持续录制音频数据,并将所述音频数据传送至应用层播放器,之后捕获所述应用层播放器播放的音频数据并生成音频流;
通过无线数据连接将所述音频流发送至所述外放设备进行同步播放。
本发明实施例提供一种音频数据处理装置,包括:
监听响应模块,用于实时监听到外部输入的启动发言指令时,建立与外放设备的无线数据连接,并启动便携终端的麦克;
执行模块,用于调用所述麦克持续录制音频数据,并将所述音频数据传送至应用层播放器,之后捕获所述应用层播放器播放的音频数据并生成音频流;
无线连接模块,用于通过无线数据连接将所述音频流发送至所述外放设备进行同步播放。
本发明实施例提供的音频数据处理方法及装置,通过调用便携终端的麦克,并建立便携终端与外方设备之间的无线数据连接,将便携终端作为会场中的无线麦克风使用,解决了现有技术中同一会场中有限数量的无线麦克风无法满足多人快捷发言需求的问题,便携终端的使用普遍性和携带方便性为参会者之间的互动交流提供了更多的便利;而且,无需更改便携终端的现有硬件及软件框架,即可实现便携终端用作无线麦克风的功能,使得本发明具有非常高的应用推广性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明音频数据处理方法流程图;
图2为本发明音频数据处理方法实施例流程图;
图3为本发明音频数据处理方法实施例流程图;
图4为本发明音频数据处理方法实施例流程图;
图5为本发明音频处理方法及装置原理图;
图6为本发明音频处理装置结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供一种音频处理方法及装置,可应用于大型或小型会议场景中,会议期间发言者较多时,经常出现麦克风数量不够用的问题,尤其是会场较大时,麦克风的传递会占用大量的会议时间,大大拖延了会议进程,而如果想要避免这些问题,只能增加麦克风的数量,但是,由于无线麦克风的成本较高且麦克风系统能够配置的无线麦克数量有限,使得这一问题很难解决。手机等便携终端作为被随身携带的必备智能终端,具有很高的应用普遍性和携带便捷性,而如今人们通过手机互动交流的方式还仅局限在语音通话上,本发明实施例提供的音频处理方法及装置就是要将手机等便携终端应用到会议场景中作为麦克风使用,通过便携终端采集发言者的音频,并将发言者的音频发送到外方设备进行扩音外方,使得发言者依靠便携终端就可达到使用无线麦克风同样的效果,免去了在会场中传递麦克风的麻烦。
另外,本发明实施例提供的音频处理方法及装置,除了可应用于上述会议场景中,还可应用于演出、比赛等等其它需要用到麦克风的场景中,本发明对此不做限定。
为使本发明的目的、技术方案和优点更加清楚,以下结合附图及具体实施例,对本发明进行进一步的详细说明。
参考图1,本发明实施例提供一种音频数据处理方法,包括:
S101,实时监听到外部输入的启动发言指令时,建立与外放设备的无线数据连接,并启动便携终端的麦克;
S102,调用所述麦克持续录制音频数据,并将所述音频数据传送至应用层播放器,之后捕获所述应用层播放器播放的音频数据并生成音频流;
S103,通过无线数据连接将所述音频流发送至所述外放设备进行同步播放。
其中,步骤S101中,由用户在想要发言时向便携终端输入启动发言指令,其中所述启动发言指令可以是点按或长按在应用程序界面上的相应按钮,或者是其它指令形式,在此不作限定;在监听到启动发言指令时,调用便携终端的麦克使其处于工作状态,为音频数据的采集做准备,以及,建立与外方设备的无线数据连接,为音频的传输做好准备。
步骤S102执行的是音频采集过程,发言者可面对便携终端的麦克进行说话,步骤S102执行的实质是录播功能,即通过麦克录制音频数据,通过应用层播放器播放音频数据,同步地,通过对应用层播放器播放的音频数据进行捕获而生成待发送的音频流。其中,捕获应用层播放器播放的音频数据的过程中包括对音频数据的编码、命名等。
步骤S103中,外放设备在接收到音频流时对其进行解码并同步扩音播放,会场中的参会者就可听到与发言者的发言同步的外放声音。
本实施例中,便携终端包括手机、ipad、ipod、笔记本电脑等智能终端,只要具备自带麦克或可外接麦克部件即可,在此不作具体限定。便携终端可通过会场中的无线网络连接所述外放设备,或者可以加入包括所述外放设备的VPN中,实现无线数据连接,在此也不作具体限定。
参考图2,本发明另一个实施例中,在步骤S101~103之后,还包括:
S104,在监听到结束发言指令后断开与所述外放设备的数据连接。
本实施例中,在监听到启动发言指令之后,通过麦克采集音频数据以及将音频传输至外放设备进行扩音播放过程中,还会实时地监听结束发言指令,如果未监听到结束发言指令,则上述音频采集及数据传输过程持续执行;如果监听到结束发言指令,则会断开与所述外放设备的数据连接。本发明实施例中,音频采集和数据传输过程是同步执行的,也即是音频采集结束时音频流已完整地发送到外放设备侧,在实际使用时,可在结束发言指令与断开数据连接操作指令之间设置预定的时间间隔,以避免网络延时等造成断开数据连接时音频流尚未完整发送的情况发生。
另外,所述启动发言指令和结束发言指令是相对而言,所述启动发言指令与所述结束发言指令相互独立;或者以所述启动发言指令的结束作为所述结束发言指令。
参考图3,以下再以一实施例对步骤S101中建立与外放设备的无线数据连接的过程做出详细说明。
会议过程是观点发表和思维碰撞的过程,如果多个发言者同时发言可能会造成会议氛围混乱,导致参会者无法清楚地听到单个发言者的声音。因此,优选地处理方式是在同一时间仅允许一位发言者进行发言。具体地,建立与外方设备的无线数据连接的过程具体包括:
S1011,向所述外放设备发送独占数据连接请求;
S1012,如果接收到外放设备反馈的空闲状态,则直接建立独占数据连接,如果接收到外方设备反馈的连接状态,则自动重复发送所述独占数据连接请求直至建立独占数据连接。
在监听到发言者向应用程序输入的启动发言指令时,步骤S1011向所述外放设备发送独占数据连接请求,所述外放设备将返回状态信息,如步骤S1012所述,当所述外放设备未连接其它便携设备时,其将返回空闲状态;而如果所述外放设备正与其它便携设备进行数据交互中,则其将返回连接状态。步骤S1012在未监听到结束发言指令时,将持续发送所述独占数据连接请求直至与所述外放设备建立独占数据连接。当然,发言者也可通过结束发言指令随时结束向外放设备发送数据连接请求。
参考图4,以下再以一实施例对步骤S101中成功建立与所述外放设备的无线数据连接后的过程进行详细说明。
步骤S101中的无线数据连接作为后续步骤中音频流传输的通道,因此,成为音频流正常传输的必要条件。为了实现音频采集与音频传输的同步,优选地,可将成功建立与所述外放设备的无线数据连接作为开始发言的时机告知发言者。具体地,建立与外放设备的无线数据连接后的过程具体包括:
S2011,成功建立与所述外放设备的无线数据连接后生成提醒消息;
S2012,建立与显示设备的无线数据连接;
S2013,将所述提醒消息同步发送至所述显示设备进行显示;
其中,所述提醒消息中包含发言者的身份信息、具体位置、发言时间计时中的一种或多种信息。
在成功建立与所述外放设备的无线数据连接后,步骤S2011在便携终端中生成提醒消息,以告知发言者数据传输通道已通畅可以开始启动面向麦克的发言;与此同时,步骤S2012建立与显示设备的无线数据连接,所述显示设备可以是会场中的投影设备或者大尺寸显示器,无线连接的方式可使用会场中的WIFI或加入包含所述显示设备的VPN等方式;步骤S2013中,提醒消息将被发送到显示设备进行显示,显示方式可以是弹出窗口、置顶消息框等等,在此不作限定。
需要说明的是,步骤S2012可以如本实施例中位于S2011之后,也可不局限于该顺序,只要在需要与显示设备进行数据交互之前建立无线数据连接即可,设置可以在监听到启动发言指令之前,由此演变来的技术方案都属于本发明的保护范围。
本实施例,在发言者的声音由外方设备扩音播出之前,将发言者的详细信息显示在会场的显示设备中,提醒消息中的身份信息、具体位置等信息可为预置,由发言者自主设定,通过所述提醒消息,参会者可获知当前发言者是谁或者其个人情况简介等,以了解发言者的基本情况,并将外放设备中播放的声音与参会者进行对应。优选地,会场的摄像机可根据提醒消息中的具体位置信息将拍摄视角对准当前发言者,并将其图像信息同步显示在显示设备中,以使当前发言者的信息更全面、更突出。
由于会场的场地面积可能比较大,参会者可能无法看清显示设备上的具体内容,本实施例中,优选地,建立与显示设备的无线数据连接后还包括:
步骤S2014,同步获取所述显示设备的显示内容数据,并在所述便携设备的特定区域内同步展示所述显示设备的显示内容数据。
这样,参会者可在自己的便携终端上近距离观看显示设备的显示内容,为了不影响便携终端的其它操作,可将显示设备的显示内容数据展示在便携终端的特定区域,当然也可全屏显示,可有用户进行自主设置。
需要说明的是,步骤S2014不仅局限于本实施例中提供的位于步骤S2013之后,其只要在步骤S2012建立与所述显示设备的无线连接之后,即可独立于步骤S2013进行预显示设备的数据交互,由此演变来的方案都属于本发明的保护范围。
参考图5,以下再以一实施例对步骤S102进行详细说明。
步骤S102,进一步包括:
S1021,创建第一线程将所述麦克录制的所述音频数据经CodeC通道传送至音频数字处理器中进行编码,之后执行音频驱动并调用接口管理服务为所述应用层播放器提供访问所述音频数据的接口;
S1022,创建第二线程,调用接口管理服务将所述应用层播放器播放的音频数据输出,并对所述应用层播放器播放的音频数据进行同步录制以及编码生成音频流;
其中所述第一线程和第二现成相互独立且同步执行。
图5的右侧为音频录播过程,左侧为捕获音频生成音频流以及音频流发送过程。第一线程中,便携终端的麦克录制发言者的声音,经过CodeC通道传送至音频数字处理器中进行编码处理为音频数据,在经过音频驱动后存储至音频硬件抽象层Audio HAL中,接口管理服务,具体地可以是AudioFlinger服务,为应用层播放器提供访问音频数据的接口,应用层播放器得以从音频硬件抽象层提取音频数据进行播放。第二线程中,应用层播放器进行音频数据的播放时,接口管理服务,具体地可以是AudioFlinger服务,实现音频的输出以及音频参数的设置,输出的音频数据缓存在音频硬件抽象层AudioHAL中,并通过音频驱动传送至音频数字处理器中进行编码,之后通过创建MediaRecorder实例进行便携终端内部的音频捕获,并生成音频流。
经过第一线程和第二线程的同步执行,从麦克采集的音频数据经过便携终端的内部播放及播放后捕获,生成音频流,之后通过无线数据连接发送至外放设备。
本发明的另一个实施例中,无线数据连接的具体方式为:
通过WIFImiracast建立与所述外放设备的无线数据连接,以及采用RTP/RTCP将所述音频流实时传输至所述外放设备。RTP/RTCP协议可保证音频流侧实时传输及数据完整性。
参考图6,本发明实施例提供一种音频数据处理装置,包括:
监听响应模块11,用于实时监听到外部输入的启动发言指令时,建立与外放设备的无线数据连接,并启动便携终端的麦克;
执行模块12,用于调用所述麦克持续录制音频数据,并将所述音频数据传送至应用层播放器,之后捕获所述应用层播放器播放的音频数据并生成音频流;
无线连接模块13,用于通过无线数据连接将所述音频流发送至所述外放设备进行同步播放。
其中,监听响应模块11中,由用户在想要发言时向便携终端输入启动发言指令,其中所述启动发言指令可以是点按或长按在应用程序界面上的相应按钮,或者是其它指令形式,在此不作限定;在监听到启动发言指令时,调用便携终端的麦克使其处于工作状态,为音频数据的采集做准备,以及,建立与外方设备的无线数据连接,为音频的传输做好准备。
执行模块12执行的是音频采集过程,发言者可面对便携终端的麦克进行说话,执行模块12执行的实质是录播功能,即通过麦克录制音频数据,通过应用层播放器播放音频数据,同步地,通过对应用层播放器播放的音频数据进行捕获而生成待发送的音频流。其中,捕获应用层播放器播放的音频数据的过程中包括对音频数据的编码、命名等。
无线连接模块13中,外放设备在接收到音频流时对其进行解码并同步扩音播放,会场中的参会者就可听到与发言者的发言同步的外放声音。
本实施例中,便携终端包括手机、ipad、ipod、笔记本电脑等智能终端,只要具备自带麦克或可外接麦克部件即可,在此不作具体限定。便携终端可通过会场中的无线网络连接所述外放设备,或者可以加入包括所述外放设备的VPN中,实现无线数据连接,在此也不作具体限定。
本发明另一个实施例中,在监听响应模块11还用于:
在监听到结束发言指令后断开与所述外放设备的数据连接。
本实施例中,在监听到启动发言指令之后,通过麦克采集音频数据以及将音频传输至外放设备进行扩音播放过程中,还会实时地监听结束发言指令,如果未监听到结束发言指令,则上述音频采集及数据传输过程持续执行;如果监听到结束发言指令,则会断开与所述外放设备的数据连接。本发明实施例中,音频采集和数据传输过程是同步执行的,也即是音频采集结束时音频流已完整地发送到外放设备侧,在实际使用时,可在结束发言指令与断开数据连接操作指令之间设置预定的时间间隔,以避免网络延时等造成断开数据连接时音频流尚未完整发送的情况发生。
另外,所述启动发言指令和结束发言指令是相对而言,所述启动发言指令与所述结束发言指令相互独立;或者以所述启动发言指令的结束作为所述结束发言指令。
以下再以一实施例对监听响应模块11中建立与外放设备的无线数据连接的过程做出详细说明。
会议过程是观点发表和思维碰撞的过程,如果多个发言者同时发言可能会造成会议氛围混乱,导致参会者无法清楚地听到单个发言者的声音。因此,优选地处理方式是在同一时间仅允许一位发言者进行发言。具体地,监听响应模块进一步用于:
向所述外放设备发送独占数据连接请求;
如果接收到外放设备反馈的空闲状态,则直接建立独占数据连接,如果接收到外方设备反馈的连接状态,则自动重复发送所述独占数据连接请求直至建立独占数据连接。
在监听到发言者向应用程序输入的启动发言指令时,监听响应模块11向所述外放设备发送独占数据连接请求,所述外放设备将返回状态信息,当所述外放设备未连接其它便携设备时,其将返回空闲状态;而如果所述外放设备正与其它便携设备进行数据交互中,则其将返回连接状态。监听响应模块11在未监听到结束发言指令时,将持续发送所述独占数据连接请求直至与所述外放设备建立独占数据连接。当然,发言者也可通过结束发言指令随时结束向外放设备发送数据连接请求。
以下再以一实施例对监听响应模块11中成功建立与所述外放设备的无线数据连接后的过程进行详细说明。
监听响应模块11中的无线数据连接作为后续步骤中音频流传输的通道,因此,成为音频流正常传输的必要条件。为了实现音频采集与音频传输的同步,优选地,可将成功建立与所述外放设备的无线数据连接作为开始发言的时机告知发言者。具体地,监听响应模块11进一步用于:
成功建立与所述外放设备的无线数据连接后生成提醒消息;
建立与显示设备的无线数据连接;
将所述提醒消息同步发送至所述显示设备进行显示;
其中,所述提醒消息中包含发言者的身份信息、具体位置、发言时间计时中的一种或多种信息。
在成功建立与所述外放设备的无线数据连接后,监听响应模块11在便携终端中生成提醒消息,以告知发言者数据传输通道已通畅可以开始启动面向麦克的发言;与此同时,监听响应模块11建立与显示设备的无线数据连接,所述显示设备可以是会场中的投影设备或者大尺寸显示器,无线连接的方式可使用会场中的WIFI或加入包含所述显示设备的VPN等方式;监听响应模块11中,提醒消息将被发送到显示设备进行显示,显示方式可以是弹出窗口、置顶消息框等等,在此不作限定。
本实施例,在发言者的声音由外方设备扩音播出之前,将发言者的详细信息显示在会场的显示设备中,提醒消息中的身份信息、具体位置等信息可为预置,由发言者自主设定,通过所述提醒消息,参会者可获知当前发言者是谁或者其个人情况简介等,以了解发言者的基本情况,并将外放设备中播放的声音与参会者进行对应。优选地,会场的摄像机可根据提醒消息中的具体位置信息将拍摄视角对准当前发言者,并将其图像信息同步显示在显示设备中,以使当前发言者的信息更全面、更突出。
由于会场的场地面积可能比较大,参会者可能无法看清显示设备上的具体内容,本实施例中,优选地,无线连接模块13还用于,同步获取所述显示设备的显示内容数据;监听响应模块11还用于在所述便携设备的特定区域内同步展示所述显示设备的显示内容数据。
这样,参会者可在自己的便携终端上近距离观看显示设备的显示内容,为了不影响便携终端的其它操作,可将显示设备的显示内容数据展示在便携终端的特定区域,当然也可全屏显示,可有用户进行自主设置。
以下再以一实施例对执行模块12进行详细说明。
执行模块12,进一步用于:
创建第一线程将所述麦克录制的所述音频数据经CodeC通道传送至音频数字处理器中进行编码,之后执行音频驱动并调用接口管理服务为所述应用层播放器提供访问所述音频数据的接口;
创建第二线程,调用接口管理服务将所述应用层播放器播放的音频数据输出,并对所述应用层播放器播放的音频数据进行同步录制以及编码生成音频流;
其中所述第一线程和第二现成相互独立且同步执行。
图5的右侧为音频录播过程,左侧为捕获音频生成音频流以及音频流发送过程。第一线程中,便携终端的麦克录制发言者的声音,经过CodeC通道传送至音频数字处理器中进行编码处理为音频数据,在经过音频驱动后存储至音频硬件抽象层Audio HAL中,接口管理服务,具体地可以是AudioFlinger服务,为应用层播放器提供访问音频数据的接口,应用层播放器得以从音频硬件抽象层提取音频数据进行播放。第二线程中,应用层播放器进行音频数据的播放时,接口管理服务,具体地可以是AudioFlinger服务,实现音频的输出以及音频参数的设置,输出的音频数据缓存在音频硬件抽象层AudioHAL中,并通过音频驱动传送至音频数字处理器中进行编码,之后通过创建MediaRecorder实例进行便携终端内部的音频捕获,并生成音频流。
经过第一线程和第二线程的同步执行,从麦克采集的音频数据经过便携终端的内部播放及播放后捕获,生成音频流,之后通过无线数据连接发送至外放设备。
本发明的另一个实施例中,监听响应模块11中建立无线数据连接的具体方式为:
通过WIFImiracast建立与所述外放设备的无线数据连接,以及采用RTP/RTCP将所述音频流实时传输至所述外放设备。RTP/RTCP协议可保证音频流侧实时传输及数据完整性。
下面以会场为应用场景对本发明实施例提供的音频数据处理方法及装置作出进一步解释说明。
会场中设置有音频处理系统,包括外放设备、主麦克风以及多个便携终端,其中,在便携终端中实现本发明实施例中音频数据处理方法及装置的相关功能。所述主麦克风可以为一个或多个,当发言者数量较少时,外放设备仅连接所述主麦克风,当发言者数量较多时,本发明实施例中音频数据处理方法及装置向所述外放设备发起无线数据连接请求,当所述主麦克风与所述外放设备的连接断开且也没有其它便携终端与外放设备进行数据交互时,可直接建立与所述外放设备的无线数据连接;当所述主麦克风与所述外放设备的连接未断开或者有其它便携终端正与所述外放设备进行数据交互时,依据发言者输入的启动发言指令或结束发言指令进行无线数据连接请求的重复发送或结束发送。与外方设备连接的主麦克风的连接优先级高于所述便携设备的连接优先级,而多个便携设备的连接优先级可通过人工控制,例如多人要求发言时,主持人可从多个发言者之中选中某个允许其接入外放设备进行发言,也可根据每位发言者的身份信息进行优先级的预置,例如将专家的优先级设定为高于学生的优先级。
当发言者通过启动发言指令成功建立起与外方设备的无线数据连接后,通过调用便携终端的麦克进行发言的采集,并在便携终端内部软件架构的基础上通过应用层播放器播放音频数据以及通过创建录音实例实现终端内部的音频捕获,从而在便携终端内部生成音频流,之后通过无线数据连接将音频流传输至外放设备进行扩音播放。
本发明实施例提供的音频处理方法及装置,将便携终端作为麦克风应用到会议场景中,通过调用便携终端中既有的硬件及软件架构,将其麦克作为音频采集端,并通过其应用层播放器进行音频播放,以及在便携设备内部进行应用层播放器播放的音频数据的捕获、编码并生成音频流,之后将音频流发送至外放设备进行播放,从而实现发言者声音的扩音。便携设备的应用普遍性和携带方便性,使得其可随时加入到会场的音频处理系统中,无需增加麦克风的数量即可实现多个发言者的顺畅发言,在不增加成本的情况下,增加了会场中可用麦克风的数量,免去了麦克风传递的麻烦。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (16)
1.一种音频数据处理方法,其特征在于,包括:
实时监听到外部输入的启动发言指令时,建立与外放设备的无线数据连接,并启动便携终端的麦克;
调用所述麦克持续录制音频数据,并将所述音频数据传送至应用层播放器,之后捕获所述应用层播放器播放的音频数据并生成音频流;
通过无线数据连接将所述音频流发送至所述外放设备进行同步播放。
2.根据权利要求1所述的方法,其特征在于,还包括:
在监听到结束发言指令后断开与所述外放设备的数据连接。
3.根据权利要求1所述的方法,其特征在于,所述建立与外放设备的无线数据连接,进一步包括:
向所述外放设备发送独占数据连接请求;
如果接收到外放设备反馈的空闲状态,则直接建立独占数据连接,如果接收到外方设备反馈的连接状态,则自动重复发送所述独占数据连接请求直至建立独占数据连接。
4.根据权利要求1所述的方法,其特征在于,所述通过无线数据连接将所述音频数据发送至所述外放设备进行同步播放,进一步包括:
通过WIFI-miracast建立与所述外放设备的无线数据连接,以及采用RTP/RTCP将所述音频流实时传输至所述外放设备。
5.根据权利要求1所述的方法,其特征在于,所述调用所述麦克持续录制音频数据,并将所述音频数据传送至应用层播放器,之后捕获所述应用层播放器播放的音频数据并生成音频流,进一步包括:
创建第一线程将所述麦克录制的所述音频数据经CodeC通道传送至音频数字处理器中进行编码,之后执行音频驱动并调用接口管理服务为所述应用层播放器提供访问所述音频数据的接口;
创建第二线程,调用接口管理服务将所述应用层播放器播放的音频数据输出,并对所述应用层播放器播放的音频数据进行同步录制以及编码生成音频流;
其中所述第一线程和第二现成相互独立且同步执行。
6.根据权利要求1所述的方法,其特征在于,所述建立与外放设备的无线数据连接,进一步包括:
成功建立与所述外放设备的无线数据连接后生成提醒消息;
建立与显示设备的无线数据连接;
将所述提醒消息同步发送至所述显示设备进行显示;
其中,所述提醒消息中包含发言者的身份信息、具体位置、发言时间计时中的一种或多种信息。
7.根据权利要求6所述的方法,其特征在于,还包括:
同步获取所述显示设备的显示内容数据,并在所述便携设备的特定区域内同步展示所述显示设备的显示内容数据。
8.根据权利要求1所述的方法,其特征在于,所述启动发言指令与所述结束发言指令相互独立;或者以所述启动发言指令的结束作为所述结束发言指令。
9.一种音频数据处理装置,其特征在于,包括:
监听响应模块,用于实时监听到外部输入的启动发言指令时,建立与外放设备的无线数据连接,并启动便携终端的麦克;
执行模块,用于调用所述麦克持续录制音频数据,并将所述音频数据传送至应用层播放器,之后捕获所述应用层播放器播放的音频数据并生成音频流;
无线连接模块,用于通过无线数据连接将所述音频流发送至所述外放设备进行同步播放。
10.根据权利要求9所述的装置,其特征在于,所述监听响应模块,还用于:
在监听到结束发言指令后断开与所述外放设备的数据连接。
11.根据权利要求9所述的装置,其特征在于,所述监听响应模块,进一步用于:
向所述外放设备发送独占数据连接请求;
如果接收到外放设备反馈的空闲状态,则直接建立独占数据连接,如果接收到外方设备反馈的连接状态,则自动重复发送所述独占数据连接请求直至建立独占数据连接。
12.根据权利要求9所述的装置,其特征在于,所述无线连接模块,进一步用于:
通过WIFI-miracast建立与所述外放设备的无线数据连接,以及采用RTP/RTCP将所述音频流实时传输至所述外放设备。
13.根据权利要求9所述的装置,其特征在于,所述执行模块,进一步用于:
创建第一线程将所述麦克录制的所述音频数据经CodeC通道传送至音频数字处理器中进行编码,之后执行音频驱动并调用接口管理服务为所述应用层播放器提供访问所述音频数据的接口;
创建第二线程,调用接口管理服务将所述应用层播放器播放的音频数据输出,并对所述应用层播放器播放的音频数据进行同步录制以及编码生成音频流;
其中所述第一线程和第二现成相互独立且同步执行。
14.根据权利要求9所述的装置,其特征在于,所述监听响应模块,进一步用于:
成功建立与所述外放设备的无线数据连接后生成提醒消息;
建立与显示设备的无线数据连接;
将所述提醒消息同步发送至所述显示设备进行显示;
其中,所述提醒消息中包含发言者的身份信息、具体位置、发言时间计时中的一种或多种信息。
15.根据权利要求14所述的装置,其特征在于,所述无线连接模块,还用于:同步获取所述显示设备的显示内容数据;
所述监听响应模块,还用于在所述便携设备的特定区域内同步展示所述显示设备的显示内容数据。
16.根据权利要求9所述的装置,其特征在于,所述启动发言指令与所述结束发言指令相互独立;或者以所述启动发言指令的结束作为所述结束发言指令。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510872732.4A CN105912295A (zh) | 2015-12-01 | 2015-12-01 | 一种音频数据处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510872732.4A CN105912295A (zh) | 2015-12-01 | 2015-12-01 | 一种音频数据处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105912295A true CN105912295A (zh) | 2016-08-31 |
Family
ID=56744160
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510872732.4A Pending CN105912295A (zh) | 2015-12-01 | 2015-12-01 | 一种音频数据处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105912295A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107820099A (zh) * | 2017-05-12 | 2018-03-20 | 北京君林科技股份有限公司 | 一种多媒体流的生成方法及装置 |
CN109068088A (zh) * | 2018-09-20 | 2018-12-21 | 明基智能科技(上海)有限公司 | 基于用户便携终端的会议交互方法、装置及系统 |
CN110213323A (zh) * | 2018-02-28 | 2019-09-06 | 基斯特勒控股公司 | 通信系统 |
CN112751978A (zh) * | 2019-10-29 | 2021-05-04 | 富泰华工业(深圳)有限公司 | 扩音控制方法及移动终端 |
CN112803907A (zh) * | 2021-03-17 | 2021-05-14 | 统信软件技术有限公司 | 一种提供音频播放服务的系统和方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101304574A (zh) * | 2008-06-12 | 2008-11-12 | 深圳凯虹移动通信有限公司 | 一种移动通信终端的电话留言方法 |
CN102055683A (zh) * | 2009-10-30 | 2011-05-11 | 腾讯科技(深圳)有限公司 | 一种分享音乐数据的方法、装置和系统 |
CN102420010A (zh) * | 2011-10-17 | 2012-04-18 | 苏州阔地网络科技有限公司 | 一种音频录制方法及系统 |
CN103037086A (zh) * | 2012-12-11 | 2013-04-10 | 腾讯科技(上海)有限公司 | 移动设备实现麦克风的方法、音频播放方法、设备及系统 |
CN103619073A (zh) * | 2013-11-08 | 2014-03-05 | 上海斐讯数据通信技术有限公司 | 一种基于wlan的音频共享方法及移动终端 |
CN104486670A (zh) * | 2014-12-09 | 2015-04-01 | 四川长虹电器股份有限公司 | 家庭ktv实现方法 |
-
2015
- 2015-12-01 CN CN201510872732.4A patent/CN105912295A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101304574A (zh) * | 2008-06-12 | 2008-11-12 | 深圳凯虹移动通信有限公司 | 一种移动通信终端的电话留言方法 |
CN102055683A (zh) * | 2009-10-30 | 2011-05-11 | 腾讯科技(深圳)有限公司 | 一种分享音乐数据的方法、装置和系统 |
CN102420010A (zh) * | 2011-10-17 | 2012-04-18 | 苏州阔地网络科技有限公司 | 一种音频录制方法及系统 |
CN103037086A (zh) * | 2012-12-11 | 2013-04-10 | 腾讯科技(上海)有限公司 | 移动设备实现麦克风的方法、音频播放方法、设备及系统 |
CN103619073A (zh) * | 2013-11-08 | 2014-03-05 | 上海斐讯数据通信技术有限公司 | 一种基于wlan的音频共享方法及移动终端 |
CN104486670A (zh) * | 2014-12-09 | 2015-04-01 | 四川长虹电器股份有限公司 | 家庭ktv实现方法 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107820099A (zh) * | 2017-05-12 | 2018-03-20 | 北京君林科技股份有限公司 | 一种多媒体流的生成方法及装置 |
CN110213323A (zh) * | 2018-02-28 | 2019-09-06 | 基斯特勒控股公司 | 通信系统 |
CN110213323B (zh) * | 2018-02-28 | 2021-10-01 | 基斯特勒控股公司 | 通信系统 |
CN109068088A (zh) * | 2018-09-20 | 2018-12-21 | 明基智能科技(上海)有限公司 | 基于用户便携终端的会议交互方法、装置及系统 |
CN112751978A (zh) * | 2019-10-29 | 2021-05-04 | 富泰华工业(深圳)有限公司 | 扩音控制方法及移动终端 |
CN112803907A (zh) * | 2021-03-17 | 2021-05-14 | 统信软件技术有限公司 | 一种提供音频播放服务的系统和方法 |
CN112803907B (zh) * | 2021-03-17 | 2021-07-16 | 统信软件技术有限公司 | 一种提供音频播放服务的系统和方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102209230B (zh) | 一种具有主会场控制模块的视频会议系统 | |
CN105912295A (zh) | 一种音频数据处理方法及装置 | |
CN106789914B (zh) | 一种多媒体会议控制方法和系统 | |
CN104253814B (zh) | 一种流媒体处理方法、服务器及浏览器 | |
CN101179694B (zh) | 一种电视电话会议的发布系统及方法 | |
US9160551B2 (en) | Analytic recording of conference sessions | |
US8373743B2 (en) | System and method for playing back individual conference callers | |
CN104883344B (zh) | 协商媒体能力的方法和设备 | |
CN105959614A (zh) | 一种视频会议的处理方法及系统 | |
WO2014154065A2 (zh) | 传输数据方法、媒体采集设备、视频会议终端及存储介质 | |
CN109068088A (zh) | 基于用户便携终端的会议交互方法、装置及系统 | |
WO2024159973A1 (zh) | 视频会议实现方法、装置、设备及存储介质 | |
CN101631032B (zh) | 实现多语言会议的方法、装置和系统 | |
WO2012034329A1 (zh) | 视频通话中视频录制的方法及装置 | |
CN114979545A (zh) | 多终端的通话方法和存储介质及电子设备 | |
CN107493453A (zh) | 用于网状端对端视频会议的系统和方法 | |
WO2016206471A1 (zh) | 多媒体业务处理方法、系统及装置 | |
CN206042060U (zh) | 一种移动远程协助系统 | |
CN105915837B (zh) | 一种视频切换方法、装置和系统 | |
CN107343080A (zh) | 一种自动拨号并在通话过程中能够传输音频数据的方法 | |
CN209283373U (zh) | 一种数字会议系统 | |
CN210053486U (zh) | 一种远程会议声音接收装置 | |
TWI548278B (zh) | 音視訊同步控制設備及方法 | |
JP2005341202A (ja) | 携帯端末装置、通信切換プログラム、通信切換方法、及びテレビ会議システム | |
CN112087659A (zh) | 一种在电视端教育直播的多人智能语音通话的装置及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20160831 |