CN113377329B - 一种虚拟音频设备、音频数据处理方法及装置 - Google Patents
一种虚拟音频设备、音频数据处理方法及装置 Download PDFInfo
- Publication number
- CN113377329B CN113377329B CN202110745845.3A CN202110745845A CN113377329B CN 113377329 B CN113377329 B CN 113377329B CN 202110745845 A CN202110745845 A CN 202110745845A CN 113377329 B CN113377329 B CN 113377329B
- Authority
- CN
- China
- Prior art keywords
- audio data
- data
- audio
- local
- network
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 23
- 238000012545 processing Methods 0.000 claims abstract description 40
- 230000005540 biological transmission Effects 0.000 claims description 26
- 238000000034 method Methods 0.000 claims description 20
- 230000005284 excitation Effects 0.000 claims description 4
- 230000030279 gene silencing Effects 0.000 abstract description 3
- 238000013468 resource allocation Methods 0.000 abstract description 2
- 230000015654 memory Effects 0.000 description 25
- 238000004891 communication Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 238000003379 elimination reaction Methods 0.000 description 5
- 238000010276 construction Methods 0.000 description 3
- 230000008030 elimination Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 238000000265 homogenisation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/162—Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
本发明提供了一种虚拟音频设备、音频数据处理方法及装置,其中虚拟音频设备,包括:录音设备阵列,包括多个录音设备,用于采集对应区域的网络音频数据,并对采集的网络音频数据进行处理,以确定本地音频数据;音频路由器,用于将网络音频数据传送给对应的录音设备,并将本地音频数据传送给输出设备,其中输出设备与录音设备一一对应,以实现本地音频数据对于所有输出设备的共享。本发明无需多组音频拾音、消音设备对音频进行处理,通过录音设备阵列和音频路由器对音频进行采集共享与传输,对音频质量损失小并且成本低,保证了本地音频数据对于所有输出设备的共享,节省硬件资源配置。
Description
技术领域
本发明涉及音频数据处理技术领域,具体涉及一种虚拟音频设备、音频数据处理方法及装置。
背景技术
随着录播课室的建设的普及,越来越多的学校大面积建设录播课室。但现有的录播课室需要用数字消噪拾音器保证现场音频的清晰度,但是声音在消噪的过程中声音的音质变音大,然而用多个吊顶话筒,再用数字音频矩阵拾音,声音好,但造价高,施工难度大,不利于大面积推广,并且当有多个应用同时需要采集物理接口音频数据时,在系统上因为打开设备具有独占性,造成其他应用不能打开读取同一音频设备,又或者多个应用需要采集不同的声音源时,势必要接多个物理音频接口,造成设备的扩展性不好,又对设备增加多个额外的接口,当要播放某个音视频文件时,电脑的播放出来的声音对方听不到,只能看到无声的图像,无法保证网络音频与本地音频的共享。因此如何实现低成本的网络音频与本地音频的共享具有重要意义。
发明内容
有鉴于此,本发明实施例提供了一种虚拟音频设备、音频数据处理方法及装置,解决现有技术中不能实现多个应用对同一声源的快速共享问题。
根据第一方面,本发明实施例提供了一种虚拟音频设备,所述设备包括:
录音设备阵列,包括多个录音设备,用于采集对应区域的网络音频数据,并对采集的所述网络音频数据进行处理,以确定本地音频数据;
音频路由器,用于将所述网络音频数据传送给对应的录音设备,并将所述本地音频数据传送给输出设备,所述输出设备与所述录音设备一一对应,以实现所述本地音频数据对于所有输出设备的共享。
本发明实施例提供的虚拟音频设备,无需多组音频拾音、消音设备对音频进行处理,通过录音设备阵列和音频路由器对音频进行采集共享与传输,对音频质量损失小并且成本低,保证了本地音频数据对于所有输出设备的共享,节省硬件资源配置。
结合第一方面,在第一方面第一实施方式中,所述设备还包括:
语音激励单元,用于检测外部音频数据,并确定所述外部音频数据对应的当前活动区域,以根据所述当前活动区域调整摄像头拍摄的场景。
结合第一方面,在第一方面第二实施方式中,所述录音设备还包括:
接口单元,用于确定所述网络音频数据以及所述本地音频数据的数据类型;
解码单元,用于对所述网络音频数据进行解码,以确定对应的本地音频数据。
结合第一方面第二实施方式,在第一方面第三实施方式中,所述接口单元还包括:
输入接口子单元,用于确定所述网络音频数据的数据类型,以接收所述网络音频数据;
输出接口子单元,用于确定所述本地音频数据的数据类型,并将所述本地音频数据的数据类型发送至输出设备。
根据第二方面,本发明实施例提供了一种音频数据处理方法,所述方法包括:
利用当前录音设备获取外部传输的网络音频数据;
对所述网络音频数据进行处理,转换为本地音频数据;
将所述本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备,并将各个录音设备的本地音频数据进行组合,以实现所述本地音频数据对于所有输出设备的共享。
本发明实施例提供的音频数据处理方法,将网络音频数据接入并转换本地音频数据,使得数据应用范围较广,同时可以提供所需内存数据。
结合第二方面,在第二方面第一实施方式中,所述对所述网络音频数据进行处理,转换为本地音频数据,包括:
对所述网络音频数据进行解码,确定解码后的音频数据;
将解码后的音频数据按照数据标识存储至当前录音设备,利用各个数据标识确定对应的本地音频数据。
结合第二方面,在第二方面第二实施方式中,在所述利用当前录音设备获取外部传输的网络音频数据之后,所述方法还包括:
降低当前录音设备对应的输出设备的输出音频的音量,并根据预设音量要求增加其他所有输出设备的输出音频的音量。
本发明实施例提供的音频数据处理方法,通过对音频的音量进行控制,既能很好的消除拾音的噪音,又不至于让声音变音大。
结合第二方面,在第二方面第三实施方式中,所述将所述本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备,并将各个录音设备的本地音频数据进行组合,包括:
获取各个录音设备之间的数据连接关系;
根据所述数据连接关系,将所述本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备;
将各个录音设备的本地音频数据进行组合,以确定各个录音设备都包含所有录音设备的本地音频数据。
结合第二方面或者任意一个实施方式,在第二方面第四实施方式中,所述方法还包括:
当所述当前录音设备获取到外部传输的网络音频数据时,根据所述网络音频数据中的方向数据信息,确定数据的传输方向;
根据所述传输方向将预设范围内的区域确定教学显示区域。
根据第三方面,本发明实施例还提供了一种音频数据处理装置,包括:
第一处理模块,用于利用当前录音设备获取外部传输的网络音频数据;
第二处理模块,用于对所述网络音频数据进行处理,转换为本地音频数据;
第三处理模块,用于将所述本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备,并将各个录音设备的本地音频数据进行组合,以实现所述本地音频数据对于所有输出设备的共享。
结合第三方面,在第三方面第一实施方式中,所述第二处理模块,包括:
解码模块,用于对所述网络音频数据进行解码,确定解码后的音频数据;
存储模块,用于将解码后的音频数据按照数据标识存储至当前录音设备,利用各个数据标识确定对应的本地音频数据。
结合第三方面,在第三方面第二实施方式中,所述装置,还包括:
第四处理模块,用于降低当前录音设备对应的输出设备的输出音频的音量,并根据预设音量要求增加其他所有输出设备的输出音频的音量。
结合第三方面,在第三方面第三实施方式中,所述第三处理模块,包括:
第三子模块,用于获取各个录音设备之间的数据连接关系;
传输子模块,用于根据所述数据连接关系,将所述本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备;
组合子模块,用于将各个录音设备的本地音频数据进行组合,以确定各个录音设备都包含所有录音设备的本地音频数据。
结合第三方面或者任意一个实施方式,在第三方面第四实施方式中,所述装置,还包括:
方向确定模块,用于当所述当前录音设备获取到外部传输的网络音频数据时,根据所述网络音频数据中的方向数据信息,确定数据的传输方向;
区域确定模块,用于根据所述传输方向将预设范围内的区域确定教学显示区域。
根据第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储计算机指令,所述计算机指令用于使所述计算机执行第二方面或者第二方面的任意一种实施方式中所述的音频数据处理方法。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明实施例的虚拟音频设备的示意图;
图2是根据本发明实施例的录音设备阵列的示意图;
图3是根据本发明实施例的音频数据处理方法的流程图;
图4是根据本发明实施例的音频数据处理方法的另一具体流程图;
图5是根据本发明实施例的利用智慧黑板授课的示意图;
图6是根据本发明实施例的音频数据处理方法的另一流程图;
图7是根据本发明实施例的音频数据处理装置的结构框图;
图8是本发明实施例提供的电子设备的硬件结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明实施例中的电子设备可以是智能交互设备,例如,手机、平板等等,在此对其并不做任何限制。
现有的录播课室需要用数字消噪拾音器保证现场音频的清晰度,但是声音在消噪的过程中声音的音质变音大,然而用多个吊顶话筒,再用数字音频矩阵拾音,声音好,但造价高,施工难度大,不利于大面积推广,并且当有多个应用同时需要采集物理接口音频数据时,在系统上因为打开设备具有独占性,造成其他应用不能打开读取同一音频设备,又或者多个应用需要采集不同的声音源时,势必要接多个物理音频接口,造成设备的扩展性不好,又对设备增加多个额外的接口,这种方式必然不可取。因此,需要解决现有技术中多个应用对同一声源实现快速共享,物理本地音频跟网络音频在同一设备上分离播放,并且也可对远程音频和本地音频分离,防止串音,对分离的每一路音频数据单独做处理后再输出,扩展性好。
根据本发明实施例,提供了一种虚拟音频设备实施例,如图1所示,虚拟音频设备包括录音设备阵列01和音频路由器02,具体地,录音设备阵列01,包括多个录音设备,用于采集对应区域的网络音频数据(流媒体音频数据),并对采集的网络音频数据进行处理,以确定本地音频数据;在录音设备采集到网络音频数据后,通过音频路由器02进行数据传输,其中音频路由器02可以采用“九宫格环形”音频路由器,具有独立的音频数据处理模块,具有快速输入和智能选择输出给对应的设备,实现虚拟链路与现实链路同质化效果。因此上述的音频路由器02,用于将网络音频数据传送给对应的录音设备,并将本地音频数据传送给输出设备03。为了保证播放声音与网络音频保持平衡,需要保证输出设备的数量与录音设备一一对应,以实现本地音频数据对于所有输出设备的共享。需要说明的是,本实施例仅以九宫格环形为例进行说明,具体形状和数量都与录音设备保持一致即可。
以录音设备阵列1为9个设备为例进行说明,为了保证全方位的音频采集与播放,优选地设置9个设备的录音设备阵列1如图2所示,录音设备为虚拟音频,在整个教室区域的虚拟音频1至9分别对应教室区域左前方、左边、左后方、后面、右后方、右边、右前方、前面以及中间的音频采集。然后将采集的音频存储为本地音频数据,然后通过音频路由器,将本地音频数据传送给输出设备,以实现本地音频数据对于所有输出设备的共享。需要说明的是,本实施例仅以9个录音设备(虚拟音频)为例进行说明,在实际应用中可以根据实际采集区域的情况进行增加或者减少,本实施例仅以此为例并不以此为限。
本实施例采集外部网络传输的音频数据,使用虚拟音频设备驱动将外部音视频数据(网络音频)转换为内部音视频数据(本地音频),并且虚拟音视频设备驱动也提供音频模块所需的内存数据,其中1个虚拟音视频设备驱动可以共享给任意设备。
本发明实施例提供的虚拟音频设备,无需多组音频拾音、消音设备对音频进行处理,通过录音设备阵列和音频路由器对音频进行采集共享与传输,对音频质量损失小并且成本低,保证了本地音频数据对于所有输出设备的共享。
在另一实施例中,上述的虚拟音频设备还包括:语音激励单元,用于检测外部音频数据,并确定外部音频数据对应的当前活动区域,以根据当前活动区域调整摄像头拍摄的场景。还以上述虚拟音频为例,语音激励单元当检测到9个方位中有持续的声音在讲话,则使当前区域为活动区域,摄像头拍摄当前多个画面;当左边方位有人说话,则调整摄像头拍摄切换到拍摄左边区域使其为特写画面;当检测到有两个方位说话,则调整摄像头为中景画面,使其两人都在镜头当中;当多个方位说话则拍摄整个画面。以保证当前活动区域中的所有人均在视频画面中。
具体地,上述录音设备还包括:接口单元,用于确定网络音频数据以及本地音频数据的数据类型,其中接口单元还包括输入接口子单元,用于确定网络音频数据的数据类型,以接收网络音频数据;输出接口子单元,用于确定本地音频数据的数据类型,并将本地音频数据的数据类型发送至输出设备。需要说明的是,接口单元也可以利用组件的属性Pin键来实现,组件主体可以对内部音视频数据进行处理,组件输入Pin可以指定接收的媒体数据类型,告知进来的数据必须是输入Pin能支持的数据,输出Pin指定输出后的媒体数据类型,告知接下来数据使用者接收后的媒体数据类型格式。在实际应用中,网络音频数据在传输过程中会进行压缩编码等操作,以便于数据安全以及传输的高效性,因此在采集到网络音频后需要利用解码单元对网络音频数据进行解码,以确定对应的本地音频数据。
根据本发明实施例,提供了一种音频数据处理方法实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
在本实施例中提供了一种音频数据处理方法,可用于上述的虚拟音频设备,图3是根据本发明实施例的音频数据处理方法的流程图,如图3所示,该流程包括如下步骤:
S11,利用当前录音设备获取外部传输的网络音频数据。
首先确定出当前的网络音频数据的传输方位,其中传输方位的确定可以利用现有的技术进行确定,利用传输方位确定当前录音设备,利用录音设备阵列中的当前录音设备获取外部传输的网络音频数据。
S12,对网络音频数据进行处理,转换为本地音频数据。
采集到网络音频数据之后,对网络音频数据进行处理,转换为本地音频数据以便于后续的共享,具体地对网络音频数据进行处理的步骤将在下文进行描述。
S13,将本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备,并将各个录音设备的本地音频数据进行组合,以实现本地音频数据对于所有输出设备的共享。进行音频传输后,将当前情况下的各个录音设备的本地音频数据进行组合,以实现本地音频数据对于所有输出设备的共享,保证各个输出设备播放音频的一致性。关于该步骤的描述将在下文进行详细阐述。
本实施例提供的音频数据处理方法,将网络音频数据接入并转换本地音频数据,使得数据应用范围较广,同时可以提供所需内存数据。
在本实施例中提供了一种音频数据处理方法,可用于上述的虚拟音频设备,图4是根据本发明实施例的音频数据处理方法的流程图,如图4所示,该流程包括如下步骤:
S21,利用当前录音设备获取外部传输的网络音频数据。
具体的获取过程详细请参见图1所示实施例的S11,在此不再赘述。
S22,对网络音频数据进行处理,转换为本地音频数据。
具体地,上述S22可以包括如下步骤:
S221,对网络音频数据进行解码,确定解码后的音频数据。
在音频数据传输过程中,为了保证传输效率以及数据的安全性,可能需要对网络音频数据进行编码后传输,因此在获取到网络音频数据后首先需要对其进行解码,解码方式就是利用现有的技术进行解码,确定解码后的音频数据。
S222,将解码后的音频数据按照数据标识存储至当前录音设备,利用各个数据标识确定对应的本地音频数据。例如每个录音设备都是独占形式,每个需要调用的模块分别占用一条虚拟的音频线来进行数据交换,对应于上述虚拟音频,需要a1至a9,9条虚拟音频线,虚拟音频1把网络中的网络音频数据解码后保存在本地,然后将本地音频数据复制一份通过音频路由器将复制好的数据传到相邻的虚拟音频2,同样虚拟音频2解码网络中的音频数据存于2本地,然后按照数据标识确定出存储的本地音频数据,此时虚拟音频2声音包含虚拟音频1过来的数据和自己的本地数据,和a9解码网络后的音频数据,以此类推,进而板子每路虚拟音频都包含虚拟音频1至9所有线路的数据。
具体地,在一实施例中,在上述S21之后,音频数据处理方法还包括:
S201,降低当前录音设备对应的输出设备的输出音频的音量,并根据预设音量要求增加其他所有输出设备的输出音频的音量。其中知道某个区域过来的声音后,在当前位置调节输出音量小,在其他区域调节音量大,使得声音大小保持一致。
S23,将本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备,并将各个录音设备的本地音频数据进行组合。
具体地,上述S23可以包括如下步骤:
S231,获取各个录音设备之间的数据连接关系。
以上述9个虚拟音频为例,首先获取各个录音设备(虚拟音频)的数据连接关系,虚拟音频9需要将本地音频数据分别传输给虚拟音频2、4、6和8,虚拟音频1与2连接,2与3连接,以此类推,直到虚拟音频8将数据传输给虚拟音频1形成回路,进而保证每个录音设备能获取到所有方位的音频数据。需要说明的是,本实施例仅以上述连接关系为例进行说明,在实际应用中还可以有其他连接关系,本实施例并不以此为限。
S232,根据数据连接关系,将本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备。
S233,将各个录音设备的本地音频数据进行组合,以确定各个录音设备都包含所有录音设备的本地音频数据。
例如,虚拟音频1把网络中的音频数据解码后保存在本地,同时把本地音频数据拷贝一份通过音频路由传到相邻的虚拟音频2,同样虚拟音频2解码网络中的音频数据存于虚拟音频2本地,此时虚拟音频2声音包含虚拟音频1过来的数据和自己的虚拟音频2数据,和虚拟音频9解码网络后的音频数据。然后同样虚拟音频2传给相邻的虚拟音频3,则虚拟音频3的音频数据包含有虚拟音频1+2+3的数据,同理虚拟音频4包含虚拟音频1+2+3+4+9的数据,在虚拟音频2中有存在虚拟音频9的数据,在虚拟音频4中判断后只会存在一条虚拟音频9的数据;在一轮循环完后,每路虚拟音频都包含有虚拟音频1+2+3+4+5+6+7+8+9的数据。
在一具体实施例中,本实施例提供的方法还包括:
S24,当当前录音设备获取到外部传输的网络音频数据时,根据网络音频数据中的方向数据信息,确定数据的传输方向。
具体地,如图5所示,当当前录音设备获取到网络音频数据后,读取网络音频数据中的方向数据信息,进而确定出数据的传输方向,例如左右某个方位有人走动,老师走动后就会切换相应方位的应用软件,便于操作。
S25,根据传输方向将预设范围内的区域确定教学显示区域。例如,当老师在多媒体智慧黑板进行板书时,讲解需要操作某些应用软件,当老师走到右边区域时,需要操作左边的某个应用,则必须走到左边才能进行操作,因此需要启动左边的区域,因此对应传输方向上的预设范围内的区域确定为教学显示区域。
本实施例提供的音频数据处理方法,将网络音频数据接入并转换本地音频数据,使得数据应用范围较广,同时可以提供所需内存数据;通过对音频的音量进行控制,既能很好的消除拾音的噪音,又不至于让声音变音大。
在本实施例中提供了一种音频数据处理方法,如图6所示,以9个虚拟音频为例,可用于上述的虚拟音频设备,该流程包括如下步骤:
虚拟音频原理通过组件-内核模块系统上创建多个虚拟的录音设备,虚拟设备对外部提供外部设置接口,内部形成播放和录音设备之间形成监听,声音输出到输出设备,然后会回传到录音设备。
S31,虚拟的录音设备,每个都是独占形式,让每个需要调用的模块分别占用一条虚拟音频线a1~a9。
S32,虚拟虚拟音频设备a1把网络中的音频数据解码后保存在本地,同时把本地音频数据拷贝一份通过音频路由传到相邻的虚拟a2,同样a2解码网络中的音频数据存于a2本地,此时虚拟a2声音包含a1过来的数据和自己的a2数据,和a9解码网络后的音频数据。
S33,同样虚拟音频a2传给相邻的a3,则a3的音频数据包含有a1+a2+a3的数据,同理a4包含a1+a2+a3+a4+a9的数据,在a2中有存在a9的数据,在a4中判断后只会存在一条a9的数据;在一轮循环完后,每路虚拟音频都包含有a1+a2+a3+a4+a5+a6+a7+a8+a9的数据。
S34,通过筛选需要把哪里音频数据传送出去即可满足任意声音的组合后控制这些声音的发送,共享给其他终端解码播放。
实现上述步骤S31,步骤S32,步骤S33。之后还包括:
S331,假如当检测有a2有声音过来时,就可以知道对应教室区域左边有人说话,知道方向后有针对的做噪音消除和回声抑制,噪音消除和回声抑制采用现有技术实现,当前模块只是可以快速处理解决时延和处理效果。
S332,另外知道某个区域过来的声音后,在当前位置调节输出音量小,在其他区域调节音量大,使得声音大小保持一致。
本实施例提供一种音频数据处理装置,如图7所示,包括:
第一处理模块41,用于利用当前录音设备获取外部传输的网络音频数据;
第二处理模块42,用于对网络音频数据进行处理,转换为本地音频数据;
第三处理模块43,用于将本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备,并将各个录音设备的本地音频数据进行组合,以实现本地音频数据对于所有输出设备的共享。
在本实施例的一些可选实施方式中,第二处理模块,包括:
解码模块,用于对网络音频数据进行解码,确定解码后的音频数据;
存储模块,用于将解码后的音频数据按照数据标识存储至当前录音设备,利用各个数据标识确定对应的本地音频数据。
可选地,本实施例提供的装置,还包括:
第四处理模块,用于降低当前录音设备对应的输出设备的输出音频的音量,并根据预设音量要求增加其他所有输出设备的输出音频的音量。
可选地,第三处理模块,包括:
第三子模块,用于获取各个录音设备之间的数据连接关系;
传输子模块,用于根据数据连接关系,将本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备;
组合子模块,用于将各个录音设备的本地音频数据进行组合,以确定各个录音设备都包含所有录音设备的本地音频数据。
可选地,本实施例提供的装置,还包括:
方向确定模块,用于当当前录音设备获取到外部传输的网络音频数据时,根据网络音频数据中的方向数据信息,确定数据的传输方向;
根据传输方向将预设范围内的区域确定教学显示区域。
上述各个模块的更进一步的功能描述与上述对应实施例相同,在此不再赘述。
本发明实施例还提供一种电子设备,具有上述图7所示的音频数据处理装置。
请参阅图8,图8是本发明可选实施例提供的一种电子设备的结构示意图,如图8所示,该电子设备可以包括:至少一个处理器61,例如CPU(Central Processing Unit,中央处理器),至少一个通信接口63,存储器64,至少一个通信总线62。其中,通信总线62用于实现这些组件之间的连接通信。其中,通信接口63可以包括显示屏(Display)、键盘(Keyboard),可选通信接口63还可以包括标准的有线接口、无线接口。存储器64可以是高速RAM存储器(Random Access Memory,易挥发性随机存取存储器),也可以是非不稳定的存储器(non-volatilememory),例如至少一个磁盘存储器。存储器64可选的还可以是至少一个位于远离前述处理器61的存储装置。其中处理器61可以结合图7所描述的装置,存储器64中存储应用程序,且处理器61调用存储器64中存储的程序代码,以用于执行上述任一方法步骤。
其中,通信总线62可以是外设部件互连标准(peripheral componentinterconnect,简称PCI)总线或扩展工业标准结构(extended industry standardarchitecture,简称EISA)总线等。通信总线62可以分为地址总线、数据总线、控制总线等。为便于表示,图8中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
其中,存储器64可以包括易失性存储器(英文:volatilememory),例如随机存取存储器(英文:random-accessmemory,缩写:RAM);存储器也可以包括非易失性存储器(英文:non-volatilememory),例如快闪存储器(英文:flashmemory),硬盘(英文:hard diskdrive,缩写:HDD)或固态硬盘(英文:solid-statedrive,缩写:SSD);存储器64还可以包括上述种类的存储器的组合。
其中,处理器61可以是中央处理器(英文:central processing unit,缩写:CPU),网络处理器(英文:networkprocessor,缩写:NP)或者CPU和NP的组合。
其中,处理器61还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路(英文:application-specific integrated circuit,缩写:ASIC),可编程逻辑器件(英文:programmable logic device,缩写:PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(英文:complex programmable logic device,缩写:CPLD),现场可编程逻辑门阵列(英文:field-programmable gate array,缩写:FPGA),通用阵列逻辑(英文:generic arraylogic,缩写:GAL)或其任意组合。
可选地,存储器64还用于存储程序指令。处理器61可以调用程序指令,实现如本申请的音频数据处理方法。
本发明实施例还提供了一种非暂态计算机存储介质,计算机存储介质存储有计算机可执行指令,该计算机可执行指令可执行上述任意方法实施例中的音频数据处理方法。其中,存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)、随机存储记忆体(Random Access Memory,RAM)、快闪存储器(FlashMemory)、硬盘(Hard Disk Drive,缩写:HDD)或固态硬盘(Solid-StateDrive,SSD)等;存储介质还可以包括上述种类的存储器的组合。
虽然结合附图描述了本发明的实施例,但是本领域技术人员可以在不脱离本发明的精神和范围的情况下做出各种修改和变型,这样的修改和变型均落入由所附权利要求所限定的范围之内。
Claims (8)
1.一种虚拟音频设备,其特征在于,包括:
录音设备阵列,包括多个录音设备,用于采集对应区域的网络音频数据,并对采集的所述网络音频数据进行处理,以确定本地音频数据;
音频路由器,用于将所述网络音频数据进行处理后传送给对应的录音设备,并将所述本地音频数据传送给输出设备,其中所述音频路由器与所述录音设备一一对应,所述输出设备与所述录音设备一一对应,以实现所述本地音频数据对于所有输出设备的共享;
语音激励单元,用于检测外部音频数据,并确定所述外部音频数据对应的当前活动区域,以根据所述当前活动区域调整摄像头拍摄的场景。
2.根据权利要求1所述的设备,其特征在于,所述录音设备还包括:
接口单元,用于确定所述网络音频数据以及所述本地音频数据的数据类型;
解码单元,用于对所述网络音频数据进行解码,以确定对应的本地音频数据。
3.根据权利要求2所述的设备,其特征在于,所述接口单元还包括:
输入接口子单元,用于确定所述网络音频数据的数据类型,以接收所述网络音频数据;
输出接口子单元,用于确定所述本地音频数据的数据类型,并将所述本地音频数据的数据类型发送至输出设备。
4.一种音频数据处理方法,其特征在于,应用于虚拟音频设备中,所述方法包括:
利用当前录音设备获取外部传输的网络音频数据;
对所述网络音频数据进行处理,转换为本地音频数据;
将所述本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备,并将各个录音设备的本地音频数据进行组合,以实现所述本地音频数据对于所有输出设备的共享;
当所述当前录音设备获取到外部传输的网络音频数据时,根据所述网络音频数据中的方向数据信息,确定数据的传输方向;
根据所述传输方向将预设范围内的区域确定教学显示区域。
5.根据权利要求4所述的方法,其特征在于,所述对所述网络音频数据进行处理,转换为本地音频数据,包括:
对所述网络音频数据进行解码,确定解码后的音频数据;
将解码后的音频数据按照数据标识存储至当前录音设备,利用各个数据标识确定对应的本地音频数据。
6.根据权利要求4所述的方法,其特征在于,在所述利用当前录音设备获取外部传输的网络音频数据之后,所述方法还包括:
降低当前录音设备对应的输出设备的输出音频的音量,并根据预设音量要求增加其他所有输出设备的输出音频的音量。
7.根据权利要求4所述的方法,其特征在于,所述将所述本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备,并将各个录音设备的本地音频数据进行组合,包括:
获取各个录音设备之间的数据连接关系;
根据所述数据连接关系,将所述本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备;
将各个录音设备的本地音频数据进行组合,以确定各个录音设备都包含所有录音设备的本地音频数据。
8.一种音频数据处理装置,其特征在于,包括:
第一处理模块,用于利用当前录音设备获取外部传输的网络音频数据;
第二处理模块,用于对所述网络音频数据进行处理,转换为本地音频数据;
第三处理模块,用于将所述本地音频数据通过音频路由器传输至与当前录音设备进行数据连接的录音设备,并将各个录音设备的本地音频数据进行组合,以实现所述本地音频数据对于所有输出设备的共享;
当所述当前录音设备获取到外部传输的网络音频数据时,根据所述网络音频数据中的方向数据信息,确定数据的传输方向;
根据所述传输方向将预设范围内的区域确定教学显示区域。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110745845.3A CN113377329B (zh) | 2021-07-01 | 2021-07-01 | 一种虚拟音频设备、音频数据处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110745845.3A CN113377329B (zh) | 2021-07-01 | 2021-07-01 | 一种虚拟音频设备、音频数据处理方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113377329A CN113377329A (zh) | 2021-09-10 |
CN113377329B true CN113377329B (zh) | 2024-04-26 |
Family
ID=77580584
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110745845.3A Active CN113377329B (zh) | 2021-07-01 | 2021-07-01 | 一种虚拟音频设备、音频数据处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113377329B (zh) |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006130931A1 (en) * | 2005-06-10 | 2006-12-14 | C-Media Electronics, Inc. | Networked audio system |
CN101695023A (zh) * | 2009-10-19 | 2010-04-14 | 南京莱斯信息技术股份有限公司 | 并联扩展式多路音频交换混合系统 |
JP2010231089A (ja) * | 2009-03-27 | 2010-10-14 | Yamaha Corp | 録音装置および録音再生装置 |
CN202738005U (zh) * | 2012-06-06 | 2013-02-13 | 郑州大学 | 基于麦克风阵列的动态视频跟踪系统 |
CN207410510U (zh) * | 2017-09-01 | 2018-05-25 | 深圳市台电实业有限公司 | 一种拾音设备和系统 |
CN108282720A (zh) * | 2017-01-05 | 2018-07-13 | 北京小鸟听听科技有限公司 | 一种音频数据流的传输方法及装置 |
CN108391057A (zh) * | 2018-04-04 | 2018-08-10 | 深圳市冠旭电子股份有限公司 | 摄像头拍摄控制方法、装置、智能设备及计算机存储介质 |
CN108848410A (zh) * | 2018-05-22 | 2018-11-20 | 深圳Tcl新技术有限公司 | 蓝牙音频传输方法、装置及计算机可读存储介质 |
CN109032559A (zh) * | 2018-07-25 | 2018-12-18 | 南京创维信息技术研究院有限公司 | 一种多应用共享同一录音设备的配置方法及系统 |
CN111345584A (zh) * | 2020-03-09 | 2020-06-30 | 北京文香信息技术有限公司 | 一种智慧讲桌及跟踪方法 |
CN111627271A (zh) * | 2020-04-10 | 2020-09-04 | 北京文香信息技术有限公司 | 一种同步课堂系统及其管理平台 |
CN112711484A (zh) * | 2019-10-25 | 2021-04-27 | 百度在线网络技术(北京)有限公司 | 录音方法及装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005326987A (ja) * | 2004-05-13 | 2005-11-24 | Sony Corp | オーディオ信号伝送システム、オーディオ信号伝送方法、サーバー、ネットワーク端末装置、プログラム及び記録媒体 |
US20160266868A1 (en) * | 2015-03-13 | 2016-09-15 | Vssl Llc | Apparatus, System, and Method for Multi-Zone Audio Playback |
KR20180091319A (ko) * | 2017-02-06 | 2018-08-16 | 삼성에스디에스 주식회사 | 사운드 공유 장치 및 방법 |
-
2021
- 2021-07-01 CN CN202110745845.3A patent/CN113377329B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006130931A1 (en) * | 2005-06-10 | 2006-12-14 | C-Media Electronics, Inc. | Networked audio system |
JP2010231089A (ja) * | 2009-03-27 | 2010-10-14 | Yamaha Corp | 録音装置および録音再生装置 |
CN101695023A (zh) * | 2009-10-19 | 2010-04-14 | 南京莱斯信息技术股份有限公司 | 并联扩展式多路音频交换混合系统 |
CN202738005U (zh) * | 2012-06-06 | 2013-02-13 | 郑州大学 | 基于麦克风阵列的动态视频跟踪系统 |
CN108282720A (zh) * | 2017-01-05 | 2018-07-13 | 北京小鸟听听科技有限公司 | 一种音频数据流的传输方法及装置 |
CN207410510U (zh) * | 2017-09-01 | 2018-05-25 | 深圳市台电实业有限公司 | 一种拾音设备和系统 |
CN108391057A (zh) * | 2018-04-04 | 2018-08-10 | 深圳市冠旭电子股份有限公司 | 摄像头拍摄控制方法、装置、智能设备及计算机存储介质 |
CN108848410A (zh) * | 2018-05-22 | 2018-11-20 | 深圳Tcl新技术有限公司 | 蓝牙音频传输方法、装置及计算机可读存储介质 |
CN109032559A (zh) * | 2018-07-25 | 2018-12-18 | 南京创维信息技术研究院有限公司 | 一种多应用共享同一录音设备的配置方法及系统 |
CN112711484A (zh) * | 2019-10-25 | 2021-04-27 | 百度在线网络技术(北京)有限公司 | 录音方法及装置 |
CN111345584A (zh) * | 2020-03-09 | 2020-06-30 | 北京文香信息技术有限公司 | 一种智慧讲桌及跟踪方法 |
CN111627271A (zh) * | 2020-04-10 | 2020-09-04 | 北京文香信息技术有限公司 | 一种同步课堂系统及其管理平台 |
Also Published As
Publication number | Publication date |
---|---|
CN113377329A (zh) | 2021-09-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11151359B2 (en) | Face swap method, face swap device, host terminal and audience terminal | |
US9836267B2 (en) | Image/audio playback device of mobile communication terminal | |
WO2018082284A1 (zh) | 3d全景音视频直播系统及音视频采集方法 | |
US20230283888A1 (en) | Processing method and electronic device | |
US9998710B2 (en) | Apparatus and method for providing ultra high definition video conference | |
JP2013093840A (ja) | ポータブル端末における立体データ生成装置及び方法並びに電子装置 | |
CN113992883B (zh) | 视频会议处理方法、处理设备、会议系统以及存储介质 | |
CN111092898B (zh) | 报文传输方法及相关设备 | |
CN103905668A (zh) | 具有视讯功能的电话机及其视讯会谈的方法 | |
JP2019503091A (ja) | マルチメディア情報再生方法及びシステム、ならびに標準化サーバ及びライブストリーミング端末 | |
JP2008288974A (ja) | ビデオ会議システム及びビデオ会議装置 | |
WO2021093882A1 (zh) | 一种视频会议方法、会议终端、服务器及存储介质 | |
CN113377329B (zh) | 一种虚拟音频设备、音频数据处理方法及装置 | |
US9392036B2 (en) | Terminal device and communication system | |
CN112447174B (zh) | 服务提供方法、装置和系统、计算设备和存储介质 | |
US11798561B2 (en) | Method, apparatus, and non-transitory computer readable medium for processing audio of virtual meeting room | |
KR102151879B1 (ko) | 휴대용 스마트폰 및 dslr 오디오 믹서라인 인터페이스 | |
US11830120B2 (en) | Speech image providing method and computing device for performing the same | |
CN115334349A (zh) | 音频处理方法、装置、电子设备及存储介质 | |
KR20240002919A (ko) | 촬상장치, 그 제어방법, 및 기억매체 | |
CN114979676A (zh) | 一种直播方法、装置及系统 | |
CN117750275A (zh) | 音频装置的音频混合的方法、装置、设备及存储介质 | |
CN113542806A (zh) | 视频编辑设备和视频编辑方法 | |
CN114025162A (zh) | 熵解码方法、介质、程序产品和电子设备 | |
CN111541856A (zh) | 一种视讯与音讯处理装置及其视讯会议系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Country or region after: China Address after: 247100 intersection of Fengming Avenue and Hanjiang Road, Jiangnan industrial concentration area, Chizhou City, Anhui Province Applicant after: Anhui Wenxiang Technology Co.,Ltd. Address before: 247100 workshop C2, science and Technology Incubation Park, Jiangnan industrial concentration zone, Chizhou City, Anhui Province Applicant before: Anhui Wenxiang Technology Co.,Ltd. Country or region before: China |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant |