CN115527561A - 音频录制方法、装置以及电子设备 - Google Patents
音频录制方法、装置以及电子设备 Download PDFInfo
- Publication number
- CN115527561A CN115527561A CN202110710736.8A CN202110710736A CN115527561A CN 115527561 A CN115527561 A CN 115527561A CN 202110710736 A CN202110710736 A CN 202110710736A CN 115527561 A CN115527561 A CN 115527561A
- Authority
- CN
- China
- Prior art keywords
- audio signal
- audio
- target
- signals
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 69
- 230000005236 sound signal Effects 0.000 claims abstract description 575
- 238000012545 processing Methods 0.000 claims description 51
- 230000009467 reduction Effects 0.000 claims description 22
- 238000001914 filtration Methods 0.000 claims description 2
- 230000006870 function Effects 0.000 description 11
- 230000008569 process Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 9
- 230000001133 acceleration Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 229920000535 Tan II Polymers 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B20/10527—Audio or video recording; Data buffering arrangements
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B20/10527—Audio or video recording; Data buffering arrangements
- G11B2020/10537—Audio or video recording
- G11B2020/10546—Audio or video recording specifically adapted for audio data
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
- G11B20/10527—Audio or video recording; Data buffering arrangements
- G11B2020/10537—Audio or video recording
- G11B2020/10592—Audio or video recording specifically adapted for recording or reproducing multichannel signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
本申请实施例公开了一种音频录制方法、装置以及电子设备。所述方法包括:获取第一音频信号以及第二音频信号,所述第一音频信号由所述电子设备的音频采集装置采集,所述第二音频信号由外部设备的音频采集装置采集;基于所述第一音频信号以及第二音频信号,得到第三音频信号;基于确定的录制方向,从所述第三音频信号中确定目标音频信号,所述目标音频信号为与所述录制方向对应的音频信号;对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。从而通过上述方式使得可以实现提升特定对象的声音清晰度。
Description
技术领域
本申请涉及音频采集领域,更具体地,涉及一种音频录制方法、装置以及电子设备。
背景技术
在一些场景中,需要对特定的对象进行录音。例如,在视频拍摄场景中,需要对拍摄对象进行录音。但是,在相关的录音方式中,所录制的特定对象的声音的清晰度还有待提升。
发明内容
鉴于上述问题,本申请提出了一种音频录制方法、装置以及电子设备,以改善上述问题。
第一方面,本申请提供了一种音频录制方法,应用于电子设备,所述方法包括:获取第一音频信号以及第二音频信号,所述第一音频信号由所述电子设备的音频采集装置采集,所述第二音频信号由外部设备的音频采集装置采集;基于所述第一音频信号以及第二音频信号,得到第三音频信号;基于确定的录制方向,从所述第三音频信号中确定目标音频信号,所述目标音频信号为与所述录制方向对应的音频信号;对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。
第二方面,本申请提供了一种音频录制装置,运行于电子设备,所述装置包括:音频信号获取单元,用于获取第一音频信号以及第二音频信号,所述第一音频信号由所述电子设备的音频采集装置采集,所述第二音频信号由外部设备的音频采集装置采集;第一信号处理单元,用于基于所述第一音频信号以及第二音频信号,得到第三音频信号;处理目标确定单元,用于基于确定的录制方向,从所述第三音频信号中确定目标音频信号,所述目标音频信号为与所述录制方向对应的音频信号;第二信号处理单元,用于对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。
第三方面,本申请提供了一种电子设备,包括一个或多个处理器以及存储器;一个或多个程序,其中所述一个或多个程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行上述的方法。
第四方面,本申请提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有程序代码,其中,在所述程序代码运行时执行上述的方法。
本申请提供的一种音频录制方法、装置以及电子设备,在获取电子设备的音频采集装置采集的音频信号作为第一音频信号,以及外部设备的音频采集装置采集的音频信号作为第二音频信号后,先基于所述第一音频信号以及第二音频信号,得到第三音频信号,然后基于确定的录制方向,从所述第三音频信号中确定与所述录制方向对应的音频信号作为目标音频信号,进而对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。
从而通过上述方式使得,除了可以通过电子设备本身的音频采集装置进行音频信号采集外,还可以借助外部设备的音频采集装置进行音频信号采集,从而使得电子设备可以借助外部设备采集得到更多有效的音频信号,进而在确定录制方向后,可以将电子设备和外部设备共同采集的音频信号(第三音频信号)中与录制方向对应的目标音频信号进行突出,以便可以实现提升特定对象的声音清晰度。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了本申请提出的一种音频录制方法的应用场景的示意图;
图2示出了本申请实施例提出的一种音频录制方法的流程图;
图3示出了本申请实施例提出的一种图像采集界面的示意图;
图4示出了本申请实施例中一种造成外部设备采集的音频信号有延时的示意图;
图5示出了本申请实施例中波束角的示意图;
图6示出了本申请实施例中一种确定录制方向的示意图;
图7示出了本申请另一实施例提出的一种音频录制方法的流程图;
图8示出了图7中S250的一种实施方式的流程图;
图9示出了本申请另一实施例提出的一种音频录制方法的流程图;
图10示出了本申请又一实施例提出的一种音频录制方法的流程图;
图11示出了本申请实施例提出的一种音频录制装置的结构框图;
图12示出了本申请又一实施例提出的一种音频录制装置的结构框图;
图13是本申请实施例的用于保存或者携带实现根据本申请实施例的音频录制方法的程序代码的存储单元。
图14示出了本申请实时中的用于保存或者携带实现根据本申请实施例的音频录制方法的程序代码的存储单元。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在一些场景中,需要对特定的对象进行录音。例如,在视频拍摄场景中,需要对拍摄对象进行录音。
但是,发明人在研究中发现,在相关的录音方式中,所录制的特定对象的声音的清晰度还有待提升。例如,在视频拍摄场景中,拍摄对象所在环境中除了拍摄对象自己会发声外,还可能会存在其他的声音。例如,还可能会包括其他人物的声音,或者其他环境噪声。但是,相关的对拍摄对象进行录音的过程中,还无法较好的过滤掉拍摄对象所发出声音以外的声音。
因此,发明人提出了本申请中的一种音频录制方法、装置以及电子设备,在获取电子设备的音频采集装置采集的音频信号作为第一音频信号,以及外部设备的音频采集装置采集的音频信号作为第二音频信号后,先基于所述第一音频信号以及第二音频信号,得到第三音频信号,然后基于确定的录制方向,从所述第三音频信号中确定与所述录制方向对应的音频信号作为目标音频信号,进而对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。
从而通过上述方式使得,除了可以通过电子设备本身的音频采集装置进行音频信号采集外,还可以借助外部设备的音频采集装置进行音频信号采集,从而使得电子设备可以借助外部设备采集得到更多有效的音频信号,进而在确定录制方向后,可以将电子设备和外部设备共同采集的音频信号(第三音频信号)中与录制方向对应的目标音频信号进行突出,以便可以实现提升特定对象的声音清晰度。
下面先对本申请实施例涉及的场景进行介绍。
如图1所示,在图1所示的场景中包括有电子设备100以及电子设备200。其中,电子设备100可以具有图像采集功能和音频采集功能,电子设备200具有音频采集功能。在图1所示的情况下,电子设备200可以将所采集的音频信号传输给电子设备100。其中,电子设备100除了可以为图1中所示的智能手机外,还可以为平板电脑,或者智能手表等设备。电子设备200可以为图1中所示的耳机。在图1所示的场景中,可以将电子设备100的音频采集装置采集的音频信号作为第一音频信号,将电子设备200的音频采集装置采集的音频信号作为第二音频信号,那么电子设备100在获取得到第一音频信号以及第二音频信号后,则可以执行本申请实施例中所提供的音频录制方法中所涉及的步骤。
下面将结合附图具体描述本申请的各实施例。
请参阅图2,本申请实施例提供的一种音频录制方法,应用于电子设备,所述方法包括:
S110:获取第一音频信号以及第二音频信号,所述第一音频信号由所述电子设备的音频采集装置采集,所述第二音频信号由外部设备的音频采集装置采集。
在本申请实施例中,获取第一音频信号以及第二音频信号可以为电子设备在开始进行图像拍摄之后开始进行。图像拍摄可以包括视频拍摄或者动态图片的拍摄。可选的,电子设备可以响应于图像拍摄指令,开始获取第一音频信号以及第二音频信号。示例性的,如图3所示,在图3中所示的图像采集界面10中,设置有拍摄控件11,若电子设备检测到有作用于拍摄控件11的触控操作,则会触发生成图像拍摄指令。
其中,外部设备可以为与电子设备之间建立有关联关系的电子设备。该关联关系可以包括建立有近距离无线连接。例如,该外部设备可以为与电子设备之间建立有蓝牙连接的耳机。在电子设备确定需要开始获取第一音频信号以及第二音频信号后,则可以向外部设备发送音频采集指令,进而触发外部设备通过其音频采集器件开始进行音频采集,并接收外部设备传输来的音频信号作为第二音频信号。
S120:基于所述第一音频信号以及第二音频信号,得到第三音频信号。
在本申请实施例中,作为一种方式,可以将第一音频信号和第二音频信号进行组合后,得到第三音频信号。该组合可以理解为将第一音频信号和第二音频信号均作为后续确定目标音频信号的基础,那么在这种方式下,可以直接将第一音频信号和第二音频信号均为作为第三音频信号。
在另外一种方式中,可以将第二音频信号和第一音频信号进行对齐后,将对齐后的第一音频信号和第二音频信号均作为第三音频信号。其中,需要说明的是,在采集音频信号的过程中,外部设备的音频采集器件与电子设备的音频采集器件的空间位置可能是不同的,那么就可能会造成外部设备的音频采集器件所采集的音频信号与电子设备的音频采集器件所采集的音频信号之间会有延时。示例性的,如图4所示,在图4所示的场景中,由电子设备100的音频采集器件负责采集第一音频信号,操作电子设备100的用户所佩戴的电子设备200则用于采集第二音频信号。在图4所示的场景中,拍摄对象所发出的音频信号会先到达电子设备100,然后再到达电子设备200处,那么就会造成电子设备200所接收到音频信号会相比电子设备100所接收到音频信号具有延时。再者,外部设备将采集的音频信号传输给电子设备的过程中,也可能会因为无线传输路径而造成传输方面的延时。
作为再一种方式,可以将第一音频信号和第二音频信号进行合并,将所合并得到的音频信号作为第三音频信号。
需要说明的是,作为一种方式,外部设备在进行音频信号传输时,可以在所传输的音频信号中增加延时参数,从而使得电子设备在接收到外部设备采集的音频信号后,可以根据延时参数确定外部设备采集的音频信号与电子设备采集的音频信号相比是否具有延时,若有延时,则延时的程度是多少。以便在有延时的情况下,电子设备可以根据第二音频信号中携带的延时参数来对第一音频信号和第二音频信号进行对齐。
S130:基于确定的录制方向,从所述第三音频信号中确定目标音频信号,所述目标音频信号为与所述录制方向对应的音频信号。
其中,在本申请实施例中,录制方向可以理解为需要进行声音突出的方向。其中,声音突出可以理解为使得录制方向的声音相比其他方向的声音更加的清晰。
作为一种方式,所述基于确定的录制方向,从所述第三音频信号中确定目标音频信号,包括:基于确定的录制方向以及所述第三音频信号确定波束角;将所述第三音频信号中与所述波束角对应的音频信号作为目标音频信号。其中,在本申请实施例中,波束角是指以传感器的(例如,音频采集装置)中轴线的延长线为轴线,由此向外至能量强度减少一半处形成的角度被称为波束角。在本申请实施例中能量强度,则可以理解为声源发出的音频信号的能量。其中,在确定波束角的过程中,电子设备可以在获取到录制方向以及所述第三音频信号后,基于波速形成算法来确定波束角。其中,波速形成算法可以为现有技术中的算法。
示例性的,如图5所示,其中的波束角β1为在未引入外部设备所采集的音频信号所确定的波束角,而其中的波束角β2为在引入外部设备所采集的音频信号所确定的波束角。例如,在获取的音频信号仅包括第一音频信号的情况下,所确定的波束角可以为波束角β1,而在获取的音频信号包括第一音频信号和第一音频信号的情况下,所确定的波束角可以为波束角β2。如图所示的,波束角β2相比波束角β1更小,从而使得可以更大程度的过滤掉与拍摄对象所在方向(录音方向)无关的音频信号,有利于提升所录制信号中拍摄对象的声音的清晰度。
需要说明的是,图5中电子设备100所包括的音频采集装置可以包括多个音频采集器件(图中未示出),且该多个音频采集器件可以在不同的位置。例如,若电子设备包括三个音频采集器件,那么其中一个音频采集器件可以在电子设备的正面的顶部,另一个音频采集器件可以在电子设备的底部,剩下的一个音频采集器件可以在电子设备的正面的顶部。再者,三个音频采集器件也可以在电子设备的同一面上排布在不同的位置。例如,其中一个音频采集器件在正面的顶部,另一个音频采集器件在正面的底部,剩下的一个音频采集器件则可以在另外两个音频采集器件之间。
再者,在本申请实施例中,可以有多种的确定录制方向的方式。
作为一种方式,所述基于确定的录制方向,从所述第三音频信号中确定目标音频信号之前还包括:获取从所述电子设备采集的画面中确定的目标对象;将所述目标对象相对所述电子设备的方向作为录制方向。示例性的,如图6所示,可以以电子设备中间位置为原点(图5中所示的O)建立坐标系,其中,基于图6所示的x轴和y轴,可以获取得到目标对象的位置信息,进而得到目标对象相对所述电子设备的方向。例如,若用户确定的目标对象为图6中的虚线框所标识的人物,那么电子设备则会将虚线框中的人物作为目标对象,进而将目标对象相对所述电子设备的方向作为录制方向。其中,在获取目标对象的方位的过程中,可以以目标对象的人脸的中心为基准点,进而将该基准点在图6中所示的坐标系中的位置,作为目标对象在图6中所示的坐标系中的位置,然后根据该位置来计算得到目标对象相对所述电子设备的方向。若电子设备对应于x轴一侧的画面长度为L,目标对象的位置为(x1,y1),则表示目标对象相对电子设备的方位的角度为b=tan(2y1/L)。
作为另外一种方式,可以在电子设备中配置有多个方向选项。用户可以根据需要从该多个方向选项中选择一个方向作为录音方向。例如,该多个方向选项可以包括0度到30度,30度到60度,60度到90度,90度到120度,120度到150度,150度到180度等。其中,0度为对应于图5中x轴的负半轴的位置,180度则为对应于x轴正半轴的位置。
需要说明的是,如前述内容介绍所示,第三音频信号可能会有多种方式。那么在确定目标音频信号的过程中,则可以针对不同的情况分别进行目标音频信号的确定。
可选的,若将第一音频信号和第二音频信号均作为第三音频信号,那么则第三音频信号则会有多路第三音频信号,那么在确定目标音频信号的过程中,则可以针对多路第三音频信号分别确定各自的目标音频信号。可选的,若是将第一音频信号和第二音频信号进行合并后得到的音频信号作为第三音频信号,则所得到的第三音频信号可以只有一路,则在确定目标音频信号的过程中,可以直接对合并后的一路第三音频信号进行目标音频信号的确定。
S140:对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。
其中,目标语音信号表征的是录音方向对应的语音信号,那么对目标语音信号进行突出,则可以理解为使得目标语音信号的语音内容相比第三音频信号中的其他语音信号的语音内容更加的清晰。
本实施例提供的一种音频录制方法,在获取电子设备的音频采集装置采集的音频信号作为第一音频信号,以及外部设备的音频采集装置采集的音频信号作为第二音频信号后,先基于所述第一音频信号以及第二音频信号,得到第三音频信号,然后基于确定的录制方向,从所述第三音频信号中确定与所述录制方向对应的音频信号作为目标音频信号,进而对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。
从而通过上述方式使得,除了可以通过电子设备本身的音频采集装置进行音频信号采集外,还可以借助外部设备的音频采集装置进行音频信号采集,从而使得电子设备可以借助外部设备采集得到更多有效的音频信号,进而在确定录制方向后,可以将电子设备和外部设备共同采集的音频信号(第三音频信号)中与录制方向对应的目标音频信号进行突出,以便可以实现提升特定对象的声音清晰度。
请参阅图7,本申请实施例提供的一种音频录制方法,应用于电子设备,所述方法包括:
S210:获取第一音频信号以及第二音频信号,所述第一音频信号由所述电子设备的音频采集装置采集,所述第二音频信号由外部设备的音频采集装置采集。
S220:基于所述第一音频信号以及第二音频信号,得到第三音频信号。
S230:基于确定的录制方向,从所述第三音频信号中确定目标音频信号,所述目标音频信号为与所述录制方向对应的音频信号。
S240:获取待处理音频信号,所述待处理音频信号为所述第三音频信号中除所述目标音频信号以外的音频信号。
S250:对所述待处理音频信号进行降噪处理,并将降噪处理后的第三音频信号作为录制的音频信号。
需要说明的是,在本申请实施例中,对待处理音频信号进行降噪处理的一个作用是突出第三语音信号中的目标语音信号。在本申请实施例中,对待处理信号进行降噪可以有多种方式。
作为一种方式,对待处理音频信号进行降噪处理,可以包括仅对待处理音频信号进行降噪处理,而不对目标语音信号进行处理。
作为另外一种方式,如图8所示,所述对所述待处理音频信号进行降噪处理,并将降噪处理后的第三音频信号作为录制的音频信号,包括:
S251:对所述第三音频信号中确定的所述待处理音频信号进行降噪处理,得到降噪处理后的第三音频信号。
S252:对所述降噪处理后的第三音频信号中的目标音频信号进行增强处理,并将增强处理后的第三音频信号作为录制的音频信号。
可选的,所述对所述第三音频信号中确定的所述待处理音频信号进行降噪处理,包括:将所述第三音频信号中确定的所述待处理音频信号的信号强度降低指定幅度,或者,将所述第三音频信号中确定的所述待处理音频信号进行过滤。
本实施例提供的一种音频录制方法,从而通过上述方式使得,除了可以通过电子设备本身的音频采集装置进行音频信号采集外,还可以借助外部设备的音频采集装置进行音频信号采集,从而使得电子设备可以借助外部设备采集得到更多有效的音频信号,进而在确定录制方向后,可以将电子设备和外部设备共同采集的音频信号(第三音频信号)中与录制方向对应的目标音频信号进行突出,以便可以实现提升特定对象的声音清晰度。并且,在本实施例中,在对第三音频信号进行处理的过程中,除了可以对待处理音频信号进行降噪处理外,还可以对目标音频信号进行增强处理,进而可以更加突出第三音频信号中的目标音频信号,进而使得确定的录制方向的声音(例如,录制方向的拍摄对象的声音)可以有更好的清晰度。
请参阅图9,本申请实施例提供的一种音频录制方法,应用于电子设备,所述方法包括:
S310:获取第一音频信号以及第二音频信号,所述第一音频信号由所述电子设备的音频采集装置采集,所述第二音频信号由外部设备的音频采集装置采集。
S320:基于所述第二音频信号携带的延时对齐参数,将所述第二音频信号与所述第一音频信号进行对齐,并对齐后的第二音频信号和所述第一音频信号均作为第三音频信号,得到多路第三音频信号。
其中,在得到的多路第三音频信号中,对齐后的第一音频信号可以作为一路第三音频信号,对齐后的第二音频信号可以作为一路第三音频信号。
S330:基于确定的录制方向,分别确定多路第三音频信号各自对应的目标音频信号。
S340:对多路所述第三音频信号各自的所述目标音频信号进行突出。
S350:将突出各自目标音频信号后的多个第三音频信号进行合并,并将合并得到的音频信号作为录制的音频信号。
作为一种方式,所述电子设备的音频采集装置采集包括多个第一音频采集器件,所述外部设备的音频采集装置包括多个第二音频采集器件;所述获取第一音频信号以及第二音频信号,包括:
获取所述多个第一音频采集器件各自采集的第一音频信号,得到多路第一音频信号,获取所述多个第二音频采集器件各自采集的第二音频信号,得到多路第二音频信号。
需要说明的是,有多个第一音频器件分别进行音频采集的情况下,每个第一音频器件各自所采集的音频信号可以作为一路第一音频信号。对应的,有多个第二音频器件分别进行音频采集的情况下,每个第二音频器件各自所采集的音频信号可以作为一路第二音频信号。
所述基于所述第二音频信号携带的延时对齐参数,将所述第二音频信号与所述第一音频信号进行对齐,并对齐后的第二音频信号和所述第一音频信号均作为第三音频信号,得到多个第三音频信号,包括:
基于所述多路第二音频信号各自携带的延时对齐参数,将所述多路第一音频信号和所述多路第二音频信号进行对齐,并将对齐后的多路第二音频信号和所述第一音频信号均作为第三音频信号,得到多路第三音频信号。其中,对齐后的每一路第一音频信号均可以作为一路第三音频信号,对齐后的每一路第二音频信号可以作为一路第三音频信号。例如,若有三路第一音频信号,两路第二音频信号,那么则最后将会得到五路第三音频信号。
下面在通过一个附图来对本实施例中涉及的一种音频录制方法进行说明。如图10所示,该方法包括:
S410:开始视频拍摄。
S420:手机采集三路音频信号。
其中,手机中设置有三个位置互相不同的麦克风,每个麦克风会单独采集一路音频信号,进而手机可以采集得到三路音频信号(例如,前述实施例中的第一音频信号)。
S430:耳机采集两路音频信号。
其中,用户可以佩戴有两个耳机,每个耳机可以单独采集一路音频信号,进而与手机之间建立有连接的两个耳机一共可以采集两路音频信号(例如,前述实施例中的第二音频信号)。
S440:延时对齐。
手机在接收到耳机采集的两路音频信号后,可以将该两路音频信号与手机自己采集的三路音频信号进行延时对齐,进而得到对齐后的五路音频信号。该对齐后的五路音频信号可以理解为前述实施例中的第三音频信号。
S450:对目标对象进行锁焦,以提供角度信息。
其中,对目标对象进行锁焦可以理解为从手机采集的图像中选取目标对象,然后手机获取得到目标对象的相对于电子设备的角度信息作为录音方向。
S460:基于算法处理五路信号。
在得到角度信息,以及对齐后的五路音频信号后,则可以使用录音追焦算法基于角度信息对五路音频信号进行处理,继而显示突出目标对象的声音。
本实施例提供的一种音频录制方法,从而通过上述方式使得,除了可以通过电子设备本身的音频采集装置进行音频信号采集外,还可以借助外部设备的音频采集装置进行音频信号采集,从而使得电子设备可以借助外部设备采集得到更多有效的音频信号,进而在确定录制方向后,可以将电子设备和外部设备共同采集的音频信号(第三音频信号)中与录制方向对应的目标音频信号进行突出,以便可以实现提升特定对象的声音清晰度。并且,在本实施例中,可以对电子设备和外部设备各自采集的音频信号中的目标音频信号分别进行突出后,再对分别突出目标音频信号的第三音频信号进行合并,从而可以更加有效的提升录制方向的声音的清晰度。
请参阅图11,本申请实施例提供的一种音频录制装置,运行于电子设备,所述装置包括:
音频信号获取单元410,用于获取第一音频信号以及第二音频信号,所述第一音频信号由所述电子设备的音频采集装置采集,所述第二音频信号由外部设备的音频采集装置采集。
第一信号处理单元420,用于基于所述第一音频信号以及第二音频信号,得到第三音频信号。
处理目标确定单元430,用于基于确定的录制方向,从所述第三音频信号中确定目标音频信号,所述目标音频信号为与所述录制方向对应的音频信号。
第二信号处理单元440,用于对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。
作为一种方式,第一信号处理单元420,具体用于基于确定的录制方向以及所述第三音频信号确定波束角;将所述第三音频信号中与所述波束角对应的音频信号作为目标音频信号。
作为一种方式,第二信号处理单元440,具体用于获取待处理音频信号,所述待处理音频信号为所述第三音频信号中除所述目标音频信号以外的音频信号;对所述待处理音频信号进行降噪处理,并将降噪处理后的第三音频信号作为录制的音频信号。在这种方式中,第二信号处理单元440,具体用于对所述第三音频信号中确定的所述待处理音频信号进行降噪处理,得到降噪处理后的第三音频信号;对所述降噪处理后的第三音频信号中的目标音频信号进行增强处理,并将增强处理后的第三音频信号作为录制的音频信号。
可选的,第二信号处理单元440,具体用于将所述第三音频信号中确定的所述待处理音频信号的信号强度降低指定幅度,或者,将所述第三音频信号中确定的所述待处理音频信号进行过滤。
作为一种方式,第一信号处理单元420,具体用于基于所述第二音频信号携带的延时对齐参数,将所述第二音频信号与所述第一音频信号进行对齐,并对齐后的第二音频信号和所述第一音频信号均作为第三音频信号,得到多路第三音频信号。处理目标确定单元430,具体用于基于确定的录制方向,分别确定多路第三音频信号各自对应的目标音频信号。第二信号处理单元440,具体用于对多路所述第三音频信号各自的所述目标音频信号进行突出;并将突出各自目标音频信号后的多个第三音频信号进行合并,并将合并得到的音频信号作为录制的音频信号。
作为一种方式,所述电子设备的音频采集装置采集包括多个第一音频采集器件,所述外部设备的音频采集装置包括多个第二音频采集器件。音频信号获取单元410,具体用于获取所述多个第一音频采集器件各自采集的第一音频信号,得到多路第一音频信号,获取所述多个第二音频采集器件各自采集的第二音频信号,得到多路第二音频信号。第一信号处理单元420,具体用于基于所述多路第二音频信号各自携带的延时对齐参数,将所述多路第一音频信号和所述多路第二音频信号进行对齐,并对齐后的多路第二音频信号和所述第一音频信号均作为第三音频信号,得到多路第三音频信号。
如图12所示,所述装置400还包括:录制方向确定单元450,用于获取从所述电子设备采集的画面中确定的目标对象;将所述目标对象相对所述电子设备的方向作为录制方向。
本实施例提供的一种音频录制装置,在获取电子设备的音频采集装置采集的音频信号作为第一音频信号,以及外部设备的音频采集装置采集的音频信号作为第二音频信号后,先基于所述第一音频信号以及第二音频信号,得到第三音频信号,然后基于确定的录制方向,从所述第三音频信号中确定与所述录制方向对应的音频信号作为目标音频信号,进而对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。
从而通过上述方式使得,除了可以通过电子设备本身的音频采集装置进行音频信号采集外,还可以借助外部设备的音频采集装置进行音频信号采集,从而使得电子设备可以借助外部设备采集得到更多有效的音频信号,进而在确定录制方向后,可以将电子设备和外部设备共同采集的音频信号(第三音频信号)中与录制方向对应的目标音频信号进行突出,以便可以实现提升特定对象的声音清晰度,进而也实现了对特定对象的声音进行聚焦的效果。
需要说明的是,本申请中装置实施例与前述方法实施例是相互对应的,装置实施例中具体的原理可以参见前述方法实施例中的内容,此处不再赘述。
请参阅图13,基于上述的音频录制方法、装置,本申请实施例还提供的另一种可以执行前述音频录制方法的电子设备1000。电子设备1000包括相互耦合的一个或多个(图中仅示出一个)处理器102、存储器104、网络模块106、传感器模块108以及音频采集装置110。其中,该存储器104中存储有可以执行前述实施例中内容的程序,而处理器102可以执行该存储器104中存储的程序。
其中,处理器102可以包括一个或者多个处理核。处理器102利用各种接口和线路连接整个电子设备1000内的各个部分,通过运行或执行存储在存储器104内的指令、程序、代码集或指令集,以及调用存储在存储器104内的数据,执行电子设备1000的各种功能和处理数据。可选地,处理器102可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable Logic Array,PLA)中的至少一种硬件形式来实现。处理器102可集成中央处理器(Central Processing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器102中,单独通过一块通信芯片进行实现。
存储器104可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。存储器104可用于存储指令、程序、代码、代码集或指令集。存储器104可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。
所述网络模块106用于实现电子设备1000与其他设备之间的信息交互,例如,传输设备控制指令、操纵请求指令以及状态信息获取指令等。而当电子设备200具体为不同的设备时,其对应的网络模块106可能会有不同。
传感器模块108可以包括至少一种传感器。具体地,传感器模块108可包括但并不限于:光传感器、运动传感器、压力传感器、红外热传感器、距离传感器、加速度传感器、以及其他传感器。
其中,压力传感器可以检测由按压在电子设备1000产生的压力的传感器。即,压力传感器检测由用户和电子设备之间的接触或按压产生的压力,例如由用户的耳朵与移动终端之间的接触或按压产生的压力。因此,压力传感器可以用来确定在用户与电子设备1000之间是否发生了接触或者按压,以及压力的大小。
其中,加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备1000姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等。另外,电子设备1000还可配置陀螺仪、气压计、湿度计、温度计等其他传感器,在此不再赘述。
音频采集装置110,用于进行音频信号采集。可选的,音频采集装置110包括有多个音频采集器件。该音频采集器件可以为麦克风。
作为一种方式,电子设备1000的网络模块为射频模块,该射频模块用于接收以及发送电磁波,实现电磁波与电信号的相互转换,从而与通讯网络或者其他设备进行通讯。所述射频模块可包括各种现有的用于执行这些功能的电路元件,例如,天线、射频收发器、数字信号处理器、加密/解密芯片、用户身份模块(SIM)卡、存储器等等。例如,该射频模块可以通过发送或者接收的电磁波与外部设备进行信息交互,进而接收外部设备所发送的音频信号。
再者,电子设备1000还可以包括有图像采集器件以进行图像采集。例如,可以通过该图像采集器件拍摄视频、静态图片或者动态图片。
请参考图14,其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读介质900中存储有程序代码,所述程序代码可被处理器调用执行上述方法实施例中所描述的方法。
计算机可读存储介质900可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地,计算机可读存储介质900包括非易失性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质900具有执行上述方法中的任何方法步骤的程序代码910的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码910可以例如以适当形式进行压缩。
综上所述,本申请提供的一种音频录制方法、装置以及电子设备,在获取电子设备的音频采集装置采集的音频信号作为第一音频信号,以及外部设备的音频采集装置采集的音频信号作为第二音频信号后,先基于所述第一音频信号以及第二音频信号,得到第三音频信号,然后基于确定的录制方向,从所述第三音频信号中确定与所述录制方向对应的音频信号作为目标音频信号,进而对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。
从而通过上述方式使得,除了可以通过电子设备本身的音频采集装置进行音频信号采集外,还可以借助外部设备的音频采集装置进行音频信号采集,从而使得电子设备可以借助外部设备采集得到更多有效的音频信号,进而在确定录制方向后,可以将电子设备和外部设备共同采集的音频信号(第三音频信号)中与录制方向对应的目标音频信号进行突出,以便可以实现提升特定对象的声音清晰度。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (11)
1.一种音频录制方法,其特征在于,应用于电子设备,所述方法包括:
获取第一音频信号以及第二音频信号,所述第一音频信号由所述电子设备的音频采集装置采集,所述第二音频信号由外部设备的音频采集装置采集;
基于所述第一音频信号以及第二音频信号,得到第三音频信号;
基于确定的录制方向,从所述第三音频信号中确定目标音频信号,所述目标音频信号为与所述录制方向对应的音频信号;
对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。
2.根据权利要求1所述的方法,其特征在于,所述基于确定的录制方向,从所述第三音频信号中确定目标音频信号,包括:
基于确定的录制方向以及所述第三音频信号确定波束角;
将所述第三音频信号中与所述波束角对应的音频信号作为目标音频信号。
3.根据权利要求1所述的方法,其特征在于,所述对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号,包括:
获取待处理音频信号,所述待处理音频信号为所述第三音频信号中除所述目标音频信号以外的音频信号;
对所述待处理音频信号进行降噪处理,并将降噪处理后的第三音频信号作为录制的音频信号。
4.根据权利要求3所述的方法,其特征在于,所述对所述待处理音频信号进行降噪处理,并将降噪处理后的第三音频信号作为录制的音频信号,包括:
对所述第三音频信号中确定的所述待处理音频信号进行降噪处理,得到降噪处理后的第三音频信号;
对所述降噪处理后的第三音频信号中的目标音频信号进行增强处理,并将增强处理后的第三音频信号作为录制的音频信号。
5.根据权利要求3所述的方法,其特征在于,所述对所述第三音频信号中确定的所述待处理音频信号进行降噪处理,包括:
将所述第三音频信号中确定的所述待处理音频信号的信号强度降低指定幅度,或者,将所述第三音频信号中确定的所述待处理音频信号进行过滤。
6.根据权利要求1所述的方法,其特征在于,所述基于所述第一音频信号以及第二音频信号,得到第三音频信号,包括:
基于所述第二音频信号携带的延时对齐参数,将所述第二音频信号与所述第一音频信号进行对齐,并对齐后的第二音频信号和所述第一音频信号均作为第三音频信号,得到多路第三音频信号;
所述基于确定的录制方向,从所述第三音频信号中确定目标音频信号,所述目标音频信号为与所述录制方向对应的音频信号;对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号,包括:
基于确定的录制方向,分别确定多路第三音频信号各自对应的目标音频信号;
对多路所述第三音频信号各自的所述目标音频信号进行突出;
并将突出各自目标音频信号后的多个第三音频信号进行合并,并将合并得到的音频信号作为录制的音频信号。
7.根据权利要求6所述的方法,其特征在于,所述电子设备的音频采集装置采集包括多个第一音频采集器件,所述外部设备的音频采集装置包括多个第二音频采集器件;所述获取第一音频信号以及第二音频信号,包括:
获取所述多个第一音频采集器件各自采集的第一音频信号,得到多路第一音频信号,获取所述多个第二音频采集器件各自采集的第二音频信号,得到多路第二音频信号;
所述基于所述第二音频信号携带的延时对齐参数,将所述第二音频信号与所述第一音频信号进行对齐,并对齐后的第二音频信号和所述第一音频信号均作为第三音频信号,得到多个第三音频信号,包括:
基于所述多路第二音频信号各自携带的延时对齐参数,将所述多路第一音频信号和所述多路第二音频信号进行对齐,并对齐后的多路第二音频信号和所述第一音频信号均作为第三音频信号,得到多路第三音频信号。
8.根据权利要求1-7任一所述的方法,其特征在于,所述基于确定的录制方向,从所述第三音频信号中确定目标音频信号之前还包括:
获取从所述电子设备采集的画面中确定的目标对象;
将所述目标对象相对所述电子设备的方向作为录制方向。
9.一种音频录制装置,其特征在于,运行于电子设备,所述装置包括:
音频信号获取单元,用于获取第一音频信号以及第二音频信号,所述第一音频信号由所述电子设备的音频采集装置采集,所述第二音频信号由外部设备的音频采集装置采集;
第一信号处理单元,用于基于所述第一音频信号以及第二音频信号,得到第三音频信号;
处理目标确定单元,用于基于确定的录制方向,从所述第三音频信号中确定目标音频信号,所述目标音频信号为与所述录制方向对应的音频信号;
第二信号处理单元,用于对所述第三音频信号中的所述目标音频信号进行突出,并将突出所述目标音频信号后的第三音频信号作为录制的音频信号。
10.一种电子设备,其特征在于,包括一个或多个处理器以及存储器;
一个或多个程序,其中所述一个或多个程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于执行权利要求1-8任一所述的方法。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有程序代码,其中,在所述程序代码运行时执行权利要求1-8任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110710736.8A CN115527561A (zh) | 2021-06-25 | 2021-06-25 | 音频录制方法、装置以及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110710736.8A CN115527561A (zh) | 2021-06-25 | 2021-06-25 | 音频录制方法、装置以及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115527561A true CN115527561A (zh) | 2022-12-27 |
Family
ID=84694442
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110710736.8A Pending CN115527561A (zh) | 2021-06-25 | 2021-06-25 | 音频录制方法、装置以及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115527561A (zh) |
-
2021
- 2021-06-25 CN CN202110710736.8A patent/CN115527561A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111050269B (zh) | 音频处理方法和电子设备 | |
CN107534725B (zh) | 一种语音信号处理方法及装置 | |
TWI656509B (zh) | 影像處理方法及相關產品 | |
CN110970057B (zh) | 一种声音处理方法、装置与设备 | |
CN113676592B (zh) | 录音方法、装置、电子设备及计算机可读介质 | |
CN105791958A (zh) | 游戏直播方法及装置 | |
CN109151211B (zh) | 语音处理方法、装置以及电子设备 | |
EP3660660A1 (en) | Processing method for sound effect of recording and mobile terminal | |
CN109413555B (zh) | 音频输出方法、装置、耳机以及电子设备 | |
WO2016082199A1 (zh) | 录取录像对象的声音的方法和移动终端 | |
CN111161176B (zh) | 图像处理方法及装置、存储介质和电子设备 | |
CN114846816B (zh) | 立体声拾音方法、装置、终端设备和计算机可读存储介质 | |
CN107730460B (zh) | 一种图像处理方法及移动终端 | |
CN111402913A (zh) | 降噪方法、装置、设备和存储介质 | |
CN114697812B (zh) | 声音采集方法、电子设备及系统 | |
US9756421B2 (en) | Audio refocusing methods and electronic devices utilizing the same | |
CN113542597B (zh) | 对焦方法以及电子设备 | |
US10991392B2 (en) | Apparatus, electronic device, system, method and computer program for capturing audio signals | |
WO2023231787A9 (zh) | 音频处理方法和装置 | |
CN108650595B (zh) | 堵孔处理方法、装置、电子设备及计算机可读存储介质 | |
CN115527561A (zh) | 音频录制方法、装置以及电子设备 | |
CN113395451B (zh) | 视频拍摄方法、装置、电子设备以及存储介质 | |
CN113542466A (zh) | 音频处理方法、电子设备及存储介质 | |
CN113707165A (zh) | 音频处理方法、装置及电子设备和存储介质 | |
CN113676593B (zh) | 视频录制方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |