CN109754815A - 用于无人机音频降噪的系统、装置和方法 - Google Patents

用于无人机音频降噪的系统、装置和方法 Download PDF

Info

Publication number
CN109754815A
CN109754815A CN201811191791.5A CN201811191791A CN109754815A CN 109754815 A CN109754815 A CN 109754815A CN 201811191791 A CN201811191791 A CN 201811191791A CN 109754815 A CN109754815 A CN 109754815A
Authority
CN
China
Prior art keywords
filter
rotary motion
data
rotor
motion data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811191791.5A
Other languages
English (en)
Inventor
H·考多瑞尔马鲁瑞
J·黄
P·洛佩斯迈耶
R·德拉冈迪亚冈萨雷斯
D·戈麦斯古铁雷斯
R·阿尔达纳洛佩茨
L·坎伯斯马西亚斯
J·帕拉比尔奇斯
J·卡马乔佩雷斯
J·扎莫拉伊奎维尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN109754815A publication Critical patent/CN109754815A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083—Reduction of ambient noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/10—Applications
    • G10K2210/128—Vehicles
    • G10K2210/1281—Aircraft, e.g. spacecraft, airplane or helicopter
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L2021/02085—Periodic noise
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02165—Two microphones, one receiving mainly the noise signal and the other one mainly the speech signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00—Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/001—Adaptation of signal processing in PA systems in dependence of presence of noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00—Microphones
    • H04R2410/01—Noise reduction using microphones having different directional characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00—Microphones
    • H04R2410/05—Noise reduction with a separate noise microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00—Microphones
    • H04R2410/07—Mechanical or electrical reduction of wind noise generated by wind passing a microphone

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)
  • Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)

Abstract

本文公开了用于无人机的音频降噪的方法、系统和装置。示例装置包括：第一传感器，该第一传感器用于收集声学数据；以及第二传感器，该第二传感器用于收集转子的旋转运动数据。示例装置还包括分析器，该分析器用于将所述旋转运动数据与滤波器进行匹配以及使用所述滤波器对所述声学数据进行滤波。分析器还用于基于经滤波声学数据来生成音频信号。

Description

用于无人机音频降噪的系统、装置和方法
技术领域
本公开一般涉及无人机，并且更具体地，涉及用于无人机音频降噪的方法、系统和装置。
背景技术
当前无人机转子叶片典型地产生大量噪声。由于转子噪声，商用无人机仅记录不具有任何音频的视频，或者从分开的频道获得音轨。
附图说明
图1是根据本公开的教导的示例无人机的示意性例示。
图2是具有示例音频降噪系统的图1的示例无人机的框图。
图3A包括示出示例时域信号和示例均方根(RMS)分布的原始声学数据的图。
图3B包括利用第一滤波器进行滤波的图3A的示例声学数据的图。
图3C包括利用第二滤波器进行滤波的图3A的示例声学数据的图。
图4是表示可以被执行以实现对图2的示例音频降噪系统的校准的示例机器可读指令的流程图。
图5是表示可以被执行以实现图2的示例音频降噪系统的示例机器可读指令的流程图。
图6是被构造来执行图4和图5的示例机器可读指令以实现图1和图2的示例降噪系统的示例处理器平台的框图。
附图不按比例绘制。在可能的情况下，在整个附图和所附书面描述中将使用相同的附图标记来指代相同或相似的组件。
具体实施方式
无人机由于转子的旋转而产生自生噪声。如本文使用的，转子指的是无人机的旋转元件，包括例如转子叶片、螺旋桨、螺旋桨叶片等。来自马达和转子的噪声常常淹没(overwhelm)对期望声源的捕捉，从而导致非常低的信噪比(SNR)。
过去已尝试过减少从无人机检测到的噪声的技术。例如，系统已使用单向麦克风，其中固定指示模式允许噪声源的减少。然而，单向麦克风的固定方向性限制了音频收集所针对的事件的地理或位置范围。使用单向麦克风来增加覆盖需要过多的机械转向，这会对无人机的成本、重量和功耗产生负面影响。麦克风阵列和数字波束成形也已被使用。阵列信号处理还允许指示模式，并且因此允许降噪。然而，麦克风阵列和数字波束成形增加了硬件成本、重量、计算需求和功耗。
本文公开了无人机声学信号技术的进步，特别是关于无人机产生的音频噪声的减少。如本文公开的，转子速度传感器收集旋转运动数据，包括例如每分钟转数(RPM)数据，将该每分钟转数(RPM)数据与预定义滤波器(诸如例如，维纳(Wiener)滤波器)进行匹配，以便用最低的复杂度和计算开销来最佳地降低噪声。预定义滤波器先前已针对不同转子速度进行校准，以优化噪声消除。降噪后剩下的是来自无人机外部的环境的声学信号，这些声学信号指示例如人群、车辆、其他无人机等的存在和移动。虽然贯穿本公开地使用RPM数据，但可使用任何合适的旋转运动数据，包括例如每秒转数、每秒弧度、和/或其他测量或者旋转频率、旋转速度、角频率和/或角速度。
图1是根据本公开的教导的示例无人机100的示意性例示。本文公开的示例无人机100是四轴飞行器(quadcopter)无人机(从图1中的侧面观看)。然而，本公开的教导适用于具有任何数量的转子或螺旋桨的无人机，也称为无人驾驶飞行器(UAV)。示例无人机100包括主体102，并且在图1的视图中包括示例第一转子集合104和示例第二转子集合106。主体102容纳和/或承载在无人机100的操作中使用的附加组件。例如，主体102容纳示例马达108和示例马达控制器110。马达控制器110控制马达108以使转子104、106以目标RPM和/或如本文公开的任何其他RPM旋转。示例无人机100包括感测转子104、106的旋转运动(例如，RPM)的一个或多个RPM传感器112。在一些示例中，(诸)RPM传感器112包括振动传感器、红外旋转传感器和/或输入电流传感器中的一个或多个。同样，如上所述，RPM传感器112可用于检测任何类型的旋转运动数据。
示例无人机100还包括从周围环境收集数据的一个或多个示例音频传感器114。在一些示例中，音频传感器114包括声学传感器，诸如例如包括检测来自所有方向的声音的全向麦克风的麦克风。在一些示例中，音频传感器114是麦克风阵列。在其他示例中，作为对麦克风的附加或替代，可使用其他类型的声学传感器。另外，无人机可包括用于收集其他类型数据(包括例如，视觉数据、天气数据等)的传感器。
在无人机100的操作期间，转子104、106由于叶片通过频率及其高次谐波而产生声波或自生噪声116。叶片通过频率是转子通过固定位置的速率，并且等于转子叶片的数量乘以马达的RPM。因此，叶片通过频率，并且由此自生噪声116的音调(基频)和强度随转子104、106的叶片数量和旋转速度而变化。自生噪声116模糊了由音频传感器114收集的其他声学信号。具体而言，自生噪声116遮蔽周围环境中的声学信号，包括例如由其他无人机生成的声学信号、来自人群的声学信号、来自交通的声学信号等。
为了处理从音频传感器114收集的声学信号，示例无人机100包括示例音频降噪模块118。如下文更详细地公开的，音频降噪模块118处理从音频传感器114收集的声学数据并移除自生成噪声116以产生用于处理的外部声学数据的音频信号，该音频数据是来自周围环境的非模糊声学数据。音频降噪模块118使用消除算法，在该消除算法中，所跟踪的RPM数据被用作匹配滤波器(诸如例如，下文详述的维纳滤波器)中的参考输入。示例无人机100还包括示例传送器120，用于在降噪之后将音频信号传送至外部设备。
图2是图1的示例无人机100的框图，该示例无人机包括用于实现由无人机100收集的声学数据中的降噪的示例音频降噪模块118。如图2所示，示例无人机100包括转子104、106、马达108、马达控制器110、RPM传感器112、音频传感器114和传送器120。从RPM传感器112收集的RPM数据和从音频传感器114收集的声学数据经由一个或多个传感器接口302被输入至音频降噪模块118中。
音频降噪模块118还包括示例分析器304和示例滤波器306，该示例分析器304和示例滤波器306协调作为用于处理如本文公开的声学数据的装置。音频降噪模块118进一步包括校准器308和数据库310，它们也被用于处理如本文公开的声学数据。在一些示例中，音频降噪模块118操作用于在声学数据的记录和无人机100的操作期间滤波声学数据。在其他示例中，数据库310存储具有用于稍后时间点处的滤波和/或其他处理的时间戳的RPM数据。在此示例中，还可存储从音频传感器114收集的声学数据以用于后处理。
当无人机维持静态飞行位置时，其噪声趋于恒定，因此，常规的单通道频谱滤波(如维纳(Wiener)滤波器)可有效降低此噪声。然而，典型的无人机飞行不是静止的，而是动态的，这导致声学数据随时间的音调变化。例如，当改变位置和/或飞行速度时、当上升或下降时、和/或当在刮风条件下保持在一个点时，由无人机100产生的噪声116出现音调的动态变化。在这些情况下，转子104、106不断地改变速度，并且因此，噪声116的音调特性也改变。音频降噪模块118通过在例如数据库310中包括映射到不同旋转运动数据(包括例如，不同的RPM)的滤波器集合来考虑这些变化。
为了建立滤波器和RPM的映射，校准器308和马达控制器110导致马达108使转子104、106旋转期望的、设定的RPM。RPM传感器112收集RPM数据以确认转子104、106正以期望的RPM旋转。当转子104、106以期望的RPM旋转时，音频传感器114收集声学数据。在受控环境中，可将测量的声学数据确定为由无人机110产生的自生噪声116。音频降噪模块118可确定自生噪声116的频谱的平均振幅，该平均振幅被用于计算什么级别的滤波将对消除在期望RPM下产生的自生噪声116有效。在一些示例中，计算出的滤波器是维纳滤波器。也可使用其他已知的滤波技术。
音频降噪模块118还可确定不同级别的滤波。例如，可在一个环境中使用一个滤波器，而可在不同的环境中使用不同的滤波器。更具体地，具有相对较低的信噪比(SNR)增益的较温和的滤波器可在相对较少噪声的环境中提供期望的结果。而具有相对较高SNR增益的更激进的滤波器可在相对较嘈杂的环境中提供期望的结果。在一些示例中，通过改变用于建立不同滤波器和/或滤波器级别的滤波器系数来确定或区分不同的滤波器和/或不同级别的滤波。
指示哪种滤波对特定RPM和期望的SNR增益有效的结果被存储在数据库310中。在一些示例中，结果被存储在诸如表1中所示的参考中。
RPM 温和的滤波器 激进的滤波器
X Y Z
X+1 Y’ Z’
X+2 Y” Z”
X+3 Y”’ Z”’
表1
校准器308可通过任何期望数量的RPM、期望的SNR增益和期望的转子数来继续校准过程，以用一个或多个滤波器校准每一个。结果被映射并存储在数据库310中。在校准过程之后，在无人机100的操作期间，分析器304访问RPM-滤波器的映射。在一些示例中，向音频降噪模块118提供预先校准的实验数据，从而避免了校准过程。
在无人机100的操作期间，用户可能希望记录来自外部环境的音频信号。在这种情况下，音频传感器114从环境中收集原始声学数据。原始声学数据包括模糊期望音频信号(即，表示周围音频或环境音频的全无由无人机100自身生成的噪声116或者具有大大降低水平的由无人机100自身生成的噪声116的干净音频信号)的自生成噪声116。原始声学数据经由传感器接口302被输入至音频降噪模块118。传感器接口302接受从RPM传感器112收集的RPM数据，该PRM数据指示在收集原始声学数据时转子104、106中的一个或多个的RPM。
分析器304使用例如上文公开的映射将每个转子的RPM与相应的滤波器进行匹配。滤波器306利用由分析器304标识的(诸)滤波器来对原始声学数据进行滤波。在多个转子处于操作中的情况下，可使用多个滤波器来对相同的原始声学数据进行滤波。
在一些示例中，音频降噪模块118被设置成使用具有较低SNR增益的滤波器以避免信号失真。在其他示例中，音频降噪模块118被设置成使用具有较高SNR增益的滤波器以具有较好的降噪。在一些示例中，音频降噪模块118由制造商设置。在其他示例中，用户可选择期望的SNR增益水平并且可在操作无人机100时改变该水平。
在其他示例中，音频降噪模块118可分析环境并自主地选择滤波级别。例如，音频降噪模块118可估计声学数据中的当前SNR并基于SNR选择滤波器。在一些示例中，音频降噪模块118利用较温和滤波器处理声学数据，并且随后分析经滤波数据中的SNR。如果SNR不合需要地低，则音频降噪模块118随后用较激进的滤波器处理声学数据。在操作中，音频降噪模块118可不断地、周期性地或非周期性地监视SNR，并基于SNR在操作期间动态地调整滤波器级别。
在一些示例中，分析器304不能标识与特定RPM精确匹配的滤波器。例如，如果RPM-滤波器映射包括以五个RPM增量的RPM的映射，则分析器304将不标识针对落在五个RPM增量之间的特定RPM的滤波器。在此示例中，分析器304使用模糊逻辑来标识混合滤波器，该混合滤波器是用于高于所感测RPM的RPM以及低于所感测RPM的RPM的两个滤波器的组合。滤波器306随后根据混合滤波器来对原始声学数据进行滤波。
在许多示例中，RPM数据随转子104、106的速度改变而动态地改变。当经更新RPM数据通过传感器接口302被馈送至音频降噪模块118时，分析器304继续动态地选择与改变的RPM数据相关联的滤波器，并将所选择的滤波器与对应于原始声学数据的特定时刻相关联。滤波器306依分析器304随时间的指示来改变滤波器。在其他示例中，声学数据和RPM数据例如被存储在数据库310中，并且在后处理设置中被滤波，在该后处理设置中，RPM数据被稍后分析以选择要应用于在不同时间点记录的声学数据的不同段的一个或多个滤波器。
图3A-3C例示出对声学数据进行滤波的示例结果。图3A示出由无人机(例如，图1和图2的无人机100)收集的原始声学数据的示例时域信号和示例均方根(RMS)分布。声学数据包含由无人机100产生的噪声(例如，自生噪声116)，该噪声覆盖基础音频信号。在此示例中，基础音频信号是从距离无人机100大约一米远的讲话者记录的人的语音。时域信号被噪声遮蔽并且未示出表示人的语音的信号。RMS分布示出相对一致的分贝水平，其也无法示出讲话者的变化的分贝水平。
图3B示出已使用第一滤波器进行滤波的图3A的声学数据的示例时域信号和示例RMS分布。在此示例中，第一滤波器是相对温和的滤波器(与用于产生图3C的结果的滤波器相比)。在此示例中，音频降噪模块118使用获得20dB增益的第一滤波器。与图3A中所示的信号相比，图3B中的信号具有更高的SNR，并且人的声音的音频信号清晰可见，尽管信号中仍然残存一些噪声。
图3B例示出已使用第二滤波器进行滤波的图3A的声学数据的示例时域信号和示例RMS分布。在此示例中，第二滤波器是相对较激进的滤波器(与用于产生图3B的结果的滤波器相比)。在此示例中，音频降噪模块118使用获得30dB增益的第二滤波器。与图3B中所示的信号相比，图3C中的信号具有更高的SNR并且人的声音的音频信号更清晰可见。图3C的所得经滤波信号中存在比图3B的所得经滤波信号少的噪声。例如，其声音由无人机100记录的人在第三与第四秒之间停止讲话或暂停其语音。图3B示出此时的少量噪声，但是图3C示出在不讲话时不存在音频信号。因此，利用更高的SNR和更大的增益，较激进的滤波器可提供更清晰的音频信号。在一些示例中，更激进的滤波器可完全消除噪声。尽管如此，在一些示例中，期望较温和的滤波器来避免期望音频信号的失真。
一旦从原始声学数据移除(例如，减去、减少等)自生噪声116，剩余声学数据就表示外部环境。
虽然图2示出了实现图1的无人机100的示例方式，但图2所示的元件、进程和/或设备中的一个或多个可以被组合、拆分、重新设置、省略、消除和/或以任何方式被实现。此外，图2的示例马达控制器110、示例RPM传感器112、示例音频传感器114、示例传送器120、示例传感器接口302、示例分析器304、示例滤波器306、示例校准器308、示例数据库310、和/或更一般地示例音频降噪模块118可由硬件、软件、固件和/或硬件、软件和/或固件的任何组合实现。因此，例如，图2的示例马达控制器110、示例RPM传感器112、示例音频传感器114、示例传送器120、示例传感器接口302、示例分析器304、示例滤波器306、示例校准器308、示例数据库310、和/或更一般地示例音频降噪模块118中的任一者可由一个或多个模拟或数字电路、逻辑电路、可编程处理器、专用集成电路(ASIC)、可编程逻辑器件(PLD)和/或现场可编程逻辑器件(FPLD)实现。当阅读涵盖纯软件和/或固件实现的本专利的装置或系统权利要求中的任一项时，图2的示例马达控制器110、示例RPM传感器112、示例音频传感器114、示例传送器120、示例传感器接口302、示例分析器304、示例滤波器306、示例校准器308、示例数据库310、和/或更一般地示例音频降噪模块118中的至少一者由此被明确地限定为包括包含软件和/或固件的非瞬态计算机可读存储设备或存储盘(诸如，存储器、数字多功能盘(DVD)、紧凑盘(CD)、蓝光盘等等)。此外，图1的示例无人机100可包括除图2中所示的之外的一个或多个元件、进程和/或设备或作为图2中所示的替代的一个或多个元件、进程和/或设备，并且/或者可以包括所有示出的元件、进程和/或设备中的多于一个。
图4和图5示出表示用于实现图1和图2的无人机100的示例机器可读指令的流程图。在本示例中，机器可读指令包括用于由处理器(诸如，结合图6在下文讨论的示例处理器平台600中示出的处理器612)执行的进程或程序400、500。虽然程序400、500能以存储于诸如CD-ROM、软盘、硬驱动器、数字多功能盘(DVD)、蓝光盘或与处理器612关联的存储器之类的非瞬态计算机可读存储介质上的软件来具体化，但是全部程序400、500和/或其部分可替代地由除处理器612之外的器件执行，和/或以固件或专用硬件来具体化。此外，虽然分别参考图4和图5所例示的流程图描述了示例程序400、500，但是可替代地使用实现示例无人机100的许多其他方法。例如，可改变框的执行次序，和/或可改变、消除或组合所描述的框中的一些框。附加地或替代地，可由被结构化为执行对应的操作而不执行软件或固件的一个或多个硬件电路(例如，分立和/或集成模拟和/或数字电路、现场可编程门阵列(FPGA)、专用集成电路(ASIC)、比较器、运算放大器(op-amp)、逻辑电路等)来实现框中的任何框或所有框。
如上文所提及，可使用存储于非瞬态计算机和/或机器可读介质上的经编码指令(例如，计算机和/或机器可读指令)来实现图4的示例程序400和图5的示例程序500，该非瞬态计算机和/或机器可读介质例如：硬盘驱动器、闪存、只读存储器、紧凑盘、数字多功能盘、高速缓存、随机存取存储器和/或在其中信息被存储达任何持续时间(例如，在扩展时间段内、永久地、达简短的实例、用于临时缓冲和/或用于对信息的高速缓存)的任何其他存储设备或存储盘。如本文中所使用，术语非瞬态计算机可读介质被明确地限定为包括任何类型的计算机可读存储设备和/或存储盘，并且排除传播信号并排除传输介质。“包含”和“包括”(及其所有形式和时态)在本文中用作开放式术语。因此，每当权利要求列出跟随任何形式的“包含”或“包括”(例如，包括、包含等)的任何内容时，要理解的是，额外的要素、项等可以存在而不超出对应权利要求的范围。如本文所使用的，当短语“至少”被用作与权利要求同步使用的转换术语时是和术语“包含”和“包括”一样的开放式的。
图4的示例校准程序400始于音频降噪模块118的校准器308设置校准旋转运动(例如，RPM)(框402)以使马达控制器110操作马达108并使转子104、106以校准RPM旋转。当无人机100以校准RPM操作时，音频传感器114中的一个或多个收集声学数据(框404)。
分析器304分析由(诸)音频传感器114收集的声学数据以确定噪声量并建立针对如上所述的校准RPM的参考滤波器(框406)。例如，分析器304确定声学数据的频谱中的平均振幅，该平均振幅被用来计算用于对校准RPM下产生的噪声进行滤波的一个或多个滤波器。基于例如SNR，特定RPM可具有与其相关联的多个滤波器。分析器304将校准RPM与(诸)参考滤波器进行匹配(框408)，并且可将匹配存储在数据库310中的参考表(诸如例如，上述表1)中。
示例校准程序400还确定是否要收集附加校准数据(框410)。如果要收集附加校准数据，则声学降噪模块118继续并设置不同的校准RPM(框402)以获得进一步的滤波数据并构建如上所述的参考表。如果不收集附加校准数据(框410)，则校准程序400结束。
图5的示例操作程序500示出示例无人机100的操作。在操作期间，声学降噪模块118使用例如(诸)声学传感器114中的一个或多个来收集声学数据(框502)，这些声学传感器114经由(诸)传感器接口302来将声学数据发送至声学降噪模块118。声学降噪模块118还使用例如(诸)RPM传感器112中的一个或多个来从转子或经由转子观察收集旋转运动数据(例如，RPM数据)(框504)，这些RPM传感器112经由(诸)传感器接口302将RPM数据发送至声学降噪模块118。
分析器304确定RPM数据是否与滤波器相关(框506)。例如，分析器304检查从(诸)RPM传感器112收集的RPM数据，并将RPM数据与存储在数据库310中的参考表(例如，表1)中的RPM数据进行比较，以确定RPM数据是否与数据库310中的RPM匹配。选择RPM被存储在数据库310中并且基于例如图4的校准程序400和/或供给至无人机100或利用无人机100编程的其他信息来与一个或多个滤波器相关联。
如果分析器304确定RPM数据与滤波器不匹配(框506)，则分析器304标识相邻滤波器(框508)。例如，分析器304标识数据库310中存在的针对高于所收集RPM值的下一RPM值的滤波器以及针对低于所收集RPM值的下一RPM值的滤波器。分析器304基于相邻滤波器来确定组合滤波器(框510)。例如，分析器根据所收集RPM值与数据库310中同滤波器相关联的相应RPM值的邻近度来使用模糊逻辑对每个滤波器进行加权。在确定组合滤波器(框510)之后，分析器304将该滤波器设置用于以此速度操作的转子(框512)。
如果分析器304确定RPM数据确实与数据库310中的滤波器匹配(框506)，则分析器304将该滤波器设置用于以此速度操作的转子(框512)。
示例操作程序500包括确定是否应包括来自另一转子的数据(框514)。例如，无人机100包括四个转子104、106。转子104、106能以不同的速度操作，并且因此可产生不同的噪声116。当转子104、106产生不同的噪声时，相同的滤波器将不能有效地对噪声进行滤波，因为滤波器是针对特定RPM下生成的特定噪声而度身定制的。如果要包括来自一个或多个附加转子的数据(框514)，则声学降噪模块118从附加转子收集RPM数据(框504)并继续标识如上所述的适当滤波器。
如果此处确定将不添加附加转子数据(框514)，则使用具有针对(诸)转子104、106的特定RPM标识的(诸)滤波器的滤波器306来对声学数据进行滤波以减少或消除噪声并产生音频信号(方框516)。音频信号表示无人机100外部的环境中的声学数据，该声学数据不具有由来自转子104、106的自生噪声116导致的模糊。
音频降噪模块118确定是否需要滤波器调整(框518)。例如，转子104、106的速度(RPM)可能改变、先前选择的滤波器可能无法提供期望的SNR、一个或多个转子104、106可能开始或停止操作等。这些事件可能导致所选择的滤波器提供不充分的滤波。如果音频降噪模块118确定需要滤波器调整(框518)，则音频降噪模块118继续并收集声学数据(框502)，并且通过操作程序500而前进。如果音频降噪模块118确定不需要滤波器调整(框518)，则声学降噪模块118确定是否要继续处理声学数据(框520)。如果要继续处理声学数据，则声学降噪模块118继续利用设定的滤波器进行滤波(框516)。如果声学降噪模块118确定不再处理声学数据(框520)，则操作程序500结束。
图6是能够执行图4和图5的指令以实现图1和图2的装置的示例处理器平台600的框图。处理器平台600可以是例如服务器、个人计算机、移动设备(例如，蜂窝电话、智能电话、诸如iPadTM的平板)、个人数字助理(PDA)、因特网设备、DVD播放器、CD播放器、数字视频记录仪、蓝光播放器、游戏控制台、个人视频记录仪、机顶盒、或任何其他类型的计算设备。
所例示示例的处理器平台600包括处理器612。所例示示例的处理器612是硬件。例如，处理器612可由来自任何所期望的家族或制造商的一个或多个集成电路、逻辑电路、微处理器或控制器实现。硬件处理器可以是基于半导体的(例如，硅基)器件。在此示例中，处理器实现图2的示例马达控制器110、示例传感器接口302、示例分析器304、示例滤波器306、示例校准器308和/或示例音频降噪模块118。
所例示示例的处理器612包括本地存储器613(例如，高速缓存)。所例示示例的处理器612经由总线618与包括易失性存储器614和非易失性存储器616的主存储器通信。易失性存储器614可由同步动态随机存取存储器(SDRAM)、动态随机存取存储器(DRAM)、RAMBUS动态随机存取存储器(RDRAM)和/或任何其他类型的随机存取存储器设备实现。非易失性存储器616可由闪存和/或任何其他所期望类型的存储器设备实现。由存储器控制器控制对主存储器614、616的访问。
所例示示例的处理器平台600还包括接口电路620。接口电路620可由任何类型的接口标准实现，诸如，以太网接口、通用串行总线(USB)和/或PCI快速接口。
在所例示的示例中，一个或多个输入设备622被连接至接口电路620。(诸)输入设备622准许用户将数据和/或命令输入至处理器612中。(多个)输入设备可以由例如音频传感器、麦克风、相机(静止的或视频)、键盘、按钮、鼠标、触屏、轨迹板、轨迹球、等点鼠标和/或语音识别系统实现。
一个或多个输出设备624也被连接至所图示的示例的接口电路620。输出设备624可例如由显示设备(例如，发光二极管(LED)、有机发光二极管(OLED)、液晶显示器、阴极射线管显示器(CRT)、触屏、触觉输出设备、打印机和/或扬声器)实现。因此，所例示示例中的接口电路620典型地包括图形驱动器卡、图形驱动器芯片和/或图形驱动器处理器。
所例示示例的接口电路620还包括诸如发射机、接收机、收发机、调制解调器和/或网络接口卡之类的通信设备，以促进经由网络626(例如，以太网连接、数字订户线路(DSL)、电话线、同轴电缆、蜂窝电话系统等等)与外部机器(例如，任何种类的计算设备)交换数据。
所例示示例的处理器平台600还包括一个或多个用于存储软件和/或数据的大容量存储设备628。此类大容量存储设备628的示例包括软盘驱动器、硬盘驱动器、紧凑盘驱动器、蓝光盘驱动器、RAID系统和数字多功能盘(DVD)驱动器。
图6的经编码指令632可被存储在大容量存储设备628中，存储在易失性存储器614中，存储在非易失性存储器616中和/或存储在诸如CD或DVD之类的可移除有形计算机可读存储介质上。
从上述内容将理解，已经公开了通过使无人机能够记录环境音频来改善无人机的音频操作的示例方法、装置和制品。
利用无人机的先前音频记录会被无人机产生的噪音淹没，或者需要有限方向的麦克风以及高成本且昂贵的硬件附加件。本公开的示例提供了一种处理转子噪声的新颖方法，该方法具有最少的附加硬件或没有附加硬件以及低的计算开销。
在本文公开的示例中，不需要附加硬件来记录来自周围环境的音频信号并减少所收集的声学信号中的噪声。转子速度信息已经可从现有传感器或从转子控制器获得。许多目前的商用无人机已具有用于飞行控制目的的内置的某种RPM传感器。本公开的示例以新的方法利用此RPM数据并且不需要任何附加硬件。
此外，本文公开的示例提供改进的性能以及降低的开销，因为关于马达/转子速度来对滤波器进行的预校准实现了用于选择高质量滤波器(诸如例如，维纳滤波器)的参考表办法，同时最小化了计算成本。
本文公开了用于无人机音频降噪的示例方法、装置、系统和制品。进一步的示例和其组合包括以下内容。
示例1是一种用于减少来自无人机的音频噪声的装置。示例装置包括：第一传感器，该第一传感器用于收集声学数据；以及第二传感器，该第二传感器用于收集转子的旋转运动数据。示例装置还包括分析器，该分析器用于将旋转运动数据与滤波器进行匹配以及使用滤波器对声学数据进行滤波。分析器还用于基于经滤波声学数据来生成音频信号。
示例2包括示例1的装置，其中第一传感器是全向麦克风。
示例3包括示例1的装置，其中分析器用于在转子的旋转运动期间对声学数据进行滤波。
示例4包括示例1-3中任一项的装置，其中滤波器是第一滤波器，并且分析器用于通过以下操作来将旋转运动数据与第一滤波器进行匹配：标识旋转运动值大于旋转运动数据的第二滤波器；标识旋转运动值小于旋转运动数据的第三滤波器；以及将第二滤波器和第三滤波器的组合用作第一滤波器。
示例5包括示例1-3中任一项的装置，其中旋转运动数据是第一旋转运动数据，滤波器是第一滤波器，并且转子是第一转子。在示例5的装置中，第二传感器或第三传感器用于收集第二转子的第二旋转运动数据，并且分析器进一步用于：将第二旋转运动数据与第二滤波器进行匹配；以及使用第二滤波器对声学数据进行滤波。
示例9包括示例1-3中任一项的装置，其中旋转运动数据是在第一时间收集的第一旋转运动数据，滤波器是第一滤波器，并且音频信号是第一时间处的第一音频信号。在示例6的装置中，第二传感器用于在第二时间收集转子的第二旋转运动数据，第二旋转运动数据具有与第一旋转运动数据不同的值，并且分析器进一步用于：使第二旋转运动数据与第二滤波器相匹配，第二滤波器与第一滤波器不同；利用第二滤波器对声学数据进行滤波；以及基于利用第二滤波器对声学数据的滤波来生成第二时间处的第二音频信号。
示例7包括示例1-3中任一项的装置，其中分析器用于基于音频信号来标识基于地面的活动。
示例8包括示例1-3中任一项的装置，并且进一步包括用于将转子设置成第一校准旋转运动的控制器。在示例8的装置中，第一传感器用于在转子被设置成处于第一校准旋转运动时收集第一预备声学数据，并且分析器将基于第一预备声学数据来建立第一参考滤波器并将第一校准旋转运动与第一参考滤波器进行匹配。在示例8的装置中，控制器用于将转子设置成第二校准旋转运动，第一传感器用于在转子被设置成处于第二校准旋转运动时收集第二预备声学数据，并且分析器将基于第二预备声学数据来建立第二参考滤波器并将第二校准旋转运动与第二参考滤波器进行匹配。同样，在示例8的装置中，分析器通过以下操作来使旋转运动数据与滤波器相匹配：确定第一校准旋转运动或第二校准旋转运动中的哪一个在值上靠近旋转运动数据；在同第一校准旋转运动或第二校准旋转运动相关联的第一参考滤波器与第二参考滤波器之间选择在值上靠近旋转运动数据的那个；以及将所选择的第一参考滤波器或第二参考滤波器用作滤波器。
示例9包括示例8的装置，其中分析器用于通过以下操作建立第一参考滤波器：将第一预备声学数据转换至频域中；确定频谱的平均振幅；以及基于频谱的平均振幅来执行谱减法。
示例10包括示例8的装置，其中分析器用于基于信噪比增益来建立第一参考滤波器。
示例11是一种减少来自无人机的音频噪声的方法。示例11的方法包括：通过利用处理器执行指令来建立针对从转子收集的旋转运动数据的滤波器；通过利用处理器执行指令来使用滤波器对从无人机收集的声学数据进行滤波；以及通过利用处理器执行指令来基于经滤波声学数据来生成音频信号。
示例12包括示例11的方法，并且进一步包括利用全向麦克风收集声学数据。
示例13包括示例11的方法，并且进一步包括在旋转运动数据的收集期间对声学数据进行滤波。
示例14包括示例11-13中任一项的方法，其中滤波器是第一滤波器，并且将旋转运动数据与第一滤波器进行匹配。另外，示例14的方法进一步包括：标识旋转运动值大于旋转运动数据的第二滤波器；标识旋转运动值小于旋转运动数据的第三滤波器；以及将第二滤波器和第三滤波器的组合用作第一滤波器。
示例15包括示例11-13中任一项的方法，其中旋转运动数据是第一旋转运动数据，滤波器是第一滤波器，并且转子是第一转子。另外，示例15的方法进一步包括：建立针对从第二转子收集的第二旋转运动数据的第二滤波器；以及利用第二滤波器对声学数据进行滤波。
示例16包括示例11-13中任一项的方法，其中旋转运动数据是在第一时间收集的第一旋转运动数据，滤波器是第一滤波器，并且音频信号是第一时间处的第一音频信号。示例16的方法进一步包括：建立针对在第二时间从转子收集的第二旋转运动数据的第二滤波器，第二旋转运动数据具有与第一旋转运动数据不同的值，第二滤波器与第一滤波器不同；利用第二滤波器对声学数据进行滤波；基于利用第二滤波器对声学数据的滤波来生成第二时间处的第二音频信号。
示例17包括示例11-13中任一项的方法，并且进一步包括基于音频信号来标识基于地面的活动。
示例18包括示例11-13中任一项的方法，并进一步包括：将转子设置成第一校准旋转运动；当转子被设置成处于第一校准旋转运动时收集第一预备声学数据；基于第一预备声学数据来建立第一参考滤波器；将第一校准旋转运动与第一参考滤波器进行匹配；将转子设置成第二校准旋转运动；当转子被设置成处于第二校准旋转运动时收集第二预备声学数据；基于第二预备声学数据来建立第二参考滤波器；以及将第二校准旋转运动与第二参考滤波器进行匹配。在示例18的方法中，使旋转运动数据与滤波器相匹配包括：确定第一校准旋转运动或第二校准旋转运动中的哪一个在值上靠近旋转运动数据；在与第一校准旋转运动或第二校准旋转运动相关联的第一参考滤波器与第二参考滤波器之间选择在值上靠近旋转运动数据的那个；以及将所选择的第一参考滤波器或第二参考滤波器用作滤波器。
示例13包括示例11的方法，其中建立第一参考滤波器包括：将第一预备声学数据转换至频域中；确定频谱的平均振幅；以及基于频谱的平均振幅来执行谱减法。
示例20包括示例18的方法，其中基于信噪比增益来建立第一参考滤波器。
示例21是一种无人机，包括：转子；以及马达，马达用于使转子旋转。示例21的无人机还包括用于收集声学数据的装置；以及用于收集转子的每分钟转数(旋转运动)数据的装置。另外，示例21的无人机包括用于通过以下操作来处理声学数据和旋转运动数据的装置：将旋转运动数据与滤波器进行匹配；使用滤波器对声学数据进行滤波；以及基于经滤波声学数据来生成音频信号。
示例22包括示例21的无人机，其中用于收集旋转运动数据的装置包括全向麦克风。
示例23包括示例21的无人机，其中用于收集旋转运动数据的装置包括振动传感器、红外旋转传感器或输入电流传感器中的至少一个。
示例24包括示例21-23中任一项的无人机，其中滤波器是第一滤波器，并且用于处理的装置用于将旋转运动数据与第一滤波器进行匹配。标识旋转运动值大于旋转运动数据的第二滤波器；标识旋转运动值小于旋转运动数据的第三滤波器；以及将第二滤波器和第三滤波器的组合用作第一滤波器。
示例25包括示例21-23中任一项的无人机，其中旋转运动数据是第一旋转运动数据，滤波器是第一滤波器，并且转子是第一转子。在示例25的无人机中，用于收集旋转运动数据的装置用于收集第二转子的第二旋转运动数据，并且用于处理的装置用于：将第二旋转运动数据与第二滤波器进行匹配；以及使用第二滤波器对声学数据进行滤波。
示例26包括示例21-23中任一项的无人机，其中旋转运动数据是在第一时间收集的第一旋转运动数据，滤波器是第一滤波器，并且音频信号是第一时间处的第一音频信号。在示例26的无人机中，用于收集旋转运动数据的装置用于在第二时间收集转子的第二旋转运动数据，第二旋转运动数据具有与第一旋转运动数据不同的值。同样在示例26的无人机中，用于处理的装置进一步用于：使第二旋转运动数据与第二滤波器相匹配，第二滤波器与第一滤波器不同；利用第二滤波器对声学数据进行滤波；以及基于利用第二滤波器对声学数据的滤波来生成第二时间处的第二音频信号。
示例27包括示例21-23中任一项的无人机，其中用于处理的装置用于基于音频信号来标识基于地面的活动。
示例28包括示例21-23中任一项的无人机，其中进一步包括用于控制转子的装置，用于：将转子设置成第一校准旋转运动，其中用于收集旋转运动数据的装置用于在转子被设置成处于第一校准旋转运动时收集第一预备声学数据，并且用于处理的装置用于基于第一预备声学数据建立第一参考滤波器并将第一校准旋转运动与第一参考滤波器进行匹配。在示例28的无人机中，用于控制转子的装置还用于：将转子设置成第二校准旋转运动，其中用于收集旋转运动数据的装置用于在转子被设置成处于第二校准旋转运动时收集第二预备声学数据，并且用于处理的装置用于基于第二预备声学数据建立第二参考滤波器并将第二校准旋转运动与第二参考滤波器进行匹配。另外，在示例28的无人机中，用于处理的装置通过以下操作来使旋转运动数据与滤波器相匹配：确定第一校准旋转运动或第二校准旋转运动中的哪一个在值上靠近旋转运动数据；在与第一校准旋转运动或第二校准旋转运动相关联的第一参考滤波器与第二参考滤波器之间选择在值上靠近旋转运动数据的那个；以及将所选择的第一参考滤波器或第二参考滤波器用作滤波器。
示例29包括示例28的无人机，其中用于处理的装置用于通过以下操作建立第一参考滤波器：将第一预备声学数据转换至频域中；确定频谱的平均振幅；以及基于频谱的平均振幅来执行谱减法。
示例30包括示例28的无人机，其中用于处理的装置用于基于信噪比增益来建立第一参考滤波器。
示例31是一种包括计算机可读指令的非瞬态计算机可读存储介质，计算机可读指令在被执行时，使一个或多个处理器至少用于：使从转子收集的旋转运动数据与滤波器相匹配；使用滤波器对从无人机收集的声学数据进行滤波；以及基于经滤波声学数据来生成音频信号。
示例32包括示例31的存储介质，其中计算机可读指令在被执行时，进一步使处理器用于利用全向麦克风收集声学数据。
示例33包括示例31的存储介质，其中计算机可读指令在被执行时，进一步使处理器用于在旋转运动期间对声学数据进行滤波。
示例34包括示例31-33中任一项的存储介质，其中滤波器是第一滤波器，并且计算机可读指令在被执行时，进一步使处理器通过以下操作来将旋转运动数据与第一滤波器进行匹配：标识旋转运动值大于旋转运动数据的第二滤波器；标识旋转运动值小于旋转运动数据的第三滤波器；以及将第二滤波器和第三滤波器的组合用作第一滤波器。
示例35包括示例31-33中任一项定义的存储介质，其中旋转运动数据是第一旋转运动数据，滤波器是第一滤波器，并且转子是第一转子。示例35的存储介质包括计算机可读指令，该计算机可读指令在被执行时，进一步使处理器用于：将从第二转子收集的第二旋转运动数据与第二滤波器进行匹配；以及使用第二滤波器对声学数据进行滤波。
示例36包括示例31-33中任一项定义的存储介质，其中旋转运动数据是在第一时间收集的第一旋转运动数据，滤波器是第一滤波器，并且音频信号是第一时间处的第一音频信号。示例36的存储介质包括计算机可读指令，该计算机可读指令在被执行时，进一步使处理器用于：使在第二时间从转子收集的第二旋转运动数据与第二滤波器相匹配，第二旋转运动数据具有与第一旋转运动数据不同的值，第二滤波器与第一滤波器不同；利用第二滤波器对声学数据进行滤波；基于利用第二滤波器对声学数据的滤波来生成第二时间处的第二音频信号。
示例37包括示例31-33中任一项定义的存储介质，其中计算机可读指令在被执行时，进一步使处理器用于基于音频信号来标识基于地面的活动。
示例38包括示例31-33中任一项定义的存储介质，其中计算机可读指令在被执行时，进一步使处理器用于：将转子设置成第一校准旋转运动；当转子被设置成处于第一校准旋转运动时收集第一预备声学数据；基于第一预备声学数据来建立第一参考滤波器；将第一校准旋转运动与第一参考滤波器进行匹配；将转子设置成第二校准旋转运动；当转子被设置成处于第二校准旋转运动时收集第二预备声学数据；基于第二预备声学数据来建立第二参考滤波器；以及将第二校准旋转运动与第二参考滤波器进行匹配。示例38的存储介质包括计算机可读指令，该计算机可读指令在被执行时，进一步使处理器用于通过以下操作来将旋转运动数据与滤波器进行匹配：确定第一校准旋转运动或第二校准旋转运动中的哪一个在值上靠近旋转运动数据；在与第一校准旋转运动或第二校准旋转运动相关联的第一参考滤波器与第二参考滤波器之间选择在值上靠近旋转运动数据的那个；以及将所选择的第一参考滤波器或第二参考滤波器用作滤波器。
示例39包括示例38定义的存储介质，其中计算机可读指令在被执行时，进一步使处理器用于通过以下操作建立第一参考滤波器：将第一预备声学数据转换至频域中；确定频谱的平均振幅；以及基于频谱的平均振幅来执行谱减法。
示例40包括示例39定义的存储介质，其中计算机可读指令在被执行时，进一步使处理器用于基于信噪比增益来建立第一参考滤波器。
尽管本文中已公开了某些示例方法、装置和制品，但本专利涵盖的范围并不限于此。相反，本专利涵盖落入本专利权利要求范围内的全部方法、装置和制品。

Claims (25)

1.一种用于减少来自无人机的音频噪声的装置，所述装置包括：
第一传感器，所述第一传感器用于收集声学数据；
第二传感器，所述第二传感器用于收集转子的旋转运动数据；以及
分析器，所述分析器用于：
将所述旋转运动数据与滤波器进行匹配；
使用所述滤波器对所述声学数据进行滤波；以及
基于经滤波声学数据来生成音频信号。
2.如权利要求1所述的装置，其特征在于，所述第一传感器是全向麦克风。
3.如权利要求1所述的装置，其特征在于，所述分析器用于在所述转子的旋转运动期间对所述声学数据进行滤波。
4.如权利要求1-3中任一项所述的装置，其特征在于，所述滤波器是第一滤波器，并且所述分析器用于通过以下操作来将所述旋转运动数据与所述第一滤波器进行匹配：
标识旋转运动值大于所述旋转运动数据的第二滤波器；
标识旋转运动值小于所述旋转运动数据的第三滤波器；以及
将所述第二滤波器和所述第三滤波器的组合用作所述第一滤波器。
5.如权利要求1-3中任一项所述的装置，其特征在于，所述旋转运动数据是第一旋转运动数据，所述滤波器是第一滤波器，并且所述转子是第一转子，
其中所述第二传感器或第三传感器用于收集第二转子的第二旋转运动数据，并且所述分析器进一步用于：
将所述第二旋转运动数据与第二滤波器进行匹配；以及
利用所述第二滤波器来对所述声学数据进行滤波。
6.如权利要求1-3中任一项所述的装置，其特征在于，所述旋转运动数据是在第一时间收集的第一旋转运动数据，所述滤波器是第一滤波器，并且所述音频信号是在所述第一时间时的第一音频信号，
其中所述第二传感器用于在第二时间收集所述转子的第二旋转运动数据，所述第二旋转运动数据具有与所述第一旋转运动数据不同的值，并且所述分析器进一步用于：
将所述第二旋转运动数据与第二滤波器进行匹配，所述第二滤波器与所述第一滤波器不同；
利用所述第二滤波器对所述声学数据进行滤波；以及
基于利用所述第二滤波器对所述声学数据的滤波来生成所述第二时间处的第二音频信号。
7.如权利要求1-3中任一项所述的装置，其特征在于，所述分析器用于基于所述音频信号来标识基于地面的活动。
8.如权利要求1-3中任一项所述的装置，其特征在于，进一步包括用于将所述转子设置成第一校准旋转运动的控制器，其中所述第一传感器用于在所述转子被设置成处于所述第一校准旋转运动时收集第一预备声学数据，并且所述分析器用于基于所述第一预备声学数据来建立第一参考滤波器并将所述第一校准旋转运动与所述第一参考滤波器进行匹配，
其中所述控制器用于将所述转子设置成第二校准旋转运动，所述第一传感器用于在所述转子被设置成处于所述第二校准旋转运动时收集第二预备声学数据，并且所述分析器用于基于所述第二预备声学数据来建立第二参考滤波器并将所述第二校准旋转运动与所述第二参考滤波器进行匹配，以及
其中所述分析器通过以下操作来将所述旋转运动数据与滤波器进行匹配：
确定所述第一校准旋转运动或所述第二校准旋转运动中的哪一个在值上接近所述旋转运动数据；
在同所述第一校准旋转运动或所述第二校准旋转运动相关联的所述第一参考滤波器与所述第二参考滤波器之间选择在值上接近所述旋转运动数据的那个；以及
将所选择的第一参考滤波器或第二参考滤波器用作所述滤波器。
9.如权利要求8所述的装置，其特征在于，所述分析器用于通过以下操作建立所述第一参考滤波器：
将所述第一预备声学数据转换至频域；
确定频谱的平均振幅；以及
基于所述频谱的所述平均振幅来执行谱减法。
10.如权利要求8所述的装置，其特征在于，所述分析器用于基于信噪比增益来建立所述第一参考滤波器。
11.一种减少来自无人机的音频噪声的方法，所述方法包括：
通过利用处理器执行指令来建立针对从转子收集的旋转运动数据的滤波器；
通过利用处理器执行指令来使用所述滤波器对从所述无人机收集的声学数据进行滤波；以及
通过利用处理器执行指令来基于经滤波声学数据来生成音频信号。
12.如权利要求11所述的方法，其特征在于，所述滤波器是第一滤波器，并且将所述旋转运动数据与所述第一滤波器进行匹配包括：
标识旋转运动值大于所述旋转运动数据的第二滤波器；
标识旋转运动值小于所述旋转运动数据的第三滤波器；以及
将所述第二滤波器和所述第三滤波器的组合用作所述第一滤波器。
13.如权利要求11所述的方法，其特征在于，所述旋转运动数据是第一旋转运动数据，所述滤波器是第一滤波器，并且所述转子是第一转子，所述方法进一步包括：
建立针对从第二转子收集的第二旋转运动数据的第二滤波器；以及
利用所述第二滤波器来对所述声学数据进行滤波。
14.如权利要求11所述的方法，其特征在于，所述旋转运动数据是在第一时间收集的第一旋转运动数据，所述滤波器是第一滤波器，并且所述音频信号是在所述第一时间时的第一音频信号，所述方法进一步包括：
建立针对在第二时间从所述转子收集的第二旋转运动数据的第二滤波器，所述第二旋转运动数据具有与所述第一旋转运动数据不同的值，所述第二滤波器与所述第一滤波器不同；
利用所述第二滤波器对所述声学数据进行滤波；以及
基于利用所述第二滤波器对所述声学数据的滤波来生成所述第二时间处的第二音频信号。
15.如权利要求11-14中任一项所述的方法，其特征在于，进一步包括：
将所述转子设置成第一校准旋转运动；
当所述转子被设置成处于所述第一校准旋转运动时收集第一预备声学数据；
基于所述第一预备声学数据来建立第一参考滤波器；
将所述第一校准旋转运动与所述第一参考滤波器进行匹配；
将所述转子设置成第二校准旋转运动；
当所述转子被设置成处于所述第二校准旋转运动时收集第二预备声学数据；
基于所述第二预备声学数据来建立第二参考滤波器；以及
将所述第二校准旋转运动与所述第二参考滤波器进行匹配，其中将所述旋转运动数据与滤波器进行匹配包括：
确定所述第一校准旋转运动或所述第二校准旋转运动中的哪一个在值上接近所述旋转运动数据；
在同所述第一校准旋转运动或所述第二校准旋转运动相关联的所述
第一参考滤波器与所述第二参考滤波器之间选择在值上接近所述旋转运动数据的那个；以及
将所选择的第一参考滤波器或第二参考滤波器用作所述滤波器。
16.如权利要求15所述的方法，其特征在于，建立所述第一参考滤波器包括：
将所述第一预备声学数据转换至频域；
确定频谱的平均振幅；以及
基于所述频谱的所述平均振幅来执行谱减法。
17.一种无人机，包括：
转子；
马达，所述马达用于使所述转子旋转；
用于收集声学数据的装置；
用于收集转子的每分钟转数(旋转运动)数据的装置；以及
用于通过以下操作来处理所述声学数据和所述旋转运动数据的装置：
将所述旋转运动数据与滤波器进行匹配；
使用所述滤波器对所述声学数据进行滤波；以及
基于经滤波声学数据来生成音频信号。
18.如权利要求17所述的无人机，其特征在于，所述滤波器是第一滤波器，并且用于处理的装置用于通过以下操作来将所述旋转运动数据与所述第一滤波器进行匹配：
标识旋转运动值大于所述旋转运动数据的第二滤波器；
标识旋转运动值小于所述旋转运动数据的第三滤波器；以及
将所述第二滤波器和所述第三滤波器的组合用作所述第一滤波器。
19.如权利要求17所述的无人机，其特征在于，所述旋转运动数据是第一旋转运动数据，所述滤波器是第一滤波器，并且所述转子是第一转子，
其中用于收集旋转运动数据的装置用于收集第二转子的第二旋转运动数据，并且所述用于处理的装置用于：
将所述第二旋转运动数据与第二滤波器进行匹配；以及
利用所述第二滤波器来对所述声学数据进行滤波。
20.如权利要求17所述的无人机，其特征在于，所述旋转运动数据是在第一时间收集的第一旋转运动数据，所述滤波器是第一滤波器，并且所述音频信号是所述第一时间处的第一音频信号。
其中所述用于收集旋转运动数据的装置用于在第二时间收集所述转子的第二旋转运动数据，所述第二旋转运动数据具有与所述第一旋转运动数据不同的值，并且所述用于处理的装置进一步用于：
将所述第二旋转运动数据与第二滤波器进行匹配，所述第二滤波器与所述第一滤波器不同；
利用所述第二滤波器对所述声学数据进行滤波；以及
基于利用所述第二滤波器对所述声学数据的滤波来生成所述第二时间处的第二音频信号。
21.如权利要求17-20中任一项所述的无人机，其特征在于，进一步包括用于控制所述转子的装置，用于：
将所述转子设置成第一校准旋转运动，其中所述用于收集旋转运动数据的装置用于在所述转子被设置成处于所述第一校准旋转运动时收集第一预备声学数据，并且所述用于处理的装置用于基于所述第一预备声学数据建立第一参考滤波器并将所述第一校准旋转运动与所述第一参考滤波器进行匹配；以及
将所述转子设置成第二校准旋转运动，其中所述用于收集旋转运动数据的装置用于在所述转子被设置成处于所述第二校准旋转运动时收集第二预备声学数据，并且所述用于处理的装置用于基于所述第二预备声学数据建立第二参考滤波器并将所述第二校准旋转运动与所述第二参考滤波器进行匹配，以及
其中所述用于处理的装置通过以下操作来将所述旋转运动数据与滤波器进行匹配：
确定所述第一校准旋转运动或所述第二校准旋转运动中的哪一个在值上靠近所述旋转运动数据；
在同所述第一校准旋转运动或所述第二校准旋转运动相关联的所述第一参考滤波器与所述第二参考滤波器之间选择在值上靠近所述旋转运动数据的那个；以及
将所选择的第一参考滤波器或第二参考滤波器用作所述滤波器。
22.一种包括计算机可读指令的非瞬态计算机可读存储介质，所述计算机可读指令在被执行时，使一个或多个处理器至少用于：
将从转子收集的旋转运动数据与滤波器进行匹配；
使用所述滤波器对从所述无人机收集的所述声学数据进行滤波；以及
基于经滤波声学数据来生成音频信号。
23.如权利要求22所述的存储介质，其特征在于，所述滤波器是第一滤波器，并且所述计算机可读指令在被执行时，进一步使所述处理器通过以下操作来将所述旋转运动数据与所述第一滤波器进行匹配：
标识旋转运动值大于所述旋转运动数据的第二滤波器；
标识旋转运动值小于所述旋转运动数据的第三滤波器；以及
将所述第二滤波器和所述第三滤波器的组合用作所述第一滤波器。
24.如权利要求22-23中任一项所述的存储介质，其特征在于，所述旋转运动数据是第一旋转运动数据，所述滤波器是第一滤波器，并且所述转子是第一转子，并且所述计算机可读指令在被执行时，进一步使所述处理器用于：
将从第二转子收集的第二旋转运动数据与第二滤波器进行匹配；以及
利用所述第二滤波器来对所述声学数据进行滤波。
25.如权利要求22-23中任一项所述的存储介质，其特征在于，所述旋转运动数据是在第一时间收集的第一旋转运动数据，所述滤波器是第一滤波器，并且所述音频信号是所述第一时间处的第一音频信号，并且所述计算机可读指令在被执行时，进一步使所述处理器用于：
将在第二时间从所述转子收集的第二旋转运动数据与第二滤波器进行匹配，所述第二旋转运动数据具有与所述第一旋转运动数据不同的值，所述第二滤波器与所述第一滤波器不同；
利用所述第二滤波器对所述声学数据进行滤波；以及
基于利用所述第二滤波器对所述声学数据的滤波来生成所述第二时间处的第二音频信号。
CN201811191791.5A 2017-11-08 2018-10-12 用于无人机音频降噪的系统、装置和方法 Pending CN109754815A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/806,741 2017-11-08
US15/806,741 US10290293B2 (en) 2017-11-08 2017-11-08 Systems, apparatus, and methods for drone audio noise reduction

Publications (1)

Publication Number Publication Date
CN109754815A true CN109754815A (zh) 2019-05-14

Family

ID=65231628

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811191791.5A Pending CN109754815A (zh) 2017-11-08 2018-10-12 用于无人机音频降噪的系统、装置和方法

Country Status (3)

Country Link
US (2) US10290293B2 (zh)
CN (1) CN109754815A (zh)
DE (1) DE102018124769A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112399035A (zh) * 2019-08-15 2021-02-23 浙江宇视科技有限公司 一种拾音模块与电机模块联动控制方法、装置及摄像机
CN113168842A (zh) * 2020-06-24 2021-07-23 深圳市大疆创新科技有限公司 声音处理方法、装置、无人飞行器和计算机可读存储介质

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10553122B1 (en) * 2016-03-22 2020-02-04 Amazon Technologies, Inc. Unmanned aerial vehicle data collection for routing
US10290293B2 (en) * 2017-11-08 2019-05-14 Intel Corporation Systems, apparatus, and methods for drone audio noise reduction
JP7442147B2 (ja) * 2019-02-19 2024-03-04 パナソニックＩｐマネジメント株式会社 無人飛行体、情報処理方法およびプログラム
CN111833895B (zh) * 2019-04-23 2023-12-05 北京京东尚科信息技术有限公司 音频信号处理方法、装置、计算机设备和介质
US11420758B2 (en) * 2019-06-14 2022-08-23 Textron Innovations Inc. Multi-rotor noise control by automated distribution propulsion
US11420735B2 (en) * 2019-06-14 2022-08-23 Textron Innovations Inc. Multi-rotor noise control by automated distribution propulsion
CN112689049A (zh) * 2020-12-21 2021-04-20 苏州臻迪智能科技有限公司 收声方法、装置、电子设备及计算机可读存储介质

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU4323800A (en) * 2000-05-06 2001-11-20 Nanyang Technological University System for noise suppression, transceiver and method for noise suppression
US6493689B2 (en) * 2000-12-29 2002-12-10 General Dynamics Advanced Technology Systems, Inc. Neural net controller for noise and vibration reduction
JP4140607B2 (ja) * 2004-03-10 2008-08-27 ヤマハ株式会社 エンジン音加工装置
JP5682314B2 (ja) * 2011-01-06 2015-03-11 セイコーエプソン株式会社 ロボット
US9190071B2 (en) * 2012-09-14 2015-11-17 Sikorsky Aircraft Corporation Noise suppression device, system, and method
US10013900B2 (en) * 2014-09-23 2018-07-03 Amazon Technologies, Inc. Vehicle noise control and communication
US10723440B2 (en) * 2016-03-23 2020-07-28 Amazon Technologies, Inc. Aerial vehicle with different propeller blade configurations
KR102503684B1 (ko) * 2016-06-24 2023-02-28 삼성전자주식회사 전자 장치 및 그의 동작 방법
US9984672B2 (en) * 2016-09-15 2018-05-29 Gopro, Inc. Noise cancellation for aerial vehicle
US10290293B2 (en) * 2017-11-08 2019-05-14 Intel Corporation Systems, apparatus, and methods for drone audio noise reduction

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112399035A (zh) * 2019-08-15 2021-02-23 浙江宇视科技有限公司 一种拾音模块与电机模块联动控制方法、装置及摄像机
CN112399035B (zh) * 2019-08-15 2022-06-14 浙江宇视科技有限公司 一种拾音模块与电机模块联动控制方法、装置及摄像机
CN113168842A (zh) * 2020-06-24 2021-07-23 深圳市大疆创新科技有限公司 声音处理方法、装置、无人飞行器和计算机可读存储介质
WO2021258332A1 (zh) * 2020-06-24 2021-12-30 深圳市大疆创新科技有限公司 声音处理方法、装置、无人飞行器和计算机可读存储介质
CN113168842B (zh) * 2020-06-24 2023-02-17 深圳市大疆创新科技有限公司 声音处理方法、装置、无人飞行器和计算机可读存储介质

Also Published As

Publication number Publication date
US10290293B2 (en) 2019-05-14
US20190237057A1 (en) 2019-08-01
US20190043465A1 (en) 2019-02-07
US10692481B2 (en) 2020-06-23
DE102018124769A1 (de) 2019-05-09

Similar Documents

Publication Publication Date Title
CN109754815A (zh) 用于无人机音频降噪的系统、装置和方法
CN108766454A (zh) 一种语音噪声抑制方法及装置
CN110491403A (zh) 音频信号的处理方法、装置、介质和音频交互设备
US9883305B2 (en) Non-linear control of loudspeakers
US9099066B2 (en) Musical instrument pickup signal processor
CN102461203B (zh) 用于对多信道信号进行基于相位的处理的系统、方法及设备
CN109313909B (zh) 评估麦克风阵列一致性的方法、设备、装置和系统
CN110164467A (zh) 语音降噪的方法和装置、计算设备和计算机可读存储介质
CN101411213A (zh) 音频系统中的校准方法和装置
CN109831733A (zh) 音频播放性能的测试方法、装置、设备和存储介质
US20100329471A1 (en) Ambient noise compensation system
CN109274909A (zh) 电视机声音调整方法、电视机和存储介质
CN108430024A (zh) 一种降噪耳机的测量方法
CN109658935A (zh) 多通道带噪语音的生成方法及系统
CN111951833A (zh) 语音测试方法、装置、电子设备和存储介质
CN110475181B (zh) 设备配置方法、装置、设备和存储介质
JP2009535997A (ja) コンソール上にファーフィールドマイクロフォンを有する電子装置におけるノイズ除去
JP2019066339A (ja) 音による診断装置、診断方法、および診断システム
CN105188008A (zh) 一种测试音频输出单元的方法及装置
TW201918866A (zh) 觸控面板上的敲擊事件的分類方法及系統，以及觸控面板產品
US10009699B2 (en) Method for diagnosing sealing properties of microphone and/or loudspeaker seals in an electronic device
CN108573718A (zh) 一种车载播放器
CN112259069A (zh) 一种动态主动降噪方法及空调设备
TWI816277B (zh) 智能雜訊消減裝置及其方法
CN117409799B (zh) 音频信号处理系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination