CN104658548B - 用外部声音向车辆驾乘人员警告外部事件并掩蔽车内谈话 - Google Patents

用外部声音向车辆驾乘人员警告外部事件并掩蔽车内谈话 Download PDF

Info

Publication number
CN104658548B
CN104658548B CN201410676445.1A CN201410676445A CN104658548B CN 104658548 B CN104658548 B CN 104658548B CN 201410676445 A CN201410676445 A CN 201410676445A CN 104658548 B CN104658548 B CN 104658548B
Authority
CN
China
Prior art keywords
sound
vehicle
event
sounds
ambient
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410676445.1A
Other languages
English (en)
Other versions
CN104658548A (zh
Inventor
S.马蒂
D.迪森索
A.朱内贾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Crown Audio Inc
Original Assignee
Crown Audio Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Crown Audio Inc filed Critical Crown Audio Inc
Publication of CN104658548A publication Critical patent/CN104658548A/zh
Application granted granted Critical
Publication of CN104658548B publication Critical patent/CN104658548B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60CVEHICLE TYRES; TYRE INFLATION; TYRE CHANGING; CONNECTING VALVES TO INFLATABLE ELASTIC BODIES IN GENERAL; DEVICES OR ARRANGEMENTS RELATED TO TYRES
    • B60C9/00Reinforcements or ply arrangement of pneumatic tyres
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/1752Masking
    • G10K11/1754Speech masking
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K15/00Acoustics not otherwise provided for
    • G10K15/02Synthesis of acoustic waves
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04KSECRET COMMUNICATION; JAMMING OF COMMUNICATION
    • H04K3/00Jamming of communication; Counter-measures
    • H04K3/40Jamming having variable characteristics
    • H04K3/45Jamming having variable characteristics characterized by including monitoring of the target or target signal, e.g. in reactive jammers or follower jammers for example by means of an alternation of jamming phases and monitoring phases, called "look-through mode"
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04KSECRET COMMUNICATION; JAMMING OF COMMUNICATION
    • H04K3/00Jamming of communication; Counter-measures
    • H04K3/40Jamming having variable characteristics
    • H04K3/46Jamming having variable characteristics characterized in that the jamming signal is produced by retransmitting a received signal, after delay or processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04KSECRET COMMUNICATION; JAMMING OF COMMUNICATION
    • H04K3/00Jamming of communication; Counter-measures
    • H04K3/80Jamming or countermeasure characterized by its function
    • H04K3/82Jamming or countermeasure characterized by its function related to preventing surveillance, interception or detection
    • H04K3/825Jamming or countermeasure characterized by its function related to preventing surveillance, interception or detection by jamming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/005Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/10Applications
    • G10K2210/128Vehicles
    • G10K2210/1282Automobiles
    • G10K2210/12821Rolling noise; Wind and body noise
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/30Means
    • G10K2210/301Computational
    • G10K2210/3043Phase locked loops [PLL]
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/30Means
    • G10K2210/301Computational
    • G10K2210/3047Prediction, e.g. of future values of noise
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04KSECRET COMMUNICATION; JAMMING OF COMMUNICATION
    • H04K2203/00Jamming of communication; Countermeasures
    • H04K2203/10Jamming or countermeasure used for a particular application
    • H04K2203/12Jamming or countermeasure used for a particular application for acoustic communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04KSECRET COMMUNICATION; JAMMING OF COMMUNICATION
    • H04K2203/00Jamming of communication; Countermeasures
    • H04K2203/10Jamming or countermeasure used for a particular application
    • H04K2203/22Jamming or countermeasure used for a particular application for communication related to vehicles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04KSECRET COMMUNICATION; JAMMING OF COMMUNICATION
    • H04K3/00Jamming of communication; Counter-measures
    • H04K3/40Jamming having variable characteristics
    • H04K3/41Jamming having variable characteristics characterized by the control of the jamming activation or deactivation time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04KSECRET COMMUNICATION; JAMMING OF COMMUNICATION
    • H04K3/00Jamming of communication; Counter-measures
    • H04K3/40Jamming having variable characteristics
    • H04K3/43Jamming having variable characteristics characterized by the control of the jamming power, signal-to-noise ratio or geographic coverage area
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00Signal processing covered by H04R, not provided for in its groups
    • H04R2430/20Processing of the output signals of the acoustic transducers of an array for obtaining a desired directivity characteristic
    • H04R2430/23Direction finding using a sum-delay beam-former
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10General applications
    • H04R2499/13Acoustic transducers and sound field adaptation in vehicles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/15Aspects of sound capture and related signal processing for recording or reproduction

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Otolaryngology (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Traffic Control Systems (AREA)
  • Emergency Alarm Devices (AREA)
  • Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)

Abstract

一种音频处理系统可选择性地识别某些环境声音,并在车辆的车厢中回放这些声音或这些声音的表示。所述音频处理系统可过滤所述环境声音以识别与事件匹配的特定声音,所述事件例如弹跳球、啸叫的轮胎、脚步等。所述音频处理系统可接着为所述车辆中的驾乘人员提供音频警报。举例来说,所述系统可处理识别的声音(例如,放大和/或隔离所述声音),并使用扬声器来输出所述处理的声音至所述车辆内部。在另一个实施方案中,所述音频处理系统可将环境声音作为音频掩蔽声音使用,以用于在所述车辆中产生隐私区。所述音频处理系统可过滤所述环境声音以识别连续声音,接着输出所述连续声音以产生所述隐私区。

Description

用外部声音向车辆驾乘人员警告外部事件并掩蔽车内谈话
背景技术
许多车辆制造商对其车辆进行设计,以使得环境噪声(例如,公路噪声)在达到车厢(也就是车辆的内部)之前被抑制。为了抑制或预防外部环境噪声达到车厢,车辆可使用被动技术(例如,噪声抑制材料和设计)和/或主动技术(例如,噪声消除系统、主动噪声控制等)。事实上,许多制造商宣传其车辆的安静搭乘,所述安静搭乘借助于使用降低车厢噪声的被动技术和/或主动技术提供。
然而,降低车厢噪声没有选择性。也就是说,被动技术或主动技术不加区别地减弱各种环境音。驾驶员或乘客可能想要听到的声音与驾乘人员不想听到的声音被同样程度地减弱。因此,通过减弱所有环境声音来降低车厢噪声可对驾乘人员的行驶体验具有不利影响。
发明内容
本公开的一个实施方案包括车载音频系统,所述系统包括配置用于感测车辆外部的环境噪声的音频检测器。所述系统还包括音频处理模块,所述模块配置用于从音频检测器接收表示环境噪声的一个或多个信号并过滤环境噪声以识别对应于环境噪声中至少一个声音的事件。另外,所述至少一个声音由事件产生。音频处理模块向车辆的驾乘人员提供与所述事件相关联的警报。
本公开的另一个实施方案包括一种用于处理车辆外部的环境噪声的方法。所述方法包括接收表示环境噪声的一个或多个信号以及过滤环境噪声以识别对应于环境噪声中至少一个声音的事件。另外,所述至少一个声音由事件产生。所述方法还包括修改至少一个声音的至少一个听觉特征,以提高车辆中的驾乘人员识别与至少一个声音相关联的事件的能力。接着在车辆内部中的扬声器上输出修改的声音。
本公开的另一个实施方案包括一种用于处理车辆外部环境噪声的计算机程序产品。所述计算机程序产品包括计算机可读程序代码,所述程序代码配置用于接收表示环境噪声的一个或多个信号并过滤环境噪声以识别对应于环境噪声中至少一个声音的事件。一旦确定警告模式被激活,程序代码则使用扬声器提供与事件相关联的警报。程序代码还过滤环境噪声以识别环境噪声中的连续声音并将连续声音处理成掩蔽声音。一旦确定掩蔽模式被激活,程序代码则使用扬声器提供掩蔽声音以在车辆内部中产生隐私区。
附图说明
图1例示具有音频处理系统以用于选择性地识别预定义环境噪声的车辆;
图2例示用于识别外部声音事件的系统;
图3为用于使用识别的声音来向车辆的驾乘人员警告外部事件的流程图;
图4为用于基于车辆的速度向车辆的驾乘人员警告外部事件的流程图;
图5为用于识别和提供连续声音至车辆的驾乘人员的流程图;
图6为用于提供警报和/或掩蔽声音至车辆的驾乘人员的流程图。
为有助于理解,已尽可能使用相同的参考数字来指代附图中通用的相同元件。可构想的是,一个实施方案中公开的元件可在无需特别指明的情况下有利地在另一个实施方案中使用。这里所指的附图不应理解成按比例绘制,除非特别注明。而且,为了清除地说明和解释,通常将附图简化并将细节或部件省略。附图和讨论用于解释下面讨论的原理,其中相同的标号表示相同的元件。
具体实施方式
尽管许多汽车制造商的目标是减少渗透到车辆内部的环境噪声或外部噪声的量,但是不加区别地减弱环境声音可能干扰车辆的驾乘人员所需要的体验。代之,本公开包括用于选择性地识别某些环境声音并在车辆的车厢中回放这些声音或这些声音的表示的技术。在一个实施方案中,车载音频处理系统可过滤环境声音以识别与事件匹配的特定外部声音,所述事件例如弹跳球、啸叫的轮胎、脚步等。所述音频处理系统可接着为所述车辆中的驾乘人员提供音频警报。举例来说,系统可处理识别的声音(例如,从其它环境声音中放大和/或隔离所述识别的声音),并使用扬声器输出处理的声音至车辆内部。在另一个实例中,音频处理系统可提供口语警报(例如,“一名儿童正在汽车右侧附近玩耍”)或音频警报(例如,哔哔声或警报器声)。以这种方式,音频处理系统可选择性地识别哪种环境声音与车辆的驾乘人员相关,并向驾乘人员提供音频警报。
在另一个实施方案中,所述音频处理系统可将环境声音作为音频掩蔽声音使用,以用于在所述车辆中产生隐私区。举例来说,当打电话时或当与另一名驾乘人员说话时,位于车辆后排的驾乘人员可能需要隐私。为防止驾驶员能够听到其它驾乘人员的谈话,音频处理系统可识别车辆周围的环境声音中的连续声音。“连续声音”为适合用于掩蔽目的的任何反复声音或一致声音。从环境声音中识别连续声音可比简单地产生人造白噪声或通过摇下车窗更好。举例来说,在驾乘人员(例如,驾驶员)靠近输出声音的说话者的情况下,白噪声可不起作用,且摇下车窗会将车厢暴露于外部天气。代之,音频处理系统可过滤环境声音以识别连续声音,所述连续声音例如风迎着汽车呼啸而过的声音、例如降雨的天气因素声音、发动机噪声、轮胎噪声、来自附近汽车的声音等,并在可防止一名驾乘人员能够听到另一名驾乘人员的谈话的水平和/或控制方向上输出连续声音。
图1例示具有音频处理系统以用于选择性地识别预定义环境声音的车辆100。如所示出,车辆100包括一个或多个音频检测器105(例如,麦克风、转换器等)和一个或多个扬声器110。如果使用多个音频检测器105,那么其可放置在车辆100上的不同位置处(例如,车辆的各侧、车辆下方、车辆的顶部、发动机中等)。尽管音频检测器105A和105B被示出位于车辆100的外表面上,但是这并非必要条件。在其它实施方案中,音频检测器105可凹入,以使得其不可见,例如位于发动机舱中或位于车门与车架之间。无论选择何种特定位置,音频检测器105可被布置用于检测源自车辆外部事件的环境声音。外部事件可为单个事件(例如,啸叫的刹车或叫喊)、周期性事件或间歇性事件(例如,脚步、人类谈话、弹跳球等)或连续事件(例如,雨、风、运行的发动机等)。另外,音频处理系统可检测车辆本身内部发生的事件。举例来说,音频检测器105可感测当车辆的发动机有问题或出现爆胎问题时产生的声音。这样,与事件相关联的一个声音(或多个声音)源自于事件或由事件产生,而不是反射的声信号(例如,当执行超声波测距时使用的信号),其中所述声信号在与信号检测的事件的位置不同的位置处产生。
音频处理系统可评估由音频检测器105检测的不同声音或噪声,以便识别与声音相关联的事件。与这些事件相关联的环境声音的非限制性实例包括人说话声(例如一组行人走近人行横道)、管制交通的警务人员或建筑工人给出指令、来自人行横道红绿灯的声信号(例如,哔哔声)、自行车或球发出的声音、天气事件(例如冰雹、雷电、风或雨)等。如这里所示出,音频检测器105A可检测弹跳球115的声音、童声120和脚步声125。这些声音115、120、125的每一个可具有不同特征,音频处理系统可将所述不同特征关联成特定事件。音频处理系统可评估声音频率、声音中的周期性模式,识别言语等,以便将声音115、120和125关联至各事件。以这种方式,音频处理系统分配特定事件至声音,例如声音115为弹跳球或声音125为脚步,和/或将声音归类为单个声音、周期性声音或连续声音。这样,与事件相关联的一个声音(或多个声音)源自于事件或由事件产生,而不是反射的声信号(例如,当执行超声波测距时使用的信号),其中所述声信号在与信号检测的事件的位置不同的位置处产生。
音频检测器105可放置在不同位置中,以便确定声音事件距离车辆100的方向。例如,音频检测器105A和105B两者可感测脚步125的声音。然而,因为音频检测器105B距离所述事件比音频检测器105A近,所以由检测器105B感测的声音可具有比检测器105A感测的声音更大的幅值。除此之外,由检测器105A感测的声音抵达可晚于由检测器105B感测的声音。这样,音频处理系统可确定发出脚步声的儿童(也就是声音事件)可能位于车辆100的右侧(相对于图1中示出的视图)。除了方向之外,声音感测系统可比较由音频检测器105的至少一个感测的声音,以估算从声音事件至车辆100的距离。举例来说,如果脚步声变得越来越响(也就是,检测的声音幅值增大),那么音频处理系统可确定声音事件正在接近车辆100。使用多个音频检测器105,音频处理系统可估算声音事件相对于车辆100的距离。也就是说,通过确定来自特定声音事件的声音何时抵达各音频检测器105,音频处理系统可识别检测器105与声音事件的距离。要做到这一点,音频处理系统可使用任何合适的声波测距技术。
处理或隔离各种环境声音之后,音频处理系统可识别一个或多个相关声音,也就是被认为与驾乘人员有关的声音。举例来说,音频处理系统可认为弹跳球115的声音与驾乘人员有关,而鸟的鸣叫声与驾乘人员无关。处理系统可接着使用扬声器110A和110B来提供对应于相关声音的音频输出。举例来说,音频处理系统可传输放大版本的弹跳球声音115,所述声音警告车辆的驾乘人员对球加以注意。在其它实施方案中,系统还可提供声音和/或从车辆100至声音事件的距离的方向指示。举例来说,系统可提供音频警报:一名儿童正在距离车辆驾驶员侧十英尺的位置玩耍。
在另一个实施方案中,音频处理系统可过滤环境声音以识别适合作为掩蔽声音的连续声音。举例来说,音频处理系统可识别车辆的轮胎在公路上摩擦的反复或一致的声音,所述音频处理系统在进行处理之后使用扬声器110回放处理的声音。音频处理系统可调整连续声音的幅值,以使得车辆100的一名驾乘人员(例如,驾驶员)无法听到车辆中另一名驾乘人员的谈话。以这种方式,可在车辆100中产生隐私区的系统可使用由音频检测器105感测的从环境声音识别的连续声音。除此之外,隐私区还可用于减轻对驾乘人员的干扰。举例来说,如果驾驶员不希望其它驾乘人员发出的声音影响其集中精力的能力,那么驾驶员可激活隐私区,所述隐私区建立无干扰区,所述无干扰区中由其它驾乘人员发出的声音被掩蔽声音淹没。
扬声器110可布置在车辆100中的任何位置,以使得车辆100中的驾乘人员听到其音频输出。因此,扬声器110对于驾乘人员可是可见的(例如,并入耳内扬声器、头戴式耳机,或安装在头枕、车顶、侧面板,或)或对于驾乘人员可不可见(例如,嵌入仪表板或座位中)。此外,音频处理系统可使用与车辆使用的音频系统(例如,收音机、CD播放器、DVD播放器等)相同的扬声器,这可降低实施音频处理系统的成本。在一个实施方案中,扬声器110被专门设计用于提供音频输出至驾乘人员中的一个(例如,驾驶员)。举例来说,如果音频处理系统使用扬声器110来提供对应于相关事件的处理声音,那么可布置扬声器110,以使得保证驾驶员听到这些声音,这样其便可以采取预防措施来防止妨害到车辆100、车辆内的驾乘人员和环境中的物体/人类。类似地,如果系统被配置用于基于检测的连续声音提供掩蔽声音,那么扬声器110可被布置用于为车辆100中的一个或多个驾乘人员形成隐私区。尽管如此,扬声器110还可为车辆中的其它驾乘人员提供音频警报或掩蔽声音。
扬声器110可在没有具体口语提示的情况下为驾乘人员提供方向信息。也就是说,如果事件发生在车辆100的后方,那么扬声器110可提供声音,以使得驾乘人员感知到声音来自于车辆的后方。要做到这一点,可以特定方式布置扬声器110和/或使用方向音频技术(例如,3D声音),以便当回放外部声音的处理版本时传达方向信息至驾乘人员。
当回放与事件相关联的声音时,音频处理模块还可向驾乘人员传达距离车辆的距离。举例来说,随着事件移动更靠近车辆,所述模块可提高正在回放的声音的音量。此外,音频处理模块可使用回放声音的音量来指示事件的重要性。也就是说,尽管与第一事件相关联的声音可比与第二事件相关联的声音响,但是音频处理模块可通过不回放来自第一事件的声音或通过对声音进行处理来人为强调第二事件,以使得当输出至车辆内部时第二事件的声音比第一事件的处理声音响。举例来说,第一事件可为狗在街道的另一侧吠叫,所述吠叫比自行车接近车辆后方(第二事件)的声音响。因为第二事件可具有比第一事件更高的重要性,例如自行车可能比狗更靠近车辆,所以音频处理模块可强调第二事件的声音,并不再强调第一事件的声音。为了给事件区分优先次序,音频处理模块可使用任意数目的因素,例如事件类型、事件距离车辆的距离、事件的方向、事件的移动等。
图2例示用于识别外部声音事件并提供对应音频输出的系统。车辆100包括计算装置205以及至少一个扬声器110和音频检测器105。计算装置205包括处理器210,所述处理器可为能够执行本公开中描述的功能的通用处理器或专门处理元件(例如,ASIC)。计算装置205还包括存储器215,所述存储器可包括依电性存储器、非依电性存储器或两者。实例包括RAM、瞬时存储器、硬盘、高速缓冲存储器等。存储器215包括音频处理模块220,所述模块可接收由音频检测器105感测的环境声音,并基于识别的声音使用扬声器110为车辆100中的驾乘人员提供音频输出。音频处理模块220可为软件应用程序、固件、硬件或它们的某种组合。下面将描述可由音频处理模块220执行的逻辑。
计算装置205还包括网络适配器225,所述适配器允许计算装置205来与网络通讯。举例来说,网络适配器225可允许计算装置205使用WiFi、蜂窝网络或连接(Bluetooth是Bluetooth技术联盟所拥有的商标)连接至互联网。如下面将更为详细地讨论,音频处理模块220可使用网络适配器来接收更新或当为车辆中的驾乘人员提供警报或掩蔽声音时提供对其它音频处理模块220有用的信息。
为驾乘人员提供音频警报
图3为用于使用识别的声音来向车辆的驾乘人员警告事件的方法300的流程图。在这个情况中,音频处理模块评估由音频检测器接收的环境声音,以确定是否应该为车辆的驾乘人员提供音频警报。在方框305处,安装在车辆上的音频检测器(例如,麦克风)检测来自车辆周围环境的环境声音。这种原始数据可包括不同环境声音的混合。为了识别感兴趣的声音或相关声音,在方框310处,音频处理模块过滤检测的音频以隔离和评估各种声音。举例来说,环境声音可包括由天气条件(例如,降雨)造成的声音、发动机噪声、儿童在汽车附近玩耍的声音、动物的声音等。音频处理模块可评估环境声音以过滤和识别环境声音中的各种声音的特定声音。总体来说,音频处理模块可执行听觉场景识别,以便将特定事件与环境声音中的特定声音相关联。
在一个实施方案中,音频处理系统可确定一种声音是否匹配预定义的声音。举例来说,音频处理模块可评估环境声音的特征(频率、幅值、反复模式等),以识别音频中的特定声音。篮球在路面上弹跳可产生一种声音,所述声音具有与鸟鸣叫或自行车移动不同的特征。通过识别环境声音中的声音特征,音频处理模块可接着将这些特征与已知事件的特征进行比较。如果检测的特征匹配已知的特征,那么音频处理模块可识别与不同声音相关联的事件,例如弹跳的篮球、鸣叫的鸟、移动的自行车等。
在一个实施方案中,事件的预定义特征可存储在图2中讨论的计算装置的存储器中。举例来说,所述特征可存储在数据库或表格中,接着音频处理模块访问所述数据库或表格来将检测的特征与存储在存储器中的特征进行匹配。如果所述特征类似于存储在存储器中的特征,那么它们匹配。为了确定检测的声音的特征是否类似于已知声音的特征,音频处理模块可使用一个或多个阈值或匹配标准。也就是说,因为篮球弹跳的声音将根据街道的特定表面、球中的空气量、球的材料等变化,所以音频处理系统可使用阈值或匹配标准来确定测量的特征是否足够接近预定义的特征,以断言检测的声音确实为篮球弹跳声音。阈值和标准可为事件的特定频谱或分析时间频率域中能量峰值的音频指纹识别标准。在另一个实例中,音频处理模块可包括用于检测人声的语音识别应用软件。如果应用软件识别出人声(例如,儿童笑声),那么音频处理模块可将相关联声音视为相关事件。
以这种方式,音频处理模块可评估环境声音中的各种声音,以识别声源(也就是与所述声音相关联的事件)。在一个实施方案中,音频处理模块可分配权重至识别的事件。也就是说,音频处理模块可为预定义事件的每一个分配重要性,以使得可对其进行比较。例如,弹跳球可具有与儿童靠近车辆不同的权重。可预定义与事件相关联的权重。然而,在一个实施方案中,音频处理模块可基于事件相对于车辆的距离或方向改变权重。最初,与儿童相关联的权重可高于与弹跳球相关联的权重;然而,如果儿童距离车辆的距离比球远得多,那么音频处理系统可变更权重,以使得与儿童相关联的权重现在小于与球相关联的权重。类似地,音频处理系统可知晓车辆的当前或未来方向。如果车辆正在倒退或反向行驶,那么音频处理模块可增加与发生在车辆后方的事件相关联的权重。在一个实施方案中,音频处理模块使用权重来选择在车辆内部回放哪种声音。然而,因为音频处理模块可回放与多个识别事件相关联的声音的每一个,所以这并非必要条件。
音频处理模块还可使用权重来确定事件是否与车辆的驾乘人员有关。例如,音频处理模块可识别来自环境声音的事件,但是事件可远离车辆(例如,远处的警报器)。因此,音频处理模块可基于其估算的与车辆相距的距离调整与事件相关联的权重。如果权重不符合预定义的最小值,那么音频处理模块可认为所述事件与驾乘人员无关,且不会将其相关联声音作为警报回放。然而,音频处理模块可继续重新评估环境声音并随着声源移动更靠近车辆(例如,警报器声接近车辆)增加与事件相关联的权重。
当然,可在不衡量权重的情况下使用上述因素,以便给环境声音区分优先次序。也就是说,音频处理模块可单独或结合事件类型、事件距离车辆的距离、事件接近车辆的速度、事件相对于车辆的方向等进行考虑。基于这些因素的任意一个或它们的组合,音频处理模块可选择性地确定事件中的哪些与车辆的驾乘人员有关。举例来说,音频处理模块可将所述因素作为阈值使用,而不是衡量事件的权重。只要事件满足与所述因素的一个或多个相关联的阈值(例如,事件(1)在距离车辆十英尺范围内且(2)正在移动更靠近车辆),那么处理模块可认为事件与车辆的驾乘人员有关。
在方框315处,音频处理模块在车辆内部播放声音之前修改与识别的事件相关联的声音的特征。举例来说,音频处理系统可隔离或整理与事件相关联的声音。这样做可更好地允许驾乘人员快速识别事件(也就是,知晓事件)并选择适当反应,例如刹车、转弯、减速、寻找事件的方向等。音频处理系统可处理声音,以提高声音的音调、放大声音、变更频率分布等。举例来说,音频处理系统可识别附近汽车当前正在车辆的盲点中行驶,并将车辆的声音放大以便警告汽车的驾驶员。在另一个实例中,音频处理系统可识别汽车附近的人的脚步,但是因为人可在碎石或草地上行走,所以脚步声被消音。这样,音频处理模块可提高声音的音调来使得与脚步相关联的声音更明显且驾乘人员可识别。
在一个实施方案中,音频处理系统可选择表示事件的统一、预确定声音。也就是说,音频处理系统可使用相同声音来表示事件,即使事件的声音不同。如前面所解释,由弹跳球发出的声音因任意数目的因素而不同。然而,不考虑弹跳球发出的实际声音,音频处理系统可使用预先录制的与弹跳球相关联的声音,而不是输送从外部实际检测出的篮球声音。这样做为驾乘人员提供附加的可预测性,因为与事件相关联的声音始终相同。
在方框320处,音频处理系统使用如图1和图2中示出的扬声器回放选择的音频(例如,实际事件或预确定声音的处理音频)至车辆内部作为对驾乘人员的警报。在一个实施方案中,音频处理模块可从扬声器输出声音,以便事件相关于车辆的原始方向被保存(例如,左侧、右侧、前方、后方、上部等)。举例来说,扬声器可建立环绕声环境,音频处理模块可使用扬声器在所述环境中回放选择的音频,以对应于由音频检测器在车辆外部感测的原始声音的方向。使用扬声器来设置环绕声环境是非必要的,然而可用于传达事件相对于驾乘人员的方向。代之,音频处理模块可使用3D音频效果,所述3D音频效果仅使用一个或两个扬声器为驾乘人员传达方向。然而,在其它实施方案中,当向驾乘人员回放音频警报时,音频处理模块可不传达事件的方向。举例来说,音频处理模块可在不试图向驾乘人员传达事件方向的情况下使用与内置收音机或媒体播放器相关联的扬声器来为汽车中的驾乘人员播放选择的音频。
在一个实施方案中,系统检测外部环境并以不同程度在车辆车厢内部再现所述环境。也就是说,可相关于频率、幅值、位置等再现外部环境的选择方面(例如,选择的声音)。此外,音频处理模块可过滤出与相关事件无关的声音(例如,公路噪声或无法识别的声音)。或者,可完全再现外部声音,进而在车厢内产生外部声音环境的3D扩展。
在一个实施方案中,音频处理模块可在从驾乘人员接收某种指示后回放处理的声音。举例来说,在驾驶员表示其想要变更车道(例如一旦驾驶员打开方向灯)之前,模块可不会输出在车辆盲点中的汽车的声音。
当然,音频处理模块可播放即使车辆的门是打开的或车窗被摇下驾乘人员仍将无法听到的声音。举例来说,音频处理模块可检测即使未被车辆抑制但仍过于减弱,人耳无法检测的声音。在这种情况下,音频处理模块可处理声音(例如,放大柔和声音),并使用扬声器播放人为放大的声音。以这种方式,音频处理模块可针对事件向驾乘人员发出报警,所述事件即使其车窗被摇下或车门打开驾乘人员仍将无法另外检测出。
尽管上述实施方案将警报描述成听觉警报,但是并不限于这种形式。代之,警报可仅为可在车辆的平视显示器或车窗的一个上显示的视觉警报,所述视觉警报向驾乘人员发出事件警报或描述事件。
在一个实施方案中,音频处理模块可能够学习,以便提高其识别相关事件的能力。在一个实例中,当识别出事件但事件被错误归类或事件与驾乘人员无关时,或如果发生与驾乘人员有关的事件但是音频处理模块错过所述事件,那么车辆的驾乘人员可提供反馈至音频处理模块。作为对正式情形的举例,音频处理模块可将狗反复吠叫的声音误判成弹跳球的声音,并回放狗吠叫的声音至车辆内部。驾乘人员可使用语音指令或用户界面元件(按钮或触摸屏)来告知音频处理模块所述声音并非弹跳球声音。作为响应,音频处理模块可细化与识别弹跳球事件相关联的阈值或匹配标准,以排除反复的狗吠叫声。或者,音频处理模块可已经正确识别与感测的声音相关联的事件,但是所述事件可与驾乘人员无关,例如模块可已经检测出警笛,但是驾乘人员可能不希望在汽车内回放这些声音。因此,驾乘人员可告知音频处理模块这些事件是不相关的。
作为当音频处理模块可能已经错过事件时的实例,驾乘人员可注意到自行车接近车辆,但是驾乘人员可能听不到通过扬声器回放的声音。这样,驾乘人员可使用用户界面来通知音频处理模块由音频检测器感测的前一个声音应已回放至车辆内部。作为响应,音频处理模块可在接收用户的指令之前立即保存由音频检测器感测出的声音(例如,音频的最后10秒)。所述模块可使用录制的声音来在存储器中定义新事件并定义阈值,以用于将保存的声音与由音频检测器感测的未来声音进行匹配。
音频处理模块还可通过直接或间接与其它音频处理模块通讯来扩展相关声音的数目。举例来说,音频处理模块可在车辆遇到事故之前立即检测出声音。尽管音频处理模块可尚未能够将声音与任何已知事件相关联,但是模块可基于声音与事故有关的假设添加事件。使用网络适配器,音频处理模块可将关于事件的信息上传至其它音频处理模块,或上传至中央存储库,其它音频处理模块可从所述中央存储库下载事件。以这种方式,音频处理模块可学习其它模块的经验并扩展其相关事件列表。
在一个实施方案中,车辆可包括提供汽车周围环境的影像的摄像机。在这种情况下,计算装置可包括视频处理模块,所述视频处理模块与音频处理模块同步工作以识别环境中发生的相关事件。通过结合听觉信息和视觉信息,系统可能够更为准确地识别相关事件。除此之外,视觉信息可提供对事件相对于车辆的更为确定的方向和/或距离估算。
图4为用于基于车辆的速度针对外部事件向车辆的驾乘人员报警的流程图。在方法400中,音频处理模块可基于车辆的速度改变输出音频。方法400在图3的方框310之后开始,音频处理模块在这里已通过过滤与车辆周围环境相关联的环境声音识别出至少一个事件。在方框405处,音频处理模块确定车辆的当前速度或速率是否超出预定义的阈值。举例来说,音频处理模块可以通信方式耦合至监控车辆速度的计算装置。音频处理模块可询问这个计算装置来确定车辆速度是否高于或低于阈值。
如果速度高于阈值,那么方法400可继续进行至方框315并如上面所解释继续,例如音频处理模块回放识别声音的处理版本或表示事件的预确定声音。然而,如果车辆速度不高于阈值,那么在方框410处,音频处理模块可识别事件的口语描述。也就是说,音频处理模块可使用言语输出事件的描述,例如“有人正在接近汽车”或“汽车附近有正在移动的自行车”,而不是回放与事件相关联的声音。可设置速度阈值,以使得音频处理模块有时间来提供事件的描述,且驾乘人员有时间做出反应。举例来说,如果车辆正在以小于15英里每小时的速度行驶,那么音频处理模块可使用事件的口语描述来警告驾乘人员。在这些低速度下,驾乘人员可有足够的时间来处理口语描述并对事件做出反应。
在一个实施方案中,除速度以外,系统还可使用其它参数来确定是否提供事件的口语描述或提供事件的实际声音。举例来说,音频处理模块可考虑事件的速度(例如,事件接近车辆的速率)、估算的影响时间或事件距离车辆的距离。音频处理模块可将这些参数的组合(以及车辆的速度)与预定义的阈值进行比较或仅比较这些参数的一个或多个,以确定何时为驾乘人员提供口语描述或实际声音。
口语描述还可包括事件相对于车辆的距离或方向。此外,可结合距离或方向估算以识别事件相对于车辆的3D点或位置。方向可相对于汽车的一侧(例如,“有一辆汽车位于驾驶员侧盲点中”或“有一辆应急车辆正从后方接近”)或为基本方向(“有一辆自行车正从北面接近”)。除此之外,所述描述可包括与事件相关联的速度,例如“一名儿童正朝向车辆奔跑”或“一辆自行车正以10英里每小时的速度从汽车的乘客侧接近”。口语描述还可包括建议的动作或指令,例如“一名儿童正在接近,请立刻踩刹车!”或“请勿变更车道”。
在一个实施方案中,口语描述的长度可根据车辆的速度或与事件相关联的速度而变更。举例来说,因为车辆接近阈值,所以音频处理模块可缩短描述以便为用户提供更多时间做出反应。举例来说,当车辆静止且弹跳球接近车辆时,音频处理模块可说出“一只球正在朝向车辆的左侧滚动”。当车辆处于方框405的速度阈值附近时,模块可仅说出“一只球正在快速接近”。类似地,如果事件正在快速接近车辆,那么音频处理模块还可缩短音频描述,以为驾乘人员提供更多时间做出反应。在方框415处,音频处理模块使用上述扬声器输出识别的事件描述。
尽管方法400例示如果速度高于阈值那么回放与事件相关联的声音,以及如果速度低于阈值那么输出口语描述,但是在其它实施方案中,音频处理模块可执行两者。举例来说,尽管车辆的速度超出阈值,但是当回放处理的音频时音频处理模块可提供事件的简要描述;或如果车辆的速度低于阈值,那么提供处理版本的声音。这样做可允许驾乘人员更早地识别事件,且因此比仅使用技术中的一种来警告驾乘人员的情况更快地做出反应。
为驾乘人员提供掩蔽声音
图5为用于识别和提供连续声音至车辆的驾乘人员的流程图。总体来说,方法500从环境声音识别连续声音,以提供车辆中的隐私区(或无干扰区)。连续声音可用于在无需白噪声发生器或以物理方式将内部各部分隔开的声音抑制屏障的情况下建立隐私区。当从靠近驾乘人员的扬声器输出白噪声时(例如,在驾乘人员的几英尺范围内),用于阻隔其它噪声的白噪声的有效性被降低。因此,在例如车辆内部的较小空间中,白噪声发生器来建立隐私区可不如例如使用自然发生的连续声音有效。另一方面,声音抑制屏障价格昂贵,且对于许多车辆来说成本过高。因此,使用从周围环境识别的连续声音可更为有效,且给车辆增加的成本比先前讨论的用于建立隐私区的方法要少。这样做还可优于摇下车窗,因为摇下车窗会将车厢暴露于外部天气。
在方框505处,音频检测器感测车辆周围环境中的各种声音。这种原始数据可包括不同环境声音的混合。在方框510处,音频处理模块可过滤检测的音频,以隔离和评估各种声音。举例来说,环境声音可包括由天气条件(例如,降雨)造成的声音、发动机噪声、儿童在汽车附近玩耍的声音、动物的声音等。音频处理模块可评估环境声音以过滤和识别环境声音中的各种声音的特定声音。具体来说,在这个实施方案中,音频处理模块可在环境声音中搜索适合于作为掩蔽声音的连续声音。音频处理模块可接着使用连续声音来建立一个或多个隐私区。
连续声音可为适合于掩蔽其它声音的任何反复和/或恒定声音。连续声音的实例包括降雨、来自轮胎和发动机的噪声、风等。音频处理模块可监控环境声音,以识别具有指示声音为连续声音的属性的特定声音,所述属性例如反复模式、恒定幅值或信号中的频率类型。如果声音匹配这些预定义的属性,那么模块可将声音归类为连续声音。
在方框515处,音频处理系统可通过例如识别声音的片段、变更幅值、提高声音的音调等来处理连续声音。举例来说,音频处理系统可增加声音中某些频率的幅值但是降低其它频率,以形成更为均匀的连续声音,这使得声音作为掩蔽声音更为理想。在一个实施方案中,音频处理系统可包括车辆内部中的麦克风,所述麦克风用于感测由驾乘人员发出的声音。音频处理模块可接着响应于由驾乘人员发出的声音变更幅值。举例来说,音频处理模块可使用内部麦克风来处理连续声音,以使得所述连续声音将掩蔽其它驾乘人员的谈话。因此,尽管车辆后方的驾乘人员正在进行大声谈话,但音频处理模块可自适应地处理连续声音,以掩蔽来自车辆前方的驾乘人员的谈话。
在方框520处,音频处理模块回放处理的、连续声音。在一个实施方案中,音频处理模块可连续地感测来自环境的连续声音,对声音进行处理并将处理的声音输出作为掩蔽声音。或者,模块可识别连续声音的片段(例如,一个十秒片段),接着模块循环(重复)所述片段来产生掩蔽声音。因此,如果连续声音停止,例如雨停或车辆停止,那么音频处理模块可仍然提供掩蔽声音。然而,连续地提供环境声音(而不是重复声音循环)的一个优势在于:掩蔽声音越匹配环境中的声音,也就是说掩蔽声音对于驾乘人员来说越逼真,则认知负荷将越低。另外,试图使用环境声音可使得掩蔽效果非常微妙,以至于驾驶员无法知晓其存在。如果掩蔽声音事实上来自于真实环境,也就是与驾乘人员在环境中看到的内容(例如,风中伴着雨水击打汽车)同步,那么这更可能实现。此外,使用环境声音可混合来自环境的连续声音来产生掩蔽声音,也就是雨声以及湿滑公路上的轮胎声音,它们使得掩蔽声音更为真实。
在一个实施方案中,音频处理模块可耦合至接收来自驾乘人员的口头指令或身体指令的用户界面,以用于激活隐私区。举例来说,当需要隐私时,后座中的驾乘人员可例如使用按钮或语音指令激活掩蔽声音,这在后座中建立隐私区。当然,相同的掩蔽声音可用于在汽车中产生多个隐私区。举例来说,前排乘客座位也可为隐私区,驾驶员和后排的任何乘客无法听到前排乘客的谈话(且反之亦然)。
可对汽车内部的扬声器进行任何形式的布置,以便通过输出掩蔽声音产生一个或多个隐私区。举例来说,扬声器可定位在头枕中;可以是驾乘人员佩戴的耳机;或围绕将从谈话中排除的驾乘人员。此外,可对音频处理系统进行预配置或定制,以在车辆中产生适合于特定扬声器布置的掩蔽声音。举例来说,如果扬声器位于驾驶员的前方,那么音频处理系统可需要输出比当扬声器位于驾驶员与后排座位乘客之间(例如,在驾驶员的头枕中)时的情况更响的掩蔽声音,以为后排座位上的乘客产生隐私区。以这种方式,音频处理模块可配置用于针对任意数目的不同声音扬声器布置产生隐私区。
图6为用于提供警报和/或掩蔽声音至车辆的驾乘人员的流程图。总体来说,方法600例示音频处理模块的实例,所述音频处理模块可向用户提供外部事件警报,或提供掩蔽声音以在车辆中产生一个或多个隐私区。在方框605处,安装在车辆上的音频检测器(例如,麦克风)检测来自车辆周围环境的环境声音。这种原始数据可包括不同环境声音的混合。为了识别感兴趣的声音或相关声音,在方框610和方框615处,音频处理模块过滤检测的音频来隔离和评估各种声音。举例来说,环境声音可包括由天气条件(例如,降雨)造成的声音、发动机噪声、儿童在汽车附近玩耍的声音、动物的声音等。音频处理模块可评估环境声音,以过滤和识别环境中的各种声音的特定声音。
在方框610处,音频处理模块可执行听觉场景识别,以便将特定事件与环境声音中的特定声音相关联。在一个实施方案中,音频处理系统可确定一种声音是否匹配预定义的声音。如图3中所讨论,音频处理模块可评估环境声音的特征(频率、幅值、反复模式等),以识别音频中的特定声音。如果检测的特征匹配已知的特征,那么音频处理模块可识别与不同声音相关联的事件,例如弹跳的篮球、鸣叫的鸟、移动的自行车等。
一旦识别出外部事件,在方框620处,音频处理模块确定模块当前是否设置成警告模式,也就是警告模式是否激活。所述模式可由驾乘人员设置或基于预定义的标准设置。举例来说,驾乘人员可将其车窗摇下且不需要(或希望)音频处理模块回放识别出的环境声音。在其它实施方案中,音频处理模块可自动激活或解活警告模式,也就是无需用户输入。举例来说,音频处理系统可包括汽车内部的音频检测器,所述音频检测器确定有多少环境声音被车辆减弱。如果驾乘人员仍然可检测出环境声音(在不进行任何回放的情况下),那么音频处理模块可解活其警告模式。举例来说,应急车辆的警报器可足够响亮以穿透至车辆内部,且因此,音频处理模块可自动解活其警告模式。
如果警告模式不激活,那么方法600可返回方框605来继续过滤环境声音。然而,如果警告模式激活,那么方法600可前进至例如图4的方框405,以确定如何向驾乘人员提供警报。为简洁起见,这里将不再重复图4的细节。总体来说,方法600可与用于向车辆的驾乘人员提供警报的任何技术组合。
在方框615处,音频处理模块过滤检测的音频,以识别适合作为掩蔽声音的连续声音。如上所述,连续声音可为适合于掩蔽其它声音的任何反复和/或恒定声音。连续声音的实例包括降雨、来自轮胎和发动机的噪声、风等。音频处理模块可监控环境声音,以识别具有指示声音为连续声音的属性的特定声音,所述属性例如反复模式、恒定幅值、频率类型等。如果声音匹配这些预定义的属性,那么模块可将声音归类为连续声音。音频处理模块可接着使用连续声音来建立一个或多个隐私区。
在方框625处,音频处理模块可确定当前是否处于掩蔽模式。如果音频处理模块的掩蔽模式不激跃,那么方法600可返回方框605来继续过滤环境声音。然而,如果掩蔽模式激活,那么音频处理模块基于识别出的连续声音向驾乘人员提供掩蔽声音。举例来说,方法600可前进至图5的方框515,在这里如上面所讨论对连续声音进行处理并回放给驾乘人员。
方法600例示音频处理模块可同时处于警告模式和掩蔽模式两者,也就是模块可使用车辆中的扬声器并联提供警告声音和掩蔽声音。因此,音频处理模块可过滤环境声音,以识别外部事件以及连续声音。当然,检测出的声音可为连续声音和外部事件指示两者。举例来说,在洲际公路上时,由处于车辆盲点的汽车发出的声音可作为产生警报以及掩蔽声音的依据。此外,警告声音和掩蔽声音可预定用于车辆中的相同驾乘人员或不同驾乘人员。举例来说,音频处理模块可将最靠近驾驶员的扬声器用于提供警报,但使用其它扬声器来使用掩蔽声音在乘客周围建立隐私区。
在另一个实施方案中,警告模式和掩蔽模式可相互排斥,因为在任何既定时间,音频处理模块可仅处于两种模式中的一种,而不是两者。在这种情况下,可改变方法600,以使得音频处理模块基于其当前模式在如方框610中所示出的过滤环境声音以识别外部事件与如方框615中示出的过滤音频以识别连续声音之间选择性地选取。
已呈现各种实施方案的描述以用于说明目的,但并非意在详列或限于公开的实施方案。在不背离所描述实施方案的范围和精神的情况下,许多修改和变化对于本领域普通技术人员来说将是明显的。
本实施方案的各方面可实施为系统、方法或计算机程序产品。因此,本公开的各方面可采用以下形式:完全硬件实施方案、完全软件实施方案(包括固件、常驻软件、微代码等)或结合了软件与硬件方面的实施方案,所述实施方案在本文中一般都可称为“电路”、“模块”或“系统”。另外,本公开的各方面可采用实施于一个或多个计算机可读介质中的计算机程序产品的形式,所述一个或多个计算机可读介质具有在其上实施的计算机可读程序代码。
可利用一个或多个计算机可读介质的任何组合。计算机可读介质可为计算机可读信号介质或计算机可读存储介质。计算机可读存储介质可以是例如但不限于电子、磁性、光学、电磁、红外或半导体系统、设备或装置或前述介质的任何合适组合。计算机可读存储介质的更具体实例(非详尽列表)将包括以下介质:具有一个或多个导线的电气连接、便携式计算机软盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦可编程序只读存储器(EPROM或闪存)、光纤、便携式光盘只读存储器(CD-ROM)、光存储装置、磁存储装置或前述介质的任何合适组合。在本文档的语境中,计算机可读存储介质可以是可含有或存储供指令执行系统、设备或装置使用或与其联用的程序的任何有形介质。
计算机可读信号介质可包括传播数据信号,所述传播数据信号中实施有计算机可读程序代码,例如实施于基带中或实施为载波的一部分。这种传播信号可采用多种形式的任一种,包括但不限于电磁形式、光学形式或所述形式的任何合适组合。计算机可读信号介质可为任何计算机可读介质,所述计算机可读介质并非计算机可读存储介质且可传达、传播或传送程序供指令执行系统、设备或装置使用或与其联用。
在计算机可读介质上实施的程序代码可以使用任何适当的介质来传输,所述介质包括但不限于无线、有线线路、光纤电缆、RF等或前述介质的任何合适组合。
用于进行本公开各方面的操作的计算机程序代码可以用一种或多种编程语言的任何组合来编写,所述编程语言包括面向对象的编程语言,如Java、Smalltalk、C++等,以及常规程序性编程语言,如“C”编程语言或类似的编程语言。程序代码可以完全在用户的计算机上执行,部分地在用户的计算机上执行,作为独立的软件包执行,部分地在用户的计算机上且部分地在远程计算机上执行,或完全在远程计算机或服务器上执行。在后一种场景中,远程计算机可以通过任何类型的网络(包括局域网(LAN)或广域网(WAN))连接到用户的计算机,或者可以连接到外部计算机(例如,使用互联网服务提供商通过互联网进行连接)。
参照根据本公开的实施方案的方法、设备(系统)和计算机程序产品的流程图图解和/或方框图来描述本公开的各方面。应理解,流程图图解和/或方框图的每一个方框以及流程图图解和/或方框图的方框组合可以通过计算机程序指令来实施。这些计算机程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理设备的处理器以便产生一种机器,以使得通过计算机或其它可编程数据处理设备的处理器执行的指令建立用于实施在流程图和/或方框图方框中规定的功能/操作的手段。
这些计算机程序指令还可以存储在例如可以引导计算机、其它可编程数据处理设备或其它装置以特定方式运作的非临时性计算机可读介质中,以使得存储在计算机可读介质中的指令产生包括指令的制品,所述指令实施在流程图和/或一个或多个方框图方框中规定的功能/操作。
计算机程序指令还可以加载至计算机、其它可编程数据处理设备或其它装置上,以引起将在计算机、其它可编程设备或其它装置上执行的一系列操作步骤,从而产生计算机实施的过程,以使得在计算机或其它可编程设备上执行的指令提供用于实施在流程图和/或一个或多个方框图方框中规定的功能/操作的过程。
本公开的实施方案可通过云计算基础架构提供至最终用户。云计算总体上涉及提供可扩展计算资源作为经由网络的服务。更正式地来说,云计算可定义成在计算资源与其底层技术架构(例如,服务器、存储器、网络)之间提供抽象概念的计算能力,从而允许对可在需要最少管理工作或服务提供商互动的情况下快速分配和发布的可配置计算资源共享区的便捷、按需网络访问。因此,云计算允许用户访问“云端”的虚拟计算资源(例如,存储器、数据、应用程序且甚至是完全虚拟化的计算系统),而不考虑用于提供计算资源的底层物理系统(或这些系统的位置)。
通常来说,云计算资源以按次付费使用为基础提供至用户,且仅对实际使用的计算资源(例如,用户消耗的存储空间量或被用户实体化的虚拟化系统的数目)向用户收费。用户可在任何地方通过互联网随时访问设置在云中的资源的任何一种。在本公开的语境中,用户可访问云中可用的其它处理模块或新相关事件或连续声音(例如,由其它音频处理模块添加的事件或声音)或相关数据。
附图中的流程图和方框图示出根据本公开的各种实施方案的系统、方法和计算机程序产品的可能实行方案的体系结构、功能性和操作。在这个方面,流程图或方框图中的每个方框可以表示代码的模块、区段或部分,所述代码包括用于实施所指定的一个或多个逻辑功能的一个或多个可执行指令。还应当指出的是,在一些替代实行方案中,方框中提到的功能可以不按附图中提到的顺序出现。举例来说,连续展示的两个方框实际上可以大体上同时执行,或者这些方框有时可以按相反的顺序执行,这取决于所涉及的功能性。还应当指出的是,方框图和/或流程图图解的每个方框以及方框图和/或流程图图解中的方框的组合可以由执行规定的功能或操作的基于专用硬件的系统或者专用硬件和计算机指令的组合来实施。
尽管前述内容针对本公开的实施方案,但是可在不背离其基本范围的情况下设计出本公开的其它和更多实施方案,且所述基本范围由以上权利要求确定。

Claims (18)

1.一种车载音频系统,其包括:
音频检测器,其配置成用于感测在车辆外部的环境声音;以及
音频处理模块,其配置成用于:
从所述音频检测器接收表示所述环境声音的一个或多个信号,
处理所述环境声音,以识别在所述车辆外部且对应于所述环境声音中至少一个声音的事件,其中所述至少一个声音由该事件产生,以及
向所述车辆中的驾乘人员提供与所述事件相关联的警报;
其中所述音频处理模块进一步配置成用于:
将所述车辆的当前速度与阈值速度进行比较;
一旦确定所述当前速度高于所述阈值速度:
处理所述至少一个声音,以变更所述至少一个声音的特征,以及
使用扬声器输出所述处理的声音,所述扬声器配置用于输出声音至所述车辆的内部;以及
一旦确定所述当前速度低于所述阈值速度,则使用所述扬声器输出所述事件的口语描述。
2.如权利要求1所述的车载音频系统,其中识别所述事件包括:
将所述环境声音中的所述至少一个声音与预定义的声音进行比较,所述预定义的声音各自与相应事件具有预定义的关联,以及
一旦确定所述至少一个声音大体上匹配所述预定义声音中的一个,则将所述至少一个声音与所述相应事件关联起来,该相应事件与匹配的预定义声音相关联。
3.如权利要求1所述的车载音频系统,其中提供所述警报包括:
处理所述至少一个声音,以变更所述至少一个声音的特征,以及
使用扬声器输出所述处理的声音,所述扬声器配置成用于输出声音至所述车辆的内部。
4.如权利要求1所述的车载音频系统,其中提供所述警报包括使用扬声器输出所述事件的口语描述,所述扬声器配置用于输出声音至所述车辆的内部。
5.如权利要求1所述的车载音频系统,其中所述音频处理模块进一步配置成用于:
处理所述环境声音,以识别所述环境声音中的连续声音;
将所述连续声音处理成掩蔽声音;以及
使用配置成用于输出声音至所述车辆内部的扬声器提供所述掩蔽声音,以在所述车辆的所述内部产生隐私区。
6.如权利要求1所述的车载音频系统,其中所述事件在所述车辆外部,并且所述音频处理模块进一步配置成用于:
基于所述环境声音中的所述至少一个声音确定所述事件相对于所述车辆的距离或方向中的至少一个,其中以向所述车辆中的驾乘人员传达所述事件的所述方向或所述距离的方式来提供所述警报。
7.一种用于处理车辆外部的环境声音的方法,所述方法包括:
接收表示所述环境声音的一个或多个信号;
处理所述环境声音,以识别对应于所述环境声音中至少一个声音的事件,其中所述至少一个声音由所述事件产生;
修改所述至少一个声音的至少一个听觉特征,以提高所述车辆中的驾乘人员识别与所述至少一个声音相关联的所述事件的能力;以及
通过所述车辆内部的扬声器输出所述修改的声音;
其中,所述方法还包括:
将所述车辆的当前速度与阈值速度进行比较;
一旦确定所述当前速度高于所述阈值速度:
处理所述至少一个声音,以变更所述至少一个声音的特征,以及
使用扬声器输出所述处理的声音;以及
一旦确定所述当前速度低于所述阈值速度,则使用所述扬声器输出所述事件的口语描述。
8.如权利要求7所述的方法,其进一步包括:
将所述环境声音中的所述至少一个声音与预定义声音进行比较,以及
一旦确定所述至少一个声音大体上匹配所述预定义声音中的一个,则将所述至少一个声音与和所述匹配的预定义声音相关联的所述事件关联起来。
9.如权利要求7所述的方法,其中所述修改的声音为用于向所述驾乘人员指示所述事件靠近所述车辆的警报。
10.如权利要求7所述的方法,其进一步包括:
处理所述环境声音,以识别所述环境声音中的连续声音;
将所述连续声音处理成掩蔽声音;以及
使用所述扬声器提供所述掩蔽声音,以在所述车辆的所述内部产生隐私区。
11.如权利要求7所述的方法,其中修改所述至少一个声音包括提高所述至少一个声音的音调和将所述至少一个声音放大这两种操作中的至少一种。
12.如权利要求7所述的方法,其进一步包括:
处理所述环境声音,以识别对应于所述环境声音中的相应声音的多个事件;
基于预定义的标准为所述事件的每一个分配权重;以及
基于分配给每个事件的所述权重选择所述相应声音的一个或多个来输出至所述驾乘人员。
13.如权利要求12所述的方法,其进一步包括:
选择所述相应声音的至少两个输出至所述驾乘人员;以及
基于所述分配的权重以不同方式修改所述两个相应声音的所述特征。
14.一种包含有计算机可读程序代码的计算机可读存储介质,所述计算机可读程序代码配置成用于:
接收表示所述环境声音的一个或多个信号;
处理所述环境声音,以识别对应于所述环境声音中的至少一个声音的事件;
一旦确定警告模式被激活,则使用扬声器提供与所述事件相关联的警报;
处理所述环境声音,以识别所述环境声音中的连续声音;
将所述连续声音处理成掩蔽声音;以及
一旦确定掩蔽模式被激活,则使用所述扬声器提供所述掩蔽声音以在所述车辆的内部中产生隐私区;所述计算机可读程序代码配置成用于:
将所述车辆的当前速度与阈值速度进行比较;
一旦确定所述当前速度高于所述阈值速度:
处理所述至少一个声音,以变更所述至少一个声音的特征,以及
使用所述扬声器输出所述处理的声音;以及
一旦确定所述当前速度低于所述阈值速度,则使用所述扬声器输出所述事件的口语描述。
15.如权利要求14所述的计算机可读存储介质,其中识别所述事件包括:
将所述环境声音中的所述至少一个声音与预定义声音进行比较,以及
一旦确定所述至少一个声音大体上匹配所述预定义声音中的一个,则将所述至少一个声音与和所述匹配的预定义声音相关联的所述事件关联起来。
16.如权利要求14所述的计算机可读存储介质,其中提供所述警报包括:
处理所述至少一个声音,以变更所述至少一个声音的特征,以及
使用所述扬声器输出所述处理的声音。
17.如权利要求14所述的计算机可读存储介质,其中提供所述警报包括使用所述扬声器输出所述事件的口语描述。
18.如权利要求14所述的计算机可读存储介质,所述计算机可读程序代码配置成用于:
基于所述环境声音中的所述至少一个声音确定所述事件相对于所述车辆的距离或方向中的至少一个,其中以向所述车辆中的驾乘人员传达所述事件的所述方向或所述距离的方式来提供所述警报。
CN201410676445.1A 2013-11-21 2014-11-21 用外部声音向车辆驾乘人员警告外部事件并掩蔽车内谈话 Active CN104658548B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/086,828 US9469247B2 (en) 2013-11-21 2013-11-21 Using external sounds to alert vehicle occupants of external events and mask in-car conversations
US14/086,828 2013-11-21

Publications (2)

Publication Number Publication Date
CN104658548A CN104658548A (zh) 2015-05-27
CN104658548B true CN104658548B (zh) 2019-12-24

Family

ID=51870912

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410676445.1A Active CN104658548B (zh) 2013-11-21 2014-11-21 用外部声音向车辆驾乘人员警告外部事件并掩蔽车内谈话

Country Status (4)

Country Link
US (2) US9469247B2 (zh)
EP (2) EP4020463A1 (zh)
JP (2) JP6718204B2 (zh)
CN (1) CN104658548B (zh)

Families Citing this family (149)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101984356B1 (ko) 2013-05-31 2019-12-02 노키아 테크놀로지스 오와이 오디오 장면 장치
US9469247B2 (en) 2013-11-21 2016-10-18 Harman International Industries, Incorporated Using external sounds to alert vehicle occupants of external events and mask in-car conversations
DE112014006528B4 (de) * 2014-03-28 2017-12-21 Mitsubishi Electric Corporation Fahrzeuginformationsmeldevorrichtung
US10126928B2 (en) 2014-03-31 2018-11-13 Magna Electronics Inc. Vehicle human machine interface with auto-customization
US20150365743A1 (en) * 2014-06-14 2015-12-17 GM Global Technology Operations LLC Method and apparatus for including sound from an external environment into a vehicle audio system
EP3158427B1 (en) * 2014-06-19 2022-12-28 Robert Bosch GmbH System and method for speech-enabled personalized operation of devices and services in multiple operating environments
US9357320B2 (en) 2014-06-24 2016-05-31 Harmon International Industries, Inc. Headphone listening apparatus
US9800983B2 (en) 2014-07-24 2017-10-24 Magna Electronics Inc. Vehicle in cabin sound processing system
US9610893B2 (en) * 2015-03-18 2017-04-04 Car1St Technologies, Llc Methods and systems for providing alerts to a driver of a vehicle via condition detection and wireless communications
US10328855B2 (en) 2015-03-18 2019-06-25 Uber Technologies, Inc. Methods and systems for providing alerts to a connected vehicle driver and/or a passenger via condition detection and wireless communications
WO2017023313A1 (en) * 2015-08-05 2017-02-09 Ford Global Technologies, Llc System and method for sound direction detection in a vehicle
US9870762B2 (en) * 2015-09-11 2018-01-16 Plantronics, Inc. Steerable loudspeaker system for individualized sound masking
CN105894841A (zh) * 2015-10-20 2016-08-24 乐卡汽车智能科技(北京)有限公司 紧急车辆提醒方法和装置
FR3043179A1 (fr) * 2015-11-02 2017-05-05 Technofirst Installation pour la ventilation naturelle d'un local presentant un passage de ventilation associe a un amortisseur de bruit
DE102015223995A1 (de) * 2015-12-02 2017-06-08 Robert Bosch Gmbh Verfahren zum Betrieb einer Geräuschquelle für Antriebssysteme
US9989376B2 (en) * 2016-05-12 2018-06-05 Tata Consultancy Services Limited Systems and methods for generating signature ambient sounds and maps thereof
US10403141B2 (en) * 2016-08-19 2019-09-03 Sony Corporation System and method for processing traffic sound data to provide driver assistance
CN109642818B (zh) * 2016-08-29 2022-04-26 哈曼国际工业有限公司 用于为收听室生成虚拟场所的设备和方法
JP6631445B2 (ja) * 2016-09-09 2020-01-15 トヨタ自動車株式会社 車両用情報提示装置
GB2553571B (en) * 2016-09-12 2020-03-04 Jaguar Land Rover Ltd Apparatus and method for privacy enhancement
CN107886769B (zh) * 2016-09-30 2020-08-21 厦门雅迅网络股份有限公司 一种电动汽车迫近检测报警方法及系统
US10462567B2 (en) 2016-10-11 2019-10-29 Ford Global Technologies, Llc Responding to HVAC-induced vehicle microphone buffeting
EP3319343A1 (en) * 2016-11-08 2018-05-09 Harman Becker Automotive Systems GmbH Vehicle sound processing system
US20200066070A1 (en) * 2016-11-29 2020-02-27 Jaguar Land Rover Limited Improvements relating to hearing assistance in vehicles
US10369988B2 (en) 2017-01-13 2019-08-06 Ford Global Technologies, Llc Autonomous parking of vehicles inperpendicular parking spots
US11244564B2 (en) 2017-01-26 2022-02-08 Magna Electronics Inc. Vehicle acoustic-based emergency vehicle detection
EP3595331A1 (en) * 2017-03-09 2020-01-15 Sony Corporation Information processing device, information processing method and recording medium
EP3376487A1 (en) * 2017-03-15 2018-09-19 Volvo Car Corporation Method and system for providing representative warning sounds within a vehicle
DE112018001454T5 (de) * 2017-03-20 2019-12-12 Jaguar Land Rover Limited Vorrichtung und verfahren zur verbesserung der privatsphäre
JP7078039B2 (ja) * 2017-04-26 2022-05-31 ソニーグループ株式会社 信号処理装置および方法、並びにプログラム
US10186260B2 (en) * 2017-05-31 2019-01-22 Ford Global Technologies, Llc Systems and methods for vehicle automatic speech recognition error detection
US10683034B2 (en) 2017-06-06 2020-06-16 Ford Global Technologies, Llc Vehicle remote parking systems and methods
DE102017112966A1 (de) 2017-06-13 2018-12-13 Krauss-Maffei Wegmann Gmbh & Co. Kg Fahrzeug mit einem Fahrzeuginnenraum und Verfahren zur Geräuschübertragung in einen Fahrzeuginnenraum eines Fahrzeugs
US10775781B2 (en) 2017-06-16 2020-09-15 Ford Global Technologies, Llc Interface verification for vehicle remote park-assist
US10234868B2 (en) 2017-06-16 2019-03-19 Ford Global Technologies, Llc Mobile device initiation of vehicle remote-parking
US10585430B2 (en) 2017-06-16 2020-03-10 Ford Global Technologies, Llc Remote park-assist authentication for vehicles
EP3644308B1 (en) * 2017-06-21 2021-04-21 FUJIFILM Corporation Sound insulation system
US10163434B1 (en) 2017-06-26 2018-12-25 GM Global Technology Operations LLC Audio control systems and methods based on road characteristics and vehicle operation
US20190037363A1 (en) * 2017-07-31 2019-01-31 GM Global Technology Operations LLC Vehicle based acoustic zoning system for smartphones
US10525921B2 (en) 2017-08-10 2020-01-07 Ford Global Technologies, Llc Monitoring windshield vibrations for vehicle collision detection
KR102465970B1 (ko) 2017-08-11 2022-11-10 삼성전자주식회사 주변 상황에 기초하여 음악을 재생하는 방법 및 장치
US10049654B1 (en) 2017-08-11 2018-08-14 Ford Global Technologies, Llc Accelerometer-based external sound monitoring
US20200361374A1 (en) * 2017-08-18 2020-11-19 John Hegarty A device for operating a sounder to produce a plurality of different sounds, and a method for operating a sounder to produce a plurality of different sounds
US10308225B2 (en) 2017-08-22 2019-06-04 Ford Global Technologies, Llc Accelerometer-based vehicle wiper blade monitoring
GB2566935B (en) * 2017-09-20 2021-09-22 Ford Global Tech Llc Selective sound system and method for a vehicle
US10562449B2 (en) 2017-09-25 2020-02-18 Ford Global Technologies, Llc Accelerometer-based external sound monitoring during low speed maneuvers
US10580304B2 (en) 2017-10-02 2020-03-03 Ford Global Technologies, Llc Accelerometer-based external sound monitoring for voice controlled autonomous parking
US10281921B2 (en) 2017-10-02 2019-05-07 Ford Global Technologies, Llc Autonomous parking of vehicles in perpendicular parking spots
US10479300B2 (en) 2017-10-06 2019-11-19 Ford Global Technologies, Llc Monitoring of vehicle window vibrations for voice-command recognition
US10629081B2 (en) * 2017-11-02 2020-04-21 Ford Global Technologies, Llc Accelerometer-based external sound monitoring for backup assistance in a vehicle
US10627811B2 (en) 2017-11-07 2020-04-21 Ford Global Technologies, Llc Audio alerts for remote park-assist tethering
US10629190B2 (en) 2017-11-09 2020-04-21 Paypal, Inc. Hardware command device with audio privacy features
US10336320B2 (en) 2017-11-22 2019-07-02 Ford Global Technologies, Llc Monitoring of communication for vehicle remote park-assist
US10578676B2 (en) 2017-11-28 2020-03-03 Ford Global Technologies, Llc Vehicle monitoring of mobile device state-of-charge
US10245904B1 (en) * 2017-12-18 2019-04-02 Ford Global Technologies, Llc Methods and apparatus to facilitate TPMS broadcast mode selection
US10974717B2 (en) 2018-01-02 2021-04-13 Ford Global Technologies, I.LC Mobile device tethering for a remote parking assist system of a vehicle
US10814864B2 (en) 2018-01-02 2020-10-27 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10585431B2 (en) 2018-01-02 2020-03-10 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10688918B2 (en) 2018-01-02 2020-06-23 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US11148661B2 (en) 2018-01-02 2021-10-19 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
DE102018200008A1 (de) * 2018-01-02 2019-07-04 Ford Global Technologies, Llc Kraftfahrzeug mit einer Schallerfassungseinrichtung
US10583830B2 (en) 2018-01-02 2020-03-10 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10737690B2 (en) 2018-01-02 2020-08-11 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10684773B2 (en) 2018-01-03 2020-06-16 Ford Global Technologies, Llc Mobile device interface for trailer backup-assist
US10747218B2 (en) 2018-01-12 2020-08-18 Ford Global Technologies, Llc Mobile device tethering for remote parking assist
US10917748B2 (en) 2018-01-25 2021-02-09 Ford Global Technologies, Llc Mobile device tethering for vehicle systems based on variable time-of-flight and dead reckoning
US10684627B2 (en) 2018-02-06 2020-06-16 Ford Global Technologies, Llc Accelerometer-based external sound monitoring for position aware autonomous parking
CN110134824B (zh) * 2018-02-09 2021-11-02 驭势(上海)汽车科技有限公司 呈现地理位置信息的方法、装置及系统
US10166999B1 (en) 2018-02-12 2019-01-01 Ambarella, Inc. Surround sound based warning system
JP6973154B2 (ja) * 2018-02-15 2021-11-24 トヨタ自動車株式会社 車両用防音構造
US11188070B2 (en) 2018-02-19 2021-11-30 Ford Global Technologies, Llc Mitigating key fob unavailability for remote parking assist systems
US10507868B2 (en) 2018-02-22 2019-12-17 Ford Global Technologies, Llc Tire pressure monitoring for vehicle park-assist
US10362385B1 (en) * 2018-03-05 2019-07-23 Harman International Industries, Incorporated Controlling perceived ambient sounds based on focus level
US10732622B2 (en) 2018-04-05 2020-08-04 Ford Global Technologies, Llc Advanced user interaction features for remote park assist
US10759417B2 (en) 2018-04-09 2020-09-01 Ford Global Technologies, Llc Input signal management for vehicle park-assist
US10793144B2 (en) 2018-04-09 2020-10-06 Ford Global Technologies, Llc Vehicle remote park-assist communication counters
US10493981B2 (en) 2018-04-09 2019-12-03 Ford Global Technologies, Llc Input signal management for vehicle park-assist
US10683004B2 (en) 2018-04-09 2020-06-16 Ford Global Technologies, Llc Input signal management for vehicle park-assist
US10770089B2 (en) 2018-05-10 2020-09-08 Caterpillar Inc. Sound dampening and pass through filtering
CN110503853A (zh) * 2018-05-17 2019-11-26 奥迪股份公司 用于车辆的警示信号发送系统、警示信号接收系统及车辆
US11323086B2 (en) * 2018-05-31 2022-05-03 Comcast Cable Communications, Llc Content audio adjustment
US10232673B1 (en) 2018-06-01 2019-03-19 Ford Global Technologies, Llc Tire pressure monitoring with vehicle park-assist
CN110689908A (zh) * 2018-07-06 2020-01-14 上海博泰悦臻网络技术服务有限公司 车辆及其音频信息独立控制装置和音频信息独立控制方法
KR102526081B1 (ko) * 2018-07-26 2023-04-27 현대자동차주식회사 차량 및 그 제어방법
WO2020033595A1 (en) 2018-08-07 2020-02-13 Pangissimo, LLC Modular speaker system
DE102018214898A1 (de) * 2018-09-03 2020-03-05 Robert Bosch Gmbh Sensorvorrichtung zum Detektieren akustischer Signale in der Umgebung eines Fahrzeugs
US10384605B1 (en) 2018-09-04 2019-08-20 Ford Global Technologies, Llc Methods and apparatus to facilitate pedestrian detection during remote-controlled maneuvers
CN110877579A (zh) * 2018-09-05 2020-03-13 上海博泰悦臻网络技术服务有限公司 后排独立空间控制方法、后排独立空间控制装置及车辆
US10821972B2 (en) 2018-09-13 2020-11-03 Ford Global Technologies, Llc Vehicle remote parking assist systems and methods
US10717432B2 (en) 2018-09-13 2020-07-21 Ford Global Technologies, Llc Park-assist based on vehicle door open positions
US20200086788A1 (en) * 2018-09-19 2020-03-19 Richard J. Pivnicka Method and system for alerting drivers with direction specific audio system
US10529233B1 (en) 2018-09-24 2020-01-07 Ford Global Technologies Llc Vehicle and method for detecting a parking space via a drone
US10967851B2 (en) 2018-09-24 2021-04-06 Ford Global Technologies, Llc Vehicle system and method for setting variable virtual boundary
US10908603B2 (en) 2018-10-08 2021-02-02 Ford Global Technologies, Llc Methods and apparatus to facilitate remote-controlled maneuvers
US10628687B1 (en) 2018-10-12 2020-04-21 Ford Global Technologies, Llc Parking spot identification for vehicle park-assist
US11097723B2 (en) 2018-10-17 2021-08-24 Ford Global Technologies, Llc User interfaces for vehicle remote park assist
US11137754B2 (en) 2018-10-24 2021-10-05 Ford Global Technologies, Llc Intermittent delay mitigation for remote vehicle operation
KR102518662B1 (ko) * 2018-11-29 2023-04-07 현대자동차주식회사 주변소음을 이용한 주행안전 제어시스템 및 그의 제어방법
JP7155991B2 (ja) * 2018-12-17 2022-10-19 トヨタ自動車株式会社 報知装置
US10714116B2 (en) * 2018-12-18 2020-07-14 Gm Cruise Holdings Llc Systems and methods for active noise cancellation for interior of autonomous vehicle
JP2022516058A (ja) * 2019-01-03 2022-02-24 ハーマン インターナショナル インダストリーズ, インコーポレイテッド ハイブリッド車内スピーカ及びヘッドフォンベースの音響拡張現実システム
WO2020142600A1 (en) * 2019-01-03 2020-07-09 Harman International Industries, Incorporated In-car headphone acoustical augmented reality system
US11076274B1 (en) * 2019-01-28 2021-07-27 United Services Automobile Association (Usaa) Monitoring of data to predict driving events
US11789442B2 (en) 2019-02-07 2023-10-17 Ford Global Technologies, Llc Anomalous input detection
CN109849784A (zh) * 2019-02-27 2019-06-07 江苏大学 一种基于行车环境声音识别和定位的辅助驾驶系统
US11195344B2 (en) 2019-03-15 2021-12-07 Ford Global Technologies, Llc High phone BLE or CPU burden detection and notification
US11275368B2 (en) 2019-04-01 2022-03-15 Ford Global Technologies, Llc Key fobs for vehicle remote park-assist
US11169517B2 (en) 2019-04-01 2021-11-09 Ford Global Technologies, Llc Initiation of vehicle remote park-assist with key fob
CN110310618B (zh) * 2019-06-05 2021-09-03 广州小鹏汽车科技有限公司 车辆行驶环境声音的处理方法、处理装置和车辆
WO2020255246A1 (ja) * 2019-06-18 2020-12-24 三菱電機株式会社 運転支援装置、運転支援システムおよび運転支援方法
JP2021022181A (ja) * 2019-07-29 2021-02-18 コニカミノルタ株式会社 パーソナルスペース作成システム、パーソナルスペース作成方法及びパーソナルスペース作成プログラム
DE102019213329A1 (de) * 2019-09-03 2021-03-04 Robert Bosch Gmbh Verfahren zum Bereitstellen eines modifizierten akustischen Signals zur Wiedergabe in einem Innenraum eines Fahrzeugs
US11580796B1 (en) * 2019-09-12 2023-02-14 United Services Automobile Association (Usaa) Automatic problem detection from sounds
CN110660032A (zh) * 2019-09-24 2020-01-07 Oppo广东移动通信有限公司 一种对象屏蔽方法、对象屏蔽装置及电子设备
DE102019218066A1 (de) * 2019-11-22 2021-05-27 Zf Friedrichshafen Ag System zum Detektieren von Geräuschen und Verfahren zum Kalibrieren und Überwachen von Akustiksensoren bei Kraftfahrzeugen
US11788859B2 (en) 2019-12-02 2023-10-17 Here Global B.V. Method, apparatus, and computer program product for road noise mapping
US11257510B2 (en) 2019-12-02 2022-02-22 International Business Machines Corporation Participant-tuned filtering using deep neural network dynamic spectral masking for conversation isolation and security in noisy environments
US11393489B2 (en) 2019-12-02 2022-07-19 Here Global B.V. Method, apparatus, and computer program product for road noise mapping
WO2021142442A1 (en) 2020-01-10 2021-07-15 Optimus Ride, Inc. Communication system and method
US11535260B2 (en) * 2020-03-05 2022-12-27 Harman International Industries, Incorporated Attention-based notifications
JP7065140B2 (ja) * 2020-03-31 2022-05-11 本田技研工業株式会社 車両
CN111681632A (zh) * 2020-05-29 2020-09-18 昆山三一动力有限公司 声波处理系统和机动车辆
WO2022014274A1 (ja) * 2020-07-14 2022-01-20 ソニーグループ株式会社 通知制御装置、通知制御方法、通知システム
JP7420008B2 (ja) * 2020-08-20 2024-01-23 株式会社デンソー 表示制御装置
US20230229383A1 (en) * 2020-09-22 2023-07-20 Bose Corporation Hearing augmentation and wearable system with localized feedback
US11467666B2 (en) * 2020-09-22 2022-10-11 Bose Corporation Hearing augmentation and wearable system with localized feedback
US11812245B2 (en) * 2020-10-08 2023-11-07 Valeo Telematik Und Akustik Gmbh Method, apparatus, and computer-readable storage medium for providing three-dimensional stereo sound
DE102020213185A1 (de) 2020-10-19 2022-04-21 Volkswagen Aktiengesellschaft Unterstützung eines Fahrers bei der Wahrnehmung von Außengeräuschen
EP4204767A1 (en) * 2020-11-18 2023-07-05 Google LLC Detecting and handling driving event sounds during a navigation session
DE102020133648A1 (de) 2020-12-16 2022-06-23 Audi Aktiengesellschaft Verfahren zur Abhörsicherung einer Stimme
US20220230655A1 (en) * 2021-01-15 2022-07-21 Continental Automotive Systems Inc. Method and device for detecting characteristic frequencies with a sensor
CN112967729A (zh) * 2021-02-24 2021-06-15 辽宁省视讯技术研究有限公司 一种车载局部音频模糊处理方法、装置
US11765506B2 (en) * 2021-03-01 2023-09-19 Tymphany Worldwide Enterprises Limited Automobile audio system
CA3214519A1 (en) * 2021-04-20 2022-10-27 Jesse Dorogusker Live playback streams
CN113487909B (zh) * 2021-06-07 2023-06-30 惠州市德赛西威汽车电子股份有限公司 一种基于声纹识别的弯道对向车预警方法及系统
US11398149B1 (en) 2021-06-28 2022-07-26 Arity International Limited Crosswalk detection using high-frequency transmitters
US20230015199A1 (en) * 2021-07-19 2023-01-19 Dell Products L.P. System and Method for Enhancing Game Performance Based on Key Acoustic Event Profiles
US11898870B2 (en) 2021-09-02 2024-02-13 Here Global B.V. Apparatus and methods for providing a route using a map layer of one or more sound events
CN113724682A (zh) * 2021-09-10 2021-11-30 朝阳聚声泰(信丰)科技有限公司 一种汽车降噪结构及降噪方法
US11943581B2 (en) * 2021-09-30 2024-03-26 Google Llc Transparent audio mode for vehicles
CN113997863A (zh) * 2021-11-24 2022-02-01 北京字节跳动网络技术有限公司 数据处理方法、装置和车辆
CN114067612A (zh) * 2021-11-26 2022-02-18 山东科技大学 一种基于环境声音分析的车辆感知及危险预警方法与系统
KR20230086096A (ko) * 2021-12-08 2023-06-15 현대자동차주식회사 차량 내 개인화된 사운드 마스킹 방법 및 장치
WO2023114863A1 (en) * 2021-12-15 2023-06-22 Atieva, Inc. Directional vehicle notifications using pre-rendered multidimensional sounds
DE102022201666A1 (de) 2022-02-17 2023-08-17 Robert Bosch Gesellschaft mit beschränkter Haftung Verfahren zur Bereitstellung eines Akustiksignals für einen Fahrer und Vorrichtung zur Durchführung desselben
WO2023191786A1 (en) * 2022-03-30 2023-10-05 Harman International Industries, Incorporated Sound event detection using surface mounted vibration sensors
CN114734914A (zh) * 2022-04-01 2022-07-12 阿维塔科技(重庆)有限公司 车辆的警示提醒方法、装置、车辆及计算机可读存储介质
US20230394966A1 (en) * 2022-06-06 2023-12-07 International Business Machines Corporation Adaptive sound generation
EP4343753A1 (en) * 2022-09-26 2024-03-27 Dr. Ing. h.c. F. Porsche Aktiengesellschaft Vehicle interior panel, corresponding vehicle door, and vehicle having such panel

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1890708A (zh) * 2003-12-05 2007-01-03 株式会社建伍 音频设备控制装置、音频设备控制方法及程序
CN102224541A (zh) * 2008-11-26 2011-10-19 松下电器产业株式会社 声音输出装置
CN103109317A (zh) * 2010-09-28 2013-05-15 雅马哈株式会社 掩蔽声音输出装置和掩蔽声音输出方法
CN103403798A (zh) * 2011-04-08 2013-11-20 三菱电机株式会社 声音识别装置及导航装置

Family Cites Families (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0290162U (zh) * 1988-12-28 1990-07-17
JPH082339A (ja) 1994-06-16 1996-01-09 Mitsubishi Automob Eng Co Ltd 車外音導入装置
US5647011A (en) 1995-03-24 1997-07-08 Garvis; Andrew W. Headphone sound system
JP3719690B2 (ja) * 1995-12-20 2005-11-24 富士通テン株式会社 車載用音響装置
JP2000046574A (ja) * 1998-07-24 2000-02-18 Honda Motor Co Ltd 車両用ナビゲーション装置
GB9912133D0 (en) 1999-05-26 1999-07-28 Evets Communications Ltd Alarm system
US6360187B1 (en) * 1999-06-28 2002-03-19 Ford Global Technologies, Inc. Ambient adjusted volume control for in-vehicles messages
US20010046304A1 (en) 2000-04-24 2001-11-29 Rast Rodger H. System and method for selective control of acoustic isolation in headsets
JP2002367099A (ja) * 2001-06-12 2002-12-20 Nissan Motor Co Ltd 車両用情報処理装置
JP4555072B2 (ja) 2002-05-06 2010-09-29 シンクロネイション インコーポレイテッド ローカライズされたオーディオ・ネットワークおよび関連するディジタル・アクセサリ
US20040179694A1 (en) 2002-12-13 2004-09-16 Alley Kenneth A. Safety apparatus for audio device that mutes and controls audio output
JP4788947B2 (ja) * 2004-09-21 2011-10-05 アイシン精機株式会社 センサの信号処理システム
US20060071764A1 (en) * 2004-09-24 2006-04-06 Lynch William D Merge Sensor Control System
JP2006092482A (ja) * 2004-09-27 2006-04-06 Yamaha Corp 音声認識通報装置
JP4734627B2 (ja) * 2005-03-22 2011-07-27 国立大学法人山口大学 スピーチプライバシー保護装置
US8126159B2 (en) 2005-05-17 2012-02-28 Continental Automotive Gmbh System and method for creating personalized sound zones
JP2006341758A (ja) * 2005-06-09 2006-12-21 Toyota Motor Corp 車両用ゆらぎ制御装置
JP4557819B2 (ja) * 2005-06-21 2010-10-06 アルパイン株式会社 車両周辺情報提供装置
EP1736360A1 (en) * 2005-06-23 2006-12-27 Mazda Motor Corporation Blind-Spot detection system for vehicle
JP2007034348A (ja) * 2005-07-22 2007-02-08 Hitachi Ltd 音声感知システム
JP2007264436A (ja) * 2006-03-29 2007-10-11 Matsushita Electric Ind Co Ltd 音マスキング装置、音マスキング方法およびプログラム
US7986791B2 (en) 2006-10-17 2011-07-26 International Business Machines Corporation Method and system for automatically muting headphones
JP2008149917A (ja) * 2006-12-18 2008-07-03 Denso Corp 車両用周囲音報知装置
WO2008103925A1 (en) 2007-02-22 2008-08-28 Personics Holdings Inc. Method and device for sound detection and audio control
US8868137B2 (en) 2007-09-25 2014-10-21 At&T Intellectual Property I, L.P. Alert processing devices and systems for noise-reducing headsets and methods for providing alerts to users of noise-reducing headsets
JP5040634B2 (ja) * 2007-12-17 2012-10-03 富士通株式会社 警告装置、警告方法および警告プログラム
US8319620B2 (en) * 2008-06-19 2012-11-27 Personics Holdings Inc. Ambient situation awareness system and method for vehicles
US8212659B2 (en) 2008-09-05 2012-07-03 Mazda Motor Corporation Driving assist device for vehicle
US8135140B2 (en) * 2008-11-20 2012-03-13 Harman International Industries, Incorporated System for active noise control with audio signal compensation
US8068025B2 (en) 2009-05-28 2011-11-29 Simon Paul Devenyi Personal alerting device and method
US20100329488A1 (en) * 2009-06-25 2010-12-30 Holub Patrick K Method and Apparatus for an Active Vehicle Sound Management System
US20110274283A1 (en) * 2009-07-22 2011-11-10 Lewis Athanas Open Air Noise Cancellation
JP2011161965A (ja) * 2010-02-05 2011-08-25 Panasonic Corp 車載用音響装置
JP2011248855A (ja) * 2010-04-30 2011-12-08 Denso Corp 車両用衝突警報装置
JP5966326B2 (ja) * 2010-12-07 2016-08-10 ヤマハ株式会社 マスカ音出力装置、マスカ音出力システム、およびプログラム
WO2012097150A1 (en) 2011-01-12 2012-07-19 Personics Holdings, Inc. Automotive sound recognition system for enhanced situation awareness
JP2012192865A (ja) * 2011-03-17 2012-10-11 Denso Corp 車両存在通報装置
US9041545B2 (en) 2011-05-02 2015-05-26 Eric Allen Zelepugas Audio awareness apparatus, system, and method of using the same
JP2013092983A (ja) * 2011-10-27 2013-05-16 Toyota Motor Corp 運転支援装置および運転支援方法
JP5820305B2 (ja) * 2012-02-29 2015-11-24 株式会社村上開明堂 車外音導入装置
US9191744B2 (en) 2012-08-09 2015-11-17 Logitech Europe, S.A. Intelligent ambient sound monitoring system
US9736587B2 (en) 2012-08-31 2017-08-15 Qualcomm Incorporated Smart tool for headphones
US9391580B2 (en) 2012-12-31 2016-07-12 Cellco Paternership Ambient audio injection
US9469247B2 (en) 2013-11-21 2016-10-18 Harman International Industries, Incorporated Using external sounds to alert vehicle occupants of external events and mask in-car conversations
US9156440B2 (en) 2013-11-21 2015-10-13 Paul L. Klassy Powered landing gear with cross-port disable valve travel limiter
US10425717B2 (en) 2014-02-06 2019-09-24 Sr Homedics, Llc Awareness intelligence headphone

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1890708A (zh) * 2003-12-05 2007-01-03 株式会社建伍 音频设备控制装置、音频设备控制方法及程序
CN102224541A (zh) * 2008-11-26 2011-10-19 松下电器产业株式会社 声音输出装置
CN103109317A (zh) * 2010-09-28 2013-05-15 雅马哈株式会社 掩蔽声音输出装置和掩蔽声音输出方法
CN103403798A (zh) * 2011-04-08 2013-11-20 三菱电机株式会社 声音识别装置及导航装置

Also Published As

Publication number Publication date
US20160379621A1 (en) 2016-12-29
JP6718204B2 (ja) 2020-07-08
JP2015101332A (ja) 2015-06-04
JP6761458B2 (ja) 2020-09-23
US9469247B2 (en) 2016-10-18
EP2876639A2 (en) 2015-05-27
EP4020463A1 (en) 2022-06-29
US20150137998A1 (en) 2015-05-21
EP2876639A3 (en) 2015-12-02
CN104658548A (zh) 2015-05-27
US9870764B2 (en) 2018-01-16
JP2019086784A (ja) 2019-06-06
EP2876639B1 (en) 2022-03-02

Similar Documents

Publication Publication Date Title
CN104658548B (zh) 用外部声音向车辆驾乘人员警告外部事件并掩蔽车内谈话
US9743213B2 (en) Enhanced auditory experience in shared acoustic space
KR102645589B1 (ko) 음향 제어 시스템, 장치 및 방법
JP3913771B2 (ja) 音声識別装置、音声識別方法、及びプログラム
US9293135B2 (en) Countermeasures for voice recognition deterioration due to exterior noise from passing vehicles
CN110310618B (zh) 车辆行驶环境声音的处理方法、处理装置和车辆
US20080079571A1 (en) Safety Device
US20170303037A1 (en) Enhanced audio landscape
WO2012097150A1 (en) Automotive sound recognition system for enhanced situation awareness
US9571057B2 (en) Altering audio signals
US10636405B1 (en) Automatic active noise reduction (ANR) control
US20200083856A1 (en) Audio control system
US20160188284A1 (en) Noise cancellation with enhancement of danger sounds
JP7040513B2 (ja) 情報処理装置、情報処理方法及び記録媒体
WO2020120754A1 (en) Audio processing device, audio processing method and computer program thereof
US11626096B2 (en) Vehicle and control method thereof
US20230419944A1 (en) In-cabin audio filtering
CN110550037B (zh) 用于车辆的驾驶辅助系统及驾驶辅助系统方法
KR20220143309A (ko) 차량 및 그 제어 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant