CN110573398B - 用于车辆传感系统的音频处理 - Google Patents
用于车辆传感系统的音频处理 Download PDFInfo
- Publication number
- CN110573398B CN110573398B CN201880028680.4A CN201880028680A CN110573398B CN 110573398 B CN110573398 B CN 110573398B CN 201880028680 A CN201880028680 A CN 201880028680A CN 110573398 B CN110573398 B CN 110573398B
- Authority
- CN
- China
- Prior art keywords
- vehicle
- microphone
- sound
- data bus
- digital
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title description 9
- 239000000463 material Substances 0.000 claims abstract description 24
- 230000010255 response to auditory stimulus Effects 0.000 claims abstract description 5
- 238000000034 method Methods 0.000 claims description 19
- 238000001514 detection method Methods 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 5
- 229920000742 Cotton Polymers 0.000 claims description 3
- 239000011490 mineral wool Substances 0.000 claims description 3
- 239000011148 porous material Substances 0.000 claims description 3
- 229920002678 cellulose Polymers 0.000 claims description 2
- 239000001913 cellulose Substances 0.000 claims description 2
- 238000012790 confirmation Methods 0.000 claims description 2
- 239000002657 fibrous material Substances 0.000 claims description 2
- 239000011152 fibreglass Substances 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 7
- 238000004590 computer program Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000010521 absorption reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 239000000835 fiber Substances 0.000 description 2
- 230000001771 impaired effect Effects 0.000 description 2
- 238000009413 insulation Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- -1 polytetrafluoroethylene Polymers 0.000 description 2
- 230000001953 sensory effect Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 229920002994 synthetic fiber Polymers 0.000 description 2
- 229920001474 Flashspun fabric Polymers 0.000 description 1
- 229920000544 Gore-Tex Polymers 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 239000004698 Polyethylene Substances 0.000 description 1
- 241000269400 Sirenidae Species 0.000 description 1
- 239000004775 Tyvek Substances 0.000 description 1
- 229920000690 Tyvek Polymers 0.000 description 1
- 239000011358 absorbing material Substances 0.000 description 1
- 239000012814 acoustic material Substances 0.000 description 1
- 150000001336 alkenes Chemical class 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004751 flashspun nonwoven Substances 0.000 description 1
- 239000003365 glass fiber Substances 0.000 description 1
- 230000005661 hydrophobic surface Effects 0.000 description 1
- 239000004816 latex Substances 0.000 description 1
- 229920000126 latex Polymers 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 229920000573 polyethylene Polymers 0.000 description 1
- 229920000642 polymer Polymers 0.000 description 1
- 229920001343 polytetrafluoroethylene Polymers 0.000 description 1
- 239000004810 polytetrafluoroethylene Substances 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 239000011435 rock Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000004758 synthetic textile Substances 0.000 description 1
- 231100000331 toxic Toxicity 0.000 description 1
- 230000002588 toxic effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 210000002268 wool Anatomy 0.000 description 1
- 239000002759 woven fabric Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0255—Control of position or course in two dimensions specially adapted to land vehicles using acoustic signals, e.g. ultra-sonic singals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/283—Processing of data at an internetworking point of a home automation network
- H04L12/2836—Protocol conversion between an external network and a home network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q1/00—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
- B60Q1/0017—Devices integrating an element dedicated to another function
- B60Q1/0023—Devices integrating an element dedicated to another function the element being a sensor, e.g. distance sensor, camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
- B60R16/0238—Electrical distribution centers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
- B60R2001/1223—Mirror assemblies combined with other articles, e.g. clocks with sensors or transducers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/143—Alarm means
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/162—Selection of materials
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/172—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using resonance effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/40—Bus networks
- H04L2012/40208—Bus networks characterized by the use of a particular bus standard
- H04L2012/40215—Controller Area Network CAN
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/40—Bus networks
- H04L2012/40208—Bus networks characterized by the use of a particular bus standard
- H04L2012/40234—Local Interconnect Network LIN
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/40—Bus networks
- H04L2012/40267—Bus for use in transportation systems
- H04L2012/40273—Bus for use in transportation systems the transportation system being a vehicle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/08—Mouthpieces; Microphones; Attachments therefor
- H04R1/083—Special constructions of mouthpieces
- H04R1/086—Protective screens, e.g. all weather or wind screens
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/22—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only
- H04R1/26—Spatial arrangements of separate transducers responsive to two or more frequency ranges
- H04R1/265—Spatial arrangements of separate transducers responsive to two or more frequency ranges of microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
- H04R2499/10—General applications
- H04R2499/13—Acoustic transducers and sound field adaptation in vehicles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
Abstract
通过将麦克风附接到车辆外部以响应于车辆外部的声波生成模拟信号,将音频导出信息提供给车辆的车辆控制系统。包含声音衰减材料的外壳对低频声音进行机械滤波使其不到达麦克风换能器。模数转换器将模拟信号转换为数字信号。车辆数据总线将数字信号传送到车辆控制系统。
Description
技术领域
本发明涉及用车辆传感系统处理音频信号的系统和方法。
背景技术
用于半自主或全自主车辆的驾驶员辅助系统和传感系统可以使用多种传感器类型,以有效地允许车辆感测其周围环境。然而,每种传感器类型都有缺点。使用捕获图像的照相机或捕获反射光(激光雷达)的光学传感器的光学系统受到“视线”的限制,相对昂贵,并且需要强大的处理器来处理大量数据。检测反射无线电波的雷达系统数据密集程度较低,但提供的信息要少得多。检测反射超声波的系统仅在短距离内有用,并且限于诸如停车辅助传感器的应用。
据发明人所知,没有使用麦克风或其他音频传感器来提供表示车辆周围环境的附加数据的驾驶员辅助系统或自动车辆系统。为此,要克服的一个挑战是将音频传感器与驾驶员辅助系统或自主车辆系统集成。另一个挑战是由风或空气抖振产生的噪声,这可能使得难以或不可能检测感兴趣的目标声音。尽管可以从声音样本中电子地过滤噪声,但这将使计算时间和成本增加到对于车辆应用中所需的近实时声音检测可能不实用的程度。
发明内容
在一个方面,本发明包括一种用于向车辆操作者提供源自音频的信息的系统,该系统包括:
(a)安装在车辆中或安装到车辆的至少一个麦克风,用于响应于所述车辆外部的声波而生成模拟信号;以及
(b)分析模块,其与所述至少一个麦克风相关联,用于将所述模拟信号转换为数字信号,其中,所述分析模块被配置为将所述数字信号传送到车辆数据总线,用于将所述数字信号传送或传递到所述车辆操作者或车辆控制系统。
在一个实施方式中,所述车辆操作者是人类驾驶员,所述数字信号导致对驾驶员的通知。在另一实施方式中,所述车辆操作者是车辆控制系统,例如在自主或半自主车辆中,并且所述数字信号导致对所述车辆控制系统的电子通知。
在另一方面,本发明可以包括一种用于向车辆操作者提供源自音频的信息的方法,该方法包括以下步骤:
(a)为所述车辆提供至少一个面向外部的麦克风,用于响应于所述车辆外部的声波而生成模拟信号;
(b)将所述模拟信号转换为数字信号,并将所述数字信号传送至车辆数据总线,以将所述数字信号传递至所述车辆操作者。
附图说明
在说明书所示的附图中,相同的元件可以用相同的附图标记表示。附图不必按比例绘制,取而代之的是强调本发明的原理。另外,所描绘的实施方式中的每一个仅为利用本发明的基本概念的若干可能结构中的一个。
图1示出了装备有本发明的系统的实施方式的车辆,以及在道路上行驶时发出警笛声的紧急车辆。
图2示出了本发明的系统的第一实施方式的示意图,该系统包括具有处理元件的单个麦克风和经由数据总线可操作地连接到车辆控制系统的相关联的分析模块。
图3示出了根据本发明的系统的实施方式的包含多个麦克风的车辆的前视图。
图4示出了根据本发明的系统的实施方式的包含多个麦克风的车辆的后视图。
图5示出了根据本发明的系统的实施方式的包含麦克风的车辆前照灯组件。
图6示出了根据本发明的系统的实施方式的包含麦克风的车辆侧镜组件。
图7示出了用于换能器形式的音频传感器的本发明的外壳的实施方式的分解透视图。
图8示出了本发明的系统的实施方式的示意图,该系统包括在多个节点处可操作地连接到数据总线的多个麦克风。
图9示出了本发明的系统的另一实施方式的示意图,该系统包括在单个节点处可操作地连接到数据总线的多个麦克风。
具体实施方式
定义。未在本文中明确定义的任何术语或表达应具有本领域技术人员所理解的其通常接受的定义。如本文所用,以下术语具有以下含义。
“音频传感器”是指检测声波并将其转换成电信号的设备。在一个实施方式中,音频传感器可以是包括换能器的麦克风。
“计算机处理器”是指能够处理输入电子信号以产生输出电子信号的电子设备。在实施方式中,计算机处理器可以包括通常被称为可编程逻辑控制器、印刷电路板、集成电路、微控制器、处理器等的一个或多个设备。“计算设备”包括至少一个计算机处理器,并且还可以包括计算机可读存储器,该计算机可读存储器可以包括可由处理器执行的指令。
“非暂时性计算机可读存储器”是指能够以计算机处理器可读的格式存储数据和/或指令的有形介质。在实施方式中,非暂时性计算机可读存储器可以包括磁介质、光学介质或固态介质。
“目标声音”是指需要检测的特定感兴趣声音。目标声音可以在人类可听频谱内,或者在人类可听频谱外(例如,超过20kHz的超声声音)。作为非限制性示例,在移动车辆的情形下,目标声音可以是由紧急车辆警报器、另一车辆的喇叭、用于视觉受损行人的人行横道辅助声音、指示车辆失控的打滑轮胎、与另一车辆或物体碰撞的车辆、动物噪声或人类声音产生的声音。
“车辆”是指用于运送人员和/或货物的机器。作为非限制性示例,车辆可以是任何自供电的轮式车辆,包括汽车、摩托车、卡车或公共汽车。车辆可以是非自主的、半自主的或完全自主的。
“车辆控制系统”是指直接或间接控制车辆动态的任何方面,或提供与控制车辆动态的任何方面相关的信息的系统。车辆控制系统与仅用于娱乐车辆驾驶员或乘客的车辆娱乐系统不同。例如,GNSS或GPS导航系统可被认为是车辆控制系统的一部分,因为它向驾驶员提供关于车辆的位置和行进方向的有用信息,即使卫星导航系统可被集成到传统上称为“信息娱乐”系统中。车辆控制系统可以具有或不具有人机接口。
一般而言,本发明可以包括车辆听觉传感系统以向车辆操作者或车辆控制系统提供输入,该车辆听觉传感系统包括耦合到分析模块的至少一个麦克风,该分析模块被配置为将麦克风产生的模拟信号转换为数字信号并且将该数字信号传送到车辆数据总线以将该数字信号传送到车辆操作者或车辆控制系统。
包含在数字信号中并从本发明的音频传感器导出的信息可被处理并用于向驾驶员、车辆控制系统或远程实体提供通知,和/或被处理并用于调整车辆内部的视觉或音频条件,和/或用于控制车辆动态而无需人工输入或用于超越人工输入。
系统。图1示出了在道路(12)上的车辆(10),其中接近的紧急车辆(14)发出如声波(16)所示的警笛声。车辆(10)配备有用于检测作为目标声音的警笛声的本发明的系统(100)的实施方式,其具有由区域(18)表示的检测范围。在该示例中,车辆(10)还配备有具有分别由区域(20)、(22)和(24)表示的检测范围的光学感测系统、雷达感测系统和超声感测系统。系统(100)可在原始制造期间安装在车辆(10)中或作为售后市场系统以与现有车辆数据总线和车辆控制系统相接。
图2示出了使用可操作地连接到分析模块(112)的外部麦克风(102)或其他音频传感器向车辆控制系统提供源自音频的信息的本发明的系统(100)的一个实施方式的示意图,分析模块(112)又可操作地连接到与车辆控制系统(116)连接的车辆数据总线(114)。在实施方式中,系统(100)还可以包括用于外部麦克风的声音过滤或声音吸收设备,如图7所示。下面更详细地描述系统(100)的部件。
音频传感器。至少一个麦克风(102)面向外,意味着其检测车辆(10)的外部环境中的声波,并将它们转换成模拟信号以供系统(100)处理。麦克风可以物理地位于车辆上或车辆中的任何地方,只要其直接暴露于外部,或者提供有外部声音可以到达麦克风的通道。
在实施方式中,麦克风(102)可以以各种方式和位置结合到车辆(10)中。优选地,有四个或更多个麦克风(102),其提供车辆周围360提的覆盖范围。例如,如图3和图4所示,麦克风(102)可以方便地与围绕车辆(10)周边的灯组件集成,例如前灯、雾灯或驱动灯、尾灯、侧标志灯或信号灯组件、侧镜、保险杠和/或下整流罩。作为另一示例,麦克风(102)可位于附接到车辆(10)的壳体中,诸如单独的分立壳体、如图5所示的前照灯壳体(103)或如图6所示的侧镜壳体(105)中。壳体可包括其他感测设备,例如照相机、雷达、激光雷达和超声波传感器,或车辆(10)外部的其他设备,例如侧镜、天线、头灯、尾灯、保险杠或闪光灯。虽然麦克风(102)可以与同一壳体中的其他传感器物理地集成,但是可以使用相同或不同的车辆数据总线网络从不同的麦克风发送数据。
音频传感器外壳。在系统的一个实施方式中,可提供声音过滤或声音吸收设备以机械地过滤或吸收撞击在外部暴露于环境的麦克风(102)上的声波,以便减少由麦克风(102)的换能器(101)检测到的噪声量。该设备包括填充有声音衰减材料(206)的外壳(202),该声音衰减材料(206)优选地在吸收低频声音(例如频率小于约500Hz的声音)方面相对有效。
在一个实施方式中,如图7所示,设备包括位于换能器(101)后面的后外壳(200)。该设备还包括在麦克风(102)的换能器(101)前面的前外壳(202),其包含声音衰减材料(206)并且在换能器(101)前面形成声腔(204)。前外壳(202)中的端口开口(208)允许声波传播到声腔(204)中并撞击换能器。端口开口(208)应当被配置成避免由空气在端口开口(208)周围或进入端口开口(208)中的运动引起的共振频率。
在一个实施方式中,如图7所示,前外壳(202)是圆柱形的,但也可以是抛物线形、圆锥形或棱柱形。优选地,由前外壳(202)形成的声腔(204)具有大于其宽度的长度,使得声波在到达换能器之前必须行进通过吸音材料一定距离。外壳(200、202)本身优选地是显示一些吸声特性的声学材料。可选地,前外壳(202)的内表面和外表面之一或两者也可以涂覆有具有吸声特性的合适材料。
通过移动车辆产生的道路和风噪声具有在低于约500Hz的范围内的实质分量。在一个实施方式中,声音衰减材料(206)优选地是衰减频率小于约500Hz的声波的低密度多孔或纤维材料。通过在声腔(204)中插入低密度纤维或多孔材料来实现低频下的高吸收。低密度声音衰减材料(206)提供足够曲折的路径,使得声波不能从任何端口开口(208)直接到达换能器(101)。
在一个实施方式中,声音衰减材料(206)可以优选地是容易成形的,在大的温度范围内是稳定的,并且不应该是有毒的或污染物。进一步优选的是,声音衰减材料(206)容易回收并且制造和处理成本有效。
在一个实施方式中,声音衰减材料(206)可包括绝缘产品,例如矿物棉、玻璃纤维棉、纤维素或棉。优选材料是防水的,因为它不吸水或具有疏水表面。代表性材料包括岩(玄武岩)棉产品,例如Roxul Safe'n'Sound TM (Roxul公司;加拿大,安大略省,密尔顿),其密度约为40kg/m3 。下面表1示出了当按照ASTMC423标准(ASTM国际;美国,宾夕法尼亚州,西康肖霍肯)进行测试时在不同频率下3英寸厚Roxul Safe'n'Sound TM 绝缘的吸声系数(SAC)。在表1中,降噪系数(NRC)是6个不同频率处的SAC的平均值。
下面,表2总结了也可用于声音衰减材料(208)的其他材料的声学性能特性和密度。品牌为Roxul TM 的产品可从加拿大安大略省密尔顿Roxul公司购得;品牌为ATSAcoustics TM 的产品可从美国伊利诺伊州派珀市ATS Acoustics购得;品牌为OwensComingTM 的产品可从加拿大艾伯塔省埃德蒙顿欧文斯康宁加拿大公司(OwensComingCanada Inc.)获得;品牌为Applegate TM 的产品可从美国密歇根州韦伯维尔Applegate绝缘材料公司购得。
在一个实施方式中,可以在麦克风外壳或通道的前面设置外部保护盖(未示出),以防止水和碎屑到达声音衰减材料和/或麦克风。盖还必须允许足够的声音通过麦克风。在一个实施方式中,盖可由防水或阻水且优选防水和透气的任何膜状材料制成,例如与聚四氟乙烯聚合物(Gore-TexTM)结合的紧密编织织物。膜也可由诸如胶乳、紧密编织的合成纺织品的其他聚合物或弹性体材料或者诸如纺粘烯烃或闪纺聚乙烯纤维(TyvekTM)的非织造产品制成,并且可涂覆或未涂覆。
分析模块。传统的车辆数据总线(114)不能传输模拟声音信号。因此,本发明的每个麦克风(102)优选地与分析模块(112)捆绑,以将麦克风(102)产生的模拟信号转换为声音的数字表示,并且在一个实施方式中,将数字样本识别为感兴趣的声音。因此,车辆数据总线仅需要传送作为感兴趣声音的肯定识别的信号,而不是任何模拟或数字听觉数据。
声音的多位数字编码可以产生每秒数百千位的数据流,这可以压倒车辆中的传统数据总线。因此,每个麦克风与分析模块相关联,该分析模块包括计算设备(例如,在单个集成电路上提供计算机处理器的微控制器),该计算设备实施算法以产生表示声音并且具有可管理大小的数字信号,该数字信号携带关于声音的特征信息,或者包括对目标声音的检测或识别的确认,并且该数字信号可以通过车辆数据总线(114)传输或流式传输。在一个实施方式中,微控制器还可以分析模拟输入以确定功率和信号强度,在这种情况下,模拟信号的幅度信息被导出并被传递到车辆数据总线以用于与车辆控制系统通信。
车辆数据总线。“车辆数据总线”是指将车辆内部的部件互连的专用内部通信网络。网络协议必须考虑到车辆控制的特殊要求,例如消息传递的保证、非冲突消息、最小传递时间、低成本和EMF噪声弹性以及冗余路由和其他特性。已知的协议和总线包括控制器局域网(CAN)、本地互连网络(LIN)等。CAN是作为标称规范的一部分的具有电源的中间级控制总线。高速CAN总线提供从40Kbit/s到1Mbit/s的波特率,而低速/容错CAN提供从40Kbit/s到125Kbit/s的波特率。
LIN是一种性能较低的非关键总线,通常用于控制侧镜等附件。诸如LIN总线的低速网络可以用作用于车辆控制系统的通信路径,该通信路径仅传送检测到特定目标声音的通知。例如,可以周期性地轮询放置在侧视镜(如图6所示)中的麦克风(102),或者推送关于目标声音检测的通知。
图8示出了具有多个麦克风(102a至102d)的系统(100)的实施方式的示意图,每个麦克风具有与麦克风(112a至112d)物理集成的相关联的分析模块。优选地,麦克风(102a至102d)将在物理上接近放置麦克风的位置处连接到车辆数据总线(114)。例如,作为前照灯组件的一部分安装的麦克风(102a、102b)连接到车辆数据总线(114)的靠近前照灯组件的位置,而安装在车辆侧镜上的麦克风(102c、102d)连接到车辆数据总线的靠近侧视镜的位置。数据总线可以不必是相同的数据总线。特别地,可以有利地直接连接到现有的车辆数据总线(114),以避免增加额外的布线。
在音响系统(立体声系统或蜂鸣)或显示系统(仪表板或显示屏)的情况下,其他已知设备或系统可以以常规方式连接到总线(114),并且可以潜在地用于向车辆操作员递送通知。其他传感器和控制系统(例如,ECU)可以连接到总线,如本领域公知的。
图9示出了具有多个麦克风(102a至102d)的系统(100)的替代实施方式的示意图。在一个实施方式中,系统可包括组合多个麦克风/分析模块的数字信号以产生组合信号并将组合信号呈现给车辆数据总线的单个节点的电路。在一些情况下,为麦克风(102)提供单独的总线可能是有利的。在一个实施方式中,多个麦克风(102a至102c)和相关联的电路由单个模块或盒(118)供电,单个模块或盒(118)向传感器供电,组合它们的输出信号并将其呈现为车辆数据总线(114)的单个节点。
其他处理部件。在一个实施方式中,如图2所示,系统(100)包括第一模拟滤波器(104)、第二模拟滤波器(106)和可以是对数放大器的放大器(108),以处理由麦克风(102)产生的模拟信号。然后,模拟信号由比较器(110)接收,在比较器(110)中,模拟形式在电压电平检测器中被转换成数字信号,该电压电平检测器有效地用作模/数(A/D)转换器。放大器(108)、第一模拟滤波器(104)和第二模拟滤波器(106)可以被布置成以与图2所示的顺序不同的顺序处理信号。然后,分析模块(112)检查经处理的信号是否包含任何感兴趣的声音,并将它们的识别和存在经由车辆数据总线(114)传送到车辆操作者或车辆控制系统(116)。也可以识别和传送其他重要特性(例如定时和信号强度)。
可以对系统(100)进行调整,以检测驾驶员或车辆控制系统感兴趣的特定声音,并将其报告给驾驶员或车辆控制系统。此类声音的非限制性列表可包括紧急车辆警报、其他车辆喇叭、用于视觉受损行人的人行横道辅助声音或与行人相关联的其他声音、可指示车辆失去控制的打滑轮胎、与车辆与其他车辆或障碍物碰撞相关联的声音。示例性系统包括如2018年3月1日提交的共同未决的美国专利申请号15/909,709中所述的警报监测系统,该美国专利申请的全部内容在允许的情况下通过引用包含在本文中。通常,这样的系统包括计算机处理器,其被配置为将模数转换器产生的数字信号与存储的数字目标声音模板进行比较,以确定数字信号和模板之间的相似度,并且如果相似度超过阈值,则生成输出信号。
从多个麦克风接收的传感数据可以与车载计算设备同步,以导出关于车辆周围环境的定向、地理间隔或识别信息作为主要或冗余感知传感器。音频感测设备之间的同步可以通过车载计算设备,可以在车辆网络中自同步,或者可以通过对等同步来同步。在一个实施方式中,中央模块(118)周期性地(例如每隔几秒)向总线上的所有麦克风发出同步脉冲。在接收到该同步脉冲时,麦克风重置它们的计时器以基本上使它们自身与相同的时间基准同步并且避免每个麦克风中的时钟之间的漂移。麦克风向中央模块发送时间戳,指示它们何时检测到信号,并且这些定时的差异是中央模块用来计算方向的。
解释。可以参考根据本发明实施方式的方法、装置(系统)和计算机程序产品的流程图和/或框图来描述本发明的各方面。应当理解,流程图图示和/或框图的每个块以及流程图图示和/或框图中的块的组合可以由计算机程序指令来实现。这些计算机程序指令可被提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器以产生机器,使得经由计算机或其他可编程数据处理装置的处理器执行的指令创建用于实现流程图和/或框图块或块中指定的功能/动作的装置。
附图中的流程图和框图示出了根据本发明的各种实施方式的系统、方法和计算机程序产品的可能实现的架构、功能和操作。在这点上,流程图或框图中的每个框可以表示包括用于实现指定逻辑功能的一个或多个可执行指令的模块、片段或部分代码。还应注意,在一些替代实施方案中,框中所注意到的功能可不按图中所注意到的次序发生。例如,实际上,连续示出的两个框可以基本上同时执行,或者取决于所涉及的功能,这些框有时可以以相反的顺序执行。还将注意到,框图和/或流程图图示的每个框以及框图和/或流程图图示中的框的组合可以由执行指定功能或动作的基于专用硬件的系统或者专用硬件和计算机指令的组合来实现。
本说明书所附权利要求中的所有手段或步骤加上功能元件的相应结构、材料、动作和等效物旨在包括用于与具体要求保护的其他要求保护的元件相结合地执行功能的任何结构、材料或动作。
说明书中对“一个实施方式”、“实施方式”等的引用指示所描述的实施方式可包括特定方面、特征、结构或特性,但并非每个实施方式都必须包括该方面、特征、结构或特性。此外,这样的短语可以但不一定指在说明书的其他部分中提到的相同实施方式。此外,当结合实施方式描述特定方面、特征、结构或特性时,无论是否明确描述,用其他实施方式来影响或连接此类模块、方面、特征、结构或特性都在本领域技术人员的知识范围内。换句话说,在不同实施方式中,任何模块、元件或特征可与任何其他元件或特征组合,除非存在明显或固有的不相容性,或其被具体排除。
进一步注意到,权利要求书可以不包括任何可选的内容。因此,该声明旨在用作在叙述权利要求元素或使用“否定”限制时使用诸如“仅”、“仅仅”等专用术语的前提基础。术语“优选地”、“优选的”、“优选”、“可选地”、“可以”和类似的术语用于指示所提及的项目、条件或步骤是本发明的可选的(不需要的)特征。
除非上下文另有明确规定,否则单数形式“一”、“一个”和“该”包括复数指代。术语“和/或”是指项目中的任何一个、项目的任何组合、或与该术语相关联的所有项目。本领域技术人员容易理解短语“一个或多个”,特别是当在其使用的上下文中阅读时。
术语“大约”可指规定值的±5%、±10%、±20%或±25%的变化。例如,在一些实施方案中,“大约50个”百分比可以具有45%至55%的变化。对于整数范围,术语“大约”可以包括在该范围的每一端大于和/或小于所述整数的一个或两个整数。除非本文另有说明,术语“大约”旨在包括在组合物或实施方式的功能方面相当的接近所述范围的值和范围。
本领域技术人员应当理解,为了任何和所有目的,特别是为了提供书面描述,本文所述的所有范围还包括任何和所有可能的子范围及其子范围的组合,以及构成该范围的各个值,特别是整数值。所述范围包括该范围内的每个特定值、整数、小数或恒等式。可以将任何所列的范围容易地理解为充分描述相同的范围并且使相同的范围能够被分解成至少等同的两份、三份、四份、五份或十份。作为非限制性示例,可以容易地将本文所讨论的每个范围分解成下三分之一、中三分之一和上三分之一等。
本领域技术人员还将理解,诸如“最多”、“至少”、“多于”、“少于”、“大于”、“或更多”等所有语言都包括所列举的数字,并且这些术语指的是随后可细分为上述子范围的范围。以相同的方式,本文所述的所有比率还包括落入较宽比率内的所有子比率。
Claims (28)
1.一种用于向车辆的车辆操作者或车辆控制系统提供音频导出信息的系统,该系统包括:
(a)安装在车辆中或安装到车辆的至少一个麦克风,用于响应于所述车辆外部的声波而生成模拟信号;
(b)分析模块,其与所述至少一个麦克风相关联并且连接到车辆数据总线,其中,所述分析模块被配置成:
(i)将所述模拟信号转换为声音的数字表示,如果存在感兴趣的声音,则识别所述感兴趣的声音并且产生包括所述感兴趣的声音的肯定识别的数字信号,而不产生任何数字听觉数据;以及
(ii)通过所述车辆数据总线将所述分析模块的所述数字信号传送到所述车辆操作者或车辆控制系统。
2.根据权利要求1所述的系统,其中,所述至少一个麦克风包括附接在所述车辆的不同位置处的多个麦克风。
3.根据权利要求2所述的系统,其中,所述系统包括:组合所述多个麦克风的所述数字信号以产生组合信号并将组合信号呈现给所述车辆数据总线的单个节点的电路。
4.根据权利要求1所述的系统,其中,所述至少一个麦克风与所述车辆的灯组件的壳体集成。
5.根据权利要求1所述的系统,其中,所述至少一个麦克风与所述车辆的侧镜集成。
6.根据权利要求1所述的系统,所述系统还包括可操作地连接到所述至少一个麦克风的放大器,用于放大所述模拟信号。
7.根据权利要求1所述的系统,所述系统还包括可操作地连接到所述麦克风的电子滤波器,用于对所述模拟信号的频率进行滤波。
8.根据权利要求1至7中任一项所述的系统,所述系统还包括可操作地连接到所述至少一个麦克风以确定所述模拟信号的幅度信息的计算机处理器,并且其中,所述车辆数据总线可操作地连接到所述计算机处理器以将所述幅度信息传送到所述车辆控制系统。
9.根据权利要求1至7中任一项所述的系统,其中,所述车辆数据总线根据控制器局域网(CAN)总线协议或局部互连网络(LIN)总线协议操作。
10.根据权利要求1至7中任一项所述的系统,所述系统还包括中央控制台,该中央控制台被配置为周期性地向连接在所述车辆数据总线上的所有麦克风发送同步脉冲,其中,所述同步脉冲使得每个麦克风重置计时器以使所述麦克风与相同的时间基准同步。
11.根据权利要求10所述的系统,其中,每个分析模块被配置为在所述数字信号中包括时间戳,并且所述中央控制台被配置为基于所述时间戳确定目标声音的方向。
12.一种用于向车辆的车辆操作者或车辆控制系统提供音频导出信息的方法,该方法包括以下步骤:
(a)使用安装在所述车辆中或安装到所述车辆的至少一个面向外部的麦克风,来响应于所述车辆外部的声波生成模拟信号;
(b)使用与每个麦克风捆绑的分析模块将所述模拟信号转换成声音的数字表示,如果存在感兴趣的声音,则识别所述感兴趣的声音并且产生包括所述感兴趣的声音的肯定识别的数字信号,而不产生任何数字听觉数据,其中所述分析模块连接到车辆数据总线;以及
(c)将所述数字信号传送到所述车辆数据总线,以将所述数字信号传送或传递到所述车辆操作者或车辆控制系统。
13.根据权利要求12所述的方法,其中,所述至少一个麦克风包括附接在所述车辆上的不同位置处的多个麦克风,并且每个麦克风连接到相同的车辆总线。
14.根据权利要求13所述的方法,所述方法还包括:组合所述多个麦克风的所述数字信号以产生组合信号,并将所述组合信号呈现给所述车辆数据总线的单个节点的步骤。
15.根据权利要求12所述的方法,所述方法还包括放大所述模拟信号的步骤。
16.根据权利要求12至15中任一项所述的方法,所述方法还包括对所述模拟信号的频率进行电子滤波的步骤。
17.根据权利要求12至15中任一项所述的方法,所述方法还包括以下步骤:确定所述模拟信号的幅度信息,以及经由所述车辆数据总线将所述幅度信息传送到所述车辆控制系统。
18.根据权利要求12至15中任一项所述的方法,其中,所述车辆数据总线根据控制器局域网(CAN)总线协议或局部互连网络(LIN)总线协议操作。
19.根据权利要求12至15中任一项所述的方法,所述方法还包括周期性地向连接到所述总线的所有麦克风发送同步脉冲,其中,所述同步脉冲使得每个麦克风重置计时器以使所述麦克风与相同的时间基准同步。
20.根据权利要求19所述的方法,所述方法还包括以下步骤:当从至少两个麦克风接收到对目标声音的检测的确认时,基于包括在每个麦克风数字信号中的时间戳或时间基准来确定目标声音的方向。
21.一种车辆听觉传感系统,其向车辆操作者或车辆控制系统提供输入,该车辆听觉传感系统包括耦合到分析模块的至少一个麦克风,该分析模块被配置为将麦克风产生的模拟信号转换为数字信号并且将该数字信号传送到以低于1 Mbit/s的波特率操作的车辆数据总线以将所述数字信号传送到所述车辆操作者或所述车辆控制系统,其中,所述数字信号包括对目标声音的识别的确认,并且所述数字信号不是任何数字听觉数据。
22.根据权利要求1或21所述的系统,所述系统还包括用于将所述声音物理地滤波到所述至少一个麦克风的装置,所述装置包括:
(a)在所述麦克风前面的前外壳,其中,所述前外壳限定在所述麦克风前面的声腔,并且其中,所述前外壳限定允许声波传播到所述声腔中到达所述麦克风的至少一个端口开口;以及
(b)设置在所述声腔内的声音衰减材料,以在撞击到所述麦克风上之前吸收进入所述声腔的声音。
23.根据权利于要求22所述的系统,其中,所述声腔是圆柱形的。
24.根据权利要求22所述的系统,其中,所述声腔具有在向前方向上的长度和垂直于所述向前方向的宽度,其中,所述长度大于所述宽度。
25.根据权利要求22所述的系统,其中,所述声音衰减材料使频率小于约500Hz的声波衰减。
26.根据权利要求25所述的系统,其中,所述声音衰减材料包括多孔或纤维材料。
27.根据权利要求26所述的系统,其中,所述声音衰减材料包括矿棉、玻璃纤维、纤维素或棉花。
28.根据权利要求27所述的系统,其中,所述矿棉包括玄武岩。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201762500987P | 2017-05-03 | 2017-05-03 | |
US62/500,987 | 2017-05-03 | ||
US201762532532P | 2017-07-14 | 2017-07-14 | |
US62/532,532 | 2017-07-14 | ||
PCT/CA2018/050525 WO2018201252A1 (en) | 2017-05-03 | 2018-05-03 | Audio processing for vehicle sensory systems |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110573398A CN110573398A (zh) | 2019-12-13 |
CN110573398B true CN110573398B (zh) | 2023-05-23 |
Family
ID=64012529
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880028680.4A Active CN110573398B (zh) | 2017-05-03 | 2018-05-03 | 用于车辆传感系统的音频处理 |
Country Status (6)
Country | Link |
---|---|
US (2) | US11410673B2 (zh) |
EP (1) | EP3621864B1 (zh) |
JP (1) | JP7236396B2 (zh) |
CN (1) | CN110573398B (zh) |
CA (1) | CA3003840A1 (zh) |
WO (1) | WO2018201252A1 (zh) |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11244564B2 (en) | 2017-01-26 | 2022-02-08 | Magna Electronics Inc. | Vehicle acoustic-based emergency vehicle detection |
WO2018201252A1 (en) | 2017-05-03 | 2018-11-08 | Soltare Inc. | Audio processing for vehicle sensory systems |
US10319228B2 (en) | 2017-06-27 | 2019-06-11 | Waymo Llc | Detecting and responding to sirens |
US20190204845A1 (en) | 2017-12-29 | 2019-07-04 | Waymo Llc | Sensor integration for large autonomous vehicles |
US10762777B2 (en) * | 2018-05-21 | 2020-09-01 | Telenav, Inc. | Navigation system with sonic analysis mechanism and method of operation thereof |
USD882426S1 (en) | 2018-09-17 | 2020-04-28 | Waymo Llc | Integrated sensor assembly |
US11322019B2 (en) * | 2019-10-23 | 2022-05-03 | Zoox, Inc. | Emergency vehicle detection |
US11450205B2 (en) * | 2019-12-31 | 2022-09-20 | Zoox, Inc. | Emergency vehicle detection and response |
US11866063B2 (en) | 2020-01-10 | 2024-01-09 | Magna Electronics Inc. | Communication system and method |
US11663726B2 (en) | 2020-01-31 | 2023-05-30 | Zoox, Inc. | Object velocity and/or yaw rate detection and tracking |
US11609321B2 (en) * | 2020-02-19 | 2023-03-21 | Zoox, Inc. | Radar-tracked object velocity and/or yaw |
US11841708B2 (en) | 2020-02-28 | 2023-12-12 | Zoox, Inc. | System and method for adjusting a planned trajectory of an autonomous vehicle |
US11592830B2 (en) * | 2020-05-29 | 2023-02-28 | Zoox, Inc. | Trajectory generation using lateral offset biasing |
CN111956398B (zh) * | 2020-07-13 | 2022-07-22 | 恒大恒驰新能源汽车研究院(上海)有限公司 | 车辆碰撞听力保护方法、车辆及设备 |
US11483649B2 (en) * | 2020-08-21 | 2022-10-25 | Waymo Llc | External microphone arrays for sound source localization |
CN114504273A (zh) * | 2020-11-16 | 2022-05-17 | 科沃斯机器人股份有限公司 | 机器人控制方法及装置 |
US11961536B2 (en) * | 2020-12-09 | 2024-04-16 | Nuro, Inc. | Methods and apparatus for determining directionality associated with sounds detected by a vehicle |
US11606659B2 (en) | 2021-03-29 | 2023-03-14 | Zoox, Inc. | Adaptive cross-correlation |
CN113525236A (zh) * | 2021-06-29 | 2021-10-22 | 重庆长安汽车股份有限公司 | 一种外后视镜总成及车辆 |
SE2130292A1 (en) * | 2021-10-30 | 2023-05-01 | Sensorbee AB | An acoustic sensor |
CN115150379B (zh) * | 2022-06-28 | 2023-06-20 | 重庆长安汽车股份有限公司 | 车辆远程控制系统、方法、电子设备及可读存储介质 |
EP4322153A1 (en) * | 2022-08-12 | 2024-02-14 | Harman International Industries, Incorporated | Vehicle sensor device with integrated ultrasonic sensor and microphone |
CN115474131A (zh) * | 2022-10-18 | 2022-12-13 | 长城汽车股份有限公司 | 音频播放控制方法、装置、车辆及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201060553Y (zh) * | 2007-04-09 | 2008-05-14 | 上海东方明珠传输有限公司 | 基于数字音频广播的交通诱导系统 |
CN105744455A (zh) * | 2014-12-30 | 2016-07-06 | Gn瑞声达 A/S | 用于在外部拾取的麦克风信号上叠加空间听觉提示的方法 |
CN106448260A (zh) * | 2015-08-05 | 2017-02-22 | Lg电子株式会社 | 驾驶员辅助设备和包括该驾驶员辅助设备的车辆 |
Family Cites Families (70)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US1105607A (en) | 1912-05-23 | 1914-08-04 | George Hillard Benjamin | Fertilizer and process of making the same. |
US3997868A (en) | 1973-02-20 | 1976-12-14 | Ribnick Gerson D | Emergency vehicle warning system |
WO1992002913A1 (en) | 1990-07-27 | 1992-02-20 | Hill James L | Sound detection system |
US5352938A (en) | 1992-12-14 | 1994-10-04 | Delco Electronics Corporation | Analog to digital signal conversion |
JPH08156711A (ja) * | 1994-12-09 | 1996-06-18 | Shigeaki Ishikawa | 自動車用車外音響情報収集装置 |
FI101027B (fi) | 1996-01-05 | 1998-03-31 | Nokia Mobile Phones Ltd | Multipleksoitu signaalimuunnos |
JPH1042017A (ja) * | 1996-07-19 | 1998-02-13 | Nec Corp | 送話部構造 |
JPH10156711A (ja) | 1996-11-27 | 1998-06-16 | Fujitsu Ltd | 研磨装置及び研磨方法 |
DE19749372A1 (de) * | 1997-11-07 | 1999-05-12 | Volkswagen Ag | Elektronisches Erkennungssystem und -verfahren für akustische Signale |
WO1999031637A1 (en) | 1997-12-18 | 1999-06-24 | Sentec Corporation | Emergency vehicle alert system |
DE19846169A1 (de) * | 1998-10-07 | 2000-04-13 | Alcatel Sa | Verfahren zur Signalisierung verkehrsrelevanter Zustandsinformationen |
US7120261B1 (en) * | 1999-11-19 | 2006-10-10 | Gentex Corporation | Vehicle accessory microphone |
AU1621201A (en) * | 1999-11-19 | 2001-05-30 | Gentex Corporation | Vehicle accessory microphone |
US8682005B2 (en) * | 1999-11-19 | 2014-03-25 | Gentex Corporation | Vehicle accessory microphone |
US6349246B1 (en) | 2000-04-24 | 2002-02-19 | International Business Machines Corporation | Preemptive control of a vehicle computer system based on local and environmental sensing |
US6570992B1 (en) * | 2000-10-11 | 2003-05-27 | Molex, Incorporated | Microphone holder |
CA2436484C (en) * | 2001-02-14 | 2008-01-22 | Gentex Corporation | Vehicle accessory microphone |
US20020110250A1 (en) | 2001-02-15 | 2002-08-15 | Christoph Schwald | Miniature microphone with improved wind protection |
US6362749B1 (en) | 2001-06-18 | 2002-03-26 | William E. Brill | Emergency vehicle detection system |
US6958707B1 (en) | 2001-06-18 | 2005-10-25 | Michael Aaron Siegel | Emergency vehicle alert system |
US6859147B2 (en) | 2002-04-24 | 2005-02-22 | Salvatore Buscemi | System to warn of an approaching emergency vehicle |
JP4072854B2 (ja) * | 2003-06-17 | 2008-04-09 | 本田技研工業株式会社 | 能動型振動騒音制御装置 |
US7629880B2 (en) | 2004-03-09 | 2009-12-08 | Ingrid, Inc. | System, method and device for detecting a siren |
US7833158B2 (en) | 2005-02-14 | 2010-11-16 | Bartz James C | Methods and apparatus for beamforming applications |
US20070008175A1 (en) | 2005-07-06 | 2007-01-11 | Duane Johnson | Siren detection notification alarm |
JP4742750B2 (ja) | 2005-08-30 | 2011-08-10 | アイシン精機株式会社 | 車外音処理装置 |
US20070216539A1 (en) | 2005-10-12 | 2007-09-20 | D Antoni Jennifer | System to warn of an approaching emergency vehicle |
CN101140704A (zh) | 2006-09-08 | 2008-03-12 | 松下电器产业株式会社 | 方向检测装置 |
JP4635996B2 (ja) | 2006-09-26 | 2011-02-23 | 株式会社デンソー | 超音波センサ |
ATE424329T1 (de) | 2006-10-02 | 2009-03-15 | Harman Becker Automotive Sys | Sprachsteuerung von fahrzeugelementen von ausserhalb einer fahrzeugkabine |
US8111583B2 (en) | 2007-08-21 | 2012-02-07 | Schwartz Adam L | Method and apparatus for determining and indicating direction and type of sound |
EP2186075A1 (de) | 2007-08-29 | 2010-05-19 | Continental Teves AG & CO. OHG | Informationseinrichtung zur angepassten informationsdarstellung in einem fahrzeug |
DE102007058542A1 (de) | 2007-12-06 | 2009-06-10 | Robert Bosch Gmbh | Fahrerassistenzsystem zur Überwachung der Fahrsicherheit und korrespondierendes Verfahren zur Erfassung und Bewertung einer Fahrzeugbewegung |
US7791499B2 (en) | 2008-01-15 | 2010-09-07 | Qnx Software Systems Co. | Dynamic siren detection and notification system |
JP5093602B2 (ja) * | 2008-06-04 | 2012-12-12 | アイシン精機株式会社 | 周辺認知支援装置 |
US8319620B2 (en) * | 2008-06-19 | 2012-11-27 | Personics Holdings Inc. | Ambient situation awareness system and method for vehicles |
US7675431B1 (en) | 2009-03-13 | 2010-03-09 | Caouette Sr James | Emergency vehicle alert system |
US8590272B2 (en) * | 2010-06-07 | 2013-11-26 | Georgia-Pacific Gypsum Llc | Acoustical sound proofing materials and methods of making the same |
WO2012097150A1 (en) | 2011-01-12 | 2012-07-19 | Personics Holdings, Inc. | Automotive sound recognition system for enhanced situation awareness |
WO2012098844A1 (ja) | 2011-01-18 | 2012-07-26 | パナソニック株式会社 | 車両方向特定装置、車両方向特定方法、及びそのプログラム |
US20140294210A1 (en) * | 2011-12-29 | 2014-10-02 | Jennifer Healey | Systems, methods, and apparatus for directing sound in a vehicle |
US8976040B2 (en) * | 2012-02-16 | 2015-03-10 | Bianca RAY AVALANI | Intelligent driver assist system based on multimodal sensor fusion |
WO2013125257A1 (ja) | 2012-02-20 | 2013-08-29 | 株式会社Jvcケンウッド | 雑音信号抑制装置、雑音信号抑制方法、特殊信号検出装置、特殊信号検出方法、報知音検出装置、および、報知音検出方法 |
US9412273B2 (en) * | 2012-03-14 | 2016-08-09 | Autoconnect Holdings Llc | Radar sensing and emergency response vehicle detection |
JP5927291B2 (ja) * | 2012-03-21 | 2016-06-01 | 株式会社巴川製紙所 | マイクロホン装置、マイクロホンユニット、マイクロホン構造及びそれらを用いた電子機器 |
US9397630B2 (en) | 2012-04-09 | 2016-07-19 | Dts, Inc. | Directional based audio response to an external environment emergency signal |
JP2013239938A (ja) | 2012-05-16 | 2013-11-28 | Clarion Co Ltd | 音源検出システム |
KR20140071084A (ko) * | 2012-12-03 | 2014-06-11 | 현대자동차주식회사 | 청각 장애인을 위한 차량의 경보장치 |
US9342074B2 (en) * | 2013-04-05 | 2016-05-17 | Google Inc. | Systems and methods for transitioning control of an autonomous vehicle to a driver |
US9224294B1 (en) | 2013-04-09 | 2015-12-29 | Phyllis St. John | Automobile emergency vehicle warning display system |
US9571931B1 (en) | 2013-04-09 | 2017-02-14 | Cirrus Logic, Inc. | Systems and methods for reducing non-linearities of a microphone signal |
US9785706B2 (en) | 2013-08-28 | 2017-10-10 | Texas Instruments Incorporated | Acoustic sound signature detection based on sparse features |
US9275136B1 (en) | 2013-12-03 | 2016-03-01 | Google Inc. | Method for siren detection based on audio samples |
JP6284446B2 (ja) * | 2014-06-27 | 2018-02-28 | 株式会社オーディオテクニカ | ダイナミックマイクロホンおよび背部空気室の成形方法 |
US9767784B2 (en) * | 2014-07-09 | 2017-09-19 | 2236008 Ontario Inc. | System and method for acoustic management |
US9949022B2 (en) * | 2014-09-29 | 2018-04-17 | Keith Kropf | Underwater communication systems, underwater speakers, underwater microphone assemblies and methods |
US9387814B1 (en) * | 2014-12-15 | 2016-07-12 | William Cintron, Jr. | Vehicle recording device |
CN105799584B (zh) * | 2014-12-29 | 2019-03-15 | 博世汽车部件(苏州)有限公司 | 周围车辆鸣笛声音微处理器、提示装置和自动驾驶系统 |
WO2016149828A1 (en) | 2015-03-23 | 2016-09-29 | Nikiforuk Colin F | Industrial and hydrocarbon gas liquefaction |
US10072967B2 (en) | 2015-04-28 | 2018-09-11 | Verily Life Sciences Llc | Integrated wearable noise dosimeter |
US9844981B2 (en) | 2015-06-02 | 2017-12-19 | Karma Automotive Llc | Systems and methods for use in a vehicle for detecting external events |
US9965685B2 (en) * | 2015-06-12 | 2018-05-08 | Google Llc | Method and system for detecting an audio event for smart home devices |
JP6508483B2 (ja) * | 2016-03-29 | 2019-05-08 | パナソニックIpマネジメント株式会社 | マイクロフォン |
CN107465986A (zh) * | 2016-06-03 | 2017-12-12 | 法拉第未来公司 | 使用多个麦克风检测和隔离车辆中的音频的方法和装置 |
US11244564B2 (en) * | 2017-01-26 | 2022-02-08 | Magna Electronics Inc. | Vehicle acoustic-based emergency vehicle detection |
US20190352636A1 (en) | 2017-01-31 | 2019-11-21 | The Governors Of The University Of Alberta | Display of molecules on silently genetically encoded nanoscale carriers for determining synergistic molecular interactions |
EP3369525A1 (en) | 2017-03-01 | 2018-09-05 | Airbus SAS | Device for clamping a robotic tool to a workpiece |
WO2018157251A1 (en) | 2017-03-01 | 2018-09-07 | Soltare Inc. | Systems and methods for detection of a target sound |
WO2018201252A1 (en) | 2017-05-03 | 2018-11-08 | Soltare Inc. | Audio processing for vehicle sensory systems |
US10445597B2 (en) * | 2017-10-17 | 2019-10-15 | Toyota Research Institute, Inc. | Systems and methods for identification of objects using audio and sensor data |
-
2018
- 2018-05-03 WO PCT/CA2018/050525 patent/WO2018201252A1/en unknown
- 2018-05-03 JP JP2019559847A patent/JP7236396B2/ja active Active
- 2018-05-03 EP EP18794635.5A patent/EP3621864B1/en active Active
- 2018-05-03 US US15/970,494 patent/US11410673B2/en active Active
- 2018-05-03 CA CA3003840A patent/CA3003840A1/en active Pending
- 2018-05-03 CN CN201880028680.4A patent/CN110573398B/zh active Active
-
2022
- 2022-06-16 US US17/842,348 patent/US20220310112A1/en not_active Abandoned
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201060553Y (zh) * | 2007-04-09 | 2008-05-14 | 上海东方明珠传输有限公司 | 基于数字音频广播的交通诱导系统 |
CN105744455A (zh) * | 2014-12-30 | 2016-07-06 | Gn瑞声达 A/S | 用于在外部拾取的麦克风信号上叠加空间听觉提示的方法 |
CN106448260A (zh) * | 2015-08-05 | 2017-02-22 | Lg电子株式会社 | 驾驶员辅助设备和包括该驾驶员辅助设备的车辆 |
Also Published As
Publication number | Publication date |
---|---|
CN110573398A (zh) | 2019-12-13 |
US20180350391A1 (en) | 2018-12-06 |
EP3621864A1 (en) | 2020-03-18 |
US20220310112A1 (en) | 2022-09-29 |
US11410673B2 (en) | 2022-08-09 |
JP2020523238A (ja) | 2020-08-06 |
JP7236396B2 (ja) | 2023-03-09 |
EP3621864B1 (en) | 2023-04-26 |
EP3621864A4 (en) | 2020-12-30 |
WO2018201252A1 (en) | 2018-11-08 |
CA3003840A1 (en) | 2018-11-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110573398B (zh) | 用于车辆传感系统的音频处理 | |
US11244564B2 (en) | Vehicle acoustic-based emergency vehicle detection | |
US10627811B2 (en) | Audio alerts for remote park-assist tethering | |
EP3304517B1 (en) | Systems and methods for use in a vehicle for detecting external events | |
US20190220248A1 (en) | Vehicle with external audio speaker and microphone | |
US9734699B2 (en) | System for providing alerts to vehicle occupants | |
US10506838B2 (en) | Augmented audio enhanced perception system | |
US20170276489A1 (en) | On-board vehicular monitoring system | |
KR20200019252A (ko) | 차량용 외부 오디오 경보 시스템 및 방법 | |
US11580853B2 (en) | Method for acquiring the surrounding environment and system for acquiring the surrounding environment for a motor vehicle | |
US11738767B2 (en) | Vehicular driver assist system using acoustic sensors | |
WO2015014696A1 (de) | Situationsbezogene konfiguration von künstlichen fahrzeug- und motorgeräuschen | |
CN105799584A (zh) | 周围车辆鸣笛声音微处理器、提示装置和自动驾驶系统 | |
JP4924637B2 (ja) | 車両・歩行者間無線通信システム、車載無線通信装置及び歩行者携帯無線通信装置 | |
US7646331B2 (en) | Radar detector and collision avoidance system interface | |
JP2008046862A (ja) | 車両用警報装置及び警告音出力方法 | |
EP3128497A1 (en) | Device for alerting on the approaching of emergency vehicles | |
WO2017070010A1 (en) | Vehicular navigation system updating based on object presence | |
CN111806432B (zh) | 一种车辆避让方法、装置、车辆及存储介质 | |
KR20170054714A (ko) | 자동차 외부의 소음을 감지한 경고음 송출 시스템 및 그 방법 | |
KR20170068107A (ko) | 침입 검출 장치 및 이를 포함하는 차량, 침입 검출 장치의 제어방법 | |
CN107042793B (zh) | 用于车辆的模拟鸣笛系统及应用于车辆的鸣笛方法 | |
CN219893452U (zh) | 车载无线侦测系统 | |
WO2018079584A1 (ja) | 制御装置、制御システム、制御方法、及びプログラム | |
CN116311836A (zh) | 一种车辆警示提醒方法、提醒装置及车辆 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |