JP2003004521A - Identification device for sound outside vehicle - Google Patents

Identification device for sound outside vehicle

Info

Publication number
JP2003004521A
JP2003004521A JP2001194267A JP2001194267A JP2003004521A JP 2003004521 A JP2003004521 A JP 2003004521A JP 2001194267 A JP2001194267 A JP 2001194267A JP 2001194267 A JP2001194267 A JP 2001194267A JP 2003004521 A JP2003004521 A JP 2003004521A
Authority
JP
Japan
Prior art keywords
sound
voice
vehicle
data
outside
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2001194267A
Other languages
Japanese (ja)
Inventor
Masami Nakamura
真巳 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kenwood KK
Original Assignee
Kenwood KK
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kenwood KK filed Critical Kenwood KK
Priority to JP2001194267A priority Critical patent/JP2003004521A/en
Publication of JP2003004521A publication Critical patent/JP2003004521A/en
Pending legal-status Critical Current

Links

Landscapes

  • Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an identification device for sound outside a vehicle automatically determining whether an external sound is necessary for a driver or not without troubling him and, if determined necessary, surely informing the driver of its content by voice and/or image. SOLUTION: In the identification device, outputs of both a video equipment 10 and an audiovisual apparatus 14 installed inside a vehicle are optionally input to an amplifier 13, image signals are supplied to an image monitor 12 via an interrupt circuitry 11, and audio signals are input to a speaker 16 via an interrupt circuitry 15. Signals obtained from a microphone 17 are amplified by an amplifier 18, input to a speech recognition part 21 after the external sound component of which is extracted by a differential circuitry 20, converted into speech pattern data, and then input to a coincidence determination part 22 to be compared with the data of a specific identification parameter memory 23. When the data is determined necessary speech data, speech and image messages associated with the data are input to both the interrupt circuitry 11 and the interrupt circuitry 15 via an image conversion part 24 and a speech conversion part 25.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】本発明は、車載型音響機器の
音源出力信号に対応して放音部から放音される主音声と
車外音とが混在している車内環境に用いて有用な車外音
の識別装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an exterior of a vehicle useful for an in-vehicle environment in which a main sound emitted from a sound emitting unit and a sound outside the vehicle corresponding to a sound source output signal of a vehicle-mounted audio device are mixed. The present invention relates to a sound identification device.

【0002】[0002]

【従来の技術】ラジオ受信、カセットテープ再生、CD
再生等々を行う車載型音響機器を車両に設置して音楽等
を聞きながら車両を運転することが広く行われていて、
車両の乗車中に車外音が聞こえると、この車外音が緊急
車両等のユーザーにとって何らかの対応をしなければな
らない情報であるのか、不必要なノイズ等の不必要情報
であるかをユーザーが判断をし、車外音が必要情報であ
る場合には、運転者が車載型音響機器の出力を低下させ
るような手動操作を行ったり、スピーカ音のミュート操
作を手動で行うことによって車外音に対する充分な対応
が取れるようにし、緊急車両のサイレン鳴動や当該車両
からの警告音声、例えば「緊急車両が通過するので進路
を左側に変更してください」等の警告音声が充分に聞こ
えるようにしている。
2. Description of the Related Art Radio reception, cassette tape reproduction, CD
It is widely practiced to install a vehicle-mounted audio device for playing and so on in a vehicle and driving the vehicle while listening to music and the like.
When the outside sound is heard while the vehicle is in the vehicle, the user determines whether the outside sound is the information that the user of the emergency vehicle or the like needs to take some action or unnecessary information such as unnecessary noise. However, when the outside sound is the necessary information, the driver can perform a sufficient manual operation to reduce the output of the on-vehicle audio equipment, or manually mute the speaker sound to sufficiently cope with the outside sound. The sound of the siren of an emergency vehicle and a warning sound from the vehicle, for example, a warning sound such as "Please change the course to the left because the emergency vehicle passes" are heard.

【0003】しかし、このような対応操作は全くの手動
でもって行われているので、車載型音響機器から発せら
れる音声レベルが大きい場合には、車外音の存在を認識
することが難しく、また運転操作を中断して手動操作を
行えない状況があるという難点を解消するために、当該
の対応操作を手動操作で行わずに自動判断で行えるよう
にした車外音の識別装置がある。
However, since such a corresponding operation is performed entirely by hand, it is difficult to recognize the presence of outside sound when the sound level emitted from the vehicle-mounted audio equipment is high, and the operation is not possible. In order to solve the problem that there is a situation in which an operation is interrupted and a manual operation cannot be performed, there is a vehicle outside sound identification device that can perform the corresponding operation by automatic determination without performing the manual operation.

【0004】これは、例えば特開平6−194218に
開示されている「音響認識装置」のように、車外音をマ
イクロフォンで採取し、予め格納されている複数の音声
パターンと比較することによって車外音が何であるの
か、即ちロードノイズであるのか緊急車両のサイレンで
あるのか踏切の警告音であるのか等々を判定し、運転者
の対応が不必要な車外音、例えばロードノイズであった
場合にはそのままとし、必要な車外音、例えば緊急車両
のサイレン鳴動であったときには、車載型音響機器で車
内に放音されるレベルを下げたりミュートすることによ
って、当該の車外音を聞き取り易くしている。
This is because, for example, as in the "acoustic recognition device" disclosed in Japanese Patent Laid-Open No. 6-194218, the sound outside the vehicle is sampled by a microphone and compared with a plurality of prestored sound patterns, and the sound outside the vehicle is detected. Is, that is, whether it is road noise, a siren of an emergency vehicle, a warning sound of a railroad crossing, etc. When the vehicle outside sound is left as it is, for example, when the siren sounds of an emergency vehicle, the vehicle outside sound is easily heard by lowering or muting the level emitted by the vehicle-mounted audio device.

【0005】また、図5に示すように構成された車外音
の識別装置がある。即ち、車内に設置されたビデオ機器
1とオーディオ機器4を有し、ビデオ機器1は、DVD
対応のカーナビゲーション装置やTVチューナ等で構成
され、オーディオ機器4は、ラジオチューナ、カセット
テーププレーヤ、CDプレーヤ等で構成され、ビデオ機
器1から出力される映像信号を画像モニタ2に供給し、
このビデオ機器1から出力される音声信号と、オーディ
オ機器4から出力される音声信号を補正部3に入力して
いる。
Further, there is a vehicle outside sound identification device constructed as shown in FIG. That is, it has a video device 1 and an audio device 4 installed in the vehicle, and the video device 1 is a DVD.
The audio device 4 is composed of a compatible car navigation device, TV tuner, etc., the audio device 4 is composed of a radio tuner, a cassette tape player, a CD player, etc., and supplies a video signal output from the video device 1 to the image monitor 2.
The audio signal output from the video device 1 and the audio signal output from the audio device 4 are input to the correction unit 3.

【0006】補正部3の出力は、アンプ5によって増幅
された後にスピーカ6に供給され所定の放音がなされ
る。この場合の補正部3は、車外の音声を採取するため
に設けられたマイクロフォン7の出力を、特性/レベル
解析部8によって音声の周波数分布やレベルが分析さ
れ、車外音がサイレン鳴動等の必要音声であった場合に
は、「自動補正」でもってスピーカ6からの放音レベル
を下げたりミュートすることによって、当該の車外音を
聞き取り易くしている。
The output of the correction unit 3 is amplified by the amplifier 5 and then supplied to the speaker 6 to emit a predetermined sound. In this case, the correction unit 3 analyzes the output of the microphone 7 provided for collecting the sound outside the vehicle by the characteristic / level analysis unit 8 for the frequency distribution and level of the sound, and the outside sound needs to be siren ringing or the like. In the case of voice, the level of sound emitted from the speaker 6 is lowered or muted by "automatic correction" so that the outside sound of the vehicle can be easily heard.

【0007】また、補正部3にはユーザーインターフェ
イス9が接続され、「手動補正」でもって放音レベルを
調整したり周波数特性を補正することによって必要音声
を確実に聞けるようにし、車外音に確実に対応できるよ
うにしている。
Further, a user interface 9 is connected to the correction unit 3 so that the necessary sound can be heard reliably by adjusting the sound emission level and the frequency characteristic by "manual correction" to ensure the sound outside the vehicle. I am able to deal with.

【0008】[0008]

【発明が解決しようとする課題】従来の車外音の識別装
置は、「手動補正」でもって車外音を聞きやすくする場
合には、集中力を必要とする運転状況下では、放音の特
性を補正したり音声ミュートするためにハンドルから手
を離したり各種計器から目を離す等の行為によって運転
に集中できず、快適運転を行えなくなる虞があり、ま
た、手動操作しなければならないことが解っていても、
現実の運転状態を変更することができず、手が離せない
状況である場合にはこれらの補正を行うことができず、
車外音が必要音声であってもその情報を正確に得ること
が難しくなる。
In the conventional vehicle exterior sound identification device, in order to make the exterior sound easier to hear by "manual correction", the characteristic of the sound emission is determined under the driving condition that requires concentration. It has been found that the driver may not be able to concentrate on driving due to actions such as removing his / her hand from the steering wheel or taking a look away from various instruments in order to correct or mute the sound, and it may not be possible to drive comfortably. Even if
If you can not change the actual driving state and you can not release your hand, you can not make these corrections,
It becomes difficult to obtain the information accurately even if the outside sound is a required sound.

【0009】一方、車外音を自動検知して自動補正する
場合には、車外音を打ち消すような放音特性を与えたり
音量を補正しているために、ユーザーに取って当該の車
外音が必要音声であるか不必要音声であるかを判断する
ことなく無条件に自動補正してしまうので、車外音が運
転者に取って欲しい必要情報である場合には、前述の補
正によって逆に聞こえ難くなってしまい、必要とされる
車外音の情報を聞き逃してしまう虞がある。
On the other hand, when the external sound is automatically detected and automatically corrected, the external sound is required for the user because the sound emission characteristic for canceling the external sound is given and the volume is corrected. It automatically corrects unconditionally without judging whether it is voice or unnecessary voice, so if the external sound is the necessary information that the driver wants to be taken, the above correction makes it difficult to hear in reverse. Therefore, there is a possibility that the user may miss the necessary information about the outside sound of the vehicle.

【0010】そこで、本発明の目的は、運転者にとって
必要とされる車外音であるか不必要な車外音であるかの
判断を、運転者の手を煩わせずに自動で判定し、必要と
される車外音であった場合にはその内容を確実に音声お
よび/または映像でもって運転者に報知することができ
る車外音の識別装置を提供することにある。
Therefore, an object of the present invention is to automatically determine whether the vehicle exterior sound is a vehicle exterior sound that is necessary or unnecessary and that the vehicle exterior sound is unnecessary and does not require the driver's hand. It is an object of the present invention to provide a vehicle exterior sound identification device capable of reliably notifying the driver of the content of the vehicle exterior sound with a sound and / or video when the vehicle exterior sound is generated.

【0011】[0011]

【課題を解決するための手段】前記課題を解決するため
に、本発明による車外音の識別装置は、次に記載するよ
うな特徴的な構成を採用している。
In order to solve the above problems, the vehicle exterior sound identification apparatus according to the present invention employs a characteristic configuration as described below.

【0012】(1)車載型音響機器の音源出力信号に対
応して放音部から放音される主音声と車外音とが混在し
ている車内環境で音声を採取する採取手段と、緊急車両
のサイレン鳴動音やロードノイズ等の複数の音声パター
ンデータが格納されている音声パターン格納手段と、前
記採取手段で採取された採取音声データの内の前記主音
声に対応する成分を前記音響機器からの前記音源出力信
号に基づいて除去して得られた車外音の成分を得る車外
音抽出手段と、前記車外音抽出手段で抽出された車外音
成分と前記複数の音声パターンデータとを比較して、必
要音声であるか否かを判定する判定手段と、前記判定手
段によって必要音声であると判定されたときに、該必要
音声のデータに対応する音声および/または画像のメッ
セージを報知する報知手段とを具備する車外音の識別装
置。
(1) Sampling means for sampling a sound in an in-vehicle environment in which a main sound emitted from a sound emission unit and a sound outside the vehicle are mixed in correspondence with a sound source output signal of an on-vehicle audio equipment, and an emergency vehicle. From the audio device, a voice pattern storage unit that stores a plurality of voice pattern data such as a siren ringing sound and road noise, and a component corresponding to the main voice in the collected voice data collected by the collection unit. The vehicle exterior sound extraction means for obtaining the vehicle exterior sound component obtained by removing the vehicle exterior sound component based on the sound source output signal, and comparing the vehicle exterior sound component extracted by the vehicle exterior sound extraction means with the plurality of voice pattern data. , A judgment means for judging whether or not the sound is necessary sound, and when the judgment means judges that the sound is necessary sound, a message of sound and / or image corresponding to the data of the necessary sound is notified. Identifying device outside the vehicle sounds and a knowledge unit.

【0013】(2)車載型音響機器の音源出力信号に対
応して放音部から放音される主音声と車外音とが混在し
ている車内環境で音声を採取する採取手段と、緊急車両
のサイレン鳴動音やロードノイズ等の複数の音声パター
ンデータが格納されている音声パターン格納手段と、前
記採取手段で採取された採取音声データの内の前記主音
声に対応する成分を前記音響機器からの前記音源出力信
号に基づいて除去して得られた車外音の成分を得る車外
音抽出手段と、前記車外音抽出手段で抽出された車外音
成分と前記複数の音声パターンデータとを比較して、必
要音声であるか否かを判定する判定手段と、前記判定手
段によって必要音声であると判定されたときに、該必要
音声のデータに対応する音声および/または画像のメッ
セージを報知する報知手段と、前記音源出力信号に対応
する放音部からの放音特性を、前記車外音抽出手段で抽
出された車外音成分を聞き易くする音響特性に変換する
特性補正手段とを具備する車外音の識別装置。
(2) Sampling means for sampling a sound in an in-vehicle environment in which a main sound emitted from a sound emitting unit and a sound outside the vehicle corresponding to a sound source output signal of an on-vehicle audio device are mixed, and an emergency vehicle. From the audio device, a voice pattern storage unit that stores a plurality of voice pattern data such as a siren ringing sound and road noise, and a component corresponding to the main voice in the collected voice data collected by the collection unit. The vehicle exterior sound extraction means for obtaining the vehicle exterior sound component obtained by removing the vehicle exterior sound component based on the sound source output signal, and comparing the vehicle exterior sound component extracted by the vehicle exterior sound extraction means with the plurality of voice pattern data. , A judgment means for judging whether or not the sound is necessary sound, and when the judgment means judges that the sound is necessary sound, a message of sound and / or image corresponding to the data of the necessary sound is notified. An exterior of the vehicle, which comprises a learning means and a characteristic correction means for converting a sound emission characteristic from the sound emission portion corresponding to the sound source output signal into an acoustic characteristic for making the exterior sound component extracted by the exterior sound extraction means easy to hear. Sound identification device.

【0014】(3)前記(1)または(2)の音声パタ
ーン格納手段は、前記採取手段で採取された音声データ
の学習機能を有するように構成する車外音の識別装置。
(3) The vehicle outside sound identification device, wherein the voice pattern storage means of (1) or (2) is configured to have a learning function of the voice data collected by the collection means.

【0015】(4)前記(1)または(2)の採取手段
は、複数か所に設けられた音声検知部材で複数の採取デ
ータを得ると共に、該複数の採取データの相関を加味し
た相関データを得るように構成した車外音の識別装置。
(4) The sampling means of the above (1) or (2) obtains a plurality of sampled data by voice detection members provided at a plurality of locations, and correlates data in which the correlation of the plurality of sampled data is added. A vehicle outside sound identification device configured to obtain.

【0016】(5)前記(4)の採取手段は、車内と車
外のそれぞれに音声検知部材を設けるように構成する車
外音の識別装置。
(5) A vehicle outside sound identification device in which the sampling means of the above (4) is provided with a voice detection member inside and outside the vehicle.

【0017】(6)前記(1)ないし前記(5)のいず
れかの構成に、車外の画像の検出出力データと予め格納
された複数の画像データとを比較して車外の近傍状況を
音声および/または画像のメッセージを報知する車外環
境報知手段を付加して設けた車外音の識別装置。
(6) In the configuration of any one of the above (1) to (5), the detected output data of the image outside the vehicle is compared with a plurality of image data stored in advance, and the situation near the outside of the vehicle is voiced. And / or an exterior sound identification device provided with an exterior environment informing means for informing a message of an image.

【0018】[0018]

【発明の実施の形態】以下、本発明の実施の形態につい
て図1ないし図4を用いて詳細に説明する。先ず、本発
明の第1の実施の形態について図1を用いて説明する。
車内に設置されたビデオ機器10とオーディオ機器14
を有し、ビデオ機器10は、DVD対応のカーナビゲー
ション装置やTVチューナ等で構成され、オーディオ機
器14は、ラジオチューナ、カセットテーププレーヤ、
CDプレーヤ等で構成され、ビデオ機器10から出力さ
れるビデオ信号SVは、割込回路11を介して画像モニタ
12に供給され、このビデオ機器10から出力される音
声信号と、オーディオ機器14から出力される音声信号
は、選択的にアンプ13に入力されてその出力がオーデ
ィオ信号SAとして割込回路15を介してスピーカ16に
入力される。
BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described in detail below with reference to FIGS. First, a first embodiment of the present invention will be described with reference to FIG.
Video device 10 and audio device 14 installed in the car
The video device 10 includes a DVD-compatible car navigation device, a TV tuner, and the like, and the audio device 14 includes a radio tuner, a cassette tape player, and the like.
The video signal SV which is composed of a CD player or the like and is output from the video device 10 is supplied to the image monitor 12 via the interrupt circuit 11, and is output from the audio signal output from the video device 10 and the audio device 14. The generated audio signal is selectively input to the amplifier 13, and its output is input to the speaker 16 via the interrupt circuit 15 as the audio signal SA.

【0019】アンプ13から出力されるオーディオ信号
SAは回路部aに入力され、割込回路11と割込回路15
のそれぞれには回路部bからのビデオ割込信号Vと音声
割込信号Aのそれぞれが入力される。この回路部aは、
車内あるいは車上に設けられたマイクロフォン17を有
し、その出力がアンプ18で増幅され、差分回路20の
片方の入力端に入力され、その他方の入力端にはアンプ
13の出力にディレイ回路19を介在した信号が入力さ
れる。このディレイ回路19は、ビデオ機器10または
オーディオ機器14からのオーディオ信号SAとマイクロ
フォン17からの信号の時間軸での整合を取るためのも
のである。
Audio signal output from the amplifier 13
SA is input to the circuit section a, and the interrupt circuit 11 and the interrupt circuit 15
The video interrupt signal V and the audio interrupt signal A from the circuit section b are input to each of the above. This circuit part a is
It has a microphone 17 provided in or on the vehicle, the output of which is amplified by an amplifier 18 and input to one input end of a difference circuit 20, and the delay circuit 19 to the output of the amplifier 13 at the other input end. The signal intervening is input. The delay circuit 19 is for matching the audio signal SA from the video device 10 or the audio device 14 with the signal from the microphone 17 on the time axis.

【0020】差分回路20の出力は、音声認識部21に
入力され、所定方式の適合する形態の音声パターンデー
タに変換され、回路部aの出力として回路部bの一致度
判断部22に入力され特定識別パラメータ記憶装置23
から呼び出される音声パターンデータとの一致度が判断
される
The output of the difference circuit 20 is input to the voice recognition unit 21, converted into voice pattern data of a form conforming to a predetermined method, and input to the coincidence determination unit 22 of the circuit unit b as the output of the circuit unit a. Specific identification parameter storage device 23
The degree of agreement with the voice pattern data called from

【0021】そして、一致度判断部22から出力される
「音声および/または画像のメッセージを報知」するた
めの報知信号は、画像変換部24と音声変換部25に入
力され、画像変換部24によってビデオ割込信号Vに変
換されて割込回路11に供給され、音声変換部25によ
って音声割込信号Aに変換されて割込回路15に供給さ
れる。
The notification signal for notifying the voice and / or image message output from the coincidence determination unit 22 is input to the image conversion unit 24 and the audio conversion unit 25, and the image conversion unit 24 outputs the notification signal. It is converted into a video interrupt signal V and supplied to the interrupt circuit 11, and converted into an audio interrupt signal A by the audio converter 25 and supplied to the interrupt circuit 15.

【0022】また、ビデオ機器10またはオーディオ機
器14からの音声信号がアンプ13と割込回路15を介
してスピーカ16から放音される主音声と車外音とが混
在している車内環境で音声を採取する採取手段が、マイ
クロフォン17等で構成され、緊急車両のサイレン鳴動
音やロードノイズ等の複数の音声パターンデータが格納
されている音声パターン格納手段が特定識別パラメータ
記憶装置23によって構成され、マイクロフォン17で
採取された採取音声データの内の主音声に対応する成分
をオーディオ信号SA(音源出力信号)に基づいて差分回
路20によって除去して得られた車外音の成分を得る車
外音抽出手段が、音声認識部21によって構成される。
Further, the audio signal from the video device 10 or the audio device 14 is mixed with the main sound emitted from the speaker 16 via the amplifier 13 and the interrupt circuit 15 and the sound outside the vehicle to produce a sound in the vehicle interior environment. The sampling means for sampling is constituted by the microphone 17 or the like, and the speech pattern storage means for storing plural speech pattern data such as siren ringing noise or road noise of the emergency vehicle is constituted by the specific identification parameter storage device 23, and the microphone. A vehicle exterior sound extraction unit that obtains a vehicle exterior sound component obtained by removing the component corresponding to the main voice in the sampled voice data sampled at 17 based on the audio signal SA (sound source output signal) by the difference circuit 20. , Voice recognition unit 21.

【0023】車外音抽出手段で抽出された車外音成分と
特定識別パラメータ記憶装置23の複数の音声パターン
データとを比較して、必要音声であるか否かを判定する
判定手段が一致度判断部22で構成され、一致度判断部
22によって必要音声であると判定されたときに、当該
のデータに対応する音声および画像のメッセージを報知
する報知手段が画像変換部24と音声変換部25によっ
て構成される。
The determination means for comparing the exterior sound component extracted by the exterior sound extraction means with a plurality of voice pattern data in the specific identification parameter storage device 23 to determine whether or not the voice is a necessary voice is a coincidence degree determination part. The image conversion unit 24 and the audio conversion unit 25 constitute an informing unit configured to include an audio message and an image message corresponding to the data when the coincidence determination unit 22 determines that the audio is a necessary audio. To be done.

【0024】従って、スピーカ16からの主音声と車外
音が混在する車内環境の音がマイクロフォン17によっ
て検出され、主音声の成分、即ち、スピーカ16からの
放音成分(オーディオ信号SA)が差分回路20によって
車外音から分離して抽出され、この成分の振幅、波長、
スペクトル、フレーム信号等々の情報を元に既存の音声
認識手段を用いて車外からの音声成分を解析し一致度判
断部22によって特定識別パラメータ記憶装置23のデ
ータとの一致度を求め、一致している場合には、車外音
がユーザーの欲している必要音声と判断する。
Therefore, the sound of the in-vehicle environment in which the main sound from the speaker 16 and the sound outside the vehicle are mixed is detected by the microphone 17, and the component of the main sound, that is, the sound emission component (audio signal SA) from the speaker 16 is difference circuit. 20 is separated from the external sound and extracted, and the amplitude, wavelength, and
Based on the information such as the spectrum and the frame signal, the existing voice recognition means is used to analyze the voice component from the outside of the vehicle, and the coincidence degree determination unit 22 obtains the coincidence degree with the data of the specific identification parameter storage device 23, and the coincidence is obtained. If the sound is outside the vehicle, it is determined that the sound outside the vehicle is the required sound desired by the user.

【0025】また、一致度判断部22で一致していない
と判断された場合には車外音がユーザーにとって不要な
不必要音声であると認識し、この場合にはビデオ割込信
号Vと音声割込信号Aを発生させないので別段の報知は
行わず、一致度判断部22で必要音声であると判定され
た場合には、その情報に基づいてビデオ割込信号Vと音
声割込信号Aが生成されることによってユーザーに対し
て音声と画像の両方による報知が行われる。
If the matching degree judging unit 22 judges that they do not match, the outside sound is recognized as unnecessary sound unnecessary for the user. In this case, the video interrupt signal V and the sound interrupt are recognized. Since the interruption signal A is not generated, no further notification is given, and when the coincidence determination unit 22 determines that the voice is necessary voice, the video interruption signal V and the voice interruption signal A are generated based on the information. As a result, the user is notified by both voice and image.

【0026】車外音の中から抽出された音声が緊急車両
のサイレンであった場合には、「緊急車両が近付いてい
ます」という音声と、ビデオ機器10からのビデオ信号
SVによって画像モニタ12に表示されているカーナビゲ
ーションの表示に「緊急車両接近中!」という文字画像
を割り込ませ、または本来の画像を消した状態で割り込
ませることによって音声と画像の両方による報知を行う
ことができ、この報知に基づいてユーザーがサイレン等
の車外音に確実な運転対応、例えば進路を緊急車両に譲
ったり減速や一時停止等の対応を行うことができる。
When the voice extracted from the outside sound is the siren of the emergency vehicle, the voice "the emergency vehicle is approaching" and the video signal from the video device 10
The car navigation display displayed on the image monitor 12 by the SV is interrupted by a character image "Emergency vehicle is approaching!", Or by interrupting with the original image erased to notify by both voice and image. Based on this notification, the user can take a reliable driving response to the outside sound of the siren or the like, for example, give up the route to the emergency vehicle, decelerate or temporarily stop.

【0027】以上のような第1の形態は、車外音の内容
がユーザーにとって必要なものであった場合に、ビデオ
機器10とオーディオ機器14による画像と音声に割り
込みを掛けてその旨を報知するもので、この音声報知の
間には本来のオーディオ機器14の出力がそのままの状
態となる例であるが、車外音の必要/不必要に対応して
音声報知される間にオーディオ信号SAの出力を補正する
例を第2の実施の形態として次に図2を用いて説明す
る。
In the first mode as described above, when the content of the vehicle exterior sound is necessary for the user, the image and the sound by the video device 10 and the audio device 14 are interrupted to notify that effect. In this example, the output of the original audio device 14 remains unchanged during the voice notification, but the output of the audio signal SA is output during the voice notification in response to the necessity / unnecessity of the external sound. An example of correcting the above will be described as a second embodiment with reference to FIG.

【0028】この第2の実施の形態は、前述の第1の実
施の形態による車外音の識別装置の概略回路を表す図1
に示す構成の一部を変更したもので、その変更点は、図
1に示す回路部bを除去し、その代わりに図2に示す回
路部cを設けたものである。また、アンプ13の出力端
と割込回路15の間に特性補正部26が新たに介挿され
ている。
The second embodiment is a schematic circuit diagram of a vehicle outside sound identification apparatus according to the first embodiment described above with reference to FIG.
A part of the configuration shown in FIG. 2 is modified. The modification is that the circuit part b shown in FIG. 1 is removed and the circuit part c shown in FIG. 2 is provided instead. Further, a characteristic correction unit 26 is newly inserted between the output end of the amplifier 13 and the interrupt circuit 15.

【0029】特性補正部26は、ビデオ機器10または
オーディオ機器14からの音源出力信号に対応するスピ
ーカ16からの放音特性を、回路部aで抽出された車外
音成分を実質的に打ち消すような音響特性に変換する特
性補正手段の要部を構成する。
The characteristic correction unit 26 substantially cancels the sound emission characteristic from the speaker 16 corresponding to the sound source output signal from the video device 10 or the audio device 14 so as to substantially cancel the outside vehicle sound component extracted by the circuit unit a. It constitutes a main part of a characteristic correction means for converting into acoustic characteristics.

【0030】音声認識部21の出力端が一致度判断部2
7の入力端に接続され、この一致度判断部27によって
特定識別パラメータ記憶装置28の格納データと音声認
識部21の出力データが比較され、その一致度が判断さ
れる。
The output end of the voice recognition unit 21 is the coincidence determination unit 2
7 is connected to the input end, and the coincidence determination unit 27 compares the stored data of the specific identification parameter storage device 28 and the output data of the voice recognition unit 21 to determine the coincidence.

【0031】車外音抽出手段(回路部a)で抽出された
車外音成分と特定識別パラメータ記憶装置28の複数の
音声パターンデータとを比較して、必要音声であるか否
かを判定する判定手段が一致度判断部27で構成され、
一致度判断部27によって必要音声であると判定された
ときに、当該のデータに対応する音声および画像のメッ
セージを報知する報知手段が画像変換部29と音声変換
部30によって構成される。
A judging means for judging whether or not the sound is a necessary sound by comparing the outside sound component extracted by the outside sound extracting means (circuit part a) with a plurality of sound pattern data in the specific identification parameter storage device 28. Is configured by the coincidence determination unit 27,
The image conversion unit 29 and the audio conversion unit 30 constitute an informing unit that notifies an audio and image message corresponding to the data when the coincidence determination unit 27 determines that the audio is a required audio.

【0032】また、一致度判断部27によって必要音声
であると判定されたときには、その出力が特性・レベル
解析部31に入力され、最終的にスピーカ16から放音
される音声の特性が、車外音を良く聞けるような特性と
するに適正な解析が行われ、不必要音声であると判定さ
れたときには、その出力が特性・レベル解析部31に入
力され、最終的にスピーカ16から放音される音声の特
性が、車外音を打ち消すような特性とするに適正な解析
が行われ、その出力で特性補正部26が制御される。
When the matching degree judging section 27 judges that the sound is a necessary sound, the output thereof is inputted to the characteristic / level analyzing section 31, and finally the characteristic of the sound emitted from the speaker 16 is outside the vehicle. When proper analysis is performed to obtain a characteristic that allows the sound to be heard well, and when it is determined that the sound is unnecessary, its output is input to the characteristic / level analysis unit 31, and finally the speaker 16 outputs the sound. An appropriate analysis is performed so that the characteristic of the voice that is generated is a characteristic that cancels the external sound, and the characteristic correction unit 26 is controlled by the output.

【0033】従って、スピーカ16からの主音声と車外
音が混在する車内環境の音がマイクロフォン17によっ
て検出され、主音声の成分、即ち、スピーカ16からの
放音成分(オーディオ信号SA)が差分回路20によって
車外音から分離して抽出され、この成分の振幅、波長、
スペクトル、フレーム信号等々の情報を元に既存の音声
認識手段である音声認識部21を用いて外来からの音声
成分を解析し一致度判断部27によって特定識別パラメ
ータ記憶装置28のデータとの一致度を求め、一致して
いる場合には、車外音がユーザーの欲している必要音声
と判断する。
Therefore, the sound of the in-vehicle environment in which the main sound from the speaker 16 and the sound outside the vehicle are mixed is detected by the microphone 17, and the component of the main sound, that is, the sound emission component (audio signal SA) from the speaker 16 is difference circuit. 20 is separated from the external sound and extracted, and the amplitude, wavelength, and
Based on the information such as the spectrum and the frame signal, the voice recognition unit 21 which is an existing voice recognition means is used to analyze the voice component from the outside, and the coincidence degree determination unit 27 causes the coincidence degree with the data of the specific identification parameter storage device 28 to be determined. If they match, it is determined that the external sound is the necessary voice desired by the user.

【0034】また、一致度判断部27で一致していない
と判断された場合には車外音がユーザーにとって不要な
不必要音声であると認識し、この場合にはビデオ割込信
号Vと音声割込信号Aを発生させないので別段の報知は
行わず、車外音を打ち消すような放音特性にされる。ま
た、一致度判断部27で必要音声であると判定された場
合には、その情報に基づいてビデオ割込信号Vと音声割
込信号Aが生成されて割込回路11と割込回路15に割
込入力されることによってユーザーに対して音声と画像
の両方による報知が行われる。
If the matching degree judging section 27 judges that they do not match, the outside sound is recognized as unnecessary sound unnecessary for the user. In this case, the video interrupt signal V and the sound interrupt are recognized. Since the built-in signal A is not generated, no special notification is given, and the sound emission characteristic is set to cancel the external sound. If the coincidence determination unit 27 determines that the voice is a required voice, the video interrupt signal V and the voice interrupt signal A are generated based on the information and the interrupt circuit 11 and the interrupt circuit 15 are generated. By the interrupt input, the user is notified by both voice and image.

【0035】このような報知と同時に、特性・レベル解
析部31で制御される特性補正部26によって、最終的
にスピーカ16から放音される音声が車外音を良く聞け
るような特性とされる。
Simultaneously with such notification, the characteristic correction unit 26 controlled by the characteristic / level analysis unit 31 makes the sound finally emitted from the speaker 16 a characteristic that allows the outside sound to be heard well.

【0036】従って、車外音の中から抽出された音声が
緊急車両のサイレンであった場合には、「緊急車両が近
付いています」という音声と、ビデオ機器10からのビ
デオ信号SVによって画像モニタ12に表示されているカ
ーナビゲーションの表示に「緊急車両接近中!」という
文字画像を割り込ませ、または本来の画像を消した状態
で割り込ませることによって音声と画像の両方による報
知を行うことができ、この報知に基づいてユーザーがサ
イレン等の車外音に対する確実な運転対応、例えば進路
を緊急車両に譲ったり、減速や一時停止等の対応を行う
ことができ、これと同時にスピーカ16から放音される
音声が車外音を良く聞けるような特性とされるので、車
外音を明瞭に聞き取ることができる。
Therefore, when the sound extracted from the sound outside the vehicle is the siren of the emergency vehicle, the sound "the emergency vehicle is approaching" and the video signal SV from the video device 10 cause the image monitor 12 to display. It is possible to notify by both voice and image by interrupting the text image "Emergency vehicle is approaching!" To the car navigation display displayed in, or by interrupting with the original image erased, Based on this notification, the user can take a reliable driving response to the outside sound of the siren or the like, for example, give the course to an emergency vehicle, decelerate or temporarily stop, and at the same time, emit sound from the speaker 16. Since the sound has a characteristic that the outside sound can be heard well, the outside sound can be clearly heard.

【0037】以上のような第1または第2の実施の形態
に用いられている特定識別パラメータ記憶装置23また
は特定識別パラメータ記憶装置28は、緊急車両のサイ
レン鳴動音やロードノイズ等の複数の音声パターンデー
タが格納されている音声パターン格納手段を構成してい
るが、当該の音声パターン格納手段を、採取手段で採取
された音声データの学習機能を有するように構成しても
よく、また、図1または図2に示す回路部aによって構
成される採取手段は、車内の1か所に設けられたマイク
ロフォン17等で構成されているが、複数か所に設けら
れた音声検知部材(マイクロフォン)で複数の採取デー
タを得ると共に、該複数の採取データの相関を加味した
相関データを得るように構成してもよい。
The specific identification parameter storage device 23 or the specific identification parameter storage device 28 used in the first or second embodiment as described above is provided with a plurality of voices such as siren ringing noise and road noise of an emergency vehicle. Although the voice pattern storage means for storing the pattern data is configured, the voice pattern storage means may be configured to have a learning function of the voice data sampled by the sampling means. The sampling means constituted by the circuit section a shown in FIG. 1 or FIG. 2 is composed of a microphone 17 or the like provided at one place in the vehicle, but is a voice detection member (microphone) provided at a plurality of places. It may be configured to obtain a plurality of collected data and obtain correlation data in which the correlation of the plurality of collected data is added.

【0038】この形態を第3の実施の形態として図3を
用いて次に説明する。図3において第1回路部a1と第
2回路部a2のそれぞれは回路部a(図1または図2参
照)におけると同様のマイクロフォン17、アンプ1
8、ディレイ回路19、差分回路20によって構成さ
れ、第1回路部a1と第2回路部a2のそれぞれのマイ
クロフォン17の設置箇所を車両の前部と後部のそれぞ
れとし、差分回路20からの2系統出力のそれぞれを音
声認識部32に入力し、車外からの音声成分の振幅、波
長、スペクトル、フレーム信号等々の情報を元にして車
外からの音声成分を「車外音の方向まで加味した」状態
で解析し、次段の一致度/方向判断部33によって特定
識別パラメータ学習記憶装置34のデータとの一致度を
求め、一致している場合には、車外音がユーザーの欲し
ている必要音声と判断する。
This embodiment will be described below as a third embodiment with reference to FIG. In FIG. 3, each of the first circuit portion a1 and the second circuit portion a2 has the same microphone 17 and amplifier 1 as in the circuit portion a (see FIG. 1 or 2).
8, a delay circuit 19 and a difference circuit 20. The microphones 17 of the first circuit portion a1 and the second circuit portion a2 are installed at the front portion and the rear portion of the vehicle, respectively. Each of the outputs is input to the voice recognition unit 32, and the voice component from the outside of the vehicle is “incorporated into the direction of the outside voice” based on the information such as the amplitude, wavelength, spectrum, and frame signal of the voice component from the outside of the vehicle. The degree of coincidence with the data of the specific identification parameter learning storage device 34 is analyzed by the degree of coincidence / direction determination unit 33 in the next stage, and if they coincide, it is determined that the outside sound is a necessary voice desired by the user. To do.

【0039】特定識別パラメータ学習記憶装置34は、
判断させる複数の音データが学習機能を有して格納され
たもので、例えば線路を横断しようとしたときに、車外
音、即ち踏切の警報音を注意して聞くことになる。ここ
で、踏切音を予め記憶しておき、第1回路部a1または
第2回路部a2によって抽出された車外音の成分によっ
て学習させることによってより確実にかつ現実音に即し
た一致度判定を行なわせることができる。サイレン音や
踏切音のみならずこれ以外の音、例えば電話の着信音を
学習させることもでき、様々な電話着信音やメロディで
あっても認識させることができる。
The specific identification parameter learning storage device 34 is
A plurality of sound data to be judged are stored with a learning function, and when an attempt is made to cross a railroad track, for example, the outside sound of the vehicle, that is, the warning sound of the railroad crossing, will be listened carefully. Here, the level crossing sound is stored in advance and learned by the component of the vehicle exterior sound extracted by the first circuit unit a1 or the second circuit unit a2, so that the degree of matching can be determined more reliably and in accordance with the actual sound. Can be made. It is possible to learn not only the siren sound and the leveling sound but also other sounds, for example, the ringing tone of the telephone, and it is possible to recognize various telephone ringing tones and melodies.

【0040】従って、スピーカ16からの主音声と車外
音が混在する車内環境の音が2つのマイクロフォン17
によって検出され、主音声の成分、即ち、スピーカ16
からの放音成分(オーディオ信号SA)が差分回路20に
よって車外音から分離して抽出され、この2系統の信号
成分の振幅、波長、スペクトル、フレーム信号等々の情
報を元に既存の音声認識手段である音声認識部32を用
いて外来からの音声成分を解析し、一致度/方向判断部
33によって特定識別パラメータ学習記憶装置34から
取り出される学習機能を有するデータとの一致度を音の
方向までも加味した状態で求め、両者が一致している場
合には、車外音がユーザーの欲している必要音声と判断
する。
Therefore, the sound of the in-vehicle environment in which the main sound from the speaker 16 and the sound outside the vehicle are mixed is the two microphones 17.
Detected by the main voice component, that is, the speaker 16
The sound emission component (audio signal SA) from the vehicle is separated and extracted from the vehicle exterior sound by the difference circuit 20, and the existing voice recognition means is based on the information of the amplitude, wavelength, spectrum, frame signal, etc. of the signal components of these two systems. The voice component from the outside is analyzed by using the voice recognition unit 32, and the matching degree with the data having the learning function extracted from the specific identification parameter learning storage device 34 by the matching degree / direction determination unit 33 is determined in the direction of the sound. The sound outside the vehicle is determined to be the necessary voice desired by the user when both are in agreement.

【0041】また、一致度/方向判断部33で一致して
いないと判断された場合には車外音がユーザーにとって
不要な不必要音声であると認識し、この場合には画像変
換部35と音声変換部36を介してビデオ割込信号Vと
音声割込信号Aを発生させないので別段の報知は行わな
い。また、一致度/方向判断部33で必要音声であると
判定された場合には、その情報に基づいてビデオ割込信
号Vと音声割込信号Aが生成されて割込回路11と割込
回路15に割込入力されることによってユーザーに対し
て音声と画像の両方による報知が行われる。
If the coincidence / direction determining unit 33 determines that they do not match, the outside sound is recognized as unnecessary sound unnecessary for the user. In this case, the image converting unit 35 and the sound are recognized. Since the video interrupt signal V and the audio interrupt signal A are not generated via the conversion unit 36, no special notification is given. If the coincidence / direction determination unit 33 determines that the voice is required voice, the video interrupt signal V and the voice interrupt signal A are generated based on the information, and the interrupt circuit 11 and the interrupt circuit are generated. The interrupt input to 15 notifies the user by both voice and image.

【0042】従って、車外音の中から抽出された音声が
緊急車両のサイレンであった場合には、「緊急車両が後
方から近付いています」という音声と、ビデオ機器10
からのビデオ信号SVによって画像モニタ12に表示され
ているカーナビゲーションの表示に「後方から緊急車両
接近中!」という文字画像を割り込ませ、または本来の
画像を消した状態で割り込ませることによって音声と画
像の両方による報知を行うことができ、この報知に基づ
いてユーザーがサイレン等の車外音に対する確実な運転
対応、例えば進路を緊急車両に譲ったり減速や一時停止
等の対応を行うことができ、しかも車外音の方向、この
場合には後方であるが前方や側方からという音声と画像
の両方による報知も行うこととができる。
Therefore, when the sound extracted from the vehicle exterior sound is the siren of the emergency vehicle, the sound "the emergency vehicle is approaching from behind" and the video device 10
A video signal SV from the car navigation display displayed on the image monitor 12 is interrupted by the text image "Emergency vehicle approaching from behind!" It is possible to perform notification by both of the images, and based on this notification, the user can perform reliable driving response to external noise such as siren, for example, transfer the route to an emergency vehicle or respond to deceleration or temporary stop, In addition, it is possible to notify by the direction of the sound outside the vehicle, in this case, the rear, but from the front or the side by both the voice and the image.

【0043】以上のような第1ないし第3の実施の形態
による車外音の識別装置は、車外音を検出し必要音声で
あった場合に適宜の音声と画像でもって報知する例であ
るが、このような装置に、車外の画像の検出出力データ
と予め格納された複数の画像データとを比較して車外の
近傍状況を音声および/または画像のメッセージを報知
する車外環境報知手段を付加して設けてもよく、これを
第4の実施の形態として図4を用いて説明する。
The vehicle exterior sound identification apparatus according to the first to third embodiments as described above is an example of detecting the vehicle exterior sound and notifying the vehicle with appropriate voice and image when the required voice is detected. To such a device, an outside-vehicle environment notifying means for comparing the detected output data of the outside-vehicle image with a plurality of pre-stored image data and notifying the vicinity situation outside the vehicle of a voice and / or image message is added. It may be provided, which will be described as a fourth embodiment with reference to FIG.

【0044】なお、図4に示すマイクロホン44と音声
認識処理部45は、前述の第1ないし第3のいずれかの
実施の形態における「車外音の識別装置」と同様の構成
と動作を行うものであるのでその説明は省略し、異なる
部分について説明する。本形態で付加された部分は回路
部eであって、車外の画像を検出する赤外線カメラ37
の出力がアンプ38で増幅されて画像認識部39を介し
て一致度判断部40に入力される。この一致度判断部4
0は、検出された画像出力データと特定識別パラメータ
記憶装置41に予め格納された複数の画像データとを比
較して車外の近傍状況の一致度を判断するものである。
The microphone 44 and the voice recognition processing section 45 shown in FIG. 4 have the same configuration and operation as the "vehicle outside sound identification device" in any of the first to third embodiments. Therefore, the description thereof will be omitted and only different parts will be described. The portion added in this embodiment is the circuit portion e, which is an infrared camera 37 for detecting an image outside the vehicle.
Is amplified by the amplifier 38 and input to the coincidence determination unit 40 via the image recognition unit 39. This coincidence determination unit 4
0 is for comparing the detected image output data with a plurality of image data stored in advance in the specific identification parameter storage device 41 to determine the degree of coincidence of the proximity situation outside the vehicle.

【0045】例えば車両近傍に別車両が接近しているこ
とや前方に塀等の障害物がある等の状況を判断すること
ができ、一致度判断部40によって報知が必要と判断さ
れたときには、画像変換部42と音声変換部43に報知
データが出力され、画像変換部42と音声変換部43の
それぞれによって生成されたビデオ割込信号V1と音声割
込信号A1が生成されて割込回路11と割込回路15に入
力され車両の近傍状況が音声と画像で報知される。
For example, it is possible to judge the situation where another vehicle is approaching in the vicinity of the vehicle, there is an obstacle such as a fence in the front, and when the coincidence judging section 40 judges that the notification is necessary, The notification data is output to the image conversion unit 42 and the audio conversion unit 43, and the video interrupt signal V1 and the audio interrupt signal A1 generated by the image conversion unit 42 and the audio conversion unit 43 are generated to generate the interrupt circuit 11. Is input to the interrupt circuit 15, and the situation near the vehicle is notified by voice and image.

【0046】従って、前述の形態におけると同様にして
音声と画像による報知がなされると共に、赤外線カメラ
37で得られた画像が接近車両であった場合には、「車
両が接近しています」という音声が割込回路15を介し
てスピーカ16から放音され、これと同時に、「車両接
近中!」という文字画像が割込回路11を介して画像モ
ニタ12に表示される。
Therefore, in the same manner as in the above-mentioned embodiment, the notification by the voice and the image is given, and when the image obtained by the infrared camera 37 is the approaching vehicle, it is said that the vehicle is approaching. The sound is emitted from the speaker 16 via the interrupt circuit 15, and at the same time, a character image "Vehicle approaching!" Is displayed on the image monitor 12 via the interrupt circuit 11.

【0047】なお、前述の4つの実施の形態において
は、「車外音」がサイレンや踏切警報音等の、車両の外
部から発せられた音であるが、本明細書に記載の「車外
音」とは、「ビデオ機器10やオーディオ機器14から
の出力によって放音されるスピーカ16」以外の音を総
称していて、例えば、車内電話の音、車両に搭乗してい
る乳幼児の泣き声等を意味する。従って、後部座席で寝
ている乳幼児が泣いたことを音声認識し、その内容を運
転者に報知することもできる。
In the four embodiments described above, the "outside vehicle sound" is a sound emitted from the outside of the vehicle, such as a siren or a railroad crossing warning sound. The sound is a generic term for sounds other than the “speaker 16 that is emitted by the output from the video device 10 or the audio device 14,” and means, for example, the sound of an in-car telephone, the crying sound of an infant on board the vehicle, and the like. To do. Therefore, it is possible to voice-recognize that the infant sleeping in the back seat cries and to inform the driver of the content.

【0048】また、画像認識の結果に基づいて行われる
報知は、音声と画像の両方、音声のみ、画像のみのいず
れであってもよいことは勿論であり、報知される音声と
画像の態様は全くの任意である。
Further, it goes without saying that the notification made based on the result of the image recognition may be both voice and image, only voice, or only image. Totally optional.

【0049】[0049]

【発明の効果】以上の説明で明らかなように、本発明に
よる車外音の識別装置は、運転者にとって必要とされる
車外音であるか不必要な車外音であるかの判断を、運転
者の手を煩わせずに自動で判定し、緊急車両のサイレン
や警告音等の必要とされる車外音であった場合にはその
内容を確実に音声および/または映像でもって運転者に
報知することができる車外音の識別装置を提供すること
ができ、重要な車外音を聞き逃すことが防止され、当該
情報に対して安全に対応することができる。
As is clear from the above description, the vehicle exterior sound identification apparatus according to the present invention determines whether the vehicle exterior sound is a vehicle exterior sound that is necessary or unnecessary for the driver. The automatic judgment is performed without bothering the user, and when the required external sound such as the siren of an emergency vehicle or a warning sound, the content is surely notified to the driver by voice and / or video. It is possible to provide a device for identifying a vehicle exterior sound that can be heard, prevent an important vehicle exterior sound from being missed, and safely handle the information.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明の第1の実施の形態による車外音の識別
装置の概略回路構成を示すブロック回路図である。
FIG. 1 is a block circuit diagram showing a schematic circuit configuration of a vehicle outside sound identification apparatus according to a first embodiment of the present invention.

【図2】本発明の第2の実施の形態による車外音の識別
装置の概略回路構成を示すブロック回路図である。
FIG. 2 is a block circuit diagram showing a schematic circuit configuration of a vehicle exterior sound identification apparatus according to a second embodiment of the present invention.

【図3】本発明の第3の実施の形態による車外音の識別
装置の概略回路構成を示すブロック回路図である。
FIG. 3 is a block circuit diagram showing a schematic circuit configuration of a vehicle exterior sound identification apparatus according to a third embodiment of the present invention.

【図4】本発明の第4の実施の形態による車外音の識別
装置の概略回路構成を示すブロック回路図である。
FIG. 4 is a block circuit diagram showing a schematic circuit configuration of a vehicle exterior sound identification apparatus according to a fourth embodiment of the present invention.

【図5】従来の車外音の識別装置の一例の概略回路構成
を示すブロック回路図である。
FIG. 5 is a block circuit diagram showing a schematic circuit configuration of an example of a conventional vehicle exterior sound identification device.

【符号の説明】[Explanation of symbols]

10 ビデオ機器 11,15 割込回路 12 画像モニタ 13,18 アンプ 14 オーディオ機器 16 スピーカ 17 マイクロフォン 19 ディレイ回路 20 差分回路 21 音声認識部 22 一致度判断部 23 特定識別パラメータ記憶装置 24 画像変換部 25 音声変換部 10 Video equipment 11,15 Interrupt circuit 12 image monitor 13,18 amp 14 audio equipment 16 speakers 17 microphone 19 Delay circuit 20 Difference circuit 21 Speech recognition unit 22 Consistency judgment unit 23 Specific identification parameter storage device 24 Image converter 25 voice converter

フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) G10L 21/02 Continuation of front page (51) Int.Cl. 7 Identification code FI theme code (reference) G10L 21/02

Claims (6)

【特許請求の範囲】[Claims] 【請求項1】車載型音響機器の音源出力信号に対応して
放音部から放音される主音声と車外音とが混在している
車内環境で音声を採取する採取手段と、 緊急車両のサイレン鳴動音やロードノイズ等の複数の音
声パターンデータが格納されている音声パターン格納手
段と、 前記採取手段で採取された採取音声データの内の前記主
音声に対応する成分を前記音響機器からの前記音源出力
信号に基づいて除去して得られた車外音の成分を得る車
外音抽出手段と、 前記車外音抽出手段で抽出された車外音成分と前記複数
の音声パターンデータとを比較して、必要音声であるか
否かを判定する判定手段と、 前記判定手段によって必要音声であると判定されたとき
に、該必要音声のデータに対応する音声および/または
画像のメッセージを報知する報知手段とを具備すること
を特徴とする車外音の識別装置。
1. A sampling means for sampling a sound in an in-vehicle environment in which a main sound emitted from a sound emitting portion and a sound outside the vehicle corresponding to a sound source output signal of an on-vehicle audio device are mixed, and an emergency vehicle. A voice pattern storage unit that stores a plurality of voice pattern data such as a siren ringing sound or road noise, and a component corresponding to the main voice in the sampled voice data sampled by the sampling unit from the acoustic device. Exterior sound extraction means for obtaining a vehicle exterior sound component obtained by removing based on the sound source output signal, comparing the vehicle exterior sound component extracted by the vehicle exterior sound extraction means and the plurality of voice pattern data, Determining means for determining whether or not the voice is necessary voice; and a notification for notifying a voice and / or image message corresponding to the data of the voice when the voice is required voice by the determining means. A vehicle exterior sound identification device comprising:
【請求項2】車載型音響機器の音源出力信号に対応して
放音部から放音される主音声と車外外音声とが混在して
いる車内環境で音声を採取する採取手段と、 緊急車両のサイレン鳴動音やロードノイズ等の複数の音
声パターンデータが格納されている音声パターン格納手
段と、 前記採取手段で採取された採取音声データの内の前記主
音声に対応する成分を前記音響機器からの前記音源出力
信号に基づいて除去して得られた車外音の成分を得る車
外音抽出手段と、 前記車外音抽出手段で抽出された車外音成分と前記複数
の音声パターンデータとを比較して、必要音声であるか
否かを判定する判定手段と、 前記判定手段によって必要音声であると判定されたとき
に、該必要音声のデータに対応する音声および/または
画像のメッセージを報知する報知手段と、 前記音源出力信号に対応する放音部からの放音特性を、
前記車外音抽出手段で抽出された車外音成分を聞き易く
する音響特性に変換する特性補正手段とを具備すること
を特徴とする車外音の識別装置。
2. A sampling means for sampling a sound in an in-vehicle environment in which a main sound emitted from a sound emitting section and a sound outside the vehicle are mixed in response to a sound source output signal of an on-vehicle audio device, and an emergency vehicle. A voice pattern storing means for storing a plurality of voice pattern data such as a siren ringing sound or road noise, and a component corresponding to the main voice in the collected voice data collected by the collecting means from the acoustic device. The vehicle exterior sound extraction means for obtaining the vehicle exterior sound component obtained by removing the vehicle exterior sound component based on the sound source output signal, and comparing the vehicle exterior sound component extracted by the vehicle exterior sound extraction means with the plurality of voice pattern data. A determination unit for determining whether or not the voice is a required voice, and when the determination unit determines that the voice is the required voice, a voice and / or image message corresponding to the data of the required voice is notified. An informing unit, and a sound emission characteristic from the sound emission unit corresponding to the sound source output signal,
An exterior sound identification device, comprising: a characteristic correction means for converting the exterior sound component extracted by the exterior sound extraction means into an acoustic characteristic that makes it easier to hear.
【請求項3】前記音声パターン格納手段は、前記採取手
段で採取された音声データの学習機能を有するように構
成することを特徴とする請求項1または請求項2に記載
の車外音の識別装置。
3. The vehicle exterior sound identification device according to claim 1, wherein the voice pattern storage means is configured to have a learning function of the voice data collected by the collection means. .
【請求項4】前記採取手段は、複数か所に設けられた音
声検知部材で複数の採取データを得ると共に、該複数の
採取データの相関を加味した相関データを得るように構
成したことを特徴とする請求項1または請求項2に記載
の車外音の識別装置。
4. The collecting means is configured to obtain a plurality of collected data by voice detection members provided at a plurality of locations and to obtain correlation data in which a correlation of the plurality of collected data is taken into consideration. The vehicle exterior sound identification device according to claim 1 or 2.
【請求項5】前記採取手段は、車内と車外のそれぞれに
音声検知部材を設けるように構成することを特徴とする
請求項4に記載の車外音の識別装置。
5. The vehicle exterior sound identification device according to claim 4, wherein the sampling means is provided with voice detection members inside and outside the vehicle.
【請求項6】車外の画像の検出出力データと予め格納さ
れた複数の画像データとを比較して車外の近傍状況を音
声および/または画像のメッセージを報知する車外環境
報知手段を付加して設けることを特徴とする請求項1な
いし請求項5のいずれかに記載の車外音の識別装置。
6. A vehicle outside environment informing means is additionally provided for comparing detected output data of an image outside the vehicle with a plurality of image data stored in advance to inform the vicinity of the vehicle outside by a voice and / or image message. The vehicle outside sound identification device according to any one of claims 1 to 5.
JP2001194267A 2001-06-27 2001-06-27 Identification device for sound outside vehicle Pending JP2003004521A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001194267A JP2003004521A (en) 2001-06-27 2001-06-27 Identification device for sound outside vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001194267A JP2003004521A (en) 2001-06-27 2001-06-27 Identification device for sound outside vehicle

Publications (1)

Publication Number Publication Date
JP2003004521A true JP2003004521A (en) 2003-01-08

Family

ID=19032433

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001194267A Pending JP2003004521A (en) 2001-06-27 2001-06-27 Identification device for sound outside vehicle

Country Status (1)

Country Link
JP (1) JP2003004521A (en)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006048377A (en) * 2004-08-04 2006-02-16 Pioneer Electronic Corp Alarm control device, alarm control system, method thereof, program thereof, and recording medium with the program stored
JP2007065832A (en) * 2005-08-30 2007-03-15 Aisin Seiki Co Ltd Exterior noise processor
US7616128B2 (en) 2004-07-23 2009-11-10 Panasonic Corporation Audio identifying device, audio identifying method, and program
EP2204859A2 (en) 2002-02-15 2010-07-07 Mitsubishi Chemical Corporation Light emitting device and illuminator using the same
CN1707612B (en) * 2004-06-08 2010-11-17 深圳市朗科科技有限公司 Audiovisual playing apparatus and playing method thereof
JP2012059203A (en) * 2010-09-13 2012-03-22 Nec Access Technica Ltd Specific audio recognition apparatus and specific audio recognition method
JP2012144252A (en) * 2005-08-19 2012-08-02 Adc Technology Inc Onboard image display device
JP2019125073A (en) * 2018-01-15 2019-07-25 パイオニア株式会社 Output device
JP2019213102A (en) * 2018-06-06 2019-12-12 クラリオン株式会社 Alarm sound output detection device, alarm sound output detection method, and program
US10759447B2 (en) 2018-02-27 2020-09-01 Toyota Jidosha Kabushiki Kaisha Driving support method, vehicle, and driving support system
CN113763957A (en) * 2019-03-12 2021-12-07 百度在线网络技术(北京)有限公司 Interaction method and device applied to vehicle
CN114464203A (en) * 2022-01-18 2022-05-10 小米汽车科技有限公司 Noise filtering method, device, system, vehicle and storage medium
JP7513841B2 (en) 2020-11-18 2024-07-09 グーグル エルエルシー Detecting and processing driving event sounds during a navigation session

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2204859A2 (en) 2002-02-15 2010-07-07 Mitsubishi Chemical Corporation Light emitting device and illuminator using the same
EP2204858A2 (en) 2002-02-15 2010-07-07 Mitsubishi Chemical Corporation Light emitting device and illuminator using the same
CN1707612B (en) * 2004-06-08 2010-11-17 深圳市朗科科技有限公司 Audiovisual playing apparatus and playing method thereof
US7616128B2 (en) 2004-07-23 2009-11-10 Panasonic Corporation Audio identifying device, audio identifying method, and program
JP2006048377A (en) * 2004-08-04 2006-02-16 Pioneer Electronic Corp Alarm control device, alarm control system, method thereof, program thereof, and recording medium with the program stored
JP4533696B2 (en) * 2004-08-04 2010-09-01 パイオニア株式会社 Notification control device, notification control system, method thereof, program thereof, and recording medium recording the program
JP2012144252A (en) * 2005-08-19 2012-08-02 Adc Technology Inc Onboard image display device
JP2012185832A (en) * 2005-08-19 2012-09-27 Adc Technology Inc In-vehicle device
JP2007065832A (en) * 2005-08-30 2007-03-15 Aisin Seiki Co Ltd Exterior noise processor
JP2012059203A (en) * 2010-09-13 2012-03-22 Nec Access Technica Ltd Specific audio recognition apparatus and specific audio recognition method
JP2019125073A (en) * 2018-01-15 2019-07-25 パイオニア株式会社 Output device
US10759447B2 (en) 2018-02-27 2020-09-01 Toyota Jidosha Kabushiki Kaisha Driving support method, vehicle, and driving support system
US11097745B2 (en) 2018-02-27 2021-08-24 Toyota Jidosha Kabushiki Kaisha Driving support method, vehicle, and driving support system
JP2019213102A (en) * 2018-06-06 2019-12-12 クラリオン株式会社 Alarm sound output detection device, alarm sound output detection method, and program
CN113763957A (en) * 2019-03-12 2021-12-07 百度在线网络技术(北京)有限公司 Interaction method and device applied to vehicle
JP7513841B2 (en) 2020-11-18 2024-07-09 グーグル エルエルシー Detecting and processing driving event sounds during a navigation session
CN114464203A (en) * 2022-01-18 2022-05-10 小米汽车科技有限公司 Noise filtering method, device, system, vehicle and storage medium
WO2023137912A1 (en) * 2022-01-18 2023-07-27 小米汽车科技有限公司 Noise filtering method, apparatus and system, vehicle, and storage medium

Similar Documents

Publication Publication Date Title
US7928307B2 (en) Karaoke system
US9893697B1 (en) System and method for selective volume adjustment in a vehicle
JP2003004521A (en) Identification device for sound outside vehicle
US20170303037A1 (en) Enhanced audio landscape
JP4285371B2 (en) Sound field control system
JP2009113659A (en) Vehicular noise cancellation device
JPH1152976A (en) Voice recognition device
JPH11126092A (en) Voice recognition device and on-vehicle voice recognition device
JPH05305847A (en) Sound volume control system for vehicle
JP4381291B2 (en) Car audio system
JP2007110481A (en) Audio controller and correcting device
US7561703B2 (en) Audio system, audio apparatus, and method for performing audio signal output processing
JP2018087871A (en) Voice output device
JP2007043356A (en) Device and method for automatic sound volume control
JP4533696B2 (en) Notification control device, notification control system, method thereof, program thereof, and recording medium recording the program
JPH09330089A (en) Voice control device
JP2006295443A (en) Voice output control device and voice output control program
JP4736837B2 (en) Audio equipment and program
JP4867624B2 (en) Audio output control device and vehicle navigation device
JPH02274007A (en) Car audio device with alarm sound detecting function
JP5188902B2 (en) Audio playback device and method for controlling audio playback device
JP3223552B2 (en) Message output device
JP2004328214A (en) System for reproducing musical sound in vehicle
JP2006023587A (en) In-vehicle noise suppressing system
JPH0764594A (en) Speech recognition device

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20041028

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20041104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050104

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20050405