JP2006160160A - Operating environmental sound adjusting device - Google Patents

Operating environmental sound adjusting device Download PDF

Info

Publication number
JP2006160160A
JP2006160160A JP2004357320A JP2004357320A JP2006160160A JP 2006160160 A JP2006160160 A JP 2006160160A JP 2004357320 A JP2004357320 A JP 2004357320A JP 2004357320 A JP2004357320 A JP 2004357320A JP 2006160160 A JP2006160160 A JP 2006160160A
Authority
JP
Japan
Prior art keywords
sound
driver
vehicle
ear
driving environment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2004357320A
Other languages
Japanese (ja)
Inventor
Tateshi Nakajima
立志 中嶋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2004357320A priority Critical patent/JP2006160160A/en
Publication of JP2006160160A publication Critical patent/JP2006160160A/en
Withdrawn legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To enhance the safety in driving a vehicle by transmitting certainly to the driver extra-vehicle sounds required to perform driving, in particular the sound necessary for acknowledging the hazardous situation, without emitting a larger volume than necessary. <P>SOLUTION: The waveforms of the different pieces of sound data of the extra-vehicle sounds A1 and intra-vehicle sounds A2 collected by an extra-vehicle sound collecting device 11 and an intra-vehicle sound collecting device 12 are superposed on the original voice waveform upon converting so that the phase of each piece of sound data is inverted 180 degrees. with respect to the original voice waveform in the place corresponding to the coordinates information of the driver's ears entered from a driver position locating device 13, and the volume ratios of the extra-vehicle sound to intra-vehicle sound are adjusted to optimum by subjecting the amplitude of each piece of sound data converted to a volume adjustment. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、例えば踏切音、横断信号音、周囲を走行する車両音およびクラクション音など、車両走行中に周囲の危険状況を確認するために必要な音を確実にドライバーが聞き取ることができるように運転環境音を調整する運転環境音調整装置に関する。   The present invention enables the driver to reliably hear sounds necessary for confirming the surrounding dangerous situation while the vehicle is running, such as a crossing sound, a crossing signal sound, a vehicle sound and a horn sound traveling around the vehicle. The present invention relates to a driving environment sound adjusting device that adjusts driving environment sounds.

近年、自動車産業においては、ドライバーや同乗者の安全を守るために、エアーバッグや後方確認用カメラなど、各種セーフティー機能が搭載され始めている。また、ドライバーが安全に運転することを補助するために、自動走行システム、居眠り検出・警報発生システムなどが徐々に実現化されている。   In recent years, in the automobile industry, various safety functions such as an air bag and a rear-view camera have begun to be installed in order to protect the safety of drivers and passengers. In addition, in order to assist the driver to drive safely, an automatic driving system, a dozing detection / alarm generation system, and the like are gradually realized.

自動車を運転する際に、ドライバーには、運転に必要な情報が含まれる音と、運転には関係ない音が混在した状態で音が届く。ドライバーにとって、運転に必要な音は車外から届き、車内の音は概ね運転そのものには不要である。よって、車内の音や音声が車外の音に比べて大きい場合、重要な情報をドライバーが得られないことが多々ある。   When driving a car, the driver receives a sound in a state where sound including information necessary for driving and sound not related to driving are mixed. For the driver, the sound necessary for driving arrives from outside the vehicle, and the sound inside the vehicle is generally unnecessary for driving itself. Therefore, if the sound or sound inside the vehicle is louder than the sound outside the vehicle, the driver often cannot obtain important information.

音量の調節方法として、例えば特許文献1には、ドライバーと同乗者とを認識し、予め記憶されている個人の聞き取り能力などの個人情報を参照することによって、ラジオなどの音量を調節する車載音量調整装置が開示されている。
特開2001−60095号公報
As a volume adjustment method, for example, Patent Document 1 discloses an in-vehicle volume that adjusts the volume of a radio or the like by recognizing a driver and a passenger and referring to personal information such as a personal hearing ability stored in advance. An adjustment device is disclosed.
Japanese Patent Laid-Open No. 2001-60095

しかしながら、上記特許文献1に開示されている従来技術では、車内でラジオなどの音量を調節することを目的としているため、車外で発生する音をノイズとして扱っている。このため、例えば踏切音、横断信号音、周囲走行車両音およびクラクション音など、危険状況が発生した際に、これらの運転環境音がドライバーに認知されないという運転に対する危険性を有している。   However, since the conventional technique disclosed in Patent Document 1 is intended to adjust the volume of a radio or the like inside the vehicle, the sound generated outside the vehicle is handled as noise. For this reason, when a dangerous situation occurs, for example, a crossing sound, a crossing signal sound, a surrounding traveling vehicle sound, and a horn sound, there is a risk to driving that these driving environment sounds are not recognized by the driver.

本発明は、上記従来の問題を解決するもので、車両を運転する際に、運転に必要な車外の運転環境音、特に、危険状況を認知するために必要な音を、必要以上に大音量を発することなく、ドライバーに確実に届け、かつ、車内の音もドライバーに届けることにより、車両運転時の安全性を高めることができる運転環境音調整装置を提供することを目的とする。   The present invention solves the above-mentioned conventional problems. When driving a vehicle, the driving environment sound outside the vehicle necessary for driving, in particular, the sound necessary for recognizing a dangerous situation is louder than necessary. It is an object of the present invention to provide a driving environment sound adjusting device that can improve the safety during driving of a vehicle by reliably delivering the sound to the driver without emitting a noise and also delivering the sound in the vehicle to the driver.

本発明の運転環境音調整装置は、車外音を集音する車外集音手段と、車内音を集音する車内集音手段と、ドライバーの耳位置を特定するドライバー位置特定手段と、該車外集音手段および該車内集音手段で集音した車外音および車内音をそれぞれ、該ドライバー位置特定手段からのドライバーの耳位置情報に対応した各音量比率に調整する音合成手段と、該音合成手段で音合成した音をドライバーの耳位置に出力する音出力手段とを有しており、そのことにより上記目的が達成される。   The driving environment sound adjusting device according to the present invention includes an outside sound collecting means for collecting outside sound, an inside sound collecting means for collecting inside sound, a driver position specifying means for specifying a driver's ear position, and the outside collection. Sound synthesizing means for adjusting the sound volume and the vehicle exterior sound and the vehicle interior sound collected by the vehicle sound collecting means to respective volume ratios corresponding to the driver's ear position information from the driver position specifying means, and the sound synthesizing means And a sound output means for outputting the sound synthesized at the ear position of the driver, thereby achieving the above object.

また、好ましくは、本発明の運転環境音調整装置における音合成手段は、前記集音した車外音および車内音を、前記ドライバーの耳位置情報に対応する場所でそれぞれの音データの位相が180度反転するように変換すると共に、該変換する各音データの振幅を調整することにより、前記車外音および車内音の各音量比率を調整する。   Preferably, the sound synthesizing means in the driving environment sound adjusting device according to the present invention is configured such that the collected sound outside the vehicle and the sound inside the vehicle have a phase of 180 degrees of each sound data at a location corresponding to the ear position information of the driver. The sound volume ratio between the outside sound and the inside sound is adjusted by converting the sound data to be inverted and adjusting the amplitude of each sound data to be converted.

さらに、好ましくは、本発明の運転環境音調整装置における車外集音手段および前記車内集音手段はそれぞれ、前記ドライバーに対して、車両の右側に設けられた右側用集音手段と、該車両の左側に設けられた左側用集音手段とを有し、前記音合成手段は、前記集音した該右側および該左側の音をそれぞれ、前記ドライバー位置特定手段からのドライバーの両耳位置情報に対応した各音量比率に調整する。   Further preferably, the vehicle exterior sound collection means and the vehicle interior sound collection means in the driving environment sound adjusting device of the present invention are respectively provided with a right sound collection means provided on the right side of the vehicle with respect to the driver, Left-side sound collecting means provided on the left side, and the sound synthesizing means corresponds to the information on the binaural positions of the driver from the driver position specifying means, respectively, Adjust each volume ratio.

さらに、好ましくは、本発明の運転環境音調整装置における音合成手段に対して、前記車外音および車内音の各音量比率と右側および左側音の各音量比率とのうち少なくともいずれかの各音量比率を指定可能とする音量比率指定手段を更に有する。   Further preferably, for the sound synthesis means in the driving environment sound adjusting device of the present invention, each volume ratio of at least one of the volume ratios of the outside sound and the interior sound and the volume ratios of the right and left sounds. Is further provided with a sound volume ratio specifying means.

さらに、好ましくは、本発明の運転環境音調整装置における音合成手段は、前記車外音および車内音のうち該車内音を打ち消して該車外音を強調するように音合成する。   Further preferably, the sound synthesizing means in the driving environment sound adjusting device of the present invention synthesizes the sound so as to cancel out the in-vehicle sound and emphasize the out-of-vehicle sound out of the out-of-vehicle sound and the in-vehicle sound.

さらに、好ましくは、本発明の運転環境音調整装置における音合成手段は、前記右側および左側音の各音量比率を調整して音源の位置および方向性を調整可能とする。   Further preferably, the sound synthesizing means in the driving environment sound adjusting device of the present invention can adjust the position and directionality of the sound source by adjusting the volume ratio of the right and left sounds.

さらに、好ましくは、本発明の運転環境音調整装置における音出力手段は、ドライバー右耳側に配置されて該ドライバー右耳に右耳用の音出力を行う右耳用音出力手段と、ドライバー左耳側に配置されて該ドライバー左耳に左耳用の音出力を行う左耳用音出力手段とを有する。   Further preferably, the sound output means in the driving environment sound adjusting device of the present invention includes a right ear sound output means arranged on the driver right ear side to output sound for the right ear to the driver right ear, and the driver left A left ear sound output means disposed on the ear side for outputting a left ear sound to the driver's left ear;

さらに、好ましくは、本発明の運転環境音調整装置における右耳用音出力手段は、前記右側用集音手段からの音信号に基づいて右耳用に音出力し、前記左耳用音出力手段は、前記左側用集音手段からの音信号を用いて左耳用に音出力する。   Further preferably, the sound output means for the right ear in the driving environment sound adjusting device of the present invention outputs a sound for the right ear based on a sound signal from the sound collecting means for the right side, and the sound output means for the left ear Outputs sound for the left ear using the sound signal from the left sound collecting means.

さらに、好ましくは、本発明の運転環境音調整装置における右耳用音出力手段および前記左耳用音出力手段はそれぞれ、指向性を有するスピーカである。   Further preferably, the right-ear sound output means and the left-ear sound output means in the driving environment sound adjusting device of the present invention are each a speaker having directivity.

さらに、好ましくは、本発明の運転環境音調整装置におけるドライバー位置特定手段は、前記ドライバーの顔正面に対して光を発光する発光手段と、該ドライバーの正面顔を撮像するカメラ手段と、該カメラ手段で撮像したドライバーの正面顔の撮像情報から両耳の位置座標を算出する座標演算手段と、該座標演算手段で算出した座標情報を前記音合成手段に出力する座標出力手段とを有する。   Further preferably, the driver position specifying means in the driving environment sound adjusting device of the present invention comprises: light emitting means for emitting light to the front face of the driver; camera means for imaging the front face of the driver; and the camera A coordinate calculation unit that calculates the position coordinates of both ears from the imaging information of the front face of the driver imaged by the unit, and a coordinate output unit that outputs the coordinate information calculated by the coordinate calculation unit to the sound synthesis unit.

さらに、好ましくは、本発明の運転環境音調整装置における発光手段は、非可視光の近赤外光を発光する発光素子である。   Further preferably, the light emitting means in the operating environment sound adjusting device of the present invention is a light emitting element that emits invisible near-infrared light.

さらに、好ましくは、本発明の運転環境音調整装置におけるカメラ手段は、前記ドライバーの両眼で反射した光を、その撮像画像上で二つの隣り合った光点として撮像する。   Further preferably, the camera means in the driving environment sound adjusting device of the present invention images light reflected by both eyes of the driver as two adjacent light spots on the captured image.

さらに、好ましくは、本発明の運転環境音調整装置における座標演算手段は、前記カメラ手段による撮像画像上でドライバー両眼反射光のドライバー両眼位置からドライバー両耳の位置座標を算出する。   Further preferably, the coordinate calculation means in the driving environment sound adjusting device of the present invention calculates the position coordinates of the driver's binaural from the driver's binocular position of the driver's binocular reflected light on the image taken by the camera means.

さらに、好ましくは、本発明の運転環境音調整装置における座標演算手段は、前記カメラ手段で撮像した撮像画像上からドライバー正面顔の輪郭を探し出し、該ドライバー正面顔の輪郭に基づいてドライバー両耳の位置情報を算出する。   Further preferably, the coordinate calculation means in the driving environment sound adjusting device of the present invention searches for the contour of the driver's front face from the captured image captured by the camera means, and based on the contour of the driver's front face, Calculate location information.

さらに、好ましくは、本発明の運転環境音調整装置におけるドライバー位置特定手段は、前記ドライバーの両耳にそれぞれ配置された発信機と、該発信機から発信した電波から発信源の両耳の位置を算出する座標演算手段と、該座標演算手段で算出した座標情報を前記音合成手段に出力する座標出力手段とを有する。   Further preferably, the driver position specifying means in the driving environment sound adjusting device of the present invention is configured to determine the positions of both ears of the transmission source from the transmitters respectively disposed on both ears of the driver and the radio waves transmitted from the transmitters. Coordinate calculation means for calculating, and coordinate output means for outputting the coordinate information calculated by the coordinate calculation means to the sound synthesis means.

上記構成により、以下、本発明の作用を説明する。   With the above configuration, the operation of the present invention will be described below.

本発明の運転環境音調整装置において、車外集音手段は、車内が静かであればドライバーが聞き取り可能である車外音を収集し、音信号に変換後、音合成手段に出力する。また、車内集音手段は車内の音を収集し、音信号に変換後、音合成手段に出力する。さらに、ドライバー位置特定装置は、ドライバーの耳の位置情報(座標)を特定して、これを音合成手段に出力する。   In the driving environment sound adjusting device of the present invention, the outside sound collecting means collects outside sound that can be heard by the driver if the inside of the vehicle is quiet, converts the sound to a sound signal, and outputs the sound signal to the sound synthesizing means. The in-vehicle sound collecting unit collects the sound in the vehicle, converts it into a sound signal, and outputs it to the sound synthesizing unit. Furthermore, the driver position specifying device specifies the position information (coordinates) of the driver's ear and outputs this to the sound synthesis means.

例えば、ドライバーの正面付近に設置された近赤外光の発光手段からドライバーの顔正面に向かって近赤外光を照射し、これをカメラ手段によって、ドライバーの眼で反射した反射光を撮像する。この反射光は、カメラ手段の撮像画像上で二つの隣り合って光る点として現れるため、座標演算手段によって、撮像画像上から二つの隣り合って光る点をドライバーの両眼の位置として検出し、この検出された両眼の位置からドライバーの両耳の位置を算出することが可能となる。   For example, near infrared light is emitted from the near infrared light emitting means installed near the front of the driver toward the front of the driver's face, and the reflected light reflected by the driver's eyes is imaged by the camera means. . Since this reflected light appears as two adjacent points that shine on the captured image of the camera unit, the coordinate calculation unit detects two adjacent points that shine from the captured image as the positions of both eyes of the driver, It is possible to calculate the position of both ears of the driver from the detected position of both eyes.

音合成手段は、車外集音手段および車内集音手段により収集されたそれぞれオリジナルの音を、ドライバー位置特定装置から入力されるドライバーの両耳の位置情報に対応する場所でそれぞれの音データの位相が180度反転するように変換すると共に、この変換した各音データの振幅を調整することにより、車外および車内の各音量比率を調整することが可能となる。例えば、音量を小さくしたい場合には、調整された出力音の位相を元の音の位相に対して180°反転させて耳に届く音の振幅を小さくすればよい。また、オリジナルの音を完全に打ち消したい場合には、調整された出力音とオリジナルの音(元の音)の振幅を同じにして位相を180°反転させればよい。さらに、音量を大きくしたい場合には、調整された出力音の位相を元の音の位相に対して180°反転させて耳に届く音の振幅を大きくすればよい。   The sound synthesizing means converts the original sounds collected by the outside sound collecting means and the inside sound collecting means to the phase of each sound data at a location corresponding to the position information of both ears of the driver inputted from the driver position specifying device. Can be inverted 180 degrees and the amplitude of each converted sound data can be adjusted to adjust the volume ratios outside and inside the vehicle. For example, when it is desired to reduce the volume, the amplitude of the sound that reaches the ear can be reduced by inverting the phase of the adjusted output sound by 180 ° with respect to the phase of the original sound. Further, when it is desired to completely cancel the original sound, the phase of the adjusted output sound and the original sound (original sound) are made the same and the phase is inverted by 180 °. Furthermore, when it is desired to increase the volume, the phase of the adjusted output sound may be inverted by 180 ° with respect to the phase of the original sound to increase the amplitude of the sound that reaches the ear.

音出力手段としてのスピーカは、指向性を有しており、ドライバーに対して音データを出力する。例えば、右耳用スピーカおよび左耳用スピーカを設けて、ドライバーの耳の近くに配置することによって、音量調整効果がドライバーにのみ作用し、その他の同乗者には通常と変わらない音を聴取させることが可能となる。   The speaker as the sound output means has directivity and outputs sound data to the driver. For example, by providing a right-ear speaker and a left-ear speaker and placing them near the driver's ear, the volume adjustment effect only affects the driver, and other passengers can hear the sound that is not normal It becomes possible.

さらに、車両の左側と右側にそれぞれ車外集音手段および車内集音手段をそれぞれ設けて、右側集音手段からの音を右耳用スピーカから出力し、左側集音手段からの音を左耳用スピーカから出力することによって、音源の位置や方向性も確認することが可能となる。   Furthermore, an outside sound collecting means and an inside sound collecting means are provided on the left and right sides of the vehicle, respectively, and the sound from the right sound collecting means is output from the right ear speaker, and the sound from the left sound collecting means is used for the left ear. By outputting from the speaker, the position and direction of the sound source can be confirmed.

以上により、本発明によれば、車外音および車内音の各音量比率を調整してドライバーに出力するため、例えば、車外音の音量比を車内音の音量比よりも高く設定することによって、車外音の運転環境音、特に、例えば踏切音、横断信号音、周囲走行車両音およびクラクション音など、危険状況を認知するための各種環境音を、必要以上に大音量にすることなく、ドライバーに確実に届け、かつ、車内音も必要に応じてドライバーに届けることにより、車両運転時の安全性を高めることができる。   As described above, according to the present invention, the volume ratio of the vehicle exterior sound and the vehicle interior sound is adjusted and output to the driver. For example, by setting the volume ratio of the vehicle exterior sound higher than the volume ratio of the vehicle interior sound, The driving environment sounds of the sound, in particular, various environmental sounds for recognizing dangerous situations such as crossing sounds, crossing signal sounds, surrounding traveling vehicle sounds and horn sounds, etc. are surely secured to the driver without making the volume louder than necessary. And the sound inside the vehicle is also delivered to the driver as necessary, so that safety during driving can be improved.

以下に、本発明の車両環境音調整装置の実施形態について、図面を参照しながら詳細に説明する。   Hereinafter, an embodiment of a vehicle environmental sound adjusting device of the present invention will be described in detail with reference to the drawings.

図1は、本発明の実施形態に係る車両環境音調整装置の要部構成例を示すブロック図である。なお、ここでは、実線の矢印は電気信号を表し、点線の矢印は音や光を表している。   FIG. 1 is a block diagram illustrating a configuration example of a main part of a vehicle environmental sound adjustment device according to an embodiment of the present invention. Here, the solid arrow represents an electric signal, and the dotted arrow represents sound or light.

図1において、車両環境音調整装置10は、車外音を集音する車外集音手段としての車外集音装置11と、車内音を集音する車内集音手段としての車内集音装置12と、ドライバーの位置を特定するドライバー位置特定手段としてのドライバー位置特定装置13と、ドライバーの位置に応じて車外音と車内音を音声合成する音合成手段としての音合成装置14と、音声合成した音を出力する指向性を持つ音出力手段としてのスピーカ15a,15bとを備えている。   In FIG. 1, a vehicle environmental sound adjusting device 10 includes an outside sound collecting device 11 as an outside sound collecting unit for collecting outside sound, an in-vehicle sound collecting device 12 as an inside sound collecting unit for collecting inside sound, A driver position specifying device 13 as a driver position specifying means for specifying the position of the driver, a sound synthesizer 14 as a sound synthesizing means for synthesizing a sound outside the vehicle and a sound inside the vehicle according to the position of the driver, and the synthesized sound Speakers 15a and 15b are provided as sound output means having directivity for output.

車外集音装置11は、車外音A1を収集して音信号に変換後、音合成装置14に出力する。   The vehicle outside sound collector 11 collects the vehicle outside sound A1 and converts it into a sound signal, which is then output to the sound synthesizer 14.

車内集音装置12は、車内音A2を収集して音信号に変換後、音合成装置14に出力する。なお、車内外の音には、クラクション、会話、音楽、騒音などが含まれており、ドライバーにとって有用な音や不要な音が混在しているため、車外集音装置11および車内集音装置12には、人間の音声やサイレン、クラクションなどの音を強調する機能やノイズをキャンセルする機能を持たせてもよい。このような集音装置の具体的な実現方法は、例えば特願平5−231468号公報「音声出力回路」などに詳しく記載されているため、ここではその説明を省略する。   The vehicle interior sound collector 12 collects the vehicle interior sound A2 and converts it into a sound signal, which is then output to the sound synthesizer 14. Note that the sound inside and outside the vehicle includes horns, conversations, music, noise, and the like, and sounds useful and unnecessary for the driver are mixed, so the sound collecting device 11 outside the vehicle and the sound collecting device 12 inside the vehicle. May have a function of enhancing sounds such as human voice, siren, and horn, and a function of canceling noise. A specific method for realizing such a sound collecting device is described in detail, for example, in Japanese Patent Application No. Hei 5-231468 “Sound Output Circuit”, and the description thereof is omitted here.

ドライバー位置特定装置13は、ドライバーの両耳の位置座標を特定し、その特定した位置座標を音合成装置14に出力する。このドライバー位置特定装置13は、様々な実現方法が挙げられるが、その一例として、非可視光の近赤外光を発光する発光手段としての近赤外光発光ダイオード(LED)13a、ドライバーの顔正面を撮像すると共に、その両眼で反射した近赤外光を撮像するカメラ手段としてのカメラ13b、撮像したドライバーの両眼の位置から両耳の位置座標を算出する座標演算手段としての座標演算器13cおよび、その算出結果(両耳の座標情報)を音合成装置14に出力する座標出力手段としての座標出力部13dによって構成されている。   The driver position specifying device 13 specifies the position coordinates of both ears of the driver and outputs the specified position coordinates to the sound synthesizer 14. The driver position specifying device 13 can be realized in various ways. For example, a near-infrared light emitting diode (LED) 13a as a light emitting means for emitting invisible near-infrared light, a driver's face. Coordinate calculation as a camera 13b as a camera means for imaging near-infrared light reflected by both eyes while imaging the front, and a coordinate calculation means for calculating the position coordinates of both ears from the positions of both eyes of the imaged driver. And a coordinate output unit 13d as coordinate output means for outputting the calculation result (coordinate information of both ears) to the sound synthesizer 14.

ドライバー位置特定装置13では、ドライバーの正面付近に設置された近赤外光LED13aがドライバーに向かって発光する。この近赤外光LED13aからの近赤外光は、非可視光であるため、ドライバーの注意をそらすことなく、ドライバーの正面を照射することができる。ドライバーに照射された近赤外光LED13aからの光は、ドライバーの眼(眼底)で反射される(赤眼現象の応用)。人の顔を通常に撮像した場合には、図2(a)に示すような画像が得られるが、近赤外光LED13aからの近赤外光を照射してドライバーの顔正面に設置されたカメラ13bの絞りを絞って撮像された画像は、図2(b)に示すように、眼(黒眼)の部分が二つの隣り合う光った点として現れる。この画像情報(画像信号)を用いて、座標演算器13cによって、画像上から二つの隣り合う光った点を眼として特定し、眼の位置からドライバーの両耳の位置座標を算出し、その算出結果(座標情報)を座標出力部13dから音合成装置14に出力する。   In the driver position specifying device 13, a near infrared LED 13a installed near the front of the driver emits light toward the driver. Since the near-infrared light from the near-infrared LED 13a is invisible light, the front of the driver can be irradiated without diverting the driver's attention. The light from the near-infrared light LED 13a irradiated to the driver is reflected by the driver's eyes (fundus) (application of the red-eye phenomenon). When a person's face is normally imaged, an image as shown in FIG. 2A is obtained, but it is placed in front of the driver's face by irradiating near infrared light from the near infrared LED 13a. As shown in FIG. 2B, the image picked up with the aperture of the camera 13b appears as two adjacent illuminated points of the eye (black eye). Using this image information (image signal), the coordinate computing unit 13c identifies two adjacent illuminated points as eyes from the image, calculates the position coordinates of both ears of the driver from the position of the eyes, and calculates the calculation. The result (coordinate information) is output from the coordinate output unit 13d to the sound synthesizer 14.

なお、近赤外光LED13aは、非可視光を発光しており、可視光を発光しない方が好ましく、可視光を発光する場合には、その可視光がドライバーに認識されないように減衰させるように可視光を透過させないフィルタなどを発光源に被せることが好ましい。また、近赤外光LED13aは、一つのLEDで充分な照度が得られない場合に、複数のLEDを並べて設置してもよい。   The near-infrared light LED 13a emits invisible light and preferably does not emit visible light. When emitting visible light, the near-infrared light LED 13a attenuates the visible light so that it is not recognized by the driver. It is preferable to cover the light emitting source with a filter that does not transmit visible light. In addition, the near-infrared light LED 13a may be installed side by side when a single LED cannot provide sufficient illuminance.

音合成装置14は、内部で音信号を変換してスピーカ15a,15bからそれぞれ出力させる機能を有している。音合成装置14は、車外集音装置11および車内集音装置12によって収集されたそれぞれオリジナルな音(元の音)を、ドライバー位置特定装置13から入力されたドライバーの両耳の座標情報に対応する場所でそれぞれの音データの位相が元の音180度反転するように変換すると共に、変換する音データの振幅を調整することにより、車外音および車内音の音量比率をそれぞれ適宜調整してスピーカ15a,15bに音信号をそれぞれ出力する。このときの音量比率は、予め複数種定められて選択的に用いてもよく、音量比率を外部から入力指定可能とする音量比率指定手段(図示せず)を設けることも可能である。   The sound synthesizer 14 has a function of internally converting sound signals and outputting them from the speakers 15a and 15b. The sound synthesizer 14 corresponds to the coordinate information of both ears of the driver inputted from the driver position specifying device 13 with the original sounds (original sounds) collected by the outside sound collecting device 11 and the inside sound collecting device 12. The sound data is converted so that the phase of each sound data is inverted by 180 degrees at the place where the sound is to be transmitted, and the volume ratio between the sound outside the vehicle and the sound inside the vehicle is adjusted as appropriate by adjusting the amplitude of the sound data to be converted. Sound signals are output to 15a and 15b, respectively. At this time, a plurality of types of volume ratios may be determined in advance and selectively used, and a volume ratio designating unit (not shown) that enables input of the volume ratio from the outside can be provided.

図3(a)は、本実施形態の車両環境音調整装置10において、各処理を行う構成部材の設置例を模式的に示す側面図、図3(b)はその平面図である。   FIG. 3A is a side view schematically showing an installation example of components that perform each process in the vehicle environmental sound adjusting device 10 of the present embodiment, and FIG. 3B is a plan view thereof.

図3(a)および図3(b)に示すように、車両外側の右側に車外集音装置11aが設けられ、車両内側でドライバーの右側に右側用車内集音手段としての車内集音装置12aが設けられており、車両外側の左側に車外集音装置11bが設けられ、車両内側でドライバーの左側に左側用車内集音手段としての車内集音装置12bが設けられている。また、車外集音装置11aおよび車内集音装置12aで集音された音A1,A2は音合成装置14から右耳用音出力手段としてのスピーカ15aを介してドライバーの右耳に音B1として音声出力され、車外集音装置11bおよび車内集音装置12bで集音された音A1,A2は音合成装置14を介して左耳用音出力手段としてのスピーカ15bからドライバー(運転者)の左耳に音B2として音声出力される。この構成により、音源の方向性を損なうことなく、ドライバーに音量や音出力位置を調整後の音を聞かせることが可能となる。   As shown in FIGS. 3 (a) and 3 (b), an outside sound collecting device 11a is provided on the right side outside the vehicle, and an inside sound collecting device 12a as in-vehicle sound collecting means for the right side is provided on the right side of the driver inside the vehicle. A vehicle outside sound collecting device 11b is provided on the left side outside the vehicle, and a vehicle inside sound collecting device 12b is provided on the left side of the driver inside the vehicle as left side vehicle sound collecting means. The sounds A1 and A2 collected by the outside sound collecting device 11a and the inside sound collecting device 12a are sounded as sound B1 from the sound synthesizing device 14 to the right ear of the driver through the speaker 15a as right sound output means. The sounds A1 and A2 that are output and collected by the outside sound collecting device 11b and the inside sound collecting device 12b are output from the speaker 15b as sound output means for the left ear via the sound synthesizer 14 to the left ear of the driver (driver). Is output as sound B2. With this configuration, it is possible to let the driver hear the sound after adjusting the volume and sound output position without impairing the directionality of the sound source.

また、本実施形態では、図3に示すように、二つのスピーカ15a,15bが設けられており、スピーカ15aはドライバーの右耳の近くに配置されて右耳に音データを音声出力し、スピーカ15bはドライバーの左耳の近くに配置されて左耳に音データを音声出力する。この構成により、スピーカ15a,15bから発する音の拡散を抑えることが可能となり、また、各スピーカ15a,15bに指向性を持たせることにより、ドライバーのみに必要な音のみ届き、この各スピーカ15a,15bからの音が同乗者に届かないようにして、同乗者の会話やラジオ聴取にも影響を与えないようにできる。   In the present embodiment, as shown in FIG. 3, two speakers 15a and 15b are provided. The speaker 15a is arranged near the right ear of the driver and outputs sound data to the right ear as a speaker. 15b is arranged near the driver's left ear and outputs sound data to the left ear. With this configuration, it is possible to suppress the diffusion of sound emitted from the speakers 15a and 15b. Also, by providing the speakers 15a and 15b with directivity, only necessary sounds reach only the driver. It is possible to prevent the sound from 15b from reaching the passenger so as not to affect the passenger's conversation and radio listening.

さらに、本実施形態では、図3に示すように、ドライバー前方の車体の屋根裏(天井側)にカメラ13bがドライバーの顔正面を向くように設置されている。この構成によって、ドライバー正面の顔付近の撮影を可能にし、眼および耳の位置を特定することが可能となる。   Furthermore, in this embodiment, as shown in FIG. 3, the camera 13b is installed on the attic (ceiling side) of the vehicle body in front of the driver so as to face the front face of the driver. With this configuration, it is possible to photograph the vicinity of the face in front of the driver and specify the positions of the eyes and ears.

さらに、本実施形態によれば、ドライバーの位置を特定し、スピーカ15a,15bから音を音声出力することによって、イヤホンなどが不要(コードレス)となり、運転時にドライバーの動作の自由度を高めることができる。   Furthermore, according to the present embodiment, by specifying the position of the driver and outputting sound from the speakers 15a and 15b as sound, the earphone is not required (cordless), and the degree of freedom of the driver's operation during driving can be increased. it can.

さらに、本実施形態によれば、車内外から集めた各種音の位相を反転して音声合成することによってドライバーの耳に聞こえる音を相殺することや音量を調節することが可能となり、運転に必要な音情報を確保しつつ、車内の会話やラジオ視聴を成立させることができる。   Furthermore, according to the present embodiment, it is possible to cancel the sound heard by the driver's ear and adjust the volume by inverting the phase of various sounds collected from inside and outside the vehicle and synthesizing the sound, which is necessary for driving. In-vehicle conversation and radio viewing can be established while ensuring sound information.

図4に、元の音の波形と音合成装置14による音調整後の音の波形との関係を示している。なお、ここでは、横軸は時間、縦軸は振幅を示している。   FIG. 4 shows the relationship between the original sound waveform and the sound waveform after sound adjustment by the sound synthesizer 14. Here, the horizontal axis indicates time, and the vertical axis indicates amplitude.

図4(a)は元の音の波形であり、図4(b)はそれを相殺するためにタイムラグ(実際にドライバーの耳に音が届くまでの時間差の補正分t1−t0)を加味して波形を反転させたものである。元の音を相殺するためには、元の波形から180度反転させて振幅は元の音と同じに設定する必要がある。   4 (a) shows the waveform of the original sound, and FIG. 4 (b) shows the time lag (time difference correction time t1-t0 until the sound actually reaches the driver's ear) in order to cancel it. The waveform is inverted. In order to cancel the original sound, it is necessary to invert 180 degrees from the original waveform and set the amplitude to be the same as the original sound.

図4(c)は元の音を弱める場合の波形の例を示しており、図4(d)は元の音を強める場合の波形の例を示している。元の音を弱める場合には、元の波形から180度反転させて振幅は元の音よりも小さく設定する。また、元の音を強める場合には、元の波形から180度反転させて振幅は少なくとも元の音の2倍以上に設定する。   FIG. 4C shows an example of a waveform when the original sound is weakened, and FIG. 4D shows an example of a waveform when the original sound is strengthened. In order to weaken the original sound, the amplitude is set smaller than the original sound by inverting 180 degrees from the original waveform. When the original sound is strengthened, the amplitude is set to at least twice the original sound by reversing the original waveform by 180 degrees.

図4(e)は、図4(d)の波形を用いてドライバーの耳に入る音を強めた場合の波形を示している。破線は元の音と図4(d)の波形であり、実線は図4(d)の波形によって強められた波形である。   FIG. 4 (e) shows a waveform when the sound entering the driver's ear is strengthened using the waveform of FIG. 4 (d). The broken line is the original sound and the waveform in FIG. 4D, and the solid line is the waveform strengthened by the waveform in FIG.

なお、ここでは、集音された場所からドライバーの両耳に届くまでの音の減衰は加味していないが、減衰を加味した波形を出力することは容易である。   Here, the attenuation of the sound from the collected location to the driver's ears is not taken into account, but it is easy to output a waveform that takes into account the attenuation.

以上のように、本実施形態によれば、車外集音装置11および車内集音装置12により収集された車外音A1と車内音A2の各音データの波形をそれぞれ、ドライバー位置特定装置13から入力されるドライバー両耳の座標情報に対応する場所で、その各音データが元の音声波形に対して位相が180度反転するように変換して元の音声波形に重畳させると共に、変換した各音データの振幅を音量調整することにより、車外音および車内音の各音量比率を最適に調整することができる。この場合に、音量を小さくする場合は位相を180°反転させて振幅を小さくし、オリジナルの音を完全に打ち消す場合は振幅を同じにして位相を180°反転させ、音量を大きくする場合は位相を180°反転させて振幅を大きくする。また、指向性を有するスピーカ15a、15bをドライバーの耳の近くに配置してドライバーに音B1,B2を出力することができる。例えば、車外音の音量比を車内音の音量比よりも高く設定することによって、車外音、特に、踏切音や横断信号の音、周囲を走行する車両が発するクラクション音などの危険状況を認知するための各種環境音を、必要以上に大音量を発することなく、ドライバーに確実に届け、かつ、車内音も必要最小限にドライバーに届けることにより、自動車運転時の安全性を高めることができる。したがって、運転に必要な車外音、特に、危険状況を認知するために必要な音を、必要以上に大音量を発することなく、ドライバーに確実に届けて車両運転時の安全性を高めることができる。   As described above, according to the present embodiment, the waveforms of the sound data of the outside sound A1 and the inside sound A2 collected by the outside sound collecting device 11 and the inside sound collecting device 12 are input from the driver position specifying device 13, respectively. In the place corresponding to the coordinate information of the driver's both ears, each sound data is converted so that the phase is inverted by 180 degrees with respect to the original sound waveform and superimposed on the original sound waveform, and each converted sound By adjusting the volume of the data amplitude, it is possible to optimally adjust the volume ratio of the sound outside the vehicle and the sound inside the vehicle. In this case, when the volume is reduced, the phase is inverted by 180 ° to reduce the amplitude, when the original sound is completely canceled, the amplitude is the same and the phase is inverted by 180 °, and when the volume is increased, the phase is increased. Is rotated 180 ° to increase the amplitude. Further, the speakers 15a and 15b having directivity can be arranged near the driver's ears to output the sounds B1 and B2 to the driver. For example, by setting the volume ratio of outside sound higher than the volume ratio of inside sound, it recognizes dangerous situations such as outside sound, especially sound of crossing and crossing signals, horn sound generated by vehicles traveling around. Therefore, it is possible to improve the safety when driving a car by reliably delivering various environmental sounds to the driver without generating louder sound than necessary and also delivering the in-vehicle sound to the driver to the minimum necessary. Therefore, it is possible to improve the safety when driving the vehicle by reliably delivering to the driver the sound outside the vehicle necessary for driving, especially the sound necessary for recognizing the dangerous situation, without producing a louder sound than necessary. .

なお、本実施形態では、ドライバー位置特定装置13として、カメラ13b、近赤外光LED13a、座標演算器13cおよび座標出力部13dによって両耳の座標位置を演算する構成例を示したが、他の両耳の位置演算手法を用いることも可能であり、例えば正面顔の輪郭を画像中から探し出して両耳の位置を算出したり、ドライバーに発信機を付けて発信機から発振した電波から両耳の位置を算出する方法など本発明では両耳の位置演算手法は問わない。   In this embodiment, as the driver position specifying device 13, the configuration example in which the coordinate position of both ears is calculated by the camera 13b, the near infrared light LED 13a, the coordinate calculator 13c, and the coordinate output unit 13d is shown. It is also possible to use the binaural position calculation method, for example, to find the contour of the front face in the image and calculate the position of both ears, or attach the transmitter to the driver and the ears from the radio waves oscillated from the transmitter In the present invention, such as a method for calculating the position of both ears, any position calculation method for both ears may be used.

また、本実施形態では、音源の方向を加味するために車外集音装置11および車内集音装置12を左右に二つずつ設けたが、単に集音するだけであれば一つでも良く、また、さらに多くを設置(複数位置に複数の車外集音装置11および複数の車内集音装置12を設置)して精密に音を再現できるようにしてもよい。   Further, in the present embodiment, in-vehicle sound collecting device 11 and in-vehicle sound collecting device 12 are provided on each of the left and right in order to take into account the direction of the sound source. Furthermore, more sounds may be installed (a plurality of vehicle sound collectors 11 and a plurality of vehicle sound collectors 12 are installed at a plurality of positions) so that the sound can be accurately reproduced.

以上のように、本発明の好ましい実施形態を用いて本発明を例示してきたが、本発明は、この実施形態に限定して解釈されるべきものではない。本発明は、特許請求の範囲によってのみその範囲が解釈されるべきであることが理解される。当業者は、本発明の具体的な好ましい実施形態の記載から、本発明の記載および技術常識に基づいて等価な範囲を実施することができることが理解される。本明細書において引用した特許、特許出願および文献は、その内容自体が具体的に本明細書に記載されているのと同様にその内容が本明細書に対する参考として援用されるべきであることが理解される。   As mentioned above, although this invention has been illustrated using preferable embodiment of this invention, this invention should not be limited and limited to this embodiment. It is understood that the scope of the present invention should be construed only by the claims. It is understood that those skilled in the art can implement an equivalent range based on the description of the present invention and the common general technical knowledge from the description of specific preferred embodiments of the present invention. Patents, patent applications, and documents cited herein should be incorporated by reference in their entirety, as if the contents themselves were specifically described herein. Understood.

本発明は、ドライバーや同乗者の安全を守るために自動車やトラック、さらには電車などの車両に搭載される車両搭載装置の分野において、車外音および車内音の各音量比率を調整してドライバーの両耳への音入力を最適化することが可能となり、踏切音や横断信号音、周囲を走行する車両が発するクラクション音など、車両走行中に周囲の危険状況を確認するために必要な各種環境音を確実にドライバーが聞き取ることができるように音量調整して、車両運転時の安全性をより高めることができる。   In the field of vehicle-mounted devices that are mounted on vehicles such as automobiles, trucks, and even trains in order to protect the safety of drivers and passengers, the present invention adjusts the volume ratio of outside sound and inside sound of the driver. It is possible to optimize the sound input to both ears, and various environments necessary for checking the danger situation of the surroundings while driving the vehicle, such as crossing sound, crossing signal sound, horn sound generated by the vehicle traveling around The volume can be adjusted so that the driver can hear the sound reliably, and the safety when driving the vehicle can be further enhanced.

本発明の実施形態に係る車両環境音調整装置の要部構成例を示すブロック図である。It is a block diagram which shows the principal part structural example of the vehicle environmental sound adjustment apparatus which concerns on embodiment of this invention. 赤目を利用した両眼位置の抽出を説明するための概念図であり、(a)は、人の顔を正面から通常に撮像した場合の画像例を示す図であり、(b)は、LEDからの近赤外光を顔正面に照射して顔正面に設置したカメラの絞りを絞って撮像した場合の画像例を示す図である。It is a conceptual diagram for demonstrating extraction of the binocular position using a red eye, (a) is a figure which shows the example of an image at the time of imaging a person's face normally from the front, (b) is LED It is a figure which shows the example of an image at the time of irradiating the near-infrared light from to the face front, and narrowing down the aperture of the camera installed in front of the face. (a)は、本実施形態の車両環境音調整装置において、各処理を行う構成部材の設置例を模式的に示す側面図、(b)はその平面図である。(A) is the side view which shows typically the installation example of the structural member which performs each process in the vehicle environmental sound adjustment apparatus of this embodiment, (b) is the top view. 元の音の波形と音合成装置による音調整後の波形との関係を示す波形図であり、(a)は元の音の波形を示す波形図、(b)は元の音を相殺するための音調整後の波形を示す波形図、(c)は元の音を弱める場合の波形例を示す波形図、(d)は元の音を強める場合の波形例を示す波形図、(e)は(d)の波形を用いてドライバーの耳に入る音を強める場合の波形例を示す波形図である。It is a waveform diagram showing the relationship between the waveform of the original sound and the waveform after sound adjustment by the sound synthesizer, (a) is a waveform diagram showing the waveform of the original sound, (b) is for canceling the original sound (C) is a waveform diagram showing a waveform example when the original sound is weakened, (d) is a waveform diagram showing a waveform example when the original sound is strengthened, (e) FIG. 6 is a waveform diagram showing an example of a waveform when a sound entering a driver's ear is strengthened using the waveform of (d).

符号の説明Explanation of symbols

10 車両環境音調整装置
11,11a,11b 車外集音装置
12,12a,12b 車内集音装置
13Dライバー位置特定装置
13a 近赤外光LED
13b カメラ
13c 座標演算器
13d 座標出力部
14 音合成装置
15a,15b スピーカ
A1,A2 音源から発せられた音
B1,B2 本発明により調整された音
DESCRIPTION OF SYMBOLS 10 Vehicle environmental sound adjustment device 11, 11a, 11b Outside-vehicle sound collection device 12, 12a, 12b In-vehicle sound collection device 13D Liver position specification device 13a Near-infrared light LED
13b Camera 13c Coordinate calculator 13d Coordinate output unit 14 Sound synthesizer 15a, 15b Speaker A1, A2 Sound emitted from sound source B1, B2 Sound adjusted by the present invention

Claims (15)

車外音を集音する車外集音手段と、
車内音を集音する車内集音手段と、
ドライバーの耳位置を特定するドライバー位置特定手段と、
該車外集音手段および該車内集音手段で集音した車外音および車内音をそれぞれ、該ドライバー位置特定手段からのドライバーの耳位置情報に対応した各音量比率に調整する音合成手段と、
該音合成手段で音合成した音をドライバーの耳位置に出力する音出力手段とを有する運転環境音調整装置。
Vehicle sound collecting means for collecting sound outside the vehicle;
In-vehicle sound collection means for collecting in-vehicle sound,
A driver position specifying means for specifying a driver's ear position;
Sound synthesizing means for adjusting the outside sound and the inside sound collected by the outside sound collecting means and the inside sound collecting means to respective volume ratios corresponding to the ear position information of the driver from the driver position specifying means;
A driving environment sound adjusting device having sound output means for outputting the sound synthesized by the sound synthesis means to the ear position of the driver.
前記音合成手段は、前記集音した車外音および車内音を、前記ドライバーの耳位置情報に対応する場所でそれぞれの音データの位相が180度反転するように変換すると共に、該変換する各音データの振幅を調整することにより、前記車外音および車内音の各音量比率を調整する請求項1に記載の運転環境音調整装置。   The sound synthesizer converts the collected outside sound and in-vehicle sound so that the phase of each sound data is inverted by 180 degrees at a location corresponding to the driver's ear position information, and each sound to be converted The driving environment sound adjusting device according to claim 1, wherein the volume ratio of the outside sound and the inside sound is adjusted by adjusting an amplitude of data. 前記車外集音手段および前記車内集音手段はそれぞれ、前記ドライバーに対して、車両の右側に設けられた右側用集音手段と、該車両の左側に設けられた左側用集音手段とを有し、
前記音合成手段は、前記集音した該右側および該左側の音をそれぞれ、前記ドライバー位置特定手段からのドライバーの両耳位置情報に対応した各音量比率に調整する請求項1または2に記載の運転環境音調整装置。
Each of the outside sound collecting means and the inside sound collecting means has a right sound collecting means provided on the right side of the vehicle and a left sound collecting means provided on the left side of the vehicle with respect to the driver. And
3. The sound synthesis unit according to claim 1, wherein the sound synthesis unit adjusts the collected sounds on the right side and the left side to respective volume ratios corresponding to the binaural position information of the driver from the driver position specifying unit. Driving environment sound adjustment device.
前記音合成手段に対して、前記車外音および車内音の各音量比率と右側および左側音の各音量比率とのうち少なくともいずれかの各音量比率を指定可能とする音量比率指定手段を更に有する請求項1〜3のいずれかに記載の運転環境音調整装置。   And further comprising a volume ratio designating unit that allows the sound synthesizing unit to designate at least one of the volume ratios of the outside and in-vehicle sounds and the right and left volume ratios. The driving environment sound adjusting device according to any one of Items 1 to 3. 前記音合成手段は、前記車外音および車内音のうち該車内音を打ち消して該車外音を強調するように音合成する請求項2または4に記載の運転環境音調整装置。   5. The driving environment sound adjusting device according to claim 2, wherein the sound synthesizing unit synthesizes the sound so as to cancel out the vehicle interior sound and emphasize the vehicle exterior sound out of the vehicle exterior sound and the vehicle interior sound. 前記音合成手段は、前記右側および左側音の各音量比率を調整して音源の位置および方向性を調整可能とする請求項3または4に記載の運転環境音調整装置。   5. The driving environment sound adjustment device according to claim 3, wherein the sound synthesis unit is capable of adjusting a position and directionality of a sound source by adjusting a volume ratio of the right and left sounds. 前記音出力手段は、ドライバー右耳側に配置されて該ドライバー右耳に右耳用の音出力を行う右耳用音出力手段と、ドライバー左耳側に配置されて該ドライバー左耳に左耳用の音出力を行う左耳用音出力手段とを有する請求項1または3に記載の運転環境音調整装置。   The sound output means is disposed on the right ear side of the driver and outputs sound for the right ear to the right ear of the driver, and the sound output means for right ear is disposed on the driver left ear side of the left ear to the driver left ear. The driving environment sound adjusting device according to claim 1, further comprising left ear sound output means for performing sound output for a vehicle. 前記右耳用音出力手段は、前記右側用集音手段からの音信号に基づいて右耳用に音出力し、前記左耳用音出力手段は、前記左側用集音手段からの音信号を用いて左耳用に音出力する請求項7に記載の運転環境音調整装置。   The right ear sound output means outputs sound for the right ear based on the sound signal from the right sound collection means, and the left ear sound output means outputs the sound signal from the left sound collection means. The driving environment sound adjusting device according to claim 7, wherein the sound is output for the left ear. 前記右耳用音出力手段および前記左耳用音出力手段はそれぞれ、指向性を有するスピーカである請求項7または8に記載の運転環境音調整装置。   The driving environment sound adjusting device according to claim 7 or 8, wherein each of the right ear sound output means and the left ear sound output means is a directional speaker. 前記ドライバー位置特定手段は、前記ドライバーの顔正面に対して光を発光する発光手段と、該ドライバーの正面顔を撮像するカメラ手段と、該カメラ手段で撮像したドライバーの正面顔の撮像情報から両耳の位置座標を算出する座標演算手段と、該座標演算手段で算出した座標情報を前記音合成手段に出力する座標出力手段とを有する請求項1に記載の運転環境音調整装置。   The driver position specifying means includes both a light emitting means for emitting light to the front face of the driver, a camera means for taking an image of the front face of the driver, and imaging information of the front face of the driver taken by the camera means. The driving environment sound adjusting device according to claim 1, further comprising coordinate calculation means for calculating ear position coordinates and coordinate output means for outputting coordinate information calculated by the coordinate calculation means to the sound synthesis means. 前記発光手段は、非可視光の近赤外光を発光する発光素子である請求項10に記載の運転環境音調整装置。   The driving environment sound adjusting device according to claim 10, wherein the light-emitting means is a light-emitting element that emits invisible near-infrared light. 前記カメラ手段は、前記ドライバーの両眼で反射した光を、その撮像画像上で二つの隣り合った光点として撮像する請求項10または11に記載の運転環境音調整装置。   The driving environment sound adjusting device according to claim 10 or 11, wherein the camera means images light reflected by both eyes of the driver as two adjacent light spots on the captured image. 前記座標演算手段は、前記カメラ手段による撮像画像上でドライバー両眼反射光のドライバー両眼位置からドライバー両耳の位置座標を算出する請求項10〜12のいずれかに記載の運転環境音調整装置。   The driving environment sound adjustment device according to any one of claims 10 to 12, wherein the coordinate calculation means calculates position coordinates of a driver's binaural from a driver's binocular position of reflected light of the driver's binocular on an image captured by the camera means. . 前記座標演算手段は、前記カメラ手段で撮像した撮像画像上からドライバー正面顔の輪郭を探し出し、該ドライバー正面顔の輪郭に基づいてドライバー両耳の位置情報を算出する請求項10〜12のいずれかに記載の運転環境音調整装置。   The coordinate calculation means finds the outline of the driver's front face from the captured image taken by the camera means, and calculates position information of the driver's ears based on the outline of the driver's front face. The driving environment sound adjusting device according to 1. 前記ドライバー位置特定手段は、前記ドライバーの両耳にそれぞれ配置された発信機と、該発信機から発信した電波から発信源の両耳の位置を算出する座標演算手段と、該座標演算手段で算出した座標情報を前記音合成手段に出力する座標出力手段とを有する請求項1に記載の運転環境音調整装置。   The driver position specifying means includes a transmitter disposed in each ear of the driver, a coordinate calculation means for calculating the position of both ears of the transmission source from radio waves transmitted from the transmitter, and calculated by the coordinate calculation means. The driving environment sound adjusting device according to claim 1, further comprising coordinate output means for outputting the coordinate information to the sound synthesizing means.
JP2004357320A 2004-12-09 2004-12-09 Operating environmental sound adjusting device Withdrawn JP2006160160A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004357320A JP2006160160A (en) 2004-12-09 2004-12-09 Operating environmental sound adjusting device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004357320A JP2006160160A (en) 2004-12-09 2004-12-09 Operating environmental sound adjusting device

Publications (1)

Publication Number Publication Date
JP2006160160A true JP2006160160A (en) 2006-06-22

Family

ID=36662635

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004357320A Withdrawn JP2006160160A (en) 2004-12-09 2004-12-09 Operating environmental sound adjusting device

Country Status (1)

Country Link
JP (1) JP2006160160A (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009015787A (en) * 2007-07-09 2009-01-22 Denso Corp Apparatus for recognizing approach of mobile body
JP2009258802A (en) * 2008-04-11 2009-11-05 Nissan Motor Co Ltd Outer-vehicle information providing device and outer-vehicle information providing method
JP2011055076A (en) * 2009-08-31 2011-03-17 Fujitsu Ltd Voice communication device and voice communication method
CN102745145A (en) * 2012-07-22 2012-10-24 李良杰 Internal and external dual-monitoring system for bus door
JP2013149080A (en) * 2012-01-19 2013-08-01 Denso Corp Voice output device
JP2015231063A (en) * 2014-06-03 2015-12-21 矢崎総業株式会社 On-vehicle acoustic device
JP2020140044A (en) * 2019-02-27 2020-09-03 アルパイン株式会社 Active noise control system
CN111754969A (en) * 2020-07-06 2020-10-09 歌尔科技有限公司 Noise reduction method and device, electronic equipment and noise reduction system
CN113997863A (en) * 2021-11-24 2022-02-01 北京字节跳动网络技术有限公司 Data processing method and device and vehicle

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009015787A (en) * 2007-07-09 2009-01-22 Denso Corp Apparatus for recognizing approach of mobile body
JP2009258802A (en) * 2008-04-11 2009-11-05 Nissan Motor Co Ltd Outer-vehicle information providing device and outer-vehicle information providing method
JP2011055076A (en) * 2009-08-31 2011-03-17 Fujitsu Ltd Voice communication device and voice communication method
JP2013149080A (en) * 2012-01-19 2013-08-01 Denso Corp Voice output device
CN102745145A (en) * 2012-07-22 2012-10-24 李良杰 Internal and external dual-monitoring system for bus door
JP2015231063A (en) * 2014-06-03 2015-12-21 矢崎総業株式会社 On-vehicle acoustic device
JP2020140044A (en) * 2019-02-27 2020-09-03 アルパイン株式会社 Active noise control system
JP7128588B2 (en) 2019-02-27 2022-08-31 アルパイン株式会社 Active noise control system
CN111754969A (en) * 2020-07-06 2020-10-09 歌尔科技有限公司 Noise reduction method and device, electronic equipment and noise reduction system
CN111754969B (en) * 2020-07-06 2023-06-16 歌尔科技有限公司 Noise reduction method and device, electronic equipment and noise reduction system
CN113997863A (en) * 2021-11-24 2022-02-01 北京字节跳动网络技术有限公司 Data processing method and device and vehicle

Similar Documents

Publication Publication Date Title
US10536791B2 (en) Vehicular sound processing system
US10351148B2 (en) System and method for sound direction detection in a vehicle
CN107018467B (en) System and method for external sound synthesis for a vehicle
US7268677B2 (en) Information processing system
US9743213B2 (en) Enhanced auditory experience in shared acoustic space
CN110691299B (en) Audio processing system, method, apparatus, device and storage medium
US9734699B2 (en) System for providing alerts to vehicle occupants
KR20000070673A (en) Vehicle collision warning system
JP2003220911A (en) Alarm device for vehicle
US11265669B2 (en) Electronic device, method and computer program
JP2009124540A (en) Vehicle call device, and calling method
EP3495942B1 (en) Head-mounted display and control method thereof
KR20200012226A (en) Vehicle and method for controlling thereof
JP2006160160A (en) Operating environmental sound adjusting device
JP7040513B2 (en) Information processing equipment, information processing method and recording medium
JP5172875B2 (en) Audio output system
KR20210096879A (en) Vehicle and method for controlling thereof
KR102011006B1 (en) Apparatus for generating a virtual sound for vehicle and control method thereof
KR102040918B1 (en) Apparatus for generating a virtual sound for vehicle
CN110010138B (en) Head-mounted display and control method thereof
KR20170054714A (en) Beep transmission system and method for detecting a noise of a car exterior
JP2006103601A (en) Loud speaker mounting body of motorcycle
EP4273832A1 (en) A vehicle and a system and method for use with a vehicle
JPH10236227A (en) Vehicular warning device
JP4822073B2 (en) Vehicle approach warning device

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20080304