JP5303998B2 - Outside vehicle information providing apparatus and outside vehicle information providing method - Google Patents

Outside vehicle information providing apparatus and outside vehicle information providing method Download PDF

Info

Publication number
JP5303998B2
JP5303998B2 JP2008097177A JP2008097177A JP5303998B2 JP 5303998 B2 JP5303998 B2 JP 5303998B2 JP 2008097177 A JP2008097177 A JP 2008097177A JP 2008097177 A JP2008097177 A JP 2008097177A JP 5303998 B2 JP5303998 B2 JP 5303998B2
Authority
JP
Japan
Prior art keywords
sound
range
vehicle
information
outside
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008097177A
Other languages
Japanese (ja)
Other versions
JP2009251799A (en
Inventor
充伸 神沼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2008097177A priority Critical patent/JP5303998B2/en
Publication of JP2009251799A publication Critical patent/JP2009251799A/en
Application granted granted Critical
Publication of JP5303998B2 publication Critical patent/JP5303998B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
  • Stereophonic System (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Traffic Control Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an outer-vehicle information providing device capable of providing the optimal external sound information of a vehicle corresponding to circumstances to a driver without burdening the driver. <P>SOLUTION: The outer-vehicle information providing device determines a sound presentation range as the input/output range of a sound to be presented to a driver and a sound collection range by a microphone 11 installed in the own vehicle for collecting the external sound of the own vehicle by a sound presentation range/sound collection range switching device 15 according to the current traveling situations of the own vehicle, and when any object existing around the own vehicle is detected by an object detection sensor 12 installed in the own vehicle, the outer-vehicle information providing device performs the mapping of the sound collected by the microphone 11 and a virtual sound representing an object existing in the sound presentation range and sound collection range determined by the sound presentation range/sound collection range switching device 15 to a space time, and presents sound information through an information presentation part 17 to the driver. <P>COPYRIGHT: (C)2010,JPO&amp;INPIT

Description

本発明は、車両外部の情報を運転者に対して提供する車外情報提供装置及び車外情報提供方法に関する。   The present invention relates to an out-of-vehicle information providing apparatus and an out-of-vehicle information providing method for providing information outside a vehicle to a driver.

従来、運転者に対して車両外部で発生する危険を高速且つ自然に告知することを目的として、音によって危険の存在を提示することが行われている。例えば、かかる技術としては、緊急車両の音を集音して運転者に当該緊急車両の存在を気付かせるものが提案されている。   2. Description of the Related Art Conventionally, the presence of danger is presented by sound for the purpose of notifying a driver of danger occurring outside the vehicle at high speed and naturally. For example, as such a technique, a technique has been proposed in which the sound of an emergency vehicle is collected to make the driver aware of the presence of the emergency vehicle.

しかしながら、全てのシーンにおいて、車両外部の音情報を運転者に提示することは、運転者の注意を散漫にさせる可能性が高く好ましくないため、提示する音を取捨選択する必要がある。従来の技術においては、提示する音を、踏み切りの音や緊急車両の音等、いくつかの音に限定して運転者に対して情報提供を行っているが、これでは限定された状態においてのみ外部の危険を音で知らせることしかできず、例えばより緊急度の高い追い越し車両等の存在を運転者に対して的確に知らせることはできないという問題があった。   However, in all scenes, it is not preferable to present the sound information outside the vehicle to the driver because it is likely to distract the driver's attention, so it is necessary to select the sound to be presented. In the conventional technology, the information to be presented is provided to the driver by limiting the sounds to be presented to some sounds such as crossing sounds and emergency vehicle sounds. There is a problem that external danger can only be notified by sound, for example, it is impossible to accurately notify the driver of the presence of an overtaking vehicle or the like with a higher degree of urgency.

そこで、本発明は、上述した実情に鑑みて提案されたものであり、運転者に負担をかけることなく、状況に応じた最適な車両外部の音情報を運転者に対して提供することができる車外情報提供装置及び車外情報提供方法を提供することを目的とする。   Therefore, the present invention has been proposed in view of the above-described circumstances, and can provide the driver with sound information outside the vehicle that is optimal for the situation without burdening the driver. An object of the present invention is to provide a vehicle outside information providing apparatus and a vehicle outside information providing method.

本発明では、現在の自車両の走行状況に応じて、運転者に提示する音の入出力範囲である音提示範囲、及び自車両に設置されて自車両外部の音を集音する集音手段による集音範囲を決定し、自車両周囲に存在する物体を検出した場合に、前記集音手段によって集音された音、及び決定された音提示範囲及び集音範囲内に存在する物体を表す仮想音を時空間にマッピングして、運転者に音情報を提示することにより、上述の課題を解決する。   In the present invention, the sound presenting range which is the input / output range of the sound presented to the driver according to the current traveling state of the own vehicle, and the sound collecting means which is installed in the own vehicle and collects the sound outside the own vehicle Represents the sound collected by the sound collecting means, and the sound presenting range and the object existing in the sound collecting range when an object existing around the host vehicle is detected. The above-mentioned problem is solved by mapping virtual sound to space-time and presenting sound information to the driver.

本発明にかかる車外情報提供装置及び車外情報提供方法によれば、自車両の走行状況に応じて不要な情報を提示しないことにより、全ての音情報が運転者に提示されてしまうことがなくなるので、運転者の注意を散漫にさせる可能性を低減して当該運転者に負担をかけることなく、状況に応じた最適な車両外部の音情報を提供することができる。   According to the out-of-vehicle information providing apparatus and out-of-vehicle information providing method according to the present invention, it is possible to prevent all sound information from being presented to the driver by not presenting unnecessary information according to the traveling state of the host vehicle. Thus, the possibility of distracting the driver's attention can be reduced, and optimal sound information outside the vehicle can be provided according to the situation without placing a burden on the driver.

以下、本発明の好適な実施形態としての車外情報提供装置について具体的に説明する。   Hereinafter, an outside information providing apparatus as a preferred embodiment of the present invention will be specifically described.

[車外情報提供装置の構成]
本発明の実施形態として示す車外情報提供装置は、自車両外部に設置されたマイクロホンやセンサを用いて自車両外部の音を車速等の車両状態に応じて収集し、音情報として運転者に対して提供するものである。
[Configuration of information providing device outside the vehicle]
The outside information providing apparatus shown as an embodiment of the present invention collects sounds outside the own vehicle according to the vehicle state such as the vehicle speed using a microphone and a sensor installed outside the own vehicle, and provides the driver with sound information as sound information. Provided.

具体的には、車外情報提供装置は、図1に示すように、自車両外部の音を集音するマイクロホン11と、自車両周囲に存在する物体を検出する物体検出センサ12と、自車両周囲の環境を検出する環境検出部13と、自車両に関係のある各種情報を判定する情報判定部14と、運転者に提示する音の入出力範囲である音提示範囲やマイクロホン11による集音範囲を切り替える音提示範囲及び集音範囲切替装置15と、出力する音のタイミングや位置を決定するタイミング及び位置決定部16と、運転者に音情報を提示する情報提示部17とを備える。   Specifically, as shown in FIG. 1, the vehicle information providing apparatus includes a microphone 11 that collects sound outside the host vehicle, an object detection sensor 12 that detects an object existing around the host vehicle, An environment detection unit 13 that detects the environment of the vehicle, an information determination unit 14 that determines various types of information related to the vehicle, a sound presentation range that is an input / output range of sound presented to the driver, and a sound collection range by the microphone 11 A sound presentation range and sound collection range switching device 15, a timing and position determination unit 16 for determining the timing and position of the sound to be output, and an information presentation unit 17 for presenting sound information to the driver.

なお、車外情報提供装置は、これら各部のうち、少なくとも、マイクロホン11、物体検出センサ12、環境検出部13における車載機器操作信号出力部13b、情報判定部14における移動方向検出部14b、音提示範囲及び集音範囲切替装置15、タイミング及び位置決定部16、及び情報提示部17を備えていればよい。   The vehicle information providing apparatus includes at least a microphone 11, an object detection sensor 12, an in-vehicle device operation signal output unit 13b in the environment detection unit 13, a movement direction detection unit 14b in the information determination unit 14, and a sound presentation range among these units. And a sound collection range switching device 15, a timing and position determination unit 16, and an information presentation unit 17.

マイクロホン11は、自車両に設置され、当該自車両外部の音を集音する。このマイクロホン11としては、自車両外部の音を集音して電気信号に変換する一般的な構成のものを用いることができる。ただし、マイクロホン11としては、2個以上のマイクロホンを配設することを要件とする。このマイクロホン11によって集音されて電気信号に変換された音情報は、音提示範囲及び集音範囲切替装置15に供給される。なお、このマイクロホン11の具体的な設置例については、後述するものとする。   The microphone 11 is installed in the own vehicle and collects sound outside the own vehicle. As the microphone 11, a microphone having a general configuration that collects sound outside the host vehicle and converts it into an electric signal can be used. However, the microphone 11 is required to be provided with two or more microphones. The sound information collected by the microphone 11 and converted into an electric signal is supplied to the sound presentation range and sound collection range switching device 15. A specific installation example of the microphone 11 will be described later.

物体検出センサ12は、自車両に設置され、当該自車両周囲に存在する物体を検出する。この物体検出センサ12としては、例えばミリ波レーダや超音波センサ等、遠距離及び近距離に位置する物体を検出するセンサを複数個組み合わせて構成することができる。また、物体検出センサ12は、車外カメラによって物体を検出するものであってもよい。この物体検出センサ12によって検出された物体情報は、音提示範囲及び集音範囲切替装置15に供給される。なお、この物体検出センサ12の具体的な設置例については、後述するものとする。   The object detection sensor 12 is installed in the host vehicle and detects an object existing around the host vehicle. The object detection sensor 12 can be configured by combining a plurality of sensors that detect objects located at a long distance and a short distance, such as a millimeter wave radar and an ultrasonic sensor. Moreover, the object detection sensor 12 may detect an object with a camera outside the vehicle. The object information detected by the object detection sensor 12 is supplied to the sound presentation range and sound collection range switching device 15. A specific installation example of the object detection sensor 12 will be described later.

環境検出部13は、自車両内に構築されたCAN(Controller Area Network)情報から得られる車速パルスやステアリング角度等の情報、及び自車両内に設置されたカメラによって撮像される映像に基づいて、自車両周囲の環境を検出する。具体的には、環境検出部13は、ナビゲーションの際に用いられる自車両の位置情報を検出する位置情報検出部13aと、車速パルス、ステアリング角度、シフト位置等を示す車載機器操作信号を出力する車載機器操作信号出力部13bと、カメラや当該カメラによって撮像された画像を認識する画像出力部13cとを有する。このような環境検出部13は、検出した環境を示す環境情報を情報判定部14に供給する。   The environment detection unit 13 is based on information such as a vehicle speed pulse and a steering angle obtained from CAN (Controller Area Network) information built in the host vehicle, and an image captured by a camera installed in the host vehicle. Detect the environment around your vehicle. Specifically, the environment detection unit 13 outputs a position information detection unit 13a that detects the position information of the host vehicle used during navigation, and an in-vehicle device operation signal that indicates a vehicle speed pulse, a steering angle, a shift position, and the like. It has a vehicle-mounted device operation signal output unit 13b and an image output unit 13c that recognizes a camera and an image captured by the camera. Such an environment detection unit 13 supplies environment information indicating the detected environment to the information determination unit 14.

情報判定部14は、例えばCPU(Central Processing Unit)等の演算装置から構成され、環境検出部13によって検出された環境情報の内容に基づいて、自車両の移動方向(進行方向)等の自車両に関係のある各種情報を判定する。具体的には、情報判定部14は、環境検出部13における位置情報検出部13aによって検出された位置情報に基づいて、自車両を駐車可能な駐車場所を判定する駐車場所判定部14aと、環境検出部13における車載機器操作信号出力部13bから供給された車載機器操作信号に基づいて、自車両の移動方向を検出する移動方向検出部14bと、環境検出部13における画像出力部13cから供給された映像情報に基づいて、自車両周囲に存在する当該自車両に対して相対的に移動する物体を検出する移動物体検出部14cとを有する。このような情報判定部14は、判定した各種情報を音提示範囲及び集音範囲切替装置15に供給する。   The information determination unit 14 is configured by an arithmetic device such as a CPU (Central Processing Unit), for example, and based on the content of the environment information detected by the environment detection unit 13, the own vehicle such as the moving direction (traveling direction) of the own vehicle Various information related to the is determined. Specifically, the information determination unit 14 includes a parking place determination unit 14a that determines a parking place where the host vehicle can be parked based on the position information detected by the position information detection unit 13a in the environment detection unit 13, and the environment. Based on the in-vehicle device operation signal supplied from the in-vehicle device operation signal output unit 13 b in the detection unit 13, the movement direction detection unit 14 b that detects the movement direction of the host vehicle and the image output unit 13 c in the environment detection unit 13 And a moving object detection unit 14c for detecting an object that moves relative to the host vehicle around the host vehicle based on the video information. Such an information determination unit 14 supplies the determined various information to the sound presentation range and sound collection range switching device 15.

音提示範囲及び集音範囲切替装置15は、情報判定部14によって判定された各種情報の内容に基づいて、運転者に提示する音の入出力範囲である音提示範囲やマイクロホン11による集音範囲を決定し、決定した範囲となるようにシステムの動作を切り替える。音提示範囲及び集音範囲切替装置15は、切り替え内容を示す切替信号をタイミング及び位置決定部16に供給する。   The sound presentation range / sound collection range switching device 15 is based on the contents of various information determined by the information determination unit 14, and is a sound presentation range that is an input / output range of sounds presented to the driver or a sound collection range by the microphone 11. And switch the operation of the system so that it is within the determined range. The sound presentation range and sound collection range switching device 15 supplies a switching signal indicating the switching content to the timing and position determination unit 16.

タイミング及び位置決定部16は、音提示範囲及び集音範囲切替装置15から供給された切替信号に基づいて、運転者に提示するために出力する音のタイミングや、音の出力方向や距離等の位置を決定する。タイミング及び位置決定部16は、決定した内容を示す決定情報を情報提示部17に供給する。   Based on the switching signal supplied from the sound presentation range and sound collection range switching device 15, the timing and position determination unit 16 determines the timing of the sound output for presentation to the driver, the sound output direction, the distance, etc. Determine the position. The timing and position determination unit 16 supplies determination information indicating the determined content to the information presentation unit 17.

情報提示部17は、後述するように、例えばトランスオーラルシステム等の立体音源システムから構成され、マイクロホン11によって集音された音、及び、音提示範囲及び集音範囲切替装置15によって決定された音提示範囲及び集音範囲内に存在する物体を表す仮想音の作成及び合成を行い、アンプやスピーカを用いて音情報の出力を行う。なお、アンプやスピーカは、一般的なものでよい。具体的には、情報提示部17は、タイミング及び位置決定部16から供給された決定情報に基づいて仮想音を生成する仮想音源生成部17aと、この仮想音源生成部17aによって生成された仮想音及びマイクロホン11によって集音された音のゲインを調整するミキシングゲイン調整部17bと、このミキシングゲイン調整部17bによって調整された音を運転者に提示する音情報提示部17cとを有する。このような情報提示部17は、車両状態に応じて適した音場環境となるように音を作成し、作成した音を運転者に提示する。なお、この情報提示部17の具体的な設置例については、後述するものとする。   As will be described later, the information presentation unit 17 is configured by a three-dimensional sound source system such as a trans-oral system, for example, and the sound collected by the microphone 11 and the sound determined by the sound presentation range and the sound collection range switching device 15. A virtual sound representing an object existing in the presentation range and the sound collection range is created and synthesized, and sound information is output using an amplifier or a speaker. The amplifier and the speaker may be a general one. Specifically, the information presenting unit 17 generates a virtual sound based on the determination information supplied from the timing and position determining unit 16, and the virtual sound generated by the virtual sound source generating unit 17a. And a mixing gain adjustment unit 17b that adjusts the gain of the sound collected by the microphone 11, and a sound information presentation unit 17c that presents the driver with the sound adjusted by the mixing gain adjustment unit 17b. Such an information presentation part 17 produces a sound so that it may become a suitable sound field environment according to a vehicle state, and presents the produced sound to a driver | operator. A specific installation example of the information presentation unit 17 will be described later.

[マイクロホンの配設状況と集音範囲との関係]
このような車外情報提供装置においては、マイクロホン11の配設位置、向き、ゲイン、及び種類に応じて、集音範囲を制御することができる。
[Relationship between microphone placement and sound collection range]
In such an out-of-vehicle information providing apparatus, the sound collection range can be controlled in accordance with the arrangement position, orientation, gain, and type of the microphone 11.

まず、マイクロホン11として、複数の指向性マイクと方向変換装置とを用いる場合には、方向変換装置を用いて複数の指向性マイクを集音したい方向に向けることにより、集音範囲を変更することができる。なお、方向変換装置としては、サーボモータ等、方向を変換する一般的な機構を用いればよい。これを具体的に説明するために、例えば図2(A)に示すように、車両100の前後左右方向に4つのマイクロホン11a,11b,11c,11dが設置されている場合を考える。   First, when a plurality of directional microphones and a direction changing device are used as the microphone 11, the sound collection range is changed by directing the plurality of directional microphones in a direction in which the sound is to be collected using the direction changing device. Can do. As the direction changing device, a general mechanism for changing the direction, such as a servo motor, may be used. In order to specifically explain this, consider a case where four microphones 11a, 11b, 11c, and 11d are installed in the front-rear and left-right directions of the vehicle 100, for example, as shown in FIG.

このとき、車外情報提供装置においては、全方向の範囲の音を集音したい場合には、図2(A)に示すように、マイクロホン11aの方向を右前方に向け、マイクロホン11bの方向を左前方に向け、マイクロホン11cの方向を右後方に向け、マイクロホン11dの方向を左後方に向けることにより、全方向の範囲の音を集音することができ、これらマイクロホン11a,11b,11c,11dのゲインを調整することにより、集音範囲を調整することができる。   At this time, in the information providing apparatus outside the vehicle, when it is desired to collect sounds in a range in all directions, the direction of the microphone 11a is directed to the front right and the direction of the microphone 11b is set to the left as shown in FIG. By pointing forward, the direction of the microphone 11c is directed to the right rear, and the direction of the microphone 11d is directed to the left rear, it is possible to collect sounds in a range of all directions, and the microphones 11a, 11b, 11c, 11d The sound collection range can be adjusted by adjusting the gain.

また、車外情報提供装置においては、後方の範囲の音を集音したい場合には、図2(B)に示すように、マイクロホン11aの方向を右後方に向け、マイクロホン11bの方向を左後方に向け、マイクロホン11cの方向を右後方に向け、マイクロホン11dの方向を左後方に向けることにより、後方の範囲の音を強調して集音することができ、これらマイクロホン11a,11b,11c,11dのゲインを調整することにより、集音範囲を調整することができる。   Further, in the information providing apparatus outside the vehicle, when it is desired to collect the sound in the rear range, the direction of the microphone 11a is directed to the right rear and the direction of the microphone 11b is directed to the left rear as shown in FIG. The microphone 11c is directed toward the right rear and the microphone 11d is directed toward the left rear, so that the sound in the rear range can be emphasized and collected, and the microphones 11a, 11b, 11c, 11d The sound collection range can be adjusted by adjusting the gain.

さらに、車外情報提供装置においては、左折時等において左前方以外の方向の音を集音したい場合には、図2(C)に示すように、マイクロホン11aの方向を右前方に向け、マイクロホン11cの方向を右後方に向け、マイクロホン11dの方向を左後方に向ける一方で、マイクロホン11bについては集音しないことにより、左前方以外の方向の音を集音することができ、これらマイクロホン11a,11c,11dのゲインを調整することにより、集音範囲を調整することができる。   Furthermore, in the information providing apparatus outside the vehicle, when it is desired to collect sounds in directions other than the left front when turning left, as shown in FIG. 2C, the microphone 11a is directed to the right front, and the microphone 11c Is directed to the right rear and the microphone 11d is directed to the left rear, while the microphone 11b does not collect sound, so that sounds in directions other than the left front can be collected. These microphones 11a, 11c , 11d, the sound collection range can be adjusted.

さらにまた、車外情報提供装置においては、左車線への車線変更時等において左前方及び右後方以外の方向の音を集音したい場合には、図2(D)に示すように、マイクロホン11aの方向を右前方に向け、マイクロホン11bの方向を左後方に向け、マイクロホン11cの方向を右前方に向け、マイクロホン11dの方向を左後方に向けることにより、左前方及び右後方以外の方向の音を集音することができ、これらマイクロホン11a,11b,11c,11dのゲインを調整することにより、集音範囲を調整することができる。   Furthermore, in the information providing apparatus outside the vehicle, when it is desired to collect sounds in directions other than the left front and right rear when the lane is changed to the left lane, as shown in FIG. By directing the direction to the right front, the direction of the microphone 11b to the left rear, the direction of the microphone 11c to the right front, and the direction of the microphone 11d to the left rear, sounds in directions other than the left front and right rear Sound can be collected, and the sound collection range can be adjusted by adjusting the gains of these microphones 11a, 11b, 11c, and 11d.

また、マイクロホン11として、指向性マイクと無指向性マイクとを組み合わせて用いることもできる。これを具体的に説明するために、例えば図3(A)に示すように、車両100の前方に1つの指向性マイクロホン11eが設置され、後方に1つの無指向性マイクロホン11fが設置されている場合を考える。   As the microphone 11, a directional microphone and an omnidirectional microphone can be used in combination. In order to specifically explain this, for example, as shown in FIG. 3A, one directional microphone 11e is installed in front of the vehicle 100, and one omnidirectional microphone 11f is installed behind. Think about the case.

このとき、車外情報提供装置においては、左折時等において左前方以外の方向の音を集音したい場合には、図3(A)に示すように、指向性マイクロホン11eの方向を右方に向け、無指向性マイクロホン11fの方向を後方に向けることにより、左前方以外の方向の音を集音することができ、指向性マイクロホン11eについてはそのゲインを調整することにより、集音範囲を調整することができる。   At this time, in the information providing apparatus outside the vehicle, when it is desired to collect sound in directions other than the left front when turning left, as shown in FIG. 3A, the direction of the directional microphone 11e is directed to the right. The sound of the direction other than the left front can be collected by turning the direction of the omnidirectional microphone 11f backward, and the sound collection range is adjusted by adjusting the gain of the directional microphone 11e. be able to.

また、車外情報提供装置においては、右車線への車線変更時等において全方向及び左前方の音を集音したい場合には、図3(B)に示すように、指向性マイクロホン11eの方向を左前方に向け、無指向性マイクロホン11fの方向を後方に向けることにより、全方向及び左前方の音を集音することができ、指向性マイクロホン11eについてはそのゲインを調整することにより、集音範囲を調整することができる。   In addition, in the information providing apparatus outside the vehicle, when it is desired to collect all directions and the left front sound when changing to the right lane, the direction of the directional microphone 11e is set as shown in FIG. By turning the omnidirectional microphone 11f toward the left front, the sound in all directions and the left front can be collected. By adjusting the gain of the directional microphone 11e, the sound collection is performed. The range can be adjusted.

このように、車外情報提供装置においては、マイクロホン11の配設位置、向き、ゲイン、及び種類に応じて、集音範囲を制御することができる。   Thus, in the vehicle outside information providing device, the sound collection range can be controlled according to the arrangement position, orientation, gain, and type of the microphone 11.

[物体検出センサの配設状況と音提示範囲との関係]
また、車外情報提供装置においては、物体検出センサ12の配設位置や種類に応じて、運転者に提示する音の入出力範囲である音提示範囲を制御することができる。
[Relationship between object detection sensor placement and sound presentation range]
Moreover, in the information providing apparatus outside the vehicle, the sound presentation range that is the input / output range of the sound presented to the driver can be controlled according to the arrangement position and type of the object detection sensor 12.

物体検出センサ12としては、上述したように、ミリ波レーダや超音波センサ等を複数個組み合わせて構成することができる。車外情報提供装置においては、物体検出センサ12として距離を厳密に測定できるものを用いる場合には、音提示範囲を厳密に決定することができる。一方、車外情報提供装置においては、物体検出センサ12として距離を厳密に測定できるものを用いない場合には、例えば図4に示すような車両100の物体検出センサ12a,12b,12c,12dのように、複数の場所に複数のセンサを配設し、各センサによって検出された物体の方向情報に基づいて音提示範囲を決定すればよい。このとき、車外情報提供装置においては、各センサの検知範囲を変更する必要はない。   As described above, the object detection sensor 12 can be configured by combining a plurality of millimeter wave radars, ultrasonic sensors, and the like. In the information providing apparatus outside the vehicle, when the object detection sensor 12 that can measure the distance precisely is used, the sound presentation range can be determined strictly. On the other hand, in the information providing apparatus outside the vehicle, when an object detection sensor 12 that can accurately measure the distance is not used, for example, object detection sensors 12a, 12b, 12c, and 12d of the vehicle 100 as shown in FIG. In addition, a plurality of sensors may be arranged at a plurality of locations, and the sound presentation range may be determined based on the direction information of the object detected by each sensor. At this time, in the information providing apparatus outside the vehicle, it is not necessary to change the detection range of each sensor.

[情報提示部の具体例]
情報提示部17は、上述したように、トランスオーラルシステムとして構成することができる。具体的には、トランスオーラルシステムとしては、例えば図5に示すように、複数のフィルタH(H11,H12,H21,H22,H31,H32,H41,H42)からなるフィルタバンクに対して入力信号X1,X2を入力し、各フィルタの出力を加算(ミキシング)して複数のスピーカSP(SP1,SP2,SP3,SP4)から、運転席に座位している運転の両耳付近の位置C1,C2における観測信号Y1,Y2としての音を出力する構成とすることができる。このとき、このトランスオーラルシステムにおいては、運転席に座位している運転の両耳付近の位置C1,C2における観測信号Y1,Y2が、入力信号X1,X2と等価になるように、フィルタHを調整する。換言すれば、トランスオーラルシステムにおいては、スピーカSPから出力される音の音場を表す伝達特性G(G11,G14,G21,G24)と、フィルタHとの関係が、HG=単位行列となるように、フィルタHを調整すればよい。
[Specific example of information presentation unit]
As described above, the information presentation unit 17 can be configured as a trans-oral system. Specifically, as a transoral system, for example, as shown in FIG. 5, an input signal X1 is applied to a filter bank composed of a plurality of filters H (H11, H12, H21, H22, H31, H32, H41, H42). , X2 are input, and the outputs of the respective filters are added (mixed), and from a plurality of speakers SP (SP1, SP2, SP3, SP4) at positions C1, C2 near both ears of the driver sitting on the driver's seat It can be set as the structure which outputs the sound as observation signal Y1, Y2. At this time, in this transoral system, the filter H is set so that the observation signals Y1 and Y2 at the positions C1 and C2 near the both ears of the driver sitting in the driver's seat are equivalent to the input signals X1 and X2. adjust. In other words, in the transoral system, the relationship between the transfer characteristic G (G11, G14, G21, G24) representing the sound field of the sound output from the speaker SP and the filter H is HG = unit matrix. In addition, the filter H may be adjusted.

[車外情報提供装置の動作]
さて、このような車外情報提供装置においては、図6に示すような一連の手順にしたがって、自車両外部の音を運転者に対して提供する。
[Operation of information providing device outside vehicle]
Now, in such a vehicle outside information provision apparatus, the sound outside the own vehicle is provided to the driver according to a series of procedures as shown in FIG.

まず、車外情報提供装置は、図6に示すように、ステップS1において、システムを初期化すると、ステップS2において、走行モードの設定を行う。具体的には、車外情報提供装置は、走行モード設定処理として、環境検出部13及び情報判定部14により、現在の自車両の走行状況を検出する。この場合、車外情報提供装置は、走行モードとして、駐車モード、市街地走行モード(中速走行モード)、高速走行モード、及び停車モードのうち、いずれかの走行モードを設定する。なお、この走行モード設定処理については、後に詳述するものとする。   First, as shown in FIG. 6, when the system is initialized in step S1, the outside-vehicle information providing apparatus sets a travel mode in step S2. Specifically, the information providing apparatus outside the vehicle detects the current traveling state of the host vehicle by the environment detection unit 13 and the information determination unit 14 as the traveling mode setting process. In this case, the out-of-vehicle information providing apparatus sets a travel mode as one of a parking mode, an urban travel mode (medium speed travel mode), a high speed travel mode, and a stop mode. The travel mode setting process will be described in detail later.

続いて、車外情報提供装置は、ステップS3において、動作モードの設定を行う。車外情報提供装置においては、運転者の視線の範囲外についても音情報として提示することを可能とするため、ステアリング角度やウィンカ動作等の情報を検出することによって運転者の視線方向を予測し、当該運転者の視野範囲外を音提示範囲とする。具体的には、車外情報提供装置は、動作モード設定処理として、環境検出部13及び情報判定部14により、ステアリング角度やウィンカ動作の有無等の情報を判定し、判定した各種情報の内容に基づいて、音提示範囲及び集音範囲切替装置15により、走行モードに応じた音提示範囲や集音範囲を決定する。なお、この動作モード設定処理については、後に詳述するものとする。   Subsequently, the information providing apparatus outside the vehicle sets an operation mode in step S3. In the information providing apparatus outside the vehicle, in order to be able to present as sound information even outside the range of the driver's line of sight, by predicting the driver's line of sight by detecting information such as steering angle and blinker operation, The sound presentation range is outside the driver's visual field range. Specifically, the information providing apparatus outside the vehicle uses the environment detection unit 13 and the information determination unit 14 to determine information such as the steering angle and the presence / absence of the blinker operation as the operation mode setting process, and based on the contents of the determined various information. Thus, the sound presentation range and sound collection range switching device 15 determines the sound presentation range and sound collection range according to the travel mode. This operation mode setting process will be described in detail later.

続いて、車外情報提供装置は、ステップS4において、物体検出センサ12による物体検出の有無に応じて、動作を開始するか否かを判定する。具体的には、車外情報提供装置は、物体検出センサ12によって自車両周囲に存在する他車両、敷石、壁、歩行者等の各種物体が検出されない場合には、音を出力(提示)せず、ステップS2からの処理を繰り返す。一方、車外情報提供装置は、物体検出センサ12によって自車両周囲に存在する物体が検出された場合には、マイクロホン11による集音及び情報提示部17による音情報の提示を開始する。   Subsequently, the outside-vehicle information providing apparatus determines whether or not to start the operation in step S4 according to whether or not the object detection sensor 12 detects the object. Specifically, the information providing apparatus outside the vehicle does not output (present) sound when the object detection sensor 12 does not detect various objects such as other vehicles, paving stones, walls, and pedestrians around the host vehicle. The processing from step S2 is repeated. On the other hand, when an object present around the host vehicle is detected by the object detection sensor 12, the information providing apparatus outside the vehicle starts collecting sound by the microphone 11 and presenting sound information by the information presentation unit 17.

これに応じて、車外情報提供装置は、ステップS5において、仮想音情報及びマイクロホン11によって集音された音を時空間にマッピングする。具体的には、車外情報提供装置は、マイクロホン11によって集音可能な音については、そのままトランスオーラルシステム等の立体音源システムからなる情報提示部17を介して出力することによって運転者に提示する。一方、車外情報提供装置は、例えば壁、敷石、歩行者等、物体検出センサ12によって検出された物体についての音であってマイクロホン11によって検知されない物体音については、それぞれの物体の位置(方向、距離)等に合わせた仮想音として生成し、トランスオーラルシステム等の立体音源システムからなる情報提示部17を介して出力することによって運転者に提示する。なお、このマッピング処理については、後に詳述するものとする。   In response to this, the outside-vehicle information providing apparatus maps the virtual sound information and the sound collected by the microphone 11 in time and space in step S5. Specifically, the information providing apparatus outside the vehicle presents the sound that can be collected by the microphone 11 to the driver by outputting the sound as it is through the information presentation unit 17 including a three-dimensional sound source system such as a trans-oral system. On the other hand, the information providing apparatus outside the vehicle, for example, sounds about objects detected by the object detection sensor 12 such as walls, paving stones, pedestrians, etc. but not detected by the microphone 11, the position of each object (direction, It is generated as a virtual sound that matches the distance) and is output to the driver by being output via the information presentation unit 17 including a three-dimensional sound source system such as a trans-oral system. This mapping process will be described in detail later.

そして、車外情報提供装置は、ステップS6において、実空間におけるマイクロホン11によって集音された音と、物体検出センサ12によって検出された物体に割り当てた仮想音とを融合し、その音を運転者に提示して一連の処理を終了する。   In step S6, the outside-vehicle information providing apparatus fuses the sound collected by the microphone 11 in the real space with the virtual sound assigned to the object detected by the object detection sensor 12, and sends the sound to the driver. Present and end the series of processing.

車外情報提供装置においては、このような一連の手順にしたがって、自車両外部の音を運転者に対して提供することができる。   In the information providing apparatus outside the vehicle, the sound outside the host vehicle can be provided to the driver according to such a series of procedures.

つぎに、ステップS2における走行モード設定処理について詳述する。   Next, the travel mode setting process in step S2 will be described in detail.

車外情報提供装置は、走行モード設定処理に移行すると、図7に示すように、ステップS11において、環境検出部13及び情報判定部14により、現在の自車両の走行状況が駐車状態であるか否かを判定する。   When the vehicle outside information providing apparatus shifts to the driving mode setting process, as shown in FIG. 7, in step S11, the environment detecting unit 13 and the information determining unit 14 determine whether the current driving state of the host vehicle is in the parking state. Determine whether.

ここで、環境検出部13及び情報判定部14は、駐車状態であるものと判定した場合には、ステップS12において、走行モードを駐車モードに切り替え、走行モード設定処理を終了する。一方、環境検出部13及び情報判定部14は、駐車状態でないものと判定した場合には、ステップS13において、現在の自車両の走行状況が中速走行であるか否かを判定する。   Here, when the environment detection unit 13 and the information determination unit 14 determine that the vehicle is in the parking state, in step S12, the driving mode is switched to the parking mode, and the driving mode setting process ends. On the other hand, if the environment detection unit 13 and the information determination unit 14 determine that the vehicle is not in the parked state, in step S13, the environment detection unit 13 and the information determination unit 14 determine whether or not the current traveling state of the host vehicle is medium speed traveling.

環境検出部13及び情報判定部14は、中速走行であるものと判定した場合には、ステップS14において、走行モードを市街地走行モードに切り替え、走行モード設定処理を終了する。一方、環境検出部13及び情報判定部14は、中速走行でないものと判定した場合には、ステップS15において、現在の自車両の走行状況が高速走行であるか否かを判定する。   If the environment detection unit 13 and the information determination unit 14 determine that the vehicle is traveling at a medium speed, the driving mode is switched to the urban driving mode in step S14, and the driving mode setting process ends. On the other hand, when the environment detection unit 13 and the information determination unit 14 determine that the vehicle is not at the medium speed, in step S15, the environment detection unit 13 and the information determination unit 14 determine whether the current traveling state of the host vehicle is the high speed traveling.

そして、環境検出部13及び情報判定部14は、高速走行であるものと判定した場合には、ステップS16において、走行モードを高速走行モードに切り替え、走行モード設定処理を終了する。一方、環境検出部13及び情報判定部14は、高速走行でないものと判定した場合には、ステップS17において、走行モードを停車モードに切り替え、走行モード設定処理を終了する。   If the environment detection unit 13 and the information determination unit 14 determine that the vehicle is traveling at high speed, the traveling mode is switched to the high-speed traveling mode in step S16, and the traveling mode setting process ends. On the other hand, if the environment detection unit 13 and the information determination unit 14 determine that the vehicle is not traveling at high speed, the traveling mode is switched to the stop mode in step S17, and the traveling mode setting process is terminated.

車外情報提供装置は、このような一連の手順にしたがって、走行モードを設定することができる。   The out-of-vehicle information providing apparatus can set the traveling mode according to such a series of procedures.

つぎに、図6中ステップS3における動作モード設定処理について詳述する。   Next, the operation mode setting process in step S3 in FIG. 6 will be described in detail.

車外情報提供装置は、動作モード設定処理に移行すると、走行モードに応じた音提示範囲及び集音範囲を設定する。このとき、車外情報提供装置は、上述したように、運転者の視線の範囲外についても音情報として提示することを可能とするため、ステアリング角度やウィンカ動作等の情報を加味して音提示範囲及び集音範囲を設定する。   When shifting to the operation mode setting process, the outside-vehicle information providing apparatus sets a sound presentation range and a sound collection range according to the travel mode. At this time, as described above, the information providing apparatus outside the vehicle can present information outside the range of the driver's line of sight as sound information. And set the sound collection range.

具体的には、車外情報提供装置は、図8に示すように、ステップS21において、環境検出部13及び情報判定部14により、ステアリング角度を検出し、そのステアリング角度に基づいて、音提示範囲及び集音範囲切替装置15により、自車両の移動方向と垂直な面に対して音提示範囲を設定する。   Specifically, as shown in FIG. 8, the vehicle information providing apparatus detects the steering angle by the environment detection unit 13 and the information determination unit 14 in step S21, and based on the steering angle, The sound collection range switching device 15 sets a sound presentation range with respect to a plane perpendicular to the moving direction of the host vehicle.

続いて、車外情報提供装置は、ステップS22において、環境検出部13及び情報判定部14により、ウィンカ動作の有無を判定する。ここで、ウィンカの動作があった場合には、自車両が左右のいずれかに移動する可能性が高く、運転者は移動方向に注意を払っている可能性が高い。そのため、車外情報提供装置は、ウィンカの動作があった場合には、ステップS23において、環境検出部13及び情報判定部14により、そのウィンカの方向に基づいて自車両の進行予定方向を設定し、その進行予定方向以外の方向に対して音提示範囲を設定する。   Subsequently, the information providing apparatus outside the vehicle determines the presence / absence of the blinker operation by the environment detection unit 13 and the information determination unit 14 in step S22. Here, when the blinker is operated, the possibility that the host vehicle moves to the left or right is high, and the driver is likely to pay attention to the moving direction. Therefore, when there is an operation of the winker, the information providing apparatus outside the vehicle sets the planned traveling direction of the host vehicle based on the direction of the winker by the environment detection unit 13 and the information determination unit 14 in step S23. A sound presentation range is set for a direction other than the planned traveling direction.

続いて、車外情報提供装置は、ステップS24において、音提示範囲及び集音範囲切替装置15により、ステアリング角度やウィンカ動作の有無に応じた音提示範囲を決定する。具体的には、音提示範囲及び集音範囲切替装置15は、ウィンカの動作がなかった場合には、ステップS21にてステアリング角度に基づいて設定した音提示範囲とする。また、音提示範囲及び集音範囲切替装置15は、ウィンカの動作があった場合には、ステップS21にてステアリング角度に基づいて設定した音提示範囲に対して、ステップS23にてウィンカの方向に基づいて設定した音提示範囲を加味した音提示範囲とする。   Subsequently, the outside information providing apparatus determines the sound presentation range according to the steering angle and the presence / absence of the blinker operation by using the sound presentation range and sound collection range switching device 15 in step S24. Specifically, the sound presentation range and sound collection range switching device 15 sets the sound presentation range set based on the steering angle in step S21 when there is no blinker operation. In addition, the sound presentation range and sound collection range switching device 15 moves the winker direction in step S23 with respect to the sound presentation range set based on the steering angle in step S21 when the winker operation is performed. The sound presentation range is determined by taking into account the sound presentation range set based on the above.

そして、車外情報提供装置は、ステップS25において、音提示範囲及び集音範囲切替装置15により、先に図2(A)乃至図2(D)、図3(A)及び図3(B)、並びに図4に示したように、ステップS24にて決定した音提示範囲に基づいて、マイクロホン11による集音範囲を決定し、動作モード設定を終了する。なお、集音範囲と音提示範囲は、原則一致していることが望ましいが、マイクロホン11の配設要件等の制約がある場合には、必ずしも一致していなくともよい。   Then, in step S25, the information providing device outside the vehicle uses the sound presenting range and sound collection range switching device 15 to first display FIGS. 2 (A) to 2 (D), FIG. 3 (A) and FIG. As shown in FIG. 4, the sound collection range by the microphone 11 is determined based on the sound presentation range determined in step S24, and the operation mode setting is ended. Note that the sound collection range and the sound presentation range are preferably matched in principle, but may not necessarily match if there are restrictions such as the arrangement requirements of the microphone 11.

車外情報提供装置は、このような一連の手順にしたがって、音提示範囲及び集音範囲を決定することができる。   The outside-vehicle information providing apparatus can determine the sound presentation range and the sound collection range according to such a series of procedures.

つぎに、図6中ステップS4における条件分岐処理について詳述する。   Next, the conditional branch process in step S4 in FIG. 6 will be described in detail.

車外情報提供装置は、物体検出センサ12による物体検出の有無に応じて、動作を開始するか否かを判定する。ここで、運転情報に必要のない物体に対して仮想音を割り当て、警報音として提示すると、運転者の運転行動に対して不利な影響を与える可能性が生じる。そこで、車外情報提供装置は、物体検出後、不要な物体については仮想音を割り当てるリストに加えないように条件分岐処理を行う。   The information providing apparatus outside the vehicle determines whether or not to start the operation depending on whether or not the object detection sensor 12 detects the object. Here, if a virtual sound is assigned to an object that is not necessary for driving information and presented as an alarm sound, there is a possibility of adversely affecting the driving behavior of the driver. Therefore, after detecting an object, the vehicle exterior information providing apparatus performs conditional branch processing so that unnecessary objects are not added to the list to which virtual sounds are assigned.

具体的には、車外情報提供装置は、図9に示すように、ステップS31において、物体検出センサ12によって自車両周囲に存在する物体を検出する。すなわち、車外情報提供装置は、ミリ波レーダや超音波センサ等を用いて運転者の視点から物体の方向と距離を測定して算出する。   Specifically, as shown in FIG. 9, the outside-vehicle information providing apparatus detects an object existing around the host vehicle by the object detection sensor 12 in step S31. That is, the information providing apparatus outside the vehicle measures and calculates the direction and distance of the object from the viewpoint of the driver using a millimeter wave radar, an ultrasonic sensor, or the like.

車外情報提供装置は、物体が検出されると、ステップS32において、環境検出部13及び情報判定部14により、その物体が、図6中ステップS3にて決定された音提示範囲内に存在する物体であるか否かを判定する。   When an object is detected, the outside-vehicle information providing apparatus detects that the object is within the sound presentation range determined in step S3 in FIG. 6 by the environment detection unit 13 and the information determination unit 14 in step S32. It is determined whether or not.

ここで、車外情報提供装置は、音提示範囲内に存在する物体でない場合には、ステップS31からの処理を繰り返す一方で、音提示範囲内に存在する物体であった場合には、ステップS33において、環境検出部13及び情報判定部14により、その物体が自車両に対して相対的に移動する物体であるか否かを判定し、移動物体でない場合には、ステップS31からの処理を繰り返す一方で、移動物体であった場合には、ステップS34へと処理を移行する。なお、このステップS33の処理は、車外情報提供装置をいわゆる駐車アシストシステム等に適用した場合に有効なものである。すなわち、駐車アシストシステムにおいては、表示装置に表示されている壁等の物体に音を割り当てず、移動物体を検出したときにのみ音を提示することにより、運転者に対して移動物体に対する危険をより強く認知させることができる。したがって、車外情報提供装置においては、このステップS33の処理を必ずしも設ける必要はない。   Here, when the vehicle outside information providing apparatus is not an object existing in the sound presentation range, the vehicle exterior information providing apparatus repeats the processing from step S31. On the other hand, in the case of an object existing in the sound presentation range, in step S33 The environment detection unit 13 and the information determination unit 14 determine whether or not the object moves relative to the host vehicle. If the object is not a moving object, the processing from step S31 is repeated. If the object is a moving object, the process proceeds to step S34. Note that the processing in step S33 is effective when the outside-vehicle information providing apparatus is applied to a so-called parking assist system or the like. In other words, in the parking assist system, no sound is assigned to an object such as a wall displayed on the display device, and the sound is presented only when a moving object is detected, thereby reducing the risk of the moving object to the driver. You can make it stronger. Therefore, it is not always necessary to provide the processing in step S33 in the information providing apparatus outside the vehicle.

そして、車外情報提供装置は、ステップS34において、仮想音を割り当てる物体の方向と距離をリストに追加し、条件分岐処理を終了する。   In step S34, the outside-vehicle information providing apparatus adds the direction and distance of the object to which the virtual sound is assigned to the list, and ends the conditional branching process.

車外情報提供装置は、このような一連の手順にしたがって、音を提示すべき適切な物体を検出し、動作を開始するか否かを判定することができる。   The out-of-vehicle information providing apparatus can detect an appropriate object to present a sound according to such a series of procedures and determine whether to start the operation.

つぎに、図6中ステップS5におけるマッピング処理について詳述する。   Next, the mapping process in step S5 in FIG. 6 will be described in detail.

車外情報提供装置は、運転者からみた物体の方向と距離の情報に基づいて、仮想音を割り当てる。このとき、図6中ステップS4にて作成した物体のリストを検索し、その物体の方向情報及び距離情報に応じて仮想音を割り当てる。   The out-of-vehicle information providing device assigns a virtual sound based on information on the direction and distance of the object viewed from the driver. At this time, the list of objects created in step S4 in FIG. 6 is searched, and virtual sounds are assigned according to the direction information and distance information of the objects.

具体的には、車外情報提供装置は、図10に示すように、ステップS41において、情報提示部17により、リストを検索し、そのリストに待行列が存在しているか否かを判定する。ここで、情報提示部17は、リストに待行列が存在しているものと判定した場合には、ステップS42において、リストの中から最近傍の物体を抽出する。   Specifically, as shown in FIG. 10, the information providing apparatus outside the vehicle searches the list by the information presentation unit 17 in step S41, and determines whether or not there is a queue in the list. If the information presenting unit 17 determines that there is a queue in the list, the information presenting unit 17 extracts the nearest object from the list in step S42.

続いて、情報提示部17は、ステップS43において、マイクロホン11の入力を調査する。ここで、情報提示部17は、マイクロホン11の入力から方向音を検出し、その音の入力方向と物体の位置又は方向とが同じ場合には、運転者に提示する情報が混乱するため仮想音を割り当てず、ステップS46へと処理を移行する。なお、マイクロホン11への音入力方向は、いわゆるビームフォーミング等の信号処理的な手法を用いて検出すればよい。一方、情報提示部17は、マイクロホン11からの入力がない場合やマイクロホン11からの入力があり且つその音の入力方向と物体の位置又は方向とが同じでない場合には、ステップS44へと処理を移行し、その物体の方向及び距離に応じて仮想音源を割り当てる。このとき、情報提示部17は、物体が複数個ある場合には、仮想音源の出力タイミングをずらすように仮想音源を割り当てる。   Subsequently, the information presentation unit 17 investigates the input of the microphone 11 in step S43. Here, the information presentation unit 17 detects a direction sound from the input of the microphone 11, and if the input direction of the sound is the same as the position or direction of the object, the information presented to the driver is confused, so the virtual sound And the process proceeds to step S46. Note that the sound input direction to the microphone 11 may be detected using a signal processing method such as so-called beam forming. On the other hand, when there is no input from the microphone 11 or when there is an input from the microphone 11 and the input direction of the sound is not the same as the position or direction of the object, the information presentation unit 17 proceeds to step S44. The virtual sound source is assigned according to the direction and distance of the object. At this time, when there are a plurality of objects, the information presentation unit 17 assigns the virtual sound source so as to shift the output timing of the virtual sound source.

そして、情報提示部17は、ステップS45において、仮想音源を割り当てた物体をリストから削除し、ステップS41からの処理を繰り返す。   And the information presentation part 17 deletes the object which allocated the virtual sound source from a list in step S45, and repeats the process from step S41.

情報提示部17は、このようなステップS41乃至ステップS45の処理を行い、ステップS41において、リストに待行列が存在していないものと判定した場合には、ステップS46へと処理を移行し、マイクロホン11への入力をトランスオーラルシステム等の立体音源システムの出力信号に変換する。このとき、情報提示部17は、仮想音が存在する場合には、その仮想音も立体音源システムの出力信号に変換する。   The information presenting unit 17 performs the processing from step S41 to step S45, and when it is determined in step S41 that there is no queue in the list, the processing proceeds to step S46, and the microphone 11 is converted into an output signal of a three-dimensional sound source system such as a trans-oral system. At this time, when a virtual sound exists, the information presentation unit 17 converts the virtual sound into an output signal of the three-dimensional sound source system.

そして、情報提示部17は、ステップS47において、マイクロホン11からの入力音及び仮想音を加算(ミキシング)し、マッピング処理を終了する。   In step S47, the information presentation unit 17 adds (mixes) the input sound and the virtual sound from the microphone 11 and ends the mapping process.

車外情報提供装置は、このような一連の手順にしたがって、仮想音情報及びマイクロホン11によって集音された音を時空間にマッピングすることができる。なお、車外情報提供装置においては、ステップS43において、マイクロホン11からの入力音の方向性を検出した際に、当該マイクロホン11からの入力音をそのまま仮想音とし、その仮想音をリストの方向及び距離に応じた位置に配置するようにしてもよい。   The out-of-vehicle information providing apparatus can map the virtual sound information and the sound collected by the microphone 11 in space-time according to such a series of procedures. In the vehicle information providing apparatus, when the directionality of the input sound from the microphone 11 is detected in step S43, the input sound from the microphone 11 is directly used as a virtual sound, and the virtual sound is used as the direction and distance of the list. You may make it arrange | position in the position according to.

車外情報提供装置は、このようなマッピング処理を行うことにより、自車両外部にて実際に発生している音と仮想音とを融合させた音情報を、運転者に提示することができる。例えば、図11に示すように、駐車場にて駐車をしようとしている場合において、実空間上の自車両の前方に要注意物体としての人間A,Bが存在すると共に、自車両の後方に要注意物体としての壁面Wが存在している状況を考える。この場合、車外情報提供装置は、要注意物体としての人間A,B及び壁面Wの位置に音源を配置するようにマッピング処理を行う。すなわち、車外情報提供装置は、人間A,Bがそれぞれ発話した発話内容X,Yをマイクロホン11によって集音し、運転者に対して発話内容X’,Y’として聴取されるように情報提示部17によってバイノーラル再生すると共に、物体検出センサ12によって検出した壁面Wの存在を告知するために、その壁面Wの位置に情報提示部17によって仮想音源としての警告音を配置して出力する。   By performing such a mapping process, the outside-vehicle information providing apparatus can present to the driver sound information obtained by fusing sounds actually generated outside the host vehicle and virtual sounds. For example, as shown in FIG. 11, when parking in a parking lot, humans A and B as objects requiring attention exist in front of the own vehicle in real space, and necessary behind the own vehicle. Consider a situation in which a wall surface W as an attention object exists. In this case, the information providing apparatus outside the vehicle performs the mapping process so that the sound sources are arranged at the positions of the persons A and B and the wall surfaces W as objects requiring attention. In other words, the information providing unit outside the vehicle collects the utterance contents X and Y uttered by the persons A and B by the microphone 11 and listens to the driver as the utterance contents X ′ and Y ′. 17, binaural reproduction is performed, and in order to notify the presence of the wall surface W detected by the object detection sensor 12, a warning sound as a virtual sound source is arranged and output at the position of the wall surface W by the information presentation unit 17.

これにより、車外情報提供装置は、人間A,B及び壁面Wがそれぞれの位置に存在していることを運転者に的確に知らせることができる。   Thereby, the information providing apparatus outside the vehicle can accurately notify the driver that the humans A and B and the wall surface W exist at the respective positions.

なお、人間の音源定位に関する距離感は、数m程度であるため、現実の物体の場所に音が聞こえるように配置したとしても、正確に認知することが困難である場合がある。このような場合、提示した情報が曖昧になるので、運転者が危険の度合いを認識できない場合が生じる。そこで、車外情報提供装置は、音を時空間にマッピングする際に、方向感の維持と、自車両外部での音源定位の維持のみに特化し、距離情報の圧縮を図るのが望ましい。例えば図11に示したような状況の場合には、車外情報提供装置は、図12に示すように、要注意物体としての人間A,Bがそれぞれ発話した発話内容X,Yが運転者に対して発話内容X’,Y’として聴取されるように情報提示部17によってバイノーラル再生する際に、その音源をマイクロホン11の近傍に配置すると共に、物体検出センサ12によって検出した壁面Wを現す仮想音源を自車両後部に配置するといったように、これら物体の実空間上の位置よりも運転者に近い位置まで距離を圧縮した位置に音源を配置するようにマッピング処理を行う。   It should be noted that since the sense of distance related to human sound source localization is about several meters, even if it is arranged so that sound can be heard at the location of an actual object, it may be difficult to accurately recognize. In such a case, the presented information becomes ambiguous, and the driver may not be able to recognize the degree of danger. Therefore, it is desirable that the information providing apparatus outside the vehicle specializes only in maintaining the sense of direction and maintaining the sound source localization outside the host vehicle, and compresses the distance information when mapping the sound into space-time. For example, in the situation as shown in FIG. 11, the outside information providing apparatus, as shown in FIG. 12, utterance contents X and Y uttered by humans A and B as cautionary objects are given to the driver. When binaural reproduction is performed by the information presentation unit 17 so as to be heard as the utterance contents X ′ and Y ′, the sound source is arranged in the vicinity of the microphone 11 and the virtual sound source showing the wall surface W detected by the object detection sensor 12 Mapping processing is performed so that the sound source is arranged at a position where the distance is compressed to a position closer to the driver than the position in the real space of these objects.

これにより、車外情報提供装置は、物体の存在及び危険性を運転者により的確に知らせることができる。   Thereby, the information providing apparatus outside the vehicle can notify the driver of the existence and danger of the object more accurately.

[音提示範囲及び集音範囲の具体例]
つぎに、上述した4つの走行モードに応じた音提示範囲及び集音範囲の具体例と、ステアリングの操舵があった場合における音提示範囲及び集音範囲の具体例と、ウィンカ動作があった場合における音提示範囲及び集音範囲の具体例とについて、それぞれ説明する。
[Specific examples of sound presentation range and sound collection range]
Next, a specific example of the sound presentation range and the sound collection range according to the four driving modes described above, a specific example of the sound presentation range and the sound collection range when steering is performed, and a winker operation A sound presentation range and a specific example of the sound collection range will be described.

まず、車外情報提供装置は、走行モードが駐車モードである場合には、例えば図13に示すように、自車両100の非進行方向については半径R2のような同心円状の特性を有すると共に、進行方向については半径R1(>R2)のような範囲を拡大した特性を有する音提示範囲及び集音範囲とする。すなわち、車外情報提供装置は、自車両100の進行方向については、非進行方向に比べ、集音するマイクロホン11のゲインを上げ、音提示範囲及び集音範囲を拡大する。   First, when the traveling mode is the parking mode, the vehicle information providing apparatus has a concentric characteristic such as a radius R2 in the non-traveling direction of the host vehicle 100 as shown in FIG. As for the direction, a sound presentation range and a sound collection range having characteristics in which a range such as a radius R1 (> R2) is expanded are used. That is, the information providing apparatus outside the vehicle increases the gain of the microphone 11 that collects sound in the traveling direction of the host vehicle 100 as compared with the non-traveling direction, and expands the sound presentation range and the sound collection range.

これにより、車外情報提供装置は、例えば物体C等、駐車場所により近い領域に存在する物体を含む音情報を運転者に確実に提示することができる。   Thereby, the information provision apparatus outside a vehicle can show a driver | operator sound information including the object which exists in the area | region close | similar to a parking place, such as the object C, for example.

また、車外情報提供装置は、走行モードが市街地走行モードである場合には、例えば図14に示すように、自車両100の進行方向を長軸とする楕円状の特性、又は、使用した全てのマイクロホン11の特性を重ね合わせた特性のうち、広範囲となるいずれか一方の特性を有する音提示範囲及び集音範囲とする。   Further, when the driving mode is the urban driving mode, the vehicle outside information providing apparatus, as shown in FIG. 14, for example, has an elliptical characteristic whose major axis is the traveling direction of the host vehicle 100, or all of the used characteristics. Of the characteristics obtained by superimposing the characteristics of the microphone 11, a sound presentation range and a sound collection range having either one of the characteristics in a wide range are used.

これにより、車外情報提供装置は、隣接車線を走行する他車両101Bや同一車線を走行する他車両100A等の音情報を運転者に確実に提示することができる。   Thereby, the information providing apparatus outside the vehicle can surely present to the driver the sound information of the other vehicle 101B traveling in the adjacent lane and the other vehicle 100A traveling in the same lane.

さらに、車外情報提供装置は、走行モードが高速走行モードである場合には、例えば図15に示すように、自車両100の進行方向を長軸とする楕円状の特性を有する音提示範囲及び集音範囲とする。このとき、車外情報提供装置は、環境検出部13によって検出された車速に応じて、自車両の前後方向、すなわち、楕円の長軸方向に音提示範囲及び集音範囲の大きさを変化させる。すなわち、車外情報提供装置は、検出された車速に対応する自車両100の単位時間当たりの移動量が、運転者が危険に対応するために十分な距離を有する範囲となるように、音提示範囲及び集音範囲を決定する。   Further, when the traveling mode is the high-speed traveling mode, the outside-vehicle information providing apparatus, for example, as shown in FIG. 15, the sound presenting range and the collection having an elliptical characteristic with the traveling direction of the host vehicle 100 as the major axis. The sound range. At this time, the information providing apparatus outside the vehicle changes the size of the sound presentation range and the sound collection range in the front-rear direction of the host vehicle, that is, the major axis direction of the ellipse, according to the vehicle speed detected by the environment detection unit 13. That is, the information providing device outside the vehicle provides a sound presentation range so that the amount of movement per unit time of the host vehicle 100 corresponding to the detected vehicle speed is within a range having a sufficient distance for the driver to deal with the danger. And the sound collection range is determined.

これにより、車外情報提供装置は、高速走行時に注意を払うべき自車両の前後に位置する他車両101A,101Bや隣接車線を走行する他車両101B等の音情報を運転者に確実に提示することができる。   Thereby, the information providing apparatus outside the vehicle surely presents to the driver the sound information of the other vehicles 101A, 101B located before and after the host vehicle to which attention should be paid when traveling at high speed or the other vehicle 101B traveling in the adjacent lane. Can do.

さらにまた、車外情報提供装置は、走行モードが停車モードである場合には、例えば図16に示すように、同心円状の特性、又は、使用した全てのマイクロホン11の特性を重ね合わせた特性のうち、広範囲となるいずれか一方の特性を有する音提示範囲及び集音範囲とする。   Furthermore, when the driving mode is the stop mode, the outside-vehicle information providing apparatus, for example, as shown in FIG. 16, is a concentric characteristic or a characteristic obtained by superimposing characteristics of all the microphones 11 used. The sound presentation range and the sound collection range having either one of the characteristics in a wide range.

これにより、車外情報提供装置は、停車している自車両100の周囲に存在する物体を含む音情報を運転者に確実に提示することができる。   Thereby, the information providing apparatus outside the vehicle can surely present to the driver the sound information including the object existing around the own vehicle 100 that is stopped.

また、車外情報提供装置は、各走行モードに応じて音提示範囲及び集音範囲を設定した後にステアリングの操舵があった場合には、例えば図17に示すように、ステアリングの操舵に応じて死角となる領域を新たに追加すると共に、死角とならなくなる領域については元の音提示範囲及び集音範囲から減少させるように、音提示範囲及び集音範囲を変更する。   Further, when the steering operation is performed after the sound presentation range and the sound collection range are set according to each driving mode, the outside-vehicle information providing apparatus, for example, as shown in FIG. The sound presentation range and the sound collection range are changed so that the region that does not become a blind spot is reduced from the original sound presentation range and the sound collection range.

これにより、車外情報提供装置は、ステアリング角度を変更する度に、自車両100の移動方向に応じた適切な音情報を運転者に確実に提示することができる。   Thereby, the information providing apparatus outside the vehicle can reliably present appropriate sound information corresponding to the moving direction of the host vehicle 100 to the driver every time the steering angle is changed.

さらに、車外情報提供装置は、各走行モードに応じて音提示範囲及び集音範囲を設定した後にウィンカ動作があった場合には、例えば図18に示すように、自車両100の進行予定方向の範囲を拡大した特性を有する音提示範囲及び集音範囲とする。   Further, when the turn signal operation is performed after the sound presentation range and the sound collection range are set according to each driving mode, the vehicle exterior information providing apparatus displays the vehicle 100 in the direction in which the vehicle 100 is scheduled to travel, for example, as shown in FIG. A sound presentation range and a sound collection range having characteristics that expand the range.

これにより、車外情報提供装置は、ウィンカを動作させる度に、自車両100の進行予定方向に応じた、他車両100A、100B、100Cを含む適切な音情報を運転者に確実に提示することができる。   As a result, the information providing apparatus outside the vehicle can surely present to the driver appropriate sound information including the other vehicles 100A, 100B, and 100C corresponding to the traveling direction of the host vehicle 100 each time the blinker is operated. it can.

[走行状況に応じた動作例]
つぎに、走行状況に応じた動作の具体例について説明する。
[Operation example according to driving conditions]
Next, a specific example of the operation according to the traveling situation will be described.

まず、図19(a)に示すようなカーブ道路手前における動作例について説明する。   First, an operation example in front of a curved road as shown in FIG.

この場合、車外情報提供装置は、ナビゲーションシステムによって自車両100の進行方向先にカーブ道路の存在を検出するとシステムの動作を開始し、ステアリング角度に応じて運転者の視線方向を予測する。これにより、音提示範囲及び集音範囲ARは、図19(b)に示すように、先に図17を用いて説明したように、予測した運転者の視線方向に基づいて決定されることになる。このように、車外情報提供装置は、カーブ道路に応じた適切な音情報を運転者に確実に提示することができる。   In this case, the information providing apparatus outside the vehicle starts the operation of the system when the navigation system detects the presence of a curved road ahead of the traveling direction of the host vehicle 100, and predicts the driver's line-of-sight direction according to the steering angle. Thereby, as shown in FIG. 19B, the sound presentation range and the sound collection range AR are determined based on the predicted driver's line-of-sight direction, as described above with reference to FIG. Become. Thus, the vehicle exterior information providing apparatus can reliably present appropriate sound information corresponding to the curve road to the driver.

つぎに、図20に示すような右左折時における動作例について説明する。   Next, an operation example during a right / left turn as shown in FIG. 20 will be described.

この場合、車外情報提供装置は、図20(a)に示すように、ナビゲーションシステムによって自車両100の進行方向先にT字路の存在を検出するとシステムの動作を開始し、音提示範囲及び集音範囲ARの変更動作を開始する。ここで、車外情報提供装置は、自車両100の右側のウィンカを動作させた場合には、図20(b)に示すように、マイクロホン11の向きを変更し、T字路の左右方向の音を集音できるような音提示範囲及び集音範囲AR’に変更すればよい。これにより、車外情報提供装置は、自車両100がT字路に差し掛かった際に適切な音情報を運転者に確実に提示することができる。   In this case, as shown in FIG. 20 (a), the information providing apparatus outside the vehicle starts the operation of the system when the navigation system detects the presence of a T-junction ahead of the traveling direction of the host vehicle 100, thereby The changing operation of the sound range AR is started. Here, when the right-side blinker of the host vehicle 100 is operated, the outside-vehicle information providing apparatus changes the direction of the microphone 11 as shown in FIG. May be changed to a sound presentation range and a sound collection range AR ′ that can collect sound. Thereby, the information providing apparatus outside the vehicle can surely present appropriate sound information to the driver when the host vehicle 100 reaches the T-shaped road.

つぎに、図21に示すような合流時における動作例について説明する。   Next, an operation example at the time of merging as shown in FIG. 21 will be described.

この場合、車外情報提供装置は、ナビゲーションシステムによって自車両の走行車線が他車線への合流車線である旨を検出するとシステムの動作を開始し、ウィンカ動作に応じて運転者の視線方向を予測し、自車両100の進行予定方向及び後方の範囲を拡大した音提示範囲及び集音範囲ARに変更すればよい。これにより、車外情報提供装置は、自車両100が、他車両101が存在する他車線に合流する際に適切な音情報を運転者に確実に提示することができる。   In this case, the information providing apparatus outside the vehicle starts the operation of the system when the navigation system detects that the traveling lane of the host vehicle is a merging lane to another lane, and predicts the driver's line-of-sight direction according to the blinker operation. What is necessary is just to change into the sound presentation range and the sound collection range AR which expanded the direction of advancing of the own vehicle 100 and the back range. Accordingly, the vehicle exterior information providing apparatus can reliably present appropriate sound information to the driver when the host vehicle 100 joins another lane in which the other vehicle 101 exists.

つぎに、図22に示すような車線幅が狭い道路の走行時における動作例について説明する。   Next, an operation example when traveling on a road having a narrow lane width as shown in FIG. 22 will be described.

この場合、車外情報提供装置は、ナビゲーションシステムによって車線幅を検出するとシステムの動作を開始し、飛び出し等に対する注意を促すため、市街地走行モードや停車モードと同様に広範囲であり、特に車線幅よりも広範囲の音提示範囲及び集音範囲ARとする。これにより、車外情報提供装置は、狭い道路を走行する際に、自車両100の側面に迫っている壁などの情報を適切な音情報として運転者に確実に提示することができる。   In this case, the information providing device outside the vehicle starts the operation of the system when the lane width is detected by the navigation system, and in order to call attention to jumping out, etc. A wide sound presentation range and a sound collection range AR are set. Thereby, the information providing apparatus outside the vehicle can reliably present information such as a wall approaching the side surface of the own vehicle 100 to the driver as appropriate sound information when traveling on a narrow road.

つぎに、図23に示すような中央分離帯Sが存在する道路の走行時における動作例について説明する。   Next, an operation example during traveling on a road where the median strip S as shown in FIG. 23 exists will be described.

この場合、車外情報提供装置は、中央分離帯Sによって隔てられた対向車線に存在する他車両に注意を払う必要性は低いので、中央分離帯Sが存在しない自車両100の左方に範囲を拡大した音提示範囲及び集音範囲ARとする。これにより、車外情報提供装置は、中央分離帯Sが存在する道路を走行する際に、対向車線に存在する他車両101の情報を提示することなく、適切な音情報を運転者に確実に提示することができる。   In this case, since the information providing apparatus outside the vehicle is less likely to pay attention to other vehicles existing in the oncoming lane separated by the median strip S, the vehicle information providing device has a range to the left of the host vehicle 100 where the median strip S does not exist. The expanded sound presentation range and the sound collection range AR are set. As a result, when the vehicle outside information providing apparatus travels on the road where the median strip S exists, the vehicle information providing apparatus reliably presents appropriate sound information to the driver without presenting information of the other vehicle 101 existing in the oncoming lane. can do.

最後に、運転者の視線移動が頻繁に発生する場合における動作例について説明する。   Finally, an operation example in the case where the driver's line-of-sight movement frequently occurs will be described.

車外情報提供装置は、図24に示すように、運転者の視線方向を環境検出部13としての車載カメラCによって検出する構成とされる場合には、視線が向いていない方向の注意が疎かになりがちであるので、視線移動に応じて(a)と(b)とで切り換えることにより、視線が向いていない方向に範囲を拡大した音提示範囲及び集音範囲ARに動的に変更する。これにより、車外情報提供装置は、運転者の視線移動が頻繁に発生する場合であっても、適切な音情報を運転者に確実に提示することができる。   As shown in FIG. 24, when the outside information providing apparatus is configured to detect the driver's line-of-sight direction by the in-vehicle camera C as the environment detection unit 13, the attention of the direction in which the line-of-sight is not directed is negligible. Therefore, by switching between (a) and (b) according to the movement of the line of sight, the sound presentation range and the sound collection range AR are expanded dynamically in the direction in which the line of sight is not directed. As a result, the information providing apparatus outside the vehicle can reliably present appropriate sound information to the driver even when the driver's line-of-sight movement frequently occurs.

[実施形態の効果]
以上詳細に説明したように、本発明の実施形態として示した車外情報提供装置は、現在の自車両の走行状況に応じて、運転者に提示する音の入出力範囲である音提示範囲、及びマイクロホン11による集音範囲を決定し、物体検出センサ12によって自車両周囲に存在する物体が検出された場合に、マイクロホン11によって集音された音、及び、音提示範囲及び集音範囲切替装置15によって決定された音提示範囲及び集音範囲内に存在する物体を表す仮想音を時空間にマッピングし、情報提示部17を介して運転者に音情報を提示する。
[Effect of the embodiment]
As described above in detail, the vehicle information providing apparatus shown as the embodiment of the present invention includes a sound presentation range that is an input / output range of sound presented to the driver according to the current traveling state of the host vehicle, and The sound collection range by the microphone 11 is determined, and when an object present around the host vehicle is detected by the object detection sensor 12, the sound collected by the microphone 11 and the sound presentation range and sound collection range switching device 15 The virtual sound representing the object present in the sound presentation range and the sound collection range determined by the above is mapped in space-time, and the sound information is presented to the driver via the information presentation unit 17.

これにより、この車外情報提供装置においては、自車両の走行状況に応じて不要な情報を提示しないことにより、全ての音情報が運転者に提示されてしまうことがなくなるので、運転者の注意を散漫にさせる可能性を低減して当該運転者に負担をかけることなく、状況に応じた最適な車両外部の音情報を提供することができる。   As a result, in this out-of-vehicle information providing device, by not presenting unnecessary information according to the traveling state of the host vehicle, all sound information will not be presented to the driver. It is possible to provide optimal sound information outside the vehicle according to the situation without reducing the possibility of distraction and placing a burden on the driver.

また、この車外情報提供装置において、情報提示部17は、物体検出センサ12によって検出された物体の実空間上の位置に音源を配置するように、マイクロホン11によって集音された音、及び決定された音提示範囲及び集音範囲内に存在する物体を表す仮想音をマッピングすることにより、その実空間上の位置に物体が存在していることを運転者に的確に知らせることができる。   In the information providing apparatus outside the vehicle, the information presentation unit 17 determines the sound collected by the microphone 11 and the sound collected by the microphone 11 so as to place the sound source at a position in the real space of the object detected by the object detection sensor 12. By mapping the virtual sound representing the object existing in the sound presentation range and the sound collection range, the driver can be accurately informed that the object exists at the position in the real space.

さらに、この車外情報提供装置において、情報提示部17は、物体検出センサ12によって検出された物体の実空間上の位置よりも運転者に近い位置まで距離を圧縮した位置に音源を配置するように、マイクロホン11によって集音された音、及び決定された音提示範囲及び集音範囲内に存在する物体を表す仮想音をマッピングすることにより、物体の存在及び危険性を運転者により的確に知らせることができる。   Further, in this information providing apparatus outside the vehicle, the information presentation unit 17 arranges the sound source at a position where the distance is compressed to a position closer to the driver than the position in real space of the object detected by the object detection sensor 12. By mapping the sound collected by the microphone 11 and the virtual sound representing the determined sound presentation range and the object existing in the sound collection range, the driver can be more accurately informed of the presence and danger of the object. Can do.

さらにまた、この車外情報提供装置において、音提示範囲及び集音範囲切替装置15は、現在の自車両の走行状況が駐車状況である場合には、自車両の非進行方向については所定半径からなる同心円状の特性を有すると共に、進行方向についてはその半径よりも大きい領域まで範囲を拡大した特性を有する音提示範囲及び集音範囲とすることにより、駐車場所により近い領域に存在する物体を含む音情報を運転者に確実に提示することができる。   Furthermore, in this out-of-vehicle information providing device, the sound presentation range and sound collection range switching device 15 has a predetermined radius in the non-traveling direction of the host vehicle when the current traveling state of the host vehicle is a parking state. Sound that includes concentric circles and a sound presenting range and a sound collection range that has a range that extends to a region that is larger than its radius in the direction of travel. Information can be reliably presented to the driver.

また、この車外情報提供装置において、音提示範囲及び集音範囲切替装置15は、現在の自車両の走行状況が中速走行状況である場合には、自車両の進行方向を長軸とする楕円状の特性、又は、使用した全ての集音手段の特性を重ね合わせた特性のうち、広範囲となるいずれか一方の特性を有する音提示範囲及び集音範囲とすることにより、隣接車線を走行する他車両等の音情報を運転者に確実に提示することができる。   Moreover, in this information providing apparatus outside the vehicle, the sound presentation range and the sound collection range switching device 15 is an ellipse whose major axis is the traveling direction of the own vehicle when the current traveling state of the own vehicle is a medium speed traveling state. Driving in adjacent lanes by setting the sound presentation range and sound collection range to have a wide range of characteristics, or the characteristics of all the sound collecting means used in combination. Sound information of other vehicles and the like can be reliably presented to the driver.

さらに、この車外情報提供装置において、音提示範囲及び集音範囲切替装置15は、現在の自車両の走行状況が高速走行状況である場合には、自車両の進行方向を長軸とする楕円状の特性を有する音提示範囲及び集音範囲とし、当該自車両の車速に応じて楕円の長軸方向に音提示範囲及び集音範囲の大きさを変化させることにより、高速走行時に注意を払うべき自車両の前後に位置する他車両や隣接車線を走行する他車両等の音情報を運転者に確実に提示することができる。   Further, in the information providing apparatus outside the vehicle, the sound presentation range and the sound collection range switching device 15 is an elliptical shape whose major axis is the traveling direction of the own vehicle when the current traveling state of the own vehicle is a high speed traveling state. Pay attention when driving at high speeds by changing the size of the sound presentation range and the sound collection range in the major axis direction of the ellipse according to the vehicle speed of the host vehicle. It is possible to reliably present to the driver the sound information of other vehicles positioned in front of and behind the host vehicle and other vehicles traveling in adjacent lanes.

さらにまた、この車外情報提供装置において、音提示範囲及び集音範囲切替装置15は、現在の自車両の走行状況が停車状況である場合には、同心円状の特性、又は、使用した全ての集音手段の特性を重ね合わせた特性のうち、広範囲となるいずれか一方の特性を有する音提示範囲及び集音範囲とすることにより、停車している自車両の周囲に存在する物体を含む音情報を運転者に確実に提示することができる。   Furthermore, in this out-of-vehicle information providing device, the sound presentation range and the sound collection range switching device 15 is configured so that the concentric characteristics or all the used collection points are used when the current traveling state of the host vehicle is a stop state. Sound information including objects existing around the parked vehicle by setting the sound presentation range and sound collection range to have either one of the wide range of the characteristics obtained by superimposing the characteristics of the sound means Can be reliably presented to the driver.

また、この車外情報提供装置において、音提示範囲及び集音範囲切替装置15は、ステアリング角度及びウィンカ動作の有無に応じて予測された運転者の視線方向に基づいて音提示範囲及び集音範囲を決定することにより、運転者の視線の範囲外についても音情報として提示することができる。   In this outside information providing apparatus, the sound presentation range and sound collection range switching device 15 determines the sound presentation range and the sound collection range based on the driver's line-of-sight direction predicted according to the steering angle and the presence or absence of the blinker operation. By deciding, it is possible to present information outside the range of the driver's line of sight as sound information.

具体的には、この車外情報提供装置において、音提示範囲及び集音範囲切替装置15は、ステアリングの操舵に応じて死角となる領域を新たに追加すると共に、死角とならなくなる領域については元の音提示範囲及び集音範囲から減少させるように、音提示範囲及び集音範囲を決定することにより、ステアリング角度を変更する度に、自車両の移動方向に応じた適切な音情報を運転者に確実に提示することができる。   Specifically, in the outside information providing device, the sound presentation range and the sound collection range switching device 15 newly adds a region that becomes a blind spot in accordance with the steering of the steering, and the region that does not become the blind spot is the original one. By determining the sound presentation range and the sound collection range so as to decrease from the sound presentation range and the sound collection range, each time the steering angle is changed, appropriate sound information corresponding to the moving direction of the host vehicle is given to the driver. Can be presented reliably.

そして、この車外情報提供装置においては、このようなステアリング角度に応じた音提示範囲及び集音範囲の決定手法を応用し、自車両の進行方向先にカーブ道路の存在が検出された場合には、音提示範囲及び集音範囲切替装置15により、ステアリング角度に応じて予測された運転者の視線方向に基づいて音提示範囲及び集音範囲を決定することにより、カーブ道路に応じた適切な音情報を運転者に確実に提示することができる。   In this information providing apparatus outside the vehicle, when a method for determining the sound presentation range and the sound collection range according to the steering angle is applied, and the presence of a curve road is detected in the traveling direction ahead of the own vehicle, The sound presentation range and sound collection range switching device 15 determines the sound presentation range and sound collection range based on the driver's line-of-sight direction predicted according to the steering angle. Information can be reliably presented to the driver.

さらに、この車外情報提供装置において、音提示範囲及び集音範囲切替装置15は、ウィンカ動作があった場合には、自車両の進行予定方向の範囲を拡大した特性を有する音提示範囲及び集音範囲とすることにより、ウィンカを動作させる度に、自車両の進行予定方向に応じた適切な音情報を運転者に確実に提示することができる。   Furthermore, in this information providing apparatus outside the vehicle, the sound presentation range and sound collection range switching device 15 has a characteristic that expands the range of the planned traveling direction of the host vehicle when there is a blinker operation. By setting the range, every time the blinker is operated, appropriate sound information corresponding to the planned traveling direction of the host vehicle can be surely presented to the driver.

そして、この車外情報提供装置においては、このようなウィンカ動作に応じた音提示範囲及び集音範囲の決定手法を応用し、自車両の進行方向先にT字路の存在が検出された場合には、音提示範囲及び集音範囲切替装置15により、当該T字路の左右方向の音を集音できるように範囲を拡大した特性を有する音提示範囲及び集音範囲に変更することにより、自車両がT字路に差し掛かった際に適切な音情報を運転者に確実に提示することができる。   And in this information providing apparatus outside a vehicle, when the determination method of the sound presentation range and the sound collection range according to such a blinker operation is applied, and the presence of a T-junction is detected in the traveling direction ahead of the own vehicle, The sound presentation range and sound collection range switching device 15 changes the sound presentation range and sound collection range to the sound presentation range and the sound collection range having the characteristics of expanding the range so that the sound in the horizontal direction of the T-junction can be collected. Appropriate sound information can be reliably presented to the driver when the vehicle reaches the T-junction.

また、この車外情報提供装置において、音提示範囲及び集音範囲切替装置15は、自車両の走行車線が他車線への合流車線である旨が検出された場合には、ウィンカ動作に応じて予測された運転者の視線方向に基づいて、自車両の進行予定方向及び後方の範囲を拡大した音提示範囲及び集音範囲に変更することにより、自車両が他車線に合流する際に適切な音情報を運転者に確実に提示することができる。   Moreover, in this information providing apparatus outside the vehicle, the sound presentation range and the sound collection range switching device 15 predicts according to the blinker operation when it is detected that the traveling lane of the host vehicle is a merging lane to another lane. Based on the driver's line-of-sight direction, the appropriate sound when the host vehicle joins the other lane is changed to a sound presenting range and a sound collection range that expands the planned traveling direction and the rear range of the host vehicle. Information can be reliably presented to the driver.

さらに、この車外情報提供装置において、音提示範囲及び集音範囲切替装置15は、車線幅が狭い道路を走行している旨が検出された場合には、車線幅よりも広範囲の音提示範囲及び集音範囲とすることにより、狭い道路を走行する際に適切な音情報を運転者に確実に提示することができる。   Furthermore, in this information providing apparatus outside the vehicle, the sound presentation range and the sound collection range switching device 15 detects a sound presentation range and a wider range than the lane width when it is detected that the vehicle is traveling on a road having a narrow lane width. By setting the sound collection range, it is possible to reliably present appropriate sound information to the driver when traveling on a narrow road.

さらにまた、この車外情報提供装置において、音提示範囲及び集音範囲切替装置15は、中央分離帯が存在する道路を走行している旨が検出された場合には、中央分離帯が存在しない自車両の側に範囲を拡大した音提示範囲及び集音範囲とすることにより、中央分離帯が存在する道路を走行する際に適切な音情報を運転者に確実に提示することができる。   Furthermore, in this information providing apparatus outside the vehicle, the sound presentation range and the sound collection range switching device 15 detects that the vehicle is traveling on a road where the central separation zone exists, and automatically detects the absence of the central separation zone. By using the sound presentation range and the sound collection range that are expanded on the vehicle side, it is possible to reliably present appropriate sound information to the driver when traveling on a road where a median strip exists.

また、この車外情報提供装置において、音提示範囲及び集音範囲切替装置15は、運転者の視線移動が検出された場合には、視線移動に応じて、視線が向いていない方向に範囲を拡大した音提示範囲及び集音範囲に動的に変更することにより、運転者の視線移動が頻繁に発生する場合であっても、適切な音情報を運転者に確実に提示することができる。   In this information providing apparatus outside the vehicle, the sound presentation range and the sound collection range switching device 15 expands the range in a direction in which the line of sight is not directed according to the movement of the line of sight when the movement of the line of sight of the driver is detected. By dynamically changing to the sound presentation range and the sound collection range, appropriate sound information can be reliably presented to the driver even when the driver's line-of-sight movement frequently occurs.

なお、上述の実施の形態は本発明の一例である。このため、本発明は、上述の実施の形態に限定されることはなく、この実施の形態以外の形態であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計などに応じて種々の変更が可能であることは勿論である。   The above-described embodiment is an example of the present invention. For this reason, the present invention is not limited to the above-described embodiment, and even if it is a form other than this embodiment, as long as it does not depart from the technical idea according to the present invention, the design and the like Of course, various modifications are possible.

本発明の実施形態として示す車外情報提供装置の構成について示すブロック図である。It is a block diagram shown about the composition of the information providing device outside a vehicle shown as an embodiment of the present invention. (A)は全方向の範囲の音を集音したい場合におけるマイクロホンの配設状況と集音範囲との関係について示す図であり、(B)は後方の範囲の音を集音したい場合におけるマイクロホンの配設状況と集音範囲との関係について示す図であり、(C)は左前方以外の方向の音を集音したい場合におけるマイクロホンの配設状況と集音範囲との関係について示す図であり、(D)は左前方及び右後方以外の方向の音を集音したい場合におけるマイクロホンの配設状況と集音範囲との関係について示す図である。(A) is a figure which shows the relationship between the arrangement | positioning state of the microphone in the case of collecting the sound of the range of all directions, and the sound collection range, (B) is the microphone in the case of collecting the sound of a back range. It is a figure which shows about the relationship between the arrangement | positioning condition of and the sound collection range, and (C) is a figure which shows the relationship between the arrangement | positioning condition of a microphone and the sound collection range in the case of collecting the sound of directions other than the left front. FIG. 6D is a diagram illustrating a relationship between the microphone arrangement state and the sound collection range when sound in a direction other than the left front and right rear is desired to be collected. (A)は指向性マイクロホンと無指向性マイクロホンとを設置した場合において左前方以外の方向の音を集音したい場合におけるマイクロホンの配設状況と集音範囲との関係について示す図であり、(B)は指向性マイクロホンと無指向性マイクロホンとを設置した場合において全方向及び左前方の音を集音したい場合におけるマイクロホンの配設状況と集音範囲との関係について示す図である。(A) is a diagram showing the relationship between the microphone arrangement and the sound collection range when it is desired to collect sound in directions other than the left front when a directional microphone and an omnidirectional microphone are installed. B) is a diagram showing the relationship between the microphone arrangement state and the sound collection range when it is desired to collect sound in all directions and left front when a directional microphone and an omnidirectional microphone are installed. 物体検出センサの配設状況と音提示範囲との関係について示す図である。It is a figure shown about the relationship between the arrangement | positioning condition of an object detection sensor, and a sound presentation range. トランスオーラルシステムの構築例について示す図である。It is a figure shown about the construction example of a trans-oral system. 本発明の実施形態として示す車外情報提供装置において、自車両外部の音を運転者に対して提供する際の一連の手順を示すフローチャートである。4 is a flowchart showing a series of procedures when providing a driver with a sound outside the host vehicle in the outside information providing apparatus shown as an embodiment of the present invention. 本発明の実施形態として示す車外情報提供装置において、走行モード設定処理を行う際の一連の手順を示すフローチャートである。It is a flowchart which shows a series of procedures at the time of performing driving mode setting process in the information provision apparatus outside a vehicle shown as embodiment of this invention. 本発明の実施形態として示す車外情報提供装置において、動作モード設定処理を行う際の一連の手順を示すフローチャートである。It is a flowchart which shows a series of procedures at the time of performing an operation mode setting process in the information provision apparatus outside a vehicle shown as embodiment of this invention. 本発明の実施形態として示す車外情報提供装置において、条件分岐処理を行う際の一連の手順を示すフローチャートである。It is a flowchart which shows a series of procedures at the time of performing a conditional branch process in the information provision apparatus outside a vehicle shown as embodiment of this invention. 本発明の実施形態として示す車外情報提供装置において、マッピング処理を行う際の一連の手順を示すフローチャートである。It is a flowchart which shows a series of procedures at the time of performing a mapping process in the information provision apparatus outside a vehicle shown as embodiment of this invention. 自車両外部にて実際に発生している音と仮想音とを融合させた音情報を運転者に提示する具体例について示す図である。It is a figure shown about the specific example which shows a driver | operator the sound information which united the sound actually generated outside the own vehicle, and the virtual sound. 距離情報を圧縮した音情報を運転者に提示する具体例について示す図である。It is a figure shown about the specific example which shows a driver | operator the sound information which compressed distance information. 駐車モードにおける音提示範囲及び集音範囲の具体例について示す図である。It is a figure shown about the specific example of the sound presentation range in a parking mode, and a sound collection range. 市街地走行モードにおける音提示範囲及び集音範囲の具体例について示す図である。It is a figure shown about the specific example of the sound presentation range and sound collection range in an urban area driving mode. 高速走行モードにおける音提示範囲及び集音範囲の具体例について示す図である。It is a figure shown about the specific example of the sound presentation range and sound collection range in high-speed driving mode. 停車モードにおける音提示範囲及び集音範囲の具体例について示す図である。It is a figure shown about the specific example of the sound presentation range in the stop mode, and a sound collection range. ステアリングの操舵があった場合における音提示範囲及び集音範囲の具体例について示す図である。It is a figure shown about the specific example of the sound presentation range in the case of steering of a steering, and a sound collection range. ウィンカ動作があった場合における音提示範囲及び集音範囲の具体例について示す図である。It is a figure shown about the specific example of the sound presentation range and the sound collection range when there is a blinker operation. カーブ道路手前における動作例について示す図である。It is a figure shown about the operation example in front of a curve road. 右左折時における動作例について示す図である。It is a figure shown about the operation example at the time of right and left turn. 合流時における動作例について示す図である。It is a figure shown about the operation example at the time of merge. 車線幅が狭い道路の走行時における動作例について示す図である。It is a figure shown about the operation example at the time of driving | running | working on the road with a narrow lane width. 中央分離帯が存在する道路の走行時における動作例について示す図である。It is a figure shown about the operation example at the time of driving | running | working of the road where a median strip exists. 運転者の視線移動が頻繁に発生する場合における動作例について示す図である。It is a figure shown about the operation example in case a driver | operator's eyes | visual_axis movement generate | occur | produces frequently.

符号の説明Explanation of symbols

11,11a,11b,11c,11d マイクロホン
11e 指向性マイクロホン
11f 無指向性マイクロホン
12,12a,12b,12c,12d 物体検出センサ
13 環境検出部
13a 位置情報検出部
13b 車載機器操作信号出力部
13c 画像出力部
14 情報判定部
14a 駐車場所判定部
14b 移動方向検出部
14c 移動物体検出部
15 音提示範囲及び集音範囲切替装置
16 タイミング及び位置決定部
17 情報提示部
17a 仮想音源生成部
17b ミキシングゲイン調整部
17c 音情報提示部
A,B 人間
AR,AR’ 音提示範囲及び集音範囲
C 車載カメラ
C1,C2 位置
G,G11,G14,G21,G24 伝達特性
H,H11,H12,H21,H22,H31,H32,H41,H42 フィルタ
SP,SP1,SP2,SP3,SP4 スピーカ
R,R1,R2,R3,R4,R5,R6,R7 半径
S 中央分離帯
W 壁面
X,X’,Y,Y’ 発話内容
X1,X2 入力信号
Y1,Y2 観測信号
11, 11a, 11b, 11c, 11d Microphone 11e Directional microphone 11f Omnidirectional microphone 12, 12a, 12b, 12c, 12d Object detection sensor 13 Environment detection unit 13a Position information detection unit 13b In-vehicle device operation signal output unit 13c Image output Unit 14 information determination unit 14a parking location determination unit 14b moving direction detection unit 14c moving object detection unit 15 sound presentation range and sound collection range switching device 16 timing and position determination unit 17 information presentation unit 17a virtual sound source generation unit 17b mixing gain adjustment unit 17c Sound information presentation part A, B Human AR, AR 'Sound presentation range and sound collection range C Car-mounted camera C1, C2 Position G, G11, G14, G21, G24 Transfer characteristics H, H11, H12, H21, H22, H31, H32, H41, H42 Filter SP, S P1, SP2, SP3, SP4 Speaker R, R1, R2, R3, R4, R5, R6, R7 Radius S Median strip W Wall X, X ', Y, Y' Utterance contents X1, X2 Input signal Y1, Y2 Observation signal

Claims (15)

自車両に設置されて自車両外部の音を集音する集音手段と、
自車両に設置されて自車両周囲に存在する物体を検出する物体検出手段と、
現在の自車両の走行状況に応じて、前記集音手段によって集音された音及び物体を表す仮想音を運転者に提示する自車両外部の音提示範囲を決定し、前記音提示範囲を含む範囲に前記集音手段による集音範囲を決定する決定手段と、
前記物体検出手段によって自車両周囲に存在する物体が検出された場合に、前記集音手段によって集音された音、及び前記決定手段によって決定された音提示範囲及び集音範囲内に存在する物体を表す仮想音を時空間にマッピングし、運転者に音情報を提示する情報提示手段とを備え、
前記決定手段は、現在の自車両の走行状況が駐車状況である場合には、自車両の非進行方向については所定半径からなる同心円状の特性を有すると共に、進行方向については前記半径よりも大きい領域まで範囲を拡大した特性を有する音提示範囲及び集音範囲とすることを特徴とする車外情報提供装置。
Sound collecting means for collecting sounds outside the own vehicle installed in the own vehicle;
Object detection means for detecting an object installed in the host vehicle and existing around the host vehicle;
A sound presenting range outside the own vehicle for presenting a sound collected by the sound collecting means and a virtual sound representing an object to the driver is determined according to a current traveling state of the own vehicle, and includes the sound presenting range determining means for determining a sound collecting range by said sound collecting means in the range,
When the object detecting means detects an object present around the vehicle, the sound collected by the sound collecting means, and the sound presenting range and the object existing in the sound collecting range determined by the determining means An information presentation means for mapping the virtual sound representing the time and space and presenting the sound information to the driver ,
The determination means has a concentric characteristic of a predetermined radius in the non-traveling direction of the host vehicle when the current traveling state of the host vehicle is a parking state, and is larger than the radius in the traveling direction. A vehicle outside information providing apparatus characterized by having a sound presentation range and a sound collection range having characteristics that are expanded to the area .
自車両に設置されて自車両外部の音を集音する集音手段と、
自車両に設置されて自車両周囲に存在する物体を検出する物体検出手段と、
現在の自車両の走行状況に応じて、前記集音手段によって集音された音及び物体を表す仮想音を運転者に提示する自車両外部の音提示範囲を決定し、前記音提示範囲を含む範囲に前記集音手段による集音範囲を決定する決定手段と、
前記物体検出手段によって自車両周囲に存在する物体が検出された場合に、前記集音手段によって集音された音、及び前記決定手段によって決定された音提示範囲及び集音範囲内に存在する物体を表す仮想音を時空間にマッピングし、運転者に音情報を提示する情報提示手段とを備え、
前記決定手段は、現在の自車両の走行状況が中速走行状況である場合には、自車両の進行方向を長軸とする楕円状の特性、又は、使用した全ての集音手段の特性を重ね合わせた特性のうち、広範囲となるいずれか一方の特性を有する音提示範囲及び集音範囲とすることを特徴とする車外情報提供装置。
Sound collecting means for collecting sounds outside the own vehicle installed in the own vehicle;
Object detection means for detecting an object installed in the host vehicle and existing around the host vehicle;
A sound presenting range outside the own vehicle for presenting a sound collected by the sound collecting means and a virtual sound representing an object to the driver is determined according to a current traveling state of the own vehicle, and includes the sound presenting range determining means for determining a sound collecting range by said sound collecting means in the range,
When the object detecting means detects an object present around the vehicle, the sound collected by the sound collecting means, and the sound presenting range and the object existing in the sound collecting range determined by the determining means An information presentation means for mapping the virtual sound representing the time and space and presenting the sound information to the driver ,
When the current traveling state of the host vehicle is a medium speed traveling state, the determining unit is configured to obtain an elliptical characteristic whose major axis is the traveling direction of the host vehicle, or characteristics of all the sound collecting units used. A vehicle outside information providing apparatus characterized by having a sound presenting range and a sound collecting range having either one of a wide range of the superposed characteristics .
自車両に設置されて自車両外部の音を集音する集音手段と、
自車両に設置されて自車両周囲に存在する物体を検出する物体検出手段と、
現在の自車両の走行状況に応じて、前記集音手段によって集音された音及び物体を表す仮想音を運転者に提示する自車両外部の音提示範囲を決定し、前記音提示範囲を含む範囲に前記集音手段による集音範囲を決定する決定手段と、
前記物体検出手段によって自車両周囲に存在する物体が検出された場合に、前記集音手段によって集音された音、及び前記決定手段によって決定された音提示範囲及び集音範囲内に存在する物体を表す仮想音を時空間にマッピングし、運転者に音情報を提示する情報提示手段とを備え、
前記決定手段は、現在の自車両の走行状況が高速走行状況である場合には、自車両の進行方向を長軸とする楕円状の特性を有する音提示範囲及び集音範囲とし、当該自車両の車速に応じて楕円の長軸方向に音提示範囲及び集音範囲の大きさを変化させることを特徴とする車外情報提供装置。
Sound collecting means for collecting sounds outside the own vehicle installed in the own vehicle;
Object detection means for detecting an object installed in the host vehicle and existing around the host vehicle;
A sound presenting range outside the own vehicle for presenting a sound collected by the sound collecting means and a virtual sound representing an object to the driver is determined according to a current traveling state of the own vehicle, and includes the sound presenting range determining means for determining a sound collecting range by said sound collecting means in the range,
When the object detecting means detects an object present around the vehicle, the sound collected by the sound collecting means, and the sound presenting range and the object existing in the sound collecting range determined by the determining means An information presentation means for mapping the virtual sound representing the time and space and presenting the sound information to the driver ,
When the current traveling state of the host vehicle is a high-speed traveling state, the determining means sets the sound presenting range and the sound collecting range having an elliptical characteristic with the traveling direction of the host vehicle as a major axis, A vehicle outside information providing device that changes the size of the sound presentation range and the sound collection range in the major axis direction of the ellipse according to the vehicle speed of the vehicle .
自車両に設置されて自車両外部の音を集音する集音手段と、
自車両に設置されて自車両周囲に存在する物体を検出する物体検出手段と、
現在の自車両の走行状況に応じて、前記集音手段によって集音された音及び物体を表す仮想音を運転者に提示する自車両外部の音提示範囲を決定し、前記音提示範囲を含む範囲に前記集音手段による集音範囲を決定する決定手段と、
前記物体検出手段によって自車両周囲に存在する物体が検出された場合に、前記集音手段によって集音された音、及び前記決定手段によって決定された音提示範囲及び集音範囲内に存在する物体を表す仮想音を時空間にマッピングし、運転者に音情報を提示する情報提示手段とを備え、
前記決定手段は、現在の自車両の走行状況が停車状況である場合には、同心円状の特性、又は、使用した全ての集音手段の特性を重ね合わせた特性のうち、広範囲となるいずれか一方の特性を有する音提示範囲及び集音範囲とすることを特徴とする車外情報提供装置。
Sound collecting means for collecting sounds outside the own vehicle installed in the own vehicle;
Object detection means for detecting an object installed in the host vehicle and existing around the host vehicle;
A sound presenting range outside the own vehicle for presenting a sound collected by the sound collecting means and a virtual sound representing an object to the driver is determined according to a current traveling state of the own vehicle, and includes the sound presenting range determining means for determining a sound collecting range by said sound collecting means in the range,
When the object detecting means detects an object present around the vehicle, the sound collected by the sound collecting means, and the sound presenting range and the object existing in the sound collecting range determined by the determining means An information presentation means for mapping the virtual sound representing the time and space and presenting the sound information to the driver ,
The determining means, when the current driving situation of the host vehicle is a stopping situation, is either a concentric characteristic or a characteristic that is a wide range of characteristics obtained by superimposing characteristics of all the sound collecting means used. A vehicle outside information providing apparatus characterized by having a sound presentation range and a sound collection range having one characteristic .
前記情報提示手段は、前記物体検出手段によって検出された物体の実空間上の位置に音源を配置するように、前記集音手段によって集音された音、及び前記決定手段によって決定された音提示範囲及び集音範囲内に存在する物体を表す仮想音を時空間にマッピングすることを特徴とする請求項1乃至請求項4の何れか一項に記載の車外情報提供装置。 The information presenting means includes the sound collected by the sound collecting means and the sound presented by the determining means so as to place a sound source at a position in the real space of the object detected by the object detecting means. range and outside the information providing apparatus according to the virtual sound to any one of claims 1 to 4, wherein the mapping the space-time representing the objects present in the sound collecting range. 前記情報提示手段は、前記物体検出手段によって検出された物体の実空間上の位置よりも運転者に近い位置まで距離を圧縮した位置に音源を配置するように、前記集音手段によって集音された音、及び前記決定手段によって決定された音提示範囲及び集音範囲内に存在する物体を表す仮想音を時空間にマッピングすることを特徴とする請求項1乃至請求項4の何れか一項に記載の車外情報提供装置。 The information presenting means is collected by the sound collecting means so that the sound source is arranged at a position where the distance is compressed to a position closer to the driver than the position in real space of the object detected by the object detecting means. sound, and any one of claims 1 to 4 virtual sound representing the objects present in the sound presented scope and sound collecting range determined by the determining means and wherein the mapping the space-time The information providing device outside the vehicle according to 1. 前記決定手段は、少なくともステアリング角度及びウィンカ動作の有無に応じて予測された運転者の視線方向に基づいて音提示範囲及び集音範囲を決定することを特徴とする請求項1乃至請求項4の何れか一項に記載の車外情報提供装置。 The said determination means determines a sound presentation range and a sound collection range based on a driver | operator's gaze direction estimated according to the steering angle and the presence or absence of a blinker operation | movement at least . The information providing apparatus outside a vehicle according to any one of the above. 前記決定手段は、ステアリングの操舵に応じて死角となる領域を新たに追加すると共に、死角とならなくなる領域については元の音提示範囲及び集音範囲から減少させるように、音提示範囲及び集音範囲を決定することを特徴とする請求項に記載の車外情報提供装置。 The determination means adds a new area that becomes a blind spot in accordance with the steering of the steering, and reduces the sound presentation range and the sound collection range so that the area that does not become the blind spot is reduced from the original sound presentation range and the sound collection range. The outside information providing apparatus according to claim 7 , wherein a range is determined. 前記決定手段は、自車両の進行方向先にカーブ道路の存在が検出された場合には、ステアリング角度に応じて予測された運転者の視線方向に基づいて音提示範囲及び集音範囲を決定することを特徴とする請求項に記載の車外情報提供装置。 The determination means determines the sound presentation range and the sound collection range based on the driver's line-of-sight direction predicted according to the steering angle when the presence of a curved road is detected ahead of the traveling direction of the host vehicle. The outside information provision apparatus of Claim 8 characterized by the above-mentioned. 前記決定手段は、ウィンカ動作があった場合には、自車両の進行予定方向の範囲を拡大した特性を有する音提示範囲及び集音範囲とすることを特徴とする請求項に記載の車外情報提供装置。 8. The vehicle exterior information according to claim 7 , wherein the determination means uses a sound presentation range and a sound collection range having characteristics obtained by enlarging a range of a traveling direction of the host vehicle when a winker operation is performed. Providing device. 前記決定手段は、自車両の進行方向先にT字路の存在が検出された場合には、当該T字路の左右方向の音を集音できるように範囲を拡大した特性を有する音提示範囲及び集音範囲に変更することを特徴とする請求項1に記載の車外情報提供装置。 When the presence of a T-junction is detected ahead of the traveling direction of the host vehicle, the determination means has a sound presentation range having a characteristic expanded so that sound in the left-right direction of the T-junction can be collected. and outside information providing apparatus according to claim 1 0, characterized in that to change the sound collection range. 前記決定手段は、自車両の走行車線が他車線への合流車線である旨が検出された場合には、ウィンカ動作に応じて予測された運転者の視線方向に基づいて、自車両の進行予定方向及び後方の範囲を拡大した音提示範囲及び集音範囲に変更することを特徴とする請求項1に記載の車外情報提供装置。 The determination means, when it is detected that the traveling lane of the host vehicle is a merging lane to another lane, the traveling schedule of the host vehicle is based on the driver's line-of-sight direction predicted according to the blinker operation. outside information providing apparatus according to claim 1 0, characterized in that to change the sound presentation range and collected ranges enlarged direction and rear ranges. 前記決定手段は、車線幅が狭い道路を走行している旨が検出された場合には、車線幅よりも広範囲の音提示範囲及び集音範囲とすることを特徴とする請求項1乃至請求項4の何れか一項に記載の車外情報提供装置。 Said determining means, when the effect that the lane width is traveling on a narrow road is detected, the preceding claims, characterized in that a wide range of sound presentation range and sound collecting range than the lane width The vehicle exterior information provision apparatus as described in any one of 4 . 前記決定手段は、中央分離帯が存在する道路を走行している旨が検出された場合には、前記中央分離帯が存在しない自車両の側に範囲を拡大した音提示範囲及び集音範囲とすることを特徴とする請求項1乃至請求項4の何れか一項に記載の車外情報提供装置。 When it is detected that the determination means is traveling on a road where a median strip exists, a sound presenting range and a sound collection range that are expanded on the vehicle side where the median strip does not exist The outside information provision device according to any one of claims 1 to 4 characterized by things. 前記決定手段は、運転者の視線移動が検出された場合には、視線移動に応じて、視線が向いていない方向に範囲を拡大した音提示範囲及び集音範囲に動的に変更することを特徴とする請求項1乃至請求項4の何れか一項に記載の車外情報提供装置。 When the driver's line of sight movement is detected, the determining means dynamically changes to a sound presentation range and a sound collection range in which the range is expanded in a direction in which the line of sight is not directed according to the line of sight movement. The information providing device outside a vehicle according to any one of claims 1 to 4, wherein the information providing device is outside the vehicle.
JP2008097177A 2008-04-03 2008-04-03 Outside vehicle information providing apparatus and outside vehicle information providing method Expired - Fee Related JP5303998B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008097177A JP5303998B2 (en) 2008-04-03 2008-04-03 Outside vehicle information providing apparatus and outside vehicle information providing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008097177A JP5303998B2 (en) 2008-04-03 2008-04-03 Outside vehicle information providing apparatus and outside vehicle information providing method

Publications (2)

Publication Number Publication Date
JP2009251799A JP2009251799A (en) 2009-10-29
JP5303998B2 true JP5303998B2 (en) 2013-10-02

Family

ID=41312474

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008097177A Expired - Fee Related JP5303998B2 (en) 2008-04-03 2008-04-03 Outside vehicle information providing apparatus and outside vehicle information providing method

Country Status (1)

Country Link
JP (1) JP5303998B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9873428B2 (en) 2015-10-27 2018-01-23 Ford Global Technologies, Llc Collision avoidance using auditory data
US9937922B2 (en) 2015-10-06 2018-04-10 Ford Global Technologies, Llc Collision avoidance using auditory data augmented with map data

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5395716B2 (en) * 2010-03-25 2014-01-22 株式会社デンソーアイティーラボラトリ Outside sound providing device, outside sound providing method and program
JP2011232292A (en) * 2010-04-30 2011-11-17 Toyota Motor Corp Vehicle exterior sound detection device
JP2011232293A (en) * 2010-04-30 2011-11-17 Toyota Motor Corp Vehicle exterior sound detection device
JP5598484B2 (en) 2012-01-19 2014-10-01 株式会社デンソー Audio output device
JP6684608B2 (en) * 2016-02-19 2020-04-22 学校法人 中央大学 Sound field control device, sound field control system, and sound field control method
KR101748276B1 (en) 2016-03-10 2017-06-16 현대자동차주식회사 Method for providing sound detection information, apparatus detecting sound around vehicle, and vehicle including the same
EP3534349B1 (en) 2016-10-25 2023-12-27 Pioneer Corporation Processing device, output method, and program
JP6690007B2 (en) 2016-10-25 2020-04-28 パイオニア株式会社 Processing device, server device, output method, and program
WO2018163545A1 (en) * 2017-03-09 2018-09-13 ソニー株式会社 Information processing device, information processing method and recording medium
JP7143623B2 (en) * 2018-05-08 2022-09-29 富士通株式会社 sound control device
JPWO2020003819A1 (en) * 2018-06-26 2021-08-05 ソニーグループ株式会社 Audio signal processors, mobile devices, and methods, and programs
JP7081669B2 (en) * 2018-08-03 2022-06-07 日本電気株式会社 Information processing equipment, information processing methods and information processing programs
KR102531313B1 (en) * 2018-09-04 2023-05-12 현대자동차주식회사 Display device and Vehicle having the same and method for controlling the same

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2689792B2 (en) * 1991-10-30 1997-12-10 日産自動車株式会社 Three-dimensional sound field alarm device
JPH07159190A (en) * 1993-12-09 1995-06-23 Zanabui Informatics:Kk Sound device totallizing system on vehicle
JPH09128697A (en) * 1995-11-06 1997-05-16 Honda Motor Co Ltd Circumferential state monitor device for vehicle
JP2005316704A (en) * 2004-04-28 2005-11-10 Sony Corp Surrounding state notification device and method for notifying surrounding state

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9937922B2 (en) 2015-10-06 2018-04-10 Ford Global Technologies, Llc Collision avoidance using auditory data augmented with map data
US9873428B2 (en) 2015-10-27 2018-01-23 Ford Global Technologies, Llc Collision avoidance using auditory data

Also Published As

Publication number Publication date
JP2009251799A (en) 2009-10-29

Similar Documents

Publication Publication Date Title
JP5303998B2 (en) Outside vehicle information providing apparatus and outside vehicle information providing method
US10870435B2 (en) Notice management apparatus and notice management method
JP7040621B2 (en) Vehicle travel control method and travel control device
JP6677822B2 (en) Vehicle control device
US10748425B2 (en) Image generation apparatus
JP6323385B2 (en) Vehicle travel control device
US20180211528A1 (en) Vehicle acoustic-based emergency vehicle detection
US10173680B2 (en) Vehicle speed control device
JP6665605B2 (en) Display control device and display control method
JP7155991B2 (en) Notification device
JPWO2020035896A1 (en) Vehicle travel control method and travel control device
JP2018095143A (en) Vehicle control device
JP2017088133A (en) Driving support device
JP2008123215A (en) Driving support device, method and program
JP2008021181A (en) Driving support information notifying device
JP2006142888A (en) Vehicular informing device and program of vehicular informing method
JP2009026003A (en) Operation support system
JP2007122536A (en) Obstacle report device for vehicle
JP2005328181A (en) Periphery confirming apparatus
WO2022044768A1 (en) Vehicular display device
JP2019159682A (en) Driving assistance system
JPWO2018180523A1 (en) Information processing apparatus, information processing method, program, and moving object
JP2020177292A (en) Vehicle remote indication system
JP2008293095A (en) Operation support system
JP2017167737A (en) Admission control device and admission control method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110315

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120919

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120925

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121116

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130528

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130610

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5303998

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees