JP6468162B2 - Obstacle notification device - Google Patents

Obstacle notification device Download PDF

Info

Publication number
JP6468162B2
JP6468162B2 JP2015205792A JP2015205792A JP6468162B2 JP 6468162 B2 JP6468162 B2 JP 6468162B2 JP 2015205792 A JP2015205792 A JP 2015205792A JP 2015205792 A JP2015205792 A JP 2015205792A JP 6468162 B2 JP6468162 B2 JP 6468162B2
Authority
JP
Japan
Prior art keywords
obstacle
noise element
noise
wave
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015205792A
Other languages
Japanese (ja)
Other versions
JP2017078912A (en
Inventor
健 古賀
健 古賀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2015205792A priority Critical patent/JP6468162B2/en
Priority to PCT/JP2016/080990 priority patent/WO2017069162A1/en
Priority to DE112016004777.0T priority patent/DE112016004777T5/en
Priority to US15/769,273 priority patent/US10983188B2/en
Publication of JP2017078912A publication Critical patent/JP2017078912A/en
Application granted granted Critical
Publication of JP6468162B2 publication Critical patent/JP6468162B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/80Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using ultrasonic, sonic or infrasonic waves
    • G01S3/802Systems for determining direction or deviation from predetermined direction
    • G01S3/808Systems for determining direction or deviation from predetermined direction using transducers spaced apart and measuring phase or time difference between signals therefrom, i.e. path-difference systems
    • G01S3/8083Systems for determining direction or deviation from predetermined direction using transducers spaced apart and measuring phase or time difference between signals therefrom, i.e. path-difference systems determining direction of source
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/86Combinations of sonar systems with lidar systems; Combinations of sonar systems with systems not using wave reflection
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88Sonar systems specially adapted for specific applications
    • G01S15/93Sonar systems specially adapted for specific applications for anti-collision purposes
    • G01S15/931Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/523Details of pulse systems
    • G01S7/526Receivers
    • G01S7/527Extracting wanted echo signals
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/165Anti-collision systems for passive traffic, e.g. including static obstacles, trees
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo or light sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera

Description

本発明は、車両周辺に存在する障害物についての情報をドライバに対して報知する障害物報知装置に関する。   The present invention relates to an obstacle notification device that notifies a driver of information about obstacles existing around a vehicle.

従来、所定の探査波を送受信することで車両の進行方向に存在する障害物を検出し、障害物の存在をドライバに知らせる装置(以降、障害物報知装置)が知られている。   2. Description of the Related Art Conventionally, a device (hereinafter referred to as an obstacle notification device) that detects an obstacle existing in the traveling direction of a vehicle by transmitting and receiving a predetermined exploration wave and notifies the driver of the presence of the obstacle is known.

例えば、特許文献1に開示の障害物報知装置は、探査波としての超音波パルスを送受信する超音波センサを用いて、車両の進行方向に存在する障害物と車両の距離を検出する。そして、その検出している障害物と車両との距離が所定の閾値未満となった場合に、警報音等の出力によって、当該障害物の存在をドライバに報知する。なお、ここでの障害物とは、種々の物体のうち、ドライバに対してその存在を報知すべき物体を指す。例えば、車両の進行を妨げるほどの大きさを有する物体が障害物として想定されればよい。   For example, the obstacle notification device disclosed in Patent Document 1 detects the distance between an obstacle present in the traveling direction of the vehicle and the distance of the vehicle using an ultrasonic sensor that transmits and receives an ultrasonic pulse as an exploration wave. When the distance between the detected obstacle and the vehicle is less than a predetermined threshold, the driver is notified of the presence of the obstacle by outputting an alarm sound or the like. Here, the obstacle refers to an object among the various objects whose presence should be notified to the driver. For example, an object having a size that prevents the vehicle from traveling may be assumed as an obstacle.

このような障害物報知装置においては、障害物を検出するためのセンサ(以降、障害物センサ)として、超音波センサ以外にも、探査波としてミリ波(準ミリ波を含む)を用いるミリ波レーダ等、様々なセンサが用いられる。   In such an obstacle notification device, a millimeter wave using a millimeter wave (including a quasi-millimeter wave) as an exploration wave in addition to an ultrasonic sensor as a sensor for detecting an obstacle (hereinafter referred to as an obstacle sensor). Various sensors such as radar are used.

障害物センサは、探査波を送信するとともに、その探査波の到達範囲内に存在する物体で反射された反射波を受信する。そして、その受信した反射波の受信強度が、予め設定された、障害物が存在すると判定するための閾値(以降、判定用閾値)を超過している場合に、障害物が存在すると判定する。障害物が存在すると判定することは、障害物を検出することに相当する。   The obstacle sensor transmits an exploration wave and receives a reflected wave reflected by an object existing within the reach of the exploration wave. Then, when the received intensity of the received reflected wave exceeds a preset threshold for determining that there is an obstacle (hereinafter, a determination threshold), it is determined that an obstacle is present. Determining that there is an obstacle corresponds to detecting the obstacle.

なお、障害物が存在するか否かの判定は、障害物センサ自体が実施する場合もあれば、障害物センサの外部に存在する電子制御装置が、障害物センサから受信強度を示す情報を取得することで実施する場合もある。便宜上、障害物センサ又は電子制御装置が備える、障害物が存在するか否かの判定を実施する機能モジュールを、障害物判定部と称する。障害物判定部は、1つ又は複数のICを用いてハードウェアとして実現されても良いし、CPUが所定のソフトウェアを実行することで実現されても良い。   Note that the determination of whether or not an obstacle exists may be performed by the obstacle sensor itself, or the electronic control device existing outside the obstacle sensor acquires information indicating the reception intensity from the obstacle sensor. It may be carried out by doing. For convenience, the functional module that is included in the obstacle sensor or the electronic control device and determines whether or not an obstacle exists is referred to as an obstacle determination unit. The obstacle determination unit may be realized as hardware using one or a plurality of ICs, or may be realized by the CPU executing predetermined software.

特開2015−135301号公報JP-A-2015-135301

障害物センサが送信した探査波は、障害物だけでなく、例えば路面等の、本来ドライバにその存在報知する必要がない物体(以降、ノイズ要素)でも反射されて障害物センサに返ってくる。そのため、判定用閾値を小さくし過ぎると、ノイズ要素からの反射波によって障害物が存在すると誤判定する可能性が高まってしまう。一方で、判定用閾値を高くし過ぎると、本来ドライバに対してその存在を報知すべき物体(つまり障害物)の検出が遅れたり、検出できなくなってしまったりする恐れが生じる。   The exploration wave transmitted by the obstacle sensor is reflected not only by the obstacle but also by an object (hereinafter referred to as a noise element) that does not need to be reported to the driver, such as a road surface, and returns to the obstacle sensor. For this reason, if the determination threshold is made too small, the possibility of an erroneous determination that an obstacle exists due to a reflected wave from a noise element increases. On the other hand, if the determination threshold is set too high, there is a risk that detection of an object (that is, an obstacle) that should originally be notified to the driver is delayed or cannot be detected.

そこで、従来の障害物報知装置では、傾斜度合いが一様な路面(以降、一様路面)からの反射波の受信強度として想定される値を試験等によって特定し、判定用閾値を、一様路面からの反射波が超過しにくい値に設定していた。そのような態様によれば、車両が一様路面に存在する状況において、障害物判定部が一様路面からの反射波によって障害物が存在すると誤判定する恐れを低減できるためである。   Therefore, in the conventional obstacle notification device, a value assumed as a reception intensity of a reflected wave from a road surface with a uniform inclination (hereinafter referred to as a uniform road surface) is specified by a test or the like, and a determination threshold value is uniform. The value was set so that the reflected wave from the road surface would not easily exceed. According to such an aspect, it is possible to reduce a possibility that the obstacle determination unit erroneously determines that an obstacle exists due to a reflected wave from the uniform road surface in a situation where the vehicle exists on the uniform road surface.

しかしながら、車両が走行する環境は、一様路面だけではない。車両が実際に走行する道路上には、傾斜度合いが変化する地点も存在する。仮に車両が略水平な道路上の、登り坂が始まる手前の地点に存在する場合、障害物判定部が、その上り坂の路面を障害物であると誤判定してしまう恐れがある。上り坂の路面は、車両が存在している路面に対して隆起しているため、車両に向けて探査波を反射しやすいためである。   However, the environment in which the vehicle travels is not limited to a uniform road surface. On the road where the vehicle actually travels, there is a point where the inclination degree changes. If the vehicle is present on a substantially horizontal road before the uphill starts, the obstacle determination unit may erroneously determine that the uphill road surface is an obstacle. This is because the uphill road surface is raised with respect to the road surface on which the vehicle exists, and thus the exploration waves are easily reflected toward the vehicle.

また、道路の傾斜度合いの変化だけでなく、舗装の粗さに対応する路面の凹凸や、道路上の微小な段差、雨、雪などによっても、障害物の誤検出は生じうる。障害物センサが物体を誤検出してしまうと、その誤検出に基づいて障害物の存在を知らせるための警報が実施されてしまい、乗員に違和感や不快感を与えてしまう恐れがある。   Further, not only a change in the slope of the road but also a road surface irregularity corresponding to the roughness of the pavement, a minute step on the road, rain, snow, etc. can cause an erroneous detection of an obstacle. If the obstacle sensor erroneously detects the object, an alarm for notifying the presence of the obstacle is performed based on the erroneous detection, and there is a possibility that the passenger feels uncomfortable or uncomfortable.

本発明は、この事情に基づいて成されたものであり、その目的とするところは、障害物の存在をドライバに対して報知する障害物報知装置において、不要な報知を実施する恐れを抑制できる障害物報知装置を提供することにある。   The present invention has been made on the basis of this circumstance, and the object of the present invention is to suppress the possibility of performing unnecessary notification in an obstacle notification device that notifies the driver of the presence of an obstacle. The object is to provide an obstacle notification device.

その目的を達成するための第1の発明は、車両に搭載されてあって、車両の進行方向に探査波を送信するとともに、その探査波が物体によって反射されて返ってきた反射波を受信する探査波送受信装置が受信した反射波の受信強度を逐次取得する探査結果取得部(F4)と、探査結果取得部が取得した反射波の受信強度を用いて、車両のドライバに対してその存在を報知すべき物体である障害物が、車両の進行方向に存在しているか否かを判定する障害物判定部(F5)と、障害物判定部によって障害物が存在すると判定されていることに基づいて、ドライバに対して当該障害物の存在を報知するための報知処理を実施する報知処理部(F6)と、探査波送受信装置が送信する探査波の到達範囲を撮影範囲に含むカメラが撮影した画像データを取得する画像データ取得部(F1)と、画像データ取得部が取得した画像データを解析することで、探査波を反射しうる要素であって、かつ、ドライバに対して報知する必要がない要素として予め設定されている要素であるノイズ要素の存在を検出するノイズ要素検出部(F2)と、を備え、障害物判定部は、ノイズ要素検出部がノイズ要素を検出している場合には、ノイズ要素検出部がノイズ要素を検出していない場合に用いる条件よりも充足されにくい条件を用いて、障害物が存在しているか否かを判定することを特徴とする。   A first invention for achieving the object is mounted on a vehicle, transmits a search wave in the traveling direction of the vehicle, and receives a reflected wave returned by the search wave reflected by an object. The search result acquisition unit (F4) that sequentially acquires the reception intensity of the reflected wave received by the search wave transmission / reception device and the reception intensity of the reflected wave acquired by the search result acquisition unit are used to indicate the presence to the vehicle driver. Based on the obstacle determination unit (F5) that determines whether or not an obstacle to be notified exists in the traveling direction of the vehicle, and that the obstacle determination unit determines that an obstacle exists. Then, a notification processing unit (F6) that performs notification processing for notifying the driver of the presence of the obstacle, and a camera that includes the arrival range of the exploration wave transmitted by the exploration wave transmission / reception device within the photographing range. image data As an element that can reflect the exploration wave by analyzing the image data acquisition unit (F1) to be acquired and the image data acquired by the image data acquisition unit, and that does not need to be notified to the driver A noise element detection unit (F2) that detects the presence of a noise element that is a preset element, and the obstacle determination unit detects noise when the noise element detection unit detects the noise element. It is characterized in that it is determined whether or not an obstacle exists by using a condition that is less likely to be satisfied than a condition used when the element detection unit has not detected a noise element.

以上の構成では、ノイズ要素検出部は、カメラの画像データを解析することでノイズ要素を検出する。そして、障害物判定部は、ノイズ要素検出部によってノイズ要素が検出されている場合には、ノイズ要素が検出されていない場合に用いる条件よりも充足されにくい条件を用いて、障害物が存在しているか否かを判定する。   In the above configuration, the noise element detection unit detects the noise element by analyzing the image data of the camera. When the noise element is detected by the noise element detection unit, the obstacle determination unit uses the condition that is less likely to be satisfied than the condition used when the noise element is not detected. It is determined whether or not.

つまり、以上の構成によれば、ノイズ要素検出部によってノイズ要素が検出されている場合には、障害物が存在するための条件として、より充足されにくい条件が適用されるようになる。したがって、障害物が存在するとは判定されにくくなる。その結果、不要な報知が実施される恐れを低減することができる。   That is, according to the above configuration, when a noise element is detected by the noise element detection unit, a condition that is less likely to be satisfied is applied as a condition for the presence of an obstacle. Therefore, it is difficult to determine that an obstacle exists. As a result, it is possible to reduce the risk of unnecessary notification being performed.

その目的を達成するための第2の発明は、車両に搭載されてあって、車両の進行方向に探査波を送信するとともに、その探査波が物体によって反射された反射波を受信する探査波送受信装置が受信した反射波の受信強度を逐次取得する探査結果取得部(F4)と、車両のドライバに報知すべき物体である障害物が存在すると判定するために予め設定されているデフォルト閾値と、探査結果取得部が取得した反射波の受信強度とを比較して、反射波がデフォルト閾値を超過している場合に、障害物が存在すると判定する障害物判定部(F5)と、障害物判定部によって障害物が存在すると判定されていることに基づいて、ドライバに対して、当該障害物の存在を報知するための報知処理を実施する報知処理部(F6)と、探査波送受信装置が送信する探査波の到達範囲を撮影範囲に含むカメラが撮影した画像データを取得する画像データ取得部(F1)と、画像データ取得部が取得した画像データを解析することで、探査波を反射しうる要素であって、かつ、車両のドライバに対して報知する必要がない要素として予め設定されている要素であるノイズ要素の存在を検出するノイズ要素検出部(F2)と、ノイズ要素検出部がノイズ要素を検出している場合には、探査波の出力レベルを、ノイズ要素検出部がノイズ要素を検出していない場合に用いる出力レベルとして予め設定されている定格レベルよりも小さいレベルに調整する出力レベル調整部(F7)と、を備え、探査波送受信装置は、出力レベル調整部によって設定された出力レベルで探査波を送信することを特徴とする。   A second invention for achieving the object is an exploration wave transmission / reception which is mounted on a vehicle and transmits a search wave in the traveling direction of the vehicle and receives the reflected wave reflected by the object. A search result acquisition unit (F4) that sequentially acquires the reception intensity of the reflected wave received by the device, a default threshold that is set in advance to determine that there is an obstacle that should be notified to the driver of the vehicle, An obstacle determination unit (F5) that compares the reception intensity of the reflected wave acquired by the exploration result acquisition unit and determines that an obstacle exists when the reflected wave exceeds the default threshold, and an obstacle determination Based on the fact that the obstacle is determined to be present by the unit, the notification processing unit (F6) that performs notification processing for notifying the driver of the presence of the obstacle, and the exploration wave transmission / reception device An image data acquisition unit (F1) that acquires image data captured by a camera that includes the reach of the exploration wave to be captured in the imaging range, and the image data acquired by the image data acquisition unit can be analyzed to reflect the exploration wave A noise element detection unit (F2) that detects the presence of a noise element that is an element that is preset as an element that does not need to be notified to the driver of the vehicle; When detecting the element, the output for adjusting the output level of the exploration wave to a level smaller than the rated level set in advance as the output level used when the noise element detection unit does not detect the noise element A search wave transmitting / receiving device that transmits the search wave at an output level set by the output level adjustment unit.

以上の構成によれば、探査波送受信装置は、ノイズ要素検出部によってノイズ要素が検出されていない場合には、所定の定格レベルで探査波を送信する一方、ノイズ要素が検出されている場合には、定格レベルよりも小さい出力レベルで探査波を送信する。   According to the above configuration, the exploration wave transmission / reception device transmits the exploration wave at a predetermined rated level when the noise element is not detected by the noise element detection unit, while the noise element is detected. Transmits the exploration wave at an output level smaller than the rated level.

当然、出力レベルを小さくすれば、ノイズ要素からの反射波の受信強度もまた小さくなる。そのため、ノイズ要素からの反射波を受信することで障害物が存在すると誤判定する恐れを低減できる。その結果、不要な報知を実施する恐れを低減できる。   Naturally, if the output level is reduced, the reception intensity of the reflected wave from the noise element is also reduced. Therefore, it is possible to reduce the risk of erroneous determination that an obstacle exists by receiving a reflected wave from a noise element. As a result, the risk of performing unnecessary notification can be reduced.

なお、特許請求の範囲に記載した括弧内の符号は、一つの態様として後述する実施形態に記載の具体的手段との対応関係を示すものであって、本発明の技術的範囲を限定するものではない。   In addition, the code | symbol in the parenthesis described in the claim shows the correspondence with the specific means as described in embodiment mentioned later as one aspect, Comprising: The technical scope of this invention is limited is not.

第1実施形態に係る障害物報知システム100の構成の一例を示すブロック図である。It is a block diagram which shows an example of a structure of the obstacle alerting | reporting system 100 which concerns on 1st Embodiment. 第1実施形態における周辺監視ECU1の構成の一例を示すブロック図である。It is a block diagram which shows an example of a structure of periphery monitoring ECU1 in 1st Embodiment. デフォルト閾値ThD(T)について説明するための図である。It is a figure for demonstrating default threshold value ThD (T). ノイズ影響時間帯について説明するための図である。It is a figure for demonstrating a noise influence time slot | zone. ノイズ影響時間帯について説明するための図である。It is a figure for demonstrating a noise influence time slot | zone. 周辺監視ECU1の概略的な作動を説明するためのフローチャートである。It is a flowchart for demonstrating the rough action | operation of periphery monitoring ECU1. 障害物判定部F5の作動について説明するための図である。It is a figure for demonstrating the action | operation of the obstruction determination part F5. 障害物判定部F5の作動について説明するための図である。It is a figure for demonstrating the action | operation of the obstruction determination part F5. 想定構成について説明するための図である。It is a figure for demonstrating an assumption structure. 変形例1における障害物判定部F5の作動を説明するための図である。It is a figure for demonstrating the action | operation of the obstruction determination part F5 in the modification 1. FIG. 変形例2における障害物判定部F5の作動を説明するための図である。It is a figure for demonstrating the action | operation of the obstruction determination part F5 in the modification 2. FIG. 第2実施形態における周辺監視ECU1の概略的な構成の一例を示すブロック図である。It is a block diagram which shows an example of a schematic structure of periphery monitoring ECU1 in 2nd Embodiment. 周辺監視ECU1の概略的な作動を説明するためのフローチャートである。It is a flowchart for demonstrating the rough action | operation of periphery monitoring ECU1. 第3実施形態における周辺監視ECU1の構成の一例を示すブロック図である。It is a block diagram which shows an example of a structure of periphery monitoring ECU1 in 3rd Embodiment. 周辺監視ECU1の概略的な作動を説明するためのフローチャートである。It is a flowchart for demonstrating the rough action | operation of periphery monitoring ECU1.

[第1実施形態]
以下、本発明の第1実施形態を図面に基づいて説明する。図1に示す障害物報知システム100は、車両に搭載されてあって、周辺監視ECU1、超音波センサ2、カメラ3、及び報知装置4を備える。以降では、障害物報知システム100が搭載された車両を自車両と称する。なお、ECUは、Electronic Control Unitの略である。
[First Embodiment]
DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, a first embodiment of the invention will be described with reference to the drawings. An obstacle notification system 100 shown in FIG. 1 is mounted on a vehicle and includes a periphery monitoring ECU 1, an ultrasonic sensor 2, a camera 3, and a notification device 4. Hereinafter, a vehicle equipped with the obstacle notification system 100 is referred to as a host vehicle. Note that ECU is an abbreviation for Electronic Control Unit.

障害物報知システム100は、自車両の進行方向に存在する障害物についてドライバに報知するためのシステムである。ここでは一例として、障害物報知システム100は、自車両が前進している場合に、自車両の前方に存在する障害物についてドライバに報知するものとする。もちろん他の態様として、障害物報知システム100は、自車両が後退している場合に自車両の後方に存在する障害物についてドライバに報知するものであってもよい。その場合には、自車両の後方に存在する障害物についてドライバに報知できるように、超音波センサ2やカメラ3の設置位置や設置姿勢等を調整すればよい。なお、ここでの障害物とは、ドライバにその存在を報知すべき物体であり、例えば、自車両の進行を妨げるほどの大きさを有する物体を指す。以下、本実施形態における障害物報知システム100の構成について述べる。   The obstacle notification system 100 is a system for notifying the driver of obstacles existing in the traveling direction of the host vehicle. Here, as an example, the obstacle notification system 100 notifies the driver of an obstacle existing ahead of the host vehicle when the host vehicle is moving forward. Of course, as another aspect, the obstacle notification system 100 may notify the driver of an obstacle existing behind the host vehicle when the host vehicle is moving backward. In that case, what is necessary is just to adjust the installation position, installation posture, etc. of the ultrasonic sensor 2 and the camera 3 so that the driver can be notified of obstacles existing behind the host vehicle. In addition, an obstruction here is an object which should alert | report the presence to a driver, for example, points out the object which has a magnitude | size which prevents the advance of the own vehicle. Hereinafter, the configuration of the obstacle notification system 100 in the present embodiment will be described.

<障害物報知システムの概略的な構成>
周辺監視ECU1は、車両内に構築されたローカルネットワーク(以降、LAN:Local Area Network)5を介して、超音波センサ2、カメラ3、及び報知装置4のそれぞれと相互通信可能に接続されている。周辺監視ECU1は、障害物報知システム100全体の動作を制御する。この周辺監視ECU1の詳細については別途後述する。
<Schematic configuration of obstacle notification system>
The periphery monitoring ECU 1 is connected to each of the ultrasonic sensor 2, the camera 3, and the notification device 4 through a local network (hereinafter, LAN: Local Area Network) 5 built in the vehicle so as to be able to communicate with each other. . The periphery monitoring ECU 1 controls the operation of the entire obstacle notification system 100. Details of the periphery monitoring ECU 1 will be described later.

超音波センサ2は、探査波としての超音波パルスを、所定の送信周期で送信するとともに、送信した超音波パルスが自車両外部に存在する物体で反射されて返ってきた反射波を受信する。そして、受信した反射波の信号強度を示す信号を周辺監視ECU1に逐次出力する。超音波センサ2が請求項に記載の探査波送受信装置に相当する。   The ultrasonic sensor 2 transmits an ultrasonic pulse as an exploration wave at a predetermined transmission cycle, and receives a reflected wave returned by the transmitted ultrasonic pulse reflected by an object existing outside the host vehicle. And the signal which shows the signal strength of the received reflected wave is sequentially output to periphery monitoring ECU1. The ultrasonic sensor 2 corresponds to the exploration wave transmitter / receiver described in the claims.

超音波パルスの送信と、反射波の受信は、1つの発振素子を用いて実現されればよい。もちろん、他の態様として、送信用の発振素子とは別に、受信用の発振素子を1つ又は複数備える態様としてもよい。送信周期は、たとえば、数百ミリ秒とすればよい。ここでは一例として送信周期は100ミリ秒とする。   The transmission of the ultrasonic pulse and the reception of the reflected wave may be realized using one oscillation element. Of course, as another aspect, one or a plurality of reception oscillation elements may be provided separately from the transmission oscillation elements. The transmission cycle may be several hundred milliseconds, for example. Here, as an example, the transmission cycle is 100 milliseconds.

この超音波センサ2は、自車両の前方に超音波パルスを送信するように、自車両において適宜設計される位置(例えばフロントバンパ)に設置されていればよい。ここでの前方とは、車両の正面方向だけでなく、斜め前方も含む。正面方向とは、自車両後端部から自車両前端部へと向かう方向である。   The ultrasonic sensor 2 only needs to be installed at a position (for example, a front bumper) appropriately designed in the host vehicle so as to transmit an ultrasonic pulse in front of the host vehicle. Here, the front includes not only the front direction of the vehicle but also a diagonal front. The front direction is a direction from the rear end of the host vehicle to the front end of the host vehicle.

ここでは一例として超音波センサ2は、指向性の中心となる方向が自車両の正面方向と一致するように設けられている。他の態様として、超音波センサ2の指向性の中心方向は、車両正面方向から車幅方向に30°程度傾くように設置されていても良い。   Here, as an example, the ultrasonic sensor 2 is provided such that the direction serving as the center of directivity coincides with the front direction of the host vehicle. As another aspect, the center direction of the directivity of the ultrasonic sensor 2 may be installed so as to be inclined by about 30 ° in the vehicle width direction from the vehicle front direction.

超音波センサ2の指向性や、送信する超音波パルスの強度は、所望の検知エリアを形成するように調整されればよい。検知エリアとは、障害物を検知可能な範囲である。超音波センサ2が所定の大きさの物体からの反射波を所定の受信強度で受信可能な範囲が、検知エリアに相当する。この検知エリアが請求項に記載の到達範囲に相当する。なお、超音波センサ2は、複数設けられていてもよい。   The directivity of the ultrasonic sensor 2 and the intensity of the ultrasonic pulse to be transmitted may be adjusted so as to form a desired detection area. The detection area is a range in which an obstacle can be detected. A range in which the ultrasonic sensor 2 can receive a reflected wave from an object of a predetermined size with a predetermined reception intensity corresponds to a detection area. This detection area corresponds to the reachable range described in the claims. A plurality of ultrasonic sensors 2 may be provided.

カメラ3は、光学式のカメラである。例えばカメラ3はCMOSカメラやCCDカメラ等を用いて実現されればよい。カメラ3は、自車両前方の所定範囲を撮影するように、ウインドシールド上端部近傍(例えばルームミラー付近)に設置されている。便宜上、以降ではカメラ3が撮影する範囲を撮影範囲とも称する。カメラ3が撮影した画像のデータ(以降、画像データ)は逐次周辺監視ECU1に提供される。   The camera 3 is an optical camera. For example, the camera 3 may be realized using a CMOS camera, a CCD camera, or the like. The camera 3 is installed in the vicinity of the windshield upper end (for example, in the vicinity of a room mirror) so as to photograph a predetermined range in front of the host vehicle. For the sake of convenience, the range captured by the camera 3 is hereinafter also referred to as a shooting range. Data of an image captured by the camera 3 (hereinafter referred to as image data) is sequentially provided to the periphery monitoring ECU 1.

なお、カメラ3の設置位置は、適宜設計されればよく、ルームミラー付近に限らない。カメラ3は、車両前方に対するドライバの視界を遮らない位置に取り付けられればよい。ただし、カメラ3は、その撮影範囲が超音波センサ2の検知エリアを包含するように設置されているものとする。   In addition, the installation position of the camera 3 should just be designed suitably, and is not restricted to the vicinity of a room mirror. The camera 3 should just be attached in the position which does not block the driver | operator's visual field with respect to the vehicle front. However, it is assumed that the camera 3 is installed so that the photographing range includes the detection area of the ultrasonic sensor 2.

また、本実施形態では一例としてカメラ3は光学式のカメラとするが、他の態様としてカメラ3は、赤外線カメラや近赤外線カメラなどであってもよい。さらに、カメラ3はステレオカメラであってもよい。   In the present embodiment, the camera 3 is an optical camera as an example, but as another aspect, the camera 3 may be an infrared camera, a near infrared camera, or the like. Furthermore, the camera 3 may be a stereo camera.

報知装置4は、周辺監視ECU1からの指示に基づいて、自車両の進行方向(ここでは前方)に障害物が存在することを示す情報を、ドライバが知覚可能な態様で出力する装置である。この報知装置4としては、ディスプレイや、LED等のインジケータ、スピーカ、バイブレータ等を用いることができる。   The notification device 4 is a device that outputs information indicating that an obstacle is present in the traveling direction of the host vehicle (here, forward) in a manner that can be perceived by the driver, based on an instruction from the surrounding monitoring ECU 1. As the notification device 4, a display, an indicator such as an LED, a speaker, a vibrator, or the like can be used.

<周辺監視ECU1の構成及び作動について>
周辺監視ECU1は、コンピュータとして構成されており、CPU11、RAM12、ROM13、I/O、及び、これらの構成を接続するバスラインなどを備えている。ROM13には、通常のコンピュータを本実施形態における周辺監視ECU1として機能させるためのプログラム(以降、障害物報知用プログラム)等が格納されている。
<Regarding Configuration and Operation of Perimeter Monitoring ECU 1>
The periphery monitoring ECU 1 is configured as a computer, and includes a CPU 11, a RAM 12, a ROM 13, an I / O, and a bus line that connects these configurations. The ROM 13 stores a program (hereinafter referred to as an obstacle notification program) for causing a normal computer to function as the periphery monitoring ECU 1 in the present embodiment.

また、ROM13には、超音波センサ2やカメラ3に関する設定データも格納されている。超音波センサ2に関する設定データとは、自車両における超音波センサ2の設置位置や検知エリアなどを示すデータであり、カメラ3に関する設定データとは、カメラ3の設置位置や撮影範囲などを示すデータである。さらに、ROM13には、超音波センサ2から提供される受信強度に基づいて障害物が存在するか否かを判定するために用いられる閾値として予め設定されているデフォルト閾値も格納されている。   The ROM 13 also stores setting data related to the ultrasonic sensor 2 and the camera 3. The setting data related to the ultrasonic sensor 2 is data indicating the installation position and detection area of the ultrasonic sensor 2 in the own vehicle, and the setting data related to the camera 3 is data indicating the installation position of the camera 3 and the imaging range. It is. Further, the ROM 13 also stores a default threshold value that is set in advance as a threshold value that is used to determine whether an obstacle exists based on the reception intensity provided from the ultrasonic sensor 2.

なお、上述の障害物報知用プログラムは、ROM等の非遷移的実体的記録媒体(non- transitory tangible storage medium)に格納されていればよい。CPU11が障害物報知用プログラムを実行することは、障害物報知用プログラムに対応する方法が実行されることに相当する。   Note that the obstacle notification program described above may be stored in a non-transoryory tangible storage medium such as a ROM. Executing the obstacle notification program by the CPU 11 corresponds to executing a method corresponding to the obstacle notification program.

周辺監視ECU1は、上述の障害物報知用プログラムを実行することによって実現する機能ブロックとして、図2に示すように画像データ取得部F1、画像認識部F2、影響特定部F3、探査結果取得部F4、障害物判定部F5、及び、報知処理部F6を備える。また、障害物判定部F5は、より細かい機能ブロックとして、距離特定部F51を備える。なお、周辺監視ECU1が備える機能ブロックの一部又は全部は、一つあるいは複数のIC等を用いてハードウェアとして実現してもよい。この周辺監視ECU1が請求項に記載の障害物報知装置に相当する。   As shown in FIG. 2, the periphery monitoring ECU 1 executes an obstacle notification program as described above, and as shown in FIG. 2, the image data acquisition unit F1, the image recognition unit F2, the influence identification unit F3, and the search result acquisition unit F4. The obstacle determination unit F5 and the notification processing unit F6 are provided. The obstacle determination unit F5 includes a distance specifying unit F51 as a finer functional block. Note that some or all of the functional blocks provided in the periphery monitoring ECU 1 may be realized as hardware using one or a plurality of ICs. This periphery monitoring ECU 1 corresponds to the obstacle notification device described in the claims.

図2に示す閾値記憶部M1は、RAM12が備える記憶領域のうち、ROM13から読み出されたデフォルト閾値を示すデータを記憶している領域である。本実施形態において、デフォルト閾値は、図3に示すように、超音波パルスの送信を開始してからの経過時間に応じた値が設定されている。   The threshold storage unit M1 illustrated in FIG. 2 is an area that stores data indicating the default threshold value read from the ROM 13 among the storage areas included in the RAM 12. In the present embodiment, as shown in FIG. 3, the default threshold is set to a value corresponding to the elapsed time from the start of transmission of the ultrasonic pulse.

具体的には、超音波パルスの送信を開始してから所定の残響収束時間Tx経過するまでのデフォルト閾値は、送信した超音波パルスそれ自体と、その送信した超音波パルスの残響を、物体からの反射波として誤検出しないために、十分に大きい値に設定されている。   Specifically, the default threshold value from the start of transmission of an ultrasonic pulse to the elapse of a predetermined reverberation convergence time Tx is that the transmitted ultrasonic pulse itself and the reverberation of the transmitted ultrasonic pulse are determined from the object. Is set to a sufficiently large value so as not to be erroneously detected as a reflected wave.

なお、ここでの残響とは、超音波パルスの送信を完了してから発振素子が静止するまでの振動によって発生する超音波に相当する。残響は徐々に減衰していく。超音波パルスの送信を開始してから残響が収束するまでの時間、つまり残響収束時間Txは、実試験やシミュレーション等によって特定されている。なお、図3における破線L1は、送信した超音波パルスそれ自体と、その送信した超音波パルスの残響に対応する受信強度を示している。   Here, the reverberation corresponds to an ultrasonic wave generated by vibration from the completion of the transmission of the ultrasonic pulse until the oscillation element stops. The reverberation gradually attenuates. The time from the start of transmission of an ultrasonic pulse until the reverberation converges, that is, the reverberation convergence time Tx is specified by an actual test, simulation, or the like. A broken line L1 in FIG. 3 indicates the transmitted ultrasonic pulse itself and the reception intensity corresponding to the reverberation of the transmitted ultrasonic pulse.

また、超音波パルスの送信を開始してから残響収束時間Txが経過する時点以降におけるデフォルト閾値は、一様路面からの反射波の受信強度として想定される値Paに、所定の裕度Pbを加えた値である一様路面想定値Pcとする。ここでの一様路面とは、舗装の粗さに対応する路面の凹凸度合いが所定の許容範囲内であり、かつ、路面の傾斜度合い(換言すれば勾配)が一様となっている路面を指す。   Further, the default threshold value after the time point when the reverberation convergence time Tx elapses after the transmission of the ultrasonic pulse is started is set to a value Pa assumed as the reception intensity of the reflected wave from the uniform road surface, and a predetermined margin Pb is set. A uniform road surface assumed value Pc which is an added value is used. The uniform road surface here is a road surface in which the degree of unevenness of the road surface corresponding to the roughness of the pavement is within a predetermined allowable range, and the road surface inclination degree (in other words, the gradient) is uniform. Point to.

一様路面からの反射波の受信強度Paは、実試験やシミュレーションによって特定されればよい。所定の裕度Pbは、実際の道路の路面からの反射波によって、障害物が存在すると障害物判定部F5が誤判定することを抑制するための値である。裕度Pbは、一様路面として想定した路面の凹凸度合いと実際の路面の凹凸度合いとの違いや、実際の道路における路面の勾配の不均一性(換言すれば湾曲の度合い)等を鑑みて適宜決定されれば良い。   The reception intensity Pa of the reflected wave from the uniform road surface may be specified by an actual test or simulation. The predetermined margin Pb is a value for preventing the obstacle determination unit F5 from erroneously determining that an obstacle exists due to a reflected wave from the road surface of the actual road. The margin Pb is in consideration of the difference between the unevenness level of the road surface assumed as a uniform road surface and the actual road surface unevenness degree, nonuniformity of the road surface gradient on the actual road (in other words, the degree of curvature), and the like. What is necessary is just to determine suitably.

デフォルト閾値は、超音波パルスの送信を開始してからの経過時間Tを変数とした関数として表されていても良いし、テーブル形式で表されていても良い。デフォルト閾値を示すデータは、経過時間Tに対応するデフォルト閾値が一意に定まる形式で表されていれば良い。ここでは一例として、超音波パルスの送信を開始してからの経過時間Tとデフォルト閾値との対応関係を示す関数が、プログラムとして表現されているものとする。便宜上、以降において、或る経過時間Tに対応するデフォルト閾値を、デフォルト閾値ThD(T)とも記載する。   The default threshold value may be expressed as a function with the elapsed time T from the start of transmission of the ultrasonic pulse as a variable, or may be expressed in a table format. The data indicating the default threshold may be expressed in a format in which the default threshold corresponding to the elapsed time T is uniquely determined. Here, as an example, it is assumed that a function indicating a correspondence relationship between an elapsed time T from the start of transmission of an ultrasonic pulse and a default threshold is expressed as a program. For convenience, the default threshold value corresponding to a certain elapsed time T is hereinafter also referred to as default threshold ThD (T).

次に種々の機能ブロックについて述べる。画像データ取得部F1は、カメラ3から画像データを逐次取得する。画像認識部F2は、画像データ取得部F1が取得した画像データを解析することで、道路勾配の変化点(以降、勾配変化点)や、現在走行している路面に対する勾配変化点以降の路面の相対的な勾配、路面の状態、路面上の物体、天候状態等を認識する。   Next, various functional blocks will be described. The image data acquisition unit F1 sequentially acquires image data from the camera 3. The image recognizing unit F2 analyzes the image data acquired by the image data acquiring unit F1 to change the road gradient change point (hereinafter referred to as the gradient change point) or the road surface after the gradient change point with respect to the currently running road surface. Recognize relative slopes, road conditions, objects on the road, weather conditions, etc.

ここでの路面状態とは、例えば、路面が舗装されているか否か、路面の凹凸度合い、被水しているか否か、水たまりが存在するか否か、積雪の有無を含む。また、天候状態とは、雨、雪、雹等が降っているか否かを意味する。   Here, the road surface state includes, for example, whether or not the road surface is paved, the degree of unevenness of the road surface, whether or not the vehicle is wet, whether or not there is a puddle, and whether or not there is snow. The weather condition means whether it is raining, snowing, hail or the like.

カメラ3が撮影した画像データから上述した種々の要素を検出する方法は、周知の技術を用いればよい。勾配変化点の検出や、現在走行している路面に対する勾配変化点以降の路面の相対的な勾配の推定は、例えば、特開2009−133830号に開示の技術を用いて実施すればよい。   A known technique may be used as a method of detecting the various elements described above from the image data captured by the camera 3. The detection of the gradient change point and the estimation of the relative gradient of the road surface after the gradient change point with respect to the currently running road surface may be performed using, for example, the technique disclosed in Japanese Patent Application Laid-Open No. 2009-133830.

路面の凹凸度合いの特定には、例えば特表2015−510119号に開示を用いれば良い。路面が舗装されているか否か、被水しているか否か、水たまりが存在するか否か、積雪の有無などは、例えば特許第5720380号に開示の技術を援用して実施すればよい。さらに、天候状態の特定は、例えば、特許第4505509号に開示の技術を用いて実施すればよい。   For example, the disclosure in JP-T-2015-510119 may be used to specify the degree of unevenness on the road surface. Whether the road surface is paved, whether it is flooded, whether there is a puddle, whether there is snow, etc. may be implemented with the aid of the technology disclosed in Japanese Patent No. 5720380, for example. Furthermore, what is necessary is just to implement the specification of a weather condition, for example using the technique of patent 4505509.

また、画像認識部F2は、画像データに対してパターンマッチング処理を行うことによって、検出対象として予め設定されている物体(以降、検出対象物)を検出してもよい。検出対象物は適宜設計されれば良い。例えば、壁やガードレール、電柱、人物、ロードコーン、縁石、輪留めなどを検出対象物として登録しておけばよい。   Further, the image recognition unit F2 may detect an object (hereinafter referred to as a detection target) preset as a detection target by performing pattern matching processing on the image data. What is necessary is just to design a detection target suitably. For example, walls, guardrails, utility poles, people, road cones, curbs, wheel stops, etc. may be registered as detection objects.

ところで、画像認識部F2が画像データから検出する種々の物体や環境の中には、超音波パルスを反射しうる要素であって、かつ、車両のドライバに対して報知する必要がない要素(以降、ノイズ要素)も含まれる。画像認識部F2は、超音波センサ2の検知エリア内にノイズ要素が存在するか否かの判定(換言すれば、ノイズ要素の検出)も行う。   By the way, in various objects and environments detected by the image recognition unit F2 from image data, elements that can reflect an ultrasonic pulse and do not need to be notified to the driver of the vehicle (hereinafter referred to as the elements). Noise element). The image recognition unit F2 also determines whether there is a noise element in the detection area of the ultrasonic sensor 2 (in other words, detection of the noise element).

ノイズ要素とは、例えば、凹凸度合いが所定の許容範囲以上となっている路面や、勾配が大きくなる勾配変化点である勾配増加点、その勾配増加点から先に延設されている道路、高さが所定の基準値(例えば数センチ)未満の段差及び落下物、被水している道路、水溜り、積雪、降雨、降雪、降雹等である。   Noise elements include, for example, road surfaces where the degree of unevenness exceeds a predetermined tolerance, a slope increase point that is a slope change point where the slope increases, a road that extends from the slope increase point, a high road Steps and falling objects whose length is less than a predetermined reference value (for example, several centimeters), flooded roads, puddles, snow accumulation, rainfall, snowfall, rainfall, and the like.

画像認識部F2が認識可能な要素のうち、ノイズ要素とする要素は予め登録しておけばよい。なお、本実施形態では画像認識部F2は、ノイズ要素以外の要素も検出する態様とするが、これに限らない。画像認識部F2は、少なくともノイズ要素を検出できれば良い。また、ノイズ要素として上述した全てのノイズ要素を検出可能な構成となっている必要もない。適宜ノイズ要素として定義された種別の要素を検出可能な構成となっていれば良い。画像認識部F2が請求項に記載のノイズ要素検出部に相当する。   Of the elements that can be recognized by the image recognition unit F2, elements that are noise elements may be registered in advance. In the present embodiment, the image recognition unit F2 detects an element other than the noise element, but is not limited thereto. The image recognition unit F2 only needs to detect at least a noise element. Further, it is not necessary to have a configuration capable of detecting all the above-described noise elements as noise elements. It is sufficient that the configuration is such that an element of a type defined as a noise element can be detected as appropriate. The image recognition unit F2 corresponds to the noise element detection unit described in the claims.

画像認識部F2は、ノイズ要素を検出した場合には、超音波センサ2の検知エリアのうち、そのノイズ要素が存在する領域を特定するとともに、超音波センサ2からノイズ要素までの距離を特定する。   When detecting the noise element, the image recognition unit F2 specifies the area where the noise element exists in the detection area of the ultrasonic sensor 2 and specifies the distance from the ultrasonic sensor 2 to the noise element. .

ノイズ要素と超音波センサ2との距離は、例えば次のように算出されれば良い。まず、画像データ内におけるノイズ要素の位置と、自車両におけるカメラ3の搭載位置や撮影範囲に基づいて、自車両に対するノイズ要素の相対位置を特定する。車載カメラが撮影した画像データにおける撮影物の位置から、車両に対する相対位置を推定する技術は周知の技術を援用すればよい。そして、自車両における超音波センサ2の搭載位置と、自車両に対するノイズ要素の相対位置とに基づいて、超音波センサ2からノイズ要素までの距離を特定する。   The distance between the noise element and the ultrasonic sensor 2 may be calculated as follows, for example. First, the relative position of the noise element with respect to the host vehicle is specified based on the position of the noise element in the image data and the mounting position and shooting range of the camera 3 in the host vehicle. A known technique may be used as a technique for estimating the relative position with respect to the vehicle from the position of the photographed object in the image data photographed by the in-vehicle camera. Then, the distance from the ultrasonic sensor 2 to the noise element is specified based on the mounting position of the ultrasonic sensor 2 in the own vehicle and the relative position of the noise element with respect to the own vehicle.

なお、ノイズ要素としての降雨や降雪等を検出した場合には、超音波センサ2の検知エリア全域においてノイズ要素が存在すると判定し、超音波センサ2からノイズ要素までの距離は0と判定すれば良い。画像認識部F2は、ノイズ要素が存在する領域や超音波センサ2からノイズ要素までの距離についての情報を、影響特定部F3に逐次提供する。   When rain or snow is detected as a noise element, it is determined that there is a noise element in the entire detection area of the ultrasonic sensor 2, and the distance from the ultrasonic sensor 2 to the noise element is determined to be zero. good. The image recognizing unit F2 sequentially provides information on the area where the noise element exists and the distance from the ultrasonic sensor 2 to the noise element to the influence specifying unit F3.

影響特定部F3は、画像認識部F2が超音波センサ2の検知エリア内にノイズ要素を検出している場合に、送信開始タイミングからの経過時間Tのうち、そのノイズ要素での反射波が返ってくる可能性がある時間帯であるノイズ影響時間帯を特定する。   When the image recognition unit F2 detects a noise element in the detection area of the ultrasonic sensor 2, the influence specifying unit F3 returns a reflected wave at the noise element in the elapsed time T from the transmission start timing. The noise influence time zone, which is a time zone that may come, is specified.

この影響特定部F3の作動について、図4を用いて説明する。図4は一例として、画像認識部F2が超音波センサ2から距離D1となる地点に勾配増加点を検出した場合の作動を示している。図4の(A)は、画像認識部F2が検出した勾配増加点と超音波センサ2との距離を概念的に表している。   The operation of the influence specifying unit F3 will be described with reference to FIG. FIG. 4 shows an operation when the image recognition unit F2 detects a gradient increase point at a point at a distance D1 from the ultrasonic sensor 2 as an example. 4A conceptually represents the distance between the gradient increase point detected by the image recognition unit F2 and the ultrasonic sensor 2. FIG.

このような場合、まず影響特定部F3は、距離D1に基づいて、超音波センサ2から勾配増加点までの区間を超音波パルスが往復するために要する時間である往復飛行時間T1を算出する。往復飛行時間T1は、距離D1を2倍した値を音速で除算した値とすればよい。   In such a case, the influence specifying unit F3 first calculates a reciprocating flight time T1, which is a time required for the ultrasonic pulse to reciprocate in the section from the ultrasonic sensor 2 to the gradient increase point, based on the distance D1. The round trip flight time T1 may be a value obtained by dividing the value obtained by doubling the distance D1 by the speed of sound.

そして、経過時間Tが、往復飛行時間T1から所定の誤差吸収時間Taを減算した時間T1a以上となる時間帯を、ノイズ影響時間帯に設定する。誤差吸収時間Taは、画像認識部F2が算出した超音波センサ2から勾配増加点までの距離D1に含まれる誤差などを考慮して設計される定数とすればよい。   Then, a time zone in which the elapsed time T is equal to or longer than the time T1a obtained by subtracting the predetermined error absorption time Ta from the round trip flight time T1 is set as the noise influence time zone. The error absorption time Ta may be a constant designed in consideration of an error included in the distance D1 from the ultrasonic sensor 2 calculated by the image recognition unit F2 to the gradient increase point.

また、別の例として、画像認識部F2が超音波センサ2から距離D2となる地点に、高さが基準値未満の微小な段差(以降、微小段差)を検出した場合の影響特定部F3の作動を、図5を用いて説明する。   As another example, the influence identifying unit F3 when the image recognition unit F2 detects a minute step (hereinafter, a minute step) whose height is less than the reference value at a point where the distance D2 from the ultrasonic sensor 2 is detected. The operation will be described with reference to FIG.

図5の(A)は、画像認識部F2が検出した微小段差と超音波センサ2との距離D2を概念的に表している。このような場合、影響特定部F3は、画像認識部F2が特定した超音波センサ2から微小段差までの距離D2と音速に基づいて、超音波センサ2から微小段差まで超音波パルスが往復するために要する時間である往復飛行時間T2を算出する。   FIG. 5A conceptually represents a distance D2 between the minute step detected by the image recognition unit F2 and the ultrasonic sensor 2. In such a case, the influence identifying unit F3 reciprocates the ultrasonic pulse from the ultrasonic sensor 2 to the minute step based on the distance D2 from the ultrasonic sensor 2 identified by the image recognition unit F2 and the sound speed. The round-trip flight time T2, which is the time required for, is calculated.

そして、その往復飛行時間T2を基準として定まる時間帯を、微小段差に対応するノイズ影響時間帯とする。ここでは一例として、往復飛行時間T2から誤差吸収時間Taを差し引いた時間T2aから、往復飛行時間T2に誤差吸収時間Taを加えた時間T2bまでを、ノイズ影響時間帯とする。   A time zone determined based on the round-trip flight time T2 is set as a noise-affected time zone corresponding to a minute step. Here, as an example, a noise influence time zone is defined from a time T2a obtained by subtracting the error absorption time Ta from the round trip flight time T2 to a time T2b obtained by adding the error absorption time Ta to the round trip flight time T2.

なお、ここでは往復飛行時間T2に対応する経過時間の前後、誤差吸収時間Ta分をノイズ影響時間帯とする態様を例示したが、これに限らない。ノイズ要素が存在する領域に対するノイズ影響時間の開始時点や終了時点を決定するためのパラメータ(例えば誤差吸収時間Ta)は適宜設計されれば良い。ノイズ要素が存在する領域に対するノイズ影響時間帯の開始時点は、その領域までの往復飛行時間に応じて決定されれば良い。また、終了時点は、ノイズ要素の種別や、超音波センサ2に対してノイズ要素がどこまで遠方まで存在しているかによって決定されれば良い。   In addition, although the aspect which made the noise absorption time period the error absorption time Ta before and after the elapsed time corresponding to round-trip flight time T2 was illustrated here, it is not restricted to this. A parameter (for example, error absorption time Ta) for determining the start time point and end time of the noise influence time for the area where the noise element exists may be appropriately designed. The start time point of the noise influence time zone for the area where the noise element exists may be determined according to the round trip flight time to the area. The end point may be determined depending on the type of the noise element and how far the noise element exists relative to the ultrasonic sensor 2.

探査結果取得部F4は、超音波センサ2が出力する受信強度を逐次取得する。また、探査結果取得部F4は、超音波センサ2が超音波パルスの送信を開始したタイミングである送信開始タイミングも取得する。   The search result acquisition unit F4 sequentially acquires the reception intensity output from the ultrasonic sensor 2. The exploration result acquisition unit F4 also acquires a transmission start timing that is a timing at which the ultrasonic sensor 2 starts transmitting an ultrasonic pulse.

送信開始タイミングは、超音波センサ2から通知されればよい。また、周辺監視ECU1自体が超音波センサ2の動作を制御する態様となっている場合には、超音波センサ2の動作を制御する機能ブロックから、超音波パルスの送信開始タイミングが通知されても良い。さらに、探査結果取得部F4は、入力されている受信強度が所定の閾値以上となったタイミングを、送信開始タイミングとして認識してもよい。送信開始タイミングの特定に用いられる閾値は、超音波パルスの送信時に観測される受信強度に対応する値であって、反射波としては観測されないほど十分に大きい値とすればよい。   The transmission start timing may be notified from the ultrasonic sensor 2. In addition, when the periphery monitoring ECU 1 itself is configured to control the operation of the ultrasonic sensor 2, the transmission start timing of the ultrasonic pulse is notified from the functional block that controls the operation of the ultrasonic sensor 2. good. Furthermore, the exploration result acquisition unit F4 may recognize the timing when the input reception intensity is equal to or greater than a predetermined threshold as the transmission start timing. The threshold value used for specifying the transmission start timing is a value corresponding to the reception intensity observed at the time of transmitting the ultrasonic pulse, and may be a sufficiently large value so as not to be observed as a reflected wave.

障害物判定部F5は、探査結果取得部F4が取得する受信強度に基づいて障害物を検出する。この障害物判定部F5の作動は、画像認識部F2が超音波センサ2の検知エリアにノイズ要素を検出しているか否かによって異なってくる。まずは、画像認識部F2が超音波センサ2の検知エリアにノイズ要素を検出していない場合について述べる。   The obstacle determination unit F5 detects an obstacle based on the reception intensity acquired by the search result acquisition unit F4. The operation of the obstacle determination unit F5 differs depending on whether or not the image recognition unit F2 detects a noise element in the detection area of the ultrasonic sensor 2. First, a case where the image recognition unit F2 has not detected a noise element in the detection area of the ultrasonic sensor 2 will be described.

画像認識部F2が超音波センサ2の検知エリアにノイズ要素を検出していない場合、障害物判定部F5は、送信開始タイミングを探査結果取得部F4から取得するとともに、その送信開始タイミングからの経過時間Tを計測する。そして、現在入力されている受信強度が、送信開始タイミングからの経過時間Tに対応するデフォルト閾値ThD(T)を超過している場合に、障害物が存在すると判定する。   When the image recognition unit F2 has not detected a noise element in the detection area of the ultrasonic sensor 2, the obstacle determination unit F5 acquires the transmission start timing from the exploration result acquisition unit F4 and progress from the transmission start timing. Time T is measured. Then, when the currently input reception intensity exceeds the default threshold ThD (T) corresponding to the elapsed time T from the transmission start timing, it is determined that there is an obstacle.

次に、画像認識部F2が超音波センサ2の検知エリアにノイズ要素を検出していない場合について述べる。画像認識部F2が超音波センサ2の検知エリアにノイズ要素を検出していない場合も、障害物判定部F5はまず、送信開始タイミングを探査結果取得部F4から取得するとともに、その送信開始タイミングからの経過時間Tを計測する。   Next, a case where the image recognition unit F2 has not detected a noise element in the detection area of the ultrasonic sensor 2 will be described. Even when the image recognition unit F2 has not detected a noise element in the detection area of the ultrasonic sensor 2, the obstacle determination unit F5 first acquires the transmission start timing from the search result acquisition unit F4, and from the transmission start timing. The elapsed time T is measured.

そして、経過時間Tが、影響特定部F3が特定しているノイズ影響時間帯に該当するか否かを判定する。ここで、現在の経過時間Tが、ノイズ影響時間帯に該当しない場合には、現在の経過時間Tに対応するデフォルト閾値ThD(T)を用いて、障害物の有無を判定する。   And it is determined whether the elapsed time T corresponds to the noise influence time zone which the influence specific | specification part F3 has specified. Here, when the current elapsed time T does not correspond to the noise influence time zone, the presence or absence of an obstacle is determined using a default threshold ThD (T) corresponding to the current elapsed time T.

一方、現在の経過時間Tが、ノイズ影響時間帯に該当している場合には、現在の経過時間Tに対応するデフォルト閾値ThD(T)よりも大きい閾値(以降、ノイズ対応閾値)を用いて、障害物の有無の判定を行う。便宜上、以降では障害物の有無の判定に用いる閾値のことを、判定用閾値とも記載する。   On the other hand, when the current elapsed time T corresponds to the noise influence time zone, a threshold (hereinafter referred to as a noise response threshold) larger than the default threshold ThD (T) corresponding to the current elapsed time T is used. Determine whether there is an obstacle. For convenience, the threshold used for determining whether there is an obstacle will be hereinafter referred to as a determination threshold.

ノイズ対応閾値は、デフォルト閾値を元に障害物判定部F5が動的に算出してもよいし、予め設定されていてもよい。ノイズ対応閾値が予め設定されている場合には、その設定されたノイズ対応閾値は、デフォルト閾値と同様に、ROM13に格納されていれば良い。   The obstacle corresponding threshold may be dynamically calculated by the obstacle determination unit F5 based on the default threshold, or may be set in advance. When the noise correspondence threshold is set in advance, the set noise correspondence threshold may be stored in the ROM 13 in the same manner as the default threshold.

本実施形態では一例として、障害物判定部F5が、現在の経過時間Tに対応するデフォルト閾値ThD(T)に基づいて、経過時間Tに対応するノイズ対応閾値ThN(T)を動的に生成するものとする。   In this embodiment, as an example, the obstacle determination unit F5 dynamically generates a noise corresponding threshold ThN (T) corresponding to the elapsed time T based on the default threshold ThD (T) corresponding to the current elapsed time T. It shall be.

一例として、ある経過時間Tに対応するノイズ対応閾値ThN(T)は、その経過時間Tに対応するデフォルト閾値ThD(T)に、所定の係数αを乗じた値とする。倍率αは、1よりも大きい実数とすればよい。例えばここではα=3とする。なお、他の態様として、ノイズ対応閾値ThN(T)は、デフォルト閾値ThD(T)に、所定の値βを加えた値としてもよい。βは正の値であればよい。   As an example, the noise corresponding threshold ThN (T) corresponding to a certain elapsed time T is a value obtained by multiplying the default threshold ThD (T) corresponding to the elapsed time T by a predetermined coefficient α. The magnification α may be a real number larger than 1. For example, α = 3 here. As another aspect, the noise correspondence threshold ThN (T) may be a value obtained by adding a predetermined value β to the default threshold ThD (T). β may be a positive value.

また、αやβといった調整用のパラメータは、画像認識部F2が検出しているノイズ要素の種別に応じて調整されても良い。例えば、検出されているノイズ要素が、相対的に反射波を返しにくい要素である場合には、相対的に反射波を返しやすい要素である場合に用いる値(例えば3)よりも小さい値(例えば2)をαとして採用してもよい。反射波を返しやすい要素であるか否かは、ノイズ要素ごとに予め定義されていれば良い。βについても同様である。   The adjustment parameters such as α and β may be adjusted according to the type of noise element detected by the image recognition unit F2. For example, when the detected noise element is an element that is relatively difficult to return a reflected wave, a value (for example, 3) that is smaller than a value (for example, 3) used in the case of an element that is relatively easy to return a reflected wave. 2) may be adopted as α. Whether or not an element easily returns a reflected wave may be defined in advance for each noise element. The same applies to β.

そして、現在入力されている受信強度が、送信開始タイミングからの経過時間Tに対応するノイズ対応閾値ThN(T)を超過している場合に、障害物が存在すると判定する。   Then, when the currently input reception intensity exceeds the noise correspondence threshold ThN (T) corresponding to the elapsed time T from the transmission start timing, it is determined that there is an obstacle.

このような態様によれば、障害物判定部F5は、画像認識部F2が超音波センサ2の検知エリアにノイズ要素を検出していない場合には、デフォルト閾値ThD(T)を用いて障害物を検出する。一方、画像認識部F2が超音波センサ2の検知エリアにノイズ要素を検出している場合であって、かつ、経過時間Tがノイズ影響時間帯に該当する場合には、ノイズ対応閾値ThN(T)を用いて障害物を検出する。   According to such an aspect, the obstacle determination unit F5 uses the default threshold ThD (T) when the image recognition unit F2 has not detected a noise element in the detection area of the ultrasonic sensor 2. Is detected. On the other hand, when the image recognition unit F2 detects a noise element in the detection area of the ultrasonic sensor 2 and the elapsed time T corresponds to the noise influence time zone, the noise correspondence threshold ThN (T ) To detect obstacles.

また、この障害物判定部F5は、障害物を検出した場合には、その検出した障害物と超音波センサ2との距離を特定する。障害物判定部F5が備える距離特定部F51は、障害物と超音波センサ2との距離を特定する機能ブロックである。距離特定部F51は、送信開始タイミングから障害物を検出するまでの経過時間に音速を乗算するとともに、2で割ることで、超音波センサ2から障害物までの距離を特定する。   In addition, when detecting an obstacle, the obstacle determination unit F5 specifies the distance between the detected obstacle and the ultrasonic sensor 2. The distance specifying unit F51 included in the obstacle determining unit F5 is a functional block that specifies the distance between the obstacle and the ultrasonic sensor 2. The distance specifying unit F51 specifies the distance from the ultrasonic sensor 2 to the obstacle by multiplying the elapsed time from the transmission start timing to the detection of the obstacle by the sound speed and dividing by 2.

報知処理部F6は、報知装置4と協働し、自車両のドライバに対して自車両前方に障害物が存在することを報知するための処理(以降、報知処理)を行う。例えば、報知装置4がディスプレイである場合には、自車両前方に障害物が存在する画像やテキストに表示させる。また、報知装置4がスピーカである場合には、自車両前方に障害物が存在する旨の音声メッセージや警告音を出力させる。   The notification processing unit F6 cooperates with the notification device 4 to perform processing (hereinafter referred to as notification processing) for notifying the driver of the host vehicle that an obstacle exists in front of the host vehicle. For example, when the notification device 4 is a display, it is displayed on an image or text in which an obstacle exists in front of the host vehicle. Further, when the notification device 4 is a speaker, a voice message or a warning sound that an obstacle exists in front of the host vehicle is output.

さらに、報知装置4がバイブレータである場合には、報知装置4としてのバイブレータを予め定められた振動パターンで振動させることで、ドライバに対して障害物が存在することを知らせる。なお、バイブレータは、ドライバの座席やハンドルなど、ドライバの体に接触する部分に設けられていれば良い。つまり、報知処理部F6は、報知装置4に応じた態様で、報知処理を実施する。自車両前方に障害物が存在することを示す情報は、画像表示や、テキスト表示、発光、振動、音声(単なる音を含む)等、人間が知覚可能な態様によって出力さればよい。   Furthermore, when the alerting | reporting apparatus 4 is a vibrator, the vibrator as the alerting | reporting apparatus 4 is vibrated with a predetermined vibration pattern, so that the driver is informed that an obstacle is present. The vibrator may be provided in a portion that contacts the driver's body, such as the driver's seat or handle. That is, the notification processing unit F6 performs the notification process in a manner corresponding to the notification device 4. Information indicating that there is an obstacle ahead of the host vehicle may be output in a manner that can be perceived by humans, such as image display, text display, light emission, vibration, and sound (including simple sounds).

報知処理部F6が報知処理を実施する条件は適宜設計されれば良い。例えば、超音波センサ2から一定の距離以内に障害物が存在する場合に報知処理を実施してもよい。また、障害物判定部F5が障害物を検出した場合には、その障害物と超音波センサ2との距離に依らず、報知処理を実施してもよい。何れにしても、報知処理は障害物判定部F5が障害物を検出していることに基づいて実施されれば良い。   Conditions for the notification processing unit F6 to perform the notification processing may be appropriately designed. For example, the notification process may be performed when an obstacle exists within a certain distance from the ultrasonic sensor 2. When the obstacle determination unit F5 detects an obstacle, the notification process may be performed regardless of the distance between the obstacle and the ultrasonic sensor 2. In any case, the notification process may be performed based on the fact that the obstacle determination unit F5 detects an obstacle.

<閾値調整処理>
次に図6に示すフローチャートを用いて障害物判定部F5が、ノイズ影響閾値を決定するための一連の処理(以降、閾値決定処理)について述べる。この図6に示すフローチャートは、車両が走行可能な電源状態となっている場合に、逐次(例えば100ミリ秒毎に)実施されれば良い。
<Threshold adjustment processing>
Next, a series of processing (hereinafter, threshold determination processing) for the obstacle determination unit F5 to determine the noise influence threshold will be described using the flowchart shown in FIG. The flow chart shown in FIG. 6 may be executed sequentially (for example, every 100 milliseconds) when the vehicle is in a power supply state capable of traveling.

まず、ステップS101では画像データ取得部F1が、カメラ3が生成した画像データを取得して、ステップS102に移る。ステップS102では、画像認識部F2がステップS101で取得した画像データを用いて画像認識処理を実施することで、路面勾配の変化の有無や、路面状態、天候状態などといった、種々の要素を検出する。このステップS102の処理が完了すると、ステップS103に移る。   First, in step S101, the image data acquisition unit F1 acquires image data generated by the camera 3, and proceeds to step S102. In step S102, the image recognition unit F2 performs image recognition processing using the image data acquired in step S101, thereby detecting various elements such as presence / absence of a change in road surface gradient, road surface condition, and weather condition. . When the process of step S102 is completed, the process proceeds to step S103.

なお、本実施形態では、カメラ3が撮影した1フレーム毎に、画像認識処理を実施する態様とするが、これに限らない。複数のフレームの画像データを用いて画像認識処理を実施してもよい。例えば、連続する3フレーム分の画像データを元に、周知の超解像技術を援用して解像度を高めた超解像画像を生成し、当該超解像画像から種々の要素を検出する態様としてもよい。   In the present embodiment, the image recognition process is performed for each frame taken by the camera 3, but the present invention is not limited to this. Image recognition processing may be performed using image data of a plurality of frames. For example, as a mode of generating a super-resolution image with improved resolution by using a well-known super-resolution technique based on image data for three consecutive frames, and detecting various elements from the super-resolution image Also good.

ステップS103では画像認識部F2が、ステップS102での画像認識処理の結果、超音波センサ2の検知エリア内にノイズ要素が存在するか否かを判定する。超音波センサ2の検知エリア内にノイズ要素を検出している場合には、ステップS103が肯定判定されてステップS104に移る。一方、超音波センサ2の検知エリア内にノイズ要素を検出していない場合には、ステップS103が否定判定されてステップS105に移る。   In step S103, the image recognition unit F2 determines whether or not a noise element is present in the detection area of the ultrasonic sensor 2 as a result of the image recognition processing in step S102. If a noise element is detected in the detection area of the ultrasonic sensor 2, an affirmative determination is made in step S103 and the process proceeds to step S104. On the other hand, when a noise element is not detected in the detection area of the ultrasonic sensor 2, a negative determination is made in step S103, and the process proceeds to step S105.

ステップS104では影響特定部F3が、ノイズ影響時間帯特定する。そして障害物判定部F5が、そのノイズ影響時間帯において用いるノイズ対応閾値ThN(T)を、デフォルト閾値ThD(T)に基づいて生成し、本フローを終了する。ステップS105では、デフォルト閾値を判定用閾値として採用し、本フローを終了する。   In step S104, the influence specifying unit F3 specifies the noise influence time zone. Then, the obstacle determination unit F5 generates the noise correspondence threshold ThN (T) used in the noise influence time zone based on the default threshold ThD (T), and ends this flow. In step S105, the default threshold value is adopted as the determination threshold value, and this flow ends.

<実施形態のまとめ>
以上の構成では、障害物判定部F5は、画像認識部F2が超音波センサ2の検知エリアにノイズ要素を検出していない場合には、デフォルト閾値を用いて障害物を検出する。一方、画像認識部F2が超音波センサ2の検知エリアにノイズ要素を検出している場合であって、かつ、経過時間Tがノイズ影響時間帯に該当する場合には、ノイズ対応閾値を用いて障害物を検出する。
<Summary of Embodiment>
In the above configuration, the obstacle determination unit F5 detects an obstacle using a default threshold when the image recognition unit F2 does not detect a noise element in the detection area of the ultrasonic sensor 2. On the other hand, when the image recognition unit F2 detects a noise element in the detection area of the ultrasonic sensor 2 and the elapsed time T corresponds to the noise influence time zone, the noise correspondence threshold is used. Detect obstacles.

したがって、例えば、図7に示すように、自車両の前方に勾配増加点が存在する状況であっても、その勾配増加点よりも遠方に延設されている路面からの反射波が返ってくると想定される時間帯の判定用閾値としては、デフォルト閾値ThD(T)よりも大きいノイズ対応閾値ThN(T)が適用される。そのため、路面からの反射波によって、障害物が存在すると誤判定する恐れを低減できる。なお、図7中の破線W1は、路面からの反射波の受信強度の推移を概念的に表している。   Therefore, for example, as shown in FIG. 7, even if there is a slope increasing point in front of the host vehicle, the reflected wave from the road surface extending farther than the slope increasing point returns. As the threshold value for determination of the time zone assumed to be, a noise corresponding threshold value ThN (T) larger than the default threshold value ThD (T) is applied. Therefore, it is possible to reduce the risk of erroneous determination that an obstacle exists due to a reflected wave from the road surface. Note that the broken line W1 in FIG. 7 conceptually represents the transition of the received intensity of the reflected wave from the road surface.

また、図8に示すように、自車両の前方に微小段差が存在する状況であっても、その微小段差からの反射波が返ってくると想定される時間帯の判定用閾値としては、デフォルト閾値ThD(T)よりも大きいノイズ対応閾値ThN(T)が適用される。そのため、微小段差からの反射波によって、障害物が存在すると誤判定する恐れを低減できる。なお、図8中の破線W2は、微小段差からの反射波の受信強度の推移を概念的に表している。   In addition, as shown in FIG. 8, even when there is a minute step in front of the host vehicle, the default threshold for determining a time zone in which a reflected wave from the minute step is expected to return is the default. A noise correspondence threshold ThN (T) larger than the threshold ThD (T) is applied. Therefore, it is possible to reduce the risk of erroneous determination that an obstacle exists due to the reflected wave from the minute step. Note that the broken line W2 in FIG. 8 conceptually represents the transition of the reception intensity of the reflected wave from the minute step.

つまり、以上の構成によれば、路面や微小段差などのノイズ要素によって、障害物が存在すると誤判定する恐れを低減できる。その結果、報知処理部F6が不要な報知を実施する恐れも低減できる。   That is, according to the above configuration, it is possible to reduce the risk of erroneous determination that an obstacle exists due to noise elements such as road surfaces and minute steps. As a result, the possibility that the notification processing unit F6 performs unnecessary notification can be reduced.

なお、ノイズ対応閾値はデフォルト閾値よりも大きいため、判定用閾値としてノイズ態様閾値を用いるということは、障害物が存在すると判定するための条件として、より充足されにくい条件を採用することに相当する。つまり、以上で述べた実施形態は、ノイズ要素が検出されている場合には、ノイズ要素が検出されていない場合に用いる条件よりも充足されにくい条件を用いて、障害物が存在しているか否かを判定する態様の一例に相当する。   Since the noise correspondence threshold is larger than the default threshold, using the noise mode threshold as the determination threshold corresponds to adopting a condition that is less likely to be satisfied as a condition for determining that an obstacle exists. . That is, in the embodiment described above, when a noise element is detected, whether or not an obstacle exists using a condition that is less likely to be satisfied than a condition used when the noise element is not detected. This corresponds to an example of a mode for determining whether or not.

また、以上の構成では、ノイズ要素が存在しない場合においては、障害物判定部F5は、デフォルト閾値を用いて、障害物の有無を判定する。また、ノイズ要素が存在する場合であっても、ノイズ影響時間帯に該当しない時間帯においては、障害物判定部F5は、デフォルト閾値を用いて、障害物の有無を判定する。   In the above configuration, when there is no noise element, the obstacle determination unit F5 determines the presence or absence of an obstacle using a default threshold. Further, even when there is a noise element, the obstacle determination unit F5 determines the presence or absence of an obstacle using a default threshold in a time zone that does not correspond to the noise influence time zone.

したがって、デフォルト閾値を予め相対的に小さい値としておくことで、ノイズ要素の影響を受けない状況においては、障害物の存在を相対的に感度良く検出できる。つまり、以上の構成によれば、不要な報知を抑制しつつ、障害物の検出感度を高めることができる。   Therefore, by setting the default threshold value to a relatively small value in advance, it is possible to detect the presence of an obstacle with a relatively high sensitivity in a situation that is not affected by the noise element. That is, according to the above configuration, it is possible to increase obstacle detection sensitivity while suppressing unnecessary notification.

ところで、一般的に、超音波センサ2から遠方の領域に対応する時間帯ほど、ノイズ要素からの反射波をより強い受信強度で受信する傾向がある。これは、送信開始タイミングからの経過時間が大きくなるほど、超音波パルスは拡がって空間を伝搬し、様々な要素で反射されて返ってくるためである。   By the way, generally, the time zone corresponding to the region far from the ultrasonic sensor 2 tends to receive the reflected wave from the noise element with stronger reception intensity. This is because as the elapsed time from the transmission start timing increases, the ultrasonic pulse spreads and propagates through the space, and is reflected and returned by various elements.

そこで、ノイズ要素による障害物の誤検出及び不要な報知を抑制するための他の態様としては、図9に示すように、デフォルト閾値を経過時間が大きくなる程大きい値に設定しておく態様も想定される(これを想定構成とする)。なお、図9中の破線W3は、経過時間に応じた、ノイズ要素による反射波の受信強度の想定値(以降、想定ノイズレベル)を示している。   Therefore, as another mode for suppressing erroneous detection of obstacles due to noise elements and unnecessary notification, there is also a mode in which the default threshold is set to a larger value as the elapsed time becomes larger, as shown in FIG. Assumed (this is assumed configuration). In addition, the broken line W3 in FIG. 9 has shown the assumed value (henceforth an assumed noise level) of the receiving intensity of the reflected wave by a noise element according to elapsed time.

しかしながら、想定構成では、超音波センサ2から遠いほど値が大きくなるため、超音波センサ2から離れた位置に存在する障害物の検出感度が低下してしまう。つまり、デフォルト閾値を想定ノイズレベルよりも大きくなるように設定すると、障害物を検出可能な範囲が、ソフトウェア的に狭くなってしまう。   However, in the assumed configuration, since the value increases as the distance from the ultrasonic sensor 2 increases, the detection sensitivity of an obstacle existing at a position away from the ultrasonic sensor 2 decreases. That is, if the default threshold is set to be larger than the assumed noise level, the range in which an obstacle can be detected becomes narrower in terms of software.

そのような課題に対し、本実施形態の構成では、ノイズ要素が存在する場合には当該ノイズ要素による障害物の誤検出が抑制されるように判定用閾値を変更して運用する。そのため、本実施形態の構成によれば、遠方領域に対応する時間帯のデフォルト閾値を、想定構成よりも小さい値に設定することができる。つまり、想定構成に比べて、ソフトウェア的な(言い換えれば論理的な)検知エリアを大きく形成することができる。   In response to such a problem, in the configuration of the present embodiment, when a noise element exists, the determination threshold is changed and used so that erroneous detection of an obstacle by the noise element is suppressed. Therefore, according to the configuration of the present embodiment, the default threshold value of the time zone corresponding to the far region can be set to a value smaller than the assumed configuration. That is, a software-like (in other words, logical) detection area can be formed larger than the assumed configuration.

なお、以上では周辺監視ECU1に障害物判定部F5の機能を備える態様を例示したが、これに限らない。障害物判定部F5は、超音波センサ2に設けられていてもよい。   In addition, although the aspect provided with the function of the obstruction determination part F5 in the periphery monitoring ECU1 was illustrated above, it is not restricted to this. The obstacle determination unit F5 may be provided in the ultrasonic sensor 2.

また、以上、本発明の実施形態を説明したが、本発明は上述の実施形態に限定されるものではなく、後述の実施形態や種々の変形例も本発明の技術的範囲に含まれる。さらに、下記以外にも要旨を逸脱しない範囲内で種々変更して実施することができる。   Further, although the embodiments of the present invention have been described above, the present invention is not limited to the above-described embodiments, and the following embodiments and various modifications are also included in the technical scope of the present invention. In addition to the following, various modifications can be made without departing from the scope of the invention.

[変形例1−1]
第1実施形態では、残響収束時間Tx以降におけるデフォルト閾値を、一定の値とする態様としたが、これに限らない。デフォルト閾値は、想定構成と同様に、送信開始タイミングからの経過時間Tに応じて大きい値となるように設定されていても良い。
[Modification 1-1]
In the first embodiment, the default threshold after the reverberation convergence time Tx is set to a constant value. However, the present invention is not limited to this. Similar to the assumed configuration, the default threshold value may be set to a large value according to the elapsed time T from the transmission start timing.

そのような態様においても、第1実施形態と同様にノイズ影響時間帯を特定し、経過時間Tがノイズ影響時間帯となっている場合には、判定用閾値としてノイズ対応閾値を適用すればよい。   Even in such an aspect, the noise influence time zone is specified as in the first embodiment, and when the elapsed time T is the noise influence time zone, the noise correspondence threshold may be applied as the determination threshold. .

例えば、画像認識部F2が図10に示すようにノイズ要素としての勾配増加点を検出している場合には、そのノイズ要素が存在する領域に対応するノイズ影響時間帯を影響特定部F3が特定する。そして、障害物判定部F5は、ノイズ影響時間帯で用いるためのノイズ対応閾値ThN(T)を用いて障害物の有無の判定を実施する。なお、図10中の実線は、判定に用いる閾値を表しており、破線がデフォルト閾値を表している。   For example, when the image recognition unit F2 detects a gradient increase point as a noise element as shown in FIG. 10, the influence specifying unit F3 specifies the noise influence time zone corresponding to the area where the noise element exists. To do. And the obstacle determination part F5 implements the presence or absence of an obstacle using the noise corresponding | compatible threshold value ThN (T) for using in a noise influence time slot | zone. In addition, the solid line in FIG. 10 represents the threshold value used for determination, and the broken line represents the default threshold value.

[変形例1−2]
また、前述の変形例1では、ノイズ影響時間帯を特定し、そのノイズ影響時間帯においてのみ、デフォルト閾値ThD(T)とは異なる値を判定用閾値として採用する態様を開示したがこれに限らない。
[Modification 1-2]
Further, in the above-described modified example 1, the noise influence time zone is specified, and a mode in which a value different from the default threshold ThD (T) is adopted as the determination threshold only in the noise influence time zone is disclosed, but the present invention is not limited thereto. Absent.

ノイズ影響時間帯以外の時間帯は、相対的にノイズ要素からの反射波が到来する可能性が低い時間帯である。したがって、デフォルト閾値ThD(T)が想定ノイズレベルを超過するように設定されている場合には、ノイズ影響時間帯以外の時間帯の判定用閾値として、デフォルト閾値ThD(T)よりも小さい値を採用して、障害物の有無の判定を実施してもよい。   The time zone other than the noise influence time zone is a time zone in which the possibility that a reflected wave from the noise element arrives is relatively low. Therefore, when the default threshold ThD (T) is set so as to exceed the assumed noise level, a value smaller than the default threshold ThD (T) is set as a threshold for determination in a time zone other than the noise affected time zone. It may be adopted to determine whether there is an obstacle.

例えば、図11に示すように、ノイズ影響時間帯においては、ノイズ抑制閾値を判定用閾値として採用する一方、ノイズ影響時間帯以外の時間帯においては、デフォルト閾値ThD(T)よりも低い値を、判定用閾値として用いる。ノイズ影響時間帯以外の時間帯において判定用閾値として用いる値は、例えば、一様路面想定値Pcとすればよい。   For example, as shown in FIG. 11, in the noise influence time zone, the noise suppression threshold is adopted as the determination threshold value, while in a time zone other than the noise influence time zone, a value lower than the default threshold ThD (T) is used. , Used as a threshold for determination. The value used as the determination threshold value in the time zone other than the noise influence time zone may be, for example, the uniform road surface assumed value Pc.

なお、図11は、ノイズ要素として微小段差を検出しており、経過時間T3aからT3bまでの時間帯がノイズ影響時間帯として特定されている場合を表している。経過時間T3が、超音波センサ2から微小段差までの距離D3に対応する往復飛行時間を表している。   FIG. 11 shows a case where a minute step is detected as a noise element, and a time zone from the elapsed time T3a to T3b is specified as the noise influence time zone. The elapsed time T3 represents the round trip flight time corresponding to the distance D3 from the ultrasonic sensor 2 to the minute step.

このような態様によれば、デフォルト閾値が経過時間Tに応じて大きくなるように定義されている場合であっても、ノイズ要素の影響を受けない場合には、より小さい閾値を用いて、障害物の有無を判定することができる。つまり、前述の変形例1よりも、障害物を検出可能な範囲をソフトウェア的に広げることができる。   According to such an aspect, even when the default threshold value is defined so as to increase with the elapsed time T, if it is not affected by the noise element, a smaller threshold value is used. The presence or absence of an object can be determined. That is, the range in which an obstacle can be detected can be expanded in software as compared with the first modification.

[変形例1−3]
第1実施形態では、ノイズ影響時間帯を特定し、ノイズ影響時間帯の判定用閾値として、デフォルト閾値とよりも大きい値を適用する態様を開示したが、これに限らない。例えば、残響収束時間Tx以降における全ての経過時間において、ノイズ対応閾値ThN(T)を適用してもよい。
[Modification 1-3]
In 1st Embodiment, although the noise influence time slot | zone was identified and the aspect larger than a default threshold value was applied as a threshold value for determination of a noise influence time slot | zone, it was not restricted to this. For example, the noise correspondence threshold ThN (T) may be applied to all elapsed times after the reverberation convergence time Tx.

また、上の態様に加えて残響収束時間Tx未満の時間帯においても、ノイズ対応閾値ThN(T)を適用してもよい。つまり、画像認識部F2がノイズ要素を検出している場合には、全時間帯においてノイズ対応閾値ThN(T)を適用してもよい。そのような態様によれば、ノイズ影響時間帯を特定するための処理を省略することができる。   Further, in addition to the above aspect, the noise correspondence threshold ThN (T) may be applied even in a time zone shorter than the reverberation convergence time Tx. That is, when the image recognition unit F2 detects a noise element, the noise correspondence threshold ThN (T) may be applied in all time zones. According to such an aspect, the process for specifying a noise influence time zone can be omitted.

[第2実施形態]
次に、本発明の第2実施形態について図を用いて説明する。なお、以降において前述の第1実施形態及びその変形例を構成する部材と同一の機能を有する部材については、同一の符号を付し、その説明を省略する。また、構成の一部のみに言及している場合、他の部分については先に説明した第1実施形態及びその変形例を適用することができる。この第2実施形態と先に述べた第1実施形態との相違点は、周辺監視ECU1が備える機能にある。以下では、主としてその相違点について述べる。
[Second Embodiment]
Next, a second embodiment of the present invention will be described with reference to the drawings. In the following, members having the same functions as those of the first embodiment and the modifications thereof will be assigned the same reference numerals and explanation thereof will be omitted. In addition, when only a part of the configuration is mentioned, the first embodiment described above and its modifications can be applied to the other parts. The difference between the second embodiment and the first embodiment described above is the function provided in the periphery monitoring ECU 1. Below, the difference is mainly described.

第2実施形態における周辺監視ECU1は、図12に示すように、機能ブロックとして、画像データ取得部F1、画像認識部F2、探査結果取得部F4、障害物判定部F5、及び、報知処理部F6を備える。また、障害物判定部F5はより細かい機能ブロックとして、距離特定部F51及び反射物検出部F52を備える。閾値記憶部M1には、送信開始タイミングからの経過時間Tに対応するデフォルト閾値ThD(T)が格納されている。   As shown in FIG. 12, the periphery monitoring ECU 1 in the second embodiment includes an image data acquisition unit F1, an image recognition unit F2, an exploration result acquisition unit F4, an obstacle determination unit F5, and a notification processing unit F6 as functional blocks. Is provided. The obstacle determination unit F5 includes a distance specifying unit F51 and a reflection detection unit F52 as finer functional blocks. The threshold storage unit M1 stores a default threshold ThD (T) corresponding to the elapsed time T from the transmission start timing.

反射物検出部F52は、探査結果取得部F4から提供される受信強度に基づいて超音波パルスを反射する物体である反射物を検出する機能ブロックである。より具体的には、反射物検出部F52は、送信開始タイミングを探査結果取得部F4から取得するとともに、その送信開始タイミングからの経過時間Tを計測する。そして、現在入力されている受信強度が、送信開始タイミングからの経過時間Tに対応するデフォルト閾値ThD(T)を超過している場合に、反射物が存在すると判定する。   The reflection object detection unit F52 is a functional block that detects a reflection object that reflects an ultrasonic pulse based on the reception intensity provided from the search result acquisition unit F4. More specifically, the reflector detection unit F52 acquires the transmission start timing from the search result acquisition unit F4, and measures the elapsed time T from the transmission start timing. Then, when the currently input reception intensity exceeds the default threshold ThD (T) corresponding to the elapsed time T from the transmission start timing, it is determined that there is a reflector.

また、距離特定部F51は、送信開始タイミングから反射物検出部F52が反射物を検出するまでに要した時間、言い換えれば、反射物検出部F52が反射物を検出した時点の経過時間Tに基づいて、その検出された反射物までの距離を特定する。特定した距離をRAM12に一時保存される。   The distance specifying unit F51 is based on the time required from the transmission start timing until the reflecting object detection unit F52 detects the reflecting object, in other words, the elapsed time T when the reflecting object detection unit F52 detects the reflecting object. Then, the distance to the detected reflector is specified. The specified distance is temporarily stored in the RAM 12.

そして、障害物判定部F5は、予め設定されている確定回数連続して、同一距離と見なすことができる距離に反射物を検出した場合に、障害物が存在すると判定する。ここで用いる確定回数は、画像認識部F2が超音波センサ2の検知エリア内にノイズ要素を検出しているか否かによって、変更される。   Then, the obstacle determination unit F5 determines that there is an obstacle when a reflection object is detected at a distance that can be regarded as the same distance continuously for a predetermined number of times. The number of determinations used here is changed depending on whether or not the image recognition unit F2 detects a noise element in the detection area of the ultrasonic sensor 2.

便宜上、画像認識部F2が超音波センサ2の検知エリア内にノイズ要素を検出していない場合に採用する確定回数を第1確定回数、画像認識部F2が超音波センサ2の検知エリア内にノイズ要素を検出している場合に採用する確定回数を第2確定回数と称する。第1確定回数及び第2確定回数は、適宜設計されればよい。ここでは一例として、第1確定回数を3回、第2確定回数を5回とする。第2確定回数は、第1確定回数よりも大きい値であればよい。第1確定回数が請求項に記載の第1規定回数に相当し、第2確定回数が請求項に記載の第2確定回数に相当する。   For convenience, the fixed number of times adopted when the image recognition unit F2 has not detected a noise element in the detection area of the ultrasonic sensor 2 is the first fixed number of times, and the image recognition unit F2 has noise in the detection area of the ultrasonic sensor 2. The fixed number of times adopted when the element is detected is referred to as a second fixed number of times. The first determination number and the second determination number may be appropriately designed. Here, as an example, the first fixed number of times is 3 times and the second fixed number of times is 5 times. The second determined number may be a value larger than the first determined number. The first fixed number of times corresponds to the first prescribed number of times described in the claims, and the second fixed number of times corresponds to the second fixed number of times described in the claims.

この第2実施形態における周辺監視ECU1の作動の概略について、図13に示すフローチャートを用いて述べる。この図13に示すフローチャートは、車両が走行可能な電源状態となっている場合に、逐次(例えば100ミリ秒毎に)実施されれば良い。   An outline of the operation of the periphery monitoring ECU 1 in the second embodiment will be described with reference to a flowchart shown in FIG. The flowchart shown in FIG. 13 may be executed sequentially (for example, every 100 milliseconds) when the vehicle is in a power supply state where the vehicle can run.

ステップS201からステップS203までの処理は、図6に示すフローチャートにおけるステップS101からステップS103までの処理と同様である。ステップS201からステップS203までの処理によって、超音波センサ2の検知エリアにノイズ要素が存在するか否かが判定される。ステップS203において超音波センサ2の検知エリアにノイズ要素が存在すると判定された場合には、ステップS203が肯定判定されて、ステップS204に移る。一方、超音波センサ2の検知エリアにノイズ要素が存在すると判定されなかった場合には、ステップS203が否定判定されて、ステップS205に移る。   The processing from step S201 to step S203 is the same as the processing from step S101 to step S103 in the flowchart shown in FIG. By the processing from step S201 to step S203, it is determined whether or not there is a noise element in the detection area of the ultrasonic sensor 2. If it is determined in step S203 that a noise element is present in the detection area of the ultrasonic sensor 2, an affirmative determination is made in step S203, and the process proceeds to step S204. On the other hand, when it is not determined that a noise element exists in the detection area of the ultrasonic sensor 2, a negative determination is made in step S203, and the process proceeds to step S205.

ステップS204では障害物判定部F5は、確定回数として第2確定回数を採用し本フローを終了する。一方、ステップS205では、確定回数として第1確定回数を採用して本フロートを終了する。   In step S204, the obstacle determination unit F5 adopts the second fixed number as the fixed number of times, and ends this flow. On the other hand, in step S205, the first determination count is adopted as the determination count, and this float is finished.

以上の構成では、画像認識部F2がノイズ要素を検出している場合には、障害物が存在すると判定するために用いる確定回数を、ノイズ要素を検出していない場合よりも多い回数とする。一般的に、ノイズ要素からの反射波の受信強度は、超音波パルスの送信毎にばらつくことが期待できる。したがって、確定回数を増加させることで、反射物として検出されたノイズ要素を、障害物であると判定する恐れを低減することができる。つまり、以上の構成によれば、第1実施形態と同様の効果を奏することができる。   With the above configuration, when the image recognition unit F2 detects a noise element, the number of determinations used to determine that an obstacle is present is set to be larger than when no noise element is detected. In general, the reception intensity of a reflected wave from a noise element can be expected to vary every time an ultrasonic pulse is transmitted. Therefore, by increasing the number of determinations, it is possible to reduce the risk of determining that a noise element detected as a reflecting object is an obstacle. That is, according to the above configuration, the same effect as that of the first embodiment can be obtained.

なお、障害物が存在すると判定するための確定回数として第1確定回数よりも多い第2確定回数を用いるということは、障害物が存在すると判定するための条件として、より充足されにくい条件を採用することに相当する。つまり、以上で述べた第2実施形態は、ノイズ要素が検出されている場合には、ノイズ要素が検出されていない場合に用いる条件よりも充足されにくい条件を用いて、障害物が存在しているか否かを判定する態様の一例に相当する。   In addition, using the second fixed number of times larger than the first fixed number as the number of fixed times for determining that an obstacle is present means adopting a condition that is less likely to be satisfied as a condition for determining that an obstacle is present. It corresponds to doing. That is, in the second embodiment described above, when a noise element is detected, there is an obstacle using a condition that is less likely to be satisfied than a condition used when the noise element is not detected. This corresponds to an example of a mode for determining whether or not there is.

[第3実施形態]
次に、本発明の第3実施形態について図を用いて説明する。この第3実施形態もまた、先に述べた実施形態やその変形例と同様に、周辺監視ECU1、超音波センサ2、カメラ3、及び報知装置4を備える。本実施形態における周辺監視ECU1は、機能ブロックとして、図14に示すように、画像データ取得部F1、画像認識部F2、探査結果取得部F4、障害物判定部F5、報知処理部F6、及び出力レベル調整部F7を備える。
[Third Embodiment]
Next, a third embodiment of the present invention will be described with reference to the drawings. This third embodiment also includes a periphery monitoring ECU 1, an ultrasonic sensor 2, a camera 3, and a notification device 4, as in the above-described embodiments and modifications thereof. As shown in FIG. 14, the periphery monitoring ECU 1 in the present embodiment includes an image data acquisition unit F1, an image recognition unit F2, an exploration result acquisition unit F4, an obstacle determination unit F5, a notification processing unit F6, and an output as functional blocks. A level adjustment unit F7 is provided.

出力レベル調整部F7は、超音波センサ2が送信する超音波パルスの信号強度(以降、出力レベル)を変更させる。なお、前提として、本実施形態における超音波センサ2は、超音波パルスの出力レベルを調整可能な構成となっている。   The output level adjustment unit F7 changes the signal intensity (hereinafter, output level) of the ultrasonic pulse transmitted by the ultrasonic sensor 2. As a premise, the ultrasonic sensor 2 in the present embodiment has a configuration capable of adjusting the output level of the ultrasonic pulse.

本実施形態では、超音波センサ2は、超音波パルスの出力レベルとして、予め設定されている定格レベルと、その定格レベルよりも小さい抑制レベルの2つのレベルに設定可能な構成となっているものとする。抑制レベルは、定格レベルよりも小さければよく、適宜設計されれば良い。なお、ROM13には超音波センサ2の出力レベルが定格レベルとなっている場合の検知エリアを示すデータが格納されているものとする。   In the present embodiment, the ultrasonic sensor 2 has a configuration that can be set to two levels, that is, a preset rated level and a suppression level smaller than the rated level, as the output level of the ultrasonic pulse. And The suppression level only needs to be smaller than the rated level and may be appropriately designed. It is assumed that the ROM 13 stores data indicating the detection area when the output level of the ultrasonic sensor 2 is the rated level.

出力レベルの変更は、超音波センサ2の駆動電圧を調整することで実現すればよい。また、発振素子に入力する信号の周波数を、当該発振素子の共振周波数から一定量ずらした値(以降、抑制用周波数)とすることで、出力レベルを低減させてもよい。抑制用周波数は、出力レベルが抑制レベルとなる周波数である。   The change of the output level may be realized by adjusting the driving voltage of the ultrasonic sensor 2. Further, the output level may be reduced by setting the frequency of the signal input to the oscillation element to a value shifted from the resonance frequency of the oscillation element by a certain amount (hereinafter referred to as suppression frequency). The suppression frequency is a frequency at which the output level becomes the suppression level.

この出力レベル調整部F7の作動について、図15に示すフローチャートを用いて、説明する。図15に示すフローチャートは、車両が走行可能な電源状態となっている場合に、逐次(例えば100ミリ秒毎に)実施されれば良い。   The operation of the output level adjustment unit F7 will be described with reference to the flowchart shown in FIG. The flowchart shown in FIG. 15 may be executed sequentially (for example, every 100 milliseconds) when the vehicle is in a power supply state where the vehicle can run.

ステップS301からステップS303までの処理は、図6に示すフローチャートにおけるステップS101からステップS103までの処理と同様である。ステップS301からステップS303までの処理によって、超音波センサ2の出力レベルが定格レベルとなっている場合の検知エリアに、ノイズ要素が存在するか否かが判定される。ステップS303においてノイズ要素が存在すると判定された場合には、ステップS303が肯定判定されて、ステップS304に移る。一方、超音波センサ2の検知エリアにノイズ要素が存在すると判定されなかった場合には、ステップS303が否定判定されて、ステップS305に移る。   The processing from step S301 to step S303 is the same as the processing from step S101 to step S103 in the flowchart shown in FIG. By the processing from step S301 to step S303, it is determined whether or not a noise element exists in the detection area when the output level of the ultrasonic sensor 2 is the rated level. If it is determined in step S303 that a noise element is present, an affirmative determination is made in step S303, and the process proceeds to step S304. On the other hand, if it is not determined that a noise element is present in the detection area of the ultrasonic sensor 2, a negative determination is made in step S303, and the process proceeds to step S305.

ステップS304では出力レベル調整部F7は、出力レベルを抑制レベルに設定して本フローを終了する。一方、ステップS305では、出力レベルを定格レベルに設定して本フローを終了する。   In step S304, the output level adjustment unit F7 sets the output level to the suppression level and ends this flow. On the other hand, in step S305, the output level is set to the rated level, and this flow ends.

以上の構成では、画像認識部F2がノイズ要素を検出していない場合には、超音波パルスを定格レベルで送信させる一方、ノイズ要素を検出している場合には、抑制レベルで超音波パルスを送信させる。出力レベルを小さくするということは、超音波センサ2の検知エリアを小さくすることに相当する。つまり、本実施形態の障害物報知システム100は、画像認識部F2がノイズ要素を検出している場合には、ノイズ要素を検出していない場合に比べて、検知エリアを小さくする。   In the above configuration, when the image recognition unit F2 does not detect the noise element, the ultrasonic pulse is transmitted at the rated level. On the other hand, when the noise element is detected, the ultrasonic pulse is transmitted at the suppression level. Send it. Decreasing the output level corresponds to reducing the detection area of the ultrasonic sensor 2. That is, the obstacle notification system 100 according to the present embodiment makes the detection area smaller when the image recognition unit F2 detects a noise element than when a noise element is not detected.

当然、検知エリアを小さくすれば、自車両から遠方にある勾配増加点以降の路面等といったノイズ要素によって、障害物が存在すると誤判定する恐れを低減できる。その結果、上述した種々の実施形態や変形例と同様に、不要な報知処理を実施する恐れを低減できる。   Naturally, if the detection area is reduced, the risk of erroneous determination that an obstacle exists due to noise elements such as a road surface after a slope increase point far from the host vehicle can be reduced. As a result, similar to the various embodiments and modifications described above, the risk of performing unnecessary notification processing can be reduced.

[その他の変形例]
以上では、自車両の周辺に存在する障害物を検出するためのセンサ(以降、障害物センサ)として、超音波センサを用いる態様としたが、これに限らない。障害物センサは、探査波としてミリ波(準ミリ波を含む)を用いるミリ波レーダ、探査波として光を用いるレーザレーダなどであってもよい。つまり、請求項に記載の探査波送受信装置は、ミリ波レーダやレーザレーダ等、超音波センサ以外の装置であってもよい。
[Other variations]
In the above, an ultrasonic sensor is used as a sensor for detecting an obstacle existing around the host vehicle (hereinafter referred to as an obstacle sensor), but the present invention is not limited thereto. The obstacle sensor may be a millimeter wave radar that uses millimeter waves (including quasi-millimeter waves) as a search wave, a laser radar that uses light as a search wave, and the like. That is, the exploration wave transmission / reception device described in the claims may be a device other than the ultrasonic sensor, such as a millimeter wave radar or a laser radar.

100 障害物報知システム、1 周辺監視ECU(障害物報知装置)、2 超音波センサ(探査波送受信装置)、3 カメラ、4 報知装置、11 CPU、12 RAM、13ROM、F1 画像データ取得部、F2 画像認識部(ノイズ要素検出部)、F3 影響特定部、F4 探査結果取得部、F5 障害物判定部、F6 報知処理部、F7 出力レベル調整部、F51 距離特定部、F52 反射物検出部、M1 閾値記憶部 DESCRIPTION OF SYMBOLS 100 Obstacle notification system, 1 Perimeter monitoring ECU (obstacle notification device), 2 Ultrasonic sensor (Exploration wave transmission / reception device), 3 Camera, 4 Notification device, 11 CPU, 12 RAM, 13 ROM, F1 Image data acquisition part, F2 Image recognition unit (noise element detection unit), F3 influence identification unit, F4 search result acquisition unit, F5 obstacle determination unit, F6 notification processing unit, F7 output level adjustment unit, F51 distance identification unit, F52 reflector detection unit, M1 Threshold storage unit

Claims (8)

車両に搭載されてあって、
前記車両の進行方向に探査波を送信するとともに、その探査波が物体によって反射されて返ってくる反射波を受信する探査波送受信装置が受信した前記反射波の受信強度を逐次取得する探査結果取得部(F4)と、
前記探査結果取得部が取得した前記反射波の受信強度を用いて、前記車両のドライバに対してその存在を報知すべき物体である障害物が、前記車両の進行方向に存在しているか否かを判定する障害物判定部(F5)と、
前記障害物判定部によって前記障害物が存在すると判定されていることに基づいて、前記ドライバに対して当該障害物の存在を報知するための報知処理を実施する報知処理部(F6)と、
前記探査波送受信装置が送信する前記探査波の到達範囲を撮影範囲に含むカメラが撮影した画像データを取得する画像データ取得部(F1)と、
前記画像データ取得部が取得した前記画像データを解析することで、前記探査波を反射しうる要素であって、かつ、前記ドライバに対して報知する必要がない要素として予め設定されている要素であるノイズ要素の存在を検出するノイズ要素検出部(F2)と、を備え、
前記障害物判定部は、前記ノイズ要素検出部が前記ノイズ要素を検出している場合には、前記ノイズ要素検出部が前記ノイズ要素を検出していない場合に用いる条件よりも充足されにくい条件を用いて、前記障害物が存在しているか否かを判定することを特徴とする障害物報知装置。
Mounted on the vehicle,
Obtaining a search result that sequentially acquires the received intensity of the reflected wave received by the search wave transmitting / receiving device that transmits the search wave in the traveling direction of the vehicle and receives the reflected wave that is reflected back by the object. Part (F4),
Whether there is an obstacle in the traveling direction of the vehicle, which is an object that should be notified to the driver of the vehicle by using the received wave intensity of the reflected wave acquired by the exploration result acquisition unit An obstacle determination unit (F5) for determining
A notification processing unit (F6) that performs a notification process for notifying the driver of the presence of the obstacle based on the obstacle determination unit determining that the obstacle exists;
An image data acquisition unit (F1) that acquires image data captured by a camera that includes the reach of the exploration wave transmitted by the exploration wave transmitting / receiving apparatus in an imaging range;
By analyzing the image data acquired by the image data acquisition unit, it is an element that can reflect the exploration wave and is preset as an element that does not need to be notified to the driver A noise element detection unit (F2) for detecting the presence of a certain noise element,
When the noise element detection unit detects the noise element, the obstacle determination unit has a condition that is less likely to be satisfied than a condition used when the noise element detection unit does not detect the noise element. It is used to determine whether or not the obstacle is present.
請求項1において、
前記障害物判定部は、前記障害物が存在するか否かを判定するための閾値と、前記探査結果取得部が取得した前記反射波の受信強度と、を比較し、前記反射波の受信強度が前記閾値を超過している場合に前記障害物が存在すると判定するものであって、
前記ノイズ要素検出部が前記ノイズ要素を検出していない場合に用いるべき前記閾値としてのデフォルト閾値が予め設定されており、
前記障害物判定部は、
前記ノイズ要素検出部が前記ノイズ要素を検出していない場合には、前記デフォルト閾値を用いて前記障害物が存在しているか否かを判定する一方、
前記ノイズ要素検出部が前記ノイズ要素を検出している場合には、前記デフォルト閾値よりも大きい閾値を用いて、前記障害物が存在しているか否かを判定することを特徴とする障害物報知装置。
In claim 1,
The obstacle determination unit compares a threshold for determining whether or not the obstacle exists with the reception intensity of the reflected wave acquired by the search result acquisition unit, and receives the reflected wave Is determined to be present when the threshold is exceeded,
A default threshold is set in advance as the threshold to be used when the noise element detection unit does not detect the noise element,
The obstacle determination unit
When the noise element detection unit has not detected the noise element, while determining whether the obstacle exists using the default threshold,
Obstacle notification, wherein, when the noise element detection unit detects the noise element, it is determined whether or not the obstacle exists using a threshold value larger than the default threshold value. apparatus.
請求項2において、
前記デフォルト閾値は、前記探査波を送信してからの経過時間に応じた値が設定されており、
前記ノイズ要素検出部は、前記到達範囲のうち、前記ノイズ要素が存在する領域を特定するものであって、
前記障害物判定部は、
前記探査波を送信してからの経過時間が、前記ノイズ要素検出部によって特定されている前記ノイズ要素が存在する領域に対応する時間帯に該当しない場合には、その経過時間に対応する前記デフォルト閾値を用いて前記障害物が存在しているか否かを判定する一方、
前記探査波を送信してからの経過時間が、前記ノイズ要素検出部によって特定されている前記ノイズ要素が存在する領域に対応する時間帯に該当する場合には、その経過時間に対応する前記デフォルト閾値よりも大きい閾値を用いて、前記障害物が存在しているか否かを判定することを特徴とする障害物報知装置。
In claim 2,
The default threshold value is set to a value according to the elapsed time after transmitting the exploration wave,
The noise element detection unit identifies a region where the noise element exists in the reachable range,
The obstacle determination unit
If the elapsed time after transmitting the exploration wave does not correspond to the time zone corresponding to the area where the noise element specified by the noise element detection unit exists, the default corresponding to the elapsed time While determining whether the obstacle exists using a threshold,
If the elapsed time after transmitting the exploration wave corresponds to the time zone corresponding to the area where the noise element specified by the noise element detection unit exists, the default corresponding to the elapsed time An obstacle notification device that determines whether or not the obstacle exists using a threshold value that is larger than the threshold value.
請求項3において、
前記障害物判定部は、
前記探査波を送信してからの経過時間が、前記ノイズ要素検出部によって特定されている前記ノイズ要素が存在する領域に対応する時間帯に該当しない場合には、
前記車両の進行方向に存在する路面の傾斜度合いが一様となっている状況において前記探査結果取得部が取得する前記受信強度として想定される値に所定の裕度を加えた値である一様路面想定値を、前記閾値として用いて前記障害物が存在しているか否かを判定することを特徴とする障害物報知装置。
In claim 3,
The obstacle determination unit
When the elapsed time after transmitting the exploration wave does not correspond to the time zone corresponding to the area where the noise element specified by the noise element detection unit exists,
Uniformity that is a value obtained by adding a predetermined margin to a value assumed as the reception intensity acquired by the search result acquisition unit in a situation where the slope of the road surface existing in the traveling direction of the vehicle is uniform. An obstacle notification device that determines whether or not the obstacle is present by using an estimated road surface value as the threshold value.
請求項3において、
前記デフォルト閾値は、前記探査波の送信に伴う残響が収束する時点以降の時間帯においては、前記車両の進行方向に存在する路面の傾斜度合いが一様となっている場合に前記探査結果取得部が取得する前記受信強度として想定される値に所定の裕度を加えた一様路面想定値に設定されていることを特徴とする障害物報知装置。
In claim 3,
In the time zone after the time when reverberation accompanying the transmission of the exploration wave converges, the default threshold value is obtained when the degree of inclination of the road surface existing in the traveling direction of the vehicle is uniform. Is set to a uniform road surface assumed value obtained by adding a predetermined margin to the value assumed as the reception intensity acquired by the obstacle notification device.
請求項3から5の何れか1項において、
前記ノイズ要素が存在する領域に対応する時間帯として、前記ノイズ要素検出部が特定した前記ノイズ要素が存在する領域の前記車両に対する相対位置と、前記車両における前記探査波送受信装置の設置位置とから、当該ノイズ要素からの前記反射波が返ってくる時間帯であるノイズ影響時間帯を特定する影響特定部(F3)を備えることを特徴とする障害物報知装置。
In any one of Claim 3 to 5,
As a time zone corresponding to the area where the noise element exists, the relative position with respect to the vehicle in the area where the noise element specified by the noise element detection unit and the installation position of the exploration wave transmission / reception device in the vehicle are determined. An obstacle notification device comprising an influence specifying unit (F3) for specifying a noise influence time zone, which is a time zone in which the reflected wave from the noise element returns.
請求項1において、
前記障害物判定部は、
前記反射波の受信強度が、前記反射波の受信強度に対して予め設定されている、前記障害物の存在を検出するための閾値を超過したことに基づいて、前記探査波を反射する物体である反射物の存在を検出する反射物検出部(F52)と、
前記探査波を送信してから当該反射物に対応する前記反射波を受信するまでに要した時間に基づいて、前記探査波送受信装置から前記反射物検出部が検出した前記反射物までの距離を特定する距離特定部(F51)と、を備え、
前記ノイズ要素検出部が前記ノイズ要素を検出していない場合には、所定の第1規定回数連続して同一の距離と見なすことができる距離に前記反射物検出部が前記反射物を検出した場合に、前記障害物が存在すると判定する一方、
前記ノイズ要素検出部が前記ノイズ要素を検出している場合には、前記第1規定回数よりも多い第2規定回数連続して、同一の距離と見なすことができる距離に前記反射物検出部が前記反射物を検出した場合に、前記障害物が存在すると判定することを特徴とする障害物報知装置。
In claim 1,
The obstacle determination unit
An object that reflects the exploration wave based on the fact that the reception intensity of the reflected wave exceeds a threshold value for detecting the presence of the obstacle, which is preset with respect to the reception intensity of the reflected wave. A reflector detection unit (F52) for detecting the presence of a reflector;
Based on the time required from transmitting the exploration wave to receiving the reflected wave corresponding to the reflection object, the distance from the exploration wave transmission / reception device to the reflection object detected by the reflection object detection unit is calculated. A distance specifying unit (F51) for specifying,
In the case where the noise element detection unit does not detect the noise element, the reflection object detection unit detects the reflection object at a distance that can be regarded as the same distance continuously for a predetermined first specified number of times. While determining that the obstacle exists,
When the noise element detection unit detects the noise element, the reflector detection unit has a distance that can be regarded as the same distance continuously for a second specified number of times that is greater than the first specified number of times. An obstacle notification device that determines that the obstacle is present when the reflector is detected.
車両に搭載されてあって、
前記車両の進行方向に探査波を送信するとともに、その探査波が物体によって反射されて返ってくる反射波を受信する探査波送受信装置が受信した前記反射波の受信強度を逐次取得する探査結果取得部(F4)と、
前記車両のドライバに報知すべき物体である障害物が存在すると判定するために予め設定されているデフォルト閾値と、前記探査結果取得部が取得した前記反射波の受信強度とを比較して、前記反射波が前記デフォルト閾値を超過している場合に、前記障害物が存在すると判定する障害物判定部(F5)と、
前記障害物判定部によって前記障害物が存在すると判定されていることに基づいて、前記ドライバに対して、当該障害物の存在を報知するための報知処理を実施する報知処理部(F6)と、
前記探査波送受信装置が送信する前記探査波の到達範囲を撮影範囲に含むカメラが撮影した画像データを取得する画像データ取得部(F1)と、
前記画像データ取得部が取得した前記画像データを解析することで、前記探査波を反射しうる要素であって、かつ、前記ドライバに対して報知する必要がない要素として予め設定されている要素であるノイズ要素の存在を検出するノイズ要素検出部(F2)と、
前記ノイズ要素検出部が前記ノイズ要素を検出している場合には、前記探査波の出力レベルを、前記ノイズ要素検出部が前記ノイズ要素を検出していない場合に用いる出力レベルとして予め設定されている定格レベルよりも小さいレベルに調整する出力レベル調整部(F7)と、を備え、
前記探査波送受信装置は、前記出力レベル調整部によって設定された出力レベルで前記探査波を送信することを特徴とする障害物報知装置。
Mounted on the vehicle,
Obtaining a search result that sequentially acquires the received intensity of the reflected wave received by the search wave transmitting / receiving device that transmits the search wave in the traveling direction of the vehicle and receives the reflected wave that is reflected back by the object. Part (F4),
In comparison with a default threshold value that is set in advance to determine that there is an obstacle that should be notified to the driver of the vehicle, the received intensity of the reflected wave acquired by the search result acquisition unit, An obstacle determination unit (F5) that determines that the obstacle exists when a reflected wave exceeds the default threshold;
A notification processing unit (F6) that performs notification processing for notifying the driver of the presence of the obstacle based on the obstacle determination unit determining that the obstacle is present;
An image data acquisition unit (F1) that acquires image data captured by a camera that includes the reach of the exploration wave transmitted by the exploration wave transmitting / receiving apparatus in an imaging range;
By analyzing the image data acquired by the image data acquisition unit, it is an element that can reflect the exploration wave and is preset as an element that does not need to be notified to the driver A noise element detector (F2) for detecting the presence of a noise element;
When the noise element detection unit detects the noise element, the output level of the exploration wave is preset as an output level used when the noise element detection unit does not detect the noise element. An output level adjustment unit (F7) for adjusting to a level smaller than the rated level,
The obstacle wave notification device, wherein the exploration wave transmission / reception device transmits the exploration wave at an output level set by the output level adjustment unit.
JP2015205792A 2015-10-19 2015-10-19 Obstacle notification device Active JP6468162B2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2015205792A JP6468162B2 (en) 2015-10-19 2015-10-19 Obstacle notification device
PCT/JP2016/080990 WO2017069162A1 (en) 2015-10-19 2016-10-19 Obstacle notification device
DE112016004777.0T DE112016004777T5 (en) 2015-10-19 2016-10-19 Object detection device
US15/769,273 US10983188B2 (en) 2015-10-19 2016-10-19 Object notification apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015205792A JP6468162B2 (en) 2015-10-19 2015-10-19 Obstacle notification device

Publications (2)

Publication Number Publication Date
JP2017078912A JP2017078912A (en) 2017-04-27
JP6468162B2 true JP6468162B2 (en) 2019-02-13

Family

ID=58557117

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015205792A Active JP6468162B2 (en) 2015-10-19 2015-10-19 Obstacle notification device

Country Status (4)

Country Link
US (1) US10983188B2 (en)
JP (1) JP6468162B2 (en)
DE (1) DE112016004777T5 (en)
WO (1) WO2017069162A1 (en)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6387786B2 (en) * 2014-10-22 2018-09-12 株式会社デンソー Ultrasonic object detection device
US10594920B2 (en) * 2016-06-15 2020-03-17 Stmicroelectronics, Inc. Glass detection with time of flight sensor
CN109305165B (en) 2017-07-28 2022-04-12 现代摩比斯株式会社 Intelligent ultrasonic system, vehicle rear collision warning device and control method thereof
KR102305972B1 (en) * 2017-08-18 2021-09-28 현대모비스 주식회사 Intelligent ultrasonic system and control method thereof
JP6945399B2 (en) 2017-09-13 2021-10-06 株式会社クボタ Obstacle detector
US11520028B2 (en) * 2018-01-10 2022-12-06 Richwave Technology Corp. Occupancy detection using multiple antenna motion sensing
JP7379819B2 (en) 2018-05-11 2023-11-15 株式会社アイシン Object detection device and parking assist device
DE102018218733A1 (en) 2018-10-31 2020-04-30 Robert Bosch Gmbh Method for supporting a camera-based environment detection of a means of transportation by means of road wetness information from a first ultrasonic sensor
DE102018222320A1 (en) * 2018-12-19 2020-06-25 Robert Bosch Gmbh Object recognition device for vehicles and method for recognizing an object for vehicles
JP7339114B2 (en) * 2019-10-09 2023-09-05 株式会社Soken Axial misalignment estimator
JP7116436B2 (en) * 2020-03-05 2022-08-10 酒井重工業株式会社 Obstacle detection device for construction vehicles
JP2022029287A (en) * 2020-08-04 2022-02-17 パナソニックIpマネジメント株式会社 Obstacle determination device and vehicle
DE102021108439A1 (en) * 2021-04-01 2022-10-06 Bayerische Motoren Werke Aktiengesellschaft Method for operating a heating device for controlling the temperature of a radome of a radar sensor of a vehicle using image data from a camera, computing device, heating control system and vehicle
CN113255559B (en) * 2021-06-09 2022-01-11 深圳市速腾聚创科技有限公司 Data processing method, device and storage medium

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5720380A (en) 1980-07-11 1982-02-02 Richo Denshi Kogyo Kk Inserting guiding device for printer form in high-speed pen recorder
US6741186B2 (en) * 2001-05-24 2004-05-25 Phillip N. Ross Infrared road line detector
JP2007104171A (en) * 2005-10-03 2007-04-19 Omron Corp Front monitoring device
FR2922671B1 (en) 2007-10-17 2010-03-12 Valeo Vision METHOD FOR THE AUTOMATIC DETERMINATION OF COEFFICIENT OF A SLOPE ON THE POINT BEING ABORDIED BY A MOTOR VEHICLE AND ASSOCIATED DEVICE
JP4505509B2 (en) 2008-01-16 2010-07-21 日本電信電話株式会社 Weather information detection method, weather information detection apparatus, and weather information detection program
JP2010127717A (en) * 2008-11-26 2010-06-10 Sumitomo Electric Ind Ltd Object detection device and object detection system
JP4788798B2 (en) * 2009-04-23 2011-10-05 トヨタ自動車株式会社 Object detection device
JP5532689B2 (en) * 2009-06-08 2014-06-25 日産自動車株式会社 Obstacle detection device and obstacle detection method
US8374776B2 (en) * 2010-03-31 2013-02-12 The Boeing Company Methods and apparatus for indicating a relative altitude in one or more directions
EP2439716B1 (en) * 2010-09-16 2013-11-13 Ricoh Company, Ltd. Object identification device, moving object controlling apparatus having object identification device and information presenting apparatus having object identification device
JP5967463B2 (en) * 2010-09-16 2016-08-10 株式会社リコー Object identification device, and moving body control device and information providing device provided with the same
JP5720380B2 (en) 2011-04-01 2015-05-20 日本電気株式会社 Object detection method, object detection apparatus, and object detection program
KR101522757B1 (en) * 2011-12-19 2015-05-27 삼성전기주식회사 Method for removing noise of image
DE102012101085A1 (en) 2012-02-10 2013-08-14 Conti Temic Microelectronic Gmbh Determining a condition of a road surface by means of a 3D camera
JP2015013501A (en) 2013-07-03 2015-01-22 株式会社デンソー Accelerator device
JP5871964B2 (en) 2014-01-20 2016-03-01 三菱電機株式会社 Vehicle perimeter monitoring system

Also Published As

Publication number Publication date
US20180306889A1 (en) 2018-10-25
US10983188B2 (en) 2021-04-20
DE112016004777T5 (en) 2018-07-12
WO2017069162A1 (en) 2017-04-27
JP2017078912A (en) 2017-04-27

Similar Documents

Publication Publication Date Title
JP6468162B2 (en) Obstacle notification device
US10562532B2 (en) Autonomous driving system
US9836657B2 (en) System and method for periodic lane marker identification and tracking
JP3838432B2 (en) Ranging device
JP5991332B2 (en) Collision avoidance control device
JP6089585B2 (en) Obstacle detection device
JP4940458B2 (en) Object detection device
JP5482670B2 (en) Object detection device
JP6299182B2 (en) Life and death monitoring system
JP4210662B2 (en) Vehicle object detection device
JP2003217099A (en) On-vehicle surrounding monitoring device
JP2010281793A (en) Device and method for detecting obstacle
JP2009210404A (en) Obstacle detecting system
JP2007030603A (en) Vehicle travel assisting device
US9524644B2 (en) Notification control method and notification control device
JP2013061690A (en) Obstacle detection system for vehicle
JP2012018613A (en) Vehicle peripheral obstacle monitoring device
JP6414539B2 (en) Object detection device
JP2004295620A (en) Device for detecting possibility of vehicle collision
JP4644590B2 (en) Peripheral vehicle position detection device and peripheral vehicle position detection method
JP3932623B2 (en) Auto fog lamp device
JP2019149054A (en) Periphery monitoring device, periphery monitoring system, and periphery monitoring method
JP2009067334A (en) Vehicular safety device
KR20170086901A (en) Driving assistant apparatus and driving assistant method
JP6747322B2 (en) Vehicle control device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170705

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180605

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181218

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20181231

R151 Written notification of patent or utility model registration

Ref document number: 6468162

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250