JP5682375B2 - Sound source detection device and approaching vehicle detection device - Google Patents
Sound source detection device and approaching vehicle detection device Download PDFInfo
- Publication number
- JP5682375B2 JP5682375B2 JP2011042021A JP2011042021A JP5682375B2 JP 5682375 B2 JP5682375 B2 JP 5682375B2 JP 2011042021 A JP2011042021 A JP 2011042021A JP 2011042021 A JP2011042021 A JP 2011042021A JP 5682375 B2 JP5682375 B2 JP 5682375B2
- Authority
- JP
- Japan
- Prior art keywords
- sound
- vehicle
- sound collector
- detection
- directivity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Description
本発明は、複数の集音器で集音された音に基づいて音源(特に、接近する車両の音源)を検出する音源検出装置及び接近車両検出装置に関する。 The present invention relates to a sound source detection device and an approaching vehicle detection device that detect a sound source (particularly, a sound source of an approaching vehicle) based on sounds collected by a plurality of sound collectors.
接近車両検出装置では、複数の集音器で周囲の音をそれぞれ集音し、その各音の到達時間差等に基づいて音源(特に、車両の走行音)の移動方向を特定する。特許文献1に記載の装置では、所定の間隔で配設された複数のマイクロホンが出力する電気信号から帯域通過フィルタで低周波帯域と高周波帯域の周波数成分をそれぞれ除去して補正電気信号に変換し、その補正電気信号から車両の走行音の特徴の現れる所定の周波数帯域のパワーを算出し、そのパワーレベルが所定値より大きい場合に接近車両有りと判定するとともに、その補正電気信号により不要な雑音成分を除去して雑音抑制信号に変換し、複数のマイクロホンの雑音抑制信号間の相互相関を演算し、相関が最大となる到達時間差から接近車両の接近方向を演算する。 In the approaching vehicle detection device, ambient sounds are collected by a plurality of sound collectors, and the moving direction of the sound source (particularly, the running sound of the vehicle) is specified based on the arrival time difference between the sounds. In the apparatus described in Patent Document 1, the frequency components of the low frequency band and the high frequency band are removed from the electrical signals output from a plurality of microphones arranged at predetermined intervals by a band pass filter, and converted into corrected electrical signals. The power of a predetermined frequency band in which the characteristics of the running sound of the vehicle appear is calculated from the corrected electric signal. When the power level is higher than the predetermined value, it is determined that there is an approaching vehicle, and unnecessary noise is generated by the corrected electric signal. A component is removed and converted into a noise suppression signal, a cross correlation between the noise suppression signals of a plurality of microphones is calculated, and an approaching direction of an approaching vehicle is calculated from an arrival time difference at which the correlation is maximum.
上記の接近車両検出装置では、自車両の左右方向から接近する車両を検出するために、複数のマイクロホンが車両に対して水平(道路面に平行)に並べて配置されている。このように複数のマイクロホンを配置した場合、自車両と同一平面上の道路を走行している車両だけでなく、自車両と上下方向で異なる道路(例えば、上方(高架)の道路、下方の道路)を走行している車両も、接近車両として検出する。つまり、自車両と同じ高さ位置に存在する音源と上方又は下方に存在する音源とでは、水平に配置される複数のマイクロホンでは音の到達時間差に違いが生じないので、自車両と同一平面上か否かの判別ができない。また、例えば、道路構造上、左右方向の一方の方向からしか車両が来ない場合でも、無指向性のマイクロホンではあらゆる方向からの音を検出するので、車両が来ない他方の方向からの音(例えば、他のノイズ音、壁や建物で反射した音)も検出し、接近車両と誤検出する場合がある。このように、従来の接近車両検出装置では、自車両と衝突する可能性のない車両(音)も接近車両として検出する場合がある。その結果、検出された接近車両に対する不要な警報等を行う。 In the approaching vehicle detection device described above, a plurality of microphones are arranged horizontally (parallel to the road surface) with respect to the vehicle in order to detect a vehicle approaching from the left-right direction of the host vehicle. When a plurality of microphones are arranged in this way, not only a vehicle traveling on a road on the same plane as the own vehicle, but also a road different from the own vehicle in the vertical direction (for example, an upper (elevated) road, a lower road) ) Is also detected as an approaching vehicle. In other words, there is no difference in sound arrival time between a plurality of horizontally arranged microphones between a sound source that is at the same height as the host vehicle and a sound source that is above or below it. It cannot be determined whether or not. Also, for example, even if the vehicle comes only from one of the left and right directions due to the road structure, the omnidirectional microphone detects sound from all directions, so the sound from the other direction where the vehicle does not come ( For example, other noise sounds, sounds reflected from walls and buildings) may also be detected and erroneously detected as approaching vehicles. As described above, in the conventional approaching vehicle detection device, a vehicle (sound) that does not possibly collide with the host vehicle may be detected as an approaching vehicle. As a result, an unnecessary alarm or the like is given to the detected approaching vehicle.
そこで、本発明は、必要な音源(特に、接近車両)のみを検出することができる音源検出装置及び接近車両検出装置を提供することを課題とする。 Then, this invention makes it a subject to provide the sound source detection apparatus and approaching vehicle detection apparatus which can detect only a required sound source (especially approaching vehicle).
本発明に係る接近車両検出装置は、自車両に搭載され、複数の集音器で集音された音に基づいて接近する車両を検出し、且つ、複数の集音器は、自車両の上下方向より左右方向に広い指向性領域を有するとともに、該指向性領域が互いに交差するように配置され、指向性領域が交差している領域を検出範囲とする接近車両検出装置であって、道路形状を取得する取得装置と、道路形状に基づいて、音を検出すべき方向を決定する検出方向決定部と、を備え、複数の集音器のうち利用する集音器を選択することで、音を検出すべき方向に応じた検出範囲を設定する。
また、本発明に係る接近車両検出装置は、自車両に搭載され、複数の集音器で集音された音に基づいて接近する車両を検出し、且つ、複数の集音器は、自車両の上下方向より左右方向に広い指向性領域を有するとともに、該指向性領域が互いに交差するように配置され、指向性領域が交差している領域を検出範囲とする接近車両検出装置であって、運転者の注意方向を検出する検出装置と、運転者の注意方向以外の方向を、音を検出すべき方向として決定する検出方向決定部と、を備え、複数の集音器のうち利用する集音器を選択することで、音を検出すべき方向に応じた検出範囲を設定する。
An approaching vehicle detection device according to the present invention is mounted on a host vehicle, detects a vehicle approaching based on sounds collected by a plurality of sound collectors, and the plurality of sound collectors are located above and below the host vehicle. An approaching vehicle detection device having a wide directional area in the left-right direction than the direction, arranged so that the directional areas intersect each other, and having an area where the directional areas intersect as a detection range, And a detection direction determination unit that determines a direction in which sound should be detected based on the road shape, and by selecting a sound collector to be used from a plurality of sound collectors, A detection range is set according to the direction in which to detect.
Moreover, the approaching vehicle detection device according to the present invention detects a vehicle that is mounted on the own vehicle based on sounds collected by the plurality of sound collectors, and the plurality of sound collectors are the own vehicle. An approaching vehicle detection device having a wide directional area in the left-right direction than the up-down direction, the directional areas are arranged so as to intersect each other, and the area where the directional areas intersect is a detection range, A detection device that detects a driver's attention direction; and a detection direction determination unit that determines a direction other than the driver's attention direction as a direction in which sound should be detected. By selecting a sound device, a detection range corresponding to the direction in which sound is to be detected is set.
この接近車両検出装置では、車両の上下方向よりも左右方向に広い指向性領域を有する複数の集音器を備えており、その複数の集音器が指向性領域が互いに交差するように配置されている。指向性領域の上下方向の範囲は、狭い範囲がよく、車両の高さ付近までの指向性を持つものが好ましい。2個の集音器の指向性領域が交差している領域(指向性領域が重なっている部分)は、その2個の集音器が共に音を集音できる領域であり、2個の集音器の音の到達時間差等を利用して接近する車両の音源を検出可能な領域である。したがって、各集音器の取り付け位置や指向性領域の左右方向の広さ、2個の集音器の指向性領域の交差のさせ方等を調整することにより、左右方向の検出範囲を任意に設定できる。したがって、左右方向において特定の方向に存在する接近車両のみを検出できる。また、2個の集音器の指向性領域が交差可能な上下方向の範囲は車両の高さ程度の範囲であるので、上下方向の検出範囲は自車両と同一平面上に存在する車両高さ程度の範囲である。したがって、自車両と同一平面上の道路に存在する接近車両のみを検出できる。このように、接近車両検出装置では、車両の上下方向より左右方向に広い指向性領域を有する複数の集音器を指向性領域が互いに交差するように配置することにより、自車両と同一平面上の特定の方向に存在する音源のみを検出でき、自車両にとって必要な接近車両のみを検出することができる。これによって、自車両と上下方向で異なる道路上に存在する車両や左右方向で検出不要な方向に存在する音等を検出することがなくなる。その結果、不要な警報等を抑制できる。 This approaching vehicle detection device includes a plurality of sound collectors having a directional region wider in the left-right direction than the vertical direction of the vehicle, and the plurality of sound collectors are arranged so that the directional regions intersect each other. ing. The range in the vertical direction of the directivity region is preferably a narrow range, and preferably has directivity up to the vicinity of the height of the vehicle. The area where the directivity areas of the two sound collectors intersect (the part where the directivity areas overlap) is an area where the two sound collectors can collect sound together. This is an area in which a sound source of an approaching vehicle can be detected using a difference in arrival time of sound from a sounder. Therefore, the detection range in the left-right direction can be set arbitrarily by adjusting the mounting position of each sound collector, the width of the directivity area in the left-right direction, and the manner in which the directivity areas of the two sound collectors intersect. Can be set. Therefore, it is possible to detect only an approaching vehicle that exists in a specific direction in the left-right direction. Further, since the vertical range in which the directivity areas of the two sound collectors can intersect is a range about the height of the vehicle, the vertical detection range is the vehicle height existing on the same plane as the host vehicle. The range of the degree. Therefore, it is possible to detect only the approaching vehicle existing on the road on the same plane as the own vehicle. As described above, in the approaching vehicle detection device, a plurality of sound collectors having a directional area wider in the left-right direction than the vertical direction of the vehicle are arranged so that the directional areas intersect each other, so that they are on the same plane as the host vehicle. It is possible to detect only sound sources existing in a specific direction, and it is possible to detect only approaching vehicles necessary for the host vehicle. This eliminates the detection of vehicles that are on different roads in the up-down direction from the host vehicle, sounds that are present in directions that do not require detection in the left-right direction, and the like. As a result, unnecessary alarms can be suppressed.
本発明の上記接近車両検出装置では、複数の集音器のうちの少なくとも1個の集音器が自車両のロール方向に回転可能であり、回転可能な集音器を回転させることによって指向性領域が互いに交差する検出範囲を任意に設定可能とすると好適である。 In the approaching vehicle detection device of the present invention, at least one of the plurality of sound collectors is rotatable in the roll direction of the host vehicle, and directivity is obtained by rotating the rotatable sound collector. It is preferable that the detection range where the regions intersect each other can be arbitrarily set.
この接近車両検出装置では、少なくとも1個の集音器が自車両のロール方向に回転可能であるので、回転可能な集音器のロール方向の回転量を調整することにより、その集音器の指向性領域の傾き量を任意に設定でき、指向性領域が交差する領域(検出範囲)を任意に設定できる。このように、接近車両検出装置では、集音器が自車両のロール方向に回転可能な構成することにより、検出範囲を任意に設定できる。 In this approaching vehicle detection device, since at least one sound collector can rotate in the roll direction of the host vehicle, adjusting the amount of rotation of the rotatable sound collector in the roll direction allows the sound collector The inclination amount of the directivity area can be set arbitrarily, and the area (detection range) where the directivity areas intersect can be set arbitrarily. Thus, in the approaching vehicle detection device, the detection range can be arbitrarily set by configuring the sound collector to be rotatable in the roll direction of the host vehicle.
本発明によれば、平面状に広がる指向性領域を有する複数の集音器を指向性領域が互いに交差するように配置することにより、同一平面上の特定の方向に存在する音源のみを検出でき、必要な音源のみを検出することができる。また、本発明によれば、車両の上下方向より左右方向に広い指向性領域を有する複数の集音器を指向性領域が互いに交差するように配置することにより、自車両と同一平面上の特定の方向に存在する音源のみを検出でき、自車両にとって必要な接近車両のみを検出することができる。 According to the present invention, it is possible to detect only sound sources existing in a specific direction on the same plane by arranging a plurality of sound collectors having a directional area extending in a plane so that the directional areas intersect each other. Only the necessary sound source can be detected. Further, according to the present invention, by arranging a plurality of sound collectors having a directional area wider in the left-right direction than the vertical direction of the vehicle so that the directional areas intersect each other, the identification on the same plane as the own vehicle is performed. Only the sound source existing in the direction of the vehicle can be detected, and only the approaching vehicle necessary for the host vehicle can be detected.
以下、図面を参照して、本発明に係る音源検出装置及び接近車両検出装置の実施の形態を説明する。なお、各図において同一又は相当する要素については同一の符号を付し、重複する説明を省略する。 Hereinafter, embodiments of a sound source detection device and an approaching vehicle detection device according to the present invention will be described with reference to the drawings. In addition, the same code | symbol is attached | subjected about the element which is the same or it corresponds in each figure, and the overlapping description is abbreviate | omitted.
本実施の形態では、本発明を、車両に搭載される接近車両検出装置に適用する。本実施の形態に係る接近車両検出装置は、複数(2個以上)の集音器(マイクロホン)で集音された各音に基づいて自車両に接近する車両を検出し(つまり、周辺車両の走行音の音源の移動方向を特定し)、接近車両の情報を運転支援装置に提供する。なお、各図において指向性領域や検出範囲を示しており、各図に描かれている指向性領域や検出範囲の大きさは車両の大きさと比較してそれほど変わらない大きさであるが、実際には遠方の車両まで検出可能な大きな領域や範囲である。 In the present embodiment, the present invention is applied to an approaching vehicle detection device mounted on a vehicle. The approaching vehicle detection device according to the present embodiment detects a vehicle approaching the host vehicle based on each sound collected by a plurality (two or more) of sound collectors (microphones) (that is, a nearby vehicle). The moving direction of the sound source of the traveling sound is specified), and information on the approaching vehicle is provided to the driving support device. In each figure, the directivity area and detection range are shown. The size of the directivity area and detection area drawn in each figure is the same size as the size of the vehicle. Is a large area or range that can be detected up to a distant vehicle.
なお、車両の走行音は、主として、ロードノイズ(タイヤ表面と路面との摩擦音)とパターンノイズ(タイヤ溝における空気の渦(圧縮/開放))である。この車両の走行音の周波数成分の範囲は、実験等によって予め測定しておいてもよい。 The traveling sound of the vehicle is mainly road noise (friction sound between the tire surface and the road surface) and pattern noise (air vortex (compression / release) in the tire groove). The range of the frequency component of the running sound of the vehicle may be measured in advance through experiments or the like.
図1〜図4を参照して、本実施の形態に係る接近車両検出装置1について説明する。図1は、本実施の形態に係る接近車両検出装置の構成図である。図2は、超指向性集音器の指向性領域を示す図である。図3は、本実施の形態に係る複数の超指向性集音器を左右方向にずらして配置した場合の指向性領域を示す図である。図4は、本実施の形態に係る集音器ユニットの指向性領域を示す図である。 With reference to FIGS. 1-4, the approaching vehicle detection apparatus 1 which concerns on this Embodiment is demonstrated. FIG. 1 is a configuration diagram of an approaching vehicle detection device according to the present embodiment. FIG. 2 is a diagram illustrating a directivity region of the superdirective sound collector. FIG. 3 is a diagram showing a directivity region when a plurality of superdirective sound collectors according to the present embodiment are arranged shifted in the left-right direction. FIG. 4 is a diagram showing a directivity region of the sound collector unit according to the present embodiment.
接近車両検出装置1は、車両の上下方向より左右方向に広くなるように平面状に広がる指向性領域(集音領域)を有する集音器ユニット(特許請求の範囲に記載の集音器に相当)を少なくとも2個備えており、隣り合う集音器ユニットの指向性領域が互いに交差するように集音器ユニットが配置されている。接近車両検出装置1は、指向性領域が交差している領域を検出範囲として、その検出範囲内に存在する音源(車両)を検出する。接近車両検出装置1は、集音器アレイ10(集音器ユニット11,11,・・・)及びECU[Electronic Control Unit]20を備えている。なお、図1の構成図では、集音器ユニットが3個の場合を示している。
The approaching vehicle detection device 1 has a sound collector unit (corresponding to the sound collector described in the claims) having a directivity area (sound collection area) that spreads in a plane so as to be wider in the left-right direction than the vertical direction of the vehicle. ), And the sound collector units are arranged so that the directivity areas of adjacent sound collector units intersect each other. The approaching vehicle detection device 1 detects a sound source (vehicle) existing in the detection range, with a region where the directivity regions intersect as a detection range. The approaching vehicle detection device 1 includes a sound collector array 10 (
集音器アレイ10は、2個以上の集音器ユニット11を有している。集音器ユニット11は、複数個の超指向性集音器12を用いて構成される。超指向性集音器12は、図2に示すように、前方に非常に長くかつ左右方向や上下方向が狭い紡錘型の指向性領域12aを有している。超指向性集音器12は、音響電気変換器であり、車外の周囲の音を集音し、集音した音を電気信号に変換する。なお、超指向性集音器12は、既知の集音器であり、一般的に使用されているものでよい。
The
集音器ユニット11は、図3(a)に示すように、紡錘型の指向性領域の左右方向の領域の一部(例えば、半分程度、2/3程度)が互いに重なるように、複数個の超指向性集音器12を左右方向に一定角度間隔でずらして配置(すなわち、扇状に配置)して構成されたものである。また、集音器ユニット11は、図3(b)に示すように、紡錘型の指向性領域の上下方向の領域が全て(略全て)重なるように、複数個の超指向性集音器12を配置して構成されたものである。
As shown in FIG. 3A, a plurality of
上記のように複数個の超指向性集音器12を配置することにより、集音器ユニット11は、図4(a)に示すように、指向性領域11aとして左右方向に扇型の領域を有する。また、集音器ユニット11は、図4(b)に示すように、指向性領域11aとして上下方向に狭い領域(超指向性集音器12の指向性領域12aの上下方向と同程度)を有する。このように、集音器ユニット11は、左右方向に広くかつ上下方向に狭い指向性(平面状に広がる指向性領域)であり、略面状の扇型の指向性を持つ指向性領域11aを有する。
By arranging a plurality of
なお、集音器ユニット11の指向性領域11aの上下方向の範囲は、同一平面上の道路に存在する車両のみを検知するために、車両の高さ付近までの範囲が好ましく、狭いほうがよい。この範囲は、超指向性集音器12の指向性領域12aの上下方向の範囲に依存する。集音器ユニット11の指向性領域11aの左右方向の範囲は、任意に設定可能であり、検出範囲の広さや集音器ユニット11の配置間隔等に応じて決められる。集音器ユニット11の指向性領域11aの左右方向の範囲と超指向性集音器12の指向性領域12aの左右方向の範囲に応じて、集音器ユニット11の構成に必要な超指向性集音器12の個数を決定する。
Note that the range in the vertical direction of the
複数個の集音器ユニット11の配置について説明する。複数個の集音器ユニット11は、車両の前端部に車幅方向(左右方向)に並べて配置される。そして、隣り合う集音器ユニット11,11の少なくとも一方を車両のロール方向に水平位置から傾け、略面状の指向性領域11a,11aが互いに交差するように、配置される。この指向性領域11a,11aが交差している領域(重なっている部分)は、隣り合う集音器ユニット11,11の両方で集音可能であるので、音源(ひいては、車両)を検出可能な領域(以下、「検出範囲」と記載する)となる。
The arrangement of the plurality of
例えば、図5及び図6を参照して、2個の集音器ユニット11C、11Rの場合の配置の一例を説明する。図5は、本実施の形態に係る2個の集音器ユニットの配置と指向性領域を示す図である。図6は、図5の2個の集音器ユニットによる検出範囲を示す図である。
For example, an example of an arrangement in the case of the two
集音器ユニット11Cは、図5に示すように、車両の前端部の車幅方向における中央(車両中心)に配置される。集音器ユニット11Rは、図5に示すように、車両の前端部の車幅方向において集音器ユニット11Cよりも右方かつ上下方向において集音器ユニット11Cよりも上方に配置される。集音器ユニット11C,11Rの指向性領域11Ca,11Raは、大きさ及び形状が同じであり、左右方向が半円よりも広い扇型であり、上下方向が非常に狭い範囲である。
As shown in FIG. 5, the
また、集音器ユニット11Cは、図5(b)に示すように、略面状の指向性領域11Caが水平(道路面に平行)になるように配置される。集音器ユニット11Rは、図5(b)に示すように、略面状の指向性領域11Raが車両の外側を向くように(車両を正面から見てロール方向において水平位置から反時計周りに所定角度回転)配置される。この配置以外にも、例えば、集音器ユニット11Rを集音器ユニット11Cよりも下方に配置し、集音器ユニット11Rを指向性領域11Raが車両の内側を向くように(車両を正面から見てロール方向において水平位置から時計周りに所定角度回転)配置されてもよい。
Further, as shown in FIG. 5B, the
上記のように、集音器ユニット11Cと集音器ユニット11Rを配置した場合、図6に示す斜線領域(検出範囲)11bRが、指向性領域11Caと指向性領域11Raとが交差して重なる領域である。この検出範囲11bRでは、集音器ユニット11Cと集音器ユニット11Rが共に集音可能である。したがって、この集音器ユニット11Cと集音器ユニット11Rの配置の場合、左右方向において車両の右方かつ上下方向において非常に狭い範囲(例えば、上下方向の範囲は数10cm程度の範囲であり、2〜3m程度でも十分に実用可能である)に存在する音源を検知でき、それ以外の音源を検知しない。上下方向の範囲は非常に狭いが、自車両と同一平面上の道路に存在する車両であれば、この範囲内に含まれる。その結果、この配置の場合、自車両の右方の検出範囲11bRによって、同一平面上の道路に存在する右方の接近車両のみを検出できる。
As described above, when the
また、図7及び図8を参照して、3個の集音器ユニット11C、11L,11Rの場合の配置の一例を説明する。図7は、本実施の形態に係る3個の集音器ユニットの配置と指向性領域を示す図である。図8は、図7の3個の集音器ユニットによる検出範囲を示す図である。
An example of the arrangement in the case of the three
集音器ユニット11Cと集音器ユニット11Rの配置は、上記の図5に示す配置と同様の配置である。集音器ユニット11Lは、図7に示すように、車両の前端部の車幅方向において集音器ユニット11Cよりも左方かつ上下方向において集音器ユニット11Cよりも上方に配置される。また、集音器ユニット11Lは、図7(b)に示すように、略面状の指向性領域11Laが車両の外側を向くように(車両を正面から見てロール方向において水平位置から時計周りに所定角度回転)配置される。この配置以外にも、例えば、集音器ユニット11Lを集音器ユニット11Cよりも下方に配置し、集音器ユニット11Lを略面状の指向性領域11Raが車両の内側を向くように(車両を正面から見てロール方向において水平位置から反時計周りに所定角度回転)配置されてもよい。集音器ユニット11Lの指向性領域11Laも、集音器ユニット11Cと集音器ユニット11Rの指向性領域11Ca,Raと大きさ及び形状が同じである。
The arrangement of the
上記のように、集音器ユニット11C、集音器ユニット11R及び集音器ユニット11Lを配置した場合、図8に示す斜線領域(検出範囲)11bRが指向性領域11Caと指向性領域11Raとが交差して重なる領域であり、斜線領域(検出範囲)11bLが指向性領域11Caと指向性領域11Laとが交差して重なる領域である。この検出範囲11bRは、上記と同様の領域である。検出範囲11bLは、集音器ユニット11Cと集音器ユニット11Lが共に集音可能である。したがって、この集音器ユニット11Cと集音器ユニット11Lの配置の場合、左右方向において車両の左方かつ上下方向において非常に狭い範囲に存在する音源を検知でき、それ以外の音源を検知しない。その結果、この配置の場合、自車両の右方の検出範囲11bRによって同一平面上の道路に存在する右方の接近車両を検出でき、左方の検出範囲11bLによって同一平面上の道路に存在する左方の接近車両を検出できる。
As described above, when the
上記の3個の集音器ユニット11C,11R,11Lのうち2個の集音器ユニット11C,11Lだけを配置する構成とすることにより、検出範囲11bLだけとなり、左右方向において車両の左方かつ上下方向において非常に狭い範囲に存在する音源だけを検知できる。その結果、この配置の場合、自車両の左方の検出範囲11bLによって同一平面上の道路に存在する左方の接近車両のみを検出できる。
By arranging only two
なお、上記の集音器ユニット11C,11R,11Lの配置では、集音器ユニット11Cと左右の集音器ユニット11R,11Lとの高さ位置が異なるように配置したが、同じ高さ位置でもよい。また、上記の集音器ユニット11C,11R,11Lの配置では、集音器ユニット11Cを傾けずに、左右の集音器ユニット11R,11Lだけをロール方向に回転させて傾ける構成としたが、集音器ユニット11Cもロール方向に回転させて傾ける構成としてもよい。また、ロール方向の回転角度を調整することにより、左右方向において車両の正面に存在する音源を検知できる検出範囲を設定できる。
In the arrangement of the
ECU20は、CPU[CentralProcessing Unit]、ROM[Read Only Memory]、RAM[Random Access Memory]等からなる電子制御ユニットであり、接近車両検出装置1を統括制御する。ECU20では、複数個の集音器ユニット11,・・・から各電気信号をそれぞれ入力する。集音器ユニット11は複数の超指向性集音器12によって構成されるので、集音器ユニット11の電気信号としては複数の超指向性集音器12の各電気信号の平均化した信号等を用いる。そして、ECU20では、隣り合う集音器ユニット11,11毎に、2個の集音器ユニット11,11の電気信号間の相互相関から音の到達時間差を計算し、到達時間差に基づいて音源の有無の判定や音源が存在する場合には音源の接近方向を判別する。この際、音源として、車両の走行音に相当する周波数成分の音源のみを抽出する。そして、ECU20では、その結果に基づいて接近車両情報を生成し、接近車両情報を運転支援装置2に送信する。接近車両情報としては、例えば、接近車両の有無、接近車両が存在する場合には接近方向や自車両との相対距離の情報である。
The
例えば、右方の検出範囲11bR、左方の検出範囲11bL、正面の検出範囲11bCを全て有する集音器アレイ10とした場合、ECU20では、1回の処理毎に、道路状況等に応じて自車両にとって必要な特定の検出方向を決定し、その検出方向に応じて3つの検出範囲11bR,11bL,11bCから選択し、その選択した検出範囲を形成する集音器ユニット11,11の対の電気信号のみを利用して処理をするようにするとよい。
For example, when the
運転支援装置2は、運転者に対して各種運転支援する装置である。特に、運転支援装置2では、一定時間毎に、接近車両検出装置1から接近車両情報を受信すると、接近車両に関する運転支援を実施する。例えば、自車両に対して接近する車両が存在する場合、自車両に対する接近車両の衝突の可能性を判定し、衝突の可能性があると判定したときには運転者に対して警報を出力したり、接近車両の情報を提供し、更に、衝突の可能性が高まった場合には自動ブレーキ等の車両制御を行う。
The driving
この接近車両検出装置1によれば、略面状で扇型の指向性領域11aを有する複数個の集音器ユニット11,・・・を指向性領域が互いに交差するように配置することにより、自車両と同一平面上の特定の方向に存在する音源のみを検出可能な検出範囲11bを任意に設定でき、自車両にとって必要な接近車両のみを検出することができる(不要な車両を検出しない)。これによって、自車両と上下方向で異なる道路上に存在する車両や左右方向で検出不要な方向に存在する音源等を検出することがなくなる(車両以外の他の音源の音も誤検出しない)。その結果、運転支援装置2における不要な警報出力や車両制御等を抑制できる。
According to this approaching vehicle detection device 1, by arranging a plurality of
上記の接近車両検出装置1では、自車両にとって必要な特定の方向のみを検出するための検出範囲11bを設定できる。そこで、自車両(運転者)にとって必要な特定の検出方向を決定するための手法について説明する。 In said approaching vehicle detection apparatus 1, the detection range 11b for detecting only the specific direction required for the own vehicle can be set. Therefore, a method for determining a specific detection direction necessary for the host vehicle (driver) will be described.
まず、図9を参照して、道路構造を利用した手法について説明する。図9は、本実施の形態に係る道路構造に応じた検出範囲の一例であり、(a)が右折のみ可能な道路での検出範囲であり、(b)がT字路での検出範囲であり、(c)が十字路での検出範囲である。 First, a method using a road structure will be described with reference to FIG. FIG. 9 is an example of a detection range corresponding to the road structure according to the present embodiment, where (a) is a detection range on a road that can only be turned right, and (b) is a detection range on a T-junction. Yes, (c) is the detection range at the crossroads.
この手法の場合、接近車両検出装置が、ECU内に検出方向決定部を有しており、道路構造を取得するための取得装置を備えている。この取得装置としては、例えば、地図データベースと現在位置を検知するためのナビゲーション装置、カメラと撮像画像から道路形状を認識するための画像認識装置、インフラから道路形状情報や通行止め情報等を受信するための路車間通信装置である。取得装置では、自車両が走行中の道路における前方の交差点等の道路形状情報を取得する。すると、ECU内の検出方向決定部では、その道路形状情報に基づいて、自車両が進行可能な方向を判定し、自車両にとって必要な特定の検出方向を決定する。 In the case of this method, the approaching vehicle detection device includes a detection direction determination unit in the ECU and includes an acquisition device for acquiring a road structure. As this acquisition device, for example, a navigation device for detecting a map database and a current position, an image recognition device for recognizing a road shape from a camera and a captured image, and for receiving road shape information and road closure information from an infrastructure. This is a road-to-vehicle communication device. The acquisition device acquires road shape information such as a front intersection on the road on which the host vehicle is traveling. Then, the detection direction determination unit in the ECU determines a direction in which the host vehicle can travel based on the road shape information, and determines a specific detection direction necessary for the host vehicle.
例えば、図9(a)に示すように、右方のみ曲がることが可能な道路の情報を取得した場合(例えば、左方が工事で通行不可)、右方を自車両にとって必要な特定の検出方向として決定し、右方を検出する検出範囲11bRとする。この場合、左方からは車両が来る可能性がないにもかかわらず、左方に他の音源が存在するような場合でも、その他の音源を誤検出しない。また、図9(b)に示すように、T字路の交差点の情報を取得した場合、右方と左方を自車両にとって必要な特定の検出方向として決定し、右方を検出する検出範囲11bR及び左方を検出する検出範囲11bLとする。また、図9(c)に示すように、十字路の交差点の情報を取得した場合、右方、左方及び正面を自車両にとって必要な特定の検出方向として決定し、右方を検出する検出範囲11bR、左方を検出する検出範囲11bL及び正面を検出する検出範囲11bCとする。 For example, as shown in FIG. 9A, when information on a road that can be turned only to the right side is acquired (for example, the left side cannot pass due to construction), the right side is a specific detection necessary for the vehicle. The direction is determined as a detection range 11b R for detecting the right side. In this case, even though there is no possibility of a vehicle coming from the left side, other sound sources are not erroneously detected even when other sound sources exist on the left side. Further, as shown in FIG. 9B, when the information of the intersection of the T-junction is acquired, the detection range in which the right side and the left side are determined as specific detection directions necessary for the host vehicle and the right side is detected. 11b R and the detection range 11b L for detecting the left side. Further, as shown in FIG. 9C, when the information of the intersection of the crossroad is acquired, the detection range in which the right side, the left side, and the front side are determined as specific detection directions necessary for the host vehicle and the right side is detected. 11b R , a detection range 11b L for detecting the left side, and a detection range 11b C for detecting the front side.
次に、図10を参照して、運転者の注意方向を利用した手法について説明する。図10は、本実施の形態に係る運転者の注意方向を考慮した検出範囲の一例である。なお、この運転者の注意方向を利用した手法のみで自車両にとって必要な特定の検出方向を決定してもよいし、上記の道路構造を利用した手法と組み合わせて自車両にとって必要な特定の検出方向を決定してもよい。 Next, a method using the driver's attention direction will be described with reference to FIG. FIG. 10 is an example of a detection range in consideration of the driver's attention direction according to the present embodiment. The specific detection direction necessary for the host vehicle may be determined only by the method using the driver's attention direction, or the specific detection necessary for the host vehicle may be combined with the method using the road structure described above. The direction may be determined.
この手法の場合、接近車両検出装置が、ECU内に検出方向決定部を有しており、運転者の注意方向を検出するための検出装置を備えている。この検出装置としては、例えば、運転者の顔を撮像するカメラと撮像画像から運転者の顔向きや視線方向を認識するための画像認識装置である。検出装置では、運転者が注意している方向を検出する。ECU内の検出方向決定部では、その運転者の注意方向以外の方向から自車両にとって必要な特定の検出方向を決定する。 In the case of this method, the approaching vehicle detection device includes a detection direction determination unit in the ECU, and includes a detection device for detecting the driver's attention direction. The detection device is, for example, a camera that captures the driver's face and an image recognition device for recognizing the driver's face direction and line-of-sight direction from the captured image. The detection device detects the direction in which the driver is paying attention. A detection direction determination unit in the ECU determines a specific detection direction necessary for the host vehicle from a direction other than the driver's attention direction.
例えば、図10に示すように、T字路の交差点の情報を取得し、かつ、運転者の注意方向として右方を検出した場合、左方のみを自車両にとって必要な特定の検出方向として決定し、左方を検出する検出範囲11bLとする。この場合、運転者は右方から来る車両を注意しているので、右方から車両が来たとしても運転者が認知でき、接近車両に対する警報出力等を行う必要がない。したがって、左方から来る車両のみを検出できるようにする。これによって、誤検知を少なくできるとともに、運転者が認知しているにもかかわらず警報出力等を行うことを抑制できる。 For example, as shown in FIG. 10, when information on the intersection of a T-junction is acquired and the right side is detected as the driver's attention direction, only the left side is determined as a specific detection direction necessary for the host vehicle. And the detection range 11b L for detecting the left side. In this case, since the driver is paying attention to the vehicle coming from the right side, even if the vehicle comes from the right side, the driver can recognize it, and there is no need to perform an alarm output or the like for the approaching vehicle. Therefore, only vehicles coming from the left can be detected. As a result, false detection can be reduced, and it is possible to suppress alarm output and the like even though the driver recognizes it.
さらに、上記の接近車両検出装置1では各集音器ユニット11のロール方向の角度が固定であったが、集音器ユニットを車両のロール方向に回転させる装置を備える構成としてもよい。上記したように、接近車両検出装置1では、隣り合う集音器ユニット11,11の指向性領域11a,11aが互いに交差して重なった部分が検出範囲11bとなる。この構成に集音器ユニットの回転装置を追加することにより、各集音器ユニットをロール方向に任意の角度回転させることによって、各集音器ユニットの略面状の指向性領域が任意の角度回転する。その結果、指向性領域が重なる部分を任意に調整でき、検出範囲の位置や大きさを任意に設定できる。
Furthermore, in the approaching vehicle detection device 1 described above, the angle of each
図11を参照して、3個の集音器ユニット11R’,11C’,11L’の場合について説明する。図11は、本実施の形態に係るロール方向に回転可能な3個の集音器ユニットの配置と指向性領域を示す正面図である。
With reference to FIG. 11, the case of three
この3個の集音器ユニット11R’,11C’,11L’が配置される位置は、図7に示す3個の集音器ユニット11R,11C,11Lの各位置と同じ位置である。この3個の集音器ユニット11R’,11C’,11L’は、回転装置が装備され、車両のロール方向に回転可能であり、指向性領域11Ra’,11Ca’,11La’のロール方向の角度を調整できる。回転できる範囲としては、車両の正面から見て時計周りと反時計周りにそれぞれ回転可能であり、水平位置から最大でも90°回転可能である。なお、この3個の集音器ユニット11R’,11C’,11L’のうち少なくとも1個の集音器ユニットを回転できれば、検出範囲を調整できる。
The positions at which the three
図12を参照して、左右の2個の集音器ユニット11R’11L’を回転させた場合の検出範囲について説明する。図12は、本実施の形態に係るロール方向に回転可能な2個の集音器ユニットの指向性領域を示す正面図であり、(a)が検出範囲を正面とする場合であり、(b)が検出範囲を右方とする場合であり、(c)が検出範囲を左方とする場合である。 With reference to FIG. 12, the detection range when the two left and right sound collector units 11R'11L 'are rotated will be described. FIG. 12 is a front view showing a directivity region of two sound collector units that can rotate in the roll direction according to the present embodiment, and FIG. ) Is a case where the detection range is on the right side, and (c) is a case where the detection range is on the left side.
図12(a)に示すように、各回転装置によって、集音器ユニット11R’を車両を正面から見てロール方向において水平位置から反時計周りに所定角度回転させ、集音器ユニット11L’を車両を正面から見てロール方向において水平位置から時計周りに所定角度回転させている。この場合、略面状の指向性領域11Ra’と指向性領域11La’が共に車両の外側を向くように回転し、指向性領域11Ra’と指向性領域11La’とが車両の正面で交差し、正面を検知する検出範囲が設定される。
As shown in FIG. 12 (a), the
図12(b)に示すように、回転装置によって集音器ユニット11R’を車両を正面から見てロール方向において水平位置から反時計周りに所定角度回転させ、集音器ユニット11L’を回転させない。この場合、略面状の指向性領域11Ra’が外側を向くように回転し、略面状の指向性領域11La’が水平状態を維持し、指向性領域11Ra’と指向性領域11La’とが車両の右方で交差し、右方を検知する検出範囲が設定される。
As shown in FIG. 12 (b), the
図12(c)に示すように、回転装置によって集音器ユニット11L’を車両を正面から見てロール方向において水平位置から時計周りに所定角度回転させ、集音器ユニット11R’を回転させない。この場合、略面状の指向性領域11Ra’が水平状態を維持し、略面状の指向性領域11La’が外側を向くように回転し、指向性領域11Ra’と指向性領域11La’とが車両の左方で交差し、左方を検知する検出範囲が設定される。
As shown in FIG. 12C, the
以上、本発明に係る実施の形態について説明したが、本発明は上記実施の形態に限定されることなく様々な形態で実施される。 As mentioned above, although embodiment which concerns on this invention was described, this invention is implemented in various forms, without being limited to the said embodiment.
例えば、本実施の形態では車両に搭載され、検出した接近車両情報を運転支援装置に提供する接近車両検出装置に適用したが、接近車両検出装置の構成としては他の構成でもよい。例えば、運転支援装置の中に接近車両検出機能として組み込まれるものでもよいし、接近車両検出装置の中に警報機能等を有するものでもよい。また、車両以外の音源を検出する音源検出装置に適用してもよい。また、ロボット等の車両以外の移動体に搭載される音源検出装置や接近車両検出装置に適用してもよい。 For example, although the present embodiment is applied to an approaching vehicle detection device that is mounted on a vehicle and provides the detected approaching vehicle information to the driving assistance device, other configurations may be used as the approaching vehicle detection device. For example, it may be incorporated in the driving support device as an approaching vehicle detection function, or the approaching vehicle detection device may have an alarm function or the like. Moreover, you may apply to the sound source detection apparatus which detects sound sources other than a vehicle. Moreover, you may apply to the sound source detection apparatus and approaching vehicle detection apparatus which are mounted in moving bodies other than vehicles, such as a robot.
また、本実施の形態では自車両前方の接近車両を主として検出するために自車両の前端部に複数の集音器ユニットを配置する構成としたが、自車両後方の接近車両を主として検出するために自車両の後端部に複数の集音器ユニット(集音器)を配置する構成としてもよい。また、本実施の形態では集音器アレイを2個又は3個の集音器ユニットで構成したが、4個以上の集音器ユニットで集音器アレイを構成してもよい。 In the present embodiment, a plurality of sound collector units are arranged at the front end portion of the own vehicle in order to mainly detect the approaching vehicle in front of the own vehicle. However, in order to mainly detect the approaching vehicle behind the own vehicle. Alternatively, a plurality of sound collector units (sound collectors) may be arranged at the rear end of the vehicle. In the present embodiment, the sound collector array is composed of two or three sound collector units. However, the sound collector array may be composed of four or more sound collector units.
また、本実施の形態では超指向性の集音器を複数用いて、略面状の左右方向に扇型の指向性領域を有する集音器ユニットを構成したが、単独の集音器により車両の上下方向より左右方向に広い指向性領域を有するものを構成してもよい。 Further, in this embodiment, a plurality of superdirective sound collectors are used to configure a sound collector unit having a fan-shaped directivity region in a substantially planar left-right direction. You may comprise what has a directional area | region wider in the left-right direction than the up-down direction.
また、本実施の形態では集音器アレイに含まれる複数の集音器ユニットの指向性領域の大きさ及び形状が同じになるように構成したが、各集音器ユニットの指向性領域の大きさや形状については同じでなくてもよい。 In the present embodiment, the size and shape of the directivity regions of the plurality of sound collector units included in the sound collector array are the same. However, the size of the directivity region of each sound collector unit is the same. The sheath shape may not be the same.
1…接近車両検出装置、2…運転支援装置、10…集音器アレイ、11,11C,11L,11R,11C’,11L’,11R’…集音器ユニット、11a,11Ca,11La,11Ra,11Ca’,11La’,11Ra’…指向性領域、11b,11bC,11bL,11bR…検出範囲、12…超指向性集音器、12a…指向性領域、20…ECU。 DESCRIPTION OF SYMBOLS 1 ... Approaching vehicle detection apparatus, 2 ... Driving assistance apparatus, 10 ... Sound collector array, 11, 11C, 11L, 11R, 11C ', 11L', 11R '... Sound collector unit, 11a, 11Ca, 11La, 11Ra, 11Ca ', 11La', 11Ra ' ... directional region, 11b, 11b C, 11b L , 11b R ... detection range, 12 ... super-directional sound collector unit, 12a ... directional region, 20 ... ECU.
Claims (3)
道路形状を取得する取得装置と、
前記道路形状に基づいて、前記音を検出すべき方向を決定する検出方向決定部と、
を備え、
前記複数の集音器のうち利用する集音器を選択することで、前記音を検出すべき方向に応じた検出範囲を設定する、
接近車両検出装置。 A vehicle mounted on the host vehicle that detects an approaching vehicle based on sounds collected by a plurality of sound collectors, and the plurality of sound collectors has a wider directivity in the left-right direction than the vertical direction of the host vehicle. An approaching vehicle detection device having an area, the directional areas are arranged so as to intersect each other, and the area where the directional areas intersect is a detection range,
An acquisition device for acquiring a road shape;
A detection direction determination unit that determines a direction in which the sound should be detected based on the road shape;
With
By selecting a sound collector to be used from among the plurality of sound collectors, a detection range corresponding to a direction in which the sound is to be detected is set.
Approaching vehicle detection device.
運転者の注意方向を検出する検出装置と、
前記運転者の注意方向以外の方向を、前記音を検出すべき方向として決定する検出方向決定部と、
を備え、
前記複数の集音器のうち利用する集音器を選択することで、前記音を検出すべき方向に応じた検出範囲を設定する、
接近車両検出装置。 A vehicle mounted on the host vehicle that detects an approaching vehicle based on sounds collected by a plurality of sound collectors, and the plurality of sound collectors has a wider directivity in the left-right direction than the vertical direction of the host vehicle. An approaching vehicle detection device having an area, the directional areas are arranged so as to intersect each other, and the area where the directional areas intersect is a detection range,
A detection device for detecting a driver's attention direction;
A detection direction determination unit that determines a direction other than the driver's attention direction as a direction in which the sound is to be detected;
With
By selecting a sound collector to be used from among the plurality of sound collectors, a detection range corresponding to a direction in which the sound is to be detected is set.
Approaching vehicle detection device.
前記回転可能な集音器を回転させることによって指向性領域が互いに交差する検出範囲を任意に設定可能とすることを特徴とする請求項1又は2に記載の接近車両検出装置。 At least one of the plurality of sound collectors is rotatable in a roll direction of the host vehicle;
Approaching vehicle detection device according to claim 1 or 2, characterized in that the arbitrarily set the detection range directional regions intersect with each other by rotating said rotatable sound collector.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011042021A JP5682375B2 (en) | 2011-02-28 | 2011-02-28 | Sound source detection device and approaching vehicle detection device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011042021A JP5682375B2 (en) | 2011-02-28 | 2011-02-28 | Sound source detection device and approaching vehicle detection device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012181016A JP2012181016A (en) | 2012-09-20 |
JP5682375B2 true JP5682375B2 (en) | 2015-03-11 |
Family
ID=47012352
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011042021A Active JP5682375B2 (en) | 2011-02-28 | 2011-02-28 | Sound source detection device and approaching vehicle detection device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5682375B2 (en) |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS50104960A (en) * | 1974-01-24 | 1975-08-19 | ||
JPH03194483A (en) * | 1989-12-22 | 1991-08-26 | Ono Sokki Co Ltd | Non-phasing type azimuth detecting device |
JPH0592768U (en) * | 1992-05-20 | 1993-12-17 | 三菱自動車エンジニアリング株式会社 | Inter-vehicle distance alarm device |
JP3197203B2 (en) * | 1996-01-29 | 2001-08-13 | 三菱重工業株式会社 | Directional sound collector and sound source locator |
JP3628480B2 (en) * | 1997-05-30 | 2005-03-09 | 株式会社デンソー | Ultrasonic sensor |
JP2005004413A (en) * | 2003-06-11 | 2005-01-06 | Nissan Motor Co Ltd | Drive supporting device for vehicle |
JP4679075B2 (en) * | 2004-05-19 | 2011-04-27 | 日本信号株式会社 | Radio wave arrival angle estimation device |
JP4655961B2 (en) * | 2006-02-27 | 2011-03-23 | トヨタ自動車株式会社 | Structure shape estimation device, obstacle detection device, and structure shape estimation method |
-
2011
- 2011-02-28 JP JP2011042021A patent/JP5682375B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012181016A (en) | 2012-09-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11244564B2 (en) | Vehicle acoustic-based emergency vehicle detection | |
EP3364394B1 (en) | Information processing apparatus | |
JP4527204B2 (en) | Blind spot vehicle detection apparatus and method | |
US10262533B2 (en) | Moving object and driving support system for moving object | |
EP1835439A1 (en) | Systems and methods for detecting pedestrians in the vicinity of a powered industrial vehicle | |
JP2011232293A (en) | Vehicle exterior sound detection device | |
JP2010502934A (en) | Alarm sound direction detection device | |
WO2016181618A1 (en) | Monitored area setting device and monitored area setting method | |
JP2018022234A (en) | Image processing device and environment recognition device | |
JP2015219803A (en) | Drive support display device | |
JP2012226438A (en) | Approximating vehicle detection device and approximating vehicle detection method | |
JP5842497B2 (en) | Vehicle alarm device | |
JP2015057686A (en) | Attention alert device | |
JP5736399B2 (en) | Vehicle approach notification device | |
JP2015121959A (en) | Obstacle detection device | |
KR101612836B1 (en) | Method and device for acquisiting accident image in vehicle, and computer readable medium for performing the method | |
JP5924395B2 (en) | Peripheral vehicle information notification device | |
JP2008197740A (en) | Collision prevention safety device for vehicle, collision prevention safety system and collision prevention safety information center | |
JP2011227551A (en) | Meander driving detection device for vehicle | |
JP2021125021A (en) | Dead angle information acquisition device, dead angle information acquisition method, vehicle and program | |
JP5682375B2 (en) | Sound source detection device and approaching vehicle detection device | |
KR20150055278A (en) | System and method for collecting traffic information using vehicle radar | |
JP2007122201A (en) | Road shape detector for vehicle | |
JP2020166409A (en) | In-vehicle device, in-vehicle system and surroundings monitoring method | |
JP2012146149A (en) | Detection system of vehicle in blind area, detection device of vehicle in blind area, detection method of vehicle in blind area, and program thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130417 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140319 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140401 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140602 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141216 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141229 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5682375 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |