JP2014038520A - Driving support device - Google Patents

Driving support device Download PDF

Info

Publication number
JP2014038520A
JP2014038520A JP2012181061A JP2012181061A JP2014038520A JP 2014038520 A JP2014038520 A JP 2014038520A JP 2012181061 A JP2012181061 A JP 2012181061A JP 2012181061 A JP2012181061 A JP 2012181061A JP 2014038520 A JP2014038520 A JP 2014038520A
Authority
JP
Japan
Prior art keywords
turned
touch
blinker
switch
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012181061A
Other languages
Japanese (ja)
Other versions
JP5885619B2 (en
Inventor
Takashi Watanabe
崇 渡邊
Kei Oshida
圭 忍田
Haruhiko Nishiguchi
遼彦 西口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2012181061A priority Critical patent/JP5885619B2/en
Publication of JP2014038520A publication Critical patent/JP2014038520A/en
Application granted granted Critical
Publication of JP5885619B2 publication Critical patent/JP5885619B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Traffic Control Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a driving support device capable of displaying an optimal image on display means even when a one-touch turn signal lever is used.SOLUTION: A turn signal device comprises: a turn signal lever that can switch between on and off states by a driver's operation; and a one-touch turn signal lever where the state is switched to on by the driver's operation and afterwards is automatically switched to off. A display switching unit displays an environment image when the one-touch turn signal lever is at an on state and afterwards continues to display the environment image for a predetermined time when the one-touch turn signal lever is at an off state. In the meantime, the display switching unit displays the environment image when the turn signal lever is at the on state and turns off the display of the environment image before the predetermined time elapses when the turn signal lever is at the off state.

Description

本発明は、車両の運転支援装置に関するものである。   The present invention relates to a driving support apparatus for a vehicle.

近年、車両の運転支援装置として、自車両の後側方領域を撮影する外界カメラと、外界カメラが撮影した外界映像を運転者に視認可能に表示するモニタと、を備え、外界カメラが撮影した外界映像をモニタに表示する技術が知られている(例えば、特許文献1参照)。特許文献1の構成では、ウィンカ装置がオン状態になった場合(ウィンカランプの点滅が開始した場合)に外界映像を表示し、オフ状態になった場合(ウィンカランプの点滅が終了した場合)に外界映像の表示をオフするようになっている。   2. Description of the Related Art In recent years, as a vehicle driving support device, an external camera that captures a rear side area of a host vehicle and a monitor that displays an external image captured by the external camera so as to be visible to a driver are captured by the external camera. A technique for displaying an external video on a monitor is known (see, for example, Patent Document 1). In the configuration of Patent Document 1, an external image is displayed when the blinker device is turned on (when blinking of the blinker lamp is started), and is turned off (when blinking of the blinker lamp is finished). The display of the outside world video is turned off.

上述したウィンカ装置は、ステアリングホイールの前方に配設されて傾動操作可能に構成されたウィンカレバーを備え、このウィンカレバーを中立位置から右回りまたは左回りに傾動操作することで、傾動方向に応じたウィンカランプが点滅するようになっている。具体的に、ウィンカ装置では、ウィンカレバーを軽く傾動させた半押し状態でオン状態となり、ウィンカランプが点滅し、半押し状態からさらに傾動させた全押し状態になると、ウィンカレバーから手を離してもウィンカスイッチがオン状態のまま、ウィンカランプは点滅し続ける。すなわち、半押し状態でウィンカスイッチの接点が接触し、全押し状態でその接触状態が固定保持される。また、半押し状態のウィンカレバーから手を離すと、ウィンカスイッチの接点の接触が解除されてオフ状態となり、ウィンカランプの点滅が停止する。   The above-described winker device includes a winker lever that is disposed in front of the steering wheel and configured to be tiltable. By tilting the winker lever clockwise or counterclockwise from the neutral position, the winker lever can be operated according to the tilting direction. The blinker lamp blinks. Specifically, in the winker device, when the winker lever is lightly tilted, it is turned on when it is half-pressed, and when the winker lamp blinks and when it is further tilted from the half-pressed state, release the winker lever. However, the blinker lamp keeps blinking while the blinker switch is on. That is, the contact of the blinker switch comes into contact in the half-pressed state, and the contact state is fixedly held in the fully-pressed state. Also, when the hand is released from the half-pressed blinker lever, the contact of the blinker switch contact is released and the blinker lamp stops blinking.

一方、全押し状態は、車線変更後や右左折後において、ステアリングホイールが所定の操舵角以上戻った場合や、ウィンカレバーを傾動位置から中立位置まで強制的に戻した場合等、運転者自身の操作により解除できる。これにより、ウィンカスイッチがオフ状態となり、ウィンカランプの点滅が停止する。   On the other hand, when the lane is changed or after turning left or right, the fully-pressed state is the case where the driver himself / herself returns when the steering wheel returns more than a predetermined steering angle or when the winker lever is forcibly returned from the tilting position to the neutral position. Can be canceled by operation. As a result, the blinker switch is turned off, and the blinker lamp stops blinking.

ここで、近時ではウィンカレバーを半押し状態を解除した後、所定時間の間、オン状態が継続される(ウィンカランプが点滅し続ける)、いわゆるワンタッチウィンカスイッチを備える構成が知られている。
この構成によれば、一旦半押し状態にすれば、解除した後もウィンカランプが点滅し続けるので、例えば車線変更時等において、車線変更後に全押し状態を手動に解除したり、半押し状態を維持したまま車線変更したりする必要がなく、利便性を向上できると考えられる。
Here, recently, a configuration including a so-called one-touch blinker switch in which the on-state is continued for a predetermined time after the blinker lever is half-pressed (the blinker lamp continues to blink) is known.
According to this configuration, once the half-pressed state is established, the blinker lamp continues to flash even after the release, so for example, when changing the lane, the full-pressed state can be manually released after changing the lane, or the half-pressed state can be changed. There is no need to change lanes while maintaining the vehicle, which can improve convenience.

特開2005−170284号公報JP 2005-170284 A

しかしながら、上述した特許文献1の構成にあっては、ウィンカスイッチがオフ状態になった場合に外界映像の表示が終了するため、例えばワンタッチウィンカスイッチを採用した場合には、車線変更が終了する前に外界映像の表示が終了する虞がある。   However, in the configuration of Patent Document 1 described above, since the display of the external image ends when the blinker switch is turned off, for example, when a one-touch blinker switch is employed, the lane change is completed. There is a risk that the display of the external image will end.

そこで、本発明は、上述した事情に考慮してなされたもので、ワンタッチウィンカスイッチを採用した場合においても表示手段上に最適な画像を表示することができる運転支援
装置を提供することを目的とする。
Therefore, the present invention has been made in view of the above-described circumstances, and an object thereof is to provide a driving support device that can display an optimal image on a display unit even when a one-touch blinker switch is adopted. To do.

上記目的を達成するために、請求項1に記載した発明は、車両に設けられ該車両の後側方領域(例えば、実施形態における後側方領域Z1)、及び該後側方領域に隣接するサイドミラー(例えば、実施形態におけるサイドミラー16L)の視認範囲外の死角領域(例えば、実施形態における死角領域Z2)を撮影可能な撮影手段(例えば、実施形態における外界カメラ13)と、該撮影手段が撮影した映像を前記車両の運転者に視認可能に表示する表示手段(例えば、実施形態におけるモニタ15や表示切替装置18)と、前記車両の左右移動を合図するウィンカ装置(例えば、実施形態におけるウィンカ装置14)と、を備える運転支援装置(例えば、実施形態における運転支援装置10)において、前記ウィンカ装置は、運転者の操作によりオン状態、及びオフ状態が切り替えられるウィンカスイッチ(例えば、実施形態におけるウィンカスイッチ23L)と、運転者の操作によりオン状態とされ、その後自動的にオフ状態となるワンタッチウィンカスイッチ(例えば、実施形態におけるワンタッチウィンカスイッチ24L)と、を備え、前記表示手段は、前記ワンタッチウィンカスイッチがオン状態になった場合に前記映像を表示し、その後、前記ワンタッチウィンカスイッチがオフ状態になった場合に前記映像を所定時間表示し続ける一方、前記ウィンカスイッチがオン状態になった場合に前記映像を表示し、前記ウィンカスイッチがオフ状態になった場合に前記所定時間経過前に前記映像の表示をオフすることを特徴とする。   In order to achieve the above object, the invention described in claim 1 is provided in a vehicle and is adjacent to a rear side region of the vehicle (for example, a rear side region Z1 in the embodiment) and the rear side region. Imaging means (for example, the external camera 13 in the embodiment) capable of imaging a blind spot area (for example, the blind spot area Z2 in the embodiment) outside the viewing range of the side mirror (for example, the side mirror 16L in the embodiment), and the imaging means Display means (for example, the monitor 15 and the display switching device 18 in the embodiment) that displays the video taken by the vehicle so as to be visible to the driver of the vehicle, and a winker device (for example, in the embodiment) that signals the left-right movement of the vehicle. A winker device (14), and the winker device (for example, the driving support device 10 in the embodiment). A winker switch (for example, the winker switch 23L in the embodiment) that is switched between an on state and an off state, and a one-touch blinker switch that is turned on by a driver's operation and then automatically turns off (for example, the embodiment) And the display means displays the image when the one-touch blinker switch is turned on, and then displays the image when the one-touch blinker switch is turned off. Is displayed for a predetermined time, while the video is displayed when the blinker switch is turned on, and when the blinker switch is turned off, the video is turned off before the predetermined time elapses. It is characterized by.

請求項1に記載した発明によれば、ウィンカスイッチがオフ状態になった場合には、その後、所定時間経過前に速やかに外界映像の表示をオフするので、例えば右左折後、表示手段に表示される映像を撮影手段による映像からナビゲーション画像等に切り替えることができる。この場合には、右左折後、直ぐ反対側へ曲がる場合等であっても、速やかに経路案内を確認することができる。
特に、本発明の構成によれば、ワンタッチウィンカスイッチがオフ状態になった場合には、ワンタッチウィンカスイッチがオフ状態になってから所定時間、撮影手段による映像が表示され続けるため、例えば車線変更等が完了する前にワンタッチウィンカスイッチがオフ状態になった場合であっても、車線変更等が完了するまで外界映像を継続して確認することができる。また、ワンタッチウィンカスイッチがオフ状態になった時点で、既に車線変更等が完了している場合には、車線変更後等の後続車両の動作を、表示手段を通して確認することができる。
したがって、表示手段上に最適な画像を表示して、利便性を向上させることができる。
According to the first aspect of the present invention, when the blinker switch is turned off, the display of the external image is immediately turned off before the predetermined time has elapsed. The video to be played can be switched from the video by the photographing means to a navigation image or the like. In this case, route guidance can be promptly confirmed even if the vehicle turns right or left immediately after the turn.
In particular, according to the configuration of the present invention, when the one-touch blinker switch is turned off, the image is continuously displayed for a predetermined time after the one-touch blinker switch is turned off. Even if the one-touch blinker switch is turned off before the completion of the operation, the external image can be continuously checked until the lane change or the like is completed. Further, when the lane change or the like has already been completed when the one-touch blinker switch is turned off, the operation of the following vehicle after the lane change or the like can be confirmed through the display means.
Therefore, it is possible to display an optimal image on the display means and improve convenience.

本実施形態における運転支援装置の構成図であって、車室内から前方を見た正面図である。It is a block diagram of the driving assistance apparatus in this embodiment, Comprising: It is the front view which looked ahead from the vehicle interior. 運転支援装置のブロック図である。It is a block diagram of a driving assistance device. 運転支援装置におけるサイドミラーの視認範囲及び外界カメラの検出対象領域の一例を示す図である。It is a figure which shows an example of the visual recognition range of the side mirror in a driving assistance device, and the detection object area | region of an external camera. 運転支援装置の動作方法を説明するためのフローチャートである。It is a flowchart for demonstrating the operation | movement method of a driving assistance device.

次に、本発明の実施形態を図面に基づいて説明する。
(運転支援装置)
図1は運転支援装置の構成図であって、車室内から前方を見た正面図であり、図2は運転支援装置のブロック図である。
本実施形態における運転支援装置10は、図1、図2に示すように、ナビゲーション装
置11と、外界カメラ(撮影手段)13と、ウィンカ装置14と、モニタ(表示手段)15と、サイドミラー16R,16Lと、画像処理装置17と、表示切替装置(表示手段)18と、を備えている。
Next, embodiments of the present invention will be described with reference to the drawings.
(Drive assist device)
FIG. 1 is a configuration diagram of a driving support device, which is a front view of the front viewed from the passenger compartment, and FIG. 2 is a block diagram of the driving support device.
As shown in FIGS. 1 and 2, the driving support device 10 according to the present embodiment includes a navigation device 11, an external camera (imaging means) 13, a winker device 14, a monitor (display means) 15, and a side mirror 16R. , 16L, an image processing device 17, and a display switching device (display means) 18.

ナビゲーション装置11は、例えば人工衛星を利用して自車両の位置を測定するためのGPS(Global Positioning System)信号等の測位信号を受信して、この測位信号に基いて自車両の現在位置を検出する。また、ナビゲーション装置11は、自車両の速度及びヨーレート等に基づく自律航法の演算処理を併用して、自車両の現在位置を検出可能である。
また、ナビゲーション装置11は、例えばモニタ15等の表示画面において地図を表示するための地図データを記憶している。地図データは、例えば、自車両の現在位置に基づくマップマッチングの処理に必要とされる道路上の位置座標を示す道路座標データと、経路探索や経路案内等の処理に必要とされる道路データと、を備えている。
道路データは、例えば、交差点及び分岐点等の道路上の所定位置の緯度及び経度からなる座標点であるノード及び各ノード間を結ぶ線であるリンクと、道路形状及び道路種別と、道路の幅員データ及び制限速度と、を主に備えている。
For example, the navigation device 11 receives a positioning signal such as a GPS (Global Positioning System) signal for measuring the position of the host vehicle using an artificial satellite, and detects the current position of the host vehicle based on the positioning signal. To do. In addition, the navigation device 11 can detect the current position of the host vehicle by using the calculation processing of the autonomous navigation based on the speed and yaw rate of the host vehicle.
Moreover, the navigation apparatus 11 has memorize | stored the map data for displaying a map on display screens, such as the monitor 15, for example. The map data includes, for example, road coordinate data indicating position coordinates on the road required for map matching processing based on the current position of the host vehicle, road data required for processing such as route search and route guidance, It is equipped with.
The road data includes, for example, a node that is a coordinate point composed of latitude and longitude at a predetermined position on the road such as an intersection and a branch point, a link that is a line connecting each node, a road shape and a road type, and a road width. Data and speed limit are mainly provided.

そして、ナビゲーション装置11は、例えば、自車両の現在位置の情報に基づき、地図データに対してマップマッチングを行ない、モニタ15における地図及び自車両の現在位置の表示を制御する。
また、ナビゲーション装置11は、例えば、経路探索や経路案内等の処理を実行し、道路データとともに、例えば目的地や経由地までの経路案内情報等のナビゲーション画像データを表示切替装置18に出力する。
And the navigation apparatus 11 performs map matching with respect to map data based on the information of the present position of the own vehicle, for example, and controls the display of the map and the present position of the own vehicle in the monitor 15.
For example, the navigation device 11 executes processing such as route search and route guidance, and outputs to the display switching device 18 navigation image data such as route guidance information to a destination or waypoint along with road data.

外界カメラ13は、例えば可視光領域や赤外線領域等にて撮像可能なCCDカメラやCMOSカメラ等からなり、本実施形態では左右のサイドミラー16R,16Lのうち、左側サイドミラー16L(運転席側とは反対側(助手席側)のサイドミラー16L)の下部に配置されている。外界カメラ13は広角レンズを備え、自車両の左側方から後方にかけての所定の広角領域の外界映像を撮影し、撮影により得た映像に対して、例えばフィルタリングや二値化処理等の所定の画像処理を行い、二次元配列の画素からなる画像データを生成し、画像処理装置17へ出力する。   The external camera 13 includes, for example, a CCD camera or a CMOS camera that can capture an image in a visible light region, an infrared region, or the like. In the present embodiment, of the left and right side mirrors 16R and 16L, the left side mirror 16L (driver's seat side and Is disposed below the side mirror 16L) on the opposite side (passenger seat side). The external camera 13 includes a wide-angle lens, captures an external image of a predetermined wide-angle region from the left side to the rear of the host vehicle, and performs a predetermined image such as filtering or binarization processing on the acquired image. Processing is performed to generate image data including pixels of a two-dimensional array, and the image data is output to the image processing device 17.

なお、外界カメラ13の検出対象領域Zは、図3に示すように、左側サイドミラー16Lの視認範囲である自車両の後側方領域Z1(例えば、視野角が27°程度)と、この後側方領域Z1に隣接する左側サイドミラー16Lの視認範囲外の死角領域Z2と、を含む領域であり、例えば視野角82°程度になっている。また、外界カメラ13の検出対象領域のうち、自車両との重複領域は、例えば視野角で1〜2°程度となるように設定されている。   As shown in FIG. 3, the detection target area Z of the external camera 13 includes a rear side area Z1 (for example, a viewing angle of about 27 °) that is the viewing range of the left side mirror 16L, and the following This is a region including a blind spot region Z2 outside the viewing range of the left side mirror 16L adjacent to the side region Z1, and has a viewing angle of about 82 °, for example. Of the detection target area of the external camera 13, the overlapping area with the host vehicle is set to be about 1 to 2 ° in view angle, for example.

図1、図2に示すように、ウィンカ装置14は、自車両の左右移動を周辺車両に合図するレバースイッチであって、ステアリングホイール20の前方に配設されて中立位置に対して右回り(下方)または左回り(上方)に傾動操作可能に構成されたウィンカレバー21と、ウィンカレバー21の傾動操作に応じてオン、オフが切り替えられる作動スイッチ22と、を備えている。   As shown in FIGS. 1 and 2, the winker device 14 is a lever switch for signaling the left and right movements of the host vehicle to surrounding vehicles, and is disposed in front of the steering wheel 20 and rotates clockwise with respect to the neutral position ( A winker lever 21 configured to be tiltable in a downward direction or a counterclockwise direction (upward), and an operation switch 22 that is switched on and off in accordance with the tilting operation of the winker lever 21 is provided.

ウィンカレバー21は、右回りまたは左回りに軽く傾動させる半押し状態、及び半押し状態からさらに傾動させる全押し状態の二段階の傾動操作が可能である。この場合、半押し状態のウィンカレバー21は、運転者が手を離して半押し状態を解除すると、中立位置に戻るようになっており、全押し状態のウィンカレバー21は傾動操作した位置に保持されるようになっている。   The winker lever 21 can be tilted in two steps: a half-pressed state in which the lighter lever is slightly tilted clockwise or counterclockwise and a fully-pressed state in which the indicator is further tilted from the half-pressed state. In this case, the winker lever 21 in the half-pressed state returns to the neutral position when the driver releases the hand and releases the half-pressed state, and the winker lever 21 in the fully-pressed state is held at the tilted position. It has come to be.

作動スイッチ22は、オン状態でウィンカランプ(不図示)を点滅させ、オフ状態でウィンカランプの点滅を終了させる。具体的に、作動スイッチ22は、運転者の操作によりオン、オフの両方が切り替えられる左右のウィンカスイッチ23R,23Lと、運転者の操作によりオン状態とされ、その後自動的にオフ状態とされる左右のワンタッチウィンカスイッチ24R,24Lと、を備えている。   The operation switch 22 blinks a blinker lamp (not shown) in the on state, and ends blinking of the blinker lamp in the off state. Specifically, the operation switch 22 is turned on by the driver's operation and the left and right blinker switches 23R and 23L that are both turned on and off by the driver's operation, and then automatically turned off. Left and right one-touch blinker switches 24R and 24L.

ワンタッチウィンカスイッチ24R,24Lは、上述した半押し状態でオン状態とされ、半押し状態を解除してから(手を離してから)第1所定時間経過後、自動的にオフ状態となり、ウィンカランプの点滅が終了する。すなわち、ワンタッチウィンカスイッチ24R,24Lは、半押し状態を解除しても第1所定時間の間は、オン状態が継続され、ウィンカランプが点滅し続ける。なお、上述した第1所定時間は、例えばウィンカレバー21の半押し状態が解除されてから、ウィンカランプが3回程度点滅する時間となっている。   The one-touch blinker switches 24R and 24L are turned on in the half-pressed state described above, and are automatically turned off after the first predetermined time has elapsed after releasing the half-pressed state (after releasing the hand). Stops blinking. That is, the one-touch blinker switches 24R and 24L are kept on for the first predetermined time even when the half-pressed state is released, and the blinker lamp continues to blink. The first predetermined time described above is, for example, a time when the blinker lamp blinks about three times after the half-pressed state of the blinker lever 21 is released.

また、ウィンカスイッチ23R,23Lは、上述した全押し状態でオン状態となり、その後全押し状態を解除した時点でオフ状態となり、速やかにウィンカランプの点滅が終了する。なお、全押し状態を解除するための運転者の操作とは、車線変更や左折後において、ステアリングホイール20が所定の操舵角以上戻った場合や、ウィンカレバー21を自身の操作により傾動位置から中立位置まで強制的に戻した場合等である。   Further, the blinker switches 23R and 23L are turned on when the fully-pressed state is described above, and then are turned off when the fully-pressed state is released, and the blinker lamp blinks quickly. The driver's operation for releasing the fully-pressed state means that the steering wheel 20 returns more than a predetermined steering angle after a lane change or a left turn, or the winker lever 21 is neutralized from the tilt position by its own operation. For example, when the position is forcibly returned to the position.

モニタ15は、例えばナビゲーション装置11に具備される例えば5〜8インチの液晶表示装置で構成され、運転者によって視認可能な位置(例えば、インストルメントパネルの車幅方向略中央)に設けられている。   The monitor 15 is composed of, for example, a liquid crystal display device of 5 to 8 inches provided in the navigation device 11, for example, and is provided at a position (for example, approximately the center of the instrument panel in the vehicle width direction) that can be visually recognized by the driver. .

画像処理装置17は、外界カメラ13から入力した画像データに対して拡大及び圧縮処理を行い、画像処理後の画像データを表示切替装置18へ出力する。   The image processing device 17 enlarges and compresses the image data input from the external camera 13 and outputs the image data after the image processing to the display switching device 18.

表示切替装置18は、モニタ15上に、ナビゲーション装置11から入力されたナビゲーション画像を表示するか、画像処理装置17から入力された外界映像を表示するかを選択的に切り替える。例えば、表示切替装置18は、外界映像が必要な状況か否かを判断し、必要なしと判断された場合にはモニタ15にナビゲーション画像を表示し、必要ありと判断された場合にはナビゲーション画像から外界映像に切り替える。   The display switching device 18 selectively switches whether the navigation image input from the navigation device 11 is displayed on the monitor 15 or the external image input from the image processing device 17 is displayed. For example, the display switching device 18 determines whether or not an external video is necessary, displays a navigation image on the monitor 15 when it is determined that it is not necessary, and displays a navigation image when it is determined that it is necessary. To the external video.

表示切替装置18は、ウィンカ装置14の各スイッチ23R,23L,24R,24Lのうち、左側ウィンカスイッチ23Lのオン状態を検出した場合に、左折を実行する意志を有していると予測、あるいは実際に自車両が左折を実行中であると検知する。また、表示切替装置18は、左側ワンタッチウィンカスイッチ24Lのオン状態を検出した場合に、運転者が左車線への車線変更を実行する意志を有していると予測、あるいは実際に自車両が車線変更中であると検知する。そして、これら左側ウィンカスイッチ23L、または左側ワンタッチウィンカスイッチ24Lがオン状態の場合には、外界映像が必要な状況であると判断して、モニタ15に外界映像を表示する。   The display switching device 18 predicts that it has an intention to perform a left turn when it detects the ON state of the left winker switch 23L among the switches 23R, 23L, 24R, 24L of the winker device 14, or actually Detects that the vehicle is making a left turn. Further, when the display switching device 18 detects the ON state of the left one-touch blinker switch 24L, the display switching device 18 predicts that the driver is willing to change the lane to the left lane, or the host vehicle is actually in the lane Detects that it is changing. When the left blinker switch 23L or the left one-touch blinker switch 24L is in an on state, it is determined that an external image is necessary, and the external image is displayed on the monitor 15.

一方、表示切替装置18は、運転者による左側の各スイッチ23L,24Lがオフ状態であるのに応じて、外界映像の表示を終了して、モニタ15の映像をナビゲーション画像に切り替える。具体的に、左側ウィンカスイッチ23Lがオフ状態の場合(全押し状態が解除された場合)には、外界映像が必要ない状況、またはナビゲーション画像が必要な状況であると判断して、速やかに外界映像の表示を終了する。   On the other hand, the display switching device 18 ends the display of the external video and switches the video on the monitor 15 to the navigation image in response to the left switches 23L and 24L being turned off by the driver. Specifically, when the left winker switch 23L is in the off state (when the fully pressed state is released), it is determined that the external image is not necessary or the navigation image is necessary, and the external environment is promptly determined. End the video display.

また、左側ワンタッチウィンカスイッチ24Lがオフ状態である場合(半押し状態が解除され、第1所定時間経過後)には、ウィンカランプの最終点滅が終了してから第2所定
時間(例えば、2秒程度)経過後、外界映像が必要ない状況であると判断して、外界映像の表示を終了する。
In addition, when the left one-touch blinker switch 24L is in an OFF state (half-pressed state is released and the first predetermined time has elapsed), the second predetermined time (for example, 2 seconds) after the final blinking of the blinker lamp ends. After the elapse of time, it is determined that an external image is not necessary, and the display of the external image is terminated.

(運転支援装置の動作方法)
次に、上述した運転支援装置10の動作方法として、モニタ15上での表示切替方法について説明する。図4は、表示切替方法を説明するためのフローチャートである。なお、以下の説明では、モニタ15上に外界映像が表示されていない場合は、ナビゲーション画像が常時表示されているものとする。
図4に示すように、ステップS1において、左側ワンタッチウィンカスイッチ24Lがオン状態であるか否かを判断する。
(Operation method of driving support device)
Next, a display switching method on the monitor 15 will be described as an operation method of the driving support device 10 described above. FIG. 4 is a flowchart for explaining the display switching method. In the following description, it is assumed that the navigation image is always displayed when the external image is not displayed on the monitor 15.
As shown in FIG. 4, in step S1, it is determined whether or not the left one-touch blinker switch 24L is in an ON state.

ステップS1における判断結果が「NO」の場合(左側ワンタッチウィンカスイッチ24Lがオン状態ではない場合)、例えば左車線への車線変更を実行する意志はないと判断して、ステップS2に進む。   If the determination result in step S1 is “NO” (if the left one-touch blinker switch 24L is not on), for example, it is determined that there is no intention to change the lane to the left lane, and the process proceeds to step S2.

次に、ステップS2において、左側ウィンカスイッチ23Lがオン状態であるか否かを判断する。
ステップS2における判断結果が「NO」の場合(左側ウィンカスイッチ23Lがオン状態ではない場合)、例えば左折を実行する意思はないと判断して、ステップS1から本ルーチンを繰り返す。
一方、ステップS2における判断結果が「YES」の場合(左側ウィンカスイッチ23Lがオン操作された場合)、左折の実行中、または左折を実行する意志が有ると判断して、ステップS3に進む。
Next, in step S2, it is determined whether or not the left winker switch 23L is in an ON state.
If the determination result in step S2 is “NO” (when the left turn signal switch 23L is not in the ON state), for example, it is determined that there is no intention to perform a left turn, and this routine is repeated from step S1.
On the other hand, when the determination result in step S2 is “YES” (when the left turn signal switch 23L is turned on), it is determined that the left turn is being executed or that there is an intention to execute the left turn, and the process proceeds to step S3.

そして、ステップS3において、表示切替装置18は、画像処理装置17から入力された外界映像をモニタ15に表示する。これにより、運転者は、サイドミラー16Lに写る状況と、モニタ15に表示された外界映像と、を確認しながら、左折を実行することができる。   In step S <b> 3, the display switching device 18 displays the external video input from the image processing device 17 on the monitor 15. Thus, the driver can perform a left turn while confirming the situation reflected on the side mirror 16L and the external image displayed on the monitor 15.

次に、ステップS4において、左側ウィンカスイッチ23Lがオフ状態になったか否かを判断する。
ステップS4における判断結果が「NO」の場合(左側ウィンカスイッチ23Lがオフ状態ではない場合)、左側ウィンカスイッチ23Lが未だオン状態、すなわち自車両が未だ左折中であり、外界映像が未だ必要であると判断して、ステップS4のルーチンを繰り返す。
一方、ステップS4における判断結果が「YES」の場合(左側ウィンカスイッチ23Lがオフ状態である場合)、外界映像が必要ない状況であると判断して、ステップS5に進む。
Next, in step S4, it is determined whether or not the left winker switch 23L has been turned off.
When the determination result in step S4 is “NO” (when the left winker switch 23L is not in the off state), the left winker switch 23L is still in the on state, that is, the host vehicle is still making a left turn, and the outside image is still necessary. And the routine of step S4 is repeated.
On the other hand, when the determination result in step S4 is “YES” (when the left winker switch 23L is in the OFF state), it is determined that an external image is not necessary, and the process proceeds to step S5.

次に、ステップS5において、外界映像の表示をオフにして、モニタ15に表示される映像をナビゲーション画像に切り替える。この場合には、本ルーチンを終了する。   Next, in step S5, the display of the external video is turned off, and the video displayed on the monitor 15 is switched to the navigation image. In this case, this routine is terminated.

一方、上述したステップS1の判断結果が「YES」の場合、(左側ワンタッチウィンカスイッチ24Lがオン状態である場合)、左車線への車線変更中、または車線変更を実行する意志が有ると判断して、ステップS6に進む。   On the other hand, if the determination result in the above-described step S1 is “YES” (when the left one-touch blinker switch 24L is on), it is determined that there is an intention to change the lane to the left lane or to change the lane. Then, the process proceeds to step S6.

ステップS6において、表示切替装置18は、画像処理装置17から入力された外界映像をモニタ15に表示する。これにより、運転者は、サイドミラー16Lに写る状況と、モニタ15に表示された外界映像と、を確認しながら、車線変更を実行することができる。   In step S <b> 6, the display switching device 18 displays the external video input from the image processing device 17 on the monitor 15. Thereby, the driver can execute the lane change while confirming the situation reflected on the side mirror 16L and the external image displayed on the monitor 15.

次に、ステップS7において、左側ワンタッチウィンカスイッチ24Lがオフ状態になったか否かを判断する。すなわち、半押し状態を解除し、かつ半押し状態を解除してから第1所定時間が経過したか否かを判断する。   Next, in step S7, it is determined whether or not the left one-touch blinker switch 24L has been turned off. That is, it is determined whether or not the first predetermined time has elapsed since the half-pressed state was released and the half-pressed state was released.

ステップS7の判断結果が「NO」の場合、左側ワンタッチウィンカスイッチ24Lが未だオン状態であると判断して、ステップS7のルーチンを繰り返す。
一方、ステップS7の判断結果が「YES」の場合、左側ワンタッチウィンカスイッチ24Lがオフ状態であると判断して、ステップS8に進む。
If the determination result in step S7 is “NO”, it is determined that the left one-touch blinker switch 24L is still on, and the routine of step S7 is repeated.
On the other hand, if the determination result in step S7 is “YES”, it is determined that the left one-touch blinker switch 24L is in the OFF state, and the process proceeds to step S8.

そして、ステップS8において、左側ワンタッチウィンカスイッチ24Lがオフ状態になってから第2所定時間(例えば、2秒程度)経過したか否かを判断する。
ステップS8における判断結果が「NO」の場合(第2所定時間経過前の場合)は、左側ワンタッチウィンカスイッチ24Lがオフ状態であるものの、外界映像が必要な状況(未だ車線変更や完了していない状況)と判断して、ステップS8のルーチンを繰り返す。
In step S8, it is determined whether or not a second predetermined time (for example, about 2 seconds) has elapsed since the left one-touch blinker switch 24L is turned off.
If the determination result in step S8 is “NO” (before the second predetermined time has elapsed), the left one-touch blinker switch 24L is in an off state, but the situation where an external image is necessary (lane change or completion has not been completed yet). Situation) and the routine of step S8 is repeated.

一方、ステップS8における判断結果が「YES」の場合(第2所定時間が経過した場合)は、ステップS9に進み、外界映像の表示をオフにする。この場合、表示切替装置18は、モニタ15に表示される映像を外界映像からナビゲーション画像に切り替える。すなわち、左側ワンタッチウィンカスイッチ24Lがオフ状態になってから第2所定時間経過後には、車線変更が完了しており、外界映像が必要ない状況であると判断して、モニタ15上の映像をナビゲーション画像に戻すようになっている。
以上により、本ルーチンを終了する。
On the other hand, when the determination result in step S8 is “YES” (when the second predetermined time has elapsed), the process proceeds to step S9 to turn off the display of the external image. In this case, the display switching device 18 switches the video displayed on the monitor 15 from an external video to a navigation image. That is, after the second predetermined time has elapsed since the left one-touch blinker switch 24L is turned off, it is determined that the lane change has been completed and no external image is necessary, and the video on the monitor 15 is navigated. It is supposed to return to the image.
Thus, this routine is finished.

このように、本実施形態では、左側ウィンカスイッチ23Lがオフ状態になった場合には、その後速やかに外界映像の表示をオフする構成とした。
この構成によれば、例えば左折後、モニタ15上に表示される映像を外界映像からナビゲーション画像に切り替えることができるので、左折後、直ぐ右折を行う場合等であっても、速やかに経路案内を確認することができる。
As described above, in the present embodiment, when the left winker switch 23L is turned off, the display of the external image is immediately turned off.
According to this configuration, for example, the video displayed on the monitor 15 after the left turn can be switched from the external image to the navigation image. Therefore, even when making a right turn immediately after the left turn, the route guidance is promptly performed. Can be confirmed.

特に、本実施形態では、左側ワンタッチウィンカスイッチ24Lがオフ状態になった場合に、左側ワンタッチウィンカスイッチ24Lがオフ状態になってから第2所定時間、外界映像が表示され続ける構成とした。
この構成によれば、例えば車線変更等が完了する前に左側ワンタッチウィンカスイッチ24Lがオフ状態になった場合であっても、車線変更等が完了するまで外界映像を継続して確認することができる。また、左側ワンタッチウィンカスイッチ24Lがオフ状態になった時点で、既に車線変更等が完了している場合には、車線変更後等の後続車両の動作を、モニタ15を通して確認することができる。
したがって、モニタ15上に最適な画像を表示して、利便性を向上させることができる。
In particular, in the present embodiment, when the left one-touch blinker switch 24L is turned off, an external image is continuously displayed for a second predetermined time after the left one-touch blinker switch 24L is turned off.
According to this configuration, for example, even if the left one-touch blinker switch 24L is turned off before the lane change or the like is completed, it is possible to continuously check the external image until the lane change or the like is completed. . Further, when the lane change or the like has already been completed when the left one-touch blinker switch 24L is turned off, the operation of the subsequent vehicle after the lane change or the like can be confirmed through the monitor 15.
Therefore, it is possible to display an optimal image on the monitor 15 and improve convenience.

なお、本発明の技術範囲は、上述した各実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲において、上述した実施形態に種々の変更を加えたものを含む。すなわち、上述した実施形態で挙げた構成等はほんの一例に過ぎず、適宜変更が可能である。
例えば、上述した実施形態では、運転席が右側に配設された車両において、左側(助手席側)のサイドミラー16Lに外界カメラ13を取り付けた場合について説明したが、これに限らず、運転席が左側に配設された車両において、右側のサイドミラー16Rに外界カメラ13を取り付けても構わない。つまり、サイドミラー16R,16Lのうち、少なくとも運転席側とは反対側のサイドミラーに外界カメラ13が取り付けられていれば構わ
ない。
The technical scope of the present invention is not limited to the above-described embodiments, and includes those in which various modifications are made to the above-described embodiments without departing from the spirit of the present invention. In other words, the configuration described in the above-described embodiment is merely an example, and can be changed as appropriate.
For example, in the above-described embodiment, the case where the external camera 13 is attached to the side mirror 16L on the left side (passenger seat side) in the vehicle in which the driver seat is disposed on the right side is described. May be attached to the right side mirror 16R. That is, it is only necessary that the external camera 13 is attached to at least the side mirror on the side opposite to the driver seat side among the side mirrors 16R and 16L.

また、上述した実施形態では、半押し状態の解除後、第1所定時間経過後を左側ワンタッチウィンカスイッチ24Lのオフ状態として判断したが、これに限らず、半押し状態を解除した時点を左側ワンタッチウィンカスイッチ24Lのオフ状態としても構わない。
この場合、上述した実施形態では、半押し状態が解除されてから第1所定時間を経過した後、第2所定時間経過したか否かを判断する構成としたが、これに限らず、半押し状態が解除されてから所定時間(本実施形態における第1所定時間+第2所定時間)経過したか否かを判断しても構わない。
In the above-described embodiment, after the half-pressed state is released, after the first predetermined time has elapsed, it is determined that the left one-touch blinker switch 24L is in the off state. The blinker switch 24L may be turned off.
In this case, in the above-described embodiment, it is configured to determine whether or not the second predetermined time has elapsed after the first predetermined time has elapsed since the half-pressed state was released. It may be determined whether a predetermined time (first predetermined time + second predetermined time in the present embodiment) has elapsed since the state was released.

また、上述した実施形態では、全押し状態でオン状態となるウィンカスイッチ23R,23Lと、半押し状態でオン状態となるワンタッチウィンカスイッチ24R,24Lと、を別々に設ける構成について説明したが、これに限らず、一つの作動スイッチによって半押し状態(ワンタッチウィンカスイッチ24R,24Lのオン状態)と、全押し状態(ウィンカスイッチ23R,23Lのオン状態)と、を検出しても構わない。   In the above-described embodiment, the description has been given of the configuration in which the blinker switches 23R and 23L that are turned on when fully pressed and the one-touch blinker switches 24R and 24L that are turned on when half-pressed are separately provided. In addition, the half-pressed state (one-touch blinker switches 24R and 24L is on) and the fully-pressed state (blinkers switches 23R and 23L are on) may be detected by a single operation switch.

さらに、上述した実施形態では、左側ウィンカスイッチ23Lがオフ状態になった場合に、直ぐ外界映像の表示をオフする構成について説明したが、これに限らず、左側ワンタッチウィンカスイッチ24Lがオフ状態になってから所定時間経過前に外界映像の表示がオフされていれば構わない。
また、モニタ15には、外界映像及びナビゲーション画像の他に、オーディオ画像等、各種画像の中から選択的に切り替えて表示しても構わない。
また、半押し状態の解除後のウィンカランプの点滅回数や、所定時間等は、適宜設計変更が可能である。
Further, in the above-described embodiment, the configuration in which the display of the external image is immediately turned off when the left blinker switch 23L is turned off has been described. However, the present invention is not limited to this, and the left one-touch blinker switch 24L is turned off. As long as the display of the outside world video is turned off before the predetermined time has passed.
Further, the monitor 15 may be selectively switched from various images such as an audio image in addition to the external image and the navigation image.
In addition, the number of blinking blinker lamps after the half-pressed state is released, the predetermined time, and the like can be appropriately changed.

また、ウィンカ装置14は、レバースイッチに限らず、タッチスイッチ等を用いても構わない。
さらに、上述した実施形態では、ステップS1において左側ワンタッチウィンカスイッチ24Lのオン、オフの判断後、ステップS2において左側ウィンカスイッチ23Lのオン、オフの判断を行う構成としたが、ステップS1とステップS2とを逆に行っても構わない。
また、表示手段は、上述したモニタ15に限らず、各種走行状態量を表示する計器類と一体化または計器類の近傍に配置される表示装置や、フロンとウィンドウにおいて運転者の前方視界を妨げない位置に各種情報を表示するヘッドアップディスプレイ等で構成することも可能である。
また、外界カメラ13の視野角は、自車両の後側方領域、及びサイドミラーの視認範囲外の死角領域が撮影可能であれば、適宜設計変更が可能である。
The blinker device 14 is not limited to a lever switch, and a touch switch or the like may be used.
Further, in the above-described embodiment, after determining whether the left one-touch blinker switch 24L is turned on or off in step S1, it is determined whether the left blinker switch 23L is turned on or off in step S2. However, in steps S1 and S2, You may go the other way around.
Further, the display means is not limited to the monitor 15 described above, and obstructs the driver's front view in a display device that is integrated with or arranged in the vicinity of the instruments that display various travel state quantities, or in the windows and windows. It is also possible to configure with a head-up display or the like that displays various types of information at a non-existing position.
The viewing angle of the external camera 13 can be appropriately changed as long as the rear side area of the host vehicle and the blind spot area outside the viewing range of the side mirror can be photographed.

10…運転支援装置 11…ナビゲーション装置 13…外界カメラ(撮影手段) 14…ウィンカ装置 15…モニタ(表示手段) 16L…左側サイドミラー(サイドミラー) 18…表示切替装置(表示手段) 23L…左側ウィンカスイッチ(ウィンカスイッチ) 24L…左側ワンタッチウィンカスイッチ(ワンタッチウィンカスイッチ) Z1…後側方領域 Z2…死角領域 DESCRIPTION OF SYMBOLS 10 ... Driving assistance device 11 ... Navigation device 13 ... External camera (photographing means) 14 ... Winker device 15 ... Monitor (display means) 16L ... Left side mirror (side mirror) 18 ... Display switching device (display means) 23L ... Left blinker Switch (blinker switch) 24L ... Left side one-touch blinker switch (one-touch blinker switch) Z1 ... Rear side area Z2 ... Blind area

Claims (1)

車両に設けられ該車両の後側方領域、及び該後側方領域に隣接するサイドミラーの視認範囲外の死角領域を撮影可能な撮影手段と、
該撮影手段が撮影した映像を前記車両の運転者に視認可能に表示する表示手段と、
前記車両の左右移動を合図するウィンカ装置と、を備える運転支援装置において、
前記ウィンカ装置は、
運転者の操作によりオン状態、及びオフ状態が切り替えられるウィンカスイッチと、
運転者の操作によりオン状態とされ、その後自動的にオフ状態となるワンタッチウィンカスイッチと、を備え、
前記表示手段は、前記ワンタッチウィンカスイッチがオン状態になった場合に前記映像を表示し、その後、前記ワンタッチウィンカスイッチがオフ状態になった場合に前記映像を所定時間表示し続ける一方、前記ウィンカスイッチがオン状態になった場合に前記映像を表示し、前記ウィンカスイッチがオフ状態になった場合に前記所定時間経過前に前記映像の表示をオフすることを特徴とする運転支援装置。
An imaging means provided in a vehicle and capable of shooting a rear side area of the vehicle and a blind spot area outside a viewing range of a side mirror adjacent to the rear side area;
Display means for displaying the video imaged by the imaging means so as to be visible to the driver of the vehicle;
In a driving support device comprising: a winker device that signals a left-right movement of the vehicle,
The winker device is
A winker switch that can be switched between an on state and an off state by a driver's operation
A one-touch blinker switch that is turned on by a driver's operation and then automatically turned off;
The display means displays the image when the one-touch blinker switch is turned on, and then continues to display the image for a predetermined time when the one-touch blinker switch is turned off. The driving support device, wherein the video is displayed when the vehicle is turned on, and the video display is turned off before the predetermined time elapses when the blinker switch is turned off.
JP2012181061A 2012-08-17 2012-08-17 Driving assistance device Active JP5885619B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012181061A JP5885619B2 (en) 2012-08-17 2012-08-17 Driving assistance device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012181061A JP5885619B2 (en) 2012-08-17 2012-08-17 Driving assistance device

Publications (2)

Publication Number Publication Date
JP2014038520A true JP2014038520A (en) 2014-02-27
JP5885619B2 JP5885619B2 (en) 2016-03-15

Family

ID=50286609

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012181061A Active JP5885619B2 (en) 2012-08-17 2012-08-17 Driving assistance device

Country Status (1)

Country Link
JP (1) JP5885619B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017074901A (en) * 2015-10-16 2017-04-20 日産自動車株式会社 Steering unit and control method therefor
JP2018103767A (en) * 2016-12-26 2018-07-05 トヨタ自動車株式会社 Lane change support device
JP2020088606A (en) * 2018-11-26 2020-06-04 本田技研工業株式会社 Video display device
EP4105083A1 (en) * 2021-06-18 2022-12-21 Volvo Car Corporation Monitoring system for a vehicle

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62210149A (en) * 1986-03-08 1987-09-16 Mataharii Denki Shokai:Kk Winker device
US20030137586A1 (en) * 2002-01-22 2003-07-24 Infinite Innovations, Inc. Vehicle video switching system and method
JP2008022125A (en) * 2006-07-11 2008-01-31 Honda Motor Co Ltd Driving support apparatus
JP2008100596A (en) * 2006-10-18 2008-05-01 Yamaha Motor Co Ltd Rear side visual recognition device
JP2008195220A (en) * 2007-02-13 2008-08-28 Denso Corp Traffic lane change support device and program

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62210149A (en) * 1986-03-08 1987-09-16 Mataharii Denki Shokai:Kk Winker device
US20030137586A1 (en) * 2002-01-22 2003-07-24 Infinite Innovations, Inc. Vehicle video switching system and method
JP2008022125A (en) * 2006-07-11 2008-01-31 Honda Motor Co Ltd Driving support apparatus
JP2008100596A (en) * 2006-10-18 2008-05-01 Yamaha Motor Co Ltd Rear side visual recognition device
JP2008195220A (en) * 2007-02-13 2008-08-28 Denso Corp Traffic lane change support device and program

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017074901A (en) * 2015-10-16 2017-04-20 日産自動車株式会社 Steering unit and control method therefor
JP2018103767A (en) * 2016-12-26 2018-07-05 トヨタ自動車株式会社 Lane change support device
JP2020088606A (en) * 2018-11-26 2020-06-04 本田技研工業株式会社 Video display device
JP7128096B2 (en) 2018-11-26 2022-08-30 本田技研工業株式会社 Video display device
EP4105083A1 (en) * 2021-06-18 2022-12-21 Volvo Car Corporation Monitoring system for a vehicle
US11865974B2 (en) 2021-06-18 2024-01-09 Volvo Car Corporation Monitoring system for a vehicle

Also Published As

Publication number Publication date
JP5885619B2 (en) 2016-03-15

Similar Documents

Publication Publication Date Title
JP5836490B2 (en) Driving assistance device
JP5117003B2 (en) Driving assistance device
JP4855158B2 (en) Driving assistance device
JP6413207B2 (en) Vehicle display device
JP5723106B2 (en) Vehicle display device and vehicle display method
JP6510642B2 (en) Method for activating a driver assistance system of a motor vehicle, driver assistance system, and motor vehicle
JP6014433B2 (en) Image processing apparatus, image processing method, and image processing system
JP4962788B2 (en) Vehicle periphery monitoring device
JP2018116429A (en) Vehicle control device
JP2008022267A (en) Drive assisting method and drive assisting device
JP4784572B2 (en) Driving support method and driving support device
JP2003200755A (en) Displaying device for vehicle
JP2009057010A (en) In-vehicle display device
JP2008018760A (en) Driving support device
JP2008280026A (en) Driving assistance device
JP2005136561A (en) Vehicle peripheral picture display device
JP2008279875A (en) Parking support device
JP5885619B2 (en) Driving assistance device
JP2008100596A (en) Rear side visual recognition device
JP2008099201A (en) Method and device for supporting driving
WO2018105052A1 (en) Display control device, display system, and display control method
JP2019116244A (en) vehicle
JP2007069756A (en) Vehicle input operation restricting device
JP4218453B2 (en) Vehicle forward visibility support device
JP2009105741A (en) In-vehicle perimeter monitoring system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141128

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150630

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150707

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150820

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160202

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160209

R150 Certificate of patent or registration of utility model

Ref document number: 5885619

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150