JP2012227605A - Periphery monitoring device - Google Patents

Periphery monitoring device Download PDF

Info

Publication number
JP2012227605A
JP2012227605A JP2011091201A JP2011091201A JP2012227605A JP 2012227605 A JP2012227605 A JP 2012227605A JP 2011091201 A JP2011091201 A JP 2011091201A JP 2011091201 A JP2011091201 A JP 2011091201A JP 2012227605 A JP2012227605 A JP 2012227605A
Authority
JP
Japan
Prior art keywords
driver
operation timing
timing
vehicle
periphery monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011091201A
Other languages
Japanese (ja)
Other versions
JP5644647B2 (en
Inventor
Ryuji Okamura
竜路 岡村
Yu Hiei
悠 日栄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2011091201A priority Critical patent/JP5644647B2/en
Publication of JP2012227605A publication Critical patent/JP2012227605A/en
Application granted granted Critical
Publication of JP5644647B2 publication Critical patent/JP5644647B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a periphery monitoring device capable of suppressing discomfort against a distance sense and speed sense.SOLUTION: The periphery monitoring device 1 includes: a display section 21 that images the periphery of a vehicle with a camera 22 and presents the captured image to a driver; an electronic mirror timing acquisition section 32 that acquires operation timing of driving operation by the driver in use of the display section 21; and a comparison section 34 that corrects the image presented to the driver with the display section 21 according to the operation timing.

Description

本発明は、周辺画像を運転者に提供する周辺監視装置に関する。   The present invention relates to a periphery monitoring device that provides a driver with a periphery image.

近年、車両のサイドミラーの代わりに後側方を撮像し、撮像された画像を運転者に提示する装置(以下、本明細書で「電子ミラー」ともいう)知られている。例えば、特許文献1に記載の装置では、外界カメラが撮像した画像がサイドミラーに映る像と略同等の大きさになるように拡大表示することで、距離感の相違に起因する運転者が感じる違和感を軽減している。   2. Description of the Related Art In recent years, an apparatus that captures a rear side instead of a side mirror of a vehicle and presents the captured image to a driver (hereinafter also referred to as “electronic mirror” in the present specification) is known. For example, in the apparatus described in Patent Document 1, the driver feels due to a difference in distance feeling by enlarging and displaying an image captured by an external camera so that the image is substantially the same size as the image reflected on the side mirror. It reduces the sense of incongruity.

特開2008−022125号公報JP 2008-022125 A

しかし、運転者が電子ミラーを用いる際に感じる自車両と障害物との距離感及び速度感と、当該運転者がサイドミラーを用いる際に感じる距離感及び速度感とは相違することがある。そのため、特許文献1のように外界カメラが撮像した画像がサイドミラーに映る像と略同等の大きさになるように拡大表示しても、運転者によっては違和感を覚えることがあり、違和感の軽減は十分なものではなかった。   However, the sense of distance and the sense of speed between the host vehicle and the obstacle that the driver feels when using the electronic mirror may differ from the sense of distance and sense of speed that the driver feels when using the side mirror. Therefore, even if an image captured by an external camera as in Patent Document 1 is enlarged and displayed so as to be approximately the same size as an image reflected on a side mirror, some drivers may feel uncomfortable, reducing the uncomfortable feeling. Was not enough.

本発明は、そのような事情に鑑みてなされたものであり、距離感や速度感に対する違和感を抑制することができる周辺監視装置を提供することを課題とする。   This invention is made | formed in view of such a situation, and makes it a subject to provide the periphery monitoring apparatus which can suppress the discomfort with respect to a feeling of distance and a feeling of speed.

上記課題を解決するため、本発明に係る周辺監視装置は、車両の周辺を撮像し、撮像された画像を運転者に提示する提示手段と、提示手段を使用時の運転者による運転操作の操作タイミングを取得する取得手段と、取得手段により取得された操作タイミングに応じて提示手段により運転者に提示される画像を補正する補正手段とを備える。   In order to solve the above-described problem, the periphery monitoring device according to the present invention captures the periphery of a vehicle, presents the captured image to the driver, and operates the driving operation by the driver when using the presenting means. Acquisition means for acquiring timing, and correction means for correcting an image presented to the driver by the presentation means in accordance with the operation timing acquired by the acquisition means.

このような発明によれば、提示手段を使用時の運転者による運転操作の操作タイミングに応じて運転者に提示される画像が補正される。この場合、運転者の操作タイミングを考慮して運転者が感じる距離感や速度感が修正できるため、距離感や速度感に対する違和感を抑制することができる。   According to such an invention, the image presented to the driver is corrected according to the operation timing of the driving operation by the driver when using the presentation means. In this case, since the sense of distance and the sense of speed felt by the driver can be corrected in consideration of the operation timing of the driver, it is possible to suppress a sense of discomfort with respect to the sense of distance and sense of speed.

本発明に係る周辺監視装置では、補正手段は、提示手段により運転者に提示される画像の表示倍率を変更してもよい。   In the periphery monitoring device according to the present invention, the correcting means may change the display magnification of the image presented to the driver by the presenting means.

この場合、表示倍率を変更することで、運転者が感じる距離感や速度感を適切に変更することができる。   In this case, by changing the display magnification, it is possible to appropriately change the sense of distance and the sense of speed that the driver feels.

本発明に係る周辺監視装置は、取得手段は、提示手段を使用していない時の運転者による運転操作の操作タイミングを更に取得し、補正手段は、提示手段を使用時の運転者による運転操作の操作タイミングが、提示手段を使用していない時の運転者による運転操作の操作タイミングよりも早いほど提示手段により運転者に提示される表示画像の表示倍率を高くしてもよい。   In the periphery monitoring device according to the present invention, the acquisition unit further acquires the operation timing of the driving operation by the driver when the presentation unit is not used, and the correction unit performs the driving operation by the driver when the presentation unit is used. The display magnification of the display image presented to the driver by the presenting means may be increased as the operation timing is earlier than the operation timing of the driving operation by the driver when the presenting means is not used.

この場合、提示手段を使用時の運転者による運転操作の操作タイミングが提示手段を使用していない時の運転者による運転操作の操作タイミングよりも早いほど提示手段により運転者に提示される表示画像の表示倍率が高くなるため、運転者が感じる距離感や速度感を提示手段を使用していない時のものに近づけることができる。   In this case, the display image presented to the driver by the presenting means is earlier as the operation timing of the driving operation by the driver when using the presenting means is earlier than the operation timing of the driving operation by the driver when not using the presenting means. Therefore, the sense of distance and sense of speed felt by the driver can be brought close to those when the presenting means is not used.

本発明に係る周辺監視装置は、車両の走行状態を検出する走行状態検出手段を更に備え、取得手段は、走行状態検出手段により検出された走行状態における運転者による運転操作の操作タイミングを取得し、補正手段は、取得手段により取得された該走行状態における操作タイミングに応じて提示手段により運転者に提示される画像を補正してもよい。   The periphery monitoring device according to the present invention further includes a traveling state detecting unit that detects a traveling state of the vehicle, and the acquiring unit acquires the operation timing of the driving operation by the driver in the traveling state detected by the traveling state detecting unit. The correcting means may correct the image presented to the driver by the presenting means according to the operation timing in the traveling state acquired by the acquiring means.

車両の走行状態によって、運転者が電子ミラーを用いる際に感じる自車両と障害物との距離感及び速度感が異なる傾向にあるため、操作タイミングを異なる走行状態毎に比較することにより運転者が感じる距離感及び速度感に対する違和感を抑制することができる。   Depending on the driving state of the vehicle, the distance feeling and speed feeling between the host vehicle and the obstacle that the driver feels when using the electronic mirror tend to be different, so by comparing the operation timing for each different driving state, the driver can A sense of incongruity with the sense of distance and the sense of speed can be suppressed.

本発明によれば、運転者が異なる場合にも距離感や速度感に対する違和感を抑制することができる。   According to the present invention, a sense of discomfort with respect to a sense of distance or a sense of speed can be suppressed even when the drivers are different.

本発明に係る周辺監視装置の機能構成を示すブロック図である。It is a block diagram which shows the function structure of the periphery monitoring apparatus which concerns on this invention. 車両に搭載される電子ミラーの概略を示す図である。It is a figure which shows the outline of the electronic mirror mounted in a vehicle. 本発明に係る周辺監視装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the periphery monitoring apparatus which concerns on this invention.

以下、添付図面を参照して本発明の実施の形態について詳細に説明する。なお、図面の説明において、同一の要素には同一の符号を付し、重複する説明を省略する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the description of the drawings, the same elements are denoted by the same reference numerals, and redundant description is omitted.

図1は、本発明に係る周辺監視装置1の機能構成を示すブロック図である。周辺監視装置1は、自動車等の車両に搭載される。この周辺監視装置1は、電子ミラー起動スイッチ11、レーダ12、舵角センサ13、シフトセンサ14、車速センサ15、周辺監視ECU(Electronic Control Unit)3、表示部21、及びカメラ22を備えている。   FIG. 1 is a block diagram showing a functional configuration of a periphery monitoring device 1 according to the present invention. The periphery monitoring device 1 is mounted on a vehicle such as an automobile. The periphery monitoring device 1 includes an electronic mirror activation switch 11, a radar 12, a rudder angle sensor 13, a shift sensor 14, a vehicle speed sensor 15, a periphery monitoring ECU (Electronic Control Unit) 3, a display unit 21, and a camera 22. .

電子ミラー起動スイッチ11は、運転者が電子ミラーの起動及び停止を行うためのものである。電子ミラー起動スイッチ11は、運転席の操作パネル上に設置され運転者によって操作される。   The electronic mirror start switch 11 is for the driver to start and stop the electronic mirror. The electronic mirror activation switch 11 is installed on the operation panel of the driver's seat and operated by the driver.

レーダ12は、障害物との距離を測定する距離検出手段として機能するものであって、例えば電磁波を水平面内でスキャンしながら送信し、物体に反射して戻ってくる反射波を受信し、受信信号の周波数変化から物体の有無、車両から見た物体の方位、車両から物体までの距離、車両に対する物体の相対速度等の情報を取得する。レーダ12としては、例えば、レーザレーダ、ミリ波レーダがある。レーダ12は、検出した物体に関する各種情報を周辺監視ECU3に出力する。   The radar 12 functions as a distance detection unit that measures the distance to an obstacle. For example, the radar 12 transmits an electromagnetic wave while scanning in a horizontal plane, receives a reflected wave that is reflected back to the object, and receives it. Information such as the presence / absence of an object, the orientation of the object viewed from the vehicle, the distance from the vehicle to the object, the relative speed of the object with respect to the vehicle, and the like is acquired from the frequency change of the signal. Examples of the radar 12 include a laser radar and a millimeter wave radar. The radar 12 outputs various types of information related to the detected object to the periphery monitoring ECU 3.

舵角センサ13は、自車両の舵角を検出するセンサであって、例えばステアリングシャフトの回転角(操舵角)を検出することによって自車両の舵角を検出する。舵角センサ13は、検出した舵角を舵角信号として周辺監視ECU3に出力する。   The steering angle sensor 13 is a sensor that detects the steering angle of the host vehicle, and detects the steering angle of the host vehicle, for example, by detecting the rotation angle (steering angle) of the steering shaft. The steering angle sensor 13 outputs the detected steering angle to the periphery monitoring ECU 3 as a steering angle signal.

シフトセンサ14は、変速機のシフトレバーのシフト位置を取得する機能を有している。シフト位置として、例えば、「パーキング(P)」、「リバース(R)」、「ニュートラル(N)」、「ドライブ(D)」、「ロー(L)」などがある。シフトセンサ14は、変速機のシフト位置に関する情報を周辺監視ECU3に出力する。   The shift sensor 14 has a function of acquiring the shift position of the shift lever of the transmission. Examples of the shift position include “parking (P)”, “reverse (R)”, “neutral (N)”, “drive (D)”, “low (L)”, and the like. The shift sensor 14 outputs information related to the shift position of the transmission to the periphery monitoring ECU 3.

車速センサ15は、車両の速度を検出するセンサであって、例えば車両の車輪に取り付けられており、車輪の回転速度を検出する。車速センサ15は、検出した車速を車速信号として周辺監視ECU3に出力する。   The vehicle speed sensor 15 is a sensor that detects the speed of the vehicle, and is attached to, for example, a wheel of the vehicle, and detects the rotational speed of the wheel. The vehicle speed sensor 15 outputs the detected vehicle speed to the periphery monitoring ECU 3 as a vehicle speed signal.

表示部21は、運転席に設けられており、カメラ22で撮像された車両周辺の状況を、映像として運転者に提示する。表示部21は、後述する比較部34から制御信号を受信することにより、表示倍率を変更することができる。   The display unit 21 is provided in the driver's seat and presents the situation around the vehicle imaged by the camera 22 to the driver as an image. The display unit 21 can change the display magnification by receiving a control signal from the comparison unit 34 described later.

カメラ22は、車両の周辺状況を撮像し、撮像した画像を表示部21に送信する。カメラ22は、比較部34から制御信号を受信することにより、ズームイン、又はズームアウトして撮像することができる。表示部21及びカメラ22は、車両の周辺を撮像し、撮像された画像を運転者に提示する提示手段を構成する。   The camera 22 captures the situation around the vehicle and transmits the captured image to the display unit 21. The camera 22 can capture an image by zooming in or out by receiving a control signal from the comparison unit 34. The display unit 21 and the camera 22 constitute a presentation unit that captures an image of the periphery of the vehicle and presents the captured image to the driver.

周辺監視ECU3は、CPU[CentralProcessing Unit]や各種メモリなどからなり、周辺監視装置1を統括制御する。周辺監視ECU3は、サイドミラータイミング取得部31、電子ミラータイミング取得部32、走行状態判断部33、及び比較部34を備えている。   The periphery monitoring ECU 3 includes a CPU [Central Processing Unit], various memories, and the like, and comprehensively controls the periphery monitoring device 1. The periphery monitoring ECU 3 includes a side mirror timing acquisition unit 31, an electronic mirror timing acquisition unit 32, a traveling state determination unit 33, and a comparison unit 34.

サイドミラータイミング取得部31は、レーダ12及び舵角センサ13に基づいて、サイドミラーを使用時の運転者による運転操作の操作タイミングを取得する。サイドミラーを用いているか否かは、電子ミラー起動スイッチ11の出力に基づいて判断する。サイドミラータイミング取得部31は、検出した運転者の操作タイミングを運転者毎に取得して記憶する。   The side mirror timing acquisition unit 31 acquires the operation timing of the driving operation by the driver when using the side mirror based on the radar 12 and the steering angle sensor 13. Whether or not the side mirror is used is determined based on the output of the electronic mirror start switch 11. The side mirror timing acquisition unit 31 acquires and stores the detected driver operation timing for each driver.

サイドミラータイミング取得部31は、運転操作として車線変更時の運転者の操作タイミングを検出してもよい。この場合、例えば、サイドミラータイミング取得部31は、自車両の後側方に存在する障害物との距離をレーダ12から取得し、所定値以上の舵角をとった際の自車両と障害物との距離を操作タイミング(操作距離)として記憶する。   The side mirror timing acquisition unit 31 may detect the operation timing of the driver when changing the lane as the driving operation. In this case, for example, the side mirror timing acquisition unit 31 acquires the distance from the radar 12 to the obstacle existing on the rear side of the host vehicle, and the host vehicle and the obstacle when the steering angle is a predetermined value or more. Is stored as the operation timing (operation distance).

また、サイドミラータイミング取得部31は、運転操作として駐車時の運転者の操作タイミングを検出してもよい。この場合、例えば、サイドミラータイミング取得部31は、自車両の後方に存在する障害物との距離をレーダ12から取得し、所定値以上のブレーキ操作を行った際の自車両と障害物との距離を操作タイミングとして記憶する。   Moreover, the side mirror timing acquisition part 31 may detect the operation timing of the driver at the time of parking as a driving operation. In this case, for example, the side mirror timing acquisition unit 31 acquires the distance to the obstacle existing behind the host vehicle from the radar 12, and performs a braking operation of a predetermined value or more between the host vehicle and the obstacle. The distance is stored as the operation timing.

サイドミラータイミング取得部31は、後述する走行状態判断部33から走行状態を示す信号を検出した場合には、走行状態判断部33から取得した走行状態と取得した操作タイミングとを対応付けて記憶する。   When the side mirror timing acquisition unit 31 detects a signal indicating the driving state from the driving state determination unit 33 described later, the side mirror timing acquisition unit 31 stores the driving state acquired from the driving state determination unit 33 and the acquired operation timing in association with each other. .

電子ミラータイミング取得部32は、レーダ12及び舵角センサ13に基づいて、電子ミラーを使用時の運転者による運転操作の操作タイミングを取得する。電子ミラーを用いているか否かは、電子ミラー起動スイッチ11の出力に基づいて判断する。電子ミラータイミング取得部32は、検出した運転者の操作タイミングを比較部34に出力する。   The electronic mirror timing acquisition unit 32 acquires the operation timing of the driving operation by the driver when using the electronic mirror based on the radar 12 and the steering angle sensor 13. Whether or not an electronic mirror is used is determined based on the output of the electronic mirror activation switch 11. The electronic mirror timing acquisition unit 32 outputs the detected operation timing of the driver to the comparison unit 34.

電子ミラーは、図2に示すように、カメラ22により自車両の後側方を撮像し、撮像された画像を車両内部に設けられる表示部21に表示して運転者に提示する装置である。   As shown in FIG. 2, the electronic mirror is a device that captures the rear side of the host vehicle with the camera 22, displays the captured image on a display unit 21 provided inside the vehicle, and presents it to the driver.

電子ミラータイミング取得部32は、上述したサイドミラータイミング取得部31と同様の方法により、電子ミラー使用時の運転者による操作タイミングを運転者毎に取得して記憶する。   The electronic mirror timing acquisition unit 32 acquires and stores the operation timing by the driver for each driver when the electronic mirror is used, by the same method as the side mirror timing acquisition unit 31 described above.

電子ミラータイミング取得部32は、後述する走行状態判断部33から走行状態を示す信号を検出した場合には、走行状態判断部33から取得した走行状態と検出した操作タイミングとを対応付けて記憶する。サイドミラータイミング取得部31、電子ミラータイミング取得部32は、操作タイミングを取得する取得手段を構成する。   When the electronic mirror timing acquisition unit 32 detects a signal indicating the driving state from the driving state determination unit 33 described later, the electronic mirror timing acquisition unit 32 stores the driving state acquired from the driving state determination unit 33 and the detected operation timing in association with each other. . The side mirror timing acquisition unit 31 and the electronic mirror timing acquisition unit 32 constitute acquisition means for acquiring operation timing.

走行状態判断部33は、シフトセンサ14及び車速センサ15の出力に基づいて自車両の走行状態を判断する。車両の走行状態としては、例えば通常走行状態、高速走行状態、及び駐車状態が存在する。走行状態判断部33は、例えば車速センサ15により取得した車速が所定の閾値以上(例えば60km/h)であるか否かを判断し、車速が閾値より小さい場合には走行状態として通常走行状態を設定し、車速が閾値以上である場合には走行状態として高速走行状態を設定する。また、走行状態判断部33は、例えばシフトセンサ14よりシフト位置に関する情報として「リバース(R)」を取得した場合には、走行状態として駐車状態を設定する。走行状態判断部33は、判断した車両の走行状態を示す信号をサイドミラータイミング取得部31、電子ミラータイミング取得部32、及び比較部34に出力する。走行状態判断部33は、車両の走行状態を検出する走行状態検出手段を構成する。   The traveling state determination unit 33 determines the traveling state of the host vehicle based on the outputs of the shift sensor 14 and the vehicle speed sensor 15. As a running state of the vehicle, for example, there are a normal running state, a high-speed running state, and a parking state. For example, the traveling state determination unit 33 determines whether the vehicle speed acquired by the vehicle speed sensor 15 is equal to or higher than a predetermined threshold (for example, 60 km / h). If the vehicle speed is lower than the threshold, the traveling state is set as the traveling state. When the vehicle speed is equal to or higher than the threshold, the high speed driving state is set as the driving state. For example, when “reverse (R)” is acquired as information regarding the shift position from the shift sensor 14, the traveling state determination unit 33 sets the parking state as the traveling state. The traveling state determination unit 33 outputs a signal indicating the determined traveling state of the vehicle to the side mirror timing acquisition unit 31, the electronic mirror timing acquisition unit 32, and the comparison unit 34. The traveling state determination unit 33 constitutes a traveling state detection unit that detects the traveling state of the vehicle.

比較部34は、サイドミラータイミング取得部31及び電子ミラータイミング取得部32に記憶される運転者の操作タイミングを取得し、それぞれの操作タイミングに基づいて表示部21及びカメラ22を制御する。比較部34は、電子ミラータイミング取得部32により取得された運転者の操作タイミングが、サイドミラータイミング取得部31により取得された運転者の操作タイミングよりも早いほど表示部21に表示される画像の表示倍率を高くする。また、表示部21に表示される画像の表示倍率は変更せず、カメラ22をズームイン、又はズームアウトさせることにより、表示部21に表示される画像を拡大、縮小させてもよい。比較部34は、操作タイミングに応じて提示手段により運転者に提示される画像を補正する補正手段を構成する。   The comparison unit 34 acquires the operation timing of the driver stored in the side mirror timing acquisition unit 31 and the electronic mirror timing acquisition unit 32, and controls the display unit 21 and the camera 22 based on each operation timing. The comparison unit 34 displays an image displayed on the display unit 21 as the driver operation timing acquired by the electronic mirror timing acquisition unit 32 is earlier than the driver operation timing acquired by the side mirror timing acquisition unit 31. Increase the display magnification. In addition, the display magnification of the image displayed on the display unit 21 may not be changed, and the image displayed on the display unit 21 may be enlarged or reduced by zooming in or out of the camera 22. The comparison unit 34 constitutes a correction unit that corrects an image presented to the driver by the presentation unit according to the operation timing.

比較部34は、走行状態判断部33から走行状態を示す信号を取得した場合には、取得した走行状態に対応付けられている操作タイミング同士を比較する。走行状態として高速走行状態を取得した場合を例として、以下にこの比較処理を具体的に説明する。   When the comparison unit 34 acquires a signal indicating the travel state from the travel state determination unit 33, the comparison unit 34 compares the operation timings associated with the acquired travel state. The comparison process will be specifically described below by taking as an example a case where a high-speed traveling state is acquired as a traveling state.

比較部34は、走行状態判断部33から高速走行状態を示す信号を取得すると、サイドミラータイミング取得部31が記憶している複数の操作タイミングの中から自車両を運転する運転者に対応付けられており、且つ高速走行状態に対応付けられている操作タイミングd1を取得する。また、比較部34は、電子ミラータイミング検出器32が記憶している複数の操作タイミングの中から自車両を運転する運転者に対応付けられており、且つ高速走行状態に対応付けられている操作タイミングd2を取得する。ここで、比較部34が取得する操作タイミングは車線変更に関するものであり、操作タイミングd1,d2は運転者が車線変更を行った際の自車両と後側方に存在する車両との距離であるものとする。   When the comparison unit 34 acquires a signal indicating the high-speed driving state from the driving state determination unit 33, the comparison unit 34 is associated with the driver driving the host vehicle from among a plurality of operation timings stored in the side mirror timing acquisition unit 31. And the operation timing d1 associated with the high-speed running state is acquired. Moreover, the comparison part 34 is matched with the driver | operator who drives the own vehicle out of the several operation timing which the electronic mirror timing detector 32 memorize | stored, and is matched with the high-speed driving state. The timing d2 is acquired. Here, the operation timing acquired by the comparison unit 34 relates to the lane change, and the operation timings d1 and d2 are distances between the own vehicle and the vehicle existing on the rear side when the driver changes the lane. Shall.

比較部34は、操作タイミングd1と操作タイミングd2との差分を求め、その絶対値が所定の閾値以上であるか否かを判定する。ここで、所定の閾値は、予め設定される設定値である。この設定値としては、取得された走行状態毎に異なる値が設定されてもよい。   The comparison unit 34 obtains a difference between the operation timing d1 and the operation timing d2, and determines whether or not the absolute value is equal to or greater than a predetermined threshold value. Here, the predetermined threshold is a preset value. As this set value, a different value may be set for each acquired traveling state.

操作タイミングd1と操作タイミングd2との差分の絶対値が所定の閾値以上であって、d1<d2である場合は、比較部34は表示部21に制御信号を送信し、表示部21の表示倍率を低くする。一方、操作タイミングd1と操作タイミングd2との差分の絶対値が所定の閾値以上であって、d1>d2である場合は、比較部34は表示部21に制御信号を送信し、表示部21の表示倍率を高くする。なお、操作タイミングd1と操作タイミングd2との差分の絶対値が所定の閾値よりも小さい場合、比較部34は表示部21の表示倍率を変更しない。   When the absolute value of the difference between the operation timing d1 and the operation timing d2 is equal to or greater than a predetermined threshold and d1 <d2, the comparison unit 34 transmits a control signal to the display unit 21, and the display magnification of the display unit 21 is displayed. Lower. On the other hand, when the absolute value of the difference between the operation timing d1 and the operation timing d2 is equal to or greater than a predetermined threshold and d1> d2, the comparison unit 34 transmits a control signal to the display unit 21, and Increase the display magnification. When the absolute value of the difference between the operation timing d1 and the operation timing d2 is smaller than a predetermined threshold, the comparison unit 34 does not change the display magnification of the display unit 21.

すなわち、電子ミラーを用いた場合の車線変更における車間距離がサイドミラーを用いた場合の車線変更における車間距離よりも所定値以上大きい場合(つまり、電子ミラーを用いた場合の操作タイミングが遅い場合)には、運転者はサイドミラーを用いた場合と比較して後側方車両が近くにいると感じているといえる。この場合、比較部34が表示部21の表示倍率を低くするで、運転者が感じる後側方車両との距離を遠くする。一方、サイドミラーを用いた場合の車線変更における車間距離が電子ミラーを用いた場合の車線変更における車間距離よりも所定値以上大きい場合(つまり、電子ミラーを用いた場合の操作タイミングが早い場合)には、運転者はサイドミラーを用いた場合と比較して後側方車両が遠くにいると感じているといえる。この場合、比較部34が表示部21の表示倍率を高くすることで、運転者が感じる後側方車両との距離を近くする。これにより、サイドミラーを用いた場合に運転者が感じる車間距離と、電子ミラーを用いた場合に運転者が感じる車間距離とを近づけることができる。言い換えれば、サイドミラーを用いた場合の運転者による操作タイミングと、電子ミラーを用いた場合の運転者による操作タイミングとを近づけることができる。   That is, when the distance between lanes when using an electronic mirror is greater than the distance between lanes when using a side mirror by a predetermined value or more (that is, when the operation timing when using an electronic mirror is late) By the way, it can be said that the driver feels that the rear side vehicle is closer than when the side mirror is used. In this case, the comparison unit 34 reduces the display magnification of the display unit 21, thereby increasing the distance from the rear side vehicle that the driver feels. On the other hand, when the inter-vehicle distance in the lane change when using the side mirror is larger than the inter-vehicle distance in the lane change when using the electronic mirror by a predetermined value or more (that is, when the operation timing when using the electronic mirror is early) In other words, it can be said that the driver feels that the rear side vehicle is farther than when the side mirror is used. In this case, the comparison unit 34 increases the display magnification of the display unit 21 to reduce the distance from the rear side vehicle that the driver feels. Accordingly, the inter-vehicle distance felt by the driver when the side mirror is used can be made closer to the inter-vehicle distance felt by the driver when the electronic mirror is used. In other words, the operation timing by the driver when the side mirror is used can be brought close to the operation timing by the driver when the electronic mirror is used.

次に、本実施形態に係る周辺監視装置1の動作について説明する。   Next, the operation of the periphery monitoring device 1 according to the present embodiment will be described.

図3は、本実施形態に係る周辺監視装置1の動作についてのフローチャートである。ここで、周辺監視装置1は、既に各種走行状態におけるサイドミラー使用時の運転者の操作タイミングがサイドミラータイミング取得部31に記憶されているものとする。図3に示す処理は、例えば周辺監視装置1の電源がONされたタイミングから所定の間隔で繰り返し実行される。   FIG. 3 is a flowchart of the operation of the periphery monitoring device 1 according to the present embodiment. Here, it is assumed that the periphery monitoring device 1 has already stored in the side mirror timing acquisition unit 31 the operation timing of the driver when the side mirror is used in various traveling states. The process shown in FIG. 3 is repeatedly executed at a predetermined interval from the timing when the power of the periphery monitoring device 1 is turned on, for example.

図3に示すように、周辺監視装置1の周辺監視ECU3は、まず運転者が電子ミラーを使用しているか否かを判断する(S1)。この判定は電子ミラー起動スイッチ11に基づいて行われ、電子ミラー起動スイッチ11により電子ミラーが起動されている場合には、電子ミラーを使用していると判断し、電子ミラー起動スイッチ11により電子ミラーが停止されている場合には、電子ミラーを使用していないと判断する。   As shown in FIG. 3, the periphery monitoring ECU 3 of the periphery monitoring device 1 first determines whether or not the driver is using an electronic mirror (S1). This determination is made based on the electronic mirror activation switch 11. When the electronic mirror is activated by the electronic mirror activation switch 11, it is determined that the electronic mirror is used, and the electronic mirror activation switch 11 determines the electronic mirror. When is stopped, it is determined that the electronic mirror is not used.

運転者が電子ミラーを使用していると判断された場合、周辺監視ECU3は、次に走行状態判断部33が走行状態は駐車状態であるか否かを判断する(S2)。自車両の走行状態が駐車状態であると判断された場合、電子ミラータイミング取得部32が駐車状態における運転者のブレーキタイミング(操作タイミング)を検出し、記憶する(S3)。   When it is determined that the driver is using the electronic mirror, the surroundings monitoring ECU 3 next determines whether or not the traveling state determination unit 33 is in the parking state (S2). When it is determined that the traveling state of the host vehicle is the parking state, the electronic mirror timing acquisition unit 32 detects and stores the brake timing (operation timing) of the driver in the parking state (S3).

S2において、走行状態判断部33が自車両の走行状態は駐車状態ではないと判断した場合、走行状態判断部33は、自車両の走行状態が高速走行状態であるか否かを判断する(S4)。自車両の走行状態が高速走行状態であると判断された場合、電子ミラータイミング取得部32が高速走行状態における運転者の車線変更タイミング(操作タイミング)を検出し、記憶する(S5)。一方、自車両の走行状態が高速走行状態でないと判断された場合、電子ミラータイミング取得部32が通常走行状態における運転者の車線変更タイミング(操作タイミング)を検出し、記憶する(S6)。   In S2, when the traveling state determination unit 33 determines that the traveling state of the host vehicle is not a parking state, the traveling state determination unit 33 determines whether the traveling state of the host vehicle is a high speed traveling state (S4). ). When it is determined that the traveling state of the host vehicle is the high-speed traveling state, the electronic mirror timing acquisition unit 32 detects and stores the driver's lane change timing (operation timing) in the high-speed traveling state (S5). On the other hand, when it is determined that the traveling state of the host vehicle is not the high-speed traveling state, the electronic mirror timing acquisition unit 32 detects and stores the driver's lane change timing (operation timing) in the normal traveling state (S6).

S3,S5,S6のいずれかにおいて電子ミラーを用いた場合の操作タイミングが検出されると、次に比較部34は、サイドミラーを用いた場合の操作タイミングを取得する。ここで、取得される操作タイミングは、S2又はS4において検出された走行状態に対応するものであるとよい。   When the operation timing when the electronic mirror is used in any of S3, S5, and S6 is detected, the comparison unit 34 next acquires the operation timing when the side mirror is used. Here, the acquired operation timing may correspond to the traveling state detected in S2 or S4.

次に、比較部34が電子ミラー使用時とサイドミラー使用時とにおける運転者の操作タイミングを比較する(S7)。比較した操作タイミングの差が所定値以上である場合、比較部34が表示部21に制御信号を送信し、表示部21に表示される画像の表示倍率を変更する(S8)。具体的には、比較部34は、電子ミラー使用時の運転者の操作タイミングが、サイドミラー使用時の該運転者の操作タイミングよりも遅い場合には、表示部21の表示画像の表示倍率を低くする。一方、電子ミラー使用時の運転者の操作タイミングが、サイドミラー使用時の該運転者の操作タイミングよりも早い場合には、表示部21の表示画像の表示倍率を高くする。   Next, the comparison unit 34 compares the operation timing of the driver when the electronic mirror is used and when the side mirror is used (S7). If the compared operation timing difference is equal to or greater than the predetermined value, the comparison unit 34 transmits a control signal to the display unit 21 to change the display magnification of the image displayed on the display unit 21 (S8). Specifically, when the operation timing of the driver when using the electronic mirror is later than the operation timing of the driver when using the side mirror, the comparison unit 34 sets the display magnification of the display image on the display unit 21. make low. On the other hand, when the operation timing of the driver when using the electronic mirror is earlier than the operation timing of the driver when using the side mirror, the display magnification of the display image on the display unit 21 is increased.

S8において電子ミラーにおける表示倍率の変更を行うか、S7において電子ミラー使用時とサイドミラー使用時とにおける運転者の操作タイミングの差が所定値以上ではない場合、一連の周辺監視処理は終了する。   If the display magnification of the electronic mirror is changed in S8, or if the difference in the driver's operation timing between the use of the electronic mirror and the use of the side mirror is not greater than or equal to a predetermined value in S7, the series of periphery monitoring processing ends.

S1において、運転者が電子ミラーを使用していないと判断された場合、周辺監視ECU3は、次に走行状態判断部33が走行状態は駐車状態であるか否かを判断する(S9)。自車両の走行状態が駐車状態であると判断された場合、サイドミラータイミング取得部31が駐車状態における運転者のブレーキタイミング(操作タイミング)を検出し、記憶する(S10)。   When it is determined in S1 that the driver is not using the electronic mirror, the surrounding monitoring ECU 3 next determines whether or not the traveling state determination unit 33 is in the parking state (S9). When it is determined that the traveling state of the host vehicle is the parking state, the side mirror timing acquisition unit 31 detects and stores the brake timing (operation timing) of the driver in the parking state (S10).

S8において、自車両の走行状態は駐車状態ではないと判断された場合、走行状態判断部33は、自車両の走行状態が高速走行状態であるか否かを判断する(S11)。自車両の走行状態が高速走行状態であると判断された場合、サイドミラータイミング取得部31が高速走行状態における運転者の車線変更タイミング(操作タイミング)を検出し、記憶する(S12)。一方、自車両の走行状態が高速走行状態でないと判断された場合、サイドミラータイミング取得部31が通常走行状態における運転者の車線変更タイミング(操作タイミング)を検出し、記憶する(S13)。   When it is determined in S8 that the traveling state of the host vehicle is not a parking state, the traveling state determination unit 33 determines whether or not the traveling state of the host vehicle is a high-speed traveling state (S11). When it is determined that the traveling state of the host vehicle is the high-speed traveling state, the side mirror timing acquisition unit 31 detects and stores the driver's lane change timing (operation timing) in the high-speed traveling state (S12). On the other hand, when it is determined that the traveling state of the host vehicle is not the high-speed traveling state, the side mirror timing acquisition unit 31 detects and stores the driver's lane change timing (operation timing) in the normal traveling state (S13).

S8,S10及びS11のいずれかにより、運転者によるサイドミラー使用時の操作タイミングを記憶すると、一連の周辺監視処理は終了する。   When the operation timing at the time of using the side mirror by the driver is stored by any of S8, S10, and S11, the series of periphery monitoring processing ends.

以上説明した本実施形態に係る周辺監視装置1によれば、表示装置21を使用時の運転者による運転操作の操作タイミングに応じて運転者に提示される画像が補正される。この場合、運転者の操作タイミングを考慮して運転者が感じる距離感や速度感が修正されるため、距離感や速度感に対する違和感を抑制することができる。   According to the periphery monitoring device 1 according to the present embodiment described above, the image presented to the driver is corrected according to the operation timing of the driving operation by the driver when using the display device 21. In this case, since the sense of distance and the sense of speed felt by the driver are corrected in consideration of the operation timing of the driver, it is possible to suppress a sense of discomfort with respect to the sense of distance and sense of speed.

尚、本発明は、上記した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。例えば、上記実施形態では、自車両と障害物との距離を操作タイミングとして取得しているが、それ以外の物理量を操作タイミングとして取得してもよい。   It should be noted that the present invention is not limited to the above-described embodiment, and it is needless to say that various modifications can be made without departing from the gist of the present invention. For example, in the above-described embodiment, the distance between the host vehicle and the obstacle is acquired as the operation timing, but other physical quantities may be acquired as the operation timing.

1…周辺監視装置、11…電子ミラー起動スイッチ、12…レーダ、13…舵角センサ、14…シフトセンサ、15…車速センサ、21…表示部、22…カメラ、31…サイドミラータイミング取得部、32…電子ミラータイミング取得部、33…走行状態判断部、34…比較部。   DESCRIPTION OF SYMBOLS 1 ... Perimeter monitoring apparatus, 11 ... Electronic mirror starting switch, 12 ... Radar, 13 ... Steering angle sensor, 14 ... Shift sensor, 15 ... Vehicle speed sensor, 21 ... Display part, 22 ... Camera, 31 ... Side mirror timing acquisition part, 32 ... an electronic mirror timing acquisition unit, 33 ... a running state determination unit, 34 ... a comparison unit.

Claims (4)

車両の周辺を撮像し、撮像された画像を運転者に提示する提示手段と、
前記提示手段を使用時の前記運転者による運転操作の操作タイミングを取得する取得手段と、
前記取得手段により取得された操作タイミングに応じて前記提示手段により運転者に提示される画像を補正する補正手段と
を備える周辺監視装置。
Presenting means for imaging the periphery of the vehicle and presenting the captured image to the driver;
Obtaining means for obtaining operation timing of a driving operation by the driver when using the presenting means;
A periphery monitoring apparatus comprising correction means for correcting an image presented to the driver by the presenting means in accordance with the operation timing obtained by the obtaining means.
前記補正手段は、前記提示手段により運転者に提示される画像の表示倍率を変更する、
請求項1に記載の周辺監視装置。
The correction means changes a display magnification of an image presented to the driver by the presentation means.
The periphery monitoring device according to claim 1.
前記取得手段は、前記提示手段を使用していない時の前記運転者による前記運転操作の操作タイミングを更に取得し、
前記補正手段は、前記提示手段を使用時の前記運転者による前記運転操作の操作タイミングが、前記提示手段を使用していない時の前記運転者による前記運転操作の操作タイミングよりも早いほど前記提示手段により運転者に提示される表示画像の表示倍率を高くする、
請求項1又は2に記載の周辺監視装置。
The acquisition means further acquires the operation timing of the driving operation by the driver when not using the presentation means,
The correction means provides the presentation as the operation timing of the driving operation by the driver when the presentation means is used is earlier than the operation timing of the driving operation by the driver when the presentation means is not used. Increase the display magnification of the display image presented to the driver by means;
The periphery monitoring apparatus according to claim 1 or 2.
車両の走行状態を検出する走行状態検出手段を更に備え、
前記取得手段は、前記走行状態検出手段により検出された走行状態における前記運転者による前記運転操作の操作タイミングを取得し、
前記補正手段は、前記取得手段により取得された該走行状態における操作タイミングに応じて前記提示手段により運転者に提示される画像を補正する、
請求項1〜3のいずれか1項に記載の周辺監視装置。
The vehicle further comprises traveling state detection means for detecting the traveling state of the vehicle,
The acquisition unit acquires an operation timing of the driving operation by the driver in the driving state detected by the driving state detection unit,
The correction means corrects the image presented to the driver by the presentation means according to the operation timing in the running state acquired by the acquisition means.
The periphery monitoring apparatus of any one of Claims 1-3.
JP2011091201A 2011-04-15 2011-04-15 Perimeter monitoring device Expired - Fee Related JP5644647B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011091201A JP5644647B2 (en) 2011-04-15 2011-04-15 Perimeter monitoring device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011091201A JP5644647B2 (en) 2011-04-15 2011-04-15 Perimeter monitoring device

Publications (2)

Publication Number Publication Date
JP2012227605A true JP2012227605A (en) 2012-11-15
JP5644647B2 JP5644647B2 (en) 2014-12-24

Family

ID=47277353

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011091201A Expired - Fee Related JP5644647B2 (en) 2011-04-15 2011-04-15 Perimeter monitoring device

Country Status (1)

Country Link
JP (1) JP5644647B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112017004669T5 (en) 2016-09-16 2019-05-29 Kabushiki Kaisha Tokai Rika Denki Seisakusho Luminance control device, luminance control system and luminance control method

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001197482A (en) * 1999-10-29 2001-07-19 Nippon Seiki Co Ltd Monitor device for vehicle
JP2002109697A (en) * 2000-10-02 2002-04-12 Matsushita Electric Ind Co Ltd Drive support device
JP2008149878A (en) * 2006-12-18 2008-07-03 Clarion Co Ltd Operation assisting system
JP2008284956A (en) * 2007-05-16 2008-11-27 Nippon Seiki Co Ltd Recognition device for motorcycle
JP2010006129A (en) * 2008-06-24 2010-01-14 Stanley Electric Co Ltd Vehicle rear information display and vehicle rear information display method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001197482A (en) * 1999-10-29 2001-07-19 Nippon Seiki Co Ltd Monitor device for vehicle
JP2002109697A (en) * 2000-10-02 2002-04-12 Matsushita Electric Ind Co Ltd Drive support device
JP2008149878A (en) * 2006-12-18 2008-07-03 Clarion Co Ltd Operation assisting system
JP2008284956A (en) * 2007-05-16 2008-11-27 Nippon Seiki Co Ltd Recognition device for motorcycle
JP2010006129A (en) * 2008-06-24 2010-01-14 Stanley Electric Co Ltd Vehicle rear information display and vehicle rear information display method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112017004669T5 (en) 2016-09-16 2019-05-29 Kabushiki Kaisha Tokai Rika Denki Seisakusho Luminance control device, luminance control system and luminance control method
US10997861B2 (en) 2016-09-16 2021-05-04 Kabushiki Kaisha Tokai Rika Denki Seisakusho Luminance control device, luminance control system, and luminance control method

Also Published As

Publication number Publication date
JP5644647B2 (en) 2014-12-24

Similar Documents

Publication Publication Date Title
US9973734B2 (en) Vehicle circumference monitoring apparatus
JP4702437B2 (en) Vehicle display device
TWI642972B (en) Head up display system and controlling method thereof
JP5483535B2 (en) Vehicle periphery recognition support device
JP6327078B2 (en) Driving assistance device
US8031225B2 (en) Surroundings monitoring system for a vehicle
JP5321267B2 (en) Vehicular image display device and overhead image display method
US9620009B2 (en) Vehicle surroundings monitoring device
EP3153356B1 (en) Display device for vehicle and display method for vehicle
EP3150443B1 (en) Display device for vehicle and display method for vehicle
US8134594B2 (en) Surrounding recognition assisting device for vehicle
JP5549235B2 (en) Driving assistance device
WO2017159510A1 (en) Parking assistance device, onboard cameras, vehicle, and parking assistance method
JP2010130646A (en) Vehicle periphery checking system
WO2013046407A1 (en) Image display device, and image display method
JP3941770B2 (en) Collision possibility judgment device
WO2013046408A1 (en) Image display device and image display method
JP2009113621A (en) Occupant picture photographing device, and driving assisting device
JP2010018201A (en) Driver assistant device, driver assistant method, and driver assistant processing program
JP2017027180A (en) Vehicle control device and vehicle control method
JP2010116086A (en) On-vehicle display, display method, and display program
JP2010143411A (en) Head-up display device
JP2010208359A (en) Display device for vehicle
WO2011013813A1 (en) In-vehicle device and image processing program
CN111556281B (en) Vehicle safety system and operation method thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130605

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140311

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140415

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140613

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141007

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141020

LAPS Cancellation because of no payment of annual fees