JP4658724B2 - Rear side view system - Google Patents

Rear side view system Download PDF

Info

Publication number
JP4658724B2
JP4658724B2 JP2005210471A JP2005210471A JP4658724B2 JP 4658724 B2 JP4658724 B2 JP 4658724B2 JP 2005210471 A JP2005210471 A JP 2005210471A JP 2005210471 A JP2005210471 A JP 2005210471A JP 4658724 B2 JP4658724 B2 JP 4658724B2
Authority
JP
Japan
Prior art keywords
unit
rear side
vehicle
image
visual recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005210471A
Other languages
Japanese (ja)
Other versions
JP2007028440A (en
Inventor
明展 吉村
貴則 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sumitomo Wiring Systems Ltd
AutoNetworks Technologies Ltd
Sumitomo Electric Industries Ltd
Original Assignee
Sumitomo Wiring Systems Ltd
AutoNetworks Technologies Ltd
Sumitomo Electric Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sumitomo Wiring Systems Ltd, AutoNetworks Technologies Ltd, Sumitomo Electric Industries Ltd filed Critical Sumitomo Wiring Systems Ltd
Priority to JP2005210471A priority Critical patent/JP4658724B2/en
Publication of JP2007028440A publication Critical patent/JP2007028440A/en
Application granted granted Critical
Publication of JP4658724B2 publication Critical patent/JP4658724B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、車両の後側方を視認する後側方視認システムに関するものである。なお、「後側方」とは、後方及び側方を意味する。   The present invention relates to a rear side visual recognition system for visually recognizing the rear side of a vehicle. Note that “rear side” means rear and side.

車両後方に撮像装置を配置して、車両後方を視認することが行われている。例えば、下記特許文献1に開示された車輌後方表示装置では、車両後方の低位置に広角カメラを、高位置に狭角カメラを備え、車両状態に応じて広角カメラと狭角カメラを切り替えている。これにより、運転者は、自車両を後方駐車させる際に、後方駐車作業の前半及び後半各々において適切な画像を得ることができる。
特開2003−212041号公報
An image pickup device is arranged behind the vehicle to visually recognize the vehicle rear. For example, in the vehicle rear display device disclosed in Patent Document 1 below, a wide-angle camera is provided at a low position behind the vehicle, a narrow-angle camera is provided at a high position, and the wide-angle camera and the narrow-angle camera are switched according to the vehicle state. . Thereby, the driver can obtain appropriate images in each of the first half and the second half of the rear parking work when the host vehicle is parked rearward.
JP 2003-212041 A

しかしながら、運転者は、高速道路や自動車専用道路等の高速走行を行う道路等で自車両を車線変更させる際には、自車両の後側方が死角となり、この死角に入った隣接車線を走行中の車両を認識することは困難であるという問題がある。   However, when a driver changes his / her vehicle lane on a high-speed road, such as an expressway or an automobile-only road, the driver's rear side becomes a blind spot and travels in an adjacent lane that has entered the blind spot. There is a problem that it is difficult to recognize the vehicle inside.

そこで本発明では、自車両の後側方に位置する、隣接車線を走行中の車両を容易に認識することが可能な後側方視認システムを提供することを目的とする。   SUMMARY OF THE INVENTION Accordingly, an object of the present invention is to provide a rear side visual recognition system that can easily recognize a vehicle traveling in an adjacent lane that is located on the rear side of the host vehicle.

上記の課題を解決するために、本発明に係る後側方視認システムは、車両の後側方に視野を有する撮像部と、画像を表示する表示部と、車両の状態が所定条件を満たすか否かを判定する判定部と、判定部によって所定条件を満たすと判定された場合に、表示部に表示される画像を、他の画像から、撮像部によって撮像された後側方画像に切り替える切替部と、を備えることを特徴とする。   In order to solve the above problems, a rear side visual recognition system according to the present invention includes an imaging unit having a field of view on the rear side of a vehicle, a display unit that displays an image, and whether the state of the vehicle satisfies a predetermined condition. A switching unit that switches an image displayed on the display unit from another image to a rear side image captured by the imaging unit when the determination unit determines that the predetermined condition is satisfied. And a section.

本発明に係る後側方視認システムによれば、判定部によって所定条件を満たすと判定された場合に、表示部に表示される画像が、他の画像から、撮像部によって撮像された後側方画像に切替部によって切り替えられる。このため、運転者は、表示部により、自車両の後側方を視認することができる。この結果、自車両の死角に関する情報が適切に補われるため、自車両の後側方に位置する、隣接車線を走行中の車両を容易に認識することが可能となる。   According to the rear side visual recognition system according to the present invention, when the determination unit determines that the predetermined condition is satisfied, an image displayed on the display unit is captured by the imaging unit from another image. The image is switched by the switching unit. For this reason, the driver | operator can visually recognize the rear side of the own vehicle by a display part. As a result, since the information related to the blind spot of the host vehicle is appropriately supplemented, it is possible to easily recognize the vehicle that is traveling in the adjacent lane that is located on the rear side of the host vehicle.

また、撮像部は、広視野角を有するのも好ましい。   The imaging unit preferably has a wide viewing angle.

これにより、車両の後側方を、より広い視野角で撮像することができる。この結果、自車両の死角に関する情報がより適切に補われるため、隣接車線を走行中の車両の認識がより容易に可能となる。   Thereby, the rear side of the vehicle can be imaged with a wider viewing angle. As a result, the information regarding the blind spot of the host vehicle is more appropriately supplemented, so that the vehicle traveling in the adjacent lane can be more easily recognized.

また、後側方視認システムは、撮像部によって撮像された後側方画像に歪補正処理を施す歪補正部を更に備え、切替部は、表示部に表示される画像を、他の画像から、歪補正部によって歪補正処理された補正画像に切り替えるのも好ましい。   The rear side visual recognition system further includes a distortion correction unit that performs distortion correction processing on the rear side image captured by the imaging unit, and the switching unit converts an image displayed on the display unit from other images, It is also preferable to switch to a corrected image that has been subjected to distortion correction processing by the distortion correction unit.

これにより、運転者は、歪が補正された補正画像に基づいて、自車両の後側方をより正確に視認することができる。この結果、自車両の死角に関する情報がより適切に補われるため、隣接車線を走行中の車両の認識がより容易に可能となる。   Accordingly, the driver can visually recognize the rear side of the host vehicle more accurately based on the corrected image in which the distortion is corrected. As a result, the information regarding the blind spot of the host vehicle is more appropriately supplemented, so that the vehicle traveling in the adjacent lane can be more easily recognized.

また、後側方視認システムは、撮像部によって撮像された後側方画像を拡大する拡大部を更に備え、切替部は、表示部に表示される画像を、他の画像から、拡大部によって拡大された拡大画像に切り替えるのも好ましい。   The rear side visual recognition system further includes an enlargement unit that enlarges the rear side image captured by the imaging unit, and the switching unit enlarges the image displayed on the display unit from another image by the enlargement unit. It is also preferable to switch to the enlarged image.

これにより、運転者は、拡大された拡大画像に基づいて、自車両の後側方を詳細に視認することができる。この結果、自車両の死角に関する情報がより適切に補われるため、隣接車線を走行中の車両の認識がより容易に可能となる。   Accordingly, the driver can visually recognize the rear side of the host vehicle in detail based on the enlarged image. As a result, the information regarding the blind spot of the host vehicle is more appropriately supplemented, so that the vehicle traveling in the adjacent lane can be more easily recognized.

また、後側方視認システムは、車両の速度を計測する計測部を更に備え、所定条件は、計測部によって計測された速度が所定速度以上であることであるのも好ましい。   In addition, it is preferable that the rear side visual recognition system further includes a measuring unit that measures the speed of the vehicle, and the predetermined condition is that the speed measured by the measuring unit is equal to or higher than the predetermined speed.

これにより、計測部によって計測された速度が所定速度に達した場合に、判定部によって所定条件が満たされたと判定される。そして、表示部に表示される画像が、他の画像から、上記画像に切替部によって切り替えられる。このため、車線変更等を行う目的で所定速度に達するような高速運転に切り替えた場合に、運転者は、自車両の後側方を視認することができる。この結果、車線変更等を行う場合の自車両の死角に関する情報がより適切に補われるため、隣接車線を走行中の車両の認識がより容易に可能となる。   Thereby, when the speed measured by the measurement unit reaches a predetermined speed, the determination unit determines that the predetermined condition is satisfied. Then, the image displayed on the display unit is switched from the other image to the image by the switching unit. For this reason, when switching to high speed driving that reaches a predetermined speed for the purpose of changing lanes or the like, the driver can visually recognize the rear side of the host vehicle. As a result, the information regarding the blind spot of the host vehicle when the lane change or the like is performed is more appropriately supplemented, so that the vehicle traveling in the adjacent lane can be more easily recognized.

また、所定条件は、車両の方向指示器が作動していることであるのも好ましい。   It is also preferable that the predetermined condition is that the direction indicator of the vehicle is operating.

これにより、車両の方向指示器が作動している場合に、判定部によって所定条件が満たされたと判定される。そして、表示部に表示される画像が、他の画像から、上記画像に切替部によって切り替えられる。このため、車線変更等を行う目的で車両の方向指示器を作動させた場合に、運転者は、自車両の後側方を視認することができる。この結果、車線変更等を行う場合の自車両の死角に関する情報がより適切に補われるため、隣接車線を走行中の車両の認識がより容易に可能となる。   Thereby, when the direction indicator of the vehicle is operating, the determination unit determines that the predetermined condition is satisfied. Then, the image displayed on the display unit is switched from the other image to the image by the switching unit. For this reason, when the direction indicator of a vehicle is operated for the purpose of changing lanes, the driver can visually recognize the rear side of the host vehicle. As a result, the information regarding the blind spot of the host vehicle when the lane change or the like is performed is more appropriately supplemented, so that the vehicle traveling in the adjacent lane can be more easily recognized.

また、後側方視認システムは、車両の位置情報を取得する位置取得部を更に備え、所定条件は、位置取得部によって取得された位置情報により示される位置が高速道路又は自動車専用道路上に位置していることであるのも好ましい。   The rear side view system further includes a position acquisition unit that acquires vehicle position information, and the predetermined condition is that the position indicated by the position information acquired by the position acquisition unit is located on an expressway or an automobile-only road. It is also preferable that it is.

これにより、位置取得部によって取得された位置情報により示される位置が高速道路又は自動車専用道路上に位置している場合に、判定部によって所定条件が満たされたと判定される。そして、表示部に表示される画像が、他の画像から、上記画像に切替部によって切り替えられる。このため、高速道路又は自動車専用道路を運転中の場合に、運転者は、自車両の後側方を視認することができる。この結果、高速道路又は自動車専用道路において車線変更等を行う場合の自車両の死角に関する情報がより適切に補われるため、隣接車線を走行中の車両の認識がより容易に可能となる。   Accordingly, when the position indicated by the position information acquired by the position acquisition unit is located on the expressway or the automobile exclusive road, the determination unit determines that the predetermined condition is satisfied. Then, the image displayed on the display unit is switched from the other image to the image by the switching unit. For this reason, when driving on an expressway or an automobile-only road, the driver can visually recognize the rear side of the host vehicle. As a result, the information regarding the blind spot of the own vehicle when the lane change or the like is performed on the highway or the automobile exclusive road is more appropriately supplemented, so that the vehicle traveling in the adjacent lane can be more easily recognized.

また、後側方視認システムは、後側方画像における車両が走行した車線の領域にマスクを重畳して表示部に表示させる重畳部を更に備えるのも好ましい。   Moreover, it is preferable that the rear side visual recognition system further includes a superimposing unit that superimposes a mask on a region of the lane in which the vehicle travels in the rear side image and displays the mask on the display unit.

これにより、後側方画像における自車両が走行した車線の領域にマスクが重畳される。このため、運転者は、マスクにより重畳されていない領域、すなわち、後側方画像における自車両が走行した車線の領域以外の領域に対してのみ、注意を払えばよい。この結果、自車両の死角に関する情報がより適切に補われるため、隣接車線を走行中の車両の認識がより容易に可能となる。   As a result, the mask is superimposed on the area of the lane in which the host vehicle travels in the rear side image. For this reason, the driver only needs to pay attention to a region that is not superimposed by the mask, that is, a region other than the region of the lane in which the host vehicle travels in the rear side image. As a result, the information regarding the blind spot of the host vehicle is more appropriately supplemented, so that the vehicle traveling in the adjacent lane can be more easily recognized.

また、後側方視認システムは、車両の進行状態を検知する検知部を更に備え、所定条件は、検知部によって車両が後進状態であると検知されることであるのも好ましい。   Moreover, it is also preferable that the rear side visual recognition system further includes a detection unit that detects the traveling state of the vehicle, and the predetermined condition is that the detection unit detects that the vehicle is in the reverse traveling state.

これにより、検知部によって車両が後進状態であると検知された場合に、判定部によって所定条件が満たされたと判定される。そして、表示部に表示される画像が、他の画像から、上記画像に切替部によって切り替えられる。このため、車両が後進する場合に、運転者は、自車両の後側方を視認することができる。この結果、車両を後進させる場合の自車両の死角に関する情報がより適切に補われる。   Accordingly, when the detection unit detects that the vehicle is in the reverse drive state, the determination unit determines that the predetermined condition is satisfied. Then, the image displayed on the display unit is switched from the other image to the image by the switching unit. For this reason, when the vehicle moves backward, the driver can visually recognize the rear side of the host vehicle. As a result, information regarding the blind spot of the host vehicle when the vehicle is moved backward is more appropriately supplemented.

また、後側方視認システムは、判定部によって所定条件を満たすと判定された場合に、撮像部の俯角を変更する俯角変更部を更に備えるのも好ましい。   The rear side viewing system preferably further includes a depression angle changing unit that changes the depression angle of the imaging unit when the determination unit determines that the predetermined condition is satisfied.

これにより、判定部によって所定条件を満たすと判定された場合に、俯角が変更される。このため、俯角を大きくした場合、自車両に近い後側方画像を、撮像部によって撮像することができる。また、俯角を小さくした場合、自車両から遠い後側方画像を撮像部によって撮像することができる。この結果、俯角が大きい場合は駐車時における自車両後方の死角に関する情報が適切に補われ、俯角が小さい場合は隣接車線を走行中の車両の認識が容易となる。   Thereby, when it determines with the determination part satisfy | filling predetermined conditions, a depression angle is changed. For this reason, when the depression angle is increased, a rear side image close to the host vehicle can be captured by the imaging unit. When the depression angle is reduced, a rear side image far from the host vehicle can be captured by the imaging unit. As a result, when the depression angle is large, the information regarding the blind spot behind the host vehicle at the time of parking is appropriately supplemented, and when the depression angle is small, the vehicle traveling in the adjacent lane can be easily recognized.

本発明によれば、自車両の後側方に位置する、隣接車線を走行中の車両を容易に認識することが可能な後側方視認システムを提供することができる。   ADVANTAGE OF THE INVENTION According to this invention, the rear side visual recognition system which can recognize easily the vehicle currently drive | working an adjacent lane located in the back side of the own vehicle can be provided.

以下、添付図面を参照しながら本発明の好適な実施形態を説明する。なお、図面の説明において同一要素には同一符号を付し、重複する説明を省略する。   Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings. In the description of the drawings, the same elements are denoted by the same reference numerals, and redundant description is omitted.

本発明の実施形態である後側方視認システムについて、図1と図2(a)及び(b)と図3とを用いて説明する。図1は、本実施形態に係る後側方視認システム100のブロック構成図である。また、図2(a)は、後側方視認システム100を搭載して走行中の車両200と、車両200の後側方に位置しながら走行中の車両300と、の位置関係を説明する平面図であり、図2(b)は、この車両200の後方部における概略側面図である。また、図3は、この車両200が撮像可能な範囲を説明する平面図である。後側方視認システム100は、車両200に搭載されて、車両200の後側方を撮像するとともに運転者に対して後側方画像を表示し、運転者による車両200の後側方の視認を可能にするシステムである。なお、車両200は、人間や物品を輸送する車体のことであれば、特に限定されない。   A rear side viewing system that is an embodiment of the present invention will be described with reference to FIGS. 1, 2 (a) and 2 (b), and FIG. 3. FIG. 1 is a block configuration diagram of a rear side visual recognition system 100 according to the present embodiment. FIG. 2A is a plan view for explaining the positional relationship between the vehicle 200 that is running with the rear-side visual recognition system 100 and the vehicle 300 that is running while being located on the rear side of the vehicle 200. FIG. 2B is a schematic side view of the rear portion of the vehicle 200. FIG. FIG. 3 is a plan view illustrating a range in which the vehicle 200 can capture an image. The rear side visual recognition system 100 is mounted on the vehicle 200, images the rear side of the vehicle 200, displays a rear side image to the driver, and allows the driver to visually recognize the rear side of the vehicle 200. It is a system that makes it possible. The vehicle 200 is not particularly limited as long as it is a vehicle body that transports a person or an article.

後側方視認システム100は、機能的な構成要素として大きく分けて、カメラ1(撮像部)、判定部2、切替部3、ディスプレイ4(表示部)、俯角変更部5、歪補正部6、拡大部7、計測部8、ウィンカ9(方向指示器)、位置取得部10、検知部11、コントロールエリアネットワーク(Control Area Network(以下、「CANという。」))12、及び重畳部13を備えている。   The rear side visual recognition system 100 is roughly divided into functional components such as a camera 1 (imaging unit), a determination unit 2, a switching unit 3, a display 4 (display unit), a depression angle changing unit 5, a distortion correcting unit 6, An enlargement unit 7, a measurement unit 8, a blinker 9 (direction indicator), a position acquisition unit 10, a detection unit 11, a control area network (Control Area Network (hereinafter referred to as “CAN”)) 12, and a superposition unit 13 are provided. ing.

カメラ1は、車両200の後側方に視野を有し、車両200の後側方を撮像することができるカメラである。カメラ1は、図3に示すように、例えば、車両200の最後部に配置される。カメラ1の撮像方向と、車両200の車体の軸方向とは、略平行な位置関係を有している。これにより、車両200の後側方を、より鮮明に撮像することができる。また、カメラ1は、図3に示すように、水平画角αは、例えば130°である。これにより、車両200の後側方を、より広い範囲にわたって撮像することができる。なお、カメラ1は広視野角を有するのが好ましいが、必須条件ではない。カメラ1によって撮像された後側方画像は、歪補正部6及び拡大部7を経由して、切替部3に送信される。   The camera 1 is a camera that has a field of view behind the vehicle 200 and can capture the rear side of the vehicle 200. The camera 1 is arrange | positioned at the rearmost part of the vehicle 200, for example, as shown in FIG. The imaging direction of the camera 1 and the axial direction of the vehicle body of the vehicle 200 have a substantially parallel positional relationship. Thereby, the rear side of the vehicle 200 can be imaged more clearly. As shown in FIG. 3, the camera 1 has a horizontal angle of view α of, for example, 130 °. Thereby, the rear side of the vehicle 200 can be imaged over a wider range. The camera 1 preferably has a wide viewing angle, but this is not a necessary condition. The rear side image captured by the camera 1 is transmitted to the switching unit 3 via the distortion correction unit 6 and the enlargement unit 7.

判定部2は、車両200の状態が所定条件を満たすか否かを判定する部分である。判定部2は、例えばCPU、ROM、RAMを含むコンピュータを主体として構成されている。所定条件の例として、計測部8によって計測された速度が所定速度以上(又は所定速度未満)であることや、位置取得部10によって取得された位置情報により示される位置が所定道路上に位置していることや、車両200が後進状態であると検知部11によって検知されること等が挙げられる。判定部2により判定された判定結果は、切替部3と、俯角変更部5と、歪補正部6及び拡大部7と、に送信される。   The determination unit 2 is a part that determines whether or not the state of the vehicle 200 satisfies a predetermined condition. The determination unit 2 is mainly configured by a computer including a CPU, a ROM, and a RAM, for example. As an example of the predetermined condition, the speed measured by the measurement unit 8 is equal to or higher than the predetermined speed (or less than the predetermined speed), or the position indicated by the position information acquired by the position acquisition unit 10 is located on the predetermined road. Or that the vehicle 200 is in the reverse drive state is detected by the detection unit 11. The determination result determined by the determination unit 2 is transmitted to the switching unit 3, the depression angle changing unit 5, the distortion correcting unit 6, and the enlarging unit 7.

切替部3は、所定条件を満たすと判定部2によって判定された場合に、ディスプレイ4に表示される画像を、他の画像から、後側方画像(又は、後側方画像に基づいて生成された補正画像や拡大画像)に切り替える部分である。切替部3は、例えばCPUと、フレームメモリ(例えばSDRAM等)とを含むコンピュータを主体として構成されている。この「切り替え」には、ディスプレイ4に表示される画像の一部に対して、この後側方画像を、挿入又は重畳させた画像に切り替えることも含まれている。   When the determination unit 2 determines that the predetermined condition is satisfied, the switching unit 3 generates an image displayed on the display 4 from another image based on the rear side image (or the rear side image). (A corrected image and an enlarged image). The switching unit 3 is mainly configured by a computer including a CPU and a frame memory (for example, SDRAM). The “switching” includes switching the rear side image to an inserted or superimposed image with respect to a part of the image displayed on the display 4.

ディスプレイ4は、車両200の運転者に対して画像を表示する部分である。ディスプレイは、運転者が操作するステアリングホイール(ハンドル)の近傍に取り付けられている。このため、運転者は、ステアリングホイールを握って前を向きながら、運転の合間にディスプレイ4を目視することができる。ディスプレイ4が表示する画像の例として、車両200を目的地まで誘導するカーナビゲーションシステムによって現在地が道路地図とともに出力された画像や、後側方画像や、後側方画像に対して歪補正部6によって歪補正処理が施された補正画像や、後側方画像又は補正画像に対して拡大部7によって拡大された拡大画像等が挙げられる。   The display 4 is a part that displays an image to the driver of the vehicle 200. The display is attached in the vicinity of a steering wheel (handle) operated by the driver. For this reason, the driver can view the display 4 while driving while holding the steering wheel and facing forward. As an example of the image displayed on the display 4, the distortion correction unit 6 applies to an image in which the current location is output together with a road map by a car navigation system that guides the vehicle 200 to the destination, a rear side image, and a rear side image. And a corrected image that has been subjected to the distortion correction processing, a magnified image that has been magnified by the magnifier 7 with respect to the rear side image or the corrected image, and the like.

俯角変更部5は、判定部2によって所定条件を満たすと判定された場合に、カメラ1の俯角を変更する部分である。なお、「俯角」とは、図2(b)に示すように、撮像範囲Sの中心を見下ろした際における、撮像方向xと水平方向yとがなす角度Θのことである。すなわち、俯角変更部5が、カメラ1の俯角を、判定前の俯角よりも大きくした場合、自車両200に対してより近づいた自車両200の周囲が撮像範囲となる。なお、カメラ1の通常時における俯角は、45°である。カメラ1により撮像された画像における、俯角が大きくなる前の後側方画像と、俯角が大きくなった後の後側方画像との比較についての詳細な説明は、後述する。   The depression angle changing unit 5 is a part that changes the depression angle of the camera 1 when the determination unit 2 determines that the predetermined condition is satisfied. As shown in FIG. 2B, the “angle” is an angle Θ formed by the imaging direction x and the horizontal direction y when looking down at the center of the imaging range S. That is, when the depression angle changing unit 5 makes the depression angle of the camera 1 larger than the depression angle before the determination, the periphery of the own vehicle 200 that is closer to the own vehicle 200 becomes the imaging range. Note that the depression angle of the camera 1 at the normal time is 45 °. A detailed description of the comparison between the rear side image before the depression angle increases and the rear side image after the depression angle increases in the image captured by the camera 1 will be described later.

歪補正部6は、カメラ1によって撮像された後側方画像に歪補正処理を施す部分である。歪補正部6は、例えばCPU、ASIC(特定用途のための集積回路)、不揮発性メモリ、フレームメモリを含むコンピュータを主体として構成されている。カメラ1によって撮像された後側方画像は、このフレームメモリに保存され、この不揮発性メモリ内の歪補正処理用の画素対応テーブルが参照されることで、この後側方画像に対する歪補正処理が行われる。歪補正処理には、カメラ1によって撮像された後側方画像の縦横比率(例えば3対4)から、ディスプレイ4に表示される画像の縦横比率(例えば9対16)への変更処理等、拡大や縮小や回転等の処理が含まれる。歪補正処理の詳細については、後述する。歪補正部6によって歪補正処理された補正画像は、切替部3に送信される。   The distortion correction unit 6 is a part that performs distortion correction processing on the rear side image captured by the camera 1. The distortion correction unit 6 is mainly configured by a computer including a CPU, an ASIC (integrated circuit for a specific application), a nonvolatile memory, and a frame memory, for example. The rear side image captured by the camera 1 is stored in the frame memory, and the distortion correction processing for the rear side image is performed by referring to the pixel correspondence table for distortion correction processing in the nonvolatile memory. Done. The distortion correction process includes an enlargement process such as a process of changing the aspect ratio (for example, 3 to 4) of the rear side image captured by the camera 1 to the aspect ratio (for example, 9 to 16) of the image displayed on the display 4. And processing such as reduction and rotation. Details of the distortion correction processing will be described later. The corrected image subjected to the distortion correction processing by the distortion correction unit 6 is transmitted to the switching unit 3.

拡大部7は、カメラ1によって撮像された後側方画像を拡大する部分である。拡大部7は、カメラ1によって撮像された後側方画像、又は歪補正部6による歪補正処理が施された後側方画像を拡大してもよい。すなわち、カメラによって撮像された後側方画像であれば、拡大部7が拡大する画像は、特に限定されない。後側方画像の拡大処理の詳細については、後述する。拡大部7によって拡大された拡大画像は、切替部3に送信される。   The enlargement unit 7 is a part that enlarges a rear side image captured by the camera 1. The enlargement unit 7 may enlarge the rear side image captured by the camera 1 or the rear side image subjected to the distortion correction processing by the distortion correction unit 6. In other words, the image enlarged by the enlargement unit 7 is not particularly limited as long as it is a rear side image captured by the camera. Details of the rear side image enlargement process will be described later. The enlarged image enlarged by the enlargement unit 7 is transmitted to the switching unit 3.

計測部8は、車両200の速度を計測する部分である。計測部8が計測する速度は、例えば、車両200の前進速度や後進速度等である。計測部8によって計測された車両200の速度に関する情報は、CAN12に送信される。   The measurement unit 8 is a part that measures the speed of the vehicle 200. The speed measured by the measurement unit 8 is, for example, the forward speed or reverse speed of the vehicle 200. Information regarding the speed of the vehicle 200 measured by the measuring unit 8 is transmitted to the CAN 12.

ウィンカ9は、車両200が曲がる方向(右旋回や左旋回等)を指し示す部分である。ウィンカ9は、車両200の前部又は後部等に取り付けられている。ウィンカ9が作動しているかどうかを示す作動状況に関する情報は、CAN12に送信される。   The blinker 9 is a portion that indicates a direction in which the vehicle 200 is bent (such as turning right or turning left). The blinker 9 is attached to the front part or the rear part of the vehicle 200. Information on the operating status indicating whether or not the winker 9 is operating is transmitted to the CAN 12.

位置取得部10は、車両200の自位置に関する位置情報を取得する部分である。位置取得部10は、例えば、GPS衛星から受信した電波を用いて、地球上における車両200の自位置に関する位置情報を取得する。位置取得部10によって取得された位置情報は、CAN12に送信される。   The position acquisition unit 10 is a part that acquires position information regarding the own position of the vehicle 200. The position acquisition unit 10 acquires position information related to the position of the vehicle 200 on the earth using, for example, radio waves received from GPS satellites. The position information acquired by the position acquisition unit 10 is transmitted to the CAN 12.

検知部11は、車両200の進行状態を検知する部分である。検知部11が検知する進行状態は、例えば、車両200の前進状態や、停止状態や、後進状態等である。検知部11は、これらの進行状態を、シフトがDやR等にギアチェンジされた後のギアの状態等に基づいて検知する。検知部11によって検知された進行状態に関する情報は、CAN12に送信される。   The detection unit 11 is a part that detects the traveling state of the vehicle 200. The progress state detected by the detection unit 11 is, for example, a forward state, a stop state, a reverse state, or the like of the vehicle 200. The detection unit 11 detects the progress state based on the state of the gear after the shift is changed to D, R, or the like. Information on the progress state detected by the detection unit 11 is transmitted to the CAN 12.

CAN12は、計測部8、ウィンカ9、位置取得部10、及び検知部11からの情報を受信するネットワーク部である。すなわち、CAN12は、車両200内におけるローカルエリアネットワーク(LAN)である。CAN12が受信したこれらの情報は、まとめられて、判定部2に送信される。また、CAN12が受信する情報が、CAN12を経由せず判定部2のCPUに直接送信されるように、計測部8、ウィンカ9、位置取得部10、検知部11、及び判定部2を接続してもよい。   The CAN 12 is a network unit that receives information from the measurement unit 8, the blinker 9, the position acquisition unit 10, and the detection unit 11. That is, the CAN 12 is a local area network (LAN) in the vehicle 200. These pieces of information received by the CAN 12 are collected and transmitted to the determination unit 2. In addition, the measurement unit 8, the blinker 9, the position acquisition unit 10, the detection unit 11, and the determination unit 2 are connected so that information received by the CAN 12 is directly transmitted to the CPU of the determination unit 2 without passing through the CAN 12. May be.

重畳部13は、後側方画像において、車両200が走行した車線の領域にマスクを重畳してディスプレイ4に表示させる部分である。重畳部13は、例えばCPUや不揮発性メモリを含むコンピュータを主体として構成されている。この不揮発性メモリに保存されているマスク処理のテーブルを参照することで、カメラ1によって撮像された後側方画像に対するマスク処理が行われる。マスクの重畳処理の詳細については、後述する。なお、重畳部13は、車両200のステアリングホイールの操舵角に基づいて、車両200の軌跡を重畳してディスプレイ4に表示させてもよい。   The superimposing unit 13 is a part that superimposes a mask on the area of the lane in which the vehicle 200 travels and causes the display 4 to display the rear side image. The superimposing unit 13 is mainly configured by a computer including a CPU and a nonvolatile memory, for example. By referring to the mask processing table stored in the nonvolatile memory, mask processing is performed on the rear side image captured by the camera 1. Details of the mask superimposition processing will be described later. Note that the superimposing unit 13 may superimpose the trajectory of the vehicle 200 on the display 4 based on the steering angle of the steering wheel of the vehicle 200.

次に、本実施形態に係る後側方視認システム100により撮像可能な範囲について、図2(a)を用いて説明する。図2(a)は、後側方視認システム100を搭載して走行中の車両200と、車両200の後側方を走行中の車両300との位置関係を説明する平面図である。なお、車両200及び車両300は、高速道路や自動車専用道路等の高速走行を行う道路を前進走行しているものとする。   Next, a range that can be imaged by the rear side visual recognition system 100 according to the present embodiment will be described with reference to FIG. FIG. 2A is a plan view for explaining the positional relationship between a vehicle 200 that is running with the rear side visual recognition system 100 and a vehicle 300 that is running on the rear side of the vehicle 200. It is assumed that the vehicle 200 and the vehicle 300 are traveling forward on a high-speed road such as an expressway or an automobile-only road.

まず、車両200及び車両300の位置関係について説明する。車両200及び車両300が走行する道路の道幅Aは、約3.5mである。車両200及び車両300各々は、道路の略中央を走行中であるとする。また、車両200及び車両300間の距離Bは、約2mであるとする。車両200に搭載されたカメラ1の水平画角αは、例えば約130°である。車両200のサイドミラー201から車両200の後端部までの距離Cは、約3.2mである。サイドミラー201の水平画角γは、約13°である。また、車両200の後端部から車両300の先端部までの距離Dは、2mであるとする。更に、車両200の後端部から車両300の後端部までの距離Eは、6.7mであるとする。   First, the positional relationship between the vehicle 200 and the vehicle 300 will be described. The road width A of the road on which the vehicle 200 and the vehicle 300 travel is about 3.5 m. It is assumed that each of the vehicle 200 and the vehicle 300 is traveling on the approximate center of the road. Further, it is assumed that the distance B between the vehicle 200 and the vehicle 300 is about 2 m. The horizontal angle of view α of the camera 1 mounted on the vehicle 200 is, for example, about 130 °. The distance C from the side mirror 201 of the vehicle 200 to the rear end portion of the vehicle 200 is about 3.2 m. The horizontal angle of view γ of the side mirror 201 is about 13 °. Further, it is assumed that the distance D from the rear end portion of the vehicle 200 to the front end portion of the vehicle 300 is 2 m. Furthermore, it is assumed that the distance E from the rear end portion of the vehicle 200 to the rear end portion of the vehicle 300 is 6.7 m.

ここで、車両200及び車両300が上記のような位置関係で前進走行しているとき、車両200の運転者は、サイドミラー201を用いても車両300を視認することはできない。これは、サイドミラー201を用いて視認できる領域Xには、車両300は位置しておらず、車両300は、サイドミラー201の死角となる領域Yに位置しているためである。しかしながら、車両200に搭載された後側方視認システム100のカメラ1を用いることにより、車両200の運転者は、車両300を視認することができるようになる。これは、カメラ1を用いて視認できる領域Zに、車両300が位置しているためである。   Here, when the vehicle 200 and the vehicle 300 are traveling forward in the positional relationship as described above, the driver of the vehicle 200 cannot visually recognize the vehicle 300 using the side mirror 201. This is because the vehicle 300 is not located in the region X that can be visually recognized using the side mirror 201, and the vehicle 300 is located in the region Y that is the blind spot of the side mirror 201. However, by using the camera 1 of the rear side viewing system 100 mounted on the vehicle 200, the driver of the vehicle 200 can visually recognize the vehicle 300. This is because the vehicle 300 is located in a region Z that can be visually recognized using the camera 1.

次に、本実施形態に係る後側方視認システム100によって表示された画像について、図4(a)〜(c)を用いて説明する。図4(a)〜(c)各々は、ディスプレイ4に表示された後側方画像、補正画像、及び拡大画像を示す図である。   Next, an image displayed by the rear side visual recognition system 100 according to the present embodiment will be described with reference to FIGS. 4A to 4C are diagrams showing a rear side image, a corrected image, and an enlarged image displayed on the display 4.

カメラ1によって撮像された後側方画像をそのままディスプレイ4に表示させた場合、図4(a)に示すように、実際には平坦な道路が、ディスプレイ4では丸みを帯びた道路400であるように歪んで表示される。これは、カメラ1の物理的な特性に由来しており、特に、広視野角を有するカメラ1を用いると、このように歪んで表示される現象が発生する。これに対して、歪補正部6により後側方画像に対する歪補正処理が施されると、図4(b)に示すように、実際には平坦な道路が、ディスプレイ4でも平坦な道路401であるように正しく表示される。これにより、ディスプレイ4に表示された画像は、サイドミラーの補助的な役割を果たすことができる。さらに、重畳部13により、後側方画像における車両200が走行した車線の領域(すなわち道路401)にマスク402を重畳してディスプレイ4に表示すると、図4(c)に示すように、マスク402以外の領域のみが視認可能になる。このため、運転者は、マスク402により重畳されていない領域、すなわち、「後側方画像において自車両が走行した車線の領域」以外の領域403に対してのみ、注意を払えばよくなる。   When the rear side image picked up by the camera 1 is displayed on the display 4 as it is, as shown in FIG. 4A, a flat road is actually a rounded road 400 on the display 4. Appears distorted. This is due to the physical characteristics of the camera 1, and in particular, when the camera 1 having a wide viewing angle is used, a phenomenon in which the display is distorted as described above occurs. On the other hand, when the distortion correction process is performed on the rear side image by the distortion correction unit 6, the flat road actually becomes a flat road 401 on the display 4 as shown in FIG. It is displayed correctly as it is. Thereby, the image displayed on the display 4 can play an auxiliary role of the side mirror. Further, when the superimposing unit 13 superimposes the mask 402 on the area of the lane in which the vehicle 200 travels in the rear side image (that is, the road 401) and displays the mask 402 on the display 4, as shown in FIG. Only the area other than is visible. For this reason, the driver needs to pay attention only to the region 403 other than the region that is not superimposed by the mask 402, that is, the region 403 other than the “lane region in which the host vehicle has traveled in the rear side image”.

次に、本実施形態に係る後側方視認システム100によって、上記の形式とは異なる形式で表示された画像について、図5(a)〜(c)を用いて説明する。図5(a)〜(c)各々は、ディスプレイ4に表示された、補正画像と座席配置図との合成画像、合成図にマスク430が重畳された画像、及び拡大画像を示す図である。   Next, an image displayed in a format different from the above format by the rear side visual recognition system 100 according to the present embodiment will be described with reference to FIGS. Each of FIGS. 5A to 5C is a diagram showing a composite image of a corrected image and a seat layout diagram displayed on the display 4, an image in which a mask 430 is superimposed on the composite diagram, and an enlarged image.

図5(a)は、補正画像と、車両200内部の座席の配置を模擬的に示した座席配置図とを合成して、ディスプレイ4に表示させた場合の合成画像である。座席配置図には、手前に二つの座席410,411が配置され、奥に二つの座席412,413が配置されている。また、座席410は運転者が座る座席であることが、ハンドルを模擬的に示したマークにより示されている。また、補正画像は、三つの表示領域420〜422に分けて表示されている。表示領域420には、車両200の前進方向に対して左側の補正画像が表示され、表示領域421には、車両200の前進方向に対して右側の補正画像が表示され、表示領域422には、車両200の前進方向に対して真後ろ側の補正画像が表示されている。これにより、車両200の運転者は、図5(a)に示すように、車両200の前進方向に対して左側の後側方側に、他の車両300が走行中であることを視認することができる。   FIG. 5A is a composite image when the corrected image and a seat layout diagram simulating the seat layout inside the vehicle 200 are combined and displayed on the display 4. In the seat layout diagram, two seats 410 and 411 are disposed in front, and two seats 412 and 413 are disposed in the back. Further, the seat 410 is a seat on which the driver sits, and is indicated by a mark schematically showing the handle. The corrected image is displayed in three display areas 420 to 422. In the display area 420, a correction image on the left side with respect to the forward direction of the vehicle 200 is displayed, in the display area 421, a correction image on the right side with respect to the forward direction of the vehicle 200 is displayed, and in the display area 422, A correction image directly behind the vehicle 200 in the forward direction is displayed. As a result, the driver of the vehicle 200 visually recognizes that the other vehicle 300 is traveling on the rear side on the left side with respect to the forward direction of the vehicle 200 as shown in FIG. Can do.

これに対して、表示領域422における車両200が走行した車線の領域と、表示領域421とに対して、マスク430が重畳部13により重畳されてディスプレイ4に表示されると、図5(b)に示すように、マスク430以外の領域のみが視認可能になる。このため、運転者は、マスク430により重畳されていない領域に対してのみ、注意を払えばよくなる。更に、ディスプレイ4に表示されたこの画像を、表示領域420を中心に拡大部7が拡大すると、図5(c)に示すように、車両200の運転者は、この拡大された拡大画像に基づいて、自車両200の後側方をより詳細に視認することができる。   On the other hand, when the mask 430 is superimposed on the display area 422 by the superimposing unit 13 with respect to the area of the lane in which the vehicle 200 travels in the display area 422 and the display area 421, FIG. As shown, only the region other than the mask 430 is visible. For this reason, the driver needs to pay attention only to the area not overlapped by the mask 430. Further, when the enlargement unit 7 enlarges the image displayed on the display 4 around the display area 420, as shown in FIG. 5C, the driver of the vehicle 200 is based on the enlarged image. Thus, the rear side of the host vehicle 200 can be viewed in more detail.

次に、本実施形態に係る後側方視認システム100における処理の順番について、図7〜9を用いて説明する。図7は、水平画角αが130°のカメラ1を備えた後側方視認システム100における処理の順番を示すフローチャートである。また、図8は、水平画角αが180°のカメラ1を備えた後側方視認システム100における処理の順番を示すフローチャートである。また、図9は、後側方視認システム100における処理によって、後側方画像が拡大表示される様子を示す図である。   Next, the order of processing in the rear side visual recognition system 100 according to the present embodiment will be described with reference to FIGS. FIG. 7 is a flowchart showing the order of processing in the rear side viewing system 100 provided with the camera 1 having a horizontal angle of view α of 130 °. FIG. 8 is a flowchart showing the order of processing in the rear side viewing system 100 provided with the camera 1 having a horizontal angle of view α of 180 °. FIG. 9 is a diagram illustrating a state in which the rear side image is enlarged and displayed by the processing in the rear side visual recognition system 100.

最初に、図7を用いて、水平画角αが130°のカメラ1を備えた後側方視認システム100における処理の順番について説明する。なお、このカメラ1の通常時における俯角(すなわち所定角度)は、45°である。この処理は、所定時間ごとに繰り返し実行される。まず、検知部11によって車両200は前進状態であると検知されたか否かが判定部2により判定される(S10)。判定の結果、車両200は前進状態ではないと検知された場合(すなわち、シフトがRである後進状態又はシフトがPである停止状態)、俯角変更部5により、俯角が所定角度(すなわち45°)に変更される(S11)。なお、S11においては、俯角が所定角度になっていない場合に変更されるのであって、すでに所定角度になっている場合は、俯角の変更は特に行われない。次に、カメラ1によって撮像された後側方画像に対して、歪補正部6による歪補正処理が実施される(S12)。ここで、カメラ1の俯角は所定角度の45°となっているので、図6(b)に示したように、自車両200に対して比較的近い距離にある範囲の後側方画像が撮像されて、ディスプレイ4に表示される(S15)。そして、S10へ移動する。   First, the order of processing in the rear side visual recognition system 100 including the camera 1 having a horizontal angle of view α of 130 ° will be described with reference to FIG. Note that the depression angle (that is, the predetermined angle) of the camera 1 in a normal state is 45 °. This process is repeatedly executed every predetermined time. First, the determination unit 2 determines whether or not the detection unit 11 detects that the vehicle 200 is in a forward state (S10). As a result of the determination, when it is detected that the vehicle 200 is not in the forward state (that is, the reverse state where the shift is R or the stop state where the shift is P), the depression angle changing unit 5 sets the depression angle to a predetermined angle (that is, 45 °). (S11). In S11, the angle is changed when the depression angle is not a predetermined angle. If the depression angle is already a predetermined angle, the depression angle is not particularly changed. Next, distortion correction processing by the distortion correction unit 6 is performed on the rear side image captured by the camera 1 (S12). Here, since the depression angle of the camera 1 is a predetermined angle of 45 °, as shown in FIG. 6B, a rear side image in a range relatively close to the host vehicle 200 is captured. And displayed on the display 4 (S15). And it moves to S10.

また、S10における判定の結果、車両200は前進状態(すなわち、シフトがDの状態)であると検知された場合、俯角変更部5により、45°より小さい俯角(例えば約0°)に変更され(S21)、S22へ移動する。次に、カメラ1によって撮像された後側方画像に対して、歪補正部6による歪補正処理が実施される(S22)。この結果、図4(a)及び(b)に示したように、歪みを補正することができる。   Further, as a result of the determination in S10, when it is detected that the vehicle 200 is in the forward state (that is, the shift is in the D state), the depression angle changing unit 5 changes the depression angle to 45 degrees (for example, about 0 degrees). (S21), move to S22. Next, distortion correction processing by the distortion correction unit 6 is performed on the rear side image captured by the camera 1 (S22). As a result, the distortion can be corrected as shown in FIGS.

ここで、車両200は所定速度(例えば時速40km)未満で前進しているか否かが判定される(S23)。車両200が所定速度未満で前進している場合は、追い越しや追い抜き等を行う確率が低い通常の走行であって後側方画像を表示する必要はない。このため、カーナビゲーションシステムによって出力される画像がディスプレイ4に表示されるか、又は、重畳部13によって全ての後側方画像にマスクが重畳された画像がディスプレイ4に表示される(S24)。そして、ウィンカ9が作動しているか否かが、判定部2により判定される(S26)。S26における判定以降の詳細な説明は、後述する。   Here, it is determined whether or not the vehicle 200 is moving forward at a speed lower than a predetermined speed (for example, 40 km / h) (S23). When the vehicle 200 is moving forward at a speed lower than the predetermined speed, it is normal traveling with a low probability of overtaking or overtaking, and there is no need to display a rear side image. Therefore, an image output by the car navigation system is displayed on the display 4, or an image in which a mask is superimposed on all rear side images by the superimposing unit 13 is displayed on the display 4 (S24). And it is determined by the determination part 2 whether the blinker 9 is act | operating (S26). Detailed description after the determination in S26 will be described later.

また、S23における判定の結果、車両200が所定速度(例えば時速40km)以上で前進している場合は、追い越し又は追い抜き等を行う確率が高い走行であるため、後側方画像がディスプレイ4に表示される(S25)。なお、S21において、45°より小さい俯角(例えば0°)に変更されているため、図6(a)に示したように、比較的遠い距離にある範囲の後側方画像がディスプレイ4に表示される。S24又はS25を経た後、ウィンカ9が作動しているか否かが、判定部2により判定される(S26)。ウィンカ9が作動していない場合は、これ以降、特に何の処理も行われずにS10へ移動する。一方、ウィンカ9が作動している場合は、右旋回を行うためのウィンカが作動しているか否かが判定される(S27)。   Further, if the result of determination in S23 is that the vehicle 200 is moving forward at a predetermined speed (for example, 40 km / h) or more, the vehicle is traveling with a high probability of overtaking or overtaking, so a rear side image is displayed on the display 4. (S25). In S21, since the depression angle is changed to less than 45 ° (for example, 0 °), a rear side image in a range at a relatively far distance is displayed on the display 4 as shown in FIG. Is done. After S24 or S25, the determination unit 2 determines whether or not the winker 9 is operating (S26). If the winker 9 is not in operation, the process proceeds to S10 without any particular processing thereafter. On the other hand, when the winker 9 is operating, it is determined whether or not the winker for turning right is operating (S27).

S27において、右旋回を行うためのウィンカ9が作動していると検知された場合、右側車線への車線変更又は右折による進路変更等を行うときであるため、進行方向に対して右側の後側方画像が拡大部7によって拡大されてディスプレイ4に表示されるか、又は、左側の後側方画像と車両200の車線領域とに対して重畳部13がマスクを重畳する(S28)。そして、S10へ移動する。一方、S27において、左旋回を行うためのウィンカ9が作動していると検知された場合、左側車線への車線変更又は左折による進路変更等を行うときであるため、左側の後側方画像が拡大部7によって拡大されてディスプレイ4に表示されるか、又は、右側の後側方画像と車両200の車線領域とに対して重畳部13がマスクを重畳する(S29)。そして、S10へ移動する。   In S27, when it is detected that the winker 9 for turning right is operating, it is time to change the lane to the right lane or change the course by turning right. The side image is enlarged by the enlargement unit 7 and displayed on the display 4, or the superimposition unit 13 superimposes the mask on the left rear side image and the lane region of the vehicle 200 (S28). And it moves to S10. On the other hand, when it is detected in S27 that the winker 9 for turning left is operating, it is time to change the lane to the left lane or change the course by turning left. The image is magnified by the magnification unit 7 and displayed on the display 4, or the superimposition unit 13 superimposes the mask on the right rear side image and the lane region of the vehicle 200 (S29). And it moves to S10.

次に、図8及び9を用いて、水平画角αが180°のカメラ1を備えた後側方視認システム100における処理の順番について説明する。なお、このカメラ1の通常時における俯角(すなわち所定角度)は、20°である。この処理は、所定時間ごとに繰り返し実行される。まず、検知部11によって車両200は前進状態であると検知されたか否かが判定部2により判定される(S10)。判定の結果、車両200は前進状態ではないと検知された場合(すなわち、シフトがRである後進状態又はシフトがPである停止状態)、俯角変更部5により、俯角が所定角度(すなわち20°)に変更される(S11)。なお、S11においては、俯角が所定角度になっていない場合に変更されるのであって、すでに所定角度になっている場合は、俯角の変更は特に行われない。次に、カメラ1によって撮像された後側方画像に対して、歪補正部6による歪補正処理が実施される(S12)。そして、後進フラグがオンであるか否かが判定部2により判定される(S13)。なお、シフトがPの状態からRの状態になった場合に、後進フラグはオンであると判定される。一方、シフトがN又はDの状態からRの状態になった場合に、後進フラグはオフであると判定される。   Next, the order of processing in the rear side visual recognition system 100 including the camera 1 having a horizontal field angle α of 180 ° will be described with reference to FIGS. 8 and 9. Note that the depression angle (that is, the predetermined angle) of the camera 1 in a normal state is 20 °. This process is repeatedly executed every predetermined time. First, the determination unit 2 determines whether or not the detection unit 11 detects that the vehicle 200 is in a forward state (S10). As a result of the determination, when it is detected that the vehicle 200 is not in the forward state (that is, the reverse state where the shift is R or the stop state where the shift is P), the depression angle changing unit 5 sets the depression angle to a predetermined angle (that is, 20 °). (S11). In S11, the angle is changed when the depression angle is not a predetermined angle. If the depression angle is already a predetermined angle, the depression angle is not particularly changed. Next, distortion correction processing by the distortion correction unit 6 is performed on the rear side image captured by the camera 1 (S12). Then, the determination unit 2 determines whether the reverse flag is on (S13). When the shift is changed from the P state to the R state, the reverse flag is determined to be on. On the other hand, when the shift is changed from N or D to R, the reverse flag is determined to be off.

ここで、後進フラグがオンであった場合、後側方画像が、ディスプレイ4に表示される(S15)。このため、図3に示したように、自車両200に向かってくる車両400も確認することができる。そして、S10へ移動する。   Here, when the reverse flag is ON, a rear side image is displayed on the display 4 (S15). For this reason, as shown in FIG. 3, it is also possible to confirm the vehicle 400 that is approaching the host vehicle 200. And it moves to S10.

一方、S13において後進フラグがオフであった場合について説明する。水平画角αが180°であるカメラ1を用いているため、図9(a)に示したように、後側方画像中の撮像対象は小さく写りこんでいる。そこで、この後側方画像における、水平画角αが130°で撮像した場合に相当する狭い範囲(すなわち、破線で囲まれた拡大対象範囲T)が、拡大部7によって拡大される。そして、この拡大された後側方画像が、図9(b)に示したように、ディスプレイ4に表示される(S14)。その後、カメラ1(水平画角αは上述のように130°相当の範囲)の俯角を45°に視点を変換して撮像した場合に相当する後側方画像を、ディスプレイ4に表示させる(S16)。そして、S10へ移動する。なお、車両200の運転者の手動操作により、S14又はS16の状態からS15の操作を行うことを可能にしてもよく、また、S15の状態からS14又はS16の操作を行うことを可能にしてもよい。   On the other hand, a case where the reverse flag is off in S13 will be described. Since the camera 1 having a horizontal angle of view α of 180 ° is used, as shown in FIG. 9A, the imaging target in the rear side image is reflected in a small size. Therefore, a narrow range (that is, an enlargement target range T surrounded by a broken line) corresponding to a case where the horizontal angle of view α is captured at 130 ° in the rear side image is enlarged by the enlargement unit 7. Then, the enlarged rear side image is displayed on the display 4 as shown in FIG. 9B (S14). Thereafter, a rear side image corresponding to the case where the angle of view of the camera 1 (horizontal angle of view α is in the range corresponding to 130 ° as described above) is converted to 45 ° and the image is captured is displayed on the display 4 (S16). ). And it moves to S10. Note that the operation of S15 may be performed from the state of S14 or S16 by the manual operation of the driver of the vehicle 200, and the operation of S14 or S16 may be performed from the state of S15. Good.

また、S10における判定の結果、車両200は前進状態(すなわち、シフトがDの状態)であると検知された場合の処理について、説明は上述したので割愛する。なお、上述の処理各々(例えば、S12やS16等)は、実施されるのが好ましいが、必須条件ではないため、実施を省略することができる。   In addition, as a result of the determination in S10, the processing when the vehicle 200 is detected to be in the forward movement state (that is, the shift is in the D state) has been described above, and thus will not be described. Note that each of the above-described processes (for example, S12 and S16) is preferably performed, but since it is not an essential condition, the execution can be omitted.

以上説明したように、本実施形態に係る後側方視認システム100では、判定部2によって所定条件を満たすと判定された場合に、ディスプレイ4に表示される画像が、他の画像から、カメラ1によって撮像された後側方画像に切替部3によって切り替えられる。このため、運転者は、ステアリングホイールを握って前を向きながら、運転の合間にディスプレイ4を目視することで、自車両200の後側方を容易に視認することができる。この結果、自車両200の死角に関する情報が適切に補われるため、自車両200の後側方に位置する、隣接車線を走行中の車両300を容易に認識することが可能となる。更に、車両200の最後部に搭載するカメラは一台で済むため、コストを低く抑えることができる。   As described above, in the rear side visual recognition system 100 according to the present embodiment, when the determination unit 2 determines that the predetermined condition is satisfied, the image displayed on the display 4 is different from the other images from the camera 1. Is switched by the switching unit 3 to the rear side image captured by. For this reason, the driver can easily visually recognize the rear side of the host vehicle 200 by observing the display 4 while driving while holding the steering wheel and facing forward. As a result, since the information regarding the blind spot of the host vehicle 200 is appropriately supplemented, it is possible to easily recognize the vehicle 300 traveling in the adjacent lane located behind the host vehicle 200. Furthermore, since only one camera is mounted on the rearmost part of the vehicle 200, the cost can be kept low.

また、カメラ1が広視野角を有することにより、車両200の後側方を、より広い視野角で撮像することができる。この結果、自車両200の死角に関する情報が、より多く、且つ、より適切に補われるため、隣接車線を走行中の車両300の認識がより確実に可能となる。   Further, since the camera 1 has a wide viewing angle, the rear side of the vehicle 200 can be imaged with a wider viewing angle. As a result, since the information regarding the blind spot of the host vehicle 200 is more and more appropriately supplemented, the vehicle 300 traveling in the adjacent lane can be more reliably recognized.

また、運転者は、歪補正部6によって補正された補正画像や、拡大部7によって拡大された拡大画像に基づいて、自車両200の後側方を、より正確に、且つ、より詳細に視認することができる。この結果、自車両200の死角に関する情報が更に適切に補われるため、隣接車線を走行中の車両300の認識が更に確実に可能となる。   In addition, the driver can view the rear side of the host vehicle 200 more accurately and in more detail based on the corrected image corrected by the distortion correcting unit 6 and the enlarged image enlarged by the magnifying unit 7. can do. As a result, the information regarding the blind spot of the host vehicle 200 is more appropriately supplemented, so that the vehicle 300 traveling in the adjacent lane can be more reliably recognized.

また、計測部8によって計測された速度が所定速度(例えば時速40km)に達した場合に、判定部2によって所定条件が満たされたと判定される。そして、ディスプレイ4に表示される画像が、他の画像から、上記画像に切替部3によって切り替えられる。このため、車線変更等を行う目的で所定速度に達するような高速運転に切り替えた場合に、運転者は、自車両200の後側方を視認することができる。この結果、車線変更等を行う場合の自車両200の死角に関する情報がより適切に補われるため、隣接車線を走行中の車両300の認識がより確実に可能となる。   Further, when the speed measured by the measurement unit 8 reaches a predetermined speed (for example, 40 km / h), the determination unit 2 determines that the predetermined condition is satisfied. Then, the image displayed on the display 4 is switched from the other image to the image by the switching unit 3. For this reason, the driver can visually recognize the rear side of the host vehicle 200 when switching to a high-speed driving that reaches a predetermined speed for the purpose of changing lanes or the like. As a result, the information regarding the blind spot of the host vehicle 200 when the lane change or the like is performed is more appropriately supplemented, so that the vehicle 300 traveling in the adjacent lane can be more reliably recognized.

また、ウィンカ9が作動している場合に、判定部2によって所定条件が満たされたと判定され、上記画像に切替部によって切り替えられる。このため、車線変更等を行う目的で車両のウィンカ9を作動させた場合に、運転者は、自車両200の後側方を視認することができる。この結果、車線変更等を行う場合の自車両200の死角に関する情報が更に適切に補われるため、隣接車線を走行中の車両300の認識が更に確実に可能となる。   Further, when the winker 9 is operating, the determination unit 2 determines that the predetermined condition is satisfied, and the image is switched to the image by the switching unit. For this reason, when operating the blinker 9 of the vehicle for the purpose of changing the lane, the driver can visually recognize the rear side of the host vehicle 200. As a result, the information regarding the blind spot of the host vehicle 200 when the lane change or the like is performed is more appropriately supplemented, so that the vehicle 300 traveling in the adjacent lane can be more reliably recognized.

また、位置取得部10によって取得された位置情報により示される位置が高速道路又は自動車専用道路上に位置している場合に、判定部2によって所定条件が満たされたと判定され、上記画像に切替部3によって切り替えられる。このため、高速道路又は自動車専用道路を運転中の場合に、運転者は、自車両200の後側方を視認することができる。この結果、高速道路又は自動車専用道路において車線変更等を行う場合の自車両200の死角に関する情報がより適切に補われるため、隣接車線を走行中の車両300の認識がより確実に可能となる。   Further, when the position indicated by the position information acquired by the position acquisition unit 10 is located on the expressway or the automobile exclusive road, the determination unit 2 determines that the predetermined condition is satisfied, and the image is switched to the above-described image. 3 is switched. For this reason, the driver can visually recognize the rear side of the host vehicle 200 when driving on an expressway or an automobile-only road. As a result, the information regarding the blind spot of the host vehicle 200 when the lane change or the like is performed on the highway or the automobile exclusive road is more appropriately supplemented, so that the vehicle 300 traveling in the adjacent lane can be more reliably recognized.

また、後側方画像における自車両200が走行した車線の領域に、重畳部13によってマスクが重畳される。このため、運転者は、マスクにより重畳されていない領域、すなわち、後側方画像における自車両200が走行した車線の領域以外の領域に対してのみ、注意を払えばよい。この結果、自車両200の死角に関する情報がより適切に補われるため、隣接車線を走行中の車両300の認識がより確実に可能となる。   In addition, the mask is superimposed by the superimposing unit 13 on the area of the lane in which the host vehicle 200 travels in the rear side image. For this reason, the driver only needs to pay attention to a region that is not superimposed by the mask, that is, a region other than the region of the lane in which the host vehicle 200 travels in the rear side image. As a result, the information regarding the blind spot of the host vehicle 200 is more appropriately supplemented, so that the vehicle 300 traveling in the adjacent lane can be more reliably recognized.

また、検知部11によって車両200が後進状態であると検知された場合に、判定部2によって所定条件が満たされたと判定され、上記画像に切替部3によって切り替えられる。このため、車両200が後進する場合に、運転者は、自車両200の後側方を視認することができる。この結果、車両200を後進させる場合の自車両200の死角に関する情報が更に適切に補われる。   When the detection unit 11 detects that the vehicle 200 is in the reverse drive state, the determination unit 2 determines that the predetermined condition is satisfied, and the switching unit 3 switches to the image. For this reason, when the vehicle 200 moves backward, the driver can visually recognize the rear side of the host vehicle 200. As a result, the information regarding the blind spot of the host vehicle 200 when the vehicle 200 is moved backward is more appropriately supplemented.

また、判定部2によって所定条件を満たすと判定された場合に、俯角変更部5により俯角が変更される。このため、俯角を大きくした場合、自車両200に近い後側方画像を、カメラ1によって撮像することができる。また、俯角を小さくした場合、自車両200から遠い後側方画像を、カメラ1によって撮像することができる。この結果、俯角が大きい場合は駐車時における自車両後方の死角に関する情報が適切に補われて駐車枠(すなわち、駐車しようとするスペース)が見やすくなり、俯角が小さい場合は隣接車線を走行中の車両300の認識が容易となる。   In addition, when the determination unit 2 determines that the predetermined condition is satisfied, the depression angle changing unit 5 changes the depression angle. For this reason, when the depression angle is increased, a rear side image close to the host vehicle 200 can be captured by the camera 1. When the depression angle is reduced, a rear side image far from the host vehicle 200 can be captured by the camera 1. As a result, when the depression angle is large, the information about the blind spot behind the vehicle at the time of parking is appropriately supplemented so that the parking frame (that is, the space to be parked) is easy to see, and when the depression angle is small, the vehicle is traveling in the adjacent lane. The vehicle 300 can be easily recognized.

以上、本発明の好適な実施形態について説明したが、本発明は上記実施形態に限定されるものではない。たとえば、上記実施形態において、上記の所定条件は、車両200の運転者により、適宜、変更することが可能でもよい。   The preferred embodiment of the present invention has been described above, but the present invention is not limited to the above embodiment. For example, in the above embodiment, the predetermined condition may be appropriately changed by the driver of the vehicle 200.

本実施形態に係る後側方視認システムのブロック構成図である。It is a block block diagram of the rear side visual recognition system which concerns on this embodiment. 走行中の二台の車両の位置関係を説明する平面図、及び後側方視認システムを搭載する車両の後方部における概略側面図である。It is the top view explaining the positional relationship of the two vehicles in driving | running | working, and the schematic side view in the rear part of the vehicle carrying a rear side visual recognition system. 後側方視認システムを搭載する車両が撮像可能な範囲を説明する平面図である。It is a top view explaining the range which can image a vehicle carrying a backside visual recognition system. ディスプレイに表示された画像を示す図である。It is a figure which shows the image displayed on the display. ディスプレイに表示された画像を示す図である。It is a figure which shows the image displayed on the display. ディスプレイに表示された画像を示す図である。It is a figure which shows the image displayed on the display. 水平画角αが130°のカメラを備えた後側方視認システムにおける処理の順番を示すフローチャートである。It is a flowchart which shows the order of the process in a rear side visual recognition system provided with the camera whose horizontal field angle (alpha) is 130 degrees. 水平画角αが180°のカメラを備えた後側方視認システムにおける処理の順番を示すフローチャートである。It is a flowchart which shows the order of the process in a rear side visual recognition system provided with the camera whose horizontal field angle (alpha) is 180 degrees. 後側方画像が拡大表示される様子を示す図である。It is a figure which shows a mode that a rear side image is expanded and displayed.

符号の説明Explanation of symbols

1…カメラ、2…判定部、3…切替部、4…ディスプレイ、5…俯角変更部、6…歪補正部、7…拡大部、8…計測部、9…ウィンカ、10…位置取得部、11…検知部、12…CAN、13…重畳部、100…後側方視認システム、200,300…車両、201…サイドミラー、400,401…道路、402,430…マスク、403,X〜Z…領域、410〜413…座席、420〜422…表示領域、440…所定位置、A…道幅、B〜E…距離、S…撮像範囲、T…拡大対象範囲、x…撮像方向、y…水平方向。


DESCRIPTION OF SYMBOLS 1 ... Camera, 2 ... Determination part, 3 ... Switching part, 4 ... Display, 5 ... Depression angle change part, 6 ... Distortion correction part, 7 ... Enlargement part, 8 ... Measurement part, 9 ... Winker, 10 ... Position acquisition part, DESCRIPTION OF SYMBOLS 11 ... Detection part, 12 ... CAN, 13 ... Superimposition part, 100 ... Rear side view system, 200, 300 ... Vehicle, 201 ... Side mirror, 400, 401 ... Road, 402, 430 ... Mask, 403, XZ ... Area, 410-413 ... Seat, 420-422 ... Display area, 440 ... Predetermined position, A ... Road width, BE ... Distance, S ... Imaging range, T ... Expansion target range, x ... Imaging direction, y ... Horizontal direction.


Claims (9)

車両の後側方に視野を有する撮像部と、
画像を表示する表示部と、
前記車両の状態が所定条件を満たすか否かを判定する判定部と、
前記判定部によって前記所定条件を満たすと判定された場合に、前記表示部に表示される画像を、他の画像から、前記撮像部によって撮像された後側方画像に切り替える切替部と、
前記後側方画像における前記車両が走行した車線の領域にマスクを重畳して前記表示部に表示させる重畳部と、
を備える後側方視認システム。
An imaging unit having a field of view on the rear side of the vehicle;
A display for displaying an image;
A determination unit for determining whether the state of the vehicle satisfies a predetermined condition;
A switching unit that switches an image displayed on the display unit from another image to a rear side image captured by the imaging unit when the determination unit determines that the predetermined condition is satisfied;
A superimposing unit that superimposes a mask on a region of a lane in which the vehicle has traveled in the rear side image and displays the mask on the display unit;
Rear side viewing system with.
前記撮像部は、広視野角を有する、請求項1記載の後側方視認システム。   The rear side-viewing system according to claim 1, wherein the imaging unit has a wide viewing angle. 前記撮像部によって撮像された後側方画像に歪補正処理を施す歪補正部を更に備え、
前記切替部は、前記表示部に表示される画像を、他の画像から、前記歪補正部によって歪補正処理された補正画像に切り替える、請求項1又は2記載の後側方視認システム。
A distortion correction unit that performs distortion correction processing on the rear side image captured by the imaging unit;
The rear side visual recognition system according to claim 1 or 2, wherein the switching unit switches an image displayed on the display unit from another image to a corrected image subjected to distortion correction processing by the distortion correcting unit.
前記撮像部によって撮像された後側方画像を拡大する拡大部を更に備え、
前記切替部は、前記表示部に表示される画像を、他の画像から、前記拡大部によって拡大された拡大画像に切り替える、請求項1〜3の何れか一項記載の後側方視認システム。
An enlargement unit for enlarging a rear side image captured by the imaging unit;
The rear side visual recognition system according to any one of claims 1 to 3, wherein the switching unit switches an image displayed on the display unit from another image to an enlarged image enlarged by the enlargement unit.
前記車両の速度を計測する計測部を更に備え、
前記所定条件は、前記計測部によって計測された速度が所定速度以上であることである、請求項1〜4の何れか一項記載の後側方視認システム。
A measuring unit for measuring the speed of the vehicle;
The rear side visual recognition system according to any one of claims 1 to 4, wherein the predetermined condition is that a speed measured by the measurement unit is equal to or higher than a predetermined speed.
前記所定条件は、前記車両の方向指示器が作動していることである、請求項1〜5の何れか一項記載の後側方視認システム。   The rear side visual recognition system according to any one of claims 1 to 5, wherein the predetermined condition is that a direction indicator of the vehicle is operating. 前記車両の位置情報を取得する位置取得部を更に備え、
前記所定条件は、前記位置取得部によって取得された位置情報により示される位置が高速道路又は自動車専用道路上に位置していることである、請求項1〜6の何れか一項記載の後側方視認システム。
A position acquisition unit for acquiring position information of the vehicle;
The rear side according to any one of claims 1 to 6, wherein the predetermined condition is that a position indicated by the position information acquired by the position acquisition unit is located on an expressway or an automobile exclusive road. Direction visual recognition system.
前記車両の進行状態を検知する検知部を更に備え、
前記所定条件は、前記検知部によって前記車両が後進状態であると検知されることである、請求項1〜の何れか一項記載の後側方視認システム。
A detection unit for detecting a traveling state of the vehicle;
The rear side visual recognition system according to any one of claims 1 to 7 , wherein the predetermined condition is that the detection unit detects that the vehicle is in a reverse drive state.
前記判定部によって前記所定条件を満たすと判定された場合に、前記撮像部の俯角を変更する俯角変更部を更に備える、請求項1〜の何れか一項記載の後側方視認システム。 The rear side visual recognition system according to any one of claims 1 to 8 , further comprising a depression angle changing unit that changes the depression angle of the imaging unit when the determination unit determines that the predetermined condition is satisfied.
JP2005210471A 2005-07-20 2005-07-20 Rear side view system Expired - Fee Related JP4658724B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005210471A JP4658724B2 (en) 2005-07-20 2005-07-20 Rear side view system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005210471A JP4658724B2 (en) 2005-07-20 2005-07-20 Rear side view system

Publications (2)

Publication Number Publication Date
JP2007028440A JP2007028440A (en) 2007-02-01
JP4658724B2 true JP4658724B2 (en) 2011-03-23

Family

ID=37788568

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005210471A Expired - Fee Related JP4658724B2 (en) 2005-07-20 2005-07-20 Rear side view system

Country Status (1)

Country Link
JP (1) JP4658724B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015144407A (en) * 2013-12-27 2015-08-06 株式会社Jvcケンウッド Visual field support device, visual field support method, and visual field support program
MX2018004891A (en) 2015-10-22 2018-06-20 Nissan Motor Display control method and display control device.
JP6365600B2 (en) * 2016-06-30 2018-08-01 マツダ株式会社 Vehicle display device

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01189289A (en) * 1988-01-25 1989-07-28 Nissan Motor Co Ltd Information display device for vehicle
JPH07250268A (en) * 1994-03-14 1995-09-26 Yazaki Corp Vehicle periphery monitoring device
JP2000251080A (en) * 1999-03-01 2000-09-14 Yazaki Corp Rear side monitoring device for vehicle
JP2001023092A (en) * 1999-07-08 2001-01-26 Mitsubishi Motors Corp Monitoring device for vehicle peripheral area
JP2003008951A (en) * 2001-06-19 2003-01-10 Yazaki Corp On-vehicle monitor device
JP2006264524A (en) * 2005-03-24 2006-10-05 Aisin Aw Co Ltd Visual recognition device for vehicle surrounding

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01189289A (en) * 1988-01-25 1989-07-28 Nissan Motor Co Ltd Information display device for vehicle
JPH07250268A (en) * 1994-03-14 1995-09-26 Yazaki Corp Vehicle periphery monitoring device
JP2000251080A (en) * 1999-03-01 2000-09-14 Yazaki Corp Rear side monitoring device for vehicle
JP2001023092A (en) * 1999-07-08 2001-01-26 Mitsubishi Motors Corp Monitoring device for vehicle peripheral area
JP2003008951A (en) * 2001-06-19 2003-01-10 Yazaki Corp On-vehicle monitor device
JP2006264524A (en) * 2005-03-24 2006-10-05 Aisin Aw Co Ltd Visual recognition device for vehicle surrounding

Also Published As

Publication number Publication date
JP2007028440A (en) 2007-02-01

Similar Documents

Publication Publication Date Title
JP4914458B2 (en) Vehicle periphery display device
JP5337878B2 (en) Driving assistance device
JP5172314B2 (en) Stereo camera device
US8354944B2 (en) Night vision device
US20180201191A1 (en) Surroundings-monitoring device and computer program product
EP3367366B1 (en) Display control method and display control device
JP5117003B2 (en) Driving assistance device
US7423521B2 (en) Vehicular visual assistance system
JP4961160B2 (en) Vehicle surroundings confirmation device
JP2007223338A (en) Display system, moving body, display method, display program and storage medium thereof
JP4772409B2 (en) Image display system
JP2008280026A (en) Driving assistance device
JP4832489B2 (en) Lane judgment device
JP5966513B2 (en) Rear side photographing device for vehicle
US11601621B2 (en) Vehicular display system
JP2017054478A (en) Vehicle display device and vehicle display method
JP4595649B2 (en) Parking support method and parking support device
JP4658724B2 (en) Rear side view system
JP2010154304A (en) Mobile camera system and driving method
JP2004312523A (en) On-vehicle image processor
JP2004252837A (en) Vehicle periphery display device and vehicle periphery display program
JP2006163756A (en) Vehicular view supporting device
JP2009067292A (en) In-vehicle camera system
JP2006268224A (en) Vehicular driving assistance system
JP4561512B2 (en) Parking support method and parking support device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080327

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100908

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100921

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101105

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101124

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101224

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140107

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees