JP2015223976A - Vehicular outside monitor device - Google Patents

Vehicular outside monitor device Download PDF

Info

Publication number
JP2015223976A
JP2015223976A JP2014110738A JP2014110738A JP2015223976A JP 2015223976 A JP2015223976 A JP 2015223976A JP 2014110738 A JP2014110738 A JP 2014110738A JP 2014110738 A JP2014110738 A JP 2014110738A JP 2015223976 A JP2015223976 A JP 2015223976A
Authority
JP
Japan
Prior art keywords
image
images
imaging
vehicle
lens system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014110738A
Other languages
Japanese (ja)
Other versions
JP6373643B2 (en
Inventor
遠藤 修
Osamu Endo
修 遠藤
直樹 多々良
Naoki Tatara
直樹 多々良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koito Manufacturing Co Ltd
Original Assignee
Koito Manufacturing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koito Manufacturing Co Ltd filed Critical Koito Manufacturing Co Ltd
Priority to JP2014110738A priority Critical patent/JP6373643B2/en
Priority to PCT/JP2015/064510 priority patent/WO2015182457A1/en
Priority to CN201580028262.1A priority patent/CN106414174B/en
Priority to EP15799505.1A priority patent/EP3150437B1/en
Priority to US15/314,189 priority patent/US10179544B2/en
Publication of JP2015223976A publication Critical patent/JP2015223976A/en
Application granted granted Critical
Publication of JP6373643B2 publication Critical patent/JP6373643B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To display plural images on which, different areas are imaged respectively, in a continuous state, and displays an object to be monitored in an enlarged state, in a vehicular outside monitor device.SOLUTION: A vehicular outside monitor device comprises: an imaging device 1L (1R) comprising plural imaging optical systems 14t, 14w for imaging an optical image with different magnification each other on imaging surfaces 13t, 13w of a same imaging element 13; and image control means for synthesizing the images imaged by the respective imaging optical systems 14t, 14w and displaying the synthesized image on a monitor. The image control means detects an overlapped part of the respective images, namely, a common image imaged in both images in common, and synthesizes both images in a continuous state based on the common image.

Description

本発明は自動車等の車両の外部を監視するための外部監視装置に関し、特に監視する対象物を連続した広い領域にわたって、かつ鮮明に観察しながら監視を行うことが可能な外部監視装置に関するものである。   The present invention relates to an external monitoring device for monitoring the outside of a vehicle such as an automobile, and more particularly to an external monitoring device capable of monitoring an object to be monitored over a continuous wide area and clearly observing. is there.

自動車の外部の後方ないし側方領域を監視するために、当該領域を撮像装置で撮像し、撮像した画像を車室内のモニターに表示するようにした外部監視装置が提案されている。この外部監視装置を備えることにより、自動車の左右のサイドミラーを省略し、自動車のデザインの面で、あるいは自動車の走行時における空気抵抗を緩和する上で有利になる。特許文献1には、自動車のフロントバンパの左右両側位置、あるいは左右フロントフェンダに設けたウインカレンズ(サイドターンシグナルランプ)内に後方ないし側方を撮像するカメラを配設し、当該カメラで撮像した画像を車室内の運転席に設けたモニターに表示する技術が提案されている。   In order to monitor a rear or side region outside the automobile, an external monitoring device has been proposed in which the region is imaged by an imaging device and the captured image is displayed on a monitor in the vehicle interior. By providing this external monitoring device, the left and right side mirrors of the vehicle are omitted, which is advantageous in terms of vehicle design or in reducing air resistance during vehicle travel. In Patent Document 1, a camera that captures the rear or side of a front bumper of a vehicle, or a winker lens (side turn signal lamp) provided in a left and right front fender is disposed, and images are captured by the camera. A technique for displaying an image on a monitor provided in a driver's seat in a passenger compartment has been proposed.

特開2000−177483号公報JP 2000-177483 A 特開2007−131162号公報JP 2007-131162 A

特許文献1の技術では、自動車の左右に配設された各カメラは単一の焦点距離の光学系(レンズ系)を用いた構造であるため、撮像領域(撮像画角)が光学系によって決定されてしまう。すなわち、狭い画角の光学系で構成したカメラでは、自動車の後方ないし側方の広い領域を撮像することができず、いわゆる死角が生じる。一方、広い画角の光学系で構成したカメラでは広い範囲を撮像して死角を解消する上では有効であるが、監視する対象物、例えば自車の周囲に存在する他車両が小さい画像で撮像されるため、撮像した画像をそのままモニターに表示したときには、他車両を鮮明に視認することが難しい。特に、カメラを小型にすべく小型の撮像素子を用いたときには、撮像面を構成する画素数に制限を受けるため、解像度の高い画像を得ることは困難である。   In the technique of Patent Document 1, each camera disposed on the left and right sides of the automobile has a structure using an optical system (lens system) having a single focal length, and therefore an imaging region (imaging field angle) is determined by the optical system. Will be. In other words, a camera configured with an optical system with a narrow angle of view cannot capture a wide area behind or on the side of the automobile, and a so-called blind spot occurs. On the other hand, a camera configured with an optical system having a wide angle of view is effective in capturing a wide range and eliminating blind spots, but captures a small image of an object to be monitored, for example, another vehicle around the host vehicle. Therefore, when the captured image is displayed on the monitor as it is, it is difficult to clearly see the other vehicle. In particular, when a small image sensor is used to reduce the size of the camera, it is difficult to obtain a high-resolution image because the number of pixels constituting the imaging surface is limited.

そこで、画角が広いカメラと狭いカメラを併用することが考えられるが、その場合にはカメラの台数が多くなり、自動車への配設が難しくなるとともにコスト高の要因になる。特許文献2では、1つの撮像素子に対して撮像光軸方向が異なる2つの結像光学系を配設し、これら2つの結像光学系を利用することでそれぞれ異なる領域を1つの撮像素子で撮像する技術が提案されている。この特許文献2の技術では、カメラ台数を増加することなく複数(2つ)の異なる領域を同時に撮像して監視することは可能であるが、撮像画角を広げるためには2つの撮像領域を離した状態に設定しなければならず、2つの撮像領域を連続させた広い領域を監視することができなくなり死角を回避することは難しい。また、このように監視領域を拡大しても、撮像素子の画素数の制限によって解像度を高くすることはできず、鮮明な画像を得ることが難しいことは特許文献1と同じである。   Therefore, it is conceivable to use a camera with a wide angle of view and a camera with a narrow angle of view. In this case, however, the number of cameras increases, which makes it difficult to install in a car and increases the cost. In Patent Document 2, two imaging optical systems having different imaging optical axis directions are arranged for one image sensor, and each of these different imaging optical systems is used to provide different regions with one image sensor. Techniques for imaging have been proposed. In the technique of Patent Document 2, it is possible to simultaneously image and monitor a plurality (two) of different areas without increasing the number of cameras, but in order to widen the imaging angle of view, two imaging areas are used. It has to be set in a separated state, and it is difficult to avoid a blind spot because it becomes impossible to monitor a wide area in which two imaging areas are continuous. Further, even if the monitoring area is expanded in this way, the resolution cannot be increased due to the limitation of the number of pixels of the image sensor, and it is difficult to obtain a clear image as in Patent Document 1.

本発明の目的は、異なる領域を撮像した複数の画像を連続した状態で表示するとともに、監視する対象物を拡大して表示することが可能な車両用外部監視装置を提供するものである。   An object of the present invention is to provide an external monitoring device for a vehicle that can display a plurality of images obtained by imaging different areas in a continuous state and can enlarge and display an object to be monitored.

本発明の車両用外部監視装置は、同一の撮像素子の撮像面にそれぞれ異なる倍率で光学像を結像する複数の結像光学系を備える撮像装置と、各結像光学系で撮像した画像を合成してモニターに表示する画像制御手段とを備えており、画像制御手段は各画像の撮像領域を検出し、当該撮像領域に基づいて両画像を連続した状態で合成することを特徴とする。例えば、画像制御手段は、2つの画像の共通画像を検出し、1つの画像の共通画像を残し、他の画像の共通画像を削除して両画像を合成することが好ましい。ここで、両画像が連続する形態は、両画像間に撮像されない領域が存在しないようにすることであり、両画像に共通する画像が重複した画像として合成される場合も含まれるものである。   An external monitoring device for a vehicle according to the present invention includes an imaging device including a plurality of imaging optical systems that form optical images at different magnifications on an imaging surface of the same imaging device, and images captured by the imaging optical systems. Image control means for combining and displaying on a monitor. The image control means detects an imaging area of each image and combines both images in a continuous state based on the imaging area. For example, it is preferable that the image control unit detects a common image of two images, leaves a common image of one image, deletes a common image of other images, and combines both images. Here, the form in which both images are continuous is to prevent an area that is not captured between both images from being present, and includes a case where images common to both images are combined as overlapping images.

本発明において、画像制御手段は、複数の画像を左右方向または上下方向に並べかつ連続した状態に合成してモニターに表示する。この場合、画像制御手段は、複数の画像のうち少なくとも1つの画像を画像処理して他の画像と合成するようにしてもよい。例えば、画像制御手段は、少なくとも1つの画像を拡大または縮小処理する。   In the present invention, the image control means arranges a plurality of images in the horizontal direction or the vertical direction and synthesizes them in a continuous state and displays them on the monitor. In this case, the image control means may perform image processing on at least one of the plurality of images and combine it with another image. For example, the image control means enlarges or reduces at least one image.

本発明の好ましい形態は、車両の外部の後方から側方を撮像してモニターに表示する外部監視装置として構成され、焦点距離の長い第1結像光学系で車幅方向内側領域を撮像し、焦点距離の短い第2結像光学系で車幅方向外側領域を撮像し、画像制御手段は各結像光学系で撮像した画像を左右に並べて合成してモニターに表示させる。また、この場合、撮像装置は車両の左右にそれぞれ配設され、モニターは左右の撮像装置で撮像された画像をそれぞれ個別に表示する2つのモニターあるいは両画像を合一表示する1つのモニターで構成される。   A preferred embodiment of the present invention is configured as an external monitoring device that images the side from the rear outside the vehicle and displays it on the monitor, images the vehicle width direction inner region with the first imaging optical system having a long focal length, The second imaging optical system with a short focal length images the vehicle width direction outer side area, and the image control means synthesizes the images captured by the imaging optical systems side by side and displays them on the monitor. Further, in this case, the imaging devices are arranged on the left and right sides of the vehicle, respectively, and the monitor is composed of two monitors that individually display images picked up by the left and right imaging devices or one monitor that displays both images together. Is done.

本発明によれば、複数の光学系で撮像した画像の撮像領域、例えば画像が重複する領域を検出し、この重複した領域に基づいて合成した画像をモニターに表示することで、自車両の外部に存在する他車両等の対象物を拡大して撮像することによって当該対象物を正確に認識し、また、自車両の外部の広い領域にわたって死角が生じることを回避し、これによる自車両の周囲の対象物を監視して安全走行を確保することが可能になる。   According to the present invention, an imaging region of images captured by a plurality of optical systems, for example, a region where images overlap is detected, and an image synthesized based on the overlapping region is displayed on a monitor, so that the outside of the vehicle By enlarging and imaging an object such as another vehicle existing in the vehicle, the object is accurately recognized, and avoiding the generation of blind spots over a wide area outside the host vehicle, thereby surrounding the host vehicle It is possible to ensure safe driving by monitoring the object.

本発明において、車両の外部の後方から側方を撮像してモニターに表示する外部監視装置として構成された場合、焦点距離の長い第1結像光学系で車幅方向内側領域を撮像し、焦点距離の短い第2結像光学系で車幅方向外側領域を撮像し、画像制御手段は各結像光学系で撮像した画像を左右に並べて合成してモニターに表示させる構成とすることで、自車両の後続車や後方車を拡大して正確に監視することができ、かつ自車両の側方の広い領域に存在する並走車や対向車を死角を生じることなく確実に監視することができる。   In the present invention, when configured as an external monitoring device that images the side from the outside of the vehicle and displays the image on the monitor, the first imaging optical system having a long focal length images the vehicle width direction inner region, The second image forming optical system with a short distance is used to capture the outer region in the vehicle width direction, and the image control means is configured so that the images captured by each image forming optical system are arranged side by side and combined and displayed on the monitor. It is possible to enlarge and accurately monitor the vehicles behind and behind the vehicle, and to reliably monitor parallel vehicles and oncoming vehicles existing in a wide area on the side of the vehicle without causing blind spots. .

本発明の外部監視装置を備えた自動車の概念構成を示す平面図。The top view which shows the conceptual structure of the motor vehicle provided with the external monitoring apparatus of this invention. 左ターンシグナルランプの一部を破断した斜視図。The perspective view which fractured | ruptured a part of left turn signal lamp. 左カメラモジュールの内部構成を説明する模式的な斜視図と撮像領域を説明する光学系の構成図。The typical perspective view explaining the internal structure of a left camera module, and the block diagram of the optical system explaining an imaging region. 自動車の外部領域の一例とテレおよびワイドの各レンズ系の撮像領域の関係を示す模式図。The schematic diagram which shows the relationship between an example of the external area | region of a motor vehicle, and the imaging area | region of each tele and wide lens system. 図4の外部領域を撮像した画像とその表示画像。The image which imaged the external area | region of FIG. 4, and its display image. カメラモジュールのレンズ系の変形例の光学系の構成図。The block diagram of the optical system of the modification of the lens system of a camera module. 左カメラモジュールの他の実施形態の模式的な斜視図。The typical perspective view of other embodiments of a left camera module. 自動車の外部領域の一例とテレおよびワイドの各レンズ系の撮像領域の関係を示す模式図。The schematic diagram which shows the relationship between an example of the external area | region of a motor vehicle, and the imaging area | region of each tele and wide lens system. 図8の外部領域を撮像した画像とその表示画像。The image which imaged the external area | region of FIG. 8, and its display image. 左カメラモジュールのさらに他の実施形態の模式的な斜視図。The typical perspective view of further another embodiment of a left camera module. カメラモジュールのレンズ系の変形例の光学系の構成図。The block diagram of the optical system of the modification of the lens system of a camera module.

次に、本発明の実施の形態について図面を参照して説明する。図1は本発明を自動車に設けられる左右のサイドミラーに代えて、自動車の左右の後方ないし側方領域(以降においては後側方領域と称する)を撮像し、撮像した画像をモニターに表示する外部監視装置として構成した実施形態の概略図である。自動車CARの左右のフロントフェンダには左サイドターンシグナルランプL−TSLと右サイドターンシグナルランプR−TSLが配設されている。これらのサイドターンシグナルランプL−TSL,R−TSLは、運転席等からのターン信号を受けて点灯状態とされたときに点滅して自動車の進行方向を表示するものである。これらのサイドターンシグナルランプはハザードランプとしても使用される。   Next, embodiments of the present invention will be described with reference to the drawings. FIG. 1 replaces the left and right side mirrors provided in an automobile with the present invention, images the left and right rear or side areas (hereinafter referred to as rear side areas) of the automobile, and displays the captured images on a monitor. It is the schematic of embodiment formed as an external monitoring apparatus. A left side turn signal lamp L-TSL and a right side turn signal lamp R-TSL are disposed on the left and right front fenders of the car CAR. These side turn signal lamps L-TSL and R-TSL are blinked to display the direction of travel of the automobile when turned on in response to a turn signal from a driver's seat or the like. These side turn signal lamps are also used as hazard lamps.

前記各サイドターンシグナルランプL−TSL,R−TSLのランプハウジング内には小型のカメラモジュール1L,1Rが組み込まれており、このカメラモジュール1L,1Rにより、図1に符号θL,θRで示す当該自動車CARの後側方領域を撮像することが可能とされている。ここでは、自動車の右側のサイドターンシグナルランプR−TSLに組み込んだ右カメラモジュール1Rは当該自動車CARの右側の後側方角度領域θRを撮像し、左側のサイドターンシグナルランプL−TSLに組み込んだ左カメラモジュール1Lは当該自動車CARの左側の後側方角度領域θLを撮像する。   Small camera modules 1L and 1R are incorporated in the lamp housings of the respective side turn signal lamps L-TSL and R-TSL, and the camera modules 1L and 1R allow the camera modules 1L and 1R to be indicated by the symbols θL and θR in FIG. It is possible to image the rear side area of the car CAR. Here, the right camera module 1R incorporated in the side turn signal lamp R-TSL on the right side of the automobile images the rear side angle region θR on the right side of the automobile CAR, and is incorporated in the side turn signal lamp L-TSL on the left side. The left camera module 1L images the rear side angle region θL on the left side of the automobile CAR.

前記自動車CARの車室内のダッシュボードにはモニターが配設されており、前記左右のカメラモジュール1R.1Lで撮像した画像を表示するようになっている。ここでは、ダッシュボードの運転席に対面する位置に右モニター3Rと左モニターが3L左右に並んで配設されている。そして、前記左右のモニター3L,3Rによる表示を行うために、前記自動車CARには画像制御手段としての画像ECU(電子制御ユニット)2が装備されており、前記左右のカメラモジュール1L,1Rで撮像した画像をこの画像ECU2において画像処理し、左右のモニター3L,3Rに表示する。   A monitor is disposed on the dashboard of the interior of the car CAR, and the left and right camera modules 1R. An image captured at 1L is displayed. Here, the right monitor 3R and the left monitor are arranged side by side on the left and right sides of the dashboard 3L at a position facing the driver's seat on the dashboard. In order to perform display on the left and right monitors 3L and 3R, the automobile CAR is equipped with an image ECU (electronic control unit) 2 as image control means, and images are taken by the left and right camera modules 1L and 1R. The processed image is processed in the image ECU 2 and displayed on the left and right monitors 3L and 3R.

この実施形態では、右カメラモジュール1Rで撮像した画像を右モニター3Rに表示し、左カメラモジュール1Lで撮像した画像を左モニター3Lに表示する。この表示の形態については後述するが、これにより運転者は左右のモニター3L,3Rの画像を観察することで、従来の左右のサイドミラーにより自動車の後側方を監視する場合と同様に監視が可能になる。したがって、この自動車CARにはサイドミラーは備えられていない。   In this embodiment, an image captured by the right camera module 1R is displayed on the right monitor 3R, and an image captured by the left camera module 1L is displayed on the left monitor 3L. Although this display mode will be described later, the driver can monitor the left and right monitors 3L and 3R so that the driver can monitor the rear side of the vehicle with the left and right side mirrors. It becomes possible. Therefore, this car CAR is not provided with a side mirror.

図2は前記自動車CARの左側のサイドターンシグナルランプL−TSLの一部を破断した斜視図である。この左サイドターンシグナルランプL−TSLは、自動車CARの車体BD、ここでは左フロントフェンダに固定されるベース41と、このベース41の内面となる面を覆うように被せられて当該ベース41に固定されるドーム状の透光カバー42とでランプハウジング4が構成されている。このランプハウジング4内の前記ベース41の内面には光源40としてバルブ(小型電球)あるいはLED(発光ダイオード)が搭載されている。ここではディスクリート型のLED40が搭載されている。また、前記ランプハウジング4内の自動車CARの後方側の位置には、撮像光軸を後方側に向けた左カメラモジュール1Lが内装され、前記ベース41の内面に支持されている。さらに、前記ランプハウジング4内には前記光源(LED)40から出射された光がカメラモジュール1Lにまで回り込んで撮像する画像にかぶりを生じさせないように遮光板43が内装されている。   FIG. 2 is a perspective view in which a part of the left side turn signal lamp L-TSL on the left side of the automobile CAR is broken. The left side turn signal lamp L-TSL is fixed to the base 41 so as to cover the base 41 fixed to the vehicle body BD of the automobile CAR, here the left front fender, and the inner surface of the base 41. The lamp housing 4 is composed of the dome-shaped translucent cover 42 to be formed. A bulb (small light bulb) or LED (light emitting diode) is mounted as a light source 40 on the inner surface of the base 41 in the lamp housing 4. Here, a discrete LED 40 is mounted. A left camera module 1 </ b> L with the imaging optical axis directed rearward is mounted at a position on the rear side of the automobile CAR in the lamp housing 4 and supported by the inner surface of the base 41. Further, a light shielding plate 43 is provided in the lamp housing 4 so that the light emitted from the light source (LED) 40 goes around to the camera module 1L and does not cause fogging in an image to be captured.

前記ランプハウジング4の透光カバー42は透光樹脂で形成されており、前記左カメラモジュール1Lの後方側の領域は光を屈折ないし拡散することがない透明なクリアー部として構成され、その他の領域は発光面として前記光源40から出射した光を所要の領域に向けて屈折ないし拡散するための光学ステップが形成されている。なお、この発光面は透光カバー42をアンバー色等に着色してもよい。前記右サイドターンシグナルランプR−TSLはこれと対称に構成されている。   The translucent cover 42 of the lamp housing 4 is made of translucent resin, and the rear side area of the left camera module 1L is configured as a transparent clear part that does not refract or diffuse light, and other areas. As a light emitting surface, an optical step for refracting or diffusing light emitted from the light source 40 toward a required region is formed. In addition, this light emitting surface may color the translucent cover 42 in amber color or the like. The right side turn signal lamp R-TSL is configured symmetrically.

図3(a)は前記左カメラモジュール1Lの内部構造を説明する模式構成図である。カメラボディ11とレンズ鏡筒12とを有しており、カメラボディ11内に1個の撮像素子13が内装され、レンズ鏡筒12内にレンズ系14が内装されている。前記撮像素子13はCCD撮像素子あるいはCMOS撮像素子等の半導体撮像素子で構成されている。この撮像素子13は、詳細については説明を省略するが、多数の撮像画素がマトリクス状に配列された撮像面を有しており、前記レンズ系14により撮像面に結像された対象物の光学像を各撮像画素で受光することにより当該対象物を撮像するものである。前記撮像素子13の撮像面は所定の縦横寸法比率の横長の長方形に形成され、当該撮像面は前記レンズ鏡筒12の筒軸方向、すなわち前記レンズ系14の撮像光軸に対してほぼ垂直に向けられている。   FIG. 3A is a schematic configuration diagram illustrating the internal structure of the left camera module 1L. A camera body 11 and a lens barrel 12 are provided. One image pickup device 13 is provided in the camera body 11, and a lens system 14 is provided in the lens barrel 12. The image sensor 13 is composed of a semiconductor image sensor such as a CCD image sensor or a CMOS image sensor. The image pickup device 13 has an image pickup surface in which a large number of image pickup pixels are arranged in a matrix, although the details are omitted. The optical of the object imaged on the image pickup surface by the lens system 14 The object is imaged by receiving an image at each imaging pixel. The image pickup surface of the image pickup device 13 is formed in a horizontally long rectangle having a predetermined aspect ratio, and the image pickup surface is substantially perpendicular to the tube axis direction of the lens barrel 12, that is, the image pickup optical axis of the lens system 14. Is directed.

前記レンズ鏡筒12内のレンズ系14は、ここではそれぞれの撮像光軸(レンズ系の中心を通る光軸)Ot,Owが自動車CARの後方よりも若干車幅方向の外側に向けられた第1レンズ系14tと第2レンズ系14wとで構成されている。これら第1レンズ系14tと第2レンズ系14wは車幅方向に並んで配置され、それぞれは前記撮像素子13の撮像面の異なる領域に光学像を結像するように構成されている。ここでは第1レンズ系14tは第2レンズ系14wよりも自動車CARの車幅方向の内側、すなわち車体BDに近い側に配置され、第2レンズ系14wはその外側に配置されている。なお、図示している各レンズ系は、単一レンズ(単玉レンズ)もしくは複数のレンズを結合したレンズ群を意味している。   Here, the lens system 14 in the lens barrel 12 has the respective imaging optical axes (optical axes passing through the center of the lens system) Ot and Ow oriented slightly outward in the vehicle width direction from the rear of the car CAR. The first lens system 14t and the second lens system 14w are configured. The first lens system 14t and the second lens system 14w are arranged side by side in the vehicle width direction, and each is configured to form an optical image in different regions of the imaging surface of the imaging device 13. Here, the first lens system 14t is arranged on the inner side in the vehicle width direction of the automobile CAR, that is, on the side closer to the vehicle body BD than the second lens system 14w, and the second lens system 14w is arranged on the outer side thereof. Each lens system shown in the figure means a single lens (single lens) or a lens group in which a plurality of lenses are combined.

そして、前記第1レンズ系14tで結像される光学像は、前記撮像素子13の撮像面の車幅方向内側のほぼ1/2の領域13tに結像されて撮像される。また、前記第2レンズ系14wで結像される光学像は、前記撮像素子13の撮像面の車幅方向外側のほぼ1/2の領域13wに結像されて撮像される。これにより前記撮像素子13は第1レンズ系14tと第2レンズ系14wによってそれぞれ結像された光学像を同時に撮像することが可能とされている。   Then, the optical image formed by the first lens system 14t is formed and imaged on a substantially half region 13t on the inner side in the vehicle width direction of the image pickup surface of the image pickup device 13. Further, the optical image formed by the second lens system 14w is formed and imaged on a substantially half region 13w on the outer side in the vehicle width direction of the image pickup surface of the image pickup device 13. As a result, the image pickup device 13 can simultaneously pick up optical images formed by the first lens system 14t and the second lens system 14w, respectively.

図3(b)は前記撮像素子13と第1および第2のレンズ系14t,14wの光学系を説明するための平面構成図である。前記第1レンズ系14tと第2レンズ系14wは基本的な構成はほぼ同じであるが、第1レン系14tの焦点距離は第2レンズ系14wの焦点距離よりも長く設計されている。したがって、以降においては第1レンズ系14tをテレ(望遠)レンズ系と称し、第2レンズ系14wをワイド(広角)レンズ系と称する。   FIG. 3B is a plan view illustrating the optical system of the image sensor 13 and the first and second lens systems 14t and 14w. The basic configuration of the first lens system 14t and the second lens system 14w is substantially the same, but the focal length of the first lens system 14t is designed to be longer than the focal length of the second lens system 14w. Therefore, hereinafter, the first lens system 14t is referred to as a tele (telephoto) lens system, and the second lens system 14w is referred to as a wide (wide angle) lens system.

一般にレンズ系で撮像する際の撮像画角は、当該レンズ系の焦点距離と撮像面のサイズによって決定されるが、この実施形態では、撮像素子13の撮像面を左右に2分した領域13t,13wの左右方向の寸法がほぼ同じとされているので、テレレンズ系14tの撮像画角θtはワイドレンズ系14wの撮像画角θwよりも狭くなる。例えば、テレレンズ系14tの撮像画角θtは約30°、ワイドレンズ系14wの撮像画角θwは約70°とされている。なお、この実施形態では各レンズ系14t,14wの光軸Ot,Owをそれぞれの撮像面13t,13wの中心に対して車幅方向外側に偏位させているので、各レンズ系14t,14wの撮影画角θt,θwは車幅方向の内側よりも外側に角度が大きくされた画角とされている。   In general, the imaging angle of view when imaging with the lens system is determined by the focal length of the lens system and the size of the imaging surface. In this embodiment, the region 13t, which divides the imaging surface of the imaging device 13 into left and right parts, Since the horizontal dimension of 13w is substantially the same, the imaging field angle θt of the tele lens system 14t is narrower than the imaging field angle θw of the wide lens system 14w. For example, the imaging field angle θt of the tele lens system 14t is about 30 °, and the imaging field angle θw of the wide lens system 14w is about 70 °. In this embodiment, since the optical axes Ot and Ow of the lens systems 14t and 14w are deviated outwardly in the vehicle width direction with respect to the centers of the imaging surfaces 13t and 13w, the lens systems 14t and 14w The shooting angle of view θt, θw is set to an angle of view that is larger outside than the inside in the vehicle width direction.

また、テレレンズ系14tの焦点距離はワイドレンズ系14wの焦点距離よりも長いので、テレレンズ系14tの撮像倍率はワイドレンズ系14wのそれよりも大きくなる。さらに、テレレンズ系14tとワイドレンズ系14wの撮像面の領域13t,13wが左右方向に並んでいるので、テレレンズ系14tの撮影領域とワイドレンズ系14wの撮影領域は一部において重なることになる。また、これらテレレンズ系14tとワイドレンズ系14wを合わせたカメラモジュール1Lの全体の撮影画角は図1に示した画角θLとなる。右カメラモジュール1Rについても同様である。   Further, since the focal length of the tele lens system 14t is longer than the focal length of the wide lens system 14w, the imaging magnification of the tele lens system 14t is larger than that of the wide lens system 14w. Further, since the imaging surface areas 13t and 13w of the tele lens system 14t and the wide lens system 14w are arranged in the left-right direction, the imaging area of the tele lens system 14t and the imaging area of the wide lens system 14w partially overlap each other. Further, the entire shooting angle of view of the camera module 1L including the tele lens system 14t and the wide lens system 14w is the angle of view θL shown in FIG. The same applies to the right camera module 1R.

図1に示した前記画像ECU2は、撮像素子13で撮像した画像を画像処理、例えば、拡大、縮小、歪み補正、トリミング、合成等の処理が可能である。ここで、拡大、縮小には画像の縦寸法と横寸法を独立して拡大、縮小すること、すなわち画像の縦横寸法比を変化させる処理をも含むものである。このような画像処理はソフト(プログラム)によって実現できるので、ここではそのソフトに関する具体的な説明は省略する。   The image ECU 2 shown in FIG. 1 can perform image processing, for example, enlargement, reduction, distortion correction, trimming, composition, etc., on an image captured by the image sensor 13. Here, the enlargement / reduction includes the process of independently enlarging / reducing the vertical and horizontal dimensions of the image, that is, the process of changing the vertical / horizontal dimension ratio of the image. Since such image processing can be realized by software (program), a specific description about the software is omitted here.

次に、この実施形態の外部監視装置によるモニター3R,3Lでの表示動作を説明する。図4は自車両CARの後方に自車線を走行する後続車CAR1が存在し、左側車線に並走車CAR2と後方車CAR3が存在している状況において、自車両から左後方を見たときの状況を示している。この状況においては、左カメラモジュール1Lで撮像を行うと、撮像素子13においてはテレレンズ系14tでは符号ATで示す領域を撮像し、ワイドレンズ系14wでは符号AWで示す領域を撮像することになる。因みに、SMの領域は自動車に設けられていると仮定する左サイドミラーで視認することが可能な領域である。   Next, the display operation on the monitors 3R and 3L by the external monitoring device of this embodiment will be described. FIG. 4 shows a situation in which the rear vehicle CAR1 traveling in the own lane exists behind the own vehicle CAR and the parallel vehicle CAR2 and the rear vehicle CAR3 exist in the left lane when the left rear is viewed from the own vehicle. Indicates the situation. In this situation, when imaging is performed with the left camera module 1L, the imaging element 13 captures an area indicated by the symbol AT in the tele lens system 14t and an area indicated by the symbol AW in the wide lens system 14w. Incidentally, the SM area is an area that can be viewed with a left side mirror that is assumed to be provided in the automobile.

図5(a),(b)はテレレンズ系14tで領域ATを撮像した画像(以下、テレ画像ATと称する)と、ワイドレンズ系14wで領域AWを撮像した画像(以下、ワイド画像AWと称する)であり、それぞれモニター3Lに表示すべく左右が反転されている。テレ画像ATは自車両CARの後方領域の画像であり、左サイドミラーで視認する領域よりも狭いが、後続車CAR1と後方車CAR3が拡大した状態で撮像されている。ワイド画像AWは自車両CARの後側方の広い領域の画像であり、撮像領域は左サイドミラーで視認する領域よりも広い領域を撮像でき、後続車CAR1と並走車CAR2と後方車CAR3が全て撮像されている。   5A and 5B show an image obtained by imaging the area AT with the tele lens system 14t (hereinafter referred to as a tele image AT) and an image obtained by imaging the area AW with the wide lens system 14w (hereinafter referred to as a wide image AW). ), And the left and right sides are inverted to be displayed on the monitor 3L. The tele image AT is an image of the rear region of the host vehicle CAR, and is captured in a state where the subsequent vehicle CAR1 and the rear vehicle CAR3 are enlarged, although it is narrower than the region visually recognized by the left side mirror. The wide image AW is an image of a wide area on the rear side of the host vehicle CAR, and the imaging area can capture an area larger than the area visually recognized by the left side mirror, and the following car CAR1, the parallel running car CAR2, and the rear car CAR3 All are imaged.

画像ECU2はこれらの画像をそれぞれ取り込むと、テレ画像ATとワイド画像AWについてそれぞれ画像認識を行い、両画像が重複して撮像されている部分である重複部、すなわち両画像AT,AWに共に撮像されている共通画像を検出する。そして、この共通画像を一方の画像から削除する。ここでは、撮像画角が大きいワイド画像AWから共通画像を削除する。このとき、共通画像よりもさらに車幅方向の内側領域に撮像されている画像は、右カメラモジュール1Rによって撮像される可能性が大きいので当該共通画像と共に削除してもよい。また、共通画像については、その上下方向の全領域にわたって削除する。この例では、図5(b)のワイド画像AWは破線で囲まれた領域を削除することになる。   When each of these images is captured, the image ECU 2 recognizes each of the tele image AT and the wide image AW, and images both the images AT and AW. Detect common images. Then, this common image is deleted from one image. Here, the common image is deleted from the wide image AW having a large imaging angle of view. At this time, since an image captured in the inner region in the vehicle width direction further than the common image is likely to be captured by the right camera module 1R, it may be deleted together with the common image. In addition, the common image is deleted over the entire vertical region. In this example, the area surrounded by the broken line is deleted from the wide image AW in FIG.

なお、実際にはテレレンズ系14tとワイドレンズ系14wの光軸と撮影画角は固定的に設定されており、両レンズ系で重なる撮像領域、すなわち本発明における重複部は予め分かるので、このような共通画像の検出と削除を行うことなく、最初から各レンズ系で撮像した画像のうち両レンズ系で重ならない画像のみを選択するようにしてもよい。   Actually, the optical axes and the shooting angle of view of the tele lens system 14t and the wide lens system 14w are fixedly set, and an imaging region that overlaps both lens systems, that is, an overlapping portion in the present invention is known in advance. Without detecting and deleting common images, only images that do not overlap in both lens systems may be selected from among images captured by the lens systems from the beginning.

そして、図5(c)のように、ECU2はテレ画像ATと、共通画像を削除して得られたワイド画像AWとを左右方向に並べて左モニター3Lに表示する。この左モニター3Lでは、表示面のほぼ右半分領域にテレ画像ATを表示し、左半分領域にワイド画像AWを表示する。このとき表示されるワイド画像AWではテレ画像ATとの共通画像が削除されており、また両画像AT,AWは左右方向に並んで、しかも両画像が連続した状態で表示されているので、テレ画像ATとワイド画像AWとで自車両の後側方の広い領域を死角のない連続した状態で表示することができ、当該後側方領域の好適な監視が可能になる。   Then, as shown in FIG. 5C, the ECU 2 displays the tele image AT and the wide image AW obtained by deleting the common image in the left-right direction and displays them on the left monitor 3L. In the left monitor 3L, the tele image AT is displayed in the almost right half area of the display surface, and the wide image AW is displayed in the left half area. In the wide image AW displayed at this time, the common image with the tele image AT is deleted, and both the images AT and AW are displayed side by side in the left-right direction. With the image AT and the wide image AW, a wide area on the rear side of the host vehicle can be displayed in a continuous state without a blind spot, and the rear side area can be suitably monitored.

また、この左モニター3Lでの表示では、通常のサイドミラーでは小さいサイズに視認される後続車CAR1や後方車CAR3はテレ画像ATにより倍率の高い画像として撮像され、かつ表示されるので、これら後続車CAR1や後方車CAR3を拡大された解像度の高い画像として観察することができ、正確な監視が可能になる。一方、通常のサイドミラーでは死角が生じる側方領域については、ワイド画像AWによって広角度の画像として表示されるので、自車両の隣に存在する並走車CAR2を観察し、死角が生じることなく監視することが可能になる。右カメラモジュール1Rと右モニター3Rについても同様であるが、左右方向はこれと反対になる。また、右モニター3Rでは、特に右側方領域に存在する対向車を監視することが可能である。   In the display on the left monitor 3L, the following car CAR1 and the rear car CAR3 that are visually recognized in a small size by a normal side mirror are captured and displayed as high-magnification images by the tele image AT. The car CAR1 and the rear car CAR3 can be observed as an enlarged image with high resolution, and accurate monitoring becomes possible. On the other hand, in a normal side mirror, a side area where a blind spot is generated is displayed as a wide-angle image by the wide image AW. Therefore, the parallel running car CAR2 existing next to the host vehicle is observed, and a blind spot is not generated. It becomes possible to monitor. The same applies to the right camera module 1R and the right monitor 3R, but the left and right directions are opposite. The right monitor 3R can monitor an oncoming vehicle that is present in the right side area.

ここで、前記実施形態でのモニターにおけるテレ画像とワイド画像の表示形態では、テレ画像とワイド画像の撮像倍率が相違しているため、監視者に違和感を生じさせることもある。そこで、例えばモニターを監視する者の操作によってテレ画像またはワイド画像の表示倍率を適宜調整するようにしてもよい。すなわち、ワイド画像について表示倍率を高くし、テレ画像の撮像倍率に近い大きさでワイド画像を表示するようにする。あるいは、テレ画像について表示倍率を小さくし、ワイド画像の撮像倍率に近い大きさに縮小してテレ画像を表示するようにする。   Here, in the display form of the tele image and the wide image on the monitor in the embodiment, since the imaging magnification of the tele image and the wide image is different, the monitor may feel uncomfortable. Therefore, for example, the display magnification of the tele image or the wide image may be appropriately adjusted by an operation of a person who monitors the monitor. That is, the display magnification of the wide image is increased, and the wide image is displayed with a size close to the imaging magnification of the tele image. Alternatively, the display magnification of the tele image is reduced, and the tele image is displayed by reducing it to a size close to the imaging magnification of the wide image.

このようにすることで、テレ画像とワイド画像の倍率の違いを緩和した状態でモニターに表示することができ、撮像倍率の違いが要因となる違和感を解消する。例えば、後続車を含む他車を大きな画像で正確に観察することが必要と考えたときには前者のようにワイド画像を拡大表示するようにする。また、自車両の後側方の広い範囲を観察することが必要と考えたときには後者のようにテレ画像を縮小表示するようにする。   By doing so, it is possible to display on the monitor in a state where the difference in magnification between the tele image and the wide image is relaxed, and the uncomfortable feeling caused by the difference in imaging magnification is eliminated. For example, when it is necessary to accurately observe other vehicles including the following vehicle in a large image, the wide image is enlarged and displayed as in the former case. Further, when it is considered necessary to observe a wide range on the rear side of the host vehicle, the tele image is reduced and displayed as in the latter case.

図6はカメラモジュールの変形例の模式構成図であり、図3(b)と同様に左カメラモジュール1Lの例である。図6(a)では、テレレンズ系14tは1つの主レンズL1の片側領域を利用した構成であり、ワイドレンズ系14wは当該主レンズL1の他の片側領域を利用し、これに副レンズL2を組み合わせた構成である。これにより、テレレンズ系14tの焦点距離をワイドレンズ系14wよりも長い構成とし、テレレンズ系14tの撮像倍率をワイドレンズ系14wよりも大きくし、反対にワイドレンズ系14wの撮像画角をテレレンズ系14tの撮像画角よりも大きくしている。   FIG. 6 is a schematic configuration diagram of a modified example of the camera module, and is an example of the left camera module 1L as in FIG. 3B. In FIG. 6A, the tele lens system 14t is configured to use one side region of one main lens L1, and the wide lens system 14w uses the other one side region of the main lens L1, and the sub lens L2 is attached thereto. It is a combined configuration. Thus, the focal length of the tele lens system 14t is made longer than that of the wide lens system 14w, the imaging magnification of the tele lens system 14t is made larger than that of the wide lens system 14w, and conversely, the imaging field angle of the wide lens system 14w is set to the tele lens system 14t. It is larger than the imaging angle of view.

図6(b)は図6(a)の主レンズL1に組み合わせる副レンズL3として非球面レンズを用いている。この非球面レンズは、レンズ面の片側が両凸レンズであり、他の片側は片凸レンズとして構成されている。テレレンズ系14tでは副レンズL3の片凸レンズ領域を利用し、ワイドレンズ系14wでは副レンズL3の両凸レンズ領域を利用して構成したものである。これにより、テレレンズ系14tの焦点距離をワイドレンズ系14wよりも長い構成とし、テレレンズ系14tの撮像画角よりもワイドレンズ系14wの撮像画角を大きくしている。   FIG. 6B uses an aspherical lens as the secondary lens L3 combined with the main lens L1 in FIG. The aspherical lens is configured such that one side of the lens surface is a biconvex lens and the other side is a single convex lens. The tele lens system 14t is configured using the single convex lens region of the secondary lens L3, and the wide lens system 14w is configured using the biconvex lens region of the secondary lens L3. Thus, the focal length of the tele lens system 14t is longer than that of the wide lens system 14w, and the imaging field angle of the wide lens system 14w is larger than the imaging field angle of the tele lens system 14t.

ところで、本発明にかかる車両外部監視装置のカメラモジュールは、自動車の後側方領域の自車両の周囲に存在する他車や歩行者等を監視するためのものであるので、上下方向の撮像画角よりも左右方向の撮像画角を広くとることが好ましい。図7はこのような目的で構成された実施形態のカメラモジュール1Lの模式的な斜視図であり、撮像素子13の撮像面に対してテレレンズ系14tとワイドレンズ系14wを上下に配置するとともに、横長の長方形をした撮像素子13の撮像面に対し、テレレンズ系14tで結像される光学像は、当該撮像面の下側のほぼ1/2の領域13tにおいて撮像され、ワイドレンズ系14wで結像される光学像は、当該撮像面の上側のほぼ1/2の領域13wにおいて撮像されるように構成している。   By the way, since the camera module of the vehicle external monitoring device according to the present invention is for monitoring other vehicles, pedestrians, etc. existing around the own vehicle in the rear side area of the automobile, It is preferable to take a wider imaging field angle in the left-right direction than the angle. FIG. 7 is a schematic perspective view of the camera module 1L according to the embodiment configured for such a purpose. The tele lens system 14t and the wide lens system 14w are vertically arranged with respect to the imaging surface of the imaging device 13, and FIG. An optical image formed by the telelens system 14t on the image pickup surface of the horizontally long image pickup device 13 is picked up in a substantially half region 13t on the lower side of the image pickup surface and is connected by the wide lens system 14w. The optical image to be imaged is configured to be imaged in a substantially half region 13w on the upper side of the imaging surface.

この構成では、図8に示すような自車両の後側方の状況を撮像したときには、同図に鎖線で示すように、横長の偏平に近い領域AT,AWがそれぞれテレ画像、ワイド画像として撮像される。SMはサイドミラーによる視認領域である。これにより、テレレンズ系14tとワイドレンズ系14wの左右方向(水平方向)の撮像画角を拡大し、自動車の後方から側方の極めて広い領域を撮像することが可能になる。   In this configuration, when the rear side situation of the host vehicle as shown in FIG. 8 is imaged, areas AT and AW that are close to horizontally long are captured as a tele image and a wide image, respectively, as indicated by a chain line in FIG. Is done. SM is a viewing area by a side mirror. Thereby, the imaging field angle in the left-right direction (horizontal direction) of the tele lens system 14t and the wide lens system 14w can be enlarged, and an extremely wide area from the rear to the side of the automobile can be imaged.

すなわち、図9(a)はワイドレンズ系14wで撮像したワイド画像AWであり、図9(b)はテレレンズ系14tで撮像したテレ画像ATであり、いずれもモニターに表示するために左右反転したものである。ワイド画像AWはサイドミラーの視認領域SMよりも格段に広い領域を撮像でき、テレ画像ATはサイドミラーの視認領域SMを含む領域を拡大した画像として撮像できる。したがって、これらワイド画像ATとテレ画像Aを画像ECU2において前記実施形態の場合と同様にして合成し、かつこれを左モニター3Lに表示することで、図9(c)のように、自車両の左側の後側方の広い領域を表示することができる。ただし、この場合、モニターの左右方向の寸法の関係から、テレ画像ATとワイド画像AWをそれぞれ左右方向に縮小している。そのため、表示された画像中の他車は変形された状態で表示されることになるが、表示倍率や表示領域はそのまま維持されるので、自車両の後側方の広い領域を死角のない連続した状態で表示することができ、後側方領域の好適な監視が可能になる。   That is, FIG. 9A is a wide image AW imaged by the wide lens system 14w, and FIG. 9B is a tele image AT imaged by the telelens system 14t, both of which are horizontally reversed for display on a monitor. Is. The wide image AW can capture an area that is much wider than the side mirror viewing area SM, and the tele image AT can be captured as an enlarged image of the area including the side mirror viewing area SM. Therefore, by combining the wide image AT and the tele image A in the image ECU 2 in the same manner as in the above embodiment, and displaying this on the left monitor 3L, as shown in FIG. A wide area on the rear side of the left side can be displayed. However, in this case, the tele image AT and the wide image AW are respectively reduced in the left-right direction due to the relationship between the horizontal dimensions of the monitor. For this reason, other vehicles in the displayed image are displayed in a deformed state, but the display magnification and display area are maintained as they are, so a wide area on the rear side of the host vehicle is continuously displayed without a blind spot. In this state, the rear side area can be suitably monitored.

このようにテレレンズ系14tとワイドレンズ系14wを上下に配置した場合でも、テレレンズ系14tとワイドレンズ系14wの焦点距離を相違させ、これにより各レンズ系での撮像画角および撮像倍率を相違させることが可能であれば、各レンズ系は図に示したと同様なレンズ構成とすることが可能である。   As described above, even when the tele lens system 14t and the wide lens system 14w are arranged vertically, the focal lengths of the tele lens system 14t and the wide lens system 14w are made different, thereby making the imaging field angle and the imaging magnification of each lens system different. If possible, each lens system can have a lens configuration similar to that shown in the figure.

前記実施形態のカメラモジュール1Lでは、レンズ鏡筒12を自動車の後方に向けると、カメラボディ11内の撮像素子13は撮像面が自動車の後方に向けられることになる。そのため、図2に示したようにカメラモジュール1Lを内装するランプハウジング4の車幅方向を向く高さ寸法は、カメラモジュール1Lの左右方向の寸法、すなわち撮像素子13の左右方向の寸法よりも大きくする必要がある。このランプハウジング4の高さ寸法を低減するために、次の実施形態のカメラモジュールは、撮像素子の撮像面はレンズ鏡筒の筒軸に対してほぼ平行に向けられた構成とされている。   In the camera module 1L of the embodiment, when the lens barrel 12 is directed to the rear of the automobile, the imaging surface of the imaging element 13 in the camera body 11 is directed to the rear of the automobile. Therefore, as shown in FIG. 2, the height dimension of the lamp housing 4 that houses the camera module 1L in the vehicle width direction is larger than the horizontal dimension of the camera module 1L, that is, the horizontal dimension of the image sensor 13. There is a need to. In order to reduce the height dimension of the lamp housing 4, the camera module of the next embodiment is configured such that the imaging surface of the imaging element is oriented substantially parallel to the tube axis of the lens barrel.

図10はこのようにしたカメラモジュール1Lの模式的な斜視図である。テレレンズ系14tとワイドレンズ系14wは各光軸Ot,Owが自動車のほぼ前後方向に向けられているが、撮像素子13は撮像面13t,13wが自動車の車幅方向に向けられている。そして、テレレンズ系14tとワイドレンズ系14wの各光軸Ot,Ow上にそれぞれ光反射用のミラー15t,15wを配設し、このミラー15t,15wによって各レンズ系14t,14wの撮像光軸をほぼ直角に曲げている。   FIG. 10 is a schematic perspective view of the camera module 1L configured as described above. In the tele lens system 14t and the wide lens system 14w, the optical axes Ot and Ow are directed substantially in the front-rear direction of the automobile, while the imaging device 13 has the imaging surfaces 13t and 13w directed in the vehicle width direction of the automobile. Then, light reflecting mirrors 15t and 15w are disposed on the optical axes Ot and Ow of the tele lens system 14t and the wide lens system 14w, respectively, and the imaging optical axes of the lens systems 14t and 14w are arranged by the mirrors 15t and 15w. Bent almost at right angles.

この構成とすることにより、カメラモジュールを自動車に搭載したときには撮像素子13は撮像面が自動車の前後方向に沿って配置されるため、車幅方向の寸法を低減した薄型のカメラモジュール1Lとなる。したがって、図2に示したように、カメラモジュール1Lを内装するサイドターンシグナルランプL−TSLのランプハウジング4の高さ寸法を低減し、当該サイドターンシグナルランプL−TSLの薄型化を図って自動車の車体の側面から突出する寸法を低減することができる。   With this configuration, when the camera module is mounted on an automobile, the imaging element 13 is arranged along the front-rear direction of the automobile, so that the thin camera module 1L with reduced dimensions in the vehicle width direction is obtained. Therefore, as shown in FIG. 2, the height dimension of the lamp housing 4 of the side turn signal lamp L-TSL in which the camera module 1L is housed is reduced, and the side turn signal lamp L-TSL is reduced in thickness to achieve the automobile. The dimension which protrudes from the side surface of the vehicle body can be reduced.

図11は図10に示したカメラモジュールの変形例の光学系の構成図である。図11(a)は、前記各レンズ系14t,14wにそれぞれ配設した各ミラー15t,15wの反射面の角度位置をテレレンズ系14tとワイドレンズ系14wとで相違させることにより、テレレンズ系14tとワイドレンズ系14wの光軸Ot,Owの方向を相違させている。すなわち、テレレンズ系に設けたミラー15tの車幅方向に対する角度位置をテレレンズ系14tに設けたミラー15tの角度位置よりも大きくすることにより、ワイドレンズ系14wの光軸Owを車幅方向の外側に向けている。   FIG. 11 is a configuration diagram of an optical system of a modification of the camera module shown in FIG. FIG. 11 (a) shows a difference between the tele lens system 14t and the wide lens system 14w by changing the angular positions of the reflecting surfaces of the mirrors 15t and 15w respectively provided in the lens systems 14t and 14w. The directions of the optical axes Ot and Ow of the wide lens system 14w are made different. That is, by making the angular position of the mirror 15t provided in the tele lens system with respect to the vehicle width direction larger than the angular position of the mirror 15t provided in the tele lens system 14t, the optical axis Ow of the wide lens system 14w is set to the outside in the vehicle width direction. It is aimed.

これにより、撮像画角の大きなワイドレンズ系14wの撮像領域をさらに自動車の側方領域にまで広げることができる。また、テレレンズ系14tの撮像領域とワイドレンズ系14wの撮像領域の重なる領域を低減し、カメラモジュール全体としての撮像領域を格段に広げることができる。   Thereby, the imaging region of the wide lens system 14w having a large imaging field angle can be further expanded to the side region of the automobile. In addition, it is possible to reduce the overlapping area of the imaging area of the tele lens system 14t and the imaging area of the wide lens system 14w, and to significantly widen the imaging area of the entire camera module.

図11(b)はテレレンズ系14tに配設したミラーを直角プリズム16tに置き換え、この直角プリズム16tの斜面を反射面として構成したものである。この構成においてもミラー15wと直角プリズム16tの反射面の角度位置を適宜に調整することで、テレレンズ系14tとワイドレンズ系14wの撮像光軸Ot,Owの方向を相違させている。   In FIG. 11B, the mirror disposed in the tele lens system 14t is replaced with a right-angle prism 16t, and the inclined surface of the right-angle prism 16t is configured as a reflection surface. Also in this configuration, the directions of the imaging optical axes Ot and Ow of the tele lens system 14t and the wide lens system 14w are made different by appropriately adjusting the angular positions of the reflecting surfaces of the mirror 15w and the right-angle prism 16t.

このように撮像素子13の撮像面を自動車の車幅方向に向けたカメラモジュールの場合でも、撮像面を上下に分割してテレレンズ系とワイドレンズ系で結像される光学像を撮像してもよい。この場合にはテレレンズ系とワイドレンズ系を上下方向に配設することになる。   As described above, even in the case of a camera module in which the imaging surface of the imaging device 13 is directed in the vehicle width direction of an automobile, an optical image formed by the tele lens system and the wide lens system can be captured by dividing the imaging surface vertically. Good. In this case, the tele lens system and the wide lens system are arranged in the vertical direction.

以上の実施形態では、自動車の車体の左右面に配設して当該自動車の左右の後方から側方の領域を撮像するカメラモジュールとして構成した例を示したが、自動車の車体後部に配設し、当該自動車の後方を左右に広い領域にわたって撮像する撮像装置として構成してもよい。この場合には、真後ろの領域を焦点距離の長いテレレンズ系で撮像し、後方の左右に広い領域を焦点距離の短いワイドレンズ系で撮像する。これにより、自車両の真後ろを走行する後続車を大きく撮像して追突防止等の監視が可能になり、自車両の片側または両側を走行する車両を死角を生じることなく確実に監視することが可能になる。   In the above embodiment, an example in which the camera module is arranged on the left and right sides of the vehicle body and images the lateral region from the left and right rear sides of the vehicle has been described. The rear of the automobile may be configured as an imaging device that captures an image over a wide area from side to side. In this case, the region immediately behind is imaged with a telelens system having a long focal length, and the wide left and right regions are imaged with a wide lens system having a short focal length. As a result, it is possible to monitor a subsequent vehicle that runs directly behind the host vehicle to prevent rear-end collisions and the like, and it is possible to reliably monitor a vehicle that runs on one side or both sides of the host vehicle without causing blind spots. become.

前記実施形態では、第1レンズ系(テレレンズ系)と第2レンズ系(ワイドレンズ系)で撮像した各画像を左右方向に連続して合成する例を示したが、監視する外部の状況によっては第1レンズ系と第2レンズ系で上下の異なる領域を撮像してもよく、この場合には画像制御手段は各画像を上下方向に連続して合成してモニターに表示するようにしてもよい。   In the above-described embodiment, an example in which the images captured by the first lens system (tele lens system) and the second lens system (wide lens system) are continuously combined in the left-right direction has been shown, but depending on the external situation to be monitored The first lens system and the second lens system may pick up different upper and lower areas, and in this case, the image control means may continuously synthesize the images in the vertical direction and display them on the monitor. .

本発明の外部監視装置を構成する撮像装置の結像光学系は実施形態に記載の単一レンズあるいはレンズ群からなるレンズ系に限られるものではなく、結像機能を有する反射鏡やその他の前記したミラーやプリズム等の光学素子を用いた光学系であってもよい。また、結像光学系は実施形態のような2つに限られるものではなく、3つ以上であってもよい。この場合には3つの画像を全て合成して、あるいはいずれか2以上の画像を選択して合成してモニターに表示することが可能である。さらに、複数の画像を連続した画像として合成する際には、必ずしも共通画像の全てを削除する必要はなく、モニターに表示される画像に違和感を生じない程度であれば、共通画像の一部は重複した状態で合成されてもよい。   The imaging optical system of the imaging device constituting the external monitoring device of the present invention is not limited to the single lens or the lens system composed of the lens group described in the embodiment, but a reflecting mirror having an imaging function or the other An optical system using optical elements such as mirrors and prisms may be used. Further, the imaging optical system is not limited to two as in the embodiment, and may be three or more. In this case, all three images can be combined or any two or more images can be selected and combined and displayed on the monitor. Furthermore, when compositing a plurality of images as a continuous image, it is not always necessary to delete all of the common images. If the image displayed on the monitor does not cause a sense of incongruity, a part of the common image You may synthesize | combine in the overlapping state.

また、実施形態では1つの画像ECUにおいて左右のカメラモジュールで撮像した画像を左右のモニターに表示させているが、左右のモニターにそれぞれ独立した画像ECUを内蔵させ、左右のカメラモジュールで撮像したそれぞれの画像を各画像ECUにおいてそれぞれ独立して画像処理して各モニターに表示させるようにしてもよい。   Further, in the embodiment, images taken by the left and right camera modules in one image ECU are displayed on the left and right monitors, but independent image ECUs are built in the left and right monitors, respectively, and each taken by the left and right camera modules. These images may be processed independently in each image ECU and displayed on each monitor.

さらに、モニターを1つのモニターで構成し、当該モニターの表示面に左右のカメラモジュールで撮像した画像を並べて表示するようにしてもよい。   Furthermore, the monitor may be configured by one monitor, and images captured by the left and right camera modules may be displayed side by side on the display surface of the monitor.

本発明は車両の外部の広い領域を撮像して監視を行うことが好ましい車両用外部監視装置に採用することが可能である。   The present invention can be applied to an external monitoring device for a vehicle that preferably performs imaging by monitoring a wide area outside the vehicle.

1L,1R カメラモジュール(撮像装置)
2 画像ECU(画像制御手段)
3L,3R モニター
4 ランプハウジング
11 カメラボディ
12 レンズ鏡筒
13 撮像素子
13t,13w 撮像面
14 レンズ系(結像光学系)
14t テレレンズ系(第1結像光学系)
14w ワイドレンズ系(第2結像光学系)
40 光源(LED)
L−TSL,R−TSL サイドターンシグナルランプ
CAR 自動車(自車両)

1L, 1R camera module (imaging device)
2 Image ECU (image control means)
3L, 3R Monitor 4 Lamp housing 11 Camera body 12 Lens barrel 13 Imaging element 13t, 13w Imaging surface 14 Lens system (imaging optical system)
14t tele lens system (first imaging optical system)
14w wide lens system (second imaging optical system)
40 Light source (LED)
L-TSL, R-TSL Side turn signal lamp CAR Car (own vehicle)

Claims (7)

同一の撮像素子の撮像面にそれぞれ異なる倍率で光学像を結像する複数の結像光学系を備える撮像装置と、各結像光学系で撮像した画像を合成してモニターに表示する画像制御手段とを備える車両用外部監視装置であって、前記画像制御手段は各画像の撮像領域を検出し、当該撮像領域に基づいて両画像を連続した状態で合成することを特徴とする車両用外部監視装置。   An image pickup apparatus including a plurality of image forming optical systems that form optical images at different magnifications on the image pickup surface of the same image pickup device, and an image control unit that combines the images picked up by the image forming optical systems and displays them on a monitor An external monitoring device for a vehicle, wherein the image control means detects an imaging region of each image and combines the images in a continuous state based on the imaging region. apparatus. 前記画像制御手段は、2つの画像の共通画像を検出し、1つの画像の共通画像を残し、他の画像の共通画像を削除して両画像を合成することを特徴とする請求項1に記載の車両用外部監視装置。   The image control means detects a common image of two images, leaves a common image of one image, deletes a common image of other images, and combines both images. Vehicle external monitoring device. 前記画像制御手段は、複数の画像を左右方向または上下方向に並べかつ連続した状態に合成してモニターに表示することを特徴とする請求項2に記載の車両用外部監視装置。   The vehicle external monitoring device according to claim 2, wherein the image control unit arranges a plurality of images in the left-right direction or the up-down direction and combines them into a continuous state and displays them on a monitor. 前記画像制御手段は、複数の画像のうち少なくとも1つの画像を画像処理して他の画像と合成することを特徴とする請求項1ないし3のいずれかに記載の車両用外部監視装置。   4. The vehicular external monitoring device according to claim 1, wherein the image control means performs image processing on at least one of a plurality of images and combines it with another image. 前記画像制御手段は、少なくとも1つの画像を拡大または縮小処理することを特徴とする請求項4に記載の車両用外部監視装置。   The vehicle external monitoring device according to claim 4, wherein the image control means enlarges or reduces at least one image. 車両の外部の後方から側方を撮像してモニターに表示する外部監視装置として構成され、焦点距離の長い第1結像光学系で車幅方向内側領域を撮像し、焦点距離の短い第2結像光学系で車幅方向外側領域を撮像し、前記画像制御手段は前記各結像光学系で撮像した画像を左右に並べて合成して前記モニターに表示させることを特徴とする請求項1ないし5のいずれかに記載の車両用外部監視装置。 It is configured as an external monitoring device that images a lateral side from the outside of the vehicle and displays it on a monitor. The first imaging optical system having a long focal length images the inner region in the vehicle width direction, and a second connection with a short focal length. 6. The image optical system picks up an outer region in the vehicle width direction, and the image control means arranges the images picked up by the respective image forming optical systems side by side and combines them and displays them on the monitor. The vehicle external monitoring device according to any one of the above. 前記撮像装置は車両の左右にそれぞれ配設され、前記モニターは左右の撮像装置で撮像された画像をそれぞれ個別に表示する2つのモニターあるいは両画像を合一表示する1つのモニターで構成されていることを特徴とする請求項6に記載の車両用外部監視装置。

The imaging devices are arranged on the left and right sides of the vehicle, respectively, and the monitor includes two monitors that individually display images captured by the left and right imaging devices, or a single monitor that displays both images together. The vehicle external monitoring device according to claim 6.

JP2014110738A 2014-05-29 2014-05-29 External monitoring device for vehicles Active JP6373643B2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2014110738A JP6373643B2 (en) 2014-05-29 2014-05-29 External monitoring device for vehicles
PCT/JP2015/064510 WO2015182457A1 (en) 2014-05-29 2015-05-20 Vehicle exterior observation device, and imaging device
CN201580028262.1A CN106414174B (en) 2014-05-29 2015-05-20 Outside vehicle monitoring arrangement and filming apparatus
EP15799505.1A EP3150437B1 (en) 2014-05-29 2015-05-20 Vehicle exterior observation device, and imaging device
US15/314,189 US10179544B2 (en) 2014-05-29 2015-05-20 Vehicle exterior observation device and imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014110738A JP6373643B2 (en) 2014-05-29 2014-05-29 External monitoring device for vehicles

Publications (2)

Publication Number Publication Date
JP2015223976A true JP2015223976A (en) 2015-12-14
JP6373643B2 JP6373643B2 (en) 2018-08-15

Family

ID=54841070

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014110738A Active JP6373643B2 (en) 2014-05-29 2014-05-29 External monitoring device for vehicles

Country Status (1)

Country Link
JP (1) JP6373643B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018030285A1 (en) * 2016-08-08 2018-02-15 株式会社小糸製作所 Vehicle monitoring system employing plurality of cameras

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001257923A (en) * 2000-03-14 2001-09-21 Denso Corp Image pickup device
JP2003116029A (en) * 2001-10-04 2003-04-18 Minolta Co Ltd Imaging device and image recorder using the same
JP2007174097A (en) * 2005-12-20 2007-07-05 Matsushita Electric Works Ltd Video image signal processor
JP2013009065A (en) * 2011-06-23 2013-01-10 Nissan Motor Co Ltd Device and method for supervising vehicle

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001257923A (en) * 2000-03-14 2001-09-21 Denso Corp Image pickup device
JP2003116029A (en) * 2001-10-04 2003-04-18 Minolta Co Ltd Imaging device and image recorder using the same
JP2007174097A (en) * 2005-12-20 2007-07-05 Matsushita Electric Works Ltd Video image signal processor
JP2013009065A (en) * 2011-06-23 2013-01-10 Nissan Motor Co Ltd Device and method for supervising vehicle

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018030285A1 (en) * 2016-08-08 2018-02-15 株式会社小糸製作所 Vehicle monitoring system employing plurality of cameras
JPWO2018030285A1 (en) * 2016-08-08 2019-06-20 株式会社小糸製作所 Vehicle monitoring system using multiple cameras
US10829044B2 (en) 2016-08-08 2020-11-10 Koito Manufacturing Co., Ltd. Vehicle monitoring system using a plurality of cameras
JP7055743B2 (en) 2016-08-08 2022-04-18 株式会社小糸製作所 Vehicle monitoring system using multiple cameras

Also Published As

Publication number Publication date
JP6373643B2 (en) 2018-08-15

Similar Documents

Publication Publication Date Title
WO2015182457A1 (en) Vehicle exterior observation device, and imaging device
JP6433684B2 (en) Imaging device for vehicle external monitoring device
CN110178369B (en) Imaging device, imaging system, and display system
KR100936557B1 (en) Perimeter monitoring apparatus and image display method for vehicle
EP3027467B1 (en) Driving assist device
WO2018030285A1 (en) Vehicle monitoring system employing plurality of cameras
US10447948B2 (en) Imaging system and display system
JP5816311B2 (en) Vehicle vision system
JP6459016B2 (en) Imaging system and moving body system
JP2012170127A (en) Vehicle periphery monitoring apparatus and image display method
JP2019014286A (en) On-vehicle imaging device and vehicle
JP2015121591A (en) In-vehicle camera
JP2006254318A (en) Vehicle-mounted camera, vehicle-mounted monitor and forward road area imaging method
KR101867085B1 (en) Dual camera type side camera and Rear image acquisition system for vehicle containing the same
CN1825951A (en) Vehicle-periphery viewing apparatus
JP6373643B2 (en) External monitoring device for vehicles
JP2017181634A (en) Imaging apparatus and on-vehicle camera system
JP2005182305A (en) Vehicle travel support device
JP2007288611A (en) On-vehicle image display device
WO2018207393A1 (en) Image pickup system and display system
JP3716999B2 (en) Vehicle camera
WO2020149008A1 (en) Camera monitor system, virtual image display device, and virtual image display method
KR101941607B1 (en) Imaging and display device for vehicle and recording medium
US11780368B2 (en) Electronic mirror system, image display method, and moving vehicle
US20230007190A1 (en) Imaging apparatus and imaging system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170407

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180123

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180309

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180703

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180718

R150 Certificate of patent or registration of utility model

Ref document number: 6373643

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150