JP2005198160A - Vehicle periphery imaging device - Google Patents

Vehicle periphery imaging device Download PDF

Info

Publication number
JP2005198160A
JP2005198160A JP2004003996A JP2004003996A JP2005198160A JP 2005198160 A JP2005198160 A JP 2005198160A JP 2004003996 A JP2004003996 A JP 2004003996A JP 2004003996 A JP2004003996 A JP 2004003996A JP 2005198160 A JP2005198160 A JP 2005198160A
Authority
JP
Japan
Prior art keywords
vehicle
captured
imaging device
display device
cameras
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004003996A
Other languages
Japanese (ja)
Other versions
JP4467313B2 (en
Inventor
Masayuki Inoue
雅之 井上
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sumitomo Wiring Systems Ltd
AutoNetworks Technologies Ltd
Sumitomo Electric Industries Ltd
Original Assignee
Sumitomo Wiring Systems Ltd
AutoNetworks Technologies Ltd
Sumitomo Electric Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sumitomo Wiring Systems Ltd, AutoNetworks Technologies Ltd, Sumitomo Electric Industries Ltd filed Critical Sumitomo Wiring Systems Ltd
Priority to JP2004003996A priority Critical patent/JP4467313B2/en
Publication of JP2005198160A publication Critical patent/JP2005198160A/en
Application granted granted Critical
Publication of JP4467313B2 publication Critical patent/JP4467313B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To simultaneously confirm images picked up with a plurality of cameras and to easily recognize a video image to be noticed. <P>SOLUTION: A steering angle regarding travel of a vehicle is detected from a rotation angle of a steering wheel. The periphery of the vehicle are picked up with the plurality of cameras 11, 12, respectively, a plurality of picked up video images picked up with the cameras 11, 12 are combined by changing ratio of display area occupied in a picture of a display device 13 to be displayed based on the steering angle of the vehicle 10. Thus, the video image to be noticed is highlighted from among the plurality of picked up video images displayed on one and the same picture by changing display ratio by a state of a steering wheel operation. Moreover, it is convenient since the plurality of picked up video images are simultaneously displayed. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、車両周辺撮像装置及びそれに関連する技術に関するものである。   The present invention relates to a vehicle periphery imaging apparatus and related technology.

従来、例えば図19の如く、車両前部に前方に広がる領域を撮影するフロントカメラ1と、車両左側部に側方および前側方に広がる領域を撮影するサイドカメラ3とを設け、車室内に運転者が視認可能に配設された表示ディスプレイに、サイドカメラ3で撮像された側方撮像画像とフロントカメラ1で撮像された前方撮像画像とを切り替える技術(第1の従来技術)があった。この第1の従来技術では、各種センサを用いて検出したステアリングホイールの舵角および車速に基づいて、車両の向きの変化量を検出する。そして、最初に表示ディスプレイにサイドカメラ3による側方撮像画像の表示を開始しておき、車両の向きの変化量が所定値に達した場合に、表示ディスプレイに表示される撮像画像を、サイドカメラ3による側方撮像画像からフロントカメラ1による前方撮像画像へ切り替えるようになっている。   Conventionally, as shown in FIG. 19, for example, a front camera 1 that captures a region that spreads forward in the front part of the vehicle and a side camera 3 that captures a region that spreads laterally and frontwardly are provided on the left side of the vehicle. There is a technique (first prior art) for switching between a side captured image captured by the side camera 3 and a front captured image captured by the front camera 1 on a display that is disposed so as to be visible to the user. In the first conventional technique, the amount of change in the direction of the vehicle is detected based on the steering angle of the steering wheel and the vehicle speed detected using various sensors. First, the display of the side captured image by the side camera 3 is started on the display display, and when the amount of change in the direction of the vehicle reaches a predetermined value, the captured image displayed on the display display is changed to the side camera. 3 is switched from the side captured image by 3 to the front captured image by the front camera 1.

また、他の従来の例として、図20の如く、車両の左側面前部に設置された左カメラと、車両の右側面前部に設置された右カメラとで撮像されたそれぞれの撮像画像を、画像処理により車室内のモニタの単一画面5に並べて表示させる技術(第2の従来技術)があった。   Further, as another conventional example, as shown in FIG. 20, each captured image captured by a left camera installed at the front side of the left side of the vehicle and a right camera installed at the front side of the right side of the vehicle There has been a technique (second prior art) in which the images are displayed side by side on a single screen 5 of a monitor in a vehicle compartment by processing.

上記した第1の従来技術では、複数のカメラ1,3の撮像画像を同時に確認できない。したがって、例えば車庫入れ時など複雑なハンドル切り返し操作を要求される場合には、複数のカメラ1,3の撮像画像を同時に確認したい状況になるが、先行技術では複数のカメラ1,3の撮像画像を択一的に表示するためこれができず不便である。   In the first prior art described above, images taken by the plurality of cameras 1 and 3 cannot be confirmed simultaneously. Therefore, for example, when a complicated steering wheel turning operation is required, such as when entering a garage, it is desired to check the captured images of the cameras 1 and 3 simultaneously. In the prior art, the captured images of the cameras 1 and 3 are used. This is inconvenient because it cannot be displayed.

また、上記の第2の従来技術では、複数カメラの撮像画像を同時に表示しているが、ハンドル操作に応じてモニタに表示される画像が変化しないため、運転者が本来注目すべき映像が直感的に視認しにくく不便である。   In the second prior art, images taken by a plurality of cameras are displayed at the same time. However, since the image displayed on the monitor does not change in accordance with the steering operation, the video that the driver should pay attention to is intuitive. It is difficult to visually recognize and is inconvenient.

そこで、本発明の課題は、複数のカメラで撮像した画像を同時に確認でき、且つ注目すべき映像の認識が容易になる車両周辺撮像装置を提供することにある。   SUMMARY OF THE INVENTION An object of the present invention is to provide a vehicle periphery imaging device that can simultaneously confirm images captured by a plurality of cameras and that facilitates recognition of a video to be noted.

上記課題を解決すべく、請求項1に記載の発明は、車両の周辺の映像を撮像して当該車両内に設置された表示装置に表示する車両周辺撮像装置であって、前記車両の複数の視野範囲の撮像映像をそれぞれ撮像する複数のカメラと、前記車両内に設置された前記表示装置と、前記車両の走行に係る舵角を検出する舵角検出手段と、少なくとも、前記舵角検出手段で検出された前記舵角に基づいて、全ての前記カメラで撮像された撮像映像のうち複数の撮像映像を、前記表示装置の画面中に占める表示面積の割合を変化させて合成し、合成された撮像映像を前記表示装置に表示する制御部とを備えるものである。   In order to solve the above-mentioned problem, the invention described in claim 1 is a vehicle periphery imaging device that captures an image of the periphery of the vehicle and displays the image on a display device installed in the vehicle. A plurality of cameras that respectively capture captured images of the field of view range, the display device installed in the vehicle, a rudder angle detection unit that detects a rudder angle according to travel of the vehicle, and at least the rudder angle detection unit Based on the rudder angle detected in step 1, a plurality of captured images captured by all the cameras are synthesized by changing the proportion of the display area in the screen of the display device. And a control unit that displays the captured image on the display device.

請求項2に記載の発明は、請求項1に記載の車両周辺撮像装置であって、前記舵角検出手段が、ハンドルの舵角を検出するハンドル舵角検出手段である。   A second aspect of the present invention is the vehicle periphery imaging device according to the first aspect, wherein the rudder angle detection means is a steering angle detection means for detecting a steering angle of a steering wheel.

請求項3に記載の発明は、請求項1または請求項2に記載の車両周辺撮像装置であって、シフトレバーの操作位置を検出するシフト位置検出手段をさらに備え、前記制御部が、前記舵角検出手段で検出された前記舵角と、前記シフト位置検出手段で検出された前記シフトレバーの操作位置とに基づいて、全ての前記カメラで撮像された撮像映像のうち複数の撮像映像を、前記表示装置の画面中に占める表示面積の割合を変化させて合成し、合成された撮像映像を前記表示装置に表示するものである。   A third aspect of the present invention is the vehicle periphery imaging device according to the first or second aspect, further comprising shift position detecting means for detecting an operation position of a shift lever, wherein the control unit includes the rudder. Based on the rudder angle detected by the angle detection unit and the operation position of the shift lever detected by the shift position detection unit, a plurality of captured images among the captured images captured by all the cameras, The display area is synthesized by changing the ratio of the display area in the screen of the display device, and the synthesized captured image is displayed on the display device.

請求項4に記載の発明は、請求項1から請求項3のいずれかに記載の車両周辺撮像装置であって、前記制御部が、前記各撮像映像について任意の仮想視点位置から見た変換映像を生成する機能を有し、当該機能が、複数の撮像装置の撮像映像での車両の進行方向が同一方向になるよう、少なくとも一つの撮像映像が視点変換するものである。   A fourth aspect of the present invention is the vehicle periphery imaging device according to any one of the first to third aspects, wherein the control unit converts the captured image viewed from an arbitrary virtual viewpoint position. This function converts the viewpoint of at least one captured image so that the traveling direction of the vehicle in the captured images of the plurality of imaging devices is the same.

請求項5に記載の発明は、請求項1から請求項4のいずれかに記載の車両周辺撮像装置であって、前記制御部が、前記舵角検出手段で検出された前記舵角に基づいて判断された前記車両の進行方向の情報を、前記各撮像映像に重ねて前記表示装置に表示するものである。   Invention of Claim 5 is a vehicle periphery imaging device in any one of Claims 1-4, Comprising: The said control part is based on the said steering angle detected by the said steering angle detection means. Information on the determined traveling direction of the vehicle is displayed on the display device so as to overlap the captured images.

請求項1に記載の発明は、舵角検出手段により車両の走行に係る舵角を検出しながら、車両の複数の視野範囲の撮像映像を複数のカメラでそれぞれ撮像し、舵角検出手段で検出された舵角に基づいて、全てのカメラで撮像された撮像映像のうち複数の撮像映像を、表示装置の画面中に占める表示面積の割合を変化させて合成し、合成された撮像映像を表示装置に表示するので、同一画面に表示された複数の撮像映像の中から注目すべき映像を認識しやすくするため、ハンドル操作の状態により表示割合を変化させることができる。したがって、複数の撮像映像を同時に表示しながらも、その都度、重要度の高い撮像映像の表示割合を高めて表示でき、視認性のよい車両周辺撮像装置を提供できる。   According to the first aspect of the present invention, while the steering angle detection means detects the steering angle related to the running of the vehicle, the captured images of the plurality of fields of view of the vehicle are respectively captured by the plurality of cameras and detected by the steering angle detection means. Based on the rudder angle, a plurality of captured images captured by all cameras are combined by changing the proportion of the display area in the screen of the display device, and the combined captured images are displayed. Since it is displayed on the apparatus, it is possible to change the display ratio depending on the state of the handle operation in order to make it easy to recognize a noticeable image from a plurality of captured images displayed on the same screen. Therefore, while displaying a plurality of captured images at the same time, it is possible to increase the display ratio of captured images with high importance each time, and to provide a vehicle periphery imaging device with good visibility.

この場合、舵角検出手段として請求項2のようなハンドル舵角検出手段を適用することで、ハンドルの舵角を検出するだけで車両の舵角を検出できる。   In this case, the steering angle of the vehicle can be detected only by detecting the steering angle of the steering wheel by applying the steering angle detection means as in claim 2 as the steering angle detection means.

また、前進と後進の判別を行って撮像映像の表示割合を変化させる場合は、請求項3のように、シフト位置検出手段でシフトレバーの操作位置(シフトポジション)を検出するだけでよい。   Further, when the forward / backward discrimination is performed to change the display ratio of the captured image, it is only necessary to detect the operation position (shift position) of the shift lever by the shift position detecting means as in the third aspect.

請求項4に記載の発明は、視点変換により各カメラ映像上での進行方向を一致させるので、同時表示された各映像がどこを撮像しているか認識しやすくなる。   According to the fourth aspect of the present invention, since the traveling directions on the camera images are matched by the viewpoint conversion, it is easy to recognize where the simultaneously displayed images are captured.

請求項5に記載の発明は、舵角検出手段で検出された舵角に基づいて判断された車両の進行方向の情報を、各撮像映像に重ねて表示装置に表示するので、進行方向に存在する障害物を確認しやすくなる。   According to the fifth aspect of the present invention, information on the traveling direction of the vehicle determined based on the steering angle detected by the steering angle detection means is displayed on the display device so as to be superimposed on each captured image. It becomes easy to confirm the obstacle to do.

<構成>
図1は本発明の一の実施形態に係る車両周辺撮像装置が設置された車両10を示す平面図、図2は車両周辺撮像装置を示すブロック図である。この車両周辺撮像装置は、図1の如く、車両10の周辺を撮像するものであって、車両10から見て異なる方向の周辺を撮像するために複数のカメラ11,12を備えており、図2の如く、複数のカメラ11,12で撮像された各撮像映像を合成してディスプレイに表示するのに際して、各撮像映像がディスプレイに占める割合を舵角に応じて図3〜図5に示すように変化させるものである。
<Configuration>
FIG. 1 is a plan view showing a vehicle 10 in which a vehicle periphery imaging device according to an embodiment of the present invention is installed, and FIG. 2 is a block diagram showing the vehicle periphery imaging device. As shown in FIG. 1, the vehicle periphery imaging apparatus captures the periphery of the vehicle 10 and includes a plurality of cameras 11 and 12 for capturing the periphery in different directions when viewed from the vehicle 10. 2, when the captured images captured by the plurality of cameras 11 and 12 are combined and displayed on the display, the ratio of the captured images to the display is shown in FIGS. 3 to 5 according to the steering angle. To change.

具体的に、この車両周辺撮像装置は、車両10の前部に設置されて前方に広がる領域を撮影するフロントカメラ(カメラA)11と、車両10の左側部に設置されて側方および前側方に広がる領域を撮影するサイドカメラ(カメラB)12と、ドットマトリクス表示型の表示装置13と、両カメラ11,12及び表示装置13を制御する制御部14と、車両10の走行舵角を検出するためにハンドルの舵角を検出して制御部14に伝達するハンドル舵角検出手段15と、車両10の前進や後退等のシフトレバーの操作位置を検出するシフト位置検出手段16とを備えて構成される。   Specifically, this vehicle periphery imaging device is installed in the front part of the vehicle 10 and images a region extending forward, the front camera (camera A) 11, installed in the left side part of the vehicle 10, and on the side and front sides. A side camera (camera B) 12 that captures an area extending in the range, a dot matrix display type display device 13, a control unit 14 that controls both the cameras 11, 12 and the display device 13, and a steering angle of the vehicle 10 are detected. In order to do so, a steering wheel steering angle detection means 15 that detects the steering angle of the steering wheel and transmits it to the control unit 14 and a shift position detection means 16 that detects the operation position of the shift lever such as forward or backward movement of the vehicle 10 are provided. Composed.

フロントカメラ11は、図1の如く、フロントバンパーの左隅付近に設置され、例えばCCD等の撮像素子が使用された一般的な撮像デバイスが適用される。このフロントカメラ11は、その撮像中心が左前側に向けて設置され、且つその視野範囲が、車両10の前方から左側方にかけた範囲に設定される。かかる視野範囲は、図示しないレンズ等の光学系部品により設定される。   As shown in FIG. 1, the front camera 11 is installed near the left corner of the front bumper, and a general imaging device using an imaging element such as a CCD is used. The front camera 11 is set such that its imaging center is directed to the left front side, and its visual field range is set to a range from the front of the vehicle 10 to the left side. Such a visual field range is set by an optical system component such as a lens (not shown).

サイドカメラ12は、左サイドミラー付近に設置され、例えばフロントカメラ11と同様のCCD等の撮像素子が使用された一般的な撮像デバイスが適用される。このサイドカメラ12は、その撮像中心が左側に向けて設置され、且つその視野範囲が、車両10の斜め左前から斜め左後ろにかけた範囲に設定される。かかる視野範囲は、図示しないレンズ等の光学系部品により設定される。   The side camera 12 is installed near the left side mirror, and for example, a general imaging device using an imaging element such as a CCD similar to the front camera 11 is applied. The side camera 12 is set such that its imaging center is directed to the left side, and its visual field range is set to a range from the diagonally left front to the diagonally left rear of the vehicle 10. Such a visual field range is set by an optical system component such as a lens (not shown).

表示装置13(図2)は、有機EL表示装置やTFT型等の液晶表示装置(LCD)などによって構成され、車両10の車室内における前部パネル(例えば、センタクラスタパネル、ヒータコントロールパネル等)の例えば左右方向中央部等に嵌め込まれて設置される。この表示装置13には、制御部14との電気的な接続のための接続部13aが設けられている。   The display device 13 (FIG. 2) is constituted by an organic EL display device, a liquid crystal display device (LCD) such as a TFT type, and the like, and a front panel (for example, a center cluster panel, a heater control panel, etc.) in the vehicle interior of the vehicle 10. For example, it is fitted and installed in the center part in the left-right direction. The display device 13 is provided with a connection portion 13 a for electrical connection with the control portion 14.

制御部14(図2)は、両カメラ11,12で撮像された撮像映像を表示装置13に表示するもので、特に、ハンドル舵角検出手段15で検出されたハンドルの舵角に基づいて車両10の走行舵角を判断し、その判断結果に応じて各カメラ11,12で撮像された撮像映像の表示装置13中に占める表示面積の割合を、ハンドル舵角検出手段15により検出されたハンドル舵角の値に対応して、図3〜図5に示すように変化させるものである。   The control unit 14 (FIG. 2) displays captured images captured by the cameras 11 and 12 on the display device 13, and in particular, the vehicle based on the steering angle of the steering wheel detected by the steering wheel steering angle detection means 15. The steering angle detected by the steering angle detector 15 determines the ratio of the display area in the display device 13 of the captured images captured by the cameras 11 and 12 according to the determination result. Corresponding to the value of the steering angle, it is changed as shown in FIGS.

具体的に、制御部14は、図2の如く、画像処理部21と、メモリ23と、マイクロコンピュータチップ(以下、単に「マイコン」と略称する)25と、操作部27とが備えられている。   Specifically, as shown in FIG. 2, the control unit 14 includes an image processing unit 21, a memory 23, a microcomputer chip (hereinafter simply referred to as “microcomputer”) 25, and an operation unit 27. .

また、この制御部14には、コネクタ等からなる複数の接続部31a〜31dが設けられている。例えば、接続部31aと接続部13aとを接続することにより表示装置13と画像処理部21とが電気的に接続され、接続部31bが車内LAN当の車内通信線33に接続されることによりその車内通信線33を通じてハンドル舵角検出手段15とマイコン25とが電気的に接続される。また、接続部31c,31dを介して各カメラ11,12が画像処理部21に電気的に接続される。   Further, the control unit 14 is provided with a plurality of connection portions 31a to 31d made of connectors or the like. For example, the display device 13 and the image processing unit 21 are electrically connected by connecting the connection unit 31a and the connection unit 13a, and the connection unit 31b is connected to the in-vehicle communication line 33 of the in-vehicle LAN. The steering wheel steering angle detection means 15 and the microcomputer 25 are electrically connected through the in-vehicle communication line 33. Further, the cameras 11 and 12 are electrically connected to the image processing unit 21 via the connection units 31c and 31d.

画像処理部21は、表示装置13の表示画像を制御するものであり、その具体的な機能としては、マイコン25からの制御信号に基づいて、各カメラ11,12で撮像された各撮像映像の表示装置13の画面に占める割合を、図3〜図5に示すように変化させる画像処理機能等がある。この図3〜図5に示した表示装置13の画面については後述する。尚、メモリ23は、画像処理部21による画像処理等に用いられる。操作部27は、図示しないエアコンや各種車載機器等を操作するための操作入力を受け付けるためのものであり、複数の操作スイッチを有し、表示装置13の周辺部等に設置される。   The image processing unit 21 controls the display image of the display device 13, and as a specific function thereof, based on a control signal from the microcomputer 25, each captured image captured by each camera 11, 12 is displayed. There is an image processing function or the like for changing the ratio of the display device 13 to the screen as shown in FIGS. The screen of the display device 13 shown in FIGS. 3 to 5 will be described later. The memory 23 is used for image processing by the image processing unit 21. The operation unit 27 is for receiving an operation input for operating an air conditioner or various in-vehicle devices (not shown), has a plurality of operation switches, and is installed in a peripheral portion of the display device 13 or the like.

尚、単一の表示装置13に複数のカメラ11,12の撮像映像を合成して表示する場合に、同時表示された各映像がどこを撮像しているか認識しにくいと、その視認性を阻害してしまう。したがって、画像処理部21は、同時表示された各映像がどこを撮像しているか認識しやすくするため、視点変換により各カメラ映像上での進行方向を一致させる機能を有している。具体的に、この画像処理部21は、各カメラ11,12で撮像された撮像映像を任意の仮想視点位置から見た変換映像を生成する機能を備えており、複数のカメラ11,12の撮像映像での車両10の進行方向が互いに同一方向になるよう、少なくとも一つの撮像映像が視点変換される。例えば、フロントカメラ11とサイドカメラ12のいずれか一方の撮像映像を基準として、他方の撮像映像の画面方向が例えば90度回転しているような場合は、他方の撮像映像を一方の撮像映像の画面方向に対応するように90度だけ逆回転させて表示装置13に表示するようになっている。これにより、同時表示された各映像がどこを撮像しているか認識しやすくなる。   In addition, when combining and displaying the captured images of the plurality of cameras 11 and 12 on the single display device 13, if it is difficult to recognize where each of the simultaneously displayed images is captured, the visibility is hindered. Resulting in. Therefore, the image processing unit 21 has a function of matching the traveling direction on each camera image by viewpoint conversion in order to easily recognize where each of the simultaneously displayed images is captured. Specifically, the image processing unit 21 has a function of generating a converted image obtained by viewing the captured images captured by the cameras 11 and 12 from an arbitrary virtual viewpoint position. At least one captured image is subjected to viewpoint conversion so that the traveling directions of the vehicle 10 in the image are in the same direction. For example, when the screen direction of the other captured image is rotated by, for example, 90 degrees with respect to the captured image of one of the front camera 11 and the side camera 12, the other captured image is converted to the captured image of the one captured image. The image is displayed on the display device 13 by being rotated reversely by 90 degrees so as to correspond to the screen direction. This makes it easy to recognize where each of the simultaneously displayed images is captured.

マイコン25は、CMOSまたはフラッシュROM等を用いて構成された所定のソフトウェアプログラムに基づいて動作するようになっており、特に、ハンドル舵角検出手段15からの信号に基づいて、車両10の進行方向についての操舵角を判断し、その判断結果に基づいて、図3〜図5に示した表示装置13の表示モードを選択し、その選択結果を画像処理部21に制御信号として出力する。このマイコン25の具体的な制御動作については後述する。   The microcomputer 25 operates on the basis of a predetermined software program configured using a CMOS or a flash ROM, and in particular, based on a signal from the steering wheel angle detection means 15, the traveling direction of the vehicle 10. 3 is selected, the display mode of the display device 13 shown in FIGS. 3 to 5 is selected based on the determination result, and the selection result is output to the image processing unit 21 as a control signal. A specific control operation of the microcomputer 25 will be described later.

ハンドル舵角検出手段15は、運転者が操作したハンドルの回転角を検出するものであり、例えば光学式エンコーダ等が使用される。かかるハンドル舵角検出手段15での検出結果は、電気信号として車内通信線33を通じて制御部14のマイコン25に入力される。   The steering wheel steering angle detection means 15 detects the rotation angle of the steering wheel operated by the driver, and for example, an optical encoder or the like is used. The detection result of the steering wheel steering angle detection means 15 is input to the microcomputer 25 of the control unit 14 through the in-vehicle communication line 33 as an electric signal.

シフト位置検出手段16は、運転者が操作したシフトレバーの操作位置を検出し、その検出結果を電気信号として車内通信線33を通じて制御部14のマイコン25に入力するものである。このシフト位置検出手段16としては、シフトレバーがドライバ状態やバック状態等のそれぞれの傾倒状態になったときに、機械な接触の有無によりスイッチがオンオフする接触式スイッチ等が使用される。   The shift position detecting means 16 detects the operation position of the shift lever operated by the driver, and inputs the detection result to the microcomputer 25 of the control unit 14 through the in-vehicle communication line 33 as an electric signal. As the shift position detecting means 16, a contact type switch that is turned on and off depending on the presence or absence of mechanical contact when the shift lever is in a tilted state such as a driver state or a back state is used.

<動作>
上記構成の車両周辺撮像装置の動作について説明する。ここでは、図6のように、一台の車両41の左右に他の車両42,43が駐車しており、この状況から車両41が左後方(矢示方向D1)に後進した後、右方向(矢示方向D2)に前進して抜ける場合を考える。尚、車両41はこの実施形態の車両周辺撮像装置を搭載しており、よって、フロントバンパーの左隅付近にフロントカメラ11が設置され、且つ左サイドミラー付近にサイドカメラ12が設置されているものとする。また、図6〜図8中の符号44は車両41〜43の前方に位置する壁を示している。
<Operation>
The operation of the vehicle periphery imaging device having the above configuration will be described. Here, as shown in FIG. 6, the other vehicles 42 and 43 are parked on the left and right of one vehicle 41. From this situation, the vehicle 41 moves backward to the left rear (arrow direction D1) and then moves to the right. Consider the case of moving forward (arrow direction D2). The vehicle 41 is equipped with the vehicle periphery imaging device of this embodiment, and therefore, the front camera 11 is installed near the left corner of the front bumper, and the side camera 12 is installed near the left side mirror. . Moreover, the code | symbol 44 in FIGS. 6-8 has shown the wall located ahead of the vehicles 41-43.

まず車両41の運転者は、エンジンキーを回して車両41のエンジンをオンにするとともに、車両周辺撮像装置の電源をオンにする。そうすると、フロントカメラ11とサイドカメラ12で撮像された撮像映像が画像処理部21に入力される。ここで、ハンドルの初期状態の回転角度が正面方向(直進状態)に対応したものである場合、ハンドル舵角検出手段15によりその旨が検出され、これに基づいてマイコン25は、フロントカメラ11での撮像映像とサイドカメラ12での撮像映像との表示装置13中に占める表示面積の割合を1:1に設定し、図3の如く、表示装置13の表示画面の右半分の領域46aにフロントカメラ(カメラA)11での撮像映像を、同じく表示装置13の表示画面の左半分の領域47aにサイドカメラ(カメラB)12での撮像映像を並べて表示する旨の制御信号が、マイコン25から画像処理部21に入力される。この制御信号に基づいて、画像処理部21は、図3の通りに表示装置13の表示制御を行う。   First, the driver of the vehicle 41 turns the engine key to turn on the engine of the vehicle 41 and turns on the power of the vehicle periphery imaging device. Then, captured images captured by the front camera 11 and the side camera 12 are input to the image processing unit 21. Here, when the rotation angle in the initial state of the handle corresponds to the front direction (straight-running state), this is detected by the steering angle detection means 15, and based on this, the microcomputer 25 is detected by the front camera 11. The ratio of the display area occupying the display device 13 between the captured image of the display device 13 and the captured image of the side camera 12 is set to 1: 1, and the front side of the area 46a on the right half of the display screen of the display device 13 is set as shown in FIG. From the microcomputer 25, a control signal indicating that the captured image from the camera (camera A) 11 is displayed side by side on the left-half region 47 a of the display screen of the display device 13 is also displayed. Input to the image processing unit 21. Based on this control signal, the image processing unit 21 performs display control of the display device 13 as shown in FIG.

次に、運転者は、シフトレバーを操作してこれをバック状態とする。このときのシフトレバーの操作位置(バック操作位置)は、シフト位置検出手段16によって検出されて、車内通信線33を通じてマイコン25に入力される。   Next, the driver operates the shift lever to place it in the back state. The operation position (back operation position) of the shift lever at this time is detected by the shift position detection means 16 and input to the microcomputer 25 through the in-vehicle communication line 33.

そして、運転者は、ハンドルを左に切りながら車両41を後進させて、車両41を矢示方向D1に移動させる。このときのハンドルの回転角は、ハンドル舵角検出手段15によって検出されて、車内通信線33を通じてマイコン25に入力される。   Then, the driver moves the vehicle 41 backward while turning the steering wheel to the left, and moves the vehicle 41 in the arrow direction D1. The steering wheel rotation angle at this time is detected by the steering wheel angle detection means 15 and is input to the microcomputer 25 through the in-vehicle communication line 33.

マイコン25においては、シフト位置検出手段16から与えられた信号に基づいて、車両41が後退する予定であるか、または実際に後退しているかのいずれかであることを判断する。そして、この判断結果と、ハンドル舵角検出手段15から与えられた信号とに基づいて、図7に示すように、車両41の走行舵角が左後方である旨を判断する。   In the microcomputer 25, based on the signal given from the shift position detection means 16, it is determined whether the vehicle 41 is scheduled to move backward or is actually moving backward. Then, based on the determination result and the signal given from the steering wheel steering angle detection means 15, it is determined that the traveling steering angle of the vehicle 41 is the left rear as shown in FIG.

この場合、運転者にとっては、車両41の左側面と左側に駐車している車両42との間隔を確認する必要があるため、サイドカメラ12での撮像映像が重要であり、相対的にフロントカメラ11での撮像映像の重要性は低い。したがって、マイコン25は、図4に示すように、表示装置13の表示画面の右側の比較的小さな領域46bにフロントカメラ(カメラA)11での撮像映像を表示し、同じく表示装置13の表示画面の左側の比較的大きな領域47bにサイドカメラ(カメラB)12での撮像映像を表示するよう画像処理部21に制御信号を出力する。そしてこの制御信号に従って、画像処理部21が表示装置13を表示制御し、表示装置13の画面が図4に示すようなものとなる。   In this case, since it is necessary for the driver to check the distance between the left side surface of the vehicle 41 and the vehicle 42 parked on the left side, the image captured by the side camera 12 is important, and the front camera The importance of the captured image at 11 is low. Therefore, as shown in FIG. 4, the microcomputer 25 displays the image captured by the front camera (camera A) 11 in a relatively small area 46 b on the right side of the display screen of the display device 13, and also the display screen of the display device 13. A control signal is output to the image processing unit 21 so as to display the image captured by the side camera (camera B) 12 in a relatively large area 47b on the left side of the image processing unit. Then, in accordance with this control signal, the image processing unit 21 controls display of the display device 13, and the screen of the display device 13 becomes as shown in FIG.

次に、図8に示すように、車両41が車両43の後端部を避けながら右方向(矢示方向D2)に抜ける際、運転者はハンドルを右に切り、シフトレバーを前進側に切り替える。このときのハンドルの回転角は、ハンドル舵角検出手段15により検出されてマイコン25に入力され、またシフトレバーの状態もマイコン25に入力される。   Next, as shown in FIG. 8, when the vehicle 41 moves rightward (arrow direction D2) while avoiding the rear end of the vehicle 43, the driver turns the steering wheel to the right and switches the shift lever to the forward side. . The rotation angle of the steering wheel at this time is detected by the steering wheel angle detection means 15 and inputted to the microcomputer 25, and the state of the shift lever is also inputted to the microcomputer 25.

この場合、運転者にとっては、車両43の後端部との間隔を確認する必要があるため、フロントカメラ11での撮像映像が重要であり、相対的にサイドカメラ12での撮像映像の重要性は低い。したがって、マイコン25は、図5に示すように、表示装置13の表示画面の右側の比較的大きな領域46cにフロントカメラ(カメラA)11での撮像映像を表示し、同じく表示装置13の表示画面の左側の比較的小さな領域47cにサイドカメラ(カメラB)12での撮像映像を表示するよう画像処理部21に制御信号を出力する。そしてこの制御信号に従って、画像処理部21が表示装置13を表示制御し、表示装置13の画面が図5に示すようなものとなる。   In this case, since it is necessary for the driver to check the distance from the rear end of the vehicle 43, the image captured by the front camera 11 is important, and the image captured by the side camera 12 is relatively important. Is low. Therefore, as shown in FIG. 5, the microcomputer 25 displays the image captured by the front camera (camera A) 11 in a relatively large area 46 c on the right side of the display screen of the display device 13, and also the display screen of the display device 13. A control signal is output to the image processing unit 21 so as to display an image captured by the side camera (camera B) 12 in a relatively small area 47c on the left side of the image. Then, in accordance with this control signal, the image processing unit 21 controls the display of the display device 13, and the screen of the display device 13 becomes as shown in FIG.

このように、車両41の舵角を検出した結果に応じて、運転者にとって重要度の高い撮像映像が、相対的に重要度の低い撮像映像よりも広い領域に表示されるように、両カメラ11,12で撮像された両撮像映像の表示装置13の画面に占める割合を変化するので、運転者にとって視認性がよく且つ直感的に理解しやすい撮像映像の表示を行うことが可能である。   As described above, both cameras are configured so that a captured image having a high importance for the driver is displayed in a wider area than a captured image having a relatively low importance according to the result of detecting the steering angle of the vehicle 41. 11 and 12, the ratio of both the captured images captured on the screen of the display device 13 is changed. Therefore, it is possible to display captured images that are easy to understand and intuitive for the driver.

ただし、例えば駐車スペースが狭い場合のように、何度かハンドルを切り返す作業が必要となる場合がある。この場合は、フロントカメラ(カメラA)11の撮像映像とサイドカメラ(カメラB)12の撮像映像とを同時に確認したい状況になることが多いと考えられる。しかしながら、この実施形態では、両方のカメラ11,12で撮像した撮像映像の両方を表示装置13に表示しており、その表示領域の割合を変化させているだけなので、常に両カメラ11,12の撮像映像を表示できて便利である。   However, there are cases where it is necessary to turn the steering wheel several times, for example, when the parking space is small. In this case, it is often considered that there are many situations where it is desired to simultaneously check the captured image of the front camera (camera A) 11 and the captured image of the side camera (camera B) 12. However, in this embodiment, both of the captured images captured by both cameras 11 and 12 are displayed on the display device 13 and only the ratio of the display area is changed. It is convenient to display captured images.

即ち、この実施形態では、車両10(41)の舵角に応じて複数のカメラ11,12の撮像映像が表示装置13に表示される割合を変化させることで、複数のカメラ11,12の撮像映像を同時に確認できると共に、より注目すべき映像が瞬時に判断できるようになる。   That is, in this embodiment, by changing the ratio at which the captured images of the plurality of cameras 11 and 12 are displayed on the display device 13 according to the steering angle of the vehicle 10 (41), the imaging of the plurality of cameras 11 and 12 is performed. The video can be confirmed at the same time, and a video to be noticed can be judged instantly.

尚、単一の表示装置13に複数のカメラ11,12の撮像映像を合成して表示する場合に、同時表示された各映像がどこを撮像しているか認識しにくいと、その視認性を阻害してしまう。   In addition, when combining and displaying the captured images of the plurality of cameras 11 and 12 on the single display device 13, if it is difficult to recognize where each of the simultaneously displayed images is captured, the visibility is hindered. Resulting in.

しかしながら、この実施形態では、画像処理部21が、各カメラ11,12で撮像された撮像映像を任意の仮想視点位置から見た変換映像を生成する機能を備えており、複数のカメラ11,12の撮像映像での車両10の進行方向が互いに同一方向になるよう、少なくとも一つの撮像映像が視点変換される。例えば、フロントカメラ11とサイドカメラ12のいずれか一方の撮像映像を基準として、他方の撮像映像の画面方向が例えば90度回転しているような場合は、他方の撮像映像を一方の撮像映像の画面方向に対応するように90度だけ逆回転させて表示装置13に表示する。これにより、同時表示された各映像がどこを撮像しているか認識しやすくなる。   However, in this embodiment, the image processing unit 21 has a function of generating a converted image obtained by viewing the captured images captured by the cameras 11 and 12 from an arbitrary virtual viewpoint position. At least one captured image is subjected to viewpoint conversion so that the traveling directions of the vehicle 10 in the captured images are the same as each other. For example, when the screen direction of the other captured image is rotated by, for example, 90 degrees with respect to the captured image of one of the front camera 11 and the side camera 12, the other captured image is converted to the captured image of the one captured image. The image is displayed on the display device 13 by being rotated reversely by 90 degrees so as to correspond to the screen direction. This makes it easy to recognize where each of the simultaneously displayed images is captured.

尚、この実施形態の図3〜図5では、2つのカメラ11,12の撮像映像を左右に合成した例を示したが、上下に合成したり、あるいは図9及び図10のように、割合の大きな撮像映像47d,46eの上の隅部に割合の小さな撮像映像46d,47eを重ね合わせるように合成してもよい。   In FIGS. 3 to 5 of this embodiment, an example in which the captured images of the two cameras 11 and 12 are combined on the left and right is shown. However, the images may be combined vertically or as shown in FIGS. The captured images 46d and 47e having a small ratio may be superimposed on the corners on the large captured images 47d and 46e.

また、マイコン25において、ハンドルを左に切る角度が大きくなるほど、サイドカメラ12(カメラB)の撮像映像の割合を多くするよう、領域の割合を変化させるようにしてもよい。さらにこの場合において、設定値以上の角度になったらサイドカメラ12(カメラB)の撮像映像のみ表示するようにしてもよい。   Further, in the microcomputer 25, the area ratio may be changed so that the ratio of the captured image of the side camera 12 (camera B) increases as the angle at which the handle is turned to the left increases. Furthermore, in this case, when the angle is equal to or larger than the set value, only the captured image of the side camera 12 (camera B) may be displayed.

さらに、車両10の周辺を撮像するカメラとしては、フロントカメラ11及びサイドカメラ12といった2つのカメラに限らず、3台以上であってもよい。例えば、1台の車両10に、図1に示したフロントカメラ(カメラA)11とサイドカメラ(カメラB)12に加え、図11の如く、左後方を撮像するバックカメラ(カメラC)48を設置し、これらで撮像された撮像映像51〜53を、図12〜図15に示すレイアウトのなかからひとつのレイアウトを適宜選択して合成表示し、さらに表示される各撮像映像が表示装置13の画面に表示される割合を、車両10の舵角に応じて変化させるようにしてもよい。この場合も、複数のカメラ11,12,48で撮像された撮像映像51〜53の全てを表示装置13に表示しながら、且つ重要度の高い撮像映像51〜53の表示割合を大きくして目立たせることが可能である点に変わりない。   Furthermore, the camera that captures the periphery of the vehicle 10 is not limited to two cameras such as the front camera 11 and the side camera 12, and may be three or more cameras. For example, in addition to the front camera (camera A) 11 and the side camera (camera B) 12 shown in FIG. 1, a back camera (camera C) 48 for imaging the left rear as shown in FIG. The picked-up images 51 to 53 that are installed and picked up by these are displayed by appropriately selecting one layout from the layouts shown in FIGS. 12 to 15, and each picked-up image to be displayed is displayed on the display device 13. The ratio displayed on the screen may be changed according to the steering angle of the vehicle 10. Also in this case, while displaying all of the picked-up images 51 to 53 picked up by the plurality of cameras 11, 12, and 48 on the display device 13, the display ratio of the picked-up images 51 to 53 having high importance is increased to be conspicuous. It does not change in the point that can be made.

さらにまた、表示装置13に各カメラの撮像映像を表示する場合に、マイコン25で判断された車両10の舵角の方向を、図16及び図17のように矢印等の所定の図形または記号により撮像映像51〜53に重ねて表示してもよい。これにより、車両10の進行方向に存在する障害物等の検出が容易になる。ここで、図16は、図13に示した表示装置13の画面中に車両10の進行方向を矢印P1〜P3で表示した例である。また、図17は、各カメラの撮像映像51〜53を視点変換し、進行方向を一致させるよう表示した例である。この場合、各カメラの撮像映像51〜53の視野方向を、矢印P1〜P3の表示により直感的に認識することがさらに容易になる。   Furthermore, when displaying the captured image of each camera on the display device 13, the direction of the rudder angle of the vehicle 10 determined by the microcomputer 25 is indicated by a predetermined figure or symbol such as an arrow as shown in FIGS. The captured images 51 to 53 may be displayed so as to overlap each other. This facilitates detection of obstacles and the like existing in the traveling direction of the vehicle 10. Here, FIG. 16 is an example in which the traveling direction of the vehicle 10 is displayed by arrows P1 to P3 on the screen of the display device 13 shown in FIG. FIG. 17 is an example in which the captured images 51 to 53 of each camera are displayed in such a manner that the viewpoints are converted and the traveling directions are matched. In this case, it becomes easier to intuitively recognize the viewing direction of the captured images 51 to 53 of each camera by displaying the arrows P1 to P3.

さらに、上記実施形態では、フロントカメラ11及びサイドカメラ12を車両10の左側に設置していただけであったが、図18に示すように、車両10の前端の左右両側にフロントカメラ11a,11bを設置し、車両10の側部の左右両側にサイドカメラ12a,12bを設置し、車両10の後端の左右両側にバックカメラ48a,48bを設置するとともに、これらの6個のカメラ11a,11b,12a,12b,48a,48bで撮像された6個の全ての撮像映像を合成表示してもよい。この場合も、表示される各撮像映像の表示装置13の画面に表示される割合を、車両10の舵角に応じて変化させるようにする。この場合も、重要度の高い撮像映像の表示割合を大きくして目立たせることが可能である。   Further, in the above embodiment, the front camera 11 and the side camera 12 are only installed on the left side of the vehicle 10, but as shown in FIG. 18, the front cameras 11 a and 11 b are installed on the left and right sides of the front end of the vehicle 10. The side cameras 12a and 12b are installed on both the left and right sides of the side portion of the vehicle 10, the back cameras 48a and 48b are installed on the left and right sides of the rear end of the vehicle 10, and the six cameras 11a, 11b, All six captured images captured by 12a, 12b, 48a, and 48b may be combined and displayed. Also in this case, the ratio of each captured image displayed on the screen of the display device 13 is changed according to the steering angle of the vehicle 10. In this case as well, it is possible to make the display ratio of captured images with high importance stand out.

さらにまた、図18に示した6個のカメラ11a,11b,12a,12b,48a,48bで撮像された6個の撮像映像のうち、車両10の進行方向に応じて例えば3つまたは4つ等の複数の撮像映像を適宜選択し、この選択された複数の撮像映像を合成表示してもよい。この場合も、表示される各撮像映像の表示装置13の画面に表示される割合を、車両10の進行方向及び舵角に応じて変化させるようにする。この場合は、左前方+右前方等、左側方+右側方等、左側方+左後方等、左後方+右後方等、といった様々な組合せで表示を行いながら、しかも重要度の高い撮像映像の表示割合を大きくして目立たせることが可能である。   Furthermore, among the six captured images captured by the six cameras 11a, 11b, 12a, 12b, 48a, and 48b shown in FIG. 18, for example, three or four according to the traveling direction of the vehicle 10. The plurality of captured images may be selected as appropriate, and the selected plurality of captured images may be combined and displayed. Also in this case, the ratio of each captured image displayed on the screen of the display device 13 is changed according to the traveling direction and the steering angle of the vehicle 10. In this case, while displaying in various combinations such as left front + front right, left side + right side, left side + left rear, left rear + right rear, etc. It is possible to make the display ratio stand out.

本発明の一の実施形態に係る車両周辺撮像装置が設置された車両を示す平面図である。It is a top view which shows the vehicle by which the vehicle periphery imaging device which concerns on one Embodiment of this invention was installed. 本発明の一の実施形態に係る車両周辺撮像装置を示すブロック図である。1 is a block diagram illustrating a vehicle periphery imaging device according to an embodiment of the present invention. 本発明の一の実施形態に係る車両周辺撮像装置で撮像された撮像映像が表示装置の画面に表示された状態の一例を示す図である。It is a figure which shows an example of the state by which the picked-up image imaged with the vehicle periphery imaging device which concerns on one Embodiment of this invention was displayed on the screen of a display apparatus. 本発明の一の実施形態に係る車両周辺撮像装置で撮像された撮像映像が表示装置の画面に表示された状態の一例を示す図である。It is a figure which shows an example of the state by which the picked-up image imaged with the vehicle periphery imaging device which concerns on one Embodiment of this invention was displayed on the screen of a display apparatus. 本発明の一の実施形態に係る車両周辺撮像装置で撮像された撮像映像が表示装置の画面に表示された状態の一例を示す図である。It is a figure which shows an example of the state by which the picked-up image imaged with the vehicle periphery imaging device which concerns on one Embodiment of this invention was displayed on the screen of a display apparatus. 本発明の一の実施形態に係る車両周辺撮像装置を搭載した自動車の動作例を示す模式図である。It is a schematic diagram which shows the operation example of the motor vehicle carrying the vehicle periphery imaging device which concerns on one Embodiment of this invention. 本発明の一の実施形態に係る車両周辺撮像装置を搭載した自動車の動作例を示す模式図である。It is a schematic diagram which shows the operation example of the motor vehicle carrying the vehicle periphery imaging device which concerns on one Embodiment of this invention. 本発明の一の実施形態に係る車両周辺撮像装置を搭載した自動車の動作例を示す模式図である。It is a schematic diagram which shows the operation example of the motor vehicle carrying the vehicle periphery imaging device which concerns on one Embodiment of this invention. 本発明の一の実施形態に係る車両周辺撮像装置で撮像された撮像映像が表示装置の画面に表示された状態の一例を示す図である。It is a figure which shows an example of the state by which the picked-up image imaged with the vehicle periphery imaging device which concerns on one Embodiment of this invention was displayed on the screen of a display apparatus. 本発明の一の実施形態に係る車両周辺撮像装置で撮像された撮像映像が表示装置の画面に表示された状態の一例を示す図である。It is a figure which shows an example of the state by which the picked-up image imaged with the vehicle periphery imaging device which concerns on one Embodiment of this invention was displayed on the screen of a display apparatus. 本発明の一の変形列に係る車両周辺撮像装置を搭載した車両を示す平面図である。It is a top view which shows the vehicle carrying the vehicle periphery imaging device which concerns on one deformation | transformation row | line | column of this invention. 本発明の一の変形列に係る車両周辺撮像装置で撮像された撮像映像が表示装置の画面に表示された状態の一例を示す図である。It is a figure which shows an example of the state by which the picked-up image imaged with the vehicle periphery imaging device which concerns on one deformation sequence of this invention was displayed on the screen of a display apparatus. 本発明の一の変形列に係る車両周辺撮像装置で撮像された撮像映像が表示装置の画面に表示された状態の一例を示す図である。It is a figure which shows an example of the state by which the picked-up image imaged with the vehicle periphery imaging device which concerns on one deformation sequence of this invention was displayed on the screen of a display apparatus. 本発明の一の変形列に係る車両周辺撮像装置で撮像された撮像映像が表示装置の画面に表示された状態の一例を示す図である。It is a figure which shows an example of the state by which the picked-up image imaged with the vehicle periphery imaging device which concerns on one deformation sequence of this invention was displayed on the screen of a display apparatus. 本発明の一の変形列に係る車両周辺撮像装置で撮像された撮像映像が表示装置の画面に表示された状態の一例を示す図である。It is a figure which shows an example of the state by which the picked-up image imaged with the vehicle periphery imaging device which concerns on one deformation sequence of this invention was displayed on the screen of a display apparatus. 本発明の他の変形列に係る車両周辺撮像装置で撮像された撮像映像が表示装置の画面に表示された状態の一例を示す図である。It is a figure which shows an example of the state by which the picked-up image imaged with the vehicle periphery imaging device which concerns on the other modified row | line | column of this invention was displayed on the screen of a display apparatus. 本発明のさらに他の変形列に係る車両周辺撮像装置で撮像された撮像映像が表示装置の画面に表示された状態の一例を示す図である。It is a figure which shows an example of the state by which the picked-up image imaged with the vehicle periphery imaging device which concerns on the further another row | line | column of this invention was displayed on the screen of a display apparatus. 本発明のさらに他の変形列に係る車両周辺撮像装置を搭載した車両を示す平面図である。It is a top view which shows the vehicle carrying the vehicle periphery imaging device which concerns on the further another deformation | transformation row | line | column of this invention. 従来の一例の車両周辺撮像装置が設置された車両を示す正面図である。It is a front view which shows the vehicle by which the vehicle periphery imaging device of an example of the past was installed. 従来の他の例の車両周辺撮像装置の表示画面を示す図である。It is a figure which shows the display screen of the vehicle periphery imaging device of the other conventional example.

符号の説明Explanation of symbols

10,41 車両
11,11a,11b フロントカメラ
12,12a,12b サイドカメラ
13 表示装置
14 制御部
15 ハンドル舵角検出手段
16 シフト位置検出手段
48,48a,48b バックカメラ
DESCRIPTION OF SYMBOLS 10,41 Vehicle 11,11a, 11b Front camera 12,12a, 12b Side camera 13 Display apparatus 14 Control part 15 Steering-wheel steering angle detection means 16 Shift position detection means 48, 48a, 48b Back camera

Claims (5)

車両の周辺の映像を撮像して当該車両内に設置された表示装置に表示する車両周辺撮像装置であって、
前記車両の複数の視野範囲の撮像映像をそれぞれ撮像する複数のカメラと、
前記車両内に設置された前記表示装置と、
前記車両の走行に係る舵角を検出する舵角検出手段と、
少なくとも、前記舵角検出手段で検出された前記舵角に基づいて、全ての前記カメラで撮像された撮像映像のうち複数の撮像映像を、前記表示装置の画面中に占める表示面積の割合を変化させて合成し、合成された撮像映像を前記表示装置に表示する制御部と
を備える車両周辺撮像装置。
A vehicle periphery imaging device that captures a video around a vehicle and displays it on a display device installed in the vehicle,
A plurality of cameras that respectively capture captured images of a plurality of fields of view of the vehicle;
The display device installed in the vehicle;
Rudder angle detecting means for detecting a rudder angle related to the traveling of the vehicle;
Based on at least the rudder angle detected by the rudder angle detection means, the ratio of the display area that occupies a plurality of captured images captured by all the cameras in the screen of the display device is changed. And a control unit that displays the combined captured image on the display device.
請求項1に記載の車両周辺撮像装置であって、
前記舵角検出手段が、ハンドルの舵角を検出するハンドル舵角検出手段である、車両周辺撮像装置。
The vehicle periphery imaging device according to claim 1,
The vehicle periphery imaging device, wherein the steering angle detection means is a steering angle detection means for detecting a steering angle of a steering wheel.
請求項1または請求項2に記載の車両周辺撮像装置であって、
シフトレバーの操作位置を検出するシフト位置検出手段をさらに備え、
前記制御部が、前記舵角検出手段で検出された前記舵角と、前記シフト位置検出手段で検出された前記シフトレバーの操作位置とに基づいて、全ての前記カメラで撮像された撮像映像のうち複数の撮像映像を、前記表示装置の画面中に占める表示面積の割合を変化させて合成し、合成された撮像映像を前記表示装置に表示する、車両周辺撮像装置。
The vehicle periphery imaging device according to claim 1 or 2,
A shift position detecting means for detecting an operation position of the shift lever;
Based on the rudder angle detected by the rudder angle detection unit and the operation position of the shift lever detected by the shift position detection unit, the control unit captures images captured by all the cameras. A vehicle periphery imaging device that synthesizes a plurality of captured images by changing a ratio of a display area in the screen of the display device and displays the combined captured images on the display device.
請求項1から請求項3のいずれかに記載の車両周辺撮像装置であって、
前記制御部が、前記各撮像映像について任意の仮想視点位置から見た変換映像を生成する機能を有し、当該機能が、複数の撮像装置の撮像映像での車両の進行方向が同一方向になるよう、少なくとも一つの撮像映像が視点変換する、車両周辺撮像装置。
The vehicle periphery imaging device according to any one of claims 1 to 3,
The control unit has a function of generating a converted image viewed from an arbitrary virtual viewpoint position for each captured image, and the function is such that the traveling direction of the vehicle in the captured images of a plurality of imaging devices is the same direction. As described above, a vehicle periphery imaging device in which at least one captured image undergoes viewpoint conversion.
請求項1から請求項4のいずれかに記載の車両周辺撮像装置であって、
前記制御部が、前記舵角検出手段で検出された前記舵角に基づいて判断された前記車両の進行方向の情報を、前記各撮像映像に重ねて前記表示装置に表示する、車両周辺撮像装置。
The vehicle periphery imaging device according to any one of claims 1 to 4,
The vehicle peripheral imaging device, wherein the control unit displays information on the traveling direction of the vehicle determined based on the steering angle detected by the steering angle detection means on the display device so as to be superimposed on the respective captured images. .
JP2004003996A 2004-01-09 2004-01-09 Vehicle periphery imaging device Expired - Fee Related JP4467313B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004003996A JP4467313B2 (en) 2004-01-09 2004-01-09 Vehicle periphery imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004003996A JP4467313B2 (en) 2004-01-09 2004-01-09 Vehicle periphery imaging device

Publications (2)

Publication Number Publication Date
JP2005198160A true JP2005198160A (en) 2005-07-21
JP4467313B2 JP4467313B2 (en) 2010-05-26

Family

ID=34818732

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004003996A Expired - Fee Related JP4467313B2 (en) 2004-01-09 2004-01-09 Vehicle periphery imaging device

Country Status (1)

Country Link
JP (1) JP4467313B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008044589A1 (en) * 2006-10-11 2008-04-17 Panasonic Corporation Video display apparatus and video display method
KR20130124762A (en) * 2012-05-07 2013-11-15 현대모비스 주식회사 Around view monitor system and monitoring method
US9499168B2 (en) 2013-01-09 2016-11-22 Mitsubishi Electric Corporation Vehicle periphery display device
US10046700B2 (en) 2012-05-22 2018-08-14 Mitsubishi Electric Corporation Image processing device
DE102019216368A1 (en) * 2019-10-24 2021-04-29 Robert Bosch Gmbh Method for outputting a control signal to a unit of a vehicle
US20220132036A1 (en) * 2013-05-10 2022-04-28 Sony Group Corporation Display Control Apparatus, Display Control Method, And Program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62157642U (en) * 1986-03-31 1987-10-06
JP2001006097A (en) * 1999-06-25 2001-01-12 Fujitsu Ten Ltd Device for supporting driving for vehicle
JP2001114046A (en) * 1999-10-15 2001-04-24 Yazaki Corp Parking auxiliary device
JP2003281505A (en) * 2002-03-22 2003-10-03 Nissan Motor Co Ltd Vehicular image processor

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62157642U (en) * 1986-03-31 1987-10-06
JP2001006097A (en) * 1999-06-25 2001-01-12 Fujitsu Ten Ltd Device for supporting driving for vehicle
JP2001114046A (en) * 1999-10-15 2001-04-24 Yazaki Corp Parking auxiliary device
JP2003281505A (en) * 2002-03-22 2003-10-03 Nissan Motor Co Ltd Vehicular image processor

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008044589A1 (en) * 2006-10-11 2008-04-17 Panasonic Corporation Video display apparatus and video display method
JP5143009B2 (en) * 2006-10-11 2013-02-13 パナソニック株式会社 Video display device and video display method
KR20130124762A (en) * 2012-05-07 2013-11-15 현대모비스 주식회사 Around view monitor system and monitoring method
US10046700B2 (en) 2012-05-22 2018-08-14 Mitsubishi Electric Corporation Image processing device
DE112013002636B4 (en) 2012-05-22 2019-05-09 Mitsubishi Electric Corporation Image processing device
US9499168B2 (en) 2013-01-09 2016-11-22 Mitsubishi Electric Corporation Vehicle periphery display device
US20220132036A1 (en) * 2013-05-10 2022-04-28 Sony Group Corporation Display Control Apparatus, Display Control Method, And Program
DE102019216368A1 (en) * 2019-10-24 2021-04-29 Robert Bosch Gmbh Method for outputting a control signal to a unit of a vehicle

Also Published As

Publication number Publication date
JP4467313B2 (en) 2010-05-26

Similar Documents

Publication Publication Date Title
KR101266734B1 (en) Display apparatus
JP6946652B2 (en) Parking support device
EP2794353B1 (en) Vehicle rear monitoring system
JP4766841B2 (en) Camera device and vehicle periphery monitoring device mounted on vehicle
US9308863B2 (en) Vehicle peripheral observation device
WO2010137685A1 (en) Image generation device and image display system
WO2010137684A1 (en) Image generation device and image display system
US10484651B2 (en) Image display control device
JP4945177B2 (en) Vehicle driving support device
WO2016035580A1 (en) Image display control device and image display system
JP2009239674A (en) Vehicular periphery display device
JP2005186648A (en) Surrounding visualizing device for vehicle and displaying control device
JP5071738B2 (en) Display device
CN110895443A (en) Display control device
JP4467313B2 (en) Vehicle periphery imaging device
JP2012046124A (en) Image display system, image processing device and image display method
JP2007081932A (en) Visual recognition device for vehicle periphery
JP4977482B2 (en) Image providing apparatus, vehicle, and image providing method
JP5071739B2 (en) Display device
JP6662655B2 (en) Vehicle image display device
JP2010184606A (en) Vehicle surroundings display device
JP2019069719A (en) Parking support device
JP7056034B2 (en) Peripheral monitoring device
KR20190094135A (en) A parking assisting system
KR102005551B1 (en) A parking assisting system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061227

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20091023

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100223

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100223

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130305

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140305

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees