JP2005198160A - Vehicle periphery imaging device - Google Patents
Vehicle periphery imaging device Download PDFInfo
- Publication number
- JP2005198160A JP2005198160A JP2004003996A JP2004003996A JP2005198160A JP 2005198160 A JP2005198160 A JP 2005198160A JP 2004003996 A JP2004003996 A JP 2004003996A JP 2004003996 A JP2004003996 A JP 2004003996A JP 2005198160 A JP2005198160 A JP 2005198160A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- captured
- imaging device
- display device
- cameras
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
Abstract
Description
本発明は、車両周辺撮像装置及びそれに関連する技術に関するものである。 The present invention relates to a vehicle periphery imaging apparatus and related technology.
従来、例えば図19の如く、車両前部に前方に広がる領域を撮影するフロントカメラ1と、車両左側部に側方および前側方に広がる領域を撮影するサイドカメラ3とを設け、車室内に運転者が視認可能に配設された表示ディスプレイに、サイドカメラ3で撮像された側方撮像画像とフロントカメラ1で撮像された前方撮像画像とを切り替える技術(第1の従来技術)があった。この第1の従来技術では、各種センサを用いて検出したステアリングホイールの舵角および車速に基づいて、車両の向きの変化量を検出する。そして、最初に表示ディスプレイにサイドカメラ3による側方撮像画像の表示を開始しておき、車両の向きの変化量が所定値に達した場合に、表示ディスプレイに表示される撮像画像を、サイドカメラ3による側方撮像画像からフロントカメラ1による前方撮像画像へ切り替えるようになっている。 Conventionally, as shown in FIG. 19, for example, a front camera 1 that captures a region that spreads forward in the front part of the vehicle and a side camera 3 that captures a region that spreads laterally and frontwardly are provided on the left side of the vehicle. There is a technique (first prior art) for switching between a side captured image captured by the side camera 3 and a front captured image captured by the front camera 1 on a display that is disposed so as to be visible to the user. In the first conventional technique, the amount of change in the direction of the vehicle is detected based on the steering angle of the steering wheel and the vehicle speed detected using various sensors. First, the display of the side captured image by the side camera 3 is started on the display display, and when the amount of change in the direction of the vehicle reaches a predetermined value, the captured image displayed on the display display is changed to the side camera. 3 is switched from the side captured image by 3 to the front captured image by the front camera 1.
また、他の従来の例として、図20の如く、車両の左側面前部に設置された左カメラと、車両の右側面前部に設置された右カメラとで撮像されたそれぞれの撮像画像を、画像処理により車室内のモニタの単一画面5に並べて表示させる技術(第2の従来技術)があった。
Further, as another conventional example, as shown in FIG. 20, each captured image captured by a left camera installed at the front side of the left side of the vehicle and a right camera installed at the front side of the right side of the vehicle There has been a technique (second prior art) in which the images are displayed side by side on a
上記した第1の従来技術では、複数のカメラ1,3の撮像画像を同時に確認できない。したがって、例えば車庫入れ時など複雑なハンドル切り返し操作を要求される場合には、複数のカメラ1,3の撮像画像を同時に確認したい状況になるが、先行技術では複数のカメラ1,3の撮像画像を択一的に表示するためこれができず不便である。 In the first prior art described above, images taken by the plurality of cameras 1 and 3 cannot be confirmed simultaneously. Therefore, for example, when a complicated steering wheel turning operation is required, such as when entering a garage, it is desired to check the captured images of the cameras 1 and 3 simultaneously. In the prior art, the captured images of the cameras 1 and 3 are used. This is inconvenient because it cannot be displayed.
また、上記の第2の従来技術では、複数カメラの撮像画像を同時に表示しているが、ハンドル操作に応じてモニタに表示される画像が変化しないため、運転者が本来注目すべき映像が直感的に視認しにくく不便である。 In the second prior art, images taken by a plurality of cameras are displayed at the same time. However, since the image displayed on the monitor does not change in accordance with the steering operation, the video that the driver should pay attention to is intuitive. It is difficult to visually recognize and is inconvenient.
そこで、本発明の課題は、複数のカメラで撮像した画像を同時に確認でき、且つ注目すべき映像の認識が容易になる車両周辺撮像装置を提供することにある。 SUMMARY OF THE INVENTION An object of the present invention is to provide a vehicle periphery imaging device that can simultaneously confirm images captured by a plurality of cameras and that facilitates recognition of a video to be noted.
上記課題を解決すべく、請求項1に記載の発明は、車両の周辺の映像を撮像して当該車両内に設置された表示装置に表示する車両周辺撮像装置であって、前記車両の複数の視野範囲の撮像映像をそれぞれ撮像する複数のカメラと、前記車両内に設置された前記表示装置と、前記車両の走行に係る舵角を検出する舵角検出手段と、少なくとも、前記舵角検出手段で検出された前記舵角に基づいて、全ての前記カメラで撮像された撮像映像のうち複数の撮像映像を、前記表示装置の画面中に占める表示面積の割合を変化させて合成し、合成された撮像映像を前記表示装置に表示する制御部とを備えるものである。 In order to solve the above-mentioned problem, the invention described in claim 1 is a vehicle periphery imaging device that captures an image of the periphery of the vehicle and displays the image on a display device installed in the vehicle. A plurality of cameras that respectively capture captured images of the field of view range, the display device installed in the vehicle, a rudder angle detection unit that detects a rudder angle according to travel of the vehicle, and at least the rudder angle detection unit Based on the rudder angle detected in step 1, a plurality of captured images captured by all the cameras are synthesized by changing the proportion of the display area in the screen of the display device. And a control unit that displays the captured image on the display device.
請求項2に記載の発明は、請求項1に記載の車両周辺撮像装置であって、前記舵角検出手段が、ハンドルの舵角を検出するハンドル舵角検出手段である。 A second aspect of the present invention is the vehicle periphery imaging device according to the first aspect, wherein the rudder angle detection means is a steering angle detection means for detecting a steering angle of a steering wheel.
請求項3に記載の発明は、請求項1または請求項2に記載の車両周辺撮像装置であって、シフトレバーの操作位置を検出するシフト位置検出手段をさらに備え、前記制御部が、前記舵角検出手段で検出された前記舵角と、前記シフト位置検出手段で検出された前記シフトレバーの操作位置とに基づいて、全ての前記カメラで撮像された撮像映像のうち複数の撮像映像を、前記表示装置の画面中に占める表示面積の割合を変化させて合成し、合成された撮像映像を前記表示装置に表示するものである。 A third aspect of the present invention is the vehicle periphery imaging device according to the first or second aspect, further comprising shift position detecting means for detecting an operation position of a shift lever, wherein the control unit includes the rudder. Based on the rudder angle detected by the angle detection unit and the operation position of the shift lever detected by the shift position detection unit, a plurality of captured images among the captured images captured by all the cameras, The display area is synthesized by changing the ratio of the display area in the screen of the display device, and the synthesized captured image is displayed on the display device.
請求項4に記載の発明は、請求項1から請求項3のいずれかに記載の車両周辺撮像装置であって、前記制御部が、前記各撮像映像について任意の仮想視点位置から見た変換映像を生成する機能を有し、当該機能が、複数の撮像装置の撮像映像での車両の進行方向が同一方向になるよう、少なくとも一つの撮像映像が視点変換するものである。 A fourth aspect of the present invention is the vehicle periphery imaging device according to any one of the first to third aspects, wherein the control unit converts the captured image viewed from an arbitrary virtual viewpoint position. This function converts the viewpoint of at least one captured image so that the traveling direction of the vehicle in the captured images of the plurality of imaging devices is the same.
請求項5に記載の発明は、請求項1から請求項4のいずれかに記載の車両周辺撮像装置であって、前記制御部が、前記舵角検出手段で検出された前記舵角に基づいて判断された前記車両の進行方向の情報を、前記各撮像映像に重ねて前記表示装置に表示するものである。
Invention of
請求項1に記載の発明は、舵角検出手段により車両の走行に係る舵角を検出しながら、車両の複数の視野範囲の撮像映像を複数のカメラでそれぞれ撮像し、舵角検出手段で検出された舵角に基づいて、全てのカメラで撮像された撮像映像のうち複数の撮像映像を、表示装置の画面中に占める表示面積の割合を変化させて合成し、合成された撮像映像を表示装置に表示するので、同一画面に表示された複数の撮像映像の中から注目すべき映像を認識しやすくするため、ハンドル操作の状態により表示割合を変化させることができる。したがって、複数の撮像映像を同時に表示しながらも、その都度、重要度の高い撮像映像の表示割合を高めて表示でき、視認性のよい車両周辺撮像装置を提供できる。 According to the first aspect of the present invention, while the steering angle detection means detects the steering angle related to the running of the vehicle, the captured images of the plurality of fields of view of the vehicle are respectively captured by the plurality of cameras and detected by the steering angle detection means. Based on the rudder angle, a plurality of captured images captured by all cameras are combined by changing the proportion of the display area in the screen of the display device, and the combined captured images are displayed. Since it is displayed on the apparatus, it is possible to change the display ratio depending on the state of the handle operation in order to make it easy to recognize a noticeable image from a plurality of captured images displayed on the same screen. Therefore, while displaying a plurality of captured images at the same time, it is possible to increase the display ratio of captured images with high importance each time, and to provide a vehicle periphery imaging device with good visibility.
この場合、舵角検出手段として請求項2のようなハンドル舵角検出手段を適用することで、ハンドルの舵角を検出するだけで車両の舵角を検出できる。 In this case, the steering angle of the vehicle can be detected only by detecting the steering angle of the steering wheel by applying the steering angle detection means as in claim 2 as the steering angle detection means.
また、前進と後進の判別を行って撮像映像の表示割合を変化させる場合は、請求項3のように、シフト位置検出手段でシフトレバーの操作位置(シフトポジション)を検出するだけでよい。 Further, when the forward / backward discrimination is performed to change the display ratio of the captured image, it is only necessary to detect the operation position (shift position) of the shift lever by the shift position detecting means as in the third aspect.
請求項4に記載の発明は、視点変換により各カメラ映像上での進行方向を一致させるので、同時表示された各映像がどこを撮像しているか認識しやすくなる。 According to the fourth aspect of the present invention, since the traveling directions on the camera images are matched by the viewpoint conversion, it is easy to recognize where the simultaneously displayed images are captured.
請求項5に記載の発明は、舵角検出手段で検出された舵角に基づいて判断された車両の進行方向の情報を、各撮像映像に重ねて表示装置に表示するので、進行方向に存在する障害物を確認しやすくなる。 According to the fifth aspect of the present invention, information on the traveling direction of the vehicle determined based on the steering angle detected by the steering angle detection means is displayed on the display device so as to be superimposed on each captured image. It becomes easy to confirm the obstacle to do.
<構成>
図1は本発明の一の実施形態に係る車両周辺撮像装置が設置された車両10を示す平面図、図2は車両周辺撮像装置を示すブロック図である。この車両周辺撮像装置は、図1の如く、車両10の周辺を撮像するものであって、車両10から見て異なる方向の周辺を撮像するために複数のカメラ11,12を備えており、図2の如く、複数のカメラ11,12で撮像された各撮像映像を合成してディスプレイに表示するのに際して、各撮像映像がディスプレイに占める割合を舵角に応じて図3〜図5に示すように変化させるものである。
<Configuration>
FIG. 1 is a plan view showing a
具体的に、この車両周辺撮像装置は、車両10の前部に設置されて前方に広がる領域を撮影するフロントカメラ(カメラA)11と、車両10の左側部に設置されて側方および前側方に広がる領域を撮影するサイドカメラ(カメラB)12と、ドットマトリクス表示型の表示装置13と、両カメラ11,12及び表示装置13を制御する制御部14と、車両10の走行舵角を検出するためにハンドルの舵角を検出して制御部14に伝達するハンドル舵角検出手段15と、車両10の前進や後退等のシフトレバーの操作位置を検出するシフト位置検出手段16とを備えて構成される。
Specifically, this vehicle periphery imaging device is installed in the front part of the
フロントカメラ11は、図1の如く、フロントバンパーの左隅付近に設置され、例えばCCD等の撮像素子が使用された一般的な撮像デバイスが適用される。このフロントカメラ11は、その撮像中心が左前側に向けて設置され、且つその視野範囲が、車両10の前方から左側方にかけた範囲に設定される。かかる視野範囲は、図示しないレンズ等の光学系部品により設定される。
As shown in FIG. 1, the
サイドカメラ12は、左サイドミラー付近に設置され、例えばフロントカメラ11と同様のCCD等の撮像素子が使用された一般的な撮像デバイスが適用される。このサイドカメラ12は、その撮像中心が左側に向けて設置され、且つその視野範囲が、車両10の斜め左前から斜め左後ろにかけた範囲に設定される。かかる視野範囲は、図示しないレンズ等の光学系部品により設定される。
The
表示装置13(図2)は、有機EL表示装置やTFT型等の液晶表示装置(LCD)などによって構成され、車両10の車室内における前部パネル(例えば、センタクラスタパネル、ヒータコントロールパネル等)の例えば左右方向中央部等に嵌め込まれて設置される。この表示装置13には、制御部14との電気的な接続のための接続部13aが設けられている。
The display device 13 (FIG. 2) is constituted by an organic EL display device, a liquid crystal display device (LCD) such as a TFT type, and the like, and a front panel (for example, a center cluster panel, a heater control panel, etc.) in the vehicle interior of the
制御部14(図2)は、両カメラ11,12で撮像された撮像映像を表示装置13に表示するもので、特に、ハンドル舵角検出手段15で検出されたハンドルの舵角に基づいて車両10の走行舵角を判断し、その判断結果に応じて各カメラ11,12で撮像された撮像映像の表示装置13中に占める表示面積の割合を、ハンドル舵角検出手段15により検出されたハンドル舵角の値に対応して、図3〜図5に示すように変化させるものである。
The control unit 14 (FIG. 2) displays captured images captured by the
具体的に、制御部14は、図2の如く、画像処理部21と、メモリ23と、マイクロコンピュータチップ(以下、単に「マイコン」と略称する)25と、操作部27とが備えられている。
Specifically, as shown in FIG. 2, the
また、この制御部14には、コネクタ等からなる複数の接続部31a〜31dが設けられている。例えば、接続部31aと接続部13aとを接続することにより表示装置13と画像処理部21とが電気的に接続され、接続部31bが車内LAN当の車内通信線33に接続されることによりその車内通信線33を通じてハンドル舵角検出手段15とマイコン25とが電気的に接続される。また、接続部31c,31dを介して各カメラ11,12が画像処理部21に電気的に接続される。
Further, the
画像処理部21は、表示装置13の表示画像を制御するものであり、その具体的な機能としては、マイコン25からの制御信号に基づいて、各カメラ11,12で撮像された各撮像映像の表示装置13の画面に占める割合を、図3〜図5に示すように変化させる画像処理機能等がある。この図3〜図5に示した表示装置13の画面については後述する。尚、メモリ23は、画像処理部21による画像処理等に用いられる。操作部27は、図示しないエアコンや各種車載機器等を操作するための操作入力を受け付けるためのものであり、複数の操作スイッチを有し、表示装置13の周辺部等に設置される。
The
尚、単一の表示装置13に複数のカメラ11,12の撮像映像を合成して表示する場合に、同時表示された各映像がどこを撮像しているか認識しにくいと、その視認性を阻害してしまう。したがって、画像処理部21は、同時表示された各映像がどこを撮像しているか認識しやすくするため、視点変換により各カメラ映像上での進行方向を一致させる機能を有している。具体的に、この画像処理部21は、各カメラ11,12で撮像された撮像映像を任意の仮想視点位置から見た変換映像を生成する機能を備えており、複数のカメラ11,12の撮像映像での車両10の進行方向が互いに同一方向になるよう、少なくとも一つの撮像映像が視点変換される。例えば、フロントカメラ11とサイドカメラ12のいずれか一方の撮像映像を基準として、他方の撮像映像の画面方向が例えば90度回転しているような場合は、他方の撮像映像を一方の撮像映像の画面方向に対応するように90度だけ逆回転させて表示装置13に表示するようになっている。これにより、同時表示された各映像がどこを撮像しているか認識しやすくなる。
In addition, when combining and displaying the captured images of the plurality of
マイコン25は、CMOSまたはフラッシュROM等を用いて構成された所定のソフトウェアプログラムに基づいて動作するようになっており、特に、ハンドル舵角検出手段15からの信号に基づいて、車両10の進行方向についての操舵角を判断し、その判断結果に基づいて、図3〜図5に示した表示装置13の表示モードを選択し、その選択結果を画像処理部21に制御信号として出力する。このマイコン25の具体的な制御動作については後述する。
The
ハンドル舵角検出手段15は、運転者が操作したハンドルの回転角を検出するものであり、例えば光学式エンコーダ等が使用される。かかるハンドル舵角検出手段15での検出結果は、電気信号として車内通信線33を通じて制御部14のマイコン25に入力される。
The steering wheel steering angle detection means 15 detects the rotation angle of the steering wheel operated by the driver, and for example, an optical encoder or the like is used. The detection result of the steering wheel steering angle detection means 15 is input to the
シフト位置検出手段16は、運転者が操作したシフトレバーの操作位置を検出し、その検出結果を電気信号として車内通信線33を通じて制御部14のマイコン25に入力するものである。このシフト位置検出手段16としては、シフトレバーがドライバ状態やバック状態等のそれぞれの傾倒状態になったときに、機械な接触の有無によりスイッチがオンオフする接触式スイッチ等が使用される。
The shift position detecting means 16 detects the operation position of the shift lever operated by the driver, and inputs the detection result to the
<動作>
上記構成の車両周辺撮像装置の動作について説明する。ここでは、図6のように、一台の車両41の左右に他の車両42,43が駐車しており、この状況から車両41が左後方(矢示方向D1)に後進した後、右方向(矢示方向D2)に前進して抜ける場合を考える。尚、車両41はこの実施形態の車両周辺撮像装置を搭載しており、よって、フロントバンパーの左隅付近にフロントカメラ11が設置され、且つ左サイドミラー付近にサイドカメラ12が設置されているものとする。また、図6〜図8中の符号44は車両41〜43の前方に位置する壁を示している。
<Operation>
The operation of the vehicle periphery imaging device having the above configuration will be described. Here, as shown in FIG. 6, the
まず車両41の運転者は、エンジンキーを回して車両41のエンジンをオンにするとともに、車両周辺撮像装置の電源をオンにする。そうすると、フロントカメラ11とサイドカメラ12で撮像された撮像映像が画像処理部21に入力される。ここで、ハンドルの初期状態の回転角度が正面方向(直進状態)に対応したものである場合、ハンドル舵角検出手段15によりその旨が検出され、これに基づいてマイコン25は、フロントカメラ11での撮像映像とサイドカメラ12での撮像映像との表示装置13中に占める表示面積の割合を1:1に設定し、図3の如く、表示装置13の表示画面の右半分の領域46aにフロントカメラ(カメラA)11での撮像映像を、同じく表示装置13の表示画面の左半分の領域47aにサイドカメラ(カメラB)12での撮像映像を並べて表示する旨の制御信号が、マイコン25から画像処理部21に入力される。この制御信号に基づいて、画像処理部21は、図3の通りに表示装置13の表示制御を行う。
First, the driver of the
次に、運転者は、シフトレバーを操作してこれをバック状態とする。このときのシフトレバーの操作位置(バック操作位置)は、シフト位置検出手段16によって検出されて、車内通信線33を通じてマイコン25に入力される。
Next, the driver operates the shift lever to place it in the back state. The operation position (back operation position) of the shift lever at this time is detected by the shift position detection means 16 and input to the
そして、運転者は、ハンドルを左に切りながら車両41を後進させて、車両41を矢示方向D1に移動させる。このときのハンドルの回転角は、ハンドル舵角検出手段15によって検出されて、車内通信線33を通じてマイコン25に入力される。
Then, the driver moves the
マイコン25においては、シフト位置検出手段16から与えられた信号に基づいて、車両41が後退する予定であるか、または実際に後退しているかのいずれかであることを判断する。そして、この判断結果と、ハンドル舵角検出手段15から与えられた信号とに基づいて、図7に示すように、車両41の走行舵角が左後方である旨を判断する。
In the
この場合、運転者にとっては、車両41の左側面と左側に駐車している車両42との間隔を確認する必要があるため、サイドカメラ12での撮像映像が重要であり、相対的にフロントカメラ11での撮像映像の重要性は低い。したがって、マイコン25は、図4に示すように、表示装置13の表示画面の右側の比較的小さな領域46bにフロントカメラ(カメラA)11での撮像映像を表示し、同じく表示装置13の表示画面の左側の比較的大きな領域47bにサイドカメラ(カメラB)12での撮像映像を表示するよう画像処理部21に制御信号を出力する。そしてこの制御信号に従って、画像処理部21が表示装置13を表示制御し、表示装置13の画面が図4に示すようなものとなる。
In this case, since it is necessary for the driver to check the distance between the left side surface of the
次に、図8に示すように、車両41が車両43の後端部を避けながら右方向(矢示方向D2)に抜ける際、運転者はハンドルを右に切り、シフトレバーを前進側に切り替える。このときのハンドルの回転角は、ハンドル舵角検出手段15により検出されてマイコン25に入力され、またシフトレバーの状態もマイコン25に入力される。
Next, as shown in FIG. 8, when the
この場合、運転者にとっては、車両43の後端部との間隔を確認する必要があるため、フロントカメラ11での撮像映像が重要であり、相対的にサイドカメラ12での撮像映像の重要性は低い。したがって、マイコン25は、図5に示すように、表示装置13の表示画面の右側の比較的大きな領域46cにフロントカメラ(カメラA)11での撮像映像を表示し、同じく表示装置13の表示画面の左側の比較的小さな領域47cにサイドカメラ(カメラB)12での撮像映像を表示するよう画像処理部21に制御信号を出力する。そしてこの制御信号に従って、画像処理部21が表示装置13を表示制御し、表示装置13の画面が図5に示すようなものとなる。
In this case, since it is necessary for the driver to check the distance from the rear end of the
このように、車両41の舵角を検出した結果に応じて、運転者にとって重要度の高い撮像映像が、相対的に重要度の低い撮像映像よりも広い領域に表示されるように、両カメラ11,12で撮像された両撮像映像の表示装置13の画面に占める割合を変化するので、運転者にとって視認性がよく且つ直感的に理解しやすい撮像映像の表示を行うことが可能である。
As described above, both cameras are configured so that a captured image having a high importance for the driver is displayed in a wider area than a captured image having a relatively low importance according to the result of detecting the steering angle of the
ただし、例えば駐車スペースが狭い場合のように、何度かハンドルを切り返す作業が必要となる場合がある。この場合は、フロントカメラ(カメラA)11の撮像映像とサイドカメラ(カメラB)12の撮像映像とを同時に確認したい状況になることが多いと考えられる。しかしながら、この実施形態では、両方のカメラ11,12で撮像した撮像映像の両方を表示装置13に表示しており、その表示領域の割合を変化させているだけなので、常に両カメラ11,12の撮像映像を表示できて便利である。
However, there are cases where it is necessary to turn the steering wheel several times, for example, when the parking space is small. In this case, it is often considered that there are many situations where it is desired to simultaneously check the captured image of the front camera (camera A) 11 and the captured image of the side camera (camera B) 12. However, in this embodiment, both of the captured images captured by both
即ち、この実施形態では、車両10(41)の舵角に応じて複数のカメラ11,12の撮像映像が表示装置13に表示される割合を変化させることで、複数のカメラ11,12の撮像映像を同時に確認できると共に、より注目すべき映像が瞬時に判断できるようになる。
That is, in this embodiment, by changing the ratio at which the captured images of the plurality of
尚、単一の表示装置13に複数のカメラ11,12の撮像映像を合成して表示する場合に、同時表示された各映像がどこを撮像しているか認識しにくいと、その視認性を阻害してしまう。
In addition, when combining and displaying the captured images of the plurality of
しかしながら、この実施形態では、画像処理部21が、各カメラ11,12で撮像された撮像映像を任意の仮想視点位置から見た変換映像を生成する機能を備えており、複数のカメラ11,12の撮像映像での車両10の進行方向が互いに同一方向になるよう、少なくとも一つの撮像映像が視点変換される。例えば、フロントカメラ11とサイドカメラ12のいずれか一方の撮像映像を基準として、他方の撮像映像の画面方向が例えば90度回転しているような場合は、他方の撮像映像を一方の撮像映像の画面方向に対応するように90度だけ逆回転させて表示装置13に表示する。これにより、同時表示された各映像がどこを撮像しているか認識しやすくなる。
However, in this embodiment, the
尚、この実施形態の図3〜図5では、2つのカメラ11,12の撮像映像を左右に合成した例を示したが、上下に合成したり、あるいは図9及び図10のように、割合の大きな撮像映像47d,46eの上の隅部に割合の小さな撮像映像46d,47eを重ね合わせるように合成してもよい。
In FIGS. 3 to 5 of this embodiment, an example in which the captured images of the two
また、マイコン25において、ハンドルを左に切る角度が大きくなるほど、サイドカメラ12(カメラB)の撮像映像の割合を多くするよう、領域の割合を変化させるようにしてもよい。さらにこの場合において、設定値以上の角度になったらサイドカメラ12(カメラB)の撮像映像のみ表示するようにしてもよい。
Further, in the
さらに、車両10の周辺を撮像するカメラとしては、フロントカメラ11及びサイドカメラ12といった2つのカメラに限らず、3台以上であってもよい。例えば、1台の車両10に、図1に示したフロントカメラ(カメラA)11とサイドカメラ(カメラB)12に加え、図11の如く、左後方を撮像するバックカメラ(カメラC)48を設置し、これらで撮像された撮像映像51〜53を、図12〜図15に示すレイアウトのなかからひとつのレイアウトを適宜選択して合成表示し、さらに表示される各撮像映像が表示装置13の画面に表示される割合を、車両10の舵角に応じて変化させるようにしてもよい。この場合も、複数のカメラ11,12,48で撮像された撮像映像51〜53の全てを表示装置13に表示しながら、且つ重要度の高い撮像映像51〜53の表示割合を大きくして目立たせることが可能である点に変わりない。
Furthermore, the camera that captures the periphery of the
さらにまた、表示装置13に各カメラの撮像映像を表示する場合に、マイコン25で判断された車両10の舵角の方向を、図16及び図17のように矢印等の所定の図形または記号により撮像映像51〜53に重ねて表示してもよい。これにより、車両10の進行方向に存在する障害物等の検出が容易になる。ここで、図16は、図13に示した表示装置13の画面中に車両10の進行方向を矢印P1〜P3で表示した例である。また、図17は、各カメラの撮像映像51〜53を視点変換し、進行方向を一致させるよう表示した例である。この場合、各カメラの撮像映像51〜53の視野方向を、矢印P1〜P3の表示により直感的に認識することがさらに容易になる。
Furthermore, when displaying the captured image of each camera on the
さらに、上記実施形態では、フロントカメラ11及びサイドカメラ12を車両10の左側に設置していただけであったが、図18に示すように、車両10の前端の左右両側にフロントカメラ11a,11bを設置し、車両10の側部の左右両側にサイドカメラ12a,12bを設置し、車両10の後端の左右両側にバックカメラ48a,48bを設置するとともに、これらの6個のカメラ11a,11b,12a,12b,48a,48bで撮像された6個の全ての撮像映像を合成表示してもよい。この場合も、表示される各撮像映像の表示装置13の画面に表示される割合を、車両10の舵角に応じて変化させるようにする。この場合も、重要度の高い撮像映像の表示割合を大きくして目立たせることが可能である。
Further, in the above embodiment, the
さらにまた、図18に示した6個のカメラ11a,11b,12a,12b,48a,48bで撮像された6個の撮像映像のうち、車両10の進行方向に応じて例えば3つまたは4つ等の複数の撮像映像を適宜選択し、この選択された複数の撮像映像を合成表示してもよい。この場合も、表示される各撮像映像の表示装置13の画面に表示される割合を、車両10の進行方向及び舵角に応じて変化させるようにする。この場合は、左前方+右前方等、左側方+右側方等、左側方+左後方等、左後方+右後方等、といった様々な組合せで表示を行いながら、しかも重要度の高い撮像映像の表示割合を大きくして目立たせることが可能である。
Furthermore, among the six captured images captured by the six
10,41 車両
11,11a,11b フロントカメラ
12,12a,12b サイドカメラ
13 表示装置
14 制御部
15 ハンドル舵角検出手段
16 シフト位置検出手段
48,48a,48b バックカメラ
DESCRIPTION OF
Claims (5)
前記車両の複数の視野範囲の撮像映像をそれぞれ撮像する複数のカメラと、
前記車両内に設置された前記表示装置と、
前記車両の走行に係る舵角を検出する舵角検出手段と、
少なくとも、前記舵角検出手段で検出された前記舵角に基づいて、全ての前記カメラで撮像された撮像映像のうち複数の撮像映像を、前記表示装置の画面中に占める表示面積の割合を変化させて合成し、合成された撮像映像を前記表示装置に表示する制御部と
を備える車両周辺撮像装置。 A vehicle periphery imaging device that captures a video around a vehicle and displays it on a display device installed in the vehicle,
A plurality of cameras that respectively capture captured images of a plurality of fields of view of the vehicle;
The display device installed in the vehicle;
Rudder angle detecting means for detecting a rudder angle related to the traveling of the vehicle;
Based on at least the rudder angle detected by the rudder angle detection means, the ratio of the display area that occupies a plurality of captured images captured by all the cameras in the screen of the display device is changed. And a control unit that displays the combined captured image on the display device.
前記舵角検出手段が、ハンドルの舵角を検出するハンドル舵角検出手段である、車両周辺撮像装置。 The vehicle periphery imaging device according to claim 1,
The vehicle periphery imaging device, wherein the steering angle detection means is a steering angle detection means for detecting a steering angle of a steering wheel.
シフトレバーの操作位置を検出するシフト位置検出手段をさらに備え、
前記制御部が、前記舵角検出手段で検出された前記舵角と、前記シフト位置検出手段で検出された前記シフトレバーの操作位置とに基づいて、全ての前記カメラで撮像された撮像映像のうち複数の撮像映像を、前記表示装置の画面中に占める表示面積の割合を変化させて合成し、合成された撮像映像を前記表示装置に表示する、車両周辺撮像装置。 The vehicle periphery imaging device according to claim 1 or 2,
A shift position detecting means for detecting an operation position of the shift lever;
Based on the rudder angle detected by the rudder angle detection unit and the operation position of the shift lever detected by the shift position detection unit, the control unit captures images captured by all the cameras. A vehicle periphery imaging device that synthesizes a plurality of captured images by changing a ratio of a display area in the screen of the display device and displays the combined captured images on the display device.
前記制御部が、前記各撮像映像について任意の仮想視点位置から見た変換映像を生成する機能を有し、当該機能が、複数の撮像装置の撮像映像での車両の進行方向が同一方向になるよう、少なくとも一つの撮像映像が視点変換する、車両周辺撮像装置。 The vehicle periphery imaging device according to any one of claims 1 to 3,
The control unit has a function of generating a converted image viewed from an arbitrary virtual viewpoint position for each captured image, and the function is such that the traveling direction of the vehicle in the captured images of a plurality of imaging devices is the same direction. As described above, a vehicle periphery imaging device in which at least one captured image undergoes viewpoint conversion.
前記制御部が、前記舵角検出手段で検出された前記舵角に基づいて判断された前記車両の進行方向の情報を、前記各撮像映像に重ねて前記表示装置に表示する、車両周辺撮像装置。 The vehicle periphery imaging device according to any one of claims 1 to 4,
The vehicle peripheral imaging device, wherein the control unit displays information on the traveling direction of the vehicle determined based on the steering angle detected by the steering angle detection means on the display device so as to be superimposed on the respective captured images. .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004003996A JP4467313B2 (en) | 2004-01-09 | 2004-01-09 | Vehicle periphery imaging device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004003996A JP4467313B2 (en) | 2004-01-09 | 2004-01-09 | Vehicle periphery imaging device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005198160A true JP2005198160A (en) | 2005-07-21 |
JP4467313B2 JP4467313B2 (en) | 2010-05-26 |
Family
ID=34818732
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004003996A Expired - Fee Related JP4467313B2 (en) | 2004-01-09 | 2004-01-09 | Vehicle periphery imaging device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4467313B2 (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008044589A1 (en) * | 2006-10-11 | 2008-04-17 | Panasonic Corporation | Video display apparatus and video display method |
KR20130124762A (en) * | 2012-05-07 | 2013-11-15 | 현대모비스 주식회사 | Around view monitor system and monitoring method |
US9499168B2 (en) | 2013-01-09 | 2016-11-22 | Mitsubishi Electric Corporation | Vehicle periphery display device |
US10046700B2 (en) | 2012-05-22 | 2018-08-14 | Mitsubishi Electric Corporation | Image processing device |
DE102019216368A1 (en) * | 2019-10-24 | 2021-04-29 | Robert Bosch Gmbh | Method for outputting a control signal to a unit of a vehicle |
US20220132036A1 (en) * | 2013-05-10 | 2022-04-28 | Sony Group Corporation | Display Control Apparatus, Display Control Method, And Program |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62157642U (en) * | 1986-03-31 | 1987-10-06 | ||
JP2001006097A (en) * | 1999-06-25 | 2001-01-12 | Fujitsu Ten Ltd | Device for supporting driving for vehicle |
JP2001114046A (en) * | 1999-10-15 | 2001-04-24 | Yazaki Corp | Parking auxiliary device |
JP2003281505A (en) * | 2002-03-22 | 2003-10-03 | Nissan Motor Co Ltd | Vehicular image processor |
-
2004
- 2004-01-09 JP JP2004003996A patent/JP4467313B2/en not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62157642U (en) * | 1986-03-31 | 1987-10-06 | ||
JP2001006097A (en) * | 1999-06-25 | 2001-01-12 | Fujitsu Ten Ltd | Device for supporting driving for vehicle |
JP2001114046A (en) * | 1999-10-15 | 2001-04-24 | Yazaki Corp | Parking auxiliary device |
JP2003281505A (en) * | 2002-03-22 | 2003-10-03 | Nissan Motor Co Ltd | Vehicular image processor |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008044589A1 (en) * | 2006-10-11 | 2008-04-17 | Panasonic Corporation | Video display apparatus and video display method |
JP5143009B2 (en) * | 2006-10-11 | 2013-02-13 | パナソニック株式会社 | Video display device and video display method |
KR20130124762A (en) * | 2012-05-07 | 2013-11-15 | 현대모비스 주식회사 | Around view monitor system and monitoring method |
US10046700B2 (en) | 2012-05-22 | 2018-08-14 | Mitsubishi Electric Corporation | Image processing device |
DE112013002636B4 (en) | 2012-05-22 | 2019-05-09 | Mitsubishi Electric Corporation | Image processing device |
US9499168B2 (en) | 2013-01-09 | 2016-11-22 | Mitsubishi Electric Corporation | Vehicle periphery display device |
US20220132036A1 (en) * | 2013-05-10 | 2022-04-28 | Sony Group Corporation | Display Control Apparatus, Display Control Method, And Program |
DE102019216368A1 (en) * | 2019-10-24 | 2021-04-29 | Robert Bosch Gmbh | Method for outputting a control signal to a unit of a vehicle |
Also Published As
Publication number | Publication date |
---|---|
JP4467313B2 (en) | 2010-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101266734B1 (en) | Display apparatus | |
JP6946652B2 (en) | Parking support device | |
EP2794353B1 (en) | Vehicle rear monitoring system | |
JP4766841B2 (en) | Camera device and vehicle periphery monitoring device mounted on vehicle | |
US9308863B2 (en) | Vehicle peripheral observation device | |
WO2010137685A1 (en) | Image generation device and image display system | |
WO2010137684A1 (en) | Image generation device and image display system | |
US10484651B2 (en) | Image display control device | |
JP4945177B2 (en) | Vehicle driving support device | |
WO2016035580A1 (en) | Image display control device and image display system | |
JP2009239674A (en) | Vehicular periphery display device | |
JP2005186648A (en) | Surrounding visualizing device for vehicle and displaying control device | |
JP5071738B2 (en) | Display device | |
CN110895443A (en) | Display control device | |
JP4467313B2 (en) | Vehicle periphery imaging device | |
JP2012046124A (en) | Image display system, image processing device and image display method | |
JP2007081932A (en) | Visual recognition device for vehicle periphery | |
JP4977482B2 (en) | Image providing apparatus, vehicle, and image providing method | |
JP5071739B2 (en) | Display device | |
JP6662655B2 (en) | Vehicle image display device | |
JP2010184606A (en) | Vehicle surroundings display device | |
JP2019069719A (en) | Parking support device | |
JP7056034B2 (en) | Peripheral monitoring device | |
KR20190094135A (en) | A parking assisting system | |
KR102005551B1 (en) | A parking assisting system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061227 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20091023 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20091118 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091201 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100128 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100223 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100223 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130305 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140305 Year of fee payment: 4 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |