JP2005077107A - 車載カメラのキャリブレーション方法及びキャリブレーション装置 - Google Patents
車載カメラのキャリブレーション方法及びキャリブレーション装置 Download PDFInfo
- Publication number
- JP2005077107A JP2005077107A JP2003209740A JP2003209740A JP2005077107A JP 2005077107 A JP2005077107 A JP 2005077107A JP 2003209740 A JP2003209740 A JP 2003209740A JP 2003209740 A JP2003209740 A JP 2003209740A JP 2005077107 A JP2005077107 A JP 2005077107A
- Authority
- JP
- Japan
- Prior art keywords
- screen
- pattern
- optical axis
- vehicle
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/147—Details of sensors, e.g. sensor lenses
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Vascular Medicine (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Editing Of Facsimile Originals (AREA)
- Image Analysis (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
【課題】本発明は、車載カメラのキャリブレーション方法及びキャリブレーション装置に関し、車載カメラのキャリブレーションを複数の要素それぞれについて精度よく行うことを目的とする。
【解決手段】バックカメラの車両設置後、地面上で所望のカメラ光軸が地面と交わる点を通る該所望のカメラ光軸に垂直な線上に位置する２つの回転調整用ターゲットからなる実パターンと、表示画面上で画面中心を通る水平線上の２点を包含する回転調整用画面表示パターンとの表示画面上での相対位置を調整することにより、カメラ光軸回りの回転ずれを計測する。また、地面上で回転調整用ターゲットの位置よりも車両遠方に位置する位置調整用ターゲットからなる実パターンと、表示画面上で回転調整用画面表示パターンの位置よりも上方に位置する位置調整用画面表示パターンとの表示画面上での相対位置を調整することにより、カメラ光軸の方向ずれを計測する。
【選択図】 図５
【解決手段】バックカメラの車両設置後、地面上で所望のカメラ光軸が地面と交わる点を通る該所望のカメラ光軸に垂直な線上に位置する２つの回転調整用ターゲットからなる実パターンと、表示画面上で画面中心を通る水平線上の２点を包含する回転調整用画面表示パターンとの表示画面上での相対位置を調整することにより、カメラ光軸回りの回転ずれを計測する。また、地面上で回転調整用ターゲットの位置よりも車両遠方に位置する位置調整用ターゲットからなる実パターンと、表示画面上で回転調整用画面表示パターンの位置よりも上方に位置する位置調整用画面表示パターンとの表示画面上での相対位置を調整することにより、カメラ光軸の方向ずれを計測する。
【選択図】 図５
Description
【０００１】
【発明の属する技術分野】
本発明は、車載カメラのキャリブレーション方法及びキャリブレーション装置に係り、特に、カメラを車両に搭載した際におけるカメラ光軸の方向ずれ及びその光軸回りの回転ずれを調整するうえで好適なキャリブレーション方法及びキャリブレーション装置に関する。
【０００２】
【従来の技術】
従来より、地面上に描かれたパターンを車両に固定したカメラを用いて撮影し、該撮像画像中におけるパターンの撮像データを用いてカメラの位置や俯角の誤差を計測しキャリブレーションするキャリブレーション方法が知られている（例えば、特許文献１参照）。
【０００３】
【特許文献１】
特開２００１−１１６５１５号公報
【０００４】
【発明が解決しようとする課題】
上記の如く、上記従来の方法では、車載カメラの高さ及びカメラ光軸の俯角のみをその設置誤差として評価する。しかしながら、カメラの設置誤差は光軸回りの回転方向誤差をも含むものであるため、上記従来の方法は、その設置誤差を回転方向及び高さ，左右方向のすべての要素について精度よく評価・較正するものではない。また、仮に、カメラ設置誤差の回転方向及び高さ，左右方向のすべての要素についての評価を、地面上に描かれた一のパターンの撮像データを用いて行うこととすると、それらの要素によっては精度よい評価を得ることができない場合がある。
【０００５】
本発明は、上述の点に鑑みてなされたものであり、車載カメラのキャリブレーションを複数の要素それぞれについて精度よく行うことが可能な車載カメラのキャリブレーション方法及びキャリブレーション装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】
上記の目的は、請求項１に記載する如く、所望のカメラ光軸が地面と交わる接地点近傍の１点を通る該所望のカメラ光軸に垂直な線上に位置する少なくとも異なる２点を含む第１の実パターンを撮影した撮像データを用いて、車載カメラのカメラ光軸回りの回転ずれを計測する第１の計測ステップと、
前記第１の実パターンの位置よりも車両遠方に位置する少なくとも１点を含む第２の実パターンを撮影した撮像データを用いて、車載カメラのカメラ光軸の方向ずれを計測する第２の計測ステップと、
を備える車載カメラのキャリブレーション方法により達成される。
【０００７】
本発明において、車載カメラのカメラ光軸回りの回転ずれの計測は、所望のカメラ光軸が地面と交わる接地点近傍の１点を通る地面上においてその所望のカメラ光軸に垂直な線上に位置する少なくとも異なる２点を含む第１の実パターンを撮影した撮影データを用いて行われる。この第１の実パターンによれば、カメラ光軸の所望のものからの回転位相誤差を最も精度よく検出することが可能となる。また、車載カメラのカメラ光軸の方向ずれの計測は、第１の実パターンの位置よりも車両遠方に位置する少なくとも１点を含む第２の実パターンを撮影した撮影データを用いて行われる。一般に、カメラは俯角を伴って車両に設置され、そのカメラの撮像画像内においてカメラ光軸の接地点よりも上方のエリアは多用される。従って、上記した第２の実パターンによれば、カメラ光軸の所望のものからの位置角度ずれをその多用エリアで最も精度良く検出することが可能となる。この点、本発明によれば、車載カメラのキャリブレーションをカメラ光軸回りの回転ずれ及びカメラ光軸の左右や上下への方向ずれそれぞれについて精度よく行うことができる。
【０００８】
尚、本発明において、「カメラ光軸に垂直な線」とは、カメラ光軸に直交する車幅方向の水平な線のことである。
【０００９】
この場合、請求項２に記載する如く、請求項１記載の車載カメラのキャリブレーション方法において、前記第１の計測ステップは、表示画面上において撮像データに基づいて映し出された前記第１の実パターンと、該表示画面のカメラ光軸近傍の１点を通る水平な線上に位置する少なくとも異なる２点を含む第１の画面表示パターンとの相対位置を調整する回転入力操作量に基づいて、前記回転ずれを計測すると共に、前記第２の計測ステップは、表示画面上において撮像データに基づいて映し出された前記第２の実パターンと該表示画面の前記第１の画面表示パターンの位置よりも上方に位置する少なくとも１点を含む第２の画面表示パターンとの相対位置を調整する方向入力操作量に基づいて、前記方向ずれを計測することとすればよい。
【００１０】
尚、本発明において、第１の実パターンと第１の画面表示パターンとの「相対位置」とは、回転方向の位相のことである。
【００１１】
また、請求項３に記載する如く、請求項２記載の車載カメラのキャリブレーション方法において、前記第１の計測ステップは、表示画面上における前記第１の実パターンと前記第１の画面表示パターンとの相対位置を調整する回転入力操作に従って、該第１の画面表示パターン又は該表示画面に映し出す撮像データを回転補正する回転補正ステップを有すると共に、前記第２の計測ステップは、表示画面上における前記第２の実パターンと前記第２の画面表示パターンとの相対位置を調整する方向入力操作に従って、該第２の画面表示パターン又は該表示画面に映し出す撮像データを位置補正する位置補正ステップを有することとすれば、第１の実パターンと第１の画面表示パターンとの相対位置の調整によるキャリブレーション、及び、第２の実パターンと第２の画面表示パターンとの相対位置の調整によるキャリブレーションを共に容易に実現することができる。
【００１２】
また、上記の目的は、請求項４に記載する如く、表示画面に該表示画面のカメラ光軸近傍の１点を通る水平な線上に位置する少なくとも異なる２点を含む第１の画面表示パターンを表示する第１の画面表示手段と、
表示画面に前記第１の画面表示パターンの位置よりも上方に位置する少なくとも１点を含む第２の画面表示パターンを表示する第２の画面表示手段と、
表示画面上において、前記第１の画面表示手段による前記第１の画面表示パターンと撮像データに基づいて映し出される地面上の実パターンとの相対回転ずれを調整する第１の入力操作手段と、
表示画面上において、前記第２の画面表示手段による前記第２の画面表示パターンと撮像データに基づいて映し出される地面上の実パターンとの、相対回転ずれ以外の相対位置を調整する第２の入力操作手段と、
前記第１の入力操作手段への回転入力操作量及び前記第２の入力操作手段への方向入力操作量に基づいて、車載カメラのキャリブレーションデータを生成するデータ生成手段と、
を備える車載カメラのキャリブレーション装置により達成される。
【００１３】
本発明において、表示画面には、その表示画面のカメラ光軸近傍の１点を通る水平な線上に位置する少なくとも異なる２点を含む第１の画面表示パターンが表示されると共に、第１の画面表示パターンの位置よりも上方に位置する少なくとも１点を含む第２の画面表示パターンが表示される。そして、車載カメラのキャリブレーションデータの生成は、表示画面上において第１の画面表示パターンと撮像データに基づいて映し出される地面上の実パターンとの相対回転ずれを調整する第１の入力操作手段への回転入力操作量、及び、表示画面上において第２の画面表示パターンと撮像データに基づいて映し出される地面上の実パターンとの相対回転ずれ以外の相対位置を調整する第２の入力操作手段への方向入力操作量に基づいて行われる。第１の画面表示パターンと実パターンとの比較によれば、カメラ光軸の所望のものからの回転位相誤差を最も精度よく検出することが可能となる。また、一般に、カメラは俯角を伴って車両に設置され、そのカメラの撮像画像内においてカメラ光軸の接地点よりも上方のエリアは多用される。従って、第２の画面表示パターンと実パターンとの比較によれば、カメラ光軸の所望のものからの位置角度ずれをその多用エリアで最も精度良く検出することが可能となる。この点、本発明によれば、車載カメラのキャリブレーションをカメラ光軸回りの回転ずれ及び光軸の左右や上下の方向ずれそれぞれについて精度よく行うことができる。
【００１４】
この場合、請求項５に記載する如く、請求項４記載の車載カメラのキャリブレーション装置において、前記データ生成手段は、前記第１の入力操作手段への回転入力操作量に基づいて車載カメラのカメラ光軸回りの回転ずれを計測する回転ずれ計測手段と、前記第２の入力操作手段への方向入力操作量に基づいて車載カメラのカメラ光軸の方向ずれを計測する方向ずれ計測手段と、を有することとすればよい。
【００１５】
また、請求項６に記載する如く、請求項５記載の車載カメラのキャリブレーション装置において、前記第１の入力操作手段への回転入力操作に従って、前記第１の画面表示手段による前記第１の画面表示パターン又は表示画面に映し出す撮像データを回転補正する回転補正手段と、前記第２の入力操作手段への方向入力操作に従って、前記第２の画面表示手段による前記第２の画面表示パターン又は表示画面に映し出す撮像データを位置補正する位置補正手段と、を備えることとすれば、第１の実パターンと第１の画面表示パターンとの相対位置の調整による光軸回りの回転ずれのキャリブレーション、及び、第２の実パターンと第２の画面表示パターンとの相対位置の調整による光軸の方向ずれのキャリブレーションを共に容易に実現することができる。
【００１６】
【発明の実施の形態】
図１は、本発明の一実施例の車両に搭載されるシステムの構成図を示す。本実施例のシステムは、車庫入れ駐車や縦列駐車等の車両駐車時に、車両を駐車すべき道路路面上の目標駐車位置までの誘導経路に沿って車両が移動するように車両操舵を運転者の操作によらずに自動的に実行する自動操舵制御と、車内に搭載された表示モニタの表示画面に映し出された車両周辺画像上に車両の実舵角に応じた推定移動軌跡や車幅延長線，距離目安線を重畳表示するガイドモニタ制御と、を行う駐車支援装置１０である。以下、適宜、自動操舵制御及びガイドモニタ制御を合わせて駐車アシスト制御と称す。
【００１７】
図１に示す如く、駐車支援装置１０は、駐車アシスト用電子制御ユニット（以下、駐車アシストＥＣＵと称す）１２を備えており、駐車アシストＥＣＵ１２により制御される。駐車アシストＥＣＵ１２には、バックカメラ１４が接続されている。バックカメラ１４は、車体後部中央に水平下向きに配設され、かかる配設部位から車両後方に所定角範囲で広がる領域を撮影する。バックカメラ１４は、その光軸が予め車幅方向に垂直な方向を向きつつ車体に対して所定俯角を伴いかつその光軸が路面と車体後端から１ｍ程度の距離にある後方位置で交わるように取り付けられる。バックカメラ１４の撮影した車両後方周辺の画像情報は、駐車アシストＥＣＵ１２に供給される。
【００１８】
駐車アシストＥＣＵ１２には、また、タッチディスプレイ１６が接続されている。タッチディスプレイ１６は、車両運転者が視認可能かつ操作可能な位置（例えばインパネ中央）に配設されている。駐車アシストＥＣＵ１２は、例えば車両のシフトポジションが後退位置にある場合に、バックカメラ１４による実画像をタッチディスプレイ１６に表示させる。タッチディスプレイ１６は、駐車アシストＥＣＵ１２の指令に従ってバックカメラ１４による車両後方周辺を表示画面に映し出す。また、タッチディスプレイ１６は、駐車アシストＥＣＵ１２の指令に従って駐車アシスト制御のための補助線や枠等を、バックカメラ１４による実画像上に重畳して表示する。
【００１９】
タッチディスプレイ１６には、車両運転者による操作が可能な感圧式や温感式等のタッチ操作部が設けられる。タッチ操作部は、階層的な複数のスイッチから構成されており、駐車アシストＥＣＵ１２の指令に従って表示画面上に表示される。駐車アシストＥＣＵ１２は、タッチ操作部への車両運転者のタッチ操作を検知し、かかるタッチ操作部の内容に応じた処理を実行する。尚、タッチ操作部には、駐車アシスト制御として車庫入れ駐車モードを開始するためのスイッチや縦列駐車モードを開始するためのスイッチ，運転者が車両を駐車させる目標駐車位置を指定するための矢印ボタンスイッチ等が含まれる。
【００２０】
駐車アシストＥＣＵ１２には、また、電動パワーステアリング装置（以下、ＥＰＳと称す）１８が接続されている。ＥＰＳ１８は、車両運転者によるステアリング操作によりステアリングシャフトに加わる操舵トルクを検出するトルクセンサと、車輪舵角に対応するステアリングシャフトの舵角を検出する舵角センサと、ステアリングシャフトにトルクを付与する電動モータと、を備えている。ＥＰＳ１８は、運転者のステアリング操作時にその操舵トルクをアシストするトルクを電動モータに発生させると共に、後述の如く、駐車アシスト制御に伴う車庫入れ駐車や縦列駐車等の車両駐車時に運転者によるステアリング操作を伴うことなく車両を操舵させるためのトルクを電動モータに発生させる。
【００２１】
ＥＰＳ１８は、検出したステアリングシャフトの舵角情報を駐車アシストＥＣＵ１２へ供給する。駐車アシストＥＣＵ１２は、駐車アシスト制御の実行時に、後述の如くステアリングシャフトが実現すべき目標舵角をＥＰＳ１８へ供給する。ＥＰＳ１８は、駐車アシストＥＣＵ１２からの目標舵角の供給により、駐車アシスト制御のためのトルクを電動モータに発生させる。
【００２２】
また、駐車アシストＥＣＵ１２は、データの読み出し・書き込みが可能なメモリ２０を内蔵している。メモリ２０は、後述の如く運転者による位置設定により設定された目標駐車位置の路面上（絶対座標上）の位置情報、及び、計算により生成されたその目標駐車位置までの誘導経路の経路情報、並びに、バックカメラ１４のキャリブレーション情報を記憶する。メモリ２０に記憶された目標駐車位置の位置情報及び誘導経路の経路情報は、通常、シフトポジションが後退位置からパーキング位置，中立位置等へ移行された場合や目標駐車位置に車両が近づいた場合等、駐車アシスト制御が完了した際に消去される。尚、バックカメラ１４のキャリブレーション情報は、一旦書き込まれると、再書き込みが行われるまで継続して記憶される。
【００２３】
以下、本実施例の駐車支援装置１０の基本的な動作について説明する。
【００２４】
図２は、本実施例の駐車支援装置１０において駐車アシスト制御の開始時にタッチディスプレイ１６の表示画面に映し出される画像を表した図を示す。また、図３（Ａ）は、本実施例の駐車支援装置１０において車庫入れ駐車の目標駐車位置が指定される際にタッチディスプレイ１６の表示画面に映し出される画像を表した図を、図３（Ｂ）は、本実施例の駐車支援装置１０において縦列駐車の目標駐車位置が指定される際にタッチディスプレイ１６の表示画面に映し出される画像を表した図を、それぞれ示す。
【００２５】
本実施例においては、まず、運転者は、駐車したい所望の駐車位置に対して車両をある程度の距離が確保される位置に舵角を中立位置状態（舵角ゼロ）にして停車させる。かかる状態で車両のシフトポジションが後退位置へ移行されると、タッチディスプレイ１６の表示画面にバックカメラ１４による車両後方の周辺状況が映し出される。この場合には、駐車アシスト制御の実行が許可され、ガイドモニタ制御が開始される。
【００２６】
このガイドモニタ制御は、図２に示す如く、タッチディスプレイ１６の表示画面に映し出された車両後方周辺画像上に、その画像内における道路路面に合致するように、ＥＰＳ１８の舵角センサを用いて検出される車両実舵角に応じた内輪及び外輪のそれぞれの予想進路を示す推定移動軌跡Ｘ、車体車幅の道路路面上での延長線を示す車幅延長線Ｙ、及び、車両バンパ後端からの道路路面上での距離を示す距離目安線Ｍを重畳して表示する制御である。尚、他に車両において許容される最大の舵角に応じた予想進路を示す最大舵角線を重畳表示することとしてもよいし、また、これら各軌跡や線をタッチディスプレイ１６の表示画面において形状や色彩等が互いに異なるように表示することとしてもよい。
【００２７】
また、バックカメラ１４による車両後方周辺の画像がタッチディスプレイ１６に映し出されている状態で、車両運転者により自動操舵制御による駐車支援を要求する所定スイッチがオン操作されると、自動操舵制御による自動操舵を実現すべく、表示画面上には、ガイドモニタ制御によるガイド表示が継続した状態で、駐車アシスト制御の自動操舵制御として車庫入れ駐車モードを開始するためのスイッチ、及び、縦列駐車モードを開始するためのスイッチが現れる（初期画面）。
【００２８】
かかる状態で車庫入れ駐車モードスイッチがタッチ操作されると、ガイドモニタ制御によるガイド表示が中止されると共に、タッチディスプレイ１６の表示画面には、バックカメラ１４による車両後方周辺の画像が映し出された状態で、図３（Ａ）に示す如く、道路路面上において車両が車庫入れ駐車されるべき目標駐車位置を示す枠（以下、駐車スペース枠と称す）Ｓがその画像内における道路路面に合致するように重畳表示されると共に、その道路路面上の目標駐車位置を移動・回転させて調整するための矢印ボタンスイッチＣが重畳表示される（設定画面）。
【００２９】
この際、矢印ボタンスイッチＣとしては、目標駐車位置を道路路面上において自車両に対して遠方へ移動させる上向きスイッチ、近方へ移動させる下向きスイッチ、左方へ移動させる左向きスイッチ、右方へ移動させる右向きスイッチ、反時計回り方向へ回転させる反時計向きスイッチ、及び時計回り方向へ回転させる時計向きスイッチが現れる。かかる構成において、目標駐車位置は、駐車スペース枠Ｓの表示画面上での位置操作を通じて、任意に四方へ移動可能であると共に、中心を軸にして自在に回転可能である。
【００３０】
また、タッチディスプレイ１６の表示画面で縦列駐車モードスイッチがタッチ操作されると、ガイドモニタ制御によるガイド表示が中止されると共に、その表示画面には、バックカメラ１４による車両後方周辺が映し出された状態で、図３（Ｂ）に示す如く、道路路面上において車両が縦列駐車されるべき目標駐車位置を示す駐車スペース枠Ｓがその画像内における道路路面に合致するように重畳表示されると共に、その道路路面上の目標駐車位置を移動させるための矢印ボタンスイッチＣが重畳表示される（設定画面）。
【００３１】
この際、矢印ボタンスイッチＣとしては、上記した上向きスイッチ、下向きスイッチ、左向きスイッチ、及び右向きスイッチは現れる一方、反時計向きスイッチ及び時計向きスイッチは現れない。かかる構成において、目標駐車位置は、駐車スペース枠Ｓの表示画面上での位置操作を通じて、任意に四方へ移動可能である一方、中心を軸にして回転することはなく、車両に対して前後方向および車幅方向に移動するだけである。
【００３２】
ここで、駐車スペース枠Ｓの初期表示位置は、その時点における車両位置と所定の相対位置関係にあるデフォルト位置を目標駐車位置の初期位置とした常に一定の画面内位置であったり、或いは、その時点の前に設定された目標駐車位置の初期位置に対応した画面内位置である。また、駐車スペース枠Ｓは、実道路路面上の目標駐車位置に対応するものであって、実道路路面上に投影されるものとすれば車両の車体寸法にほぼ一致した大きさを有する長方形の形状を有するが、タッチディスプレイ１６の表示画面上ではその表示画面に映し出されているバックカメラ１４による車両後方画像上（カメラ座標上）における位置に対応した形状に形成される。
【００３３】
また、矢印ボタンスイッチＣが運転者によりタッチ操作されると、そのタッチごとに、目標駐車位置が実道路路面上においてＸｃｍ（例えば５ｃｍ）移動し或いはＹ°（例えば１°）回転し、タッチディスプレイ１６の表示画面上で駐車スペース枠Ｓが変位する。尚、この際、目標駐車位置が車両に対して近い位置に存在するほど、バックカメラ１４による車両後方画像における遠近の関係からタッチディスプレイ１６の表示画面上での駐車スペース枠Ｓの移動量は大きくなる。
【００３４】
タッチディスプレイ１６の表示画面に駐車スペース枠Ｓ及び矢印ボタンスイッチＣが表示されると、以後、所定時間（例えば２ｍｓ）ごとに、その時点での車両の現在位置を誘導開始位置としてその誘導開始位置からその駐車スペース枠Ｓの操作位置に従った目標駐車位置までの誘導経路の計算が行われる。
【００３５】
また、車庫入れ駐車モードスイッチ又は縦列駐車モードスイッチがタッチ操作されると、駐車スペース枠Ｓ及び矢印ボタンスイッチＣと共に、図３（Ａ）及び（Ｂ）に示す如く、駐車スペース枠Ｓによる目標駐車位置の設定を確定するための確定ボタンスイッチＫが重畳表示される。目標駐車位置までの誘導経路が計算により生成された状態で確定ボタンスイッチＫがタッチ操作されると、目標駐車位置の指定が確定され、以後、自動操舵制御による自動操舵の実行が許可され、更に、ガイドモニタ制御によるガイド表示が再開される。尚、この際のガイド表示においては車幅延長線Ｙの表示はされなくてもよく、また、このガイドモニタ制御は自動操舵制御が完了するまで継続されることとすればよい。
【００３６】
上記の構成において、車庫入れ駐車モードにおいて、目標駐車位置までの誘導経路の計算は、自車両の最小旋回半径および自車両の現在位置とその目標駐車位置との相対位置関係から定まる所定の幾何学的な位置条件を満たす場合に、経路として順に▲１▼所定距離の直進後退区間、▲２▼クロソイドによる舵角の切り増し区間、▲３▼舵角固定による定常円旋回区間、▲４▼クロソイドによる舵角の切り戻し区間、及び▲５▼所定距離の直進後退区間の各区間が適切に形成されるように上記の相対位置関係に基づいて行われる。但し、経路初期の直進後退区間は全く形成されなくてもよい。また、縦列駐車モードにおいて、目標駐車位置までの誘導経路の計算は、自車両の最小旋回半径、及び、自車両の現在位置とその目標駐車位置との相対位置関係から定まる所定の幾何学的な位置条件を満たす場合に、経路として２円が接する状態が適切に形成されるように上記の相対位置関係に基づいて行われる。
【００３７】
車庫入れ駐車モードおよび縦列駐車モードにおいて目標駐車位置までの誘導経路が計算され、その誘導経路が車両が実際に走行し得る範囲で有効に生成されると、タッチディスプレイ１６の表示画面において、駐車アシスト制御の実行が可能であることを示すべく、駐車スペース枠Ｓ内が例えば緑色等に彩色される。目標駐車位置までの有効な誘導経路が計算により生成され、駐車スペース枠Ｓ内が緑色に彩色された状態でタッチディスプレイ１６上の確定ボタンスイッチＫがタッチ操作されると、その目標駐車位置情報および誘導経路情報がメモリ２０に記憶されると共に、タッチディスプレイ１６上の矢印ボタンスイッチＣおよび確定ボタンスイッチＫが非表示となる。
【００３８】
一方、車両と目標駐車位置との相対位置が所定の関係を満たさないこと等に起因して目標駐車位置までの有効な誘導経路が計算により生成されない場合には、駐車アシスト制御の実行が不可能であることを示すべく、駐車スペース枠Ｓ内が例えば赤色等に彩色されると共に、目標駐車位置の変更又は誘導開始位置の変更を促すべく、矢印ボタンスイッチＣおよび確定ボタンスイッチＫの表示が継続される。
【００３９】
目標駐車位置までの有効な誘導経路が生成されかつタッチディスプレイ１６上の確定ボタンスイッチＫのタッチ操作により目標駐車位置の指定が完了した状態で、運転者がブレーキ操作を解除することによりクリープ現象等によって車両が後退移動し始めると、以後、車両を目標駐車位置へ誘導するための自動操舵制御による自動操舵が実行される。具体的には、誘導開始位置からの路面に対する車両の移動量が計算され、この計算された移動量とＥＰＳ１８からの舵角情報とに基づいて、生成された目標駐車位置までの誘導経路に対する車両の位置が計算され、そして、生成された誘導経路に沿って車両を移動させるための目標舵角が算出される。算出された目標舵角は、ＥＰＳ１８へ供給される。ＥＰＳ１８は、駐車アシストＥＣＵ１２からの目標舵角に基づいて、車両を生成誘導経路に沿って移動させるべく電動モータにステアリングシャフトを回転させるためのトルクを発生させる。
【００４０】
このように本実施例の構成によれば、シフトポジションが後退位置へ移行されることにより車両が後退される際に、車両後方の周辺画像がタッチディスプレイ１６の表示画面に映し出された状態で、車両運転者がステアリング操作を行ううえで補助となる車両の予想進路等の状態を示す各種のガイド線をその画像内における道路路面に合致するように重畳表示するガイドモニタ制御を実行することができる。この場合、運転者は、タッチディスプレイ１６の表示画面を通じて補助的に、自車両が障害物や所望の駐車位置等にどの程度接近するのかを把握することが可能となるため、自車両を障害物に接触させることなく後退させるための或いは所望の駐車位置に適切に後退させるためのステアリング操作を容易に実現させることが可能となる。従って、本実施例の駐車支援装置１０によれば、車両後退時における運転者のステアリング操作の補助を行うことで、そのステアリング操作の容易化が図られている。
【００４１】
また、本実施例の構成によれば、車庫入れ駐車時および縦列駐車時に、車両運転者の操作により設定された目標駐車位置までの誘導経路に沿って車両を自動操舵させる自動操舵制御を実行することができる。かかる自動操舵制御が実行されれば、運転者がステアリング操作を行うことは不要である。このため、本実施例の駐車支援装置１０によれば、車庫入れ駐車時および縦列駐車時に、運転者のステアリング操作の負担軽減が図られている。
【００４２】
ところで、本実施例の如く、タッチディスプレイ１６の表示画面に予想進路等を示す各種のガイド線が車両後方周辺画像上に重畳表示され、また、タッチディスプレイ１６上での駐車スペース枠Ｓの位置操作に従って車両の駐車すべき目標駐車位置が指定・設定される構成においては、その機能を的確なものとするうえで、バックカメラ１４の車両への設置固定を基準どおりに正確に行い、カメラ光軸の方向及び光軸回りの回転位置を基準どおりに正確に設定する必要がある。しかし、かかるバックカメラ１４の正確な設置は困難であり、バックカメラ１４のカメラ光軸回りの回転位置やそのカメラ光軸の方向に微小なずれが発生する。このようなずれが生じている状態でガイド線がタッチディスプレイ１６の表示画面に表示され、タッチディスプレイ１６上での駐車スペース枠Ｓの位置操作に従って目標駐車位置が指定されると、それらの制御機能を十分に発揮させることができない事態が生ずる。
【００４３】
そこで、本実施例のシステムは、かかる事態の発生を防止すべく、車両の組立工場や修理工場等において、バックカメラ１４が車両に搭載され設置固定された後、その状態でカメラ光軸の軸回りの回転調整及び上下・左右の位置角度調整（方向調整）を電子ソフト的に実行するキャリブレーションを調整作業者の手入力によって行うこととしている。以下、図４乃至図８を参照して、本実施例の特徴部について説明する。
【００４４】
図４は、本実施例においてバックカメラ１４のカメラ光軸を調整するためのインフラ設備の構成を車両上方から見た際の図を示す。本実施例において、インフラ設備は、車両の組立工場や修理工場の地面に描かれた回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐを有している。回転調整用ターゲットＴｒは、バックカメラ１４のカメラ光軸回りの回転を調整する際に用いるターゲットであり、一方、位置調整用ターゲットＴｐは、バックカメラ１４のカメラ光軸の上下・左右位置を調整する際に用いるターゲットである。
【００４５】
回転調整用ターゲットＴｒは、バックカメラ１４を搭載する車両が停車すべき位置に停車された際の車体後端（バンパ端）から後方へ１ｍ離れた位置に２つ存在し、車体中心を通る車幅方向に垂直な前後方向線を挟んで互いに車幅方向線上に対向している。各回転調整用ターゲットＴｒは、上記した前後方向線から車幅方向に例えば１．４ｍ程度離れており、車幅方向長さが０．３ｍ程度でありかつ前後方向長さが０．０３ｍ程度である大きさを有している。これら一対の回転調整用ターゲットＴｒは、一のパターン（以下、このパターンを回転調整用実パターンと称す）を構成している。この場合、回転調整用実パターンは、車幅方向線上に位置する２つの回転調整用ターゲットＴｒにより構成されることとなる。
【００４６】
また、位置調整用ターゲットＴｐは、バックカメラ１４を搭載する車両が停車すべき位置に停車された際の車体後端（バンパ端）から回転調整用ターゲットＴｒの位置よりも後方へ例えば２．７ｍ離れた位置に２つ存在し、車体中心を通る車幅方向に垂直な前後方向線を挟んで互いに車幅方向線上に対向している。各位置調整用ターゲットＴｐは、上記した前後方向線から車幅方向に例えば１．６ｍ程度離れており、車幅方向長さが０．３ｍ程度でありかつ前後方向長さが０．２５ｍ程度である大きさを有している。これら一対の位置調整用ターゲットＴｐは、一のパターン（以下、このパターンを位置調整用実パターンと称す）を構成している。この場合、位置調整用実パターンは、車幅方向線上に位置する２つの位置調整用ターゲットＴｐにより構成されることとなる。
【００４７】
本実施例のシステムにおいて、調整作業者は、バックカメラ１４のカメラ光軸のキャリブレーションを行う際、まず、車両を、回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐの描かれた地面上、その回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐと所定の相対関係にある位置に停車させる。そして、かかる状態で車両において駐車アシストＥＣＵ１２に所定の設備が接続され或いは駐車アシストＥＣＵ１２の有する所定の端子が短絡される等の措置がなされると、駐車支援装置１０はバックカメラ１４のカメラ光軸を調整するキャリブレーション装置として機能することとなり、カメラ光軸の調整モードが実現される。
【００４８】
ここで、上記の如く、本実施例において、バックカメラ１４は、車体後部中央に水平下向きに配設され、その光軸が予め車幅方向に垂直な方向を向きつつ車体に対して所定俯角を伴いかつその光軸が路面と車体後端から１ｍ程度の距離にある後方位置で交わるように取り付けられる。従って、かかる所望の状態でバックカメラ１４が車両に設置固定されている場合には、車両が回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐと上記所定の相対関係にある位置に停車された際、バックカメラ１４による撮像画像内において、２つの回転調整用ターゲットＴｒが光軸中心すなわち画面中心を通る水平な線上に位置しかつ画面中心を通る鉛直な線を挟んで左右対称な位置関係に位置すると共に、２つの位置調整用ターゲットＴｐが水平な線上に位置しかつ画面中心を通る鉛直な線を挟んで左右対称な位置関係に位置することとなる。
【００４９】
一方、バックカメラ１４が車両に上記所望の状態で設置固定されていない場合には、車両が回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐと上記所定の相対関係にある位置に停車された際、バックカメラ１４による撮像画像内において、光軸回りの回転ずれ発生時は２つの回転調整用ターゲットＴｒが画面中心を通る水平な線上に位置しないと共に画面中心を通る鉛直な線を挟んで左右対称な位置関係に位置しないこととなる。また、カメラ光軸の方向ずれ発生時は２つの回転調整用ターゲットＴｒが水平な線上に位置しても画面中心を通る水平な線上には位置しない可能性があり、２つの位置調整用ターゲットＴｐが水平な線上に位置しない或いは水平な線上に位置しても画面中心を通る鉛直な線を挟んで左右対称な位置関係に位置しないこととなる。
【００５０】
この点、バックカメラ１４による撮像画像内における２つの回転調整用ターゲットＴｒを結ぶ線（回転調整用実パターンの延在方向）と水平線との相対位置具体的には相対回転ずれを検出すれば、バックカメラ１４のカメラ光軸回りの所望のものからの回転ずれを計測することができる。また、撮像画像内における位置調整用ターゲットＴｐすなわち位置調整用実パターンの上下・左右の方向ずれを検出すれば、バックカメラ１４のカメラ光軸の所望のものからの方向ずれを計測することができる。
【００５１】
図５は、本実施例においてバックカメラ１４のカメラ光軸のキャリブレーションの手順を説明するための図を示す。また、図６は、本実施例においてカメラ光軸の回転調整時にタッチディスプレイ１６の表示画面に映し出される表示を表した図を示す。更に、図７は、本実施例においてカメラ光軸の位置調整時にタッチディスプレイ１６の表示画面に映し出される表示を表した図を示す。
【００５２】
本実施例において、バックカメラ１４のカメラ光軸の調整モードは、まずその光軸回りの回転調整を行うための回転調整モードから開始される。カメラ光軸の調整モードが開始されると、以後、タッチディスプレイ１６の表示画面上には、バックカメラ１４による車両後方周辺画像が映し出される。この際、車両が地面に描かれた回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐに対して上記した所定の相対位置に停車していれば、タッチディスプレイ１６上の画像内には、その回転調整用ターゲットＴｒを有する回転調整用実パターン及び位置調整用ターゲットＴｐを有する位置調整用実パターンが含まれることとなる。
【００５３】
また、回転調整モードが開始されると、タッチディスプレイ１６の表示画面上には、バックカメラ１４による車両後方周辺画像が映し出された状態で、図６に示す如く、互いに所定距離離れて平行に並んだ複数の線により構成されるパターン（以下、このパターンを回転調整用画面表示パターンと称す）Ｐｒが重畳表示されると共に、その回転調整用画面表示パターンＰｒをその表示画面上で回転させるための回転調整用矢印ボタンスイッチＣｒが重畳表示される。
【００５４】
回転調整用画面表示パターンＰｒは、そのパターン内にタッチディスプレイ１６の表示画面におけるカメラ光軸中心すなわち画面中心を通る水平線上の点を２点以上包含し、かつ、初期状態においてその複数の線が表示画面の水平線に対して平行となるように表示される。また、回転調整用矢印ボタンスイッチＣｒとしては、回転調整用画面表示パターンＰｒを画面上において反時計回り方向へ回転させる反時計向きスイッチ、及び、時計回り方向へ回転させる時計向きスイッチが存在する。回転調整用矢印ボタンスイッチＣｒが一回操作されると、回転調整用画面表示パターンＰｒは画面上において例えば０．４°回転する。また、回転調整用矢印ボタンスイッチＣｒが継続操作されると、回転調整用画面表示パターンＰｒは画面上において所定時間ごとに連続して回転する。尚、回転調整用画面表示パターンＰｒは、複数の線が画面の水平線に対して平行である初期状態から最大で反時計回り及び時計回りにそれぞれ例えば２°ずつ回転可能である。
【００５５】
タッチディスプレイ１６の表示画面上に回転調整用画面表示パターンＰｒ及び回転調整用矢印ボタンスイッチＣｒが重畳表示されると、以後、回転調整用矢印ボタンスイッチＣｒのタッチ操作により回転調整用画面表示パターンＰｒの回転が可能となる。調整作業者は、タッチディスプレイ１６の表示画面を見ながら、回転調整用画面表示パターンＰｒの有する線がその表示画面に映し出されている画像内の回転調整用実パターンを構成する一対の回転調整用ターゲットＴｒを結ぶ線（回転調整用実パターンの延在方向）に平行となるように、回転調整用矢印ボタンスイッチＣｒをタッチ操作する。例えば、図６に示す如く回転調整モードの初期にタッチディスプレイ１６の表示画面に映し出されている画像内の回転調整用実パターンの延在方向がその表示画面の水平線に対して時計回り方向に傾いている場合には、回転調整用画面表示パターンＰｒを時計回り方向へ回転させるべく、回転調整用矢印ボタンスイッチＣｒの時計向きスイッチを操作する。そして、回転調整用画面表示パターンＰｒの有する線が回転調整用実パターンの延在方向に平行となった時点で、回転調整用矢印ボタンスイッチＣｒの操作を完了する。
【００５６】
また、タッチディスプレイ１６の表示画面上に回転調整用画面表示パターンＰｒ及び回転調整用矢印ボタンスイッチＣｒが重畳表示されると、同時に、回転調整モードの次に進むための“次へ”ボタンスイッチが重畳表示される。かかる“次へ”ボタンスイッチがタッチ操作されると、その時点での回転調整用画面表示パターンＰｒの画面上での回転量が一時記憶されると共に、回転調整モードが終了し具体的には回転調整用画面表示パターンＰｒ及び回転調整用矢印ボタンスイッチＣｒが表示画面から消去され、次に、バックカメラ１４のカメラ光軸の上下・左右位置を調整するための左右上下位置調整モードが開始される。
【００５７】
左右上下位置調整モードが開始されると、タッチディスプレイ１６の表示画面上には、バックカメラ１４による車両後方周辺画像が映し出された状態で、図７に示す如く、その表示画面に映し出される位置調整用ターゲットＴｐを包含可能な大きさを有する線で囲まれたパターン（以下、このパターンを位置調整用画面表示パターンと称す）Ｐｐが重畳表示されると共に、その位置調整用画面表示パターンＰｐをその表示画面上で左右方向及び上下方向に位置移動させるための位置調整用矢印ボタンスイッチＣｐが重畳表示される。
【００５８】
位置調整用画面表示パターンＰｐは、２つの位置調整用ターゲットＴｐそれぞれに対応して表示画面上左右対称に一つずつ設けられている。位置調整用画面表示パターンＰｐは、タッチディスプレイ１６の表示画面において上記した回転調整用画面表示パターンｐｒの位置よりも上方に位置し、かつ、初期状態において画面左右のパターンＰｐを結ぶ線が表示画面の水平線に対して平行となるように表示される。尚、上記した回転調整モードにより回転調整用画面表示パターンＰｒが回転された場合には、画面左右の位置調整用画面表示パターンＰｐを結ぶ線は、左右上下位置調整モードの開始初期においてその回転分だけ表示画面の水平線に対して傾くことになる。
【００５９】
また、位置調整用矢印ボタンスイッチＣｐとしては、位置調整用画面表示パターンＰｐを画面上において左方へ移動させる左向きスイッチ、右方へ移動させる右向きスイッチ、下方へ移動させる下向きスイッチ、及び上方へ移動させる上向きスイッチが存在する。位置調整用矢印ボタンスイッチＣｐが一回操作されると、位置調整用画面表示パターンＰｐは画面上において例えば光軸０．４°の傾き相当分だけ移動する。また、位置調整用矢印ボタンスイッチＣｐが継続操作されると、位置調整用画面表示パターンＰｐは画面上において所定時間ごとに連続して回転する。尚、位置調整用画面表示パターンＰｐは、初期状態から最大で左右方向及び上下方向にそれぞれ例えば光軸２°の傾き相当分ずつ移動可能である。
【００６０】
タッチディスプレイ１６の表示画面上に位置調整用画面表示パターンＰｐ及び位置調整用矢印ボタンスイッチＣｐが重畳表示されると、以後、位置調整用矢印ボタンスイッチＣｐのタッチ操作により位置調整用画面表示パターンＰｐの位置移動が可能となる。調整作業者は、タッチディスプレイ１６の表示画面を見ながら、位置調整用画面表示パターンＰｐにその表示画面に映し出されている画像内の位置調整用ターゲットＴｐが進入するように、位置調整用矢印ボタンスイッチＣｐをタッチ操作する。例えば、図７に示す如く左右上下位置調整モードの初期にタッチディスプレイ１６の表示画面に映し出されている画像内の位置調整用ターゲットＴｐが位置調整用画面表示パターンＰｐの左手前に位置する場合には、位置調整用画面表示パターンＰｐを左手前へ移動させるべく、位置調整用矢印ボタンスイッチＣｐの左向きスイッチ及び下向きスイッチを操作する。そして、位置調整用画面表示パターンＰｐに位置調整用ターゲットＴｐが進入した時点で、位置調整用矢印ボタンスイッチＣｐの操作を完了する。
【００６１】
また、タッチディスプレイ１６の表示画面上に位置調整用画面表示パターンＰｐ及び位置調整用矢印ボタンスイッチＣｐが重畳表示されると、同時に、左右上下位置調整モードの次に進むための“次へ”ボタンスイッチ、及び、上記した回転調整モードへ戻るための“戻る”ボタンスイッチが重畳表示される。かかる“戻る”ボタンスイッチがタッチ操作されると、再びバックカメラ１４のカメラ光軸の光軸回りの回転調整を行うための回転調整モードが実現され、光軸回りの回転調整が可能となる。一方、“次へ”ボタンスイッチがタッチ操作されると、その時点での位置調整用画面表示パターンＰｐの画面上での移動量が一時記憶されると共に、左右上下位置調整モードが終了し具体的には位置調整用画面表示パターンＰｐ及び位置調整用矢印ボタンスイッチＣｐが表示画面から消去され、次に、カメラ光軸の調整確認を行うための確認モードが開始される。
【００６２】
確認モードが開始されると、タッチディスプレイ１６の表示画面上には、バックカメラ１４による車両後方周辺画像が映し出された状態で、車両の実舵角に応じた予想進路を示す推定移動軌跡Ｘ並びに車両バンパ後端からの距離０．５ｍ及び１．０ｍを示す距離目安線Ｍ１，Ｍ２が、一時記憶された回転調整用画面表示パターンＰｒの回転量及び位置調整用画面表示パターンＰｐの移動量を考慮して、その画像内における道路路面に合致するように重畳表示される。また同時に、バックカメラ１４のカメラ光軸の調整モードを完了させるための“完了”ボタンスイッチ、及び、上記した左右上下位置調整モードへ戻るための“戻る”ボタンスイッチが重畳表示される。
【００６３】
かかる状態が実現されると、調整作業者は、表示画面上において映し出されている回転調整用ターゲットＴｒと車両バンパ後端からの距離１・０ｍを示す距離目安線Ｍ２とが重なっていることを確認する。その確認の結果、両者が重なっていないと判断した場合は、“戻る”ボタンスイッチをタッチ操作する。この場合には、再びバックカメラ１４のカメラ光軸の上下・左右の位置調整を行うための左右上下位置調整モードが実現され、更に回転調整モードの実現が可能となる。一方、回転調整用ターゲットＴｒと距離目安線Ｍ２とが重なっていると判断した場合は、“完了”ボタンスイッチをタッチ操作する。この場合には、上記した回転調整モードにおける回転調整用画面表示パターンＰｒの画面上での回転量、及び、左右上下位置調整モードにおける位置調整用画面表示パターンＰｐの画面上での移動量がメモリ２０に記憶されると共に、確認モードが終了し、バックカメラ１４のカメラ光軸の調整モードが完了する。
【００６４】
ここで、回転調整モードにおける回転調整用画面表示パターンＰｒの画面上での回転量は、回転調整用実パターンの延在方向の画面水平線に対する相対回転ずれ量に相当し、バックカメラ１４のカメラ光軸回りの所望のものからの回転ずれに相当する。また、左右上下位置調整モードにおける位置調整用画面表示パターンＰｐの画面上での移動量は、位置調整用実パターンの上下・左右の位置ずれ量に相当し、バックカメラ１４のカメラ光軸の所望のものからの方向ずれに相当する。
【００６５】
バックカメラ１４のカメラ光軸回りの所望のものからの回転ずれ及びカメラ光軸の所望のものからの方向ずれを計測できれば、車両に対する道路路面上の座標（絶対座標）とタッチディスプレイ１６の表示画面上の座標（カメラ座標）との変換に際し用いられる変換パラメータを、予めバックカメラ１４が車両に所望の状態で設置固定されたものとした場合のものからバックカメラ１４の現実の設置固定に対応したものへ補正することができ、車両に対する道路路面上の位置とタッチディスプレイ１６の表示画面上の位置との対応関係を正確に把握できる。
【００６６】
従って、タッチディスプレイ１６の表示画面上で回転調整用画面表示パターンＰｒの有する線分が回転調整用実パターンの延在方向に平行となった状態で回転調整モードを終了させ、かつ、タッチディスプレイ１６の表示画面上で位置調整用画面表示パターンＰｐに位置調整用ターゲットＴｐが進入した状態で左右上下位置調整モードを終了させ、そして、カメラ光軸の調整モードを完了させることとすれば、駐車アシストＥＣＵ１２の内蔵するメモリ２０に、バックカメラ１４のキャリブレーション情報として正確なカメラ光軸調整値を記憶させることができ、以後、その記憶された調整値を用いた絶対座標とカメラ座標との変換により車両に対する道路路面上の位置とタッチディスプレイ１６の表示画面上の位置とを正確に対応付けすることが可能となる。
【００６７】
ところで、本実施例において、バックカメラ１４の光軸が地面と交わるべき位置は、車体後端から１ｍ程度の距離にある後方位置である。また、バックカメラ１４のカメラ光軸回りの回転調整において用いられる２つの回転調整用ターゲットＴｒの地面上の位置はそれぞれ、車両が停車位置に停車された際の車体後端から後方へ１ｍ離れた位置である。すなわち、２つの回転調整用ターゲットＴｒは、地面上、所望のカメラ光軸が地面と交わるべき接地点を通るその所望のカメラ光軸に垂直な線上に位置する。
【００６８】
バックカメラ１４のカメラ光軸回りの回転位置にずれが発生していると、そのずれは、タッチディスプレイ１６上の画面中心を中心にして撮像画像を回転させる事態を引き起こす。この点、本実施例の如く、地面上において所望のカメラ光軸が地面と交わるべき接地点を通るその所望のカメラ光軸に垂直な線上に位置する２つの回転調整用ターゲットＴｒにより構成される回転調整用実パターンと、表示画面上において画面中心を通る水平線上の点を２点以上包含する回転調整用画面表示パターンＰｒとの表示画面上での相対位置の調整を行うこととすれば、回転調整用実パターンが所望のカメラ光軸が地面と交わるべき接地点を通る線上ではない２点により構成される場合に比べて、バックカメラ１４による撮像画像のレンズ歪みによる誤差が生じ難く、バックカメラ１４のカメラ光軸回りの回転位置ずれを最も精度よく検出することが可能となる。
【００６９】
また、本実施例において、バックカメラ１４のカメラ光軸の上下・左右の方向調整において用いられる位置調整用ターゲットＴｐの地面上の位置は、車両が停車位置に停車された際の車体後端から後方へ例えば２．７ｍ離れた位置である。すなわち、位置調整用ターゲットＴｐは、地面上、上記した回転調整用ターゲットＴｒの位置よりも車両遠方に位置する。
【００７０】
本実施例においては、タッチディスプレイ１６の表示画面上に表示される駐車スペース枠Ｓの位置操作に従って車両の車庫入れ駐車又は縦列駐車すべき目標駐車位置が指定・設定されるが、通常指定される目標駐車位置は、駐車開始時における車両の位置から３ｍ程度後方の位置であることが一般的であるので、車体に水平下向きに配設されるすなわち俯角を伴って設置固定されるバックカメラ１４の表示画面においては、カメラ光軸すなわち画面中心よりも上方の領域が多用される。従って、目標駐車位置が通常指定され得る近傍の位置とタッチディスプレイ１６の表示画面上の位置との対応付けを正確に行うことが、表示画面上での駐車スペース枠の位置操作に従った目標駐車位置の設定精度の向上ひいてはその目標駐車位置までの誘導経路の的確な生成を図り、自動操舵制御の機能を十分に発揮させるうえで最も効果的である。
【００７１】
この点、本実施例の如く、地面上において回転調整用ターゲットＴｒの位置よりも車両遠方の、目標駐車位置が指定される可能性の高い実用域である車体後端から後方へ２．７ｍ程度離れた位置にある位置調整用ターゲットＴｐにより構成される位置調整用実パターンと、表示画面上において回転調整用画面表示パターンＰｒの位置よりも上方に位置する位置調整用画面表示パターンＰｐとの表示画面上での相対位置の調整を行うこととすれば、位置調整用ターゲットＴｐが上記した実用域以外に位置する構成に比べて、かかる実用域でのバックカメラ１４のカメラ光軸の上下・左右の方向ずれを最も精度よく検出することが可能となる。
【００７２】
このように、本実施例のバックカメラ１４の光軸調整を行うキャリブレーション手法によれば、地面上に描かれる光軸調整用のターゲットを光軸調整の各要素（具体的にはカメラ光軸回りの回転調整とカメラ光軸の方向調整との２要素）ごとにそれぞれの要素に合わせて異ならせることで、カメラ光軸回りの回転位置ずれ及びカメラ光軸の方向ずれを共に最も高精度に検出することができる。このため、本実施例によれば、バックカメラ１４のキャリブレーションをカメラ光軸回りの回転ずれ及びカメラ光軸の上下・左右への方向ずれそれぞれについて精度よく行うことが可能となっている。
【００７３】
図８は、上記の機能を実現すべく、本実施例において駐車アシストＥＣＵ１２が実行する制御ルーチンの一例のフローチャートを示す。図８に示すルーチンは、所定時間ごとに繰り返し起動される。図８に示すルーチンが起動されると、まずステップ１００の処理が実行される。
【００７４】
ステップ１００では、バックカメラ１４のカメラ光軸を調整するための調整モードを実現すべき所定の措置がなされたか否かが判別される。その結果、否定判定がなされた場合は、以後何ら処理が進められることなく今回のルーチンは終了される。一方、肯定判定がなされた場合は、次にステップ１０２の処理が実行される。
【００７５】
ステップ１０２では、バックカメラ１４のカメラ光軸回りの回転調整を行うための回転調整モードが実現される。かかる回転調整モードでは、タッチディスプレイ１６の表示画面上に、バックカメラ１４による車両後方周辺画像が映し出された状態で、カメラ光軸中心すなわち画面中心を含む水平線に平行な線からなる回転調整用画面表示パターンＰｒ、及び、その回転調整用画面表示パターンＰｒを表示画面上で回転させるためにタッチ操作される回転調整用矢印ボタンスイッチＣｒが重畳表示される。そして、表示画面上においてその回転調整用画面表示パターンＰｒの有する線分と画像内における地面に描かれている回転調整用実パターンの延在方向との相対位置関係が、回転調整用矢印ボタンスイッチＣｒのタッチ操作による回転調整用画面表示パターンＰｒの回転により両者が平行となるように調整され、その入力操作量に基づいてバックカメラ１４のカメラ光軸回りの所望のものからの回転ずれが計測される。本ステップ１０２において回転調整モードが終了すると、次にステップ１０４の処理が実行される。
【００７６】
ステップ１０４では、バックカメラ１４のカメラ光軸の上下・左右の方向調整を行うための左右上下位置調整モードが実現される。かかる左右上下位置調整モードでは、タッチディスプレイ１６の表示画面上に、バックカメラ１４による車両後方周辺画像が映し出された状態で、上記した回転調整用画面表示パターンの位置よりも上方に位置する位置調整用画面表示パターンＰｐ、及び、その位置調整用画面表示パターンＰｐを表示画面上で位置移動させるためにタッチ操作される位置調整用矢印ボタンスイッチＣｐが重畳表示される。そして、表示画面上においてその位置調整用画面表示パターンＰｐと画像内における地面に描かれている位置調整用実パターンとの相対位置関係が、位置調整用矢印ボタンスイッチＣｐのタッチ操作による位置調整用画面表示パターンＰｐの位置移動により表示画面上で位置調整用画面表示パターンＰｐに位置調整用ターゲットＴｐが進入するように調整され、その入力操作量に基づいてバックカメラ１４のカメラ光軸の所望のものからの上下・左右の方向ずれが計測される。本ステップ１０４において左右上下調整モードが終了すると、今回のルーチンは終了される。
【００７７】
上記図８に示すルーチンによれば、回転調整用矢印ボタンスイッチＣｒの入力操作量に基づいてバックカメラ１４のカメラ光軸回りの所望のものからの回転ずれを計測することができ、また、位置調整用矢印ボタンスイッチＣｐの入力操作量に基づいてバックカメラ１４のカメラ光軸の所望のものからの上下・左右の方向ずれを計測することができる。
【００７８】
この際、カメラ光軸回りの回転調整とカメラ光軸の方向調整とで、光軸調整に用いられる地面に描かれるターゲットは異なり、表示画面上の画面表示パターンは異なる。このため、本実施例によれば、カメラ光軸回りの回転位置ずれ及び実用域でのカメラ光軸の方向ずれを共に最も高精度に検出することができ、バックカメラ１４のキャリブレーションをカメラ光軸回りの回転ずれ及びカメラ光軸の上下・左右への方向ずれそれぞれについて精度よく行うことが可能となっている。
【００７９】
また、上記の如く計測された回転ずれ量及び方向ずれ量は共に、正確なカメラ光軸調整値としてメモリ２０に記憶される。このため、本実施例によれば、カメラ光軸の調整を適切に行った以後は、表示画面上での駐車スペース枠の位置操作に従った目標駐車位置の設定精度を向上させることができ、その目標駐車位置までの誘導経路を的確に生成することができ、これにより、自動操舵制御の機能を十分に発揮させることが可能となっている。
【００８０】
尚、本実施例においては、バックカメラ１４のカメラ光軸回りの回転ずれを計測するうえで、回転調整用矢印ボタンスイッチＣｒのタッチ操作によって、タッチディスプレイ１６の表示画面上における回転調整用画面表示パターンＰｒが画面中心を中心に回転する。この回転調整用画面表示パターンＰｒと画像上の回転調整用実パターンとが平行となれば、上記回転ずれの計測が可能である。従って、本実施例によれば、タッチ操作による回転調整用画面表示パターンＰｒの回転により回転調整用実パターンと回転調整用画面表示パターンとの相対位置の調整によるカメラ光軸回りの回転ずれのキャリブレーションを容易に実現することが可能となっている。
【００８１】
また、バックカメラ１４のカメラ光軸の上下・左右の方向ずれを計測するうえで、位置調整用矢印ボタンスイッチＣｐのタッチ操作によって、タッチディスプレイ１６の表示画面上における位置調整用画面表示パターンＰｐが位置移動する。この位置調整用画面表示パターンＰｐに画像上の位置調整用実パターンが進入すれば、上記方向ずれの計測が可能である。従って、本実施例によれば、タッチ操作による位置調整用画面表示パターンＰｐの位置移動により位置調整用実パターンと位置調整用画面表示パターンとの相対位置の調整によるカメラ光軸の上下・左右の方向ずれのキャリブレーションを容易に実現することが可能となっている。
【００８２】
ところで、上記の実施例においては、バックカメラ１４が特許請求の範囲に記載した「車載カメラ」に、２つの回転調整用ターゲットＴｒを構成する回転調整用実パターンが特許請求の範囲に記載した「第１の実パターン」に、２つの位置調整用ターゲットＴｐが特許請求の範囲に記載した「第２の実パターン」に、回転調整用画面表示パターンＰｒが特許請求の範囲に記載した「第１の画面表示パターン」、位置調整用画面表示パターンＰｐが特許請求の範囲に記載した「第２の画面表示パターン」に、回転調整用矢印ボタンスイッチＣｒが特許請求の範囲に記載した「第１の入力操作手段」に、位置調整用矢印ボタンスイッチＣｐが特許請求の範囲に記載した「第２の入力操作手段」に、それぞれ相当している。
【００８３】
また、上記の実施例においては、調整モード時に駐車アシストＥＣＵ１２が、回転調整用画面表示パターンＰｒの画面上での回転量からバックカメラ１４のカメラ光軸回りの所望のものからの回転ずれを計測することにより特許請求の範囲に記載した「第１の計測ステップ」、「データ生成手段」、及び「回転ずれ計測手段」が、位置調整用画面表示パターンＰｐの画面上での移動量からバックカメラ１４のカメラ光軸の所望のものからの方向ずれを計測することにより特許請求の範囲に記載した「第２の計測ステップ」、「データ生成手段」、及び「方向ずれ計測手段」が、回転調整モード時に調整作業者による回転調整用矢印ボタンスイッチＣｒのタッチ操作に従って表示画面上において回転調整用画面表示パターンＰｒを回転させることにより特許請求の範囲に記載した「回転補正ステップ」及び「回転補正手段」が、左右上下位置調整モード時に調整作業者による位置調整用矢印ボタンスイッチＣｐのタッチ操作に従って表示画面上において位置調整用画面表示パターンＰｐを位置移動させることにより特許請求の範囲に記載した「位置補正ステップ」及び「位置補正手段」が、回転調整モード時にタッチディスプレイ１６の表示画面に回転調整用画面表示パターンＰｒを重畳表示することにより特許請求の範囲に記載した「第１の画面表示手段」が、左右上下位置調整モード時にタッチディスプレイ１６の表示画面に位置調整用画面表示パターンＰｐを重畳表示することにより特許請求の範囲に記載した「第２の画面表示手段」が、それぞれ実現されている。
【００８４】
尚、上記の実施例においては、回転調整用矢印ボタンスイッチＣｒのタッチ操作に従って表示画面上において回転調整用画面表示パターンＰｒを回転させ、また、位置調整用矢印ボタンスイッチＣｐのタッチ操作に従って表示画面上において位置調整用画面表示パターンＰｐを位置移動させることとしているが、本発明はこれに限定されるものではなく、かかるタッチ操作に従って、画面表示パターンＰｒ，Ｐｐを表示画面において固定したままで、その表示画面に映し出すバックカメラ１４による撮像画像自体を回転させ或いは位置移動させることとしてもよい。
【００８５】
また、上記の実施例においては、位置調整用ターゲットＴｐ及び位置調整用画面表示パターンＰｐをそれぞれ、表示画面の中心を通る鉛直線を挟んで左右対称な位置関係となるように１つずつ設けることとしているが、本発明はこれに限定されるものではなく、その鉛直線近傍に一つだけ設けることとしてもよく、また、３つ以上設けることとしてもよい。
【００８６】
更に、上記の実施例においては、回転調整用実パターンが、物理的に分離した２つの回転調整用ターゲットＴｒにより構成されているが、一つの線分により構成されていることとしてもよい。
【００８７】
【発明の効果】
上述の如く、請求項１、２、４、及び５記載の発明によれば、車載カメラのカメラ光軸回りの回転ずれに関するキャリブレーション、及び、車載カメラのカメラ光軸の左右や上下の方向ずれに関するキャリブレーションを共に精度よく行うことができる。
【００８８】
また、請求項３及び６記載の発明によれば、車載カメラのカメラ光軸回りの回転ずれに関するキャリブレーション、及び、車載カメラのカメラ光軸の左右や上下の方向ずれに関するキャリブレーションを共に容易に実現することができる。
【図面の簡単な説明】
【図１】本発明の一実施例の車両に搭載されるシステムの構成図である。
【図２】本実施例の車載システムにおいて駐車アシスト制御の開始時にタッチディスプレイの表示画面に映し出される画像を表した図である。
【図３】本実施例の車載システムにおいて目標駐車位置が指定される際に表示画面に映し出される画像を表した図である。
【図４】本実施例において車載カメラのカメラ光軸を調整するためのインフラ設備の構成を車両上方から見た際の図である。
【図５】本実施例において車載カメラのカメラ光軸のキャリブレーションの手順を説明するための図である。
【図６】本実施例においてカメラ光軸の回転調整時に表示画面に映し出される表示を表した図図である。
【図７】本実施例においてカメラ光軸の位置調整時に表示画面に映し出される表示を表した図である。
【図８】本実施例の車載システムにおいて実行される制御ルーチンのフローチャートである。
【符号の説明】
１２ 駐車アシスト用電子制御ユニット（駐車アシストＥＣＵ）
１４ バックカメラ
１６ タッチディスプレイ
【発明の属する技術分野】
本発明は、車載カメラのキャリブレーション方法及びキャリブレーション装置に係り、特に、カメラを車両に搭載した際におけるカメラ光軸の方向ずれ及びその光軸回りの回転ずれを調整するうえで好適なキャリブレーション方法及びキャリブレーション装置に関する。
【０００２】
【従来の技術】
従来より、地面上に描かれたパターンを車両に固定したカメラを用いて撮影し、該撮像画像中におけるパターンの撮像データを用いてカメラの位置や俯角の誤差を計測しキャリブレーションするキャリブレーション方法が知られている（例えば、特許文献１参照）。
【０００３】
【特許文献１】
特開２００１−１１６５１５号公報
【０００４】
【発明が解決しようとする課題】
上記の如く、上記従来の方法では、車載カメラの高さ及びカメラ光軸の俯角のみをその設置誤差として評価する。しかしながら、カメラの設置誤差は光軸回りの回転方向誤差をも含むものであるため、上記従来の方法は、その設置誤差を回転方向及び高さ，左右方向のすべての要素について精度よく評価・較正するものではない。また、仮に、カメラ設置誤差の回転方向及び高さ，左右方向のすべての要素についての評価を、地面上に描かれた一のパターンの撮像データを用いて行うこととすると、それらの要素によっては精度よい評価を得ることができない場合がある。
【０００５】
本発明は、上述の点に鑑みてなされたものであり、車載カメラのキャリブレーションを複数の要素それぞれについて精度よく行うことが可能な車載カメラのキャリブレーション方法及びキャリブレーション装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】
上記の目的は、請求項１に記載する如く、所望のカメラ光軸が地面と交わる接地点近傍の１点を通る該所望のカメラ光軸に垂直な線上に位置する少なくとも異なる２点を含む第１の実パターンを撮影した撮像データを用いて、車載カメラのカメラ光軸回りの回転ずれを計測する第１の計測ステップと、
前記第１の実パターンの位置よりも車両遠方に位置する少なくとも１点を含む第２の実パターンを撮影した撮像データを用いて、車載カメラのカメラ光軸の方向ずれを計測する第２の計測ステップと、
を備える車載カメラのキャリブレーション方法により達成される。
【０００７】
本発明において、車載カメラのカメラ光軸回りの回転ずれの計測は、所望のカメラ光軸が地面と交わる接地点近傍の１点を通る地面上においてその所望のカメラ光軸に垂直な線上に位置する少なくとも異なる２点を含む第１の実パターンを撮影した撮影データを用いて行われる。この第１の実パターンによれば、カメラ光軸の所望のものからの回転位相誤差を最も精度よく検出することが可能となる。また、車載カメラのカメラ光軸の方向ずれの計測は、第１の実パターンの位置よりも車両遠方に位置する少なくとも１点を含む第２の実パターンを撮影した撮影データを用いて行われる。一般に、カメラは俯角を伴って車両に設置され、そのカメラの撮像画像内においてカメラ光軸の接地点よりも上方のエリアは多用される。従って、上記した第２の実パターンによれば、カメラ光軸の所望のものからの位置角度ずれをその多用エリアで最も精度良く検出することが可能となる。この点、本発明によれば、車載カメラのキャリブレーションをカメラ光軸回りの回転ずれ及びカメラ光軸の左右や上下への方向ずれそれぞれについて精度よく行うことができる。
【０００８】
尚、本発明において、「カメラ光軸に垂直な線」とは、カメラ光軸に直交する車幅方向の水平な線のことである。
【０００９】
この場合、請求項２に記載する如く、請求項１記載の車載カメラのキャリブレーション方法において、前記第１の計測ステップは、表示画面上において撮像データに基づいて映し出された前記第１の実パターンと、該表示画面のカメラ光軸近傍の１点を通る水平な線上に位置する少なくとも異なる２点を含む第１の画面表示パターンとの相対位置を調整する回転入力操作量に基づいて、前記回転ずれを計測すると共に、前記第２の計測ステップは、表示画面上において撮像データに基づいて映し出された前記第２の実パターンと該表示画面の前記第１の画面表示パターンの位置よりも上方に位置する少なくとも１点を含む第２の画面表示パターンとの相対位置を調整する方向入力操作量に基づいて、前記方向ずれを計測することとすればよい。
【００１０】
尚、本発明において、第１の実パターンと第１の画面表示パターンとの「相対位置」とは、回転方向の位相のことである。
【００１１】
また、請求項３に記載する如く、請求項２記載の車載カメラのキャリブレーション方法において、前記第１の計測ステップは、表示画面上における前記第１の実パターンと前記第１の画面表示パターンとの相対位置を調整する回転入力操作に従って、該第１の画面表示パターン又は該表示画面に映し出す撮像データを回転補正する回転補正ステップを有すると共に、前記第２の計測ステップは、表示画面上における前記第２の実パターンと前記第２の画面表示パターンとの相対位置を調整する方向入力操作に従って、該第２の画面表示パターン又は該表示画面に映し出す撮像データを位置補正する位置補正ステップを有することとすれば、第１の実パターンと第１の画面表示パターンとの相対位置の調整によるキャリブレーション、及び、第２の実パターンと第２の画面表示パターンとの相対位置の調整によるキャリブレーションを共に容易に実現することができる。
【００１２】
また、上記の目的は、請求項４に記載する如く、表示画面に該表示画面のカメラ光軸近傍の１点を通る水平な線上に位置する少なくとも異なる２点を含む第１の画面表示パターンを表示する第１の画面表示手段と、
表示画面に前記第１の画面表示パターンの位置よりも上方に位置する少なくとも１点を含む第２の画面表示パターンを表示する第２の画面表示手段と、
表示画面上において、前記第１の画面表示手段による前記第１の画面表示パターンと撮像データに基づいて映し出される地面上の実パターンとの相対回転ずれを調整する第１の入力操作手段と、
表示画面上において、前記第２の画面表示手段による前記第２の画面表示パターンと撮像データに基づいて映し出される地面上の実パターンとの、相対回転ずれ以外の相対位置を調整する第２の入力操作手段と、
前記第１の入力操作手段への回転入力操作量及び前記第２の入力操作手段への方向入力操作量に基づいて、車載カメラのキャリブレーションデータを生成するデータ生成手段と、
を備える車載カメラのキャリブレーション装置により達成される。
【００１３】
本発明において、表示画面には、その表示画面のカメラ光軸近傍の１点を通る水平な線上に位置する少なくとも異なる２点を含む第１の画面表示パターンが表示されると共に、第１の画面表示パターンの位置よりも上方に位置する少なくとも１点を含む第２の画面表示パターンが表示される。そして、車載カメラのキャリブレーションデータの生成は、表示画面上において第１の画面表示パターンと撮像データに基づいて映し出される地面上の実パターンとの相対回転ずれを調整する第１の入力操作手段への回転入力操作量、及び、表示画面上において第２の画面表示パターンと撮像データに基づいて映し出される地面上の実パターンとの相対回転ずれ以外の相対位置を調整する第２の入力操作手段への方向入力操作量に基づいて行われる。第１の画面表示パターンと実パターンとの比較によれば、カメラ光軸の所望のものからの回転位相誤差を最も精度よく検出することが可能となる。また、一般に、カメラは俯角を伴って車両に設置され、そのカメラの撮像画像内においてカメラ光軸の接地点よりも上方のエリアは多用される。従って、第２の画面表示パターンと実パターンとの比較によれば、カメラ光軸の所望のものからの位置角度ずれをその多用エリアで最も精度良く検出することが可能となる。この点、本発明によれば、車載カメラのキャリブレーションをカメラ光軸回りの回転ずれ及び光軸の左右や上下の方向ずれそれぞれについて精度よく行うことができる。
【００１４】
この場合、請求項５に記載する如く、請求項４記載の車載カメラのキャリブレーション装置において、前記データ生成手段は、前記第１の入力操作手段への回転入力操作量に基づいて車載カメラのカメラ光軸回りの回転ずれを計測する回転ずれ計測手段と、前記第２の入力操作手段への方向入力操作量に基づいて車載カメラのカメラ光軸の方向ずれを計測する方向ずれ計測手段と、を有することとすればよい。
【００１５】
また、請求項６に記載する如く、請求項５記載の車載カメラのキャリブレーション装置において、前記第１の入力操作手段への回転入力操作に従って、前記第１の画面表示手段による前記第１の画面表示パターン又は表示画面に映し出す撮像データを回転補正する回転補正手段と、前記第２の入力操作手段への方向入力操作に従って、前記第２の画面表示手段による前記第２の画面表示パターン又は表示画面に映し出す撮像データを位置補正する位置補正手段と、を備えることとすれば、第１の実パターンと第１の画面表示パターンとの相対位置の調整による光軸回りの回転ずれのキャリブレーション、及び、第２の実パターンと第２の画面表示パターンとの相対位置の調整による光軸の方向ずれのキャリブレーションを共に容易に実現することができる。
【００１６】
【発明の実施の形態】
図１は、本発明の一実施例の車両に搭載されるシステムの構成図を示す。本実施例のシステムは、車庫入れ駐車や縦列駐車等の車両駐車時に、車両を駐車すべき道路路面上の目標駐車位置までの誘導経路に沿って車両が移動するように車両操舵を運転者の操作によらずに自動的に実行する自動操舵制御と、車内に搭載された表示モニタの表示画面に映し出された車両周辺画像上に車両の実舵角に応じた推定移動軌跡や車幅延長線，距離目安線を重畳表示するガイドモニタ制御と、を行う駐車支援装置１０である。以下、適宜、自動操舵制御及びガイドモニタ制御を合わせて駐車アシスト制御と称す。
【００１７】
図１に示す如く、駐車支援装置１０は、駐車アシスト用電子制御ユニット（以下、駐車アシストＥＣＵと称す）１２を備えており、駐車アシストＥＣＵ１２により制御される。駐車アシストＥＣＵ１２には、バックカメラ１４が接続されている。バックカメラ１４は、車体後部中央に水平下向きに配設され、かかる配設部位から車両後方に所定角範囲で広がる領域を撮影する。バックカメラ１４は、その光軸が予め車幅方向に垂直な方向を向きつつ車体に対して所定俯角を伴いかつその光軸が路面と車体後端から１ｍ程度の距離にある後方位置で交わるように取り付けられる。バックカメラ１４の撮影した車両後方周辺の画像情報は、駐車アシストＥＣＵ１２に供給される。
【００１８】
駐車アシストＥＣＵ１２には、また、タッチディスプレイ１６が接続されている。タッチディスプレイ１６は、車両運転者が視認可能かつ操作可能な位置（例えばインパネ中央）に配設されている。駐車アシストＥＣＵ１２は、例えば車両のシフトポジションが後退位置にある場合に、バックカメラ１４による実画像をタッチディスプレイ１６に表示させる。タッチディスプレイ１６は、駐車アシストＥＣＵ１２の指令に従ってバックカメラ１４による車両後方周辺を表示画面に映し出す。また、タッチディスプレイ１６は、駐車アシストＥＣＵ１２の指令に従って駐車アシスト制御のための補助線や枠等を、バックカメラ１４による実画像上に重畳して表示する。
【００１９】
タッチディスプレイ１６には、車両運転者による操作が可能な感圧式や温感式等のタッチ操作部が設けられる。タッチ操作部は、階層的な複数のスイッチから構成されており、駐車アシストＥＣＵ１２の指令に従って表示画面上に表示される。駐車アシストＥＣＵ１２は、タッチ操作部への車両運転者のタッチ操作を検知し、かかるタッチ操作部の内容に応じた処理を実行する。尚、タッチ操作部には、駐車アシスト制御として車庫入れ駐車モードを開始するためのスイッチや縦列駐車モードを開始するためのスイッチ，運転者が車両を駐車させる目標駐車位置を指定するための矢印ボタンスイッチ等が含まれる。
【００２０】
駐車アシストＥＣＵ１２には、また、電動パワーステアリング装置（以下、ＥＰＳと称す）１８が接続されている。ＥＰＳ１８は、車両運転者によるステアリング操作によりステアリングシャフトに加わる操舵トルクを検出するトルクセンサと、車輪舵角に対応するステアリングシャフトの舵角を検出する舵角センサと、ステアリングシャフトにトルクを付与する電動モータと、を備えている。ＥＰＳ１８は、運転者のステアリング操作時にその操舵トルクをアシストするトルクを電動モータに発生させると共に、後述の如く、駐車アシスト制御に伴う車庫入れ駐車や縦列駐車等の車両駐車時に運転者によるステアリング操作を伴うことなく車両を操舵させるためのトルクを電動モータに発生させる。
【００２１】
ＥＰＳ１８は、検出したステアリングシャフトの舵角情報を駐車アシストＥＣＵ１２へ供給する。駐車アシストＥＣＵ１２は、駐車アシスト制御の実行時に、後述の如くステアリングシャフトが実現すべき目標舵角をＥＰＳ１８へ供給する。ＥＰＳ１８は、駐車アシストＥＣＵ１２からの目標舵角の供給により、駐車アシスト制御のためのトルクを電動モータに発生させる。
【００２２】
また、駐車アシストＥＣＵ１２は、データの読み出し・書き込みが可能なメモリ２０を内蔵している。メモリ２０は、後述の如く運転者による位置設定により設定された目標駐車位置の路面上（絶対座標上）の位置情報、及び、計算により生成されたその目標駐車位置までの誘導経路の経路情報、並びに、バックカメラ１４のキャリブレーション情報を記憶する。メモリ２０に記憶された目標駐車位置の位置情報及び誘導経路の経路情報は、通常、シフトポジションが後退位置からパーキング位置，中立位置等へ移行された場合や目標駐車位置に車両が近づいた場合等、駐車アシスト制御が完了した際に消去される。尚、バックカメラ１４のキャリブレーション情報は、一旦書き込まれると、再書き込みが行われるまで継続して記憶される。
【００２３】
以下、本実施例の駐車支援装置１０の基本的な動作について説明する。
【００２４】
図２は、本実施例の駐車支援装置１０において駐車アシスト制御の開始時にタッチディスプレイ１６の表示画面に映し出される画像を表した図を示す。また、図３（Ａ）は、本実施例の駐車支援装置１０において車庫入れ駐車の目標駐車位置が指定される際にタッチディスプレイ１６の表示画面に映し出される画像を表した図を、図３（Ｂ）は、本実施例の駐車支援装置１０において縦列駐車の目標駐車位置が指定される際にタッチディスプレイ１６の表示画面に映し出される画像を表した図を、それぞれ示す。
【００２５】
本実施例においては、まず、運転者は、駐車したい所望の駐車位置に対して車両をある程度の距離が確保される位置に舵角を中立位置状態（舵角ゼロ）にして停車させる。かかる状態で車両のシフトポジションが後退位置へ移行されると、タッチディスプレイ１６の表示画面にバックカメラ１４による車両後方の周辺状況が映し出される。この場合には、駐車アシスト制御の実行が許可され、ガイドモニタ制御が開始される。
【００２６】
このガイドモニタ制御は、図２に示す如く、タッチディスプレイ１６の表示画面に映し出された車両後方周辺画像上に、その画像内における道路路面に合致するように、ＥＰＳ１８の舵角センサを用いて検出される車両実舵角に応じた内輪及び外輪のそれぞれの予想進路を示す推定移動軌跡Ｘ、車体車幅の道路路面上での延長線を示す車幅延長線Ｙ、及び、車両バンパ後端からの道路路面上での距離を示す距離目安線Ｍを重畳して表示する制御である。尚、他に車両において許容される最大の舵角に応じた予想進路を示す最大舵角線を重畳表示することとしてもよいし、また、これら各軌跡や線をタッチディスプレイ１６の表示画面において形状や色彩等が互いに異なるように表示することとしてもよい。
【００２７】
また、バックカメラ１４による車両後方周辺の画像がタッチディスプレイ１６に映し出されている状態で、車両運転者により自動操舵制御による駐車支援を要求する所定スイッチがオン操作されると、自動操舵制御による自動操舵を実現すべく、表示画面上には、ガイドモニタ制御によるガイド表示が継続した状態で、駐車アシスト制御の自動操舵制御として車庫入れ駐車モードを開始するためのスイッチ、及び、縦列駐車モードを開始するためのスイッチが現れる（初期画面）。
【００２８】
かかる状態で車庫入れ駐車モードスイッチがタッチ操作されると、ガイドモニタ制御によるガイド表示が中止されると共に、タッチディスプレイ１６の表示画面には、バックカメラ１４による車両後方周辺の画像が映し出された状態で、図３（Ａ）に示す如く、道路路面上において車両が車庫入れ駐車されるべき目標駐車位置を示す枠（以下、駐車スペース枠と称す）Ｓがその画像内における道路路面に合致するように重畳表示されると共に、その道路路面上の目標駐車位置を移動・回転させて調整するための矢印ボタンスイッチＣが重畳表示される（設定画面）。
【００２９】
この際、矢印ボタンスイッチＣとしては、目標駐車位置を道路路面上において自車両に対して遠方へ移動させる上向きスイッチ、近方へ移動させる下向きスイッチ、左方へ移動させる左向きスイッチ、右方へ移動させる右向きスイッチ、反時計回り方向へ回転させる反時計向きスイッチ、及び時計回り方向へ回転させる時計向きスイッチが現れる。かかる構成において、目標駐車位置は、駐車スペース枠Ｓの表示画面上での位置操作を通じて、任意に四方へ移動可能であると共に、中心を軸にして自在に回転可能である。
【００３０】
また、タッチディスプレイ１６の表示画面で縦列駐車モードスイッチがタッチ操作されると、ガイドモニタ制御によるガイド表示が中止されると共に、その表示画面には、バックカメラ１４による車両後方周辺が映し出された状態で、図３（Ｂ）に示す如く、道路路面上において車両が縦列駐車されるべき目標駐車位置を示す駐車スペース枠Ｓがその画像内における道路路面に合致するように重畳表示されると共に、その道路路面上の目標駐車位置を移動させるための矢印ボタンスイッチＣが重畳表示される（設定画面）。
【００３１】
この際、矢印ボタンスイッチＣとしては、上記した上向きスイッチ、下向きスイッチ、左向きスイッチ、及び右向きスイッチは現れる一方、反時計向きスイッチ及び時計向きスイッチは現れない。かかる構成において、目標駐車位置は、駐車スペース枠Ｓの表示画面上での位置操作を通じて、任意に四方へ移動可能である一方、中心を軸にして回転することはなく、車両に対して前後方向および車幅方向に移動するだけである。
【００３２】
ここで、駐車スペース枠Ｓの初期表示位置は、その時点における車両位置と所定の相対位置関係にあるデフォルト位置を目標駐車位置の初期位置とした常に一定の画面内位置であったり、或いは、その時点の前に設定された目標駐車位置の初期位置に対応した画面内位置である。また、駐車スペース枠Ｓは、実道路路面上の目標駐車位置に対応するものであって、実道路路面上に投影されるものとすれば車両の車体寸法にほぼ一致した大きさを有する長方形の形状を有するが、タッチディスプレイ１６の表示画面上ではその表示画面に映し出されているバックカメラ１４による車両後方画像上（カメラ座標上）における位置に対応した形状に形成される。
【００３３】
また、矢印ボタンスイッチＣが運転者によりタッチ操作されると、そのタッチごとに、目標駐車位置が実道路路面上においてＸｃｍ（例えば５ｃｍ）移動し或いはＹ°（例えば１°）回転し、タッチディスプレイ１６の表示画面上で駐車スペース枠Ｓが変位する。尚、この際、目標駐車位置が車両に対して近い位置に存在するほど、バックカメラ１４による車両後方画像における遠近の関係からタッチディスプレイ１６の表示画面上での駐車スペース枠Ｓの移動量は大きくなる。
【００３４】
タッチディスプレイ１６の表示画面に駐車スペース枠Ｓ及び矢印ボタンスイッチＣが表示されると、以後、所定時間（例えば２ｍｓ）ごとに、その時点での車両の現在位置を誘導開始位置としてその誘導開始位置からその駐車スペース枠Ｓの操作位置に従った目標駐車位置までの誘導経路の計算が行われる。
【００３５】
また、車庫入れ駐車モードスイッチ又は縦列駐車モードスイッチがタッチ操作されると、駐車スペース枠Ｓ及び矢印ボタンスイッチＣと共に、図３（Ａ）及び（Ｂ）に示す如く、駐車スペース枠Ｓによる目標駐車位置の設定を確定するための確定ボタンスイッチＫが重畳表示される。目標駐車位置までの誘導経路が計算により生成された状態で確定ボタンスイッチＫがタッチ操作されると、目標駐車位置の指定が確定され、以後、自動操舵制御による自動操舵の実行が許可され、更に、ガイドモニタ制御によるガイド表示が再開される。尚、この際のガイド表示においては車幅延長線Ｙの表示はされなくてもよく、また、このガイドモニタ制御は自動操舵制御が完了するまで継続されることとすればよい。
【００３６】
上記の構成において、車庫入れ駐車モードにおいて、目標駐車位置までの誘導経路の計算は、自車両の最小旋回半径および自車両の現在位置とその目標駐車位置との相対位置関係から定まる所定の幾何学的な位置条件を満たす場合に、経路として順に▲１▼所定距離の直進後退区間、▲２▼クロソイドによる舵角の切り増し区間、▲３▼舵角固定による定常円旋回区間、▲４▼クロソイドによる舵角の切り戻し区間、及び▲５▼所定距離の直進後退区間の各区間が適切に形成されるように上記の相対位置関係に基づいて行われる。但し、経路初期の直進後退区間は全く形成されなくてもよい。また、縦列駐車モードにおいて、目標駐車位置までの誘導経路の計算は、自車両の最小旋回半径、及び、自車両の現在位置とその目標駐車位置との相対位置関係から定まる所定の幾何学的な位置条件を満たす場合に、経路として２円が接する状態が適切に形成されるように上記の相対位置関係に基づいて行われる。
【００３７】
車庫入れ駐車モードおよび縦列駐車モードにおいて目標駐車位置までの誘導経路が計算され、その誘導経路が車両が実際に走行し得る範囲で有効に生成されると、タッチディスプレイ１６の表示画面において、駐車アシスト制御の実行が可能であることを示すべく、駐車スペース枠Ｓ内が例えば緑色等に彩色される。目標駐車位置までの有効な誘導経路が計算により生成され、駐車スペース枠Ｓ内が緑色に彩色された状態でタッチディスプレイ１６上の確定ボタンスイッチＫがタッチ操作されると、その目標駐車位置情報および誘導経路情報がメモリ２０に記憶されると共に、タッチディスプレイ１６上の矢印ボタンスイッチＣおよび確定ボタンスイッチＫが非表示となる。
【００３８】
一方、車両と目標駐車位置との相対位置が所定の関係を満たさないこと等に起因して目標駐車位置までの有効な誘導経路が計算により生成されない場合には、駐車アシスト制御の実行が不可能であることを示すべく、駐車スペース枠Ｓ内が例えば赤色等に彩色されると共に、目標駐車位置の変更又は誘導開始位置の変更を促すべく、矢印ボタンスイッチＣおよび確定ボタンスイッチＫの表示が継続される。
【００３９】
目標駐車位置までの有効な誘導経路が生成されかつタッチディスプレイ１６上の確定ボタンスイッチＫのタッチ操作により目標駐車位置の指定が完了した状態で、運転者がブレーキ操作を解除することによりクリープ現象等によって車両が後退移動し始めると、以後、車両を目標駐車位置へ誘導するための自動操舵制御による自動操舵が実行される。具体的には、誘導開始位置からの路面に対する車両の移動量が計算され、この計算された移動量とＥＰＳ１８からの舵角情報とに基づいて、生成された目標駐車位置までの誘導経路に対する車両の位置が計算され、そして、生成された誘導経路に沿って車両を移動させるための目標舵角が算出される。算出された目標舵角は、ＥＰＳ１８へ供給される。ＥＰＳ１８は、駐車アシストＥＣＵ１２からの目標舵角に基づいて、車両を生成誘導経路に沿って移動させるべく電動モータにステアリングシャフトを回転させるためのトルクを発生させる。
【００４０】
このように本実施例の構成によれば、シフトポジションが後退位置へ移行されることにより車両が後退される際に、車両後方の周辺画像がタッチディスプレイ１６の表示画面に映し出された状態で、車両運転者がステアリング操作を行ううえで補助となる車両の予想進路等の状態を示す各種のガイド線をその画像内における道路路面に合致するように重畳表示するガイドモニタ制御を実行することができる。この場合、運転者は、タッチディスプレイ１６の表示画面を通じて補助的に、自車両が障害物や所望の駐車位置等にどの程度接近するのかを把握することが可能となるため、自車両を障害物に接触させることなく後退させるための或いは所望の駐車位置に適切に後退させるためのステアリング操作を容易に実現させることが可能となる。従って、本実施例の駐車支援装置１０によれば、車両後退時における運転者のステアリング操作の補助を行うことで、そのステアリング操作の容易化が図られている。
【００４１】
また、本実施例の構成によれば、車庫入れ駐車時および縦列駐車時に、車両運転者の操作により設定された目標駐車位置までの誘導経路に沿って車両を自動操舵させる自動操舵制御を実行することができる。かかる自動操舵制御が実行されれば、運転者がステアリング操作を行うことは不要である。このため、本実施例の駐車支援装置１０によれば、車庫入れ駐車時および縦列駐車時に、運転者のステアリング操作の負担軽減が図られている。
【００４２】
ところで、本実施例の如く、タッチディスプレイ１６の表示画面に予想進路等を示す各種のガイド線が車両後方周辺画像上に重畳表示され、また、タッチディスプレイ１６上での駐車スペース枠Ｓの位置操作に従って車両の駐車すべき目標駐車位置が指定・設定される構成においては、その機能を的確なものとするうえで、バックカメラ１４の車両への設置固定を基準どおりに正確に行い、カメラ光軸の方向及び光軸回りの回転位置を基準どおりに正確に設定する必要がある。しかし、かかるバックカメラ１４の正確な設置は困難であり、バックカメラ１４のカメラ光軸回りの回転位置やそのカメラ光軸の方向に微小なずれが発生する。このようなずれが生じている状態でガイド線がタッチディスプレイ１６の表示画面に表示され、タッチディスプレイ１６上での駐車スペース枠Ｓの位置操作に従って目標駐車位置が指定されると、それらの制御機能を十分に発揮させることができない事態が生ずる。
【００４３】
そこで、本実施例のシステムは、かかる事態の発生を防止すべく、車両の組立工場や修理工場等において、バックカメラ１４が車両に搭載され設置固定された後、その状態でカメラ光軸の軸回りの回転調整及び上下・左右の位置角度調整（方向調整）を電子ソフト的に実行するキャリブレーションを調整作業者の手入力によって行うこととしている。以下、図４乃至図８を参照して、本実施例の特徴部について説明する。
【００４４】
図４は、本実施例においてバックカメラ１４のカメラ光軸を調整するためのインフラ設備の構成を車両上方から見た際の図を示す。本実施例において、インフラ設備は、車両の組立工場や修理工場の地面に描かれた回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐを有している。回転調整用ターゲットＴｒは、バックカメラ１４のカメラ光軸回りの回転を調整する際に用いるターゲットであり、一方、位置調整用ターゲットＴｐは、バックカメラ１４のカメラ光軸の上下・左右位置を調整する際に用いるターゲットである。
【００４５】
回転調整用ターゲットＴｒは、バックカメラ１４を搭載する車両が停車すべき位置に停車された際の車体後端（バンパ端）から後方へ１ｍ離れた位置に２つ存在し、車体中心を通る車幅方向に垂直な前後方向線を挟んで互いに車幅方向線上に対向している。各回転調整用ターゲットＴｒは、上記した前後方向線から車幅方向に例えば１．４ｍ程度離れており、車幅方向長さが０．３ｍ程度でありかつ前後方向長さが０．０３ｍ程度である大きさを有している。これら一対の回転調整用ターゲットＴｒは、一のパターン（以下、このパターンを回転調整用実パターンと称す）を構成している。この場合、回転調整用実パターンは、車幅方向線上に位置する２つの回転調整用ターゲットＴｒにより構成されることとなる。
【００４６】
また、位置調整用ターゲットＴｐは、バックカメラ１４を搭載する車両が停車すべき位置に停車された際の車体後端（バンパ端）から回転調整用ターゲットＴｒの位置よりも後方へ例えば２．７ｍ離れた位置に２つ存在し、車体中心を通る車幅方向に垂直な前後方向線を挟んで互いに車幅方向線上に対向している。各位置調整用ターゲットＴｐは、上記した前後方向線から車幅方向に例えば１．６ｍ程度離れており、車幅方向長さが０．３ｍ程度でありかつ前後方向長さが０．２５ｍ程度である大きさを有している。これら一対の位置調整用ターゲットＴｐは、一のパターン（以下、このパターンを位置調整用実パターンと称す）を構成している。この場合、位置調整用実パターンは、車幅方向線上に位置する２つの位置調整用ターゲットＴｐにより構成されることとなる。
【００４７】
本実施例のシステムにおいて、調整作業者は、バックカメラ１４のカメラ光軸のキャリブレーションを行う際、まず、車両を、回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐの描かれた地面上、その回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐと所定の相対関係にある位置に停車させる。そして、かかる状態で車両において駐車アシストＥＣＵ１２に所定の設備が接続され或いは駐車アシストＥＣＵ１２の有する所定の端子が短絡される等の措置がなされると、駐車支援装置１０はバックカメラ１４のカメラ光軸を調整するキャリブレーション装置として機能することとなり、カメラ光軸の調整モードが実現される。
【００４８】
ここで、上記の如く、本実施例において、バックカメラ１４は、車体後部中央に水平下向きに配設され、その光軸が予め車幅方向に垂直な方向を向きつつ車体に対して所定俯角を伴いかつその光軸が路面と車体後端から１ｍ程度の距離にある後方位置で交わるように取り付けられる。従って、かかる所望の状態でバックカメラ１４が車両に設置固定されている場合には、車両が回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐと上記所定の相対関係にある位置に停車された際、バックカメラ１４による撮像画像内において、２つの回転調整用ターゲットＴｒが光軸中心すなわち画面中心を通る水平な線上に位置しかつ画面中心を通る鉛直な線を挟んで左右対称な位置関係に位置すると共に、２つの位置調整用ターゲットＴｐが水平な線上に位置しかつ画面中心を通る鉛直な線を挟んで左右対称な位置関係に位置することとなる。
【００４９】
一方、バックカメラ１４が車両に上記所望の状態で設置固定されていない場合には、車両が回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐと上記所定の相対関係にある位置に停車された際、バックカメラ１４による撮像画像内において、光軸回りの回転ずれ発生時は２つの回転調整用ターゲットＴｒが画面中心を通る水平な線上に位置しないと共に画面中心を通る鉛直な線を挟んで左右対称な位置関係に位置しないこととなる。また、カメラ光軸の方向ずれ発生時は２つの回転調整用ターゲットＴｒが水平な線上に位置しても画面中心を通る水平な線上には位置しない可能性があり、２つの位置調整用ターゲットＴｐが水平な線上に位置しない或いは水平な線上に位置しても画面中心を通る鉛直な線を挟んで左右対称な位置関係に位置しないこととなる。
【００５０】
この点、バックカメラ１４による撮像画像内における２つの回転調整用ターゲットＴｒを結ぶ線（回転調整用実パターンの延在方向）と水平線との相対位置具体的には相対回転ずれを検出すれば、バックカメラ１４のカメラ光軸回りの所望のものからの回転ずれを計測することができる。また、撮像画像内における位置調整用ターゲットＴｐすなわち位置調整用実パターンの上下・左右の方向ずれを検出すれば、バックカメラ１４のカメラ光軸の所望のものからの方向ずれを計測することができる。
【００５１】
図５は、本実施例においてバックカメラ１４のカメラ光軸のキャリブレーションの手順を説明するための図を示す。また、図６は、本実施例においてカメラ光軸の回転調整時にタッチディスプレイ１６の表示画面に映し出される表示を表した図を示す。更に、図７は、本実施例においてカメラ光軸の位置調整時にタッチディスプレイ１６の表示画面に映し出される表示を表した図を示す。
【００５２】
本実施例において、バックカメラ１４のカメラ光軸の調整モードは、まずその光軸回りの回転調整を行うための回転調整モードから開始される。カメラ光軸の調整モードが開始されると、以後、タッチディスプレイ１６の表示画面上には、バックカメラ１４による車両後方周辺画像が映し出される。この際、車両が地面に描かれた回転調整用ターゲットＴｒ及び位置調整用ターゲットＴｐに対して上記した所定の相対位置に停車していれば、タッチディスプレイ１６上の画像内には、その回転調整用ターゲットＴｒを有する回転調整用実パターン及び位置調整用ターゲットＴｐを有する位置調整用実パターンが含まれることとなる。
【００５３】
また、回転調整モードが開始されると、タッチディスプレイ１６の表示画面上には、バックカメラ１４による車両後方周辺画像が映し出された状態で、図６に示す如く、互いに所定距離離れて平行に並んだ複数の線により構成されるパターン（以下、このパターンを回転調整用画面表示パターンと称す）Ｐｒが重畳表示されると共に、その回転調整用画面表示パターンＰｒをその表示画面上で回転させるための回転調整用矢印ボタンスイッチＣｒが重畳表示される。
【００５４】
回転調整用画面表示パターンＰｒは、そのパターン内にタッチディスプレイ１６の表示画面におけるカメラ光軸中心すなわち画面中心を通る水平線上の点を２点以上包含し、かつ、初期状態においてその複数の線が表示画面の水平線に対して平行となるように表示される。また、回転調整用矢印ボタンスイッチＣｒとしては、回転調整用画面表示パターンＰｒを画面上において反時計回り方向へ回転させる反時計向きスイッチ、及び、時計回り方向へ回転させる時計向きスイッチが存在する。回転調整用矢印ボタンスイッチＣｒが一回操作されると、回転調整用画面表示パターンＰｒは画面上において例えば０．４°回転する。また、回転調整用矢印ボタンスイッチＣｒが継続操作されると、回転調整用画面表示パターンＰｒは画面上において所定時間ごとに連続して回転する。尚、回転調整用画面表示パターンＰｒは、複数の線が画面の水平線に対して平行である初期状態から最大で反時計回り及び時計回りにそれぞれ例えば２°ずつ回転可能である。
【００５５】
タッチディスプレイ１６の表示画面上に回転調整用画面表示パターンＰｒ及び回転調整用矢印ボタンスイッチＣｒが重畳表示されると、以後、回転調整用矢印ボタンスイッチＣｒのタッチ操作により回転調整用画面表示パターンＰｒの回転が可能となる。調整作業者は、タッチディスプレイ１６の表示画面を見ながら、回転調整用画面表示パターンＰｒの有する線がその表示画面に映し出されている画像内の回転調整用実パターンを構成する一対の回転調整用ターゲットＴｒを結ぶ線（回転調整用実パターンの延在方向）に平行となるように、回転調整用矢印ボタンスイッチＣｒをタッチ操作する。例えば、図６に示す如く回転調整モードの初期にタッチディスプレイ１６の表示画面に映し出されている画像内の回転調整用実パターンの延在方向がその表示画面の水平線に対して時計回り方向に傾いている場合には、回転調整用画面表示パターンＰｒを時計回り方向へ回転させるべく、回転調整用矢印ボタンスイッチＣｒの時計向きスイッチを操作する。そして、回転調整用画面表示パターンＰｒの有する線が回転調整用実パターンの延在方向に平行となった時点で、回転調整用矢印ボタンスイッチＣｒの操作を完了する。
【００５６】
また、タッチディスプレイ１６の表示画面上に回転調整用画面表示パターンＰｒ及び回転調整用矢印ボタンスイッチＣｒが重畳表示されると、同時に、回転調整モードの次に進むための“次へ”ボタンスイッチが重畳表示される。かかる“次へ”ボタンスイッチがタッチ操作されると、その時点での回転調整用画面表示パターンＰｒの画面上での回転量が一時記憶されると共に、回転調整モードが終了し具体的には回転調整用画面表示パターンＰｒ及び回転調整用矢印ボタンスイッチＣｒが表示画面から消去され、次に、バックカメラ１４のカメラ光軸の上下・左右位置を調整するための左右上下位置調整モードが開始される。
【００５７】
左右上下位置調整モードが開始されると、タッチディスプレイ１６の表示画面上には、バックカメラ１４による車両後方周辺画像が映し出された状態で、図７に示す如く、その表示画面に映し出される位置調整用ターゲットＴｐを包含可能な大きさを有する線で囲まれたパターン（以下、このパターンを位置調整用画面表示パターンと称す）Ｐｐが重畳表示されると共に、その位置調整用画面表示パターンＰｐをその表示画面上で左右方向及び上下方向に位置移動させるための位置調整用矢印ボタンスイッチＣｐが重畳表示される。
【００５８】
位置調整用画面表示パターンＰｐは、２つの位置調整用ターゲットＴｐそれぞれに対応して表示画面上左右対称に一つずつ設けられている。位置調整用画面表示パターンＰｐは、タッチディスプレイ１６の表示画面において上記した回転調整用画面表示パターンｐｒの位置よりも上方に位置し、かつ、初期状態において画面左右のパターンＰｐを結ぶ線が表示画面の水平線に対して平行となるように表示される。尚、上記した回転調整モードにより回転調整用画面表示パターンＰｒが回転された場合には、画面左右の位置調整用画面表示パターンＰｐを結ぶ線は、左右上下位置調整モードの開始初期においてその回転分だけ表示画面の水平線に対して傾くことになる。
【００５９】
また、位置調整用矢印ボタンスイッチＣｐとしては、位置調整用画面表示パターンＰｐを画面上において左方へ移動させる左向きスイッチ、右方へ移動させる右向きスイッチ、下方へ移動させる下向きスイッチ、及び上方へ移動させる上向きスイッチが存在する。位置調整用矢印ボタンスイッチＣｐが一回操作されると、位置調整用画面表示パターンＰｐは画面上において例えば光軸０．４°の傾き相当分だけ移動する。また、位置調整用矢印ボタンスイッチＣｐが継続操作されると、位置調整用画面表示パターンＰｐは画面上において所定時間ごとに連続して回転する。尚、位置調整用画面表示パターンＰｐは、初期状態から最大で左右方向及び上下方向にそれぞれ例えば光軸２°の傾き相当分ずつ移動可能である。
【００６０】
タッチディスプレイ１６の表示画面上に位置調整用画面表示パターンＰｐ及び位置調整用矢印ボタンスイッチＣｐが重畳表示されると、以後、位置調整用矢印ボタンスイッチＣｐのタッチ操作により位置調整用画面表示パターンＰｐの位置移動が可能となる。調整作業者は、タッチディスプレイ１６の表示画面を見ながら、位置調整用画面表示パターンＰｐにその表示画面に映し出されている画像内の位置調整用ターゲットＴｐが進入するように、位置調整用矢印ボタンスイッチＣｐをタッチ操作する。例えば、図７に示す如く左右上下位置調整モードの初期にタッチディスプレイ１６の表示画面に映し出されている画像内の位置調整用ターゲットＴｐが位置調整用画面表示パターンＰｐの左手前に位置する場合には、位置調整用画面表示パターンＰｐを左手前へ移動させるべく、位置調整用矢印ボタンスイッチＣｐの左向きスイッチ及び下向きスイッチを操作する。そして、位置調整用画面表示パターンＰｐに位置調整用ターゲットＴｐが進入した時点で、位置調整用矢印ボタンスイッチＣｐの操作を完了する。
【００６１】
また、タッチディスプレイ１６の表示画面上に位置調整用画面表示パターンＰｐ及び位置調整用矢印ボタンスイッチＣｐが重畳表示されると、同時に、左右上下位置調整モードの次に進むための“次へ”ボタンスイッチ、及び、上記した回転調整モードへ戻るための“戻る”ボタンスイッチが重畳表示される。かかる“戻る”ボタンスイッチがタッチ操作されると、再びバックカメラ１４のカメラ光軸の光軸回りの回転調整を行うための回転調整モードが実現され、光軸回りの回転調整が可能となる。一方、“次へ”ボタンスイッチがタッチ操作されると、その時点での位置調整用画面表示パターンＰｐの画面上での移動量が一時記憶されると共に、左右上下位置調整モードが終了し具体的には位置調整用画面表示パターンＰｐ及び位置調整用矢印ボタンスイッチＣｐが表示画面から消去され、次に、カメラ光軸の調整確認を行うための確認モードが開始される。
【００６２】
確認モードが開始されると、タッチディスプレイ１６の表示画面上には、バックカメラ１４による車両後方周辺画像が映し出された状態で、車両の実舵角に応じた予想進路を示す推定移動軌跡Ｘ並びに車両バンパ後端からの距離０．５ｍ及び１．０ｍを示す距離目安線Ｍ１，Ｍ２が、一時記憶された回転調整用画面表示パターンＰｒの回転量及び位置調整用画面表示パターンＰｐの移動量を考慮して、その画像内における道路路面に合致するように重畳表示される。また同時に、バックカメラ１４のカメラ光軸の調整モードを完了させるための“完了”ボタンスイッチ、及び、上記した左右上下位置調整モードへ戻るための“戻る”ボタンスイッチが重畳表示される。
【００６３】
かかる状態が実現されると、調整作業者は、表示画面上において映し出されている回転調整用ターゲットＴｒと車両バンパ後端からの距離１・０ｍを示す距離目安線Ｍ２とが重なっていることを確認する。その確認の結果、両者が重なっていないと判断した場合は、“戻る”ボタンスイッチをタッチ操作する。この場合には、再びバックカメラ１４のカメラ光軸の上下・左右の位置調整を行うための左右上下位置調整モードが実現され、更に回転調整モードの実現が可能となる。一方、回転調整用ターゲットＴｒと距離目安線Ｍ２とが重なっていると判断した場合は、“完了”ボタンスイッチをタッチ操作する。この場合には、上記した回転調整モードにおける回転調整用画面表示パターンＰｒの画面上での回転量、及び、左右上下位置調整モードにおける位置調整用画面表示パターンＰｐの画面上での移動量がメモリ２０に記憶されると共に、確認モードが終了し、バックカメラ１４のカメラ光軸の調整モードが完了する。
【００６４】
ここで、回転調整モードにおける回転調整用画面表示パターンＰｒの画面上での回転量は、回転調整用実パターンの延在方向の画面水平線に対する相対回転ずれ量に相当し、バックカメラ１４のカメラ光軸回りの所望のものからの回転ずれに相当する。また、左右上下位置調整モードにおける位置調整用画面表示パターンＰｐの画面上での移動量は、位置調整用実パターンの上下・左右の位置ずれ量に相当し、バックカメラ１４のカメラ光軸の所望のものからの方向ずれに相当する。
【００６５】
バックカメラ１４のカメラ光軸回りの所望のものからの回転ずれ及びカメラ光軸の所望のものからの方向ずれを計測できれば、車両に対する道路路面上の座標（絶対座標）とタッチディスプレイ１６の表示画面上の座標（カメラ座標）との変換に際し用いられる変換パラメータを、予めバックカメラ１４が車両に所望の状態で設置固定されたものとした場合のものからバックカメラ１４の現実の設置固定に対応したものへ補正することができ、車両に対する道路路面上の位置とタッチディスプレイ１６の表示画面上の位置との対応関係を正確に把握できる。
【００６６】
従って、タッチディスプレイ１６の表示画面上で回転調整用画面表示パターンＰｒの有する線分が回転調整用実パターンの延在方向に平行となった状態で回転調整モードを終了させ、かつ、タッチディスプレイ１６の表示画面上で位置調整用画面表示パターンＰｐに位置調整用ターゲットＴｐが進入した状態で左右上下位置調整モードを終了させ、そして、カメラ光軸の調整モードを完了させることとすれば、駐車アシストＥＣＵ１２の内蔵するメモリ２０に、バックカメラ１４のキャリブレーション情報として正確なカメラ光軸調整値を記憶させることができ、以後、その記憶された調整値を用いた絶対座標とカメラ座標との変換により車両に対する道路路面上の位置とタッチディスプレイ１６の表示画面上の位置とを正確に対応付けすることが可能となる。
【００６７】
ところで、本実施例において、バックカメラ１４の光軸が地面と交わるべき位置は、車体後端から１ｍ程度の距離にある後方位置である。また、バックカメラ１４のカメラ光軸回りの回転調整において用いられる２つの回転調整用ターゲットＴｒの地面上の位置はそれぞれ、車両が停車位置に停車された際の車体後端から後方へ１ｍ離れた位置である。すなわち、２つの回転調整用ターゲットＴｒは、地面上、所望のカメラ光軸が地面と交わるべき接地点を通るその所望のカメラ光軸に垂直な線上に位置する。
【００６８】
バックカメラ１４のカメラ光軸回りの回転位置にずれが発生していると、そのずれは、タッチディスプレイ１６上の画面中心を中心にして撮像画像を回転させる事態を引き起こす。この点、本実施例の如く、地面上において所望のカメラ光軸が地面と交わるべき接地点を通るその所望のカメラ光軸に垂直な線上に位置する２つの回転調整用ターゲットＴｒにより構成される回転調整用実パターンと、表示画面上において画面中心を通る水平線上の点を２点以上包含する回転調整用画面表示パターンＰｒとの表示画面上での相対位置の調整を行うこととすれば、回転調整用実パターンが所望のカメラ光軸が地面と交わるべき接地点を通る線上ではない２点により構成される場合に比べて、バックカメラ１４による撮像画像のレンズ歪みによる誤差が生じ難く、バックカメラ１４のカメラ光軸回りの回転位置ずれを最も精度よく検出することが可能となる。
【００６９】
また、本実施例において、バックカメラ１４のカメラ光軸の上下・左右の方向調整において用いられる位置調整用ターゲットＴｐの地面上の位置は、車両が停車位置に停車された際の車体後端から後方へ例えば２．７ｍ離れた位置である。すなわち、位置調整用ターゲットＴｐは、地面上、上記した回転調整用ターゲットＴｒの位置よりも車両遠方に位置する。
【００７０】
本実施例においては、タッチディスプレイ１６の表示画面上に表示される駐車スペース枠Ｓの位置操作に従って車両の車庫入れ駐車又は縦列駐車すべき目標駐車位置が指定・設定されるが、通常指定される目標駐車位置は、駐車開始時における車両の位置から３ｍ程度後方の位置であることが一般的であるので、車体に水平下向きに配設されるすなわち俯角を伴って設置固定されるバックカメラ１４の表示画面においては、カメラ光軸すなわち画面中心よりも上方の領域が多用される。従って、目標駐車位置が通常指定され得る近傍の位置とタッチディスプレイ１６の表示画面上の位置との対応付けを正確に行うことが、表示画面上での駐車スペース枠の位置操作に従った目標駐車位置の設定精度の向上ひいてはその目標駐車位置までの誘導経路の的確な生成を図り、自動操舵制御の機能を十分に発揮させるうえで最も効果的である。
【００７１】
この点、本実施例の如く、地面上において回転調整用ターゲットＴｒの位置よりも車両遠方の、目標駐車位置が指定される可能性の高い実用域である車体後端から後方へ２．７ｍ程度離れた位置にある位置調整用ターゲットＴｐにより構成される位置調整用実パターンと、表示画面上において回転調整用画面表示パターンＰｒの位置よりも上方に位置する位置調整用画面表示パターンＰｐとの表示画面上での相対位置の調整を行うこととすれば、位置調整用ターゲットＴｐが上記した実用域以外に位置する構成に比べて、かかる実用域でのバックカメラ１４のカメラ光軸の上下・左右の方向ずれを最も精度よく検出することが可能となる。
【００７２】
このように、本実施例のバックカメラ１４の光軸調整を行うキャリブレーション手法によれば、地面上に描かれる光軸調整用のターゲットを光軸調整の各要素（具体的にはカメラ光軸回りの回転調整とカメラ光軸の方向調整との２要素）ごとにそれぞれの要素に合わせて異ならせることで、カメラ光軸回りの回転位置ずれ及びカメラ光軸の方向ずれを共に最も高精度に検出することができる。このため、本実施例によれば、バックカメラ１４のキャリブレーションをカメラ光軸回りの回転ずれ及びカメラ光軸の上下・左右への方向ずれそれぞれについて精度よく行うことが可能となっている。
【００７３】
図８は、上記の機能を実現すべく、本実施例において駐車アシストＥＣＵ１２が実行する制御ルーチンの一例のフローチャートを示す。図８に示すルーチンは、所定時間ごとに繰り返し起動される。図８に示すルーチンが起動されると、まずステップ１００の処理が実行される。
【００７４】
ステップ１００では、バックカメラ１４のカメラ光軸を調整するための調整モードを実現すべき所定の措置がなされたか否かが判別される。その結果、否定判定がなされた場合は、以後何ら処理が進められることなく今回のルーチンは終了される。一方、肯定判定がなされた場合は、次にステップ１０２の処理が実行される。
【００７５】
ステップ１０２では、バックカメラ１４のカメラ光軸回りの回転調整を行うための回転調整モードが実現される。かかる回転調整モードでは、タッチディスプレイ１６の表示画面上に、バックカメラ１４による車両後方周辺画像が映し出された状態で、カメラ光軸中心すなわち画面中心を含む水平線に平行な線からなる回転調整用画面表示パターンＰｒ、及び、その回転調整用画面表示パターンＰｒを表示画面上で回転させるためにタッチ操作される回転調整用矢印ボタンスイッチＣｒが重畳表示される。そして、表示画面上においてその回転調整用画面表示パターンＰｒの有する線分と画像内における地面に描かれている回転調整用実パターンの延在方向との相対位置関係が、回転調整用矢印ボタンスイッチＣｒのタッチ操作による回転調整用画面表示パターンＰｒの回転により両者が平行となるように調整され、その入力操作量に基づいてバックカメラ１４のカメラ光軸回りの所望のものからの回転ずれが計測される。本ステップ１０２において回転調整モードが終了すると、次にステップ１０４の処理が実行される。
【００７６】
ステップ１０４では、バックカメラ１４のカメラ光軸の上下・左右の方向調整を行うための左右上下位置調整モードが実現される。かかる左右上下位置調整モードでは、タッチディスプレイ１６の表示画面上に、バックカメラ１４による車両後方周辺画像が映し出された状態で、上記した回転調整用画面表示パターンの位置よりも上方に位置する位置調整用画面表示パターンＰｐ、及び、その位置調整用画面表示パターンＰｐを表示画面上で位置移動させるためにタッチ操作される位置調整用矢印ボタンスイッチＣｐが重畳表示される。そして、表示画面上においてその位置調整用画面表示パターンＰｐと画像内における地面に描かれている位置調整用実パターンとの相対位置関係が、位置調整用矢印ボタンスイッチＣｐのタッチ操作による位置調整用画面表示パターンＰｐの位置移動により表示画面上で位置調整用画面表示パターンＰｐに位置調整用ターゲットＴｐが進入するように調整され、その入力操作量に基づいてバックカメラ１４のカメラ光軸の所望のものからの上下・左右の方向ずれが計測される。本ステップ１０４において左右上下調整モードが終了すると、今回のルーチンは終了される。
【００７７】
上記図８に示すルーチンによれば、回転調整用矢印ボタンスイッチＣｒの入力操作量に基づいてバックカメラ１４のカメラ光軸回りの所望のものからの回転ずれを計測することができ、また、位置調整用矢印ボタンスイッチＣｐの入力操作量に基づいてバックカメラ１４のカメラ光軸の所望のものからの上下・左右の方向ずれを計測することができる。
【００７８】
この際、カメラ光軸回りの回転調整とカメラ光軸の方向調整とで、光軸調整に用いられる地面に描かれるターゲットは異なり、表示画面上の画面表示パターンは異なる。このため、本実施例によれば、カメラ光軸回りの回転位置ずれ及び実用域でのカメラ光軸の方向ずれを共に最も高精度に検出することができ、バックカメラ１４のキャリブレーションをカメラ光軸回りの回転ずれ及びカメラ光軸の上下・左右への方向ずれそれぞれについて精度よく行うことが可能となっている。
【００７９】
また、上記の如く計測された回転ずれ量及び方向ずれ量は共に、正確なカメラ光軸調整値としてメモリ２０に記憶される。このため、本実施例によれば、カメラ光軸の調整を適切に行った以後は、表示画面上での駐車スペース枠の位置操作に従った目標駐車位置の設定精度を向上させることができ、その目標駐車位置までの誘導経路を的確に生成することができ、これにより、自動操舵制御の機能を十分に発揮させることが可能となっている。
【００８０】
尚、本実施例においては、バックカメラ１４のカメラ光軸回りの回転ずれを計測するうえで、回転調整用矢印ボタンスイッチＣｒのタッチ操作によって、タッチディスプレイ１６の表示画面上における回転調整用画面表示パターンＰｒが画面中心を中心に回転する。この回転調整用画面表示パターンＰｒと画像上の回転調整用実パターンとが平行となれば、上記回転ずれの計測が可能である。従って、本実施例によれば、タッチ操作による回転調整用画面表示パターンＰｒの回転により回転調整用実パターンと回転調整用画面表示パターンとの相対位置の調整によるカメラ光軸回りの回転ずれのキャリブレーションを容易に実現することが可能となっている。
【００８１】
また、バックカメラ１４のカメラ光軸の上下・左右の方向ずれを計測するうえで、位置調整用矢印ボタンスイッチＣｐのタッチ操作によって、タッチディスプレイ１６の表示画面上における位置調整用画面表示パターンＰｐが位置移動する。この位置調整用画面表示パターンＰｐに画像上の位置調整用実パターンが進入すれば、上記方向ずれの計測が可能である。従って、本実施例によれば、タッチ操作による位置調整用画面表示パターンＰｐの位置移動により位置調整用実パターンと位置調整用画面表示パターンとの相対位置の調整によるカメラ光軸の上下・左右の方向ずれのキャリブレーションを容易に実現することが可能となっている。
【００８２】
ところで、上記の実施例においては、バックカメラ１４が特許請求の範囲に記載した「車載カメラ」に、２つの回転調整用ターゲットＴｒを構成する回転調整用実パターンが特許請求の範囲に記載した「第１の実パターン」に、２つの位置調整用ターゲットＴｐが特許請求の範囲に記載した「第２の実パターン」に、回転調整用画面表示パターンＰｒが特許請求の範囲に記載した「第１の画面表示パターン」、位置調整用画面表示パターンＰｐが特許請求の範囲に記載した「第２の画面表示パターン」に、回転調整用矢印ボタンスイッチＣｒが特許請求の範囲に記載した「第１の入力操作手段」に、位置調整用矢印ボタンスイッチＣｐが特許請求の範囲に記載した「第２の入力操作手段」に、それぞれ相当している。
【００８３】
また、上記の実施例においては、調整モード時に駐車アシストＥＣＵ１２が、回転調整用画面表示パターンＰｒの画面上での回転量からバックカメラ１４のカメラ光軸回りの所望のものからの回転ずれを計測することにより特許請求の範囲に記載した「第１の計測ステップ」、「データ生成手段」、及び「回転ずれ計測手段」が、位置調整用画面表示パターンＰｐの画面上での移動量からバックカメラ１４のカメラ光軸の所望のものからの方向ずれを計測することにより特許請求の範囲に記載した「第２の計測ステップ」、「データ生成手段」、及び「方向ずれ計測手段」が、回転調整モード時に調整作業者による回転調整用矢印ボタンスイッチＣｒのタッチ操作に従って表示画面上において回転調整用画面表示パターンＰｒを回転させることにより特許請求の範囲に記載した「回転補正ステップ」及び「回転補正手段」が、左右上下位置調整モード時に調整作業者による位置調整用矢印ボタンスイッチＣｐのタッチ操作に従って表示画面上において位置調整用画面表示パターンＰｐを位置移動させることにより特許請求の範囲に記載した「位置補正ステップ」及び「位置補正手段」が、回転調整モード時にタッチディスプレイ１６の表示画面に回転調整用画面表示パターンＰｒを重畳表示することにより特許請求の範囲に記載した「第１の画面表示手段」が、左右上下位置調整モード時にタッチディスプレイ１６の表示画面に位置調整用画面表示パターンＰｐを重畳表示することにより特許請求の範囲に記載した「第２の画面表示手段」が、それぞれ実現されている。
【００８４】
尚、上記の実施例においては、回転調整用矢印ボタンスイッチＣｒのタッチ操作に従って表示画面上において回転調整用画面表示パターンＰｒを回転させ、また、位置調整用矢印ボタンスイッチＣｐのタッチ操作に従って表示画面上において位置調整用画面表示パターンＰｐを位置移動させることとしているが、本発明はこれに限定されるものではなく、かかるタッチ操作に従って、画面表示パターンＰｒ，Ｐｐを表示画面において固定したままで、その表示画面に映し出すバックカメラ１４による撮像画像自体を回転させ或いは位置移動させることとしてもよい。
【００８５】
また、上記の実施例においては、位置調整用ターゲットＴｐ及び位置調整用画面表示パターンＰｐをそれぞれ、表示画面の中心を通る鉛直線を挟んで左右対称な位置関係となるように１つずつ設けることとしているが、本発明はこれに限定されるものではなく、その鉛直線近傍に一つだけ設けることとしてもよく、また、３つ以上設けることとしてもよい。
【００８６】
更に、上記の実施例においては、回転調整用実パターンが、物理的に分離した２つの回転調整用ターゲットＴｒにより構成されているが、一つの線分により構成されていることとしてもよい。
【００８７】
【発明の効果】
上述の如く、請求項１、２、４、及び５記載の発明によれば、車載カメラのカメラ光軸回りの回転ずれに関するキャリブレーション、及び、車載カメラのカメラ光軸の左右や上下の方向ずれに関するキャリブレーションを共に精度よく行うことができる。
【００８８】
また、請求項３及び６記載の発明によれば、車載カメラのカメラ光軸回りの回転ずれに関するキャリブレーション、及び、車載カメラのカメラ光軸の左右や上下の方向ずれに関するキャリブレーションを共に容易に実現することができる。
【図面の簡単な説明】
【図１】本発明の一実施例の車両に搭載されるシステムの構成図である。
【図２】本実施例の車載システムにおいて駐車アシスト制御の開始時にタッチディスプレイの表示画面に映し出される画像を表した図である。
【図３】本実施例の車載システムにおいて目標駐車位置が指定される際に表示画面に映し出される画像を表した図である。
【図４】本実施例において車載カメラのカメラ光軸を調整するためのインフラ設備の構成を車両上方から見た際の図である。
【図５】本実施例において車載カメラのカメラ光軸のキャリブレーションの手順を説明するための図である。
【図６】本実施例においてカメラ光軸の回転調整時に表示画面に映し出される表示を表した図図である。
【図７】本実施例においてカメラ光軸の位置調整時に表示画面に映し出される表示を表した図である。
【図８】本実施例の車載システムにおいて実行される制御ルーチンのフローチャートである。
【符号の説明】
１２ 駐車アシスト用電子制御ユニット（駐車アシストＥＣＵ）
１４ バックカメラ
１６ タッチディスプレイ
Claims (6)
- 所望のカメラ光軸が地面と交わる接地点近傍の１点を通る該所望のカメラ光軸に垂直な線上に位置する少なくとも異なる２点を含む第１の実パターンを撮影した撮像データを用いて、車載カメラのカメラ光軸回りの回転ずれを計測する第１の計測ステップと、
前記第１の実パターンの位置よりも車両遠方に位置する少なくとも１点を含む第２の実パターンを撮影した撮像データを用いて、車載カメラのカメラ光軸の方向ずれを計測する第２の計測ステップと、
を備えることを特徴とする車載カメラのキャリブレーション方法。 - 前記第１の計測ステップは、表示画面上において撮像データに基づいて映し出された前記第１の実パターンと、該表示画面のカメラ光軸近傍の１点を通る水平な線上に位置する少なくとも異なる２点を含む第１の画面表示パターンとの相対位置を調整する回転入力操作量に基づいて、前記回転ずれを計測すると共に、
前記第２の計測ステップは、表示画面上において撮像データに基づいて映し出された前記第２の実パターンと該表示画面の前記第１の画面表示パターンの位置よりも上方に位置する少なくとも１点を含む第２の画面表示パターンとの相対位置を調整する方向入力操作量に基づいて、前記方向ずれを計測することを特徴とする請求項１記載の車載カメラのキャリブレーション方法。 - 前記第１の計測ステップは、表示画面上における前記第１の実パターンと前記第１の画面表示パターンとの相対位置を調整する回転入力操作に従って、該第１の画面表示パターン又は該表示画面に映し出す撮像データを回転補正する回転補正ステップを有すると共に、
前記第２の計測ステップは、表示画面上における前記第２の実パターンと前記第２の画面表示パターンとの相対位置を調整する方向入力操作に従って、該第２の画面表示パターン又は該表示画面に映し出す撮像データを位置補正する位置補正ステップを有することを特徴とする請求項２記載の車載カメラのキャリブレーション方法。 - 表示画面に該表示画面のカメラ光軸近傍の１点を通る水平な線上に位置する少なくとも異なる２点を含む第１の画面表示パターンを表示する第１の画面表示手段と、
表示画面に前記第１の画面表示パターンの位置よりも上方に位置する少なくとも１点を含む第２の画面表示パターンを表示する第２の画面表示手段と、
表示画面上において、前記第１の画面表示手段による前記第１の画面表示パターンと撮像データに基づいて映し出される地面上の実パターンとの相対回転ずれを調整する第１の入力操作手段と、
表示画面上において、前記第２の画面表示手段による前記第２の画面表示パターンと撮像データに基づいて映し出される地面上の実パターンとの、相対回転ずれ以外の相対位置を調整する第２の入力操作手段と、
前記第１の入力操作手段への回転入力操作量及び前記第２の入力操作手段への方向入力操作量に基づいて、車載カメラのキャリブレーションデータを生成するデータ生成手段と、
を備えることを特徴とする車載カメラのキャリブレーション装置。 - 前記データ生成手段は、前記第１の入力操作手段への回転入力操作量に基づいて車載カメラのカメラ光軸回りの回転ずれを計測する回転ずれ計測手段と、前記第２の入力操作手段への方向入力操作量に基づいて車載カメラのカメラ光軸の方向ずれを計測する方向ずれ計測手段と、を有することを特徴とする請求項４記載の車載カメラのキャリブレーション装置。
- 前記第１の入力操作手段への回転入力操作に従って、前記第１の画面表示手段による前記第１の画面表示パターン又は表示画面に映し出す撮像データを回転補正する回転補正手段と、
前記第２の入力操作手段への方向入力操作に従って、前記第２の画面表示手段による前記第２の画面表示パターン又は表示画面に映し出す撮像データを位置補正する位置補正手段と、
を備えることを特徴とする請求項５記載の車載カメラのキャリブレーション装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003209740A JP4238663B2 (ja) | 2003-08-29 | 2003-08-29 | 車載カメラのキャリブレーション方法及びキャリブレーション装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003209740A JP4238663B2 (ja) | 2003-08-29 | 2003-08-29 | 車載カメラのキャリブレーション方法及びキャリブレーション装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2005077107A true JP2005077107A (ja) | 2005-03-24 |
| JP4238663B2 JP4238663B2 (ja) | 2009-03-18 |
Family
ID=34402570
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003209740A Expired - Fee Related JP4238663B2 (ja) | 2003-08-29 | 2003-08-29 | 車載カメラのキャリブレーション方法及びキャリブレーション装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4238663B2 (ja) |
Cited By (31)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006287789A (ja) * | 2005-04-04 | 2006-10-19 | Toyota Motor Corp | 車載カメラ姿勢補正装置および車載カメラ姿勢補正方法 |
| JP2008131177A (ja) * | 2006-11-17 | 2008-06-05 | Aisin Seiki Co Ltd | 車載カメラの校正装置、校正方法、並びにこの校正方法を用いた車両の生産方法 |
| JP2008131250A (ja) * | 2006-11-20 | 2008-06-05 | Aisin Seiki Co Ltd | 車載カメラの校正装置及び当該装置を用いた車両の生産方法 |
| WO2008087709A1 (ja) * | 2007-01-16 | 2008-07-24 | Pioneer Corporation | 車両用画像処理装置、車両用撮像装置、車両用画像処理プログラム、車両用画像調整方法 |
| WO2008087707A1 (ja) * | 2007-01-16 | 2008-07-24 | Pioneer Corporation | 車両用画像処理装置及び車両用画像処理プログラム |
| JP2009288152A (ja) * | 2008-05-30 | 2009-12-10 | Nippon Soken Inc | 車載カメラのキャリブレーション方法 |
| WO2010007960A1 (ja) * | 2008-07-14 | 2010-01-21 | クラリオン株式会社 | 車載用カメラの視点変換映像システム及び視点変換映像取得方法 |
| JP2010193016A (ja) * | 2009-02-16 | 2010-09-02 | Ricoh Co Ltd | 車載カメラ装置のキャリブレーション支援方法及びキャリブレーション支援装置、並びに車載カメラ装置 |
| JP2010199712A (ja) * | 2009-02-23 | 2010-09-09 | Ricoh Co Ltd | 車載カメラ装置のキャリブレーション支援方法及びキャリブレーション支援装置、並びに車載カメラ装置 |
| WO2010113673A1 (ja) | 2009-03-31 | 2010-10-07 | アイシン精機株式会社 | 車載カメラの校正装置、方法、及びプログラム |
| JP2010233079A (ja) * | 2009-03-27 | 2010-10-14 | Aisin Aw Co Ltd | 運転支援装置、運転支援方法、及び運転支援プログラム |
| JP2010239408A (ja) * | 2009-03-31 | 2010-10-21 | Aisin Seiki Co Ltd | 車載カメラの校正装置 |
| WO2011085489A1 (en) * | 2010-01-13 | 2011-07-21 | Magna Electronics Inc. | Vehicular camera and method for periodic calibration of vehicular camera |
| JP2011155687A (ja) * | 2011-04-06 | 2011-08-11 | Aisin Seiki Co Ltd | 車載カメラの校正装置 |
| JP2012074777A (ja) * | 2010-09-27 | 2012-04-12 | Kyocera Corp | 運転支援装置及び運転支援表示の表示方法 |
| JP2013024656A (ja) * | 2011-07-19 | 2013-02-04 | Toyota Motor Corp | 光軸調整システム |
| WO2013150794A1 (ja) * | 2012-04-04 | 2013-10-10 | 京セラ株式会社 | 較正処理装置、カメラ装置、カメラシステム、およびカメラ較正方法 |
| CN103863205A (zh) * | 2014-04-03 | 2014-06-18 | 深圳市德赛微电子技术有限公司 | 一种辅助车载全景系统摄像头安装的方法及其辅助系统 |
| JP5561566B2 (ja) * | 2010-09-06 | 2014-07-30 | アイシン精機株式会社 | 運転支援装置 |
| US8866904B2 (en) | 2009-03-31 | 2014-10-21 | Aisin Seiki Kabushiki Kaisha | Calibrating apparatus for on-board camera of vehicle |
| JP2014225819A (ja) * | 2013-05-17 | 2014-12-04 | 京セラ株式会社 | 較正処理装置、カメラ較正装置、およびカメラ較正方法 |
| CN104943620A (zh) * | 2015-06-19 | 2015-09-30 | 寅家电子科技（上海）有限公司 | 车载摄像头辅助安装系统及辅助安装方法 |
| US9440585B2 (en) | 2011-09-13 | 2016-09-13 | Toyoya Jidosha Kabushiki Kaisha | Optical axis ascertaining device for in-vehicle camera |
| JP2018075868A (ja) * | 2016-11-07 | 2018-05-17 | 株式会社デンソーテン | 画像処理装置、画像処理システムおよび画像処理方法 |
| CN108045306A (zh) * | 2016-11-03 | 2018-05-18 | 财团法人多次元智能It融合系统 | 结合对象检测及盲点检测的车辆用影像监控系统及其工作方法 |
| JP2018139373A (ja) * | 2017-02-24 | 2018-09-06 | 株式会社Ihi | 画角調整方法 |
| JP2020056891A (ja) * | 2018-10-01 | 2020-04-09 | パイオニア株式会社 | 制御方法及び光学機器 |
| JP2020152547A (ja) * | 2019-03-20 | 2020-09-24 | 東芝エレベータ株式会社 | エレベータシステム |
| JP2020198639A (ja) * | 2017-02-24 | 2020-12-10 | 株式会社Ihi | 画角調整方法 |
| WO2022149180A1 (ja) | 2021-01-05 | 2022-07-14 | 株式会社ピットガレージダクト | バイク用バックミラー型前後一体式同時映像記録装置 |
| US11968354B2 (en) | 2021-04-07 | 2024-04-23 | Hyundai Motor Company | Automatic evaluating apparatus for built-in video recording device of vehicle, system having the same, and method thereof |
-
2003
- 2003-08-29 JP JP2003209740A patent/JP4238663B2/ja not_active Expired - Fee Related
Cited By (54)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4622637B2 (ja) * | 2005-04-04 | 2011-02-02 | トヨタ自動車株式会社 | 車載カメラ姿勢補正装置および車載カメラ姿勢補正方法 |
| JP2006287789A (ja) * | 2005-04-04 | 2006-10-19 | Toyota Motor Corp | 車載カメラ姿勢補正装置および車載カメラ姿勢補正方法 |
| JP2008131177A (ja) * | 2006-11-17 | 2008-06-05 | Aisin Seiki Co Ltd | 車載カメラの校正装置、校正方法、並びにこの校正方法を用いた車両の生産方法 |
| JP2008131250A (ja) * | 2006-11-20 | 2008-06-05 | Aisin Seiki Co Ltd | 車載カメラの校正装置及び当該装置を用いた車両の生産方法 |
| JPWO2008087707A1 (ja) * | 2007-01-16 | 2010-05-06 | パイオニア株式会社 | 車両用画像処理装置及び車両用画像処理プログラム |
| WO2008087707A1 (ja) * | 2007-01-16 | 2008-07-24 | Pioneer Corporation | 車両用画像処理装置及び車両用画像処理プログラム |
| WO2008087709A1 (ja) * | 2007-01-16 | 2008-07-24 | Pioneer Corporation | 車両用画像処理装置、車両用撮像装置、車両用画像処理プログラム、車両用画像調整方法 |
| JP4758481B2 (ja) * | 2007-01-16 | 2011-08-31 | パイオニア株式会社 | 車両用画像処理装置及び車両用画像処理プログラム |
| US8452568B2 (en) | 2008-05-30 | 2013-05-28 | Denso Corporation | Method for calibrating cameras installed on vehicle |
| JP4555876B2 (ja) * | 2008-05-30 | 2010-10-06 | 株式会社日本自動車部品総合研究所 | 車載カメラのキャリブレーション方法 |
| JP2009288152A (ja) * | 2008-05-30 | 2009-12-10 | Nippon Soken Inc | 車載カメラのキャリブレーション方法 |
| WO2010007960A1 (ja) * | 2008-07-14 | 2010-01-21 | クラリオン株式会社 | 車載用カメラの視点変換映像システム及び視点変換映像取得方法 |
| JPWO2010007960A1 (ja) * | 2008-07-14 | 2012-01-05 | クラリオン株式会社 | 車載用カメラの視点変換映像システム及び視点変換映像取得方法 |
| JP2010193016A (ja) * | 2009-02-16 | 2010-09-02 | Ricoh Co Ltd | 車載カメラ装置のキャリブレーション支援方法及びキャリブレーション支援装置、並びに車載カメラ装置 |
| JP2010199712A (ja) * | 2009-02-23 | 2010-09-09 | Ricoh Co Ltd | 車載カメラ装置のキャリブレーション支援方法及びキャリブレーション支援装置、並びに車載カメラ装置 |
| JP2010233079A (ja) * | 2009-03-27 | 2010-10-14 | Aisin Aw Co Ltd | 運転支援装置、運転支援方法、及び運転支援プログラム |
| US8675070B2 (en) | 2009-03-27 | 2014-03-18 | Aisin Aw Co., Ltd | Driving support device, driving support method, and driving support program |
| EP2233357A3 (en) * | 2009-03-27 | 2012-06-13 | Aisin Aw Co., Ltd. | Driving support device, driving support method, and driving support program |
| JP4690476B2 (ja) * | 2009-03-31 | 2011-06-01 | アイシン精機株式会社 | 車載カメラの校正装置 |
| US8908037B2 (en) | 2009-03-31 | 2014-12-09 | Aisin Seiki Kabushiki Kaisha | Calibration device, method, and program for on-board camera |
| JP2010239408A (ja) * | 2009-03-31 | 2010-10-21 | Aisin Seiki Co Ltd | 車載カメラの校正装置 |
| WO2010113673A1 (ja) | 2009-03-31 | 2010-10-07 | アイシン精機株式会社 | 車載カメラの校正装置、方法、及びプログラム |
| US8248471B2 (en) | 2009-03-31 | 2012-08-21 | Aisin Seiki Kabushiki Kaisha | Calibrating apparatus for on-board camera of vehicle |
| US8866904B2 (en) | 2009-03-31 | 2014-10-21 | Aisin Seiki Kabushiki Kaisha | Calibrating apparatus for on-board camera of vehicle |
| EP2523831B2 (en) † | 2010-01-13 | 2024-05-29 | Magna Electronics Inc. | Vehicular camera and method for periodic calibration of vehicular camera |
| EP2523831A1 (en) * | 2010-01-13 | 2012-11-21 | Magna Electronics Inc. | Vehicular camera and method for periodic calibration of vehicular camera |
| EP2523831B1 (en) | 2010-01-13 | 2015-12-16 | Magna Electronics Inc. | Vehicular camera and method for periodic calibration of vehicular camera |
| US9150155B2 (en) | 2010-01-13 | 2015-10-06 | Magna Electronics Inc. | Vehicular camera and method for periodic calibration of vehicular camera |
| EP2523831A4 (en) * | 2010-01-13 | 2013-11-06 | Magna Electronics Inc | VEHICLE CAMERA AND METHOD FOR PERIODIC CALIBRATION OF VEHICLE CAMERA |
| US9296337B2 (en) | 2010-01-13 | 2016-03-29 | Magna Electronics Inc. | Method of calibrating a vehicular camera |
| WO2011085489A1 (en) * | 2010-01-13 | 2011-07-21 | Magna Electronics Inc. | Vehicular camera and method for periodic calibration of vehicular camera |
| US9294733B2 (en) | 2010-09-06 | 2016-03-22 | Aisin Seiki Kabushiki Kaisha | Driving assist apparatus |
| EP2614997A4 (en) * | 2010-09-06 | 2016-11-23 | Aisin Seiki | DRIVER ASSISTING DEVICE |
| JP5561566B2 (ja) * | 2010-09-06 | 2014-07-30 | アイシン精機株式会社 | 運転支援装置 |
| JP2012074777A (ja) * | 2010-09-27 | 2012-04-12 | Kyocera Corp | 運転支援装置及び運転支援表示の表示方法 |
| JP2011155687A (ja) * | 2011-04-06 | 2011-08-11 | Aisin Seiki Co Ltd | 車載カメラの校正装置 |
| JP2013024656A (ja) * | 2011-07-19 | 2013-02-04 | Toyota Motor Corp | 光軸調整システム |
| US9440585B2 (en) | 2011-09-13 | 2016-09-13 | Toyoya Jidosha Kabushiki Kaisha | Optical axis ascertaining device for in-vehicle camera |
| JP2013219439A (ja) * | 2012-04-04 | 2013-10-24 | Kyocera Corp | 較正処理装置、カメラ較正装置、カメラシステム、およびカメラ較正方法 |
| CN104247394B (zh) * | 2012-04-04 | 2016-03-02 | 京瓷株式会社 | 校正操作装置、摄像机装置、摄像机系统和摄像机校正方法 |
| WO2013150794A1 (ja) * | 2012-04-04 | 2013-10-10 | 京セラ株式会社 | 較正処理装置、カメラ装置、カメラシステム、およびカメラ較正方法 |
| CN104247394A (zh) * | 2012-04-04 | 2014-12-24 | 京瓷株式会社 | 校正操作装置、摄像机装置、摄像机系统和摄像机校正方法 |
| JP2014225819A (ja) * | 2013-05-17 | 2014-12-04 | 京セラ株式会社 | 較正処理装置、カメラ較正装置、およびカメラ較正方法 |
| CN103863205A (zh) * | 2014-04-03 | 2014-06-18 | 深圳市德赛微电子技术有限公司 | 一种辅助车载全景系统摄像头安装的方法及其辅助系统 |
| CN104943620A (zh) * | 2015-06-19 | 2015-09-30 | 寅家电子科技（上海）有限公司 | 车载摄像头辅助安装系统及辅助安装方法 |
| CN108045306A (zh) * | 2016-11-03 | 2018-05-18 | 财团法人多次元智能It融合系统 | 结合对象检测及盲点检测的车辆用影像监控系统及其工作方法 |
| JP2018075868A (ja) * | 2016-11-07 | 2018-05-17 | 株式会社デンソーテン | 画像処理装置、画像処理システムおよび画像処理方法 |
| JP2018139373A (ja) * | 2017-02-24 | 2018-09-06 | 株式会社Ihi | 画角調整方法 |
| JP2020198639A (ja) * | 2017-02-24 | 2020-12-10 | 株式会社Ihi | 画角調整方法 |
| JP2020056891A (ja) * | 2018-10-01 | 2020-04-09 | パイオニア株式会社 | 制御方法及び光学機器 |
| JP2020152547A (ja) * | 2019-03-20 | 2020-09-24 | 東芝エレベータ株式会社 | エレベータシステム |
| CN111717738A (zh) * | 2019-03-20 | 2020-09-29 | 东芝电梯株式会社 | 电梯系统 |
| WO2022149180A1 (ja) | 2021-01-05 | 2022-07-14 | 株式会社ピットガレージダクト | バイク用バックミラー型前後一体式同時映像記録装置 |
| US11968354B2 (en) | 2021-04-07 | 2024-04-23 | Hyundai Motor Company | Automatic evaluating apparatus for built-in video recording device of vehicle, system having the same, and method thereof |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4238663B2 (ja) | 2009-03-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4238663B2 (ja) | 車載カメラのキャリブレーション方法及びキャリブレーション装置 | |
| KR100997227B1 (ko) | 주차 지원장치 | |
| US7526368B2 (en) | Parking assist apparatus | |
| JP3692082B2 (ja) | 駐車支援装置 | |
| JP5212748B2 (ja) | 駐車支援装置 | |
| JP3729786B2 (ja) | 駐車支援装置 | |
| JP5035321B2 (ja) | 車両周辺表示制御装置および車両周辺表示制御装置用のプログラム | |
| JP3551920B2 (ja) | 車載カメラの校正装置および校正方法 | |
| JP4094325B2 (ja) | 駐車運転支援装置 | |
| JP2001180405A (ja) | 操舵支援装置 | |
| WO2001085496A1 (fr) | Appareil d'aide a la marche arriere d'un vehicule | |
| JP5446500B2 (ja) | 駐車支援装置及び駐車支援方法 | |
| JP2005329915A (ja) | 駐車支援装置 | |
| JP5446139B2 (ja) | 駐車支援装置及び駐車支援方法 | |
| JP5257138B2 (ja) | 駐車支援装置及び駐車支援方法 | |
| JP6115249B2 (ja) | 駐車支援装置 | |
| JP4199616B2 (ja) | 誘導支援装置 | |
| JP3395725B2 (ja) | 並列駐車時の操舵支援装置 | |
| CN110546047A (zh) | 停车辅助装置 | |
| JP2014193660A (ja) | 駐車支援装置 | |
| JP4391979B2 (ja) | 駐車支援装置 | |
| JP4136982B2 (ja) | 駐車支援方法および駐車支援装置 | |
| JP2006123606A (ja) | 駐車支援装置 | |
| JP4323402B2 (ja) | 舵角補正装置 | |
| JP2007210612A (ja) | 駐車支援装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20051104 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080226 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080425 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080624 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080819 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20081125 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20081208 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120109 Year of fee payment: 3 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 4238663 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120109 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130109 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130109 Year of fee payment: 4 |
|
| LAPS | Cancellation because of no payment of annual fees |