JP2004004043A - カメラ補正装置 - Google Patents

カメラ補正装置 Download PDF

Info

Publication number
JP2004004043A
JP2004004043A JP2003111432A JP2003111432A JP2004004043A JP 2004004043 A JP2004004043 A JP 2004004043A JP 2003111432 A JP2003111432 A JP 2003111432A JP 2003111432 A JP2003111432 A JP 2003111432A JP 2004004043 A JP2004004043 A JP 2004004043A
Authority
JP
Japan
Prior art keywords
position information
optical system
housing
holding
correction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003111432A
Other languages
English (en)
Other versions
JP4015051B2 (ja
JP2004004043A5 (ja
Inventor
Michio Miwa
三輪　道雄
Ryuichi Mato
間藤　隆一
Masaki Sato
佐藤　政喜
Satoru Masuda
増田　悟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2003111432A priority Critical patent/JP4015051B2/ja
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to US10/512,039 priority patent/US7352388B2/en
Priority to CNB038127008A priority patent/CN1312458C/zh
Priority to EP03720942.6A priority patent/EP1498689B1/en
Priority to KR1020047016893A priority patent/KR100948161B1/ko
Priority to PCT/JP2003/005033 priority patent/WO2003089874A1/ja
Publication of JP2004004043A publication Critical patent/JP2004004043A/ja
Publication of JP2004004043A5 publication Critical patent/JP2004004043A5/ja
Application granted granted Critical
Publication of JP4015051B2 publication Critical patent/JP4015051B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/80—Geometric correction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Measurement Of Optical Distance (AREA)

Abstract

【課題】車両などに設置されたカメラの光学系のパラメータを補正することができるカメラ補正装置を提供すること。
【解決手段】第１の筐体位置情報を保持する第１の筐体位置情報保持部１１５と、第２の筐体位置情報を保持する第２の筐体位置情報保持部１１６と、第１の光学系位置情報を生成する第１の光学系位置情報生成部１１７と、第１の光学系位置情報を保持する第１の光学系位置情報保持部１１８と、第２の光学系位置情報を生成する第２の光学系位置情報生成部１２０と、第２の光学系位置情報を保持する第２の光学系位置情報保持部１３０と、カメラ１１０によって取得された第２の座標系１０２における画像情報に基づいて、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報を補正する補正部１６０とを備えるように構成する。
【選択図】　図１

Description

【０００１】
【発明の属する技術分野】
本発明は、カメラ補正装置に関し、特に、車両などに設置されるカメラの校正を行うカメラ補正装置に関する。
【０００２】
【従来の技術】
従来、車両の外部に設置されたカメラに接続され、カメラによって取得された画像情報に基づいて、車両の周辺、特に、路面上の対象物の位置を検出するＥＣＵ（Ｅｌｅｃｔｒｏｎｉｃ　Ｃｏｎｔｒｏｌ　Ｕｎｉｔ）などの撮像制御装置が普及している。この種の撮像制御装置に対してカメラを組み合わせる過程においては、カメラ個々の光学系のパラメータを特定するために、一般に「校正」と呼ばれる作業が行われている。
【０００３】
上述したカメラの校正を行うカメラ校正装置としては、カメラが車両に設置される前にカメラの校正を行うものと、カメラが車両に設置された後にカメラの校正を行うものとが知られており、特に、カメラを車両に設置する際に行われる作業を簡略化するという観点から、カメラが車両に設置される前にカメラの校正を行うカメラ校正装置の需要が高まっている。
【０００４】
このような従来のカメラ校正装置５００は、図３９から図４１に示すように、撮像装置としてのカメラ５１０に接続されるようになっている。カメラ５１０は、筐体５１１と筐体５１１に支持された光学系５１２とを有しており、光学系５１２を介して画像情報を取得するようになっている。
【０００５】
カメラ校正装置５００は、カメラ生産工場に構成された第１の座標系５０１に対する筐体５１１の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持部５１５と、車両生産工場に構成された第２の座標系５０２に対する筐体５１１の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持部５１６とを備えている。
【０００６】
カメラ校正装置５００は、カメラ生産工場においてカメラ５１０の校正を行うようになっており、第１の座標系５０１には、カメラ５１０の校正を行うための校正マーカ５０５が配置されている。ここで、カメラ５１０の校正とは、筐体５１１が車両５０８に対して設計によって決められた位置に設置された場合の光学系５１２の位置を算出する動作である。
【０００７】
また、カメラ校正装置５００は、第１の座標系５０１に対する光学系５１２の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成部５１７と、第１の光学系位置情報生成部５１７によって生成された第１の光学系位置情報を保持する第１の光学系位置情報保持部５１８とを備えている。第１の光学系位置情報生成部５１７は、カメラ５１０によって取得された校正マーカ５０５の画像情報に基づいて、第１の座標系５０１に対する光学系５１２の位置を算出するようになっている。
【０００８】
また、カメラ校正装置５００は、第２の座標系５０２に対する光学系５１２の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成部５２０と、第２の光学系位置情報生成部５２０によって生成された第２の光学系位置情報を保持する第２の光学系位置情報保持部５３０とを備えている。
【０００９】
第２の光学系位置情報生成部５２０は、第１の筐体位置情報保持部５１５に保持された第１の筐体位置情報および第１の光学系位置情報保持部５１８に保持された第１の光学系位置情報に基づいて、第２の筐体位置情報保持部５１６に保持された第２の筐体位置情報から、第２の座標系５０２に対する光学系５１２の位置を算出するようになっている。
【００１０】
このように構成されたカメラ校正装置５００は、第２の座標系５０２に対する光学系５１２の位置を算出することにより、カメラ生産工場においてカメラ５１０の校正を行うようになっている。そして、第２の光学系位置情報保持部５３０に保持された第２の光学系位置情報に基づいて、車両５０８に設置されたカメラ５１０によって取得された画像情報から、撮像制御装置で路面上の対象物の位置を検出するようにしている。
【００１１】
【発明が解決しようとする課題】
しかしながら、上記従来のカメラ校正装置においては、第２の光学系位置情報保持部に保持された第２の光学系位置情報を補正することができないため、筐体が車両に対して不正確な位置に設置された場合に、撮像制御装置に路面上の対象物の位置を正確に検出させることができないという問題があった。
【００１２】
本発明は、このような問題を解決するため、車両などに設置されたカメラの光学系のパラメータを補正することができるカメラ補正装置を提供するものである。
【００１３】
【課題を解決するための手段】
上記の課題を解決するために、本発明のカメラ補正装置は、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正装置であって、第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持手段と、第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持手段と、前記撮像装置によって取得された前記第１の座標系における画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成手段と、前記第１の光学系位置情報生成手段によって生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持手段と、前記第１の筐体位置情報保持手段に保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持手段に保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持手段に保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成手段と、前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持手段と、前記撮像装置によって取得された前記第２の座標系における画像情報に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する補正手段とを備えたことを特徴とする構成を有している。
【００１４】
この構成により、本発明のカメラ補正装置は、車両などに設置されたカメラの光学系のパラメータを補正することができる。
【００１５】
また、本発明のカメラ補正装置は、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正装置であって、所定の座標系に対する前記光学系の位置を示す光学系位置情報を保持する光学系位置情報保持手段と、前記撮像装置によって取得された前記座標系における画像情報に基づいて、前記光学系位置情報保持手段に保持された前記光学系位置情報を補正する補正手段とを備えたことを特徴とする構成を有している。
【００１６】
この構成により、本発明のカメラ補正装置は、車両などに設置されたカメラの光学系のパラメータを補正することができる。
【００１７】
また、本発明のカメラ補正装置は、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正装置であって、校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持手段と、補正マーカが配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持手段と、前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成手段と、前記第１の光学系位置情報生成手段によって生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持手段と、前記第１の筐体位置情報保持手段に保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持手段に保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持手段に保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成手段と、前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記補正マーカの予測位置情報を生成する予測位置情報生成手段と、前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持手段と、前記予測位置情報生成手段によって生成された前記予測位置情報を保持する予測位置情報保持手段と、前記撮像装置によって取得された前記補正マーカの画像情報および前記予測位置情報保持手段に保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する補正手段とを備えたことを特徴とする構成を有している。
【００１８】
この構成により、本発明のカメラ補正装置は、簡単な補正マーカを利用して第２の光学系位置情報を補正することができる。
【００１９】
また、本発明のカメラ補正装置は、前記補正手段が、前記撮像装置によって取得された前記補正マーカの画像情報から、前記撮像装置の画像座標系に対する前記補正マーカの結像位置情報を抽出する結像位置情報抽出手段と、前記結像位置情報抽出手段によって抽出された前記結像位置情報および前記予測位置情報保持手段に保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報の補正量を算出する補正量算出手段と、前記補正量算出手段によって算出された前記補正量に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する光学系位置情報補正手段とを有することを特徴とする構成を有している。
【００２０】
この構成により、本発明のカメラ補正装置は、簡単な補正マーカを利用して第２の光学系位置情報の補正量を算出することができる。
【００２１】
また、本発明のカメラ補正装置は、前記補正手段が、前記第２の光学系位置情報の回転成分の誤差だけを補正することを特徴とする構成を有している。
【００２２】
この構成により、本発明のカメラ補正装置は、前記第２の光学系位置情報の平行移動成分の誤差を無視することができ、簡単な補正マーカを利用して第２の光学系位置情報を補正することができる。
【００２３】
また、本発明のカメラ補正装置は、前記結像位置情報抽出手段が、前記撮像装置によって取得された前記補正マーカの画像情報を表示する画像情報表示手段と、前記画像情報表示手段に表示された前記補正マーカの画像情報において前記補正マーカの結像位置を指定し、前記結像位置情報を抽出する結像位置指定手段とを有することを特徴とする構成を有している。
【００２４】
この構成により、本発明のカメラ補正装置は、補正マーカの結像位置を指定することができ、補正マーカの結像位置情報を確実に抽出することができる。
【００２５】
また、本発明のカメラ補正装置は、前記結像位置情報抽出手段が、前記撮像装置の画像座標系に対する前記補正マーカの予測範囲情報を保持する予測範囲情報保持手段と、前記予測範囲情報保持手段に保持された前記予測範囲情報および前記予測位置情報保持手段に保持された前記予測位置情報に基づいて、前記撮像装置によって取得された前記補正マーカの画像情報から前記補正マーカの結像位置を検索し、前記結像位置情報を抽出する結像位置検索手段とを有することを特徴とする構成を有している。
【００２６】
この構成により、本発明のカメラ補正装置は、補正マーカの結像位置を検索することができ、補正マーカの結像位置情報を容易に抽出することができる。
【００２７】
また、本発明のカメラ補正装置は、筐体と前記筐体に支持される光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正装置であって、校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持手段と、第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持手段と、前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成手段と、前記第１の光学系位置情報生成手段によって生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持手段と、前記第１の筐体位置情報保持手段に保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持手段に保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持手段に保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成手段と、前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持手段と、前記撮像装置によって取得された前記第２の座標系における画像情報に含まれる動きベクトルに基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する補正手段とを備えたことを特徴とする構成を有している。
【００２８】
この構成により、本発明のカメラ補正装置は、動きベクトルを利用して第２の光学系位置情報を補正することができる。
【００２９】
また、本発明のカメラ補正装置は、前記補正手段が、前記撮像装置によって取得された前記第２の座標系における画像情報から平面投影画像を生成する平面投影画像生成手段と、前記平面投影画像生成手段によって生成された前記平面投影画像を複数の画像領域に分割する平面投影画像分割手段と、前記平面投影画像分割手段によって分割された複数の前記画像領域から動きベクトルを抽出する動きベクトル抽出手段と、前記動きベクトル抽出手段によって抽出された前記動きベクトルに基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報の補正量を算出する補正量算出手段と、前記補正量算出手段によって算出された前記補正量に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する光学系位置情報補正手段とを有することを特徴とする構成を有している。
【００３０】
この構成により、本発明のカメラ補正装置は、複数の画像領域における動きベクトルを容易に抽出することができる。
【００３１】
また、本発明のカメラ補正装置は、前記第２の座標系に設けられた分割マーカが、前記第２の筐体位置情報保持手段に保持された前記第２の筐体位置情報に含まれる前記筐体の位置に対して一定の位置関係を保つように配置され、前記平面投影画像分割手段が、前記撮像装置によって取得された前記分割マーカの画像情報に基づいて、前記平面投影画像を複数の画像領域に分割することを特徴とする構成を有している。
【００３２】
この構成により、本発明のカメラ補正装置は、分割マーカを利用して平面投影画像を正確に分割することができる。
【００３３】
また、本発明のカメラ補正装置は、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正装置であって、校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持手段と、車両が配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持手段と、前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成手段と、前記第１の光学系位置情報生成手段によって生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持手段と、前記第１の筐体位置情報保持手段に保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持手段に保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持手段に保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成手段と、前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記車両の予測位置情報を生成する予測位置情報生成手段と、前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持手段と、前記予測位置情報生成手段によって生成された前記予測位置情報を保持する予測位置情報保持手段と、前記撮像装置によって取得された前記車両の画像情報および前記予測位置情報保持手段に保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する補正手段とを備えたことを特徴とする構成を有している。
【００３４】
この構成により、本発明のカメラ補正装置は、車両の一部を利用して第２の光学系位置情報を補正することができる。
【００３５】
また、本発明のカメラ補正装置は、前記補正手段が、前記撮像装置によって取得された前記車両の画像情報から、前記撮像装置の画像座標系に対する前記車両の結像位置情報を抽出する結像位置情報抽出手段と、前記結像位置情報抽出手段によって抽出された前記結像位置情報および前記予測位置情報保持手段に保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報の補正量を算出する補正量算出手段と、前記補正量算出手段によって算出された前記補正量に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する光学系位置情報補正手段とを有することを特徴とする構成を有している。
【００３６】
この構成により、本発明のカメラ補正装置は、車両の一部を利用して第２の光学系位置情報の補正量を算出することができる。
【００３７】
また、本発明のカメラ補正装置は、前記補正量算出手段が、前記結像位置情報に含まれる前記車両の輪郭線と前記予測位置情報に含まれる前記車両の輪郭線とを重ね合わせるマッチング手段と、前記マッチング手段によって重ね合わされた前記車両の輪郭線から複数の点を抽出する抽出手段と、前記結像位置情報に含まれる前記点と前記予測位置情報に含まれる前記点とを比較することにより前記第２の光学系位置情報の補正量を算出する演算手段とを有することを特徴とする構成を有している。
【００３８】
この構成により、本発明のカメラ補正装置は、車両の輪郭線から点を抽出することができ、第２の光学系位置情報の補正量を確実に算出することができる。
【００３９】
また、本発明のカメラ補正装置は、前記撮像装置が車両に取り付けられることを特徴とする構成を有している。
【００４０】
この構成により、本発明のカメラ補正装置は、筐体が車両に対して不正確な位置に設置された場合に、カメラの光学系のパラメータを補正することができ、路面上の対象物の位置を正確に検出することができる。
【００４１】
また、本発明の撮像装置は、カメラ補正装置を備えた構成を有している。
【００４２】
この構成により、本発明の撮像装置は、車両などに設置されたカメラの光学系のパラメータを補正することができる。
【００４３】
また、本発明の撮像制御装置は、カメラ補正装置を備えた構成を有している。
【００４４】
この構成により、本発明の撮像制御装置は、車両などに設置されたカメラの光学系のパラメータを補正することができる。
【００４５】
また、本発明のカメラ補正方法は、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正方法であって、第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、前記撮像装置によって取得された前記第１の座標系における画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、前記撮像装置によって取得された前記第２の座標系における画像情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとを備えたことを特徴とする構成を有している。
【００４６】
この構成により、本発明のカメラ補正方法は、車両などに設置されたカメラの光学系のパラメータを補正することができ、路面上の対象物の位置を正確に検出することができる。
【００４７】
また、本発明のカメラ補正方法は、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正方法であって、所定の座標系に対する前記光学系の位置を示す光学系位置情報を保持する光学系位置情報保持ステップと、前記撮像装置によって取得された前記座標系における画像情報に基づいて、前記光学系位置情報保持ステップで保持された前記光学系位置情報を補正する補正ステップとを備えたことを特徴とする構成を有している。
【００４８】
この構成により、本発明のカメラ補正方法は、車両などに設置されたカメラの光学系のパラメータを補正することができ、路面上の対象物の位置を正確に検出することができる。
【００４９】
また、本発明のカメラ補正方法は、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正方法であって、校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、補正マーカが配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記補正マーカの予測位置情報を生成する予測位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、前記予測位置情報生成ステップで生成された前記予測位置情報を保持する予測位置情報保持ステップと、前記撮像装置によって取得された前記補正マーカの画像情報および前記予測位置情報保持ステップで保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとを備えたことを特徴とする構成を有している。
【００５０】
この構成により、本発明のカメラ補正方法は、簡単な補正マーカを利用して第２の光学系位置情報を補正することができる。
【００５１】
また、本発明のカメラ補正方法は、筐体と前記筐体に支持される光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正方法であって、校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、前記撮像装置によって取得された前記第２の座標系における画像情報に含まれる動きベクトルに基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとを備えたことを特徴とする構成を有している。
【００５２】
この構成により、本発明のカメラ補正方法は、動きベクトルを利用して第２の光学系位置情報を補正することができる。
【００５３】
また、本発明のカメラ補正方法は、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正方法であって、校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、車両が配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記車両の予測位置情報を生成する予測位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、前記予測位置情報生成ステップで生成された前記予測位置情報を保持する予測位置情報保持ステップと、前記撮像装置によって取得された前記車両の画像情報および前記予測位置情報保持ステップで保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとを備えたことを特徴とする構成を有している。
【００５４】
この構成により、本発明のカメラ補正方法は、車両の一部を利用して第２の光学系位置情報を補正することができる。
【００５５】
また、本発明のカメラ補正方法は、前記撮像装置が車両に取り付けられることを特徴とする構成を有している。
【００５６】
この構成により、本発明のカメラ補正方法は、筐体を車両に対して不正確な位置に設置した場合に、カメラの光学系のパラメータを補正することができ、路面上の対象物の位置を正確に検出することができる。
【００５７】
また、本発明のカメラ補正プログラムは、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正プログラムであって、第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、前記撮像装置によって取得された前記第１の座標系における画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、前記撮像装置によって取得された前記第２の座標系における画像情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとをコンピュータに実行させることを特徴とする構成を有している。
【００５８】
この構成により、本発明のカメラ補正プログラムは、車両などに設置されたカメラの光学系のパラメータを補正することができ、路面上の対象物の位置を正確に検出することができる。
【００５９】
また、本発明のカメラ補正プログラムは、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正プログラムであって、所定の座標系に対する前記光学系の位置を示す光学系位置情報を保持する光学系位置情報保持ステップと、前記撮像装置によって取得された前記座標系における画像情報に基づいて、前記光学系位置情報保持ステップで保持された前記光学系位置情報を補正する補正ステップとをコンピュータに実行させることを特徴とする構成を有している。
【００６０】
この構成により、本発明のカメラ補正プログラムは、車両などに設置されたカメラの光学系のパラメータを補正することができ、路面上の対象物の位置を正確に検出することができる。
【００６１】
また、本発明のカメラ補正プログラムは、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正プログラムであって、校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、補正マーカが配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記補正マーカの予測位置情報を生成する予測位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、前記予測位置情報生成ステップで生成された前記予測位置情報を保持する予測位置情報保持ステップと、前記撮像装置によって取得された前記補正マーカの画像情報および前記予測位置情報保持ステップで保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとをコンピュータに実行させることを特徴とする構成を有している。
【００６２】
この構成により、本発明のカメラ補正プログラムは、簡単な補正マーカを利用して第２の光学系位置情報を補正することができる。
【００６３】
また、本発明のカメラ補正プログラムは、筐体と前記筐体に支持される光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正プログラムであって、校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、前記撮像装置によって取得された前記第２の座標系における画像情報に含まれる動きベクトルに基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとをコンピュータに実行させることを特徴とする構成を有している。
【００６４】
この構成により、本発明のカメラ補正プログラムは、動きベクトルを利用して第２の光学系位置情報を補正することができる。
【００６５】
また、本発明のカメラ補正プログラムは、筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正プログラムであって、校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、車両が配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記車両の予測位置情報を生成する予測位置情報生成ステップと、前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、前記予測位置情報生成ステップで生成された前記予測位置情報を保持する予測位置情報保持ステップと、前記撮像装置によって取得された前記車両の画像情報および前記予測位置情報保持ステップで保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとをコンピュータに実行させることを特徴とする構成を有している。
【００６６】
この構成により、本発明のカメラ補正プログラムは、車両の一部を利用して第２の光学系位置情報を補正することができる。
【００６７】
【発明の実施の形態】
以下、本発明の実施の形態を図面に基づいて説明する。
（第１の実施の形態）
【００６８】
図１から図１３は、本発明に係るカメラ補正装置の第１の実施の形態を示す図である。
【００６９】
まず、本実施の形態に係るカメラ補正装置の構成について説明する。
【００７０】
図１から図３において、カメラ補正装置１００は、撮像装置としてのカメラ１１０に接続されるようになっている。カメラ１１０は、筐体１１１と筐体１１１に支持された光学系１１２とを有しており、光学系１１２を介して画像情報を取得するようになっている。
【００７１】
カメラ補正装置１００は、第１の座標系１０１に対する筐体１１１の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持部１１５と、第２の座標系１０２に対する筐体１１１の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持部１１６と、第１の座標系１０１に対する校正マーカ１０５の位置を示す校正マーカ位置情報を保持する校正マーカ位置情報保持部１２５と、第２の座標系１０２に対する補正マーカ１０６の位置を示す補正マーカ位置情報を保持する補正マーカ位置情報保持部１２６とを備えている。
【００７２】
第１の座標系１０１は、カメラ生産工場などの第１の作業場所に設けられている。第１の座標系１０１には、Ｘ１軸、Ｙ１軸、Ｚ１軸が設けられ、第１の作業場所に設置されたカメラ１１０の校正を行うための校正マーカ１０５が配置されている。校正マーカ１０５は、３次元に配列された複数の点によって構成されており、それぞれの点は、第１の座標系１０１に対して所定の位置に配置されている。また、校正マーカ１０５は、第１の作業場所に設置されたカメラ１１０の視野範囲を覆うように配置されている。
【００７３】
第２の座標系１０２は、車両生産工場などの第２の作業場所に設けられている。第２の座標系１０２には、Ｘ２軸、Ｙ２軸、Ｚ２軸が設けられ、第２の座標系１０２のＸ２Ｙ２平面は、車両１０８が設置される路面１０２ａを構成している。路面１０２ａには、補正マーカ１０６が配置されている。補正マーカ１０６は、２次元に配列された２個以上の点によって構成されており、それぞれの点は、第２の座標系１０２に対して所定の位置に配置されている。
【００７４】
カメラ補正装置１００は、第１の作業場所においてカメラ１１０の校正を行うようになっている。カメラ１１０は、第１の座標系１０１に対して所定の位置に配置されており、このときの筐体１１１の位置を示す第１の筐体位置情報が、第１の筐体位置情報保持部１１５に保持されるようになっている。ここで、カメラ１１０の校正とは、カメラ１１０が第２の作業場所において車両１０８に設置されたときの光学系１１２の位置を算出する動作である。
【００７５】
カメラ補正装置１００によって校正されたカメラ１１０は、第２の作業場所において車両１０８に設置されるようになっている。カメラ１１０は、第２の座標系１０２に対して所定の位置に配置されており、このときの筐体１１１の位置を示す第２の筐体位置情報が、第２の筐体位置情報保持部１１６に保持されるようになっている。ここで、第２の筐体位置情報は、筐体１１１が車両１０８に対して正確な位置に設置された場合の筐体１１１の位置を示している。
【００７６】
また、カメラ補正装置１００は、第１の座標系１０１に対する光学系１１２の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成部１１７と、第１の光学系位置情報生成部１１７によって生成された第１の光学系位置情報を保持する第１の光学系位置情報保持部１１８とを備えている。
【００７７】
第１の光学系位置情報生成部１１７は、カメラ１１０によって取得された校正マーカ１０５の画像情報に基づいて、校正マーカ位置情報保持部１２５に保持された校正マーカ位置情報から、第１の座標系１０１に対する光学系１１２の位置を算出するようになっている。ここで、光学系１１２の位置とは、光学系１１２の光学中心および光軸の位置を含むものである。第１の座標系１０１に対する光学系１１２の位置を算出する方法としては、文献１（Ｒ．　Ｔｓａｉ，　Ａ　ｖｅｒｓａｔｉｌｅ　ｃａｍｅｒａ　ｃａｌｉｂｒａｔｉｏｎ　ｔｅｃｈｎｉｑｕｅ　ｆｏｒ　ｈｉｇｈ−ａｃｃｕｒａｃｙ　３Ｄ　ｍａｃｈｉｎｅ　ｖｉｓｉｏｎ　ｍｅｔｒｏｌｏｇｙ　ｕｓｉｎｇ　ｏｆｆ−ｔｈｅ−ｓｈｅｌｆ　ＴＶ　ｃａｍｅｒａｓ　ａｎｄ　ｌｅｎｓｅｓ，　ＩＥＥＥ　Ｊｏｕｒｎａｌ　ｏｆ　Ｒｏｂｏｔｉｃｓ　ａｎｄ　Ａｕｔｏｍａｔｉｏｎ，　ＲＡ−３（４）：　３２３−３４４，　１９８７）に記載された方法を用いることができる。
【００７８】
また、カメラ補正装置１００は、第２の座標系１０２に対する光学系１１２の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成部１２０と、第２の光学系位置情報生成部１２０によって生成された第２の光学系位置情報を保持する第２の光学系位置情報保持部１３０とを備えている。
【００７９】
第２の光学系位置情報生成部１２０は、第１の筐体位置情報保持部１１５に保持された第１の筐体位置情報および第１の光学系位置情報保持部１１８に保持された第１の光学系位置情報に基づいて、第２の筐体位置情報保持部１１６に保持された第２の筐体位置情報から、第２の座標系１０２に対する光学系１１２の位置を算出するようになっている。
【００８０】
第２の光学系位置情報生成部１２０は、次の方法によって第２の座標系１０２に対する光学系１１２の位置を算出するようになっている。
【００８１】
まず、第１の座標系１０１に対する筐体１１１の位置と第１の座標系１０１に対する光学系１１２の位置とを比較し、筐体１１１の位置と光学系１１２の位置との相対関係を求める。そして、筐体１１１の位置と光学系１１２の位置との相対関係に基づいて、第２の座標系１０２に対する筐体１１１の位置から、第２の座標系１０２に対する光学系１１２の位置を算出する。したがって、第２の光学系位置情報は、筐体１１１が車両１０８に対して正確な位置に設置された場合の光学系１１２の位置を示している。
【００８２】
第２の作業場所において車両１０８に設置されたカメラ１１０には、図４に示すように、第２の光学系位置情報を基準とするカメラ座標系１１３が構成されている。カメラ座標系１１３には、ｘ軸、ｙ軸、ｚ軸が設けられ、カメラ座標系１１３の原点は、光学系１１２の光学中心と一致するようになっている。カメラ座標系１１３のｘ軸は、カメラ１１０の左右方向に設けられ、カメラ座標系１１３のｙ軸は、カメラ１１０の上下方向に設けられ、カメラ座標系１１３のｚ軸は、光学系１１２の光軸と一致するように設けられている。
【００８３】
また、カメラ座標系１１３の原点からｚ軸方向に焦点距離ｆだけ離隔した平面には、画像座標系１１４が構成されている。画像座標系１１４には、ｐ軸、ｑ軸が設けられている。カメラ１１０は、光学系１１２を介して画像座標系１１４に結像した画像を画像情報として取得するようになっている。
【００８４】
また、カメラ補正装置１００は、カメラ１１０の画像座標系１１４に対する補正マーカ１０６の予測位置情報を生成する予測位置情報生成部１４０と、予測位置情報生成部１４０によって生成された予測位置情報を保持する予測位置情報保持部１５０とを備えている。
【００８５】
予測位置情報生成部１４０は、第２の光学系位置情報生成部１２０によって生成された第２の光学系位置情報に基づいて、補正マーカ位置情報保持部１２６に保持された補正マーカ位置情報から、カメラ１１０の画像座標系１１４に対する補正マーカ１０６の予測位置を算出するようになっている。カメラ１１０の画像座標系１１４に対する補正マーカ１０６の予測位置を算出する方法としては、上記の文献１に記載された方法を用いることができる。
【００８６】
第２の座標系１０２に配置された補正マーカ１０６は、図５に示すように、光学系１１２を介して画像座標系１１４の結像位置Ｐｎ’（ｎ＝１，２，３，４，５，６）に結像するようになっている。ここで、結像位置Ｐｎ’は、筐体１１１が車両１０８に対して正確な位置、即ち、第２の筐体位置情報に含まれる位置に設置され、第２の光学系位置情報に誤差が生じていない場合、予測位置情報生成部１４０によって算出された予測位置Ｐｎ（ｎ＝１，２，３，４，５，６）と一致するようになっている。しかしながら、実際には、筐体１１１が車両１０８に対して不正確な位置に設置され、第２の光学系位置情報に誤差が生じることにより、画像座標系１１４における結像位置Ｐｎ’は、予測位置Ｐｎから離隔している。
【００８７】
第２の光学系位置情報は、第２の座標系１０２に対するカメラ座標系１１３の平行移動および回転を示す６個のパラメータを含んでいる。この６個のパラメータは、図６に示すＸ２軸、Ｙ２軸、Ｚ２軸方向の平行移動成分と、図７に示すｘ軸、ｙ軸、ｚ軸まわりの回転成分とによって構成されている。筐体１１１が車両１０８に対して不正確な位置に設置されることによって生じる第２の光学系位置情報の誤差は、平行移動成分および回転成分のそれぞれの誤差を含んでいる。筐体１１１が車両１０８に取り付けられる際には、平行移動成分にして数ｃｍ、回転成分にして数度の誤差が生じている。
【００８８】
ここで、カメラ１１０によって取得された路面１０２ａの画像情報に対して車両１０８の駐車動作を補助するための補助線を表示する場合を考える。なお、筐体１１１は、車両１０８に対して高さ１０００ｍｍの位置に設置され、補助線は、車両１０８の後端から３０００ｍｍの位置に表示されるものとする。
【００８９】
まず、図８に示すように、筐体１１１が車両１０８に対してＹ２軸方向に５０ｍｍずれた位置に設置された場合、即ち、第２の光学系位置情報のＹ２軸方向の平行移動成分に誤差が生じた場合には、誤差が生じていない場合と比較して補助線がＹ２軸方向に５０ｍｍずれた位置に表示される。この場合、３０００ｍｍ先の５０ｍｍの離隔量であるため、図５に示す画像座標系１１４における結像位置Ｐｎ’の予測位置Ｐｎからの離隔量は小さい。したがって、第２の光学系位置情報の平行移動成分の誤差は無視することができる。
【００９０】
これに対して、図９に示すように、筐体１１１が車両１０８に対してｘ軸まわりに１°ずれた位置に設置された場合、即ち、第２の光学系位置情報のｘ軸まわりの回転成分に誤差が生じた場合には、誤差が生じていない場合と比較して補助線がＹ２軸方向に約１８４ｍｍずれた位置に表示される。この場合、図５に示す画像座標系１１４における結像位置Ｐｎ’の予測位置Ｐｎからの離隔量は無視できなくなる。したがって、第２の光学系位置情報の回転成分の誤差だけを第２の光学系位置情報の誤差として用いることができる。
【００９１】
このような第２の光学系位置情報の誤差を補正するため、カメラ補正装置１００は、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報を補正する補正部１６０を備えている。
【００９２】
補正部１６０は、カメラ１１０によって取得された補正マーカ１０６の画像情報および予測位置情報保持部１５０に保持された予測位置情報に基づいて、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報を補正するようになっている。
【００９３】
補正部１６０は、カメラ１１０によって取得された補正マーカ１０６の画像情報から、カメラ１１０の画像座標系１１４に対する補正マーカ１０６の結像位置情報を抽出する結像位置情報抽出部１７０と、結像位置情報抽出部１７０によって抽出された結像位置情報および予測位置情報保持部１５０に保持された予測位置情報に基づいて、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報の補正量を算出する補正量算出部１８０と、補正量算出部１８０によって算出された補正量に基づいて、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報を補正する光学系位置情報補正部１９０とを有している。
【００９４】
結像位置情報抽出部１７０は、カメラ１１０によって取得された補正マーカ１０６の画像情報を表示する画像情報表示部１７１と、画像情報表示部１７１に表示された補正マーカ１０６の画像情報において補正マーカ１０６の結像位置Ｐｎ’を指定し、画像情報から結像位置情報を抽出する結像位置指定部１７２とを有している。
【００９５】
図１０に示すように、画像情報表示部１７１には、カメラ１１０によって取得された補正マーカ１０６の画像情報と、補正マーカ１０６の結像位置Ｐｎ’を指定するカーソル１７４とが表示されるようになっている。
【００９６】
結像位置指定部１７２には、画像情報表示部１７１に表示されたカーソル１７４の位置を移動させる上方向キー１７５ａ、下方向キー１７５ｂ、左方向キー１７５ｃおよび右方向キー１７５ｄと、カーソル１７４の位置を決定する決定キー１７６と、補正マーカ１０６の点の番号ｎを表示する番号表示部１７７と、番号表示部１７７に表示された番号ｎを変更する加算キー１７８ａおよび減算キー１７８ｂとが設けられている。
【００９７】
補正量算出部１８０は、次の方法によって第２の光学系位置情報の補正量を算出するようになっている。
【００９８】
まず、第２の光学系位置情報の回転成分の誤差だけを第２の光学系位置情報の誤差として用い、筐体１１１が車両１０８に対して傾いた位置に設置されたものとする。このときのカメラ座標系１１３のｘ軸、ｙ軸、ｚ軸まわりの回転角をそれぞれθ、φ、ψ、画像座標系１１４における結像位置Ｐｎ’の座標を（ｐｎ’，ｑｎ’）、予測位置Ｐｎの座標を（ｐｎ，ｑｎ）と表すと、θ、φ、ψの値は、式（１）において、Ｊの値を最小にするＲ１１、Ｒ１２、Ｒ１３、Ｒ２１、Ｒ２２、Ｒ２３、Ｒ３１、Ｒ３２、Ｒ３３を求めることにより算出される。
【数１】
Figure 2004004043
なお、式（１）において、（ｐｎ’，ｑｎ’）と（ｐｎ，ｑｎ）との関係は、式（２）のように表される。
【数２】
Figure 2004004043
また、Ｒ１１からＲ３３とθ、φ、ψとの関係は、式（３）、式（４）、式（５）のように表される。
【数３】
Figure 2004004043
なお、本実施の形態では、補正マーカ１０６が６個の点によって構成されているが、補正マーカ１０６は２個以上の点によって構成されていればよく、補正量算出部１８０は、補正マーカ１０６が２個の点によって構成されていれば、θ、φ、ψの値を算出することができ、補正マーカ１０６が３個以上の点によって構成されていれば、θ、φ、ψの値をより正確に算出することができる。
【００９９】
このように構成されたカメラ補正装置１００は、図１１に示すように、カメラ１１０を調整するためのコンピュータ１９１、カメラ１１０を制御する撮像制御装置としてのＥＣＵ１９２などによって実現されている。
【０１００】
コンピュータ１９１は、ＣＰＵ、ＲＡＭ、ＲＯＭ、入出力インターフェイスなどによって構成されており、図１１（ａ）に示すように、第１の作業場所においてカメラ１１０に接続されるようになっている。なお、本実施の形態において、コンピュータ１９１は、上述した第１の筐体位置情報保持部１１５、第２の筐体位置情報保持部１１６、第１の光学系位置情報生成部１１７、第１の光学系位置情報保持部１１８、第２の光学系位置情報生成部１２０、校正マーカ位置情報保持部１２５、補正マーカ位置情報保持部１２６、第２の光学系位置情報保持部１３０、予測位置情報生成部１４０および予測位置情報保持部１５０を構成している。
【０１０１】
ＥＣＵ１９２は、ＣＰＵ、ＲＡＭ、ＲＯＭ、入出力インターフェイスなどによって構成されており、図１１（ｃ）に示すように、第２の作業場所においてカメラ１１０に接続され、車両１０８に搭載されるようになっている。なお、本実施の形態において、ＥＣＵ１９２は、上述した第２の光学系位置情報保持部１３０、予測位置情報保持部１５０および補正部１６０を構成している。
【０１０２】
第１の作業場所から第２の作業場所には、図１１（ｂ）に示すように、ＣＤ−ＲＯＭ、磁気ディスクなどの記録媒体１９３が添付されたカメラ１１０が搬送されるようになっている。記録媒体１９３には、第２の光学系位置情報および予測位置情報が記録されており、第２の光学系位置情報および予測位置情報をコンピュータ１９１からＥＣＵ１９２に移送するために用いられるようになっている。
【０１０３】
なお、本実施の形態では、第１の作業場所から第２の作業場所には、カメラ１１０および記録媒体１９３が搬送されるようになっているが、図１２に示すように、カメラ１１０、第２の光学系位置情報保持部１３０、予測位置情報保持部１５０および補正部１６０によって構成されたカメラユニット１９４が搬送されるように構成してもよい。
【０１０４】
次に、本実施の形態に係るカメラ補正装置の動作について説明する。
【０１０５】
図１３において、カメラ補正装置１００は、次の工程で第２の光学系位置情報を補正する。
【０１０６】
まず、カメラ１１０が、第１の作業場所に設置され、第１の座標系１０１に対して所定の位置に配置される（Ｓ１０１）。そして、第１の筐体位置情報、第２の筐体位置情報、校正マーカ位置情報および補正マーカ位置情報が、第１の筐体位置情報保持部１１５、第２の筐体位置情報保持部１１６、校正マーカ位置情報保持部１２５および補正マーカ位置情報保持部１２６にそれぞれ保持される（Ｓ１０２）。ここで、第１の筐体位置情報、第２の筐体位置情報、校正マーカ位置情報および補正マーカ位置情報は、測定器によって測定された位置、設計において設定された位置などを基にして取得される。
【０１０７】
次に、カメラ１１０によって校正マーカ１０５が撮影され（Ｓ１０３）、第１の光学系位置情報生成部１１７が、カメラ１１０によって取得された校正マーカ１０５の画像情報に基づいて、校正マーカ位置情報保持部１２５に保持された校正マーカ位置情報から、第１の光学系位置情報を生成する（Ｓ１０４）。そして、第１の光学系位置情報生成部１１７によって生成された第１の光学系位置情報が、第１の光学系位置情報保持部１１８に保持される（Ｓ１０５）。
【０１０８】
次に、第２の光学系位置情報生成部１２０が、第１の筐体位置情報保持部１１５に保持された第１の筐体位置情報および第１の光学系位置情報保持部１１８に保持された第１の光学系位置情報に基づいて、第２の筐体位置情報保持部１１６に保持された第２の筐体位置情報から、第２の光学系位置情報を生成する（Ｓ１０６）。そして、第２の光学系位置情報生成部１２０によって生成された第２の光学系位置情報が、第２の光学系位置情報保持部１３０に保持される（Ｓ１０７）。
【０１０９】
次に、予測位置情報生成部１４０が、第２の光学系位置情報生成部１２０によって生成された第２の光学系位置情報に基づいて、補正マーカ位置情報保持部１２６に保持された補正マーカ位置情報から、カメラ１１０の画像座標系１１４に対する補正マーカ１０６の予測位置情報を生成する（Ｓ１０８）。そして、予測位置情報生成部１４０によって生成された予測位置情報が、予測位置情報保持部１５０に保持される（Ｓ１０９）。
【０１１０】
次に、カメラ１１０および記録媒体１９３が、第１の作業場所から第２の作業場所に搬送される。そして、カメラ１１０が、第２の作業場所において車両１０８に設置され、第２の座標系１０２に対して所定の位置に配置される（Ｓ１１０）。
【０１１１】
次に、カメラ１１０によって補正マーカ１０６が撮影され（Ｓ１１１）、カメラ１１０によって取得された補正マーカ１０６の画像情報が、図１０に示すように、画像情報表示部１７１に表示される（Ｓ１１２）。そして、結像位置指定部１７２によって、補正マーカ１０６の結像位置Ｐｎ’が指定され、結像位置情報が抽出される（Ｓ１１３）。このとき、操作者は、加算キー１７８ａおよび減算キー１７８ｂを操作して番号表示部１７７に表示される番号ｎを変更し、上方向キー１７５ａ、下方向キー１７５ｂ、左方向キー１７５ｃおよび右方向キー１７５ｄを操作して画像情報表示部１７１に表示されるカーソル１７４の位置を移動させ、決定キー１７６を操作してカーソル１７４の位置を決定することにより、番号表示部１７７に表示された番号ｎに対応する補正マーカ１０６の結像位置Ｐｎ’を指定する。
【０１１２】
次に、補正量算出部１８０が、結像位置情報抽出部１７０によって抽出された結像位置情報および予測位置情報保持部１５０に保持された予測位置情報に基づいて、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報の補正量を算出する（Ｓ１１４）。
【０１１３】
そして、光学系位置情報補正部１９０が、補正量算出部１８０によって算出された補正量に基づいて、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報を補正して（Ｓ１１５）、工程を終了する。なお、本実施の形態では、上述したステップＳ１０１からＳ１１５を記述したプログラムをコンピュータに実行させてもよい。
【０１１４】
以上説明したように、本実施の形態においては、車両１０８などに設置されたカメラ１１０の光学系のパラメータを補正することができ、路面上の対象物の位置を正確に検出することができる。
【０１１５】
また、本実施の形態においては、簡単な補正マーカ１０６を利用して第２の光学系位置情報を補正することができる。
【０１１６】
また、本実施の形態においては、補正マーカ１０６の結像位置を指定することができ、補正マーカ１０６の結像位置情報を確実に抽出することができる。
（第２の実施の形態）
【０１１７】
図１４から図１６は、本発明に係るカメラ補正装置の第２の実施の形態を示す図である。
【０１１８】
まず、本実施の形態に係るカメラ補正装置の構成について説明する。なお、第１の実施の形態に係るカメラ補正装置の構成とほぼ同様な構成については、第１の実施の形態において使用した符号と同一の符号を付して、詳細な説明を省略する。
【０１１９】
図１４において、カメラ補正装置２００は、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報を補正する補正部２６０を備えている。
【０１２０】
補正部２６０は、カメラ１１０によって取得された補正マーカ１０６の画像情報および予測位置情報保持部１５０に保持された予測位置情報に基づいて、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報を補正するようになっている。
【０１２１】
補正部２６０は、カメラ１１０によって取得された補正マーカ１０６の画像情報から、カメラ１１０の画像座標系１１４に対する補正マーカ１０６の結像位置情報を抽出する結像位置情報抽出部２７０と、結像位置情報抽出部２７０によって抽出された結像位置情報および予測位置情報保持部１５０に保持された予測位置情報に基づいて、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報の補正量を算出する補正量算出部２８０と、補正量算出部２８０によって算出された補正量に基づいて、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報を補正する光学系位置情報補正部２９０とを有している。
【０１２２】
結像位置情報抽出部２７０は、カメラ１１０の画像座標系１１４に対する補正マーカ１０６の予測範囲２７４を示す予測範囲情報（図１５参照）を保持する予測範囲情報保持部２７１と、予測範囲情報保持部２７１に保持された予測範囲情報および予測位置情報保持部１５０に保持された予測位置情報に基づいて、カメラ１１０によって取得された補正マーカ１０６の画像情報から補正マーカ１０６の結像位置Ｐｎ’を検索し、結像位置情報を抽出する結像位置検索部２７２とを有している。
【０１２３】
補正量算出部２８０は、第１の実施の形態における補正量算出部１８０と同様の方法によって第２の光学系位置情報の補正量を算出するようになっている。
【０１２４】
次に、本実施の形態に係るカメラ補正装置の動作について説明する。
【０１２５】
図１６において、カメラ補正装置２００は、次の工程で第２の光学系位置情報を補正する。
【０１２６】
まず、カメラ１１０が、第１の作業場所に設置され、第１の座標系１０１に対して所定の位置に配置される（Ｓ２０１）。そして、第１の筐体位置情報、第２の筐体位置情報、校正マーカ位置情報および補正マーカ位置情報が、第１の筐体位置情報保持部１１５、第２の筐体位置情報保持部１１６、校正マーカ位置情報保持部１２５および補正マーカ位置情報保持部１２６にそれぞれ保持される（Ｓ２０２）。ここで、第１の筐体位置情報、第２の筐体位置情報、校正マーカ位置情報および補正マーカ位置情報は、測定器によって測定された位置、設計において設定された位置などを基にして取得される。
【０１２７】
次に、カメラ１１０によって校正マーカ１０５が撮影され（Ｓ２０３）、第１の光学系位置情報生成部１１７が、カメラ１１０によって取得された校正マーカ１０５の画像情報に基づいて、校正マーカ位置情報保持部１２５に保持された校正マーカ位置情報から、第１の光学系位置情報を生成する（Ｓ２０４）。そして、第１の光学系位置情報生成部１１７によって生成された第１の光学系位置情報が、第１の光学系位置情報保持部１１８に保持される（Ｓ２０５）。
【０１２８】
次に、第２の光学系位置情報生成部１２０が、第１の筐体位置情報保持部１１５に保持された第１の筐体位置情報および第１の光学系位置情報保持部１１８に保持された第１の光学系位置情報に基づいて、第２の筐体位置情報保持部１１６に保持された第２の筐体位置情報から、第２の光学系位置情報を生成する（Ｓ２０６）。そして、第２の光学系位置情報生成部１２０によって生成された第２の光学系位置情報が、第２の光学系位置情報保持部１３０に保持される（Ｓ２０７）。
【０１２９】
次に、予測位置情報生成部１４０が、第２の光学系位置情報生成部１２０によって生成された第２の光学系位置情報に基づいて、補正マーカ位置情報保持部１２６に保持された補正マーカ位置情報から、カメラ１１０の画像座標系１１４に対する補正マーカ１０６の予測位置情報を生成する（Ｓ２０８）。そして、予測位置情報生成部１４０によって生成された予測位置情報が、予測位置情報保持部１５０に保持される（Ｓ２０９）。
【０１３０】
次に、カメラ１１０および記録媒体１９３が、第１の作業場所から第２の作業場所に搬送される。そして、カメラ１１０が、第２の作業場所において車両１０８に設置され、第２の座標系１０２に対して所定の位置に配置される（Ｓ２１０）。
【０１３１】
次に、カメラ１１０によって補正マーカ１０６が撮影され（Ｓ２１１）、結像位置検索部２７２が、図１５に示すように、補正マーカ１０６の予測位置Ｐｎを中心として予測範囲２７４の内側に存在する結像位置Ｐｎ’を検索し、画像情報から結像位置情報を抽出する（Ｓ２１２）。
【０１３２】
次に、補正量算出部２８０が、結像位置情報抽出部２７０によって抽出された結像位置情報および予測位置情報保持部１５０に保持された予測位置情報に基づいて、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報の補正量を算出する（Ｓ２１３）。
【０１３３】
そして、光学系位置情報補正部２９０が、補正量算出部２８０によって算出された補正量に基づいて、第２の光学系位置情報保持部１３０に保持された第２の光学系位置情報を補正して（Ｓ２１４）、工程を終了する。なお、本実施の形態では、上述したステップＳ２０１からＳ２１４を記述したプログラムをコンピュータに実行させてもよい。
【０１３４】
以上説明したように、本実施の形態においては、補正マーカ１０６の結像位置を検索することができ、補正マーカ１０６の結像位置情報を容易に抽出することができる。
（第３の実施の形態）
【０１３５】
図１７から図２８は、本発明に係るカメラ補正装置の第３の実施の形態を示す図である。
【０１３６】
まず、本実施の形態に係るカメラ補正装置の構成について説明する。
【０１３７】
図１７から図１９において、カメラ補正装置３００は、撮像装置としてのカメラ３１０に接続されるようになっている。カメラ３１０は、筐体３１１と筐体３１１に支持された光学系３１２とを有しており、光学系３１２を介して画像情報を取得するようになっている。
【０１３８】
カメラ補正装置３００は、第１の座標系３０１に対する筐体３１１の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持部３１５と、第２の座標系３０２に対する筐体３１１の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持部３１６と、第１の座標系３０１に対する校正マーカ３０５の位置を示す校正マーカ位置情報を保持する校正マーカ位置情報保持部３２５とを備えている。
【０１３９】
第１の座標系３０１は、カメラ生産工場などの第１の作業場所に設けられている。第１の座標系３０１には、Ｘ１軸、Ｙ１軸、Ｚ１軸が設けられ、第１の作業場所に設置されたカメラ３１０の校正を行うための校正マーカ３０５が配置されている。校正マーカ３０５は、３次元に配列された複数の点によって構成されており、それぞれの点は、第１の座標系３０１に対して所定の位置に配置されている。また、校正マーカ３０５は、第１の作業場所に設置されたカメラ３１０の視野範囲を覆うように配置されている。
【０１４０】
第２の座標系３０２は、車両生産工場などの第２の作業場所に設けられている。第２の座標系３０２には、Ｘ２軸、Ｙ２軸、Ｚ２軸が設けられ、第２の座標系３０２のＸ２Ｙ２平面は、車両３０８が走行する路面３０２ａを構成している。車両３０８のバンパー部３０９には、分割マーカ３０７が配置されている。分割マーカ３０７は、２個の点によって構成されており、それぞれの点は、車両３０８に設置されたカメラ３１０の視野範囲内に配置されている。また、分割マーカ３０７は、車両３０８に設置されたカメラ３１０の真下位置に設けられている。
【０１４１】
カメラ補正装置３００は、第１の作業場所においてカメラ３１０の校正を行うようになっている。カメラ３１０は、第１の座標系３０１に対して所定の位置に配置されており、このときの筐体３１１の位置を示す第１の筐体位置情報が、第１の筐体位置情報保持部３１５に保持されるようになっている。ここで、カメラ３１０の校正とは、カメラ３１０が第２の作業場所において車両３０８に設置されたときの光学系３１２の位置を算出する動作である。
【０１４２】
カメラ補正装置３００によって校正されたカメラ３１０は、第２の作業場所において車両３０８に設置されるようになっている。カメラ３１０は、第２の座標系３０２に対して所定の位置に配置されており、このときの筐体３１１の位置を示す第２の筐体位置情報が、第２の筐体位置情報保持部３１６に保持されるようになっている。ここで、第２の筐体位置情報は、筐体３１１が車両３０８に対して正確な位置に設置された場合の筐体３１１の位置を示している。
【０１４３】
車両３０８のバンパー部３０９に配置された分割マーカ３０７は、第２の筐体位置情報に含まれる筐体３１１の位置に対して一定の位置関係を保つように配置されている。したがって、車両３０８が路面３０２ａ上を走行した場合でも、分割マーカ３０７の位置と第２の筐体位置情報に含まれる筐体３１１の位置との相対関係は一定である。
【０１４４】
また、カメラ補正装置３００は、第１の座標系３０１に対する光学系３１２の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成部３１７と、第１の光学系位置情報生成部３１７によって生成された第１の光学系位置情報を保持する第１の光学系位置情報保持部３１８とを備えている。
【０１４５】
第１の光学系位置情報生成部３１７は、カメラ３１０によって取得された校正マーカ３０５の画像情報に基づいて、校正マーカ位置情報保持部３２５に保持された校正マーカ位置情報から、第１の座標系３０１に対する光学系３１２の位置を算出するようになっている。ここで、光学系３１２の位置とは、光学系３１２の光学中心および光軸の位置を含むものである。第１の座標系３０１に対する光学系３１２の位置を算出する方法としては、文献１に記載された方法を用いることができる。
【０１４６】
また、カメラ補正装置３００は、第２の座標系３０２に対する光学系３１２の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成部３２０と、第２の光学系位置情報生成部３２０によって生成された第２の光学系位置情報を保持する第２の光学系位置情報保持部３３０とを備えている。
【０１４７】
第２の光学系位置情報生成部３２０は、第１の筐体位置情報保持部３１５に保持された第１の筐体位置情報および第１の光学系位置情報保持部３１８に保持された第１の光学系位置情報に基づいて、第２の筐体位置情報保持部３１６に保持された第２の筐体位置情報から、第２の座標系３０２に対する光学系３１２の位置を算出するようになっている。
【０１４８】
第２の光学系位置情報生成部３２０は、第１の実施の形態における第２の光学系位置情報生成部１２０と同様の方法によって第２の座標系３０２に対する光学系３１２の位置を算出するようになっている。
【０１４９】
第２の作業場所において車両３０８に設置されたカメラ３１０には、図２０に示すように、第２の光学系位置情報を基準とするカメラ座標系３１３が構成されている。カメラ座標系３１３には、ｘ軸、ｙ軸、ｚ軸が設けられ、カメラ座標系３１３の原点は、光学系３１２の光学中心と一致するようになっている。カメラ座標系３１３のｘ軸は、カメラ３１０の左右方向に設けられ、カメラ座標系３１３のｙ軸は、カメラ３１０の上下方向に設けられ、カメラ座標系３１３のｚ軸は、光学系３１２の光軸と一致するように設けられている。
【０１５０】
また、カメラ座標系３１３の原点からｚ軸方向に焦点距離ｆだけ離隔した平面には、画像座標系３１４が構成されている。画像座標系３１４には、ｐ軸、ｑ軸が設けられている。路面３０２ａ上の点Ｐは、光学系３１２を介して画像座標系３１４の結像位置Ｐ’に結像するようになっている。カメラ３１０は、光学系３１２を介して画像座標系３１４に結像した画像を画像情報として取得するようになっている。
【０１５１】
また、カメラ補正装置３００は、カメラ３１０によって取得された第２の座標系３０２における画像情報に含まれる動きベクトルに基づいて、第２の光学系位置情報保持部３３０に保持された第２の光学系位置情報を補正する補正部３６０を備えている。
【０１５２】
補正部３６０は、カメラ３１０によって取得された第２の座標系３０２における画像情報から平面投影画像を生成する平面投影画像生成部３６１と、平面投影画像生成部３６１によって生成された平面投影画像を複数の画像領域に分割する平面投影画像分割部３６２と、平面投影画像分割部３６２によって分割された複数の画像領域から動きベクトルを抽出する動きベクトル抽出部３６３と、動きベクトル抽出部３６３によって抽出された動きベクトルに基づいて、第２の光学系位置情報保持部３３０に保持された第２の光学系位置情報の補正量を算出する補正量算出部３６４と、補正量算出部３６４によって算出された補正量に基づいて、第２の光学系位置情報保持部３３０に保持された第２の光学系位置情報を補正する光学系位置情報補正部３６５とを有している。
【０１５３】
平面投影画像生成部３６１によって生成される平面投影画像は、図２１に示すように、カメラ３１０によって取得された画像情報を路面３０２ａに仮想的に投影し、この画像を仮想カメラ３７０から見ることによって取得される画像である。この仮想カメラ３７０には、路面３０２ａに対して平行な画像座標系３７１が構成されており、この画像座標系３７１には、路面３０２ａを単に縮小した画像としての平面投影画像が結像するようになっている。
【０１５４】
平面投影画像生成部３６１は、次の方法によって平面投影画像を生成するようになっている。
【０１５５】
図２０において、カメラ座標系３１３のｘ軸と路面３０２ａのなす角をα、ｙ軸と路面３０２ａのなす角をβと表し、カメラ座標系３１３の原点からｚ軸の延長線と路面３０２ａとの交点までの距離をｃと表す。そして、式（６）のようにａ、ｂを定義すると、第２の座標系３０２のＸ２Ｙ２平面としての路面３０２ａは、式（７）のように表される。
【数４】
Figure 2004004043
ここで、画像座標系３１４の結像位置Ｐ’の座標を（ｐ，ｑ）と表すと、画像座標系３１４からカメラ座標系３１３への変換は、式（８）のように表される。
【数５】
Figure 2004004043
また、カメラ座標系３１３から第２の座標系３０２への変換は、式（９）のように表される。
【数６】
Figure 2004004043
なお、式（９）において、平行移動ベクトルＴは、カメラ座標系３１３の原点から第２の座標系３０２の原点までの方向および距離を表し、回転行列Ｒは、カメラ座標系３１３と第２の座標系３０２との回転方向のずれを表している。本実施の形態においても第１の実施の形態と同様に、第２の光学系位置情報の回転成分の誤差だけを第２の光学系位置情報の誤差として用い、筐体３１１が車両３０８に対して傾いた位置に設置されたものとする。このときのカメラ座標系３１３のｘ軸、ｙ軸、ｚ軸まわりの回転角をそれぞれθ、φ、ψと表すと、式（９）における回転行列Ｒは、式（３）から式（５）によって表される。
【０１５６】
筐体３１１が車両３０８に対して正確な位置に設置された場合、平面投影画像生成部３６１は、図２２（ａ）に示す画像情報から、図２２（ｂ）に示す平面投影画像を生成するようになっている。この平面投影画像は、路面３０２ａに対して平行に設けられた仮想カメラ３７０から見ることによって取得される画像に相当しているので、路面３０２ａに設けられた平行線３７３、３７４が、平面投影画像において平行になっている。
【０１５７】
また、筐体３１１が車両３０８に対して下向きに傾いた位置に設置され、カメラ座標系３１３がｘ軸まわりに回転した場合、平面投影画像生成部３６１は、図２３（ａ）に示す画像情報から、図２３（ｂ）に示す平面投影画像を生成するようになっている。
【０１５８】
また、筐体３１１が車両３０８に対して左向きに傾いた位置に設置され、カメラ座標系３１３がｙ軸まわりに回転した場合、平面投影画像生成部３６１は、図２４（ａ）に示す画像情報から、図２４（ｂ）に示す平面投影画像を生成するようになっている。
【０１５９】
また、筐体３１１が車両３０８に対して傾いた位置に設置され、カメラ座標系３１３がｚ軸まわりに回転した場合、平面投影画像生成部３６１は、図２５（ａ）に示す画像情報から、図２５（ｂ）に示す平面投影画像を生成するようになっている。
【０１６０】
平面投影画像分割部３６２は、図２２（ｂ）、図２３（ｂ）、図２４（ｂ）および図２５（ｂ）に示すように、カメラ３１０によって取得された分割マーカ３０７の画像情報に基づいて、平面投影画像を複数の画像領域に分割するようになっている。
【０１６１】
平面投影画像分割部３６２は、分割マーカ３０７を通る基準線３８０および分割マーカ３０７の中点３８１を基準にして、平面投影画像に分割線３８３、３８４を設けるようになっている。分割線３８３は、基準線３８０に直行し、中点３８１を通る位置に設けられている。また、分割線３８４は、基準線３８０に平行で、基準線３８０から一定の距離だけ離隔する位置に設けられている。
【０１６２】
筐体３１１が車両３０８に対して傾いた位置に設置され、カメラ座標系３１３がｚ軸まわりに回転した場合、図２５（ｂ）に示すように、基準線３８０は、平面投影画像に対して傾いている。
【０１６３】
動きベクトル抽出部３６３は、図２２（ｂ）、図２３（ｂ）、図２４（ｂ）および図２５（ｂ）に示すように、平面投影画像分割部３６２によって分割された４つの画像領域３８６ａ、３８６ｂ、３８６ｃ、３８６ｄから動きベクトル３８８ａ、３８８ｂ、３８８ｃ、３８８ｄを抽出するようになっている。
【０１６４】
動きベクトル３８８ａから３８８ｄは、車両３０８の走行、即ち、カメラ３１０の移動によって生じる画像領域３８６ａから３８６ｄの部分的な画像の流れに基づいて算出されるもので、車両３０８が直進している場合に方向が等しくなる。以下、動きベクトル３８８ａから３８８ｄは、車両３０８が直進しているときに取得される画像情報から抽出されるものとする。
【０１６５】
筐体３１１が車両３０８に対して正確な位置に設置された場合、図２２（ｂ）に示すように、動きベクトル３８８ａから３８８ｄは、大きさが等しくなる。
【０１６６】
また、筐体３１１が車両３０８に対して下向きに傾いた位置に設置され、カメラ座標系３１３がｘ軸まわりに回転した場合、図２３（ｂ）に示すように、画像上側の動きベクトル３８８ａ、３８８ｂが、画像下側の動きベクトル３８８ｃ、３８８ｄよりも大きくなる。
【０１６７】
また、筐体３１１が車両３０８に対して左向きに傾いた位置に設置され、カメラ座標系３１３がｙ軸まわりに回転した場合、図２４（ｂ）に示すように、画像右側の動きベクトル３８８ｂ、３８８ｄが、画像左側の動きベクトル３８８ａ、３８８ｃよりも大きくなる。
【０１６８】
補正量算出部３６４は、次の方法によって第２の光学系位置情報の補正量を算出するようになっている。
【０１６９】
図２２（ｃ）、図２３（ｃ）および図２４（ｃ）において、まず、動きベクトル３８８ａに大きさが等しいベクトル３９０ａと、動きベクトル３８８ｂに大きさが等しいベクトル３９０ｂと、動きベクトル３８８ｃに大きさが等しいベクトル３９０ｃと、動きベクトル３８８ｄに大きさが等しいベクトル３９０ｄとを、合計ベクトル算出座標系３９１にそれぞれ配置する。
【０１７０】
ここで、ベクトル３９０ａは、合計ベクトル算出座標系３９１の原点から左上４５度方向に配置されている。また、ベクトル３９０ｂは、合計ベクトル算出座標系３９１の原点から右上４５度方向に配置されている。また、ベクトル３９０ｃは、合計ベクトル算出座標系３９１の原点から左下４５度方向に配置されている。また、ベクトル３９０ｄは、合計ベクトル算出座標系３９１の原点から右下４５度方向に配置されている。
【０１７１】
次に、合計ベクトル算出座標系３９１において、ベクトル３９０ａから３９０ｄの合計ベクトル３９２を算出する。
【０１７２】
筐体３１１が車両３０８に対して正確な位置に設置された場合、図２２（ｃ）に示すように、ベクトル３９０ａから３９０ｄの大きさが等しいので、合計ベクトル３９２は０になる。このとき、カメラ座標系３１３のｘ軸、ｙ軸、ｚ軸まわりの回転角θ、φ、ψの値は０である。
【０１７３】
また、筐体３１１が車両３０８に対して下向きに傾いた位置に設置され、カメラ座標系３１３がｘ軸まわりに回転した場合、図２３（ｃ）に示すように、ベクトル３９０ａ、３９０ｂが、ベクトル３９０ｃ、３９０ｄよりも大きいので、合計ベクトル３９２は上向きのベクトルになる。このとき、式（９）において、合計ベクトル３９２を０にする回転行列Ｒを求めることにより、カメラ座標系３１３のｘ軸まわりの回転角θの値を算出する。
【０１７４】
また、筐体３１１が車両３０８に対して左向きに傾いた位置に設置され、カメラ座標系３１３がｙ軸まわりに回転した場合、図２４（ｃ）に示すように、ベクトル３９０ｂ、３９０ｄが、ベクトル３９０ａ、３９０ｃよりも大きいので、合計ベクトル３９２は右向きのベクトルになる。このとき、式（９）において、合計ベクトル３９２を０にする回転行列Ｒを求めることにより、カメラ座標系３１３のｙ軸まわりの回転角φの値を算出する。
【０１７５】
一方、筐体３１１が車両３０８に対して傾いた位置に設置され、カメラ座標系３１３がｚ軸まわりに回転した場合、図２５（ｂ）に示す平面投影画像の画像座標系３７１に対する基準線３８０の傾きに基づいて、カメラ座標系３１３のｚ軸まわりの回転角ψの値を算出する。
【０１７６】
このように構成されたカメラ補正装置１００は、図２６に示すように、カメラ３１０を調整するためのコンピュータ３９１、カメラ３１０を制御する撮像制御装置としてのＥＣＵ３９２などによって実現されている。
【０１７７】
コンピュータ３９１は、ＣＰＵ、ＲＡＭ、ＲＯＭ、入出力インターフェイスなどによって構成されており、図２６（ａ）に示すように、第１の作業場所においてカメラ３１０に接続されるようになっている。なお、本実施の形態において、コンピュータ３９１は、上述した第１の筐体位置情報保持部３１５、第２の筐体位置情報保持部３１６、第１の光学系位置情報生成部３１７、第１の光学系位置情報保持部３１８、第２の光学系位置情報生成部３２０、校正マーカ位置情報保持部３２５および第２の光学系位置情報保持部３３０を構成している。
【０１７８】
ＥＣＵ３９２は、ＣＰＵ、ＲＡＭ、ＲＯＭ、入出力インターフェイスなどによって構成されており、図２６（ｃ）に示すように、第２の作業場所においてカメラ３１０に接続され、車両３０８に搭載されるようになっている。なお、本実施の形態において、ＥＣＵ３９２は、上述した第２の光学系位置情報保持部３３０および補正部３６０を構成している。
【０１７９】
第１の作業場所から第２の作業場所には、図２６（ｂ）に示すように、ＣＤ−ＲＯＭ、磁気ディスクなどの記録媒体３９３が添付されたカメラ３１０が搬送されるようになっている。記録媒体３９３には、第２の光学系位置情報が記録されており、第２の光学系位置情報をコンピュータ３９１からＥＣＵ３９２に移送するために用いられるようになっている。
【０１８０】
なお、本実施の形態では、第１の作業場所から第２の作業場所には、カメラ３１０および記録媒体３９３が搬送されるようになっているが、図２７に示すように、カメラ３１０、第２の光学系位置情報保持部３３０および補正部３６０によって構成されたカメラユニット３９４が搬送されるように構成してもよい。
【０１８１】
次に、本実施の形態に係るカメラ補正装置の動作について説明する。
【０１８２】
図２８において、カメラ補正装置３００は、次の工程で第２の光学系位置情報を補正する。
【０１８３】
まず、カメラ３１０が、第１の作業場所に設置され、第１の座標系３０１に対して所定の位置に配置される（Ｓ３０１）。そして、第１の筐体位置情報、第２の筐体位置情報および校正マーカ位置情報が、第１の筐体位置情報保持部３１５、第２の筐体位置情報保持部３１６および校正マーカ位置情報保持部３２５にそれぞれ保持される（Ｓ３０２）。ここで、第１の筐体位置情報、第２の筐体位置情報および校正マーカ位置情報は、測定器によって測定された位置、設計において設定された位置などを基にして取得される。
【０１８４】
次に、カメラ３１０によって校正マーカ３０５が撮影され（Ｓ３０３）、第１の光学系位置情報生成部３１７が、カメラ３１０によって取得された校正マーカ３０５の画像情報に基づいて、校正マーカ位置情報保持部３２５に保持された校正マーカ位置情報から、第１の光学系位置情報を生成する（Ｓ３０４）。そして、第１の光学系位置情報生成部３１７によって生成された第１の光学系位置情報が、第１の光学系位置情報保持部３１８に保持される（Ｓ３０５）。
【０１８５】
次に、第２の光学系位置情報生成部３２０が、第１の筐体位置情報保持部３１５に保持された第１の筐体位置情報および第１の光学系位置情報保持部３１８に保持された第１の光学系位置情報に基づいて、第２の筐体位置情報保持部３１６に保持された第２の筐体位置情報から、第２の光学系位置情報を生成する（Ｓ３０６）。そして、第２の光学系位置情報生成部３２０によって生成された第２の光学系位置情報が、第２の光学系位置情報保持部３３０に保持される（Ｓ３０７）。
【０１８６】
次に、カメラ３１０および記録媒体３９３が、第１の作業場所から第２の作業場所に搬送される。そして、カメラ３１０が、第２の作業場所において車両３０８に設置され、第２の座標系３０２に対して所定の位置に配置される（Ｓ３０８）。
【０１８７】
次に、カメラ３１０によって路面３０２ａが撮影され（Ｓ３０９）、平面投影画像生成部３６１が、図２２（ｂ）、図２３（ｂ）、図２４（ｂ）および図２５（ｂ）に示すように、カメラ３１０によって取得された第２の座標系３０２における画像情報から平面投影画像を生成する（Ｓ３１０）。
【０１８８】
次に、平面投影画像分割部３６２が、図２２（ｂ）、図２３（ｂ）、図２４（ｂ）および図２５（ｂ）に示すように、平面投影画像生成部３６１によって生成された平面投影画像を画像領域３８６ａから３８６ｄに分割する（Ｓ３１１）。
【０１８９】
次に、動きベクトル抽出部３６３が、図２２（ｂ）、図２３（ｂ）、図２４（ｂ）および図２５（ｂ）に示すように、平面投影画像分割部３６２によって分割された各画像領域から各動きベクトルを抽出する（Ｓ３１２）。
【０１９０】
次に、補正量算出部３６４が、図２５（ｂ）に示すように、平面投影画像の画像座標系３７１に対する基準線３８０の傾きに基づいて、第２の光学系位置情報保持部３３０に保持された第２の光学系位置情報のｚ軸まわりの補正量を算出する（Ｓ３１３）。そして、補正量算出部３６４が、図２２（ｃ）、図２３（ｃ）および図２４（ｃ）に示すように、動きベクトル抽出部３６３によって抽出された各動きベクトルに基づいて、第２の光学系位置情報保持部３３０に保持された第２の光学系位置情報のｘ軸、ｙ軸まわりの補正量を算出する（Ｓ３１４）。
【０１９１】
そして、光学系位置情報補正部３６５が、補正量算出部３６４によって算出された補正量に基づいて、第２の光学系位置情報保持部３３０に保持された第２の光学系位置情報を補正して（Ｓ３１５）、工程を終了する。なお、本実施の形態では、上述したステップＳ３０１からＳ３１５を記述したプログラムをコンピュータに実行させてもよい。
【０１９２】
以上説明したように、本実施の形態においては、動きベクトル３８８ａから３８８ｄを利用して第２の光学系位置情報を補正することができる。
【０１９３】
また、本実施の形態においては、画像領域３８６ａから３８６ｄにおける動きベクトル３８８ａから３８８ｄを容易に抽出することができる。
【０１９４】
また、本実施の形態においては、分割マーカ３０７を利用して平面投影画像を正確に分割することができる。
（第４の実施の形態）
【０１９５】
図２９から図３８は、本発明に係るカメラ補正装置の第４の実施の形態を示す図である。
【０１９６】
まず、本実施の形態に係るカメラ補正装置の構成について説明する。
【０１９７】
図２９から図３１において、カメラ補正装置４００は、撮像装置としてのカメラ４１０に接続されるようになっている。カメラ４１０は、筐体４１１と筐体４１１に支持された光学系４１２とを有しており、光学系４１２を介して画像情報を取得するようになっている。
【０１９８】
カメラ補正装置４００は、第１の座標系４０１に対する筐体４１１の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持部４１５と、第２の座標系４０２に対する筐体４１１の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持部４１６と、第１の座標系４０１に対する校正マーカ４０５の位置を示す校正マーカ位置情報を保持する校正マーカ位置情報保持部４２５と、第２の座標系４０２に対する車両４０８の一部、例えば、車体の後部に設けられたバンパー部４０９の位置を示す車体位置情報を保持する車体位置情報保持部４２６とを備えている。
【０１９９】
第１の座標系４０１は、カメラ生産工場などの第１の作業場所に設けられている。第１の座標系４０１には、Ｘ１軸、Ｙ１軸、Ｚ１軸が設けられ、第１の作業場所に設置されたカメラ４１０の校正を行うための校正マーカ４０５が配置されている。校正マーカ４０５は、３次元に配列された複数の点によって構成されており、それぞれの点は、第１の座標系４０１に対して所定の位置に配置されている。また、校正マーカ４０５は、第１の作業場所に設置されたカメラ４１０の視野範囲を覆うように配置されている。
【０２００】
第２の座標系４０２は、車両生産工場などの第２の作業場所に設けられている。第２の座標系４０２には、Ｘ２軸、Ｙ２軸、Ｚ２軸が設けられ、第２の座標系４０２のＸ２Ｙ２平面は、車両４０８が設置される路面４０２ａを構成している。路面４０２ａには、補正板４０６が配置されている。補正板４０６は、単一色であって、明度、色度、彩度が車両４０８の色と異なる色に塗装されており、車両４０８の下に敷設されている。
【０２０１】
カメラ補正装置４００は、第１の作業場所においてカメラ４１０の校正を行うようになっている。カメラ４１０は、第１の座標系４０１に対して所定の位置に配置されており、このときの筐体４１１の位置を示す第１の筐体位置情報が、第１の筐体位置情報保持部４１５に保持されるようになっている。ここで、カメラ４１０の校正とは、カメラ４１０が第２の作業場所において車両４０８に設置されたときの光学系４１２の位置を算出する動作である。
【０２０２】
カメラ補正装置４００によって校正されたカメラ４１０は、第２の作業場所において車両４０８に設置されるようになっている。カメラ４１０は、第２の座標系４０２に対して所定の位置に配置されており、このときの筐体４１１の位置を示す第２の筐体位置情報が、第２の筐体位置情報保持部４１６に保持されるようになっている。ここで、第２の筐体位置情報は、筐体４１１が車両４０８に対して正確な位置に設置された場合の筐体４１１の位置を示している。
【０２０３】
また、カメラ補正装置４００は、第１の座標系４０１に対する光学系４１２の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成部４１７と、第１の光学系位置情報生成部４１７によって生成された第１の光学系位置情報を保持する第１の光学系位置情報保持部４１８とを備えている。
【０２０４】
第１の光学系位置情報生成部４１７は、カメラ４１０によって取得された校正マーカ４０５の画像情報に基づいて、校正マーカ位置情報保持部４２５に保持された校正マーカ位置情報から、第１の座標系４０１に対する光学系４１２の位置を算出するようになっている。ここで、光学系４１２の位置とは、光学系４１２の光学中心および光軸の位置を含むものである。第１の座標系４０１に対する光学系４１２の位置を算出する方法としては、文献１に記載された方法を用いることができる。
【０２０５】
また、カメラ補正装置４００は、第２の座標系４０２に対する光学系４１２の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成部４２０と、第２の光学系位置情報生成部４２０によって生成された第２の光学系位置情報を保持する第２の光学系位置情報保持部４３０とを備えている。
【０２０６】
第２の光学系位置情報生成部４２０は、第１の筐体位置情報保持部４１５に保持された第１の筐体位置情報および第１の光学系位置情報保持部４１８に保持された第１の光学系位置情報に基づいて、第２の筐体位置情報保持部４１６に保持された第２の筐体位置情報から、第２の座標系４０２に対する光学系４１２の位置を算出するようになっている。
【０２０７】
第２の光学系位置情報生成部４２０は、第１の実施の形態における第２の光学系位置情報生成部１２０と同様の方法によって第２の座標系４０２に対する光学系４１２の位置を算出するようになっている。
【０２０８】
第２の作業場所において車両４０８に設置されたカメラ４１０には、図３２に示すように、第２の光学系位置情報を基準とするカメラ座標系４１３が構成されている。カメラ座標系４１３には、ｘ軸、ｙ軸、ｚ軸が設けられ、カメラ座標系４１３の原点は、光学系４１２の光学中心と一致するようになっている。カメラ座標系４１３のｘ軸は、カメラ４１０の左右方向に設けられ、カメラ座標系４１３のｙ軸は、カメラ４１０の上下方向に設けられ、カメラ座標系４１３のｚ軸は、光学系４１２の光軸と一致するように設けられている。
【０２０９】
また、カメラ座標系４１３の原点からｚ軸方向に焦点距離ｆだけ離隔した平面には、画像座標系４１４が構成されている。画像座標系４１４には、ｐ軸、ｑ軸が設けられている。路面４０２ａ上の点Ｐは、光学系４１２を介して画像座標系４１４の結像位置Ｐ’に結像するようになっている。カメラ４１０は、光学系４１２を介して画像座標系４１４に結像した画像を画像情報として取得するようになっている。
【０２１０】
また、カメラ補正装置４００は、カメラ４１０の画像座標系４１４に対するバンパー部４０９の予測位置情報を生成する予測位置情報生成部４４０と、予測位置情報生成部４４０によって生成された予測位置情報を保持する予測位置情報保持部４５０とを備えている。
【０２１１】
予測位置情報生成部４４０は、第２の光学系位置情報生成部４２０によって生成された第２の光学系位置情報に基づいて、車体位置情報保持部４２６に保持された車体位置情報から、カメラ４１０の画像座標系４１４に対するバンパー部４０９の予測位置を算出するようになっている。カメラ４１０の画像座標系４１４に対するバンパー部４０９の予測位置を算出する方法としては、上記の文献１に記載された方法を用いることができる。
【０２１２】
第２の座標系１０２に設置された車両４０８のバンパー部４０９は、図３３に示すように、光学系４１２を介して画像座標系４１４の結像位置Ｐ’に結像するようになっている。ここで、結像位置Ｐ’は、筐体４１１が車両４０８に対して正確な位置、即ち、第２の筐体位置情報に含まれる位置に設置され、第２の光学系位置情報に誤差が生じていない場合、予測位置情報生成部４４０によって算出された予測位置Ｐと一致するようになっている。しかしながら、実際には、筐体４１１が車両４０８に対して不正確な位置に設置され、第２の光学系位置情報に誤差が生じることにより、画像座標系４１４における結像位置Ｐ’は、予測位置Ｐから離隔している。
【０２１３】
このような第２の光学系位置情報の誤差を補正するため、カメラ補正装置４００は、第２の光学系位置情報保持部４３０に保持された第２の光学系位置情報を補正する補正部４６０を備えている。
【０２１４】
補正部４６０は、カメラ４１０によって取得されたバンパー部４０９の画像情報および予測位置情報保持部４５０に保持された予測位置情報に基づいて、第２の光学系位置情報保持部４３０に保持された第２の光学系位置情報を補正するようになっている。
【０２１５】
補正部４６０は、カメラ４１０によって取得されたバンパー部４０９の画像情報から、カメラ４１０の画像座標系４１４に対するバンパー部４０９の結像位置情報を抽出する結像位置情報抽出部４７０と、結像位置情報抽出部４７０によって抽出された結像位置情報および予測位置情報保持部４５０に保持された予測位置情報に基づいて、第２の光学系位置情報保持部４３０に保持された第２の光学系位置情報の補正量を算出する補正量算出部４８０と、補正量算出部４８０によって算出された補正量に基づいて、第２の光学系位置情報保持部４３０に保持された第２の光学系位置情報を補正する光学系位置情報補正部４９０とを有している。
【０２１６】
補正量算出部４８０は、結像位置情報に含まれるバンパー部４０９の輪郭線と予測位置情報に含まれるバンパー部４０９の輪郭線とを重ね合わせるマッチング部４８１と、マッチング部４８１によって重ね合わされたバンパー部４０９の輪郭線から複数の点、例えば、両端の点を抽出する抽出部４８２と、結像位置情報に含まれる点と予測位置情報に含まれる点とを比較することにより第２の光学系位置情報の補正量を算出する演算部４８３とを有している。
【０２１７】
マッチング部４８１は、予測位置情報に含まれるバンパー部４０９の輪郭線Ｐ（図３４（ａ）参照）に対して、結像位置情報に含まれるバンパー部４０９の輪郭線Ｐ’（図３４（ｂ）参照）を、移動させたり回転させたりすることにより、重ね合わせるようになっている（図３４（ｃ）参照）。
【０２１８】
抽出部４８２は、図３５（ａ）に示すように、マッチング部４８１によって重ね合わされたバンパー部４０９の輪郭線Ｐ、Ｐ’から、輪郭線Ｐ、Ｐ’が重なった部分の両端の点（Ｐ１，Ｐ２）、（Ｐ１’，Ｐ２’）を抽出するようになっている。
【０２１９】
演算部４８３は、予測位置情報に含まれる点（Ｐ１，Ｐ２）（図３５（ｂ）参照）と、結像位置情報に含まれる点（Ｐ１’，Ｐ２’）（図３５（ｃ）参照）とを比較することにより、第１の実施の形態における補正量算出部１８０と同様の方法によって第２の光学系位置情報の補正量を算出するようになっている。
【０２２０】
このように構成されたカメラ補正装置４００は、図３６に示すように、カメラ４１０を調整するためのコンピュータ４９１、カメラ４１０を制御する撮像制御装置としてのＥＣＵ４９２などによって実現されている。
【０２２１】
コンピュータ４９１は、ＣＰＵ、ＲＡＭ、ＲＯＭ、入出力インターフェイスなどによって構成されており、図３６（ａ）に示すように、第１の作業場所においてカメラ４１０に接続されるようになっている。なお、本実施の形態において、コンピュータ４９１は、上述した第１の筐体位置情報保持部４１５、第２の筐体位置情報保持部４１６、第１の光学系位置情報生成部４１７、第１の光学系位置情報保持部４１８、第２の光学系位置情報生成部４２０、校正マーカ位置情報保持部４２５、車体位置情報保持部４２６、第２の光学系位置情報保持部４３０、予測位置情報生成部４４０および予測位置情報保持部４５０を構成している。
【０２２２】
ＥＣＵ４９２は、ＣＰＵ、ＲＡＭ、ＲＯＭ、入出力インターフェイスなどによって構成されており、図３６（ｃ）に示すように、第２の作業場所においてカメラ４１０に接続され、車両４０８に搭載されるようになっている。なお、本実施の形態において、ＥＣＵ４９２は、上述した第２の光学系位置情報保持部４３０、予測位置情報保持部４５０および補正部４６０を構成している。
【０２２３】
第１の作業場所から第２の作業場所には、図３６（ｂ）に示すように、ＣＤ−ＲＯＭ、磁気ディスクなどの記録媒体４９３が添付されたカメラ４１０が搬送されるようになっている。記録媒体４９３には、第２の光学系位置情報および予測位置情報が記録されており、第２の光学系位置情報および予測位置情報をコンピュータ４９１からＥＣＵ４９２に移送するために用いられるようになっている。
【０２２４】
なお、本実施の形態では、第１の作業場所から第２の作業場所には、カメラ４１０および記録媒体４９３が搬送されるようになっているが、図３７に示すように、カメラ４１０、第２の光学系位置情報保持部４３０、予測位置情報保持部４５０および補正部４６０によって構成されたカメラユニット４９４が搬送されるように構成してもよい。
【０２２５】
次に、本実施の形態に係るカメラ補正装置の動作について説明する。
【０２２６】
図３８において、カメラ補正装置４００は、次の工程で第２の光学系位置情報を補正する。
【０２２７】
まず、カメラ４１０が、第１の作業場所に設置され、第１の座標系４０１に対して所定の位置に配置される（Ｓ４０１）。そして、第１の筐体位置情報、第２の筐体位置情報、校正マーカ位置情報および車体位置情報が、第１の筐体位置情報保持部４１５、第２の筐体位置情報保持部４１６、校正マーカ位置情報保持部４２５および車体位置情報保持部４２６にそれぞれ保持される（Ｓ４０２）。ここで、第１の筐体位置情報、第２の筐体位置情報、校正マーカ位置情報および車体位置情報は、測定器によって測定された位置、設計において設定された位置などを基にして取得される。
【０２２８】
次に、カメラ４１０によって校正マーカ４０５が撮影され（Ｓ４０３）、第１の光学系位置情報生成部４１７が、カメラ４１０によって取得された校正マーカ４０５の画像情報に基づいて、校正マーカ位置情報保持部４２５に保持された校正マーカ位置情報から、第１の光学系位置情報を生成する（Ｓ４０４）。そして、第１の光学系位置情報生成部４１７によって生成された第１の光学系位置情報が、第１の光学系位置情報保持部４１８に保持される（Ｓ４０５）。
【０２２９】
次に、第２の光学系位置情報生成部４２０が、第１の筐体位置情報保持部４１５に保持された第１の筐体位置情報および第１の光学系位置情報保持部４１８に保持された第１の光学系位置情報に基づいて、第２の筐体位置情報保持部４１６に保持された第２の筐体位置情報から、第２の光学系位置情報を生成する（Ｓ４０６）。そして、第２の光学系位置情報生成部４２０によって生成された第２の光学系位置情報が、第２の光学系位置情報保持部４３０に保持される（Ｓ４０７）。
【０２３０】
次に、予測位置情報生成部４４０が、第２の光学系位置情報生成部４２０によって生成された第２の光学系位置情報に基づいて、車体位置情報保持部４２６に保持された車体位置情報から、カメラ４１０の画像座標系４１４に対するバンパー部４０９の予測位置情報を生成する（Ｓ４０８）。そして、予測位置情報生成部４４０によって生成された予測位置情報が、予測位置情報保持部４５０に保持される（Ｓ４０９）。
【０２３１】
次に、カメラ４１０および記録媒体４９３が、第１の作業場所から第２の作業場所に搬送される。そして、カメラ４１０が、第２の作業場所において車両４０８に設置され、第２の座標系４０２に対して所定の位置に配置される（Ｓ４１０）。
【０２３２】
次に、カメラ４１０によって補正板４０６を背景にしてバンパー部４０９が撮影され（Ｓ４１１）、結像位置情報抽出部４７０が、図３３に示すように、カメラ４１０によって取得されたバンパー部４０９の画像情報から、カメラ４１０の画像座標系４１４に対するバンパー部４０９の結像位置情報を抽出する（Ｓ４１２）。
【０２３３】
次に、マッチング部４８１が、図３４に示すように、予測位置情報に含まれるバンパー部４０９の輪郭線Ｐに対して、結像位置情報に含まれるバンパー部４０９の輪郭線Ｐ’を重ね合わせる（Ｓ４１３）。
【０２３４】
次に、図３５に示すように、抽出部４８２が、バンパー部４０９の輪郭線Ｐ、Ｐ’から、輪郭線Ｐ、Ｐ’が重なった部分の両端の点（Ｐ１，Ｐ２）、（Ｐ１’，Ｐ２’）を抽出する（Ｓ４１４）。そして、演算部４８３が、予測位置情報に含まれる点（Ｐ１，Ｐ２）と、結像位置情報に含まれる点（Ｐ１’，Ｐ２’）とを比較することにより、第２の光学系位置情報の補正量を算出する（Ｓ４１５）。
【０２３５】
そして、光学系位置情報補正部４９０が、補正量算出部４８０によって算出された補正量に基づいて、第２の光学系位置情報保持部４３０に保持された第２の光学系位置情報を補正して（Ｓ４１６）、工程を終了する。なお、本実施の形態では、上述したステップＳ４０１からＳ４１６を記述したプログラムをコンピュータに実行させてもよい。
【０２３６】
以上説明したように、本実施の形態においては、車両４０８などに設置されたカメラ４１０の光学系４１２のパラメータを補正することができ、路面上の対象物の位置を正確に検出することができる。
【０２３７】
また、本実施の形態においては、バンパー部４０９を利用して第２の光学系位置情報を補正することができる。
【０２３８】
また、本実施の形態においては、バンパー部４０９の輪郭線から点を抽出することができ、第２の光学系位置情報の補正量を確実に算出することができる。
【０２３９】
【発明の効果】
以上説明したように、本発明によれば、車両などに設置されたカメラの光学系のパラメータを補正することができるカメラ補正装置を提供することができる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態に係るカメラ補正装置および撮像装置としてのカメラを示すブロック図
【図２】図１に示されたカメラが設置された第１の座標系を示す斜視図
【図３】図１に示されたカメラが設置された第２の座標系を示す斜視図
【図４】図１に示されたカメラの座標系を示す斜視図
【図５】図１に示されたカメラの画像座標系を示す平面図
【図６】図１に示されたカメラの平行移動を示す斜視図
【図７】図１に示されたカメラの回転動作を示す斜視図
【図８】図１に示されたカメラの平行移動を示す側面図
【図９】図１に示されたカメラの回転動作を示す側面図
【図１０】図１に示されたカメラ補正装置の結像位置情報抽出部を示すブロック図
【図１１】図１に示されたカメラ補正装置を実現するためのコンピュータおよびＥＣＵを示すブロック図
【図１２】図１に示されたカメラ補正装置のカメラユニットを示すブロック図
【図１３】図１に示されたカメラ補正装置の補正動作を示すフローチャート
【図１４】本発明の第２の実施の形態に係るカメラ補正装置および撮像装置としてのカメラを示すブロック図
【図１５】図１４に示されたカメラの画像座標系を示す平面図
【図１６】図１４に示されたカメラ補正装置の補正動作を示すフローチャート
【図１７】本発明の第３の実施の形態に係るカメラ補正装置および撮像装置としてのカメラを示すブロック図
【図１８】図１７に示されたカメラが設置された第１の座標系を示す斜視図
【図１９】図１７に示されたカメラが設置された第２の座標系を示す斜視図
【図２０】図１７に示されたカメラの座標系を示す斜視図
【図２１】図１７に示されたカメラ補正装置の仮想カメラを示す側面図
【図２２】図１７に示されたカメラ補正装置の補正部の動作を示す説明図
【図２３】図１７に示されたカメラ補正装置の補正部の動作を示す説明図
【図２４】図１７に示されたカメラ補正装置の補正部の動作を示す説明図
【図２５】図１７に示されたカメラ補正装置の補正部の動作を示す説明図
【図２６】図１７に示されたカメラ補正装置を実現するためのコンピュータおよびＥＣＵを示すブロック図
【図２７】図１７に示されたカメラ補正装置のカメラユニットを示すブロック図
【図２８】図１７に示されたカメラ補正装置の補正動作を示すフローチャート
【図２９】本発明の第４の実施の形態に係るカメラ補正装置および撮像装置としてのカメラを示すブロック図
【図３０】図２９に示されたカメラが設置された第１の座標系を示す斜視図
【図３１】図２９に示されたカメラが設置された第２の座標系を示す斜視図
【図３２】図２９に示されたカメラの座標系を示す斜視図
【図３３】図２９に示されたカメラの画像座標系を示す平面図
【図３４】図２９に示されたカメラ補正装置の補正部の動作を示す説明図
【図３５】図２９に示されたカメラ補正装置の補正部の動作を示す説明図
【図３６】図２９に示されたカメラ補正装置を実現するためのコンピュータおよびＥＣＵを示すブロック図
【図３７】図２９に示されたカメラ補正装置のカメラユニットを示すブロック図
【図３８】図２９に示されたカメラ補正装置の補正動作を示すフローチャート
【図３９】従来のカメラ校正装置および撮像装置としてのカメラを示すブロック図
【図４０】図３９に示されたカメラが設置された第１の座標系を示す斜視図
【図４１】図３９に示されたカメラが設置された第２の座標系を示す斜視図
【符号の説明】
１００　カメラ補正装置
１０１　第１の座標系
１０２　第２の座標系
１０５　校正マーカ
１０６　補正マーカ
１１０　カメラ（撮像装置）
１１１　筐体
１１２　光学系
１１５　第１の筐体位置情報保持部（第１の筐体位置情報保持手段）
１１６　第２の筐体位置情報保持部（第２の筐体位置情報保持手段）
１１７　第１の光学系位置情報生成部（第１の光学系位置情報生成手段）
１１８　第１の光学系位置情報保持部（第１の光学系位置情報保持手段）
１２０　第２の光学系位置情報生成部（第２の光学系位置情報生成手段）
１３０　第２の光学系位置情報保持部（第２の光学系位置情報保持手段）
１４０　予測位置情報生成部（予測位置情報生成手段）
１５０　予測位置情報保持部（予測位置情報保持手段）
１６０　補正部（補正手段）
１７０　結像位置情報抽出部（結像位置情報抽出手段）
１７１　画像情報表示部（画像情報表示手段）
１７２　結像位置指定部（結像位置指定手段）
１８０　補正量算出部（補正量算出手段）
１９０　光学系位置情報補正部（光学系位置情報補正手段）
２００　カメラ補正装置
２６０　補正部（補正手段）
２７０　結像位置情報抽出部（結像位置情報抽出手段）
２７１　予測範囲情報保持部（予測範囲情報保持手段）
２７２　結像位置検索部（結像位置検索手段）
２８０　補正量算出部（補正量算出手段）
２９０　光学系位置情報補正部（光学系位置情報補正手段）
３００　カメラ補正装置
３０１　第１の座標系
３０２　第２の座標系
３０５　校正マーカ
３０７　分割マーカ
３１０　カメラ（撮像装置）
３１１　筐体
３１２　光学系
３１５　第１の筐体位置情報保持部（第１の筐体位置情報保持手段）
３１６　第２の筐体位置情報保持部（第２の筐体位置情報保持手段）
３１７　第１の光学系位置情報生成部（第１の光学系位置情報生成手段）
３１８　第１の光学系位置情報保持部（第１の光学系位置情報保持手段）
３２０　第２の光学系位置情報生成部（第２の光学系位置情報生成手段）
３３０　第２の光学系位置情報保持部（第２の光学系位置情報保持手段）
３６０　補正部（補正手段）
３６１　平面投影画像生成部（平面投影画像生成手段）
３６２　平面投影画像分割部（平面投影画像分割手段）
３６３　動きベクトル抽出部（動きベクトル抽出手段）
３６４　補正量算出部（補正量算出手段）
３６５　光学系位置情報補正部（光学系位置情報補正手段）
３８６ａ、３８６ｂ、３８６ｃ、３８６ｄ　画像領域
３８８ａ、３８８ｂ、３８８ｃ、３８８ｄ　動きベクトル
４００　カメラ補正装置
４０１　第１の座標系
４０２　第２の座標系
４０５　校正マーカ
４０６　補正板
４０８　車両
４１０　カメラ（撮像装置）
４１１　筐体
４１２　光学系
４１５　第１の筐体位置情報保持部（第１の筐体位置情報保持手段）
４１６　第２の筐体位置情報保持部（第２の筐体位置情報保持手段）
４１７　第１の光学系位置情報生成部（第１の光学系位置情報生成手段）
４１８　第１の光学系位置情報保持部（第１の光学系位置情報保持手段）
４２０　第２の光学系位置情報生成部（第２の光学系位置情報生成手段）
４３０　第２の光学系位置情報保持部（第２の光学系位置情報保持手段）
４４０　予測位置情報生成部（予測位置情報生成手段）
４５０　予測位置情報保持部（予測位置情報保持手段）
４６０　補正部（補正手段）
４７０　結像位置情報抽出部（結像位置情報抽出手段）
４８０　補正量算出部（補正量算出手段）
４８１　マッチング部（マッチング手段）
４８２　抽出部（抽出手段）
４８３　演算部（演算手段）
４９０　光学系位置情報補正部（光学系位置情報補正手段）

Claims (27)

  1. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正装置であって、
    第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持手段と、
    第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持手段と、
    前記撮像装置によって取得された前記第１の座標系における画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成手段と、
    前記第１の光学系位置情報生成手段によって生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持手段と、
    前記第１の筐体位置情報保持手段に保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持手段に保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持手段に保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成手段と、
    前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持手段と、
    前記撮像装置によって取得された前記第２の座標系における画像情報に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する補正手段とを備えたことを特徴とするカメラ補正装置。
  2. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正装置であって、
    所定の座標系に対する前記光学系の位置を示す光学系位置情報を保持する光学系位置情報保持手段と、
    前記撮像装置によって取得された前記座標系における画像情報に基づいて、前記光学系位置情報保持手段に保持された前記光学系位置情報を補正する補正手段とを備えたことを特徴とするカメラ補正装置。
  3. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正装置であって、
    校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持手段と、
    補正マーカが配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持手段と、
    前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成手段と、
    前記第１の光学系位置情報生成手段によって生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持手段と、
    前記第１の筐体位置情報保持手段に保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持手段に保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持手段に保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成手段と、
    前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記補正マーカの予測位置情報を生成する予測位置情報生成手段と、
    前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持手段と、
    前記予測位置情報生成手段によって生成された前記予測位置情報を保持する予測位置情報保持手段と、
    前記撮像装置によって取得された前記補正マーカの画像情報および前記予測位置情報保持手段に保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する補正手段とを備えたことを特徴とするカメラ補正装置。
  4. 前記補正手段が、
    前記撮像装置によって取得された前記補正マーカの画像情報から、前記撮像装置の画像座標系に対する前記補正マーカの結像位置情報を抽出する結像位置情報抽出手段と、
    前記結像位置情報抽出手段によって抽出された前記結像位置情報および前記予測位置情報保持手段に保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報の補正量を算出する補正量算出手段と、
    前記補正量算出手段によって算出された前記補正量に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する光学系位置情報補正手段とを有することを特徴とする請求項３記載のカメラ補正装置。
  5. 前記補正手段が、前記第２の光学系位置情報の回転成分の誤差だけを補正することを特徴とする請求項４記載のカメラ補正装置。
  6. 前記結像位置情報抽出手段が、
    前記撮像装置によって取得された前記補正マーカの画像情報を表示する画像情報表示手段と、
    前記画像情報表示手段に表示された前記補正マーカの画像情報において前記補正マーカの結像位置を指定し、前記結像位置情報を抽出する結像位置指定手段とを有することを特徴とする請求項４記載のカメラ補正装置。
  7. 前記結像位置情報抽出手段が、
    前記撮像装置の画像座標系に対する前記補正マーカの予測範囲情報を保持する予測範囲情報保持手段と、
    前記予測範囲情報保持手段に保持された前記予測範囲情報および前記予測位置情報保持手段に保持された前記予測位置情報に基づいて、前記撮像装置によって取得された前記補正マーカの画像情報から前記補正マーカの結像位置を検索し、前記結像位置情報を抽出する結像位置検索手段とを有することを特徴とする請求項４記載のカメラ補正装置。
  8. 筐体と前記筐体に支持される光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正装置であって、
    校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持手段と、
    第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持手段と、
    前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成手段と、
    前記第１の光学系位置情報生成手段によって生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持手段と、
    前記第１の筐体位置情報保持手段に保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持手段に保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持手段に保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成手段と、
    前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持手段と、
    前記撮像装置によって取得された前記第２の座標系における画像情報に含まれる動きベクトルに基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する補正手段とを備えたことを特徴とするカメラ補正装置。
  9. 前記補正手段が、
    前記撮像装置によって取得された前記第２の座標系における画像情報から平面投影画像を生成する平面投影画像生成手段と、
    前記平面投影画像生成手段によって生成された前記平面投影画像を複数の画像領域に分割する平面投影画像分割手段と、
    前記平面投影画像分割手段によって分割された複数の前記画像領域から動きベクトルを抽出する動きベクトル抽出手段と、
    前記動きベクトル抽出手段によって抽出された前記動きベクトルに基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報の補正量を算出する補正量算出手段と、
    前記補正量算出手段によって算出された前記補正量に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する光学系位置情報補正手段とを有することを特徴とする請求項８記載のカメラ補正装置。
  10. 前記第２の座標系に設けられた分割マーカが、前記第２の筐体位置情報保持手段に保持された前記第２の筐体位置情報に含まれる前記筐体の位置に対して一定の位置関係を保つように配置され、
    前記平面投影画像分割手段が、前記撮像装置によって取得された前記分割マーカの画像情報に基づいて、前記平面投影画像を複数の画像領域に分割することを特徴とする請求項９記載のカメラ補正装置。
  11. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正装置であって、
    校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持手段と、
    車両が配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持手段と、
    前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成手段と、
    前記第１の光学系位置情報生成手段によって生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持手段と、
    前記第１の筐体位置情報保持手段に保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持手段に保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持手段に保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成手段と、
    前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記車両の予測位置情報を生成する予測位置情報生成手段と、
    前記第２の光学系位置情報生成手段によって生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持手段と、
    前記予測位置情報生成手段によって生成された前記予測位置情報を保持する予測位置情報保持手段と、
    前記撮像装置によって取得された前記車両の画像情報および前記予測位置情報保持手段に保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する補正手段とを備えたことを特徴とするカメラ補正装置。
  12. 前記補正手段が、
    前記撮像装置によって取得された前記車両の画像情報から、前記撮像装置の画像座標系に対する前記車両の結像位置情報を抽出する結像位置情報抽出手段と、
    前記結像位置情報抽出手段によって抽出された前記結像位置情報および前記予測位置情報保持手段に保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報の補正量を算出する補正量算出手段と、
    前記補正量算出手段によって算出された前記補正量に基づいて、前記第２の光学系位置情報保持手段に保持された前記第２の光学系位置情報を補正する光学系位置情報補正手段とを有することを特徴とする請求項１１記載のカメラ補正装置。
  13. 前記補正量算出手段が、
    前記結像位置情報に含まれる前記車両の輪郭線と前記予測位置情報に含まれる前記車両の輪郭線とを重ね合わせるマッチング手段と、
    前記マッチング手段によって重ね合わされた前記車両の輪郭線から複数の点を抽出する抽出手段と、
    前記結像位置情報に含まれる前記点と前記予測位置情報に含まれる前記点とを比較することにより前記第２の光学系位置情報の補正量を算出する演算手段とを有することを特徴とする請求項１２記載のカメラ補正装置。
  14. 前記撮像装置が車両に取り付けられることを特徴とする請求項１から請求項１３までの何れかに記載のカメラ補正装置。
  15. 請求項１から請求項１４までの何れかに記載のカメラ補正装置を備えたことを特徴とする撮像装置。
  16. 請求項１から請求項１４までの何れかに記載のカメラ補正装置を備えたことを特徴とする撮像制御装置。
  17. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正方法であって、
    第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、
    第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、
    前記撮像装置によって取得された前記第１の座標系における画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、
    前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、
    前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、
    前記撮像装置によって取得された前記第２の座標系における画像情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとを備えたことを特徴とするカメラ補正方法。
  18. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正方法であって、
    所定の座標系に対する前記光学系の位置を示す光学系位置情報を保持する光学系位置情報保持ステップと、
    前記撮像装置によって取得された前記座標系における画像情報に基づいて、前記光学系位置情報保持ステップで保持された前記光学系位置情報を補正する補正ステップとを備えたことを特徴とするカメラ補正方法。
  19. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正方法であって、
    校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、
    補正マーカが配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、
    前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、
    前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、
    前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記補正マーカの予測位置情報を生成する予測位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、
    前記予測位置情報生成ステップで生成された前記予測位置情報を保持する予測位置情報保持ステップと、
    前記撮像装置によって取得された前記補正マーカの画像情報および前記予測位置情報保持ステップで保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとを備えたことを特徴とするカメラ補正方法。
  20. 筐体と前記筐体に支持される光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正方法であって、
    校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、
    第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、
    前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、
    前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、
    前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、
    前記撮像装置によって取得された前記第２の座標系における画像情報に含まれる動きベクトルに基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとを備えたことを特徴とするカメラ補正方法。
  21. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正方法であって、
    校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、
    車両が配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、
    前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、
    前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、
    前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記車両の予測位置情報を生成する予測位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、
    前記予測位置情報生成ステップで生成された前記予測位置情報を保持する予測位置情報保持ステップと、
    前記撮像装置によって取得された前記車両の画像情報および前記予測位置情報保持ステップで保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとを備えたことを特徴とするカメラ補正方法。
  22. 前記撮像装置が車両に取り付けられることを特徴とする請求項１７から請求項２１までの何れかに記載のカメラ補正方法。
  23. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正プログラムであって、
    第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、
    第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、
    前記撮像装置によって取得された前記第１の座標系における画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、
    前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、
    前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、
    前記撮像装置によって取得された前記第２の座標系における画像情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとをコンピュータに実行させることを特徴とするカメラ補正プログラム。
  24. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正プログラムであって、
    所定の座標系に対する前記光学系の位置を示す光学系位置情報を保持する光学系位置情報保持ステップと、
    前記撮像装置によって取得された前記座標系における画像情報に基づいて、前記光学系位置情報保持ステップで保持された前記光学系位置情報を補正する補正ステップとをコンピュータに実行させることを特徴とするカメラ補正プログラム。
  25. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正プログラムであって、
    校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、
    補正マーカが配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、
    前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、
    前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、
    前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記補正マーカの予測位置情報を生成する予測位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、
    前記予測位置情報生成ステップで生成された前記予測位置情報を保持する予測位置情報保持ステップと、
    前記撮像装置によって取得された前記補正マーカの画像情報および前記予測位置情報保持ステップで保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとをコンピュータに実行させることを特徴とするカメラ補正プログラム。
  26. 筐体と前記筐体に支持される光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正プログラムであって、
    校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、
    第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、
    前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、
    前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、
    前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、
    前記撮像装置によって取得された前記第２の座標系における画像情報に含まれる動きベクトルに基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとをコンピュータに実行させることを特徴とするカメラ補正プログラム。
  27. 筐体と前記筐体に支持された光学系とを有し前記光学系を介して画像情報を取得する撮像装置の光学系の位置情報を補正するカメラ補正プログラムであって、
    校正マーカが配置された第１の座標系に対する前記筐体の位置を示す第１の筐体位置情報を保持する第１の筐体位置情報保持ステップと、
    車両が配置された第２の座標系に対する前記筐体の位置を示す第２の筐体位置情報を保持する第２の筐体位置情報保持ステップと、
    前記撮像装置によって取得された前記校正マーカの画像情報に基づいて、前記第１の座標系に対する前記光学系の位置を示す第１の光学系位置情報を生成する第１の光学系位置情報生成ステップと、
    前記第１の光学系位置情報生成ステップで生成された前記第１の光学系位置情報を保持する第１の光学系位置情報保持ステップと、
    前記第１の筐体位置情報保持ステップで保持された前記第１の筐体位置情報および前記第１の光学系位置情報保持ステップで保持された前記第１の光学系位置情報に基づいて、前記第２の筐体位置情報保持ステップで保持された前記第２の筐体位置情報から、前記第２の座標系に対する前記光学系の位置を示す第２の光学系位置情報を生成する第２の光学系位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報に基づいて、前記撮像装置の画像座標系に対する前記車両の予測位置情報を生成する予測位置情報生成ステップと、
    前記第２の光学系位置情報生成ステップで生成された前記第２の光学系位置情報を保持する第２の光学系位置情報保持ステップと、
    前記予測位置情報生成ステップで生成された前記予測位置情報を保持する予測位置情報保持ステップと、
    前記撮像装置によって取得された前記車両の画像情報および前記予測位置情報保持ステップで保持された前記予測位置情報に基づいて、前記第２の光学系位置情報保持ステップで保持された前記第２の光学系位置情報を補正する補正ステップとをコンピュータに実行させることを特徴とするカメラ補正プログラム。
JP2003111432A 2002-04-22 2003-04-16 カメラ補正装置 Expired - Fee Related JP4015051B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2003111432A JP4015051B2 (ja) 2002-04-22 2003-04-16 カメラ補正装置
CNB038127008A CN1312458C (zh) 2002-04-22 2003-04-21 摄像机校正装置
EP03720942.6A EP1498689B1 (en) 2002-04-22 2003-04-21 Camera corrector
KR1020047016893A KR100948161B1 (ko) 2002-04-22 2003-04-21 카메라 보정 장치
US10/512,039 US7352388B2 (en) 2002-04-22 2003-04-21 Camera calibrating apparatus
PCT/JP2003/005033 WO2003089874A1 (en) 2002-04-22 2003-04-21 Camera corrector

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2002119692 2002-04-22
JP2003111432A JP4015051B2 (ja) 2002-04-22 2003-04-16 カメラ補正装置

Publications (3)

Publication Number Publication Date
JP2004004043A true JP2004004043A (ja) 2004-01-08
JP2004004043A5 JP2004004043A5 (ja) 2007-02-15
JP4015051B2 JP4015051B2 (ja) 2007-11-28

Family

ID=29253620

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003111432A Expired - Fee Related JP4015051B2 (ja) 2002-04-22 2003-04-16 カメラ補正装置

Country Status (6)

Country Link
US (1) US7352388B2 (ja)
EP (1) EP1498689B1 (ja)
JP (1) JP4015051B2 (ja)
KR (1) KR100948161B1 (ja)
CN (1) CN1312458C (ja)
WO (1) WO2003089874A1 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005074287A1 (en) * 2004-01-30 2005-08-11 Kabushiki Kaisha Toyota Jidoshokki Video image positional relationship correction apparatus, steering assist apparatus having the video image positional relationship correction apparatus and video image positional relationship correction method
WO2007097431A1 (ja) * 2006-02-23 2007-08-30 Matsushita Electric Industrial Co., Ltd. 画像補正装置、方法、プログラム、集積回路、システム
WO2010052772A1 (ja) * 2008-11-05 2010-05-14 富士通株式会社 カメラ角度算出装置、カメラ角度算出方法およびカメラ角度算出プログラム
JP2013002820A (ja) * 2011-06-11 2013-01-07 Suzuki Motor Corp カメラキャリブレーション装置
JP2013074325A (ja) * 2011-09-26 2013-04-22 Toshiba Alpine Automotive Technology Corp 車載カメラ用画像補正方法および車載カメラ用画像補正プログラム

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8423292B2 (en) 2008-08-19 2013-04-16 Tomtom International B.V. Navigation device with camera-info
MX2007015348A (es) * 2005-06-06 2008-02-15 Tomtom Int Bv Dispositivo de navegacion con informacion de camara.
US8022990B2 (en) * 2006-08-18 2011-09-20 General Electric Company Systems and methods for on-line marker-less camera calibration using a position tracking system
JP2008187566A (ja) * 2007-01-31 2008-08-14 Sanyo Electric Co Ltd カメラ校正装置及び方法並びに車両
GB2447672B (en) 2007-03-21 2011-12-14 Ford Global Tech Llc Vehicle manoeuvring aids
KR100966288B1 (ko) * 2009-01-06 2010-06-28 주식회사 이미지넥스트 주변 영상 생성 방법 및 장치
JP4690476B2 (ja) * 2009-03-31 2011-06-01 アイシン精機株式会社 車載カメラの校正装置
JP4636346B2 (ja) * 2009-03-31 2011-02-23 アイシン精機株式会社 車載カメラの校正装置、方法、及びプログラム
JP4751939B2 (ja) * 2009-03-31 2011-08-17 アイシン精機株式会社 車載カメラの校正装置
JP5471038B2 (ja) * 2009-05-27 2014-04-16 アイシン精機株式会社 校正目標検出装置と、校正目標を検出する校正目標検出方法と、校正目標検出装置のためのプログラム
TWI452909B (zh) * 2009-06-29 2014-09-11 Silicon Integrated Sys Corp 移動向量校正電路、影像產生裝置及相關方法
KR101510655B1 (ko) * 2010-01-26 2015-04-10 주식회사 이미지넥스트 주변 영상 생성 방법 및 장치
JP4907725B2 (ja) * 2010-03-23 2012-04-04 シャープ株式会社 キャリブレーション装置、欠陥検出装置、欠陥修復装置、表示パネル、表示装置、キャリブレーション方法
KR101113679B1 (ko) 2010-05-24 2012-02-14 기아자동차주식회사 카메라 시스템의 영상 보정 방법
US9500497B2 (en) 2011-04-19 2016-11-22 Ford Global Technologies, Llc System and method of inputting an intended backing path
US9506774B2 (en) 2011-04-19 2016-11-29 Ford Global Technologies, Llc Method of inputting a path for a vehicle and trailer
US9555832B2 (en) 2011-04-19 2017-01-31 Ford Global Technologies, Llc Display system utilizing vehicle and trailer dynamics
US9683848B2 (en) 2011-04-19 2017-06-20 Ford Global Technologies, Llc System for determining hitch angle
US9854209B2 (en) 2011-04-19 2017-12-26 Ford Global Technologies, Llc Display system utilizing vehicle and trailer dynamics
US9374562B2 (en) 2011-04-19 2016-06-21 Ford Global Technologies, Llc System and method for calculating a horizontal camera to target distance
US9723274B2 (en) 2011-04-19 2017-08-01 Ford Global Technologies, Llc System and method for adjusting an image capture setting
US9969428B2 (en) 2011-04-19 2018-05-15 Ford Global Technologies, Llc Trailer backup assist system with waypoint selection
US9926008B2 (en) 2011-04-19 2018-03-27 Ford Global Technologies, Llc Trailer backup assist system with waypoint selection
JP5883275B2 (ja) * 2011-11-18 2016-03-09 東芝アルパイン・オートモティブテクノロジー株式会社 車載カメラのキャリブレーション装置
CN102536201B (zh) * 2011-12-20 2014-07-02 西安思坦仪器股份有限公司 多臂成像数据校正方法
EP2618305B1 (de) * 2012-01-20 2014-04-30 ESG Elektroniksystem- und Logistik-GmbH Verfahren und Vorrichtung zur Online-Kalibrierung von Fahrzeug-Kameras
JP6012982B2 (ja) * 2012-02-24 2016-10-25 京セラ株式会社 較正処理装置、カメラ較正装置、カメラシステム、およびカメラ較正方法
CN102706274B (zh) * 2012-04-25 2014-08-06 复旦大学 工业结构化场景中机器视觉精确定位机械零件的系统
US9870704B2 (en) * 2012-06-20 2018-01-16 Conduent Business Services, Llc Camera calibration application
KR101382772B1 (ko) * 2012-12-11 2014-04-08 현대자동차주식회사 디스플레이 시스템 및 방법
US9592851B2 (en) 2013-02-04 2017-03-14 Ford Global Technologies, Llc Control modes for a trailer backup assist system
US9511799B2 (en) 2013-02-04 2016-12-06 Ford Global Technologies, Llc Object avoidance for a trailer backup assist system
CN104754323B (zh) * 2013-12-31 2017-06-20 苏州智华汽车电子有限公司 摄像头光轴检测设备的标定方法
JP6354425B2 (ja) * 2014-07-30 2018-07-11 株式会社デンソー 車載カメラの取り付け姿勢検出方法およびその装置
DE102014117888A1 (de) * 2014-12-04 2016-10-13 Connaught Electronics Ltd. Online-Kalibrierung eines Kraftfahrzeug-Kamerasystems
US9522677B2 (en) 2014-12-05 2016-12-20 Ford Global Technologies, Llc Mitigation of input device failure and mode management
US9533683B2 (en) 2014-12-05 2017-01-03 Ford Global Technologies, Llc Sensor failure mitigation system and mode management
US9607242B2 (en) 2015-01-16 2017-03-28 Ford Global Technologies, Llc Target monitoring system with lens cleaning device
KR101666677B1 (ko) * 2015-05-28 2016-10-14 주식회사 맥스트 광학 모듈의 자세 조정 장치
US9896130B2 (en) 2015-09-11 2018-02-20 Ford Global Technologies, Llc Guidance system for a vehicle reversing a trailer along an intended backing path
US9836060B2 (en) 2015-10-28 2017-12-05 Ford Global Technologies, Llc Trailer backup assist system with target management
US10112646B2 (en) 2016-05-05 2018-10-30 Ford Global Technologies, Llc Turn recovery human machine interface for trailer backup assist
KR102543523B1 (ko) * 2016-09-09 2023-06-15 현대모비스 주식회사 카메라의 오차 보정 시스템 및 방법
US10356417B2 (en) * 2016-09-30 2019-07-16 Intel Corporation Method and system of video coding using projected motion vectors

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2991163B2 (ja) * 1997-07-23 1999-12-20 日本電気株式会社 カメラキャリブレーション装置
JP3415427B2 (ja) * 1998-02-25 2003-06-09 富士通株式会社 ロボットシミュレーションにおけるキャリブレーション装置
JP4387476B2 (ja) * 1998-07-13 2009-12-16 株式会社明電舎 ビンピッキング位置データ較正装置
JP2000171215A (ja) * 1998-12-03 2000-06-23 Techno Wave:Kk 物流情報読取り装置
JP2001116515A (ja) * 1999-10-21 2001-04-27 Matsushita Electric Ind Co Ltd キャリブレーション方法
US6813371B2 (en) * 1999-12-24 2004-11-02 Aisin Seiki Kabushiki Kaisha On-vehicle camera calibration device
KR100532525B1 (ko) * 2002-05-07 2005-11-30 이문기 카메라를 이용한 삼차원 포인팅장치
JP2006074574A (ja) * 2004-09-03 2006-03-16 Toshiba Corp 映像再生装置及び映像再生方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005074287A1 (en) * 2004-01-30 2005-08-11 Kabushiki Kaisha Toyota Jidoshokki Video image positional relationship correction apparatus, steering assist apparatus having the video image positional relationship correction apparatus and video image positional relationship correction method
AU2004314869B2 (en) * 2004-01-30 2007-11-01 Kabushiki Kaisha Toyota Jidoshokki Video image positional relationship correction apparatus steering assist apparatus having the video image positional relationship correction apparatus and video image positional relationship correction method
KR100834323B1 (ko) * 2004-01-30 2008-06-02 가부시키가이샤 도요다 지도숏키 비디오 이미지 위치 관계 보정 장치, 그 비디오 이미지위치 관계 보정 장치를 갖는 조향 지원 장치, 및 비디오이미지 위치 관계 보정 방법
WO2007097431A1 (ja) * 2006-02-23 2007-08-30 Matsushita Electric Industrial Co., Ltd. 画像補正装置、方法、プログラム、集積回路、システム
US8085308B2 (en) 2006-02-23 2011-12-27 Panasonic Corporation Image correction device, method, integrated circuit and system for correcting images captured by a camera provided in a moving object
WO2010052772A1 (ja) * 2008-11-05 2010-05-14 富士通株式会社 カメラ角度算出装置、カメラ角度算出方法およびカメラ角度算出プログラム
US8537199B2 (en) 2008-11-05 2013-09-17 Fujitsu Limited Camera calibration device and method by computing coordinates of jigs in a vehicle system
JP5387580B2 (ja) * 2008-11-05 2014-01-15 富士通株式会社 カメラ角度算出装置およびカメラ角度算出方法
JP2013002820A (ja) * 2011-06-11 2013-01-07 Suzuki Motor Corp カメラキャリブレーション装置
JP2013074325A (ja) * 2011-09-26 2013-04-22 Toshiba Alpine Automotive Technology Corp 車載カメラ用画像補正方法および車載カメラ用画像補正プログラム

Also Published As

Publication number Publication date
JP4015051B2 (ja) 2007-11-28
WO2003089874A1 (en) 2003-10-30
US20050179801A1 (en) 2005-08-18
KR20040104578A (ko) 2004-12-10
EP1498689B1 (en) 2018-06-06
KR100948161B1 (ko) 2010-03-16
CN1659418A (zh) 2005-08-24
CN1312458C (zh) 2007-04-25
EP1498689A1 (en) 2005-01-19
US7352388B2 (en) 2008-04-01
EP1498689A4 (en) 2014-04-02

Similar Documents

Publication Publication Date Title
JP4015051B2 (ja) カメラ補正装置
CN108965690B (zh) 图像处理系统、图像处理装置及计算机可读存储介质
US8564655B2 (en) Three-dimensional measurement method and three-dimensional measurement apparatus
KR101973917B1 (ko) 3차원 계측 장치 및 그 계측 지원 처리 방법
WO2017022033A1 (ja) 画像処理装置、画像処理方法および画像処理プログラム
US20060227211A1 (en) Method and apparatus for measuring position and orientation
JP2016167229A (ja) 座標変換パラメータ決定装置、座標変換パラメータ決定方法及び座標変換パラメータ決定用コンピュータプログラム
KR101379787B1 (ko) 구멍을 가진 구조물을 이용한 카메라와 레이저 거리 센서의 보정 장치 및 보정 방법
JP2008046687A (ja) 撮影環境校正方法及び情報処理装置
JP2004340840A (ja) 距離測定装置、距離測定方法、及び距離測定プログラム
JP7287793B2 (ja) ターゲット装置及び測量システム
JP2016048221A (ja) 演算装置、演算方法、およびプログラム
JP2005017286A (ja) カメラキャリブレーション方法およびカメラキャリブレーション装置
JP5311465B2 (ja) ステレオマッチング処理システム、ステレオマッチング処理方法、及びプログラム
JP2006234703A (ja) 画像処理装置及び三次元計測装置並びに画像処理装置用プログラム
US20200242806A1 (en) Stereo camera calibration method and image processing device for stereo camera
JP2008309595A (ja) オブジェクト認識装置及びそれに用いられるプログラム
JP2013130508A (ja) ３次元計測方法、３次元計測プログラム及びロボット装置
JP6188860B1 (ja) オブジェクト検出装置
JP2002099902A (ja) 両眼立体視によって物体の３次元情報を計測する画像処理装置およびその方法又は計測のプログラムを記録した記録媒体
JP2000205821A (ja) 三次元形状計測装置及びその三次元形状計測方法
WO2017209153A1 (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP7225109B2 (ja) 作業支援システムおよび作業支援方法
JP6878235B2 (ja) 映像表示システム
JP4166993B2 (ja) 立体画像表示装置及び方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060405

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061226

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070227

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070425

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070529

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070711

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070821

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070912

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100921

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4015051

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110921

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120921

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130921

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees