JP5081313B2 - 車載カメラの校正装置 - Google Patents
車載カメラの校正装置 Download PDFInfo
- Publication number
- JP5081313B2 JP5081313B2 JP2011084745A JP2011084745A JP5081313B2 JP 5081313 B2 JP5081313 B2 JP 5081313B2 JP 2011084745 A JP2011084745 A JP 2011084745A JP 2011084745 A JP2011084745 A JP 2011084745A JP 5081313 B2 JP5081313 B2 JP 5081313B2
- Authority
- JP
- Japan
- Prior art keywords
- camera
- calibration
- unit
- image
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Studio Devices (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
車両に取り付けられた車載カメラを自動校正する車載カメラの校正装置であって、
前記車載カメラにより、異なる複数箇所の所定位置に配置された校正指標を視界内に含んで撮影された撮影画像を取得する画像取得部と、
前記撮影画像において前記校正指標の中のそれぞれの校正点を検出するための画像処理を実施する画像処理対象領域を設定する画像処理対象領域設定部と、
前記撮影画像の前記画像処理対象領域において前記校正指標の中のそれぞれの校正点を検出する校正点検出部と、
検出された前記校正点に基づいて、前記車載カメラのカメラパラメータを自動調整する調整部と、
前記自動校正を実行している間において、前記画像処理対象領域をグラフィック画像による領域枠として前記撮影画像に重畳させて表示部に表示させる表示制御部と、
を備える点にある。
車両に取り付けられた車載カメラにより、3次元の基準座標系の異なる複数箇所の所定位置に配置された校正指標を視界内に含んで撮影された撮影画像を取得する画像取得部と、
前記車載カメラが規定位置に規定の姿勢で取り付けられ、3次元のカメラ座標系と前記基準座標系とが理想的な関係を満たす際に、前記基準座標系に対して前記カメラ座標系を規定するカメラパラメータの初期値に基づいて前記カメラ座標系の射影面において特定される前記校正点の座標である初期座標が、前記車載カメラが前記カメラ座標系の3つの直交軸の各軸を中心としてそれぞれ所定角度回転した際に前記射影面において分布する範囲を校正点分布範囲として設定する校正点分布範囲設定部と、
前記校正点分布範囲に基づいて、前記射影面において前記校正指標が分布する範囲を校正指標分布範囲として設定する校正指標分布範囲設定部と、
前記射影面に相当する前記撮影画像において前記校正指標の中のそれぞれの校正点を検出する校正点検出部と、
前記撮影画像上で検出された前記校正点の座標が前記射影面上の実際の座標として特定される実座標と前記初期座標とに基づいて前記カメラパラメータを自動調整する調整部と、
前記校正指標分布範囲をグラフィック画像による領域枠として前記撮影画像に重畳させて表示部に表示させる表示制御部と、
を備える点にある。
車両に取り付けられた車載カメラを校正する車載カメラの校正装置であって、
前記車載カメラにより、異なる複数箇所の所定位置に配置された校正指標を視界内に含んで撮影された撮影画像を取得する画像取得部と、
前記撮影画像において前記校正指標の中のそれぞれの校正点を検出するための画像処理を実施する画像処理対象領域を設定する画像処理対象領域設定部と、
前記撮影画像の前記画像処理対象領域において前記校正指標の中のそれぞれの校正点を検出する校正点検出部と、
検出された前記校正点に基づいて、前記車載カメラのカメラパラメータを自動調整する調整部と、
前記画像処理対象領域をグラフィック画像による領域枠として前記撮影画像に重畳させて表示部に表示させる表示制御部と、
を備え、
前記車載カメラが規定位置に規定の姿勢で取り付けられた際の前記カメラパラメータの初期値が設定されている場合、
前記表示制御部が、前記調整部による前記自動調整の完了時の前記カメラパラメータと、前記カメラパラメータの初期値とが同一の値であるとき、前記校正点検出部により前記校正点が検出される際とは異なる表示形態で前記領域枠を表示させると好適である。
車両に取り付けられた車載カメラを校正する車載カメラの校正装置であって、
前記車載カメラにより、異なる複数箇所の所定位置に配置された校正指標を視界内に含んで撮影された撮影画像を取得する画像取得部と、
前記撮影画像において前記校正指標の中のそれぞれの校正点を検出するための画像処理を実施する画像処理対象領域を設定する画像処理対象領域設定部と、
前記撮影画像の前記画像処理対象領域において前記校正指標の中のそれぞれの校正点を検出する校正点検出部と、
検出された前記校正点に基づいて、前記車載カメラのカメラパラメータを自動調整する調整部と、
前記画像処理対象領域をグラフィック画像による領域枠として前記撮影画像に重畳させて表示部に表示させる表示制御部と、
を備え、
前記表示制御部は、前記調整部による前記自動調整の完了時の前記カメラパラメータを用いて求められた理論上の前記校正点である確認座標と実座標との差が所定の確定しきい値以上であるとき、前記校正点検出部により前記校正点が検出される際とは異なる表示形態で前記領域枠を表示させると好適である。
前記表示制御部が、前記調整部により前記自動調整が実行されている間、前記撮影画像に前記指示入力を与えるためのタッチボタンを重畳させ、
前記指示入力受付部が、前記タッチボタンへの操作があった際に、前記指示入力を受け付けると好適である。
車両に取り付けられた車載カメラの3次元のカメラ座標系と3次元の基準座標系との関係を特定することによって当該車載カメラを校正する車載カメラの校正装置であって、
前記車載カメラにより、前記基準座標系の異なる複数箇所の所定位置に配置された校正指標を視界内に含んで撮影された撮影画像を取得する画像取得部と、
前記カメラ座標系の射影面である前記撮影画像において前記校正指標の中のそれぞれの校正点を検出するための画像処理を実施する画像処理対象領域を設定する画像処理対象領域設定部と、
前記撮影画像の前記画像処理対象領域において前記校正指標の中のそれぞれの校正点を検出する校正点検出部と、
検出された前記校正点に基づいて、前記基準座標系に対して前記カメラ座標系を規定するカメラパラメータを自動調整する調整部と、
前記画像処理対象領域をグラフィック画像による領域枠として前記撮影画像に重畳させて表示部に表示させる表示制御部と、を備えて構成される。上述した本発明の概要、並びに本発明のさらなる特徴及び特性は、下記に示す添付図面を参照して以下に述べる詳細な説明より明らかになるであろう。
る(D1=D2、W1=W2)。ただし、常に左右対称である必要はなく、カメラ1の視野内であって、座標値が既知であればその配置は自由である。マーカ80は、異なる工場等であっても、共通に配置されると校正装置を共通化することができて好ましい。但し、マーカ80の配置の差異は、プログラムやパラメータの変更によって容易に対応できることも多い。従って、工場において確保できる広さや他の設備との関係によってマーカ80は任意に配置されることが可能である。
系における所定座標を座標中心OCとするカメラ座標系を形成するような位置及び姿勢で車両90に設置される。カメラ1が設置される規定位置とは、カメラ座標系の座標中心OCのワールド座標系における座標によって定義される。
される。一般的には、並進成分Tは3行1列の行列により定義される。定義される位置と実際にカメラ1が設置される位置との間にずれが生じることは、外部パラメータにおける並進成分Tの誤差となる。但し、並進成分Tの誤差が、撮影画像を見るドライバーに与える違和感は比較的少ない。また、この設置位置の誤差は、カメラ1から被写体までの距離にほとんど依存することがないので、画像処理に与える影響も少ない。つまり、カメラ1の設置位置に関して、生産工程において適正な公差が設定され、適正に公差管理されていれば、並進パラメータは精度良く設定されているものと考えてもほとんど問題はない。
との関係について説明する。画像座標系(x,y)は、図5に示すようにカメラ1の光軸に一致するカメラ座標系のZC軸に垂直な2次元射影空間(射影面Π)に存在する2次元直交座標系である。射影面Πは、カメラ座標系のZC軸方向にカメラ座標の原点OCからカメラ1の焦点距離fだけ離れて存在する。図5において、u軸はカメラ1の撮像素子の画素の縦配列の方向を示し、v軸はカメラ1の撮像素子の画素の横配列の方向を示す。理想的には、u軸及びv軸は、それぞれ画像座標系のx軸及びy軸に一致する。また、u軸とv軸とのなす角は、理想的には画像座標系のx軸とy軸とのなす角と同様に90度である。角は、上述した内部パラメータの1つであるが、上述したように、ここでは理想的な90度であるとする。
カメラ校正プログラムが起動されると、つまり、校正装置10によりカメラ校正が開始されると、まず、画像取得部11により、カメラ1により撮影された動画像がキャプチャされる。キャプチャされた画像は、画像処理モジュール2を介して、図8に示すようにモニタ装置4に表示される。
校正点特定部12は、キャプチャされた画像から、校正点Qを検出し、画像座標系における校正点Qの座標を実座標として設定する。校正点Qの検出に先立って、画像処理の対象となる領域が関心領域(ROI : region of interest)として射影面Πに設定される。
つまり、校正点を検出するための画像処理が実施される画像処理対象領域が、関心領域ROIとして設定される。校正点特定部12は、画像処理領域設定部としても機能する。この関心領域ROIは、公差の平均値による画像上(射影面Π上)の位置を基準として、カメラ1の取り付け公差と画像処理のためのマージンを考慮して定められた位置とサイズに基づいて設定される。関心領域ROIは、例えば、経験上の一般的な公差やマージンに基づいて、大まかに設定することができる。撮影画像に対して関心領域ROIは狭いので、画像処理の演算負荷は軽減される。また、以下のように精度良く関心領域ROIを設定してもよい。
1つの好適な例としては、カメラ1が規定位置に規定の姿勢で取り付けられた際の回転パラメータに基づいて、校正点Qが存在する理論上の座標値が演算される。そして、カメラ1がカメラ座標系の各軸を中心としてそれぞれ所定角度回転した際に理論上の座標値が分布する範囲が校正点分布範囲となる。校正点分布範囲設定部121が、このようにして求められた校正点分布範囲を画像座標系に設定すると好適である。
次に、校正点分布範囲に基づいて、画像座標系においてマーカ80が分布する範囲が校正指標分布範囲として、校正指標分布範囲設定部122によって画像座標系に設定される。本実施形態においては、この校正指標分布範囲が、関心領域ROIに相当する。具体的には、図9に示すように、カメラ1の光軸が設計値通りの方向を向いている場合に対して、それぞれ±3度〜5度のずれが発生しても、マーカ80が必ず含まれるように、つまり、回転パラメータRの誤差を加味して関心領域ROIが設定される。また、この際、カメラの光学中心(カメラ座標系の原点)のずれ、つまり、並進パラメータTのずれも加味して関心領域ROIが設定されると好適である。校正指標分布範囲は、実質的に校正点を検出するための画像処理を実施する画像処理対象領域に対応する。従って、校正指標分布範囲設定部122は、画像処理対象領域設定部としても機能する。
次に、校正点特定部12は、関心領域ROIの範囲内を画像処理対象として、校正点Qの特定を行う。校正点Qを特定するために、校正点検出部123は、マーカ80の中心点である校正点Qの撮影画像上における座標を検出する。つまり、画像座標系における座標を検出する。この座標は、現実に車両90に設置されたカメラ1により撮影された画像に基づいて検出されるので、校正点Qの「実座標」に相当する。本実施形態のように、マーカ80として市松模様が使用される場合、公知のコーナ検出器を用いて校正点Qを検出することが可能である。
カメラ1が規定位置に規定の姿勢で完全に誤差なく取り付けられたと仮定した場合、つまり、理想的なカメラ座標系の射影面において、それぞれの校正点が特定される理論上の座標を「初期座標」とする。つまり、カメラ座標系とワールド座標系とが理想的な関係を満たす際に、ワールド座標系に対してカメラ座標系を規定するカメラパラメータの初期値により射影面において校正点が特定される座標が「初期座標」である。この「初期座標」と上記「実座標」とはカメラ1が完全に誤差無く取り付けられていない限り異なるものである。以下、カメラパラメータの外部パラメータの内の回転パラメータを、実際のカメラ1の取り付け姿勢に応じて求め、カメラパラメータを更新してカメラ1を構成する手順を詳述する。
メラ座標系の原点OCに相当)から射影面までの距離を示す。3次元直交座標のZC軸は射影面Πに直交し、XCYC平面は射影面Πと平行である。Nベクトルmは、視点OCを始点
として点Pを指し示す単位ベクトルである。Nベクトルnは、点Pを通る直線Lと、視点OCとによって定まる平面FPに垂直な単位法線ベクトルである。つまり、Nベクトルn
は、直線Lを表すベクトルである。尚、ベクトルlは、Nベクトルではなく、直線Lの向きを表す単位ベクトルである。
を表す単位ベクトル、m’は点P’を表すNベクトル、n’は直線L’を表すNベクトルである。
つである。複数の画像を得るために車両90やカメラ1を動かすことは、校正時間を増やし、また校正精度の上からも好ましくない。
座標系)と考える。また、回転後の座標系は、第1のカメラ座標系が光学中心OCを中心
として回転したカメラ座標系(第2のカメラ座標系)と考える。
第1のカメラ座標系は、ワールド座標系の原点OWを基準として純粋に並進した回転成分のない座標系である。図15に示すように光学中心OCからマーカ80の校正点Qを示す点P1、P2へのNベクトルを求める。尚、当然ながら第1行列演算工程では、カメラ1による撮影画像及び撮影画像から得られる各種情報は不要である。本工程は、図6に示す第1行列演算部13において実行されるが、カメラ1による撮影画像は用いない。
の式(2)のようになる。また、Nベクトルnは面OCP1P2の単位法線ベクトルとして、次の式(3)のようになる。
する。
第2のカメラ座標系は、第1のカメラ座標系が光学中心OCを中心として回転した回転成分のある座標系である。第1行列演算工程とは異なり、カメラ1による撮影画像が用いられる。図16に示すように、床面上に配置された校正点Q(P1、P2)は、射影面Π上の点p1、p2に相当する。点p1、p2の射影面Π上での座標値は、既に説明したように、
校正点特定部12において特定されている。従って、図6に示すように、本工程は校正点特定部12の結果を受けて第2行列演算部14において実行される。
トルm’は、下記の式(6)のようになる。また、Nベクトルn’は面OCp1p2の単位法線ベクトルとして、次の式(7)のようになる。
行列R2を演算する
第3行列演算部15は、上記のようにして得られた第1行列R1及び第2行列R2に基づいて、ワールド座標系におけるカメラ1の回転状態を示す回転行列Rを演算する。つまり、上述した式(1)と同様に下記に示す式(10)に従って回転行列Rを演算する。
カメラ1は、ピンホールカメラに代表される透視カメラモデル(perspective camera model)である。透視カメラモデルのカメラ行列は、カメラの内部パラメータ行列と、外部パラメータ行列とから構成される。内部パラメータ行列は、上述したように、焦点距離fなどのカメラ内部のパラメータ行列である。外部パラメータ行列は、並進行列T及び上記で求めた回転行列Rである。射影カメラモデル(projective camera model)は、透視カメラモデルのカメラ行列を一般化して表したものである。射影カメラモデルでは、上記で求めた回転行列Rが得られれば、3次元空間からの投影が可能である。しかし、透視カメラモデルでは、回転行列Rをさらに3次元直交座標の各軸の回転角パン・チルト・ロール
に分解する必要がある。回転角演算部16は、以下に示す手順で各軸の回転角を演算する。
-90[deg] < チルト角θ < +90[deg] ・・・(17)
この拘束条件により、チルト角θのcosの値がゼロとなる場合を無視することができ、一意の回転角θ、φ、ψを求めることができる。まず、拘束条件より、「cosθ>O」なので、負の値を考慮することなく、式(14)は次式(18)となり、チルト角θが定まる。
以上、説明したようにカメラ1の外部パラメータとしての3次元直交座標の各軸に対する回転成分が求められた。外部パラメータの内の並進成分T(TX,TY,TZ)は、光軸中心OCの座標としてワールド座標系において既知である。また、内部パラメータはカメラ1の特性として既知である。従って、カメラパラメータ演算部17は、カメラ1のカメラパラメータ(投影パラメータ)の全てを整えることができる。この時点において、外部パラメータの1つである回転パラメータRは、まだ確定されたものではなく、仮の回転パラメータ(未確定回転パラメータ)である。従って、この仮の回転パラメータを含むカメラパラメータも、仮のカメラパラメータ(未確定カメラパラメータ)である。
カメラ1の仮のカメラパラメータが整うと、座標変換部18は、校正点Q(P1、P2)のワールド座標系の3次元座標値を2次元の射影面Π上の座標値に変換する。つまり、自動調整の完了時の仮のカメラパラメータ(未確定カメラパラメータ)を用いて求められた理論上の校正点の座標値が確認座標として演算される。
HMI制御部20の表示制御部201は、図17に示すように、画像処理モジュール2を介してモニタ装置4の表示部4aに、グラフィック画像としてマーカ枠H(確認マーカ)やタッチボタンを撮影画像に重畳表示させる。マーカ枠Hは、自動調整部30による調整、即ち回転パラメータの値が正しく計算されていた場合に、その枠内にマーカ80が表示される位置に設定されている。
、枠内にマーカ80が入っていることを確認する方が容易と言われている。従って、本実施形態では、確認マーカとしてマーカ枠Hを用いている。作業者は、画面を目視により確認し、マーカ枠Hの中にマーカ80が入っている場合には、カメラ1の校正が良好に完了したと判断して、タッチパネル4bの完了ボタンを操作する。タッチパネル4bへの操作は、HMI制御部20の指示入力受付部202を介して自動調整部30やカメラパラメータ設定部19へ伝達される。
上記、調整完了確認工程におけるタッチパネル4bへの操作は、仮カメラ調整値をカメラ調整値として確定させる確定指示入力である。指示入力受付部202を介して、この確定指示入力を受け取ったカメラパラメータ設定部19は、自動調整部30において演算された回転パラメータRを含む仮のカメラパラメータ(未確定カメラパラメータ)をカメラパラメータとして設定する。具体的には、図3に示すように、CPU5に接続されたパラメータメモリ7に記憶されるカメラパラメータが、CPU5によって書き換えられる。上述したように、パラメータメモリ7は、書き換え可能な不揮発性メモリや、バックアップ電源を有したその他のメモリによって構成されている。好適には、フラッシュメモリやE2PROMを用いるとよい。
調整完了確認工程において、図18に示すように、マーカ枠Hの中にマーカ80が入っていない場合には、作業者は、カメラ1の校正が完了していないと判断する。このとき、表示制御部201は、マーカ枠Hや十字型マーカJを上記とは異なる表示形態で表示させる。例えば、マーカ枠Hや十字型マーカJを点滅させたり、異なる表示色で表示させたりする。また、表示制御部201は、ROI枠Fを校正点検出部12により校正点が検出される際とは異なる表示形態で表示させる。上述したように、CPU5は、切れ目なく校正点特定工程から自動調整工程へと処理を続けていくので、作業者による確認のためのROI枠Fは、自動調整工程の間も継続して表示されると好適である。従って、ROI枠Fが継続して表示されていた場合には、表示制御部201は、ROI枠Fの表示形態を変化させる。例えば、ROI枠Fの表示色を緑色から赤色に変化させたり、点滅させたりすることによって、作業者に注意喚起する。連続して表示されていたROI枠Fの表示形態を変化させるので作業者に対する視認性が向上する。
央の座標は、理論上の校正点の座標に相当する。作業者は、必要に応じてタッチパネル4bの矢印ボタンを操作し、特許文献1や特許文献2のように、画面上における回転角度や上下左右の位置を調整することによって、マーカ枠Hにマーカ80が収まるように手動で校正を行う。尚、手動調整に際しては、2つの確認マーカH(J)を結ぶ線(確認座標を結ぶ線)を表示部4aに表示させると、作業性の向上が期待できる。CPU5は、特許文献1や特許文献2と同様に、タッチパネル4bに表示されたタッチボタンの操作量に応じて、自動調整部30において算出されたカメラパラメータを補正する。補正されたカメラパラメータは、仮のカメラパラメータ(未確定カメラパラメータ)である。
マーカ枠Hにマーカ80が収まると、作業者は、タッチパネル4bの完了ボタンを操作する。タッチパネル4bへの操作は、HMI制御部20の指示入力受付部202を介して自動調整部30や手動調整部60、カメラ調整値設定部19へ伝達される。そして、手動調整完了後の仮のカメラパラメータがパラメータメモリ7に書き込まれる。校正装置10の全ての処理が完了し、モニタ装置4の表示部4aには、図7と同様に、例えば、ナビゲーションシステムの地図画面が表示される。
尚、表示制御部201は、上述した調整完了確認工程において、確認座標と実座標との差が所定の確定しきい値未満であっても、確認マーカ(マーカ枠Hや十字型マーカJ)や領域枠(ROI枠F)の表示形態を変化させることがある。表示制御部201は、自動調整完了時のカメラパラメータと、カメラパラメータの初期値とが同一の値であるとき、確定しきい値による判定結果に拘わらず、校正点検出部12により校正点が検出される際の関心領域ROIを示す領域枠Fとは異なる表示形態で領域枠Fを表示させる。また、表示制御部201は、確認マーカH(J)を異なる表示形態で表示させてもよい。
もいえる。
(1)上述した本実施形態では、作業者がモニタ装置4のシステム設定ボタン4hを操作して、表示部4aに設定画面を表示させ、タッチパネル4bの所定のタッチボタンを操作することで、校正装置10を起動させた。また、校正装置10は、基本的に自動調整を行い、確認工程において手動調整が必要な場合に作業者が手動で調整を実施した。しかし、生産工場や修理工場ごとに設備が異なる場合もあり、全ての生産工場や修理工場において自動調整が可能であるとは限らない。そこで、校正装置10の起動時においては、図20に示すように、自動調整と手動調整とが選択可能に構成されていると好適である。
4a:表示部
10:校正装置
11:画像取得部
12:校正点特定部
19:カメラパラメータ設定部
30:自動調整部(調整部)
80:マーカ80(校正指標)
90:車両
121:校正点分布範囲設定部
122:校正指標分布範囲設定部
123:校正点検出部
201:表示制御部
202:指示入力受付部
F:ROI枠(領域枠)
Q、Q1、Q2:校正点
Π:射影面
Claims (7)
- 車両に取り付けられた車載カメラを自動校正する車載カメラの校正装置であって、
前記車載カメラにより、異なる複数箇所の所定位置に配置された校正指標を視界内に含んで撮影された撮影画像を取得する画像取得部と、
前記撮影画像において前記校正指標の中のそれぞれの校正点を検出するための画像処理を実施する画像処理対象領域を設定する画像処理対象領域設定部と、
前記撮影画像の前記画像処理対象領域において前記校正指標の中のそれぞれの校正点を検出する校正点検出部と、
検出された前記校正点に基づいて、前記車載カメラのカメラパラメータを自動調整する調整部と、
前記自動校正を実行している間において、前記画像処理対象領域をグラフィック画像による領域枠として前記撮影画像に重畳させて表示部に表示させる表示制御部と、
を備える車載カメラの校正装置。 - 車両に取り付けられた車載カメラを校正する車載カメラの校正装置であって、
前記車載カメラにより、異なる複数箇所の所定位置に配置された校正指標を視界内に含んで撮影された撮影画像を取得する画像取得部と、
前記撮影画像において前記校正指標の中のそれぞれの校正点を検出するための画像処理を実施する画像処理対象領域を設定する画像処理対象領域設定部と、
前記撮影画像の前記画像処理対象領域において前記校正指標の中のそれぞれの校正点を検出する校正点検出部と、
検出された前記校正点に基づいて、前記車載カメラのカメラパラメータを自動調整する調整部と、
前記画像処理対象領域をグラフィック画像による領域枠として前記撮影画像に重畳させて表示部に表示させる表示制御部と、
を備え、
前記車載カメラが規定位置に規定の姿勢で取り付けられた際の前記カメラパラメータの初期値が設定されており、
前記表示制御部は、前記調整部による前記自動調整の完了時の前記カメラパラメータと、前記カメラパラメータの初期値とが同一の値であるとき、前記校正点検出部により前記校正点が検出される際とは異なる表示形態で前記領域枠を表示させる車載カメラの校正装置。 - 車両に取り付けられた車載カメラを校正する車載カメラの校正装置であって、
前記車載カメラにより、異なる複数箇所の所定位置に配置された校正指標を視界内に含んで撮影された撮影画像を取得する画像取得部と、
前記撮影画像において前記校正指標の中のそれぞれの校正点を検出するための画像処理を実施する画像処理対象領域を設定する画像処理対象領域設定部と、
前記撮影画像の前記画像処理対象領域において前記校正指標の中のそれぞれの校正点を検出する校正点検出部と、
検出された前記校正点に基づいて、前記車載カメラのカメラパラメータを自動調整する調整部と、
前記画像処理対象領域をグラフィック画像による領域枠として前記撮影画像に重畳させて表示部に表示させる表示制御部と、
を備え、
前記表示制御部は、前記調整部による前記自動調整の完了時の前記カメラパラメータを用いて求められた理論上の前記校正点である確認座標と実座標との差が所定の確定しきい値以上であるとき、前記校正点検出部により前記校正点が検出される際とは異なる表示形態で前記領域枠を表示させる車載カメラの校正装置。 - 前記表示制御部は、前記調整部により前記自動調整が実行されている間、前記領域枠を前記撮影画像に重畳させる請求項1〜3の何れか一項に記載の車載カメラの校正装置。
- 前記調整部による前記自動調整を中断させるための指示入力を受け付ける指示入力受付部を備える請求項1〜4の何れか一項に記載の車載カメラの校正装置。
- 前記調整部による前記自動調整を中止させるための指示入力を受け付ける指示入力受付部を備える請求項1〜4の何れか一項に記載の車載カメラの校正装置。
- 前記表示制御部は、前記調整部により前記自動調整が実行されている間、前記撮影画像に前記指示入力を与えるためのタッチボタンを重畳させ、
前記指示入力受付部は、前記タッチボタンへの操作があった際に、前記指示入力を受け付ける請求項5または6に記載の車載カメラの校正装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011084745A JP5081313B2 (ja) | 2011-04-06 | 2011-04-06 | 車載カメラの校正装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011084745A JP5081313B2 (ja) | 2011-04-06 | 2011-04-06 | 車載カメラの校正装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009085479A Division JP4751939B2 (ja) | 2009-03-31 | 2009-03-31 | 車載カメラの校正装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011155687A JP2011155687A (ja) | 2011-08-11 |
JP5081313B2 true JP5081313B2 (ja) | 2012-11-28 |
Family
ID=44541244
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011084745A Active JP5081313B2 (ja) | 2011-04-06 | 2011-04-06 | 車載カメラの校正装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5081313B2 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6260891B2 (ja) * | 2013-08-08 | 2018-01-17 | パナソニックIpマネジメント株式会社 | 画像処理装置および画像処理方法 |
US10501788B2 (en) * | 2015-02-06 | 2019-12-10 | Life Technologies Corporation | System and methods for calibrating binding dyes |
JP6252881B1 (ja) * | 2017-01-31 | 2017-12-27 | パナソニックIpマネジメント株式会社 | 車載カメラ |
WO2018143064A1 (ja) * | 2017-01-31 | 2018-08-09 | パナソニックIpマネジメント株式会社 | 車載カメラ |
JP6643685B2 (ja) * | 2017-11-22 | 2020-02-12 | パナソニックIpマネジメント株式会社 | 車載カメラ |
JP6765065B2 (ja) * | 2017-11-15 | 2020-10-07 | パナソニックIpマネジメント株式会社 | 車載カメラ装置 |
CN108613697A (zh) * | 2018-05-31 | 2018-10-02 | 北京智行者科技有限公司 | 用于对车辆传感器的参数进行标定的设备和方法 |
JP2020036166A (ja) * | 2018-08-29 | 2020-03-05 | アルパイン株式会社 | 画像表示装置、画像表示方法 |
TWI705011B (zh) * | 2019-03-12 | 2020-09-21 | 緯創資通股份有限公司 | 車載鏡頭偏移檢測方法與車載鏡頭偏移檢測系統 |
CN112637585A (zh) * | 2020-12-15 | 2021-04-09 | 上海交通建设总承包有限公司 | 一种单反相机全景拍摄过程中透视错位现象的矫正方法 |
WO2024100877A1 (ja) * | 2022-11-11 | 2024-05-16 | 日立Astemo株式会社 | 車用電子装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3708510B2 (ja) * | 2002-08-26 | 2005-10-19 | 本田技研工業株式会社 | 車載レーダおよび車載カメラの照準調整検査装置 |
JP4238663B2 (ja) * | 2003-08-29 | 2009-03-18 | トヨタ自動車株式会社 | 車載カメラのキャリブレーション方法及びキャリブレーション装置 |
JP4803450B2 (ja) * | 2006-11-20 | 2011-10-26 | アイシン精機株式会社 | 車載カメラの校正装置及び当該装置を用いた車両の生産方法 |
-
2011
- 2011-04-06 JP JP2011084745A patent/JP5081313B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2011155687A (ja) | 2011-08-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4751939B2 (ja) | 車載カメラの校正装置 | |
JP4690476B2 (ja) | 車載カメラの校正装置 | |
JP5081313B2 (ja) | 車載カメラの校正装置 | |
JP4636346B2 (ja) | 車載カメラの校正装置、方法、及びプログラム | |
JP5240527B2 (ja) | 車載カメラの校正装置、方法、及びプログラム | |
JP4803450B2 (ja) | 車載カメラの校正装置及び当該装置を用いた車両の生産方法 | |
JP2008131177A (ja) | 車載カメラの校正装置、校正方法、並びにこの校正方法を用いた車両の生産方法 | |
WO2010109730A1 (ja) | カメラ校正装置 | |
WO2010113672A1 (ja) | 車載カメラの校正に用いられる校正指標と、当該校正指標を用いた車載カメラの校正方法と、当該校正指標を用いた車載カメラの校正装置のためのプログラム | |
JP6565769B2 (ja) | 車載カメラの取付角度検出装置、取付角度較正装置、取付角度検出方法、取付角度較正方法、およびコンピュータープログラム | |
JP2011151666A (ja) | パラメータ取得装置、パラメータ取得システム、パラメータ取得方法、及び、プログラム | |
US9162621B2 (en) | Parking support apparatus | |
JP2011064566A (ja) | 距離推定装置 | |
JP6669182B2 (ja) | 乗員監視装置 | |
KR102227850B1 (ko) | 차량용 후방 카메라의 영상 보정 방법 | |
JP6015276B2 (ja) | カメラ取り付け誤差補正装置及びカメラ取り付け誤差補正方法 | |
JP2009212734A (ja) | 自動校正単眼ステレオ視装置 | |
WO2018130605A1 (en) | Method for calibrating a camera for a motor vehicle considering a calibration error, camera as well as motor vehicle | |
JP4873272B2 (ja) | カメラ校正装置 | |
JP2010232852A (ja) | カメラ校正装置 | |
JP7066378B2 (ja) | 画像処理装置及び画像処理方法 | |
KR101973408B1 (ko) | 영상 교정 장치 및 영상 교정 방법 | |
JP2014059792A (ja) | カメラ取り付け誤差補正装置及びカメラ取り付け誤差補正方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110408 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110510 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120419 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120426 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120620 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120816 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120831 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150907 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5081313 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |