JP7019431B2 - カメラキャリブレーション装置、カメラキャリブレーション方法、およびプログラム - Google Patents
カメラキャリブレーション装置、カメラキャリブレーション方法、およびプログラム Download PDFInfo
- Publication number
- JP7019431B2 JP7019431B2 JP2018008143A JP2018008143A JP7019431B2 JP 7019431 B2 JP7019431 B2 JP 7019431B2 JP 2018008143 A JP2018008143 A JP 2018008143A JP 2018008143 A JP2018008143 A JP 2018008143A JP 7019431 B2 JP7019431 B2 JP 7019431B2
- Authority
- JP
- Japan
- Prior art keywords
- camera
- height
- frames
- coordinate system
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Image Analysis (AREA)
- Vehicle Interior And Exterior Ornaments, Soundproofing, And Insulation (AREA)
- Studio Devices (AREA)
Description
(第1の実施の形態)
図1は、第1の実施の形態のカメラキャリブレーション装置1の構成を示す図である。カメラキャリブレーション装置1は、カメラの姿勢および路面からの高さのキャリブレーションを行う。カメラキャリブレーション装置1は、キャリブレーション対象のリアカメラ22と接続されており、リアカメラ22にて撮影された画像を取得する。また、カメラキャリブレーション装置1は、車載エリアネットワーク(CAN)21に接続されており、CAN21から車両センサ信号を受信する。
図7は、第2の実施の形態のカメラキャリブレーション装置2の構成を示す図である。第2の実施の形態のカメラキャリブレーション装置2は、キャリブレーション対象のリアカメラ22の他に、フロントカメラ23を備えた車両に適用される。リアカメラ22とフロントカメラ23との相対的な位置関係は事前にキャリブレーションされており既知であるとする。第2の実施の形態では、フロントカメラ23で撮影した映像データをも用いて、リアカメラ22のキャリブレーションを行う。
図10は、第3の実施の形態のカメラキャリブレーション装置3の構成を示す図である。第3の実施の形態のカメラキャリブレーション装置3は、第1の実施の形態のカメラキャリブレーション装置1の構成に加え、路面領域特定部15を備えている。
図11は、第4の実施の形態のカメラキャリブレーション装置4の構成を示す図である。第4の実施の形態のカメラキャリブレーション装置4は、第1の実施の形態のカメラキャリブレーション装置1の構成に加え、ピッチ変動検知部16を備えている。
10 受信部
11 カメラ移動量計算部
12 路面フロー抽出部
13 カメラパラメータ抽出部
14 カメラパラメータ記憶部
15 路面領域特定部
16 ピッチ変動検知部
21 CAN
22 リアカメラ
23 フロントカメラ
Claims (6)
- 車両に搭載されたカメラのキャリブレーションを行う装置であって、
キャリブレーション対象の前記カメラにて撮影した画像中の路面領域にある特徴点のフレーム間におけるフローと、キャリブレーション対象の前記カメラとの位置関係が既知の第2のカメラにて撮影したフレーム間における特徴点のフローを抽出するフロー抽出部と、
車両センサ信号を受信する受信部と、
前記車両センサ信号から車両座標系における前記フレーム間のカメラ回転量Rvおよび移動量Cvを計算するカメラ移動量計算部と、
車両座標系における前記フレーム間のカメラ回転量Rvおよび移動量Cvと、カメラ姿勢Rcおよび高さhcとを用いて表現されたホモグラフィー行列Hmによって変換される特徴点の位置がキャリブレーション対象の前記カメラにて撮影した特徴点のフローと整合し、かつ、前記第2のカメラのカメラ座標系におけるホモグラフィー行列Hiであって、キャリブレーション対象の前記カメラのカメラ回転量Rvおよび移動量Cvと、カメラ間の相対姿勢ΔRiおよび相対位置ΔCi、カメラ姿勢Rcおよび高さhcとを用いて表現されたホモグラフィー行列Hiによって変換される特徴点の位置が、前記第2のカメラで撮影した特徴点のフローと整合するように、カメラ姿勢Rcおよび高さhcの最適解を求めるカメラパラメータ更新部と、
を備えるカメラキャリブレーション装置。 - キャリブレーション前のカメラ姿勢Rc0および高さhc0のデータを記憶した記憶部を備え、
前記カメラパラメータ更新部は、カメラ姿勢Rc0および高さhc0を初期値として、カメラ姿勢Rcおよび高さhcの最適解を求め、求めたカメラ姿勢Rcおよび高さhcを前記記憶部に記憶する請求項1に記載のカメラキャリブレーション装置。 - 前記車両センサ信号に基づいて前記車両が走行した軌跡を求め、当該軌跡およびカメラ姿勢Rcおよび高さhcに基づいて前記路面領域を特定し、その路面領域に基づいて路面フローを抽出する請求項1または2に記載のカメラキャリブレーション装置。
- 前記カメラで撮影された画像に基づいて、前記カメラのピッチ軸回りの所定の閾値以上の変動を検知するピッチ変動検知部を備え、
前記ピッチ変動検知部にて、所定の閾値以上の変動を検知したときに、当該変動の際に撮影された画像をキャリブレーションの処理から除外する請求項1乃至3のいずれかに記載のカメラキャリブレーション装置。 - 車両に搭載されたカメラのキャリブレーションを行う方法であって、
キャリブレーション対象の前記カメラにて撮影した画像中の路面領域にある特徴点のフレーム間におけるフローと、キャリブレーション対象の前記カメラとの位置関係が既知の第2のカメラにて撮影したフレーム間における特徴点のフローを抽出するステップと、
車両センサ信号を受信するステップと、
前記車両センサ信号から車両座標系における前記フレーム間のカメラ回転量Rvおよび移動量Cvを計算するステップと、
車両座標系における前記フレーム間のカメラ回転量Rvおよび移動量Cvと、カメラ姿勢Rcおよび高さhcとを用いて表現されたホモグラフィー行列Hmによって変換される特徴点の位置が、キャリブレーション対象の前記カメラにて撮影した特徴点のフレーム間におけるフローと整合し、かつ、前記第2のカメラのカメラ座標系におけるホモグラフィー行列Hiであって、キャリブレーション対象の前記カメラのカメラ回転量Rvおよび移動量Cvと、カメラ間の相対姿勢ΔRiおよび相対位置ΔCi、カメラ姿勢Rcおよび高さhcとを用いて表現されたホモグラフィー行列Hiによって変換される特徴点の位置が、前記第2のカメラで撮影した特徴点のフローと整合するように、カメラ姿勢Rcおよび高さhcの最適解を求めるステップと、
を備えるカメラキャリブレーション方法。 - 車両に搭載されたカメラのキャリブレーションを行うためのプログラムであって、コンピュータに、
キャリブレーション対象の前記カメラにて撮影した画像中の路面領域にある特徴点のフレーム間におけるフローと、キャリブレーション対象の前記カメラとの位置関係が既知の第2のカメラにて撮影したフレーム間における特徴点のフローを抽出するステップと、
車両センサ信号を受信するステップと、
前記車両センサ信号から車両座標系における前記フレーム間のカメラ回転量Rvおよび移動量Cvを計算するステップと、
車両座標系における前記フレーム間のカメラ回転量Rvおよび移動量Cvと、カメラ姿勢Rcおよび高さhcとを用いて表現されたホモグラフィー行列Hmによって変換される特徴点の位置が、キャリブレーション対象の前記カメラにて撮影した特徴点のフレーム間におけるフローと整合し、かつ、前記第2のカメラのカメラ座標系におけるホモグラフィー行列Hiであって、キャリブレーション対象の前記カメラのカメラ回転量Rvおよび移動量Cvと、カメラ間の相対姿勢ΔRiおよび相対位置ΔCi、カメラ姿勢Rcおよび高さhcとを用いて表現されたホモグラフィー行列Hiによって変換される特徴点の位置が、前記第2のカメラで撮影した特徴点のフローと整合するように、カメラ姿勢Rcおよび高さhcの最適解を求めるステップと、
を実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018008143A JP7019431B2 (ja) | 2018-01-22 | 2018-01-22 | カメラキャリブレーション装置、カメラキャリブレーション方法、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018008143A JP7019431B2 (ja) | 2018-01-22 | 2018-01-22 | カメラキャリブレーション装置、カメラキャリブレーション方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019129341A JP2019129341A (ja) | 2019-08-01 |
JP7019431B2 true JP7019431B2 (ja) | 2022-02-15 |
Family
ID=67472751
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018008143A Active JP7019431B2 (ja) | 2018-01-22 | 2018-01-22 | カメラキャリブレーション装置、カメラキャリブレーション方法、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7019431B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113192123B (zh) * | 2020-01-14 | 2024-05-24 | 杭州海康威视数字技术股份有限公司 | 一种图像处理方法、装置及设备 |
CN117459688B (zh) * | 2023-12-26 | 2024-05-03 | 海纳云物联科技有限公司 | 基于地图系统的摄像头角度标示方法、装置及介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010223619A (ja) | 2009-03-19 | 2010-10-07 | Honda Motor Co Ltd | キャリブレーション装置およびキャリブレーション方法 |
JP2014048803A (ja) | 2012-08-30 | 2014-03-17 | Denso Corp | 画像処理装置、及びプログラム |
JP2017143417A (ja) | 2016-02-10 | 2017-08-17 | クラリオン株式会社 | キャリブレーションシステム、キャリブレーション装置 |
-
2018
- 2018-01-22 JP JP2018008143A patent/JP7019431B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010223619A (ja) | 2009-03-19 | 2010-10-07 | Honda Motor Co Ltd | キャリブレーション装置およびキャリブレーション方法 |
JP2014048803A (ja) | 2012-08-30 | 2014-03-17 | Denso Corp | 画像処理装置、及びプログラム |
JP2017143417A (ja) | 2016-02-10 | 2017-08-17 | クラリオン株式会社 | キャリブレーションシステム、キャリブレーション装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2019129341A (ja) | 2019-08-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10620000B2 (en) | Calibration apparatus, calibration method, and calibration program | |
EP3430594B1 (en) | Method for motion estimation between two images of an environmental region of a motor vehicle, computing device, driver assistance system as well as motor vehicle | |
US10594943B2 (en) | Camera calibration device and camera calibration system | |
JP5133783B2 (ja) | 車載装置 | |
US9330472B2 (en) | System and method for distorted camera image correction | |
US20100201814A1 (en) | Camera auto-calibration by horizon estimation | |
KR102528002B1 (ko) | 탑뷰 영상 생성 장치 및 그 방법 | |
US9892519B2 (en) | Method for detecting an object in an environmental region of a motor vehicle, driver assistance system and motor vehicle | |
JP7137464B2 (ja) | カメラキャリブレーション装置、カメラキャリブレーション方法、およびプログラム | |
WO2016129552A1 (ja) | カメラパラメータ調整装置 | |
KR102328031B1 (ko) | 탑-뷰 영상 생성 장치 및 그 방법 | |
JP7019431B2 (ja) | カメラキャリブレーション装置、カメラキャリブレーション方法、およびプログラム | |
JP6768554B2 (ja) | キャリブレーション装置 | |
WO2019156072A1 (ja) | 姿勢推定装置 | |
US8213684B2 (en) | Motion estimating device | |
KR101394770B1 (ko) | 곡선 차선 모델을 이용한 영상 안정화 방법 및 시스템 | |
JP5695405B2 (ja) | 車両用画像処理装置および車両用画像処理方法 | |
JP2021193340A (ja) | 自己位置推定装置 | |
CN115861975A (zh) | 障碍物车辆位姿估计方法及设备 | |
JP3951734B2 (ja) | 車両用外界認識装置 | |
CN110836656B (zh) | 用于单目adas的防抖测距方法、装置和电子设备 | |
JP2020087210A (ja) | キャリブレーション装置及びキャリブレーション方法 | |
CN111583387A (zh) | 一种无人驾驶室外场景三维重建的方法和系统 | |
KR20180052415A (ko) | 차량용 카메라 영상 기반 공차 보정 방법 | |
KR102457265B1 (ko) | 탑-뷰 영상 생성 장치 및 그 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200604 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210521 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210713 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210824 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220125 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220202 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7019431 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |