JP2012075060A5 - - Google Patents

Download PDF

Info

Publication number
JP2012075060A5
JP2012075060A5 JP2010220250A JP2010220250A JP2012075060A5 JP 2012075060 A5 JP2012075060 A5 JP 2012075060A5 JP 2010220250 A JP2010220250 A JP 2010220250A JP 2010220250 A JP2010220250 A JP 2010220250A JP 2012075060 A5 JP2012075060 A5 JP 2012075060A5
Authority
JP
Japan
Prior art keywords
image
image processing
processing apparatus
degree
coincidence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010220250A
Other languages
English (en)
Other versions
JP2012075060A (ja
JP5588812B2 (ja
Filing date
Publication date
Application filed filed Critical
Priority to JP2010220250A priority Critical patent/JP5588812B2/ja
Priority claimed from JP2010220250A external-priority patent/JP5588812B2/ja
Priority to PCT/JP2011/067118 priority patent/WO2012043045A1/ja
Priority to EP11828606.1A priority patent/EP2624575A4/en
Priority to US13/818,625 priority patent/US20130147948A1/en
Publication of JP2012075060A publication Critical patent/JP2012075060A/ja
Publication of JP2012075060A5 publication Critical patent/JP2012075060A5/ja
Application granted granted Critical
Publication of JP5588812B2 publication Critical patent/JP5588812B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

前記課題を解決するために、本発明の画像処理装置及び撮像装置は主として、視野が重複し、位置,角度,拡大率のいずれか少なくとも1つが異なるように撮像された2つの画像を補正する予め記憶された、あるいは演算により算出された補正データを読み込む補正データ読み込み部と、補正データ読み込み部で読み込まれた補正データを用いて撮像された画像を補正する画像補正部と、画像補正部で補正された2つの画像中から対応する対応領域を算出する対応領域算出部と、対応領域から抽出された画像パターンの一致度、対応領域間の座標の一致度、対応領域間の間隔の一致度、の少なくとも1つを算出する一致度算出部と、一致度算出部で算出された一致度に基づいてカメラパラメータを算出するカメラパラメータ算出部と、カメラパラメータ算出部で算出されたカメラパラメータ、又はカメラパラメータに基づく補正データ、を格納する補正データ格納部と、を有する構成とする。

Claims (15)

  1. 視野が重複し、位置,角度,拡大率のいずれか少なくとも1つが異なるように撮像された2つの画像を補正する予め記憶された、あるいは演算により算出された補正データを読み込む補正データ読み込み部と、
    前記補正データ読み込み部で読み込まれた前記補正データを用いて撮像された画像を補正する画像補正部と、
    前記画像補正部で補正された2つの画像中から対応する対応領域を算出する対応領域算出部と、
    前記対応領域から抽出された画像パターンの一致度、前記対応領域間の座標の一致度、前記対応領域間の間隔の一致度、の少なくとも1つを算出する一致度算出部と、
    前記一致度算出部で算出された前記一致度に基づいてカメラパラメータを算出するカメラパラメータ算出部と、
    前記カメラパラメータ算出部で算出された前記カメラパラメータ、又は前記カメラパラメータに基づく補正データ、を格納する補正データ格納部と、を有する画像処理装置。
  2. 請求項1記載の画像処理装置において、
    前記カメラパラメータ算出部で算出された前記カメラパラメータは、前記撮像素子の焦点距離,画素の縦方向の大きさ,画素の横方向の大きさ,縦方向の拡大率,横方向の拡大率,前記撮像素子の縦軸と横軸の成す角度,光軸中心の座標、の少なくとも1からなる内部パラメータ、又は、前記撮像素子間の回転角度、前記撮像素子間の平行移動量の少なくとも1つからなる外部パラメータ、又は画像の歪みを補正する歪みパラメータである画像処理装置。
  3. 請求項1記載の画像処理装置において、
    前記対応領域算出部は、撮像された2つの画像中から平行なパターンの端点の組を対応領域として算出する画像処理装置。
  4. 請求項3記載の画像処理装置において、
    前記一致度算出部は、前記対応領域間の間隔の一致度を算出する場合、前記対応領域間の間隔の平均値、前記対応領域間の間隔の最小値、前記対応領域間の間隔の最大値の少なくとも1つから算出した値、予め記憶又は定義された平行なパターンの幅の値、外部機器から受信された平行なパターンの幅の値、の少なくとも1つを比較して一致度を算出する画像処理装置。
  5. 請求項1記載の画像処理装置において、
    前記一致度算出部は、前記対応領域内の輝度値,輝度変化量,輝度変化の方向,カラー情報,カラーの変化量,輝度のヒストグラム,輝度変化量のヒストグラム,カラーの変化量のヒストグラム,輝度変化の方向のヒストグラム,カラー変化の方向のヒストグラム、の少なくとも1つの画像から得られる特徴量に基づいて前記対応領域間の一致度を算出する画像処理装置。
  6. 請求項1記載の画像処理装置において、
    前記補正データは、予め記憶されたカメラパラメータ、又は前記カメラパラメータに基づいて算出された補正前後の対応関係を示す変換テーブルである画像処理装置。
  7. 請求項6記載の画像処理装置において、
    前記カメラパラメータ算出部で算出された前記カメラパラメータ、又は前記変換テーブル、を補正データとして格納する補正データ格納部を有する画像処理装置。
  8. 請求項1記載の画像処理装置において、
    前記画像補正部は、前記2つの撮像素子の一方の撮像素子のカメラパラメータを補正データとして他方の撮像素子で撮像された画像を補正する画像処理装置。
  9. 請求項3記載の画像処理装置において、
    前記対応領域算出部は、撮像された画像から検知された、歩行者,車両,路面,路面標示,建造物,構造物の少なくとも1つのパターンを含む領域を前記対応領域として算出する画像処理装置。
  10. 請求項3記載の画像処理装置において、
    前記対応領域算出部は、撮像された画像から検知された、室内に存在する床と壁面の境界線,天井と壁面の境界線,窓枠、の少なくとも1つのパターンを含む領域を前記対応領域として算出する画像処理装置。
  11. 請求項1記載の画像処理装置において、
    前記一致度算出部が算出した一致度に基づいて、前記撮像素子に異常が発生しているか否か、又は読み込んだ前記補正データが正常か否かを判定し、
    判定した結果に基づいて、前記撮像素子の動作を停止する停止信号の出力、又はユーザに警告を発する警告信号の出力を行う画像処理装置。
  12. 請求項1記載の画像処理装置において、
    前記対応領域算出部は、撮像された1つの画像に複数の対応領域が算出された画像処理装置。
  13. 請求項12記載の画像処理装置において、
    前記複数の対応領域は、前記撮像素子からの距離の異なる対応領域を有する画像処理装置。
  14. 請求項1記載の画像処理装置において、
    前記撮像素子で撮像された画像は、異なるタイミングで撮像された画像である画像処理装置。
  15. 画像を撮像する2つの撮像素子と、
    撮像された画像を画像処理する処理手段と、を有し、
    前記処理手段は、
    前記2つの撮像素子で撮像された2つの画像を補正する予め記憶された補正データを読み込む補正データ読み込み部と、
    前記補正データ読み込み部で読み込まれた前記補正データを用いて撮像された画像を補正する画像補正部と、
    前記画像補正部で補正された2つの画像中から対応する対応領域を算出する対応領域算出部と、
    前記対応領域から抽出された画像パターンの一致度、前記対応領域間の座標の一致度、前記対応領域間の間隔の一致度、の少なくとも1つを算出する一致度算出部と、
    前記一致度算出部で算出された前記一致度に基づいてカメラパラメータを算出するカメラパラメータ算出部と、を有する撮像装置。
JP2010220250A 2010-09-30 2010-09-30 画像処理装置及びそれを用いた撮像装置 Active JP5588812B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2010220250A JP5588812B2 (ja) 2010-09-30 2010-09-30 画像処理装置及びそれを用いた撮像装置
PCT/JP2011/067118 WO2012043045A1 (ja) 2010-09-30 2011-07-27 画像処理装置及びそれを用いた撮像装置
EP11828606.1A EP2624575A4 (en) 2010-09-30 2011-07-27 Image processing device and image capturing device using same
US13/818,625 US20130147948A1 (en) 2010-09-30 2011-07-27 Image processing apparatus and imaging apparatus using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010220250A JP5588812B2 (ja) 2010-09-30 2010-09-30 画像処理装置及びそれを用いた撮像装置

Publications (3)

Publication Number Publication Date
JP2012075060A JP2012075060A (ja) 2012-04-12
JP2012075060A5 true JP2012075060A5 (ja) 2012-11-08
JP5588812B2 JP5588812B2 (ja) 2014-09-10

Family

ID=45892522

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010220250A Active JP5588812B2 (ja) 2010-09-30 2010-09-30 画像処理装置及びそれを用いた撮像装置

Country Status (4)

Country Link
US (1) US20130147948A1 (ja)
EP (1) EP2624575A4 (ja)
JP (1) JP5588812B2 (ja)
WO (1) WO2012043045A1 (ja)

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013182873A1 (en) * 2012-06-08 2013-12-12 Nokia Corporation A multi-frame image calibrator
EP2963633A4 (en) * 2013-02-27 2016-12-07 Hitachi Automotive Systems Ltd OBJECT SENSOR
JP5897769B2 (ja) * 2013-04-16 2016-03-30 富士フイルム株式会社 撮像装置、キャリブレーションシステム、及びプログラム
KR102122905B1 (ko) * 2013-12-13 2020-06-16 청주대학교 산학협력단 히스토그램 구간 교정을 이용한 스테레오 영상의 휘도 보정 방법 및 이에 이용되는 기록매체
US9262801B2 (en) 2014-04-01 2016-02-16 Gopro, Inc. Image taping in a multi-camera array
KR102331534B1 (ko) * 2014-04-11 2021-11-26 한화테크윈 주식회사 카메라 시스템 및 카메라 제어 방법
FR3020684B1 (fr) * 2014-04-30 2017-05-19 Horiba Jobin Yvon Sas Systeme et procede de spectrometrie de decharge luminescente et de mesure in situ de la profondeur de gravure d'un echantillon
JP6183305B2 (ja) 2014-07-02 2017-08-23 株式会社デンソー 故障検出装置および故障検出プログラム
DE102014213175A1 (de) * 2014-07-07 2016-01-07 Conti Temic Microelectronic Gmbh Vorrichtung zur entfernungsmessung, fahrzeug und verfahren
JP6550881B2 (ja) * 2014-07-14 2019-07-31 株式会社リコー 立体物検出装置、立体物検出方法、立体物検出プログラム、及び移動体機器制御システム
DE102014219423B4 (de) * 2014-09-25 2023-09-21 Continental Autonomous Mobility Germany GmbH Dynamisches Modell zur Kompensation von Verzeichnungen einer Windschutzscheibe
DE102014117888A1 (de) * 2014-12-04 2016-10-13 Connaught Electronics Ltd. Online-Kalibrierung eines Kraftfahrzeug-Kamerasystems
KR101671073B1 (ko) 2014-12-12 2016-10-31 숭실대학교산학협력단 랜드마크 인식에 기반한 카메라 영상 보정 방법 및 서비스 서버
US10931933B2 (en) * 2014-12-30 2021-02-23 Eys3D Microelectronics, Co. Calibration guidance system and operation method of a calibration guidance system
EP3315905B1 (en) * 2015-06-24 2020-04-22 Kyocera Corporation Image processing device, stereo camera device, vehicle, and image processing method
CN105518221A (zh) * 2015-09-30 2016-04-20 株式会社小松制作所 拍摄装置的校正系统、作业机械和拍摄装置的校正方法
CN108028883B (zh) 2015-09-30 2020-11-03 索尼公司 图像处理装置和图像处理方法
EP3358293A4 (en) * 2015-09-30 2019-04-10 Sony Corporation IMAGE PROCESSING DEVICE, IMAGE PROCESSING AND PROGRAM
JP6050525B2 (ja) * 2015-10-15 2016-12-21 株式会社小松製作所 位置計測システム、作業機械及び位置計測方法
EP3176750B1 (en) * 2015-12-04 2019-03-13 Veoneer Sweden AB Vision system for a motor vehicle and method of controlling a vision system
US9952317B2 (en) * 2016-05-27 2018-04-24 Uber Technologies, Inc. Vehicle sensor calibration system
JP6560159B2 (ja) 2016-06-01 2019-08-14 株式会社Soken 位置計測装置
CN107808398B (zh) 2016-09-08 2023-04-07 松下知识产权经营株式会社 摄像头参数算出装置以及算出方法、程序、记录介质
CN107809610B (zh) 2016-09-08 2021-06-11 松下知识产权经营株式会社 摄像头参数集算出装置、摄像头参数集算出方法以及记录介质
JP6716442B2 (ja) * 2016-12-14 2020-07-01 シャープ株式会社 撮影制御装置、移動体、撮影制御方法、および撮影制御プログラム
JP6636963B2 (ja) * 2017-01-13 2020-01-29 株式会社東芝 画像処理装置及び画像処理方法
JP7016058B2 (ja) * 2017-04-28 2022-02-04 パナソニックIpマネジメント株式会社 カメラパラメタセット算出方法、カメラパラメタセット算出プログラム及びカメラパラメタセット算出装置
JP7038346B2 (ja) 2017-05-01 2022-03-18 パナソニックIpマネジメント株式会社 カメラパラメータ算出方法、カメラパラメータ算出プログラム、及びカメラパラメータ算出装置
EP3619684A4 (en) * 2017-05-04 2021-06-09 Second Spectrum, Inc. METHOD AND DEVICE FOR AUTOMATIC INTRINSIC CAMERA CALIBRATION USING IMAGES OF A PLANAR CALIBRATION PATTERN
EP3635622A4 (en) 2017-06-08 2020-05-27 Zhejiang Dahua Technology Co., Ltd DEVICES AND METHODS FOR PROCESSING TRAFFIC LIGHT IMAGES
JP7054803B2 (ja) * 2017-07-21 2022-04-15 パナソニックIpマネジメント株式会社 カメラパラメタセット算出装置、カメラパラメタセット算出方法及びプログラム
JP6838225B2 (ja) 2017-09-20 2021-03-03 日立Astemo株式会社 ステレオカメラ
US11012683B1 (en) 2017-09-28 2021-05-18 Alarm.Com Incorporated Dynamic calibration of surveillance devices
US10636173B1 (en) * 2017-09-28 2020-04-28 Alarm.Com Incorporated Dynamic calibration of surveillance devices
JP7099832B2 (ja) * 2018-02-28 2022-07-12 株式会社Soken 測距装置および較正パラメータの推定方法
JP6895403B2 (ja) 2018-03-20 2021-06-30 株式会社東芝 画像処理装置、運転支援システム、及び画像処理方法
JP7219561B2 (ja) * 2018-07-18 2023-02-08 日立Astemo株式会社 車載環境認識装置
JP7296340B2 (ja) * 2018-08-07 2023-06-22 住友建機株式会社 ショベル
CN108989796A (zh) 2018-08-09 2018-12-11 浙江大华技术股份有限公司 一种图像采集设备选择方法及装置
US11699207B2 (en) * 2018-08-20 2023-07-11 Waymo Llc Camera assessment techniques for autonomous vehicles
JP6956051B2 (ja) * 2018-09-03 2021-10-27 株式会社東芝 画像処理装置、運転支援システム、画像処理方法及びプログラム
CN109300159B (zh) 2018-09-07 2021-07-20 百度在线网络技术(北京)有限公司 位置检测方法、装置、设备、存储介质及车辆
CN109272041B (zh) * 2018-09-21 2021-10-22 联想(北京)有限公司 特征点的选取方法及装置
CN109242914B (zh) * 2018-09-28 2021-01-01 上海爱观视觉科技有限公司 一种可动视觉系统的立体标定方法
CN116887048A (zh) 2018-12-13 2023-10-13 索尼集团公司 控制器和控制方法
JP7146608B2 (ja) * 2018-12-14 2022-10-04 日立Astemo株式会社 画像処理装置
TWI705011B (zh) * 2019-03-12 2020-09-21 緯創資通股份有限公司 車載鏡頭偏移檢測方法與車載鏡頭偏移檢測系統
CN110458895B (zh) 2019-07-31 2020-12-25 腾讯科技(深圳)有限公司 图像坐标系的转换方法、装置、设备及存储介质
JP7269130B2 (ja) * 2019-08-14 2023-05-08 日立Astemo株式会社 画像処理装置
CN112053349A (zh) * 2020-09-03 2020-12-08 重庆市公安局沙坪坝区分局 一种用于法医鉴定的伤情图像处理方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3436074B2 (ja) 1997-06-10 2003-08-11 トヨタ自動車株式会社 車載ステレオカメラ
JP4501239B2 (ja) * 2000-07-13 2010-07-14 ソニー株式会社 カメラ・キャリブレーション装置及び方法、並びに、記憶媒体
JP3977776B2 (ja) * 2003-03-13 2007-09-19 株式会社東芝 ステレオキャリブレーション装置とそれを用いたステレオ画像監視装置
WO2004106856A1 (ja) * 2003-05-29 2004-12-09 Olympus Corporation ステレオカメラ支持装置、ステレオカメラ支持方法及びキャリブレーション検出装置及びキャリブレーション補正装置並びにステレオカメラシステム
JP2004354257A (ja) * 2003-05-29 2004-12-16 Olympus Corp キャリブレーションずれ補正装置及びこの装置を備えたステレオカメラ並びにステレオカメラシステム
JP4435525B2 (ja) * 2003-09-17 2010-03-17 富士重工業株式会社 ステレオ画像処理装置
JP4069855B2 (ja) * 2003-11-27 2008-04-02 ソニー株式会社 画像処理装置及び方法
JP4681856B2 (ja) * 2004-11-24 2011-05-11 アイシン精機株式会社 カメラの校正方法及びカメラの校正装置
JP5175230B2 (ja) * 2009-02-03 2013-04-03 株式会社トヨタIt開発センター カメラの自動キャリブレーション装置及び自動キャリブレーション方法

Similar Documents

Publication Publication Date Title
JP2012075060A5 (ja)
US20180315163A1 (en) Dense structure from motion
JP2017062262A5 (ja)
JP2010539557A5 (ja)
JP2011027724A5 (ja)
EP1596332A3 (en) Information processing method and apparatus for finding position and orientation of targeted object
JP2012141964A5 (ja)
JP2012002761A5 (ja) 位置姿勢計測装置、その処理方法、プログラム、ロボットシステム
US20150078619A1 (en) System and method for detecting obstacles using a single camera
EP2003617A3 (en) Method and apparatus for measuring position and orientation of an object
JP5418176B2 (ja) パンタグラフ高さ測定装置及びそのキャリブレーション方法
JP2010239411A5 (ja)
JP2014089081A5 (ja) 測定装置及びその制御方法、プログラム
JP2012159469A (ja) 車両用画像認識装置
JP2016066182A5 (ja)
JP5548212B2 (ja) 横断歩道標示検出方法および横断歩道標示検出装置
JP2007264717A5 (ja)
JP2009276233A (ja) パラメータ計算装置、パラメータ計算システムおよびプログラム
CN108082192B (zh) 车道偏离预警方法及装置
JP2014232100A5 (ja)
JP6412730B2 (ja) エッジ位置検出装置、幅測定装置、及びその校正方法
TW201224892A (en) Method for positioning compensation of a touch object on a touch surface of a screen and optical touch module thereof
JP2013257244A (ja) 距離測定装置、距離測定方法、及び距離測定プログラム
JP2013122739A5 (ja)
JP2012159470A (ja) 車両用画像認識装置