JP2006105661A - ステレオ画像による平面推定方法 - Google Patents
ステレオ画像による平面推定方法 Download PDFInfo
- Publication number
- JP2006105661A JP2006105661A JP2004289889A JP2004289889A JP2006105661A JP 2006105661 A JP2006105661 A JP 2006105661A JP 2004289889 A JP2004289889 A JP 2004289889A JP 2004289889 A JP2004289889 A JP 2004289889A JP 2006105661 A JP2006105661 A JP 2006105661A
- Authority
- JP
- Japan
- Prior art keywords
- image
- plane
- feature point
- movement
- extracted
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
- G06T7/85—Stereo camera calibration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/147—Details of sensors, e.g. sensor lenses
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/255—Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
- G06V20/54—Surveillance or monitoring of activities, e.g. for recognising suspicious objects of traffic, e.g. cars on the road, trains or boats
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
- G06T2207/10021—Stereoscopic video; Stereoscopic image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/08—Detecting or categorising vehicles
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Vascular Medicine (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Analysis (AREA)
- Traffic Control Systems (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
【解決手段】 平面上を移動する物体が撮像できるように設置された複数の撮像手段によってステレオ画像を撮像し、前記ステレオ画像のうちの基準画像について複数の特徴点を抽出し、抽出した各特徴点について他の画像中の対応点を探索して得られる視差から三角測量の原理により3次元座標を求め、抽出した各特徴点位置の画像に類似する画像を物体の移動前後の画像から検出し、抽出した各特徴点の3次元的な移動ベクトルから前記平面の3次元的位置を算出するようにした。
【選択図】 図4
Description
図1は、本発明の平面推定方法の一実施形態に係る車輌検出装置の設置例である。
ここで、θは俯角、γは法角、(axi,ayi,azi)は移動ベクトルである。上式を満たすθ、γを求めるには、たとえば最小自乗法やハフ変換などの統計的処理により行うことができる。
ここで、x、yは特徴点の画像上座標位置、dは視差、fは焦点距離、Bは撮像手段の間隔(ベース長)である。上式を満たすHも、前述のような統計的手法により精度よく求めることができる。いうまでもなく、高さ既知な特徴点が路面上の特徴点であれば、Hはカメラ高さである。
図6は、本発明の平面推定方法の一実施形態に係る車輌検出装置のブロック図である。
2a、2b 撮像装置(撮像手段)
3 制御装置
30 画像入力部
31 平面推定処理部
32 物体検出処理部
33 記憶部
34 出力部
35 探索領域指定部
4 支柱
5 車輌(物体)
RD 道路(平面)
Claims (5)
- 平面上を移動する物体を撮像できるように設置された複数の撮像手段によってステレオ画像を撮像し、前記ステレオ画像のうちの基準画像について複数の特徴点を抽出し、 抽出した各特徴点について他の画像中の対応点を探索して得られる視差から三角測量の原理により3次元座標を求め、抽出した各特徴点位置の画像に類似する画像を物体の移動前後の画像から検出し、抽出した各特徴点の3次元的な移動ベクトルから前記平面の3次元的位置を算出するステレオ画像による平面推定方法。
- 高さが既知の特徴点を用いて、平面までの距離を推定する請求項1記載のステレオ画像による平面推定方法。
- 抽出した各特徴点の3次元的な移動ベクトルから構成される平行な平面群のうち、最下面を物体が移動する平面とみなして、平面までの距離を推定する請求項1記載のステレオ画像による平面推定方法。
- 前記の物体移動前後の画像から各特徴点位置の画像に類似する画像を検出手段について、物体の移動ベクトルをあらかじめ設定し、特徴点位置の画像を物体移動後画像から検出する際に、移動ベクトル方向でのみ探索を行うことを特徴する請求項1記載のステレオ画像による平面推定方法。
- 前記の物体移動前後の画像から各特徴点位置の画像に類似する画像を検出手段について、視差の変化に応じて特徴点画像を拡大縮小させることを特徴とする請求項1記載のステレオ画像による平面推定方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004289889A JP4363295B2 (ja) | 2004-10-01 | 2004-10-01 | ステレオ画像による平面推定方法 |
US11/240,800 US20060078197A1 (en) | 2004-10-01 | 2005-09-30 | Image processing apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004289889A JP4363295B2 (ja) | 2004-10-01 | 2004-10-01 | ステレオ画像による平面推定方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006105661A true JP2006105661A (ja) | 2006-04-20 |
JP4363295B2 JP4363295B2 (ja) | 2009-11-11 |
Family
ID=36145385
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004289889A Expired - Fee Related JP4363295B2 (ja) | 2004-10-01 | 2004-10-01 | ステレオ画像による平面推定方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20060078197A1 (ja) |
JP (1) | JP4363295B2 (ja) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014054328A1 (ja) * | 2012-10-02 | 2014-04-10 | 株式会社 東芝 | 車両検知装置 |
WO2014192487A1 (ja) * | 2013-05-29 | 2014-12-04 | 日本電気株式会社 | 多眼撮像システム、取得画像の合成処理方法、及びプログラム |
KR20160003776A (ko) | 2013-09-12 | 2016-01-11 | 도요타지도샤가부시키가이샤 | 자세 추정 방법 및 로봇 |
JP5961739B1 (ja) * | 2015-09-25 | 2016-08-02 | 俊之介 島野 | 物体特徴抽出システム |
JP6099833B1 (ja) * | 2015-09-15 | 2017-03-22 | 三菱電機株式会社 | 画像処理装置、画像処理システム及び画像処理方法 |
JP2017062762A (ja) * | 2016-05-12 | 2017-03-30 | 俊之介 島野 | 物体特徴抽出システム |
KR101728719B1 (ko) | 2016-01-14 | 2017-04-21 | 인하대학교 산학협력단 | 스테레오 카메라 이미지에서 물체의 기울어진 각도 측정의 정확도 향상을 위한 특징점 선택 방법 |
EP3905113A1 (en) | 2020-04-27 | 2021-11-03 | Fujitsu Limited | Camera height calculation method and image processing apparatus |
US20220103801A1 (en) * | 2018-02-28 | 2022-03-31 | Blackberry Limited | Rapid ground-plane discrimination in stereoscopic images |
Families Citing this family (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2845591C (en) * | 2006-01-05 | 2015-12-08 | Nippon Telegraph And Telephone Corporation | Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs |
US7580547B2 (en) * | 2006-10-24 | 2009-08-25 | Iteris, Inc. | Electronic traffic monitor |
KR101366244B1 (ko) * | 2007-04-24 | 2014-02-21 | 삼성전자주식회사 | 레지듀얼 데이터를 이용한 영상의 에러 은닉 방법 및 장치 |
JP5617166B2 (ja) * | 2009-02-09 | 2014-11-05 | 日本電気株式会社 | 回転推定装置、回転推定方法およびプログラム |
US8660365B2 (en) * | 2010-07-29 | 2014-02-25 | Honeywell International Inc. | Systems and methods for processing extracted plane features |
JP5830876B2 (ja) * | 2011-02-18 | 2015-12-09 | 富士通株式会社 | 距離算出プログラム、距離算出方法及び距離算出装置 |
JP2012234258A (ja) * | 2011-04-28 | 2012-11-29 | Sony Corp | 画像処理装置と画像処理方法およびプログラム |
US8661431B2 (en) * | 2012-01-03 | 2014-02-25 | International Business Machines Corporation | Accurately estimating install time |
JP6182866B2 (ja) * | 2012-03-21 | 2017-08-23 | 株式会社リコー | 校正装置、距離計測装置及び車両 |
US9087378B2 (en) * | 2012-06-29 | 2015-07-21 | Hong Kong Applied Science and Technology Research Institute Company Limited | Scale changing detection and scaling ratio determination by using motion information |
FR3020490B1 (fr) * | 2014-04-24 | 2019-04-12 | Morpho | Systeme de localisation d'un meme vehicule dans plusieurs zones differentes les unes des autres dans lesquelles ledit vehicule passe consecutivement |
CN103984710B (zh) * | 2014-05-05 | 2017-07-18 | 深圳先进技术研究院 | 基于海量数据的视频交互查询方法及系统 |
JP6159905B2 (ja) * | 2015-05-27 | 2017-07-05 | 京セラ株式会社 | 演算装置、カメラ装置、車両及びキャリブレーション方法 |
CN106226834B (zh) * | 2016-07-14 | 2019-04-23 | 昆山市交通工程试验检测中心有限公司 | 一种车载式路面井盖缺失检测方法 |
CN109785390B (zh) * | 2017-11-13 | 2022-04-01 | 虹软科技股份有限公司 | 一种用于图像矫正的方法和装置 |
CN109785225B (zh) * | 2017-11-13 | 2023-06-16 | 虹软科技股份有限公司 | 一种用于图像矫正的方法和装置 |
CN112348876B (zh) * | 2019-08-08 | 2024-06-11 | 北京地平线机器人技术研发有限公司 | 一种标志牌的空间坐标获取方法及装置 |
US11845429B2 (en) * | 2021-09-30 | 2023-12-19 | GM Global Technology Operations LLC | Localizing and updating a map using interpolated lane edge data |
US11987251B2 (en) | 2021-11-15 | 2024-05-21 | GM Global Technology Operations LLC | Adaptive rationalizer for vehicle perception systems toward robust automated driving control |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2184561C (en) * | 1995-09-12 | 2001-05-29 | Yasuyuki Michimoto | Object detecting apparatus in which the position of a planar object is estimated by using hough transform |
US6320978B1 (en) * | 1998-03-20 | 2001-11-20 | Microsoft Corporation | Stereo reconstruction employing a layered approach and layer refinement techniques |
JP4429461B2 (ja) * | 2000-03-17 | 2010-03-10 | 本田技研工業株式会社 | 画像処理装置、平面検出方法、及び平面検出プログラムを記録した記録媒体 |
US7068815B2 (en) * | 2003-06-13 | 2006-06-27 | Sarnoff Corporation | Method and apparatus for ground detection and removal in vision systems |
-
2004
- 2004-10-01 JP JP2004289889A patent/JP4363295B2/ja not_active Expired - Fee Related
-
2005
- 2005-09-30 US US11/240,800 patent/US20060078197A1/en not_active Abandoned
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014074939A (ja) * | 2012-10-02 | 2014-04-24 | Toshiba Corp | 車両検知装置 |
WO2014054328A1 (ja) * | 2012-10-02 | 2014-04-10 | 株式会社 東芝 | 車両検知装置 |
JPWO2014192487A1 (ja) * | 2013-05-29 | 2017-02-23 | 日本電気株式会社 | 多眼撮像システム、取得画像の合成処理方法、及びプログラム |
WO2014192487A1 (ja) * | 2013-05-29 | 2014-12-04 | 日本電気株式会社 | 多眼撮像システム、取得画像の合成処理方法、及びプログラム |
US9741143B2 (en) | 2013-05-29 | 2017-08-22 | Nec Corporation | Multocular imaging system, synthesis process method of acquired images, and program |
KR20160003776A (ko) | 2013-09-12 | 2016-01-11 | 도요타지도샤가부시키가이샤 | 자세 추정 방법 및 로봇 |
JP6099833B1 (ja) * | 2015-09-15 | 2017-03-22 | 三菱電機株式会社 | 画像処理装置、画像処理システム及び画像処理方法 |
JP5961739B1 (ja) * | 2015-09-25 | 2016-08-02 | 俊之介 島野 | 物体特徴抽出システム |
KR101728719B1 (ko) | 2016-01-14 | 2017-04-21 | 인하대학교 산학협력단 | 스테레오 카메라 이미지에서 물체의 기울어진 각도 측정의 정확도 향상을 위한 특징점 선택 방법 |
JP2017062762A (ja) * | 2016-05-12 | 2017-03-30 | 俊之介 島野 | 物体特徴抽出システム |
US20220103801A1 (en) * | 2018-02-28 | 2022-03-31 | Blackberry Limited | Rapid ground-plane discrimination in stereoscopic images |
US11601635B2 (en) * | 2018-02-28 | 2023-03-07 | Blackberry Limited | Rapid ground-plane discrimination in stereoscopic images |
EP3905113A1 (en) | 2020-04-27 | 2021-11-03 | Fujitsu Limited | Camera height calculation method and image processing apparatus |
US11580663B2 (en) | 2020-04-27 | 2023-02-14 | Fujitsu Limited | Camera height calculation method and image processing apparatus |
Also Published As
Publication number | Publication date |
---|---|
JP4363295B2 (ja) | 2009-11-11 |
US20060078197A1 (en) | 2006-04-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4363295B2 (ja) | ステレオ画像による平面推定方法 | |
TWI798305B (zh) | 用於更新高度自動化駕駛地圖的系統和方法 | |
EP3519770B1 (en) | Methods and systems for generating and using localisation reference data | |
KR102327185B1 (ko) | 정밀도로지도 갱신을 위한 객체 변화 탐지 시스템 및 그 방법 | |
JP5714940B2 (ja) | 移動体位置測定装置 | |
US7899211B2 (en) | Object detecting system and object detecting method | |
US9415723B2 (en) | Image integration unit and image integration method | |
JP5075672B2 (ja) | 対象物検出装置及び方法 | |
CN108692719B (zh) | 物体检测装置 | |
KR102305328B1 (ko) | 카메라 기반의 자동화된 정밀도로지도 생성 시스템 및 방법 | |
JP6524529B2 (ja) | 建築限界判定装置 | |
JP2003083742A (ja) | 監視システムの距離補正装置および距離補正方法 | |
JP4032843B2 (ja) | 監視システムおよび監視方法、当該監視システムにおける距離補正装置および距離補正方法 | |
JP2007316685A (ja) | 走路境界検出装置および走路境界検出方法 | |
JP7480833B2 (ja) | 計測装置、計測システムおよび車両 | |
JP2016004446A (ja) | 動き推定装置 | |
JP2007316856A (ja) | 移動体検出装置、コンピュータプログラム及び移動体検出方法 | |
JP2005217883A (ja) | ステレオ画像を用いた道路平面領域並びに障害物検出方法 | |
JP5981284B2 (ja) | 対象物検出装置、及び対象物検出方法 | |
JP3629935B2 (ja) | 移動体の速度計測方法およびその方法を用いた速度計測装置 | |
JP4144300B2 (ja) | ステレオ画像による平面推定方法および物体検出装置 | |
JP2022513830A (ja) | 道路の表面上の対象体を検出してモデル化する方法 | |
KR20220151572A (ko) | IPM 이미지와 정밀도로지도(HD Map) 피팅을 통해 노면객체의 변화를 자동으로 판단하고 갱신하는 정밀도로지도 자동갱신 방법 및 시스템 | |
JP6416654B2 (ja) | 白線検出装置 | |
JP2006113738A (ja) | 物体検出装置および物体検出方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070226 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090324 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090414 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090612 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090728 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090810 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120828 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4363295 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130828 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |