JP2013104740A - 画像処理装置及び画像処理方法 - Google Patents
画像処理装置及び画像処理方法 Download PDFInfo
- Publication number
- JP2013104740A JP2013104740A JP2011247749A JP2011247749A JP2013104740A JP 2013104740 A JP2013104740 A JP 2013104740A JP 2011247749 A JP2011247749 A JP 2011247749A JP 2011247749 A JP2011247749 A JP 2011247749A JP 2013104740 A JP2013104740 A JP 2013104740A
- Authority
- JP
- Japan
- Prior art keywords
- image
- region
- background
- vehicle
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/246—Calibration of cameras
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C3/00—Measuring distances in line of sight; Optical rangefinders
- G01C3/10—Measuring distances in line of sight; Optical rangefinders using a parallactic triangle with variable angles and a base of fixed length in the observation station, e.g. in the instrument
- G01C3/14—Measuring distances in line of sight; Optical rangefinders using a parallactic triangle with variable angles and a base of fixed length in the observation station, e.g. in the instrument with binocular observation at a single point, e.g. stereoscopic type
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/593—Depth or shape recovery from multiple images from stereo images
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10012—Stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30261—Obstacle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0085—Motion estimation from stereoscopic image signals
Abstract
【解決手段】一対の撮像素子で同時刻に同方向を撮像した一対の画像の一方の画像から対象物の画像を含む一方画像対象物領域302を抽出する。そして、一方画像対象物領域302を構成する複数の画像構成部分についてそれぞれ対象物画像構成部分304と背景画像構成部分303のいずれであるかの確度である背景度を算出する。そして、背景度を用いて他方の画像501内から一方画像対象物領域302と類似した画像を有する他方画像対象物領域503を抽出して、一方画像対象物領域302と他方画像対象物領域503との視差を算出する。
【選択図】図1
Description
本実施の形態では、本発明を自車両に搭載されたステレオカメラ装置の映像を用いて先行車両を検出するシステムに適用した場合について説明する。
点1001と右の撮像部106との関係から d3 : f = (d-x) : D
103 車両(自車両)
104 ステレオカメラ装置(画像処理装置)
105 左撮像部(左カメラ)
106 右撮像部(右カメラ)
107 左画像入力部
108 右画像入力部
109 車両検出部
110 右画像類似領域抽出部
111 背景度算出部
112 視差算出部
113 相対距離・相対速度算出部
302 左画像車両領域(一方画像対象物領域)
502 探索領域
503 右画像類似領域
Claims (5)
- 一対の撮像素子で同時刻に同方向を撮像した一対の画像を画像処理する画像処理装置であって、
一方の画像から視差情報を取得する対象物を認識して、前記一方の画像内に該対象物の画像を含む撮像画像領域である一方画像対象物領域を抽出する一方画像対象物領域抽出手段と、
該一方画像対象物領域を構成する複数の画像構成部分について、それぞれ前記対象物の画像を構成する対象物画像構成部分と前記対象物以外の背景の画像を構成する背景画像構成部分のいずれであるかの確度である背景度を算出する背景度算出手段と、
前記背景度を用いて、前記他方の画像内から前記一方画像対象物領域と類似した画像を有する他方画像対象物領域を抽出し、該一方画像対象物領域と前記他方画像対象物領域との視差を算出する視差算出手段と、
を有することを特徴とする画像処理装置。 - 前記一方画像対象物領域抽出手段により抽出された前記一方画像対象物領域を用いて前記他方の画像内を探索し、前記他方の画像内から前記一方画像車両領域と類似した画像を有する他方画像類似領域を抽出する他方画像類似領域抽出手段を備え、
前記視差算出手段は、他方画像内で他方画像類似領域を中心として予め設定された大きさを有する周辺範囲を探索して前記他方画像対象物領域を抽出することを特徴とする請求項1に記載の画像処理装置。 - 前記背景度算出手段は、
予め記憶された車両知識に基づいて前記背景度を算出する第1の背景度算出手段と、
前記一方画像対象物領域と前記他方画像対象物領域とを重ね合わせたときの互いに対応する画像構成部分の輝度差分に基づいて前記背景度を算出する第2の背景度算出手段の少なくとも一方を有することを特徴とする請求項1又は2に記載の画像処理装置。 - 前記視差算出部は、前記一方画像対象物領域を前記他方画像に重ね合わせたときに互いに同じ位置となる画像構成部分の輝度値の差分値を各画像構成部分についてそれぞれ算出し、該各差分値に対して前記背景度を用いた重み付けを行い、該重み付けされた各差分値を用いて前記他方画像対象物領域を抽出することを特徴とする請求項1から請求項3のいずれか一項に記載の画像処理装置。
- 一対の撮像素子で同時刻に同方向を撮像した一対の画像を画像処理する画像処理方法であって、
一方の画像から視差情報を取得する対象物を認識して、前記一方の画像内に該対象物の画像を含む撮像画像領域である一方画像対象物領域を抽出する工程と、
該一方画像対象物領域を構成する複数の画像構成部分について、それぞれ前記対象物の画像を構成する対象物画像構成部分と前記対象物以外の背景の画像を構成する背景画像構成部分のいずれであるかの確度である背景度を算出する工程と、
前記背景度を用いて、前記他方の画像内から前記一方画像対象物領域と類似した画像を有する他方画像対象物領域を抽出し、該一方画像対象物領域と前記他方画像対象物領域との視差を算出する工程と、
を含むことを特徴とする画像処理方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011247749A JP5587852B2 (ja) | 2011-11-11 | 2011-11-11 | 画像処理装置及び画像処理方法 |
PCT/JP2012/077385 WO2013069453A1 (ja) | 2011-11-11 | 2012-10-24 | 画像処理装置及び画像処理方法 |
US14/357,070 US9041778B2 (en) | 2011-11-11 | 2012-10-24 | Image processing device and method of processing image |
EP12847189.3A EP2778603B1 (en) | 2011-11-11 | 2012-10-24 | Image processing apparatus and image processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011247749A JP5587852B2 (ja) | 2011-11-11 | 2011-11-11 | 画像処理装置及び画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013104740A true JP2013104740A (ja) | 2013-05-30 |
JP5587852B2 JP5587852B2 (ja) | 2014-09-10 |
Family
ID=48289836
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011247749A Active JP5587852B2 (ja) | 2011-11-11 | 2011-11-11 | 画像処理装置及び画像処理方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9041778B2 (ja) |
EP (1) | EP2778603B1 (ja) |
JP (1) | JP5587852B2 (ja) |
WO (1) | WO2013069453A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10247551B2 (en) | 2014-09-11 | 2019-04-02 | Hitachi Automotive Systems, Ltd. | Vehicle image processing device for environment recognition |
JP2020143957A (ja) * | 2019-03-05 | 2020-09-10 | 株式会社Soken | 距離画像生成装置 |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6970568B2 (ja) * | 2017-09-22 | 2021-11-24 | 株式会社デンソー | 車両の周辺監視装置と周辺監視方法 |
US20200236338A1 (en) * | 2017-09-28 | 2020-07-23 | Koito Manufacturing Co., Ltd. | Sensor system |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003058885A (ja) * | 2001-08-20 | 2003-02-28 | Minolta Co Ltd | 対応点探索方法および装置並びにコンピュータプログラム |
JP2009111921A (ja) * | 2007-10-31 | 2009-05-21 | Toshiba Corp | 画像処理装置及び画像処理方法 |
JP2009276294A (ja) * | 2008-05-16 | 2009-11-26 | Toshiba Corp | 画像処理方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2881193B1 (ja) * | 1998-03-02 | 1999-04-12 | 防衛庁技術研究本部長 | 3次元物体認識装置および方法 |
US6556704B1 (en) * | 1999-08-25 | 2003-04-29 | Eastman Kodak Company | Method for forming a depth image from digital image data |
JP4967603B2 (ja) | 2006-11-01 | 2012-07-04 | スズキ株式会社 | 車両の後側方監視装置 |
-
2011
- 2011-11-11 JP JP2011247749A patent/JP5587852B2/ja active Active
-
2012
- 2012-10-24 US US14/357,070 patent/US9041778B2/en active Active
- 2012-10-24 WO PCT/JP2012/077385 patent/WO2013069453A1/ja active Application Filing
- 2012-10-24 EP EP12847189.3A patent/EP2778603B1/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003058885A (ja) * | 2001-08-20 | 2003-02-28 | Minolta Co Ltd | 対応点探索方法および装置並びにコンピュータプログラム |
JP2009111921A (ja) * | 2007-10-31 | 2009-05-21 | Toshiba Corp | 画像処理装置及び画像処理方法 |
JP2009276294A (ja) * | 2008-05-16 | 2009-11-26 | Toshiba Corp | 画像処理方法 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10247551B2 (en) | 2014-09-11 | 2019-04-02 | Hitachi Automotive Systems, Ltd. | Vehicle image processing device for environment recognition |
JP2020143957A (ja) * | 2019-03-05 | 2020-09-10 | 株式会社Soken | 距離画像生成装置 |
JP7204536B2 (ja) | 2019-03-05 | 2023-01-16 | 株式会社Soken | 距離画像生成装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2013069453A1 (ja) | 2013-05-16 |
EP2778603A4 (en) | 2015-06-03 |
EP2778603A1 (en) | 2014-09-17 |
JP5587852B2 (ja) | 2014-09-10 |
EP2778603B1 (en) | 2017-06-21 |
US20140320612A1 (en) | 2014-10-30 |
US9041778B2 (en) | 2015-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10452931B2 (en) | Processing method for distinguishing a three dimensional object from a two dimensional object using a vehicular system | |
JP5926228B2 (ja) | 自律車両用の奥行き検知方法及びシステム | |
KR101411668B1 (ko) | 교정 장치, 거리 측정 시스템, 교정 방법, 및 교정 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체 | |
CN108692719B (zh) | 物体检测装置 | |
WO2015104898A1 (ja) | 車両用外界認識装置 | |
JP2006252473A (ja) | 障害物検出装置、キャリブレーション装置、キャリブレーション方法およびキャリブレーションプログラム | |
JP2012174117A (ja) | 移動体検出装置 | |
JP2014067198A (ja) | 移動物体認識装置 | |
US10984263B2 (en) | Detection and validation of objects from sequential images of a camera by using homographies | |
JP6544257B2 (ja) | 情報処理システム、情報処理方法及び情報処理プログラム | |
WO2014002692A1 (ja) | ステレオカメラ | |
US20180276844A1 (en) | Position or orientation estimation apparatus, position or orientation estimation method, and driving assist device | |
JP5539250B2 (ja) | 接近物体検知装置及び接近物体検知方法 | |
JP5587852B2 (ja) | 画像処理装置及び画像処理方法 | |
KR101818842B1 (ko) | 운전지원장치, 거리감지방법 및 차로의 너비감지방법 | |
WO2014065159A1 (ja) | 距離測定装置及びそれを用いた車両 | |
EP3428876A1 (en) | Image processing device, apparatus control system, imaging device, image processing method, and program | |
WO2014054124A1 (ja) | 路面標示検出装置及び路面標示検出方法 | |
JP6886136B2 (ja) | 位置合わせ装置、位置合わせ方法及び位置合わせ用コンピュータプログラム | |
KR20160063039A (ko) | 3차원 데이터를 이용한 도로 인식 방법 | |
JP2015215235A (ja) | 物体検出装置及び物体検出方法 | |
JP2019164837A (ja) | 情報処理システム、情報処理方法及び情報処理プログラム | |
KR102565603B1 (ko) | 긴급 제동 시스템의 성능평가 장치 및 방법 | |
JP2018092608A (ja) | 情報処理装置、撮像装置、機器制御システム、移動体、情報処理方法およびプログラム | |
JP2023003924A (ja) | 演算装置、速度算出方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130902 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140325 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140523 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140624 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140724 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5587852 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |