JP3931885B2 - 障害物検知装置 - Google Patents
障害物検知装置 Download PDFInfo
- Publication number
- JP3931885B2 JP3931885B2 JP2004037949A JP2004037949A JP3931885B2 JP 3931885 B2 JP3931885 B2 JP 3931885B2 JP 2004037949 A JP2004037949 A JP 2004037949A JP 2004037949 A JP2004037949 A JP 2004037949A JP 3931885 B2 JP3931885 B2 JP 3931885B2
- Authority
- JP
- Japan
- Prior art keywords
- resolution
- detection target
- obstacle
- feature amount
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Image Processing (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Description
本発明によれば、自車両に搭載され、自車両周囲の赤外線像を撮像する撮像手段と、撮像手段により撮像された赤外線像に基づいて、解像度の異なる1又は2以上の画像を作成する画像作成手段と、撮像手段により撮像された赤外線像及び前記画像作成手段により作成された各画像に含まれる障害物に対応する1又は2以上の検知対象領域を抽出する領域抽出手段と、領域抽出手段により抽出された各検知対象領域の特徴量をそれぞれ算出する特徴量算出手段と、特徴量算出手段により算出された各検知対象領域の特徴量と、当該検知対象領域が含まれる画像の解像度との関係を導く関係導出手段と、関係導出手段により導出された特徴量と解像度との関係に基づいて前記障害物と自車両との相対位置関係を求める相対位置演算手段とを有する障害物検知装置が提供される。
図6に示すように、熱画像(赤外線像)の輝度値(温度)は、赤外線源(検知対象)から離れるほど減衰する傾向がある。この輝度値の減衰には2つの原因があり、1つは赤外線源(検知対象)からの距離に応じて赤外線自体が減衰するという理由であり、1つは解像度に起因し、計測値の平均化によって見かけ上、輝度値が減衰するという理由である。第1の理由に対応する「検知対象との距離と輝度値との関係」を図7(A)に示した。図7(A)に示すように、検知対象との距離が離れるほど輝度値は低下する。つまり、同じ解像度で相対距離の異なる検知対象を撮像した場合、検知対象までの距離に応じて見え方は異なり、検知対象が近くにあれば図4(A)のように、検知対象が遠くにあれば図4(B)のように見える。他方、第2の理由に対応する「解像度と輝度値との関係」を図7(B)に示した。図7(B)に示すように、解像度が低下するほど輝度値は低下する。これは、高解像度のカメラで見た場合、図4(A)のように見えるのに対して、低解像度のカメラで同じ被写体を撮像した場合、画素のデータ値が平均化されて、図4(B)の様に見えるためである。つまり、異なる解像度で相対距離の同じ検知対象を撮像した場合、解像度に応じて見え方は異なり、解像度が高ければ図4(A)のように、解像度が低ければ図4(B)のように見える。
「挙動判定手段62」は、特徴量と解像度との関係の経時的変化に基づいて障害物が自車両に接近しているか否かを判定する。本実施形態の挙動判定手段62は、解像度に対する特徴量の変化率に基づいて障害物が自車両に接近しているか否かを判定する。変化率が所定範囲となる場合の特徴量の経時的変化に基づいて、障害物が自車両に接近しているか否かを判定してもよい。また、挙動判定手段62は、特徴量の変化曲線に対する接線の傾きがゼロ近傍となる点に基づいて障害物が自車両に接近しているか否かを判定することもできる。特徴量は、最高輝度値、平均輝度値又は輝度分布のいずれでもよい。先述したように、同じ解像度で撮像した検知対象が近くにある場合と遠くにある場合とでは見え方に違いが生じ、異なる解像度で撮像した場合も検知対象の見え方に違いが生じる。検知対象、すなわち障害物が移動している場合は、経時的に撮像した検知対象領域の見え方が異なり、これに伴い解像度と特徴量との関係に変化を見出すことができる。本実施形態では、このような障害物の挙動に応じて検知対象の見え方が異なる現象を利用して、検知対象(障害物)が接近しているのか否かを判断する。つまり、本実施形態では、作成した解像度の異なる画像における輝度値を求め、「輝度値(特徴量)と解像度との関係の経時的変化」に基づいて「障害物が接近しているか否か」を判定する手法を提案する。ちなみに、本実施形態の挙動判定手段62は、撮像手段1が所定の周期で順次撮像した赤外線像に基づいて、障害物の挙動を判定する。撮像手段1が撮像した赤外線像は撮像画像記憶部71に時系列に記憶されている。
1…撮像手段
2…画像作成手段
3…領域抽出手段
4…特徴量算出手段
5…関係導出手段
6…検知手段
61…相対位置演算手段
62…挙動判定手段
7…メモリ
71…撮像画像記憶部
72…作成画像記憶部
73…特徴量記憶部
Claims (13)
- 自車両に搭載され、所定の周期で自車両周囲の赤外線像を撮像する一の撮像手段と、
前記一の撮像手段により撮像された赤外線像に基づいて、解像度の異なる2以上の画像を作成する画像作成手段と、
前記撮像手段により所定の周期で撮像された赤外線像及び前記画像作成手段により作成された各画像に含まれる障害物に対応する1又は2以上の検知対象領域を抽出する領域抽出手段と、
前記領域抽出手段により抽出された各検知対象領域の特徴量をそれぞれ算出する特徴量算出手段と、
前記特徴量算出手段により算出された各検知対象領域の特徴量の経時的な変化を前記検知対象領域が含まれる画像の解像度ごとに求めるとともに、当該解像度ごとに求められた特徴量の経時的な変化において、前記特徴量の経時的な変化の変化率が所定範囲となる場合の解像度ごとの特徴量を導く関係導出手段と、
予め定義した特徴量と検知対象までの距離との関係を参照して、前記関係導出手段により導出された前記特徴量の変化率が所定範囲となる場合の各解像度における特徴量に基づいて、前記障害物と自車両との相対位置関係を求める相対位置演算手段とを有する障害物検知装置。 - 前記関係導出手段は、前記特徴量算出手段により算出された各検知対象領域の特徴量の経時的な変化を、前記検知対象領域が含まれる画像の解像度ごとに求めるとともに、当該解像度ごとに求められた特徴量の経時的な変化において、前記特徴量の経時的な変化曲線に対する接線の傾きがゼロ近傍となる場合の解像度ごとの特徴量を導き、
前記相対位置演算手段は、予め定義した特徴量と検知対象までの距離との関係を参照して、前記関係導出手段により導出された前記特徴量の経時的な変化曲線に対する接線の傾きがゼロ近傍となる場合の各解像度における特徴量に基づいて、前記障害物と自車両との相対位置関係を求める請求項1に記載の障害物検知装置。 - 前記領域抽出手段は、抽出した検知対象領域の前記画像に対する面積占有率が所定値以上である場合、障害物検知処理を中止させる請求項1又は2に記載の障害物検知装置。
- 前記領域抽出手段は、抽出した検知対象領域の前記画像に対する面積占有率を算出し、
前記相対位置演算手段は、前記面積占有率が所定値以上である場合、特徴量と障害物までの距離とを予め対応づけたモデルを参照して、前記特徴量算出手段により算出された各検知対象領域の特徴量に基づいて、前記障害物と自車両との相対位置関係を求める請求項1〜3のいずれかに記載の障害物検知装置。 - 自車両に搭載され、所定の周期で自車両周囲の赤外線像を所定の周期で順次撮像する一の撮像手段と、
前記一の撮像手段により順次所定の周期で撮像された赤外線像に基づいて、解像度の異なる2以上の画像を作成する画像作成手段と、
前記撮像手段により所定の周期で撮像された赤外線像及び前記画像作成手段により作成された各画像に含まれる障害物に対応する1又は2以上の検知対象領域を抽出する領域抽出手段と、
前記領域抽出手段により抽出された各検知対象領域の特徴量をそれぞれ算出する特徴量算出手段と、
前記特徴量算出手段により算出された各検知対象領域の特徴量と当該検知対象領域が含まれる画像の解像度との関係を撮像タイミングごとに求めるとともに、前記特徴量と解像度との関係において、前記解像度に対する特徴量の変化率が所定範囲となる場合の前記解像度に対する特徴量の経時的変化を各撮像タイミングごとに導く関係導出手段と、
前記関係導出手段により導出された前記解像度に対する特徴量の変化率が所定範囲となる場合の特徴量と解像度との関係の経時的変化に基づいて前記障害物が自車両に接近しているのか否かを判定する挙動判定手段と、を有する障害物検知装置。 - 前記関係導出手段は、前記特徴量算出手段により算出された各検知対象領域の特徴量と当該検知対象領域が含まれる画像の解像度との関係を撮像タイミングごとに求めるとともに、前記特徴量と解像度との関係において、前記解像度に対する特徴量の変化曲線に対する接線の傾きがゼロ近傍となる場合の前記解像度に対する特徴量の経時的変化を各撮像タイミングごとに導き、
前記挙動判定手段は、前記解像度に対する特徴量の変化曲線に対する接線の傾きがゼロ近傍となる場合の特徴量と解像度との関係の経時的変化に基づいて前記障害物が自車両に接近しているのか否かを判定する請求項5に記載の障害物検知装置。 - 前記領域抽出手段は、抽出した検知対象領域の前記画像に対する面積占有率が所定値以上である場合、障害物検知処理を中止させる請求項5又は6に記載の障害物検知装置。
- 前記領域抽出手段は、抽出した検知対象領域の前記画像に対する面積占有率を算出し、
前記挙動判定手段は、前記面積占有率が所定値以上である場合、特徴量と障害物までの距離とを予め対応づけたモデルを参照して、前記特徴量算出手段により算出された各検知対象領域の特徴量の経時的変化に基づいて、前記障害物が自車両に接近しているか否かを判定する請求項5〜7のいずれかに記載の障害物検知装置。 - 前記特徴量は、前記各検知対象領域の最高輝度値である請求項1〜8のいずれかに記載の障害物検知装置。
- 前記特徴量は、前記各検知対象領域の平均輝度値である請求項1〜8のいずれかに記載の障害物検知装置。
- 前記特徴量は、前記各検知対象領域の輝度分布である請求項1〜8のいずれかに記載の障害物検知装置。
- 自車両に搭載された一の撮像手段により所定の周期で撮像された赤外線像に基づいて、解像度の異なる2以上の画像を作成し、
前記撮像された赤外線像及び作成された各画像に含まれる障害物に対応する1又は2以上の検知対象領域の特徴量をそれぞれ算出し、
前記算出された各検知対象領域の特徴量の経時的な変化を前記検知対象領域が含まれる画像の解像度ごとに求めるとともに、当該解像度ごとに求められた特徴量の経時的な変化において、前記特徴量の経時的な変化の変化率が所定範囲となる場合の解像度ごとの特徴量を導き、
予め定義した特徴量と検知対象までの距離との関係を参照して、前記導出された前記特徴量の変化率が所定範囲となる場合の各解像度における特徴量に基づいて、前記障害物と自車両との相対位置関係を求める障害物検知方法。 - 自車両に搭載された一の撮像手段により所定の周期で撮像された赤外線像に基づいて、解像度の異なる2以上の画像を作成し、
前記撮像された赤外線像及び作成された各画像に含まれる障害物に対応する1又は2以上の検知対象領域の特徴量をそれぞれ算出し、
前記算出された各検知対象領域の特徴量と当該検知対象領域が含まれる画像の解像度との関係を撮像タイミングごとに求めるとともに、前記特徴量と解像度との関係において、前記解像度に対する特徴量の変化率が所定範囲となる場合の前記解像度に対する特徴量の経時的変化を各撮像タイミングごとに導き、
前記導出された前記解像度に対する特徴量の変化率が所定範囲となる場合の特徴量と解像度との関係の経時的変化に基づいて前記障害物が自車両に接近しているのか否かを判定する障害物検知方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004037949A JP3931885B2 (ja) | 2004-02-16 | 2004-02-16 | 障害物検知装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2004037949A JP3931885B2 (ja) | 2004-02-16 | 2004-02-16 | 障害物検知装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2005228195A JP2005228195A (ja) | 2005-08-25 |
| JP3931885B2 true JP3931885B2 (ja) | 2007-06-20 |
Family
ID=35002848
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2004037949A Expired - Fee Related JP3931885B2 (ja) | 2004-02-16 | 2004-02-16 | 障害物検知装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3931885B2 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012122816A (ja) * | 2010-12-07 | 2012-06-28 | Nippon Telegr & Teleph Corp <Ntt> | 3次元情報取得方法、3次元情報取得装置、および3次元情報取得プログラム |
| IT201600094858A1 (it) * | 2016-09-21 | 2018-03-21 | St Microelectronics Srl | Procedimento per un cross traffic alert avanzato a basso costo, corrispondente sistema di elaborazione, sistema per cross traffic alert e veicolo |
| US20220222946A1 (en) * | 2019-03-22 | 2022-07-14 | Honda Motor Co., Ltd. | Traffic environment recognition device and vehicle control device |
-
2004
- 2004-02-16 JP JP2004037949A patent/JP3931885B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2005228195A (ja) | 2005-08-25 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7025912B2 (ja) | 車載環境認識装置 | |
| US9721460B2 (en) | In-vehicle surrounding environment recognition device | |
| JP6554169B2 (ja) | 物体認識装置及び物体認識システム | |
| JP4733756B2 (ja) | 車両周辺監視装置 | |
| JP6786279B2 (ja) | 画像処理装置 | |
| JP5075672B2 (ja) | 対象物検出装置及び方法 | |
| EP3545464B1 (en) | Information processing device, imaging device, equipment control system, mobile object, information processing method, and computer-readable recording medium | |
| JP5484184B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
| JP2017027220A (ja) | 車載環境認識装置 | |
| JP2011065338A (ja) | 対象物追跡装置及びプログラム | |
| CN104512329B (zh) | 倒车安全辅助方法、装置及汽车 | |
| JP3931885B2 (ja) | 障害物検知装置 | |
| US20180268228A1 (en) | Obstacle detection device | |
| JP6396840B2 (ja) | 物体検出装置 | |
| JP5903901B2 (ja) | 車両位置算出装置 | |
| JP3532896B2 (ja) | スミア検出方法及びこのスミア検出方法を用いた画像処理装置 | |
| JP5493705B2 (ja) | 車両位置検出装置、車両位置検出方法、及び車両位置検出プログラム | |
| JP4842301B2 (ja) | 歩行者検出装置及びプログラム | |
| JP7180521B2 (ja) | 物標検出装置、物標検出方法、及び運転支援システム | |
| JPH11205663A (ja) | 車両用撮像装置の露光量制御装置 | |
| JP5559121B2 (ja) | 対象物種別判定装置 | |
| WO2018097269A1 (en) | Information processing device, imaging device, equipment control system, mobile object, information processing method, and computer-readable recording medium | |
| JP2017072914A (ja) | 物体認識装置 | |
| JP6943092B2 (ja) | 情報処理装置、撮像装置、機器制御システム、移動体、情報処理方法、及び、情報処理プログラム | |
| JP2006107314A (ja) | 画像処理装置、および画像処理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060907 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060926 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061110 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20061110 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070220 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070305 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |