JP2009265882A - 車両周辺監視装置 - Google Patents
車両周辺監視装置 Download PDFInfo
- Publication number
- JP2009265882A JP2009265882A JP2008113858A JP2008113858A JP2009265882A JP 2009265882 A JP2009265882 A JP 2009265882A JP 2008113858 A JP2008113858 A JP 2008113858A JP 2008113858 A JP2008113858 A JP 2008113858A JP 2009265882 A JP2009265882 A JP 2009265882A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- local region
- region
- image
- local
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/579—Depth or shape recovery from multiple images from motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30261—Obstacle
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
【解決手段】車両周辺監視装置10によれば、対象物領域A(k)の一部領域としての局所領域B(k)のサイズの変化率Rate(k)が算出される。具体的には、先時刻k−1における局所領域B(k−1)が拡大されて得られた拡大局所領域EB(γi)と、先時刻kよりも後の後時刻k−1における局所領域B(k)との相関度が最高になったときの当該拡大率が局所領域B(k)のサイズの変化率Rate(k)として算出される。局所領域B(k)は対象物のうち動きが少ない部分が存在する画像領域、すなわち、対象物の動きによるサイズの変動が最小限に抑制されている画像領域である。そして、当該変化率Rate(k)を基礎とすることにより、対象物が動いている場合でも車両1から対象物までの距離Z(k)または位置P(k)が高精度で測定されうる。
【選択図】 図5
Description
また、車両周辺監視装置10により、車両1から対象物までの距離Z(k)に基づき、この対象物の実空間位置P(k)=(X(k),Y(k),Z(k)として算定される(図3/S026)。具体的には、車両1から各対象物までの補正後の距離Z(k)と、赤外線カメラ11の焦点距離fと、撮像画像における対象物に対応した領域の画像座標x(k)およびy(k)とに基づき、式(2)にしたがって実空間座標系におけるX座標X(k)およびY座標Y(k)が算定される。撮像画像の中心、右方向および下方向のそれぞれが、画像座標系における原点o、+x方向および+y方向として定義されている。また、ヨーレートセンサ15の出力に基づいて測定される回頭角に基づき、各対象物の実空間位置(X(k),Y(k),Z(k))が回頭角補正される。
Y(k)=y(k)・Z(k)/f ‥(2)
また、異なる時刻における各対象物の実空間位置P(k)に基づき、たとえば特開2001−6096号公報に記載された衝突可能性の判定手法にしたがって、車両1と各対象物との接触可能性の高低または有無が判定される(図3/S028)。そして、車両1と対象物との接触可能性が高いと判定された場合(図3/S028‥YES)、「第1制御処理」が実行される(図3/S030)。具体的には、当該接触可能性の判定結果に応じた音声および画像(当該対象物を強調表示するためのフレームなど)のそれぞれが音声出力装置16および画像出力装置17のそれぞれを通じて出力される。なお、当該音声および画像のうち一方のみが出力されてもよい。また、車両1のステアリング装置、ブレーキ装置およびアクセル装置のうち一部または全部がアクチュエータにより操作され、車両1の走行挙動が操作される場合、音声および画像出力に加えてまたは代えて車両挙動が制御される。具体的には、車両1との接触可能性が高いと判定された対象物との接触を回避するように、または、回避が容易になるように車両1のステアリング装置、ブレーキ装置およびアクセル装置のうち一部または全部の動作が車両制御ユニット(図示略)により制御されてもよい。たとえば、運転者によるアクセルペダルの必要踏力が、対象物との接触を回避する必要がない通常の場合よりも大きくなるようにアクセル装置を制御して加速しにくくする。また、車両1と対象物との接触を回避するために要求されるステアリング装置の操舵方向側へのステアリングハンドルの要求回転力を、反対側へのステアリングハンドルの要求回転力よりも低くして、当該操舵方向側へのステアリングハンドルの操作を容易に行いうるようにする。さらに、ブレーキ装置のブレーキペダルの踏み込み量に応じた車両1の制動力の増加速度を、通常の場合よりも高くする。このようにすることで、対象物との接触を避けるための車両1の運転が容易になる。また、ブレーキセンサ15の出力に基づいて運転者による車両1のブレーキが操作されていないことが確認されたこと、または、速度センサ14または加速度センサ(図示略)の出力に基づいて車両1の減速度が閾値以下であることが確認されたことを要件として「第1制御処理」が実行されてもよい。
Claims (4)
- 車両に搭載されている一の撮像装置を通じて得られた前記車両の周辺状況を表わす画像を用いて前記車両の周辺を監視する装置であって、
前記画像において対象物が存在する領域を対象物領域として設定し、前記対象物のうち動きが比較的少ない部分が存在する前記対象物領域の一部の領域を局所領域として設定する第1処理要素と、
前記画像における前記局所領域のサイズの変化率を算出し、前記局所領域のサイズの変化率に基づいて前記車両から前記対象物までの距離を測定する第2処理要素とを備えていることを特徴とする車両周辺監視装置。 - 請求項1記載の車両周辺監視装置において、
前記第1処理要素が前記対象物の種類を判定し、前記対象物の種類に基づいて前記局所領域を設定することを特徴とする車両周辺監視装置。 - 請求項2記載の車両周辺監視装置において、
前記第1処理要素が前記対象物の種類が歩行者に該当するか否かを判定し、前記対象物の種類が歩行者に該当すると判定したことを要件として前記対象物領域の上部を前記局所領域として設定することを特徴とする車両周辺監視装置。 - 請求項1記載の車両周辺監視装置において、
前記第1処理要素が先時刻における前記局所領域が拡大されることにより得られる拡大局所領域と、前記先時刻よりも後の後時刻における前記局所領域との相関度を評価し、
前記第2処理要素が、前記相関度が最高となったときの前記先時刻における前記局所領域の拡大率を前記局所領域のサイズの変化率として算出することを特徴とする車両周辺監視装置。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008113858A JP4486997B2 (ja) | 2008-04-24 | 2008-04-24 | 車両周辺監視装置 |
US12/988,551 US8284253B2 (en) | 2008-04-24 | 2009-01-08 | Vehicle periphery monitoring apparatus |
CN200980114426.7A CN102016954B (zh) | 2008-04-24 | 2009-01-08 | 车辆周围监测装置 |
EP09734224A EP2278574A4 (en) | 2008-04-24 | 2009-01-08 | APPARATUS FOR MONITORING VEHICLE PERIPHERY |
PCT/JP2009/000044 WO2009130828A1 (ja) | 2008-04-24 | 2009-01-08 | 車両周辺監視装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008113858A JP4486997B2 (ja) | 2008-04-24 | 2008-04-24 | 車両周辺監視装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009265882A true JP2009265882A (ja) | 2009-11-12 |
JP4486997B2 JP4486997B2 (ja) | 2010-06-23 |
Family
ID=41216571
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008113858A Active JP4486997B2 (ja) | 2008-04-24 | 2008-04-24 | 車両周辺監視装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8284253B2 (ja) |
EP (1) | EP2278574A4 (ja) |
JP (1) | JP4486997B2 (ja) |
CN (1) | CN102016954B (ja) |
WO (1) | WO2009130828A1 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2011086807A1 (ja) * | 2010-01-14 | 2011-07-21 | 本田技研工業株式会社 | 車両周辺監視装置 |
WO2012029382A1 (ja) * | 2010-08-31 | 2012-03-08 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP2013002884A (ja) * | 2011-06-14 | 2013-01-07 | Honda Motor Co Ltd | 測距装置 |
KR20210012515A (ko) * | 2019-07-25 | 2021-02-03 | 한미헬스케어 주식회사 | 구동 모드의 자동 전환을 통한 절전형 리딩 제어시스템 |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103189905B (zh) | 2010-11-16 | 2015-09-02 | 本田技研工业株式会社 | 车辆周围监测装置 |
JP5603835B2 (ja) * | 2011-06-27 | 2014-10-08 | クラリオン株式会社 | 車両周囲監視装置 |
US9235990B2 (en) * | 2011-11-25 | 2016-01-12 | Honda Motor Co., Ltd. | Vehicle periphery monitoring device |
KR102451091B1 (ko) * | 2015-07-08 | 2022-10-05 | 엘지이노텍 주식회사 | 차량용 이동체 정보 제공 장치 및 방법과, 이 방법을 실행하기 위한 프로그램을 기록한 기록 매체 |
CN108109474B (zh) * | 2018-02-23 | 2024-03-19 | 哈尔滨莱特兄弟科技开发有限公司 | 一种模拟大飞机的脚舵装置 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3515926B2 (ja) | 1999-06-23 | 2004-04-05 | 本田技研工業株式会社 | 車両の周辺監視装置 |
JP3987048B2 (ja) * | 2003-03-20 | 2007-10-03 | 本田技研工業株式会社 | 車両周辺監視装置 |
US7672514B2 (en) * | 2004-03-02 | 2010-03-02 | Sarnoff Corporation | Method and apparatus for differentiating pedestrians, vehicles, and other objects |
AU2006230361A1 (en) * | 2005-03-30 | 2006-10-05 | Cernium Corporation | Intelligent video behavior recognition with multiple masks and configurable logic inference module |
JP4544028B2 (ja) * | 2005-05-13 | 2010-09-15 | 日産自動車株式会社 | 車載画像処理装置、および画像処理方法 |
JP4970926B2 (ja) | 2006-01-16 | 2012-07-11 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP2007188417A (ja) * | 2006-01-16 | 2007-07-26 | Fujitsu Ten Ltd | 画像認識装置、画像認識方法および画像認識プログラム |
JP4173896B2 (ja) | 2006-04-03 | 2008-10-29 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP4173901B2 (ja) | 2006-05-19 | 2008-10-29 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP2007334511A (ja) | 2006-06-13 | 2007-12-27 | Honda Motor Co Ltd | 対象物検出装置、車両、対象物検出方法、並びに対象物検出用プログラム |
JP2008021034A (ja) * | 2006-07-11 | 2008-01-31 | Fujitsu Ten Ltd | 画像認識装置、画像認識方法、歩行者認識装置および車両制御装置 |
JP2008113858A (ja) | 2006-11-06 | 2008-05-22 | Aruze Corp | ゲームシステム |
JP4315991B2 (ja) * | 2007-04-20 | 2009-08-19 | 本田技研工業株式会社 | 車両周辺監視装置、車両周辺監視方法、車両周辺監視プログラム |
-
2008
- 2008-04-24 JP JP2008113858A patent/JP4486997B2/ja active Active
-
2009
- 2009-01-08 US US12/988,551 patent/US8284253B2/en active Active
- 2009-01-08 WO PCT/JP2009/000044 patent/WO2009130828A1/ja active Application Filing
- 2009-01-08 EP EP09734224A patent/EP2278574A4/en not_active Withdrawn
- 2009-01-08 CN CN200980114426.7A patent/CN102016954B/zh not_active Expired - Fee Related
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5480917B2 (ja) * | 2010-01-14 | 2014-04-23 | 本田技研工業株式会社 | 車両周辺監視装置 |
US8994824B2 (en) | 2010-01-14 | 2015-03-31 | Honda Motor Co., Ltd. | Vehicle periphery monitoring device |
CN102713988A (zh) * | 2010-01-14 | 2012-10-03 | 本田技研工业株式会社 | 车辆周围监测装置 |
WO2011086807A1 (ja) * | 2010-01-14 | 2011-07-21 | 本田技研工業株式会社 | 車両周辺監視装置 |
CN102713988B (zh) * | 2010-01-14 | 2015-02-25 | 本田技研工业株式会社 | 车辆周围监测装置 |
JPWO2011086807A1 (ja) * | 2010-01-14 | 2013-05-16 | 本田技研工業株式会社 | 車両周辺監視装置 |
JP5687702B2 (ja) * | 2010-08-31 | 2015-03-18 | 本田技研工業株式会社 | 車両周辺監視装置 |
US8965056B2 (en) | 2010-08-31 | 2015-02-24 | Honda Motor Co., Ltd. | Vehicle surroundings monitoring device |
CN102985958A (zh) * | 2010-08-31 | 2013-03-20 | 本田技研工业株式会社 | 车辆周围监测装置 |
WO2012029382A1 (ja) * | 2010-08-31 | 2012-03-08 | 本田技研工業株式会社 | 車両周辺監視装置 |
CN102985958B (zh) * | 2010-08-31 | 2015-04-01 | 本田技研工业株式会社 | 车辆周围监测装置 |
JP2013002884A (ja) * | 2011-06-14 | 2013-01-07 | Honda Motor Co Ltd | 測距装置 |
KR20210012515A (ko) * | 2019-07-25 | 2021-02-03 | 한미헬스케어 주식회사 | 구동 모드의 자동 전환을 통한 절전형 리딩 제어시스템 |
KR102225049B1 (ko) * | 2019-07-25 | 2021-03-09 | 한미헬스케어 주식회사 | 구동 모드의 자동 전환을 통한 절전형 리딩 제어시스템 |
Also Published As
Publication number | Publication date |
---|---|
EP2278574A4 (en) | 2011-09-28 |
US8284253B2 (en) | 2012-10-09 |
CN102016954A (zh) | 2011-04-13 |
EP2278574A1 (en) | 2011-01-26 |
US20110032358A1 (en) | 2011-02-10 |
WO2009130828A1 (ja) | 2009-10-29 |
JP4486997B2 (ja) | 2010-06-23 |
CN102016954B (zh) | 2017-06-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4271720B1 (ja) | 車両周辺監視装置 | |
JP4486997B2 (ja) | 車両周辺監視装置 | |
JP4521642B2 (ja) | 車両周辺監視装置、車両、車両周辺監視プログラム | |
JP4173901B2 (ja) | 車両周辺監視装置 | |
US8766816B2 (en) | System for monitoring the area around a vehicle | |
US8189868B2 (en) | Vehicle periphery monitoring device | |
JP4173902B2 (ja) | 車両周辺監視装置 | |
JP5687702B2 (ja) | 車両周辺監視装置 | |
WO2011108217A1 (ja) | 車両の周辺監視装置 | |
JP2008113296A (ja) | 車両周辺監視装置 | |
US8174578B2 (en) | Vehicle periphery monitoring device | |
US7885430B2 (en) | Automotive environment monitoring device, vehicle with the automotive environment monitoring device, and automotive environment monitoring program | |
JP2009075124A (ja) | 距離検出装置 | |
JP4716294B2 (ja) | 車両周辺監視装置、車両、車両周辺監視プログラム | |
JP4590654B2 (ja) | 車両周辺監視装置、車両、車両周辺監視プログラム | |
JP4743797B2 (ja) | 車両周辺監視装置、車両、車両周辺監視プログラム | |
JP2008052467A (ja) | 車両周辺監視システム、車両、車両周辺監視プログラム、車両周辺監視システムの構築システム | |
JP4496383B2 (ja) | 車両周辺監視装置、車両周辺監視方法、車両周辺監視プログラム | |
JP2008042779A (ja) | 車両周辺監視システム、車両、車両周辺監視プログラム、車両周辺監視システムの構築システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091201 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100125 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100309 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100329 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 4486997 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130402 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130402 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140402 Year of fee payment: 4 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |