JP2015172876A - 車両周辺監視装置、車両周辺監視システム、及びプログラム - Google Patents
車両周辺監視装置、車両周辺監視システム、及びプログラム Download PDFInfo
- Publication number
- JP2015172876A JP2015172876A JP2014048747A JP2014048747A JP2015172876A JP 2015172876 A JP2015172876 A JP 2015172876A JP 2014048747 A JP2014048747 A JP 2014048747A JP 2014048747 A JP2014048747 A JP 2014048747A JP 2015172876 A JP2015172876 A JP 2015172876A
- Authority
- JP
- Japan
- Prior art keywords
- camera image
- rear camera
- vehicle
- feature point
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Analysis (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
図1は、第1の実施の形態の車両周辺監視装置1の構成を示す図である。車両周辺監視装置1は、車両に取り付けられたサイドカメラ10及びリアカメラ11と、サイドカメラ10で撮影した画像(これを「サイドカメラ画像」という)及びリアカメラ11で撮影した画像(これを「リアカメラ画像」という)に基づいて、後方車両までの距離を求める測距部12とを有している。
図8は、第2の実施の形態の車両周辺監視装置2の構成を示す図である。第2の実施の形態の車両周辺監視装置2の基本的な構成は第1の実施の形態と同じであるが、第2の実施の形態では、測距部12は、距離概算部14、射影変換部15に代えて、平行化補正部18を有している。
10 サイドカメラ
11 リアカメラ
12 測距部
13 歪み補正部
14 距離概算部
15 射影変換部
16 特徴点探索部
17 ステレオ測距部
18 平行化補正部
20 CPU
21 RAM
22 ROM
23 プログラム
24 モニタ
25 ハードディスク
Claims (10)
- 車両の側部に設けられ、後方を撮影するサイドカメラと、
車両の後部に設けられ、広角で後方を撮影するリアカメラと、
前記サイドカメラで撮影したサイドカメラ画像と前記リアカメラで撮影したリアカメラ画像とから、後方にある物体までの距離を測定する測距部と、
を備え、
前記測距部は、
前記リアカメラ画像の一部を切り出して歪みを補正する歪み補正部と、
前記サイドカメラ画像または前記リアカメラ画像のいずれか一方から前記物体の特徴点を検出し、当該特徴点に対応する点を、前記サイドカメラ画像または前記リアカメラ画像の他方のエピポーラ線上から探索する特徴点探索部と、
前記サイドカメラ画像中の特徴点と、それに対応する前記リアカメラ画像中の特徴点との位置関係に基づいて、前記物体までの距離を求めるステレオ測距部と、
を備える車両周辺監視装置。 - 前記サイドカメラ画像または前記リアカメラ画像に基づいて、前記物体までの概算距離を求める距離概算部と、
前記特徴点探索部は、前記サイドカメラ画像または前記リアカメラ画像のいずれか一方から前記物体の特徴点を検出し、当該特徴点に対応する点を、前記サイドカメラ画像または前記リアカメラ画像の他方のエピポーラ線上であって、かつ前記概算距離に応じた範囲から探索する請求項1に記載の車両周辺監視装置。 - 前記測距部は、前記物体として後方車両までの距離を測定するものであって、
前記概算距離に基づいて、前記リアカメラ画像中の後方車両の正面方向からの傾き量を求め、当該傾き量を用いて前記リアカメラ画像を後方車両を正面から見た画像に射影変換する射影変換部を備え、
前記特徴点探索部は、射影変換された前記リアカメラ画像を用いて、対応する特徴点の探索を行う請求項2に記載の車両周辺監視装置。 - 前記特徴点探索部は、前記サイドカメラ画像と前記リアカメラ画像の大きさを調整した画像を用いて、対応する特徴点の探索を行う請求項1ないし3のいずれかに記載の車両周辺監視装置。
- 車両の側部に設けられ、後方を撮影するサイドカメラと、
車両の後部に設けられ、広角で後方を撮影するリアカメラと、
前記サイドカメラで撮影したサイドカメラ画像と前記リアカメラで撮影したリアカメラ画像とから、後方にある物体までの距離を測定する測距部と、
を備え、
前記測距部は、
前記リアカメラ画像の一部を切り出して歪みを補正する歪み補正部と、
前記サイドカメラと前記リアカメラの取付位置及び撮影方向に基づいて、前記サイドカメラ画像と前記リアカメラ画像のエピポーラ線が平行になるように前記サイドカメラ画像及び前記リアカメラ画像を補正する平行化補正部と、
前記サイドカメラ画像及び前記リアカメラ画像を水平方向に走査して、前記サイドカメラ画像及び前記リアカメラ画像において対応する特徴点を探索する特徴点探索部と、
前記サイドカメラ画像中の特徴点と、それに対応する前記リアカメラ画像中の特徴点との位置関係に基づいて、前記物体までの距離を求めるステレオ測距部と、
を備える車両周辺監視装置。 - 前記歪み補正部は、右側のサイドカメラによって撮影された画像中の前記物体までの距離を求めるときには、前記リアカメラ画像の右半分を切り出して歪みを補正し、左側のサイドカメラによって撮影された画像中の前記物体までの距離を求めるときには、前記リアカメラ画像の左半分を切り出して歪みを補正する請求項1ないし5のいずれかに記載の車両周辺監視装置。
- 車両の側部に設けられて後方を撮影するサイドカメラと、車両の後部に設けられて広角で後方を撮影するリアカメラとを有する車両周辺監視装置によって、後方にある物体までの距離を求める方法であって、
前記車両周辺監視装置が、前記リアカメラにて撮影したリアカメラ画像の一部を切り出して歪みを補正するステップと、
前記車両周辺監視装置が、前記サイドカメラ画像または前記リアカメラ画像のいずれか一方から前記物体の特徴点を検出し、当該特徴点に対応する点を、前記サイドカメラ画像または前記リアカメラ画像の他方のエピポーラ線上から探索するステップと、
前記車両周辺監視装置が、前記サイドカメラ画像中の特徴点と、それに対応する前記リアカメラ画像中の特徴点との位置関係に基づいて、前記物体までの距離を求めるステップと、
を備える車両周辺監視方法。 - 車両の側部に設けられて後方を撮影するサイドカメラと、車両の後部に設けられて広角で後方を撮影するリアカメラとを有する車両周辺監視装置によって、後方にある物体までの距離を求める方法であって、
前記車両周辺監視装置が、前記リアカメラにて撮影したリアカメラ画像の一部を切り出して歪みを補正するステップと、
前記車両周辺監視装置が、前記サイドカメラと前記リアカメラの取付位置及び撮影方向に基づいて、前記サイドカメラにて撮影したサイドカメラ画像と前記リアカメラ画像のエピポーラ線が平行になるように前記サイドカメラ画像及び前記リアカメラ画像を補正するステップと、
前記車両周辺監視装置が、前記サイドカメラ画像及び前記リアカメラ画像を水平方向に走査して、前記サイドカメラ画像及び前記リアカメラ画像において対応する特徴点を探索するステップと、
前記車両周辺監視装置が、前記サイドカメラ画像中の特徴点と、それに対応する前記リアカメラ画像中の特徴点との位置関係に基づいて、前記物体までの距離を求めるステップと、
を備える車両周辺監視方法。 - 車両の側部に設けられて後方を撮影するサイドカメラ、および車両の後部に設けられて広角で後方を撮影するリアカメラに接続されたコンピュータによって、後方にある物体までの距離を求めるためのプログラムであって、前記コンピュータに、
前記リアカメラにて撮影したリアカメラ画像の一部を切り出して歪みを補正するステップと、
前記サイドカメラ画像または前記リアカメラ画像のいずれか一方から前記物体の特徴点を検出し、当該特徴点に対応する点を、前記サイドカメラ画像または前記リアカメラ画像の他方のエピポーラ線上から探索するステップと、
前記サイドカメラ画像中の特徴点と、それに対応する前記リアカメラ画像中の特徴点との位置関係に基づいて、前記物体までの距離を求めるステップと、
を実行させるプログラム。 - 車両の側部に設けられて後方を撮影するサイドカメラ、および車両の後部に設けられて広角で後方を撮影するリアカメラに接続されたコンピュータによって、後方にある物体までの距離を求めるためのプログラムであって、前記コンピュータに、
前記リアカメラにて撮影したリアカメラ画像の一部を切り出して歪みを補正するステップと、
前記サイドカメラと前記リアカメラの取付位置及び撮影方向に基づいて、前記サイドカメラにて撮影したサイドカメラ画像と前記リアカメラ画像のエピポーラ線が平行になるように前記サイドカメラ画像及び前記リアカメラ画像を補正するステップと、
前記サイドカメラ画像及び前記リアカメラ画像を水平方向に走査して、前記サイドカメラ画像及び前記リアカメラ画像において対応する特徴点を探索するステップと、
前記サイドカメラ画像中の特徴点と、それに対応する前記リアカメラ画像中の特徴点との位置関係に基づいて、前記物体までの距離を求めるステップと、
を実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014048747A JP6243758B2 (ja) | 2014-03-12 | 2014-03-12 | 車両周辺監視装置、車両周辺監視方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014048747A JP6243758B2 (ja) | 2014-03-12 | 2014-03-12 | 車両周辺監視装置、車両周辺監視方法、及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2015172876A true JP2015172876A (ja) | 2015-10-01 |
JP2015172876A5 JP2015172876A5 (ja) | 2016-09-29 |
JP6243758B2 JP6243758B2 (ja) | 2017-12-06 |
Family
ID=54260156
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014048747A Expired - Fee Related JP6243758B2 (ja) | 2014-03-12 | 2014-03-12 | 車両周辺監視装置、車両周辺監視方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6243758B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017084068A (ja) * | 2015-10-27 | 2017-05-18 | 富士通テン株式会社 | 画像処理装置および画像処理方法 |
WO2017090705A1 (ja) * | 2015-11-27 | 2017-06-01 | Necソリューションイノベータ株式会社 | 画像処理装置、画像処理方法、及びコンピュータ読み取り可能な記録媒体 |
JP2020107254A (ja) * | 2018-12-28 | 2020-07-09 | 株式会社AI−feed | 画像検査装置、学習済みモデル生成装置、画像検査システム、画像検査用プログラム、学習済みモデル生成用プログラム、および学習済みモデル |
JP2022147745A (ja) * | 2021-03-23 | 2022-10-06 | 本田技研工業株式会社 | 移動体の制御装置及び制御方法並びに車両 |
JP2022147742A (ja) * | 2021-03-23 | 2022-10-06 | 本田技研工業株式会社 | 移動体の制御装置及び制御方法並びに車両 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005216200A (ja) * | 2004-02-02 | 2005-08-11 | Alpine Electronics Inc | 他車検出装置及び他車検出方法 |
JP2006054681A (ja) * | 2004-08-11 | 2006-02-23 | Tokyo Institute Of Technology | 移動体周辺監視装置 |
JP2008102620A (ja) * | 2006-10-17 | 2008-05-01 | Toyota Motor Corp | 画像処理装置 |
JP2009026250A (ja) * | 2007-07-23 | 2009-02-05 | Panasonic Corp | 面成分検出装置、地上面検出装置、及び障害物検出装置 |
JP2013095375A (ja) * | 2011-11-04 | 2013-05-20 | Honda Motor Co Ltd | 車両周辺監視装置 |
JP2013168063A (ja) * | 2012-02-16 | 2013-08-29 | Fujitsu Ten Ltd | 画像処理装置、画像表示システム及び画像処理方法 |
JP2013239015A (ja) * | 2012-05-15 | 2013-11-28 | Sharp Corp | 駐車支援装置、駐車支援方法およびプログラム |
-
2014
- 2014-03-12 JP JP2014048747A patent/JP6243758B2/ja not_active Expired - Fee Related
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005216200A (ja) * | 2004-02-02 | 2005-08-11 | Alpine Electronics Inc | 他車検出装置及び他車検出方法 |
JP2006054681A (ja) * | 2004-08-11 | 2006-02-23 | Tokyo Institute Of Technology | 移動体周辺監視装置 |
JP2008102620A (ja) * | 2006-10-17 | 2008-05-01 | Toyota Motor Corp | 画像処理装置 |
JP2009026250A (ja) * | 2007-07-23 | 2009-02-05 | Panasonic Corp | 面成分検出装置、地上面検出装置、及び障害物検出装置 |
JP2013095375A (ja) * | 2011-11-04 | 2013-05-20 | Honda Motor Co Ltd | 車両周辺監視装置 |
JP2013168063A (ja) * | 2012-02-16 | 2013-08-29 | Fujitsu Ten Ltd | 画像処理装置、画像表示システム及び画像処理方法 |
JP2013239015A (ja) * | 2012-05-15 | 2013-11-28 | Sharp Corp | 駐車支援装置、駐車支援方法およびプログラム |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017084068A (ja) * | 2015-10-27 | 2017-05-18 | 富士通テン株式会社 | 画像処理装置および画像処理方法 |
CN107045620A (zh) * | 2015-10-27 | 2017-08-15 | 富士通天株式会社 | 图像处理设备和图像处理方法 |
WO2017090705A1 (ja) * | 2015-11-27 | 2017-06-01 | Necソリューションイノベータ株式会社 | 画像処理装置、画像処理方法、及びコンピュータ読み取り可能な記録媒体 |
JPWO2017090705A1 (ja) * | 2015-11-27 | 2018-09-20 | Necソリューションイノベータ株式会社 | 画像処理装置、画像処理方法、及びプログラム |
JP2020107254A (ja) * | 2018-12-28 | 2020-07-09 | 株式会社AI−feed | 画像検査装置、学習済みモデル生成装置、画像検査システム、画像検査用プログラム、学習済みモデル生成用プログラム、および学習済みモデル |
JP7340806B2 (ja) | 2018-12-28 | 2023-09-08 | 株式会社Ridge-i | 画像検査装置、画像検査システム、および画像検査用プログラム |
JP2022147745A (ja) * | 2021-03-23 | 2022-10-06 | 本田技研工業株式会社 | 移動体の制御装置及び制御方法並びに車両 |
JP2022147742A (ja) * | 2021-03-23 | 2022-10-06 | 本田技研工業株式会社 | 移動体の制御装置及び制御方法並びに車両 |
JP7181956B2 (ja) | 2021-03-23 | 2022-12-01 | 本田技研工業株式会社 | 移動体の制御装置及び制御方法並びに車両 |
JP7244562B2 (ja) | 2021-03-23 | 2023-03-22 | 本田技研工業株式会社 | 移動体の制御装置及び制御方法並びに車両 |
US11893715B2 (en) | 2021-03-23 | 2024-02-06 | Honda Motor Co., Ltd. | Control device and control method for mobile object, storage medium, and vehicle |
Also Published As
Publication number | Publication date |
---|---|
JP6243758B2 (ja) | 2017-12-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6392693B2 (ja) | 車両周辺監視装置、車両周辺監視方法、及びプログラム | |
US9313462B2 (en) | Vehicle with improved traffic-object position detection using symmetric search | |
JP4809019B2 (ja) | 車両用障害物検出装置 | |
JP6243758B2 (ja) | 車両周辺監視装置、車両周辺監視方法、及びプログラム | |
EP2743889A2 (en) | Stereoscopic camera object detection system and method of aligning the same | |
US9747524B2 (en) | Disparity value deriving device, equipment control system, movable apparatus, and robot | |
WO2012101967A1 (ja) | 測位情報形成装置、検出装置、及び測位情報形成方法 | |
JP2009041972A (ja) | 画像処理装置及びその方法 | |
JP2014222429A (ja) | 画像処理装置、距離測定装置、移動体機器制御システム、移動体及び画像処理用プログラム | |
JP2006252473A (ja) | 障害物検出装置、キャリブレーション装置、キャリブレーション方法およびキャリブレーションプログラム | |
JP2002352225A (ja) | 障害物検出装置及びその方法 | |
JP6291866B2 (ja) | 運転支援装置、および運転支援方法 | |
JP2009014445A (ja) | 測距装置 | |
JP6032034B2 (ja) | 物体検知装置 | |
JP6337504B2 (ja) | 画像処理装置、移動体、ロボット、機器制御方法およびプログラム | |
JP2008309519A (ja) | 画像処理を用いた物体検出装置 | |
JP5421819B2 (ja) | 車線認識装置 | |
JP6543935B2 (ja) | 視差値導出装置、機器制御システム、移動体、ロボット、視差値導出方法、およびプログラム | |
JP5181602B2 (ja) | 物体検出装置 | |
JP6455164B2 (ja) | 視差値導出装置、機器制御システム、移動体、ロボット、視差値導出方法、およびプログラム | |
JP2009139324A (ja) | 車両用走行路面検出装置 | |
JP7303064B2 (ja) | 画像処理装置、および、画像処理方法 | |
JP6241083B2 (ja) | 撮像装置及び視差検出方法 | |
CN112347825A (zh) | 车身环视模型的调整方法及其系统 | |
WO2022118513A1 (ja) | 位置姿勢算出装置、位置姿勢算出方法及び測量装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20151113 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160810 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160810 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170720 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170801 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170921 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171031 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171110 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6243758 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |