JP7454177B2 - 周辺監視装置、およびプログラム - Google Patents
周辺監視装置、およびプログラム Download PDFInfo
- Publication number
- JP7454177B2 JP7454177B2 JP2020031043A JP2020031043A JP7454177B2 JP 7454177 B2 JP7454177 B2 JP 7454177B2 JP 2020031043 A JP2020031043 A JP 2020031043A JP 2020031043 A JP2020031043 A JP 2020031043A JP 7454177 B2 JP7454177 B2 JP 7454177B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- captured image
- captured
- vehicle
- optical flow
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012806 monitoring device Methods 0.000 title claims description 17
- 230000002093 peripheral effect Effects 0.000 title description 4
- 230000003287 optical effect Effects 0.000 claims description 88
- 238000003384 imaging method Methods 0.000 claims description 45
- 238000001514 detection method Methods 0.000 claims description 26
- 238000013459 approach Methods 0.000 claims description 5
- 238000000034 method Methods 0.000 description 18
- 238000010586 diagram Methods 0.000 description 13
- 230000002950 deficient Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000005484 gravity Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 3
- 238000002485 combustion reaction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000000306 recurrent effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
Description
14 撮像部
24 ECU
24a CPU
24b ROM
24c RAM
24f SSD
30 情報取得部
340 撮像画像格納部
341 画像取得部
342 汚れ画像検出部
343 オプティカルフロー推定部
344 画像復元部
345 復元対象範囲判定部
346 自車位置情報取得部
Claims (4)
- 車両に備えられる撮像部によって前記車両の周囲を撮像して得られる撮像画像を取得する取得部と、
前記撮像画像に含まれる汚れ画像を検出し、かつ前記汚れ画像をマスクする検出部と、
前記撮像画像のうち第1撮像画像と、当該第1撮像画像と時系列的に連続する前記撮像画像と、の間における、前記汚れ画像をマスクした欠損領域のオプティカルフローを推定し、当該推定したオプティカルフローに基づいて、前記第1撮像画像内の前記欠損領域の少なくとも一部を復元した第1復元画像を生成し、前記撮像画像のうち前記第1撮像画像より後の第2撮像画像と、当該第2撮像画像と時系列的に連続する前記撮像画像のうち前記第1撮像画像を除く前記撮像画像と、前記第1復元画像と、の間における前記欠損領域のオプティカルフローを推定し、当該推定したオプティカルフローに基づいて、前記第2撮像画像内の前記欠損領域の少なくとも一部を復元した第2復元画像を復元する復元部と、
を備える周辺監視装置。 - 前記欠損領域の外縁近傍を、復元対象範囲に設定する設定部をさらに備え、
前記復元部は、前記設定部により設定される前記復元対象範囲を復元する請求項1に記載の周辺監視装置。 - 前記設定部は、前記車両が直進している場合、前記撮像部によって前記車両の前方を撮像して得られる前記撮像画像の前記欠損領域が、前記撮像画像の中央に近づくに従って、前記復元対象範囲を狭める請求項2に記載の周辺監視装置。
- コンピュータを、
車両に備えられる撮像部によって前記車両の周囲を撮像して得られる撮像画像を取得する取得部と、
前記撮像画像に含まれる汚れ画像を検出し、かつ前記汚れ画像をマスクする検出部と、
前記撮像画像のうち第1撮像画像と、当該第1撮像画像と時系列的に連続する前記撮像画像と、の間における、前記汚れ画像をマスクした欠損領域のオプティカルフローを推定し、当該推定したオプティカルフローに基づいて、前記第1撮像画像内の前記欠損領域の少なくとも一部を復元した第1復元画像を生成し、前記撮像画像のうち前記第1撮像画像より後の第2撮像画像と、当該第2撮像画像と時系列的に連続する前記撮像画像のうち前記第1撮像画像を除く前記撮像画像と、前記第1復元画像と、の間における、前記欠損領域のオプティカルフローを推定し、当該推定したオプティカルフローに基づいて、前記第2撮像画像内の前記欠損領域の少なくとも一部を復元した第2復元画像を復元する復元部と、
として機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020031043A JP7454177B2 (ja) | 2020-02-26 | 2020-02-26 | 周辺監視装置、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020031043A JP7454177B2 (ja) | 2020-02-26 | 2020-02-26 | 周辺監視装置、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021135721A JP2021135721A (ja) | 2021-09-13 |
JP7454177B2 true JP7454177B2 (ja) | 2024-03-22 |
Family
ID=77661502
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020031043A Active JP7454177B2 (ja) | 2020-02-26 | 2020-02-26 | 周辺監視装置、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7454177B2 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010237798A (ja) | 2009-03-30 | 2010-10-21 | Equos Research Co Ltd | 画像処理装置および画像処理プログラム |
JP2019023794A (ja) | 2017-07-24 | 2019-02-14 | 株式会社デンソーテン | 画像処理装置及び画像処理方法 |
-
2020
- 2020-02-26 JP JP2020031043A patent/JP7454177B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010237798A (ja) | 2009-03-30 | 2010-10-21 | Equos Research Co Ltd | 画像処理装置および画像処理プログラム |
JP2019023794A (ja) | 2017-07-24 | 2019-02-14 | 株式会社デンソーテン | 画像処理装置及び画像処理方法 |
Non-Patent Citations (1)
Title |
---|
稲葉洋 外2名,降雨時の車載カメラ映像に対するフレーム間の対応付けに基づく雨滴部の修繕,信学校報(ITS2010-57,IE2010-132),2011年02月 |
Also Published As
Publication number | Publication date |
---|---|
JP2021135721A (ja) | 2021-09-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6724425B2 (ja) | 駐車支援装置 | |
US8305204B2 (en) | Vehicle surrounding confirmation apparatus | |
JP2016097896A (ja) | 画像表示制御装置 | |
US11017245B2 (en) | Parking assist apparatus | |
JP7039879B2 (ja) | 表示制御装置 | |
JP5680436B2 (ja) | 車載カメラレンズ用異物付着判定装置 | |
US11393223B2 (en) | Periphery monitoring device | |
WO2018150642A1 (ja) | 周辺監視装置 | |
JP2020120327A (ja) | 周辺表示制御装置 | |
JP5253017B2 (ja) | 周辺監視装置、障害物検出方法及びコンピュータプログラム | |
US10991086B2 (en) | Adhered substance detection apparatus | |
JP6554866B2 (ja) | 画像表示制御装置 | |
JP2010028803A (ja) | 駐車補助のための画像表示方法 | |
WO2015122124A1 (ja) | 車両周辺画像表示装置、車両周辺画像表示方法 | |
CN112581381A (zh) | 周边监视装置以及周边监视方法 | |
JP5083254B2 (ja) | 駐車結果表示システム | |
JP2022023870A (ja) | 表示制御装置 | |
WO2019159344A1 (ja) | 運転支援装置および映像表示方法 | |
JP7395913B2 (ja) | 物体検知装置 | |
JP7454177B2 (ja) | 周辺監視装置、およびプログラム | |
CN111612701A (zh) | 周边监视装置 | |
JP2021026625A (ja) | 特定領域検知装置 | |
JP2019153932A (ja) | 汚れ報知装置 | |
JP7137356B2 (ja) | 車載用故障検出装置、及び故障検出方法 | |
JP5395373B2 (ja) | 周辺監視装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7426 Effective date: 20200326 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20200326 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230116 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231129 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231205 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240201 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240213 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240301 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7454177 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |