JP7286406B2 - 画像分析システムおよび画像分析方法 - Google Patents
画像分析システムおよび画像分析方法 Download PDFInfo
- Publication number
- JP7286406B2 JP7286406B2 JP2019087322A JP2019087322A JP7286406B2 JP 7286406 B2 JP7286406 B2 JP 7286406B2 JP 2019087322 A JP2019087322 A JP 2019087322A JP 2019087322 A JP2019087322 A JP 2019087322A JP 7286406 B2 JP7286406 B2 JP 7286406B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- unit
- depth
- distance
- range
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Description
以下、本発明の第1実施形態を図面に基づいて説明する。図1は、本実施形態に係る画像分析システム1の画像分析装置2の機能構成例を示すブロック図である。画像分析装置2は車両に搭載される。以下、画像分析装置2が搭載された車両を「自車両」という。
次に第2実施形態について説明する。図6は、第2実施形態に係る画像分析システム1Aの画像分析装置2Aの機能構成例を示すブロック図である。以下の第2実施形態の説明では、第1実施形態と同様の要素については同一の符号を付し、その説明を省略する。
2、2A 画像分析装置
3 リアカメラ(カメラ)
4 表示装置
7、7A 物体認識部
8、8A 深度検出部
9、9A 距離測定部
10 表示制御部
11 通知部
Claims (6)
- 車外を撮影するカメラの撮影結果に基づく撮影画像データを分析することによって、前記撮影画像データに記録された風景に所定の種別の物体が含まれているか否かを判定し、前記所定の種別の物体が当該風景に含まれている場合にはその物体の前記撮影画像データにおける範囲を検出する物体認識部と、
前記撮影画像データを分析し、前記撮影画像データを構成する各画素の深度を検出する深度検出部と、
前記物体認識部および前記深度検出部の分析結果に基づいて、前記撮影画像データにおける前記所定の種別の物体の範囲に属する各画素の深度を認識し、その範囲に属する各画素の深度に基づいて、その物体までの距離を測定する距離測定部とを備え、
前記カメラが撮影結果に基づいて前記撮影画像データを出力したときに、前記深度検出部の処理より前に前記物体認識部の処理が行われ、
前記距離測定部は、
前記物体認識部により前記撮影画像データに記録された風景に所定の種別の物体が含まれていると判定された場合、前記深度検出部に前記撮影画像データを構成する各画素の深度を検出させ、検出結果を利用してその物体までの距離を測定する一方、含まれていないと判定された場合、前記深度検出部に前記撮影画像データを構成する各画素の深度を検出させない
ことを特徴とする画像分析システム。 - 前記撮影画像データに基づく画像を表示装置に表示すると共に、前記撮影画像データに基づいて前記距離測定部により測定された前記所定の種別の物体までの距離を示す情報をその画像に付加する表示制御部を更に備えることを特徴とする請求項1に記載の画像分析システム。
- 前記表示制御部は、前記所定の種別の物体までの距離に関する情報に加え、前記表示装置に表示された画像におけるその物体の範囲を示す画像と、その物体の種別を示す情報とのうち少なくとも一方を付加することを特徴とする請求項2に記載の画像分析システム。
- 前記距離測定部により測定された前記所定の種別の物体までの距離に基づいて、距離に応じた通知を車両の搭乗者に対して行う通知部を更に備えることを特徴とする請求項1から3の何れか1項に記載の画像分析システム。
- 前記物体認識部および前記深度検出部は、アルゴリズムとして畳み込みニューラルネットワークを用いて前記撮影画像データを分析することを特徴とする請求項1から4の何れか1項に記載の画像分析システム。
- 画像分析システムの物体認識部が、車外を撮影するカメラの撮影結果に基づく撮影画像データを分析することによって、前記撮影画像データに記録された風景に所定の種別の物体が含まれているか否かを判定し、前記所定の種別の物体が当該風景に含まれている場合にはその物体の前記撮影画像データにおける範囲を検出し、また、前記画像分析システムの深度検出部が、前記撮影画像データを分析し、前記撮影画像データを構成する各画素の深度を検出する第1ステップと、
前記画像分析システムの距離測定部が、前記物体認識部および前記深度検出部の分析結果に基づいて、前記撮影画像データから検出された前記所定の種別の物体の範囲に属する各画素の深度を認識し、その範囲に属する各画素の深度に基づいて、その物体までの距離を測定する第2ステップとを含み、
前記第2ステップにおいて前記距離測定部は、
前記物体認識部により前記撮影画像データに記録された風景に所定の種別の物体が含まれていると判定された場合、前記深度検出部に前記撮影画像データを構成する各画素の深度を検出させ、検出結果を利用してその物体までの距離を測定する一方、含まれていないと判定された場合、前記深度検出部に前記撮影画像データを構成する各画素の深度を検出させない
ことを特徴とする画像分析方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019087322A JP7286406B2 (ja) | 2019-05-07 | 2019-05-07 | 画像分析システムおよび画像分析方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019087322A JP7286406B2 (ja) | 2019-05-07 | 2019-05-07 | 画像分析システムおよび画像分析方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020184134A JP2020184134A (ja) | 2020-11-12 |
JP7286406B2 true JP7286406B2 (ja) | 2023-06-05 |
Family
ID=73045421
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019087322A Active JP7286406B2 (ja) | 2019-05-07 | 2019-05-07 | 画像分析システムおよび画像分析方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7286406B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023286217A1 (ja) * | 2021-07-14 | 2023-01-19 | 日本電信電話株式会社 | 位置検出装置、位置検出方法、及び位置検出プログラム |
WO2023127000A1 (ja) * | 2021-12-27 | 2023-07-06 | 日立Astemo株式会社 | 認識システム及び物体認識方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016136321A (ja) | 2015-01-23 | 2016-07-28 | トヨタ自動車株式会社 | 物体検出装置及び物体検出方法 |
JP2018124890A (ja) | 2017-02-03 | 2018-08-09 | 日本電信電話株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2019008460A (ja) | 2017-06-22 | 2019-01-17 | 株式会社東芝 | 物体検出装置、物体検出方法およびプログラム |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3430641B2 (ja) * | 1994-06-10 | 2003-07-28 | 日産自動車株式会社 | 車間距離検出装置 |
-
2019
- 2019-05-07 JP JP2019087322A patent/JP7286406B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016136321A (ja) | 2015-01-23 | 2016-07-28 | トヨタ自動車株式会社 | 物体検出装置及び物体検出方法 |
JP2018124890A (ja) | 2017-02-03 | 2018-08-09 | 日本電信電話株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2019008460A (ja) | 2017-06-22 | 2019-01-17 | 株式会社東芝 | 物体検出装置、物体検出方法およびプログラム |
Non-Patent Citations (4)
Title |
---|
Clement Godard, Oisin Mac Aodha, Gabriel J.Brostow,Unsupervised Monocular Depth Estimation with Left-Right Consistency,ArXiv,2017年04月,P.270-279,https://arxiv.org/pdf/1609.03677.pdf |
Gregoire Payen de La Garanderie, Amir Atapour Abarghouei, and Toby P.Breckon,Eliminating the Blind Spot: Adapting 3D Object Detection and Monocular Depth Estimation to 360°Panoramic Imagery,arXiv,2018年08月,P.1-19,https://arxiv.org/pdf/1808.06253.pdf |
I. Mohamed Elzayat,Real-Time Car Detection-Based Depth Estimation Using Mono Camera,2018 30th International Conference on Microelectronics,2018年12月,P.248-251,https://ieeexplore.ieee.org/stamp/stamp.jsp?tp=&arnumber=8704024 |
八谷 大岳,3D Faster R-CNNとレーザスキャンとの組み合わせによる特定物体の頑健な距離推定,計測自動制御学会論文集 第55巻 第1号,日本,公益社団法人計測自動制御学会,2019年01月31日,Vol.55, No.1, 42/50 (2019),P.42-50 |
Also Published As
Publication number | Publication date |
---|---|
JP2020184134A (ja) | 2020-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5057936B2 (ja) | 鳥瞰画像生成装置および方法 | |
JP4899424B2 (ja) | 物体検出装置 | |
JP3951984B2 (ja) | 画像投影方法、及び画像投影装置 | |
JP6091586B1 (ja) | 車両用画像処理装置および車両用画像処理システム | |
JP6891954B2 (ja) | 物体検知装置、物体検知方法、及びプログラム | |
JP2006252473A (ja) | 障害物検出装置、キャリブレーション装置、キャリブレーション方法およびキャリブレーションプログラム | |
US9798936B2 (en) | System and method for detecting obstacles using a single camera | |
JP2004117078A (ja) | 障害物検出装置及び方法 | |
JP2008186246A (ja) | 移動物体認識装置 | |
JP6239186B2 (ja) | 表示制御装置及び表示制御方法及び表示制御プログラム | |
KR20180045745A (ko) | 이동체에서의 객체 검출 장치 및 방법 | |
JP6032034B2 (ja) | 物体検知装置 | |
JP7286406B2 (ja) | 画像分析システムおよび画像分析方法 | |
JP2014142241A (ja) | 3次元位置推定装置、車両制御装置、および3次元位置推定方法 | |
JP2019530924A (ja) | カメラ画像からのオブジェクトの検出 | |
WO2019044625A1 (ja) | 衝突予測装置、衝突予測方法及びプログラム | |
JP2010079582A (ja) | 物体を検出する装置、方法及びプログラム | |
JP2022045947A5 (ja) | ||
JP2015230703A (ja) | 物体検出装置及び物体検出方法 | |
US11346663B2 (en) | Stereo camera | |
JP6631691B2 (ja) | 画像処理装置、機器制御システム、撮像装置、画像処理方法、及び、プログラム | |
JP2007233440A (ja) | 車載用画像処理装置 | |
JP2008026999A (ja) | 障害物検出システム、及び障害物検出方法 | |
JP7006678B2 (ja) | 移動体検出装置、移動体検出方法および移動体検出プログラム | |
WO2017126072A1 (ja) | 画像認識システム、カメラ状態推定装置及び記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220329 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230323 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230328 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230516 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230523 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230524 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7286406 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |