JP2020184134A - 画像分析システムおよび画像分析方法 - Google Patents
画像分析システムおよび画像分析方法 Download PDFInfo
- Publication number
- JP2020184134A JP2020184134A JP2019087322A JP2019087322A JP2020184134A JP 2020184134 A JP2020184134 A JP 2020184134A JP 2019087322 A JP2019087322 A JP 2019087322A JP 2019087322 A JP2019087322 A JP 2019087322A JP 2020184134 A JP2020184134 A JP 2020184134A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- captured image
- unit
- depth
- distance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000010191 image analysis Methods 0.000 title claims abstract description 43
- 238000003703 image analysis method Methods 0.000 title claims abstract description 5
- 238000005259 measurement Methods 0.000 claims abstract description 54
- 238000012545 processing Methods 0.000 claims abstract description 43
- 238000001514 detection method Methods 0.000 claims description 141
- 238000013527 convolutional neural network Methods 0.000 claims description 12
- 238000004458 analytical method Methods 0.000 claims description 6
- 238000003384 imaging method Methods 0.000 claims 1
- 238000000034 method Methods 0.000 description 21
- 238000010586 diagram Methods 0.000 description 5
- 238000007796 conventional method Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Landscapes
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
以下、本発明の第1実施形態を図面に基づいて説明する。図1は、本実施形態に係る画像分析システム1の画像分析装置2の機能構成例を示すブロック図である。画像分析装置2は車両に搭載される。以下、画像分析装置2が搭載された車両を「自車両」という。
次に第2実施形態について説明する。図6は、第2実施形態に係る画像分析システム1Aの画像分析装置2Aの機能構成例を示すブロック図である。以下の第2実施形態の説明では、第1実施形態と同様の要素については同一の符号を付し、その説明を省略する。
2、2A 画像分析装置
3 リアカメラ(カメラ)
4 表示装置
7、7A 物体認識部
8、8A 深度検出部
9、9A 距離測定部
10 表示制御部
11 通知部
Claims (7)
- 車外を撮影するカメラの撮影結果に基づく撮影画像データを分析することによって、前記撮影画像データに記録された風景に所定の種別の物体が含まれているか否かを判定し、前記所定の種別の物体が当該風景に含まれている場合にはその物体の前記撮影画像データにおける範囲を検出する物体認識部と、
前記撮影画像データを分析し、前記撮影画像データを構成する各画素の深度を検出する深度検出部と、
前記物体認識部および前記深度検出部の分析結果に基づいて、前記撮影画像データにおける前記所定の種別の物体の範囲に属する各画素の深度を認識し、その範囲に属する各画素の深度に基づいて、その物体までの距離を測定する距離測定部と、
を備えることを特徴とする画像分析システム。 - 前記カメラが撮影結果に基づいて前記撮影画像データを出力したときに、前記深度検出部の処理より前に前記物体認識部の処理が行われ、
前記距離測定部は、
前記物体認識部により前記撮影画像データに記録された風景に所定の種別の物体が含まれていると判定された場合、前記深度検出部に前記撮影画像データを構成する各画素の深度を検出させ、検出結果を利用してその物体までの距離を測定する一方、含まれていないと判定された場合、前記深度検出部に前記撮影画像データを構成する各画素の深度を検出させない
ことを特徴とする請求項1に記載の画像分析システム。 - 前記撮影画像データに基づく画像を表示装置に表示すると共に、前記撮影画像データに基づいて前記距離測定部により測定された前記所定の種別の物体までの距離を示す情報をその画像に付加する表示制御部を更に備えることを特徴とする請求項1または2に記載の画像分析システム。
- 前記表示制御部は、前記所定の種別の物体までの距離に関する情報に加え、前記表示装置に表示された画像におけるその物体の範囲を示す画像と、その物体の種別を示す情報とのうち少なくとも一方を付加することを特徴とする請求項3に記載の画像分析システム。
- 前記距離測定部により測定された前記所定の種別の物体までの距離に基づいて、距離に応じた通知を車両の搭乗者に対して行う通知部を更に備えることを特徴とする請求項1から4の何れか1項に記載の画像分析システム。
- 前記物体認識部および前記深度検出部は、アルゴリズムとして畳み込みニューラルネットワークを用いて前記撮影画像データを分析することを特徴とする請求項1から4の何れか1項に記載の画像分析システム。
- 画像分析システムの物体認識部が、車外を撮影するカメラの撮影結果に基づく撮影画像データを分析することによって、前記撮影画像データに記録された風景に所定の種別の物体が含まれているか否かを判定し、前記所定の種別の物体が当該風景に含まれている場合にはその物体の前記撮影画像データにおける範囲を検出し、また、前記画像分析システムの深度検出部が、前記撮影画像データを分析し、前記撮影画像データを構成する各画素の深度を検出するステップと、
前記画像分析システムの距離測定部が、前記物体認識部および前記深度検出部の分析結果に基づいて、前記撮影画像データから検出された前記所定の種別の物体の範囲に属する各画素の深度を認識し、その範囲に属する各画素の深度に基づいて、その物体までの距離を測定するステップと、
を含むことを特徴とする画像分析方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019087322A JP7286406B2 (ja) | 2019-05-07 | 2019-05-07 | 画像分析システムおよび画像分析方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019087322A JP7286406B2 (ja) | 2019-05-07 | 2019-05-07 | 画像分析システムおよび画像分析方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020184134A true JP2020184134A (ja) | 2020-11-12 |
JP7286406B2 JP7286406B2 (ja) | 2023-06-05 |
Family
ID=73045421
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019087322A Active JP7286406B2 (ja) | 2019-05-07 | 2019-05-07 | 画像分析システムおよび画像分析方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7286406B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023286217A1 (ja) * | 2021-07-14 | 2023-01-19 | 日本電信電話株式会社 | 位置検出装置、位置検出方法、及び位置検出プログラム |
WO2023127000A1 (ja) * | 2021-12-27 | 2023-07-06 | 日立Astemo株式会社 | 認識システム及び物体認識方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07334799A (ja) * | 1994-06-10 | 1995-12-22 | Nissan Motor Co Ltd | 車間距離検出装置 |
JP2016136321A (ja) * | 2015-01-23 | 2016-07-28 | トヨタ自動車株式会社 | 物体検出装置及び物体検出方法 |
JP2018124890A (ja) * | 2017-02-03 | 2018-08-09 | 日本電信電話株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2019008460A (ja) * | 2017-06-22 | 2019-01-17 | 株式会社東芝 | 物体検出装置、物体検出方法およびプログラム |
-
2019
- 2019-05-07 JP JP2019087322A patent/JP7286406B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07334799A (ja) * | 1994-06-10 | 1995-12-22 | Nissan Motor Co Ltd | 車間距離検出装置 |
JP2016136321A (ja) * | 2015-01-23 | 2016-07-28 | トヨタ自動車株式会社 | 物体検出装置及び物体検出方法 |
JP2018124890A (ja) * | 2017-02-03 | 2018-08-09 | 日本電信電話株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2019008460A (ja) * | 2017-06-22 | 2019-01-17 | 株式会社東芝 | 物体検出装置、物体検出方法およびプログラム |
Non-Patent Citations (4)
Title |
---|
CLEMENT GODARD, OISIN MAC AODHA, GABRIEL J.BROSTOW: "Unsupervised Monocular Depth Estimation with Left-Right Consistency", ARXIV, JPN6023012518, April 2017 (2017-04-01), pages 270 - 279, XP093151683, ISSN: 0005021412 * |
GREGOIRE PAYEN DE LA GARANDERIE, AMIR ATAPOUR ABARGHOUEI, AND TOBY P.BRECKON: "Eliminating the Blind Spot: Adapting 3D Object Detection and Monocular Depth Estimation to 360°Pano", ARXIV, JPN6023012519, August 2018 (2018-08-01), pages 1 - 19, ISSN: 0005021411 * |
I. MOHAMED ELZAYAT: "Real-Time Car Detection-Based Depth Estimation Using Mono Camera", 2018 30TH INTERNATIONAL CONFERENCE ON MICROELECTRONICS, JPN7023001250, December 2018 (2018-12-01), pages 248 - 251, XP033544494, ISSN: 0005021413, DOI: 10.1109/ICM.2018.8704024 * |
八谷 大岳: "3D Faster R−CNNとレーザスキャンとの組み合わせによる特定物体の頑健な距離推定", 計測自動制御学会論文集 第55巻 第1号, vol. Vol.55, No.1, 42/50 (2019), JPN6023012517, 31 January 2019 (2019-01-31), JP, pages 42 - 50, ISSN: 0005021414 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023286217A1 (ja) * | 2021-07-14 | 2023-01-19 | 日本電信電話株式会社 | 位置検出装置、位置検出方法、及び位置検出プログラム |
WO2023127000A1 (ja) * | 2021-12-27 | 2023-07-06 | 日立Astemo株式会社 | 認識システム及び物体認識方法 |
Also Published As
Publication number | Publication date |
---|---|
JP7286406B2 (ja) | 2023-06-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11527077B2 (en) | Advanced driver assist system, method of calibrating the same, and method of detecting object in the same | |
TWI585436B (zh) | 深度資訊量測方法及裝置 | |
US7684590B2 (en) | Method of recognizing and/or tracking objects | |
JP5057936B2 (ja) | 鳥瞰画像生成装置および方法 | |
US10642422B2 (en) | Information processing apparatus, control method for the information processing apparatus, and storage medium | |
US20170374331A1 (en) | Auto keystone correction and auto focus adjustment | |
US20090121851A1 (en) | Vehicle-Periphery Image Generating Apparatus and Method of Correcting Distortion of a Vehicle-Periphery Image | |
US20200111225A1 (en) | Depth estimation apparatus, autonomous vehicle using the same, and depth estimation method thereof | |
JP2006252473A (ja) | 障害物検出装置、キャリブレーション装置、キャリブレーション方法およびキャリブレーションプログラム | |
JP2004117078A (ja) | 障害物検出装置及び方法 | |
JP6239186B2 (ja) | 表示制御装置及び表示制御方法及び表示制御プログラム | |
JP2005072888A (ja) | 画像投影方法、及び画像投影装置 | |
JP2010039634A (ja) | 画像処理装置 | |
KR20180045745A (ko) | 이동체에서의 객체 검출 장치 및 방법 | |
US20160259402A1 (en) | Contact detection apparatus, projector apparatus, electronic board apparatus, digital signage apparatus, projector system, and contact detection method | |
JP7286406B2 (ja) | 画像分析システムおよび画像分析方法 | |
KR20180121259A (ko) | 카메라 탑재형 컴퓨터의 거리검출장치 및 그 방법 | |
US20230342953A1 (en) | Information processing apparatus, control method, and program | |
JP2010079582A (ja) | 物体を検出する装置、方法及びプログラム | |
JP2014154898A (ja) | 物体検知装置 | |
JP2022045947A5 (ja) | ||
JP2015230703A (ja) | 物体検出装置及び物体検出方法 | |
US11346663B2 (en) | Stereo camera | |
US20220373683A1 (en) | Image processing device, monitoring system, and image processing method | |
US20190227488A1 (en) | Information processing apparatus, information processing system, and non-transitory computer readable medium storing program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220329 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230323 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230328 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230516 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230523 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230524 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7286406 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |