JP2021086392A - 画像処理装置、画像処理方法、およびプログラム - Google Patents
画像処理装置、画像処理方法、およびプログラム Download PDFInfo
- Publication number
- JP2021086392A JP2021086392A JP2019214784A JP2019214784A JP2021086392A JP 2021086392 A JP2021086392 A JP 2021086392A JP 2019214784 A JP2019214784 A JP 2019214784A JP 2019214784 A JP2019214784 A JP 2019214784A JP 2021086392 A JP2021086392 A JP 2021086392A
- Authority
- JP
- Japan
- Prior art keywords
- specific object
- image
- detected
- estimation
- image processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 94
- 238000003672 processing method Methods 0.000 title claims 7
- 238000001514 detection method Methods 0.000 claims abstract description 79
- 238000003384 imaging method Methods 0.000 claims abstract description 30
- 238000000034 method Methods 0.000 claims description 97
- 230000008569 process Effects 0.000 claims description 80
- 238000005111 flow chemistry technique Methods 0.000 description 15
- 238000004891 communication Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 12
- 238000004590 computer program Methods 0.000 description 4
- 230000007704 transition Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 2
- 238000013459 approach Methods 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/77—Determining position or orientation of objects or cameras using statistical methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/50—Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30232—Surveillance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30242—Counting objects in image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Probability & Statistics with Applications (AREA)
- Data Mining & Analysis (AREA)
- Geometry (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Image Analysis (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
図1は、本実施形態におけるシステム構成を示す図である。本実施形態におけるシステムは、画像処理装置100、撮像装置110、記録装置120、およびディスプレイ130を有している。
本実施形態では、画像を複数に分割した分割領域において特定物体を検出し、複数の分割領域各々において複数の画像にわたって特定物体が検出された回数が所定値に達した場合、ジオメトリ情報を推定し、該ジオメトリ情報に従い複数の推定領域を設定する。なお、実施形態1と異なる部分を主に説明し、実施形態1と同一または同等の構成要素、および処理には同一の符号を付すとともに、重複する説明は省略する。また実施形態1と同様、以下の説明において特定物体を人物として説明するが、人物に限定されるものではない。例えば、特定物体は、道路等を走行している各種車両、工場内のコンベアー上を流れている部品や製品、その他、動物等であってもよい。
次に図9を参照して、各実施形態の各機能を実現するための画像処理装置100のハードウェア構成を説明する。なお、以降の説明において画像処理装置100のハードウェア構成について説明するが、記録装置120および撮像装置110も同様のハードウェア構成によって実現されるものとする。
Claims (17)
- 撮像手段により撮像された画像において特定物体を検出する検出処理を実行する検出手段と、
前記検出処理により検出された特定物体の前記画像上の位置およびサイズの情報を示す物体情報を保持する保持手段と、
前記撮像手段により撮像された複数の画像に対する前記検出処理により前記特定物体が検出された回数が所定値に達したかを判定する判定手段と、
前記特定物体が検出された回数が前記所定値に達したと前記判定手段により判定された場合、前記検出処理により検出された前記特定物体の前記物体情報に基づき、前記撮像手段により撮像された画像に対して複数の推定領域を設定する第1設定手段と、
前記複数の推定領域の各々に含まれる前記特定物体の数を推定する推定処理を実行する推定手段と、を有することを特徴とする画像処理装置。 - 前記保持手段は、前記複数の画像において前記特定物体が検出されるたびに前記特定物体の前記物体情報を蓄積し、
前記撮像手段により撮像された前記複数の画像に対する前記検出処理により前記特定物体が検出された回数が前記所定値に達したと前記判定手段により判定された場合、前記保持手段が蓄積した前記物体情報に基づき、前記複数の推定領域を設定することを特徴とする請求項1に記載の画像処理装置。 - 前記撮像手段により撮像された画像を複数に分割する分割領域を設定する第2設定手段を更に有することを特徴とする請求項1又は2に記載の画像処理装置。
- 前記判定手段は、前記複数の分割領域各々において前記複数の画像にわたって前記検出処理により前記特定物体が検出された回数が前記所定値に達したかを判定し、
前記第1設定手段は、前記複数の分割領域各々において前記複数の画像にわたって前記検出処理により前記特定物体が検出された回数が前記所定値に達したと前記判定手段により判定された場合、前記検出処理により検出された前記特定物体の前記物体情報に基づき、前記複数の推定領域を設定することを特徴とする請求項1又は2に記載の画像処理装置。 - 前記判定手段は、前記複数の分割領域のうち所定数の分割領域の各々において前記複数の画像にわたって前記検出処理により前記特定物体が検出された回数が前記所定値に達したかを判定し、
前記第1設定手段は、前記複数の分割領域のうち所定数の分割領域の各々において前記複数の画像にわたって前記検出処理により前記特定物体が検出された回数が前記所定値に達したと前記判定手段により判定された場合、前記検出処理により検出された前記特定物体の前記物体情報に基づき、前記複数の推定領域を設定することを特徴とする請求項3に記載の画像処理装置。 - 前記検出手段は、前記複数の分割領域のうち前記特定物体を検出した回数が前記所定値に達した分割領域において前記検出処理を実行しないことを特徴とする請求項4又は5に記載の画像処理装置。
- 前記推定手段は、前記特定物体に関する学習済みモデルを用いて、前記推定領域に含まれる前記特定物体の数を推定することを特徴とする請求項1乃至6の何れか1項に記載の画像処理装置。
- 前記特定物体は、人物であることを特徴とする請求項1乃至7の何れか1項に記載の画像処理装置。
- 撮像手段により撮像された画像において特定物体を検出する検出処理を実行する検出工程と、
前記検出処理により検出された特定物体の前記画像上の位置およびサイズの情報を示す物体情報を保持する保持工程と、
前記撮像手段により撮像された複数の画像に対する前記検出処理により前記特定物体が検出された回数が所定値に達したかを判定する判定工程と、
前記特定物体が検出された回数が前記所定値に達したと前記判定工程において判定された場合、前記検出処理により検出された前記特定物体の前記物体情報に基づき、前記撮像手段により撮像された画像に対して複数の推定領域を設定する第1設定工程と、
前記複数の推定領域の各々に含まれる前記特定物体の数を推定する推定処理を実行する推定工程と、を有することを特徴とする画像処理方法。 - 前記保持工程において、前記複数の画像において前記特定物体が検出されるたびに前記特定物体の前記物体情報を蓄積し、
前記撮像手段により撮像された前記複数の画像に対する前記検出処理により前記特定物体が検出された回数が前記所定値に達したと前記判定工程において判定された場合、前記保持工程において蓄積された前記物体情報に基づき、前記複数の推定領域を設定することを特徴とする請求項9に記載の画像処理方法。 - 前記撮像手段により撮像された画像を複数に分割する分割領域を設定する第2設定工程を更に有することを特徴とする請求項9又は10に記載の画像処理方法。
- 前記判定工程において、前記複数の分割領域各々において前記複数の画像にわたって前記検出処理により前記特定物体が検出された回数が前記所定値に達したかを判定し、
前記第1設定工程において、前記複数の分割領域各々において前記複数の画像にわたって前記検出処理において前記特定物体が検出された回数が前記所定値に達したと前記判定工程において判定された場合、前記検出処理により検出された前記特定物体の前記物体情報に基づき、前記複数の推定領域を設定することを特徴とする請求項9又は10に記載の画像処理方法。 - 前記判定工程において、前記複数の分割領域のうち所定数の分割領域の各々において前記複数の画像にわたって前記検出処理により前記特定物体が検出された回数が前記所定値に達したかを判定し、
前記第1設定工程において、前記複数の分割領域のうち所定数の分割領域の各々において前記複数の画像にわたって前記検出処理により前記特定物体が検出された回数が前記所定値に達したと前記判定工程において判定された場合、前記検出処理により検出された前記特定物体の前記物体情報に基づき、前記複数の推定領域を設定することを特徴とする請求項11に記載の画像処理方法。 - 前記検出工程において、前記複数の分割領域のうち前記特定物体を検出した回数が前記所定値に達した分割領域において前記検出処理を実行しないことを特徴とする請求項12又は13に記載の画像処理方法。
- 前記推定工程において、前記特定物体に関する学習済みモデルを用いて、前記推定領域に含まれる前記特定物体の数を推定することを特徴とする請求項9乃至14の何れか1項に記載の画像処理方法。
- 前記特定物体は、人物であることを特徴とする請求項9乃至15の何れか1項に記載の画像処理方法。
- コンピュータを、請求項1乃至8の何れか1項に記載された画像処理装置の各手段として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019214784A JP7433864B2 (ja) | 2019-11-27 | 2019-11-27 | 画像処理装置、画像処理方法、およびプログラム |
US17/099,491 US11521330B2 (en) | 2019-11-27 | 2020-11-16 | Image processing apparatus, image processing method, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019214784A JP7433864B2 (ja) | 2019-11-27 | 2019-11-27 | 画像処理装置、画像処理方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021086392A true JP2021086392A (ja) | 2021-06-03 |
JP7433864B2 JP7433864B2 (ja) | 2024-02-20 |
Family
ID=75974157
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019214784A Active JP7433864B2 (ja) | 2019-11-27 | 2019-11-27 | 画像処理装置、画像処理方法、およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11521330B2 (ja) |
JP (1) | JP7433864B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110941999B (zh) * | 2019-11-12 | 2023-02-17 | 通号通信信息集团有限公司 | 一种人群计数系统中自适应计算高斯核大小的方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007180933A (ja) * | 2005-12-28 | 2007-07-12 | Secom Co Ltd | 画像センサ |
JP2009110152A (ja) * | 2007-10-29 | 2009-05-21 | Panasonic Corp | 混雑推定装置 |
JP2018022340A (ja) * | 2016-08-03 | 2018-02-08 | キヤノン株式会社 | 画像処理装置、情報処理方法及びプログラム |
JP2018180619A (ja) * | 2017-04-04 | 2018-11-15 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP2019032588A (ja) * | 2017-08-04 | 2019-02-28 | セコム株式会社 | 画像解析装置 |
US20190251364A1 (en) * | 2016-06-30 | 2019-08-15 | Kt Corporation | Image summarization system and method |
JP2019192154A (ja) * | 2018-04-27 | 2019-10-31 | キヤノン株式会社 | 画像処理装置、撮影装置、画像処理方法、およびプログラム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6622150B2 (ja) * | 2016-06-29 | 2019-12-18 | 株式会社東芝 | 情報処理装置および情報処理方法 |
JP2018046501A (ja) * | 2016-09-16 | 2018-03-22 | 株式会社東芝 | 情報処理装置、検出システムおよび情報処理方法 |
JP6984506B2 (ja) * | 2018-03-16 | 2021-12-22 | 株式会社リコー | 情報処理システム、情報処理装置及びプログラム |
EP3627379A1 (en) * | 2018-09-24 | 2020-03-25 | Siemens Aktiengesellschaft | Methods for generating a deep neural net and for localising an object in an input image, deep neural net, computer program product, and computer-readable storage medium |
JP7118934B2 (ja) * | 2019-09-04 | 2022-08-16 | 株式会社東芝 | 物体数推定装置、物体数推定方法、および物体数推定プログラム |
JP2021047827A (ja) * | 2019-09-20 | 2021-03-25 | キヤノン株式会社 | デバイス、システム、制御方法、及びプログラム |
-
2019
- 2019-11-27 JP JP2019214784A patent/JP7433864B2/ja active Active
-
2020
- 2020-11-16 US US17/099,491 patent/US11521330B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007180933A (ja) * | 2005-12-28 | 2007-07-12 | Secom Co Ltd | 画像センサ |
JP2009110152A (ja) * | 2007-10-29 | 2009-05-21 | Panasonic Corp | 混雑推定装置 |
US20190251364A1 (en) * | 2016-06-30 | 2019-08-15 | Kt Corporation | Image summarization system and method |
JP2018022340A (ja) * | 2016-08-03 | 2018-02-08 | キヤノン株式会社 | 画像処理装置、情報処理方法及びプログラム |
JP2018180619A (ja) * | 2017-04-04 | 2018-11-15 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP2019032588A (ja) * | 2017-08-04 | 2019-02-28 | セコム株式会社 | 画像解析装置 |
JP2019192154A (ja) * | 2018-04-27 | 2019-10-31 | キヤノン株式会社 | 画像処理装置、撮影装置、画像処理方法、およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20210158555A1 (en) | 2021-05-27 |
JP7433864B2 (ja) | 2024-02-20 |
US11521330B2 (en) | 2022-12-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6779699B2 (ja) | 画像処理装置、情報処理方法及びプログラム | |
US11763463B2 (en) | Information processing apparatus, control method, and program | |
US10747371B1 (en) | Detection of finger press from live video stream | |
JP2015018340A (ja) | 画像処理装置、画像処理方法 | |
JPWO2013005815A1 (ja) | 物体検出装置、物体検出方法及びプログラム | |
US20220012514A1 (en) | Identification information assignment apparatus, identification information assignment method, and program | |
JP2021086392A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
Das et al. | Computer vision-based social distancing surveillance solution with optional automated camera calibration for large scale deployment | |
JP2019149119A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2015170206A (ja) | 検出装置および検出方法 | |
JPWO2018179119A1 (ja) | 映像解析装置、映像解析方法およびプログラム | |
Das et al. | Computer vision-based social distancing surveillance with automated camera calibration for large-scale deployment | |
JP7214437B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP2022524787A (ja) | 物体検出範囲推定のための、方法、システム、及びプログラム | |
US10521653B2 (en) | Image processing device, image processing method, and storage medium | |
US20220036093A1 (en) | Information processing apparatus, information processing method, and storage medium | |
US20220262031A1 (en) | Information processing apparatus, information processing method, and storage medium | |
JP7406878B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
KR102576795B1 (ko) | 포즈 추정 기반의 정면 영상 획득 방법 및 이를 위한 장치 | |
JP2021086391A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP2020149565A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP2022011926A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP2021056899A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP2022011928A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP7313850B2 (ja) | 情報処理装置、情報処理方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221104 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230927 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231010 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231208 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20231213 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240207 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7433864 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |