JP2023026293A - 情報処理装置、情報処理システム、情報処理方法、及びプログラム - Google Patents
情報処理装置、情報処理システム、情報処理方法、及びプログラム Download PDFInfo
- Publication number
- JP2023026293A JP2023026293A JP2022018960A JP2022018960A JP2023026293A JP 2023026293 A JP2023026293 A JP 2023026293A JP 2022018960 A JP2022018960 A JP 2022018960A JP 2022018960 A JP2022018960 A JP 2022018960A JP 2023026293 A JP2023026293 A JP 2023026293A
- Authority
- JP
- Japan
- Prior art keywords
- detection
- image
- information processing
- result
- detection result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims description 98
- 238000003672 processing method Methods 0.000 title 1
- 238000001514 detection method Methods 0.000 claims abstract description 533
- 238000012937 correction Methods 0.000 claims abstract description 37
- 238000012545 processing Methods 0.000 claims description 97
- 238000000034 method Methods 0.000 claims description 51
- 238000000605 extraction Methods 0.000 claims description 21
- 238000004891 communication Methods 0.000 claims description 18
- 239000011521 glass Substances 0.000 description 47
- 230000008569 process Effects 0.000 description 31
- 238000010586 diagram Methods 0.000 description 14
- 239000000284 extract Substances 0.000 description 12
- 230000006870 function Effects 0.000 description 9
- 230000009466 transformation Effects 0.000 description 8
- 239000000470 constituent Substances 0.000 description 6
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Landscapes
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
Description
図1は、本実施形態による情報処理装置100の構成例を示すブロック図である。本実施形態における情報処理装置100は、監視カメラ等の撮像装置によって撮像された画像から、検出対象の物体の検出を行う物体検出機能を有する。以下では、一例として人物の顔を検出する場合について説明するが、これに限定されるものではなく、画像を解析して所定の物体を検出する任意のシステムに適用することができる。
(文献1)J.Redmon,A.Farhadi,”YOLO9000:Better
Faster Stronger”,Computer Vision and Pa
ttern Recognition (CVPR) 2016.
IoU(A,B)=((320-40)×(500-210))÷(300×300+300×300-((320-40)×(500-210)))≒0.82
となる。その他の組み合わせにおいて、検出枠の重なり率は0となる。
なお、物体検出部202において、検出対象とする物体の種類や物体検出を行う画像のサイズは任意でよい。また、検出したい物体を検出することができる技術であれば、物体検出部202は、文献1に開示されている技術に限らず、様々な技術を適用可能である。また、重なり判定部203において、検出対象の種類が3種類以上であった場合には、任意の2種類の検出結果の組み合わせに対して、前述した重なりの判定手法を適用可能である。
前述した第1の実施形態では1つの情報処理装置によって物体検出処理を行っていたが、第2の実施形態では複数の情報処理装置によって物体検出処理を行う場合について説明する。以下の第2の実施形態に係る説明において、第1の実施形態と同様の点については説明を省略する。
なお、本実施形態では2つの情報処理装置100、500がネットワーク510を通じて接続されている構成としている。しかし、これに限定されるものではなく、例えば情報処理装置100がカメラなどのエッジデバイスで、情報処理装置500がエッジデバイスの外部端子(USB等)に接続されたデバイスであっても良い。また、情報処理装置100がPC(パーソナル・コンピュータ)で情報処理装置500がクラウド上に存在していても良い。
前述した実施形態では単一の入力画像を用いて処理を行っていたが、第3の実施形態では撮影タイミングの異なる2つの入力画像を用いて処理を行う場合について説明する。以下の第3の実施形態に係る説明において、第1の実施形態と同様の点については説明を省略する。本実施形態による情報処理装置100の構成は、図1に示した第1の実施形態における構成例と同様である。
L=((180-170)^2+(355-350)^2)^(1/2)≒11.2
となり、閾値である100よりも小さいため、対応付けの候補となる。また、検出結果Iと追尾ID2及び追尾ID3とについても同様に計算を行うと中心座標間の距離は100よりも大きくなるため、対応付けの候補とならない。この結果、検出結果Iと追尾ID1とが対応付けられる。
なお、対応付け部908における過去の入力画像の検出結果と現在の入力画像の検出結果との対応付け方法は、物体追尾処理で一般的に用いられる手法が適用できる。また、本実施形態では2回分の属性を統計情報として保持するようにしているが、それ以上の回数分の属性を統計情報として保持するようにしても本実施形態と同様にして処理が可能である。また、本実施形態では属性の統計情報を既定回数分の属性の履歴(登場回数)としているが、登場回数ではなく信頼度の累積としてもよい。
前述した第1の実施形態では、1回目の顔検出に使用した画像から抽出画像を生成したが、第4の実施形態では1回目の顔検出に使用した画像の元となる画像から抽出画像を生成する場合について説明する。以下の第4の実施形態に係る説明において、第1の実施形態と同様の点については説明を省略する。本実施形態による情報処理装置100の構成は、図1に示した第1の実施形態における構成例と同様である。
IoU(A,B)=((85-0)×(156-65))÷((85-0)×(156-62)+(91-0)×(159-65)-((85-0)×(156-65)))≒0.88
となる。その他の組み合わせにおいて、検出枠の重なり率は0となる。
なお、画像取得部1201は、入力画像から1つの領域を抽出するとしたが、複数の領域を抽出するようにして、ステップS1302~ステップS1311の処理を領域ごとに繰り返すようにしてもよい。また、前述した第2の実施形態及び第3の実施形態に、本実施形態の処理を組み込むことも可能である。
本発明は、前述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読み出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (21)
- 画像から複数の属性に係る物体検出を行う検出手段と、
前記検出手段の検出結果について異なる属性の検出結果の重なりを判定する判定手段と、
前記検出手段による物体検出の検出結果を修正する修正手段と、を有し、
前記修正手段は、第1の画像から抽出した第2の画像に対する物体検出の検出結果に基づいて、前記第1の画像に対する物体検出の検出結果を修正することを特徴とする情報処理装置。 - 前記第1の画像に対する物体検出の検出結果に係る前記判定手段による判定結果に基づいて、前記第1の画像から前記第2の画像を抽出する抽出手段を有することを特徴とする請求項1に記載の情報処理装置。
- 前記第2の画像は、前記第1の画像において、異なる属性の検出結果の領域が所定の割合以上重なっている領域を抽出した画像であることを特徴とする請求項1又は2に記載の情報処理装置。
- 前記第2の画像は、前記第1の画像から検出された物体の領域に対して、左右反転、位置のシフト、及び画素値の変更の内の少なくとも一つを施した画像であることを特徴とする請求項1~3の何れか1項に記載の情報処理装置。
- 入力画像から前記第1の画像を取得する取得手段を、更に有し、
前記第2の画像は、前記入力画像又は前記第1の画像から抽出された画像であることを特徴とする請求項1に記載の情報処理装置。 - 前記第1の画像に対する物体検出の検出結果に係る前記判定手段による判定結果に基づいて、前記入力画像から前記第2の画像を抽出する抽出手段を有することを特徴とする請求項5に記載の情報処理装置。
- 前記第2の画像は、前記第1の画像において異なる属性の検出結果の領域が所定の割合以上重なっている領域を、前記入力画像から抽出した画像であることを特徴とする請求項5又は6に記載の情報処理装置。
- 前記第2の画像は、前記第1の画像から検出された物体の領域に対して、左右反転、位置のシフト、及び画素値の変更の内の少なくとも一つを施した画像であることを特徴とする請求項5~7の何れか1項に記載の情報処理装置。
- 異なる属性の検出結果の領域が所定の割合以上重なっている場合に、前記検出手段が前記第2の画像に対して物体検出を行うことを特徴とする請求項1~8の何れか1項に記載の情報処理装置。
- 前記判定手段は、異なる属性の検出結果の重なり率を算出し、
算出した前記重なり率が閾値以上である場合に、前記検出手段が前記第2の画像に対して物体検出を行うことを特徴とする請求項1~9の何れか1項に記載の情報処理装置。 - 前記第2の画像は、前記判定手段により重なっていると判定された異なる属性の検出結果を包含し、かつ前記第2の画像に占める包含した領域の割合が前記検出手段の仕様に基づく割合になるように設定された領域の画像であることを特徴とする請求項1~10の何れか1項に記載の情報処理装置。
- 前記判定手段は、さらに前記第2の画像に対する物体検出の検出結果について異なる属性の検出結果の重なりを判定し、
前記修正手段は、前記第2の画像に対する物体検出の検出結果における異なる属性の検出結果の重なりが、第1の属性の検出結果と第2の属性の検出結果の重なりと判定された場合に、前記第1の属性及び前記第2の属性とは異なる第3の属性として前記第1の画像に対する物体検出の検出結果を修正することを特徴とする請求項1~11の何れか1項に記載の情報処理装置。 - 第1の画像から複数の属性に係る物体検出を行う検出手段と、
前記検出手段の検出結果について異なる属性の検出結果の重なりを判定する判定手段と、
前記判定手段が第1の属性の検出結果と第2の属性の検出結果の重なりと判定した場合に、前記第1の属性及び前記第2の属性とは異なる第3の属性に係る物体を検出したものとして、前記第1の画像に対する物体検出の検出結果を修正する修正手段とを有することを特徴とする情報処理装置。 - 前記第3の属性は結果不明を示す属性であることを特徴とする請求項12又は13に記載の情報処理装置。
- 過去の検出結果と現在の検出結果との対応付けを行い、過去の検出結果の属性に係る情報に基づいて、現在の検出結果の属性を更新する対応付け手段を有することを特徴とする請求項1~14の何れか1項に記載の情報処理装置。
- 前記対応付け手段は、所定の過去の画像の検出結果における属性の統計情報を取得し、前記統計情報において最も出現頻度の高い属性を現在の検出結果の属性とすることを特徴とする請求項15に記載の情報処理装置。
- 第1の情報処理装置と第2の情報処理装置とを有する情報処理システムであって、
前記第1の情報処理装置は、
第1の画像から複数の属性に係る物体検出を行う第1の検出手段と、
前記第1の検出手段の検出結果について異なる属性の検出結果の重なりを判定する判定手段と、
前記判定手段による判定結果に基づいて、前記第1の画像から第2の画像を抽出する抽出手段と、
前記第2の画像に対する物体検出の検出結果に基づいて、前記第1の画像に対する物体検出の検出結果を修正する修正手段と、
前記抽出手段が抽出した前記第2の画像を前記第2の情報処理装置に出力する第1の通信手段と、を有し、
前記第2の情報処理装置は、
前記第2の画像から複数の属性に係る物体検出を行う第2の検出手段と、
前記第2の検出手段による前記第2の画像に対する物体検出の検出結果を前記第1の情報処理装置に出力する第2の通信手段と、を有することを特徴とする情報処理システム。 - 第1の情報処理装置と第2の情報処理装置とを有する情報処理システムであって、
前記第1の情報処理装置は、
入力画像から第1の画像を取得する取得手段と、
前記第1の画像から複数の属性に係る物体検出を行う第1の検出手段と、
前記第1の検出手段の検出結果について異なる属性の検出結果の重なりを判定する判定手段と、
前記判定手段による判定結果に基づいて、前記入力画像から第2の画像を抽出する抽出手段と、
前記第2の画像に対する物体検出の検出結果に基づいて、前記第1の画像に対する物体検出の検出結果を修正する修正手段と、
前記抽出手段が抽出した前記第2の画像を前記第2の情報処理装置に出力する第1の通信手段と、を有し、
前記第2の情報処理装置は、
前記第2の画像から複数の属性に係る物体検出を行う第2の検出手段と、
前記第2の検出手段による前記第2の画像に対する物体検出の検出結果を前記第1の情報処理装置に出力する第2の通信手段と、を有することを特徴とする情報処理システム。 - 前記第1の検出手段は、さらに前記抽出手段が抽出した前記第2の画像から複数の属性に係る物体検出を行い、
前記第1の通信手段は、前記第2の画像に対する物体検出の検出結果に係る前記判定手段による判定結果に応じて、前記第2の画像を前記第2の情報処理装置に出力することを特徴とする請求項17又は18に記載の情報処理システム。 - 第1の画像から複数の属性に係る物体検出を行う検出工程と、
前記検出工程での検出結果について異なる属性の検出結果の重なりを判定する判定工程と、
前記第1の画像から抽出した第2の画像に対する物体検出の検出結果に基づいて、前記第1の画像に対する物体検出の検出結果を修正する修正工程と、を有することを特徴とする情報処理方法。 - 第1の画像から複数の属性に係る物体検出を行う検出ステップと、
前記検出ステップでの検出結果について異なる属性の検出結果の重なりを判定する判定ステップと、
前記第1の画像から抽出した第2の画像に対する物体検出の検出結果に基づいて、前記第1の画像に対する物体検出の検出結果を修正する修正ステップと、をコンピュータに実行させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2022/028516 WO2023017723A1 (ja) | 2021-08-13 | 2022-07-22 | 情報処理装置、情報処理システム、情報処理方法、及びプログラム |
US18/438,006 US20240265729A1 (en) | 2021-08-13 | 2024-02-09 | Information processing apparatus, information processing system, information processing method, and storage medium |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021132089 | 2021-08-13 | ||
JP2021132089 | 2021-08-13 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023026293A true JP2023026293A (ja) | 2023-02-24 |
JP7459151B2 JP7459151B2 (ja) | 2024-04-01 |
Family
ID=85252581
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022018960A Active JP7459151B2 (ja) | 2021-08-13 | 2022-02-09 | 情報処理装置、情報処理システム、情報処理方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7459151B2 (ja) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010176504A (ja) * | 2009-01-30 | 2010-08-12 | Canon Inc | 画像処理装置、画像処理方法及びプログラム |
JP2020198053A (ja) * | 2019-06-05 | 2020-12-10 | コニカミノルタ株式会社 | 情報処理装置、情報処理方法、人物検索システムおよび人物検索方法 |
-
2022
- 2022-02-09 JP JP2022018960A patent/JP7459151B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010176504A (ja) * | 2009-01-30 | 2010-08-12 | Canon Inc | 画像処理装置、画像処理方法及びプログラム |
JP2020198053A (ja) * | 2019-06-05 | 2020-12-10 | コニカミノルタ株式会社 | 情報処理装置、情報処理方法、人物検索システムおよび人物検索方法 |
Also Published As
Publication number | Publication date |
---|---|
JP7459151B2 (ja) | 2024-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10043313B2 (en) | Information processing apparatus, information processing method, information processing system, and storage medium | |
JP5713790B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP6088792B2 (ja) | 画像検出装置及び制御プログラム並びに画像検出方法 | |
US6714689B1 (en) | Image synthesizing method | |
JP4799105B2 (ja) | 情報処理装置及びその制御方法、コンピュータプログラム、記憶媒体 | |
JP5381569B2 (ja) | ジェスチャ認識装置、ジェスチャ認識方法、およびジェスチャ認識プログラム | |
US9779699B2 (en) | Image processing device, image processing method, computer readable medium | |
US20230334235A1 (en) | Detecting occlusion of digital ink | |
CN112135041B (zh) | 一种人脸特效的处理方法及装置、存储介质 | |
JP2007087345A (ja) | 情報処理装置及びその制御方法、コンピュータプログラム、記憶媒体 | |
CN112396050B (zh) | 图像的处理方法、设备以及存储介质 | |
JP2013215549A (ja) | 画像処理装置、画像処理プログラムおよび画像処理方法 | |
CN106251348A (zh) | 一种面向深度相机的自适应多线索融合背景减除方法 | |
JP2018092354A (ja) | 物体検出装置および物体検出方法 | |
JP7385416B2 (ja) | 画像処理装置、画像処理システム、画像処理方法及び画像処理プログラム | |
JP2013080266A (ja) | 入力装置 | |
WO2023017723A1 (ja) | 情報処理装置、情報処理システム、情報処理方法、及びプログラム | |
JP7459151B2 (ja) | 情報処理装置、情報処理システム、情報処理方法、及びプログラム | |
KR20170043202A (ko) | 영상 촬영 장치 및 이의 제어 방법 | |
US9842406B2 (en) | System and method for determining colors of foreground, and computer readable recording medium therefor | |
US9159118B2 (en) | Image processing apparatus, image processing system, and non-transitory computer-readable medium | |
CN114973344A (zh) | 人脸检测方法、装置、终端设备和计算机可读存储介质 | |
JP2021056899A (ja) | 画像処理装置、画像処理方法およびプログラム | |
US11508083B2 (en) | Image processing apparatus, image processing method, and non-transitory computer-readable storage medium | |
JP2023062785A (ja) | 情報処理装置、情報処理装置の制御方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220704 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230516 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230713 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20231017 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240112 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20240125 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240220 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240319 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7459151 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |