JP7405238B2 - 情報処理装置、監視システム、情報処理方法、及びプログラム - Google Patents
情報処理装置、監視システム、情報処理方法、及びプログラム Download PDFInfo
- Publication number
- JP7405238B2 JP7405238B2 JP2022508085A JP2022508085A JP7405238B2 JP 7405238 B2 JP7405238 B2 JP 7405238B2 JP 2022508085 A JP2022508085 A JP 2022508085A JP 2022508085 A JP2022508085 A JP 2022508085A JP 7405238 B2 JP7405238 B2 JP 7405238B2
- Authority
- JP
- Japan
- Prior art keywords
- person
- information
- suspiciousness
- information processing
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 106
- 238000012544 monitoring process Methods 0.000 title claims description 56
- 238000003672 processing method Methods 0.000 title claims description 5
- 238000012545 processing Methods 0.000 claims description 125
- 206010042635 Suspiciousness Diseases 0.000 claims description 124
- 238000001514 detection method Methods 0.000 claims description 100
- 230000008451 emotion Effects 0.000 claims description 83
- 238000000034 method Methods 0.000 claims description 78
- 230000008569 process Effects 0.000 claims description 60
- 238000004364 calculation method Methods 0.000 claims description 29
- 238000002834 transmittance Methods 0.000 claims description 9
- 230000008859 change Effects 0.000 claims description 5
- 238000012795 verification Methods 0.000 claims description 4
- 230000037308 hair color Effects 0.000 claims 3
- 230000006399 behavior Effects 0.000 description 68
- 238000010586 diagram Methods 0.000 description 26
- 230000000873 masking effect Effects 0.000 description 15
- 230000009471 action Effects 0.000 description 8
- 238000003384 imaging method Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 4
- 230000009467 reduction Effects 0.000 description 4
- 206010038743 Restlessness Diseases 0.000 description 3
- 230000005856 abnormality Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 238000000611 regression analysis Methods 0.000 description 3
- 238000012706 support-vector machine Methods 0.000 description 3
- 206010011469 Crying Diseases 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 230000009545 invasion Effects 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000007637 random forest analysis Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000033001 locomotion Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
- 238000011410 subtraction method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/34—Smoothing or thinning of the pattern; Morphological operations; Skeletonisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Alarm Systems (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Processing (AREA)
Description
第1の実施形態にかかる情報処理装置を含む監視システムについて説明する。
次に、情報処理装置100の詳細について説明する。図2は、第1の実施形態にかかる情報処理装置100の機能構成の一例を示すブロック図である。図2に示すように、情報処理装置100は、人物検出部110と、行動検出部120と、感情検出部130と、不審度算出部140と、マスク処理部150とを備える。さらに、情報処理装置100は、記憶装置160を有する。
次に、監視システム1000の動作を、図5、図6及び図7を用いて説明する。以下に説明する動作においては、監視システム1000は、図1に示す状況において構築されているものとする。なお、本明細書において、フローチャートの各ステップを「S101」のように、それぞれのステップに付した番号を用いて表現する。
人物検出部110は、撮影装置200が備えていてもよい。この場合、撮影装置200において、S101の処理の後、S201の処理とS202の処理を行う。そして、撮影装置200は、撮影データと、撮影データに撮影されている人物に関して生成した識別情報とを情報処理装置100に送信する。
行動検出部120は、さらに、人物が所持している物品を検出してもよい。例えば、人物が刃物を所持していた場合、行動検出部120は、「刃物の所持」を示す情報と識別情報とを対応付けて検出データとして記憶装置160に格納する。
次に、第2の実施形態にかかる情報処理装置を含む監視システムについて説明する。
次に、第3の実施形態にかかる情報処理装置を含む監視システムについて説明する。
次に、第4の実施形態にかかる情報処理装置を含む監視システムについて説明する。
例えば、10歳未満の人物がうろついていたことが検出された場合、当該人物は監視すべき対象である可能性がある。そのため、不審度算出部140は、検出された人物の行動及び感情の情報に加え、検出された人物の、属性の情報も用いて不審度を算出してもよい。
次に、第5の実施形態にかかる情報処理装置を含む監視システムについて説明する。
上述した第1、第2、第3、第4及び第5の実施形態にかかる情報処理装置を構成するハードウェアについて説明する。図19は、各実施形態における情報処理装置を実現するコンピュータ装置のハードウェア構成の一例を示すブロック図である。図19が示す各ブロックは、各実施形態における情報処理装置及び情報処理方法を実現するコンピュータ装置10と、ソフトウェアとの組み合わせにより実現できる。
11 プロセッサ
12 RAM
13 ROM
14、160 記憶装置
15 入出力インタフェース
16 バス
17 ドライブ装置
18 プログラム
19 周辺機器
20 記憶媒体
100、101、102、103、104 情報処理装置
120、410 行動検出部
130、420 感情検出部
140、430 不審度算出部
150、151、440 マスク処理部
170 指示受付部
180 顔照合部
190 属性検出部
200 撮影装置
300 管理端末
310 表示部
Claims (9)
- 撮影データに含まれる人物の行動を検出する行動検出手段と、
前記人物の感情を検出する感情検出手段と、
検出された前記人物の行動及び前記人物の感情に基づいて、前記人物を監視すべき度合いを示す値である不審度を算出する不審度算出手段と、
算出された前記不審度に基づいて、前記撮影データのうち前記人物が映る領域の情報量を減らす処理であるマスク処理を、前記領域に重畳される他の画像の透過率を前記人物の衣服及び髪の色の少なくとも一方を認識できるように調整し、前記透過率が設定された前記他の画像を前記領域に重畳することによって行うマスク処理手段と、を備える、
情報処理装置。 - 前記マスク処理手段は、前記不審度が所定の値以上のとき、前記不審度が前記所定の値未満のときより、前記人物が映る領域の情報量を減らす度合いを小さくする、
請求項1に記載の情報処理装置。 - 前記不審度を変更する指示と、前記不審度を変更する前記人物を識別する情報とを含む指示情報を受け付ける指示受付手段をさらに備え、
前記マスク処理手段は、前記指示受付手段が前記指示情報を受け付けた場合、前記指示情報に応じて変更された前記不審度を持つ前記人物が映る領域に、変更された前記不審度に基づいたマスク処理を行う、
請求項1または2に記載の情報処理装置。 - 前記人物の顔情報と、データベースに予め登録された顔情報との照合を行う顔照合手段をさらに備え、
前記マスク処理手段は、前記照合において、前記人物の顔情報と、前記予め登録された顔情報とが合致した場合、前記撮影データのうち当該人物が映る領域にマスク処理を行わない、
請求項1乃至3のいずれか一項に記載の情報処理装置。 - 前記人物の属性を検出する属性検出手段をさらに備え、
前記不審度算出手段は、検出された前記人物の行動と、前記人物の感情と、前記人物の属性と、に基づいて、前記人物の前記不審度を算出する、
請求項1乃至4のいずれか一項に記載の情報処理装置。 - 前記マスク処理手段は、検出された前記人物の属性に基づいて、前記人物の属性を示す情報を付加したマスク処理を行う、
請求項5に記載の情報処理装置。 - 撮影範囲を撮影することにより前記撮影データを生成する撮影装置と、
請求項1乃至6のいずれか一項に記載の情報処理装置と、を備える、
監視システム。 - 撮影データに含まれる人物の行動を検出し、
前記人物の感情を検出し、
検出された前記人物の行動及び前記人物の感情に基づいて、前記人物を監視すべき度合いを示す不審度を算出し、
算出された前記不審度に基づいて、前記撮影データのうち前記人物が映る領域の情報量を減らす処理であるマスク処理を、前記領域に重畳される他の画像の透過率を前記人物の衣服及び髪の色の少なくとも一方を認識できるように調整し、前記透過率が設定された前記他の画像を前記領域に重畳することによって行う、
情報処理方法。 - 撮影データに含まれる人物の行動を検出する処理と、
前記人物の感情を検出する処理と、
検出された前記人物の行動及び前記人物の感情に基づいて、前記人物を監視すべき度合いを示す不審度を算出する処理と、
算出された前記不審度に基づいて、前記撮影データのうち前記人物が映る領域の情報量を減らす処理であるマスク処理を、前記領域に重畳される他の画像の透過率を前記人物の衣服及び髪の色の少なくとも一方を認識できるように調整し、前記透過率が設定された前記他の画像を前記領域に重畳することによって行う処理と、をコンピュータに実行させるプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020048579 | 2020-03-19 | ||
JP2020048579 | 2020-03-19 | ||
PCT/JP2021/001032 WO2021186866A1 (ja) | 2020-03-19 | 2021-01-14 | 情報処理装置、監視システム、情報処理方法、及び記憶媒体 |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2021186866A1 JPWO2021186866A1 (ja) | 2021-09-23 |
JPWO2021186866A5 JPWO2021186866A5 (ja) | 2022-10-04 |
JP7405238B2 true JP7405238B2 (ja) | 2023-12-26 |
Family
ID=77770769
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022508085A Active JP7405238B2 (ja) | 2020-03-19 | 2021-01-14 | 情報処理装置、監視システム、情報処理方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230089155A1 (ja) |
JP (1) | JP7405238B2 (ja) |
WO (1) | WO2021186866A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI825843B (zh) * | 2022-07-12 | 2023-12-11 | 致伸科技股份有限公司 | 一種安全認證方法及應用該方法之安全認證裝置 |
WO2024095396A1 (ja) * | 2022-11-02 | 2024-05-10 | 三菱電機株式会社 | 不審者検出装置および不審者検出方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008152328A (ja) | 2006-12-14 | 2008-07-03 | Hitachi Information & Control Solutions Ltd | 不審者監視システム |
JP2009225398A (ja) | 2008-03-19 | 2009-10-01 | Secom Co Ltd | 画像配信システム |
JP2015046732A (ja) | 2013-08-28 | 2015-03-12 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
JP2016162103A (ja) | 2015-02-27 | 2016-09-05 | 富士通株式会社 | 画像処理プログラム、画像処理装置、及び画像処理方法 |
-
2021
- 2021-01-14 JP JP2022508085A patent/JP7405238B2/ja active Active
- 2021-01-14 US US17/801,300 patent/US20230089155A1/en active Pending
- 2021-01-14 WO PCT/JP2021/001032 patent/WO2021186866A1/ja active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008152328A (ja) | 2006-12-14 | 2008-07-03 | Hitachi Information & Control Solutions Ltd | 不審者監視システム |
JP2009225398A (ja) | 2008-03-19 | 2009-10-01 | Secom Co Ltd | 画像配信システム |
JP2015046732A (ja) | 2013-08-28 | 2015-03-12 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
JP2016162103A (ja) | 2015-02-27 | 2016-09-05 | 富士通株式会社 | 画像処理プログラム、画像処理装置、及び画像処理方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2021186866A1 (ja) | 2021-09-23 |
JPWO2021186866A1 (ja) | 2021-09-23 |
US20230089155A1 (en) | 2023-03-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9807090B2 (en) | Person authentication method | |
JP7278735B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP7405238B2 (ja) | 情報処理装置、監視システム、情報処理方法、及びプログラム | |
JP6253311B2 (ja) | 画像処理装置、画像処理方法 | |
US10769915B2 (en) | Privacy preserving camera | |
JP2009246799A (ja) | 画像監視装置 | |
KR102167730B1 (ko) | 영상 마스킹 장치 및 영상 마스킹 방법 | |
JP2013003964A (ja) | 顔画像検索システム、及び顔画像検索方法 | |
JP7416165B2 (ja) | 情報処理装置 | |
JP6440327B2 (ja) | 防犯システム、防犯方法、及びロボット | |
JP6234827B2 (ja) | 犯罪リスク値導出装置およびプログラム | |
JPWO2019003973A1 (ja) | 顔認証装置、顔認証方法およびプログラム | |
WO2020195732A1 (ja) | 画像処理装置、画像処理方法、およびプログラムが格納された記録媒体 | |
JP5730044B2 (ja) | 顔画像認証装置 | |
US20230394939A1 (en) | Monitoring device, suspicious object detecting method, and recording medium | |
Poonsri et al. | Improvement of fall detection using consecutive-frame voting | |
JP7183089B2 (ja) | 情報処理装置、情報処理システム、情報処理方法、及びプログラム | |
WO2018104999A1 (ja) | 情報処理装置、制御方法、及びプログラム | |
JP7423904B2 (ja) | 情報出力装置、方法、及びプログラム | |
JP2021196741A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2021012657A (ja) | 情報処理装置、情報処理方法、カメラ | |
JP7298729B2 (ja) | 情報処理システム、情報処理装置、情報処理方法、およびプログラム | |
JP2005149145A (ja) | 物体検出装置、物体検出方法、およびコンピュータプログラム | |
JP7517365B2 (ja) | 画像処理システム、画像処理方法及びプログラム | |
JP7098180B2 (ja) | 情報処理装置、情報処理方法及び情報処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220808 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220808 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230606 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230803 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231114 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231127 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7405238 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |