JP2022009396A - 情報処理装置、情報処理方法、及びプログラム - Google Patents
情報処理装置、情報処理方法、及びプログラム Download PDFInfo
- Publication number
- JP2022009396A JP2022009396A JP2021172910A JP2021172910A JP2022009396A JP 2022009396 A JP2022009396 A JP 2022009396A JP 2021172910 A JP2021172910 A JP 2021172910A JP 2021172910 A JP2021172910 A JP 2021172910A JP 2022009396 A JP2022009396 A JP 2022009396A
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- image frame
- person
- target object
- detected
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 58
- 238000003672 processing method Methods 0.000 title claims 3
- 238000001514 detection method Methods 0.000 claims abstract description 104
- 238000000034 method Methods 0.000 claims description 129
- 230000008569 process Effects 0.000 claims description 94
- 230000008859 change Effects 0.000 description 16
- 230000008685 targeting Effects 0.000 description 14
- 230000002093 peripheral effect Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 8
- 230000003068 static effect Effects 0.000 description 8
- 238000003384 imaging method Methods 0.000 description 6
- 230000006399 behavior Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 229910000906 Bronze Inorganic materials 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 239000010974 bronze Substances 0.000 description 1
- KUNSUQLRTQLHQQ-UHFFFAOYSA-N copper tin Chemical compound [Cu].[Sn] KUNSUQLRTQLHQQ-UHFFFAOYSA-N 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 231100000773 point of departure Toxicity 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
- Alarm Systems (AREA)
- Closed-Circuit Television Systems (AREA)
- Emergency Alarm Devices (AREA)
Abstract
Description
<概要>
置き去り物体を検出する方法として、動画データから静止物体を検出し、静止物体を置き去り物体として扱う方法がある。そして、静止物体を検出する方法として、動画データを構成する各動画フレームから物体を検出し、その物体が静止している場合に、その物体を静止物体として検出する方法がある。ここで、「物体が静止している」とは、物体の位置の変化が小さい(所定の閾値以下の値)状態が継続することを意味する。よって、物体の位置の変化が小さい状態が継続した場合に、その物体が静止物体として検出される。
図2は、実施形態1の情報処理装置2000の構成を例示する図である。情報処理装置2000は、静止物体検出部2020、人物検出部2040、及び処理実行部2060を有する。静止物体検出部2020は、動画データ12から静止物体を検出する。人物検出部2040は、静止物体として検出された物体(対象物体)が含まれる複数の動画フレーム14それぞれを対象に、対象物体の周辺から人物を検出する人物検出処理を実行する。処理実行部2060は、複数の動画フレームそれぞれを対象とした人物検出処理の結果を比較することで所定処理を実行する。
情報処理装置2000の各機能構成部は、各機能構成部を実現するハードウエア(例:ハードワイヤードされた電子回路など)で実現されてもよいし、ハードウエアとソフトウエアとの組み合わせ(例:電子回路とそれを制御するプログラムの組み合わせなど)で実現されてもよい。以下、情報処理装置2000の各機能構成部がハードウエアとソフトウエアとの組み合わせで実現される場合について、さらに説明する。
カメラ10は、繰り返し撮像を行って動画データ12を生成できる任意のカメラである。例えばカメラ10は、特定の施設や道路などを監視するために設けられている監視カメラである。
図4は、実施形態1の情報処理装置2000によって実行される処理の流れを例示するフローチャートである。静止物体検出部2020は、動画データ12から静止物体を検出する(S102)。人物検出部2040は、対象物体が含まれる複数の動画フレーム14それぞれを対象に、対象物体の周辺から人物を検出する人物検出処理を実行する(S104)。処理実行部2060は、複数の動画フレームそれぞれを対象とした人物検出処理の結果を比較することで所定処理を実行する(S106)。
情報処理装置2000は、処理対象とする動画データ12を取得する。情報処理装置2000が動画データ12を取得する方法は様々である。例えば情報処理装置2000は、カメラ10から送信される動画データ12を受信する。また例えば、情報処理装置2000は、カメラ10にアクセスし、カメラ10に記憶されている動画データ12を取得する。
静止物体検出部2020は、動画データ12から静止物体を検出する(S102)。動画データから静止物体を検出する技術には、既存の技術を利用することができる。以下、動画データ12から静止物体を検出する方法の一例を説明する。
人物検出部2040は、対象物体(静止物体として検出された物体)が含まれる複数の動画フレーム14それぞれを対象に、対象物体の周辺から人物を検出する人物検出処理を行う(S104)。以下、動画フレーム14において、対象物体の周辺の画像領域を、周辺領域と呼ぶ。「対象物体が含まれる複数の動画フレーム14」は、例えば前述した図5の例においては、時点 t 以降に生成された各動画フレーム14である。これらの動画フレーム14には、静止物体として検出された物体である物体20が含まれている。
人物検出部2040は、対象物体を含む複数の動画フレーム14のうち、少なくとも2つの動画フレーム14を人物検出処理の対象とする。以下、この2つの動画フレーム14を第1動画フレームと第2動画フレームと呼ぶ。第2動画フレームは、第1動画フレームよりも後に生成された動画フレーム14である。以下、第1動画フレームと第2動画フレームとして扱う動画フレーム14を定める方法について説明する。
処理実行部2060は、対象物体が含まれる複数の動画フレーム14それぞれを対象とした人物検出処理の結果を比較することで、所定処理を実行する(S106)。所定処理は、例えば、1)所定の条件が満たされた場合に警告を行う処理、2)対象物体の状態を特定する処理、3)対象物体を置き去ったと推定される人物を追跡する処理などである。以下、これらの処理について詳細に例示する。
図7は、処理実行部2060によって実行される警告処理の流れを例示する図である。この例において、処理実行部2060は、第1動画フレームに対する人物検出結果と第2動画フレームに対する人物検出結果を比較する。
その他にも例えば、警告の出力先は、警備会社や警察などの所定の機関で使用されている端末であってもよい。
処理実行部2060は、対象物体の状態を特定する。具体的には、処理実行部2060は、対象物体の状態が、「置き去られている」と「置き去られていない」のどちらであるかを特定する。
前述したように、第1動画フレームから検出された人物と同じ人物が第2動画フレームから検出されない場合、対象物体が置き去られた蓋然性が高い。そこで、対象物体を置き去ったと推測される人物を追跡することが好適である。ここでいう追跡は、例えば、その人物の現在位置を把握すること、その人物が今後移動すると予測される場所を把握すること、及び対象物体を置き去さるまでのその人物の行動を把握することなどを含む。
Claims (6)
- 動画フレームから静止物体を検出する静止物体検出手段と、
前記静止物体として検出された物体である対象物体が含まれる第1動画フレームを特定する第1特定手段と、
前記第1動画フレームを基に、前記対象物体が含まれなおかつ前記第1動画フレームより前に生成された第2動画フレームを特定する第2特定手段と、
前記対象物体が含まれる前記第1動画フレーム及び前記第2動画フレームを表示させる表示手段と、
を備え、
前記第2動画フレームは、前記対象物体が置き去られた時点から所定時間前に生成され、人物が映るフレームを含む、
情報処理装置。 - 前記第1動画フレーム及び前記第2動画フレームそれぞれを対象に、前記対象物体の周辺から人物を検出する人物検出処理を実行する人物検出手段と、
前記第1動画フレーム及び前記第2動画フレームそれぞれを対象とした前記人物検出処理の結果を比較することで所定処理を実行する処理実行手段と、
を有する請求項1に記載の情報処理装置。 - コンピュータが、
動画フレームから静止物体を検出する静止物体検出処理と、
前記静止物体として検出された物体である対象物体が含まれる第1動画フレームを特定する第1特定処理と、
前記第1動画フレームを基に、前記対象物体が含まれなおかつ前記第1動画フレームより前に生成された第2動画フレームを特定する第2特定処理と、
前記対象物体が含まれる前記第1動画フレーム及び前記第2動画フレームを表示させる表示処理と、
を行い、
前記第2動画フレームは、前記対象物体が置き去られた時点から所定時間前に生成され、人物が映るフレームを含む、
情報処理方法。 - 前記コンピュータが、さらに、
前記第1動画フレーム及び前記第2動画フレームそれぞれを対象に、前記対象物体の周辺から人物を検出する人物検出処理を実行する人物検出処理と、
前記第1動画フレーム及び前記第2動画フレームそれぞれを対象とした前記人物検出処理の結果を比較することで所定処理を実行する処理実行処理と、
を行う請求項3に記載の情報処理方法。 - コンピュータに、
動画フレームから静止物体を検出する静止物体検出機能と、
前記静止物体として検出された物体である対象物体が含まれる第1動画フレームを特定する第1特定機能と、
前記第1動画フレームを基に、前記対象物体が含まれなおかつ前記第1動画フレームより前に生成された第2動画フレームを特定する第2特定機能と、
前記対象物体が含まれる前記第1動画フレーム及び前記第2動画フレームを表示させる表示機能と、
を持たせ、
前記第2動画フレームは、前記対象物体が置き去られた時点から所定時間前に生成され、人物が映るフレームを含む、
プログラム。 - 前記コンピュータに、さらに、
前記第1動画フレーム及び前記第2動画フレームそれぞれを対象に、前記対象物体の周辺から人物を検出する人物検出処理を実行する人物検出機能と、
前記第1動画フレーム及び前記第2動画フレームそれぞれを対象とした前記人物検出処理の結果を比較することで所定処理を実行する処理実行機能と、
を持たせる請求項5に記載のプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021172910A JP7347481B2 (ja) | 2020-07-02 | 2021-10-22 | 情報処理装置、情報処理方法、及びプログラム |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020114651A JP6954416B2 (ja) | 2017-03-30 | 2020-07-02 | 情報処理装置、情報処理方法、及びプログラム |
JP2021160668A JP2022002128A (ja) | 2020-07-02 | 2021-09-30 | 情報処理装置、情報処理方法、及びプログラム |
JP2021172910A JP7347481B2 (ja) | 2020-07-02 | 2021-10-22 | 情報処理装置、情報処理方法、及びプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021160668A Division JP2022002128A (ja) | 2020-07-02 | 2021-09-30 | 情報処理装置、情報処理方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022009396A true JP2022009396A (ja) | 2022-01-14 |
JP7347481B2 JP7347481B2 (ja) | 2023-09-20 |
Family
ID=72916343
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020114651A Active JP6954416B2 (ja) | 2017-03-30 | 2020-07-02 | 情報処理装置、情報処理方法、及びプログラム |
JP2021160668A Pending JP2022002128A (ja) | 2020-07-02 | 2021-09-30 | 情報処理装置、情報処理方法、及びプログラム |
JP2021172910A Active JP7347481B2 (ja) | 2020-07-02 | 2021-10-22 | 情報処理装置、情報処理方法、及びプログラム |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020114651A Active JP6954416B2 (ja) | 2017-03-30 | 2020-07-02 | 情報処理装置、情報処理方法、及びプログラム |
JP2021160668A Pending JP2022002128A (ja) | 2020-07-02 | 2021-09-30 | 情報処理装置、情報処理方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (3) | JP6954416B2 (ja) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002157664A (ja) * | 2000-11-21 | 2002-05-31 | Mitsubishi Heavy Ind Ltd | 監視システム |
JP2010187124A (ja) * | 2009-02-10 | 2010-08-26 | Panasonic Corp | 監視カメラシステム、映像記録装置及び映像記録方法 |
JP2010258704A (ja) * | 2009-04-23 | 2010-11-11 | Canon Inc | 再生装置及び再生方法 |
JP2011049646A (ja) * | 2009-08-25 | 2011-03-10 | Secom Co Ltd | 置き去り監視装置 |
JP2011087253A (ja) * | 2009-10-19 | 2011-04-28 | Canon Inc | 撮像装置、情報処理装置及び情報処理方法 |
JP2011091705A (ja) * | 2009-10-23 | 2011-05-06 | Canon Inc | 画像処理装置、および画像処理方法 |
JP2011197937A (ja) * | 2010-03-18 | 2011-10-06 | Secom Co Ltd | 画像監視装置および監視システム |
JP2012235300A (ja) * | 2011-04-28 | 2012-11-29 | Saxa Inc | 置き去り又は持ち去り検知システム及び置き去り又は持ち去り検知記録の生成方法 |
JP2013021551A (ja) * | 2011-07-12 | 2013-01-31 | Canon Inc | 検知装置、検知方法及びプログラム |
JP2014086797A (ja) * | 2012-10-22 | 2014-05-12 | Sony Corp | 情報処理装置、情報処理方法、プログラム、及び情報処理システム |
JP2015162185A (ja) * | 2014-02-28 | 2015-09-07 | グローリー株式会社 | 貨幣処理支援システム及び貨幣処理支援方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5691764B2 (ja) * | 2011-04-12 | 2015-04-01 | サクサ株式会社 | 置き去り又は持ち去り検知システム |
-
2020
- 2020-07-02 JP JP2020114651A patent/JP6954416B2/ja active Active
-
2021
- 2021-09-30 JP JP2021160668A patent/JP2022002128A/ja active Pending
- 2021-10-22 JP JP2021172910A patent/JP7347481B2/ja active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002157664A (ja) * | 2000-11-21 | 2002-05-31 | Mitsubishi Heavy Ind Ltd | 監視システム |
JP2010187124A (ja) * | 2009-02-10 | 2010-08-26 | Panasonic Corp | 監視カメラシステム、映像記録装置及び映像記録方法 |
JP2010258704A (ja) * | 2009-04-23 | 2010-11-11 | Canon Inc | 再生装置及び再生方法 |
JP2011049646A (ja) * | 2009-08-25 | 2011-03-10 | Secom Co Ltd | 置き去り監視装置 |
JP2011087253A (ja) * | 2009-10-19 | 2011-04-28 | Canon Inc | 撮像装置、情報処理装置及び情報処理方法 |
JP2011091705A (ja) * | 2009-10-23 | 2011-05-06 | Canon Inc | 画像処理装置、および画像処理方法 |
JP2011197937A (ja) * | 2010-03-18 | 2011-10-06 | Secom Co Ltd | 画像監視装置および監視システム |
JP2012235300A (ja) * | 2011-04-28 | 2012-11-29 | Saxa Inc | 置き去り又は持ち去り検知システム及び置き去り又は持ち去り検知記録の生成方法 |
JP2013021551A (ja) * | 2011-07-12 | 2013-01-31 | Canon Inc | 検知装置、検知方法及びプログラム |
JP2014086797A (ja) * | 2012-10-22 | 2014-05-12 | Sony Corp | 情報処理装置、情報処理方法、プログラム、及び情報処理システム |
JP2015162185A (ja) * | 2014-02-28 | 2015-09-07 | グローリー株式会社 | 貨幣処理支援システム及び貨幣処理支援方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2020177676A (ja) | 2020-10-29 |
JP7347481B2 (ja) | 2023-09-20 |
JP6954416B2 (ja) | 2021-10-27 |
JP2022002128A (ja) | 2022-01-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6729793B2 (ja) | 情報処理装置、制御方法、及びプログラム | |
JP6741130B2 (ja) | 情報処理システム、情報処理方法及びプログラム | |
JP7040463B2 (ja) | 解析サーバ、監視システム、監視方法及びプログラム | |
US20190347528A1 (en) | Image analysis system, image analysis method, and storage medium | |
US9684835B2 (en) | Image processing system, image processing method, and program | |
US10271017B2 (en) | System and method for generating an activity summary of a person | |
US11120838B2 (en) | Information processing apparatus, control method, and program | |
CN105144705B (zh) | 对象监视系统、对象监视方法和用于提取待监视对象的程序 | |
JP6233624B2 (ja) | 情報処理システム、情報処理方法及びプログラム | |
CN107122743B (zh) | 安防监控方法、装置和电子设备 | |
WO2014175356A1 (ja) | 情報処理システム、情報処理方法及びプログラム | |
JP7459916B2 (ja) | 物体追跡方法、物体追跡装置、及びプログラム | |
CN114764895A (zh) | 异常行为检测装置和方法 | |
JP6954416B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP2005284652A (ja) | 動きベクトルを用いた映像監視方法及び装置 | |
JP7039084B1 (ja) | セルフレジ監視システム及びセルフレジ監視方法 | |
KR101669885B1 (ko) | 영상 기반 보행자 추돌 자동 검출 방법 및 이를 적용한 사물 인터넷 장치 | |
JP5618366B2 (ja) | 監視システム、監視装置、監視方法、及びプログラム | |
WO2020139071A1 (en) | System and method for detecting aggressive behaviour activity | |
WO2021084895A1 (en) | A method, an apparatus and a system for managing an event to generate an alert indicating a subject is likely to be unauthorized | |
KR101692504B1 (ko) | 비콘 기반 지능형 영상 분석 시스템 및 방법 | |
JPWO2014097699A1 (ja) | 情報処理システム、情報処理方法及びプログラム | |
JP2022037331A (ja) | 迷子検知装置、迷子検知方法、およびプログラム | |
CN115546737A (zh) | 一种机房监控方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211022 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211022 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220830 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221031 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230221 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230808 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230821 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7347481 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |