JP6819118B2 - 移動物体の計数装置及び方法 - Google Patents
移動物体の計数装置及び方法 Download PDFInfo
- Publication number
- JP6819118B2 JP6819118B2 JP2016146249A JP2016146249A JP6819118B2 JP 6819118 B2 JP6819118 B2 JP 6819118B2 JP 2016146249 A JP2016146249 A JP 2016146249A JP 2016146249 A JP2016146249 A JP 2016146249A JP 6819118 B2 JP6819118 B2 JP 6819118B2
- Authority
- JP
- Japan
- Prior art keywords
- moving object
- current frame
- track
- frame
- score
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30236—Traffic on road, railway or crossing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30242—Counting objects in image
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
- Traffic Control Systems (AREA)
Description
監視ビデオの各フレーム(画像)から移動物体を検出し、検出した移動物体に基づいて移動物体軌迹集を形成し、そして、前記移動物体軌迹集のうちの各移動物体軌迹において移動物体を連続して検出した回数に基づいて、各移動物体軌迹に点数を付けるための形成ユニット;
前記移動物体軌迹集のうちの移動物体軌迹の得点が所定閾値以下の移動物体軌迹を除去するためのフィルタリングユニット;及び
除去後の移動物体軌迹集のうちの移動物体軌迹に基づいて、移動物体の計数を行うための計数ユニットを含む。
監視ビデオの各フレーム(画像)から移動物体を検出し、検出した移動物体に基づいて前記監視ビデオの移動物体軌迹集を形成し、そして、前記移動物体軌迹集のうちの各移動物体軌迹において移動物体を連続して検出した回数に基づいて、各移動物体軌迹に点数を付け;
前記移動物体軌迹集のうちの移動物体軌迹の得点が所定閾値以下の移動物体軌迹を除去し;及び
除去後の移動物体軌迹集のうちの移動物体軌迹に基づいて、移動物体の計数を行うことを含む。
形成ユニット101:監視ビデオの各フレーム(各画像)から移動物体を検出し、検出した移動物体に基づいて移動物体軌迹集を形成し、そして、該移動物体軌迹集のうちの各移動物体軌迹において移動物体を連続した検出した回数に基づいて、各移動物体軌迹に点数を付け;
フィルタリングユニット102:該移動物体軌迹集のうちの移動物体軌迹の得点が所定閾値以下の移動物体軌迹を除去し;
計数ユニット103:除去後の移動物体軌迹集のうちの移動物体軌迹に基づいて、移動物体の計数を行う。
検出ユニット201:現在フレームの所定領域における移動物体を検出し;
更新ユニット202:現在フレームから検出された移動物体の位置と、前の1フレームの移動物体軌迹による移動物体の予測位置とに基づいて、前の1フレームの移動物体軌迹を更新し又は移動物体軌迹を形成し、現在フレームに関する移動物体軌迹集を更新し;
点数付けユニット203:更新後の現在フレームに関する移動物体軌迹集のうちの各移動物体軌迹に基づいて現在フレーム及びその前のフレームから移動物体を連続して検出した回数に基づいて、現在フレームに関する各移動物体軌迹の得点を確定する。
ステップ302:現在フレームから検出された移動物体の位置、及び、前の1フレームの移動物体軌迹による移動物体の予測位置に基づいて、前の1フレームの移動物体軌迹を更新し又は移動物体軌迹を形成し、現在フレームに関する移動物体軌迹集を更新し;
ステップ303:現在フレームに関する更新後の移動物体軌迹又は形成された移動物体軌迹に基づいて現在フレーム及びその前のフレームから移動物体を連続して検出した回数に基づいて、現在フレームに関する各移動物体軌迹の得点を確定する。
第一更新ユニット401:現在フレームから検出された移動物体の位置と、前の1フレームの移動物体軌迹による移動物体の予測位置とがマッチした場合、検出された移動物体の位置に基づいて、前の1フレームの該移動物体軌迹を更新し、現在フレームに関する更新後の該移動物体軌迹を形成し;
第二更新ユニット402:現在フレームから検出された移動物体の位置と、前の1フレームの移動物体軌迹による移動物体の予測位置とがマッチしない場合、現在フレームから検出された前記移動物体の移動物体軌迹を形成し、また、該予測位置に基づいて前の1フレームの該移動物体軌迹を更新し、現在フレームに関する更新後の該移動物体軌迹を形成する。
ステップ501:現在フレームから検出された移動物体の位置と、前の1フレームの移動物体軌迹による移動物体の予測位置とがマッチするかどうかを判断し、判断結果が“はい”のとき、ステップ502に進み、判断結果が“いいえ”のとき、ステップ503及び504に進み;
ステップ502:検出された移動物体の位置に基づいて、前の1フレームの該移動物体軌迹を更新し、現在フレームに関する更新後の該移動物体軌迹を形成し;
ステップ503:現在フレームから検出された前記移動物体の移動物体軌迹を形成し;
ステップ504:該予測位置に基づいて前の1フレームの該移動物体軌迹を更新し、現在フレームに関する更新後の該移動物体軌迹を形成する。
第一点数付けユニット601:更新後の現在フレームに関する移動物体軌迹集のうちの各移動物体軌迹に基づいて前の1フレームに対して現在フレームから連続して移動物体が検出された場合、現在フレームの該移動物体軌迹の得点を、前の1フレームの該移動物体軌迹の得点に現在フレーム及びその前のフレームから連続して該移動物体が検出された回数を加算したものとして確定し;
第二点数付けユニット602:更新後の現在フレームに関する移動物体軌迹集のうちの各移動物体軌迹に基づいて前の1フレームに対して現在フレームから連続して移動物体が検出されない場合、現在フレームの該移動物体軌迹の得点を、前の1フレームの該移動物体軌迹の得点から1を減算したものとして確定する。
ステップ701:更新後の現在フレームに関する移動物体軌迹集のうちの各移動物体軌迹に基づいて前の1フレームに対して現在フレームから連続して移動物体を検出したかどうかを判断し、判断結果が“はい”のとき、ステップ702に進み、判断結果が“いいえ”のとき、ステップ703に進み;
ステップ702:現在フレームの該移動物体軌迹の得点を、前の1フレームの該移動物体軌迹の得点に現在フレーム及び現在フレームの前のフレームから連続して該移動物体が検出された回数を加算したものとして確定し;
ステップ703:現在フレームの該移動物体軌迹の得点を、前の1フレームの該移動物体軌迹の得点から1を減算したものとして確定する。
ステップ1002:前記移動物体軌迹集のうちの移動物体軌迹の得点が所定閾値以下の移動物体軌迹を除去し;
ステップ1003:除去後の移動物体軌迹集のうちの移動物体軌迹に基づいて、移動物体の計数を行う。
Claims (10)
- 移動物体の計数装置であって、
監視ビデオの各フレームから移動物体を検出し、検出した移動物体に基づいて移動物体軌迹集を形成し、そして、前記移動物体軌迹集のうちの各移動物体軌迹において移動物体を連続して検出した回数に基づいて、各移動物体軌迹に点数を付けるための形成ユニット;
前記移動物体軌迹集のうちの移動物体軌迹の得点が所定閾値以下の移動物体軌迹を除去するためのフィルタリングユニット;及び
除去後の移動物体軌迹集のうちの移動物体軌迹に基づいて、移動物体の計数を行うための計数ユニットを含む、装置。 - 請求項1に記載の装置であって、
前記形成ユニットは、
現在フレームの所定領域における移動物体を検出するための検出ユニット;
現在フレームから検出された移動物体の位置と、前の1フレームの移動物体軌迹による移動物体の予測位置とに基づいて、前の1フレームの移動物体軌迹を更新し又は移動物体軌迹を形成し、現在フレームの移動物体軌迹集を更新するための更新ユニット;及び
更新後の現在フレームの移動物体軌迹集のうちの各移動物体軌迹に基づいて現在フレーム及び現在フレームの前のフレームから移動物体を連続して検出した回数に基づいて、現在フレームの各移動物体軌迹の得点を確定するための点数付けユニットを含む、装置。 - 請求項2に記載の装置であって、
前記更新ユニットは、
現在フレームから検出された移動物体の位置と、前の1フレームの移動物体軌迹による移動物体の予測位置とがマッチした場合、検出された移動物体の位置に基づいて、前の1フレームの前記移動物体軌迹を更新し、現在フレームの更新後の前記移動物体軌迹を形成するための第一更新ユニット;及び
現在フレームから検出された移動物体の位置と、前の1フレームの移動物体軌迹による移動物体の予測位置とがマッチしない場合、現在フレームから検出された移動物体の移動物体軌迹を形成し、前記予測位置に基づいて前の1フレームの前記移動物体軌迹を更新し、現在フレームの更新後の前記移動物体軌迹を形成するための第二更新ユニットを含む、装置。 - 請求項2に記載の装置であって、
前記点数付けユニットは、
更新後の現在フレームの移動物体軌迹集のうちの各移動物体軌迹に基づいて現在フレームから前の1フレームに対して移動物体を連続して検出した場合、現在フレームの前記移動物体軌迹の得点を、前の1フレームの前記移動物体軌迹の得点に現在フレーム及び現在フレームの前のフレームから前記移動物体を連続して検出した回数を加算した後のものと確定するための第一点数付けユニット;及び
更新後の現在フレームの移動物体軌迹集のうちの各移動物体軌迹に基づいて現在フレームから前の1フレームに対して移動物体を連続して検出できない場合、現在フレームの前記移動物体軌迹の得点を、前の1フレームの前記移動物体軌迹の得点から1を減算した後のものと確定するための第二点数付けユニットを含む、装置。 - 請求項1に記載の装置であって、
前記フィルタリングユニットはさらに、前記移動物体軌迹集のうちの距離が所定閾値よりも小さい2つの移動物体軌迹を合併するように構成され、
前記計数ユニットは、除去及び合併後の移動物体軌迹集のうちの移動物体軌迹に基づいて、移動物体の計数を行う、装置。 - 移動物体の計数方法であって、
監視ビデオの各フレームから移動物体を検出し、検出した移動物体に基づいて前記監視ビデオの移動物体軌迹集を形成し、そして、前記移動物体軌迹集の各移動物体軌迹において移動物体を連続して検出した回数に基づいて、各移動物体軌迹に点数を付け;
前記移動物体軌迹集のうちの移動物体軌迹の得点が所定閾値以下の移動物体軌迹を除去し;及び
除去後の移動物体軌迹集のうちの移動物体軌迹に基づいて、移動物体の計数を行うことを含む、方法。 - 請求項6に記載の方法であって、
監視ビデオの各フレームから移動物体を検出し、検出した移動物体に基づいて前記監視ビデオの移動物体軌迹集を形成し、そして、前記移動物体軌迹集の各移動物体軌迹において移動物体を連続して検出した回数に基づいて、各移動物体軌迹に点数を付けることは、
現在フレームの所定領域における移動物体を検出し;
現在フレームから検出された移動物体の位置と、前の1フレームの移動物体軌迹による移動物体の予測位置とに基づいて、前の1フレームの移動物体軌迹を更新し又は移動物体軌迹を形成し、現在フレームの移動物体軌迹集を更新し;及び
更新後の現在フレームの移動物体軌迹集のうちの各移動物体軌迹に基づいて現在フレーム及び現在フレームの前のフレームから移動物体を連続して検出した回数に基づいて、現在フレームの各移動物体軌迹の得点を確定することを含む、方法。 - 請求項7に記載の方法であって、
現在フレームから検出された移動物体の位置と、前の1フレームの移動物体軌迹による移動物体の予測位置とに基づいて、前の1フレームの移動物体軌迹を更新し又は移動物体軌迹を形成し、現在フレームの移動物体軌迹集を更新することは、
現在フレームから検出された移動物体の位置と、前の1フレームの移動物体軌迹による移動物体の予測位置とがマッチした場合、検出された移動物体の位置に基づいて前の1フレームの前記移動物体軌迹を更新し、現在フレームの更新後の前記移動物体軌迹を形成し;及び
現在フレームから検出された移動物体の位置と、前の1フレームの移動物体軌迹による移動物体の予測位置とがマッチしない場合、現在フレームから検出された前記移動物体の移動物体軌迹を形成し、前記予測位置に基づいて前の1フレームの前記移動物体軌迹を更新し、現在フレームの更新後の前記移動物体軌迹を形成することを含む、方法。 - 請求項7に記載の方法であって、
更新後の現在フレームの移動物体軌迹集のうちの各移動物体軌迹に基づいて現在フレーム及び現在フレームの前のフレームから移動物体を連続して検出した回数に基づいて、現在フレームの各移動物体軌迹の得点を確定することは、
更新後の現在フレームの移動物体軌迹集のうちの各移動物体軌迹に基づいて現在フレームから前の1フレームに対して移動物体を連続して検出した場合、現在フレームの前記移動物体軌迹の得点を、前の1フレームの前記移動物体軌迹の得点に現在フレーム及び現在フレームの前のフレームから前記移動物体を連続して検出した回数を加算した後のものと確定し;及び
更新後の現在フレームの移動物体軌迹集のうちの各移動物体軌迹に基づいて現在フレームから前の1フレームに対して移動物体を連続して検出できない場合、現在フレームの前記移動物体軌迹の得点を、前の1フレームの前記移動物体軌迹の得点から1を減算した後のものと確定することを含む、方法。 - 請求項6に記載の方法であって、
前記移動物体軌迹集のうちの距離が所定閾値よりも小さい2つの移動物体軌迹を合併することをさらに含み、
除去後の移動物体軌迹集のうちの移動物体軌迹に基づいて、移動物体の計数を行うことは、
除去及び合併後の移動物体軌迹集のうちの移動物体軌迹に基づいて、移動物体の計数を行うことを含む、方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510463048.0 | 2015-07-31 | ||
CN201510463048.0A CN106408080B (zh) | 2015-07-31 | 2015-07-31 | 运动物体的计数装置及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017033553A JP2017033553A (ja) | 2017-02-09 |
JP6819118B2 true JP6819118B2 (ja) | 2021-01-27 |
Family
ID=57886490
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016146249A Active JP6819118B2 (ja) | 2015-07-31 | 2016-07-26 | 移動物体の計数装置及び方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9870510B2 (ja) |
JP (1) | JP6819118B2 (ja) |
CN (1) | CN106408080B (ja) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108885789A (zh) * | 2017-03-03 | 2018-11-23 | 华为技术有限公司 | 一种针对人体运动的计数方法及装置 |
US10474988B2 (en) | 2017-08-07 | 2019-11-12 | Standard Cognition, Corp. | Predicting inventory events using foreground/background processing |
US10474991B2 (en) | 2017-08-07 | 2019-11-12 | Standard Cognition, Corp. | Deep learning-based store realograms |
US11200692B2 (en) | 2017-08-07 | 2021-12-14 | Standard Cognition, Corp | Systems and methods to check-in shoppers in a cashier-less store |
US10650545B2 (en) | 2017-08-07 | 2020-05-12 | Standard Cognition, Corp. | Systems and methods to check-in shoppers in a cashier-less store |
US11023850B2 (en) | 2017-08-07 | 2021-06-01 | Standard Cognition, Corp. | Realtime inventory location management using deep learning |
US10853965B2 (en) | 2017-08-07 | 2020-12-01 | Standard Cognition, Corp | Directional impression analysis using deep learning |
US11232687B2 (en) | 2017-08-07 | 2022-01-25 | Standard Cognition, Corp | Deep learning-based shopper statuses in a cashier-less store |
US11250376B2 (en) | 2017-08-07 | 2022-02-15 | Standard Cognition, Corp | Product correlation analysis using deep learning |
TWI686748B (zh) * | 2018-12-07 | 2020-03-01 | 國立交通大學 | 人流分析系統及人流分析方法 |
US11232575B2 (en) * | 2019-04-18 | 2022-01-25 | Standard Cognition, Corp | Systems and methods for deep learning-based subject persistence |
CN110084308B (zh) * | 2019-04-30 | 2022-05-17 | 杭州远眺科技有限公司 | 一种基于车辆轨迹分析构建通勤路径的方法 |
US11361468B2 (en) | 2020-06-26 | 2022-06-14 | Standard Cognition, Corp. | Systems and methods for automated recalibration of sensors for autonomous checkout |
US11303853B2 (en) | 2020-06-26 | 2022-04-12 | Standard Cognition, Corp. | Systems and methods for automated design of camera placement and cameras arrangements for autonomous checkout |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3920535B2 (ja) * | 2000-06-12 | 2007-05-30 | 株式会社日立製作所 | 車両検出方法及び車両検出装置 |
JP4600929B2 (ja) * | 2005-07-20 | 2010-12-22 | パナソニック株式会社 | 停止低速車両検出装置 |
JP2007065878A (ja) * | 2005-08-30 | 2007-03-15 | Central Res Inst Of Electric Power Ind | 水面または水中における移動体計数方法、計数装置および計数プログラム |
CN100594713C (zh) * | 2008-04-21 | 2010-03-17 | 中国科学院计算技术研究所 | 一种产生视频大纲的方法和系统 |
US8325981B2 (en) * | 2009-04-21 | 2012-12-04 | Nec Soft, Ltd. | Human tracking apparatus, human tracking method, and human tracking processing program |
CN103839276A (zh) * | 2012-11-27 | 2014-06-04 | 大连灵动科技发展有限公司 | 一种基于预测的运动跟踪方法 |
US9025825B2 (en) * | 2013-05-10 | 2015-05-05 | Palo Alto Research Center Incorporated | System and method for visual motion based object segmentation and tracking |
CN104637058B (zh) * | 2015-02-06 | 2017-11-17 | 武汉科技大学 | 一种基于图像信息的客流量识别统计方法 |
CN106570557A (zh) * | 2015-10-13 | 2017-04-19 | 富士通株式会社 | 运动物体的计数装置及方法 |
-
2015
- 2015-07-31 CN CN201510463048.0A patent/CN106408080B/zh active Active
-
2016
- 2016-07-18 US US15/212,876 patent/US9870510B2/en active Active
- 2016-07-26 JP JP2016146249A patent/JP6819118B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
US20170032193A1 (en) | 2017-02-02 |
US9870510B2 (en) | 2018-01-16 |
JP2017033553A (ja) | 2017-02-09 |
CN106408080B (zh) | 2019-01-01 |
CN106408080A (zh) | 2017-02-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6819118B2 (ja) | 移動物体の計数装置及び方法 | |
CN106408554B (zh) | 遗留物检测装置、方法和系统 | |
CN109427191B (zh) | 一种行驶检测方法及装置 | |
KR101731461B1 (ko) | 객체에 대한 행동 탐지 장치 및 이를 이용한 행동 탐지 방법 | |
CN110532916B (zh) | 一种运动轨迹确定方法及装置 | |
CN104732187B (zh) | 一种图像跟踪处理的方法及设备 | |
JP6534609B2 (ja) | 追跡装置 | |
CN105654508A (zh) | 基于自适应背景分割的监控视频移动目标跟踪方法及系统 | |
CN103366569A (zh) | 实时抓拍交通违章车辆的方法及系统 | |
CN103617410A (zh) | 基于视频检测技术的高速公路隧道停车检测方法 | |
EP2813973B1 (en) | Method and system for processing video image | |
KR102493930B1 (ko) | 강화학습 기반 신호 제어 장치 및 신호 제어 방법 | |
CN103065325B (zh) | 一种基于彩色颜色距离和图像分割聚合的目标跟踪方法 | |
CN112530170A (zh) | 一种车辆行驶状态检测方法、装置、电子设备及存储介质 | |
JP2011258180A5 (ja) | ||
CN107945523A (zh) | 一种道路车辆检测方法、交通参数检测方法及装置 | |
WO2023088201A1 (zh) | 异常车辆的检测方法、装置及设备 | |
CN104301699B (zh) | 一种图像处理方法及装置 | |
CN111062971A (zh) | 一种基于深度学习多模态的跨摄像头泥头车追踪方法 | |
CN104168444A (zh) | 一种跟踪球机的目标跟踪方法及跟踪球机 | |
CN104318760B (zh) | 一种基于似物性模型的路口违章行为智能检测方法及系统 | |
CN103985252A (zh) | 一种基于跟踪目标时域信息的多车辆投影定位方法 | |
Hasibuan et al. | Detection and tracking different type of cars with YOLO model combination and deep sort algorithm based on computer vision of traffic controlling | |
CN113177509B (zh) | 一种倒车行为识别方法及装置 | |
Cheng | Highway traffic flow estimation for surveillance scenes damaged by rain |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190409 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200325 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200414 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201201 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201214 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6819118 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |