JP6659524B2 - 移動体追跡装置、表示装置および移動体追跡方法 - Google Patents
移動体追跡装置、表示装置および移動体追跡方法 Download PDFInfo
- Publication number
- JP6659524B2 JP6659524B2 JP2016225527A JP2016225527A JP6659524B2 JP 6659524 B2 JP6659524 B2 JP 6659524B2 JP 2016225527 A JP2016225527 A JP 2016225527A JP 2016225527 A JP2016225527 A JP 2016225527A JP 6659524 B2 JP6659524 B2 JP 6659524B2
- Authority
- JP
- Japan
- Prior art keywords
- tracking
- information
- unit
- moving object
- tracking information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/223—Analysis of motion using block-matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
- G06V40/173—Classification, e.g. identification face re-identification, e.g. recognising unknown faces across different face tracks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30241—Trajectory
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
- Closed-Circuit Television Systems (AREA)
Description
図1は、本実施形態の移動体追跡システム1の概略構成の一例を示す図である。図1に示すように、移動体追跡システム1は、2つのカメラ10Aおよび10Bと、移動体追跡装置20と、を含む。以下の説明では、カメラ10Aとカメラ10Bを互いに区別しない場合は、単に「カメラ10」と称する。図1の例では、移動体追跡システム1に含まれるカメラ10の台数は2台であるが、これに限らず、3台以上のカメラ10が含まれる形態であってもよいし、1台のカメラ10が含まれる形態であってもよい。各カメラ10と移動体追跡装置20は、無線または有線で相互に接続されている。
なお、例えば追跡部212の機能はカメラ10に設けられる形態であってもよい。この場合、移動体追跡装置20は、取得部211および追跡部212の代わりに、追跡情報群を取得する機能を有する形態となる。要するに、移動体追跡システム1が、取得部211、追跡部212、第1の対応付け部213、第2の対応付け部214、出力部215を有する形態であればよい。
次に、第2の実施形態について説明する。上述の第1の実施形態と共通する部分については適宜に説明を省略する。本実施形態では、図9は、第2の実施形態の移動体追跡装置20が有する機能の一例を示す図である。図9に示すように、移動体追跡装置20は、選択部216をさらに有する点で上述の第1の実施形態と相違する。選択部216は、時間的に連続する複数の画像に含まれる何れかの移動体を選択する。選択の方法は任意であり、例えば選択部216は、取得部211により取得された画像に対するタッチ操作やマウス操作に応じて、画像に映り込んだ歩行者を選択することもできるし、顔画像をクエリとして画像に映り込んだ歩行者(人物)を検索した後、類似度の高い順に表示し、タッチ操作やマウス操作に応じて、何れかの歩行者を選択してもよい。また、例えば画像から切り出した人物画像を並べて表示し、タッチ操作やマウス操作に応じて、何れかの人物画像(歩行者)を選択してもよい。
図11は、第2の実施形態の変形例の移動体追跡装置(表示装置)20が有する機能の一例を示す図である。図11に示すように、移動体追跡装置20は、指定部217をさらに有する。指定部217は期間を指定する。期間の指定方法は任意であり、例えば指定部217は、図12のようなカレンダー画像500を表示し、カレンダー画像500内の何れかの日付に対するタッチ操作やマウス操作を受け付けた場合、該日付に対応する期間(1日)を指定することができる。
10 カメラ
20 移動体追跡装置
211 取得部
212 追跡部
213 第1の対応付け部
214 第2の対応付け部
215 出力部
216 選択部
217 指定部
Claims (9)
- 複数の画像を取得する取得部と、
前記画像に含まれる移動体を追跡した情報を示す複数の追跡情報を生成する追跡部と、
相互の時間差が閾値以下の複数の前記追跡情報を対象として対応付けた第1の対応追跡情報を生成する第1の対応付け部と、
前記第1の対応追跡情報、および、前記第1の対応付け部により対応付けられなかった前記追跡情報を対象として、前記移動体を特定可能な認証情報に基づいて対応付けた第2の対応追跡情報を生成する第2の対応付け部と、
前記第2の対応追跡情報を出力する出力部と、を備える、
移動体追跡装置。 - 前記取得部は、複数のカメラごとに、前記カメラで撮像された複数の前記画像を取得し、
前記第1の対応付け部は、予め定められた前記カメラの組ごとに、前記第1の対応追跡情報を生成する、
請求項1に記載の移動体追跡装置。 - 前記移動体は人物であり、
前記認証情報は生体情報を含む、
請求項1または2に記載の移動体追跡装置。 - 前記生体情報は顔画像または指紋画像を含む、
請求項3に記載の移動体追跡装置。 - 前記移動体は人物であり、
前記認証情報は前記人物の個人情報を含む、
請求項1乃至4のうちの何れか1項に記載の移動体追跡装置。 - 前記第1の対応付け部は、類似度が閾値以上の前記追跡情報同士を対応付ける、
請求項1乃至5のうちの何れか1項に記載の移動体追跡装置。 - 複数の画像に含まれる何れかの移動体を選択する選択部と、
前記選択部により選択された前記移動体の移動軌跡と、前記移動軌跡上の1以上の点に対応する1以上の前記画像と、を並べて表示する制御を行う表示制御部と、を備える、
表示装置。 - 期間を指定する指定部をさらに備え、
前記表示制御部は、前記選択部により選択された前記移動体の、前記指定部により指定された期間に対応する前記移動軌跡と、前記移動軌跡上の1以上の点に対応する1以上の前記画像とを並べて表示する制御を行う、
請求項7に記載の表示装置。 - 複数の画像を取得する取得ステップと、
前記画像に含まれる移動体を追跡した情報を示す複数の追跡情報を生成する追跡ステップと、
相互の時間差が閾値以下の複数の前記追跡情報を対象として、前記追跡情報同士を対応付けた第1の対応追跡情報を生成する第1の対応付けステップと、
前記物体を特定可能な認証情報に基づいて、前記第1の対応追跡情報同士を対応付けた第2の対応追跡情報を生成する第2の対応付けステップと、
前記第2の対応追跡情報を出力する出力ステップと、を含む、
移動体追跡方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016225527A JP6659524B2 (ja) | 2016-11-18 | 2016-11-18 | 移動体追跡装置、表示装置および移動体追跡方法 |
US15/668,114 US10672133B2 (en) | 2016-11-18 | 2017-08-03 | Moving object tracking device, display device, and moving object tracking method |
EP17187720.2A EP3324618B1 (en) | 2016-11-18 | 2017-08-24 | Moving object tracking device, display device and moving object tracking method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016225527A JP6659524B2 (ja) | 2016-11-18 | 2016-11-18 | 移動体追跡装置、表示装置および移動体追跡方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018082408A JP2018082408A (ja) | 2018-05-24 |
JP6659524B2 true JP6659524B2 (ja) | 2020-03-04 |
Family
ID=59886993
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016225527A Active JP6659524B2 (ja) | 2016-11-18 | 2016-11-18 | 移動体追跡装置、表示装置および移動体追跡方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10672133B2 (ja) |
EP (1) | EP3324618B1 (ja) |
JP (1) | JP6659524B2 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190190550A1 (en) * | 2016-10-14 | 2019-06-20 | NanoThings, Inc. | Item status tracking system and method |
US11023739B2 (en) * | 2016-11-21 | 2021-06-01 | Nec Corporation | Flow line combining device, flow line combining method, and recording medium |
JP6648769B2 (ja) * | 2018-01-12 | 2020-02-14 | 日本電気株式会社 | 顔認証装置 |
SG10201807675TA (en) * | 2018-09-06 | 2020-04-29 | Nec Asia Pacific Pte Ltd | Duration and Potential Region of Interest for Suspicious Activities |
CN110060276B (zh) * | 2019-04-18 | 2023-05-16 | 腾讯科技(深圳)有限公司 | 对象追踪方法、追踪处理方法、相应的装置、电子设备 |
TWI719591B (zh) * | 2019-08-16 | 2021-02-21 | 緯創資通股份有限公司 | 物件追蹤方法及其電腦系統 |
US10909392B1 (en) * | 2019-12-27 | 2021-02-02 | Lyft, Inc. | Systems and methods for computer-based labeling of sensor data captured by a vehicle |
CN111436941B (zh) * | 2020-03-23 | 2021-12-07 | 未来穿戴技术有限公司 | 潜在疾病预防的提醒系统及方法以及服务器 |
CN111784730B (zh) * | 2020-07-01 | 2024-05-03 | 杭州海康威视数字技术股份有限公司 | 一种对象跟踪方法、装置、电子设备及存储介质 |
US11640671B2 (en) * | 2021-03-09 | 2023-05-02 | Motorola Solutions, Inc. | Monitoring system and method for identifying an object of interest after the object of interest has undergone a change in appearance |
CN113377977A (zh) * | 2021-06-17 | 2021-09-10 | 深圳市睿联技术股份有限公司 | 一种视频信息生成方法、装置、系统和存储介质 |
CN115019241B (zh) * | 2022-08-05 | 2022-11-01 | 江西中业智能科技有限公司 | 一种行人识别与追踪方法、装置、可读存储介质及设备 |
Family Cites Families (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS476535Y1 (ja) | 1968-03-21 | 1972-03-07 | ||
US4893182A (en) * | 1988-03-18 | 1990-01-09 | Micronyx, Inc. | Video tracking and display system |
US5892554A (en) * | 1995-11-28 | 1999-04-06 | Princeton Video Image, Inc. | System and method for inserting static and dynamic images into a live video broadcast |
US20090231436A1 (en) | 2001-04-19 | 2009-09-17 | Faltesek Anthony E | Method and apparatus for tracking with identification |
JP4195991B2 (ja) * | 2003-06-18 | 2008-12-17 | パナソニック株式会社 | 監視映像モニタリングシステム、監視映像生成方法、および監視映像モニタリングサーバ |
JP4650669B2 (ja) * | 2004-11-04 | 2011-03-16 | 富士ゼロックス株式会社 | 動体認識装置 |
JP2006236255A (ja) * | 2005-02-28 | 2006-09-07 | Mitsubishi Electric Corp | 人物追跡装置および人物追跡システム |
JP4706535B2 (ja) | 2006-03-30 | 2011-06-22 | 株式会社日立製作所 | 複数カメラを用いた移動物体監視装置 |
JP2008035301A (ja) | 2006-07-31 | 2008-02-14 | Hitachi Ltd | 移動体追跡装置 |
JP2009110408A (ja) * | 2007-10-31 | 2009-05-21 | Toshiba Tec Corp | 動線編集装置及び動線編集プログラム |
WO2010044186A1 (ja) * | 2008-10-17 | 2010-04-22 | パナソニック株式会社 | 動線作成システム、動線作成装置及び3次元動線表示装置 |
WO2010113929A1 (ja) * | 2009-03-31 | 2010-10-07 | 日本電気株式会社 | 追尾対象判定装置、追尾対象判定方法、および追尾対象判定プログラム |
US9430923B2 (en) * | 2009-11-30 | 2016-08-30 | Innovative Signal Analysis, Inc. | Moving object detection, tracking, and displaying systems |
JP5476955B2 (ja) * | 2009-12-04 | 2014-04-23 | ソニー株式会社 | 画像処理装置および画像処理方法、並びにプログラム |
US8620070B2 (en) * | 2011-05-31 | 2013-12-31 | Korean Electronics Technology Institute | Corresponding image processing method for compensating colour |
RU2600540C2 (ru) * | 2012-01-17 | 2016-10-20 | Сони Корпорейшн | Устройство и способ обработки информации, и программа |
US10095954B1 (en) * | 2012-01-17 | 2018-10-09 | Verint Systems Ltd. | Trajectory matching across disjointed video views |
US8928772B2 (en) * | 2012-09-21 | 2015-01-06 | Eastman Kodak Company | Controlling the sharpness of a digital image |
US8724919B2 (en) * | 2012-09-21 | 2014-05-13 | Eastman Kodak Company | Adjusting the sharpness of a digital image |
JP2014186547A (ja) | 2013-03-22 | 2014-10-02 | Toshiba Corp | 移動物体追跡システム、方法及びプログラム |
JP6273685B2 (ja) * | 2013-03-27 | 2018-02-07 | パナソニックIpマネジメント株式会社 | 追尾処理装置及びこれを備えた追尾処理システム並びに追尾処理方法 |
JP6206804B2 (ja) * | 2013-09-27 | 2017-10-04 | パナソニックIpマネジメント株式会社 | 移動体追跡装置、移動体追跡システムおよび移動体追跡方法 |
JP6344953B2 (ja) * | 2014-04-07 | 2018-06-20 | パナソニック株式会社 | 軌跡解析装置および軌跡解析方法 |
JP6163466B2 (ja) * | 2014-08-21 | 2017-07-12 | セコム株式会社 | 認証装置 |
JP6500374B2 (ja) | 2014-09-11 | 2019-04-17 | 富士ゼロックス株式会社 | 画像処理装置及び画像処理プログラム |
JP6377533B2 (ja) * | 2015-01-06 | 2018-08-22 | Kddi株式会社 | オクルージョン発生時に専用の識別器を用いて物体を追跡する装置、プログラム及び方法 |
JP5999394B2 (ja) * | 2015-02-20 | 2016-09-28 | パナソニックIpマネジメント株式会社 | 追跡支援装置、追跡支援システムおよび追跡支援方法 |
JP6495705B2 (ja) | 2015-03-23 | 2019-04-03 | 株式会社東芝 | 画像処理装置、画像処理方法、画像処理プログラムおよび画像処理システム |
US9607509B2 (en) * | 2015-04-08 | 2017-03-28 | Sap Se | Identification of vehicle parking using data from vehicle sensor network |
JP6412998B1 (ja) * | 2017-09-29 | 2018-10-24 | 株式会社Qoncept | 動体追跡装置、動体追跡方法、動体追跡プログラム |
-
2016
- 2016-11-18 JP JP2016225527A patent/JP6659524B2/ja active Active
-
2017
- 2017-08-03 US US15/668,114 patent/US10672133B2/en active Active
- 2017-08-24 EP EP17187720.2A patent/EP3324618B1/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP3324618A1 (en) | 2018-05-23 |
JP2018082408A (ja) | 2018-05-24 |
US20180144481A1 (en) | 2018-05-24 |
EP3324618B1 (en) | 2024-09-11 |
US10672133B2 (en) | 2020-06-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6659524B2 (ja) | 移動体追跡装置、表示装置および移動体追跡方法 | |
US11113587B2 (en) | System and method for appearance search | |
US10846554B2 (en) | Hash-based appearance search | |
EP3418944A2 (en) | Information processing apparatus, information processing method, and program | |
Durga et al. | A ResNet deep learning based facial recognition design for future multimedia applications | |
JP6835218B2 (ja) | 群衆状態認識装置、学習方法および学習プログラム | |
JP6532190B2 (ja) | 画像検索装置、画像検索方法 | |
EP3244323B1 (en) | Image processing apparatus, image processing method, search apparatus, and computer program | |
JP6833617B2 (ja) | 移動体追跡装置、移動体追跡方法およびプログラム | |
JP2013232060A (ja) | 画像認識装置、その制御方法、および制御プログラム、並びに撮像装置および表示装置 | |
US20180144074A1 (en) | Retrieving apparatus, display device, and retrieving method | |
D’Eusanio et al. | Manual annotations on depth maps for human pose estimation | |
CA3011713A1 (en) | Hash-based appearance search | |
AU2019303730B2 (en) | Hash-based appearance search | |
JP2015184906A (ja) | 肌色検出条件決定装置、肌色検出条件決定方法及び肌色検出条件決定用コンピュータプログラム | |
KR101621157B1 (ko) | Mct를 이용한 얼굴 인식 장치 및 그 방법 | |
Kumar et al. | A comparative analysis on the performance of different handcrafted descriptors over thermal and low resolution visible image dataset | |
JP2016207106A (ja) | 物体検出における誤検出低減方法および装置 | |
Wang et al. | Dynamic human object recognition by combining color and depth information with a clothing image histogram |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170519 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180912 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190606 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190618 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200107 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200206 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6659524 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |