JP2020052600A - オブジェクト識別装置、方法およびプログラム - Google Patents
オブジェクト識別装置、方法およびプログラム Download PDFInfo
- Publication number
- JP2020052600A JP2020052600A JP2018179892A JP2018179892A JP2020052600A JP 2020052600 A JP2020052600 A JP 2020052600A JP 2018179892 A JP2018179892 A JP 2018179892A JP 2018179892 A JP2018179892 A JP 2018179892A JP 2020052600 A JP2020052600 A JP 2020052600A
- Authority
- JP
- Japan
- Prior art keywords
- camera
- degree
- image
- identification
- occlusion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Image Analysis (AREA)
Abstract
Description
オブジェクトごとに得られたn+1個の向き推定結果を基に最終的に一つの向きを決定する際に、n+1個の向きの平均を求めただけでは、図8に示したように、推定値が大きく外れた候補ベクトル(図8では、「カメラ4による候補ベクトル」)が含まれていた場合に、推定結果が当該外れ値に強く影響されてしまい、推定精度が低下する。
上記の方法Aでは、各候補ベクトルに対してスコア付けを行ったが、本方法Bでは、各カメラにスコア付けを行う点に特徴がある。方法Bでは、候補ベクトルと正対する方向を向くカメラが最も認識に適しているカメラであるという観点から、候補ベクトルごとに、正対するカメラのスコアが最大となるスコア付けを順次に行う。
Claims (15)
- カメラ映像に基づいてオブジェクトを識別するオブジェクト識別装置において、
オブジェクトを複数の異なる視点で撮影したカメラ映像を取得する手段と、
各オブジェクトの位置を推定する手段と、
各カメラの視点および各オブジェクトの位置に基づいてオブジェクト同士の遮蔽度をカメラごとに計算する手段と、
前記遮蔽度に基づいて各オブジェクトの識別に用いるカメラを選定する手段と、
オブジェクト毎に前記選定したカメラのカメラ映像に基づいて各オブジェクトを識別する手段とを具備したことを特徴とするオブジェクト識別装置。 - 前記オブジェクトがカメラ映像から認識できるIDを保持し、
カメラ映像に基づいて各オブジェクトの向きを推定する手段をさらに具備し、
前記カメラを選定する手段は、各オブジェクトの向きおよび遮蔽度に基づいて各オブジェクトのIDを認識するカメラを選定することを特徴とする請求項1に記載のオブジェクト識別装置。 - 前記各オブジェクトの向きを推定する手段は、
カメラ映像から取得したオブジェクト画像に基づいて各オブジェクトの向きを推定する手段および各オブジェクトの移動ベクトルに基づいて各オブジェクトの向きを推定する手段の少なくとも一方を含むことを特徴とする請求項2に記載のオブジェクト識別装置。 - 前記各オブジェクトの向きを推定する手段は、各向き推定結果の信頼度を取得する手段をさらに具備したことを特徴とする請求項3に記載のオブジェクト識別装置。
- 前記各オブジェクトの向きを推定する手段は、オブジェクト画像に対する深層学習ベースの方向推定を行い、前記向き推定結果の信頼度を取得する手段は、当該深層学習ベースの方向推定における出力層の関数の出力値を信頼度として取得することを特徴とする請求項4に記載のオブジェクト識別装置。
- 前記向き推定結果の信頼度を取得する手段は、移動ベクトルに基づく向き推定において、オブジェクトの移動速度が速いほど高い信頼度を取得することを特徴とする請求項4または5に記載のオブジェクト識別装置。
- 前記カメラを選定する手段は、
オブジェクトごとにID指向方向を計算する手段と、
各オブジェクトのID指向方向ごとに候補ベクトルを算出する手段と、
各候補ベクトルを、前記遮蔽度および信頼度に基づいてスコア付けする手段と、
オブジェクトごとに、指向方向の角度差が所定の閾値を下回る2つの候補ベクトルを統合して一の候補ベクトルを新たに生成し、これを繰り返す手段と、
前記統合された2つの候補ベクトルのスコアを基に前記新たに生成した一の候補ベクトルをスコア付けする手段とを具備し、
スコアが所定の条件を満たす候補ベクトルに基づいてカメラを選定することを特徴とする請求項4ないし6のいずれかに記載のオブジェクト識別装置。 - 前記カメラを選定する手段は、
オブジェクトごとにID指向方向を計算する手段と、
各オブジェクトのID指向方向ごとに候補ベクトルを算出する手段と、
オブジェクトごとに、候補ベクトルの向きと各カメラの向きとに基づいて各カメラに推奨度のスコア付けを行い、これを全ての候補ベクトルについて繰り返して推奨度の累積スコアを求める手段を具備し、
累積スコアが所定の条件を満たす候補ベクトルに基づいてカメラを選定することを特徴とする請求項4ないし6のいずれかに記載のオブジェクト識別装置。 - 前記推奨度の累積スコアを求める手段は、前記候補ベクトルの向きと各カメラの向きとの内積に基づいて各カメラに推奨度のスコア付けを行うことを特徴とする請求項8に記載のオブジェクト識別装置。
- 前記オブジェクトを識別する手段は、オブジェクトのカメラ映像からオブジェクトのIDを含む識別領域を抽出する手段をさらに具備し、
前記抽出した識別領域を対象にID認識を実行することを特徴とする請求項2ないし9のいずれかに記載のオブジェクト識別装置。 - 前記識別領域を抽出する手段は、オブジェクトのカメラ映像から骨格情報を抽出し、当該骨格情報に基づいて識別領域を抽出することを特徴とする請求項10に記載のオブジェクト識別装置。
- 前記遮蔽度を計算する手段は、注目オブジェクトを含む所定幅とカメラとを結ぶ範囲内に他のオブジェクトが存在する割合に基づいて遮蔽度を計算することを特徴とする請求項1ないし11のいずれかに記載のオブジェクト識別装置。
- 前記遮蔽度を計算する手段は、注目オブジェクトの視体積をカメラに投影した際に生じるマスクと、他のオブジェクトの視体積をカメラに投影した際に生じるマスクとの重なり量に基づいて遮蔽度を計算することを特徴とする請求項1ないし12のいずれかに記載のオブジェクト識別装置。
- コンピュータが、カメラ映像に基づいてオブジェクトを識別するオブジェクト識別方法において、
オブジェクトを複数の異なる視点で撮影したカメラ映像を取得する手順と、
各オブジェクトの位置を推定する手順と、
各カメラの視点および各オブジェクトの位置に基づいてオブジェクト同士の遮蔽度をカメラごとに計算する手順と、
前記遮蔽度に基づいて各オブジェクトの識別に用いるカメラを選定する手順と、
オブジェクト毎に前記選定したカメラのカメラ映像に基づいて各オブジェクトを識別する手順とを含むことを特徴とするオブジェクト識別方法。 - カメラ映像に基づいてオブジェクトを識別するオブジェクト識別プログラムにおいて、
オブジェクトを複数の異なる視点で撮影したカメラ映像を取得する手順と、
各オブジェクトの位置を推定する手順と、
各カメラの視点および各オブジェクトの位置に基づいてオブジェクト同士の遮蔽度をカメラごとに計算する手順と、
前記遮蔽度に基づいて各オブジェクトの識別に用いるカメラを選定する手順と、
オブジェクト毎に前記選定したカメラのカメラ映像に基づいて各オブジェクトを識別する手順とを、コンピュータに実行させるオブジェクト識別プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018179892A JP7022040B2 (ja) | 2018-09-26 | 2018-09-26 | オブジェクト識別装置、方法およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018179892A JP7022040B2 (ja) | 2018-09-26 | 2018-09-26 | オブジェクト識別装置、方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020052600A true JP2020052600A (ja) | 2020-04-02 |
JP7022040B2 JP7022040B2 (ja) | 2022-02-17 |
Family
ID=69997187
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018179892A Active JP7022040B2 (ja) | 2018-09-26 | 2018-09-26 | オブジェクト識別装置、方法およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7022040B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022182040A1 (ko) * | 2021-02-24 | 2022-09-01 | 삼성전자 주식회사 | 타겟 영역 내의 객체의 위치를 추적하는 방법 및 이를 수행하는 전자 장치 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005260753A (ja) * | 2004-03-12 | 2005-09-22 | Ntt Docomo Inc | カメラ選択装置、及びカメラ選択方法 |
WO2007074671A1 (ja) * | 2005-12-28 | 2007-07-05 | Matsushita Electric Industrial Co., Ltd. | 物体検出装置、物体検出方法、及び、物体検出用コンピュータプログラム |
JP2007226512A (ja) * | 2006-02-23 | 2007-09-06 | Fujifilm Corp | 特定向き顔判定方法および装置並びにプログラム |
US8279286B2 (en) * | 2007-09-05 | 2012-10-02 | Sony Corporation | Apparatus and method of object tracking |
JP2015114950A (ja) * | 2013-12-13 | 2015-06-22 | 富士通株式会社 | 動作判定方法、動作判定装置および動作判定プログラム |
JP2016054409A (ja) * | 2014-09-03 | 2016-04-14 | キヤノン株式会社 | 映像認識装置、映像認識方法及びプログラム |
-
2018
- 2018-09-26 JP JP2018179892A patent/JP7022040B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005260753A (ja) * | 2004-03-12 | 2005-09-22 | Ntt Docomo Inc | カメラ選択装置、及びカメラ選択方法 |
WO2007074671A1 (ja) * | 2005-12-28 | 2007-07-05 | Matsushita Electric Industrial Co., Ltd. | 物体検出装置、物体検出方法、及び、物体検出用コンピュータプログラム |
JP2007226512A (ja) * | 2006-02-23 | 2007-09-06 | Fujifilm Corp | 特定向き顔判定方法および装置並びにプログラム |
US8279286B2 (en) * | 2007-09-05 | 2012-10-02 | Sony Corporation | Apparatus and method of object tracking |
JP2015114950A (ja) * | 2013-12-13 | 2015-06-22 | 富士通株式会社 | 動作判定方法、動作判定装置および動作判定プログラム |
JP2016054409A (ja) * | 2014-09-03 | 2016-04-14 | キヤノン株式会社 | 映像認識装置、映像認識方法及びプログラム |
Non-Patent Citations (3)
Title |
---|
ABHINAV GUPTA, 外2名: ""COST: An Approach for Camera Selection and Multi-Object Inference Ordering in Dynamic Scenes"", 2007 IEEE 11TH INTERNATIONAL CONFERENCE ON COMPUTER VISION, JPN6021033706, 2007, pages 1 - 8, XP031194331, ISSN: 0004582423 * |
CHANGSONG SHEN, 外2名: ""A Multi-Camera Surveillance System that Estimates Quality-of-View Measurement"", 2007 IEEE INTERNATIONAL CONFERENCE ON IMAGE PROCESSING, JPN6021033710, 2007, pages 193 - 196, ISSN: 0004582421 * |
山崎綾哉, 外3名: ""フィールドスポーツにおける同期多カメラを用いた複数選手のチーム識別と背番号認識による実時間個人識別", 映像情報メディア学会技術報告, vol. 第36巻, 第34号, JPN6021033707, 27 August 2012 (2012-08-27), JP, pages 59 - 62, ISSN: 0004582422 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022182040A1 (ko) * | 2021-02-24 | 2022-09-01 | 삼성전자 주식회사 | 타겟 영역 내의 객체의 위치를 추적하는 방법 및 이를 수행하는 전자 장치 |
Also Published As
Publication number | Publication date |
---|---|
JP7022040B2 (ja) | 2022-02-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10417503B2 (en) | Image processing apparatus and image processing method | |
JP6525453B2 (ja) | オブジェクト位置推定システム、及びそのプログラム | |
EP2707834B1 (en) | Silhouette-based pose estimation | |
EP2858008B1 (en) | Target detecting method and system | |
Sidla et al. | Pedestrian detection and tracking for counting applications in crowded situations | |
JP6295645B2 (ja) | 物体検出方法及び物体検出装置 | |
CN103810475B (zh) | 一种目标物识别方法及装置 | |
US9275472B2 (en) | Real-time player detection from a single calibrated camera | |
US20160275695A1 (en) | System and a method for tracking objects | |
KR20120138627A (ko) | 안면 추적 장치 및 방법 | |
AU2021255130B2 (en) | Artificial intelligence and computer vision powered driving-performance assessment | |
JP3577875B2 (ja) | 移動物体抽出装置 | |
Dornaika et al. | A new framework for stereo sensor pose through road segmentation and registration | |
JP7096175B2 (ja) | オブジェクト抽出方法および装置 | |
Shere et al. | 3D Human Pose Estimation From Multi Person Stereo 360 Scenes. | |
US11521411B2 (en) | System and method for providing multi-camera 3D body part labeling and performance metrics | |
JP3629935B2 (ja) | 移動体の速度計測方法およびその方法を用いた速度計測装置 | |
JP7022040B2 (ja) | オブジェクト識別装置、方法およびプログラム | |
Lee et al. | independent object detection based on two-dimensional contours and three-dimensional sizes | |
CN116259001A (zh) | 一种多视角融合的三维行人姿态估计与追踪方法 | |
CN115345927A (zh) | 展品导览方法及相关装置、移动终端和存储介质 | |
CN112446355B (zh) | 一种公共场所行人识别方法及人流统计系统 | |
JP2019101526A (ja) | オブジェクト識別装置および方法 | |
Li et al. | Pedestrian detection algorithm based on video sequences and laser point cloud | |
JP2011043863A (ja) | 対象領域判定・追跡装置、方法、プログラム及び対象領域判定装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200806 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210819 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210901 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211019 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220126 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220204 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7022040 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |