JP7174252B2 - 物体情報処理装置、物体情報処理方法及び物体情報処理プログラム - Google Patents
物体情報処理装置、物体情報処理方法及び物体情報処理プログラム Download PDFInfo
- Publication number
- JP7174252B2 JP7174252B2 JP2019083755A JP2019083755A JP7174252B2 JP 7174252 B2 JP7174252 B2 JP 7174252B2 JP 2019083755 A JP2019083755 A JP 2019083755A JP 2019083755 A JP2019083755 A JP 2019083755A JP 7174252 B2 JP7174252 B2 JP 7174252B2
- Authority
- JP
- Japan
- Prior art keywords
- objects
- information processing
- object information
- group
- grouping
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/292—Multi-camera tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30221—Sports video; Sports image
- G06T2207/30228—Playing field
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Image Analysis (AREA)
Description
図3を参照し、本実施形態の物体情報処理装置1の構成について説明する。物体情報処理装置1は、映像処理装置3の合成したパノラマ映像におけるオブジェクトのトラッキング結果を出力する装置である。より具体的には、物体情報処理装置1は、映像処理装置3から各映像でのオブジェクトのトラッキング結果を受信し、オブジェクトの各映像上の座標(以下、「ローカル座標」と称する)をパノラマ映像上の座標(以下、「グローバル座標」と称する)へ変換し、重複領域で同一と思われるオブジェクトのトラッキング結果を統合する。物体情報処理装置1は、図1の広視野角遠隔監視システムの物体情報統合サーバ200に相当し、映像処理装置3は合成処理サーバ100に相当する。
次に、図4および図5を参照して、本実施形態の物体情報処理について説明する。
次に、図6を参照して、グループ化処理について説明する。グループ化処理は、重複領域内で検出されたオブジェクトに対して実施される。
次に、統合オブジェクトIDを付与する処理について説明する。
11…トラッキング結果受信部
12…グループ化候補判定部
13…グループ化部
14…統合部
3…映像処理装置
100…合成処理サーバ
110…合成処理部
120…エンコード処理部
130…物体検出・トラッキング処理部
200…物体情報統合サーバ
300…デコードサーバ
400…統合物体情報受信サーバ
Claims (5)
- 撮影領域の一部を重ねて撮影された複数の映像データをつないで合成する合成映像上のオブジェクトをトラッキングする物体情報処理装置であって、
前記複数の映像データのそれぞれで検出およびトラッキングされたオブジェクトのうち、前記映像データが重ね合わされた重複領域内に存在するオブジェクトを候補オブジェクトとして抽出する候補抽出部と、
重なり度合いが所定の閾値以上の複数の候補オブジェクトをグループにまとめるグループ化部と、
前記グループおよびグループ化されていない前記オブジェクトに統合オブジェクトIDを付与する統合部と、を備え、
前記グループ化部は、重複領域において映像データが重ねられた数に応じてグループにまとめる候補オブジェクトの数を変え、
前記グループ化部は、前記複数の候補オブジェクトのそれぞれが前記重複領域以外の非重複領域において前記統合オブジェクトIDが成立していた場合、重なり度合いが所定の閾値以上であっても当該複数の候補オブジェクトをグループにまとめない
ことを特徴とする物体情報処理装置。 - 前記グループ化部は、同一の映像データ内の複数の前記重複領域のそれぞれに同じ前記候補オブジェクトを含むグループが存在する場合、当該複数のグループを一つのグループにまとめる
ことを特徴とする請求項1に記載の物体情報処理装置。 - 前記統合部は、生存期間が最も長い前記オブジェクトを含む前記グループまたは生存期間が最も長い前記オブジェクトから順番に、前記統合オブジェクトIDを付与する
ことを特徴とする請求項1または2に記載の物体情報処理装置。 - 撮影領域の一部を重ねて撮影された複数の映像データをつないで合成する合成映像上のオブジェクトをトラッキングする物体情報処理装置による物体情報処理方法であって、
前記複数の映像データのそれぞれで検出およびトラッキングされたオブジェクトのうち、前記映像データが重ね合わされた重複領域内に存在するオブジェクトを候補オブジェクトとして抽出するステップと、
重なり度合いが所定の閾値以上の複数の候補オブジェクトをグループにまとめるステップと、
前記グループおよびグループ化されていない前記オブジェクトに統合オブジェクトIDを付与するステップと、を有し、
前記複数の候補オブジェクトをグループにまとめるステップでは、重複領域において映像データが重ねられた数に応じてグループにまとめる候補オブジェクトの数を変え、
前記複数の候補オブジェクトをグループにまとめるステップでは、前記複数の候補オブジェクトのそれぞれが前記重複領域以外の非重複領域において前記統合オブジェクトIDが成立していた場合、重なり度合いが所定の閾値以上であっても当該複数の候補オブジェクトをグループにまとめない
ことを特徴とする物体情報処理方法。 - 請求項1ないし3のいずれかに記載の物体情報処理装置の各部としてコンピュータを動作させる物体情報処理プログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019083755A JP7174252B2 (ja) | 2019-04-25 | 2019-04-25 | 物体情報処理装置、物体情報処理方法及び物体情報処理プログラム |
PCT/JP2020/016060 WO2020218023A1 (ja) | 2019-04-25 | 2020-04-10 | 物体情報処理装置、物体情報処理方法及び物体情報処理プログラム |
US17/601,664 US20220180639A1 (en) | 2019-04-25 | 2020-04-10 | Object information processing device, object information processing method, and object information processing program |
CN202080030553.5A CN113711583B (zh) | 2019-04-25 | 2020-04-10 | 物体信息处理装置、物体信息处理方法以及计算机可读记录介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019083755A JP7174252B2 (ja) | 2019-04-25 | 2019-04-25 | 物体情報処理装置、物体情報処理方法及び物体情報処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020182100A JP2020182100A (ja) | 2020-11-05 |
JP7174252B2 true JP7174252B2 (ja) | 2022-11-17 |
Family
ID=72941936
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019083755A Active JP7174252B2 (ja) | 2019-04-25 | 2019-04-25 | 物体情報処理装置、物体情報処理方法及び物体情報処理プログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20220180639A1 (ja) |
JP (1) | JP7174252B2 (ja) |
CN (1) | CN113711583B (ja) |
WO (1) | WO2020218023A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20220247970A1 (en) * | 2022-03-14 | 2022-08-04 | Facebook Technologies, Llc | Offloading Visual Frames to a Gateway Device |
US11588910B2 (en) * | 2022-03-14 | 2023-02-21 | Meta Platforms Technologies, Llc | Offloading visual frames to a gateway device |
US11880950B2 (en) | 2022-03-14 | 2024-01-23 | Meta Platforms Technologies, Llc | Selective offload of workloads to edge devices |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013206140A (ja) | 2012-03-28 | 2013-10-07 | Secom Co Ltd | 移動物体追跡装置 |
JP2015201005A (ja) | 2014-04-07 | 2015-11-12 | パナソニック株式会社 | 軌跡解析装置および軌跡解析方法 |
JP2016046639A (ja) | 2014-08-21 | 2016-04-04 | セコム株式会社 | 認証装置 |
JP2016218610A (ja) | 2015-05-18 | 2016-12-22 | 本田技研工業株式会社 | 動作推定装置、ロボット、及び動作推定方法 |
JP2017021446A (ja) | 2015-07-07 | 2017-01-26 | 株式会社リコー | 画像処理装置及び画像処理方法 |
WO2019073920A1 (ja) | 2017-10-12 | 2019-04-18 | ソニー株式会社 | 情報処理装置、移動装置、および方法、並びにプログラム |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102170693B1 (ko) * | 2014-07-18 | 2020-10-27 | 한화테크윈 주식회사 | 영상재생장치 및 영상재생장치에서 영상정보 제공 방법 |
JP6593588B2 (ja) * | 2015-02-16 | 2019-10-23 | パナソニックIpマネジメント株式会社 | 物体検出装置および物体検出方法 |
CN105006003A (zh) * | 2015-07-09 | 2015-10-28 | 北京航空航天大学 | 基于随机投影蕨的实时目标跟踪算法 |
CN106803899B (zh) * | 2015-11-26 | 2019-10-01 | 华为技术有限公司 | 合并图像的方法和装置 |
JP6755713B2 (ja) * | 2016-05-25 | 2020-09-16 | キヤノン株式会社 | 追尾装置、追尾方法及びプログラム |
CN106502475B (zh) * | 2016-10-26 | 2019-07-16 | 青岛海信电器股份有限公司 | 一种红外触控点识别方法、红外触控装置及显示装置 |
JP6865110B2 (ja) * | 2017-05-31 | 2021-04-28 | Kddi株式会社 | オブジェクト追跡方法および装置 |
CN107580199A (zh) * | 2017-09-08 | 2018-01-12 | 深圳市伊码泰珂电子有限公司 | 重叠视域多摄像机协同的目标定位与跟踪系统 |
WO2019180917A1 (ja) * | 2018-03-23 | 2019-09-26 | 日本電気株式会社 | オブジェクト追跡装置、オブジェクト追跡方法、及びオブジェクト追跡プログラム |
-
2019
- 2019-04-25 JP JP2019083755A patent/JP7174252B2/ja active Active
-
2020
- 2020-04-10 US US17/601,664 patent/US20220180639A1/en active Pending
- 2020-04-10 WO PCT/JP2020/016060 patent/WO2020218023A1/ja active Application Filing
- 2020-04-10 CN CN202080030553.5A patent/CN113711583B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013206140A (ja) | 2012-03-28 | 2013-10-07 | Secom Co Ltd | 移動物体追跡装置 |
JP2015201005A (ja) | 2014-04-07 | 2015-11-12 | パナソニック株式会社 | 軌跡解析装置および軌跡解析方法 |
JP2016046639A (ja) | 2014-08-21 | 2016-04-04 | セコム株式会社 | 認証装置 |
JP2016218610A (ja) | 2015-05-18 | 2016-12-22 | 本田技研工業株式会社 | 動作推定装置、ロボット、及び動作推定方法 |
JP2017021446A (ja) | 2015-07-07 | 2017-01-26 | 株式会社リコー | 画像処理装置及び画像処理方法 |
WO2019073920A1 (ja) | 2017-10-12 | 2019-04-18 | ソニー株式会社 | 情報処理装置、移動装置、および方法、並びにプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20220180639A1 (en) | 2022-06-09 |
JP2020182100A (ja) | 2020-11-05 |
WO2020218023A1 (ja) | 2020-10-29 |
CN113711583B (zh) | 2023-05-12 |
CN113711583A (zh) | 2021-11-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7174252B2 (ja) | 物体情報処理装置、物体情報処理方法及び物体情報処理プログラム | |
US10721439B1 (en) | Systems and methods for directing content generation using a first-person point-of-view device | |
CN101421747B (zh) | 组合多个视频流的系统和方法 | |
JP6621063B2 (ja) | カメラ選択方法及び映像配信システム | |
US11721040B2 (en) | Imaging system, calibration method, and calibrator | |
US10116910B2 (en) | Imaging apparatus and method of providing imaging information | |
US20180091704A1 (en) | Video synchronization apparatus, and video synchronization method | |
JP5197910B2 (ja) | デジタル情報信号を受信する装置 | |
EP2993884B1 (en) | Image processing device, image processing method and program | |
US20220256231A1 (en) | Systems and methods for synchronizing data streams | |
GB2517730A (en) | A method and system for producing a video production | |
US20160210516A1 (en) | Method and apparatus for providing multi-video summary | |
WO2020213430A1 (ja) | 映像処理装置、映像処理方法及び映像処理プログラム | |
US20220165308A1 (en) | Point of view video processing and curation platform | |
JP2021119459A (ja) | 生成装置、生成方法 | |
CN107205158A (zh) | 一种基于时间戳的多路音视频流同步解码方法 | |
JP2012015788A (ja) | 映像受信装置、及びその制御方法 | |
KR20100128620A (ko) | 파노라믹 동영상 생성 시스템 | |
KR101868057B1 (ko) | 파노라마 영상 생성 방법 및 그 장치 | |
KR102599664B1 (ko) | 다시점 영상을 전송하기 위한 시스템의 동작 방법 및 이를 수행하는 시스템 | |
WO2014092553A2 (en) | Method and system for splitting and combining images from steerable camera | |
KR102505117B1 (ko) | 원격지 스트리밍에 최적화된 다면 영상 스트리밍 시스템 | |
US20210289194A1 (en) | System, method, and computer program for generating volumetric video | |
WO2013150724A1 (ja) | 送信装置、再生装置及び送受信方法 | |
KR20230098394A (ko) | 원거리의 장면을 모니터링하기 위한 영상 서비스 제공 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210715 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220628 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220802 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221004 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221017 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7174252 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |