JP2021103811A - 情報処理装置、映像の要約方法、およびプログラム - Google Patents
情報処理装置、映像の要約方法、およびプログラム Download PDFInfo
- Publication number
- JP2021103811A JP2021103811A JP2019233228A JP2019233228A JP2021103811A JP 2021103811 A JP2021103811 A JP 2021103811A JP 2019233228 A JP2019233228 A JP 2019233228A JP 2019233228 A JP2019233228 A JP 2019233228A JP 2021103811 A JP2021103811 A JP 2021103811A
- Authority
- JP
- Japan
- Prior art keywords
- video
- objects
- information processing
- locus
- person
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 22
- 238000000034 method Methods 0.000 title claims description 28
- 238000000605 extraction Methods 0.000 claims description 32
- 230000002123 temporal effect Effects 0.000 claims description 2
- 230000008569 process Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 230000004048 modification Effects 0.000 description 6
- 238000012986 modification Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 4
- 238000002922 simulated annealing Methods 0.000 description 4
- KNMAVSAGTYIFJF-UHFFFAOYSA-N 1-[2-[(2-hydroxy-3-phenoxypropyl)amino]ethylamino]-3-phenoxypropan-2-ol;dihydrochloride Chemical compound Cl.Cl.C=1C=CC=CC=1OCC(O)CNCCNCC(O)COC1=CC=CC=C1 KNMAVSAGTYIFJF-UHFFFAOYSA-N 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 241000282412 Homo Species 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/16—Spatio-temporal transformations, e.g. video cubism
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
- G06V20/47—Detecting features for summarising video content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30232—Surveillance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30241—Trajectory
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
- Television Signal Processing For Recording (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
なお、本発明は、上述の実施形態の一部または1以上の機能を実現するプログラムによっても実現可能である。すなわち、そのプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータ(またはCPUやMPU等)における1つ以上のプロセッサがプログラムを読出し実行する処理により実現可能である。また、そのプログラムをコンピュータ可読な記録媒体に記録して提供してもよい。
101 制御部
102 受信部
103 判定部
104 抽出部
105 生成部
Claims (8)
- 元映像の中で検知された対象物の出現順序を変更することにより、要約映像を生成する情報処理装置において、
前記元映像の中で検知された複数の対象物の関係を特定する特定手段と、
前記特定手段により関係を特定された複数の対象物の動作軌跡の配置については、元映像から相対的な出現順序を変えないで、それぞれが時間方向で重ならないように決定する決定手段と、
前記決定手段により決定された配置に基づき、前記映像の要約映像を生成する生成手段と、
を有することを特徴とする情報処理装置。 - 前記複数の対象物は、人、二輪車、四輪車、船、ヘリコプター、飛行機、移動のための足が付属した移動体、車輪が付属した移動体、プロペラが付属した移動体、または翼が付属した移動体のいずれか1つであることを特徴とする請求項1に記載の情報処理装置。
- 前記決定手段は、前記複数の対象物のうち、第1の対象物の動作軌跡の始点または終点と、第2の対象物の停止を示す点との、時間的および空間的な関係に基づいて、前記第1の対象物が前記第2の対象物に対し乗降したと判定する請求項1に記載の情報処理装置。
- 前記決定手段は、対象物の種別を外観の画像認識により決定することを特徴とする請求項1に記載の情報処理装置。
- ユーザが軌跡を入力する入力手段と、
前記入力手段によって入力された前記軌跡に対し所定の条件に合致する動作軌跡を有する対象物を抽出する抽出手段と、
を有することを特徴とする請求項1に記載の情報処理装置。 - 前記複数の対象物の各々の一部の動作軌跡を組み合わせた軌跡を抽出対象の動作軌跡とすることを特徴とする請求項5に記載の情報処理装置。
- 元映像の中で検知された対象物の出現順序を変更することにより、要約映像を生成する映像の要約方法において、
前記元映像の中で検知された複数の対象物の関係を特定する特定ステップと、
前記特定ステップにより関係を特定された複数の対象物の動作軌跡の配置については、元映像から出現順序を変えないで、それぞれが時間方向で重ならないように決定する決定ステップと、
前記決定ステップにより決定された配置に基づき、前記映像の要約映像を生成する生成ステップと、
を有することを特徴とする映像の要約方法。 - コンピュータを、請求項1から6のいずれか1項に記載の情報処理装置の各手段として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019233228A JP7451172B2 (ja) | 2019-12-24 | 2019-12-24 | 情報処理装置、映像の要約方法、およびプログラム |
US17/124,258 US11869197B2 (en) | 2019-12-24 | 2020-12-16 | Information processing apparatus, video synopsis method, and storage medium for video synopsis |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019233228A JP7451172B2 (ja) | 2019-12-24 | 2019-12-24 | 情報処理装置、映像の要約方法、およびプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021103811A true JP2021103811A (ja) | 2021-07-15 |
JP2021103811A5 JP2021103811A5 (ja) | 2022-12-23 |
JP7451172B2 JP7451172B2 (ja) | 2024-03-18 |
Family
ID=76439284
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019233228A Active JP7451172B2 (ja) | 2019-12-24 | 2019-12-24 | 情報処理装置、映像の要約方法、およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11869197B2 (ja) |
JP (1) | JP7451172B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115988153A (zh) * | 2022-11-30 | 2023-04-18 | 天翼云科技有限公司 | 一种用于视频摘要中帧合成的目标排列方法及系统 |
JP7482090B2 (ja) | 2021-08-27 | 2024-05-13 | 株式会社東芝 | 推定装置、推定方法及びプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009516257A (ja) * | 2005-11-15 | 2009-04-16 | イッサム リサーチ ディベロップメント カンパニー オブ ザ ヘブライ ユニバーシティー オブ エルサレム | 映像概要を生成する方法およびシステム |
US20150127626A1 (en) * | 2013-11-07 | 2015-05-07 | Samsung Tachwin Co., Ltd. | Video search system and method |
JP2015115955A (ja) * | 2013-12-13 | 2015-06-22 | 華為技術有限公司Huawei Technologies Co.,Ltd. | 映像要約方法および装置 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8311277B2 (en) | 2007-02-01 | 2012-11-13 | Yissum Research Development Company Of The Hebrew University Of Jerusalem | Method and system for video indexing and video synopsis |
EP2790152B1 (en) * | 2013-04-12 | 2015-12-02 | Alcatel Lucent | Method and device for automatic detection and tracking of one or multiple objects of interest in a video |
KR102282465B1 (ko) * | 2014-10-27 | 2021-07-27 | 한화테크윈 주식회사 | 로이터링 시각화 장치 및 방법 |
KR102375864B1 (ko) * | 2015-02-10 | 2022-03-18 | 한화테크윈 주식회사 | 요약 영상 브라우징 시스템 및 방법 |
US10887507B2 (en) * | 2017-11-01 | 2021-01-05 | Objectvideo Labs, Llc | Intelligent self-powered camera |
-
2019
- 2019-12-24 JP JP2019233228A patent/JP7451172B2/ja active Active
-
2020
- 2020-12-16 US US17/124,258 patent/US11869197B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009516257A (ja) * | 2005-11-15 | 2009-04-16 | イッサム リサーチ ディベロップメント カンパニー オブ ザ ヘブライ ユニバーシティー オブ エルサレム | 映像概要を生成する方法およびシステム |
US20150127626A1 (en) * | 2013-11-07 | 2015-05-07 | Samsung Tachwin Co., Ltd. | Video search system and method |
JP2015115955A (ja) * | 2013-12-13 | 2015-06-22 | 華為技術有限公司Huawei Technologies Co.,Ltd. | 映像要約方法および装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7482090B2 (ja) | 2021-08-27 | 2024-05-13 | 株式会社東芝 | 推定装置、推定方法及びプログラム |
CN115988153A (zh) * | 2022-11-30 | 2023-04-18 | 天翼云科技有限公司 | 一种用于视频摘要中帧合成的目标排列方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
US11869197B2 (en) | 2024-01-09 |
US20210192749A1 (en) | 2021-06-24 |
JP7451172B2 (ja) | 2024-03-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10769459B2 (en) | Method and system for monitoring driving behaviors | |
JP7110359B2 (ja) | ビデオチューブを使用した行動認識方法 | |
US12002236B2 (en) | Automated gesture identification using neural networks | |
JP6695503B2 (ja) | 車両の運転者の状態を監視するための方法及びシステム | |
JP7011608B2 (ja) | 3次元空間内の姿勢推定 | |
US11854275B2 (en) | Systems and methods for detecting symptoms of occupant illness | |
WO2020226696A1 (en) | System and method of generating a video dataset with varying fatigue levels by transfer learning | |
CN106960473B (zh) | 一种行为感知系统及方法 | |
JP7451172B2 (ja) | 情報処理装置、映像の要約方法、およびプログラム | |
CN113867531A (zh) | 交互方法、装置、设备及计算机可读存储介质 | |
US20220189038A1 (en) | Object tracking apparatus, control method, and program | |
WO2022123309A1 (en) | Occlusion-aware prediction of human behavior | |
CN115562499B (zh) | 基于智能指环的精准交互控制方法、系统及存储介质 | |
CN111976744A (zh) | 基于打车的控制方法、装置及自动驾驶汽车 | |
US20220092860A1 (en) | Extended reality for moving platforms | |
JP2019029747A (ja) | 画像監視システム | |
KR101862545B1 (ko) | 로봇을 이용한 구조구난 서비스 제공방법 및 시스템 | |
CN106951077B (zh) | 一种提示方法及第一电子设备 | |
CN111813995A (zh) | 一种基于时空关系的行人提取物品行为检测方法及系统 | |
CN118043864A (zh) | 障碍物识别方法、装置、存储介质及电子设备 | |
CN112329508A (zh) | 手势识别方法、装置、设备及可读存储介质 | |
JP2022117096A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
US11745647B2 (en) | Method for sending information to an individual located in the environment of a vehicle | |
JP5924991B2 (ja) | 画像処理装置、画像処理装置の制御方法、およびプログラム | |
WO2022208669A1 (ja) | 情報処理装置、情報処理方法、及び、記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221214 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221214 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230915 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230926 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231117 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20231213 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240206 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240306 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7451172 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |