JP2011008509A - 重要情報抽出方法および装置 - Google Patents
重要情報抽出方法および装置 Download PDFInfo
- Publication number
- JP2011008509A JP2011008509A JP2009151022A JP2009151022A JP2011008509A JP 2011008509 A JP2011008509 A JP 2011008509A JP 2009151022 A JP2009151022 A JP 2009151022A JP 2009151022 A JP2009151022 A JP 2009151022A JP 2011008509 A JP2011008509 A JP 2011008509A
- Authority
- JP
- Japan
- Prior art keywords
- important
- frame
- video
- extracting
- representative
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
【解決手段】映像から特徴量を抽出する特徴量抽出部102と、特徴量に基づいて映像を複数のショットに分割するショット分割部103と、重要オブジェクトが出現する重要フレームの代表的な特徴量を記憶するデータベース108と、各ショットから代表フレームを抽出する代表フレーム抽出部104bと、各代表フレームから抽出された重要フレーム候補を評価する重要フレーム候補評価部106と、映像のメタ情報を取得するメタ情報取得部110と、メタ情報および各重要フレーム候補の評価値に基づいて、重要フレーム候補の中から重要フレームを決定する重要フレーム決定部107とを具備した。
【選択図】図1
Description
Claims (6)
- 映像を解析して重要情報を抽出する重要情報抽出装置において、
映像から特徴量を抽出する手段と、
前記特徴量に基づいて映像を複数のショットに分割する手段と、
重要オブジェクトが出現する重要フレームの代表的な特徴量を記憶するデータベースと、
前記各ショットから代表フレームを抽出する手段と、
前記代表フレームから前記特徴量に基づいて重要フレーム候補を抽出する手段と、
前記映像のメタ情報を取得する手段と、
前記重要フレーム候補の特徴量を前記重要フレームの代表的な特徴量と比較して各重要フレーム候補を評価する手段と、
前記メタ情報および各重要フレーム候補の評価値に基づいて、前記重要フレーム候補の中から重要フレームを抽出する手段とを具備したことを特徴とする重要情報抽出装置。 - 前記データベースにはオブジェクトの種別ごとに固有の特徴量が記憶され、
前記評価手段は、各重要フレーム候補の特徴量を前記オブジェクトの種別ごとに記憶された各固有特徴量と比較してオブジェクト種別ごとに評価値を算出し、
前記メタ情報には、重要オブジェクトの出現回数、出現順序およびオブジェクト種別が記述されており、
前記重要フレームを抽出する手段は、
重要フレーム候補の集合から、前記重要オブジェクトの出現順序および出現回数に応じた組合せで重要フレーム候補を抽出する手段と、
前記抽出された各重要フレーム候補のオブジェクト種別毎の評価値を、前記各重要オブジェクトの種別に基づいて加算し、その総和が最大となる組合せの重要フレーム候補を重要フレームとして抽出する手段とを具備したことを特徴とする請求項1に記載の重要情報抽出装置。 - 前記代表フレームを抽出する手段は、静止画像区間のショットから代表フレームを抽出することを特徴とする請求項1または2に記載の重要情報抽出装置。
- 前記代表フレームを抽出する手段は、動物体フォロー区間のショットから代表フレームを抽出することを特徴とする請求項1ないし3のいずれかに記載の重要情報抽出装置。
- 前記重要フレームをサムネイル化して一覧表示する手段をさらに具備し、
各サムネイル画像には、前記映像を各重要フレームの位置から再生させるための情報が紐付けられていることを特徴とする請求項1ないし4のいずれかに記載の重要情報抽出装置。 - 映像を解析して重要情報を抽出する重要情報抽出方法において、
映像から特徴量を抽出する手順と、
前記特徴量に基づいて映像を複数のショットに分割する手順と、
前記各ショットから代表フレームを抽出する手順と、
前記代表フレームから前記特徴量に基づいて、重要オブジェクトが出現する重要フレームの候補を抽出する手順と、
前記映像のメタ情報を取得する手順と、
前記重要フレーム候補の特徴量を、重要フレームの代表的な特徴量と比較して各重要フレーム候補を評価する手順と、
前記メタ情報および各重要フレーム候補の評価値に基づいて、前記重要フレーム候補の中から重要フレームを抽出する手順とを含むことを特徴とする重要情報抽出方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009151022A JP5360979B2 (ja) | 2009-06-25 | 2009-06-25 | 重要情報抽出方法および装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009151022A JP5360979B2 (ja) | 2009-06-25 | 2009-06-25 | 重要情報抽出方法および装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011008509A true JP2011008509A (ja) | 2011-01-13 |
JP5360979B2 JP5360979B2 (ja) | 2013-12-04 |
Family
ID=43565093
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009151022A Expired - Fee Related JP5360979B2 (ja) | 2009-06-25 | 2009-06-25 | 重要情報抽出方法および装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5360979B2 (ja) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015126510A (ja) * | 2013-12-27 | 2015-07-06 | 富士ゼロックス株式会社 | 代表フレーム選定システム、代表フレーム選定プログラム |
CN105956999A (zh) * | 2016-04-28 | 2016-09-21 | 努比亚技术有限公司 | 缩略图生成装置和方法 |
JP2017005442A (ja) * | 2015-06-09 | 2017-01-05 | 日本放送協会 | コンテンツ生成装置およびプログラム |
JP2017045111A (ja) * | 2015-08-24 | 2017-03-02 | 日本電信電話株式会社 | コンテンツ情報提供装置、コンテンツ表示装置、オブジェクトメタデータのデータ構造、イベントメタデータのデータ構造、コンテンツ情報提供方法、コンテンツ情報提供プログラムおよびコンテンツ情報提供システム |
JP2017112448A (ja) * | 2015-12-15 | 2017-06-22 | 日本放送協会 | 映像シーン分割装置及び映像シーン分割プログラム |
JP2019532422A (ja) * | 2016-09-20 | 2019-11-07 | フェイスブック,インク. | オンライン・ソーシャル・ネットワーク上での動画のキーフレームの表示 |
CN111615008A (zh) * | 2020-05-18 | 2020-09-01 | 南京莱科智能工程研究院有限公司 | 基于多设备体验的智能摘要生成和字幕阅读系统 |
CN113453055A (zh) * | 2020-03-25 | 2021-09-28 | 华为技术有限公司 | 一种生成视频缩略图的方法、装置和电子设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09233422A (ja) * | 1996-02-26 | 1997-09-05 | Oki Electric Ind Co Ltd | 動画像処理システムにおける動画像情報検出装置 |
JP2002199332A (ja) * | 2000-12-27 | 2002-07-12 | Kddi Corp | オーディオ概要情報、オーディオビデオ概要情報の抽出装置、再生装置、および記録媒体 |
JP2007079736A (ja) * | 2005-09-12 | 2007-03-29 | Ricoh Co Ltd | データ編集装置、データ編集方法およびデータ編集プログラム |
JP2009081575A (ja) * | 2007-09-25 | 2009-04-16 | Toshiba Corp | 映像を出力する装置、方法およびシステム |
JP2009088978A (ja) * | 2007-09-28 | 2009-04-23 | Toshiba Corp | 電子機器および画像表示制御方法 |
-
2009
- 2009-06-25 JP JP2009151022A patent/JP5360979B2/ja not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09233422A (ja) * | 1996-02-26 | 1997-09-05 | Oki Electric Ind Co Ltd | 動画像処理システムにおける動画像情報検出装置 |
JP2002199332A (ja) * | 2000-12-27 | 2002-07-12 | Kddi Corp | オーディオ概要情報、オーディオビデオ概要情報の抽出装置、再生装置、および記録媒体 |
JP2007079736A (ja) * | 2005-09-12 | 2007-03-29 | Ricoh Co Ltd | データ編集装置、データ編集方法およびデータ編集プログラム |
JP2009081575A (ja) * | 2007-09-25 | 2009-04-16 | Toshiba Corp | 映像を出力する装置、方法およびシステム |
JP2009088978A (ja) * | 2007-09-28 | 2009-04-23 | Toshiba Corp | 電子機器および画像表示制御方法 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015126510A (ja) * | 2013-12-27 | 2015-07-06 | 富士ゼロックス株式会社 | 代表フレーム選定システム、代表フレーム選定プログラム |
JP2017005442A (ja) * | 2015-06-09 | 2017-01-05 | 日本放送協会 | コンテンツ生成装置およびプログラム |
JP2017045111A (ja) * | 2015-08-24 | 2017-03-02 | 日本電信電話株式会社 | コンテンツ情報提供装置、コンテンツ表示装置、オブジェクトメタデータのデータ構造、イベントメタデータのデータ構造、コンテンツ情報提供方法、コンテンツ情報提供プログラムおよびコンテンツ情報提供システム |
JP2017112448A (ja) * | 2015-12-15 | 2017-06-22 | 日本放送協会 | 映像シーン分割装置及び映像シーン分割プログラム |
CN105956999A (zh) * | 2016-04-28 | 2016-09-21 | 努比亚技术有限公司 | 缩略图生成装置和方法 |
CN105956999B (zh) * | 2016-04-28 | 2020-08-28 | 努比亚技术有限公司 | 缩略图生成装置和方法 |
JP2019532422A (ja) * | 2016-09-20 | 2019-11-07 | フェイスブック,インク. | オンライン・ソーシャル・ネットワーク上での動画のキーフレームの表示 |
CN113453055A (zh) * | 2020-03-25 | 2021-09-28 | 华为技术有限公司 | 一种生成视频缩略图的方法、装置和电子设备 |
CN111615008A (zh) * | 2020-05-18 | 2020-09-01 | 南京莱科智能工程研究院有限公司 | 基于多设备体验的智能摘要生成和字幕阅读系统 |
CN111615008B (zh) * | 2020-05-18 | 2022-06-03 | 南京莱科智能工程研究院有限公司 | 基于多设备体验的智能摘要生成和字幕阅读系统 |
Also Published As
Publication number | Publication date |
---|---|
JP5360979B2 (ja) | 2013-12-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5360979B2 (ja) | 重要情報抽出方法および装置 | |
US10779037B2 (en) | Method and system for identifying relevant media content | |
US6754389B1 (en) | Program classification using object tracking | |
JP4841553B2 (ja) | 映像シーン分類装置、映像シーン分類方法、プログラム、記録媒体、集積回路およびサーバ−クライアントシステム | |
Rasheed et al. | Detection and representation of scenes in videos | |
Brunelli et al. | A survey on the automatic indexing of video data | |
US8879788B2 (en) | Video processing apparatus, method and system | |
JP5533861B2 (ja) | 表示制御装置、表示制御方法、及び、プログラム | |
JP4831623B2 (ja) | 動画像の顔インデックス作成装置およびその顔画像追跡方法 | |
US20050228849A1 (en) | Intelligent key-frame extraction from a video | |
US20030061612A1 (en) | Key frame-based video summary system | |
CN103200463A (zh) | 一种视频摘要生成方法和装置 | |
Demir et al. | Video summarization via segments summary graphs | |
EP3251053A1 (en) | Detecting of graphical objects to identify video demarcations | |
Kobla et al. | Special-effect edit detection using VideoTrails: a comparison with existing techniques | |
JP2007200249A (ja) | 映像検索方法及び装置及びプログラム及びコンピュータ読み取り可能な記録媒体 | |
Kim et al. | Visual rhythm and shot verification | |
Ren et al. | Activity-driven content adaptation for effective video summarization | |
JP2005536937A (ja) | 一連のビデオ画像中でのコンテンツ特性の検出用のユニット及び方法 | |
JP2011008508A (ja) | 重要情報抽出方法および装置 | |
Apostolidis et al. | A motion-driven approach for fine-grained temporal segmentation of user-generated videos | |
US9135509B2 (en) | Determining representative images for a video | |
Kim et al. | An efficient graphical shot verifier incorporating visual rhythm | |
WO2007036892A1 (en) | Method and apparatus for long term memory model in face detection and recognition | |
Ju et al. | A representative-based framework for parsing and summarizing events in surveillance videos |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120224 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130517 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130529 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130726 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130828 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130830 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5360979 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |