JP2008146460A - 動画代表画像抽出方法、装置、及びコンピュータ・プログラム - Google Patents
動画代表画像抽出方法、装置、及びコンピュータ・プログラム Download PDFInfo
- Publication number
- JP2008146460A JP2008146460A JP2006334556A JP2006334556A JP2008146460A JP 2008146460 A JP2008146460 A JP 2008146460A JP 2006334556 A JP2006334556 A JP 2006334556A JP 2006334556 A JP2006334556 A JP 2006334556A JP 2008146460 A JP2008146460 A JP 2008146460A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- representative
- image
- moving image
- extracting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000605 extraction Methods 0.000 title claims abstract description 74
- 238000004590 computer program Methods 0.000 title claims description 11
- 238000004364 calculation method Methods 0.000 claims abstract description 18
- 239000000284 extract Substances 0.000 claims abstract description 17
- 238000007405 data analysis Methods 0.000 claims abstract description 10
- 238000000034 method Methods 0.000 abstract description 33
- 230000001133 acceleration Effects 0.000 abstract description 10
- 230000008569 process Effects 0.000 description 19
- 230000000694 effects Effects 0.000 description 12
- 241000283973 Oryctolagus cuniculus Species 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】シーン内特徴画像抽出部51は、画像データの一部分を占めるオブジェクトを抽出する。画像データ分析部52により抽出したオブジェクトを含む画像データの表示面積を算出し前記オブジェクトを含む画像データに対して算出したオブジェクトの占める面積比と、動き抽出部53によりオブジェクトの動きを抽出し算出したオブジェクトの動きを含む画像データ数と、動画データの全体の画像データ数と、からOS*iIF計算部54により代表画像データの決定に関する参照値を算出する。また、参照値に基づいて代表画像データを抽出する代表画像抽出部55を備える。
【選択図】図1
Description
前記画像データの一部分を占めるオブジェクトを抽出するステップと、
前記オブジェクトを含む画像データの表示面積を算出し、前記オブジェクトを含む画像データに対して前記オブジェクトの占める面積比を算出するステップと、
前記オブジェクトの動きを抽出し、前記オブジェクトの動きを含む画像データ数を算出するステップと、
前記オブジェクトの動きを含む画像データ数と、前記動画データの全体の画像データ数と、から前記オブジェクトの出現比を算出し、前記オブジェクトの占める面積比と、前記オブジェクトの出現比と、から前記代表画像データの決定に関する参照値を算出するステップと、
前記参照値に基づいて前記代表画像データを抽出するステップと、を含み、
前記代表画像データを抽出するステップは、前記オブジェクトの出現比が低く、かつ、前記オブジェクトの占める面積比が高いものを抽出する、動画代表画像抽出方法。
OS:前記オブジェクトの面積比
N:前記動画データの画像データ数
IF:前記オブジェクトの動きを含む画像データ数として、
前記オブジェクトの占める面積比を算出するステップは、前記オブジェクトを含む画像データのエッジ処理により抽出された範囲を積分により前記オブジェクトの面積を算出し、前記画像データの全体の面積を法数として除算する、(1)又は(2)記載の動画代表画像抽出方法。
前記画像データの一部分を占めるオブジェクトを抽出するオブジェクト抽出部と、
前記オブジェクトを含む画像データの表示面積を算出し、前記オブジェクトを含む画像データに対して前記オブジェクトの占める面積比を算出する画像データ分析部と、
前記オブジェクトの動きを抽出し、前記オブジェクトの動きを含む画像データ数を算出する動き抽出部と、
前記オブジェクトの動きを含む画像データ数と、前記動画データの全体の画像データ数と、から前記オブジェクトの出現比を算出し、前記オブジェクトの占める面積比と、前記オブジェクトの出現比と、から前記代表画像データの決定に関する参照値を算出するOS*iIF計算部と、
前記参照値に基づいて前記代表画像データを抽出する代表画像抽出部と、を備え、
前記代表画像抽出部は、前記オブジェクトの出現比が低く、かつ、前記オブジェクトの占める面積比が高いものを抽出する動画代表画像抽出装置。
OS:前記オブジェクトの面積比
N:前記動画データの画像データ数
IF:前記オブジェクトの動きを含む画像データ数として、
前記画像データ分析部は、前記オブジェクトを含む画像データのエッジ処理により抽出された範囲を積分により前記オブジェクトの面積を算出し、前記画像データの全体の面積を法数として除算する、(5)又は(6)記載の動画代表画像抽出装置。
前記画像データの一部分を占めるオブジェクトを抽出するステップと、
前記オブジェクトを含む画像データの表示面積を算出し、前記オブジェクトを含む画像データに対して前記オブジェクトの占める面積比を算出するステップと、
前記オブジェクトの動きを抽出し、前記オブジェクトの動きを含む画像データ数を算出するステップと、
前記オブジェクトの動きを含む画像データ数と、前記動画データの全体の画像データ数と、から前記オブジェクトの出現比を算出し、前記オブジェクトの占める面積比と、前記オブジェクトの出現比と、から前記代表画像データの決定に関する参照値を算出するステップと、
前記参照値に基づいて前記代表画像データを抽出するステップと、をコンピュータに実行させ、
前記代表画像データを抽出するステップにより、前記オブジェクトの出現比が低く、かつ、前記オブジェクトの占める面積比が高いものを抽出させるコンピュータ・プログラム。
OS:前記オブジェクトの面積比
N:前記動画データの画像データ数
IF:前記オブジェクトの動きを含む画像データ数として、
図1は、本発明の好適な実施形態の一例に係る動画代表画像抽出装置10(以下、装置10ともいう)の機能構成を示すブロック図である。
図2及び図3は、本発明の好適な実施形態の一例に係る記憶部60に格納されたDBの一部を示したものである。図2は、動画DB62に格納されている動画テーブル70を示す。
図4は、本発明の好適な実施形態の一例に係る画像データに基づき部分画像の抽出をした例を示す図である。
図5は、本発明の好適な実施形態の一例に係る代表画像抽出処理の処理フローである。
図6は、本発明の好適な実施形態の一例に係る装置10のハードウェア構成を示す図である。装置10は、シーン内特徴画像抽出部51、画像データ分析部52、動き抽出部53、OS*iIF計算部54、及び代表画像抽出部55を含む、制御部50を構成するCPU(Central Processing Unit)110(マルチプロセッサ構成ではCPU120等複数のCPUが追加されてもよい)、バスライン105、通信I/F140、メインメモリ150、BIOS(Basic Input Output System)160、USBポート190、I/Oコントローラ170、並びにキーボード及びマウス180等の入力手段や表示装置122を備える。
50 制御部
51 シーン内特徴画像抽出部
52 画像データ分析部
53 動き抽出部
54 OS*iIF計算部
55 代表画像抽出部
60 記憶部
62 動画DB
64 代表画像抽出DB
70 動画テーブル
80 代表画像抽出テーブル
Claims (10)
- 複数の画像データにより構成される動画データから前記動画データの特徴的場面を表す代表画像データを抽出する動画代表画像抽出方法であって、
前記画像データの一部分を占めるオブジェクトを抽出するステップと、
前記オブジェクトを含む画像データの表示面積を算出し、前記オブジェクトを含む画像データに対して前記オブジェクトの占める面積比を算出するステップと、
前記オブジェクトの動きを抽出し、前記オブジェクトの動きを含む画像データ数を算出するステップと、
前記オブジェクトの動きを含む画像データ数と、前記動画データの全体の画像データ数と、から前記オブジェクトの出現比を算出し、前記オブジェクトの占める面積比と、前記オブジェクトの出現比と、から前記代表画像データの決定に関する参照値を算出するステップと、
前記参照値に基づいて前記代表画像データを抽出するステップと、を含み、
前記代表画像データを抽出するステップは、前記オブジェクトの出現比が低く、かつ、前記オブジェクトの占める面積比が高いものを抽出する、動画代表画像抽出方法。 - 前記オブジェクトは、前記オブジェクトを含む画像データのエッジ処理により抽出され、
前記オブジェクトの占める面積比を算出するステップは、前記オブジェクトを含む画像データのエッジ処理により抽出された範囲を積分により前記オブジェクトの面積を算出し、前記画像データの全体の面積を法数として除算する、請求項1又は2記載の動画代表画像抽出方法。 - 前記オブジェクトの動きを含む画像データ数を算出するステップは、現在の画像データと前記現在の画像データより前に表示される画像データとから前記現在の画像データの動きを検出し、前記前に表示される画像データから前記現在の画像データの動きの量だけ移動して、動きを補償することにより算出する、請求項1乃至3記載の動画代表画像抽出方法。
- 複数の画像データにより構成される動画データから前記動画データの特徴的場面を表す代表画像データを抽出する動画代表画像抽出装置であって、
前記画像データの一部分を占めるオブジェクトを抽出するオブジェクト抽出部と、
前記オブジェクトを含む画像データの表示面積を算出し、前記オブジェクトを含む画像データに対して前記オブジェクトの占める面積比を算出する画像データ分析部と、
前記オブジェクトの動きを抽出し、前記オブジェクトの動きを含む画像データ数を算出する動き抽出部と、
前記オブジェクトの動きを含む画像データ数と、前記動画データの全体の画像データ数と、から前記オブジェクトの出現比を算出し、前記オブジェクトの占める面積比と、前記オブジェクトの出現比と、から前記代表画像データの決定に関する参照値を算出するOS*iIF計算部と、
前記参照値に基づいて前記代表画像データを抽出する代表画像抽出部と、を備え、
前記代表画像抽出部は、前記オブジェクトの出現比が低く、かつ、前記オブジェクトの占める面積比が高いものを抽出する動画代表画像抽出装置。 - 前記オブジェクトは、前記オブジェクトを含む画像データのエッジ処理により抽出され、
前記画像データ分析部は、前記オブジェクトを含む画像データのエッジ処理により抽出された範囲を積分により前記オブジェクトの面積を算出し、前記画像データの全体の面積を法数として除算する、請求項5又は6記載の動画代表画像抽出装置。 - 前記動き抽出部は、現在の画像データと前記現在の画像データより前に表示される画像データとから前記現在の画像データの動きを検出し、前記前に表示される画像データから前記現在の画像データの動きの量だけ移動して、動きを補償することにより算出する、請求項5乃至7記載の動画代表画像抽出装置。
- 複数の画像データにより構成される動画データから前記動画データの特徴的場面を表す代表画像データを抽出させるコンピュータ・プログラムであって、
前記画像データの一部分を占めるオブジェクトを抽出するステップと、
前記オブジェクトを含む画像データの表示面積を算出し、前記オブジェクトを含む画像データに対して前記オブジェクトの占める面積比を算出するステップと、
前記オブジェクトの動きを抽出し、前記オブジェクトの動きを含む画像データ数を算出するステップと、
前記オブジェクトの動きを含む画像データ数と、前記動画データの全体の画像データ数と、から前記オブジェクトの出現比を算出し、前記オブジェクトの占める面積比と、前記オブジェクトの出現比と、から前記代表画像データの決定に関する参照値を算出するステップと、
前記参照値に基づいて前記代表画像データを抽出するステップと、をコンピュータに実行させ、
前記代表画像データを抽出するステップにより、前記オブジェクトの出現比が低く、かつ、前記オブジェクトの占める面積比が高いものを抽出させるコンピュータ・プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006334556A JP4755575B2 (ja) | 2006-12-12 | 2006-12-12 | 動画代表画像抽出方法、装置、及びコンピュータ・プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006334556A JP4755575B2 (ja) | 2006-12-12 | 2006-12-12 | 動画代表画像抽出方法、装置、及びコンピュータ・プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008146460A true JP2008146460A (ja) | 2008-06-26 |
JP4755575B2 JP4755575B2 (ja) | 2011-08-24 |
Family
ID=39606551
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006334556A Active JP4755575B2 (ja) | 2006-12-12 | 2006-12-12 | 動画代表画像抽出方法、装置、及びコンピュータ・プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4755575B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012010265A (ja) * | 2010-06-28 | 2012-01-12 | Nippon Hoso Kyokai <Nhk> | 要約映像生成装置及び要約映像生成プログラム |
WO2013133368A1 (ja) * | 2012-03-07 | 2013-09-12 | オリンパス株式会社 | 画像処理装置、プログラム及び画像処理方法 |
JP2013183874A (ja) * | 2012-03-07 | 2013-09-19 | Olympus Corp | 画像処理装置、プログラム及び画像処理方法 |
JP2015133634A (ja) * | 2014-01-14 | 2015-07-23 | 日本放送協会 | 画像選択装置 |
US9547794B2 (en) | 2012-03-08 | 2017-01-17 | Olympus Corporation | Image processing device, information storage device, and image processing method |
JP2017059124A (ja) * | 2015-09-18 | 2017-03-23 | 富士フイルム株式会社 | 画像抽出システム,画像抽出方法,画像抽出プログラムおよびそのプログラムを格納した記録媒体 |
US9740939B2 (en) | 2012-04-18 | 2017-08-22 | Olympus Corporation | Image processing device, information storage device, and image processing method |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0993527A (ja) * | 1995-09-21 | 1997-04-04 | Nippon Telegr & Teleph Corp <Ntt> | 映像インデックス作成装置 |
JP2003271611A (ja) * | 2002-03-14 | 2003-09-26 | Fujitsu Ltd | 重要度評価プログラム |
JP2005210573A (ja) * | 2004-01-26 | 2005-08-04 | Mitsubishi Electric Corp | 映像表示システム |
-
2006
- 2006-12-12 JP JP2006334556A patent/JP4755575B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0993527A (ja) * | 1995-09-21 | 1997-04-04 | Nippon Telegr & Teleph Corp <Ntt> | 映像インデックス作成装置 |
JP2003271611A (ja) * | 2002-03-14 | 2003-09-26 | Fujitsu Ltd | 重要度評価プログラム |
JP2005210573A (ja) * | 2004-01-26 | 2005-08-04 | Mitsubishi Electric Corp | 映像表示システム |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012010265A (ja) * | 2010-06-28 | 2012-01-12 | Nippon Hoso Kyokai <Nhk> | 要約映像生成装置及び要約映像生成プログラム |
WO2013133368A1 (ja) * | 2012-03-07 | 2013-09-12 | オリンパス株式会社 | 画像処理装置、プログラム及び画像処理方法 |
JP2013183874A (ja) * | 2012-03-07 | 2013-09-19 | Olympus Corp | 画像処理装置、プログラム及び画像処理方法 |
CN104159501A (zh) * | 2012-03-07 | 2014-11-19 | 奥林巴斯株式会社 | 图像处理装置、程序和图像处理方法 |
CN104159501B (zh) * | 2012-03-07 | 2016-10-05 | 奥林巴斯株式会社 | 图像处理装置和图像处理方法 |
US9576362B2 (en) | 2012-03-07 | 2017-02-21 | Olympus Corporation | Image processing device, information storage device, and processing method to acquire a summary image sequence |
US9547794B2 (en) | 2012-03-08 | 2017-01-17 | Olympus Corporation | Image processing device, information storage device, and image processing method |
US9672619B2 (en) | 2012-03-08 | 2017-06-06 | Olympus Corporation | Image processing device, information storage device, and image processing method |
US9740939B2 (en) | 2012-04-18 | 2017-08-22 | Olympus Corporation | Image processing device, information storage device, and image processing method |
US10037468B2 (en) | 2012-04-18 | 2018-07-31 | Olympus Corporation | Image processing device, information storage device, and image processing method |
JP2015133634A (ja) * | 2014-01-14 | 2015-07-23 | 日本放送協会 | 画像選択装置 |
JP2017059124A (ja) * | 2015-09-18 | 2017-03-23 | 富士フイルム株式会社 | 画像抽出システム,画像抽出方法,画像抽出プログラムおよびそのプログラムを格納した記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
JP4755575B2 (ja) | 2011-08-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4755575B2 (ja) | 動画代表画像抽出方法、装置、及びコンピュータ・プログラム | |
US7844139B2 (en) | Information management apparatus, information management method, and computer program product | |
US8271501B2 (en) | Web search among rich media objects | |
JP4920395B2 (ja) | 動画要約自動作成装置、方法、及びコンピュータ・プログラム | |
CN108846091B (zh) | 资讯推荐方法、装置及设备 | |
JP2009537047A (ja) | ビデオ閲覧ユーザインタフェース | |
EP3401805A1 (en) | Analyzing multimedia content using knowledge graph embeddings | |
KR101911999B1 (ko) | 피처 기반 후보 선택 기법 | |
CN111309357B (zh) | 云游戏软件的更新方法、装置、存储介质和云游戏系统 | |
JP2005328105A (ja) | 視覚的に代表するビデオサムネイルの生成 | |
JP2002125178A (ja) | メディア・セグメント化システムおよび関連する方法 | |
EP3189469A1 (en) | A method for selecting frames from video sequences based on incremental improvement | |
US8290925B1 (en) | Locating product references in content pages | |
CN108459845A (zh) | 一种监控标签属性的埋点方法及装置 | |
JP5226241B2 (ja) | タグを付与する方法 | |
CN106984044B (zh) | 用于启动预设流程的方法及设备 | |
CN113507630B (zh) | 比赛视频的拆条方法和装置 | |
JP4916950B2 (ja) | 動画像比較装置、動画像比較方法、及び動画像比較プログラム | |
CN114391260A (zh) | 文字识别方法、装置、存储介质及电子设备 | |
JP4871650B2 (ja) | アイテムデータを送信する方法、サーバおよびプログラム | |
JP4749242B2 (ja) | 類似キャラクタデータ検索方法、サーバおよびプログラム | |
CN111494955A (zh) | 基于游戏的角色互动方法、装置、服务器及介质 | |
JP7490082B2 (ja) | 画像検出方法、装置、コンピュータプログラム及びコンピュータ機器 | |
CN116020122B (zh) | 游戏攻略推荐方法、装置、设备及存储介质 | |
KR20180136830A (ko) | 게임 제공장치 및 게임 제공방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090317 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110217 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110222 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110421 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110517 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110527 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140603 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 4755575 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |