JP4995770B2 - 画像辞書生成装置,画像辞書生成方法,および画像辞書生成プログラム - Google Patents
画像辞書生成装置,画像辞書生成方法,および画像辞書生成プログラム Download PDFInfo
- Publication number
- JP4995770B2 JP4995770B2 JP2008132711A JP2008132711A JP4995770B2 JP 4995770 B2 JP4995770 B2 JP 4995770B2 JP 2008132711 A JP2008132711 A JP 2008132711A JP 2008132711 A JP2008132711 A JP 2008132711A JP 4995770 B2 JP4995770 B2 JP 4995770B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- dictionary
- positive case
- area
- cluster
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Image Analysis (AREA)
Description
A.Yanagawa, S.-F.Chang, L.Kennedy, and W.Hsu: "Columbia University's Baseline detectors for 374 LSCOM Semantic Visual Concepts", Columbia University ADVENT Technical Report #222-2006-8, March 20, 2007. Keiji Yanai, Kobus Barnard: Probabilistic Web Image Gatheringp, Proc. of ACM Multimedia Workshop on Multimedia Information Retrieval, pp.57-64, Nov. 2005. Yongqing Sun, Shinji Ozawa: "HIRBIA: A Hierarchical Approach for Region-based Image Retrival", ACM Multimedia System Journal, 10(6): 559-569(2005).
第1の例の画像辞書生成装置は,与えられた辞書用画像群の各画像を領域分割し,クラスタリングをしてユーザに提示する。ユーザは,提示されたクラスタリング結果から正事例をポインティングデバイスなどにより指示する。その指示を入力して正事例データを選定し,次に,正事例でない他の領域をクラスタリングし,そのクラスタ領域を含む他の画像を得る。正事例のクラスタと距離が近い他のクラスタの領域を負事例とする。
第2の例の画像辞書生成装置は,辞書生成に用いる辞書用画像群が映像として与えられたときに,映像をショットに分割し,ショット単位で正事例を利用者に指定させ,他を負事例として学習することにより,画像辞書を生成する。
12 画像領域分割処理部
13 クラスタリング処理部
14 正事例領域クラスタ選定部
15,43 負事例選択部
16,44 画像辞書生成部
17,45 辞書記憶部
41 ショット分割部
42 正事例選定部
Claims (5)
- 概念を表す言葉である意味ラベルと,当該意味ラベルの概念を表す画像情報とを組とする画像辞書を生成する画像辞書生成装置であって,
与えられた辞書生成に用いる辞書用画像群から,画像辞書生成の対象となっている特定の意味ラベルを表現している正事例データを選定する正事例選定手段と,
前記正事例選定手段により選定した正事例データを利用して,前記辞書用画像群の中の正事例データを含まない画像群から,意味ラベルを表していない負事例データを選定する負事例選定手段と,
前記正事例選定手段と前記負事例選定手段により選定した正事例データと負事例データとから画像辞書を生成する画像辞書生成手段と,
前記画像辞書生成手段が生成した画像辞書を記憶する辞書記憶手段とを備え,
前記正事例選定手段は,
前記辞書用画像群の各画像に対して領域分割を行う画像領域分割処理手段と,
前記得られた領域群をクラスタリングし,類似している領域群からなるクラスタを検出するクラスタリング処理手段と,
前記クラスタの中から,正事例となる正事例領域クラスタを,利用者からの指示により特定することで正事例データを選定する正事例領域クラスタ選定手段とを備え,
前記負事例選定手段は,
前記正事例領域クラスタに属する画像領域を含む画像から,正事例データでない領域のクラスタを抽出する手段と,
前記辞書用画像群の中から,前記正事例領域クラスタに属する画像領域を含まない画像であり,前記抽出したクラスタの領域を含む画像を抽出する手段と,
前記抽出した画像における前記分割された領域群から正事例データの近傍にある領域を負事例データとして選定する手段とを備える
ことを特徴とする画像辞書生成装置。 - 辞書生成に用いる辞書用画像群が映像として与えられたときに,与えられた辞書用映像の中から,画像内容が類似している,時間的に連続した区間をショットとして検出するショット検出手段を備え,
前記正事例選定手段および前記負事例選定手段は,前記ショット検出手段が検出したショット単位で正事例データおよび負事例データを選定する
ことを特徴とする請求項1に記載の画像辞書生成装置。 - コンピュータによって構成される画像辞書生成装置が,概念を表す言葉である意味ラベルと,当該意味ラベルの概念を表す画像情報とを組とする画像辞書を生成する画像辞書生成方法であって,
前記画像辞書生成装置が,与えられた辞書生成に用いる辞書用画像群から,画像辞書生成の対象となっている特定の意味ラベルを表現している正事例データを選定する正事例選定過程と,
前記画像辞書生成装置が,前記正事例選定過程により選定した正事例データを利用して,前記辞書用画像群の中の正事例データを含まない画像群から,意味ラベルを表していない負事例データを選定する負事例選定過程と,
前記画像辞書生成装置が,前記正事例選定過程と前記負事例選定過程において選定した正事例データと負事例データとから画像辞書を生成する画像辞書生成過程と,
前記画像辞書生成装置が,前記画像辞書生成過程により生成した画像辞書を辞書記憶装置に記憶する辞書記憶過程とを有し,
前記画像辞書生成装置が実行する前記正事例選定過程は,
前記辞書用画像群の各画像に対して領域分割を行う画像領域分割処理過程と,
前記得られた領域群をクラスタリングし,類似している領域群からなるクラスタを検出するクラスタリング処理過程と,
前記領域クラスタの中から,正事例となる正事例領域クラスタを,利用者からの指示により特定することで正事例データを選定する正事例領域クラスタ選定過程とを有し,
前記画像辞書生成装置が実行する前記負事例選定過程は,
前記正事例領域クラスタに属する画像領域を含む画像から,正事例データでない領域のクラスタを抽出する過程と,
前記辞書用画像群の中から,前記正事例領域クラスタに属する画像領域を含まない画像であり,前記抽出したクラスタの領域を含む画像を抽出する過程と,
前記抽出した画像における前記分割された領域群から正事例データの近傍にある領域を負事例データとして選定する過程とを有する
ことを特徴とする画像辞書生成方法。 - 前記画像辞書生成装置が,辞書生成に用いる辞書用画像群が映像として与えられたときに,与えられた辞書用映像の中から,画像内容が類似している,時間的に連続した区間をショットとして検出するショット検出過程を有し,
前記画像辞書生成装置が実行する前記正事例選定過程および前記負事例選定過程では,前記ショット検出過程において検出したショット単位で正事例データおよび負事例データを選定する
ことを特徴とする請求項3に記載の画像辞書生成方法。 - 請求項3または請求項4に記載の画像辞書生成方法を,コンピュータに実行させるための画像辞書生成プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008132711A JP4995770B2 (ja) | 2008-05-21 | 2008-05-21 | 画像辞書生成装置,画像辞書生成方法,および画像辞書生成プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008132711A JP4995770B2 (ja) | 2008-05-21 | 2008-05-21 | 画像辞書生成装置,画像辞書生成方法,および画像辞書生成プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009282660A JP2009282660A (ja) | 2009-12-03 |
JP4995770B2 true JP4995770B2 (ja) | 2012-08-08 |
Family
ID=41453075
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008132711A Expired - Fee Related JP4995770B2 (ja) | 2008-05-21 | 2008-05-21 | 画像辞書生成装置,画像辞書生成方法,および画像辞書生成プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4995770B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5889019B2 (ja) * | 2012-02-06 | 2016-03-22 | キヤノン株式会社 | ラベル付加装置、ラベル付加方法及びプログラム |
JP6255296B2 (ja) * | 2014-03-31 | 2017-12-27 | セコム株式会社 | 対象識別装置 |
JP6059686B2 (ja) * | 2014-06-11 | 2017-01-11 | 日本電信電話株式会社 | 画像分類前処理装置、画像分類装置、画像分類前処理方法、画像分類方法及びプログラム |
JP6857537B2 (ja) * | 2017-04-11 | 2021-04-14 | 株式会社Nttドコモ | 情報処理装置 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4546762B2 (ja) * | 2004-05-20 | 2010-09-15 | 日本放送協会 | 映像イベント判別用学習データ生成装置及びそのプログラム、並びに、映像イベント判別装置及びそのプログラム |
JP4703487B2 (ja) * | 2006-05-29 | 2011-06-15 | 日本電信電話株式会社 | 画像分類方法及び装置及びプログラム |
-
2008
- 2008-05-21 JP JP2008132711A patent/JP4995770B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2009282660A (ja) | 2009-12-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10394878B2 (en) | Associating still images and videos | |
Vasudevan et al. | Query-adaptive video summarization via quality-aware relevance estimation | |
US10867183B2 (en) | Selecting and presenting representative frames for video previews | |
US9176987B1 (en) | Automatic face annotation method and system | |
US10282616B2 (en) | Visual data mining | |
US10140575B2 (en) | Sports formation retrieval | |
US8750681B2 (en) | Electronic apparatus, content recommendation method, and program therefor | |
US8804999B2 (en) | Video recommendation system and method thereof | |
Cong et al. | Towards scalable summarization of consumer videos via sparse dictionary selection | |
US8364698B2 (en) | Apparatus and software system for and method of performing a visual-relevance-rank subsequent search | |
Asghar et al. | Video indexing: a survey | |
CN113766330A (zh) | 基于视频生成推荐信息的方法和装置 | |
Fei et al. | Creating memorable video summaries that satisfy the user’s intention for taking the videos | |
JP4995770B2 (ja) | 画像辞書生成装置,画像辞書生成方法,および画像辞書生成プログラム | |
JP5226651B2 (ja) | 類似画像検索装置,類似画像検索方法および類似画像検索プログラム | |
JP2006217046A (ja) | 映像インデックス画像生成装置及び映像のインデックス画像を生成するプログラム | |
Ren et al. | Activity-driven content adaptation for effective video summarization | |
US10242080B1 (en) | Clustering applications using visual metadata | |
Godi et al. | Indirect match highlights detection with deep convolutional neural networks | |
Tapu et al. | TV news retrieval based on story segmentation and concept association | |
Chu et al. | Enabling portable animation browsing by transforming animations into comics | |
JP2006157688A (ja) | 映像シーンに対する意味ラベル付与方法及び装置及びプログラム | |
US20140189769A1 (en) | Information management device, server, and control method | |
Salehin et al. | Adaptive fusion of human visual sensitive features for surveillance video summarization | |
Karthick et al. | Automatic genre classification from videos |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20100331 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100720 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111121 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111129 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120120 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120508 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120510 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150518 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |