JP2008226110A - 情報処理装置、情報処理方法および制御プログラム - Google Patents

Abstract

【課題】動画像あるいは静止画像に対し、さまざまなコンテンツを利用して検索用メタデータを付与するに際し、有用な検索用メタデータの作成を容易とする。
【解決手段】画像情報処理装置は、動画像あるいは静止画像に関連づけられた関連コンテンツから動画像あるいは静止画像を検索するのに用いる原検索用メタデータを抽出し、メタデータ候補記憶部を参照して、原検索用メタデータから検索用メタデータのフィルタリングを行い、原検索用メタデータを動画像あるいは静止画像に付与すべき検索用メタデータとする。
【選択図】図５

Description

本発明は、情報処理装置、情報処理方法および制御プログラムに係り、特に静止画像や動画像等のコンテンツの検索用メタデータの作成容易化技術に関する。

近年、ディジタルカメラやデジタルビデオ、カメラ付携帯電話等の普及により、個人が保存している画像等のコンテンツは増加する一方である。代表的なコンテンツであるデジタル画像データには、ディジタルカメラの機能によって、撮影日時を示す情報等を含むメタデータが付加されることが多い。このメタデータに含まれる情報を利用すれば、例えば特定の日に撮影されたデジタル画像データを検索することができ、デジタル画像データの管理の一助となる。ところが、一般的なメタデータに含まれる情報は、撮影日時や撮影時の条件（ＩＳＯ感度、シャッタースピードなど）を示す情報であり、コンテンツの内容に関連する情報は含まれない。このため、メタデータに含まれる情報を用いても、コンテンツの内容に基づく管理を行うことは困難であった。
ダブリンコアやＭＰＥＧ−７など、メタデータの体系も整備されているが、これらの体系に基づいてメタデータを作成、入力する作業は専門家ではない人々には困難な作業であった。
特開２００５−１９６５９８号

これを解決するため、特許文献１記載の技術においては、コンテンツ間を連携することによりメタデータを増加、更新する技術が開示されている。
しかしながら、特許文献１記載の技術では、連携対象のコンテンツとしては、属性の同一（同種）のコンテンツを使用することが前提であり、属性の異なるコンテンツを連携させた場合、無用なメタデータが増加してしまうという問題があった。
そこで、本発明の目的は、動画像あるいは静止画像に対し、さまざまなコンテンツを利用して検索用メタデータを付与するに際し、有用な検索用メタデータの作成が容易となる情報処理装置、情報処理方法および制御プログラムを提供することにある。

上記課題を解決するため、本発明の第一形態は、動画像あるいは静止画像に関連づけられた関連コンテンツから前記動画像あるいは前記静止画像を検索するのに用いる原検索用メタデータを抽出するメタデータ抽出部と、前記動画像あるいは前記静止画像に付与される検索用メタデータの候補となるメタデータ候補を記憶したメタデータ候補記憶部と、前記メタデータ候補記憶部を参照して、前記原検索用メタデータから前記検索用メタデータのフィルタリングを行うフィルタリング部と、を備えたことを特徴としている。

上記構成によれば、メタデータ抽出部は、動画像あるいは静止画像に関連づけられた関連コンテンツから動画像あるいは静止画像を検索するのに用いる原検索用メタデータを抽出する。
これによりフィルタリング部は、メタデータ候補記憶部を参照して、前記原検索用メタデータから前記検索用メタデータのフィルタリングを行う。
したがって、動画像あるいは静止画像に対し、さまざまなコンテンツを利用して検索用メタデータを付与するに際し、原検索用メタデータに含まれる無用な検索用メタデータを除去して、有用な検索用メタデータを作成することが容易となる。

また、本発明の第二形態は、第一形態の情報処理装置において、前記フィルタリング部は、前記原検索用メタデータの重要度あるいは出現確率が一定値以上の場合に、前記原検索用メタデータを前記検索用メタデータとすることを特徴としている。
上記構成によれば、フィルタリング部は、原検索用メタデータの重要度あるいは出現確率が一定値以上の場合に、原検索用メタデータを検索用メタデータとすることとなるので、有用な検索用メタデータを作成することができる。

また、本発明の第三形態は、第一形態または第二形態の情報処理装置において、前記メタデータ候補記憶部は、前記メタデータ候補となる語句をその出現確率に対応づけて記憶し、前記出現確率は、前記動画像若しくは前記静止画像と、前記動画像若しくは前記静止画像に対応するテキストデータとで構成されるコンテンツにおいて、前記動画像若しくは前記静止画像を表示する画像枠の近傍に配置された前記テキストデータに出現する語句の出現確率を用いることを特徴としている。
したがって、動画像あるいは静止画像を表示する画像枠の近傍に配置された、より当該画像枠内の画像に関連すると考えられる語句の出現確率を用いてフィルタリングを行えるため、より関連性の高い語句を検索用メタデータとして作成することが可能となる。

また、本発明の第四形態は、第一形態ないし第三形態のいずれかに記載の情報処理装置において、前記メタデータ候補記憶部は、前記動画像若しくは前記静止画像と、前記動画像若しくは前記静止画像を検索するのに用いるメタデータが対応づけられた画像データベースを参照して前記メタデータ候補を記憶することを特徴としている。
上記構成によれば、メタデータ候補の信頼性が高くなり、より確実に最適な検索用メタデータを作成することが可能となる。

また、本発明の第五形態は、第一形態ないし第五形態のいずれかに記載の情報処理装置において、前記メタデータ候補記憶部は、前記動画像若しくは前記静止画像と、前記動画像若しくは前記静止画像に対応するテキストデータを含むコンテンツを参照して前記メタデータ候補を記憶することを特徴としている。
上記構成によれば、メタデータ候補記憶部に記憶しているメタデータ候補としてより信頼性の高い語句を用いることが可能となり、ひいては、より信頼性の高い検索用メタデータを得ることが可能となる。

本発明の第六形態は、第一形態ないし第五形態のいずれかに記載の情報処理装置において、楽曲データと前記楽曲データを検索するのに用いる楽曲検索用メタデータを記憶する楽曲データベースを備え、前記メタデータ抽出部は、前記動画像あるいは前記静止画像に関連づけられた前記楽曲データに対応する前記楽曲検索用メタデータを抽出することを特徴としている。
上記構成によれば、動画像あるいは静止画像に関連づけられた楽曲に対応する楽曲検索用メタデータを原検索用メタデータとして抽出することができるので、より検索用メタデータとして採用される可能性の高い原検索用メタデータを得ることが可能となる。

また、本発明の第七形態は、動画像あるいは静止画像に付与される検索用メタデータの候補となるメタデータ候補を記憶したメタデータ候補記憶部と演算部とを有する情報処理装置を用いた情報処理方法であって、前記演算部が、動画像あるいは静止画像に関連づけられた関連コンテンツから前記動画像あるいは前記静止画像を検索するのに用いる原検索用メタデータを抽出するメタデータ抽出過程と、前記演算部が、前記メタデータ候補記憶部を参照して、前記原検索用メタデータから前記検索用メタデータのフィルタリングを行うフィルタリング過程と、を備えたことを特徴としている。
上記構成によれば、動画像あるいは静止画像に対し、さまざまなコンテンツを利用して検索用メタデータを付与するに際し、原検索用メタデータに含まれる無用な検索用メタデータを除去して、有用な検索用メタデータを作成することが容易となる。

また、本発明の第八形態は、動画像あるいは静止画像に付与される検索用メタデータの候補となるメタデータ候補を記憶したメタデータ候補記憶部を有する情報処理装置をコンピュータにより制御するための制御プログラムであって、前記動画像あるいは前記静止画像に関連づけられた関連コンテンツから前記動画像あるいは前記静止画像を検索するのに用いる原検索用メタデータを抽出させ、前記メタデータ候補記憶部を参照して、前記原検索用メタデータから前記検索用メタデータのフィルタリングを行わせる、ことを特徴としている。
上記構成によれば、動画像あるいは静止画像に対し、さまざまなコンテンツを利用して検索用メタデータを付与するに際し、原検索用メタデータに含まれる無用な検索用メタデータを除去して、有用な検索用メタデータを作成することが容易となる。
この場合において、制御プログラムをコンピュータ読取可能な記録媒体に記録するようにしても良い。

次に図面を参照して本発明の好適な実施形態について説明する。
図１は、実施形態の画像情報処理装置の概要構成ブロック図である。
画像情報処理装置１０は、パーソナルコンピュータとして構成されており、画像処理を行う画像情報処理装置本体１１と、各種画像入力を行う画像入力装置１２と、各種操作を行うためのキーボード、マウスなどの入力装置１３と、各種表示を行う液晶ディスプレイなどの表示装置１４と、印刷を行うプリンタなどの出力装置１５と、各種データを記憶するハードディスク装置などの外部記憶装置１６と、を備えている。
画像情報処理装置本体１１は、当該画像情報処理装置本体１１全体の制御を行うマイクロプロセッサユニット（ＭＰＵ）２１と、各種制御プログラムを含む各種データを記憶するＲＯＭ２２と、ＭＰＵ２１のワークエリアとして機能するＲＡＭ２３と、ＬＡＮ、インターネットなどの外部の通信ネットワークとの間のインタフェース動作を行う通信インタフェース部２４と、を備えている。

図２は、画像情報処理装置の機能ブロック図である。
画像情報処理装置１０は、大別すると、映像・画像入力部３１と、テキスト抽出部３２と、形態素解析部３３と、レイアウト解析部３４と、重要語句抽出部３５と、フィルタリング部３６と、出現確率算出部３７と、を備えている。

映像・画像入力部３１は、放送電波、通信ネットワークあるいはＩＣメモリカードなどのデータ記憶媒体を介して動画像データ（動画［あるいは映像］に対応）あるいは静止画像データ（静止画に対応）を入力する。具体的には、様々な画像フォーマットの画像を、様々な圧縮形式、ファイル形式を有するファイルや、スキャナ、ディジタルカメラ、ディジタルビデオカメラなどの入力装置から抽出あるいは受け取ることとなる。この場合において、圧縮形式としては、ＪＰＥＧ、ＭＰＥＧ−４、Ｈ．２６４等が挙げられる。

テキスト抽出部３２は、ＸＨＴＭＬ（個人のホームページ、ブログなど）、送受信した電子メール、ＸＭＬ（楽曲の検索用メタデータなど）で記述されているハイパーテキストデータからタグ情報以外のテキストデータを抽出する。
形態素解析部３３は、ブログなどのテキストデータあるいは音声認識部により音声認識したテキストデータに対応するテキストの形態素解析を行い、単語（語句）を抽出し、必要に応じてステミングを行う。

レイアウト解析部３４は、ブログやホームページなどのように、動画像あるいは静止画像と、テキストとが混在してレイアウトされている場合、動画像あるいは静止画像と、テキストとの位置関係を明らかにする。

重要語句抽出部３５は、複数の関連コンテンツから、最も関連が深い関連コンテンツ（コンテンツｉと表記）、からメタデータとする語句を抽出する。
この場合において、関連コンテンツを代表する語句、すなわち、当該関連コンテンツの中で重要度の高い語句を、動画像あるいは静止画像を最も良く表現する語句とみなして、重要語句と表現する。
ここでは、ＴＦ／ＩＤＦ（Ｔｅｒｍ Ｆｒｅｑｕｅｎｃｙ ＆ Ｉｎｖｅｒｓｅ Ｄｏｃｕｍｅｎｔ Ｆｒｅｑｕｅｎｃｙ）処理によって重要度を算出する。そして、重要語句抽出部３５は、下記式（１）によって、形態素解析部３３によりコンテンツｉから抽出された各々の語句ｊの重要度ｔｆｉｄｆ（ｉ，ｊ）を求める。

以下、具体的に説明する。
まず、コンテンツｉにおける語句ｊの出現頻度をＦｒｅｑ（ｉ，ｊ）とし、関連コンテンツでの出現頻度に関わるｔｆ（ｉ，ｊ）を算出する。
ｔｆ（ｉ，ｊ）＝ｌｏｇ（Ｆｒｅｑ（ｉ，ｊ）＋１）／ｌｏｇ（コンテンツｉの総語句数）
ここで、ｔｆ（ｉ，ｊ）は、関連コンテンツのテキストデータにおける出現頻度をもとに、語句の重要度を表す指標である。言い換えれば、コンテンツ中に多く出現する語句が、重要な語句とみなされる。

次にｄｆ（ｊ）を語句ｊが出現するコンテンツ数として、ｉｄｆ（ｊ）を算出する。
ｉｄｆ（ｊ）＝ｌｏｇ（Ｎ／ｄｔ（ｊ））
ここで、ｉｄｆ（ｊ）は、検索された全てのコンテンツのうち、語句ｔが出現するコンテンツのテキストデータの数を語句ｔの出現頻度として計算したものである。
さらに、コンテンツｉにおける、語句ｊの重要度を、
ｔｆｉｄｆ（ｉ，ｊ）＝ｔｆ（ｉ，ｊ）×ｉｄｆ（ｊ）
とする。したがって、検索用メタデータを選択する場合には、このｔｆｉｄｆ（ｉ，ｊ）の値の大きい順に所定個数を選択すればよい。

フィルタリング部３６は、動画像あるいは静止画像に付与される検索用メタデータの候補となる後述するメタデータ候補に基づいて、検索用メタデータの元となる原検索用メタデータを動画像あるいは静止画像に付与すべき検索用メタデータとするためのフィルタリングを行う。
この場合において、メタデータ候補となる語句は、重要度の比較的高い語句あるいは出現確率が比較的高い語句が用いられる。

具体的には、重要度の高い語句をメタデータ候補としている場合には、フィルタリング後の
ｔｆｉｄｆ（ｉ，ｊ）＝ｔｆｉｄｆ（ｉ，ｊ）×Ｐ（ｊ）
の値が一定値以上の場合、あるいは、後述する出現確率算出部３７が算出した語句ｊの出現確率Ｐ（ｊ）が一定値以上の場合に検索用メタデータとして使用するようにフィルタリングすれば良い。

出現確率算出部３７は、以下のいずれかを用いて出現確率を算出する。
第１の手法としては、メタデータが付与された映像画像データベース（コンテンツ）を参照し、付加されている検索用メタデータを使用する。
また、第２の手法として、動画像あるいは静止画像、およびテキストデータを含むコンテンツ（例えば、ブログ、ホームページを含むウェブページなど）を利用し、動画像あるいは静止画像に関連すると推定されるテキストデータに含まれる語句を検索用メタデータとして使用する。

図３は、コンテンツとしてのブログのレイアウト例の説明図である。
本実施形態において、コンテンツとしてのブログなどからメタデータ候補辞書を作成する場合、動画像あるいは静止画像を表示している画像枠の近傍のテキストを使用する。
ここで、近傍とは、以下のように規定している。
第１には、レイアウトから映像画像の説明として使われている可能性が高い文章の場合であり、この場合には、動画像あるいは静止画像を表示している画像枠の上方あるいは下方に接してレイアウトされ、かつ「写真」、「映像」などと、説明箇所と推定できるキーワードが含まれているテキストである。
第２には、動画像あるいは静止画像を表示している画像枠から数行または数列離れてレイアウトされているテキストである。これらのテキストは、経験的に当該動画像あるいは当該静止画像の説明をしている可能性が高いからである。
第３には、ＸＨＴＭＬなどの特定のタグ内に現れるテキストの場合であり、例えば、ＩＭＧタグでは、表示する画像を記述するが、このタグ内に合わせて記述されているテキストは当該動画像あるいは当該静止画像の説明をしている可能性が高いからである。
上述したように、ブログのように動画像あるいは静止画像と、テキストが含まれている場合、動画像あるいは静止画像を表示している画像枠の近傍には、当該動画像あるいは静止画像に関する説明がテキストデータとして記述されている場合が多い。
そこで、図３の例の場合、ブログのページＢＰには、動画像あるいは静止画像を表示している画像枠ＧＦと、画像枠ＧＦの周りに配置されたテキスト（図中、実線および破線で模式的に示す）ＴＸ１、ＴＸ２１、ＴＸ２２と、が含まれている。
ブログのページに含まれるテキストのうち、実線で示す位置に配置されたテキストＴＸ１は、動画像あるいは静止画像を表示している画像枠ＧＦの近傍にレイアウトされており、破線で示すテキストＴＸ２１、ＴＸ２２は、画像枠ＧＦから離れてレイアウトされている。

そこで、出現確率算出部３７は、レイアウト解析部３４の解析結果に基づいて、図３に実線で示すように、画像枠ＧＦの近傍に配置されているテキストＴＸ１は、画像枠ＧＦ内に表示されている動画像あるいは静止画像と関連が高いと推定して、この領域のテキストＴＸ１に含まれる語句を検索用メタデータとして使用することとなる。
これに対し、出現確率算出部３７は、画像枠ＧＦから離れてレイアウトされているテキストＴＸ２１、ＴＸ２２は画像枠ＧＦ内に表示されている動画像あるいは静止画像と関連が低いと推定してこれらの領域のテキストＴＸ２１、ＴＸ２２に含まれる語句を検索用メタデータとして使用することはない。

このように、出現確率算出部３７が、ホームページあるいはブログに含まれるテキスト（データ）から出現確率を算出するのは、年月とともに新しく使われるようになる新規な語句（新語）を含めて検索用メタデータとして使用できるようにするためである。
そして、出現確率算出部３７は、上記の各コンテンツから以下のように、語句ｊの出現確率Ｐ（ｊ）を求める。
語句ｊの出現確率Ｐ（ｊ）＝語句ｊの出現数／Σ（語句ｊの出現数）
次に実施形態の動作について説明する。

図４は、実施形態の処理フローチャートである。
図５は、実施形態の概要動作説明図である。
まず、画像情報処理装置１０は、検索用メタデータを生成する動画像あるいは静止画像の関連コンテンツ４１を検索用メタデータのソースとして選択して（ステップＳ１００）、関連コンテンツに含まれる語句の重要度を算出して原検索用メタデータを抽出する（ステップＳ２００）。
具体的には、画像情報処理装置１０は、映像・画像入力部３１として機能し、画像検索用メタデータの付与対象である動画像あるいは静止画像（図中、映像画像と記載）が入力された場合には（ステップＳ１１）、入力された動画像あるいは静止画像に関連し、テキスト（データ）を含んで構成されるコンテンツである関連コンテンツ４１から、検索用メタデータＭＤを生成するための原検索用メタデータＭＤ０の抽出を行う（ステップＳ１２）。

関連コンテンツ４１としては、例えば、個人のホームページ、ブログ、個人が送受信した電子メール、新聞やイベントに関連したホームページなどが挙げられ、これらは何れも、画像検索用メタデータの付与対象である動画像あるいは静止画像が撮影された日時、場所、イベントに関する情報を含むものである。
例えば、関連コンテンツがブログである場合には、旅行や家庭行事に関する記述が含まれる可能性が高いからである。また、関連コンテンツが電子メールの場合には、旅行や家庭行事に関する内容が送受信される可能性が高いからである。

また、画像情報処理装置１０は、関連コンテンツ４１から検索用メタデータＭＤを生成するための原検索用メタデータＭＤ０の抽出処理と並行して、楽曲および当該楽曲に対応する検索用メタデータを含む楽曲データベース４２から検索用メタデータＭＤを生成するための原検索用メタデータＭＤ０の抽出処理を行う（ステップＳ１３）。なお、この楽曲データベースも論理的に関連コンテンツ４１として扱うことも可能である。

図６は、楽曲データベースの一例の説明図である。
楽曲データベース４２は、例えば、楽曲名を表す楽曲名データ４２Ａと、アーティスト名を格納したアーティスト名データ４２Ｂと、楽曲が属するジャンル名を格納したジャンルデータ４２Ｃと、曲の説明や印象などを表す検索用メタデータとしての曲説明・印象データ４２Ｄと、を備えている。
例えば、楽曲名を表す楽曲名データ４２Ａ＝「Ａ」の楽曲のアーティスト名データ４２Ｂ＝「演奏者１」であり、ジャンルデータ４２Ｃ＝「ポップス」であり、曲説明・印象データ４２Ｄ＝「リズミカル、軽快」となっている。

次に画像情報処理装置１０は、後述するメタデータ候補辞書に含まれる出現確率を用いて、原検索用メタデータＭＤ０である語句の重要度を計算しなおし（ステップＳ３００）、重要度の高い語句が検索用メタデータとして適切と考え、所定の個数の語句を検索用メタデータとしてフィルタリングにより選択する（ステップＳ４００）。
具体的には、画像情報処理装置１０は、フィルタリング部３６として機能し、メタデータ候補辞書４３に予め格納されているメタデータ候補語句を用いて、入力された原検索用メタデータＭＤ０のフィルタリングを行って（ステップＳ１４）、検索用メタデータＭＤを生成することとなる。

ここで、メタデータ候補辞書について説明する。
図７は、メタデータ候補辞書の一例の説明図である。
メタデータ候補辞書４３は、メタデータ候補となる語句を格納した語句データ４３Ａと、語句データ４３Ａに対応するともに出現確率算出部３７において求めた出現確率に相当する値を有する出現確率データ４３Ｂと、を記憶している。

ここで、出現確率データの値は、動画像あるいは静止画像の検索用メタデータとして使われる頻度の情報が含まれている。すなわち、動画像あるいは静止画像の検索用メタデータとして使われる頻度が低い場合には、対応する語句は、動画像あるいは静止画像の検索用メタデータとしてふさわしくないと考えられる。
具体的には、図７に示す例の場合、語句データ４３Ａ＝「リズミカル」、「軽快」は、出現確率データ４３Ｂの値が低いため動画像あるいは静止画像の検索用メタデータとしてふさわしくないとされ、語句データ４３Ａ＝「癒される」は、出現確率データ４３Ｂの値が高いため動画像あるいは静止画像の検索用メタデータとしてふさわしいとされる。

この場合において、メタデータ候補となる語句は、動画像・静止画像データベース４４と、動画像あるいは静止画像およびそれに対応するテキストデータを含むコンテンツ４５と、から予め抽出して（ステップＳ１５、Ｓ１６）、記憶している。
動画像・静止画像データベース４４は、動画像あるいは静止画像と、これらに対応する検索用メタデータと、を格納しているデータベースである。
また、動画像あるいは静止画像およびそれに対応するテキストデータを含むコンテンツ４５としては、新聞社のサイトのウェブページやブログ等が含まれる。

以上の説明のように本実施形態によれば、簡単な操作で検索に有用な検索用メタデータＭＤを生成し、増加させることができる。
また、他の関連コンテンツあるいは楽曲データベースなどマルチメディアデータに付与されている検索用メタデータを使用するので、感性的な検索用メタデータを容易に利用することができる。

さらに動画像あるいは静止画像に既に使われている検索用メタデータを使って、原検索用メタデータをフィルタリングして所望の検索用メタデータを生成するので、不要な、ノイズ的な語句が検索用メタデータとして含まれることがなく、有用な検索用メタデータを容易に得ることが可能となる。

なお、上記実施形態において、図１に示した構成は、主としてハードウェア構成により、或いはハードウェアとソフトウェアとの協働により実現されるものであり、画像情報処理装置１０を構成する各部の具体的形態や物理的態様については任意である。

以上の説明においては、画像情報処理装置１０は、具体的には、パーソナルコンピュータ、ＰＤＡ、携帯型電話機等に適用可能であるが、デジタルスチルカメラ、ディジタルビデオカメラ、スキャナ、プロジェクタ、テレビ、プリンタおよびその他の画像データを処理する電子機器に実装または接続することが可能である。
以上の説明においては、上記各機能を実現するための制御プログラムが、予めＲＯＭ２２に格納されている場合について説明したが、制御プログラムを、コンピュータ（ＣＰＵ）読取可能な記録媒体に記録するようにしてもよい。このような構成であれば、コンピュータによってプログラムが記憶媒体から読み取られ、読み取られたプログラムに従ってコンピュータが処理を実行すると、上記各実施形態と同等の作用および効果が得られる。
ここで、記憶媒体とは、ＲＡＭ、ＲＯＭ等の半導体記憶媒体、ＦＤ、ＨＤ等の磁気記憶型記憶媒体、ＣＤ、ＣＤＶ、ＬＤ、ＤＶＤ等の光学的読取方式記憶媒体、ＭＯ等の磁気記憶型／光学的読取方式記憶媒体であって、電子的、磁気的、光学的等の読み取り方法のいかんにかかわらず、コンピュータで読み取り可能な記憶媒体であれば、どのような記憶媒体であってもよい。
また、インターネット、ＬＡＮなどの通信ネットワークおよび通信インタフェース部２４を介して制御用プログラムをダウンロードし、インストールして実行するように構成することも可能である。

実施形態の画像情報処理装置の概要構成ブロック図である。 画像情報処理装置の機能ブロック図である。 コンテンツとしてのブログのレイアウト例の説明図である。 実施形態の処理フローチャートである。 実施形態の概要動作説明図である。 楽曲データベースの一例の説明図である。 メタデータ候補辞書の一例の説明図である。

符号の説明

１０…画像画像情報処理装置、１１…画像情報処理装置本体、１２…画像入力装置、１３…入力装置、１４…表示装置、１５…出力装置、１６…外部記憶装置、２２…ＲＯＭ、２３…ＲＡＭ、２４…通信インタフェース部、３１…映像・画像入力部、３２…テキスト抽出部、３３…形態素解析部、３４…レイアウト解析部、３５…重要語句抽出部、３６…フィルタリング部、３７…出現確率算出部、４１…関連コンテンツ、４２…楽曲データベース、４２Ａ…楽曲名データ、４２Ｂ…アーティストデータ、４２Ｂ…アーティスト名データ、４２Ｃ…ジャンルデータ、４２Ｄ…曲説明・印象データ、４３…メタデータ候補辞書、４３Ａ…語句データ、４３Ｂ…出現確率データ、４４…動画像・静止画像データベース、４５…コンテンツ、ＴＸ１、ＴＸ２１、ＴＸ２２…テキスト、ＧＦ…画像枠、ＭＤ…検索用メタデータ、ＭＤ０…原検索用メタデータ。

Claims (8)

1. 動画像あるいは静止画像に関連づけられた関連コンテンツから前記動画像あるいは前記静止画像を検索するのに用いる原検索用メタデータを抽出するメタデータ抽出部と、
   前記動画像あるいは前記静止画像に付与される検索用メタデータの候補となるメタデータ候補を記憶したメタデータ候補記憶部と、
   前記メタデータ候補記憶部を参照して、前記原検索用メタデータから前記検索用メタデータのフィルタリングを行うフィルタリング部と、
   を備えたことを特徴とする情報処理装置。
2. 請求項１記載の情報処理装置において、
   前記フィルタリング部は、前記原検索用メタデータの重要度あるいは出現確率が一定値以上の場合に、前記原検索用メタデータを前記検索用メタデータとすることを特徴とする情報処理装置。
3. 請求項１または請求項２記載の情報処理装置において、
   前記メタデータ候補記憶部は、前記メタデータ候補となる語句をその出現確率に対応づけて記憶し、
   前記出現確率は、前記動画像若しくは前記静止画像と、前記動画像若しくは前記静止画像に対応するテキストデータとで構成されるコンテンツにおいて、前記動画像若しくは前記静止画像を表示する画像枠の近傍に配置された前記テキストデータに出現する語句の出現確率を用いることを特徴とする情報処理装置。
4. 請求項１ないし請求項３のいずれかに記載の情報処理装置において、
   前記メタデータ候補記憶部は、前記動画像若しくは前記静止画像と、前記動画像若しくは前記静止画像を検索するのに用いるメタデータが対応づけられた画像データベースを参照して前記メタデータ候補を記憶することを特徴とする情報処理装置。
5. 請求項１ないし請求項４のいずれかに記載の情報処理装置において、
   前記メタデータ候補記憶部は、前記動画像若しくは前記静止画像と、前記動画像若しくは前記静止画像に対応するテキストデータを含むコンテンツを参照して前記メタデータ候補を記憶することを特徴とする情報処理装置。
6. 請求項１ないし請求項５のいずれかに記載の情報処理装置において、
   楽曲データと前記楽曲データを検索するのに用いる楽曲検索用メタデータを記憶する楽曲データベースを備え、
   前記メタデータ抽出部は、前記動画像あるいは前記静止画像に関連づけられた前記楽曲データに対応する前記楽曲検索用メタデータを抽出することを特徴とする情報処理装置。
7. 動画像あるいは静止画像に付与される検索用メタデータの候補となるメタデータ候補を記憶したメタデータ候補記憶部と演算部とを有する情報処理装置を用いた情報処理方法であって、
   前記演算部が、動画像あるいは静止画像に関連づけられた関連コンテンツから前記動画像あるいは前記静止画像を検索するのに用いる原検索用メタデータを抽出するメタデータ抽出過程と、
   前記演算部が、前記メタデータ候補記憶部を参照して、前記原検索用メタデータから前記検索用メタデータのフィルタリングを行うフィルタリング過程と、
   を備えたことを特徴とする情報処理方法。
8. 動画像あるいは静止画像に付与される検索用メタデータの候補となるメタデータ候補を記憶したメタデータ候補記憶部を有する情報処理装置をコンピュータにより制御するための制御プログラムであって、
   前記動画像あるいは前記静止画像に関連づけられた関連コンテンツから前記動画像あるいは前記静止画像を検索するのに用いる原検索用メタデータを抽出させ、
   前記メタデータ候補記憶部を参照して、前記原検索用メタデータから前記検索用メタデータのフィルタリングを行わせる、
   ことを特徴とする制御プログラム。

Images