JP2014238712A - コンテンツ分析装置、コンテンツ分析方法及びコンテンツ分析プログラム - Google Patents

Abstract

【課題】映像コンテンツに登場している出演者別の出演時間帯を特定することができるようにする。
【解決手段】顔画像データベース４から顔画像検出部２により検出された出演者の顔画像と一致する顔画像に対応する出演者のタレントＩＤを取得する顔画像照合部５と、顔画像検出部４により出演者の顔画像が検出されたフレームの再生時刻から前記出演者の出演時間を特定する出演時間特定部６とを設け、出演者データベース構築部７が、顔画像照合部５により取得された出演者のタレントＩＤと出演時間特定部６により特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯Ｔｚを示す出演者データベース８を構築する。
【選択図】図１

Description

この発明は、例えば、録画済みの映像コンテンツに登場している各出演者の出演時間を特定するコンテンツ分析装置、コンテンツ分析方法及びコンテンツ分析プログラムに関するものである。

例えば、録画済みの映像コンテンツの内容を確認できるようにするために、電子番組表であるＥＰＧ（Ｅｌｅｃｔｒｏｎｉｃ Ｐｒｏｇｒａｍ Ｇｕｉｄｅ）を取得して、そのＥＰＧに含まれている出演者や番組に関する情報を表示するコンテンツ分析装置が開発されている。
また、映像コンテンツにおける各シーンの概要を把握することができるようにするために、その映像コンテンツを分析して、その映像コンテンツの各シーンの代表的なサムネイル画像を表示するコンテンツ分析装置も開発されている。
以下の特許文献１，２には、映像コンテンツに登場している各出演者の顔画像を抽出して、各出演者の顔画像をリスト表示するコンテンツ分析装置が開示されている。

特開２０１０−１０３７６４号公報（段落番号［０００６］、図３） 特開２０１０−１１４７３３号公報（段落番号［０００６］、図３）

従来のコンテンツ分析装置は以上のように構成されているので、映像コンテンツにおける各シーンの代表的なサムネイル画像や、映像コンテンツに登場している各出演者の顔画像を表示することができるが、映像コンテンツに登場している各出演者の出演時間を特定する技術を備えていない。このため、例えば、ユーザが或る出演者が登場しているシーンだけを視聴したいような場合でも、映像コンテンツの先頭から再生しなければ、当該出演者が登場しているシーンを見逃してしまう課題があった。
なお、ユーザが映像コンテンツの早送り操作や、映像コンテンツの倍速再生操作などを行えば、当該出演者が登場しているシーンの再生を始めるまでの時間を短縮することができるが、面倒な操作をユーザに強いることになり、また、当該出演者が登場しているシーンを通り越してしまって、当該シーンを見逃してしまうことがある課題があった。

この発明は前記のような課題を解決するためになされたもので、映像コンテンツに登場している出演者別の出演時間帯を特定することができるコンテンツ分析装置、コンテンツ分析方法及びコンテンツ分析プログラムを得ることを目的とする。

この発明に係るコンテンツ分析装置は、映像コンテンツを構成している各々のフレームから、その映像コンテンツに登場している出演者の顔画像を検出する顔画像検出手段と、出演者の顔画像が格納されている顔画像データベース内の顔画像と顔画像検出手段により検出された出演者の顔画像を照合する顔画像照合手段と、顔画像検出手段により出演者の顔画像が検出されたフレームの再生時刻から前記出演者の出演時間を特定する出演時間特定手段とを設け、出演者データベース構築手段が、顔画像照合手段の照合結果に基づいて、顔画像検出手段により検出された出演者の顔画像と出演時間特定手段により特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯を示す出演者データベースを構築するようにしたものである。

この発明によれば、映像コンテンツを構成している各々のフレームから出演者の顔画像を検出する顔画像検出手段と、顔画像データベース内の顔画像と顔画像検出手段により検出された出演者の顔画像を照合する顔画像照合手段と、顔画像検出手段により出演者の顔画像が検出されたフレームの再生時刻から前記出演者の出演時間を特定する出演時間特定手段とを設け、出演者データベース構築手段が、顔画像照合手段の照合結果に基づいて、顔画像検出手段により検出された出演者の顔画像と出演時間特定手段により特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯を示す出演者データベースを構築するように構成したので、映像コンテンツに登場している出演者別の出演時間帯を特定することができる効果がある。

この発明の実施の形態１によるコンテンツ分析装置を示す構成図である。 この発明の実施の形態１によるコンテンツ分析装置の処理内容（コンテンツ分析方法）を示すフローチャートである。 顔画像データベース４の構築例を示す説明図である。 出演者データベース８の構築例を示す説明図である。 出演時間帯画面の表示例を示す説明図である。 この発明の実施の形態２によるコンテンツ分析装置を示す構成図である。 関連度データベース１２により記憶されている出演者間の関連度の一例を示す説明図である。 出演者の相関図の一例を示す説明図である。 この発明の実施の形態３によるコンテンツ分析装置を示す構成図である。 この発明の実施の形態４によるコンテンツ分析装置を示す構成図である。 属性情報データベース２２により記憶されている属性情報の一例を示す説明図である。 この発明の実施の形態５によるコンテンツ分析装置を示す構成図である。 出演情報データベース２５により記憶されている出演情報の一例を示す説明図である。 この発明の実施の形態６によるコンテンツ分析装置を示す構成図である。 この発明の実施の形態７によるコンテンツ分析装置を示す構成図である。

実施の形態１．
図１はこの発明の実施の形態１によるコンテンツ分析装置を示す構成図である。
図１において、コンテンツ記憶部１は例えばＲＡＭやハードディスクなどの記憶装置から構成されており、例えば、録画済みの映像コンテンツや現在放送中の映像コンテンツなどを記憶する。
顔画像検出部２は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、コンテンツ記憶部１により記憶されている映像コンテンツを構成している各々のフレームから、その映像コンテンツに登場している出演者の顔画像を検出する処理を実施する。なお、顔画像検出部２は顔画像検出手段を構成している。

出演者情報収集部３は例えばインターネットなどの外部ネットワークに対するインタフェース機器（例えば、無線通信装置、ケーブルモデムなど）を実装しており、外部ネットワーク上のサーバから、出演者の識別情報であるタレントＩＤ、タレント名及び顔画像を収集して、出演者のタレントＩＤ、タレント名及び顔画像が対応付けられている顔画像データベース４を構築する処理を実施する。
顔画像データベース４は例えばＲＡＭやハードディスクなどの記憶装置から構成されており、出演者のタレントＩＤ、タレント名及び顔画像の対応関係を記憶している。

顔画像照合部５は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、顔画像データベース４内の顔画像と顔画像検出部２により検出された出演者の顔画像を照合し、その顔画像と一致する顔画像が顔画像データベース４内に登録されていれば、その顔画像データベース４から前記顔画像に対応する出演者のタレントＩＤを取得する処理を実施する。なお、顔画像照合部５は顔画像照合手段を構成している。
出演時間特定部６は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、顔画像検出部２により出演者の顔画像が検出されたフレームの再生時刻から前記出演者の出演時間を特定する処理を実施する。なお、出演時間特定部６は出演時間特定手段を構成している。

出演者データベース構築部７は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、顔画像照合部５により取得された出演者のタレントＩＤと出演時間特定部６により特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯Ｔｚを示す出演者データベース８を構築する処理を実施する。なお、出演者データベース構築部７は出演者データベース構築手段を構成している。
出演者データベース８は例えばＲＡＭやハードディスクなどの記憶装置から構成されており、出演者別の出演時間帯を記憶している。

重要度判定部９は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、出演者データベース構築部７により構築された出演者データベース８を参照して、出演者別の合計出演時間Ｔｚ_ａｌｌを算出し、各出演者の合計出演時間Ｔｚ_ａｌｌを基準にして、各出演者の重要度を判定する処理を実施する。なお、重要度判定部９は重要度判定手段を構成している。

操作ＵＩ表示部１０はユーザの操作を受け付けるユーザインタフェース（例えば、リモコン、スマートフォンやタブレットなどの外部装置から送信された操作信号を受信して、その操作信号が示す操作内容を解析する処理部）、操作内容にしたがって画面をディスプレイに描画するＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）や、画面を表示するディスプレイなどから構成されており、出演者データベース構築部７により構築された出演者データベース８を参照して、出演者別の出演時間帯を示す出演時間帯画面を表示する処理を実施する。詳細は後述するが、出演時間帯画面は、重要度判定部９により判定された重要度が高い出演者ほど、当該出演者の出演時間帯が目立つように生成された画面である。なお、操作ＵＩ表示部１０は画面表示手段を構成している。

図１の例では、コンテンツ分析装置の構成要素であるコンテンツ記憶部１、顔画像検出部２、出演者情報収集部３、顔画像データベース４、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、出演者データベース８、重要度判定部９及び操作ＵＩ表示部１０のそれぞれが専用のハードウェアで構成されているものを想定しているが、コンテンツ分析装置がコンピュータで構成されていてもよい。
コンテンツ分析装置がコンピュータで構成されている場合、コンテンツ記憶部１、顔画像データベース４及び出演者データベース８をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、顔画像検出部２、出演者情報収集部３、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、重要度判定部９及び操作ＵＩ表示部１０の処理内容を記述しているコンテンツ分析プログラムをコンピュータのメモリに格納して、当該コンピュータの演算制御部であるＣＰＵが当該メモリに格納されているコンテンツ分析プログラムを実行するようにすればよい。
図２はこの発明の実施の形態１によるコンテンツ分析装置の処理内容（コンテンツ分析方法）を示すフローチャートである。

次に動作について説明する。
まず、出演者情報収集部３は、例えば、外部ネットワーク上のサーバに対して定期的にアクセスして、そのサーバから出演者の識別情報であるタレントＩＤ、タレント名（出演者名）及び顔画像を収集する。
外部ネットワーク上のサーバとしては、例えば、タレント名鑑などを管理している会社のサーバなどが考えられるが、出演者のタレントＩＤ、タレント名及び顔画像を配信する機能を備えているサーバであれば、いかなるものでもよい。
出演者情報収集部３は、サーバから出演者のタレントＩＤ、タレント名及び顔画像を収集する毎に、出演者のタレントＩＤ、タレント名及び顔画像が対応付けられている顔画像データベース４を最新の状態に更新する。
ここで、図３は顔画像データベース４の構築例を示す説明図であり、図３の例では、タレントＩＤ、タレント名、顔画像及び重要度（後述する）の対応関係が記録されている。

顔画像検出部２は、コンテンツ記憶部１により記憶されている映像コンテンツを入力し、その映像コンテンツを構成している各々のフレームから、その映像コンテンツに登場している出演者の顔画像を検出し、その顔画像を顔画像照合部５出力する（図２のステップＳＴ１）。
映像コンテンツを構成している各々のフレームから、出演者の顔画像を検出する処理自体は公知の技術であるため詳細な説明を省略する。

顔画像照合部５は、顔画像検出部２から出演者の顔画像を受けると、その顔画像と顔画像データベース４に登録されている１以上の顔画像とを照合する（ステップＳＴ２）。
顔画像の照合処理自体は公知の技術であるため詳細な説明を省略するが、例えば、照合対象の顔画像の特徴点をそれぞれ抽出し、特徴点が一致している数が所定数以上であれば、２つの顔画像が一致していると判断する手法などが考えられる。
顔画像照合部５は、顔画像検出部２から出力された出演者の顔画像と一致している顔画像が顔画像データベース４内に登録されていれば（ステップＳＴ３）、その顔画像データベース４から前記顔画像に対応する出演者のタレントＩＤを取得し、そのタレントＩＤを出演者データベース構築部７に出力する（ステップＳＴ４）。

出演時間特定部６は、顔画像検出部２が出演者の顔画像を検出すると、顔画像検出部２により出演者の顔画像が検出されたフレームの再生時刻から前記出演者の出演時間を特定して、その出演者の出演時間を出演者データベース構築部７に出力する（ステップＳＴ５）。
例えば、顔画像検出部２により出演者の顔画像が検出されたフレームが、先頭から第Ｋ番目のフレームである場合、第Ｋ番目のフレームの再生時刻ｔ_Ｋ（先頭のフレームの再生時刻を“０”とする相対的な時刻）を出演者の出演時間として特定する。なお、各フレームの再生時刻は、映像コンテンツの再生速度から特定することができる。

出演者データベース構築部７は、顔画像照合部５からタレントＩＤを受け、出演時間特定部６から出演者の出演時間を受けると、その出演者のタレントＩＤと出演時間を紐付けて、出演者別の出演時間帯Ｔｚを示す出演者データベース８を構築する（ステップＳＴ６）。
ここで、図４は出演者データベース８の構築例を示す説明図である。
図４では、タレントＩＤ「０００１」の出演者の出演時間帯と、タレントＩＤ「０００２」の出演者の出演時間帯とを例示している。
例えば、タレントＩＤ「０００２」の出演者の顔画像が検出されているフレームの再生時刻が“００：００：３３”〜“００：００：５７”の間連続しているため、タレントＩＤ「０００２」の出演者の出演時間帯Ｔｚとして、出演開始時刻が“００：００：３３”で、出演終了時刻が“００：００：５７”であるとしている。

重要度判定部９は、出演者データベース構築部７が出演者データベース８を構築すると、その出演者データベース８を参照して、出演者別の合計出演時間Ｔｚ_ａｌｌを算出する（ステップＳＴ７）。
図４の例では、タレントＩＤ「０００１」の出演者の合計出演時間Ｔｚ_{ａｌｌ−１}は３分２９秒（＝５７秒＋２分３２秒）、タレントＩＤ「０００２」の出演者の合計出演時間Ｔｚ_{ａｌｌ−２}は０分２５秒である。
重要度判定部９は、出演者別の合計出演時間Ｔｚ_ａｌｌを算出すると、出演者別の合計出演時間Ｔｚ_ａｌｌを比較して、各出演者の重要度を判定する（ステップＳＴ８）。即ち、合計出演時間Ｔｚ_ａｌｌが長い出演者ほど、重要な出演者であると認定して、各出演者の重要度を判定する。
図４の例では、タレントＩＤ「０００１」の出演者の重要度が、タレントＩＤ「０００２」の出演者の重要度より高いと判定される。

操作ＵＩ表示部１０は、外部装置から出演時間帯画面の表示を指示するユーザの操作信号を受けると（ステップＳＴ９）、出演者データベース構築部７により構築された出演者データベース８を参照して、出演者別の出演時間帯Ｔｚを示す出演時間帯画面をディスプレイに表示する（ステップＳＴ１０）。
ただし、操作ＵＩ表示部１０は、出演者別の出演時間帯Ｔｚを示す出演時間帯画面を生成する際、例えば、重要度判定部９により判定された重要度が高い出演者の出演時間帯Ｔｚを画面手前側に配置することで、重要度が高い出演者の出演時間帯Ｔｚが目立つように出演時間帯画面を生成する。
ここで、図５は出演時間帯画面の表示例を示す説明図である。
図５では、出演者の重要度が、出演者Ａ（重要度１）＞出演者Ｃ（重要度２）＞出演者Ｂ（重要度３）＞出演者Ｄ（重要度４）である例を示しており、このため、画面手前側から出演者Ａの出演時間帯、出演者Ｃの出演時間帯、出演者Ｂの出演時間帯、出演者Ｄの出演時間帯が配置されている。

以上で明らかなように、この実施の形態１によれば、映像コンテンツを構成している各々のフレームから出演者の顔画像を検出する顔画像検出部２と、顔画像データベース４内の顔画像と顔画像検出部２により検出された出演者の顔画像を照合し、その顔画像と一致する顔画像が顔画像データベース４内に登録されていれば、その顔画像データベース４から前記顔画像に対応する出演者のタレントＩＤを取得する顔画像照合部５と、顔画像検出部２により出演者の顔画像が検出されたフレームの再生時刻から前記出演者の出演時間を特定する出演時間特定部６とを設け、出演者データベース構築部７が、顔画像照合部５により取得された出演者のタレントＩＤと出演時間特定部６により特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯Ｔｚを示す出演者データベース８を構築するように構成したので、映像コンテンツに登場している出演者別の出演時間帯を特定することができる効果を奏する。

また、この実施の形態１によれば、出演者データベース構築部７により構築された出演者データベース８を参照して、出演者別の合計出演時間を算出し、各出演者の合計出演時間を基準にして、各出演者の重要度を判定する重要度判定部９を備え、操作ＵＩ表示部１０が、重要度判定部９により判定された重要度が高い出演者ほど、当該出演者の出演時間帯が目立つ出演時間帯画面を表示するように構成したので、出演時間帯の確認を希望するユーザが多いと思われる主演クラスの出演者の出演時間帯を示す表示バーを速やかに見つけることができる効果を奏する。

なお、この実施の形態１では、顔画像データベース４がコンテンツ分析装置内に実装されているものを想定しているが、顔画像データベース４がコンテンツ分析装置の外部に配置されて、例えば、顔画像データベース４がＬＡＮなどの内部ネットワークを介してコンテンツ分析装置と接続されているものであってもよい。
この場合、顔画像照合部５が、図示せぬＬＡＮインタフェースを用いて、顔画像データベース４にアクセスするようにすればよい。

また、この実施の形態１では、コンテンツ記憶部１がコンテンツ分析装置内の記憶装置である例を示しているが、例えば、テレビやディスクレコーダなどの映像機器内の記憶装置であって、顔画像検出部２が映像機器内の記憶装置から映像コンテンツを読み出すものであってもよい。

また、この実施の形態１では、顔画像データベース４内の顔画像と顔画像検出部２により検出された出演者の顔画像を照合し、その顔画像と一致する顔画像が顔画像データベース４内に登録されていれば、その顔画像データベース４から前記顔画像に対応する出演者のタレントＩＤを取得する顔画像照合部５を備え、出演者データベース構築部７が、顔画像照合部５により取得された出演者のタレントＩＤと出演時間特定部６により特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯Ｔｚを示す出演者データベース８を構築する場合について説明したが、顔画像照合部５は、映像コンテンツを構成している各々のフレームから過去に抽出された出演者の顔画像と現在のフレームから抽出された出演者の顔画像とを照合するように構成してもよい。
また、出演者データベース構築部７は、顔画像照合部５の照合結果に基づいて、顔画像検出部２により検出された出演者の顔画像と出演時間特定部６により特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯を示す出演者データベースを構築するように構成してもよい。
例えば、顔画像データベース４は、映像コンテンツを構成している各々のフレームから抽出された顔画像を格納するように構成され、顔画像照合部５は、顔画像データベース４に格納された映像コンテンツを構成している各々のフレームから抽出された顔画像と、現在のフレームから抽出された出演者の顔画像とを照合する。そして、出演者データベース構築部７は、顔画像照合部５の照合結果に基づいて、顔画像検出部２により検出された出演者の顔画像と出演時間特定部６により特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯を示す出演者データベースを構築する。

実施の形態２．
図６はこの発明の実施の形態２によるコンテンツ分析装置を示す構成図であり、図において、図１と同一符号は同一または相当部分を示すので説明を省略する。
関連度算出部１１は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、出演者データベース構築部７により構築された出演者データベース８を参照して、各々の出演者間の共演時間を特定し、その共演時間から各々の出演者間の関連度を算出する処理を実施する。なお、関連度算出部１１は関連度算出手段を構成している。
関連度データベース１２は例えばＲＡＭやハードディスクなどの記憶装置から構成されており、関連度算出部１１により算出された各々の出演者間の関連度を記憶する。

操作ＵＩ表示部１３はユーザインタフェース、ＧＰＵ及びディスプレイなどから構成されており、図１の操作ＵＩ表示部１０と同様に、出演者データベース構築部７により構築された出演者データベース８を参照して、出演者別の出演時間帯を示す出演時間帯画面を表示する処理を実施する他に、関連度データベース１２により記憶されている各々の出演者間の関連度を示す相関図をディスプレイに表示する処理を実施する。なお、操作ＵＩ表示部１３は画面表示手段を構成している。

図６の例では、コンテンツ分析装置の構成要素であるコンテンツ記憶部１、顔画像検出部２、出演者情報収集部３、顔画像データベース４、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、出演者データベース８、重要度判定部９、関連度算出部１１、関連度データベース１２及び操作ＵＩ表示部１３のそれぞれが専用のハードウェアで構成されているものを想定しているが、コンテンツ分析装置がコンピュータで構成されていてもよい。
コンテンツ分析装置がコンピュータで構成されている場合、コンテンツ記憶部１、顔画像データベース４、出演者データベース８及び関連度データベース１２をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、顔画像検出部２、出演者情報収集部３、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、重要度判定部９、関連度算出部１１及び操作ＵＩ表示部１３の処理内容を記述しているコンテンツ分析プログラムをコンピュータのメモリに格納して、当該コンピュータの演算制御部であるＣＰＵが当該メモリに格納されているコンテンツ分析プログラムを実行するようにすればよい。

次に動作について説明する。
ただし、関連度算出部１１、関連度データベース１２及び操作ＵＩ表示部１３以外は、上記実施の形態１と同様であるため、ここでは、関連度算出部１１、関連度データベース１２及び操作ＵＩ表示部１３の処理内容だけを説明する。

関連度算出部１１は、出演者データベース構築部７が出演者データベース８を構築すると、その出演者データベース８を参照して、各々の出演者間の共演時間Ｔｃｏを特定する。
即ち、関連度算出部１１は、各々の出演者の出演時間が重複している時間を共演時間Ｔｃｏとして特定する。
図４の例では、タレントＩＤ「０００１」の出演者の出演時間帯“００：００：０１”〜“００：００：５７”のうち、出演時間帯“００：００：３３”〜“００：００：５７”が、タレントＩＤ「０００２」の出演者の出演時間帯“００：００：３３”〜“００：００：５７”と重複しているので、タレントＩＤ「０００１」の出演者とタレントＩＤ「０００２」の出演者間の共演時間は、０分２５秒になる。

関連度算出部１１は、各々の出演者間の共演時間Ｔｃｏを特定すると、その共演時間Ｔｃｏから各々の出演者間の関連度Ａｓを算出し、その関連度Ａｓを関連度データベース１２に格納する。
各々の出演者間の関連度Ａｓは、例えば、下記の式（１）に示すように算出する。

式（１）において、Ｔ_{ｔｏｔａｌ}は映像コンテンツ全体の再生時間である。
図７は関連度データベース１２により記憶されている出演者間の関連度Ａｓの一例を示す説明図である。

操作ＵＩ表示部１３は、外部装置から出演時間帯画面の表示を指示するユーザの操作信号を受けると、図１の操作ＵＩ表示部１０と同様に、出演者データベース構築部７により構築された出演者データベース８を参照して、出演者別の出演時間帯Ｔｚを示す出演時間帯画面をディスプレイに表示する。
また、操作ＵＩ表示部１３は、外部装置から任意の出演者に関する相関図の表示を指示するユーザの操作信号を受けると、関連度データベース１２により記憶されている各々の出演者間の関連度Ａｓを参照して、その出演者に関する相関図（出演者間の関連度Ａｓを示す相関図）を生成し、その相関図をディスプレイに表示する。

ここで、図８は出演者の相関図の一例を示す説明図である。
図８の例では、出演者Ａに関する相関図が表示されており、出演者Ａに対する関連度が高い出演者ほど、出演者Ａと近い位置に表示されている。
因みに、図８の例では、出演者Ａに対する関連度が、出演者Ｈ＞出演者Ｇ＞出演者Ｂ＞出演者Ｄ＞出演者Ｃ＞出演者Ｆ＞出演者Ｅであるため、出演者Ｈの顔画像が出演者Ａの顔画像と最も近い位置に表示され、出演者Ｅの顔画像が出演者Ａの顔画像と最も遠い位置に表示されている。
また、出演者Ａに対する関連度が高い出演者ほど、出演者Ａと結んでいる線が太くなっている。

以上で明らかなように、この実施の形態２によれば、出演者データベース構築部７により構築された出演者データベース８を参照して、各々の出演者間の共演時間を特定し、その共演時間から各々の出演者間の関連度を算出する関連度算出部１１を設け、操作ＵＩ表示部１３が、関連度算出部１１により算出された各々の出演者間の関連度を示す相関図をディスプレイに表示するように構成したので、共演している出演者を容易に把握することができるとともに、出演者間の関係性を容易に把握することができる効果を奏する。

実施の形態３．
図９はこの発明の実施の形態３によるコンテンツ分析装置を示す構成図であり、図において、図６と同一符号は同一または相当部分を示すので説明を省略する。
操作ＵＩ表示部１４はユーザインタフェース、ＧＰＵ及びディスプレイなどから構成されており、図６の操作ＵＩ表示部１３と同様に、出演者別の出演時間帯を示す出演時間帯画面を表示する処理や、各々の出演者間の関連度を示す相関図を表示する処理を実施する他に、映像コンテンツに登場している出演者の中から、任意の出演者の選択を受け付けて、その出演者のタレントＩＤを出力する処理を実施する。なお、操作ＵＩ表示部１４は画面表示手段及び出演者選択受付手段を構成している。

コンテンツ再生部１５は例えばＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコンなどから構成されており、出演者データベース構築部７により構築された出演者データベース８を参照して、操作ＵＩ表示部１４から出力されたタレントＩＤが示す出演者の出演時間帯を特定し、コンテンツ記憶部１により記憶されている映像コンテンツにおける前記出演時間帯のフレームを再生する処理を実施する。なお、コンテンツ再生部１５はコンテンツ再生手段を構成している。

図９の例では、コンテンツ分析装置の構成要素であるコンテンツ記憶部１、顔画像検出部２、出演者情報収集部３、顔画像データベース４、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、出演者データベース８、重要度判定部９、関連度算出部１１、関連度データベース１２、操作ＵＩ表示部１４及びコンテンツ再生部１５のそれぞれが専用のハードウェアで構成されているものを想定しているが、コンテンツ分析装置がコンピュータで構成されていてもよい。
コンテンツ分析装置がコンピュータで構成されている場合、コンテンツ記憶部１、顔画像データベース４、出演者データベース８及び関連度データベース１２をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、顔画像検出部２、出演者情報収集部３、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、重要度判定部９、関連度算出部１１、操作ＵＩ表示部１４及びコンテンツ再生部１５の処理内容を記述しているコンテンツ分析プログラムをコンピュータのメモリに格納して、当該コンピュータの演算制御部であるＣＰＵが当該メモリに格納されているコンテンツ分析プログラムを実行するようにすればよい。

次に動作について説明する。
ただし、操作ＵＩ表示部１４及びコンテンツ再生部１５以外は、上記実施の形態２と同様であるため、ここでは、操作ＵＩ表示部１４及びコンテンツ再生部１５の処理内容だけを説明する。

操作ＵＩ表示部１４は、例えば、図５の出演時間帯画面、あるいは、図８の相関図を表示しているとき、外部装置から或る出演者を選択する操作信号（例えば、出演者の顔画像をクリックする操作など）を受けるとともに、「再生」コマンドを選択する操作信号を受けると、出演者データベース構築部７により構築された出演者データベース８を参照して、その操作信号が示す出演者のタレントＩＤを特定し、そのタレントＩＤをコンテンツ再生部１５に出力する。

コンテンツ再生部１５は、操作ＵＩ表示部１４からタレントＩＤを受けると、出演者データベース構築部７により構築された出演者データベース８を参照して、そのタレントＩＤが示す出演者の出演時間帯を特定する。
図４の例では、タレントＩＤが「０００１」であれば、出演時間帯が“００：００：０１”〜“００：００：５７”と“００：０１：３２”〜“００：０４：０３”であると特定される。
コンテンツ再生部１５は、タレントＩＤが示す出演者の出演時間帯を特定すると、コンテンツ記憶部１により記憶されている映像コンテンツを構成しているフレームのうち、その出演時間帯に対応するフレームを再生する。
なお、映像コンテンツの再生中は、出演時間帯画面や相関図を非表示にして、映像コンテンツの再生画面だけをディスプレイに表示するようにしてもよいが、ディスプレイを分割して、映像コンテンツの再生画面と一緒に出演時間帯画面や相関図をディスプレイに表示するようにしてもよい。

以上で明らかなように、この実施の形態３によれば、映像コンテンツに登場している出演者の中から、任意の出演者の選択を受け付けて、その出演者のタレントＩＤを出力する操作ＵＩ表示部１４を設け、コンテンツ再生部１５が、出演者データベース構築部７により構築された出演者データベース８を参照して、操作ＵＩ表示部１４から出力されたタレントＩＤが示す出演者の出演時間帯を特定し、コンテンツ記憶部１により記憶されている映像コンテンツにおける前記出演時間帯のフレームを再生するように構成したので、ユーザが所望の出演者を指定して、所望の出演者が登場しているシーンだけを視聴することができる効果を奏する。

この実施の形態３では、操作ＵＩ表示部１４が、映像コンテンツに登場している出演者の中から、任意の出演者の選択を受け付ける例を示したが、複数の出演者の選択を受け付けて、複数の出演者のタレントＩＤを出力するようにしてもよい。
この場合、コンテンツ再生部１５は、操作ＵＩ表示部１４から複数の出演者のタレントＩＤを受けると、出演者データベース構築部７により構築された出演者データベース８を参照して、複数のタレントＩＤが示す出演者の出演時間から共演時間帯を特定し、映像コンテンツを構成しているフレームのうち、その共演時間帯に対応するフレームを再生する。
図４の例では、タレントＩＤ「０００１」とタレントＩＤ「０００２」が出力された場合、共演時間帯が“００：００：３３”〜“００：００：５７”であると特定される。
これにより、ユーザが所望の共演者を指定して、所望の共演者が登場しているシーンだけを視聴することができる効果を奏する。

この実施の形態３では、出演者の顔画像をクリックする操作を行うことで、出演者を選択する例を示したが、図５の出演時間帯画面において、所望の出演者の出演時間帯中の所望時間をクリックされた場合、コンテンツ再生部１５が、クリックされた時間のフレームから再生を開始して、その出演時間帯の終了時間まで再生を行うようにしてもよい。

実施の形態４．
図１０はこの発明の実施の形態４によるコンテンツ分析装置を示す構成図であり、図において、図９と同一符号は同一または相当部分を示すので説明を省略する。
出演者情報収集部２１は例えばインターネットなどの外部ネットワークに対するインタフェース機器（例えば、無線通信装置、ケーブルモデムなど）を実装しており、図１の出演者情報収集部３と同様に、外部ネットワーク上のサーバから、出演者の識別情報であるタレントＩＤ、タレント名及び顔画像を収集して、出演者のタレントＩＤ、タレント名及び顔画像が対応付けられている顔画像データベース４を構築する処理を実施する他に、外部ネットワーク上のサーバから、出演者の属性情報（例えば、生年月日、血液型、出身地など）を収集して、出演者のタレントＩＤと属性情報が対応付けられている属性情報データベース２２を構築する処理を実施する。
属性情報データベース２２は例えばＲＡＭやハードディスクなどの記憶装置から構成されており、出演者のタレントＩＤと属性情報の対応関係を記憶している。
この実施の形態４では、顔画像データベース４と属性情報データベース２２が別々のデータベースである例を説明するが、顔画像データベース４と属性情報データベース２２が統合されている１つのデータベースであってもよい。

操作ＵＩ表示部２３はユーザインタフェース、ＧＰＵ及びディスプレイなどから構成されており、図９の操作ＵＩ表示部１４と同様に、出演者別の出演時間帯を示す出演時間帯画面を表示する処理、各々の出演者間の関連度を示す相関図を表示する処理や、映像コンテンツに登場している出演者の中から、任意の出演者の選択を受け付けて、その出演者のタレントＩＤを出力する処理を実施する他に、属性情報データベース２２の中から、そのタレントＩＤが示す出演者の属性情報を取得して、その出演者の属性情報をディスプレイに表示する処理を実施する。なお、操作ＵＩ表示部２３は画面表示手段、出演者選択受付手段及び属性情報表示手段を構成している。

図１０の例では、コンテンツ分析装置の構成要素であるコンテンツ記憶部１、顔画像検出部２、出演者情報収集部２１、顔画像データベース４、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、出演者データベース８、重要度判定部９、関連度算出部１１、関連度データベース１２、属性情報データベース２２、操作ＵＩ表示部２３及びコンテンツ再生部１５のそれぞれが専用のハードウェアで構成されているものを想定しているが、コンテンツ分析装置がコンピュータで構成されていてもよい。
コンテンツ分析装置がコンピュータで構成されている場合、コンテンツ記憶部１、顔画像データベース４、出演者データベース８、関連度データベース１２及び属性情報データベース２２をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、顔画像検出部２、出演者情報収集部２１、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、重要度判定部９、関連度算出部１１、操作ＵＩ表示部２３及びコンテンツ再生部１５の処理内容を記述しているコンテンツ分析プログラムをコンピュータのメモリに格納して、当該コンピュータの演算制御部であるＣＰＵが当該メモリに格納されているコンテンツ分析プログラムを実行するようにすればよい。

次に動作について説明する。
出演者情報収集部２１、属性情報データベース２２及び操作ＵＩ表示部２３以外は、上記実施の形態３と同様であるため、ここでは、出演者情報収集部２１、属性情報データベース２２及び操作ＵＩ表示部２３の処理内容だけを説明する。

出演者情報収集部２１は、図１の出演者情報収集部３と同様に、例えば、外部ネットワーク上のサーバに対して定期的にアクセスして、そのサーバから出演者の識別情報であるタレントＩＤ、タレント名及び顔画像を収集する。
また、出演者情報収集部２１は、そのサーバから出演者の属性情報を収集する。
出演者情報収集部２１は、サーバから出演者のタレントＩＤ、タレント名、顔画像及び属性情報を収集する毎に、出演者のタレントＩＤ、タレント名及び顔画像が対応付けられている顔画像データベース４を最新の状態に更新する。
また、出演者情報収集部２１は、出演者のタレントＩＤ、タレント名及び属性情報が対応付けられている属性情報データベース２２を最新の状態に更新する。
ここで、図１１は属性情報データベース２２により記憶されている属性情報の一例を示す説明図である。
図１１の例では、出演者の属性情報として、生年月日、血液型、出身地を記録しているが、これは一例に過ぎず、例えば、主な出演作品や受賞歴などの属性情報を記録するようにしてもよい。

操作ＵＩ表示部２３は、例えば、図５の出演時間帯画面、あるいは、図８の相関図を表示しているとき、外部装置から或る出演者を選択する操作信号（例えば、出演者の顔画像をダブルクリックする操作など）を受けると、出演者データベース構築部７により構築された出演者データベース８を参照して、その操作信号が示す出演者のタレントＩＤを特定し、属性情報データベース２２の中から、そのタレントＩＤが示す出演者の属性情報を取得して、その出演者の属性情報をディスプレイに表示する。
図１１の例では、タレントＩＤが「０００３」であれば、タレント名「佐□三郎」の生年月日（１９９８年５月６日）、血液型（Ｏ型）、出身地（千葉）をディスプレイに表示する。

以上で明らかなように、この実施の形態４によれば、操作ＵＩ表示部２３が、映像コンテンツに登場している出演者の中から、任意の出演者の選択を受け付けるとともに、属性情報データベース２２の中から、その出演者の属性情報を取得して、その出演者の属性情報をディスプレイに表示するように構成したので、映像コンテンツに登場している出演者が、どのような出演者であるのかを確認することができる効果を奏する。

実施の形態５．
図１２はこの発明の実施の形態５によるコンテンツ分析装置を示す構成図であり、図において、図１０と同一符号は同一または相当部分を示すので説明を省略する。
出演者情報収集部２４は例えばインターネットなどの外部ネットワークに対するインタフェース機器（例えば、無線通信装置、ケーブルモデムなど）を実装しており、図１０の出演者情報収集部２１と同様の処理を実施するほかに、出演者のタレントＩＤと、その出演者が出演している映像コンテンツを示す出演情報とが対応付けられている出演情報データベース２５を構築する処理を実施する。
出演情報データベース２５は例えばＲＡＭやハードディスクなどの記憶装置から構成されており、出演者のタレントＩＤと出演情報の対応関係を記憶している。

操作ＵＩ表示部２６はユーザインタフェース、ＧＰＵ及びディスプレイなどから構成されており、図１０の操作ＵＩ表示部２３と同様の処理を実施する他に、出演情報データベース２５の中から、選択を受け付けた出演者のタレントＩＤが示す出演者の出演情報を取得して、その出演情報が示す映像コンテンツの一覧を表示する処理を実施する。
また、操作ＵＩ表示部２６は出演者データベース構築部７により構築された出演者データベース８を参照して、選択を受け付けた出演者のタレントＩＤが示す出演時間帯を特定し、映像コンテンツにおける前記出演時間帯のフレームの一覧を表示する処理を実施する。なお、操作ＵＩ表示部２６は画面表示手段、出演者選択受付手段、属性情報表示手段及び一覧表示手段を構成している。

図１２の例では、コンテンツ分析装置の構成要素であるコンテンツ記憶部１、顔画像検出部２、出演者情報収集部２４、顔画像データベース４、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、出演者データベース８、重要度判定部９、関連度算出部１１、関連度データベース１２、属性情報データベース２２、出演情報データベース２５、操作ＵＩ表示部２６及びコンテンツ再生部１５のそれぞれが専用のハードウェアで構成されているものを想定しているが、コンテンツ分析装置がコンピュータで構成されていてもよい。
コンテンツ分析装置がコンピュータで構成されている場合、コンテンツ記憶部１、顔画像データベース４、出演者データベース８、関連度データベース１２、属性情報データベース２２及び出演情報データベース２５をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、顔画像検出部２、出演者情報収集部２４、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、重要度判定部９、関連度算出部１１、操作ＵＩ表示部２６及びコンテンツ再生部１５の処理内容を記述しているコンテンツ分析プログラムをコンピュータのメモリに格納して、当該コンピュータの演算制御部であるＣＰＵが当該メモリに格納されているコンテンツ分析プログラムを実行するようにすればよい。

次に動作について説明する。
出演者情報収集部２４、出演情報データベース２５及び操作ＵＩ表示部２６以外は、上記実施の形態４と同様であるため、ここでは、出演者情報収集部２４、出演情報データベース２５及び操作ＵＩ表示部２６の処理内容だけを説明する。

出演者情報収集部２４は、図１０の出演者情報収集部２１と同様に、顔画像データベース４及び属性情報データベース２２を構築するほか、例えば、外部ネットワーク上のサーバに対して定期的にアクセスして、そのサーバから出演者の識別情報であるタレントＩＤと、その出演者が出演している映像コンテンツを示す出演情報とを収集する。
出演者情報収集部２４は、サーバから出演者のタレントＩＤ及び出演情報を収集する毎に、出演者のタレントＩＤと出演情報が対応付けられている出演情報データベース２５を最新の状態に更新する。
ここで、図１３は出演情報データベース２５により記憶されている出演情報の一例を示す説明図である。

操作ＵＩ表示部２６は、例えば、図５の出演時間帯画面、あるいは、図８の相関図を表示しているとき、外部装置から或る出演者を選択する操作信号（例えば、出演者の顔画像をクリックする操作など）を受けるとともに、出演情報の一覧表示を指示する操作信号を受けると、出演者データベース構築部７により構築された出演者データベース８を参照して、その操作信号が示す出演者のタレントＩＤを特定し、出演情報データベース２５の中から、そのタレントＩＤが示す出演者の出演情報を取得して、その出演情報が示す映像コンテンツの一覧をディスプレイに表示する。
図１３の例では、タレントＩＤが「０００２」であれば、出演情報として、映画Ｘ、バラエティＣ、ドラマＢを一覧表示する。

また、操作ＵＩ表示部２６は、例えば、図５の出演時間帯画面、あるいは、図８の相関図を表示しているとき、外部装置から或る出演者を選択する操作信号（例えば、出演者の顔画像をクリックする操作など）を受けるとともに、出演時間帯のフレームの一覧表示を指示する操作信号を受けると、出演者データベース構築部７により構築された出演者データベース８を参照して、そのタレントＩＤが示す出演時間帯を特定し、映像コンテンツにおける前記出演時間帯のフレームの一覧をディスプレイに表示する。
図４の例では、タレントＩＤが「０００１」であれば、出演時間帯が“００：００：０１”〜“００：００：５７”におけるフレームの代表的なシーン（サムネイル画像）と、“００：０１：３２”〜“００：０４：０３”におけるフレームの代表的なシーン（サムネイル画像）とをディスプレイに表示する。

以上で明らかなように、この実施の形態５によれば、操作ＵＩ表示部２６が、出演情報データベース２５の中から、選択を受け付けた出演者のタレントＩＤが示す出演者の出演情報を取得して、その出演情報が示す映像コンテンツの一覧を表示するように構成したので、所望の出演者が、コンテンツ記憶部１により記憶されている映像コンテンツの他に、どのような映像コンテンツに出演者しているかを容易に把握することができる効果を奏する。
また、操作ＵＩ表示部２６が、出演者データベース構築部７により構築された出演者データベース８を参照して、選択を受け付けた出演者のタレントＩＤが示す出演時間帯を特定し、映像コンテンツにおける前記出演時間帯のフレームの一覧を表示するように構成したので、所望の出演者における各出演時間帯の内容を把握することができる効果を奏する。

この実施の形態５では、操作ＵＩ表示部２６が、映像コンテンツに登場している出演者の中から、任意の出演者の選択を受け付ける例を示したが、複数の出演者の選択を受け付けるようにしてもよい。
操作ＵＩ表示部２６は、複数の出演者の選択を受け付けると、出演情報データベース２５の中から、複数の出演者が共演している出演情報を取得して、その出演情報が示す映像コンテンツの一覧をディスプレイに表示する。
図１３の例では、タレントＩＤが「０００１」と「０００２」であれば、共演している出演情報として、映画Ｘを一覧表示する。

また、操作ＵＩ表示部２６は、複数の出演者の選択を受け付けると、出演者データベース構築部７により構築された出演者データベース８を参照して、複数の出演者の共演時間帯を特定し、映像コンテンツにおける前記共演時間帯のフレームの一覧をディスプレイに表示する。
図４の例では、タレントＩＤが「０００１」と「０００２」であれば、共演時間帯が“００：００：３３”〜“００：００：５７”であるため、“００：００：３３”〜“００：００：５７”におけるフレームの代表的なシーン（サムネイル画像）をディスプレイに表示する。

実施の形態６．
上記実施の形態１〜５では、操作ＵＩ表示部１０（または、操作ＵＩ表示部１３，１４，２３，２６）がコンテンツ分析装置に実装されており、操作ＵＩ表示部１０等が、出演時間帯画面等をディスプレイに表示するものを示したが、出演時間帯画面等の画面データを外部装置（例えば、スマートフォン、タブレットなど）に送信して、外部装置が出演時間帯画面等を表示するようにしてもよい。

図１４はこの発明の実施の形態６によるコンテンツ分析装置を示す構成図であり、図において、図１２と同一符号は同一または相当部分を示すので説明を省略する。
外部装置３１は例えばスマートフォンやタブレットなどの装置であり、赤外線やブルートゥース（Ｂｌｕｅｔｏｏｔｈ：登録商標／以下、省略して記載）などの無線機能を用いて、コンテンツ分析装置と各種の操作信号や画面データを送受信する。
画面データ出力部３２は赤外線やブルートゥースなどの無線機能を備えており、図１２の操作ＵＩ表示部２６と同様に、出演時間帯画面の生成処理、相関図の生成処理、映像コンテンツの再生処理、出演者の属性情報の取得処理及び出演情報の取得処理を実施するほか、外部装置３１からの要求に応じて、出演時間帯画面、相関図及び映像コンテンツの画面データや、出演者の属性情報及び出演情報を外部装置３１に送信する処理を実施する。なお、画面データ出力部３２は画面データ出力手段を構成している。

図１４の例では、コンテンツ分析装置の構成要素であるコンテンツ記憶部１、顔画像検出部２、出演者情報収集部２４、顔画像データベース４、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、出演者データベース８、重要度判定部９、関連度算出部１１、関連度データベース１２、属性情報データベース２２、出演情報データベース２５、コンテンツ再生部１５及び画面データ出力部３２のそれぞれが専用のハードウェアで構成されているものを想定しているが、コンテンツ分析装置がコンピュータで構成されていてもよい。
コンテンツ分析装置がコンピュータで構成されている場合、コンテンツ記憶部１、顔画像データベース４、出演者データベース８、関連度データベース１２、属性情報データベース２２及び出演情報データベース２５をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、顔画像検出部２、出演者情報収集部２４、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、重要度判定部９、関連度算出部１１、コンテンツ再生部１５及び画面データ出力部３２の処理内容を記述しているコンテンツ分析プログラムをコンピュータのメモリに格納して、当該コンピュータの演算制御部であるＣＰＵが当該メモリに格納されているコンテンツ分析プログラムを実行するようにすればよい。

次に動作について説明する。
外部装置３１及び画面データ出力部３２以外は、上記実施の形態５と同様であるため、ここでは、外部装置３１及び画面データ出力部３２の処理内容だけを説明する。
この実施の形態６のコンテンツ分析装置は、上記実施の形態１〜５と異なり、出演時間帯画面等の画面データを外部装置３１に送信して、外部装置３１が出演時間帯画面等を表示するものである。

画面データ出力部３２は、図１２の操作ＵＩ表示部２６と異なり、出演時間帯画面等を表示する機能を備えていないが、操作ＵＩ表示部２６と同様に、出演時間帯画面の生成処理、相関図の生成処理、映像コンテンツの再生処理、出演者の属性情報の取得処理及び出演情報の取得処理を実施する機能を備えている。
画面データ出力部３２は、外部装置３１から出演時間帯画面の送信要求を受信すると、その出演時間帯画面の画面データを外部装置３１に送信し、外部装置３１から相関図の送信要求を受信すると、その相関図の画面データを外部装置３１に送信し、外部装置３１から映像コンテンツの再生画面の送信要求を受信すると、その再生画面の画面データを外部装置３１に送信する。
また、画面データ出力部３２は、外部装置３１から出演者の属性情報の送信要求を受信すると、その属性情報を外部装置３１に送信し、外部装置３１から出演情報の送信要求を受信すると、その出演情報を外部装置３１に送信する。

外部装置３１は、画面データ出力部３２から送信された画面データにしたがって出演時間帯画面、相関図又は再生画面を自己のディスプレイに表示する。
また、外部装置３１は、画面データ出力部３２から送信された出演者の属性情報を自己のディスプレイに表示し、画面データ出力部３２から送信された出演者の出演情報を自己のディスプレイに表示する。
これにより、上記実施の形態５と同様の効果を得ることができる。

実施の形態７．
上記実施の形態６では、画面データ出力部３２が画面データ等を外部装置３１に送信するものを示したが、外部装置３１からデータベースの参照要求を受信すると、データベースの参照を受け付けるだけで、特に出演時間帯画面の生成処理等を実施せずに、外部装置３１が、図１２の操作ＵＩ表示部２６と同様の機能を備えて、出演時間帯画面の生成処理等を実施するようにしてもよい。

図１５はこの発明の実施の形態７によるコンテンツ分析装置を示す構成図であり、図において、図１２及び図１４と同一符号は同一または相当部分を示すので説明を省略する。
参照受付部３３は赤外線やブルートゥースなどの無線機能を備えており、外部装置３１からデータベース（コンテンツ記憶部１、出演者データベース８、関連度データベース１２、属性情報データベース２２、出演情報データベース２５）の参照要求を受信すると、データベースの参照を受け付ける処理を実施する。なお、参照受付部３３は参照受付手段を構成している。

図１５の例では、コンテンツ分析装置の構成要素であるコンテンツ記憶部１、顔画像検出部２、出演者情報収集部２４、顔画像データベース４、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、出演者データベース８、重要度判定部９、関連度算出部１１、関連度データベース１２、属性情報データベース２２、出演情報データベース２５、コンテンツ再生部１５及び参照受付部３３のそれぞれが専用のハードウェアで構成されているものを想定しているが、コンテンツ分析装置がコンピュータで構成されていてもよい。
コンテンツ分析装置がコンピュータで構成されている場合、コンテンツ記憶部１、顔画像データベース４、出演者データベース８、関連度データベース１２、属性情報データベース２２及び出演情報データベース２５をコンピュータの内部メモリ又は外部メモリ上に構成するとともに、顔画像検出部２、出演者情報収集部２４、顔画像照合部５、出演時間特定部６、出演者データベース構築部７、重要度判定部９、関連度算出部１１、コンテンツ再生部１５及び参照受付部３３の処理内容を記述しているコンテンツ分析プログラムをコンピュータのメモリに格納して、当該コンピュータの演算制御部であるＣＰＵが当該メモリに格納されているコンテンツ分析プログラムを実行するようにすればよい。

次に動作について説明する。
外部装置３１及び参照受付部３３以外は、上記実施の形態５と同様であるため、ここでは、外部装置３１及び参照受付部３３の処理内容だけを説明する。
この実施の形態７のコンテンツ分析装置は、上記実施の形態１〜５と異なり、出演時間帯画面の生成処理等を実施せず、外部装置３１が、図１２の操作ＵＩ表示部２６と同様の機能を備えて、出演時間帯画面の生成処理等を実施するものである。

外部装置３１は、出演時間帯画面、相関図、映像コンテンツの再生画面、出演者の属性情報、あるいは、出演情報を表示する必要がある場合、ユーザの操作の下で、データベース（コンテンツ記憶部１、出演者データベース８、関連度データベース１２、属性情報データベース２２、出演情報データベース２５）の参照要求をコンテンツ分析装置に送信する。
コンテンツ分析装置の参照受付部３３は、外部装置３１からデータベースの参照要求を受信すると、データベースの参照を受け付ける処理を実施する。
これにより、外部装置３１は、コンテンツ分析装置内のデータベース（コンテンツ記憶部１、出演者データベース８、関連度データベース１２、属性情報データベース２２、出演情報データベース２５）を参照することが可能になる。
ここでは、外部装置３１からデータベースの参照要求を受信すると、直ちに、データベースの参照を受け付けるものを示しているが、例えば、ユーザＩＤとパスワードの送信を外部装置３１に要求して、適正なユーザＩＤとパスワードを受信できたことを条件に、データベースの参照を受け付けるようにしてもよい。

外部装置３１は、図１２の操作ＵＩ表示部２６と同様の機能を備えており、コンテンツ分析装置内のデータベースの参照が可能なると、図１２の操作ＵＩ表示部２６と同様の方法で、出演時間帯画面の生成処理等を実施して、出演時間帯画面等を自己のディスプレイに表示する。
これにより、上記実施の形態５と同様の効果を得ることができる。

なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。

１ コンテンツ記憶部、２ 顔画像検出部（顔画像検出手段）、３ 出演者情報収集部、４ 顔画像データベース、５ 顔画像照合部（顔画像照合手段）、６ 出演時間特定部（出演時間特定手段）、７ 出演者データベース構築部（出演者データベース構築手段）、８ 出演者データベース、９ 重要度判定部（重要度判定手段）、１２ 関連度データベース、１０，１３ 操作ＵＩ表示部（画面表示手段）、１１ 関連度算出部（関連度算出手段）、１４ 操作ＵＩ表示部（画面表示手段、出演者選択受付手段）、１５ コンテンツ再生部（コンテンツ再生手段）、２１，２４ 出演者情報収集部、２２ 属性情報データベース、２３ 操作ＵＩ表示部（画面表示手段、出演者選択受付手段、属性情報表示手段）、２５ 出演情報データベース、２６ 操作ＵＩ表示部（画面表示手段、出演者選択受付手段、属性情報表示手段、一覧表示手段）、３１ 外部装置、３２ 画面データ出力部（画面データ出力手段）、３３ 参照受付部（参照受付手段）。

Claims (16)

1. 映像コンテンツを構成している各々のフレームから、前記映像コンテンツに登場している出演者の顔画像を検出する顔画像検出手段と、
   出演者の顔画像が格納されている顔画像データベース内の顔画像と前記顔画像検出手段により検出された出演者の顔画像を照合する顔画像照合手段と、
   前記顔画像検出手段により出演者の顔画像が検出されたフレームの再生時刻から前記出演者の出演時間を特定する出演時間特定手段と、
   前記顔画像照合手段の照合結果に基づいて、前記顔画像検出手段により検出された出演者の顔画像と前記出演時間特定手段により特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯を示す出演者データベースを構築する出演者データベース構築手段と
   を備えたコンテンツ分析装置。
2. 映像コンテンツを構成している各々のフレームから、前記映像コンテンツに登場している出演者の顔画像を検出する顔画像検出手段と、
   予め出演者の識別情報と顔画像が対応付けられている顔画像データベース内の顔画像と前記顔画像検出手段により検出された出演者の顔画像を照合し、前記顔画像と一致する顔画像が前記顔画像データベース内に登録されていれば、前記顔画像データベースから前記顔画像に対応する出演者の識別情報を取得する顔画像照合手段と、
   前記顔画像検出手段により出演者の顔画像が検出されたフレームの再生時刻から前記出演者の出演時間を特定する出演時間特定手段と、
   前記顔画像照合手段により取得された出演者の識別情報と前記出演時間特定手段により特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯を示す出演者データベースを構築する出演者データベース構築手段と
   を備えたコンテンツ分析装置。
3. 前記出演者データベース構築手段により構築された出演者データベースを参照して、出演者別の出演時間帯を示す出演時間帯画面を表示する画面表示手段を備えたことを特徴とする請求項１または請求項２記載のコンテンツ分析装置。
4. 前記出演者データベース構築手段により構築された出演者データベースを参照して、出演者別の出演時間帯を示す出演時間帯画面を生成し、前記出演時間帯画面の画面データを外部装置に出力する画面データ出力手段を備えたことを特徴とする請求項１または請求項２記載のコンテンツ分析装置。
5. 外部装置から前記出演者データベースの参照要求を受信すると、前記出演者データベースの参照を受け付ける参照受付手段を備えたことを特徴とする請求項１または請求項２記載のコンテンツ分析装置。
6. 前記出演者データベース構築手段により構築された出演者データベースを参照して、出演者別の合計出演時間を算出し、各出演者の合計出演時間を基準にして、各出演者の重要度を判定する重要度判定手段を備え、
   前記画面表示手段は、前記重要度判定手段により判定された重要度が高い出演者ほど、当該出演者の出演時間帯が目立つ出演時間帯画面を表示することを特徴とする請求項３記載のコンテンツ分析装置。
7. 前記出演者データベース構築手段により構築された出演者データベースを参照して、出演者別の合計出演時間を算出し、各出演者の合計出演時間の基準にして、各出演者の重要度を判定する重要度判定手段を備え、
   前記画面データ出力手段は、前記重要度判定手段により判定された重要度が高い出演者ほど、当該出演者の出演時間帯が目立つ出演時間帯画面を生成して、前記出演時間帯画面の画面データを外部装置に出力することを特徴とする請求項４記載のコンテンツ分析装置。
8. 前記出演者データベース構築手段により構築された出演者データベースを参照して、各々の出演者間の共演時間を特定し、前記共演時間から各々の出演者間の関連度を算出する関連度算出手段を備え、
   前記画面表示手段は、前記関連度算出手段により算出された各々の出演者間の関連度を示す相関図を表示することを特徴とする請求項３記載のコンテンツ分析装置。
9. 前記出演者データベース構築手段により構築された出演者データベースを参照して、各々の出演者間の共演時間を特定し、前記共演時間から各々の出演者間の関連度を算出する関連度算出手段を備え、
   前記画面データ出力手段は、前記関連度算出手段により算出された各々の出演者間の関連度を示す相関図を生成し、前記相関図の画面データを外部装置に出力することを特徴とする請求項４記載のコンテンツ分析装置。
10. 前記映像コンテンツに登場している出演者の中から、任意の出演者の選択を受け付けて、前記出演者の識別情報を出力する出演者選択受付手段と、
    前記出演者データベース構築手段により構築された出演者データベースを参照して、前記出演者選択受付手段から出力された識別情報が示す出演者の出演時間帯を特定し、前記映像コンテンツにおける前記出演時間帯のフレームを再生するコンテンツ再生手段と
    を備えたことを特徴とする請求項２または請求項３記載のコンテンツ分析装置。
11. コンテンツ再生手段は、出演者選択受付手段により複数の出演者の選択が受け付けられた場合、出演者データベース構築手段により構築された出演者データベースを参照して、前記複数の出演者の共演時間帯を特定し、映像コンテンツにおける前記共演時間帯のフレームを再生することを特徴とする請求項１０記載のコンテンツ分析装置。
12. 前記映像コンテンツに登場している出演者の中から、任意の出演者の選択を受け付けて、前記出演者の識別情報を出力する出演者選択受付手段と、
    予め出演者の識別情報と属性情報が対応付けられている属性情報データベースの中から、前記出演者選択受付手段から出力された識別情報が示す出演者の属性情報を取得し、前記出演者の属性情報を表示する属性情報表示手段と
    を備えたことを特徴とする請求項２または請求項３記載のコンテンツ分析装置。
13. 前記映像コンテンツに登場している出演者の中から、任意の出演者の選択を受け付けて、前記出演者の識別情報を出力する出演者選択受付手段と、
    予め出演者の識別情報と前記出演者が出演しているコンテンツを示す出演情報とが対応付けられている出演情報データベースの中から、前記出演者選択受付手段から出力された識別情報が示す出演者の出演情報を取得して、前記出演情報が示すコンテンツの一覧を表示、あるいは、前記出演者データベース構築手段により構築された出演者データベースを参照して、前記出演者選択受付手段から出力された識別情報が示す出演者の出演時間帯を特定し、前記映像コンテンツにおける前記出演時間帯のフレームの一覧を表示する一覧表示手段と
    を備えたことを特徴とする請求項２または請求項３記載のコンテンツ分析装置。
14. 前記一覧表示手段は、前記出演者選択受付手段により複数の出演者の選択が受け付けられた場合、前記出演情報データベースの中から、前記複数の出演者が共演している出演情報を取得して、前記出演情報が示すコンテンツの一覧を表示、あるいは、前記複数の出演者の共演時間帯を特定し、前記映像コンテンツにおける前記共演時間帯のフレームの一覧を表示することを特徴とする請求項１３記載のコンテンツ分析装置。
15. 顔画像検出手段が、映像コンテンツを構成している各々のフレームから、前記映像コンテンツに登場している出演者の顔画像を検出する顔画像検出処理ステップと、
    顔画像照合手段が、出演者の顔画像が格納されている顔画像データベース内の顔画像と前記顔画像検出処理ステップで検出された出演者の顔画像を照合する顔画像照合処理ステップと、
    出演時間特定手段が、前記顔画像検出処理ステップで出演者の顔画像が検出されたフレームの再生時刻から前記出演者の出演時間を特定する出演時間特定処理ステップと、
    出演者データベース構築手段が、前記顔画像照合処理ステップでの照合結果に基づいて、前記顔画像検出処理ステップで検出された出演者の顔画像と前記出演時間特定処理ステップで特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯を示す出演者データベースを構築する出演者データベース構築処理ステップと
    を備えたコンテンツ分析方法。
16. コンピュータの演算制御部が実行する処理手順を記述しているコンピュータプログラムであって、
    映像コンテンツを構成している各々のフレームから、前記映像コンテンツに登場している出演者の顔画像を検出する顔画像検出処理手順と、
    出演者の顔画像が格納されている顔画像データベース内の顔画像と前記顔画像検出処理手順により検出された出演者の顔画像を照合する顔画像照合処理手順と、
    前記顔画像検出処理手順により出演者の顔画像が検出されたフレームの再生時刻から前記出演者の出演時間を特定する出演時間特定処理手順と、
    前記顔画像照合処理手順での照合結果に基づいて、前記顔画像検出処理手順により検出された出演者の顔画像と前記出演時間特定処理手順により特定された出演者の出演時間とを紐付けて、出演者別の出演時間帯を示す出演者データベースを構築する出演者データベース構築処理手順とが記述されていることを特徴とするコンテンツ分析プログラム。

Images