JP6161224B1 - 人物情報表示装置、人物情報表示方法及び人物情報表示プログラム - Google Patents

Abstract

【課題】動画に表示されている人物を示す情報をより早くより正確に提供するための人物情報表示装置等を提供することを目的とする。【解決手段】本願に開示する人物情報表示装置は、動画像データから人物の顔の特徴を抽出する特徴抽出部と、予め記憶された複数人の顔の特徴情報の中から、特徴抽出部が抽出した顔の特徴と一致する特徴情報を抽出する一致情報抽出部と、一致情報抽出部が抽出した複数の特徴情報が類似する場合には、類似する複数の特徴情報のうち、ユーザの入力又は所定の基準に応じて選択された特徴情報を除外候補に設定する除外候補設定部と、一致情報抽出部が抽出した特徴情報であって除外候補設定部が除外候補に設定した特徴情報に対応する人物を示す情報と、一致情報抽出部が抽出した特徴情報であって除外候補に設定されていない特徴情報に対応する人物を示す情報とを表示部に表示させる人物情報出力部とを備える。【選択図】図１

Description

本発明は、人物情報表示装置、人物情報表示方法及び人物情報表示プログラムに関する。より詳しくは、動画像に表示されている人物を示す情報を表示する装置、方法及びプログラムに関する。

従来、動画像データから被写体を抽出する装置が知られている（例えば、特許文献１）。近年、働き方、生活スタイルの多様化に伴って、インターネットを主軸としたＶＯＤ（Ｖｉｄｅｏ Ｏｎ Ｄｅｍａｎｄ）が注目されている。例えば、テレビ番組のＶＯＤとして、ＩＰ同時放送や見逃し番組が提供されている。こうしたＶＯＤのコンテンツは、決まった時間に放送される従来のテレビ番組とは異なり、ユーザによって積極的に選択されることにより視聴されることになる。したがって、より多くのユーザの興味を引くために、各コンテンツに対する各種の番組情報を提供する必要がある。番組情報の中でも出演者の情報は、ユーザが特に知りたい情報の１つである。
したがって、出演者の情報を番組情報として提供するために、ＶＯＤの各コンテンツに出演している出演者情報を各コンテンツと関連付けて作成する作業が行われている。

特開２０１１−３９７９７号公報

しかしながら、各コンテンツの出演者情報は番組制作会社等から予め提供されない場合がある。また、提供された場合であってもその情報が誤っている場合もある。したがって、出演者情報を各コンテンツに関連付けるためには、各コンテンツの被写体を確認して出演者を特定し、番組情報として登録する必要がある。しかしながら、人的運用でこの作業を行う場合、非常に多くの時間がかかる。また、公開期間が限定される可能性があるＶＯＤでは、公開が確定する前の動画についても、公開が確定してからでは作業が間に合わなくなる可能性があるため、先に出演者の特定及び登録の作業を行う場合がある。この場合、動画が公開されないことになると、上記作業が無駄になってしまう。したがって、この無駄をなくすためには、公開が確定してからでも作業が間に合うように、作業時間を短縮させる必要がある。
また、出演者情報はコンテンツと共に一般に公開されることを前提としている。したがって、公開情報に誤りが生じないように正確な情報を提供する必要がある。
以上に鑑みて、本発明は、動画に表示されている人物を示す情報をより早くより正確に提供するための人物情報表示装置等を提供することを目的とする。

本願に開示する人物情報表示装置は、動画像データから人物の顔の特徴を抽出する特徴抽出部と、予め記憶された複数人の顔の特徴情報の中から、特徴抽出部が抽出した顔の特徴と一致する特徴情報を抽出する一致情報抽出部と、一致情報抽出部が抽出した複数の特徴情報が類似する場合には、類似する複数の特徴情報のうち、ユーザの入力又は所定の基準に応じて選択された特徴情報を除外候補に設定する除外候補設定部と、一致情報抽出部が抽出した特徴情報であって除外候補設定部が除外候補に設定した特徴情報に対応する人物を示す情報と、一致情報抽出部が抽出した特徴情報であって除外候補に設定されていない特徴情報に対応する人物を示す情報とを表示部に表示させる人物情報出力部とを備える。

本願の一観点によれば、動画に表示されている人物を示す情報をより早くより正確に提供することができる。

第１の実施形態に係る人物情報表示装置の機能ブロック図である。 第１の実施形態に係る動画像記憶部と人物情報記憶部と類似関係記憶部のデータ構成図である。 第１の実施形態に係る人物情報表示装置の動作を示すフローチャートである。 第１の実施形態における類似人物情報の表示態様の一例を示す説明図である。 第１の実施形態における出演者確認リストの表示態様の一例を示す説明図である。 第２の実施形態に係る人物情報表示装置の機能ブロック図である。 第２の実施形態における類似人物情報の表示態様の一例を示す説明図である。 第３の実施形態に係る人物情報表示装置の動作を示すフローチャートである。 第３の実施形態における出演者確認リストの表示態様の一例を示す説明図である。 第５の実施形態に係る人物情報表示装置の動作を示すフローチャートである。

［第１の実施形態］
以下、本発明の実施の形態を添付の図により説明する。
図１は、第１の実施形態に係る人物情報表示装置１の機能ブロック図である。人物情報表示装置１は、例えば、ＰＣ等のコンピュータによって実現される。人物情報表示装置１は、各種の情報を記憶する記憶部５と、装置全体を制御する制御部６と、入力手段を介して外部からの入力を受け付ける入力部７と、各種の情報を表示する表示部８とを備えている。

記憶部５は、例えば、ハードディスク、メインメモリ、フラッシュメモリ、その他の各種メモリ等の記憶手段によって実現され、各種のプログラム、各種のデータ等を記憶する。
記憶部５は、動画像データを記憶する動画像記憶部１１と、人物の顔の特徴情報を記憶する人物情報記憶部１２と、類似する人物を示す類似関係情報を記憶する類似関係記憶部１４と、動画像データから抽出した顔の特徴を記憶する動画特徴情報記憶部１５とを備えている。

図２に示すように、動画像記憶部１１は、例えば、ＶＯＤによって提供されるシリーズものの動画の動画像データ１７を予め記憶している。本実施形態では、タイトル「×××××」によって特定される５話構成のドラマの動画像データ１７を記憶している。すなわち、上記ドラマを構成する１話〜５話のそれぞれの動画は同一シリーズを構成する動画である。ここで、説明のため、同一のシリーズを構成する複数の動画像データ１７をシリーズ構成動画用動画像データ１７ａと呼ぶ。図２に示すように、動画像データ１７は複数のシリーズ構成動画用動画像データ１７ａを備えており、動画像記憶部１１は、複数のシリーズ構成動画用動画像データ１７ａを記憶している。

また、人物情報記憶部１２は、人物の顔の特徴情報２１等を含む人物情報２０を予め記憶している。本実施形態では、特徴情報２１として顔画像を予め記憶している。顔画像は例えば、顔の写真又は顔の静止画を想定している。また、各特徴情報２１を識別する個人ＩＤ２２が各特徴情報２１に割り当てられている。本実施形態において、個人ＩＤ２２は数字によって構成されているが、文字、記号又はそれらと数字の組み合わせ等によって構成してもよい。人物情報２０は、個人ＩＤ２２と、特徴情報２１が示す人物の氏名２３を備えている。また、人物情報２０は、特徴情報２１が除外候補に設定されているかを示す除外候補情報２５を有している。除外候補とは、出演者情報から除外される人物の候補である。また、出演者情報とは、動画像データ１７に表示されている人物に関する情報である。本実施形態において、出演者情報は、動画像データ１７に出演している人物に関する情報であり、後述のように、各動画と対応付けて公開されることになる出演者の情報である。

本実施形態では、除外候補のタイプとして、シリーズ除外候補２５ａと単発除外候補２５ｂを設けている。
シリーズ除外候補２５ａとは、同一シリーズを構成するすべてのシリーズ構成動画用動画像データ１７ａにおいて出演者情報から除外される人物の候補である。
同一のシリーズを構成する複数のシリーズ構成動画用動画像データ１７ａの少なくとも１つにおいてシリーズ除外候補２５ａに設定された特徴情報２１は、同一シリーズを構成する他のシリーズ構成動画用動画像データ１７ａを対象とする処理において、後述の一致情報抽出部４３が抽出する特徴情報２１から除外される。
例えば、上記１話のシリーズ構成動画用動画像データ１７ａの処理において、シリーズ除外候補２５ａに設定された特徴情報２１は、他の２話〜５話のシリーズ構成動画用動画像データ１７ａの処理において、後述の一致情報抽出部４３が抽出する特徴情報２１から除外されることになる。

また、単発除外候補２５ｂとは、１つのシリーズ構成動画用動画像データ１７ａについてのみ出演者情報から除外される人物の候補である。単発除外候補２５ｂは、例えば、上記１話のシリーズ構成動画用動画像データ１７ａについてのみ特徴情報２１を除外候補に設定し、他の２話〜５話については、除外候補に設定しない場合等において用いられる設定である。なお、単発除外候補２５ｂは、対象となるシリーズ構成動画用動画像データ１７ａについての後述する処理が終了すると、自動的に解除されるように設定してもよいし、どのシリーズ構成動画用動画像データ１７ａについての除外候補設定であるかが後述の除外候補設定部４８によって識別できるように設定してもよい。
図２において、説明のため、除外候補に設定されていることをチェックマークによって示している。チェックマークが付された人物は除外候補ということになる。図２の例では、個人ＩＤ２２「０００００４」の特徴情報２１が単発除外候補２５ｂに設定されている。なお、図２の例においてチェックマークによって示す設定状態は、現在処理対象の動画像データ１７に適用される設定である。したがって、例えば、上記１話のシリーズ構成動画用動画像データ１７ａの処理を実行する際に図２に示す設定状態が使用される場合には、個人ＩＤ２２「０００００４」の特徴情報２１は上記１話のシリーズ構成動画用動画像データ１７ａについて除外候補に設定されていることになる。

また、人物情報２０は、除外確定情報２６を備えている。除外確定情報２６は、出演者情報から除外することが確定した人物を示す情報である。後述のように、除外候補に設定された人物を出演者情報から除外するかがユーザによって決定され、ユーザによる除外確定情報２６の入力により、除外確定情報２６が人物情報記憶部１２に記憶される。

さらに、人物情報２０は、特徴情報２１の適用範囲を示す適用範囲情報２８を記憶している。本実施形態において、適用範囲情報２８は、特徴情報２１が特定のシリーズのみに使用できるものなのか、すべての動画像データ１７について使用できるものなのかを示す情報である。なお、使用できるとは、後述の一致情報抽出部４３の抽出対象となることを意味している。
図２の例では、説明のため、特徴情報２１が特定のシリーズのみに使用できるものであることをチェックマークによって示している。チェックマークが付されていない特徴情報２１はすべての動画像データ１７について使用できる。
図２の例では、個人ＩＤ２２「０００００２」の特徴情報２１が特定のシリーズのみに使用できるものに設定されている。前述のように、図２の例においてチェックマークによって示す設定状態は、現在処理対象の動画像データ１７に適用される設定である。したがって、上記１話のシリーズ構成動画用動画像データ１７ａの処理を実行する際に図２に示す設定状態が使用される場合には、上記特定のシリーズは、上記１話〜５話のシリーズ構成動画用動画像データ１７ａによって構成されるドラマ「×××××」である。
よって、図２の例では、個人ＩＤ２２「０００００２」の特徴情報２１は、上記１話〜５話のシリーズ構成動画用動画像データ１７ａの処理においては、後述の一致情報抽出部４３の抽出対象となるが、それ以外の動画像データ１７の処理においては、一致情報抽出部４３の抽出対象から除外されることになる。

なお、適用範囲情報２８の設定は、対象となる特定のシリーズを構成するすべてのシリーズ構成動画用動画像データ１７ａについての後述する処理が終了すると、その他の動画像データ１７の処理において後述の一致情報抽出部４３の抽出対象から特徴情報２１が自動的に除外されるように設定してもよいし、どのシリーズが適用対象なのかを後述の抽出対象指定部４４によって識別できるように設定してもよい。

加えて、人物情報２０は、顔画像の公開の可否を示す顔画像公開許可情報３１と、公開用画像３２と、公開用のその他の情報３３を記憶している。顔画像公開許可情報３１は、特徴情報２１として使用した顔画像が公開してもよい画像であるのかを示す情報である。公開用画像３２は、出演者情報を公開する際に公開される画像である。本実施形態では、顔画像公開許可情報３１によって、特徴情報２１として使用した顔画像が公開不可である場合に、その特徴情報２１が示す人物の画像として公開される画像である。公開用画像３２は、例えば、人物のイラストやシルエット像を表示した画像であってもよい。公開用のその他の情報３３は、例えば、人物のプロフィールや他の出演番組等、出演者情報として公開する情報である。
特徴情報２１、氏名２３、除外候補情報２５、除外確定情報２６、適用範囲情報２８、顔画像公開許可情報３１、公開用画像３２、公開用のその他の情報３３は、すべて、個人ＩＤ２２に対応付けられている。

類似関係記憶部１４は、どの特徴情報２１がどの特徴情報２１と類似しているかを示す類似関係情報３６を予め記憶している。類似関係情報３６は、個人ＩＤ２２と、その個人ＩＤ２２に対応付けられた類似人物の個人ＩＤ３７を備えている。類似人物とは、特徴情報２１が類似する人物である。すなわち、顔の特徴が類似している人物を類似人物とし、その個人ＩＤ２２を類似関係情報３６として記憶している。前述のように、個人ＩＤ２２は各特徴情報２１を識別し、各特徴情報２１に割り当てられている。
図２に示す例では、個人ＩＤ２２「０００００１」によって識別される特徴情報２１と類似する特徴情報２１は、個人ＩＤ２２「００００６４」，「１３９１６７」，「２３３８９１」によって識別される特徴情報２１である。したがって、個人ＩＤ２２「０００００１」によって識別される人物は、個人ＩＤ２２「００００６４」，「１３９１６７」，「２３３８９１」のそれぞれによって識別される各人物と類似していることになる。
また、図２の例では、個人ＩＤ２２「０００００２」に対応付けられた類似人物の個人ＩＤ３７はないため、人物情報２０の中に、個人ＩＤ２２「０００００２」によって識別される特徴情報２１と類似する特徴情報２１は存在しないということになる。

本実施形態においては、人物情報２０に収録されている特徴情報２１について予め互いの類似関係を判定し、類似関係情報３６として類似関係記憶部１４に記憶しておく。特徴情報２１の類似関係の判定は、例えば、画像の特徴点の情報を用いた画像マッチングによって行う。制御部６は、特徴情報２１として記憶された複数の顔画像から特徴点を抽出し、抽出した特徴点を比較し、予め設定された類似度の閾値に応じてどの顔画像とどの顔画像が類似するかを判定する。特徴点は、一例として、顔画像において階調変化の強い箇所において抽出され、目、鼻、唇等の各パーツの位置や形状を示す。なお、特徴情報２１の類似関係の判定においては、どのような画像マッチング判定処理を実行してもよい。例えば、ＯｐｅｎＣＶ等の既存の画像処理ライブラリを利用して、各顔画像の類似関係を判定してもよい。
なお、類似関係情報３６を予め別のコンピュータを用いて作成し、類似関係記憶部１４に記憶しておいてもよい。

なお、上記のように画像マッチングによって類似であると判定した特徴情報２１について、類似する特徴情報２１の個人ＩＤ２２を類似関係情報３６として記憶しておいてもよいし、画像マッチング以外の方法で類似であると判定された類似する特徴情報２１の個人ＩＤ２２を類似関係情報３６として記憶しておいてもよい。
また、ユーザが類似であると判断した人物の特徴情報２１の類似関係を類似関係情報３６に記憶しておいてもよい。例えば、ものまね芸人の特徴情報２１と当該ものまね芸人が真似している本人の特徴情報２１を互いに類似するものとして類似関係情報３６に記憶しておいてもよい。
また例えば、後述のように、一人の人物に対して複数の特徴情報２１が記憶されているときに、それらの特徴情報２１を互いに類似するものとして類似関係情報３６に記憶しておいてもよい。

動画特徴情報記憶部１５は、動画像データ１７から後述の特徴抽出部４２が抽出した人物の顔の特徴を記憶する。ここでは、説明のため、動画像データ１７から抽出された人物の顔の特徴を動画特徴情報と呼ぶ。

制御部６（図１）は、例えば、プロセッサ、ＣＰＵ等の演算手段によって実現され、各種のメモリ、ハードディスク等の記憶手段と協働して機能し、各種のプログラムを実行する。
制御部６は、メイン制御部４１と、動画像データ１７から人物の顔の特徴を抽出する特徴抽出部４２と、上記顔の特徴と一致する特徴情報２１を抽出する一致情報抽出部４３と、特徴情報２１の適用範囲を指定する抽出対象指定部４４と、特徴情報２１に対応する人物を示す情報を表示部８に表示させる人物情報出力部４５とを備えている。
また、制御部６は、複数の特徴情報２１が類似するかを判定する類似人物判定部４６と、後述の類似人物情報６０を表示部８に表示させる類似人物出力部４７と、特徴情報２１を除外候補に設定する除外候補設定部４８と、除外を確定する除外確定設定部４９と、時間に関する情報を算出する時間情報算出部５１とを備えている。

メイン制御部４１は、各種のプログラムを実行して、各種構成部及び各機能部間の制御及び装置全体の制御を実行する。
特徴抽出部４２は、動画像データ１７から人物の顔の画像部分を特定して動画像データ１７に表示されている顔の特徴（上記動画特徴情報）を抽出する。本実施形態において、特徴抽出部４２は、顔の特徴点の情報を動画特徴情報として動画像データ１７から抽出する。なお、動画像データ１７から顔の特徴を抽出するためには、どのような顔認識アルゴリズムを用いてもよい。例えば、前述のように、ＯｐｅｎＣＶ等の既存の画像処理ライブラリを利用してもよい。

一致情報抽出部４３は、予め記憶された複数人の顔の特徴情報２１の中から、特徴抽出部４２が抽出した動画特徴情報と一致する特徴情報２１を抽出する。なお、ここでの一致とは、許容可能な誤差を含むものである。また、所定の閾値内の類似度である場合に一致とみなしてもよい。
本実施形態では、一致情報抽出部４３は、人物情報記憶部１２に記憶された特徴情報２１の中から上記動画特徴情報と一致する特徴情報２１を抽出する。一致する特徴情報２１の抽出は、例えば、画像の特徴点の情報を用いた画像マッチングによって行う。一致情報抽出部４３は、特徴情報２１として記憶された顔画像から顔の特徴点を抽出し、抽出した特徴点と、上記動画特徴情報が示す特徴点を比較することによって、動画像データ１７から抽出した顔の特徴と一致する特徴情報２１を抽出する。
なお、前述の画像マッチングと同様に、どのような画像マッチング判定処理を実行してもよいし、既存の画像処理ライブラリを利用してもよい。

抽出対象指定部４４は、特定のシリーズを構成する複数の動画像データ１７について抽出対象となる特徴情報２１を指定する。例えば、抽出対象指定部４４は、ユーザの入力に応じて選択された特徴情報２１を、特定のシリーズの動画像データ１７のみにおいて抽出対象となる特徴情報２１に指定する。また、抽出対象指定部４４は指定したことを示す適用範囲情報２８を人物情報記憶部１２に記憶する。
図２においては、説明のため、特定のシリーズの動画像データ１７のみにおいて抽出対象となる特徴情報２１に指定されたことをチェックマークによって示している。図２の例では、前述のように、適用範囲情報２８においてチェックマークが付された個人ＩＤ２２「０００００２」の特徴情報２１が、特定のシリーズの動画像データ１７のみにおいて一致情報抽出部４３の抽出対象となる特徴情報２１である。

人物情報出力部４５は、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を表示部８に表示させる。また、人物情報出力部４５は、除外候補設定部４８が除外候補に設定した特徴情報２１に対応する人物を示す情報と、除外候補に設定されていない特徴情報２１に対応する人物を示す情報とを表示部８に表示させる。
本実施形態において、人物情報出力部４５は、除外候補設定部４８が除外候補に設定した特徴情報２１に対応する人物を示す情報の表示態様を、除外候補に設定されていない特徴情報２１に対応する人物を示す情報の表示態様とは異ならせて表示部８に表示させる。

類似人物判定部４６は、予め記憶された類似する人物を示す類似関係情報３６に基づいて、一致情報抽出部４３が抽出した複数の特徴情報２１が類似するかを判定する。本実施形態では、類似関係記憶部１４に記憶された類似関係情報３６に基づいて、類似人物判定部４６が上記判定を行う。
また、類似人物判定部４６は、１つの顔の特徴と一致する特徴情報２１として、一致情報抽出部４３が複数の特徴情報２１を抽出した場合には、一致情報抽出部４３が抽出した複数の特徴情報２１を類似すると判定する。
類似人物出力部４７は、一致情報抽出部４３が抽出した複数の特徴情報２１が類似する場合には、類似する複数の特徴情報２１にそれぞれ対応する人物を示す情報を類似人物情報６０として表示部８に表示させる。

除外候補設定部４８は、ユーザの入力又は所定の基準に応じて選択された特徴情報２１を除外候補に設定する。また、除外候補設定部４８は、類似人物出力部４７が表示した類似人物情報６０に対応する特徴情報２１のうち、ユーザの入力又は所定の基準に応じて選択された特徴情報２１を除外候補に設定する。なお、上記所定の基準は、予め設定された基準である。
除外確定設定部４９は、除外候補に設定された人物のうち、ユーザの入力によって選択された人物を除外確定に設定する。除外確定に設定された人物は、公開される出演者情報（以下、「公開出演者情報」という。）において、出演者から除外され、除外確定に設定された人物を示す情報は公開されない。
時間情報算出部５１は、各人物の出演時間等、各種の時間情報を算出する。
入力部７は、キーボード、マウス等の各種入力手段によって、外部からのデータ等を人物情報表示装置１に入力する。
表示部８は、液晶ディスプレイ、有機ＥＬディスプレイ等の表示画面８ａを備え、表示画面に各種の動画、画像、データ、情報等を表示する。

次に、人物情報表示装置１の動作について説明する。人物情報表示装置１の処理の流れを示すフローチャートを図３に示す。
まず、動画像データ１７から顔の特徴を特徴抽出部４２が抽出する（ステップ１）。ステップ１において、特徴抽出部４２は、動画像データ１７を動画像記憶部１１から読み出す。本実施形態では、動画像記憶部１１に複数の動画像データ１７が記憶されている場合、そのうちの１つを選択して読み出す。すなわち、図２に示す例では、上記１話〜５話のシリーズ構成動画用動画像データ１７ａのいずれか１つを読み出す。ここでは、上記１話のシリーズ構成動画用動画像データ１７ａを読み出す場合を想定して説明する。
本実施形態において、特徴抽出部４２は、シリーズ構成動画用動画像データ１７ａのキーフレームから顔の特徴を抽出する。まず、読み出したシリーズ構成動画用動画像データ１７ａから特徴抽出部４２が複数のキーフレームを抽出する。このとき、メイン制御部４１は、各キーフレームのキーフレーム番号も特定する。なお、キーフレーム番号は再生時刻に対応している。

次いで、特徴抽出部４２は、抽出した各キーフレームから人物の顔の画像部分を特定して動画像データ１７に表示されている顔の特徴（上記動画特徴情報）を抽出する。ここでは、前述のように、顔の特徴点を動画特徴情報として抽出する。特徴抽出部４２は、抽出した動画特徴情報を動画特徴情報記憶部１５に記憶する。また、抽出された各動画特徴情報がどのキーフレームから抽出されたかを識別する情報を特徴抽出部４２が動画特徴情報記憶部１５に記憶する。例えば、各動画特徴情報を抽出したキーフレームのキーフレーム番号と対応付けて、特徴抽出部４２が各動画特徴情報を動画特徴情報記憶部１５に記憶する。

次いで、ステップ１において抽出された動画特徴情報と一致する特徴情報２１を一致情報抽出部４３が抽出する（ステップ２）。ステップ２において、一致する特徴情報２１の抽出は、例えば前述のように、画像の特徴点の情報を用いた画像マッチングによって行う。一致情報抽出部４３は、人物情報記憶部１２から特徴情報２１として記憶された顔画像を読み出し、読み出した顔画像から顔の特徴点を抽出する。また、一致情報抽出部４３は、動画特徴情報記憶部１５から特徴抽出部４２が抽出した動画特徴情報を読み出す。次いで、一致情報抽出部４３は、特徴情報２１の顔画像から抽出した特徴点と、上記動画特徴情報が示す特徴点を比較することによって、シリーズ構成動画用動画像データ１７ａから抽出した顔の特徴と一致する特徴情報２１を抽出する。

次に、ステップ２において一致情報抽出部４３が抽出した特徴情報２１からメイン制御部４１が除外候補以外の特徴情報２１を抽出する（ステップ３）。図２の例では、個人ＩＤ２２「０００００４」の特徴情報２１が除外候補（図２の例では、単発除外候補２５ｂ）に設定されている。したがって、一致情報抽出部４３が抽出した複数の特徴情報２１に個人ＩＤ２２「０００００４」によって識別される特徴情報２１が含まれている場合には、個人ＩＤ２２「０００００４」の特徴情報２１以外の特徴情報２１をメイン制御部４１が抽出することになる。

次いで、ステップ３において抽出された特徴情報２１に類似人物があるかを類似人物判定部４６が判定する（ステップ５）。本実施形態では、類似人物の判定として２つのパターンを想定している。１つ目のパターンは、類似関係記憶部１４に記憶された類似関係情報３６を用いて類似人物判定部４６が類似関係を判定するものである。
この場合、類似人物判定部４６は、予め記憶された類似する人物を示す類似関係情報３６に基づいて、一致情報抽出部４３が抽出した複数の特徴情報２１が類似するかを判定する。
まず、類似人物判定部４６は、類似関係記憶部１４から類似関係情報３６を読み出す。そして、読み出した類似関係情報３６に基づいて、ステップ３において抽出された特徴情報２１の中に、互いに類似する特徴情報２１があるかを類似人物判定部４６が判定する。

図２の例では、個人ＩＤ２２「０００００１」によって識別される特徴情報２１と類似する特徴情報２１は、個人ＩＤ２２「００００６４」，「１３９１６７」，「２３３８９１」によって識別される特徴情報２１である。例えば、ステップ３において抽出された特徴情報２１の中に、個人ＩＤ２２「０００００１」によって識別される特徴情報２１と、個人ＩＤ２２「１３９１６７」によって識別される特徴情報２１が含まれていた場合には、類似人物判定部４６は、類似関係情報３６に基づいて、個人ＩＤ２２「０００００１」の特徴情報２１と、個人ＩＤ２２「１３９１６７」の特徴情報２１が類似すると判定する。これにより、ステップ３において抽出された特徴情報２１に類似人物があると類似人物判定部４６が判定したことになる。

また、２つ目のパターンは、類似関係情報３６を用いないで類似人物判定部４６が類似関係を判定するものである。
この２つ目のパターンにおいて、類似人物判定部４６は、１つの顔の特徴（動画特徴情報）と一致する特徴情報２１として、一致情報抽出部４３が複数の特徴情報２１を抽出した場合には、一致情報抽出部４３が抽出した複数の特徴情報２１を類似すると判定する。
この例においては、ステップ３において抽出した特徴情報２１と一致した動画特徴情報について、１つの動画特徴情報（１人の顔の特徴）と一致する特徴情報２１を一致情報抽出部４３がステップ２において複数抽出したかを類似人物判定部４６が判定する。複数抽出したと判定された場合には、その複数の特徴情報２１が類似するものであると類似人物判定部４６が判定する。
１人の顔の特徴に複数の特徴情報２１が一致するということは、それらの複数の特徴情報２１は１人の顔の特徴とどちらも一致すると判定される程度に互いに類似していると考えられるからである。

前述のように、ステップ１において特徴抽出部４２は複数のキーフレームから顔の特徴を抽出している。したがって、類似人物判定部４６は、１つのキーフレームにおける一人の顔の特徴に対して、特徴抽出部４２が複数の特徴情報２１を抽出した場合には、一致情報抽出部４３が抽出した複数の特徴情報２１を類似すると判定する。
類似人物判定部４６が１つの動画特徴情報に対して複数抽出された特徴情報２１が類似すると判定すると、ステップ３において抽出された特徴情報２１に類似人物があると類似人物判定部４６が判定したことになる。

ステップ５において類似人物判定部４６が類似人物ありと判定した場合には、類似する複数の特徴情報２１にそれぞれ対応する人物（類似人物）を示す情報を類似人物情報６０として類似人物出力部４７が表示部８に表示させる（ステップ６）。
図４に示すように、類似人物情報６０は、ステップ５において類似していると判定された特徴情報２１（顔画像）と、その特徴情報２１を識別する個人ＩＤ２２と、個人ＩＤ２２に対応付けられた氏名２３を含む。類似人物出力部４７は、特徴情報２１と個人ＩＤ２２と氏名２３とを人物情報記憶部１２から読み出し、表示部８の表示画面８ａに表示させる。

また、本実施形態では、類似人物情報６０と共に、除外候補設定入力受付部６２と、表示時間情報６３と、表示時刻情報６４と、表示時間比率情報６５とが表示部８の表示画面８ａに表示される。
除外候補設定部４８は、除外候補設定入力受付部６２を表示部８に表示させる。
除外候補設定入力受付部６２は、シリーズ除外候補設定入力受付部６２ａと、単発除外候補設定入力受付部６２ｂとを備えている。シリーズ除外候補設定入力受付部６２ａと、単発除外候補設定入力受付部６２ｂは、それぞれ、各特徴情報２１に対応付けられて設けられている。
シリーズ除外候補設定入力受付部６２ａと、単発除外候補設定入力受付部６２ｂは、例えば、チェックボックスを備え、ユーザがチェックボックスをチェックすることにより、対応する特徴情報２１を除外候補設定部４８がシリーズ除外候補２５ａ又は単発除外候補２５ｂに設定する。

表示時間情報６３は、特徴情報２１に対応する人物が動画像データ１７において表示されている時間（表示時間）の長さを示す情報である。なおこの例ででは、現在の処理対象である１話のシリーズ構成動画用動画像データ１７ａにおける表示時間である。
時間情報算出部５１は、上記類似人物の表示時間の長さを算出し、表示時間情報６３として表示部８に表示させる。例えば、時間情報算出部５１は、複数の類似人物の各人物について、それぞれの特徴情報２１に一致すると判定された動画特徴情報を動画特徴情報記憶部１５からすべて抽出し、それらと対応付けられた各キーフレーム番号を特定する。次いで、特定したキーフレーム番号の数、すなわち、上記動画特徴情報が表示されているキーフレームの数に応じて、特徴情報２１に対応する人物の表示時間の長さを時間情報算出部５１が算出する。
図４に示す例では、個人ＩＤ２２「０００００１」によって識別される特徴情報２１に対応する人物の表示時間（出演時間）は１０分間であり、個人ＩＤ２２「１３９１６７」によって識別される特徴情報２１に対応する人物の表示時間は５０分間である。

表示時刻情報６４は、特徴情報２１に対応する人物が動画像データ１７において表示される時刻（表示時刻）を示す情報である。時間情報算出部５１は、上記人物の表示時刻を特定し、表示時刻情報６４として表示部８に表示させる。
例えば、時間情報算出部５１は、複数の類似人物の各人物について、それぞれの特徴情報２１に一致すると判定された動画特徴情報を動画特徴情報記憶部１５からすべて抽出し、それらと対応付けられた各キーフレーム番号を特定する。次いで、特定したキーフレーム番号に応じて、各キーフレームの表示時刻を特定することにより、各人物の表示時刻（出演時刻）を特定する。
表示時間比率情報６５は、類似人物情報６０が示す複数の人物について、それぞれの人物の表示時間の長さの比率（表示時間比率）を示す情報である。
時間情報算出部５１は、類似人物の表示時間情報６３に基づいて、表示時間比率を算出して表示部８に表示させる。
図４に示す例では、個人ＩＤ２２「０００００１」の人物の表示時間情報６３によって示される表示時間が１０分間であり、個人ＩＤ２２「１３９１６７」の人物の表示時間情報６３によって示される表示時間が５０分間であるため、時間情報算出部５１は、個人ＩＤ２２「０００００１」の人物と個人ＩＤ２２「１３９１６７」の人物の表示時間比率（出演時間比率）を１：５と算出している。

また、本実施形態では、類似人物出力部４７は、類似人物情報６０が示す複数の人物のうち、表示時間の長さに関する所定の基準を満たす人物を特定する情報を表示部８に表示させる。
例えば、上記表示時間の長さに関する所定の基準として、「上記類似人物の表示時間の長さの合計に対するそれぞれの人物の表示時間の長さの比率が所定の比率以上である」という基準を設定する。
この場合、図４の例では、類似人物情報６０が示す個人ＩＤ２２「０００００１」の人物と個人ＩＤ２２「１３９１６７」の人物の表示時間の長さの合計に対するそれぞれの人物の表示時間の長さの比率が所定の比率以上である人物を特定する情報を類似人物出力部４７が表示部８に表示させる。ここでは、説明のため、上記所定の比率を例えば、３０％と設定する。類似人物出力部４７は、表示時間比率情報６５に基づいて、上記表示時間の長さの比率が３０％以上である人物として個人ＩＤ２２「１３９１６７」の人物を特定する。次いで、類似人物出力部４７は、表示時間の長さに関する所定の基準を満たす人物を特定する情報として特定標識６６（図４の例では、星型のマーク）を個人ＩＤ２２「１３９１６７」の特徴情報２１の近傍に表示させ、特定した人物が個人ＩＤ２２「１３９１６７」の人物であることを示している。

なお、上記表示時間の長さに関する所定の基準は、表示時間の長さに関するものであればどのような基準でもよく、例えば、「類似人物のうち表示時間の長さが最も長い」という基準でもよいし、「類似人物のうち表示時間の長さの比率が最も大きい」という基準でもよいし、「表示時間の長さが所定の長さ以上である」という基準でもよい。

ステップ６において類似人物情報６０等が表示部８に表示されると、除外候補設定入力受付部６２がユーザの入力を受け付ける（ステップ７）。ユーザは表示画面８ａに表示された類似人物情報６０を閲覧して、特徴情報２１を除外候補に設定する人物を選択し、選択した人物の特徴情報２１に対応付けられたシリーズ除外候補設定入力受付部６２ａ又は単発除外候補設定入力受付部６２ｂのいずれかのチェックボックスにマウス等の入力手段を介してチェックを入れる。これにより、除外候補設定入力受付部６２がユーザの入力を受け付けることになる。
ユーザは、除外候補に設定する人物の選択に際して、表示時間情報６３、表示時間比率情報６５、特定標識６６等の表示された各種の情報を参考にすることができる。また、ユーザは、表示時刻情報６４に基づいて、類似人物情報６０によって示される人物が動画像データ１７に表示されている場面に速やかにアクセスし、動画に表示されている人物を確認することができる。

なお、類似人物情報６０が示す複数の人物の特徴情報２１を除外候補に設定するように、複数の除外候補設定入力受付部６２のチェックボックスにユーザがチェックを入力してもよい。また、除外候補設定入力受付部６２のチェックボックスにユーザがチェックを入力せず、類似人物情報６０が示す複数の人物の特徴情報２１のどちらも除外候補に設定されない状態でステップ７の処理を終了させてステップ９の処理に進んでもよい。

除外候補設定入力受付部６２がユーザの入力を受け付けると、除外候補設定部４８は、ユーザの入力に応じて選択された特徴情報２１を除外候補に設定する。
例えば、図４の例では、「類似人物の表示時間の長さの合計に対するそれぞれの人物の表示時間の長さの比率が３０％以上である」という基準を満たす人物として、個人ＩＤ２２「１３９１６７」の特徴情報２１が特定され、特定標識６６が個人ＩＤ２２「１３９１６７」の人物を示す情報に付されている。したがって、個人ＩＤ２２「１３９１６７」の人物の方が個人ＩＤ２２「０００００１」の人物よりも出演者である可能性が高いと推測できる。よって、ユーザは、個人ＩＤ２２「０００００１」の特徴情報２１を除外設定にすることを選択することができる。例えば、図４の例において、個人ＩＤ２２「０００００１」の特徴情報２１に対応付けられたシリーズ除外候補設定入力受付部６２ａのチェックボックスをユーザがチェックすると、除外候補設定部４８は個人ＩＤ２２「０００００１」の特徴情報２１をシリーズ除外候補２５ａに設定し、その設定情報を人物情報記憶部１２に記憶する。図２の例では、個人ＩＤ２２「０００００１」のシリーズ除外候補２５ａの欄にチェックが入ることになる。

ステップ７においてユーザの入力に応じて選択された特徴情報２１を除外候補設定部４８が除外候補に設定すると、人物情報出力部４５が出演者確認リストを表示部８に表示させる（ステップ９）。
なお、図３に示すように、ステップ５において類似人物なしと判定された場合には、ステップ６及びステップ７の処理を実行せずにステップ９の処理を実行することになる。

出演者確認リストは、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を含んでいる。すなわち、人物情報出力部４５は、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を表示部８に表示させる。このとき、ステップ３において類似判定のための抽出対象から除外した特徴情報２１についても表示部８に表示させる。
一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報には除外設定された人物と除外設定されていない人物がどちらも含まれている。したがって、人物情報出力部４５は、除外候補設定部４８が除外候補に設定した特徴情報２１に対応する人物を示す情報と、除外候補に設定されていない特徴情報２１に対応する人物を示す情報とを表示部８に表示させることになる。
図５に示すように、出演者確認リスト７０は、一致情報抽出部４３が抽出した特徴情報２１と、その特徴情報２１を識別する個人ＩＤ２２と、個人ＩＤ２２に対応付けられた氏名２３を含む。これらの情報は、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報であり、除外候補に設定した特徴情報２１に対応する人物を示す情報と、除外候補に設定されていない特徴情報２１に対応する人物を示す情報とが含まれている。

人物情報出力部４５は、特徴情報２１と個人ＩＤ２２と氏名２３とを人物情報記憶部１２から読み出し、表示部８の表示画面８ａに表示させる。
また、出演者確認リスト７０には、表示時間情報６３と、表示時刻情報６４とが含まれている。表示時間情報６３と表示時刻情報６４は、ステップ６において前述した方法と同様の方法により、時間情報算出部５１によって算出されて表示部８の表示画面８ａに表示される。

なお、ステップ６及びステップ９において時間情報算出部５１が表示時間情報６３と表示時刻情報６４とを算出する代わりに、一致情報抽出部４３が抽出した特徴情報２１のすべてについてステップ２において時間情報算出部５１が表示時間情報６３と表示時刻情報６４を算出するように構成してもよい。この場合、算出した表示時間情報６３と表示時刻情報６４とを時間情報算出部５１が記憶部５に記憶し、ステップ６及びステップ９において時間情報算出部５１が記憶部５から表示時間情報６３と表示時刻情報６４とを読み出して表示部８に表示させてもよい。

また、出演者確認リスト７０には、除外候補設定入力受付部６２と、除外確定入力受付部７２と、除外候補解除入力受付部７３とが設けられている。これらの入力受付部は、各人物の特徴情報２１に対応付けられている。
除外候補に設定されている特徴情報２１の人物には、除外確定入力受付部７２と、除外候補解除入力受付部７３とが設けられている。除外確定入力受付部７２がユーザの入力を受け付けると、対応する特徴情報２１を除外確定設定部４９が除外確定に設定する。また、除外候補解除入力受付部７３がユーザの入力を受け付けると、対応する特徴情報２１を除外候補設定部４８が除外候補から解除する。除外確定入力受付部７２と、除外候補解除入力受付部７３は、例えば、チェックボックスを備え、ユーザがチェックボックスをチェックすることにより、ユーザの入力が受け付けられる。
除外候補に設定されていない特徴情報２１の人物には、ユーザの選択によって除外候補設定を行うことができるように、除外候補設定入力受付部６２が設けられている。

本実施形態において、人物情報出力部４５は、除外候補設定部４８が除外候補に設定した特徴情報２１に対応する人物を示す情報の表示態様を、除外候補に設定されていない特徴情報２１に対応する人物を示す情報の表示態様とは異ならせて表示部８に表示させる。
図５の例では、除外候補に設定した特徴情報２１に対応する人物を示す情報を特定する禁止標識７５を人物情報出力部４５が表示画面８ａに表示させている。これにより、除外候補設定部４８が除外候補に設定した特徴情報２１に対応する人物を示す情報の表示態様を、除外候補に設定されていない特徴情報２１に対応する人物を示す情報の表示態様とは異ならせている。
図５の例においては、前述のステップ７において、個人ＩＤ２２「０００００１」の特徴情報２１がシリーズ除外候補２５ａに設定された場合を想定している。したがって、図５では個人ＩＤ２２「０００００１」の特徴情報２１に対応する人物を示す情報に禁止標識７５が付されている。また、図２を参照して前述したように、個人ＩＤ２２「０００００４」の特徴情報２１も単発除外候補２５ｂに設定されている。したがって、個人ＩＤ２２「０００００４」の特徴情報２１に対応する人物を示す情報にも禁止標識７５が付されている。

また、人物情報出力部４５は、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を、表示時間の長さに基づく順序で表示部８に表示させる。
図５の例では、表示時間が長い順に表示させている。したがって、図５の左端に位置する個人ＩＤ２２「１３８７１６」の人物の表示時間（出演時間）が最も長く、右端に位置する個人ＩＤ２２「０００００１」の人物の表示時間（出演時間）が最も短い。

ユーザは、表示画面８ａに表示された出演者確認リスト７０を閲覧して、除外候補に設定された人物を公開出演者情報から除外するかどうかを決定する。ユーザが除外すると決定した人物について、除外確定入力受付部７２がユーザの入力を受け付けると、対応する特徴情報２１を除外確定設定部４９が除外確定に設定する。
例えば、図５の例において、個人ＩＤ２２「０００００１」の特徴情報２１に対応付けられた除外確定入力受付部７２のチェックボックスをユーザがチェックすると、除外確定情報２６が入力されたことになる。除外確定設定部４９は入力された除外確定情報２６に基づいて個人ＩＤ２２「０００００１」の特徴情報２１を除外確定に設定し、その設定情報を人物情報記憶部１２に記憶する。図２の例では、個人ＩＤ２２「０００００１」の除外確定の欄にチェックが入ることになる。

また、除外候補に設定された人物のうち、出演者情報から除外しないとユーザが決定した人物について、除外候補解除入力受付部７３がユーザの入力を受け付けると、対応する特徴情報２１を除外候補設定部４８が除外候補から解除する。すなわち、対応する特徴情報２１が除外候補ではなくなる。対応する特徴情報２１を除外候補設定部４８が除外候補から解除すると、禁止標識７５の表示を人物情報出力部４５が非表示にする。
例えば、図５の例において、個人ＩＤ２２「０００００４」の特徴情報２１に対応付けられた除外候補解除入力受付部７３のチェックボックスをユーザがチェックすると、除外候補設定部４８は個人ＩＤ２２「０００００４」の特徴情報２１を除外候補から解除し、その情報を人物情報記憶部１２に記憶する。図２の例では、個人ＩＤ２２「０００００４」の単発除外候補２５ｂの欄のチェックマークが消去されることになる。個人ＩＤ２２「０００００４」の特徴情報２１が除外候補から解除されると、個人ＩＤ２２「０００００４」の特徴情報２１（顔画像）の横に表示されている禁止標識７５を人物情報出力部４５が非表示にする。

また、除外候補が解除されると、対応する人物の除外確定入力受付部７２と除外候補解除入力受付部７３のチェックボックスの表示を、メイン制御部４１が除外候補設定入力受付部６２のチェックボックスの表示に切り替えて表示画面８ａに表示させる。したがって、表示画面８ａに表示されている出演者確認リスト７０において、除外候補が解除された人物は、除外候補に設定されていない他の人物と同様の表示態様で表示されることになる。
このように、表示画面８ａに表示された出演者確認リスト７０において、ユーザの入力に応じて、除外候補の設定が切り替えられると、各人物を示す情報の表示態様も切り替えられることになる。

なお、除外候補に設定されていない人物をなんらかの理由で除外候補に設定する必要が生じた場合には、除外候補設定入力受付部６２がユーザの入力を受け付けることにより、対応する特徴情報２１を除外候補設定部４８が除外候補に設定する。対応する特徴情報２１が除外候補に設定されると、出演者確認リスト７０におけるその人物の表示が除外候補の人物の表示に切り替わり、人物情報出力部４５によってその人物に禁止標識７５が表示される。
ユーザは、除外候補の人物の表示に切り替えられた人物について、前述の除外候補の人物と同様に、除外確定か除外候補解除かを選択してその指示を入力する。

ユーザによる出演者確認リスト７０の確認の結果、除外候補に設定されなかった人物の情報は公開出演者情報（不図示）に掲載され、除外確定に設定された人物の情報は公開出演者情報に掲載されない。公開出演者情報（不図示）は、例えば、顔画像（特徴情報２１）、氏名２３及び公開用のその他の情報３３を含んでいてもよい。また、公開出演者情報に掲載する情報をメイン制御部４１が人物情報記憶部１２から読み出して表示部８に表示させ、公開出演者情報を作成してもよい。
また、顔画像（特徴情報２１）の公開が許可されていない場合には、顔画像（特徴情報２１）に代えて、公開用画像３２をメイン制御部４１が人物情報記憶部１２から読み出して表示部８に表示させ、公開出演者情報に含めてもよい。

前述の例では、１話のシリーズ構成動画用動画像データ１７ａ（図２）を読み出す場合を想定して説明したが、第２話〜第５話の動画像データ１７ａについても、それぞれ同様の処理を行うことになる。
前述のように、同一のシリーズを構成する複数のシリーズ構成動画用動画像データ１７ａの少なくとも１つにおいてシリーズ除外候補２５ａに設定された特徴情報２１は、同一シリーズを構成する他のシリーズ構成動画用動画像データ１７ａを対象とする処理において、後述の一致情報抽出部４３が抽出する特徴情報２１から除外される。
例えば、前述のステップ７において、個人ＩＤ２２「０００００１」の特徴情報２１がシリーズ除外候補２５ａに設定され、図５において表示された出演者確認リスト７０において除外候補の設定が解除されなかった場合には、個人ＩＤ２２「０００００１」の特徴情報２１に対するシリーズ除外候補２５ａの設定は維持される。この場合、他の２話〜５話のシリーズ構成動画用動画像データ１７ａの処理において、個人ＩＤ２２「０００００１」の特徴情報２１は、ステップ２における一致情報抽出部４３の抽出対象から除外されることになる。

また、特定のシリーズを構成する複数の動画像データ１７ａについて抽出対象となる特徴情報２１を抽出対象指定部４４が指定している場合、上記特定のシリーズ以外の動画像データ１７についてステップ２の処理を行う際には、一致情報抽出部４３の抽出対象から上記の特徴情報２１が除外される。
すなわち、抽出対象指定部４４が抽出対象となる特徴情報２１を指定した場合、抽出対象指定部４４が指定した特徴情報２１は、特定のシリーズを構成する複数の動画像データ（シリーズ構成動画用動画像データ１７ａ）以外の動画像データ１７おいて一致情報抽出部４３が抽出する特徴情報２１から除外される。

図２の例では、適用範囲情報２８によって示されるように、個人ＩＤ２２「０００００２」の特徴情報が特定のシリーズの動画像データ１７のみに使用される特徴情報２１に設定されている。
したがって、前述のように、ドラマ「×××××」を構成する１話〜５話のシリーズ構成動画用動画像データ１７ａの処理が終了すると、それ以後に実行するその他の動画像データ１７の処理において、一致情報抽出部４３の抽出対象から特徴情報２１が除外される。

以上に説明したように、第１の実施形態に係る人物情報表示装置１は、動画像データ１７から人物の顔の特徴を抽出する特徴抽出部４２と、予め記憶された複数人の顔の特徴情報２１の中から、特徴抽出部４２が抽出した顔の特徴と一致する特徴情報２１を抽出する一致情報抽出部４３を備えている。
したがって、人物情報表示装置１によれば、動画像データ１７に表示されている人物をより迅速に抽出することができる。

また、前述のように、除外候補設定部４８は、一致情報抽出部４３が抽出した複数の特徴情報２１が類似する場合には、類似する複数の特徴情報２１のうち、ユーザの入力に応じて選択された特徴情報２１を除外候補に設定している。
よって、顔の特徴が類似している人物について、誤抽出に該当する可能性がある人物をユーザの入力に応じて選択することにより、誤抽出に該当する可能性がある人物を除外候補に設定することができる。また、誤抽出以外にも、例えば、表示時間（出演時間）が短い等、なんらかの理由で公開出演者情報に含める必要がない人物を除外候補に設定することができる。
したがって、より正確で適切な公開出演者情報を作成することができる。

また、動画像データ１７に表示されている顔は、様々な角度、大きさ、表情等を有している。加えて、動画であるため、一人の人物の顔の特徴が場面によって変化したり、髪型やメイクに応じて顔の特徴が変化したりする可能性も考えられる。
したがって、一致情報抽出部４３が一致するとして抽出した特徴情報２１の中には、実際には動画像データ１７に表示されていない人物の特徴情報２１が存在している可能性も考えられる。よって、正確な公開出演者情報を作成するためには、一致情報抽出部４３が抽出した抽出結果に誤りがないかを確認する必要がある。
これに関し、人物情報表示装置１は前述のように、除外候補設定部４８を備えており、誤抽出の可能性がある人物の特徴情報２１を除外候補設定部４８が除外候補に設定することができる。そして、ユーザは、人物情報出力部４５によって表示された上記情報（上記例では、出演者確認リスト７０）に基づいて、公開出演者情報（不図示）から除外候補に設定された人物を除外するのかどうかを判断することができる。したがって、より正確な上記公開出演者情報を作成することができる。
以上のように、人物情報表示装置１によれば、動画に表示されている人物を示す情報をより早くより正確に提供することができる。

さらに、人物情報出力部４５は、除外候補設定部４８が除外候補に設定した特徴情報２１に対応する人物を示す情報の表示態様を、除外候補に設定されていない特徴情報２１に対応する人物を示す情報の表示態様とは異ならせて表示させる。
したがって、ユーザは、表示された人物の情報において、どの人物が除外候補に設定されているのかを迅速に直感的に把握することができる。

また、シリーズ除外候補２５ａについて前述したように、人物情報表示装置１においては、同一のシリーズを構成する複数の動画像データ（シリーズ構成動画用動画像データ１７ａ）の少なくとも１つにおいて除外候補設定部４８が特徴情報２１を除外候補（前述の例では、シリーズ除外候補２５ａ）に設定した場合に、除外候補に設定された特徴情報２１は、同一のシリーズを構成する他の動画像データ（シリーズ構成動画用動画像データ１７ａ）において一致情報抽出部４３が抽出する特徴情報２１から除外される。
これにより、同一のシリーズを構成する他の動画について、より迅速な処理を実行することができる。

人物情報表示装置１において、類似人物判定部４６は、予め記憶された類似する人物を示す類似関係情報３６に基づいて、一致情報抽出部４３が抽出した複数の特徴情報２１が類似するかを判定する。
したがって、特徴情報２１が類似するかを類似人物判定部４６が迅速に判定することができる。

また、類似人物判定部４６は、１つの顔の特徴と一致する特徴情報２１として、一致情報抽出部４３が複数の特徴情報２１を抽出した場合には、一致情報抽出部４３が抽出した複数の特徴情報２１を類似すると判定する。
１つの顔の特徴と一致する特徴情報２１が複数抽出された場合、抽出された複数の特徴情報２１は誤抽出された特徴情報２１を含んでいる可能性がある。
したがって、誤抽出された可能性のある特徴情報２１を除外候補に設定することができるため、より正確な公開出演者情報を作成することができる。

さらに、類似人物出力部４７は、一致情報抽出部４３が抽出した複数の特徴情報２１が類似する場合には、類似する複数の特徴情報２１にそれぞれ対応する人物（類似人物）を示す情報を類似人物情報６０として表示部８に表示させる。
これにより、ユーザは類似人物に関する情報を容易に把握することができる。

また、時間情報算出部５１は、類似人物情報６０が示す複数の人物について、動画像データ１７（上記例では、シリーズ構成動画用動画像データ１７ａ）における上記人物のそれぞれの表示時間の長さを示す表示時間情報６３を算出して表示部８に表示させる。
したがって、ユーザは、類似人物情報６０として表示された各人物の表示時間の長さを考慮して、除外候補に設定する人物を選択することができる。

さらに、類似人物出力部４７は、類似人物情報６０が示す複数の人物のうち、動画像データ１７における表示時間の長さに関する所定の基準を満たす人物を特定する情報を表示部８に表示させている。
したがって、ユーザは類似人物情報６０として表示された人物のうち、表示時間の長さに関する所定の基準を満たす人物を迅速に把握することができる。そして、その情報に基づいて、除外候補に設定する人物を選択することができる。

また、人物情報出力部４５は、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を、表示時間の長さに基づく順序で表示部８に表示させている。
これにより、ユーザは、一致情報抽出部４３が抽出した特徴情報２１に対応する複数の人物について、表示時間の長さに基づく差異を迅速に直感的に把握することができる。そして、その情報に基づいて、公開出演者情報から除外する人物を決定することができる。

また、人物情報表示装置１は、特定のシリーズを構成する複数の動画像データ１７ａについて抽出対象となる特徴情報２１を指定する抽出対象指定部４４を備えている。
したがって、所望の特徴情報２１の適用範囲を特定のシリーズの動画像データ１７に限定することができる。例えば、特定のシリーズの動画において、そのシリーズの動画の役柄に特有の特殊メイク等が顔に施されている場合、その特殊メイク等が顔に施されている状態における顔の特徴情報２１を人物情報記憶部１２に記憶し、そのシリーズのシリーズ構成動画用動画像データ１７ａについてのみ抽出対象となる特徴情報２１に設定することができる。

［第２の実施形態］
図６に、第２の実施形態に係る人物情報表示装置１００の機能ブロック図を示す。人物情報表示装置１００の各機能部の一部は、第１の実施形態に係る人物情報表示装置１と同様である。ここでは、主として、前述した第１の実施形態と異なる点について説明する。図６において、第１の実施形態と同様の構成要素には、同じ符号を付している。

人物情報表示装置１００は、前述した人物情報表示装置１の機能を有しており、図１に示す人物情報表示装置１の各機能部を備えている。第１の実施形態の人物情報表示装置１と異なる点は、人物情報表示装置１００が、アップ度算出部１５２を備えている点である。人物情報表示装置１００において、制御部１０６は、前述の人物情報表示装置１の制御部６が有する各機能部に加えて、アップ度算出部１５２を備えている。
アップ度算出部１５２は、動画像データ１７のフレーム（この例では、キーフレーム）に占める人物の顔の面積の比率であるアップ度を算出する。また、アップ度算出部１５２は、アップ度に基づく情報を表示部８に表示させる。

次に人物情報表示装置１００の動作について説明する。
人物情報表示装置１００は、前述の図３のフローチャートに示す処理のうち、ステップ６の処理において、人物情報表示装置１と異なる処理を実行する。その他のステップ（ステップ１〜ステップ５，ステップ７及びステップ９）における処理は、人物情報表示装置１について前述した処理と同様である。ここでは、主として人物情報表示装置１と異なる処理について説明する。

人物情報表示装置１００は、第１の実施形態と同様に、ステップ１〜ステップ５の処理を実行する。ステップ１〜ステップ５の処理は、第１の実施形態と同様であるため、説明を省略する。
ステップ５において類似人物判定部４６が類似人物ありと判定した場合には、類似する複数の特徴情報２１にそれぞれ対応する人物（類似人物）を示す情報を類似人物情報６０として類似人物出力部４７が表示部８に表示させる（ステップ６）。
図７に個人ＩＤ２２「０００００３」の人物と個人ＩＤ２２「５８７６９５」の人物が類似人物である場合の類似人物情報６０を示す。図７に示すように、類似人物情報６０は、ステップ５において類似していると判定された特徴情報２１と、その特徴情報２１を識別する個人ＩＤと、個人ＩＤに対応付けられた氏名２３を含む。また、類似人物情報６０と共に、除外候補設定入力受付部６２が表示部８の表示画面８ａに表示される。類似人物情報６０及び除外候補設定入力受付部６２の表示及び構成については、人物情報表示装置１について前述したものと同様である。

第１の実施形態と異なる点として、人物情報表示装置１００においては、類似人物情報６０と共に、アップ度に基づく情報１６３が表示される。この例では、アップ度に基づく情報１６３として、アップ場面合計時間１６３ａとアップ場面合計時間比率１６３ｂが表示される。また、アップ度に基づく情報１６３に加えて、アップ場面のキーフレーム番号１６４が表示されている。
アップ場面とは、動画像データ１７において人物の顔がアップに表示（大きく表示）されている場面である。この例では、アップ度が所定の閾値以上であるキーフレームをアップ場面としている。

アップ度は、動画像データ１７のフレーム（この例では、キーフレーム）に占める上記類似人物の顔の面積の比率である。
アップ度算出部１５２は、アップ度を算出する。まず、アップ度算出部１５２は、複数の類似人物の各人物について、それぞれの特徴情報２１に一致すると判定された動画特徴情報を動画特徴情報記憶部１５からすべて抽出し、それぞれの動画特徴情報に対応する顔の画像部分の面積を特定する。次いで、顔の画像部分の面積（顔の面積）がキーフレームの面積に占める比率をアップ度として算出する。

次いで、アップ度算出部１５２は、アップ度を用いてアップ度に基づく情報１６３を算出する。この例では、類似人物情報６０が示す各人物について、シリーズ構成動画用動画像データ１７ａにおいて所定の閾値以上のアップ度で表示されている表示時間の合計時間をアップ度算出部１５２がアップ場面合計時間１６３ａとして算出して表示画面８ａに表示させる。アップ度算出部１５２は、アップ度が所定の閾値以上であるキーフレームの数に基づいて、上記表示時間の合計時間を算出する。
また、アップ度算出部１５２は、類似人物情報６０が示す複数の人物について、それぞれの人物のアップ場面合計時間１６３ａの比率を算出し、アップ場面合計時間比率１６３ｂとして表示画面８ａに表示させる。

図７の例では、個人ＩＤ２２「０００００３」の人物のアップ場面合計時間１６３ａが１分２５秒間であり、個人ＩＤ２２「５８７６９５」の人物のアップ場面合計時間１６３ａが３６分５０秒間であるため、両者のアップ場面合計時間比率１６３ｂは、１：２６である。
また、この例では、アップ度が所定の閾値以上であるキーフレームのキーフレーム番号をアップ場面キーフレーム番号１６４としてアップ度算出部１５２が表示画面８ａに表示させる。上記キーフレーム番号については、アップ度を算出する際に読み出された上記動画特徴情報と共に、動画特徴情報記憶部１５からアップ度算出部１５２によって読み出されている。
なお、キーフレーム番号に代えて、キーフレーム番号と対応付けられたキーフレームの再生時刻を表示画面８ａに表示させてもよい。

また、類似人物出力部４７は、類似人物情報６０が示す複数の人物のうち、アップ度に関する所定の基準を満たす人物を特定する情報を表示部８に表示させる。この例では、「類似人物のうち最もアップ場面合計時間１６３ａが長い」という基準を設定して説明する。なお、前述のように、アップ場面合計時間１６３ａはアップ度を用いて算出されているため上記基準はアップ度に関する基準である。
この場合、個人ＩＤ２２「５８７６９５」の人物のアップ場面合計時間１６３ａの方が、個人ＩＤ２２「０００００３」の人物のアップ場面合計時間１６３ａよりも長いため、類似人物出力部４７が個人ＩＤ２２「５８７６９５」の人物を特定する情報を表示画面８ａに表示させる。
この例では、類似人物出力部４７は、特定した人物を示す情報として特定標識１６６（図７の例では、星型のマーク）を個人ＩＤ２２「５８７６９５」の特徴情報２１の近傍に表示させ、特定した人物が個人ＩＤ２２「５８７６９５」の人物であることを示している。

なお、上記アップ度に関する所定の基準は、アップ度に関するものであればどのような基準でもよい。上記アップ度に関する所定の基準には、アップ度を用いて設定された基準が含まれる。例えば、「アップ場面合計時間比率１６３ｂが所定の閾値以上である」という基準を設定してもよい。
ステップ６において類似人物情報６０等が表示部８に表示されると、除外候補設定入力受付部６２がユーザの入力を受け付ける（ステップ７）。ステップ７の処理は、第１の実施形態と同様であるため、説明を省略する。なお、ステップ７においてユーザは、アップ場面キーフレーム番号１６４に基づいて、類似人物情報６０によって示される人物が所定の閾値以上のアップ度で表示されている場面に速やかにアクセスし、動画像データ１７に表示されている人物を確認することができる。
また、図７の例では、「類似人物のうち最もアップ場面合計時間１６３ａが長い」という基準を満たす人物として、個人ＩＤ２２「５８７６９５」の特徴情報２１が特定され、特定標識１６６が個人ＩＤ２２「５８７６９５」の人物を示す情報に付されている。したがって、個人ＩＤ２２「５８７６９５」の人物の方が個人ＩＤ２２「０００００３」の人物よりも出演者である可能性が高いと推測できる。よって、ユーザは、例えば、個人ＩＤ２２「０００００３」の特徴情報２１を除外設定にすることを選択することができる。

次に、ステップ９に進むと、第１の実施形態と同様に、人物情報出力部４５が出演者確認リスト７０を表示部８に表示させる。ステップ９の処理は、第１の実施形態と同様であるため、説明を省略する。
なお、前述した図５の例では、出演者確認リスト７０において、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を、表示時間が長い順に人物情報出力部４５が表示部８に表示させている。
この表示順に関し、本実施形態においては、アップ度に基づく順序を採用してもよい。一例として、人物情報出力部４５は、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を、アップ度算出部１５２が算出したアップ度に基づく順序で表示部８に表示させる。例えば、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を、アップ度を用いて算出したアップ場面合計時間１６３ａが長い順に表示させてもよい。

また、他の例として、人物情報出力部４５は、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を、動画像データ１７における各人物の表示時間の長さ及びアップ度に基づく順序で表示部８に表示させる。
例えば、動画像データ１７における各人物の表示時間の長さが長く、且つ、アップ度を用いて算出した各人物のアップ場面合計時間１６３ａが長い順に表示させる場合、各人物の表示時間の長さとアップ場面合計時間１６３ａの長さを標準化して、総合順位を算出し、総合順位の順に表示させてもよい。なお、総合順位の算出の際には、各人物の表示時間の長さとアップ場面合計時間１６３ａの長さのそれぞれに所望の重み付けを行ってもよい。
また、各人物について、表示時間の長さとアップ場面合計時間１６３ａの長さとをそれぞれ別個に順位付け、その順位の合計に基づいて総合順位を算出し、総合順位の順に表示させてもよい。

また、前述した図５の例では、出演者確認リスト７０において、表示時間情報６３及び表示時刻情報６４を表示しているが、これに加えて、図７に例示したようなアップ度に基づく情報１６３を表示してもよい。また、表示時間情報６３及び表示時刻情報６４に代えて、アップ度に基づく情報１６３を表示してもよい。なお、出演者確認リスト７０にアップ度に基づく情報１６３を表示する場合、アップ度算出部１５２は、一致情報抽出部４３が抽出した特徴情報２１に対応するすべての人物（出演者確認リスト７０に表示されるすべての人物）について、それぞれの人物のアップ度に基づく情報１６３を算出して表示画面８ａに表示させてもよい。

第２の実施形態に係る人物情報表示装置１００では、アップ度算出部１５２が、動画像データ１７のフレーム（この例では、キーフレーム）に占める人物の顔の面積の比率であるアップ度を算出し、算出したアップ度に基づく情報１６３を表示部８に表示させている。
したがって、ユーザは、類似人物情報６０として表示された各人物のアップ度を考慮して、除外候補に設定する人物を選択することができる。

また、第２の実施形態において、アップ度に基づく情報１６３としてアップ場面合計時間１６３ａとアップ場面合計時間比率１６３ｂが表示されている。
例えば、アップ場面合計時間１６３ａが長い方が、人物の顔がアップに表示されている度合が高いと推測することができる。したがって、除外候補に設定する人物を選択する際の指標として、アップ場面合計時間１６３ａとアップ場面合計時間比率１６３ｂを用いることができる。

また、人物情報表示装置において、類似人物出力部４７は、類似人物情報６０が示す複数の人物のうち、アップ度算出部１５２が算出したアップ度に関する所定の基準を満たす人物を特定する情報を表示部８に表示させている。
したがって、ユーザは類似人物情報６０として表示された人物のうち、アップ度に関する所定の基準を満たす人物を迅速に把握することができる。そして、その情報に基づいて、除外候補に設定する人物を選択することができる。

さらに、表示順の一例として前述したように、人物情報出力部４５が、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を、アップ度算出部１５２が算出したアップ度に基づく順序で表示部８に表示させる。
これにより、ユーザは、一致情報抽出部４３が抽出した特徴情報２１に対応する複数の人物について、アップ度に基づく差異を迅速に直感的に把握することができる。そして、その情報に基づいて、公開出演者情報から除外する人物を決定することができる。

また、表示順の他の例として前述したように、人物情報出力部４５は、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を、動画像データ１７における各人物の表示時間の長さ及びアップ度に基づく順序で表示部８に表示させる。
これにより、ユーザは、一致情報抽出部４３が抽出した特徴情報２１に対応する複数の人物について、表示時間の長さ及びアップ度に基づく差異を迅速に直感的に把握することができる。そして、その情報に基づいて、公開出演者情報から除外する人物を決定することができる。

［第３の実施形態］
第３の実施形態に係る人物情報表示装置の構成は、図１に示す第１の実施形態に係る人物情報表示装置１の構成と同様である。したがって、第１の実施形態と同様の構成要素及び符号を用いて説明する。
前述のように第１の実施形態において、除外候補設定部４８は、類似人物について、ユーザの入力に応じて選択された特徴情報２１を除外候補に設定している。しかしながら、以下に説明する第３の実施形態において、除外候補設定部４８は、類似人物について、所定の基準に応じて自動的に選択された特徴情報２１を除外候補に設定している。

第３の実施形態に係る人物情報表示装置１は、図８のフローチャートに示す処理を実行する。図８に示すステップ１〜ステップ５の処理は、第１の実施形態において図３を参照して説明した処理と同様である。
ここでは、主として、前述した第１の実施形態と異なる点について説明する。
人物情報表示装置１は、第１の実施形態と同様に、ステップ１〜ステップ５の処理を実行する。ステップ１〜ステップ５の処理は、第１の実施形態と同様であるため、説明を省略する。

ステップ５において類似人物判定部４６が類似人物ありと判定した場合には、ステップ１６の処理に進む。ステップ１６において、除外候補設定部４８は、類似する複数の特徴情報２１にそれぞれ対応する人物（類似人物）のうち、所定の基準を満たす人物の特徴情報２１を除外候補に設定する。
例えば、除外候補設定部４８は、類似人物のうち、動画像データ１７における表示時間の長さに関する所定の基準を満たす人物に対応する特徴情報２１を選択して、除外候補に設定する。

ここでは、上記表示時間の長さに関する所定の基準として、「上記類似人物の表示時間の長さの合計に対するそれぞれの人物の表示時間の長さの比率が所定の比率以下である」という基準を用いた場合について説明する。
この場合、第１の実施形態と同様に、図４に例示した個人ＩＤ２２「０００００１」の人物と個人ＩＤ２２「１３９１６７」の人物が類似人物であるとすると、類似人物情報６０が示す個人ＩＤ２２「０００００１」の人物と個人ＩＤ２２「１３９１６７」の人物の表示時間の長さの合計に対するそれぞれの人物の表示時間の長さの比率が所定の比率以下である人物の特徴情報２１を除外候補設定部４８が除外候補に設定する。
ここでは、説明のため、上記所定の比率を例えば、２０％と設定する。除外候補設定部４８は、表示時間比率情報６５に基づいて、上記表示時間の長さの比率が２０％以下である個人ＩＤ２２「０００００１」の人物の特徴情報２１を選択し、個人ＩＤ２２「０００００１」の特徴情報２１を除外候補に設定する。

なお、上記表示時間の長さに関する所定の基準は、どのような基準でもよく、例えば、「類似人物のうち表示時間の長さが最も短い」という基準でもよいし、「類似人物のうち表示時間の長さの比率が最も小さい」という基準でもよいし、「表示時間の長さが所定の長さ以下である」という基準でもよい。
第１の実施形態と異なり、ステップ１６の段階では、類似人物情報６０は表示部８の表示画面８ａに表示されない。したがって、第３の実施形態においては、図４に例示した表示は表示されない。

ステップ１６において所定の基準に応じて選択された特徴情報２１を除外候補設定部４８が除外候補に設定すると、除外候補に設定された人物を含む出演者確認リスト２７０が表示される（ステップ１９）。なお、図８に示すように、ステップ５において類似人物なしと判定された場合には、ステップ１６の処理を実行せずにステップ９の処理を実行することになる。
第１の実施形態におけるステップ９の処理と異なる点は、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報を人物情報出力部４５が表示部８に表示させると共に、類似人物出力部４７が、上記類似人物を示す情報を類似人物情報２６０として表示部８に表示させることである。
したがって、図９に示すように、表示画面８ａに表示される出演者確認リスト２７０には、人物情報出力部４５が表示させた上記人物を示す情報と、類似人物出力部４７が表示させた類似人物情報２６０が共に表示されることになる。
なお、図９の例では、類似人物情報２６０は、一致情報抽出部４３が抽出した特徴情報２１に対応する人物を示す情報と重複するため、類似人物情報２６０を類似人物出力部４７によって表示させてもよいし、人物情報出力部４５によって表示させてもよい。

また、類似人物出力部４７は、類似人物がどの人物であるかを示す特定標識２７２を表示部８の表示画面８ａに表示させる。図９の例では、類似人物を特定する特定標識２７２として太枠を表示させている。太枠は個人ＩＤ２２「１３９１６７」の特徴情報２１（顔画像）と個人ＩＤ２２「０００００１」の特徴情報２１（顔画像）を囲んでいる。これにより、個人ＩＤ２２「１３９１６７」の人物と個人ＩＤ２２「０００００１」の人物が類似人物であることを示している。
また、第１の実施形態と同様に、除外候補に設定した特徴情報２１に対応する人物を示す情報を特定する禁止標識７５を人物情報出力部４５が表示画面８ａに表示させる。
なお、ステップ１６におけるその他の処理に関しては、第１の実施形態におけるステップ９の処理と同様である。

また、第１の実施形態と同様に、出演者確認リスト２７０には、除外候補設定入力受付部６２と、除外確定入力受付部７２と、除外候補解除入力受付部７３とが設けられており、ユーザの入力を受け付けるように構成されている。自動的に除外候補に設定された類似人物（図９の例では、個人ＩＤ２２「０００００１」の人物）が実際には出演しているとユーザが判断した場合には、除外候補解除入力受付部７３を介して除外候補の設定を解除することができる。

以上のように、第３の実施形態において、除外候補設定部４８は、一致情報抽出部４３が抽出した複数の特徴情報２１が類似する場合には、類似する複数の特徴情報２１のうち、所定の基準に応じて選択された特徴情報２１を除外候補に設定している。
よって、顔の特徴が類似している人物について、誤抽出に該当する可能性がある人物を選択するための所定の基準を設定することにより、誤抽出に該当する可能性がある人物を除外候補に設定することができる。また、誤抽出以外にも、例えば、表示時間（出演時間）が短い等、なんらかの理由で公開出演者情報に含める必要がない人物を除外候補に設定することができる。
したがって、より正確で適切な公開出演者情報を作成することができる。また、除外候補に設定する特徴情報２１を所定の基準に応じて選択することにより、除外候補の設定をより迅速に行うことができる。

また、除外候補設定部４８は、動画像データ１７における表示時間の長さに関する所定の基準を満たす人物に対応する特徴情報２１を選択して、除外候補に設定している。
したがって、表示時間の長さを考慮して除外候補の設定を行うことができる。

［第４の実施形態］
第４の実施形態に係る人物情報表示装置の構成は、図６に示す第２の実施形態に係る人物情報表示装置１００の構成と同様である。したがって、第２の実施形態と同様の構成要素及び符号を用いて説明する。
また、第４の実施形態に係る人物情報表示装置１００は、第３の実施形態において説明した図８のフローチャートに示す処理と同様の処理を実行する。第３の実施形態のステップ１６においては、表示時間の長さに関する基準を設定した場合の態様について説明しているが、第４の実施形態では、アップ度に関する基準を設定した場合のステップ１６の処理について説明する。
ここでは、主として第２の実施形態及び第３の実施形態と異なる点について説明する。

図８のステップ１６において、除外候補設定部４８は、類似する複数の特徴情報２１にそれぞれ対応する人物（類似人物）のうち、所定の基準を満たす人物の特徴情報２１を除外候補に設定する。
例えば、除外候補設定部４８は、アップ度算出部１５２が算出したアップ度に関する所定の基準を満たす人物に対応する特徴情報２１を選択して、除外候補に設定する。
ここでは、「類似人物のうち最もアップ場面合計時間１６３ａが短い」という基準を用いた場合について説明する。なお、アップ度及びアップ場面合計時間１６３ａの算出方法については第２の実施形態において前述しているので説明を省略する。
この場合、第２の実施形態と同様に、図７に例示した個人ＩＤ２２「０００００３」の人物と個人ＩＤ２２「５８７６９５」の人物が類似人物であるとすると、個人ＩＤ２２「０００００３」の人物のアップ場面合計時間１６３ａの方が個人ＩＤ２２「５８７６９５」の人物のアップ場面合計時間１６３ａよりも短いため、除外候補設定部４８は、個人ＩＤ２２「０００００３」の人物の特徴情報２１を選択し、個人ＩＤ２２「０００００３」の特徴情報２１を除外候補に設定する。
なお、上記アップ度に関する所定の基準は、どのような基準でもよく、例えば、「アップ場面合計時間比率１６３ｂが所定の閾値以下である」という基準でもよい。また、第３の実施形態と同様に、ステップ１６の段階では、類似人物情報６０は表示部８の表示画面８ａに表示されない。したがって、第４の実施形態においては、図７に例示した表示は表示されない。

ステップ１６において所定の基準に応じて選択された特徴情報２１を除外候補設定部４８が除外候補に設定すると、除外候補に設定された人物を含む出演者確認リスト２７０が表示される（ステップ１９）。ステップ１９における処理は、第３の実施形態において前述したため省略する。
なお、前述のように、個人ＩＤ２２「０００００３」の人物と個人ＩＤ２２「５８７６９５」の人物が類似人物である場合、出演者確認リスト２７０には、個人ＩＤ２２「０００００３」の人物と個人ＩＤ２２「５８７６９５」の人物が含まれることになる。この場合、個人ＩＤ２２「０００００３」の人物と個人ＩＤ２２「５８７６９５」の人物に関する情報は、図９に表示された個人ＩＤ２２「１３９１６７」の人物と個人ＩＤ２２「０００００１」の人物に関する情報と同様に、類似人物情報２６０として表示される。
また、図９に表示された類似人物情報２６０と同様に、類似人物を特定する特定標識２７２として、個人ＩＤ２２「０００００３」の特徴情報２１（顔画像）と個人ＩＤ２２「５８７６９５」の特徴情報２１（顔画像）を囲む太枠が表示される。

また、前述した図９の例では、出演者確認リスト２７０において、表示時間情報６３及び表示時刻情報６４を表示しているが、これに加えて、図７に例示したようなアップ度に基づく情報１６３を表示してもよい。また、表示時間情報６３及び表示時刻情報６４に代えて、アップ度に基づく情報１６３を表示してもよい。なお、出演者確認リスト２７０にアップ度に基づく情報１６３を表示する場合、アップ度算出部１５２は、一致情報抽出部４３が抽出した特徴情報２１に対応するすべての人物（出演者確認リスト２７０に表示されるすべての人物）について、それぞれの人物のアップ度に基づく情報１６３を算出して表示画面８ａに表示させてもよい。

以上のように、第４の実施形態において、除外候補設定部４８は、アップ度算出部１５２が算出したアップ度に関する所定の基準を満たす人物に対応する特徴情報２１を選択して、除外候補に設定している。
したがって、アップ度を考慮して除外候補の設定を行うことができる。

［第５の実施形態］
第５の実施形態に係る人物情報表示装置の構成は、図６に示す第２の実施形態に係る人物情報表示装置１００の構成と同様である。したがって、第２の実施形態と同様の構成要素及び符号を用いて説明する。
前述の第３の実施形態及び第４の実施形態では、ステップ５において類似人物があるかを判定してから、ステップ１６において類似人物について、所定の基準に応じて選択された特徴情報２１を除外候補設定部４８が除外候補に設定している。
これに対して、第５の実施形態では、所定の基準に応じて選択された特徴情報２１を除外候補設定部４８が除外候補に設定してしてから、類似人物があるかの判定を行う態様について説明する。
ここでは、主として既述の各実施形態と異なる点について説明する。
第５の実施形態に係る人物情報表示装置１００は、図１０のフローチャートに示す処理を実行する。図１０に示すステップ１及びステップ２の処理は、第１の実施形態において図３を参照して説明した処理と同様であるため、説明を省略する。

ステップ２において一致情報抽出部４３が一致する特徴情報２１を抽出すると、除外候補設定部４８は、一致情報抽出部４３が抽出した複数の特徴情報２１にそれぞれ対応する人物のうち、所定の基準を満たす人物の特徴情報２１を除外候補に設定する（ステップ２６）。
例えば、第３の実施形態において前述したように、動画像データ１７における表示時間の長さに関する所定の基準を満たす人物に対応する特徴情報２１を除外候補設定部４８が選択して除外候補に設定してもよい。なお、上記表示時間の長さの算出方法については第１の実施形態において前述しているので説明を省略する。
一例として、「表示時間の長さが所定の長さ以下である」という基準を設定した場合、表示時間の長さが所定の長さ以下の人物の特徴情報２１を除外候補設定部４８が除外候補に設定する。

また、他の例として、第４の実施形態において前述したように、アップ度算出部１５２が算出したアップ度に関する所定の基準を満たす人物に対応する特徴情報２１を除外候補設定部４８が選択して除外候補に設定してもよい。なお、アップ度の算出方法及びアップ度に関する所定の基準については第２の実施形態において前述しているので説明を省略する。
例えば、「アップ場面合計時間比率１６３ｂが所定の閾値以下である」という基準を設定した場合、アップ場面合計時間比率１６３ｂが所定の閾値以下である人物の特徴情報２１を除外候補設定部４８が除外候補に設定する。この場合、例えば、一致情報抽出部４３が抽出した特徴情報２１に対応するすべての人物について、それぞれの人物のアップ場面合計時間比率１６３ｂをアップ度算出部１５２が算出する。なお、アップ場面合計時間比率１６３ｂの算出方法については、第２の実施形態において前述しているので説明を省略する。

ステップ２６において除外候補設定部４８が除外候補を設定すると、ステップ２７において抽出された特徴情報２１に類似人物があるかを類似人物判定部４６が判定する（ステップ２８）。類似人物判定部４６による類似人物の判定については既述の実施形態において前述しているので説明を省略する。
なお、本実施形態では、除外候補に設定した特徴情報２１を除外せずに、ステップ２７において抽出された特徴情報２１に類似人物があるかを類似人物判定部４６が判定している。

ステップ２８においては、第１の実施形態及び第２の実施形態において説明した図３のステップ５〜ステップ７の処理と同様に、類似人物情報６０を類似人物出力部４７が表示部８に表示させ、除外候補設定入力受付部６２がユーザの入力を受け付ける処理を実行してもよい。このとき、類似人物の中に特徴情報２１が除外候補に設定されている人物が含まれている場合には、表示された類似人物情報６０において、図５及び図９を参照して前述した禁止標識７５を類似人物出力部４７が表示部８に表示させてもよい。禁止標識７５は、前述のように、除外候補に設定した特徴情報２１に対応する人物を示す情報を特定するための標識であり、除外候補に設定した特徴情報２１に対応する人物を示す情報に付されて表示される。
この場合、類似人物情報６０の表示画面８ａにおいて、除外候補解除入力受付部７３がユーザの入力を受け付け、除外候補の設定を解除できるように構成してもよい。
また、他の例として、ステップ２８において類似人物情報６０を表示部８に表示させないで後述のステップ２９の処理に進んでもよい。

なお、本実施形態では、ステップ２６において所定の基準を満たす人物の特徴情報２１が除外候補に設定されているため、上記所定の基準を満たす類似人物が除外候補に設定されていることになる。したがって、類似する複数の特徴情報２１についても、所定の基準に応じて選択された特徴情報２１を除外候補設定部４８が除外候補に設定していることになる。

ステップ２８における処理が完了すると、除外候補に設定された人物を含む出演者確認リスト７０，２７０を人物情報出力部４５が表示部８に表示させる（ステップ２９）。ステップ２９における処理は、既述の実施形態において前述した図３のステップ９又は図８のステップ１９と同様であるため説明を省略する。なお、ステップ２８において類似人物情報６０を表示部８に表示させなかった場合には、図９の例に示すように、出演者確認リスト２７０において類似人物を特定する特定標識２７２を表示するように構成してもよい。

以上のように、第５の実施形態においては、一致情報抽出部４３が抽出した複数の特徴情報２１にそれぞれ対応する人物のうち、所定の基準を満たす人物の特徴情報２１を除外候補設定部４８が除外候補に設定している。
したがって、より迅速に除外候補の設定を実行することができる。
一例として、動画像データ１７全体の長さに比べて表示時間の長さが極めて短い（例えば、２時間ドラマの動画像データ１７において１０秒等）人物は、特徴情報２１が誤抽出された人物である可能性が考えられる。また、誤抽出でない場合であっても、エキストラ等、公開出演者情報に掲載する必要のない人物である可能性がある。同様に、アップ度を用いて算出されたアップ場面合計時間１６３ａが他と比べて極めて短い人物も誤抽出された人物又は公開出演者情報に掲載する必要のない人物である可能性がある。したがって、上記所定の基準として、例えば、表示時間の長さ又はアップ度に関する基準を用いて、除外候補の設定を行うことができる。

［第６の実施形態］
第６の実施形態に係る人物情報表示装置は、既述の実施形態における制御部６，１０６が不一致特徴出力部（不図示）を備えるように構成されたものである。
不一致特徴出力部は、特徴抽出部４２が抽出した顔の特徴（動画特徴情報）のうち特徴情報２１と一致しなかった動画特徴情報に対応する顔の画像を、動画像データ１７から切り出して表示部８に表示させる。
例えば、不一致特徴出力部は、上記の一致しなかった動画特徴情報を動画特徴情報記憶部１５からすべて抽出し、それぞれの動画特徴情報に対応する顔の画像を動画像データ１７から切り出して、切り出した顔の画像を表示部８の表示画面８ａに表示させる。
これにより、一致情報抽出部４３が一致する特徴情報２１を抽出しなかった人物の顔をユーザが把握することができる。

上記の一致しなかった動画特徴情報に対応する人物は、人物情報記憶部１２に記憶された特徴情報２１に含まれていない人物であるか、又は、記憶された特徴情報２１に含まれている人物であるが一致する特徴情報２１が抽出されなかった人物であることが想定される。
上記の一致しなかった動画特徴情報に対応する人物が記憶された特徴情報２１に含まれていない人物であるとユーザが判断した場合、入力部７を介したユーザの入力に応じて、上記の切り出した顔の画像を当該人物の顔の特徴情報２１としてメイン制御部４１が人物情報記憶部１２に記憶し、その特徴情報２１を識別する識別子（個人ＩＤ２２）を割り当てる。また、ユーザが入力した氏名２３等の当該人物に関する情報をメイン制御部４１が上記個人ＩＤ２２及び特徴情報２１と対応付けて人物情報記憶部１２に記憶する。すなわち、図２に示す人物情報２０に新しいレコードが追加されることになる。
この場合、人物情報出力部４５が新たに追加された人物に関する情報を出演者確認リスト７０，２７０に表示させるように構成してもよい。すなわち、不一致特徴出力部が表示部８に表示させた上記画像に対応する人物を示す情報を人物情報出力部４５が表示部８に表示させるように構成してもよい。

また、上記の一致しなかった動画特徴情報に対応する人物が、記憶された特徴情報２１に含まれている人物であるとユーザが判断した場合、上記の一致しなかった動画特徴情報に対応する人物の個人ＩＤ２２をユーザが入力部７を介して入力し、入力された個人ＩＤ２２の人物を示す情報を人物情報出力部４５が出演者確認リスト７０，２７０に表示させるように構成してもよい。

さらに、入力部７を介したユーザの入力に応じて、上記の切り出した顔の画像を上記人物の別の特徴情報２１としてメイン制御部４１が人物情報記憶部１２に記憶するように構成してもよい。この場合、一人の人物について複数の特徴情報２１が記憶されることになる。これにより、例えば、動画像データ１７に表示された当該人物に特殊メイク等が施されており予め記憶された特徴情報２１と動画像データ１７の動画特徴情報が一致しない場合に、その特殊メイク等が施されている状態の顔の画像をその人物の特徴情報２１として追加登録しておくことができる。したがって、追加登録した後の処理において、特殊メイク等が施されている上記人物の顔の特徴と一致する特徴情報２１を一致情報抽出部４３が抽出することができる。
また、アニメの登場人物の顔画像を、その登場人物の声優をしている人物の特徴情報２１として追加登録しておくこともできる。

また、上記追加登録を行う際に、新しい特徴情報２１を追加しようとする人物の個人ＩＤ２２をユーザが入力部を介して入力すると、類似人物判定部４６が類似関係記憶部１４に記憶された類似関係情報３６に基づいて、入力された個人ＩＤ２２の人物を示す情報と、入力された個人ＩＤ２２の特徴情報と類似する特徴情報に対応する人物を示す情報とを類似人物情報６０，２６０として表示部８の表示画面８ａに表示させるように構成してもよい。
これにより、ユーザは新しい特徴情報２１を追加しようとする人物と似た人物を把握することができる。したがって、新しい特徴情報２１を似た人物に誤って対応付けないようにユーザに注意喚起することができる。

また、追加登録した新しい特徴情報２１には、新しい特徴情報２１を追加しようとする人物の個人ＩＤ２２とは異なる個人ＩＤ２２を付与してもよいし、新しい特徴情報２１を追加しようとする人物の個人ＩＤ２２と対応付けられた他の識別子を付与してもよい。これにより、１人の人物に対応付けられた複数の特徴情報２１をそれぞれ識別することができる。また、前述のように、１人の人物に対応付けられた複数の特徴情報２１を互いに類似するものとして、類似関係情報３６に予め記憶しておいてもよい。このとき、図２を参照して前述したように、各特徴情報２１を識別する識別子を用いて、各特徴情報２１の類似関係を類似関係情報３６として類似関係記憶部１４に記憶しておいてもよい。

なお、第６の実施形態において、記憶部５が不一致特徴記憶部（不図示）を備えるように構成してもよい。この場合、不一致特徴出力部は、切り出した上記顔の画像を不一致特徴記憶部に記憶する。切り出した上記顔の画像を氏名２３等の人物を示す情報と対応付ける作業をユーザが行う際には、メイン制御部４１が不一致特徴記憶部から上記顔の画像を読み出して表示部８の表示画面８ａに表示させる。

また、切り出した上記顔の画像を特徴情報２１として人物情報記憶部１２に記憶する代わりに、切り出した上記顔の画像の人物を示す他の画像を用意し、特徴情報２１として人物情報記憶部１２に記憶してもよい。
また、新しい特徴情報２１を人物情報記憶部１２に記憶する際に、前述の抽出対象指定部４４による特徴情報２１の指定を実行し、新しい特徴情報２１が特定のシリーズの動画像データ１７においてのみ抽出対象となるように設定してもよい。

［他の実施形態］
以上、本発明の実施形態について述べたが、本発明は既述の実施形態に限定されるものではなく、各種の変形及び変更が可能である。
例えば、既述の実施形態では、人物情報出力部４５は、除外候補設定部４８が除外候補に設定した特徴情報２１に対応する人物を示す情報の表示態様を、除外候補に設定されていない特徴情報２１に対応する人物を示す情報の表示態様とは異ならせて表示部８に表示させているが、これらの情報を同一の表示態様で表示部８に表示させるように構成してもよい。
また、図５及び図９の例では、除外候補設定部４８が除外候補に設定した特徴情報２１に対応する人物を示す情報と、除外候補に設定されていない特徴情報２１に対応する人物を示す情報とを同一画面に表示しているが、これらの情報を切り分けて、それぞれ別の画面に表示するように構成してもよい。

既述の実施形態では、除外候補に設定した特徴情報２１に対応する人物を示す情報を特定する禁止標識７５の表示によって、除外候補の人物と除外候補でない人物の表示態様を異ならせているが、どのような方法で表示態様を異ならせてもよい。
例えば、除外候補に設定した特徴情報２１に対応する人物の顔画像を白黒表示し、除外候補に設定していない特徴情報２１に対応する人物の顔画像をカラーで表示してもよい。
また、除外候補に設定されていない特徴情報２１に対応する人物を示す情報に「出演している」等の文字情報を表示してもよいし、除外候補に設定されている特徴情報２１に対応する人物を示す情報に「除外候補」等の文字情報を表示してもよい。
また、除外候補に設定した特徴情報２１に対応する人物を示す情報と、除外候補に設定していない特徴情報２１に対応する人物を示す情報をそれぞれ別のウィンドウに表示させ、除外候補に設定した特徴情報２１に対応する人物を示す情報を特定する標識、文字等を除外候補に設定した特徴情報２１に対応する人物を示す情報と同じウィンドウに表示させてもよい。
以上のように、除外候補に設定した特徴情報２１に対応する人物を示す情報と、除外候補に設定されていない特徴情報２１に対応する人物を示す情報をユーザが区別して視認できるどのような表示態様を採用してもよい。

また、既述の実施形態において前述した各処理を組み合わせて実行してもよい。
例えば、アップ度に関する所定の基準と、動画像データ１７における表示時間の長さに関する所定の基準とをどちらも用いて、前述の各処理を実行してもよい。この場合、例えば、アップ度に関する所定の基準と上記表示時間の長さに関する所定の基準とのどちらの基準をも満たす人物の特徴情報を除外候補に設定してもよい。
また、既述の実施形態の類似人物情報６０，２６０又は出演者確認リスト７０，２７０において、アップ度に基づく情報１６３と表示時間情報６３と表示時刻情報６４とを表示画面８ａに共に表示させてもよい。

また、既述の実施形態においては、アップ度に関する所定の基準を用いる処理と、表示時間の長さに関する所定の基準を用いる処理について記載したが、どのような基準を用いてもよい。例えば、アップ度又は表示時間に無関係な他の所定の基準を用いてもよい。

また、特徴情報２１の類似の判定方法として、既述の判定方法以外の方法を採用してもよい。
既述の実施形態において、類似関係情報３６は予め作成されて類似関係記憶部１４に記憶されているが、類似関係情報３６を予め作成しない方法を採用してもよい。この場合、例えば、一致情報抽出部４３が抽出した複数の特徴情報２１がそれぞれ互いに類似するかを、類似人物判定部４６が画像マッチングにより判定するように構成してもよい。

既述の実施形態において、１つの顔の特徴と一致する特徴情報２１として、一致情報抽出部４３が複数の特徴情報２１を抽出した場合には、それらの抽出された複数の特徴情報２１を互いに類似するものとして、類似関係情報３６に記憶してもよい。この場合、メイン制御部４１が上記抽出された複数の特徴情報２１の類似関係を類似関係情報３６として類似関係記憶部１４に記憶するように構成してもよい。このとき、図２を参照して前述したように、各特徴情報２１を識別する識別子を用いて、各特徴情報２１の類似関係を類似関係情報３６として類似関係記憶部１４に記憶しておいてもよい。
これにより、ある動画像データ１７の処理において、１つの顔の特徴と一致する特徴情報２１として抽出された複数の特徴情報２１を、他の動画像データ１７の処理においても類似人物判定部４６によって類似すると判定することができる。

既述の実施形態においては、類似人物出力部４７が類似人物情報６０，２６０を表示部８に表示させているが、類似人物出力部４７を設けずに、類似人物情報６０，２６０を表示部８に表示させない構成を採用してもよい。
図４及び図７の例では、類似人物として２名の人物を示しているが、２名以上の人物を示す類似人物情報６０を表示してもよい。一例として、少なくとも１つの特徴情報２１と類似する特徴情報２１に対応する人物を示す情報を類似人物情報６０として表示してもよい。この場合、例えば、人物Ａの特徴情報２１に類似する特徴情報２１に対応する人物Ｂと、人物Ａの特徴情報２１に類似する特徴情報２１に対応する人物Ｃと、人物Ａとの３名を示す情報を類似人物情報６０として表示してもよい。

第１の実施形態において、１つの動画特徴情報（１人の顔の特徴）と一致する複数の特徴情報２１が抽出され、抽出された複数の特徴情報２１に対応する人物を示す情報が類似人物情報６０として表示された場合には、ユーザに注意を促すメッセージをメイン制御部４１が表示部８に表示させてもよい。前述のように、上記ケースの場合は、複数の特徴情報２１に誤抽出された特徴情報２１が含まれている可能性があるからである。

第１の実施形態において、類似人物の動画像データ１７における表示時間の長さの合計に対するそれぞれの人物の表示時間の長さの比率が３０％以上である人物は、誤抽出ではない可能性がある。したがって、類似人物の中に、上記表示時間の長さの比率が３０％以上であると特定された人物が複数人いる場合には、顔の特徴が類似する複数の人物が共にその動画に出演している可能性が考えられる。よって、上記表示時間の長さの比率が３０％以上であると特定された人物が複数人いる場合には、ユーザに注意を促すメッセージをメイン制御部４１が表示部８に表示させてもよい。

例えば既述の実施形態において、各人物について、アップ度が高い方から所定の枚数のキーフレームを抽出し、抽出した所定の枚数のキーフレームのアップ度の平均値をアップ度算出部１５２が算出し、アップ度に関する情報１６３として表示部８に表示させてもよい。また、アップ度に関する所定の基準として上記平均値を用いた基準を設定してもよい。
また、他の例として、アップ度が所定の閾値以上である連続するキーフレームの表示時間の長さをアップ度算出部１５２が算出し、アップ度に関する情報１６３として表示部８に表示させてもよい。また、アップ度に関する所定の基準として上記連続するキーフレームの表示時間の長さを用いた基準を設定してもよい。連続するキーフレームの表示時間の長さは、人物の顔がアップの状態のまま連続して表示されている時間の長さを示している。

既述の実施形態において、処理の対象とする動画像データ１７はどのような動画像データであってもよい。例えば、ＶＯＤの動画像データ１７でもよいし、ＶＯＤ以外の動画像データ１７でもよい。
また、既述の実施形態においては、シリーズ構成動画用動画像データ１７ａを処理の対象としているが、シリーズものではない単発の動画の動画像データ１７を対象としてもよい。

第１の実施形態において、時間情報算出部５１が表示時間情報６３を算出して表示部８に表示させているが、時間情報算出部５１を設けずに、表示時間情報６３を表示部８に表示させない構成を採用してもよい。また、前述の抽出対象指定部４４及び不一致特徴出力部を設けずに、人物情報表示装置１，１００を構成してもよい。

既述の実施形態において、各処理により、抽出、算出又は作成等されたデータを記憶部５に記憶し、記憶部５から適宜読み出して使用してもよい。例えば、一致情報抽出部４３が抽出した特徴情報２１を一致情報抽出部４３が記憶部５に記憶し、制御部６に含まれる各機能部が記憶部５から一致情報抽出部４３が抽出した特徴情報２１を読み出して使用するように構成してもよい。

また、既述の実施形態において除外確定設定部４９を設けずに、除外確定設定を行わない構成を採用してもよい。例えば、出演者確認リスト７０，２７０において除外候補の設定が解除されなかった場合に、除外候補に設定されている特徴情報２１に対応する人物を公開出演者情報（不図示）から除外するように構成してもよい。この場合、除外候補に設定された人物を示す情報は公開出演者情報から除外されて公開されない。

また、除外候補に設定された人物のうち、ユーザの入力によって選択された人物を除外確定設定部４９が除外確定に設定するときに、ユーザの入力を受け付ける入力画面を表示させて、除外確定の設定をその出演者確認リスト７０，２７０に対応する動画像データ（シリーズ構成動画用動画像データ１７ａ）のみに適用させるのか、その動画像データと同一のシリーズの動画像データ（シリーズ構成動画用動画像データ１７ａ）のすべてに適用させるのかをユーザに選択させるように構成してもよい。
例えば、ユーザの入力により、除外確定の設定をその出演者確認リスト７０，２７０に対応する動画像データ１７ａのみに適用させることが選択された場合には、除外確定の設定は、次の動画像データ１７ａを処理するときには解除されて、除外確定の設定が解除された人物の特徴情報２１は一致情報抽出部４３の抽出対象となる。
また、ユーザの入力により、除外確定の設定を同一のシリーズの動画像データ１７ａのすべてに適用させることが選択された場合には、上記同一のシリーズを構成する他の動画像データ１７ａの処理において、除外確定に設定された人物の特徴情報２１が一致情報抽出部４３の抽出対象から除外されるように構成してもよい。

第５の実施形態において、図１０のステップ２８の処理の前に、一致情報抽出部４３が抽出した特徴情報２１からメイン制御部４１が除外候補以外の特徴情報２１を抽出するステップ２７（不図示）を実行するように構成してもよい。この場合、ステップ２６において用いた所定の基準を満たす特徴情報２１は、すでに除外候補に設定されており、上記ステップ２７において類似人物の抽出対象から外されることになる。したがって、ステップ２８では、ステップ２６とは異なる所定の基準を用いることになる。

既述の実施形態では、特徴情報２１として顔画像を用いているが、顔画像以外の情報を用いてもよい。例えば、顔画像から抽出した特徴点の情報を特徴情報２１として人物情報記憶部１２に予め記憶しておいてもよい。

特徴情報２１として又は特徴情報２１の作成のために用いる顔画像は、どのような人物の顔画像であってもよく、例えば、俳優、女優、タレント、芸人、アーティスト、著名人等、テレビ番組又は映像作品等に出演する可能性のある人物の顔画像であってもよい。
また、アニメの動画像データについて、声優の公開出演者情報を作成するために、アニメの登場人物の顔画像を、その登場人物の声優をしている人物の特徴情報２１として、人物情報記憶部１２に記憶しておいてもよい。
また、特定の団体の記録動画や家族、友人等とのプライベート動画等を処理の対象とする場合には、団体の構成員や家族、友人等の顔画像を特徴情報２１として、人物情報記憶部１２に記憶しておいてもよい。

人物情報２０は、どのような情報を含んでいてもよい。例えば、各人物の声を各人物の特徴情報２１を対応付けて人物情報記憶部１２に記憶しておいてもよい。この場合、動画像データから音声を抽出し人物情報記憶部１２に記憶した各人物の音声と比較して、人物特定の精度を高めるように構成してもよい。
公開出演者情報には、どのような情報が含まれていてもよい。例えば、既述した情報に加えて、氏名２３等と対応付けられた役名等を公開出演者情報に含めてもよい。

人物情報表示装置１，１００を構成する前述の各機能部は、単体のコンピュータに備えられていてもよいし、通信ネットワークを介して通信可能な複数のコンピュータに分散して備えられていてもよい。
例えば、サーバとして機能するコンピュータに動画像記憶部１１と人物情報記憶部１２と類似関係記憶部１４を設け、上記サーバと通信可能な端末のコンピュータに動画特徴情報記憶部１５と制御部６，１０６に含まれる各機能部を設けてもよい。また、上記サーバと通信可能な端末のコンピュータの表示部８に各種情報を表示するように構成してもよい。
なお、既述の実施形態において、「対応付けられ」とは、直接又は間接的に、各データが関連付けられ又は紐づけられていることを含む。
例えば、人物情報表示装置１，１００の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより各種処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。

また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ、ＤＶＤ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。

既述の実施形態に関し、さらに以下の付記を開示する。
（付記１）
動画像データから人物の顔の特徴を抽出する特徴抽出部と、
予め記憶された複数人の顔の特徴情報の中から、前記特徴抽出部が抽出した前記顔の特徴と一致する前記特徴情報を抽出する一致情報抽出部と、
前記一致情報抽出部が抽出した複数の前記特徴情報が類似する場合には、類似する前記複数の特徴情報のうち、ユーザの入力又は所定の基準に応じて選択された前記特徴情報を除外候補に設定する除外候補設定部と、
前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補設定部が前記除外候補に設定した前記特徴情報に対応する人物を示す情報と、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補に設定されていない前記特徴情報に対応する人物を示す情報とを前記表示部に表示させる人物情報出力部と
を備える人物情報表示装置。

（付記２）
前記人物情報出力部は、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補設定部が前記除外候補に設定した前記特徴情報に対応する人物を示す情報の表示態様を、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補に設定されていない前記特徴情報に対応する人物を示す情報の表示態様とは異ならせて前記表示部に表示させる付記１記載の人物情報表示装置。

（付記３）
同一のシリーズを構成する複数の前記動画像データの少なくとも１つにおいて前記除外候補設定部が前記特徴情報を前記除外候補に設定した場合に、前記除外候補に設定された前記特徴情報は、前記同一のシリーズを構成する他の前記動画像データにおいて前記一致情報抽出部が抽出する前記特徴情報から除外される付記１又は付記２記載の人物情報表示装置。

（付記４）
予め記憶された類似する人物を示す類似関係情報に基づいて、前記一致情報抽出部が抽出した複数の前記特徴情報が類似するかを判定する類似人物判定部をさらに備え、
前記除外候補設定部は、前記類似人物判定部が類似すると判定した前記複数の特徴情報のうち、ユーザの入力又は予め設定された所定の基準に応じて選択された前記特徴情報を除外候補に設定する付記１から付記３のいずれか１つに記載の人物情報表示装置。

（付記５）
１つの前記顔の特徴と一致する前記特徴情報として、前記一致情報抽出部が複数の前記特徴情報を抽出した場合には、前記一致情報抽出部が抽出した前記複数の特徴情報を類似すると判定する類似人物判定部をさらに備え、
前記除外候補設定部は、前記類似人物判定部が類似すると判定した前記複数の特徴情報のうち、ユーザの入力又は予め設定された所定の基準に応じて選択された前記特徴情報を除外候補に設定する付記１から付記４のいずれか１つに記載の人物情報表示装置。

（付記６）
前記一致情報抽出部が抽出した複数の前記特徴情報が類似する場合には、類似する前記複数の特徴情報にそれぞれ対応する人物を示す情報を類似人物情報として前記表示部に表示させる類似人物出力部をさらに備え、
前記除外候補設定部は、前記類似人物出力部が表示させた前記類似人物情報に対応する前記特徴情報のうち、ユーザの入力又は予め設定された所定の基準に応じて選択された前記特徴情報を前記除外候補に設定する付記１から付記５のいずれか１つに記載の人物情報表示装置。

（付記７）
前記類似人物情報が示す複数の人物について、前記動画像データにおける前記人物のそれぞれの表示時間の長さを示す表示時間情報を算出して前記表示部に表示させる時間情報算出部をさらに備える付記６記載の人物情報表示装置。

（付記８）
前記一致情報抽出部が抽出した複数の前記特徴情報が類似する場合には、類似する前記複数の特徴情報にそれぞれ対応する人物を示す情報を類似人物情報として前記表示部に表示させる類似人物出力部をさらに備え、
前記類似人物出力部は、前記類似人物情報が示す複数の前記人物のうち、前記動画像データにおける表示時間の長さに関する所定の基準を満たす人物を特定する情報を前記表示部に表示させる付記１から付記７のいずれか１つに記載の人物情報表示装置。

（付記９）
前記動画像データのフレームに占める前記人物の顔の面積の比率であるアップ度を算出し、算出した前記アップ度に基づく情報を前記表示部に表示させるアップ度算出部をさらに備える付記１から付記８のいずれか１つに記載の人物情報表示装置。

（付記１０）
前記一致情報抽出部が抽出した複数の前記特徴情報が類似する場合には、類似する前記複数の特徴情報にそれぞれ対応する人物を示す情報を類似人物情報として前記表示部に表示させる類似人物出力部をさらに備え、
前記類似人物出力部は、前記類似人物情報が示す複数の前記人物のうち、前記アップ度算出部が算出した前記アップ度に関する所定の基準を満たす人物を特定する情報を前記表示部に表示させる付記９記載の人物情報表示装置。

（付記１１）
前記除外候補設定部は、前記動画像データにおける表示時間の長さに関する所定の基準を満たす人物に対応する前記特徴情報を選択して、前記除外候補に設定する付記１から付記１０のいずれか１つに記載の人物情報表示装置。

（付記１２）
前記動画像データのフレームに占める前記人物の顔の面積の比率であるアップ度を算出するアップ度算出部をさらに備え、
前記除外候補設定部は、前記アップ度算出部が算出した前記アップ度に関する所定の基準を満たす人物に対応する前記特徴情報を選択して、前記除外候補に設定する付記１から付記１１のいずれか１つに記載の人物情報表示装置。

（付記１３）
前記動画像データのフレームに占める前記人物の顔の面積の比率であるアップ度を算出するアップ度算出部をさらに備え、
前記人物情報出力部は、前記一致情報抽出部が抽出した前記特徴情報に対応する人物を示す情報を、前記アップ度算出部が算出した前記アップ度に基づく順序で前記表示部に表示させる付記１から付記１２のいずれか１つに記載の人物情報表示装置。

（付記１４）
前記動画像データのフレームに占める前記人物の顔の面積の比率であるアップ度を算出するアップ度算出部をさらに備え、
前記人物情報出力部は、前記一致情報抽出部が抽出した前記特徴情報に対応する人物を示す情報を、前記動画像データにおける前記人物の表示時間の長さ及び前記アップ度に基づく順序で前記表示部に表示させる付記１から付記１３のいずれか１つに記載の人物情報表示装置。

（付記１５）
前記特徴抽出部が抽出した前記顔の特徴のうち前記特徴情報と一致しなかった前記顔の特徴に対応する顔の画像を、前記動画像データから切り出して前記表示部に表示させる不一致特徴出力部をさらに備える付記１から付記１４のいずれか１つに記載の人物情報表示装置。

（付記１６）
特定のシリーズを構成する複数の前記動画像データについて抽出対象となる前記特徴情報を指定する抽出対象指定部をさらに備え、
前記抽出対象指定部が前記抽出対象となる前記特徴情報を指定した場合、前記抽出対象指定部が指定した前記特徴情報は、前記特定のシリーズを構成する複数の前記動画像データ以外の前記動画像データおいて前記一致情報抽出部が抽出する前記特徴情報から除外される付記１から付記１５のいずれか１つに記載の人物情報表示装置。

（付記１７）
人物の情報を表示する人物情報表示装置における人物情報表示方法であって、
前記人物情報表示装置の特徴抽出部が、動画像データから人物の顔の特徴を抽出する特徴抽出ステップと、
前記人物情報表示装置の一致情報抽出部が、予め記憶された複数人の顔の特徴情報の中から、前記特徴抽出部が抽出した前記顔の特徴と一致する前記特徴情報を抽出する一致情報抽出ステップと、
前記人物情報表示装置の除外候補設定部が、前記一致情報抽出部が抽出した複数の前記特徴情報が類似する場合には、類似する前記複数の特徴情報のうち、ユーザの入力又は所定の基準に応じて選択された前記特徴情報を除外候補に設定する除外候補設定ステップと、
前記人物情報表示装置の人物情報出力部が、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補設定部が前記除外候補に設定した前記特徴情報に対応する人物を示す情報と、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補に設定されていない前記特徴情報に対応する人物を示す情報とを前記表示部に表示させる人物情報出力ステップと
を含む人物情報表示方法。

（付記１８）
人物の情報を表示する人物情報表示装置における人物情報表示プログラムであって、
前記人物情報表示装置の特徴抽出部が、動画像データから人物の顔の特徴を抽出する特徴抽出ステップと、
前記人物情報表示装置の一致情報抽出部が、予め記憶された複数人の顔の特徴情報の中から、前記特徴抽出部が抽出した前記顔の特徴と一致する前記特徴情報を抽出する一致情報抽出ステップと、
前記人物情報表示装置の除外候補設定部が、前記一致情報抽出部が抽出した複数の前記特徴情報が類似する場合には、類似する前記複数の特徴情報のうち、ユーザの入力又は所定の基準に応じて選択された前記特徴情報を除外候補に設定する除外候補設定ステップと、
前記人物情報表示装置の人物情報出力部が、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補設定部が前記除外候補に設定した前記特徴情報に対応する人物を示す情報と、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補に設定されていない前記特徴情報に対応する人物を示す情報とを前記表示部に表示させる人物情報出力ステップと
を前記人物情報表示装置において実行させる人物情報表示プログラム。

１，１００ 人物情報表示装置
８ 表示部
１７ 動画像データ
１７ａ シリーズ構成動画用動画像データ
２１ 特徴情報
３６ 類似関係情報
４２ 特徴抽出部
４３ 一致情報抽出部
４４ 抽出対象指定部
４５ 人物情報出力部
４６ 類似人物判定部
４７ 類似人物出力部
４８ 除外候補設定部
５１ 時間情報算出部
１５２ アップ度算出部

Claims (17)

1. 動画像データに表示されている人物に関する情報である出演者情報を作成するために人物の情報を表示する人物情報表示装置であって、
   前記動画像データから人物の顔の特徴を抽出する特徴抽出部と、
   予め記憶された複数人の顔の特徴情報の中から、前記特徴抽出部が抽出した前記顔の特徴と一致する前記特徴情報を抽出する一致情報抽出部と、
   前記一致情報抽出部が抽出した複数の前記特徴情報のうち、互いに類似する特徴情報がある場合には、前記互いに類似する特徴情報のうち、ユーザの入力又は所定の基準に応じて選択された前記特徴情報を、前記出演者情報から除外される人物の候補である除外候補に設定する除外候補設定部と、
   前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補設定部が前記除外候補に設定した前記特徴情報に対応する人物を示す情報と、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補に設定されていない前記特徴情報に対応する人物を示す情報とを表示部に表示させる人物情報出力部と
   を備え、
   前記人物情報出力部は、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補設定部が前記除外候補に設定した前記特徴情報に対応する人物を示す情報の表示態様を、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補に設定されていない前記特徴情報に対応する人物を示す情報の表示態様とは異ならせて前記表示部に表示させる人物情報表示装置。
2. 同一のシリーズを構成する複数の前記動画像データの少なくとも１つにおいて前記除外候補設定部が前記特徴情報を前記除外候補に設定した場合に、前記除外候補に設定された前記特徴情報は、前記同一のシリーズを構成する他の前記動画像データにおいて前記一致情報抽出部が抽出する前記特徴情報から除外される請求項１記載の人物情報表示装置。
3. 予め記憶された互いに類似する人物を示す類似関係情報に基づいて、前記一致情報抽出部が抽出した複数の前記特徴情報のうち、互いに類似する特徴情報があるかを判定する類似人物判定部をさらに備え、
   前記除外候補設定部は、前記類似人物判定部が互いに類似する特徴情報があると判定した場合には、前記互いに類似する特徴情報のうち、ユーザの入力又は予め設定された所定の基準に応じて選択された前記特徴情報を前記除外候補に設定する請求項１又は請求項２記載の人物情報表示装置。
4. １つの前記顔の特徴と一致する前記特徴情報として、前記一致情報抽出部が複数の前記特徴情報を抽出した場合には、前記一致情報抽出部が抽出した前記複数の特徴情報が互いに類似すると判定する類似人物判定部をさらに備え、
   前記除外候補設定部は、前記類似人物判定部が互いに類似すると判定した前記複数の特徴情報のうち、ユーザの入力又は予め設定された所定の基準に応じて選択された前記特徴情報を前記除外候補に設定する請求項１から請求項３のいずれか１項記載の人物情報表示装置。
5. 前記一致情報抽出部が抽出した複数の前記特徴情報のうち、互いに類似する特徴情報がある場合には、前記互いに類似する特徴情報にそれぞれ対応する人物を示す情報を類似人物情報として前記表示部に表示させる類似人物出力部をさらに備え、
   前記除外候補設定部は、前記類似人物出力部が表示させた前記類似人物情報に対応する前記特徴情報のうち、ユーザの入力又は予め設定された所定の基準に応じて選択された前記特徴情報を前記除外候補に設定する請求項１から請求項４のいずれか１項記載の人物情報表示装置。
6. 前記類似人物情報が示す複数の人物について、前記動画像データにおける前記人物のそれぞれの表示時間の長さを示す表示時間情報を算出して前記表示部に表示させる時間情報算出部をさらに備える請求項５記載の人物情報表示装置。
7. 前記一致情報抽出部が抽出した複数の前記特徴情報のうち、互いに類似する特徴情報がある場合には、前記互いに類似する特徴情報にそれぞれ対応する人物を示す情報を類似人物情報として前記表示部に表示させる類似人物出力部をさらに備え、
   前記類似人物出力部は、前記類似人物情報が示す複数の前記人物のうち、前記動画像データにおける表示時間の長さに関する所定の基準を満たす人物を特定する情報を前記表示部に表示させる請求項１から請求項６のいずれか１項記載の人物情報表示装置。
8. 前記動画像データのフレームに占める前記人物の顔の面積の比率であるアップ度を算出し、算出した前記アップ度に基づく情報を前記表示部に表示させるアップ度算出部をさらに備える請求項１から請求項７のいずれか１項記載の人物情報表示装置。
9. 前記一致情報抽出部が抽出した複数の前記特徴情報のうち、互いに類似する特徴情報がある場合には、前記互いに類似する特徴情報にそれぞれ対応する人物を示す情報を類似人物情報として前記表示部に表示させる類似人物出力部をさらに備え、
   前記類似人物出力部は、前記類似人物情報が示す複数の前記人物のうち、前記アップ度算出部が算出した前記アップ度に関する所定の基準を満たす人物を特定する情報を前記表示部に表示させる請求項８記載の人物情報表示装置。
10. 前記除外候補設定部は、前記動画像データにおける表示時間の長さに関する所定の基準を満たす人物に対応する前記特徴情報を選択して、前記除外候補に設定する請求項１から請求項９のいずれか１項記載の人物情報表示装置。
11. 前記動画像データのフレームに占める前記人物の顔の面積の比率であるアップ度を算出するアップ度算出部をさらに備え、
    前記除外候補設定部は、前記アップ度算出部が算出した前記アップ度に関する所定の基準を満たす人物に対応する前記特徴情報を選択して、前記除外候補に設定する請求項１から請求項１０のいずれか１項記載の人物情報表示装置。
12. 前記動画像データのフレームに占める前記人物の顔の面積の比率であるアップ度を算出するアップ度算出部をさらに備え、
    前記人物情報出力部は、前記一致情報抽出部が抽出した前記特徴情報に対応する人物を示す情報を、前記アップ度算出部が算出した前記アップ度に基づく順序で前記表示部に表示させる請求項１から請求項１１のいずれか１項記載の人物情報表示装置。
13. 前記動画像データのフレームに占める前記人物の顔の面積の比率であるアップ度を算出するアップ度算出部をさらに備え、
    前記人物情報出力部は、前記一致情報抽出部が抽出した前記特徴情報に対応する人物を示す情報を、前記動画像データにおける前記人物の表示時間の長さ及び前記アップ度に基づく順序で前記表示部に表示させる請求項１から請求項１２のいずれか１項記載の人物情報表示装置。
14. 前記特徴抽出部が抽出した前記顔の特徴のうち前記特徴情報と一致しなかった前記顔の特徴に対応する顔の画像を、前記動画像データから切り出して前記表示部に表示させる不一致特徴出力部をさらに備える請求項１から請求項１３のいずれか１項記載の人物情報表示装置。
15. 特定のシリーズを構成する複数の前記動画像データについて抽出対象となる前記特徴情報を指定する抽出対象指定部をさらに備え、
    前記抽出対象指定部が前記抽出対象となる前記特徴情報を指定した場合、前記抽出対象指定部が指定した前記特徴情報は、前記特定のシリーズを構成する複数の前記動画像データ以外の前記動画像データおいて前記一致情報抽出部が抽出する前記特徴情報から除外される請求項１から請求項１４のいずれか１項記載の人物情報表示装置。
16. 動画像データに表示されている人物に関する情報である出演者情報を作成するために人物の情報を表示する人物情報表示装置における人物情報表示方法であって、
    前記人物情報表示装置の特徴抽出部が、前記動画像データから人物の顔の特徴を抽出する特徴抽出ステップと、
    前記人物情報表示装置の一致情報抽出部が、予め記憶された複数人の顔の特徴情報の中から、前記特徴抽出部が抽出した前記顔の特徴と一致する前記特徴情報を抽出する一致情報抽出ステップと、
    前記人物情報表示装置の除外候補設定部が、前記一致情報抽出部が抽出した複数の前記特徴情報のうち、互いに類似する特徴情報がある場合には、前記互いに類似する特徴情報のうち、ユーザの入力又は所定の基準に応じて選択された前記特徴情報を、前記出演者情報から除外される人物の候補である除外候補に設定する除外候補設定ステップと、
    前記人物情報表示装置の人物情報出力部が、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補設定部が前記除外候補に設定した前記特徴情報に対応する人物を示す情報と、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補に設定されていない前記特徴情報に対応する人物を示す情報とを表示部に表示させる人物情報出力ステップと
    を含み、
    前記人物情報出力ステップにおいて、前記人物情報出力部は、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補設定部が前記除外候補に設定した前記特徴情報に対応する人物を示す情報の表示態様を、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補に設定されていない前記特徴情報に対応する人物を示す情報の表示態様とは異ならせて前記表示部に表示させる人物情報表示方法。
17. 動画像データに表示されている人物に関する情報である出演者情報を作成するために人物の情報を表示する人物情報表示装置における人物情報表示プログラムであって、
    前記人物情報表示装置の特徴抽出部が、前記動画像データから人物の顔の特徴を抽出する特徴抽出ステップと、
    前記人物情報表示装置の一致情報抽出部が、予め記憶された複数人の顔の特徴情報の中から、前記特徴抽出部が抽出した前記顔の特徴と一致する前記特徴情報を抽出する一致情報抽出ステップと、
    前記人物情報表示装置の除外候補設定部が、前記一致情報抽出部が抽出した複数の前記特徴情報のうち、互いに類似する特徴情報がある場合には、前記互いに類似する特徴情報のうち、ユーザの入力又は所定の基準に応じて選択された前記特徴情報を、前記出演者情報から除外される人物の候補である除外候補に設定する除外候補設定ステップと、
    前記人物情報表示装置の人物情報出力部が、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補設定部が前記除外候補に設定した前記特徴情報に対応する人物を示す情報と、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補に設定されていない前記特徴情報に対応する人物を示す情報とを表示部に表示させる人物情報出力ステップと
    を前記人物情報表示装置において実行させ、
    前記人物情報出力ステップにおいて、前記人物情報出力部は、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補設定部が前記除外候補に設定した前記特徴情報に対応する人物を示す情報の表示態様を、前記一致情報抽出部が抽出した前記特徴情報であって前記除外候補に設定されていない前記特徴情報に対応する人物を示す情報の表示態様とは異ならせて前記表示部に表示させる人物情報表示プログラム。

Images