JP5590427B2 - 映像処理システム、映像コンテンツ監視方法、映像処理装置及びその制御方法と制御プログラム - Google Patents

Description

本発明は、生成された映像コンテンツの内容を監視する技術に関する。

上記技術分野において、特許文献１においては、図１のように、クライアントからサイトにアップロードする閲覧動画データを、照合サーバにおいて登録者が既に登録した動画データと照合することにより、アップロードして良いか否かを判定する技術が開示されている。また、照合サーバによる照合が任意又は無作為に抽出された静止画群で行ないわれることによる高速化が言及されている（段落［００４５］［００４６］参照）。さらに、閲覧動画データがクアイアントから直接サイトにアップロードされた場合は、参照サーバがサイトから閲覧動画データを取得して照合が行なわれることも示唆されている（段落［００３１］参照）。

特開２００９−０７０３４９

しかしながら、上記文献に記載の技術は、閲覧動画データがクアイアントから直接サイトにアップロードされて、参照サーバがサイトから閲覧動画データを取得して照合が行なわれる構成の場合であっても、参照サーバでの照合時に静止画の抽出が行なわれるので、大容量の閲覧動画データがそのままサイトから参照サーバに送られる。特に、複数のサイトがネットワークに接続された開かれたシステムにおいては、参照サーバが主導的に照合すべき閲覧動画データを収集して照合処理することが求められるが、照合すべき閲覧動画データを収集（ダウンロード）するために長時間が掛かってしまう。

本発明の目的は、上述の課題を解決する技術を提供することにある。

上記目的を達成するため、本発明に係る映像処理システムは、
判定対象の映像コンテンツ中から、映像シーンを考慮せずに選択された断片映像であって、前記映像コンテンツ内の一連の複数のフレームを含む前記断片映像のデータを、ネットワークを介してダウンロードする断片映像ダウンロード手段と、
前記ダウンロードした断片映像のデータに基づいて、前記映像コンテンツの内容を判定する第１の映像コンテンツ判定手段と、
を備え、
前記断片映像ダウンロード手段は、ダウンロードする断片映像の数と各断片映像の時間長とを前記第１の映像コンテンツ判定手段による判定速度と判定精度とを考慮して設定する断片映像設定手段を有し、
前記第１の映像コンテンツ判定手段は、前記断片映像の各フレームから抽出したフレーム特徴量を含み、前記一連の複数のフレームに対応するフレーム特徴量列と、予め登録された映像コンテンツ全体のフレーム特徴量列との比較に基づいて、前記断片映像を含んだ映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定することを特徴とする。

上記目的を達成するため、本発明に係る映像コンテンツ監視方法は、
映像コンテンツ選択手段が、映像コンテンツ配信サイトにアップロードされた映像コンテンツから、映像コンテンツの内容を判定する対象の映像コンテンツを選択する映像コンテンツ選択ステップと、
断片映像ダウンロード手段が、前記選択した映像コンテンツ中から、映像シーンを考慮せずに選択された断片映像であって、前記映像コンテンツ内の一連の複数のフレームを含む前記断片映像のデータを、ネットワークを介してダウンロードする断片映像ダウンロードステップと、
映像コンテンツ判定手段が、前記ダウンロードした断片映像の各フレームから抽出されたフレーム特徴量と予め登録された映像コンテンツのフレーム特徴量との比較に基づいて、前記断片映像を含んだ一連の複数のフレームからなる映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定する映像コンテンツ判定ステップと、
を含み、
前記断片映像ダウンロードステップは、ダウンロードする断片映像の数と各断片映像の時間長とを前記第１の映像コンテンツ判定ステップにおける判定速度と判定精度とを考慮して設定する断片映像設定ステップを有し、
前記第１の映像コンテンツ判定ステップにおいては、前記断片映像の各フレームから抽出したフレーム特徴量を含み、前記一連の複数のフレームに対応するフレーム特徴量列と、予め登録された映像コンテンツ全体のフレーム特徴量列との比較に基づいて、前記断片映像を含んだ映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定することを特徴とする。

上記目的を達成するため、本発明に係る映像処理装置は、
映像コンテンツ配信サイトにアップロードされた映像コンテンツから、映像コンテンツの内容を判定すべき映像コンテンツを選択する映像コンテンツ選択手段と、
前記選択した映像コンテンツ中から、映像シーンを考慮せずに選択された断片映像であって、前記映像コンテンツ内の一連の複数のフレームを含む前記断片映像のデータを、ネットワークを介してダウンロードする断片映像ダウンロード手段と、
前記ダウンロードした断片映像のデータに基づいて、前記映像コンテンツの内容を判定する映像コンテンツ判定手段と、
を備え、
前記断片映像ダウンロード手段は、ダウンロードする断片映像の数と各断片映像の時間長とを前記第１の映像コンテンツ判定手段による判定速度と判定精度とを考慮して設定する断片映像設定手段を有し、
前記映像コンテンツ判定手段は、前記断片映像の各フレームから抽出したフレーム特徴量を含み、前記一連の複数のフレームに対応するフレーム特徴量列と、予め登録された映像コンテンツ全体のフレーム特徴量列との比較に基づいて、前記断片映像を含んだ映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定することを特徴とする。

上記目的を達成するため、本発明に係る映像処理装置の制御方法は、
映像コンテンツ選択手段が、映像コンテンツ配信サイトにアップロードされた映像コンテンツから、映像コンテンツの内容を判定すべき映像コンテンツを選択する映像コンテンツ選択ステップと、
断片映像ダウンロード手段が、前記選択した映像コンテンツ中から、映像シーンを考慮せずに選択された断片映像であって、前記映像コンテンツ内の一連の複数のフレームを含む前記断片映像のデータを、ネットワークを介してダウンロードする断片映像ダウンロードステップと、
映像コンテンツ判定手段が、前記ダウンロードした断片映像のデータに基づいて、前記映像コンテンツの内容を判定する映像コンテンツ判定ステップと、
を含み、
前記断片映像ダウンロードステップは、ダウンロードする断片映像の数と各断片映像の時間長とを前記第１の映像コンテンツ判定ステップにおける判定速度と判定精度とを考慮して設定する断片映像設定ステップを有し、
前記映像コンテンツ判定ステップにおいては、前記断片映像の各フレームから抽出したフレーム特徴量を含み、前記一連の複数のフレームに対応するフレーム特徴量列と、予め登録された映像コンテンツ全体のフレーム特徴量列との比較に基づいて、前記断片映像を含んだ映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定することを特徴とする。

上記目的を達成するため、本発明に係る映像処理装置の制御プログラムは、
映像コンテンツ配信サイトにアップロードされた映像コンテンツから、映像コンテンツの内容を判定すべき映像コンテンツを選択する映像コンテンツ選択ステップと、
前記選択した映像コンテンツ中から、映像シーンを考慮せずに選択された断片映像であって、前記映像コンテンツ内の一連の複数のフレームを含む前記断片映像のデータを、ネットワークを介してダウンロードする断片映像ダウンロードステップと、
前記ダウンロードした断片映像のデータに基づいて、前記映像コンテンツの内容を判定する映像コンテンツ判定ステップと、
をコンピュータに実行させる映像処理装置の制御プログラムであって、
前記断片映像ダウンロードステップは、ダウンロードする断片映像の数と各断片映像の時間長とを前記第１の映像コンテンツ判定ステップにおける判定速度と判定精度とを考慮して設定する断片映像設定ステップを有し、
前記映像コンテンツ判定ステップにおいては、前記断片映像の各フレームから抽出したフレーム特徴量を含み、前記一連の複数のフレームに対応するフレーム特徴量列と、予め登録された映像コンテンツ全体のフレーム特徴量列との比較に基づいて、前記断片映像を含んだ映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定する。

本発明によれば、閲覧可能な映像コンテンツの内容の判定をダウンロードするデータ量を削減して実施することができる。

本発明の第１実施形態に係る映像処理システムの構成を示すブロック図である。 本発明の第２実施形態に係る映像処理システムの構成を示すブロック図である。 本発明の第２実施形態に係る映像処理システムの動作手順を示すシーケンス図である。 本発明の第２実施形態に係る映像処理装置のハードウエア構成を示すブロック図である。 本発明の第２実施形態に係る対象映像コンテンツリストの構成を示す図である。 本発明の第２実施形態に係る断片映像パラメータ用テーブルの構成を示す図である。 本発明の第２実施形態に係る断片映像選択リストの構成を示す図である。 本発明の第２実施形態に係る断片映像コンテンツ判定結果リストの構成を示す図である。 本発明の第２実施形態に係る映像コンテンツＤＢの構成を示す図である。 本発明の第２実施形態に係る映像処理装置の処理手順を示すフローチャートである。 本発明の第２実施形態に係る断片映像パラメータ決定処理の処理手順を示すフローチャートである。 本発明の第２実施形態に係る断片映像選択リスト作成処理の処理手順を示すフローチャートである。 本発明の第２実施形態に係る断片映像選択アルゴリズムを示す図である。 本発明の第３実施形態に係る映像処理システムの動作手順を示すシーケンス図である。 本発明の第３実施形態に係る映像処理装置の処理手順を示すフローチャートである。 本発明の第４実施形態に係る映像処理システムの構成を示すブロック図である。 本発明の第４実施形態に係る映像処理装置のハードウエア構成を示すブロック図である。 本発明の第４実施形態に係るアルゴリズム選択テーブルの構成を示す図である。 本発明の第４実施形態に係る映像処理装置の処理手順を示すフローチャートである。 本発明の第５実施形態に係る映像処理システムの構成を示すブロック図である。 本発明の第５実施形態に係るフレーム特徴量抽出部の構成を示すブロック図である。 本発明の第５実施形態に係るフレーム特徴量抽出部における処理を示す図である。 本発明の第５実施形態に係るフレーム特徴量抽出部における抽出領域を示す図である。 本発明の第５実施形態に係る映像コンテンツフレーム特徴量ＤＢの構成を示す図である。 本発明の第５実施形態に係る断片映像コンテンツ判定結果リストの構成を示す図である。 本発明の第６実施形態に係る映像処理システムの構成を示すブロック図である。 本発明の第７実施形態に係る映像処理システムの構成を示すブロック図である。 本発明の第７実施形態に係る映像処理システムの動作手順を示すシーケンス図である。 本発明の第７実施形態に係る映像処理装置の処理手順を示すフローチャートである。 本発明の第８実施形態に係る映像処理システムの構成を示すブロック図である。 本発明の第８実施形態に係る映像処理システムの動作手順を示すシーケンス図である。 本発明の第８実施形態に係る映像処理装置のハードウエア構成を示すブロック図である。 本発明の第８実施形態に係る対象映像コンテンツ違法性判定結果リストの構成を示す図である。 本発明の第８実施形態に係る映像処理装置の処理手順を示すフローチャートである。

以下に、図面を参照して、本発明の実施の形態について例示的に詳しく説明する。ただし、以下の実施の形態に記載されている構成要素はあくまで例示であり、本発明の技術範囲をそれらのみに限定する趣旨のものではない。

なお、本明細書では、以下の文言を使用する。“映像コンテンツ”は、１つの作品としてまとめられた映像を意味する。また、“断片映像”は、映像コンテンツ内の１つのフレーム、一連の複数のフレーム、又は少なくとも１つのフレームの所定時間内の離散集合などを含む概念である。また、“映像シーン”は、映像コンテンツに含まれる、少なくとも１つの断片映像を含む一連の複数のフレームを示す。また、“ダウンロード”“アップロード”は記憶してその後に使用する厳密なものではなく、一時的なデータ転送に対しても使用する。

［第１実施形態］
本発明の第１実施形態としての映像処理システム１００について、図１を用いて説明する。映像処理システム１００は、閲覧可能な映像コンテンツの内容を判定するためのシステムである。

図１に示すように、映像処理システム１００は、断片映像ダウンロード部１３０と、第１の映像コンテンツ判定１４０と、を含む。断片映像ダウンロード部１３０は、判定対象の映像コンテンツ１１０中にあって、一連の複数のフレームを含む断片映像１１１〜１１ｎのデータを、ネットワーク１２０を介してダウンロードする。第１の映像コンテンツ判定１４０は、ダウンロードした断片映像１１１〜１１ｎのデータに基づいて、映像コンテンツ１１０の内容を判定する。

本実施形態によれば、閲覧可能な映像コンテンツの内容を、ダウンロードするデータ量を削減して判定することができる。

［第２実施形態］
次に本発明の第２実施形態に係る映像処理システムについて、説明する。第２実施形態では、映像コンテンツ配信サイトから新規にアップロードされた映像コンテンツの断片映像を、ネットワークを介してダウンロードし、新規にアップロードされた映像コンテンツの内容を判定して映像コンテンツ監視を行なう。本実施形態によれば、映像処理装置において、新規にアップロードされた映像コンテンツの内容を、ダウンロードするデータ量を削減して判定することができる。

《映像処理システムの構成》
図２は、本発明の第２実施形態に係る映像処理システムの構成を示すブロック図である。

図２において、２１０は映像処理装置であって、ネットワーク２５０を介して映像コンテンツ配信サイト２２０から断片映像を収集して映像コンテンツの内容を判定する装置である。２２０は映像コンテンツ配信サイトであって、映像コンテンツアップロード装置２３０からアップロードされた映像コンテンツを、映像コンテンツ視聴用端末２４０に配信する。なお、映像コンテンツ自体は、映像コンテンツ配信サイト２２０内にあっても、映像コンテンツアップロード装置２３０内にあっても、他の配信用映像コンテンツの貯蔵部（不図示）内にあってもよい。２３０は映像コンテンツアップロード装置であって、映像コンテンツ配信サイト２２０に映像コンテンツをアップロードする。図２には、ネットワーク２５０を介して映像コンテンツ配信サイト２２０にアップロードする映像コンテンツアップロード装置と、ローカルに映像コンテンツ配信サイト２２０にアップロードする映像コンテンツアップロード装置が示されている。なお、映像コンテンツアップロード装置２３０は映像コンテンツ視聴用端末２４０がその機能を有する場合もある。２４０は映像コンテンツ視聴用端であって、図２にように、デスクトップ型のパーソナルコンピュータ（以下、ＰＣ）やノートパソコン、モニタ、携帯電話などを含み、映像コンテンツ配信サイト２２０から映像コンテンツをダウンロードして視聴可能な機能を有する機器である。

本実施形態の映像処理装置２１０は、以下の機能構成部を有する。２１１は通信制御部であって、ネットワーク２５０を介して映像コンテンツ配信サイト２２０との通信を制御する。２１２は映像コンテンツクローラ部であって、通信制御部２１１を介してネットワーク２５０に接続する複数の映像コンテンツ配信サイト２２０から新規に登録された映像コンテンツの記憶場所を検索する。２１３は断片映像選択部であって、映像コンテンツクローラ部２１２が検索した内容を判定すべき映像コンテンツ内のどの断片映像をダウンロードすべきかを選択する。本実施形態では、予め設定された方法で断片映像が選択される。２１４は映像コンテンツの断片映像ダウンロード部であって、通信制御部２１１を介して、断片映像選択部２１３が選択した断片映像を、内容を判定すべき各映像コンテンツから抽出して、ダウンロードする。２１５は映像コンテンツＤＢ（データベース）であって、内容を判定すべき映像コンテンツの断片映像と比較するための既知・既存の映像コンテンツを蓄積する。２１６は断片映像比較部であって、映像コンテンツの断片映像ダウンロード部２１４が映像コンテンツ配信サイト２２０からダウンロードした断片映像を、映像コンテンツＤＢ２１５に蓄積されている既知・既存の映像コンテンツと順次に比較する。２１７は映像コンテンツ判定部であって、断片映像比較部２１６によるダウンロードした断片映像と映像コンテンツＤＢ２１５に蓄積された映像コンテンツとの比較結果から、内容を判定すべき映像コンテンツが蓄積された映像コンテンツの全部又は一部と合致するかを判定し、その判定結果を出力する。かかる合致か否かの判定は、特徴的な一部の合致を条件にする場合も、全体的な合致の割合や合致部分の合致度合いを条件にする場合もある。

《映像処理システムの動作手順》
図３は、本実施形態に係る映像処理システムの動作手順３００を示すシーケンス図である。なお、図３では、１つ１つの映像コンテンツの判定を順次に完了していく方式（深さ方式という）を明確にするため、映像コンテンツ配信サイトＡとＢとを設けている。

まず、ステップＳ３０１において、映像コンテンツアプロード装置から映像コンテンツ配信サイトに映像コンテンツがアプロードされる。映像コンテンツ配信サイトＡとＢとでは、ステップＳ３０３において、映像コンテンツの登録処理が行なわれる。

映像処理装置からは、ステップＳ３０５において、所定のタイミングで映像コンテンツのクローリングが実行される。なお、クローリングのタイミングは、一定時間置き、あるいは、映像コンテンツ配信サイトへの新規映像コンテンツの登録や蓄積数により決めてよい。ステップＳ３０７において、クローリングの結果である新規アプロード映像コンテンツの記憶場所が映像処理装置に報告される。

映像処理装置では、ステップＳ３０９において、最初に判定する映像コンテンツを選択する。なお、選択順は映像コンテンツのアップロード時間順など任意の順番でよい。次に、ステップＳ３１１において、ダウンロードする断片映像の映像コンテンツ中の位置を選択する。かかる断片映像の位置選択の数例が、図１２を参照して後述される。ステップＳ３１３において、選択された断片映像が映像コンテンツ配信サイトに対して要求される。図３では、最初の映像コンテンツが映像コンテンツ配信サイトＢにあるとしている。ステップＳ３１５において、映像コンテンツ配信サイトＢから映像処理装置に対してネットワークを介して要求された断片映像がダウンロードされる。続いて、ステップＳ３１７において、ダウンロードされた断片映像を映像コンテンツＤＢの映像コンテンツと順次に比較して、合致する映像コンテンツあるいはその一部があるかの判定処理を行なう。

次に、ステップＳ３１９において、次に判定する映像コンテンツを選択する。そして、ステップＳ３２１において、ダウンロードする断片映像の映像コンテンツ中の位置を選択する。ステップＳ３２３において、選択された断片映像が映像コンテンツ配信サイトに対して要求される。図３では、次の映像コンテンツが映像コンテンツ配信サイトＡにあるとしている。ステップＳ３２５において、映像コンテンツ配信サイトＡから映像処理装置に対してネットワークを介して要求された断片映像がダウンロードされる。続いて、ステップＳ３２７において、ダウンロードされた断片映像を映像コンテンツＤＢの映像コンテンツと順次に比較して、合致する映像コンテンツあるいはその一部があるかの判定処理を行なう。

なお、上記の断片映像の要求、断片映像ダウンロード、映像コンテンツの判定処理は、断片映像の数にもよるが、一度に全部の断片映像の処理をするのではなく、所定数ごとの断片映像を順次に処理して合致と判定された時点で処理を停止すれば、ダウンロードする断片映像の容量の削減及び処理の高速化が図れる。また、合致する映像コンテンツあるいはその一部があるかの判定処理の結果は、映像処理装置から報知されてもよいし、映像コンテンツ配信サイトや映像コンテンプアップロード装置、あるいは映像視聴用端末に通知されてもよい。

《映像処理装置のハードウエア構成》
図４は、本実施形態に係る映像処理装置２１０のハードウエア構成を示すブロック図である。

図４で、ＣＰＵ４１０は演算制御用のプロセッサであり、プログラムを実行することで図２の各機能構成部を実現する。ＲＯＭ４２０は、初期データ及びプログラムなどの固定データ及びプログラムを記憶する。通信制御部４３０は、ネットワークを介して映像コンテンツ配信サイト２２０と通信する。通信は無線でも有線でもよい。なお、必要であれば、映像コンテンツ視聴用端末２４０とも通信する。

ＲＡＭ４４０は、ＣＰＵ４１０が一時記憶のワークエリアとして使用するランダムアクセスメモリである。ＲＡＭ４４０には、本実施形態の実現に必要なデータを記憶する領域が確保されている。４４１は、クローリングの結果、映像コンテンツ配信サイト２２０から返答された新規にアップデートされた内容判定の対象映像コンテンツリストである（図５参照）。４４２は、断片映像の位置決めに使用されるオフセットや断片映像長などの、断片映像位置選択用の断片映像パラメータである。４４３は、選択された断片映像の位置を表わす断片映像選択リストである（図７参照）。４４４は、通信制御部２１１を介して映像コンテンツ配信サイト２２０からダウンロードされた断片映像データである。４４５は、ダウンロードされた断片映像と蓄積された映像コンテンツとの比較において、合致の条件として使用される断片映像合致判断用パラメータである。４４６は、各断片映像についての合致有無を示す断片映像合致有無フラグである。４４７は、最終の判定として、断片映像からそれを含む映像コンテンツの全体あるいは一部と合致する映像コンテンツが蓄積されているかの判定結果を示す対象映像コンテンツ判定結果リストである（図８参照）。

ストレージ４５０は、データベースや各種のパラメータ、あるいは本実施形態の実現に必要な以下のデータ又はプログラムが記憶されている。２１５は、映像コンテンツＤＢである（図９参照）。４５１は、断片映像パラメータ４４２として使用するための断片映像パラメータ用テーブルである（図６参照）。４５２は、断片映像を選択するためのアルゴリズムである断片映像選択アルゴリズムである（図１２Ｂ参照）。４５３は、断片映像合致判断用パラメータ４４５を使用した断片映像の合致判断のアルゴリズムである断片映像合致判断アルゴリズムである。ストレージ４５０には、以下のプログラムが格納される。４５４は、全体の処理を実行させる映像処理プログラムである。４５５は、映像処理プログラム４５４において、クローリング処理を実行するクローリングモジュールである。４５６は、映像処理プログラム４５４において、ダウンロードする断片映像を選択する断片映像選択モジュールである（図１１及び図１２Ｂ参照）。４５７は、映像処理プログラム４５４において、選択された断片映像をダウンロードする断片映像ダウンロードモジュールである。４５８は、映像処理プログラム４５４において、断片映像と蓄積された映像コンテンツの合致を判定する断片映像合致判定モジュールである。

なお、図４には、本実施形態に必須なデータやプログラムのみが示されており、ＯＳなどの汎用のデータやプログラムは図示されていない。

（対象映像コンテンツリストの構成）
図５は、本実施形態に係る対象映像コンテンツリスト４４１の構成を示す図である。
図５の対象映像コンテンツリスト４４１は、クローリングによって収集された新規にアップロードされた映像コンテンツのリストである。映像コンテンツ名（ＩＤ）５０１に対応付けて、種別５０２と、記憶サイズ５０３と、ダウンロード元のＵＲＬ５０４と、時間長（時間）５０５が記憶される。なお、かかるデータに限定されない。種別５０２は、断片映像パラメータの決定に使用される。記憶サイズ５０３と時間長（時間）５０５とは、断片映像の選択位置を決めるために使用される。ダウンロード元のＵＲＬ５０４は、断片映像のダウンロードにために使用される。なお、ダウンロード元のアドレスはＵＲＬに限定されない。

（断片映像パラメータ用テーブルの構成）
図６は、本実施形態に係る断片映像パラメータ用テーブル４５１の構成を示す図である。かかる断片映像パラメータ用テーブル４５１から、映像コンテンツの種別に応じた断片映像パラメータ４４２が選択されて断片選択に使用される。

断片映像パラメータ用テーブル４５１は、映像コンテンツの種別６０１に対応付けて、断片映像の時間間隔６０２、選択する断片映像数６０３、分割された時間帯のどの位置に断片映像を設定するかのオフセット６０４、断片映像長６０５を記憶する。なお、かかるパラメータに限定されない。また、図６では、時間により断片映像を管理する場合を示したが、相対位置によって管理してもよい。

時間間隔６０２は１つのデータではなく、例えば開始時は第１間隔、中半は第２間隔、終盤は第３間隔などと複数のデータを記憶してもよい。断片映像数６０３は時間間隔６０２とに関連するが、処理の高速化のために断片映像数６０３で制限して、所定場所からは断片映像の収集は行なわないような制御も可能である。逆に、時間間隔６０２を守り断片映像数６０３により制限されない選択も考えられる。オフセット６０４は、断片映像の位置が時間間隔６０２に基づいて周期的にならないように、基本的にはオフセット６０４を平均とするランダムな時間が設定されることになる。断片映像長６０５においても、１つのデータではなく、時間帯において明らかに映像のテンポが変わるものは異なる断片映像長がセットされる。また、断片映像長６０５は種別により固定されたものでなく、動的に変化してもよい。例えば、比較するフレームが特徴あるものであって、比較結果の合致判定に対する信頼度が高い場合は、所定の断片映像長で映像コンテンツの判定のための情報は十分であるので、断片映像長は変えない。一方、比較するフレームに特徴が少ないものは、比較結果の合致判定に対する信頼度が低いので、所定の断片映像長では映像コンテンツの判定のための情報は不十分であるので、信頼度が高い情報が得られるまで断片映像長を伸ばすよう調整する。人物が登場するフレームなどは信頼度が比較的高く、空や海などの風景のフレームは信頼度が比較的低いと言える。また、断片映像長６０５の指定はせずに、得られる信頼度に応じて結果的に断片映像長が得られるように制御することも出来る。上述のように、判定対象の映像コンテンツに対応して、判定速度と判定精度とを考慮して断片映像設定を行なうことになる。

（断片映像選択リストの構成）
図７は、本実施形態に係る断片映像選択リスト４４３の構成を示す図である。断片映像選択リスト４４３は、判定対象の各映像コンテンツからダウンロードして収集する断片映像を示す情報である。

断片映像選択リスト４４３は、判定対象の映像コンテンツＩＤ７０１と選択された断片映像ＳＮ７０２とに対応付けて、断片映像開始７０３と断片映像終了７０４とが記憶されている。断片映像ＳＮ７０２は、各映像コンテンツの断片映像に振られたシリアル番号である。なお、かかるデータに限定されない。また、断片映像開始７０３と断片映像終了７０４とは、時間であっても位置であってもよい。更に、断片映像開始７０３と断片映像長であっても同じである。断片映像終了７０４は、図６の断片映像長６０５について記載した如く、動的に変化する断片映像長に従って前後する。すなわち、比較結果の合致判定に対する信頼度が低い場合は、信頼度の高い情報が得られるまで断片映像終了７０４を後ろに伸ばすのことになる。また、断片映像長６０５を設定しない場合は、断片映像終了７０４も設定されず、信頼度の高い断片映像が得られた時点で断片終了が決定されることになる。

（断片映像コンテンツ判定結果リストの構成）
図８は、本実施形態に係る断片映像コンテンツ判定結果リスト４４７の構成を示す図である。断片映像コンテンツ判定結果リスト４４７は、断片映像選択リスト４４３の構成に更に、断片映像と映像コンテンツＤＢの映像コンテンツを比較した結果として、その一部が合致した映像コンテンツがあるが無いかを示す判定結果を付加した構成である。なお、この判定結果に基づいて、さらに断片映像を含む映像コンテンツを評価することも可能である。

断片映像コンテンツ判定結果リスト４４７は、映像コンテンツＩＤ８０１と断片映像ＳＮ８０２と断片映像開始８０３と断片映像終了８０４とに対応付けて、判定結果８０５が合致した映像コンテンツのＩＤと共に記憶される。断片映像終了８０４は、図７の断片映像終了７０４について記載した如く動的に制御された場合、当初は空白で信頼度が十分な断片映像をダウンロードした後に設定されることになる。なお、かかるデータに限定されない。

（映像コンテンツＤＢの構成）
図９は、本実施形態に係る映像コンテンツＤＢ２１５の構成を示す図である。

映像コンテンツＤＢ２１５は、既存・既知の映像コンテンツ名（ＩＤ）９０１に対応付けて、その制作者９０２、制作日時９０３、映像コンテンツデータ（又は、ポインタ）９０４が記憶される。なお、かかるデータに限定されない。

《映像処理装置の処理手順》
図１０は、本実施形態に係る映像処理装置２１０の処理手順を示すフローチャートである。このフローチャートは、映像処理装置２１０のＣＰＵ４１０によってＲＡＭ４４０を使用しながら実行され、図２の各機能構成部を実現する。

まず、ステップＳ１００１において、クローリングのタイミングを待つ。クローリングのタイミングになるとステップＳ１００３に進んで、ネットワークに接続する全ての映像コンテンツ配信サイトに対するクローリング処理を行なう。ステップＳ１００５においてクローリング結果の受信を待って、クローリング結果を受信するとステップＳ１００７に進んで、図５の対象映像コンテンツリスト４４１を作成する。

次に、ステップＳ１００９において、断片映像を選択するための断片映像パラメータ４４２（図６参照）を決定する（図１１）。続いて、ステップＳ１０１１において、対象映像コンテンツごとに断片映像選択リスト４４３を作成する（図１２Ａ）。ステップＳ１０１３において、断片映像選択リスト４４３から所定数の断片映像を選択する。ステップＳ１０１５において、選択された所定数の断片映像のデータを映像コンテンツ配信サイトに要求する。ステップＳ１０１７において要求に応答した断片映像のダウンロードを待って、断片映像のダウンロードがあればステップＳ１０１９に進んで、断片映像を映像コンテンツＤＢに蓄積された映像コンテンツと比較する。

比較の結果から合致しない場合はステップＳ１０２１で更に比較する断片映像があるかを判断する。まだ比較する断片映像があればステップＳ１０１５に戻って、断片映像の比較を繰り返す。ステップＳ１０２１において全ての断片映像の比較が終了したと判断されれば、ステップＳ１０２５に進む。

一方、比較の結果から合致する場合はステップＳ１０２３に進んで、断片映像の合致が映像コンテンツの合致と見なせるかを判定する断片映像判定処理を行なう。ステップＳ１０２５において、他の判定対象の映像コンテンツが残っているかを判断し、残っていればステップＳ１０１３に戻って、次の映像コンテンツの判定を繰り返す。他の判定対象の映像コンテンツが残っていなければ、処理を終了する。

（断片映像パラメータ決定処理の処理手順）
図１１は、本実施形態に係る断片映像パラメータ決定処理Ｓ１００９の処理手順を示すフローチャートである。

まず、ステップＳ１１０１において、判定対象の映像コンテンツの種別を判定する。判定した種別に従って、ステップＳ１１０３において、断片映像パラメータ用テーブル４５１から種別に基づいて設定されているオフセットや断片映像長等を読み出す。そして、ステップＳ１１０５において、読み出したパラメータを断片映像パラメータ４４２に記憶する。

（断片映像選択リスト作成処理の処理手順）
図１２Ａは、本実施形態に係る断片映像選択リスト作成処理Ｓ１０１１の処理手順を示すフローチャートである。

まず。ステップＳ１２０１において、断片映像選択アルゴリズム４５２に従って、断片映像が含まれる領域を選択する。次に、ステップＳ１２０３において、各選択領域において、ランダムに選択されるオフセットと断片映像長とから断片映像開始と断片映像終了とを算出する。そして、ステップＳ１２０５において、断片映像選択リスト４４３の映像コンテンツと断片映像ＳＮに対応付けて、断片映像開始と断片映像終了とを記憶する。ステップＳ１２０７において、全選択領域について断片映像位置の算出が行なわれたかを判断し、まだ算出が行なわれていない選択領域があればステップＳ１２０３に戻って、処理を繰り返す。なお、図６に関連して上述した如く、全ての選択領域において断片映像を必要としない場合は、その選択領域においてステップＳ１２０３とＳ１２０５との処理はスルーとなる。

図１２Ｂは、本実施形態に係る断片映像選択アルゴリズム４５２を示す図である。本実施形態においては、１つの断片映像選択アルゴリズム４５２が使用される。なお、複数の断片映像選択アルゴリズムから映像コンテンツの種別や内容に基づいて、１つの断片映像選択アルゴリズムが選択される例については、第４実施形態において詳説する。なお、図１２Ｂにおいて、断片映像選択アルゴリズムＡ−１からＡ−３は映像コンテンツの内容が不明の場合に好適な断片映像選択アルゴリズムであり、断片映像選択アルゴリズムＢ−１は映像コンテンツの内容が既知の場合に好適な断片映像選択アルゴリズムである。これらの断片映像選択アルゴリズムは、映像コンテンツに対応して更に組み合わせて使用される。

図１２Ｂにおいて、１２０１は、断片映像選択アルゴリズムＡ−１である。この断片映像選択アルゴリズムＡ−１においては、映像コンテンツをｎ分割して、その分割領域の部分映像コンテンツにおいてランダムにオフセットを選んだ位置を断片映像の位置とする。断片映像長はＴ（映像コンテンツ長）／ｎ以下である。

１２０２は、断片映像選択アルゴリズムＡ−２である。この断片映像選択アルゴリズムＡ−２においては、映像コンテンツを所定時間間隔（Ｔ0）に分割して、その分割領域においてランダムにオフセットを選んだ位置を断片映像の位置とする。断片映像長はＴ0以下である。

１２０３は、断片映像選択アルゴリズムＡ−３である。この断片映像選択アルゴリズムＡ−３においては、映像コンテンツの前後の一定時間を削除する。例えば、ＴＶドラマであればコマーシャルやタイトル部分であって、この映像コンテンツを特徴付ける領域ではない。かかる処理の判断は、映像コンテンツの種別や予備的な断片映像から行なってよい。残った領域に対してＡ−１やＡ−２が適用される。

１２０４は、断片映像選択アルゴリズムＢ−１である。この断片映像選択アルゴリズムＢ−１においては、判定の有効であると考えられる領域を複数容易して、その複数領域からランダムに選択する。

［第３実施形態］
次に本発明の第３実施形態に係る映像処理システムについて、説明する。本実施形態に係る映像処理システムは、上記第２実施形態が深さ重視であった映像コンテンツの判定を、幅重視の映像コンテンツの判定をする点で異なる。ここで幅重視とは、１つ１つの映像コンテンツの判定を完了して次の判定に移るのではなく、判定対象の全映像コンテンツから所定数の断片映像を収集して比較判定をし、その時点で合致と判定された映像コンテンツは判定対象から除外する処理のことを言う。映像処理システムの動作手順のシーケンス及び映像処理装置の処理手順のフローチャート以外の構成及び動作は、第２実施形態と同様であるため詳しい説明を省略する。本実施形態によれば、合致しない映像コンテンツの最終比較まで待つことがないので、合致する映像コンテンツに判定が迅速に可能となる。

《映像処理システムの動作手順》
図１３は、本実施形態に係る映像処理システムの動作手順１３００を示すシーケンス図である。図１３において、第２実施形態の図３と同様のステップには同じ参照番号が付されている。

ステップＳ３０１からＳ３０７までは、第２実施形態の図３と同様である。ステップＳ１３１１において、判定対象の各映像コンテンツから所定数の断片映像がダウンロード対象に選択される。ステップＳ１３１３においては、映像コンテンツ配信サイトＡ及びＢに対して全ての判定対象映像コンテンツの所定数の断片映像のダウンロードが要求される。ステップＳ１３１５において、要求に応答して、全ての判定対象映像コンテンツの所定数の断片映像がダウンロードされる。

ステップＳ１３１７において、ダウンロードされた全ての判定対象映像コンテンツの所定数の断片映像が、映像コンテンツＤＢに蓄積された映像コンテンツと比較される。この時点で判定結果が確定した判別対象の映像コンテンツについては、以降の比較判定を停止する。ステップＳ１３１９においては、全ての判定対象映像コンテンツの判定結果が出たか否かが判断される。この場合の判定結果とは、合致の判定結果である。全ての判定対象映像コンテンツの判定結果が出れば処理は終了する。全ての判定対象映像コンテンツの判定結果が出てなければステップＳ１３２１に進んで、全ての断片映像についての判定が終了したかを判断する。全ての断片映像についての判定が終了していれば、処理は終了する。全ての断片映像についての判定が終了してなければステップＳ１３１１に戻って、次の所定数の断片映像について処理を繰り返す。

なお、上記の断片映像の要求、断片映像ダウンロード、映像コンテンツの判定処理は、判定対象の映像コンテンツの総数にもよるが、一度に全ての映像コンテンツの処理をするのではなく、１つ又は所定数の映像コンテンツごとの断片映像を順次に処理すれば、一時にダウンロードする断片映像の容量の削減及び処理の高速化が図れる。また、合致する映像コンテンツあるいはその一部があるかの判定処理の結果は、映像処理装置から報知されてもよいし、映像コンテンツ配信サイトや映像コンテンプアップロード装置、あるいは映像視聴用端末に通知されてもよい。

《映像処理装置の処理手順》
図１４は、本実施形態に係る映像処理装置２１０の処理手順を示すフローチャートである。図１４において、ステップＳ１４１３までの処理は、図１０のステップＳ１００１〜Ｓ１０１１と同様であるので、省いている。従って、図１４は、断片映像選択リスと４４３が作成されて以降の処理を示している。

ステップＳ１４１３において、断片映像選択リスト４４３から判定対象の各映像コンテンツから所定数の断片映像を選択する。ステップＳ１４１５において、判定対象の各映像コンテンツ選択された所定数の断片映像のデータを映像コンテンツ配信サイトに要求する。ステップＳ１４１７において要求に応答した断片映像のダウンロードを待って、断片映像のダウンロードがあればステップＳ１４１９に進んで、断片映像を映像コンテンツＤＢに蓄積された映像コンテンツと比較する。

比較の結果から合致する場合はステップＳ１４２１に進んで、断片映像の合致が映像コンテンツの合致と見なせるかを判定する断片映像判定処理を行なう。一方、比較の結果から合致しない場合はステップＳ１４２３に進んで更に比較する映像コンテンツがあるかを判断する。まだ比較する映像コンテンツがあればステップＳ１４１５に戻って、次の映像コンテンツの断片映像の比較を繰り返す。ステップＳ１４２３において全ての映像コンテンツの比較が終了したと判断されれば、ステップＳ１４２５に進む。

ステップＳ１４２５において、全ての断片映像の比較が終了したかを判断し、残っていればステップＳ１４１３に戻って、次の所定数の断片映像について判定が終わってない映像コンテンツについて判定を繰り返す。断片映像が残っていなければ、処理を終了する。

［第４実施形態］
次に本発明の第４実施形態に係る映像処理システムについて、説明する。本実施形態に係る映像処理システムは、上記第２及び実施形態と比べると、１つの断片映像選択アルゴリズムが設定されるのに対して、複数の断片映像選択アルゴリズムを保持して判定対象の映像コンテンツに対応して使用する断片映像選択アルゴリズムを選んで適用する点で異なる。本実施形態では、複数の断片映像選択アルゴリズムから使用する断片映像選択アルゴリズムを選ぶ以外の構成及び動作は、第２及び第３実施形態と同様であるため、詳しい説明を省略する。本実施形態によれば、判定対象の映像コンテンツに対応した断片映像選択アルゴリズムを選ぶので、より正確な判定が可能であり、合致するものは迅速にその結果が出るので高速の判定も可能である。

《映像処理システムの構成》
図１５は、本実施形態に係る映像処理システム１５００の構成を示すブロック図である。図１５の映像処理システム１５００の構成は、図２の映像処理システム２００の構成に断片映像選択アルゴリズムＤＢ１５１１が付加された構成である。他の機能構成部は図２と同様であるので、説明は省略する。

断片映像選択アルゴリズムＤＢ１５１１には、複数の断片映像選択アルゴリズムが判定対象の映像コンテンツの種別や内容に対応付けて記憶されている（図１７参照）。断片映像選択部２１３は、クローリングされた判定対象の映像コンテンツに対応して断片映像選択アルゴリズムを選んで、断片映像を選択する。

《映像処理装置のハードウエア構成》
図１６は、本実施形態に係る映像処理装置１５１０のハードウエア構成を示すブロック図である。図１６の映像処理装置１５１０のハードウエア構成は、図４の映像処理装置２１０のハードウエア構成と比較して、複数の断片映像選択アルゴリズムから使用する断片映像選択アルゴリズムを選ぶ構成及び処理が変更または追加されている。他の同じ機能を果たす構成部には、図４と同じ参照番号を付し、説明は省略する。

ＲＡＭ１６４０の使用する断片映像選択アルゴリズム１６４１は、判定対象の映像コンテンツに対応して選択された断片映像選択アルゴリズムである。ＲＡＭ１６４０の変更は以上である。ストレージ１６５０には、断片映像選択アルゴリズムを選択するためにアルゴリズム選択テーブル１６５１と、映像コンテンツに対応して選択使用されるべく複数の断片映像選択アルゴリズムを格納するアルゴリズム記憶部である断片映像選択アルゴリズムＤＢ１６５２とが付加されている。また、プログラムとしては、映像処理プログラム１６５４に含まれる、使用する断片映像選択アルゴリズムを選択するアルゴリズム選択モジュール１６５５が付加されている。なお、図１６には、本実施形態に必須なデータやプログラムのみが示されており、ＯＳなどの汎用のデータやプログラムは図示されていない。

（アルゴリズム選択テーブルの構成）
図１７は、本実施形態に係るアルゴリズム選択テーブル１６５１の構成を示す図である。

アルゴリズム選択テーブル１６５１は、判定対象の映像コンテンツの種別１７０１と内容１７０２とに対応付けて、使用する主要な断片映像選択アルゴリズム１７０３と他の使用する断片映像選択アルゴリズム１７０４とが記憶される。

かかるアルゴリズム選択テーブル１６５１に従って、断片映像選択アルゴリズムＤＢ（不図示：図１２参照）から使用する断片映像選択アルゴリズムを選択する。

《映像処理装置の処理手順》
図１８は、本実施形態に係る映像処理装置１５１０の処理手順を示すフローチャートである。図１８の処理手順は、図１０の処理手順のステップＳ１００９とＳ１０１１との部分を差し替えたものである。なお、同じ手順のステップＳ１００９とＳ１０１１とはそのまま図示されている。他の処理手順は図１０と同様であるので、省略している。

ステップＳ１００９の断片映像パラメータの決定処理の後、ステップＳ１８０１において、アルゴリズム選択テーブル１６５１に従って使用する断片映像選択アルゴリズムを選択する。ステップＳ１０１１において、選択された断片映像選択アルゴリズムを使用して、断片映像選択リスト４４３が作成される。ステップＳ１８０３においては、他のアルゴリズムを使用するかが判断され、使用する場合はステップＳ１８０１に戻って、他のアルゴリズムによる処理が繰り返される。そのご、図１０のステップＳ１０１３以降の処理が実行される。

なお、他のアルゴリズムの使用は、図１７に示したように、複数のアルゴリズムを組み合わせるためにも使用されるが、例えば、１つのアルゴリズムでは合致しない場合に他のアルゴリズムでも合致しないかを検証するためにも使用される。

［第５実施形態］
次に本発明の第５実施形態に係る映像処理システムについて、説明する。本実施形態に係る映像処理システムは、上記第２乃至第４実施形態と比べると、断片映像と蓄積された映像コンテンツの比較にフレーム特徴量を使用する点で異なる。その他の構成及び動作は、第２乃至第４実施形態と同様であるため、詳しい説明を省略する。本実施形態によれば、合致の比較をデータ量が削減されたフレーム特徴量に基づいて行うので、少ない記憶容量により高速な判定が可能になる。

《映像処理システムの構成》
図１９は、本実施形態に係る映像処理システム１９００の構成を示すブロック図である。図１９の映像処理システム１９００の構成で、図２の映像処理システム２００の構成と異なるのは、次の点である。すなわち、映像処理装置１９１０が、ダウンロードされた断片映像の各フレームからフレーム特徴量を抽出するフレーム特徴量抽出部１９１１と、比較する映像コンテンツをフレーム特徴量で蓄積する映像コンテンツフレーム特徴量ＤＢ１９１５と、断片映像と映像コンテンツとをフレーム特徴量で比較する断片映像特徴量比較部１９１６とを有することである。他の機能構成部で同様の機能を果たす機能構成部には図２と同じ参照番号を付し、説明は省略する。

《フレーム特徴量抽出部の構成》
図２０Ａは、本実施形態に係るフレーム特徴量抽出部１９１１の構成を示すブロック図である。本実施形態で適用されるフレーム特徴量抽出部１９１１は、ＭＰＥＧ７の標準化で採用されているビデオシグネチャを抽出する機能構成部である。

図２０Ａにおいて、出力されるフレーム特徴量２０５０は、撮影された映像の各フレーム画像中に多数のサイズの大小や形状の異なる領域対を設けて、この領域間の領域特徴量の一種である平均輝度値の差分を量子化（実際には３値に）し、符号化したものである。次元決定部２０１０は、領域対の数を決定する。１次元が１領域対に相当する。抽出領域取得部２０２０は、次元決定部２０１０の決定に従って、フレーム特徴量を算出する各次元の領域対を取得する。領域特徴量算出部２０３０は第１領域特徴量算出部２０３１と第２領域特徴量算出部２０３２とを有し、それぞれ各次元の領域対の一方の領域の領域特徴量の一種である平均輝度を算出する。領域特徴量差分符号化部２０４０は、領域対のそれぞれの領域特徴量の一種である平均輝度の差分を取って、その差分を第３閾値に従って量子符号化してフレーム特徴量２０５０を出力する。

なお、本例では、以下、平均輝度により領域特徴量を代表させて説明するが、領域特徴量は領域の平均輝度には限定されない、輝度の他の処理や輝度以外のフレームの特徴量も適用できる。

図２０Ｂは、本実施形態に係るフレーム特徴量抽出部１９１１における処理２０００を示す図である。

図２０Ｂの２０２０ａは、図２０Ａの抽出領域取得部２０２０が取得した領域対の数例を示している。２０２０ａにおいて、外枠がフレームを示しており、内部の各矩形が領域を示している。

図２０Ｂの２０３０ａは、フレーム画像内において、抽出領域取得部２０２０からの領域対により抽出された領域とその領域間の差分を取る関係を表現したものである。フレーム画像内に領域対の２つの領域が抽出されて、それぞれの領域に含まれる画素の平均輝度が算出され、その差分が算出さる様子を各領域の中心を結ぶ矢印で示している。

図２０Ｂの２０４０ａは、算出された差分を量子符号化する様子を示したものである。２０４０ａでは、図２０Ａにおける第１領域特徴量から第２領域特徴量を差し引いた差分が、差分“０”（平均輝度が等しい場合に相当）を中心とする上記第３閾値である破線で示した差分内であれば、“０”を量子符号化の出力値とする。同じ差分が破線位置よりも大きな正（＋）の値であれば、“＋１”を量子符号化の出力値とする。同じ差分が破線位置よりも大きな負（−）の値であれば、“−１”を量子符号化の出力値とする。このように、“−１”、“０”、“＋１”の３値に符号化するのは、次元毎のデータ量を少なくして、できるだけ多次元の情報を生成することでフレーム特徴量の分離を容易にし、かつフレーム特徴量の比較の計算量を削減するためである。従って、上記３値の例に限定する必要はない。なお、破線で示す第３閾値は、使用される全次元の差分値の分布から“０”と量子化する差分値の割合から選定される。一例としては、“０”と量子化する差分値の割合を５０％にするような値を選定する。

図２０Ｂの２０５０ａは、差分の量子符号化の結果を集めて生成されたフレーム特徴量の例を示している。フレーム特徴量は、簡単な例としては、差分の量子符号化された値を一次元方向に次元順に並べたものである。なお、単純に差分の量子符号化された値を一次元方向に次元順に並べたものではなく、多次元方向に並べたものや更に追加の演算を加えたものであってもよく、本例には限定されない、
図２０Ｃは、本実施形態に係るフレーム特徴量抽出部１９１１における抽出領域を示す図である。

図２０Ｂの２０２０ａには、各次元の領域対は２つの矩形領域で示された。しかしながら、フレームを適切に表現するフレーム特徴量を算出するためには、矩形以外の形状が望ましい場合もある。図２０Ｃに示す抽出領域は、２つの矩形領域ではない領域対を例示している。図２０Ｂの２０４０ａで示したように各次元を３値化することで、実時間のフレーム特徴量の比較や、フレーム特徴量の集合である映像コンテンツのフレーム特徴量群の比較を実現する場合であっても、数百次元を設定することが可能である。

（映像コンテンツフレーム特徴量ＤＢの構成）
図２１は、本実施形態に係る映像コンテンツフレーム特徴量ＤＢ１９１５の構成を示す図である。

図２１の映像コンテンツフレーム特徴量ＤＢ１９１５には、映像コンテンツ名（ＩＤ）２１０１に対応付けて、制作社２１０２、制作日時２１０３、フレームＩＤにそれぞれ対応つけられたフレーム特徴量２１０４が記憶される。映像コンテンツ２１１０としてはフレーム特徴量列２１１１が格納され、映像コンテンツ２１２０としてはフレーム特徴量列２１２１が格納される。

（断片映像コンテンツ判定結果リストの構成）
図２２は、本実施形態に係る断片映像コンテンツ判定結果リスト２２００の構成を示す図である。図２２の断片映像コンテンツ判定結果リスト２２００は、第２実施形態の図８の断片映像コンテンツ判定結果リスト４４７に、断片映像のフレーム特徴量と、フレーム特徴量の比較により判定が可能となる関連する映像コンテンツとが追加されている。また、判定結果には映像コンテンツのみではなく、その１シーンが判定結果として記憶されている。

すなわち、図２２の断片映像コンテンツ判定結果リスト２２００は、映像コンテンツＩＤ２２０１と断片映像ＳＮ２２０２と断片映像開始２２０３と断片映像終了２２０４とに対応付けて、フレーム特徴量列２２０５と、合致した映像コンテンツのＩＤ及びシーンＩＤと共に記憶される判定結果２２０６と、関連する映像コンテンツのＩＤ及びシーンＩＤ２２０７とが記憶される。第２実施形態の図６乃至図８の説明でも記載した如く、断片映像終了２２０４について、最初から固定したものではなく動的に変化するものでもよい。第５実施形態ではフレーム特徴量を比較して合致か否かを判定するので、フレーム特徴量の信頼度が閾値以上のフレーム特徴量が所定量得られるように、断片映像の終了を動的に変化させる。フレーム特徴量は、２つの領域の輝度値の差分に基づいて演算された場合、例えば、フレーム内の輝度値の変化が大きい場合は信頼度が高く、輝度値の変化が少ないフレームのフレーム特徴量は信頼度は低いと言える。なお、かかるデータに限定されない。

［第６実施形態］
次に本発明の第６実施形態に係る映像処理システムについて、説明する。本実施形態に係る映像処理システムは、上記第５実施形態と比べると、フレーム特徴量の抽出が映像コンテンツ配信サイトや映像コンテンツアップロード装置で行なわれる点で異なる。その為、映像処理装置は、判定対象の映像コンテンツの断片映像を映像データではなく断片映像のフレーム特徴量でダウンロードする。その他の構成及び動作は、第５実施形態と同様であるため、詳しい説明を省略する。本実施形態によれば、第５実施形態の効果に加えて、断片映像のダウンロードをフレーム特徴量で行なうので、通信容量を飛躍的に減少できる。

《映像処理システムの構成》
図２３は、本実施形態に係る映像処理システム２３００の構成を示すブロック図である。図２３の映像処理システム２３００において、図１９の映像処理システム１９００と同様の機能構成部には同じ参照番号を付した。以下相違点のみを説明する。

映像処理装置２３１０は、映像処理装置１９１０の映像コンテンツの断片映像ダウンロード部２１４の代わりに、断片映像のから既に抽出されたフレーム特徴量を、ネットワーク２５０を介してダウンロードする映像コンテンツの断片映像フレーム特徴量ダウンロード部２３１４を有する。そして、図１９の映像処理装置１９１０が有していたフレーム特徴量抽出部１９１１を有しない。その他は図１９と同様である。

一方、映像コンテンツ配信サイト２３２０は、フレーム特徴量抽出部２３２１を有し、映像コンテンツアップロード装置２３３０も、フレーム特徴量抽出部２３３１を有している。

［第７実施形態］
次に本発明の第７実施形態に係る映像処理システムについて、説明する。本実施形態に係る映像処理システムは、上記第２乃至第６実施形態と比べると、断片映像を比較しても映像コンテンツの判定を確定できない場合に、映像コンテンツ全体をダウンロードして判定結果を確実にする点で異なる。断片映像の比較による映像コンテンツの判定の構成及び動作は、第２実施形態と同様であるため、同じ構成及び動作については同じ符号を付してその詳しい説明を省略する。本実施形態によれば、断片映像による比較では合致するか否かが明瞭に確定できない場合においても、確実に判定結果を出力可能である。

《映像処理システムの構成》
図２４は、本実施形態に係る映像処理システム２４００の構成を示すブロック図である。図２４の映像処理システム２４００の映像処理装置２４１０は、映像コンテンツをダウンロードして比較する部分が付加されたが、断片映像の比較による部分は第２実施形態の図２と同様であるので、同じ機能構成部には同じ参照番号を付し、説明は省略する。

映像処理装置２４１０において、第１映像コンテンツ判定部２４１７は、図２の映像コンテンツ判定部２１７と同様の判定処理をするが、第１映像コンテンツ判定部２４１７では明確に合致すると判定されないが合致する可能性のある結果を、次の映像コンテンツダウンロード部２４１８に伝達する点が異なる。第２実施形態では、明確に合致すると判定されないが合致する可能性のある結果は、合致するか否かに切り分けるか、不明として出力するしかない。本実施形態では、第２の映像コンテンツ判定で、不明な部分を更に明確に判定する。

映像コンテンツダウンロード部２４１８は、断片映像の比較では明確な判定が出来ない映像コンテンツを、通信制御部２１１を介して映像コンテンツ配信サイト２２０からダウンロードする。映像コンテンツ比較部２４１９は、ダウンロードされた映像コンテンツと映像コンテンツＤＢ２１５に蓄積された映像コンテンツを順次に比較する。第２映像コンテンツ判定部２４２０は、映像コンテンツの比較結果から、映像コンテンツの全体あるいはその一部が合致するか否かを判定して、第１映像コンテンツ判定部２４１７の結果と共に出力する。

なお、第７実施形態において、第５及び第６実施形態のように、フレーム特徴量を使用して通信や比較を実施すれば、通信容量を大幅に削減でき、処理速度も高速となる。

《映像処理システムの動作手順》
図２５は、本実施形態に係る映像処理システム２４００の動作手順２５００を示すシーケンス図である。図２５の動作手順２５００において、断片映像の比較による合致の判定までは、図３の動作手順３００と同様であるので、同じ参照番号を付して説明は省略する。

断片映像の比較で合致せずに（Ｓ３１５の非合致）、断片映像が既に無い場合（Ｓ３１７のＮＯ）、ステップＳ２５１１において、判定対象の映像コンテンツのダウンロードを要求する。ステップＳ２５１３において、要求に応答して映像コンテンツ配信サイト２２０から映像コンテンツがダウンロードされる。ステップＳ２５１７においては、ダウンロードした映像コンテンツと演奏コンテンツＤＢに蓄積された映像コンテンツとが比較される。比較結果から合致が無ければステップＳ３２１に進んで、他の映像コンテンツがあるかを判断し、無ければ終了、有ればステップＳ３０９に戻って次の映像コンテンツの判定処理を繰り返す。一方、映像コンテンツの比較で合致すれば、断片映像の比較結果の合致と加えられて、ステップＳ３１９において、映像コンテンツの判定結果を出力する。

《映像処理装置の処理手順》
図２６は、本実施形態に係る映像処理装置２４１０の処理手順を示すフローチャートである。なお、映像処理装置２４１０の構成は、図２の映像処理装置とは異なるが、第２映像コンテンツ比較及び判定に係る構成が付加されるのみなので、図示はしない。なお、次の第８実施形態の映像処理装置２７１０の構成を図示した図２７を最小すれば、映像処理装置２４１０の構成は自明である。

図２６において、断片映像による比較・判定は図１０の処理手順と同様であり、同じステップには同じ参照番号を付し、説明は省略する。ステップＳ１０２１において、断片映像の比較において非合致で（Ｓ１０１９の非合致）、比較していない断片映像が無い場合（Ｓ１０２１のＮＯ）、ステップＳ２６０１に進んで、判定対象の映像コンテンツを持つ映像コンテンツ配信サイト２２０に対して映像コンテンツのダウンロードを要求する。ステップＳ２６０３において映像コンテンツのダウンロードを待って、ダウンロードがあればステップＳ２６０５に進む。ステップＳ２６０５において、ダウンロードした映像コンテンツと映像コンテンツＤＢに蓄積された映像コンテンツとを比較する。合致しなければステップＳ１０２５に進んで次に映像コンテンツの判定に進む、合致すればステップＳ２６０７において、映像コンテンツの判定処理を行なう。

なお、映像コンテンツの比較においては、映像コンテンツＤＢのすべての映像コンテンツと比較するのではなく、断片映像との比較における合致レベルに対応して、より合致している可能性が高い物から比較を行なう方法や、全く合致の可能性の無かったものは比較から削除するなどの、判定の高速化の工夫も考えられる。

［第８実施形態］
次に本発明の第８実施形態に係る映像処理システムについて、説明する。本実施形態に係る映像処理システムは、上記第７実施形態と比べると、判定結果が合致するか否かでなく違法性があるか否かの映像コンテンツ監視である点、及び比較がフレーム特徴量で行なわれている点で異なる。違法性とは、アップロードされた映像コンテンツに既存の映像コンテンツの全部あるいは一部が使用されているような著作権の問題と、あるいはその映像が公序良俗の観点から配信されるべきでない内容であるものとを含む。本実施形態においては、著作権の問題（既存のシーンのコピーを含む）として説明する。第８実施形態は、第７実施形態の判定を違法性判定に置き換えた、且つ第５実施形態のフレーム特徴量抽出部を設けたものであり、構成及び動作は第５実施形態と第７実施形態とを組み合わせたものと同様であるため、同じ構成及び動作については同じ符号を付してその詳しい説明を省略する。

本実施形態によれば、違法性判定の対象である映像コンテンツの収集をその断片映像のフレーム特徴量で行なうので、通信容量を削減でき高速な違法性判断が実現できる。

《映像処理システムの構成》
図２７は、本実施形態に係る映像処理システム２７００の構成を示すブロック図である。図２７の映像処理システム２７００の映像処理装置２７１０においては、第５実施形態の図１９の構成に、更に次の機能構成部が付加されている。

第１違法性判定部２７１７は、断片映像特徴量比較部１９１６の断片映像の比較結果から、既知の映像コンテンツに合致するシーンが判定対象の映像コンテンツに含まれている場合に、違法性ありと判断する。映像コンテンツダウンロード部２４１８は、第７実施形態と同様に第１違法性判定部２７１７で判定がどちらとも不明な場合に、更に映像コンテンツのダウンロードを行なう。フレーム特徴量抽出部２７１１は、ダウンロードされた映像コンテンツのフレーム特徴量を抽出する。映像コンテンツ特徴量比較部２７１９は、フレーム特徴量抽出部２７１１で抽出された映像コンテンツのフレーム特徴量と、映像コンテンツフレーム特徴量ＤＢ１９１５の映像コンテンツのフレーム特徴量とお比較する。第２違法性判定部２７２０は、映像コンテンツ特徴量比較部２７１９の比較結果から、映像コンテンツに合致したシーンが含まれていたならば、あるいは類似したシーンが多く見付かったならば、違法性ありとする。判定結果通知部２７１２は、第１違法性判定部２７１７または第２違法性判定部２７２０のいずれかで違法性が判定されれば、映像コンテンツ配信サイト２２０あるいは映像コンテンツアップロード装置２３０の操作者に対して、違法性のある映像コンテンツがアップロードされたことを通知して、注意を促す。

《映像処理システムの動作手順》
図２８は、本実施形態に係る映像処理システム２７００の動作手順２８００を示すシーケンス図である。図２８において、図３あるいは図２５と同じステップには同じ参照番号を付して、説明は省略する。

図２８においては、ステップＳ３１３において所定数の断片映像をダウンロードした後、ステップＳ２８０１において断片映像のフレーム特徴量の抽出を行なう。また、ステップＳ２５１３において、映像コンテンツをダウンロードした後、ステップＳ２８０２において映像コンテンツのフレーム特徴量を抽出する。そして、フレーム特徴量による断片映像の比較、あるいは映像コンテンツの比較で合致のレベルが所定条件を満たす場合には、ステップＳ２８１９において映像コンテンツの違法性を判定する。違法性の判定基準としては既存の基準が使用される。また、ステップＳ２８２３において、違法製の判定結果については、映像コンテンツ配信サイト、あるいはアップロード元である映像コンテンツアプロード装置に対して通知される。

《映像処理装置の構成》
図２９は、本実施形態に係る映像処理装置２７１０のハードウエア構成を示すブロック図である。図２９の映像処理装置２７１０について、図４の映像処理装置２１０との相違点について以下説明する。なお、図４と同様な構成には同じ参照番号を付して、説明を省略する。

ＲＡＭ２９４０において、ダウンロードした断片映像データから抽出したフレーム特徴量である断片映像フレーム特徴量２９４１が記憶される。また、断片映像による比較判定の結果の、断片映像合致有無／不明フラグ２９４２が記憶される。本実施形態では、かかる断片映像合致有無／不明フラグ２９４２が不明を示す場合に、映像コンテンツのダウンロードと比較判定が行なわれる。また、ダウンロードされた映像コンテンツデータ２９４３が記憶される。また、ダウンロードされた映像コンテンツデータから抽出された映像コンテンツフレーム特徴量２９４４が記憶される。映像コンテンツの比較における合致判断の映像コンテンツ合致判断用パラメータ２９４５が記憶される。また、映像コンテンツ舒合致があるか否かの映像コンテンツ合致有無フラグ２９４６が記憶される。また、断片映像合致有無と映像コンテンツ合致有無とにもとづいて、判定された違法性を示す、対象映像コンテンツ違法性判定結果リスト２９４７が記憶される（図３０参照）。

ストレージ２９５０には、映像コンテンツフレーム特徴量ＤＢ１９１５が格納される。また、映像コンテンツの違法性判断のためのアルゴリズムである映像コンテンツ違法製判断アルゴリズム２９５３が格納される。また、本実施形態の映像処理プログラム２９５４が格納される（図３１参照）。そして、映像処理プログラム２９５４に含まれる、ダウンロードされた断片映像及び映像コンテンツからフレーム特徴量を抽出するフレーム特徴量抽出モジュール２９５８が格納される、また、映像処理プログラム２９５４に含まれる、断片映像から違法性を判定する断片映像違法性判定モジュール２９５９が格納される。また、映像処理プログラム２９５４に含まれる、映像コンテンツをダウンロードする映像コテンツダウンロードモジュール２９６０が格納される。また、映像処理プログラム２９５４に含まれる、映像コンテンツから違法性を判定する映像コンテンツ違法性判定モジュール２９６１が格納される。なお、図２９には、本実施形態に必須なデータやプログラムのみが示されており、ＯＳなどの汎用のデータやプログラムは図示されていない。

（対象映像コンテンツ違法性判定結果リストの構成）
図３０は、本実施形態に係る対象映像コンテンツ違法性判定結果リスト２９４７の構成を示す図である。

図３０の対象映像コンテンツ違法性判定結果リスト２９４７においては、違法性判定対象の映像コンテンツＩＤ３００１に対応付けて、以下のデータが記憶されている。３００２は、映像コンテンツから抽出されたフレーム特徴量である。３００３は、映像コンテンツの比較による合致／非合致の結果である。３００４は、選択された断片映像のＳＮ（シリアル番号）だえる。３００５は、断片映像から抽出されたフレーム特徴量である。３００６は、断片映像のフレーム特徴量の比較結果による判定結果である。２００７は、類似の関連する映像コンテンツあるいはシーンである。３００８は、各断片映像の比較による合致／不明／非合致の結果である。３００９は、映像コンテンツの合致／非合致、断片映像の合致／不明／非合致の結果から判定された違法性の有無の結果である。

映像コンテンツＩＤが“１００１”の映像コンテンツでは、断片映像の比較で既知の映像コンテンツまたはシーンとの合致があるので、映像コンテンツのダウンロードと比較判定無しに、違法性有り、と判定されている。一方、映像コンテンツＩＤが“２０１０”の映像コンテンツでは、断片映像の比較では合致か否か不明であるので、映像コンテンツのダウンロードと比較判定が行なわれ、映像コンテンツの比較で合致しなかったので、違法性無し、と判定している。

《映像処理装置の処理手順》
図３１は、本８実施形態に係る映像処理装置２７１０の処理手順を示すフローチャートである。このフローチャートは、図２７のＣＰＵ４１０がＲＡＭ２９４０を使用しながら実行して、図２７の各機能構成部を実現する。なお、図３１において、図２６と同じステップについては同じ参照番号を付し、説明は省略する。

まず、ステップＳ３１０１においては、ダウンロードされた断片映像からフレーム特徴量を抽出する。また、ステップＳ３１０３においては、ダウンロードされた映像コンテンツからフレーム特徴量を抽出する。

そして、ステップＳ１０１９における断片映像のフレーム特徴量と、映像コンテンツフレーム特徴量ＤＢのフレーム特徴量との比較によって、断片映像と映像コンテンツとが合致した場合に、ステップＳ３１２３において、断片映像による違法性の判定処理を行なう。また、ステップＳ２６０５におけるダウンロードした映像コンテンツのフレーム特徴量と、映像コンテンツフレーム特徴量ＤＢのフレーム特徴量との比較によって、ダウンロードした映像コンテンツと映像コンテンツフレーム特徴量ＤＢの映像コンテンツとが合致した場合に、ステップＳ３１０７において、映像コンテンツによる違法性の判定処理を行なう。

最後に、ステップＳ３１２７において、違法性のあった映像コンテンツについて、映像コンテンツ配信サイトまたは映像コンテンツアップロード装置にその旨を通知して、注意を促す。

なお、第８実施形態において、各映像コンテンツ配信サイトまたは映像コンテンツアプロード装置がフレーム特徴量抽出部を有する構成とすれば、ネットワークの通信容量の削減となる。

［他の実施形態］
以上、実施形態を参照して本発明を説明したが、本発明は上記実施形態に限定されものではない。本発明の構成や詳細には、本発明のスコープ内で当業者が理解し得る様々な変更をすることができる。また、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステム又は装置も、本発明の範疇に含まれる。

また、本発明は、複数の機器から構成されるシステムに適用されても良いし、単体の装置に適用されても良い。さらに、本発明は、実施形態の機能を実現する制御プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされる制御プログラム、あるいはその制御プログラムを格納した媒体、その制御プログラムをダウンロードさせるＷＷＷ(World Wide Web)サーバも、本発明の範疇に含まれる。

この出願は、２０１１年３月２５日に出願された日本国特許出願 特願２０１１−０６７６４１号を基礎とする優先権を主張し、その開示の全てをここに取り込む。

Claims (28)

1. 判定対象の映像コンテンツ中から、映像シーンを考慮せずに選択された断片映像であって、前記映像コンテンツ内の一連の複数のフレームを含む前記断片映像のデータを、ネットワークを介してダウンロードする断片映像ダウンロード手段と、
   前記ダウンロードした断片映像のデータに基づいて、前記映像コンテンツの内容を判定する第１の映像コンテンツ判定手段と、
   を備え、
   前記断片映像ダウンロード手段は、ダウンロードする断片映像の数と各断片映像の時間長とを前記第１の映像コンテンツ判定手段による判定速度と判定精度とを考慮して設定する断片映像設定手段を有し、
   前記第１の映像コンテンツ判定手段は、前記断片映像の各フレームから抽出したフレーム特徴量を含み、前記一連の複数のフレームに対応するフレーム特徴量列と、予め登録された映像コンテンツ全体のフレーム特徴量列との比較に基づいて、前記断片映像を含んだ映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定することを特徴とする映像処理システム。
2. 前記第１の映像コンテンツ判定手段が、前記断片映像を含んだ映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致すると判定した場合に、前記断片映像を含んだ映像コンテンツが違法性を有すると判定する第１の違法性判定手段をさらに備えることを特徴とする請求項１に記載の映像処理システム。
3. 前記断片映像ダウンロード手段が断片映像のデータをダウンロードする判定対象の映像コンテンツを、映像コンテンツ配信サイトにアップロードされた映像コンテンツから選択する映像コンテンツ選択手段をさらに備えることを特徴とする請求項１または２に記載の映像処理システム。
4. 前記映像コンテンツ選択手段は、映像コンテンツ配信サイトにアップロードされた映像コンテンツをクローリングする映像コンテンツクローラを含むことを特徴とする請求項３に記載の映像処理システム。
5. 前記第１の映像コンテンツ判定手段の判定結果から前記映像コンテンツの内容のさらに正確な判定が必要な場合に、前記映像コンテンツ全体のデータをダウンロードするコンテンツダウンロード手段と、
   前記ダウンロードされた映像コンテンツ全体のデータから前記映像コンテンツの内容を判定する第２の映像コンテンツ判定手段と、
   をさらに備え、
   前記第２の映像コンテンツ判定手段は、前記映像コンテンツ全体の各フレームから抽出したフレーム特徴量を含み、前記映像コンテンツ全体に対応するフレーム特徴量列と、予め登録された映像コンテンツのフレーム特徴量列との比較に基づいて、前記映像コンテンツ全体と、前記予め登録された映像コンテンツ又は前記予め登録された映像コンテンツの映像シーンとの合致のレベルを判定することを特徴とする請求項１乃至４のいずれか１項に記載の映像処理システム。
6. 前記第２の映像コンテンツ判定手段が、前記映像コンテンツ全体と、予め登録された映像コンテンツ又は前記予め登録された映像コンテンツの映像シーンとの合致のレベルが所定条件を満たすと判定した場合に、前記映像コンテンツが違法性を有すると判定する第２の違法性判定手段をさらに備えることを特徴とする請求項５に記載の映像処理システム。
7. 映像コンテンツを配信する映像コンテンツ配信サイトが前記フレーム特徴量を抽出するフレーム特徴量抽出手段を有し、ネットワークを介して前記フレーム特徴量列がダウンロードされることを特徴とする請求項１乃至６のいずれか１項に記載の映像処理システム。
8. 前記フレーム特徴量は、各フレームに異なるサイズで設定された複数の領域対の各領域対に対して算出された領域特徴量の差分を領域対の数だけ組み合せたデータであることを特徴とする請求項１乃至７のいずれか１項に記載の映像処理システム。
9. 前記領域特徴量は、輝度で表わされることを特徴とする請求項８に記載の映像処理システム。
10. 複数の映像コンテンツの内容を判定する場合に、前記断片映像ダウンロード手段と前記第１の映像コンテンツ判定手段とによる処理手順を制御する制御手段をさらに備え、
    前記制御手段は、所定数の断片映像についての前記断片映像ダウンロード手段によるダウンロードと前記第１の映像コンテンツ判定手段による判定とを、各映像コンテンツに対して繰り返させ、前記第１の映像コンテンツ判定手段による判定が確定した映像コンテンツに対しては以降のダウンロードと判定とを停止するよう制御することを特徴とする請求項１乃至９のいずれか１項に記載の映像処理システム。
11. 複数の映像コンテンツの内容を判定する場合に、前記断片映像ダウンロード手段と前記第１の映像コンテンツ判定手段とによる処理手順を制御する制御手段をさらに備え、
    前記制御手段は、前記断片映像ダウンロード手段によるダウンロードと前記第１の映像コンテンツ判定手段による判定とを、各映像コンテンツの全ての選択された断片映像に対して順次に行ない、前記第１の映像コンテンツ判定手段による判定が確定した場合に以降のダウンロードと判定とを停止して次の映像コンテンツを処理するよう制御することを特徴とする請求項１乃至９のいずれか１項に記載の映像処理システム。
12. 前記第１の映像コンテンツ判定手段又は前記第２の映像コンテンツ判定手段による判定結果を、前記映像コンテンツを有する映像コンテンツ配信サイト又は前記映像コンテンツを前記映像コンテンツ配信サイトにアップロードしたアップロード元に通知する判定結果通知手段をさらに備えることを特徴とする請求項５に記載の映像処理システム。
13. 前記第１の違法性判定手段による判定結果を、前記映像コンテンツを有する映像コンテンツ配信サイト又は前記映像コンテンツを前記映像コンテンツ配信サイトにアップロードしたアップロード元に通知する判定結果通知手段をさらに備えることを特徴とする請求項２に記載の映像処理システム。
14. 前記第２の違法性判定手段による判定結果を、前記映像コンテンツを有する映像コンテンツ配信サイト又は前記映像コンテンツを前記映像コンテンツ配信サイトにアップロードしたアップロード元に通知する判定結果通知手段をさらに備えることを特徴とする請求項６に記載の映像処理システム。
15. 前記断片映像ダウンロード手段は、前記第１の映像コンテンツ判定手段の判定対象である映像コンテンツからダウンロードすべき断片映像を選択するためのアルゴリズムを有し、前記アルゴリズムにしたがってダウンロードすべき断片映像を選択することを特徴とする請求項１乃至１４のいずれか１項に記載の映像処理システム。
16. 前記断片映像ダウンロード手段は、前記第１の映像コンテンツ判定手段の判定対象である映像コンテンツの種別に対応付けて複数の異なるアルゴリズムを記憶するアルゴリズム記憶手段を有し、
    前記第１の映像コンテンツ判定手段の判定対象である映像コンテンツの種別に対応するアルゴリズムを使用して断片映像を選択することを特徴とする請求項１５に記載の映像処理システム。
17. 前記断片映像ダウンロード手段は、複数の異なるアルゴリズムを記憶するアルゴリズム記憶手段を有し、
    前記第１の映像コンテンツ判定手段の判定結果にしたがって、前記アルゴリズム記憶手段に記憶された他の異なるアルゴリズムを使用して断片映像を選択することを特徴とする請求項１５に記載の映像処理システム。
18. 前記アルゴリズムは、映像コンテンツを所定数に分割し、分割した部分映像コンテンツから断片映像を選択するアルゴリズムを含むことを特徴とする請求項１５乃至１７のいずれか１項に記載の映像処理システム。
19. 前記アルゴリズムは、映像コンテンツを所定時間間隔で分割して、分割した部分映像コンテンツから断片映像を選択するアルゴリズムを含むことを特徴とする請求項１５乃至１７のいずれか１項に記載の映像処理システム。
20. 前記アルゴリズムでは、前記断片映像をダウンロードすべき部分映像コンテンツを前記分割した部分映像コンテンツの中からランダムに選択することを特徴とする請求項１８または１９に記載の映像処理システム。
21. 前記アルゴリズムは、前記分割した部分映像コンテンツの開始又は終了からオフセットした位置の断片映像を選択するアルゴリズムを含むことを特徴とする請求項１８乃至２０のいずれか１項に記載の映像処理システム。
22. 前記アルゴリズムは、映像コンテンツに関連する情報に基づいて断片映像を選択するアルゴリズムを含むことを特徴とする請求項１５乃至１７のいずれか１項に記載の映像処理システム。
23. 前記アルゴリズムは、映像コンテンツの開始及び終了からの所定時間内からは断片映像を選択しないアルゴリズムを含むことを特徴とする請求項１５乃至２２のいずれか１項に記載の映像処理システム。
24. 前記アルゴリズムは、映像コンテンツの種別に対応する所定時間内には断片映像を選択しないアルゴリズムを含むことを特徴とする請求項１５乃至２３のいずれか１項に記載の映像処理システム。
25. 映像コンテンツ選択手段が、映像コンテンツ配信サイトにアップロードされた映像コンテンツから、映像コンテンツの内容を判定する対象の映像コンテンツを選択する映像コンテンツ選択ステップと、
    断片映像ダウンロード手段が、前記選択した映像コンテンツ中から、映像シーンを考慮せずに選択された断片映像であって、前記映像コンテンツ内の一連の複数のフレームを含む前記断片映像のデータを、ネットワークを介してダウンロードする断片映像ダウンロードステップと、
    映像コンテンツ判定手段が、前記ダウンロードした断片映像の各フレームから抽出されたフレーム特徴量と予め登録された映像コンテンツのフレーム特徴量との比較に基づいて、前記断片映像を含んだ一連の複数のフレームからなる映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定する映像コンテンツ判定ステップと、
    を含み、
    前記断片映像ダウンロードステップは、ダウンロードする断片映像の数と各断片映像の時間長とを前記第１の映像コンテンツ判定ステップにおける判定速度と判定精度とを考慮して設定する断片映像設定ステップを有し、
    前記第１の映像コンテンツ判定ステップにおいては、前記断片映像の各フレームから抽出したフレーム特徴量を含み、前記一連の複数のフレームに対応するフレーム特徴量列と、予め登録された映像コンテンツ全体のフレーム特徴量列との比較に基づいて、前記断片映像を含んだ映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定することを特徴とする映像コンテンツ監視方法。
26. 映像コンテンツ配信サイトにアップロードされた映像コンテンツから、映像コンテンツの内容を判定すべき映像コンテンツを選択する映像コンテンツ選択手段と、
    前記選択した映像コンテンツ中から、映像シーンを考慮せずに選択された断片映像であって、前記映像コンテンツ内の一連の複数のフレームを含む前記断片映像のデータを、ネットワークを介してダウンロードする断片映像ダウンロード手段と、
    前記ダウンロードした断片映像のデータに基づいて、前記映像コンテンツの内容を判定する映像コンテンツ判定手段と、
    を備え、
    前記断片映像ダウンロード手段は、ダウンロードする断片映像の数と各断片映像の時間長とを前記第１の映像コンテンツ判定手段による判定速度と判定精度とを考慮して設定する断片映像設定手段を有し、
    前記映像コンテンツ判定手段は、前記断片映像の各フレームから抽出したフレーム特徴量を含み、前記一連の複数のフレームに対応するフレーム特徴量列と、予め登録された映像コンテンツ全体のフレーム特徴量列との比較に基づいて、前記断片映像を含んだ映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定することを特徴とする映像処理装置。
27. 映像コンテンツ選択手段が、映像コンテンツ配信サイトにアップロードされた映像コンテンツから、映像コンテンツの内容を判定すべき映像コンテンツを選択する映像コンテンツ選択ステップと、
    断片映像ダウンロード手段が、前記選択した映像コンテンツ中から、映像シーンを考慮せずに選択された断片映像であって、前記映像コンテンツ内の一連の複数のフレームを含む前記断片映像のデータを、ネットワークを介してダウンロードする断片映像ダウンロードステップと、
    映像コンテンツ判定手段が、前記ダウンロードした断片映像のデータに基づいて、前記映像コンテンツの内容を判定する映像コンテンツ判定ステップと、
    を含み、
    前記断片映像ダウンロードステップは、ダウンロードする断片映像の数と各断片映像の時間長とを前記第１の映像コンテンツ判定ステップにおける判定速度と判定精度とを考慮して設定する断片映像設定ステップを有し、
    前記映像コンテンツ判定ステップにおいては、前記断片映像の各フレームから抽出したフレーム特徴量を含み、前記一連の複数のフレームに対応するフレーム特徴量列と、予め登録された映像コンテンツ全体のフレーム特徴量列との比較に基づいて、前記断片映像を含んだ映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定することを特徴とする映像処理装置の制御方法。
28. 映像コンテンツ配信サイトにアップロードされた映像コンテンツから、映像コンテンツの内容を判定すべき映像コンテンツを選択する映像コンテンツ選択ステップと、
    前記選択した映像コンテンツ中から、映像シーンを考慮せずに選択された断片映像であって、前記映像コンテンツ内の一連の複数のフレームを含む前記断片映像のデータを、ネットワークを介してダウンロードする断片映像ダウンロードステップと、
    前記ダウンロードした断片映像のデータに基づいて、前記映像コンテンツの内容を判定する映像コンテンツ判定ステップと、
    をコンピュータに実行させる映像処理装置の制御プログラムであって、
    前記断片映像ダウンロードステップは、ダウンロードする断片映像の数と各断片映像の時間長とを前記第１の映像コンテンツ判定ステップにおける判定速度と判定精度とを考慮して設定する断片映像設定ステップを有し、
    前記映像コンテンツ判定ステップにおいては、前記断片映像の各フレームから抽出したフレーム特徴量を含み、前記一連の複数のフレームに対応するフレーム特徴量列と、予め登録された映像コンテンツ全体のフレーム特徴量列との比較に基づいて、前記断片映像を含んだ映像シーン又は映像コンテンツと、前記予め登録された映像コンテンツの映像シーン又は該映像コンテンツとが合致するか否かを判定する映像処理装置の制御プログラム。

Images