JP2005229509A - コンテンツ・メタデータ送受信システム、コンテンツ・メタデータ同期方法、その方法をコンピュータに実行させるプログラム、並びにコンテンツおよびメタデータの対応付け可能な受信端末 - Google Patents

Abstract

【課題】別々に配信されるコンテンツとメタデータとを受信してコンテンツとメタデータとを自動的に対応付けるコンテンツ・メタデータ送受信システムを提供する。
【解決手段】コンテンツ配信サーバ１がネットワーク２を介して配信する映像・音声を含むコンテンツをメタデータ配信サーバ１０が受信する。メタデータ生成部１１は、コンテンツに付加された時間情報を付加したメタデータを生成して、受信端末２０に送信する。受信端末２０は、コンテンツ配信サーバ１から配信されたコンテンツの時間情報を取得し、メタデータ配信サーバ１０から配信されたメタデータに付加された時間情報と比較して、コンテンツおよびメタデータの対応付けを行う。
【選択図】 図１

Description

本発明は、コンテンツおよびメタデータを送受信するコンテンツ・メタデータ送受信システム、コンテンツ・メタデータ同期方法、その方法をコンピュータに実行させるプログラム、並びにコンテンツおよびメタデータの対応付け可能な受信端末に関し、特に別々に送信されるコンテンツおよびメタデータを受信して対応付けることができるコンテンツ・メタデータ送受信システム、コンテンツ・メタデータ同期方法、その方法をコンピュータに実行させるプログラム、並びにコンテンツおよびメタデータの対応付け可能な受信端末に関するものである。

近年、映像・音声を含むマルチメディアコンテンツを受信して視聴する際、データーファイルのプロパティに含まれる情報であるメタデータ（ｍｅｔａｄａｔａ）を利用してコンテンツを加工する技術が普及してきている。ＢＳ衛星を使ったＢＳデジタル放送、および地上波デジタル放送においては、メタデータ付きコンテンツを配信し、受信端末において受信するメタデータを利用してコンテンツをより多様に視聴する視聴方法が提案されている。

例えば、映像と、該映像の特徴的な情報および時間情報とを同期させて、検索インデックスを生成する発明がなされている（特許文献１）。同発明によれば、映像情報と、映像の時間情報との間で同期を取り、映像情報の検索インデックスを生成できるとしている。

特開２００３−２７４３５３号公報

しかしながら、特許文献１の発明は、映像および映像の時間情報との間で同期を取って、検索インデックスを生成できたとしても、時間情報が付加されていないインデックス情報を受信して、該インデックス情報に対応するコンテンツとの同期を取ることはできなかった。

放送のデジタル化に伴って、配信されるコンテンツにメタデータを付加することが行われているが、コンテンツにメタデータを付加する場合、コンテンツ制作者とメタデータ制作者が同一であり、かつ配信前にあらかじめメタデータを準備できる録画系のコンテンツであるならば、メタデータにコンテンツの時間情報などを正確に記述し、コンテンツとメタデータとを関連付けて配信することが可能である。しかしながら、一般に生放送でライブに流されるコンテンツにおいては、あらかじめメタデータを準備できない場合があり、また、コンテンツ制作者とメタデータ制作者が異なっている場合、メタデータにコンテンツの時間情報を正確に記述できない場合が多い。特にリアルタイムに、メタデータを配信するサービスにおいては、コンテンツとメタデータとを正確に関連付けて時間情報を抽出しようとすると、時間がかかってしまい、メタデータをリアルタイムに生成しにくいという問題があった。

また、コンテンツに時刻情報が付加されていない場合、メタデータを生成して配信する側は、コンテンツを説明するメタデータに時間情報を付加することは困難である。また、受信端末において、コンテンツの視聴を途中から開始する際に、コンテンツに時間情報が付加されていない場合は、メタデータとコンテンツとの時間を合わせることはより困難になる。

本発明は上記の問題に鑑みてなされ、その目的は、別々に配信されるコンテンツとメタデータとを受信してコンテンツとメタデータとを自動的に対応付けるコンテンツ・メタデータ送受信システム、コンテンツ・メタデータ同期方法、その方法をコンピュータに実行させるプログラム、並びにコンテンツおよびメタデータの対応付け可能な受信端末を提供することである。

上述した課題を解決し、目的を達成するために、請求項１にかかる発明は、コンテンツ・メタデータ送受信システムであって、映像および音声を含むコンテンツを配信するコンテンツ配信サーバと、前記コンテンツ配信サーバが配信する前記コンテンツを受信して前記コンテンツに関するメタデータを生成して配信するメタデータ生成手段を有するメタデータ配信サーバと、前記コンテンツ配信サーバが配信する前記コンテンツおよび前記メタデータ配信サーバが配信する前記メタデータを受信し、前記コンテンツと前記メタデータとを対応付ける同期手段を有する受信端末と、を備えたことを特徴とする。

この請求項１にかかる発明によれば、コンテンツ配信サーバが配信する映像および音声を含むコンテンツを、メタデータ配信サーバのメタデータ生成手段が受信してコンテンツに関するメタデータを生成して配信し、受信端末の同期手段が、コンテンツ配信サーバが配信するコンテンツおよびメタデータ配信サーバが配信するメタデータを受信し、コンテンツとメタデータとを対応付ける。この構成によって受信端末において、コンテンツ配信サーバから配信されるコンテンツと、メタデータ配信サーバから配信されるメタデータとを別々に受信して対応付けることができる。

また、請求項２にかかる発明は、請求項１に記載のコンテンツ・メタデータ送受信システムにおいて、前記コンテンツ配信サーバは、前記コンテンツに時間情報を付加して配信するものであり、前記メタデータ生成手段は、前記コンテンツに付加された時間情報に基づいて前記メタデータに時間情報を付加して送信するものであり、前記同期手段は、前記メタデータ生成手段によって前記時間情報が付加されたメタデータを受信し、受信した前記メタデータに付加された時間情報と前記コンテンツに付加された時間情報とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項２にかかる発明によれば、コンテンツ配信サーバは、コンテンツに時間情報を付加して配信し、メタデータ生成手段は、コンテンツに付加された時間情報に基づいてメタデータに時間情報を付加して送信し、同期手段は、メタデータ生成手段から送信された時間情報が付加されたメタデータを受信して受信したメタデータに付加された時間情報とコンテンツに付加された時間情報とに基づいて、コンテンツとメタデータとを対応付ける。この構成によって受信端末において、コンテンツ配信サーバで時間情報が付加されたコンテンツが配信された場合、配信されたコンテンツおよびメタデータ配信サーバから配信されるメタデータを別々に受信しても、付加された時間情報に基づいて正確に対応付けることができる。

また、請求項３にかかる発明は、請求項１または２に記載のコンテンツ・メタデータ送受信システムにおいて、前記メタデータ配信サーバは、受信する前記コンテンツの特徴を表す特徴量を解析する第１の解析手段を、さらに備え、前記メタデータ生成手段は、前記第１の解析手段が解析した前記コンテンツの特徴量を前記メタデータに対応づけて配信し、前記受信端末は、前記コンテンツの特徴を表す特徴量を解析する第２の解析手段を、さらに備え、前記同期手段は、前記メタデータ生成手段が配信する前記第１の解析手段による特徴量の情報を受信し、受信した前記第１の解析手段による特徴量の情報と第２の解析手段による特徴量とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項３にかかる発明によれば、メタデータ配信サーバの、メタデータ生成手段は、第１の解析手段が解析したコンテンツの特徴量をメタデータに対応づけて配信し、受信端末は、同期手段が、メタデータ生成手段が配信する第１の解析手段による特徴量の情報と第２の解析手段による特徴量とに基づいて、コンテンツとメタデータとを対応付ける。この構成によって、例え時間情報がコンテンツに付加されていなかったとしても、情報端末において、コンテンツの特徴量と、メタデータに対応付けられて受信したコンテンツの特徴量とを比較することによって、コンテンツおよびメタデータを対応付けることができる。

また、請求項４にかかる発明は、請求項３に記載のコンテンツ・メタデータ送受信システムにおいて、前記メタデータ生成手段は、前記第１の解析手段によって解析された前記特徴量の情報を前記メタデータに付加して配信するものであり、前記同期手段は、前記メタデータ生成手段が送信する前記メタデータに付加された前記特徴量の情報を受信し、受信した前記メタデータに付加された特徴量の情報と前記第２の解析手段による特徴量とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項４にかかる発明によれば、メタデータ生成手段は、第１の解析手段によって解析された特徴量の情報をメタデータに付加して配信し、同期手段は、受信したメタデータに付加された特徴量の情報と第２の解析手段による特徴量とに基づいて、コンテンツとメタデータとを比較して対応付けることができる。この構成によって、例え時間情報がコンテンツに付加されていなかったとしても、情報端末において、コンテンツの特徴量と、メタデータに付加されて受信したコンテンツの特徴量とを比較することによって、コンテンツおよびメタデータを対応付けることができる。

また、請求項５にかかる発明は、請求項３または４に記載のコンテンツ・メタデータ送受信システムにおいて、前記メタデータ配信サーバの前記第１の解析手段は、前記第１の解析手段による前記特徴量を所定のしきい値と比較し前記特徴量が前記しきい値以上であると判定した場合、前記特徴量に対応する前記コンテンツの部分をメタデータの基点に設定し、前記メタデータ生成手段は、前記第１の解析手段によって設定されたメタデータの基点から前後のオフセット値によって前記メタデータの時刻情報を記述して送信し、前記情報端末の前記第２の解析手段は、前記第２の解析手段による前記特徴量を所定のしきい値と比較して前記特徴量が前記しきい値以上であると判定した場合、前記特徴量に対応する前記コンテンツの部分をコンテンツの基点に設定し、前記同期手段は、受信する前記第１の解析手段による前記メタデータの基点と前記第２の解析手段による前記コンテンツの基点とに基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項５にかかる発明によれば、メタデータ配信サーバの第１の解析手段は、特徴量を所定のしきい値と比較してしきい値以上であると判定した場合、特徴量に対応するコンテンツの部分をメタデータの基点に設定し、メタデータ生成手段は、第１の解析手段によって設定されたメタデータの基点から前後のオフセット値によってメタデータの時刻情報を記述して送信し、第２の解析手段はコンテンツの特徴量を所定のしきい値と比較して特徴量がしきい値以上であると判定した場合、特徴量に対応するコンテンツの部分をコンテンツの基点に設定し、同期手段は、受信する第１の解析手段によるメタデータの基点と第２の解析手段によるコンテンツの基点とに基づいて、前後のオフセット値によりコンテンツとメタデータとを対応付ける。この構成によって、メタデータ配信サーバによって設定された特徴量による基点と、受信端末によって設定された特徴量による基点とを比較することによって、受信端末において時間情報がなかった場合でもコンテンツおよびメタデータの対応付けを行うことができる。

また、請求項６にかかる発明は、請求項５に記載のコンテンツ・メタデータ送受信システムにおいて、前記第１の解析手段は、解析する前記特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された前記１つ以上の特徴量によって前記メタデータの基点を設定して配信し、前記第２の解析手段は、解析する前記特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された前記１つ以上の特徴量によって前記コンテンツの基点を設定し、前記同期手段は、受信する前記第１の解析手段が設定した前記メタデータの基点と前記第２の解析手段が設定した前記コンテンツの基点とに基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項６にかかる発明によれば、第１の解析手段は、解析する特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された１つ以上の特徴量によってメタデータの基点を設定して配信し、第２の解析手段は、解析する特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された１つ以上の特徴量によってコンテンツの基点を設定し、同期手段は、第１の解析手段が設定したメタデータの基点と第２の解析手段が設定したコンテンツの基点とに基づいて、前後のオフセット値によりコンテンツとメタデータとを対応付ける。この構成によって、コンテンツにおける色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された１つ以上の特徴量によって設定される基点を比較することによって、受信端末において時間情報がなかった場合でもコンテンツおよびメタデータの対応付けを行うことができる。

また、請求項７にかかる発明は、請求項５または６に記載のコンテンツ・メタデータ送受信システムにおいて、前記第１の解析手段は、前記メタデータの基点を複数個設定し、前記第２の解析手段は、前記コンテンツの基点を複数個設定し、前記同期手段は、設定された前記メタデータの複数個の基点および前記コンテンツの複数個の基点に基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項７にかかる発明によれば、同期手段は、設定されたメタデータの複数個の基点およびコンテンツの複数個の基点に基づいて、前後のオフセット値によりコンテンツとメタデータとを対応付ける。この構成によって、メタデータ配信サーバによって設定された特徴量による複数の基点と、受信端末によって設定された特徴量による複数の基点とを比較することによって、受信端末において時間情報がなかった場合でもコンテンツおよびメタデータの対応付けをより正確に行うことができる。

また、請求項８にかかる発明は、請求項５または７に記載のコンテンツ・メタデータ送受信システムにおいて、前記第１の解析手段は、前記コンテンツのシーンの切り替わる区切りを特徴量として前記メタデータの基点に設定し、前記第２の解析手段は、前記コンテンツのシーンの切り替わる区切りを特徴量として前記コンテンツの基点に設定するものであることを特徴とする。

この請求項８にかかる発明によれば、コンテンツのシーンの切り替わる区切りを特徴量としてメタデータの基点に設定する。この構成によって、正確な基点を設定できるので受信端末によって設定された特徴量による基点を比較することによって、受信端末は時間情報がなかった場合でもコンテンツおよびメタデータの対応付けをより正確に行うことができる。

また、請求項９にかかる発明は、請求項５〜８のいずれか１つに記載のコンテンツ・メタデータ送受信システムにおいて、前記メタデータ生成手段は、前記メタデータの時刻情報を、前記メタデータの直前の基点までの過去に遡るオフセットおよび直後の基点へのオフセット値情報として、前記メタデータに付加して配信し、前記情報端末の前記同期手段は、前記第２の解析手段によって設定される基点と前記メタデータに付加された前記オフセット値情報により特定される時刻情報とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項９にかかる発明によれば、メタデータの時刻情報を、メタデータの直前の基点までの過去に遡るオフセットおよび直後の基点へのオフセット値情報として、メタデータに付加して配信するので、情報端末付加されたオフセット値情報によりコンテンツとメタデータとを対応付ける。この構成によって、メタデータの前後の基点によってメタデータを特定することによって、過去に遡ってメタデータの対応付けをすることができるので、受信端末において、受信するメタデータを無駄にすることを避けながらコンテンツおよびメタデータの対応付けを行うことができる。

また、請求項１０にかかる発明は、請求項５〜９のいずれか１つに記載のコンテンツ・メタデータ送受信システムにおいて、前記第１の解析手段は、前記メタデータの基点を所定の時間で周期的に設定し、前記第２の解析手段は、前記コンテンツの基点を所定の時間で周期的に設定し、前記同期手段は、前記第１の解析手段が設定した前記メタデータの周期的な基点と前記第２の解析手段が設定した前記コンテンツの周期的な基点とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項１０にかかる発明によれば、メタデータの基点は所定の時間で周期的に設定され、コンテンツの基点は所定の時間で周期的に設定されるので、受信端末は、メタデータの周期的な基点とコンテンツの周期的な基点とに基づいて、コンテンツとメタデータとを対応付ける。この構成によって、受信端末がコンテンツを途中から受信開始した場合であっても、周期的な基点を受信することによって基点を比較することができるので、受信端末においては、時間的な無駄を少なくして効率よくコンテンツおよびメタデータの対応付けを行うことができる。

また、請求項１１にかかる発明は、コンテンツ・メタデータ同期方法であって、映像および音声を含むコンテンツを配信するコンテンツ配信工程と、前記コンテンツ配信工程において配信された前記コンテンツに関するメタデータを生成して配信するメタデータ生成工程と、前記コンテンツ配信工程において配信された前記コンテンツと前記メタデータ生成工程において配信されたメタデータとを受信し、受信した前記コンテンツと前記メタデータとを対応付ける同期工程と、を含むことを特徴とする。

この請求項１１にかかる発明によれば、コンテンツ配信工程において映像および音声を含むコンテンツを配信し、メタデータ配信工程においてコンテンツに関するメタデータを生成して配信し、同期工程において、コンテンツ配信工程で配信されたコンテンツとメタデータ生成工程で配信されたメタデータとを受信して、コンテンツとメタデータとを対応付ける。この構成によって受信端末は、配信されるコンテンツと、配信されるメタデータとを別々に受信して対応付けることができる。

また、請求項１２にかかる発明は、請求項１１に記載のコンテンツ・メタデータ同期方法において、前記コンテンツ配信工程は、前記コンテンツに時間情報を付加して配信するものであり、前記メタデータ生成工程は、前記コンテンツに付加された時間情報に基づいて前記メタデータに時間情報を付加して送信するものであり、前記同期工程は、前記メタデータ生成工程において前記メタデータに付加された前記時間情報と前記コンテンツ配信工程において配信されるコンテンツに付加された前記時間情報とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項１２にかかる発明によれば、コンテンツ配信工程は、コンテンツに時間情報を付加して配信し、メタデータ生成工程は、コンテンツに付加された時間情報に基づいてメタデータに時間情報を付加して送信し、同期工程は、メタデータに付加された時間情報とコンテンツに付加された時間情報とに基づいて、コンテンツとメタデータとを対応付ける。この構成によって、時間情報が付加されたコンテンツが配信された場合、配信されたコンテンツおよび配信されるメタデータを別々に受信しても、付加された時間情報に基づいて正確に対応付けることができる。

また、請求項１３にかかる発明は、請求項１１または１２に記載のコンテンツ・メタデータ同期方法において、受信する前記コンテンツの特徴を表す特徴量を解析する第１の解析工程を、さらに含み、前記メタデータ生成工程は、前記第１の解析工程において解析された前記コンテンツの特徴量を前記メタデータに対応付けて配信し、受信する前記コンテンツの特徴を表す特徴量を解析する第２の解析工程を、さらに含み、前記同期工程は、前記メタデータ生成工程において配信される前記メタデータに対応付けられた前記第１の解析工程による前記コンテンツの特徴量の情報を受信し、受信した前記第１の解析工程による特徴量の情報と前記第２の解析工程による特徴量とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項１３にかかる発明によれば、コンテンツの特徴を表す特徴量を解析する第１の解析工程を、さらに含み、メタデータ生成工程は、第１の解析工程によるコンテンツの特徴量をメタデータに対応付けて配信し、コンテンツの特徴を表す特徴量を解析する第２の解析工程を、さらに含み、同期工程は、メタデータに対応付けられた第１の解析工程によるコンテンツの特徴量の情報を受信して第１の解析工程による特徴量の情報と、第２の解析工程による特徴量とに基づいて、コンテンツとメタデータとを対応付ける。この構成によって、例え時間情報がコンテンツに付加されていなかったとしても、コンテンツの特徴量と、メタデータに対応付けられて受信したコンテンツの特徴量とを比較することによって、コンテンツおよびメタデータを対応付けることができる。

また、請求項１４にかかる発明は、請求項１３に記載のコンテンツ・メタデータ同期方法において、前記メタデータ生成工程は、前記第１の解析工程において解析された前記特徴量の情報を前記メタデータに付加して配信するものであり、前記同期工程は、前記メタデータ生成工程において送信される前記メタデータに付加された前記第１の解析工程による前記特徴量の情報を受信し、受信した前記メタデータに付加された特徴量の情報と前記第２の解析工程において解析された特徴量とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項１４にかかる発明によれば、メタデータ生成工程は、第１の解析工程による特徴量の情報をメタデータに付加して配信し、同期工程は、メタデータに付加された第１の解析工程による特徴量の情報を受信して付加された特徴量の情報と、第２の解析工程による特徴量とに基づいて、コンテンツとメタデータとを対応付ける。この構成によって、例え時間情報がコンテンツに付加されていなかったとしても、コンテンツの特徴量と、メタデータに付加されて受信したコンテンツの特徴量とを比較することによって、コンテンツおよびメタデータを対応付けることができる。

また、請求項１５にかかる発明は、請求項１３または１４に記載のコンテンツ・メタデータ同期方法において、前記第１の解析工程は、前記第１の解析工程による前記特徴量を所定のしきい値と比較し前記特徴量が前記しきい値以上であると判定した場合、前記特徴量に対応する前記コンテンツの部分をメタデータの基点とし、前記メタデータ生成工程は、前記第１の解析工程において設定されたメタデータの基点から前後のオフセット値で前記メタデータの時刻情報を記述して送信するものであり、前記第２の解析工程は、前記第２の解析工程による前記特徴量を所定のしきい値と比較して前記特徴量が前記しきい値以上であると判定した場合、前記特徴量に対応する前記コンテンツの部分をコンテンツの基点とし、前記同期工程は、受信する前記第１の解析工程による前記メタデータの基点と前記第２の解析工程による前記コンテンツの基点とに基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項１５にかかる発明によれば、第１の解析工程は、第１の解析工程による特徴量を所定のしきい値と比較してメタデータの基点を設定し、メタデータ生成工程は、第１の解析工程によるメタデータの基点から前後のオフセット値でメタデータの時刻情報を記述して送信し、第２の解析工程は、第２の解析工程による特徴量を所定のしきい値と比較してコンテンツの基点を設定し、同期工程は、第１の解析工程によるメタデータの基点と第２の解析工程によるコンテンツの基点とに基づいて、前後のオフセット値によりコンテンツとメタデータとを対応付ける。この構成によって、メタデータに設定された特徴量による基点と、コンテンツに設定された特徴量による基点とを比較することによって、コンテンツに時間情報がなかった場合でもコンテンツおよびメタデータの対応付けを行うことができる。

また、請求項１６にかかる発明は、請求項１５に記載のコンテンツ・メタデータ同期方法において、前記第１の解析工程は、解析する前記特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された前記１つ以上の特徴量によって前記メタデータの基点を設定して配信し、前記第２の解析工程は、解析する前記特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された前記１つ以上の特徴量によって前記コンテンツの基点を設定し、前記同期工程は、受信する前記第１の解析工程が設定した前記メタデータの基点と前記第２の解析工程が設定した前記コンテンツの基点とに基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項１６にかかる発明によれば、第１の解析工程は、解析する特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量によってメタデータの基点を設定して配信し、第２の解析工程は、解析する特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量によってコンテンツの基点を設定し、同期工程は、第１の解析工程が設定したメタデータの基点と第２の解析工程が設定したコンテンツの基点とに基づいて、前後のオフセット値によりコンテンツとメタデータとを対応付ける。この構成によって、コンテンツにおける色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された１つ以上の特徴量によって設定される基点を比較することによって、コンテンツに時間情報がなかった場合でもコンテンツおよびメタデータの対応付けを行うことができる。

また、請求項１７にかかる発明は、請求項１５または１６に記載のコンテンツ・メタデータ同期方法において、前記第１の解析工程は、前記メタデータの基点を複数個設定し、前記第２の解析工程は、前記コンテンツの基点を複数個設定し、前記同期工程は、設定された前記メタデータの複数個の基点および前記コンテンツの複数個の基点に基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項１７にかかる発明によれば、第１の解析工程は、メタデータの基点を複数個設定し、第２の解析工程は、コンテンツの基点を複数個設定し、同期工程は、設定されたメタデータの複数個の基点およびコンテンツの複数個の基点に基づいて、前後のオフセット値によりコンテンツとメタデータとを対応付ける。この構成によって、メタデータに設定された特徴量による複数の基点と、コンテンツに設定された特徴量による複数の基点とを比較することによって、コンテンツに時間情報がなかった場合でもコンテンツおよびメタデータの対応付けをより正確に行うことができる。

また、請求項１８にかかる発明は、請求項１５または１７に記載のコンテンツ・メタデータ同期方法において、前記第１の解析工程は、前記コンテンツのシーンの切り替わる区切りを特徴量として前記メタデータの基点に設定し、前記第２の解析工程は、前記コンテンツのシーンの切り替わる区切りを特徴量として前記コンテンツの基点に設定するものであることを特徴とする。

この請求項１８にかかる発明によれば、第１の解析工程は、コンテンツのシーンの切り替わる区切りを特徴量としてメタデータの基点に設定し、第２の解析工程は、コンテンツのシーンの切り替わる区切りを特徴量としてコンテンツの基点に設定する。この構成によって、コンテンツに正確な基点を設定できるのでコンテンツとメタデータに設定された特徴量による基点とを比較することによって、コンテンツに時間情報がなかった場合でもコンテンツおよびメタデータの対応付けをより正確に行うことができる。

また、請求項１９にかかる発明は、請求項１５〜１８のいずれか１つに記載のコンテンツ・メタデータ同期方法において、前記メタデータ生成工程は、前記メタデータの時刻情報を、前記メタデータの直前の基点までの過去に遡るオフセットおよび直後の基点へのオフセット値情報として、前記メタデータに付加して配信し、前記同期工程は、前記第２の解析工程において設定される基点と前記メタデータに付加された前記オフセット値情報により特定される時刻情報とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項１９にかかる発明によれば、メタデータ生成工程は、メタデータの時刻情報を、メタデータの直前の基点までの過去に遡るオフセットおよび直後の基点へのオフセット値情報として、メタデータに付加して配信し、同期工程は、第２の解析工程において設定される基点とメタデータに付加されたオフセット値情報により特定される時刻情報とに基づいて、コンテンツとメタデータとを対応付ける。この構成によって、メタデータの前後の基点によってメタデータを特定することによって、過去に遡ってメタデータの対応付けをすることができるので、受信するメタデータを無駄にすることを避けながらコンテンツおよびメタデータの対応付けを行うことができる。

また、請求項２０にかかる発明は、請求項１５〜１９のいずれか１つに記載のコンテンツ・メタデータ同期方法において、前記第１の解析工程は、前記メタデータの基点を所定の時間で周期的に設定し、前記第２の解析工程は、前記コンテンツの基点を所定の時間で周期的に設定し、前記同期工程は、前記第１の解析工程が設定した前記メタデータの周期的な基点と前記第２の解析工程が設定した前記コンテンツの周期的な基点とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項２０にかかる発明によれば、第１の解析工程は、メタデータの基点を所定の時間で周期的に設定し、第２の解析工程は、コンテンツの基点を所定の時間で周期的に設定し、同期工程は、第１の解析工程が設定したメタデータの周期的な基点と第２の解析工程が設定したコンテンツの周期的な基点とに基づいて、コンテンツとメタデータとを対応付ける。この構成によって、コンテンツを途中から受信開始した場合であっても、周期的な基点を受信することによって基点を比較することができるので、時間的な無駄を少なくして効率よくコンテンツおよびメタデータの対応付けを行うことができる。

また、請求項２１にかかる発明は、プログラムであって、請求項１１〜２０のいずれか１つに記載のコンテンツ・メタデータ同期方法をコンピュータに実行させることを特徴とする。

この請求項２１にかかる発明によれば、請求項１１〜２０のいずれか１つに記載のコンテンツ・メタデータ同期方法をコンピュータに実行させることができる。

また、請求項２２にかかる発明は、コンテンツおよびメタデータの対応付け可能な受信端末であって、コンテンツ配信サーバから配信される映像および音声を含むコンテンツと、メタデータ配信サーバによって前記コンテンツを基に生成されたメタデータとを受信し、受信した前記コンテンツおよび前記メタデータを対応付ける同期手段を有する同期装置を備えたことを特徴とする。

この請求項２２にかかる発明によれば、コンテンツ配信サーバから配信される映像および音声を含むコンテンツと、メタデータ配信サーバによってコンテンツを基に生成されたメタデータとを受信し、受信したコンテンツおよびメタデータを対応付ける同期手段を有する同期装置を備えた。この構成によって受信端末は、コンテンツ配信サーバから配信されるコンテンツと、メタデータ配信サーバから配信されるメタデータとを別々に受信して対応付けることができる。

また、請求項２３にかかる発明は、請求項２２に記載のコンテンツおよびメタデータの対応付け可能な受信端末において、前記コンテンツ配信サーバによって前記コンテンツに時間情報が付加されて配信され、前記メタデータ配信サーバにより前記時間情報が前記メタデータに付加されて生成された場合、前記同期装置は、前記同期手段が、前記メタデータ配信サーバにより生成された前記時間情報が付加されたメタデータを受信し、受信した前記メタデータに付加された時間情報と、前記コンテンツ配信サーバから受信する前記コンテンツに付加された時間情報とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項２３にかかる発明によれば、コンテンツ配信サーバによってコンテンツに時間情報が付加されて配信され、メタデータ配信サーバにより時間情報がメタデータに付加されて生成された場合、同期装置は、同期手段が、メタデータ配信サーバにより生成された時間情報が付加されたメタデータを受信し、受信したメタデータに付加された時間情報と、コンテンツ配信サーバから受信するコンテンツに付加された時間情報とに基づいて、コンテンツとメタデータとを対応付ける。この構成によって受信端末は、コンテンツ配信サーバで時間情報が付加されたコンテンツが配信された場合、配信されたコンテンツおよびメタデータ配信サーバから配信されるメタデータを別々に受信しても、付加された時間情報に基づいて正確に対応付けることができる。

また、請求項２４にかかる発明は、請求項２２または２３に記載のコンテンツおよびメタデータの対応付け可能な受信端末において、前記メタデータ配信サーバにより前記コンテンツの特徴を表す特徴量が解析され、解析された前記コンテンツの特徴量が前記メタデータに対応づけて配信される場合、前記同期装置は、前記コンテンツ配信サーバから受信する前記コンテンツの特徴量を解析する解析手段をさらに有し、前記同期手段が、前記メタデータ配信サーバから前記メタデータに対応づけて配信される前記コンテンツの特徴量を受信し、前記メタデータ配信サーバによる前記メタデータに対応づけられた前記コンテンツの特徴量と、前記解析手段によって解析された前記コンテンツの特徴量とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする。

この請求項２４にかかる発明によれば、メタデータ配信サーバによりコンテンツの特徴を表す特徴量が解析されてメタデータに対応づけて配信される場合、同期装置は、コンテンツ配信サーバから受信するコンテンツの特徴量を解析する解析手段をさらに有し、同期手段が、メタデータ配信サーバからメタデータに対応づけて配信されるコンテンツの特徴量を受信し、メタデータ配信サーバによるメタデータに対応づけられたコンテンツの特徴量と、解析手段によって解析されたコンテンツの特徴量とに基づいて、コンテンツとメタデータとを対応付ける。この構成によって、例え時間情報がコンテンツに付加されていなかったとしても、情報端末は、コンテンツの特徴量と、メタデータに対応付けられて受信したコンテンツの特徴量とを比較することによって、コンテンツおよびメタデータを対応付けることができる。

また、請求項２５にかかる発明は、請求項２２〜２４のいずれか１つに記載のコンテンツおよびメタデータの対応付け可能な受信端末において、前記受信端末は、ＤＶＤ（ＤｉｇｉｔａｌＶｅｒｓａｔｉｌｅＤｉｓｃ）録画機であることを特徴とする。

この請求項２５にかかる発明によれば、受信端末は、ＤＶＤ（ＤｉｇｉｔａｌＶｅｒｓａｔｉｌｅＤｉｓｃ）録画機である。この構成によって受信端末は、コンテンツ配信サーバから配信されるコンテンツと、メタデータ配信サーバから配信されるメタデータとを別々に受信して対応付けることができるＤＶＤ録画機に適用できる。

また、請求項２６にかかる発明は、請求項２２〜２４のいずれか１つに記載のコンテンツおよびメタデータの対応付け可能な受信端末において、前記受信端末は、ＨＤＤ（ＨａｒｄＤｉｓｃＤｒｉｖｅ）録画機であることを特徴とする。

この請求項２６にかかる発明によれば、受信端末は、ＨＤＤ（ＨａｒｄＤｉｓｃＤｒｉｖｅ）録画機である。この構成によって受信端末は、コンテンツ配信サーバから配信されるコンテンツと、メタデータ配信サーバから配信されるメタデータとを別々に受信して対応付けることができるＨＤＤ録画機に適用できる。

また、請求項２７にかかる発明は、請求項２２〜２４のいずれか１つに記載のコンテンツおよびメタデータの対応付け可能な受信端末において、前記受信端末は、携帯型電話機であることを特徴とする。

この請求項２７にかかる発明によれば、受信端末は、携帯型電話機である。この構成によって受信端末は、コンテンツ配信サーバから配信されるコンテンツと、メタデータ配信サーバから配信されるメタデータとを別々に受信して対応付けることができる携帯型電話機に適用できる。

本発明（請求項１）にかかるコンテンツ・メタデータ送受信システムは、受信端末において、コンテンツ配信サーバから配信されるコンテンツと、メタデータ配信サーバから配信されるメタデータとを別々に受信して対応付けることができるという効果を奏する。

また、本発明（請求項２）にかかるコンテンツ・メタデータ送受信システムは、受信端末において、コンテンツ配信サーバで時間情報が付加されたコンテンツが配信された場合、配信されたコンテンツおよびメタデータ配信サーバから配信されるメタデータを別々に受信しても、付加された時間情報に基づいて正確に対応付けることができるという効果を奏する。

また、本発明（請求項３）にかかるコンテンツ・メタデータ送受信システムは、例え時間情報がコンテンツに付加されていなかったとしても、情報端末において、コンテンツの特徴量と、メタデータに対応付けられて受信したコンテンツの特徴量とを比較することによって、コンテンツおよびメタデータを対応付けることができるという効果を奏する。

また、本発明（請求項４）にかかるコンテンツ・メタデータ送受信システムは、例え時間情報がコンテンツに付加されていなかったとしても、情報端末において、コンテンツの特徴量と、メタデータに付加されて受信したコンテンツの特徴量とを比較することによって、コンテンツおよびメタデータを対応付けることができるという効果を奏する。

また、本発明（請求項５）にかかるコンテンツ・メタデータ送受信システムは、メタデータ配信サーバの第１の解析手段は、特徴量を所定のしきい値と比較してしきい値以上であると判定した場合、特徴量に対応するコンテンツの部分をメタデータの基点に設定し、メタデータ配信サーバによって設定された特徴量による基点と、受信端末によって設定された特徴量による基点とを比較することによって、受信端末において時間情報がなかった場合でもコンテンツおよびメタデータの対応付けを行うことができるという効果を奏する。

また、本発明（請求項６）にかかるコンテンツ・メタデータ送受信システムは、コンテンツにおける色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された１つ以上の特徴量によって設定される基点を比較することによって、受信端末において時間情報がなかった場合でもコンテンツおよびメタデータの対応付けを行うことができるという効果を奏する。

また、本発明（請求項７）にかかるコンテンツ・メタデータ送受信システムは、メタデータ配信サーバによって設定された特徴量による複数の基点と、受信端末によって設定された特徴量による複数の基点とを比較することによって、受信端末において時間情報がなかった場合でもコンテンツおよびメタデータの対応付けをより正確に行うことができるという効果を奏する。

また、本発明（請求項８）にかかるコンテンツ・メタデータ送受信システムは、シーンの切り替わる区切りによって正確な基点を設定できるので受信端末によって設定された特徴量による基点を比較することによって、受信端末において時間情報がなかった場合でもコンテンツおよびメタデータの対応付けをより正確に行うことができるという効果を奏する。

また、本発明（請求項９）にかかるコンテンツ・メタデータ送受信システムは、メタデータの前後の基点によってメタデータを特定することによって、過去に遡ってメタデータの対応付けをすることができるので、受信端末においては受信するメタデータを無駄にすることを避けながらコンテンツおよびメタデータの対応付けを行うことができるという効果を奏する。

また、本発明（請求項１０）にかかるコンテンツ・メタデータ送受信システムは、受信端末がコンテンツを途中から受信開始した場合であっても、周期的な基点を受信することによって基点を比較することができるので、受信端末においては時間的な無駄を少なくして効率よくコンテンツおよびメタデータの対応付けを行うことができるという効果を奏する。

また、本発明（請求項１１）にかかるコンテンツ・メタデータ同期方法は、配信されるコンテンツと、配信されるメタデータとを別々に受信して対応付けることができるという効果を奏する。

また、本発明（請求項１２）にかかるコンテンツ・メタデータ同期方法は、時間情報が付加されたコンテンツが配信された場合、配信されたコンテンツおよび配信されるメタデータを別々に受信しても、付加された時間情報に基づいて正確に対応付けることができるという効果を奏する。

また、本発明（請求項１３）にかかるコンテンツ・メタデータ同期方法は、例え時間情報がコンテンツに付加されていなかったとしても、コンテンツの特徴量と、メタデータに対応付けられて受信したコンテンツの特徴量とを比較することによって、コンテンツおよびメタデータを対応付けることができるという効果を奏する。

また、本発明（請求項１４）にかかるコンテンツ・メタデータ同期方法は、例え時間情報がコンテンツに付加されていなかったとしても、コンテンツの特徴量と、メタデータに付加されて受信したコンテンツの特徴量とを比較することによって、コンテンツおよびメタデータを対応付けることができるという効果を奏する。

また、本発明（請求項１５）にかかるコンテンツ・メタデータ同期方法は、メタデータに設定された特徴量による基点と、コンテンツに設定された特徴量による基点とを比較することによって、コンテンツに時間情報がなかった場合でもコンテンツおよびメタデータの対応付けを行うことができるという効果を奏する。

また、本発明（請求項１６）にかかるコンテンツ・メタデータ同期方法は、コンテンツにおける色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された１つ以上の特徴量によって設定される基点を比較することによって、コンテンツに時間情報がなかった場合でもコンテンツおよびメタデータの対応付けを行うことができるという効果を奏する。

また、本発明（請求項１７）にかかるコンテンツ・メタデータ同期方法は、メタデータに設定された特徴量による複数の基点と、コンテンツに設定された特徴量による複数の基点とを比較することによって、コンテンツに時間情報がなかった場合でもコンテンツおよびメタデータの対応付けをより正確に行うことができるという効果を奏する。

また、本発明（請求項１８）にかかるコンテンツ・メタデータ同期方法は、シーンの切り替わる区切りによってコンテンツに正確な基点を設定できるのでコンテンツとメタデータに設定された特徴量による基点とを比較することによって、コンテンツに時間情報がなかった場合でもコンテンツおよびメタデータの対応付けをより正確に行うことができるという効果を奏する。

また、本発明（請求項１９）にかかるコンテンツ・メタデータ同期方法は、メタデータの前後の基点によってメタデータを特定することによって、過去に遡ってメタデータの対応付けをすることができるので、受信するメタデータを無駄にすることを避けながらコンテンツおよびメタデータの対応付けを行うことができるという効果を奏する。

また、本発明（請求項２０）にかかるコンテンツ・メタデータ同期方法は、コンテンツを途中から受信開始した場合であっても、周期的な基点を受信することによって基点を比較することができるので、時間的な無駄を少なくして効率よくコンテンツおよびメタデータの対応付けを行うことができるという効果を奏する。

また、本発明（請求項２１）にかかるプログラムは、請求項１１〜２０のいずれか１つに記載のコンテンツ・メタデータ同期方法をコンピュータに実行させることができるという効果を奏する。

また、本発明（請求項２２）にかかるコンテンツおよびメタデータの対応付け可能な受信端末は、コンテンツ配信サーバから配信されるコンテンツと、メタデータ配信サーバから配信されるメタデータとを別々に受信して対応付けることができるという効果を奏する。

また、本発明（請求項２３）にかかるコンテンツおよびメタデータの対応付け可能な受信端末は、コンテンツ配信サーバで時間情報が付加されたコンテンツが配信された場合、配信されたコンテンツおよびメタデータ配信サーバから配信されるメタデータを別々に受信しても、付加された時間情報に基づいて正確に対応付けることができるという効果を奏する。

また、本発明（請求項２４）にかかるコンテンツおよびメタデータの対応付け可能な受信端末は、例え時間情報がコンテンツに付加されていなかったとしても、情報端末は、コンテンツの特徴量と、メタデータに対応付けられて受信したコンテンツの特徴量とを比較することによって、コンテンツおよびメタデータを対応付けることができるという効果を奏する。

また、本発明（請求項２５）にかかるコンテンツおよびメタデータの対応付け可能な受信端末は、コンテンツ配信サーバから配信されるコンテンツと、メタデータ配信サーバから配信されるメタデータとを別々に受信して対応付けることができるＤＶＤ録画機に適用できるという効果を奏する。

また、本発明（請求項２６）にかかるコンテンツおよびメタデータの対応付け可能な受信端末は、コンテンツ配信サーバから配信されるコンテンツと、メタデータ配信サーバから配信されるメタデータとを別々に受信して対応付けることができるＨＤＤ録画機に適用できるという効果を奏する。

また、本発明（請求項２７）にかかるコンテンツおよびメタデータの対応付け可能な受信端末は、コンテンツ配信サーバから配信されるコンテンツと、メタデータ配信サーバから配信されるメタデータとを別々に受信して対応付けることができる携帯型電話機に適用できるという効果を奏する。

以下に添付図面を参照して、この発明にかかるコンテンツ・メタデータ送受信システム、コンテンツ・メタデータ同期方法、その方法をコンピュータに実行させるプログラム、並びにコンテンツおよびメタデータの対応付け可能な受信端末の最良な実施の形態を詳細に説明する。

（１．実施の形態１によるコンテンツ・メタデータ送受信システム）
（１．１．コンテンツ・メタデータ送受信システムの構成）
図１は、実施の形態１によるコンテンツ・メタデータ送受信システムの機能的ブロック図である。実施の形態１によるコンテンツ・メタデータ送受信システムは、ネットワーク２に接続するコンテンツ配信サーバ１、メタデータ配信サーバ１０、および受信端末２０を備える。図１では各サーバ１，１０および受信端末２０は、１つのみが記されているが、単数に限るものではない。

コンテンツ配信サーバ１は、映像音声を含むマルチメディアコンテンツを、時間情報を付加して生成し、ネットワーク２を介して、メタデータ配信サーバ１０および受信端末２０に配信する。

メタデータ配信サーバ１０は、メタデータ生成部１１を備える。メタデータ生成部１１は、コンテンツ配信サーバ１から配信されたコンテンツを受信してコンテンツに付加された時間情報を記述し、受信したコンテンツに対応するメタデータを生成する。メタデータ生成部１１は、時間情報が記述されたメタデータを、受信端末２０に配信する。

受信端末２０は、同期部２１を備える。同期部２１は、メタデータ配信サーバ１０のメタデータ生成部１１から配信される時間情報が付加されたメタデータを受信する。また、同期部２１は、コンテンツ配信サーバ１から配信される時間情報が付加されたコンテンツを、受信する。

図２は、実施の形態１によるコンテンツ・メタデータ送受信システムにおけるコンテンツとメタデータの対応付け動作を説明する図である。ここではメタデータ生成部１１が、時間情報が付加されて配信されるコンテンツの流れ５１を受信しており、時間情報が付加されたメタデータ５２を生成する。受信端末２０の同期部２１は、配信されるコンテンツの流れ５１を受信し受信したコンテンツに付加された時間情報を読み取る。また同期部２１は、メタデータ生成サーバ１０から時間情報が付加されたメタデータ５２を受信し、既に読み取ったコンテンツデータ５１の時間情報と対応付ける。図２に示すように、メタデータ５２には時間情報が付加されており、例えば３分００秒から４分００秒の間にバッター松井の打席のシーンであった場合、メタデータ生成部１１は、

＜ｔｉｍｅ＞３：００−４：００
＜ｗｈｏ＞松井

というメタデータ５２を作成し、受信端末２０に送信する。受信する同期部２１は、メタデータ５２を読み込み、またコンテンツデータ５１の時間情報を読み取り、コンテンツの時間が３：００−４：００の間は、バッターが松井であるという対応付けを行う。

この方式は、Ｍ−ＰＥＧ２形式などのようにコンテンツに時間情報が付加されている場合に適用できる。コンテンツに時間情報が付加されている場合、メタデータ生成部１１は、該時間情報をメタデータに記述する。

（１．２．コンテンツおよびメタデータの対応付け手順）
図３は、コンテンツおよびメタデータの対応付け手順を説明するフローチャートである。コンテンツ配信サーバ１は、時間情報が付加されたコンテンツを配信する（ステップＳ１０１）。メタデータ生成部１１は、配信されるコンテンツを受信可能状態にあり（ステップＳ１０２）、受信した場合（ステップＳ１０２のＹｅｓ）、メタデータ生成部１１はコンテンツを解析し（ステップＳ１０３）、時間情報を付加してメタデータを生成し、受信端末２０に配信する（ステップＳ１０４）。コンテンツを受信しない場合（ステップＳ１０２のＮｏ）、そのまま待機する。

受信端末２０の同期部２１は、配信されるコンテンツを受信可能状態にあり（ステップＳ１０５）、受信した場合（ステップＳ１０５のＹｅｓ）、同期部２１は、コンテンツの時間情報を解析する（ステップＳ１０６）。同期部２１は、メタデータ生成部１１から配信されるメタデータを受信可能状態にあり（ステップＳ１０７）、受信しない場合は（ステップＳ１０７のＮｏ）そのまま待機する。

同期部２１がメタデータを受信した場合（ステップＳ１０７のＹｅｓ）、同期部２１は、メタデータの時間情報とコンテンツの時間情報の同期を調べ（ステップＳ１０８）、同期がとれない場合は（ステップＳ１０８）、再びステップＳ１０７に戻り、メタデータの受信を待機する。

同期部２１が、メタデータの時間情報とコンテンツの時間情報との同期を取ることができた場合（ステップＳ１０８のＹｅｓ）、同期部２１は、コンテンツとメタデータとを対応付ける（ステップＳ１０９）

（１．３．効果）
受信端末２０においては、コンテンツとメタデータを別々に受信したとしても、コンテンツに付加されている時間情報とメタデータに記述されている時間情報を比較し、同じ時間情報を有するコンテンツとメタデータとを正確に関連づけることができる。

（２．実施の形態２によるコンテンツ・メタデータ送受信システム）
（２．１．コンテンツ・メタデータ送受信システムの構成）
実施の形態２によるコンテンツ・メタデータ送受信システムは、配信されるコンテンツに時間情報が付加されていない場合、あるいはメタデータ配信サーバにおいてコンテンツに付加された時間情報を取得できない場合に、メタデータ配信サーバおよび情報端末においてコンテンツの特徴を表す特徴量を解析する。メタデータ配信サーバ１０は特徴量が付加されたメタデータを生成して配信し、配信された特徴量が付加されたメタデータを受信する情報端末２０は、既に解析した特徴量と比較してコンテンツおよびメタデータの同期を取って対応付ける。ここでは、実施の形態１によるコンテンツ・メタデータ送受信システムにおいてコンテンツとメタデータとを対応付ける根拠となる時間情報に代わるものとして、特徴量の情報を使用する。

図４は、実施の形態２によるコンテンツ・メタデータ送受信システムの機能的ブロック図である。実施の形態２によるコンテンツ・メタデータ送受信システムが実施の形態１と異なる点は、メタデータ配信サーバ１０がさらに、受信するコンテンツの特徴量を解析する第１解析部１２を備え、かつ受信端末２０がさらに、受信するコンテンツの特徴量を解析する第２解析部２２を備える点である。また同期部２１は、特徴量を比較することによってコンテンツおよびメタデータの対応付けを行う。

第１解析部１２および第２解析部２２が解析する特徴量は、シーンの切り替わり、色特徴、カット点、フレームのマッチング、無音部区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上である。第１解析部１２は、受信したコンテンツを解析し上記特徴量を算出する。

最近、動画の検索技術の一つとして画紋が使用されているが、この画紋を検出して特徴量として使用することができる。画紋とは、動画像アーカイブから望む動画像を見つけるための手掛かり情報であり、人間の指紋と同様に、少ない情報量で動画像の識別が可能な情報で、簡単で安定的に使用することができるものとして研究されている。画紋については、例えば情報処理学会研究報告アブストラクトＮｏ．０２３−００４「オーディオビジュアル複合情報処理」の中に納められた「画紋を用いた動画像検索方式−現行テレビ放送への適用」（著者：高橋克直、杉浦麻貴、村井正人、寺島信義、富永英義）による公知技術を適用することができる。

例えばこの画紋の技術を利用すれば、動画像の特徴を利用して、動画像のある特定のポイントを絞り込むことが可能となる。

図５は、メタデータ生成部によるメタデータの生成を説明する図である。メタデータ配信サーバ１０の第１解析部１２は、受信したコンテンツ８１を解析して特徴量を算出する。符号８３を付されたグラフは、時間に対する特徴量を示したグラフである。第１解析部１２は、算出された特著量をしきい値８５で判定し、しきい値８５以上の特徴量を与えるコンテンツの部分（８４−１、８４−２）に対して時間軸上で基点（８２−１、８２−２）として設定する。

メタデータ生成部１１は、２つの基点（８２−１、８２−２）の間においてメタデータ８６を生成する。生成されたメタデータ８６はコンテンツ８１上で特定される。時刻合わせの基点が、実装によっては時間的に余裕を持って設定できる場合、時刻情報を前後の基点からのオフセット値としてプラスのオフセット値およびマイナスのオフセット値として２重に設定することが望ましい。図５中のメタデータ８６には、＜ｔｉｍｅ＞としてプラスの時間とマイナスの時間によってメタデータの内容の記述を起点から２重に特定することが示されている。メタデータの時刻情報を２重に記述することによって、途中から視聴を開始した場合にも即座に対応付け動作が可能となる。

メタデータが特定される際には、時間軸を使用しても良く、あるいはフレーム数を使用しても良い。時間軸を用いる場合、時刻合わせの基点は、特殊な特徴量をもつか、あるいは一定のしきい値を超えた特徴量をもつコンテンツ上のポイントであり、例えば、映像フレーム区間、音声区間などが挙げられる。

あるいは時刻合わせの基点としては、コンテンツの中に含まれるコマーシャル（ＣＭ）のようなコンテンツの区切りのタイミングを使用することができる。

また、同期部２１による同期の判定は、基点間の距離、あるいは基点における特徴量の大きさなどを比較することによって可能である。

ここで、この特徴量から設定された時刻合わせの基点は、周期的に流されることが望ましい。周期的に設定することによって、受信端末がコンテンツの途中からコンテンツとメタデータの受信を始めた場合でも、メタデータとコンテンツを随時関連づけることが可能となる。

時刻合わせの基点となる特徴量の情報もメタデータとして配信することができる。この特徴量の情報は、時刻合わせの基点が生成される毎にメタデータが作成されて、配信される。その場合、メタデータの内容は基点に関する情報だけの場合もある。

また、時刻合わせの基点となる特徴量の情報は、メタデータとして配信せずに、別の情報として配信することもできる。

受信端末２０においては、第２解析部２２が、コンテンツ配信サーバ１から受信したコンテンツの特徴量の情報から第１解析部１２と同様に基点を抽出する。同期部２１は、受信したメタデータ８６に関連する基点情報を読み取って読み取ったメタデータ８６の基点情報と、第２解析部２２によって抽出された基点情報とを比較してコンテンツとメタデータとの同期を取る。同期部２１は、メタデータに記述されていた時刻合わせの基点に合致するコンテンツ上のポイントを選択し選択されたポイントを時刻合わせの基点とする。選択された時刻合わせの基点を基にして、メタデータに記述されている時刻のオフセット情報を使用してコンテンツ内容を時間軸上で特定し、コンテンツとメタデータとを関連付ける。

（２．２．コンテンツおよびメタデータの対応付け手順）
図６は、実施の形態２によるコンテンツおよびメタデータの対応付け手順を説明するフローチャートである。図４〜６を参照しながら、実施の形態２によるコンテンツ・メタデータ送受信システムの各部の動作、およびコンテンツ・メタデータの対応付けの手順を説明する。

コンテンツ配信サーバ１はコンテンツを配信する（ステップＳ２０１）。メタデータ配信サーバの第１解析部１２は、コンテンツ配信サーバ１から配信されたコンテンツを受信する状態にあり（ステップＳ２０２）、受信しない場合は（ステップＳ２０２のＮｏ）そのまま待機する。第１解析部１２は、コンテンツを受信した場合（ステップＳ２０２のＹｅｓ）、コンテンツの特徴量を解析し、解析された特徴量を所定のしきい値と比較して基点を抽出する（ステップＳ２０３）。

ここで特徴量として例えば、シーンの切り替わりフレーム情報を使用する。第１解析部１２はコンテンツのシーンの切り替わりを検出する。メタデータ生成部１１は、第１解析部１２によって検出されたシーンの切り替わりフレーム情報である基点情報を付加してメタデータを作成し、受信端末２０に送信する（ステップＳ２０４）。

受信端末２０の第２解析部２２は、コンテンツ配信サーバ１が配信するコンテンツを受信可能状態にあり（ステップＳ２０５）、受信しない場合はそのまま継続して待機状態にあり（ステップＳ２０５のＮｏ）、受信した場合（ステップＳ２０５のＹｅｓ）、第２解析部２２は、コンテンツにおけるシーンの切り替わりフレーム情報を、コンテンツの特徴量として解析し、解析された特徴量を所定のしきい値と比較して基点を抽出し、基点を設定する（ステップＳ２０６）。

同期部２１は、コンテンツ配信サーバ１から配信されるシーンの切り替わりフレーム情報である基点情報が付加されたメタデータを受信可能状態にあり（ステップＳ２０７）、受信しない場合は（ステップＳ２０７のＮｏ）、そのまま受信可能状態を継続する。同期部２１は、メタデータ生成部１１から送信されるメタデータを受信した場合（ステップＳ２０７のＹｅｓ）、メタデータに付加された基点情報（この場合切り替わりフレーム情報）を検出し、第２解析部２２によって解析された基点（この場合切り替わりフレーム情報）との同期を判定する（ステップＳ２０８）。同期部２１が、特徴量の同期を取ることができなければ（ステップＳ２０８のＮｏ）、ステップＳ２０７に戻る。同期部２１が、特徴量の同期を取ることができれば（ステップＳ２０８のＹｅｓ）、取られた該同期によってコンテンツとメタデータとを対応付ける（ステップＳ２０９）。

（２．３．効果）
コンテンツ配信サーバから送信されるコンテンツに時間情報が付加されていなかった場合でも、メタデータ配信サーバがコンテンツの特徴量を解析しメタデータに付加して受信端末に送信し、メタデータを受信した受信端末においては、コンテンツ配信サーバから受信するコンテンツの特徴量を解析してメタデータに付加された特徴量と比較することにより、コンテンツとメタデータとの同期を取ることができるので、コンテンツおよびメタデータを対応付けることができる。

（３．実施の形態３によるコンテンツ・メタデータ送受信システム）
（３．１．コンテンツ・メタデータ送受信システムの構成）
実施の形態３によるコンテンツ・メタデータ送受信システムは、コンテンツとメタデータとの同期において、複数の特徴量を使用する点が、実施の形態１および２と異なる点である。１つのメタデータに対し１つの特徴量によってコンテンツとメタデータとの同期を判定するよりも、１つのメタデータに対して、複数の特徴量を使用することによって同期を取る方がより正確なものとなるからである。

実施の形態３によるコンテンツ・メタデータ送受信システムの構成は実施の形態２によるコンテンツ・メタデータ送受信システムと同じであるので、図４を参照して説明する。また、手順は、図６のステップＳ２０８が異なるので、特にステップＳ２０８について重点的に説明する。

図７は、実施の形態３によるコンテンツ・メタデータ送受信システムにおいて、同期部が複数の基点の同期を判定することを説明する図である。

コンテンツ配信サーバ１から配信されるコンテンツのフレームに対して、第２解析部２２は、特徴量６１を解析する。ここで、フレーム数を横軸に取ったが、これに代わるものとして時間軸を使用しても良い。ここで、フレーム数が増加する方向は時間の経過方向である。

第１解析部１２および第２解析部２２は、フレーム数に対する特徴量の情報を少なくとも一時的に記憶する記憶部を有することが望ましい（不図示）。記憶部としては例えばバッファで構成することができる。あるいは、ＨＤＤ（ハードディスクドライブ）で記憶させても良い（不図示）。

コンテンツの送信に連れて受信するフレームは進行し、進行するフレームに対して解析されるコンテンツの特徴量が変化する。符号６１は、フレーム数に対する特徴量を示すグラフである。

受信端末２０の第２解析部２２は、所定のしきい値によって解析された特徴量を比較し、所定値以上である特徴量に対応するフレーム数を基点として採用する。採用された基点を基点群（２）と、ここで称する。基点群（２）における基点はここでは、図７に示されたように、Ｐ１〜Ｐ１０である。符号６２は、フレームに対して設定された基点群（２）を示している。基点の数が１０であるのは、調べる区間内にある基点の個数の一例として挙げたものであって、１０という数値に限定されるものではない。

一方、メタデータ生成部１１においては、第１解析部１２が第２解析部２２と同様に配信されるコンテンツのフレーム数に対する特徴量を解析し、しきい値処理を施して基点群（１）Ｑ１〜Ｑ５を取得する。符号６３は、第１解析部１２によって取得されたある時間における基点群（１）を示している。ここで、基点群（１）が、５個の基点から成っているのは、一例であって、その個数に限定されるものではない。

基点のセットである基点群（１）は、メタデータに関連づけられ、あるいは対応付けられ、あるいは付加されて、メタデータ生成部１１によって送信される。同期部２１は送信された基点群（１）が付加された、ないしは関連したメタデータを、受信する。

同期部２１が受信した基点群（１）は、ある時間間隔で並べられた複数の基点であるので、第２解析部２２によって解析されて設定された基点群（２）のいずれかの部分と合致するはずである。同期部２１は、基点群（１）と、基点群（２）との同期を判定する。判定の方法は、図７を用いて説明すると、まずＱ１とＰ１とを合わせて、以下Ｐ２とＱ２〜Ｐ５とＱ５が合致するか否かを判定し、各点において合致した度合いを求めて合計する。そして、合致した度合いの合計が所定のしきい値以上である場合、あるいは最高である場合、その時の合致が、基点群同士が対応するものであると判定する。

（３．２．コンテンツおよびメタデータを同期させる手順）
図８は、同期部が、第１解析部および第２解析部による複数の基点を比較してコンテンツおよびメタデータの同期を判定する手順を説明するフローチャートである。図８のフローチャートは、図６に示したステップＳ２０８において、特徴量から抽出される複数の基点によって同期を判定する手順を説明するものである。

同期部２１は、第２解析部２２によって特徴量が解析され解析された特徴量がしきい値と比較されて抽出した複数の基点群（２）の基点Ｐｉ、およびメタデータ配信サーバ１０から配信された第１解析部１２による基点群（１）の基点Ｑｉの合致を判定するために、先ず、ｉ＝１とおく（ステップＳ３０１）。これによって最初、Ｐ１とＱ１とを合わせることになる（ステップＳ３０２）。以下Ｐ２とＱ２〜Ｐ５とＱ５が合致するか否かを判定する。合致しているかいないかを示す合致度を算定する関数をｆとおく。ｆは、合致する場合は１、合致しない場合は０の値を取るものとする。即ち、ｆ（Ｐｉ＋ｋ，Ｑ１＋ｋ）は１または０の値を取る。

こうして関数ｆによって各Ｐｉ点の合致度を求め、その合計Ｃｉを算出する。合計値Ｃｉが４．５以上であるか否かを判定する。４．５というしきい値は、５個のうち９割の割合で合致している場合であり、特にこの数に限定するものではない（ステップＳ３０４）。ここで、調べる区間内にある基点の総数をＮとおく。ここではＮ＝１０である。

Ｃｉが４．５以上ではない場合（ステップＳ３０４のＮｏ）、ｉが上記の総数Ｎ−５よりも大きいか否かを判定し（ステップＳ３０６）、大きい場合は（ステップＳ３０５のＹｅｓ）、最初からやり直す（ステップＳ３０１）。あるいはこの場合、エラーとしても良い（不図示）。ｉがＮ−５よりも大きくない場合は（ステップＳ３０５のＮｏ）、ｉ＝ｉ＋１とおいてステップＳ３０２に戻る。ここで、Ｃｉが４．５以上ではない場合とは、図７に示した合致しない６３−１〜６３−４の場合である。

一方、Ｃｉが４．５以上であると判定された場合（ステップＳ３０４のＹｅｓ）、その時のｉによって定まるＰｉがＱ１と合致し、以下Ｐｉ＋２とＱ２〜Ｐｉ＋５とＱ５が合致すると判定される（ステップＳ３０５）。こうしてメタデータに付加された基点群（１）は、同期部２１において設定されたコンテンツの基点分（２）と、符号６３−４で示されたフレーム軸上において合致する。

ここで、Ｃｉ≧４．５ではなく、Ｃｉが最大値を取るｉを求める方法でも良い。

なお、メタデータは基点群（１）からのオフセットとして特定できる。また、基点群を複数設定した場合、複数の基点群を基準にしてメタデータを位置決めすることができてメタデータをフレーム軸上、あるいは時間軸上で特定できる。この場合、メタデータは前後の基点群からのマイナスのオフセットおよびプラスのオフセットとして位置づけてもよい。このようにマイナスのオフセットおよびプラスのオフセットによってメタデータを特定することによって、同期部２１は、過去に遡ってメタデータを特定することができる。そのために、既述のように第２解析部２２はバッファを備えていて、一定時間の過去の受信したコンテンツおよびコンテンツから抽出された基点情報を、一時記憶しておくものである。

（３．３．効果）
コンテンツにおける特徴点が所定値よりも高い、あるいは特徴点が最大となる複数の基点群を抽出して、コンテンツおよびメタデータを同期させることにより、より正確に同期を取り、コンテンツおよびメタデータを対応付けることができる。また、基点を基準にしてマイナスのオフセットおよびプラスのオフセットによってメタデータを特定することによって、コンテンツに対して、過去に遡ってメタデータを特定し、迅速に対応付けることができ、受信するメタデータの無駄を排することができる。

（４．実施例）
（４．１．実施例１）
図９は、コンテンツ・メタデータ送受信システムの実施例１を説明する図である。実施例１によるコンテンツ・メタデータ送受信システムは、プロ野球の映像に対するメタデータを、ホームサーバに配信するシステムである。実施例１では球場９１から、直接映像コンテンツ９２が配信され、メタデータ生成システムシステム９３が受信する。

メタデータ生成システム９３においては第１解析部（不図示）が、既述の実施の形態による方式によって、コンテンツ内容を解析し、時刻合わせの基点を抽出する。それと共に、メタデータ生成部（不図示）が、プロ野球の映像上で発生した事象についてのメタデータを生成していく。その際、時刻情報として、抽出された時刻合わせの基点からのオフセット値を、メタデータ９４に記述していく。図中＜ｔｉｍｅ＞１８：１０−１８：１１＋９００＜／＞が基点からのオフセット情報である。作成したメタデータ９４は、インターネット９５などを通して受信端末であるホームサーバ（９６，９７）に配信される。

ホームサーバ（９６，９７）では、放送衛星９８を介する衛星放送によりプロ野球の映像を受信する。ホームサーバ（９６，９７）は、受信したプロ野球映像と、メタデータを利用して、ホームサーバ（９６，９７）上で映像とメタデータの関連付けを施す。この関連付けを基にして利用者の嗜好を反映して、例えば「松井の打席シーン」のみをホームサーバ（９６，９７）に蓄積したり、得点シーンのみを集めてホームサーバ（９６，９７）に蓄積したりできるので、個人的嗜好に基づいた映像の録画および加工が可能となる。

ここで受信端末であるホームサーバは、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）録画機で構成することができる。実施の形態によるコンテンツおよびメタデータの関連づけを適用して、個人的嗜好に基づいた映像を選択して、ＤＶＤに録画することができる。

また、ここで受信端末であるホームサーバは、ＨＤＤ（Ｈａｒｄ Ｄｉｓｃ Ｄｒｉｖｅ）録画機で構成することができる。実施の形態によるコンテンツおよびメタデータの関連づけを適用して、個人的嗜好に基づいた映像を選択して、ＨＤＤに録画することができる。

また、ここでホームサーバの代わりに受信端末を、携帯型電話機で構成することができる。実施の形態によるコンテンツおよびメタデータの関連づけを適用して、個人的嗜好に基づいた映像を選択して、携帯型電話機で視聴、あるいは録画することができる。

（４．２．実施例２）
図１０は、実施例２によるコンテンツ・メタデータ送受信システムにおいて、動画コンテンツに含まれる無音部を基点として、コンテンツとメタデータとを対応付けることを説明する図である。実施例２によるコンテンツ・メタデータ送受信システムにおいては、コンテンツ配信サーバから送信される動画コンテンツの特徴量として無音部を利用して、時刻合わせの基点を生成する。動画の特徴量を解析するメタデータ配信サーバ１０の第１解析部１２、および受信端末２０の第２解析部２２は、動画コンテンツ（１０１，１０２）に含まれる無音部を検出する。

第１解析部１２は、動画コンテンツ１０１無音部の検出を一定の範囲内において行い、その結果、複数の無音部位置（１０１−１，１０１−２，１０１−３）を検出する。ここでは無音部（１０１−１，１０１−２，１０１−３）に対応するフレームを基点とする。なお、複数の無音部の組み合わせのうち、どの部分を実際の時刻合わせの基点として設定するかは、実装に依存する。例えば実施例２においては、受信端末２０の同期部２１がメタデータ生成部１１から受信する最初の無音部のフレームを時刻合わせの基点とする。

受信端末２０の第２解析部２２が、コンテンツ配信サーバ１から受信した動画コンテンツ１０２上の無音区間（１０２−１，１０２−２，１０２−３）を特徴量として抽出する。そして、同期部２１は、メタデータ配信サーバ１０のメタデータ生成部１１から配信される無音部（１０１−１，１０１−２，１０１−３）の組み合わせ情報と、抽出した無音部（１０２−１，１０２−２，１０２−３）の組合せとを比較して、同じ無音部位置を検出して同期させる。

同期部２１が、無音部位置の同期を判定することによって、動画フレームの基点とメタデータを既述する基点との対応が求まり、対応付けられた無音部による基点からオフセット値で特定されるメタデータの時刻合わせが可能となる。

（４．３．実施例３）
図１１は、実施例３によるコンテンツ・メタデータ送受信システムにおいて、受信端末が、送信されるコンテンツを途中から受信開始した場合のコンテンツおよびメタデータの対応付けを説明する図である。実施例３では、受信端末２０は、コンテンツ配信サーバ１から送信されるコンテンツを、途中から受信開始した場合でも時刻合わせを行うことができる。

メタデータ配信サーバ１０のメタデータ生成部１１は、時刻合わせのための基点情報（１１１−１，１１１−２、１１１−３）を周期的に生成して送信する。受信端末２０において、途中からコンテンツの受信を開始した場合、送信されてきて最初に受信して解析した基点を時刻合わせ情報（１１１−３）として利用する。

送信された時刻合わせの最初の基点（１１５−１）が検出された場合、時刻合わせの基点（１１５−１）よりも早く送信されたメタデータに関しては、直後の時刻合わせのマイナスのオフセット１１６として時刻が指定されているため、時刻合わせの基点を受信する前のメタデータ情報を特定できるので、受信する基点情報を無駄にすることを避けることができる。

このためには、受信端末２０は、送信されるコンテンツを受信して少なくとも一時的に記憶する記憶部（不図示）を備えることによって、マイナスのオフセットで特定されるメタデータをコンテンツに対応付けることができる。

こうして、実施例３においては、最初に受信する基点情報から過去に遡ったマイナスのオフセット値によってメタデータをコンテンツに対応付けるので、受信するメタデータを無駄にすることを避けることができ、効率的にコンテンツおよびメタデータの対応を行うことができる。

（５．ハードウェア構成および記録媒体）
図１２は、実施の形態によるコンテンツ・メタデータ送受信システムにおけるコンテンツ配信サーバ、メタデータ配信サーバ、および受信端末のハードウェア構成例を示す図である。上述したコンテンツ配信サーバ、メタデータ配信サーバ、および受信端末はそれぞれ、あらかじめ用意されたプログラムをパーソナルコンピュータ、ワークステーション、あるいはマイクロコンピュータなどのコンピュータシステムで実行することによって実現できる。コンピュータ２００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１によって装置全体が制御されている。ＣＰＵ２０１には、バス２０７を介してＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２０２、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０３、ハードディスクドライブ（ＨＤＤ：Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）２０４、グラフィック処理装置２０５、入力インタフェース２０６、および通信装置２０８が接続されている。ＲＯＭ２０２、およびＲＡＭ２０３には、ＣＰＵ２０１に実行させるＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）のプログラムやアプリケーションプログラムの少なくとも一部が格納される。またＲＡＭ２０３には、ＣＰＵ２０１による処理に必要な各種データが格納される。ＨＤＤ２０４には、ＯＳ、各種ドライバプログラム、アプリケーションプログラム、検出されたデータなどが格納される。

グラフィック処理装置２０５には、モニタ２１１が接続されている。グラフィック処理装置２０５は、ＣＰＵ２０１からの命令に従って、画像をモニタ２１１の画面に表示させる。入力インタフェース２０６には、キーボード２１２とマウス２１３とが接続されている。入力インタフェース２０６は、キーボード２１２やマウス２１３から送られてくる信号を、バス２０７を介してＣＰＵ２０１に送信する。

以上のようなハードウェア構成によって、本実施の形態の処理機能を実現することができる。本実施の形態をコンピュータ２００上で実現するには、コンピュータ２００にドライバプログラムを実装する。

尚、本実施の形態のコンテンツ配信サーバ、メタデータ配信サーバ、および受信端末で実行されるコンテンツ・メタデータ送受信プログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フロッピー（Ｒ）ディスク、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録されて提供される。

また、本実施形態のコンテンツ・メタデータ送受信プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供および配布するように構成しても良い。

以上のように、本発明にかかるコンテンツ・メタデータ送受信システム、コンテンツ・メタデータ同期方法、その方法をコンピュータに実行させるプログラム、並びにコンテンツおよびメタデータの対応付け可能な受信端末は、コンテンツおよびメタデータを受信して対応付ける映像受信技術に有用であり、特に、コンテンツおよびメタデータを受信して対応付けるホームサーバ、ＤＶＤ録画機、および携帯電話などの映像受信端末に有用である。

実施の形態１によるコンテンツ・メタデータ送受信システムの機能的ブロック図である。 実施の形態１によるコンテンツ・メタデータ送受信システムにおけるコンテンツとメタデータの対応付け動作を説明する図である。 コンテンツおよびメタデータの対応付け手順を説明するフローチャートである。 実施の形態２によるコンテンツ・メタデータ送受信システムの機能的ブロック図である。 メタデータ生成部によるメタデータの生成を説明する図である。 実施の形態２によるコンテンツおよびメタデータの対応付け手順を説明するフローチャートである。 実施の形態３によるコンテンツ・メタデータ送受信システムにおいて、同期部が複数の基点の同期を判定することを説明する図である。 同期部が、第１解析部および第２解析部による複数の基点を比較してコンテンツおよびメタデータの同期を判定する手順を説明するフローチャートである。 コンテンツ・メタデータ送受信システムの実施例１を説明する図である。 実施例２によるコンテンツ・メタデータ送受信システムにおいて、動画コンテンツに含まれる無音部を基点として、コンテンツとメタデータとを対応付けることを説明する図である。 実施例３によるコンテンツ・メタデータ送受信システムにおいて、受信端末が、送信されるコンテンツを途中から受信開始した場合のコンテンツおよびメタデータの対応付けを説明する図である。 実施の形態によるコンテンツ・メタデータ送受信システムにおけるコンテンツ配信サーバ、メタデータ配信サーバ、および受信端末のハードウェア構成例を示す図である。

符号の説明

１ コンテンツ配信サーバ
２、９５ ネットワーク
１０ メタデータ配信サーバ
１１ メタデータ生成部
１２ 第１解析部１２
２０ 受信端末
２１ 同期部
２２ 第２解析部
９６，９７ ホームサーバ

Claims (27)

1. 映像および音声を含むコンテンツを配信するコンテンツ配信サーバと、
   前記コンテンツ配信サーバが配信する前記コンテンツを受信して前記コンテンツに関するメタデータを生成して配信するメタデータ生成手段を有するメタデータ配信サーバと、
   前記コンテンツ配信サーバが配信する前記コンテンツおよび前記メタデータ配信サーバが配信する前記メタデータを受信し、前記コンテンツと前記メタデータとを対応付ける同期手段を有する受信端末と、
   を備えたことを特徴とするコンテンツ・メタデータ送受信システム。
2. 前記コンテンツ配信サーバは、前記コンテンツに時間情報を付加して配信するものであり、
   前記メタデータ生成手段は、前記コンテンツに付加された時間情報に基づいて前記メタデータに時間情報を付加して送信するものであり、
   前記同期手段は、前記メタデータ生成手段によって前記時間情報が付加されたメタデータを受信し、受信した前記メタデータに付加された時間情報と前記コンテンツに付加された時間情報とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項１に記載のコンテンツ・メタデータ送受信システム。
3. 前記メタデータ配信サーバは、受信する前記コンテンツの特徴を表す特徴量を解析する第１の解析手段を、さらに備え、
   前記メタデータ生成手段は、前記第１の解析手段が解析した前記コンテンツの特徴量を前記メタデータに対応づけて配信し、
   前記受信端末は、前記コンテンツの特徴を表す特徴量を解析する第２の解析手段を、さらに備え、
   前記同期手段は、前記メタデータ生成手段が配信する前記第１の解析手段による特徴量の情報を受信し、受信した前記第１の解析手段による特徴量の情報と第２の解析手段による特徴量とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項１または２に記載のコンテンツ・メタデータ送受信システム。
4. 前記メタデータ生成手段は、前記第１の解析手段によって解析された前記特徴量の情報を前記メタデータに付加して配信するものであり、
   前記同期手段は、前記メタデータ生成手段が送信する前記メタデータに付加された前記特徴量の情報を受信し、受信した前記メタデータに付加された特徴量の情報と前記第２の解析手段による特徴量とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項３に記載のコンテンツ・メタデータ送受信システム。
5. 前記メタデータ配信サーバの前記第１の解析手段は、前記第１の解析手段による前記特徴量を所定のしきい値と比較し前記特徴量が前記しきい値以上であると判定した場合、前記特徴量に対応する前記コンテンツの部分をメタデータの基点に設定し、
   前記メタデータ生成手段は、前記第１の解析手段によって設定されたメタデータの基点から前後のオフセット値によって前記メタデータの時刻情報を記述して送信し、
   前記情報端末の前記第２の解析手段は、前記第２の解析手段による前記特徴量を所定のしきい値と比較して前記特徴量が前記しきい値以上であると判定した場合、前記特徴量に対応する前記コンテンツの部分をコンテンツの基点に設定し、
   前記同期手段は、受信する前記第１の解析手段による前記メタデータの基点と前記第２の解析手段による前記コンテンツの基点とに基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項３または４に記載のコンテンツ・メタデータ送受信システム。
6. 前記第１の解析手段は、解析する前記特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された前記１つ以上の特徴量によって前記メタデータの基点を設定して配信し、
   前記第２の解析手段は、解析する前記特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された前記１つ以上の特徴量によって前記コンテンツの基点を設定し、
   前記同期手段は、受信する前記第１の解析手段が設定した前記メタデータの基点と前記第２の解析手段が設定した前記コンテンツの基点とに基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項５に記載のコンテンツ・メタデータ送受信システム。
7. 前記第１の解析手段は、前記メタデータの基点を複数個設定し、
   前記第２の解析手段は、前記コンテンツの基点を複数個設定し、
   前記同期手段は、設定された前記メタデータの複数個の基点および前記コンテンツの複数個の基点に基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項５または６に記載のコンテンツ・メタデータ送受信システム。
8. 前記第１の解析手段は、前記コンテンツのシーンの切り替わる区切りを特徴量として前記メタデータの基点に設定し、
   前記第２の解析手段は、前記コンテンツのシーンの切り替わる区切りを特徴量として前記コンテンツの基点に設定するものであることを特徴とする請求項５または７に記載のコンテンツ・メタデータ送受信システム。
9. 前記メタデータ生成手段は、前記メタデータの時刻情報を、前記メタデータの直前の基点までの過去に遡るオフセットおよび直後の基点へのオフセット値情報として、前記メタデータに付加して配信し、
   前記情報端末の前記同期手段は、前記第２の解析手段によって設定される基点と前記メタデータに付加された前記オフセット値情報により特定される時刻情報とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項５〜８のいずれか１つに記載のコンテンツ・メタデータ送受信システム。
10. 前記第１の解析手段は、前記メタデータの基点を所定の時間で周期的に設定し、
    前記第２の解析手段は、前記コンテンツの基点を所定の時間で周期的に設定し、
    前記同期手段は、前記第１の解析手段が設定した前記メタデータの周期的な基点と前記第２の解析手段が設定した前記コンテンツの周期的な基点とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項５〜９のいずれか１つに記載のコンテンツ・メタデータ送受信システム。
11. 映像および音声を含むコンテンツを配信するコンテンツ配信工程と、
    前記コンテンツ配信工程において配信された前記コンテンツに関するメタデータを生成して配信するメタデータ生成工程と、
    前記コンテンツ配信工程において配信された前記コンテンツと前記メタデータ生成工程において配信されたメタデータとを受信し、受信した前記コンテンツと前記メタデータとを対応付ける同期工程と、
    を含むことを特徴とするコンテンツ・メタデータ同期方法。
12. 前記コンテンツ配信工程は、前記コンテンツに時間情報を付加して配信するものであり、
    前記メタデータ生成工程は、前記コンテンツに付加された時間情報に基づいて前記メタデータに時間情報を付加して送信するものであり、
    前記同期工程は、前記メタデータ生成工程において前記メタデータに付加された前記時間情報と前記コンテンツ配信工程において配信されるコンテンツに付加された前記時間情報とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項１１に記載のコンテンツ・メタデータ同期方法。
13. 受信する前記コンテンツの特徴を表す特徴量を解析する第１の解析工程を、さらに含み、
    前記メタデータ生成工程は、前記第１の解析工程において解析された前記コンテンツの特徴量を前記メタデータに対応付けて配信し、
    受信する前記コンテンツの特徴を表す特徴量を解析する第２の解析工程を、さらに含み、
    前記同期工程は、前記メタデータ生成工程において配信される前記メタデータに対応付けられた前記第１の解析工程による前記コンテンツの特徴量の情報を受信し、受信した前記第１の解析工程による特徴量の情報と前記第２の解析工程による特徴量とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項１１または１２に記載のコンテンツ・メタデータ同期方法。
14. 前記メタデータ生成工程は、前記第１の解析工程において解析された前記特徴量の情報を前記メタデータに付加して配信するものであり、
    前記同期工程は、前記メタデータ生成工程において送信される前記メタデータに付加された前記第１の解析工程による前記特徴量の情報を受信し、受信した前記メタデータに付加された特徴量の情報と前記第２の解析工程において解析された特徴量とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項１３に記載のコンテンツ・メタデータ同期方法。
15. 前記第１の解析工程は、前記第１の解析工程による前記特徴量を所定のしきい値と比較し前記特徴量が前記しきい値以上であると判定した場合、前記特徴量に対応する前記コンテンツの部分をメタデータの基点とし、
    前記メタデータ生成工程は、前記第１の解析工程において設定されたメタデータの基点から前後のオフセット値で前記メタデータの時刻情報を記述して送信するものであり、
    前記第２の解析工程は、前記第２の解析工程による前記特徴量を所定のしきい値と比較して前記特徴量が前記しきい値以上であると判定した場合、前記特徴量に対応する前記コンテンツの部分をコンテンツの基点とし、
    前記同期工程は、受信する前記第１の解析工程による前記メタデータの基点と前記第２の解析工程による前記コンテンツの基点とに基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項１３または１４に記載のコンテンツ・メタデータ同期方法。
16. 前記第１の解析工程は、解析する前記特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された前記１つ以上の特徴量によって前記メタデータの基点を設定して配信し、
    前記第２の解析工程は、解析する前記特徴量として、色特徴、シーンが切り替わるカット点、フレームのマッチング、無音区間、音声パワー、音声スペクトル、および画紋のうちの１つ以上の特徴量を算出し、算出された前記１つ以上の特徴量によって前記コンテンツの基点を設定し、
    前記同期工程は、受信する前記第１の解析工程が設定した前記メタデータの基点と前記第２の解析工程が設定した前記コンテンツの基点とに基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項１５に記載のコンテンツ・メタデータ同期方法。
17. 前記第１の解析工程は、前記メタデータの基点を複数個設定し、
    前記第２の解析工程は、前記コンテンツの基点を複数個設定し、
    前記同期工程は、設定された前記メタデータの複数個の基点および前記コンテンツの複数個の基点に基づいて、前記前後のオフセット値により前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項１５または１６に記載のコンテンツ・メタデータ同期方法。
18. 前記第１の解析工程は、前記コンテンツのシーンの切り替わる区切りを特徴量として前記メタデータの基点に設定し、
    前記第２の解析工程は、前記コンテンツのシーンの切り替わる区切りを特徴量として前記コンテンツの基点に設定するものであることを特徴とする請求項１５または１７に記載のコンテンツ・メタデータ同期方法。
19. 前記メタデータ生成工程は、前記メタデータの時刻情報を、前記メタデータの直前の基点までの過去に遡るオフセットおよび直後の基点へのオフセット値情報として、前記メタデータに付加して配信し、
    前記同期工程は、前記第２の解析工程において設定される基点と前記メタデータに付加された前記オフセット値情報により特定される時刻情報とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項１５〜１８のいずれか１つに記載のコンテンツ・メタデータ同期方法。
20. 前記第１の解析工程は、前記メタデータの基点を所定の時間で周期的に設定し、
    前記第２の解析工程は、前記コンテンツの基点を所定の時間で周期的に設定し、
    前記同期工程は、前記第１の解析工程が設定した前記メタデータの周期的な基点と前記第２の解析工程が設定した前記コンテンツの周期的な基点とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項１５〜１９のいずれか１つに記載のコンテンツ・メタデータ同期方法。
21. 請求項１１〜２０のいずれか１つに記載のコンテンツ・メタデータ同期方法をコンピュータに実行させることを特徴とするプログラム。
22. コンテンツ配信サーバから配信される映像および音声を含むコンテンツと、メタデータ配信サーバによって前記コンテンツを基に生成されたメタデータとを受信し、受信した前記コンテンツおよび前記メタデータを対応付ける同期手段を有する同期装置を備えたことを特徴とするコンテンツおよびメタデータの対応付け可能な受信端末。
23. 前記コンテンツ配信サーバによって前記コンテンツに時間情報が付加されて配信され、前記メタデータ配信サーバにより前記時間情報が前記メタデータに付加されて生成された場合、
    前記同期装置は、前記同期手段が、前記メタデータ配信サーバにより生成された前記時間情報が付加されたメタデータを受信し、受信した前記メタデータに付加された時間情報と、前記コンテンツ配信サーバから受信する前記コンテンツに付加された時間情報とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項２２に記載のコンテンツおよびメタデータの対応付け可能な受信端末。
24. 前記メタデータ配信サーバにより前記コンテンツの特徴を表す特徴量が解析され、解析された前記コンテンツの特徴量が前記メタデータに対応づけて配信される場合、
    前記同期装置は、前記コンテンツ配信サーバから受信する前記コンテンツの特徴量を解析する解析手段をさらに有し、
    前記同期手段が、前記メタデータ配信サーバから前記メタデータに対応づけて配信される前記コンテンツの特徴量を受信し、前記メタデータ配信サーバによる前記メタデータに対応づけられた前記コンテンツの特徴量と、前記解析手段によって解析された前記コンテンツの特徴量とに基づいて、前記コンテンツと前記メタデータとを対応付けるものであることを特徴とする請求項２２または２３に記載のコンテンツおよびメタデータの対応付け可能な受信端末。
25. 前記受信端末は、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）録画機であることを特徴とする請求項２２〜２４のいずれか１つに記載のコンテンツおよびメタデータの対応付け可能な受信端末。
26. 前記受信端末は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｃ Ｄｒｉｖｅ）録画機であることを特徴とする請求項２２〜２４のいずれか１つに記載のコンテンツおよびメタデータの対応付け可能な受信端末。
27. 前記受信端末は、携帯型電話機であることを特徴とする請求項２２〜２４のいずれか１つに記載のコンテンツおよびメタデータの対応付け可能な受信端末。

Images