JP2005229414A - 情報処理装置および情報処理方法、プログラム、並びに、情報処理システム - Google Patents

Abstract

【課題】 検索キーに対応する再生開始位置を検出する。
【解決手段】 検索キー「車椅子」を含むテキストの開始時刻「１９:００:４６:０１」および終了時刻「１９：００：５６：５１」が検出されて、テキストの表示時間１０．５秒が算出され、テキストの音の数２５で、テキストの表示時間が除算されることにより、テキスト表示時間に対する音声データの１音の発話時間の推定値０．４２秒が算出される。したがって、１２音目である「車椅子」が発話された時刻は、テキストの開始時刻から（０．４２×１２）秒だけ遅れた、「１９：００：５０：６３」であると推定される。ここで、テキストに対応する音声データが、一定の速度で発話されない場合、「車椅子」が発話されたタイミングを検索できない可能性があるので、推定された発話時刻から所定の時間Δｔだけ早い時刻が再生開始位置として検出される。本発明は、ホームサーバに適用できる。
【選択図】図８

Description

本発明は、情報処理装置および情報処理方法、プログラム、並びに、情報処理システムに関し、特に、放送信号に含まれている字幕情報を用いて、録画した放送番組を検索する場合に用いて好適な、情報処理装置および情報処理方法、プログラム、並びに、情報処理システムに関する。

放送される番組のデータには、映像データと音声データが含まれている。また、番組データには、映像データとして必ず表示される、いわゆる字幕（番組の題名やキャストなどの紹介、または、海外の作品における日本語字幕）以外に、表示させるか否かを選択可能な字幕データが含まれる。このような選択可能な字幕データは、一般に、クローズドキャプションと称され、主に、聴覚障害者用に開発され、海外の作品における日本語字幕のように、出演者の会話だけではなく、例えば、ＢＧＭや効果音などの説明も含まれる。

例えば、NTSC方式のアナログの地上波放送では、映像信号に525本の走査線が用いられており、この525本のうち、各フィールド(２フィールドで１フレームを構成)の最初の２１本相当は、VBI（Vertical Blanking Interval：垂直帰線消去期間）と称される、走査を開始するためのインターバル用に割り当てられている。クローズドキャプションは、各フィールドのVBIのうち、VBIの２１本目に７ｂitの文字コードを多重化することによって伝送されるようになされており、各フィールドを使って２種類の文字セットを毎秒約60文字伝送することができるようになされている。

また、デジタルテレビ放送の字幕情報の伝送については、国内規定であるＢＳデジタル放送運用規定・技術資料（ＡＲＩＢ ＴＲ−Ｂ１５）で規定されているように、字幕情報用のトランスポートストリームを使って映像情報の伝送と同時に字幕情報を伝送できるようになされている。そして、デジタルテレビ放送用受信機において、字幕情報に対応する符号がデコードされ、字幕を構成する文字、図形が生成されて、映像に重畳されて表示されるようになされている。

デジタルテレビ放送において、字幕情報用のトランスポートストリームを使って映像情報の伝送と同時に伝送されたテキスト情報を、内部に保存したり、内部に保存したテキスト情報をテレビモニタでいつでも表示閲覧することができるようにすることにより、ユーザが、表示された字幕のメモを取らなくても、字幕の情報を活用することができるようにした技術がある（例えば、特許文献１）。

特開２００３−７８８８９

また、視聴者の操作、または、受信した字幕放送により、自動的にＣＭ番組、文字情報、または、通信データを保存し、視聴者が保存された情報を利用して、放送局あるいはＣＭ提供者に通信することにより、ＣＭ商品の購入を行うことができるようにした技術がある（例えば、特許文献２）。

特開２００２−７７８７２

なお、放送信号中の映像データと音声データとには、例えば、放送時にリアルタイムで視聴される以外に、録画されて再生された場合において時間軸がずれてしまうことがないように、例えば、それぞれが対応するようなリンク情報を有しているか、相対時刻のタイムスタンプを有するようになされている。これに対して、字幕データは、映像データまたは音声データに対するリンクデータや、相対時刻のタイムスタンプなどを有していない。

上述したように、放送される字幕データは、さまざまなサービスに利用され始めている。

しかしながら、クローズドキャプションなどの放送される字幕データを、録画された番組を検索することに利用しようとした場合、字幕データと映像データまたは音声データとには、アナログ放送またはデジタル放送のいずれにおいても、両者を対応させるようなタイムスタンプが付加されていないため、映像データからクローズドキャプションに対応するテキストデータを分離してしまった後、分離されたテキストと映像データとの対応をとることは不可能であり、したがって、クローズドキャプションから取得されるテキストを録画データの検索に利用することはできなかった。

また、クローズドキャプションから取得されるテキストを録画データの検索に利用することができたとしても、ユーザが所望するテキストに対応する録画データを検索するとき、クローズドキャプションから取得される全テキストから、ユーザが所望するテキストを検索しなければならないため、例えば、数値データの検索と比較して、その処理は複雑となってしまい、検索処理にも時間がかかってしまう。

そして、クローズドキャプションなど、聴覚障害者向けの字幕データは全ての放送信号に添付させることが求められている。しかしながら、このような字幕データは、通常、健常者には必要ではないため、字幕データ作成に必要な費用を捻出するためにスポンサーがつく可能性はほぼなく、作成にかかる費用を放送局が負担しているのが現状である。したがって、聴覚障害者にとって不利益であるにもかかわらず、クローズドキャプションなど、聴覚障害者向けの字幕データが放送信号に添付されている割合は低迷したままであり、問題となっている。ここで、これらの字幕データを２次的に利用することにより、字幕データ作成に対する放送局への対価を回収することが可能なシステムが構築されることは、産業の発展に貢献可能であるのみならず、字幕データが放送信号に添付される割合を向上することにつながるため、聴覚障害者にとっても有益である。

本発明はこのような状況に鑑みてなされたものであり、いわゆるクローズドキャプションなどの字幕データを利用して、録画データの検索を可能とするものである。

本発明の情報処理装置は、第１の時刻情報が付加された録画データの記憶を制御する録画データ記憶制御手段と、録画データの番組を区別するための区別情報、録画データに関するテキストデータ、および、テキストデータに対応する第２の時刻情報を含むメタデータを記憶するメタデータ記憶手段と、ユーザの操作入力を受ける操作入力手段と、操作入力手段によりユーザから入力された、検索を実行する番組を指定する情報および検索キーとなるテキスト情報と、メタデータ記憶手段により記憶されたメタデータとのマッチング処理を実行して、検索キーとなるテキスト情報に対応する第２の時刻情報およびテキストデータを検出するマッチング処理手段と、録画データ記憶制御手段により記憶が制御されている録画データから、マッチング処理手段により検出された第２の時刻情報に対応する記録位置を検索し、検索されたテキストデータのうち、検索キーとなるテキスト情報と一致するテキストの位置を検出して、検出結果に基づいて録画データを検索して読み出す検索手段とを備えることを特徴とする。

検索手段には、検索キーとなるテキスト情報と一致するテキストの位置より所定時間だけ前の時刻を、録画データの読み出しの開始位置として検索させるようにすることができる

暗号化されたメタデータを取得するメタデータ取得手段と、暗号化されたメタデータを復号するために用いられる鍵情報を取得する鍵情報取得手段と、メタデータ取得手段により取得された暗号化されたメタデータを、鍵情報取得手段により取得された鍵情報を用いて復号する復号処理手段とを更に備えさせるようにすることができ、メタデータ記憶手段により記憶されるメタデータは、復号処理手段により復号されたメタデータであるものとすることができる。

本発明の情報処理方法は、録画データの番組を区別するための区別情報、録画データに関するテキストデータ、および、テキストデータに対応する第２の時刻情報を含むメタデータの記憶を制御するメタデータ記憶制御ステップと、検索を実行する番組を指定する情報および検索キーとなるテキスト情報の入力を制御する入力制御ステップと、入力制御ステップの処理により入力が制御された番組を指定する情報およびテキスト情報と、メタデータとのマッチング処理を実行して、テキスト情報に対応する第２の時刻情報と、テキスト情報を含むテキストデータを検出する検出ステップと、検出ステップの処理により検出されたテキストデータのうち、テキスト情報の位置を算出する算出ステップと、検出ステップの処理により検出された第２の時刻情報に対応する記録位置を検索し、検索された記録位置、および、算出ステップの処理により算出されたテキストデータのうちのテキスト情報の位置を基に、録画データを検索して読み出す読み出しステップとを含むことを特徴とする。

本発明のプログラムは、録画データの番組を区別するための区別情報、録画データに関するテキストデータ、および、テキストデータに対応する第２の時刻情報を含むメタデータの記憶を制御するメタデータ記憶制御ステップと、検索を実行する番組を指定する情報および検索キーとなるテキスト情報の入力を制御する入力制御ステップと、入力制御ステップの処理により入力が制御された番組を指定する情報およびテキスト情報と、メタデータとのマッチング処理を実行して、テキスト情報に対応する第２の時刻情報と、テキスト情報を含むテキストデータを検出する検出ステップと、検出ステップの処理により検出されたテキストデータのうち、テキスト情報の位置を算出する算出ステップと、検出ステップの処理により検出された第２の時刻情報に対応する記録位置を検索し、検索された記録位置、および、算出ステップの処理により算出されたテキストデータのうちのテキスト情報の位置を基に、録画データを検索して読み出す読み出しステップとを含むことを特徴とする処理をコンピュータに実行させる。

本発明の情報処理装置および情報処理方法、並びに、プログラムにおいては、第１の時刻情報が付加された録画データの番組を区別するための区別情報、録画データに関するテキストデータ、および、テキストデータに対応する第２の時刻情報を含むメタデータが記憶され、検索を実行する番組を指定する情報および検索キーとなるテキスト情報が入力され、番組を指定する情報およびテキスト情報と、メタデータとのマッチング処理が実行されて、テキスト情報に対応する第２の時刻情報とテキスト情報を含むテキストデータとが検出され、検出されたテキストデータのうちのテキスト情報の位置が算出され、第２の時刻情報に対応する記録位置が検索されて、検索された記録位置、および、算出されたテキストデータのうちのテキスト情報の位置を基に、録画データが検索されて読み出される。

本発明の情報処理システムは、放送信号を取得して処理する第１の情報処理装置と、テキスト情報を検索キーとして、録画データを検索する第２の情報処理装置と、第２の情報処理装置で実行される検索処理に利用されるメタデータを生成する第３の情報処理装置と、第２の情報処理装置で実行される検索処理に利用されるメタデータを復号する復号鍵を供給する第４の情報処理装置とによって構成される情報処理システムであって、第１の情報処理装置が、放送信号を取得する第１の放送信号取得手段と、第１の放送信号取得手段により取得された放送信号から、放送信号の番組を固有に区別可能な区別情報を取得する第１の区別情報取得手段と、第１の放送信号取得手段により取得された放送信号に、第１の時刻情報と、第１の区別情報取得手段により取得された区別情報とを付加して録画データを生成する情報付加手段とを備え、第２の情報処理装置が、第１の時刻情報と区別情報とが付加された録画データの記憶を制御する録画データ記憶制御手段と、暗号化されたメタデータを取得するメタデータ取得手段と、暗号化されたメタデータを復号するために用いられる復号鍵を取得する復号鍵取得手段と、メタデータ取得手段により取得された暗号化されたメタデータを、復号鍵取得手段により取得された復号鍵を用いて復号する復号処理手段と、復号処理手段により復号された、録画データの番組を区別するための区別情報、録画データに関するテキストデータ、および、テキストデータに対応する第２の時刻情報を含むメタデータを記憶するメタデータ記憶手段と、ユーザの操作入力を受ける操作入力手段と、操作入力手段によりユーザから入力された、検索を実行する番組を指定する情報および検索キーとなるテキスト情報と、メタデータ記憶手段により記憶されたメタデータとのマッチング処理を実行して、検索キーとなるテキスト情報に対応する第２の時刻情報およびテキストデータを検出するマッチング処理手段と、録画データ記憶制御手段により記憶が制御されている録画データから、マッチング処理手段により検出された第２の時刻情報に対応する記録位置を検索し、検索されたテキストデータのうち、検索キーとなるテキスト情報と一致するテキストの位置を検出して、検出結果に基づいて録画データを検索して読み出す検索手段とを備え、第３の情報処理装置が、放送信号を取得する第２の放送信号取得手段と、第２の放送信号取得手段により取得された放送信号から、放送信号の番組を固有に区別可能な区別情報を取得する第２の区別情報取得手段と、第２の放送信号取得手段により取得された放送信号から、ユーザにより表示するか否かを選択することが可能な字幕データを抽出してデコードする字幕データデコード手段と、字幕データデコード手段によりデコードされた字幕データに対応するテキストデータにタイムコードを付加するタイムコード付加手段と、タイムコード付加手段によりタイムコードが付加されたテキストデータに、区別情報取得手段により取得された区別情報を付加して、メタデータを生成するメタデータ生成手段と、メタデータ生成手段により生成されたメタデータを暗号化する暗号化手段とを備え、第４の情報処理装置は、第２の情報処理装置から、ユーザの認証に関する情報を取得する認証情報取得手段と、ユーザの登録情報の記憶を制御する登録情報記憶制御手段と、認証情報取得手段により取得されたユーザの認証に関する情報、および、登録情報記憶制御手段により記憶が制御されているユーザの登録情報を基に、認証処理を実行する認証処理手段と、認証処理手段によりユーザが正しく認証された場合、第２の情報処理装置への、メタデータを復号する復号鍵の供給を制御する復号鍵供給制御手段とを備えることを特徴とする。

本発明の情報処理システムは、第１の情報処理装置で、放送信号が取得され、取得された放送信号から、放送信号の番組を固有に区別可能な区別情報が取得され、取得された放送信号に、第１の時刻情報と区別情報とを付加して録画データが生成され、第２の情報処理装置で、第１の時刻情報と区別情報とが付加された録画データが記憶され、暗号化されたメタデータが取得され、暗号化されたメタデータを復号するために用いられる復号鍵が取得され、暗号化されたメタデータが復号鍵を用いて復号され、録画データの番組を区別するための区別情報、録画データに関するテキストデータ、および、テキストデータに対応する第２の時刻情報を含む、復号されたメタデータが記憶され、ユーザの操作入力を受け、ユーザから入力された、検索を実行する番組を指定する情報および検索キーとなるテキスト情報と、メタデータとのマッチング処理が実行されて、検索キーとなるテキスト情報に対応する第２の時刻情報およびテキストデータが検出され、記録されている録画データから、検出された第２の時刻情報に対応する記録位置が検索されて、検索されたテキストデータのうち、検索キーとなるテキスト情報と一致するテキストの位置が検出されて、検出結果に基づいて録画データが検索されて読み出され、第３の情報処理装置で、放送信号が取得され、取得された放送信号から、放送信号の番組を固有に区別可能な区別情報が取得され、取得された放送信号から、ユーザにより表示するか否かを選択することが可能な字幕データが抽出されてデコードされ、デコードされた字幕データに対応するテキストデータにタイムコードが付加され、タイムコードが付加されたテキストデータに、区別情報が付加されて、メタデータが生成され、メタデータが暗号化され、第４の情報処理装置で、第２の情報処理装置からユーザの認証に関する情報が取得され、ユーザの登録情報が記憶され、ユーザの認証に関する情報、および、ユーザの登録情報を基に、認証処理が実行され、ユーザが正しく認証された場合、第２の情報処理装置へメタデータを復号する復号鍵が供給される。

第１の本発明によれば、検索キーとなるテキスト情報を基に、録画データを検索することができ、特に、検索キーとなるテキスト情報に対応する情報の位置を精度良く検出して、その位置から録画データを読み出すことができる。

第２の本発明によれば、メタデータと録画データが生成され、検索キーとなるテキスト情報を基に、メタデータを利用して、録画データを検索することができ、特に、メタデータを用いて、検索キーとなるテキスト情報に対応する情報の位置を精度良く検出して、その位置から録画データを読み出すことができる。

以下に本発明の実施の形態を説明するが、本明細書に記載の発明と、発明の実施の形態との対応関係を例示すると、次のようになる。この記載は、本明細書に記載されている発明をサポートする実施の形態が、本明細書に記載されていることを確認するためのものである。したがって、発明の実施の形態中には記載されているが、発明に対応するものとして、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その発明に対応するものではないことを意味するものではない。逆に、実施の形態が発明に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その発明以外の発明には対応しないものであることを意味するものでもない。

更に、この記載は、本明細書に記載されている発明の全てを意味するものでもない。換言すれば、この記載は、本明細書に記載されている発明であって、この出願では請求されていない発明の存在、すなわち、将来、分割出願されたり、補正により出現、追加される発明の存在を否定するものではない。

請求項１に記載の情報処理装置（例えば、図３のホームサーバ４）は、第１の時刻情報（例えば、図４の録画開始時刻情報９５）が付加された録画データの記憶を制御する録画データ記憶制御手段（例えば、図３の録画データ記憶部７２）と、録画データの番組を区別するための区別情報（例えば、図７の番組ＩＤ１６７）、録画データに関するテキストデータ（例えば、図７のテキストデータ１６５）、および、テキストデータに対応する第２の時刻情報（例えば、図７のタイムコード１６６）を含むメタデータ（例えば、図７のメタデータ１６１）を記憶するメタデータ記憶手段（例えば、図３のメタデータ記憶部７８）と、ユーザの操作入力を受ける操作入力手段（例えば、図３の操作入力部７１）と、操作入力手段によりユーザから入力された、検索を実行する番組を指定する情報および検索キーとなるテキスト情報と、メタデータ記憶手段により記憶されたメタデータとのマッチング処理を実行して、検索キーとなるテキスト情報に対応する第２の時刻情報およびテキストデータを検出するマッチング処理手段（例えば、図３のマッチング処理部７９）と、録画データ記憶制御手段により記憶が制御されている録画データから、マッチング処理手段により検出された第２の時刻情報に対応する記録位置を検索し、検索されたテキストデータのうち、検索キーとなるテキスト情報と一致するテキストの位置を検出して、検出結果に基づいて録画データを検索して読み出す検索手段（例えば、図３の録画データ検索出力部８０）とを備えることを特徴とする。

検索手段は、検索キーとなるテキスト情報と一致するテキストの位置より所定時間（例えば、図８に示されるΔｔ）だけ前の時刻を、録画データの読み出しの開始位置として検索することができる。

暗号化されたメタデータを取得するメタデータ取得手段（例えば、図３のネットワークインターフェース７３）と、暗号化されたメタデータを復号するために用いられる鍵情報を取得する鍵情報取得手段（例えば、図３のネットワークインターフェース７３）と、メタデータ取得手段により取得された暗号化されたメタデータを、鍵情報取得手段により取得された鍵情報を用いて復号する復号処理手段（例えば、図３の復号処理部７７）とを更に備えることができ、メタデータ記憶手段により記憶されるメタデータは、復号処理手段により復号されたメタデータであるものとすることができる。

請求項４の情報処理方法は、メタデータを利用して、第１の時刻情報が付加された録画データを検索する情報処理装置（例えば、図３のホームサーバ４）の情報処理方法であって、録画データの番組を区別するための区別情報（例えば、図７の番組ＩＤ１６７）、録画データに関するテキストデータ（例えば、図７のテキストデータ１６５）、および、テキストデータに対応する第２の時刻情報（例えば、図７のタイムコード１６６）を含むメタデータ（例えば、図７のメタデータ１６１）の記憶を制御するメタデータ記憶制御ステップ（例えば、図１７のステップＳ１５０の処理）と、検索を実行する番組を指定する情報および検索キーとなるテキスト情報の入力を制御する入力制御ステップ（例えば、図１９のステップＳ１８１およびステップＳ１８２の処理）と、入力制御ステップの処理により入力が制御された番組を指定する情報およびテキスト情報と、メタデータとのマッチング処理を実行して、テキスト情報に対応する第２の時刻情報と、テキスト情報を含むテキストデータを検出する検出ステップ（例えば、図１９のステップＳ１８３の処理）と、検出ステップの処理により検出されたテキストデータのうち、テキスト情報の位置を算出する算出ステップ（例えば、図１９のステップＳ１８４の処理）と、検出ステップの処理により検出された第２の時刻情報に対応する記録位置を検索し、検索された記録位置、および、算出ステップの処理により算出されたテキストデータのうちのテキスト情報の位置を基に、録画データを検索して読み出す読み出しステップ（例えば、図１９のステップＳ１８５の処理）とを含むことを特徴とする。

また、請求項５に記載のプログラムにおいても、各ステップが対応する実施の形態（但し一例）は、請求項４に記載の情報処理方法と同様である。

請求項６の情報処理システムは、放送信号を取得して処理する第１の情報処理装置（例えば、図３の表示選択字幕デコーダ３）と、テキスト情報を検索キーとして、録画データを検索する第２の情報処理装置（例えば、図３のホームサーバ４）と、第２の情報処理装置で実行される検索処理に利用されるメタデータを生成する第３の情報処理装置（例えば、図５および図６のメタデータ作成サーバ６）と、第２の情報処理装置で実行される検索処理に利用されるメタデータを復号する復号鍵を供給する第４の情報処理装置（例えば、図９および図１０の課金サーバ７）とによって構成される情報処理システムであって、第１の情報処理装置は、放送信号を取得する第１の放送信号取得手段（例えば、図３の入力端子２１−１および２１−２）と、第１の放送信号取得手段により取得された放送信号から、放送信号の番組を固有に区別可能な区別情報（例えば、番組ＩＤ）を取得する第１の区別情報取得手段（例えば、図３の番組ＩＤ情報抽出部３９）と、第１の放送信号取得手段により取得された放送信号に、第１の時刻情報（たとえば、図４の録画開始時刻情報９５）と、第１の区別情報取得手段により取得された区別情報とを付加して録画データを生成する情報付加手段（例えば、図３の出力信号生成部３３）とを備え、第２の情報処理装置は、第１の時刻情報と区別情報とが付加された録画データの記憶を制御する録画データ記憶制御手段（例えば、図３の録画データ記憶部７２）と、暗号化されたメタデータを取得するメタデータ取得手段（例えば、図３のネットワークインターフェース７３）と、暗号化されたメタデータを復号するために用いられる復号鍵を取得する復号鍵取得手段（例えば、図３のネットワークインターフェース７３）と、メタデータ取得手段により取得された暗号化されたメタデータを、復号鍵取得手段により取得された復号鍵を用いて復号する復号処理手段（例えば、図３の復号処理部７７）と、復号処理手段により復号された、録画データの番組を区別するための区別情報（例えば、図７の番組ＩＤ１６７）、録画データに関するテキストデータ（例えば、図７のテキストデータ１６５）、および、テキストデータに対応する第２の時刻情報（例えば、図７のタイムコード１６６）を含むメタデータ（例えば、図７のメタデータ１６１）を記憶するメタデータ記憶手段（例えば、図３のメタデータ記憶部７８）と、ユーザの操作入力を受ける操作入力手段（例えば、図３の操作入力部７１）と、操作入力手段によりユーザから入力された、検索を実行する番組を指定する情報および検索キーとなるテキスト情報と、メタデータ記憶手段により記憶されたメタデータとのマッチング処理を実行して、検索キーとなるテキスト情報に対応する第２の時刻情報およびテキストデータを検出するマッチング処理手段（例えば、図３のマッチング処理部７９）と、録画データ記憶制御手段により記憶が制御されている録画データから、マッチング処理手段により検出された第２の時刻情報に対応する記録位置を検索し、検索されたテキストデータのうち、検索キーとなるテキスト情報と一致するテキストの位置を検出して、検出結果に基づいて録画データを検索して読み出す検索手段（例えば、図３の録画データ検索出力部８０）とを備え、第３の情報処理装置は、放送信号を取得する第２の放送信号取得手段（例えば、図６の放送データ取得部１４１）と、第２の放送信号取得手段により取得された放送信号から、放送信号の番組を固有に区別可能な区別情報（例えば、番組ＩＤ）を取得する第２の区別情報取得手段（例えば、図６の番組ＩＤ情報抽出部１４３）と、第２の放送信号取得手段により取得された放送信号から、ユーザにより表示するか否かを選択することが可能な字幕データ（例えば、図２の表示選択字幕データ１７）を抽出してデコードする字幕データデコード手段（例えば、図６の表示選択字幕データデコーダ１４５）と、字幕データデコード手段によりデコードされた字幕データに対応するテキストデータにタイムコードを付加するタイムコード付加手段（例えば、図６のタイムコード付加処理部１４７）と、タイムコード付加手段によりタイムコードが付加されたテキストデータに、区別情報取得手段により取得された区別情報を付加して、メタデータを生成するメタデータ生成手段（例えば、図６のメタデータ生成部１４４）と、メタデータ生成手段により生成されたメタデータを暗号化する暗号化手段（例えば、図６の暗号化処理部１４９）とを備え、第４の情報処理装置は、第２の情報処理装置から、ユーザの認証に関する情報を取得する認証情報取得手段（例えば、図１０の操作入力情報取得部２０４）と、ユーザの登録情報の記憶を制御する登録情報記憶制御手段と（例えば、図１０のユーザ情報データベース２０６）、認証情報取得手段により取得されたユーザの認証に関する情報、および、登録情報記憶制御手段により記憶が制御されているユーザの登録情報を基に、認証処理を実行する認証処理手段（例えば、図１０の認証処理部２０７）と、認証処理手段によりユーザが正しく認証された場合、第２の情報処理装置への、メタデータを復号する復号鍵の供給を制御する復号鍵供給制御手段（例えば、図１０の鍵供給処理部２０８）とを備えることを特徴とする。

以下、図を参照して、本発明の実施の形態について説明する。

図１は、本発明を適用した情報処理システムの構成について説明するためのシステム図である。

放送局１は、地上波、または、衛星波などを用いて、番組を放送する。放送される番組のデータには、映像データと音声データが含まれる。また、番組データには、映像データとして必ず表示される、いわゆる字幕（番組の題名やキャストなどの紹介、または、海外の作品における日本語字幕）以外に、表示させるか否かを選択可能な字幕データが含まれる。このような選択可能な字幕データ（いわゆる、クローズドキャプション）には、海外の作品における日本語字幕のような出演者の会話に対応するテキストデータのみならず、例えば、ＢＧＭや効果音などの説明も含まれていてもよい。

例えば、NTSC方式のアナログの地上波放送では、映像信号に525本の走査線が用いられており、この525本のうち、各フィールド(２フィールドで１フレームを構成)の最初の２１本相当は、VBI（Vertical Blanking Interval：垂直帰線消去期間）と称される、走査を開始するためのインターバル用に割り当てられている。クローズドキャプションは、各フィールドのVBIのうち、VBIの２１本目に７ｂitの文字コードを多重化することによって伝送されるようになされており、各フィールドを使って２種類の文字セットを毎秒約60文字伝送することができるようになされている。以下、クローズドキャプションに代表される、表示と非表示を選択可能な字幕データを、表示選択字幕データと称するものとする。

映像データ、音声データ、表示選択字幕データの具体的な例について、図２を用いて説明する。

映像データ１５は、動画像データであり、図２においては、動画像データ中の、いくつかのタイミングにおけるフレーム画像データを抽出して図示している。音声データ１６は、映像データ１５と同時再生されるべき音声データである。表示選択字幕データ１７は、例えば、音声データ１７に対応するテキストデータであってもかまわないし、音声データに対応するテキストデータ以外の、音声データが会話である場合に、発話者を説明するためのテキストデータなどが含まれるようにしても良い。映像データ１５と音声データ１６は、例えば、それぞれ対応するようなリンク情報を有しているか、相対時刻のタイムスタンプを有することにより、例えば、放送時にリアルタイムで視聴される以外に、録画されて再生された場合においても時間軸がずれてしまうことがないようになされている。これに対して、表示選択字幕データ１７は、再生時にデコードされるまで、映像データと同一に扱われることしか想定されていないため、映像データ１５または音声データ１６に対するリンクデータや、相対時刻のタイムスタンプなどを有していない。

再び、図１の説明に戻る。

ユーザは、テレビジョン受像機２を用いて、図２を用いて説明した表示選択字幕データ１７を含む映像データ１５、および、音声データ１６で構成される放送信号を受信する。表示選択字幕データを表示させる必要がなく、かつ、表示選択字幕データを用いた、後述する検索処理を行わないユーザは、表示選択字幕デコーダ３を用いなくても、チューナ１１によって選局された放送信号を、映像および音声信号処理部１２において復調し、映像信号を出力部１３のディスプレイに表示するとともに、音声信号を出力部１３のスピーカに出力して、番組を視聴することが可能である。

表示選択字幕デコーダ３は、テレビジョン受像機２のチューナ１１によって選局された放送信号の入力を受け、映像信号および音声信号をデコードするとともに、ユーザの操作入力に基づいて、表示選択字幕データを抽出してデコードし、出力部１３に出力して表示および音声出力させることができる。更に、表示選択字幕デコーダ３は、テレビジョン受像機２のチューナ１１によって選局された放送信号の入力を受け、放送信号を処理することにより、ホームサーバ４がインターネット５を介してメタデータ作成サーバ６から取得したメタデータを用いて検索処理を実行することが可能な、タイムスタンプつき録画データを生成して、ホームサーバ４に供給することができる。また、表示選択字幕デコーダ３は、ホームサーバにより録画され、検索処理により再生位置が指定された録画データの供給を受け、表示選択字幕を必要に応じてデコードして、出力部１３に出力して表示および音声出力させることができる。

ホームサーバ４は、ユーザの操作入力に基づいて、表示選択字幕デコーダ３により生成されたタイムスタンプつき録画データの供給を受けて内部の記録媒体に記録（すなわち、録画）する。また、ホームサーバ４は、インターネット５を介して、メタデータ作成サーバ６から、表示選択字幕データに対応するテキストデータと、テキストデータに対応するタイムコードにより構成されるメタデータの供給を受けるとともに、課金サーバ７から、メタデータを復号するための鍵データの供給を受けてメタデータを復号し、復号されたメタデータを用いて、ユーザが入力したテキストとメタデータとのマッチング処理を実行する。そして、マッチング処理の結果、ユーザが入力したテキストを含むテキストデータおよびテキストデータに対応するタイムコードが検出され、タイムコードおよびテキストデータを基に、ユーザが入力したテキストに対応する録画データの再生位置が検出されて、検出された再生位置から録画データが読み出されて、表示選択字幕デコーダ３に供給される。検索処理の詳細については後述する。ここで、検索される「番組」とは、例えば、２時間ドラマなどのプログラムの全体であっても、１つのプログラムがコマーシャルなどで区切られている場合の区切られた１単位ごとでも、複数のプログラムを含むものであっても、更に、コマーシャルを含むものやコマーシャルのみを示すものであっても良い。

メタデータ作成サーバ６は、インターネット５を介して、または、所定の媒体を介して、もしくは、図示しないアンテナより受信することにより、放送局１が作成した表示選択字幕データつきの放送信号を取得し、それを基に、メタデータを作成して、作成したメタデータを暗号化する。また、メタデータ作成サーバ６は、暗号化されたメタデータを、インターネット５を介してユーザに配布するためのウェブページをインターネット５に公開し、例えば、ホームサーバ４や、図示しないパーソナルコンピュータなどを用いたユーザからのアクセスを受け、ユーザが所望した番組の検索に利用される暗号化されたメタデータを、インターネット５を介してダウンロードさせる。

課金サーバ７は、メタデータ作成サーバ６が作成し暗号化してユーザに配布したメタデータを復号するための復号鍵を、インターネット５を介してユーザに配布するためのウェブページをインターネット５に公開し、例えば、ホームサーバ４や、図示しないパーソナルコンピュータなどを用いたユーザからのアクセスを受け、ユーザが所望したメタデータの復号鍵に対する対価の決済を行ったうえで、ユーザに鍵を配布する。また、課金サーバ７は、表示選択字幕データを作成した放送局１に対する対価を放送局１に対して支払うための課金処理を実行する。

図３は、図１の表示選択字幕デコーダ３と、ホームサーバ４との構成を示すブロック図である。

テレビジョン受像機２のチューナ１１により選局された放送信号のうち、表示選択字幕データを含む映像信号は、入力端子２１−１より映像信号デコーダ３１に供給され、音声信号は、入力端子２１−２より音声信号デコーダ３４に入力される。

映像信号デコーダ３１は、供給された映像信号をデコードし、デコードされた映像データをメモリ３２に供給する。メモリ３２は、供給された映像信号を一時保持するフレームメモリである。音声信号デコーダ３４は、供給された音声信号をデコードし、デコードされた音声データを出力する。

操作入力部４１により入力されたユーザの操作により、受信された放送信号をリアルタイムに出力する、すなわち、現在放送中の番組を視聴することが指令された場合、表示選択字幕データデコーダ３５は、メモリ３２から映像データを取得する。そして、操作入力部４１により入力されたユーザの操作により、表示選択字幕データの表示が指令された場合、表示選択字幕データデコーダ３５は、取得した映像データに含まれる表示選択字幕データをデコードして、対応するテキストデータをＯＳＤ（On Screen Display）３６に供給するとともに、映像データを合成処理部３７に供給する。

ＯＳＤ３６は、供給されたテキストデータを、表示画面に重畳して表示させるための画像データであるＯＳＤデータに変換して、合成処理部３７に供給する。合成処理部３７は、供給された映像データに、供給されたＯＳＤデータを重畳して、出力端子２２−１からテレビジョン受像機２の出力部１３のディスプレイに出力する。また、このとき、音声出力処理部３８は、音声信号デコーダ３４によりデコードされた音声データを取得して、出力端子２２−２から、テレビジョン受像機２の出力部１３のスピーカに出力する。

操作入力部４１により入力されたユーザの操作に基づいて、または、データ端子６１−３を介して、ホームサーバ４から供給された制御信号に基づいて、供給された映像信号および音声信号をホームサーバ４に出力して録画させることが指令された場合、出力信号生成部３３は、番組ＩＤ情報抽出部３９に、メモリ３２に保持されている映像データから番組管理データに含まれる番組ＩＤを抽出させるように制御する。番組ＩＤ情報抽出部３９は、映像信号デコーダ３１によりデコードされた映像データに含まれる番組管理データから、番組（ここでも、「番組」とは、検索される単位を示し、例えば、２時間ドラマなどのプログラムの全体であっても、１つのプログラムがコマーシャルなどで区切られている場合の区切られた１単位ごとでも、複数のプログラムを含むものであっても、更に、コマーシャルを含むものやコマーシャルのみを示すものであっても良い）を固有に区別可能な番組ＩＤ情報を抽出し、出力信号生成部３３に供給する。

出力信号生成部３３は、タイマ４０を参照して、録画が開始された時刻（絶対時刻）を取得し、メモリ３２から供給される映像データ、または、音声信号デコーダ３４から供給される音声データのうちの少なくともいずれか一方に、取得した時刻情報を付加するとともに、映像データおよび音声データに対して、番組ＩＤ情報抽出部３９から供給された番組ＩＤを付加して、録画される出力信号を生成し、出力端子２３−１および２３−２からホームサーバ４に供給する。この付加された時刻情報は、タイムスタンプとして、後述する検索処理において用いられる。

録画される出力信号について、図４を用いて説明する。

出力信号生成部３３において、録画される出力信号のうち、映像データ１５または音声データ１６のうちのいずれか少なくとも一方に、録画開始時刻情報９５が付加される。そして、映像データ１５には、表示選択字幕データ１７が含まれている。そして、これらのデータに番組ＩＤ情報が関連つけられて、録画用の出力信号が生成される。

図３に戻って、ホームサーバ４の構成について説明する。

操作入力部７１は、例えば、ボタン、キー、タッチパネル、タッチパッド、レバーなどの入力デバイスで構成され、ユーザの操作入力を受ける。録画データ記憶部７２は、入力端子６１−１および入力端子６１−２から供給される、番組ＩＤとタイムスタンプが付加された映像データおよび音声データを記憶する。録画データ記憶部７２は、例えば、ハードディスクなどの大容量記録媒体により構成されるようにしても、ＤＶＤ（Digital Versatile Disk）やビデオテープなどのリムーバブルな記録媒体に構成されるようにしても良い。

録画制御部８１は、ユーザが、操作入力部７１に対して、放送番組の録画を指令したとき、表示選択字幕デコーダ３に供給された映像信号および音声信号を検索可能な情報として録画することができるように、番組ＩＤおよびタイムスタンプを付加させて、ホームサーバ４に出力させるための制御信号を生成し、データ端子６１−３およびデータ端子２３−２を介して、表示選択字幕デコーダ３の出力信号生成部３３に供給する。

ネットワークインターフェース７３は、インターネット５に公開されているウェブページの情報を取得して、表示部７４に表示させたり、表示部７４を参照したユーザが、操作入力部７１に入力した操作に基づいて、所定の情報を、メタデータ作成サーバ６、または、課金サーバ７に送信したり、メタデータ作成サーバ６から、メタデータをダウンロードして、暗号化メタデータ記憶部７５に出力して記憶させたり、課金サーバ７から取得した復号鍵を、鍵情報記憶部７６に出力して記憶させたりする。また、ネットワークインターフェース７３は、ユーザが保有する図示しないパーソナルコンピュータなどを用いて取得された、暗号化されたメタデータや復号鍵などを、有線または無線を介した通信により、図示しないパーソナルコンピュータから受信することも可能である。

表示部７４は、例えば、ＬＣＤ（Liquid Crystal Display）またはＣＲＴ（Cathode Ray Tube）などで構成され、ネットワークインターフェース７３を介して取得されたインターネット５に公開されているウェブページの情報や、操作入力部７１によりユーザが入力した情報などを表示する。

暗号化メタデータ記憶部７５は、取得された暗号化されたメタデータを記憶する。鍵情報記憶部７６は、取得された復号鍵を記憶する。復号処理部７７は、暗号化メタデータ７５に記憶されている暗号化されたメタデータを、鍵情報記憶部７６に記憶されている復号鍵を用いて復号し、メタデータ記憶部７８に出力して記憶させる。メタデータ記憶部７８は、復号されたメタデータの供給を受け、これを記憶する。

マッチング処理部７９は、操作入力部７１から、検索する録画データの番組ＩＤを指定する情報と、検索のキーとなるテキストの入力を受け、メタデータ記憶部７８に記憶されているメタデータを参照して、マッチング処理を実行し、マッチング結果である番組ＩＤ、検索キーを含むテキストデータ、および、タイムコードを録画データ検索出力部８０に供給する。録画データ検索出力部８０は、マッチング処理部７９から供給されたマッチング結果である番組ＩＤとタイムコードを基に、録画データ記憶部７２を検索して、マッチング結果である番組ＩＤとタイムコードにより指定されるテキストデータ、すなわち、検索のキーとなるテキストを含むテキストデータと、操作入力部７１から供給された検索のキーとなるテキストを基に、検出されたテキストデータ中の、検索のキーとなるテキストの位置に対応する時刻情報を算出する。そして、録画データ検索出力部８０は、算出された時刻情報を基に、録画データ記憶部７２を検索して、検索のキーとなるテキストの開始点に対応する位置から開始される録画データを読み出し、出力端子６２−２および出力端子６２−２を介して、表示選択字幕デコーダ３に供給する。

録画データ検索出力部８０は、対応するテキストの表示時間に対して、テキストに対応する音声データを構成する音が、一定の速度で発話されると仮定して、テキストの開始点に対応する位置を検出する。録画データ検索出力部８０が、検索のキーとなるテキストの開始点を検出する方法については、図８を用いて後述する。

次に、図５は、メタデータ作成サーバ６の構成を示すブロック図である。

ＣＰＵ（Central Processing Unit）１０１は、ＲＯＭ（Read Only Memory）１０２に記憶されているプログラム、または記憶部１０８からＲＡＭ（Random Access Memory）１０３にロードされたプログラムに従って、各種の処理を実行する。ＲＡＭ１０３にはまた、ＣＰＵ１０１が各種の処理を実行するうえにおいて必要なデータなども適宜記憶される。

ＣＰＵ１０１、ＲＯＭ１０２、およびＲＡＭ１０３は、バス１０４を介して相互に接続されている。このバス１０４にはまた、入出力インタフェース１０５も接続されている。

入出力インタフェース１０５には、キーボード、マウスなどよりなる入力部１０６、ディスプレイやスピーカなどよりなる出力部１０７、ハードディスクなどより構成される記憶部１０８、モデム、ターミナルアダプタなどより構成される通信部１０９が接続されている。通信部１０９は、インターネット５を含むネットワークを介しての通信処理を行う。

入出力インタフェース１０５にはまた、必要に応じてドライブ１１０が接続され、磁気ディスク１２１、光ディスク１２２、光磁気ディスク１２３、もしくは、半導体メモリ１２４などが適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部１０８にインストールされる。

図６は、図５を用いて説明したメタデータ作成サーバ６が実行する機能（ＣＰＵ１０１が実行するソフトウェアによって実行される機能を含む）について説明するための機能ブロック図である。

放送データ取得部１４１は、図５の通信部１０９に対応し、インターネット５を介して、または、図示しないアンテナを介して、放送データを取得して、デコーダ１４２に供給する。

デコーダ１４２は、供給された放送データをデコードする。ここで、デコーダ１４２は、放送データのうち、メタデータの作成に必要となる番組ＩＤ情報を含む番組管理情報や表示選択字幕データが含まれている映像信号のみをデコードすればよい。

番組ＩＤ情報抽出部１４３は、デコーダ１４２によりデコードされた映像データに含まれる番組管理データから、放送番組（ここでも、「番組」とは、検索される単位を示し、例えば、２時間ドラマなどのプログラムの全体であっても、１つのプログラムがコマーシャルなどで区切られている場合の区切られた１単位ごとでも、複数のプログラムを含むものであっても、更に、コマーシャルを含むものやコマーシャルのみを示すものであっても良い）を固有に区別可能な番組ＩＤ情報を抽出し、メタデータ生成部１４４に供給するとともに、供給された映像データを表示選択字幕データデコーダ１４５に供給する。

表示選択字幕データデコーダ１４５は、取得した映像データに含まれる表示選択字幕データをデコードして、対応するテキストデータを表示選択字幕データ解析部１４６に供給する。表示選択字幕データ解析部１４６は、表示選択字幕データデコーダ１４５から供給された、表示選択字幕データに対応するテキストデータを、適切な長さのテキスト群に分割（例えば、一度に表示されるテキストを１つのテキスト群として分割）し、分割されたテキスト群をタイムコード付加処理部１４７に供給する。

タイムコード付加処理部１４７は、タイマ１４８を参照して、供給されたテキスト群のそれぞれに対して、テキストの開始位置および終了位置に対応するタイムコードを付加する。タイムコード付加処理部１４７は、放送データ取得部１４１が、ユーザが放送データを取得する場合と同様に、リアルタイムで（すなわち、番組の放送時刻に）放送信号を取得した場合、タイマ１４８が示す現在時刻に基づいて、タイムコードをテキストデータに付加するものとする。

また、タイムコード付加処理部１４７は、放送データ取得部１４１が、番組の放送時刻から遅れて放送信号を取得した場合、または、デコーダ１４２乃至表示選択字幕データ解析部１４６の処理にかかる時間が、一般的なテレビジョン受像機を用いた放送信号の出力処理と比較して長くなってしまう場合、タイマ１４８が示す現在時刻と放送信号の取得の遅延時間、または、処理にかかる時間による遅延時間に基づいて、番組の放送時刻に対応するタイムコードを算出し、テキストデータに付加するものとする。更に、タイムコード付加処理部１４７は、表示選択字幕データが付与されるタイミングが、実際の放送の内容と異なる場合、タイミングのずれを適宜補正可能なようにしても良いことはいうまでもない。

メタデータ生成部１４４は、タイムコード付加処理部１４７から供給されたタイムコードが付加されたテキストデータに、番組ＩＤ情報抽出部１４３から供給された番組ＩＤ情報を付加してメタデータを生成し、暗号化処理部２４９に供給する。

図７を用いて、メタデータについて説明する。

表示選択字幕データ解析部１４６により、適切な長さのテキスト群であるテキスト１、テキスト２、・・・に分割されたテキストデータ１６５に対して、タイムコード付加処理部１４７において、それぞれのテキスト群の開始時刻と終了時刻が記載されたタイムコード１６６が付加される。例えば、テキスト１として、“「７時のニュースです」”、テキスト２として、“「今日の初めの話題は、・・・」”の部分のテキストが分割された場合、番組の放送において、これらの部分の表示選択字幕が表示される時刻に対応する開始時刻および終了時刻が、タイムコード１６６に記載される。そして、更に、番組ＩＤ情報抽出部１４３から供給された番組ＩＤ情報１６７が付加されて、メタデータ１６１が生成される。

図６の説明に戻る。

暗号化処理部１４９は、メタデータ作成部１４４から供給されたメタデータを、鍵情報記憶部１５０に予め記憶されている、番組ＩＤに対応する暗号鍵で暗号化し、メタデータ記憶部１５１に供給する。メタデータ供給制御部１５２は、通信部１５３から供給されるメタデータを要求する信号に基づいて、ユーザが所望する番組に対応する暗号化されたメタデータをメタデータ記憶部１５１から検索して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどに、インターネット５を介して供給する。

ページ情報記憶部１５５は、例えば、ダウンロード可能なメタデータの一覧や、メタデータを利用するために必要な復号鍵の取得方法など、ユーザにメタデータをダウンロードさせて利用させるために必要な情報を提供するためのウェブページに対応する情報を記憶している。ウェブページ公開処理部１５４は、ページ情報記憶部に記憶されているウェブページをインターネット５に公開する。

通信部１５３は、図５の通信部１０９に対応するものであり、インターネット５を介して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどと情報を授受するものである。

次に、メタデータ作成サーバ６において作成された、図７を用いて説明したメタデータ１６１のタイムコード１６６に基づいて、上述したホームサーバ４の録画データ検索出力部８０が、検索のキーとなるテキストの開始点を検出する方法について、図８を用いて説明する。

ホームサーバ４の録画データ検索出力部８０は、対応するテキストの表示時間に対して、テキストに対応する音声データを構成する音が、一定の速度で発話されると仮定して、テキストの開始点に対応する位置を検出する。例えば、図７を用いて説明したテキスト１およびテキスト２を含むメタデータに対応する録画データにおいて、「車椅子」が、検索キーであった場合、マッチング処理により、テキスト２に対応するタイムコード１６６が検出されるので、録画データ検索出力部８０は、メタデータ１６１のタイムコード１６６に記載されている、テキスト２の開始時刻「１９:００:４６:０１」および終了時刻「１９：００：５６：５１」を基に、テキスト２の表示時間１０．５秒を算出する。そして、録画データ検索出力部８０は、テキスト２「今日の初めの話題は車椅子に関することです」の音の数２５で、テキスト２の表示時間１０．５秒を除算することにより、テキスト２の表示時間に対して、対応する音声データの１音の平均的な発話時間の推定値０．４２秒を算出する。そして、録画データ検索出力部８０は、テキスト２に含まれる「車椅子」の開始位置が１２音目であることから、テキスト２に含まれる「車椅子」が発話された時刻を、テキスト２の開始時刻「１９:００:４６:０１」から（０．４２×１２）秒だけ遅れた、「１９：００：５０：６３」であると推定する。

ここで、録画データ検索出力部８０は、対応するテキストの表示時間に対して、テキストに対応する音声データを構成する音が、一定の速度で発話されると仮定しているので、この仮定が成立しない場合、ユーザが所望するテキスト「車椅子」が発話されたタイミングを検索できない可能性がある。そこで、録画データ検索出力部８０は、推定された発話時刻「１９：００：５０：６３」から、所定の時間Δｔだけ早い時刻を、再生開始位置として検出し、検出された再生開始位置から始まる録画データを録画データ記憶部７２から読み出して、出力端子６１−１および６１−２を介して、表示選択字幕デコーダ３に供給する。

ここで、所定の時間Δｔは、あらかじめ設定されている値であっても、利用者により設定変更可能な値であっても良い。

次に、図９は、課金サーバ７の構成を示すブロック図である。

ＣＰＵ（Central Processing Unit）１７１は、ＲＯＭ（Read Only Memory）１７２に記憶されているプログラム、または記憶部１７８からＲＡＭ（Random Access Memory）１７３にロードされたプログラムに従って、各種の処理を実行する。ＲＡＭ１７３にはまた、ＣＰＵ１７１が各種の処理を実行するうえにおいて必要なデータなども適宜記憶される。

ＣＰＵ１７１、ＲＯＭ１７２、およびＲＡＭ１７３は、バス１７４を介して相互に接続されている。このバス１７４にはまた、入出力インタフェース１７５も接続されている。

入出力インタフェース１７５には、キーボード、マウスなどよりなる入力部１７６、ディスプレイやスピーカなどよりなる出力部１７７、ハードディスクなどより構成される記憶部１７８、モデム、ターミナルアダプタなどより構成される通信部１７９が接続されている。通信部１７９は、インターネット５を含むネットワークを介しての通信処理を行う。

入出力インタフェース１７５にはまた、必要に応じてドライブ１８０が接続され、磁気ディスク１２１、光ディスク１２２、光磁気ディスク１２３、もしくは、半導体メモリ１２４などが適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部１７８にインストールされる。

次に、図１０は、図９の課金サーバ７が実行する機能（ＣＰＵ１７１が実行するソフトウェアによって実行される機能を含む）について説明するための機能ブロック図である。

ページ情報記憶部２０２は、例えば、ユーザ登録用のユーザ情報および課金情報の入力、メタデータを利用するために必要な復号鍵の取得方法、復号鍵の購入要求の送信など、ユーザがダウンロードしたメタデータを復号するために必要な復号鍵を提供し、その課金を行うためのウェブページに対応する情報を記憶している。ウェブページ公開処理部２０１は、ページ情報記憶部に記憶されているウェブページをインターネット５に公開する。

通信部２０３は、図９の通信部１７９に対応するものであり、インターネット５を介して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどと情報を授受するものである。

操作入力情報取得部２０４は、通信部２０３を介して、ユーザが送信した操作入力情報を取得し、操作入力情報が、ウェブページの操作に関するものである場合は、ウェブページ公開処理部２０１に、ユーザ登録のための個人情報である場合は、ユーザ情報登録処理部２０５に、認証処理に必要な情報である場合は、認証処理部２０７に、鍵の購入を要求する情報である場合は、鍵供給処理部２０８に、課金処理に関する情報であるときは、課金処理部２１０に、それぞれ供給する。

ユーザ情報登録処理部２０５は、操作入力情報取得部２０４から、ユーザ登録のための個人情報の供給を受けて、ユーザ情報データベース２０６に供給する。認証処理部２０７は、新たに登録されたユーザに対して、ユーザを固有に区別可能なユーザＩＤを発行し、ユーザ情報データベース２０６に登録するとともに、発行したユーザＩＤを、通信部２０３を介して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどに送出する。また、認証処理部２０７は、操作入力情報取得部２０４から、認証処理に必要な情報の供給を受け、ユーザ情報データベース２０６に登録されているユーザ情報を参照して認証処理を実行し、認証処理結果を鍵供給処理部２０８に出力する。

鍵供給処理部２０８は、操作入力情報取得部２０４から、鍵の購入を要求する情報の供給を受け、認証処理部２０７からユーザの認証処理が正しく終了したことを示す認証結果の入力を受けた場合、鍵情報データベース２０９から対応する復号鍵を読み込んで、通信部２０３を介して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどに供給するとともに、課金処理部２１０に、鍵の供給に関する情報を出力する。

鍵情報データベース２０９は、番組ＩＤごとに、暗号化されたメタデータを復号するための復号鍵を保存している。すなわち、鍵情報データベース２０９は、図６を用いて説明した、鍵情報記憶部１５０に予め記憶されている、暗号化処理部１４９がメタデータを暗号化する場合に用いられる番組ＩＤごとの鍵情報に対応する復号鍵を保存している。

課金処理部２１０は、操作入力情報取得部２０４および鍵情報処理部２０８から供給された課金に関する情報を基に、課金処理を行い、課金に必要な情報を課金情報データベース２１１に登録したり、ユーザ情報データベース２０６および課金情報データベース２１１に登録されている内容を基に、ユーザに対する供給された復号鍵の対価の決済処理や、放送局１に対する表示選択字幕の提供の対価の支払い処理などを実行する。課金情報データベース２１１には、課金処理のために必要な情報が登録される。

次に、図１１のフローチャートを参照して、図３を用いて説明した、表示選択字幕デコーダ３が実行する処理である表示選択字幕デコーダの処理１について説明する。

ステップＳ１において、映像信号デコーダ３１および音声信号デコーダ３４は、番組放送信号（映像信号および音声信号）の入力を受けて、デコードを行う。映像信号デコーダ３１は、デコードした映像データをメモリ３２に供給する。

ステップＳ２において、表示選択字幕データデコーダ３５および音声出力処理部３８は、操作入力部４１から供給されるユーザの操作入力を基に、番組の視聴が指令されているか否かを判断する。

ステップＳ２において、番組の視聴が指令されていると判断された場合、ステップＳ３において、表示選択字幕データデコーダ３５は、操作入力部４１から供給されるユーザの操作入力を基に、表示選択字幕の表示が指令されているか否かを判断する。

ステップＳ３において、表示選択字幕の表示が指令されていると判断された場合、ステップＳ４において、表示選択字幕データデコーダ３５は、表示選択字幕データをデコードして、ＯＳＤ３６に供給するとともに、映像データを合成処理部３７に供給する。ＯＳＤ３６は、供給されたテキストデータを映像データに変換し、合成処理部３７に出力する。合成処理部３７は、供給されたＯＳＤデータを映像データに合成して、出力端子２２−１を介して、テレビジョン受像機２に出力する。また、音声出力処理部３８も、音声信号デコーダ３４によりデコードされた音声データを取得して、出力端子２２−２を介して、テレビジョン受像機２に出力する。

ステップＳ３において、表示選択字幕の表示が指令されていないと判断された場合、ステップＳ５において、表示選択字幕データデコーダ３５は、表示選択字幕データをデコードせず、映像データを、合成処理部３７および出力端子２２−１を介して、テレビジョン受像機２に出力する。また、音声出力処理部３８も、音声信号デコーダ３４によりデコードされた音声データを取得して、出力端子２２−２を介して、テレビジョン受像機２に出力する。

ステップＳ２において、番組の視聴が指令されていないと判断された場合、もしくは、ステップＳ４またはステップＳ５の処理の終了後、ステップＳ６において、出力信号生成部３３は、操作入力部４１から供給されるユーザの操作入力、または、データ端子２３−３を介して供給される、ホームサーバ４の録画制御部８１からの制御信号を基に、番組の録画が指令されているか否かを判断する。ステップＳ６において、番組の録画が指令されていないと判断された場合、処理が終了される。

ステップＳ６において、番組の録画が指令されたと判断された場合、ステップＳ７において、図１２を用いて後述する録画データ作成処理１が実行される。

ステップＳ８において、出力信号生成部３３は、ステップＳ６の処理により作成された録画データを、出力端子２３−１および出力端子２３−２を介して、ホームサーバ４に供給し、処理が終了される。

このような処理により、表示選択字幕デコーダ３は、ユーザの操作入力に基づいて、受信された放送信号を視聴するときに、表示選択字幕をデコードして映像に重畳させて表示させたり、表示選択字幕に対応するテキストデータを検索処理に用いることが可能な録画データを生成して、ホームサーバ４に供給して録画させることが可能となる。

次に、図１２のフローチャートを参照して、図１１のステップＳ７において実行される録画データ作成処理１について説明する。

ステップＳ２１において、番組ＩＤ情報抽出部３９は、メモリ３２に保持されているデコードされた映像データに含まれる番組管理用データから、録画される番組を個別に識別可能な番組ＩＤ情報を抽出して、出力信号生成部３３に供給する。

ステップＳ２２において、出力信号生成部３３は、タイマ４０を参照して、メモリ３２から供給された映像データ、または、音声信号デコーダ３４から供給された音声データにのうちの少なくともいずれか一方に、例えば、録画開始時刻を示す情報などの、絶対時間によるタイムスタンプを付加する。

ステップＳ２３において、出力信号生成部３３は、タイムスタンプが付加された映像データまたは音声データに、更に、番組ＩＤを付加し、図４を用いて説明した録画用の出力信号を生成して、処理は、図１１のステップＳ８に進む。

このような処理により、表示選択字幕に対応するテキストデータを検索処理に用いることが可能な、番組ＩＤおよびタイムスタンプが付加された録画データが生成される。

次に、図１３のフローチャートを参照して、図５および図６を用いて説明したメタデータ作成サーバ６が実行するメタデータ作成処理１について説明する。

ステップＳ６１において、放送データ取得部１４１は、番組放送信号（少なくとも、映像信号）の入力を受け、デコーダ１４２に供給する。デコーダ１４２は、供給された映像信号をデコードして、番組ＩＤ情報抽出部１４３に供給する。

ステップＳ６２において、番組ＩＤ情報抽出部１４３は、供給された映像データに含まれる番組管理用データから、番組を認識するための番組固有の情報である番組ＩＤを抽出し、番組ＩＤをメタデータ生成部１４４に供給するとともに、デコードされた映像データを、表示選択字幕データデコーダ１４５に供給する

ステップＳ６３において、表示選択字幕データデコーダ１４５は、供給された映像データから表示選択字幕データを抽出してデコードし、表示選択字幕データ解析部１４６に供給する。

ステップＳ６４において、表示選択字幕データ解析部１４６は、表示選択字幕データに対応するテキストデータを解析し、所定の長さ（例えば、表示が選択された場合に一度に表示される所定の文字数や、ユーザが所定の時間で読解することが可能な程度の長さ）のテキスト群に分解して、タイムコード付加処理部１４７に供給する。

ステップＳ６５において、タイムコード付加処理部１４７は、供給されたテキスト群に対して、開始時刻と終了時刻のタイムコードをそれぞれ付加し、メタデータ生成部１４４に供給する。

ステップＳ６６において、メタデータ生成部１４４は、タイムコード付加処理部１４７から供給されたタイムコード付のテキストデータ群に、番組ＩＤ情報抽出部１４３から供給された番組ＩＤを付加して、図７を用いて説明したメタデータ１６１を作成して、暗号化処理部１４９に供給する。

ステップＳ６７において、暗号化処理部１４９は、供給されたメタデータ１６１を、鍵情報記憶部１５０に記憶されている、番組ＩＤに対応する鍵を用いて暗号化し、メタデータ記憶部１５１に供給する。

ステップＳ６８において、メタデータ記憶部１５１は、暗号化されたメタデータを記憶して、処理が終了される。

このような処理により、表示選択字幕データに対応するテキストデータ、テキストデータに対応するタイムコード、および、番組ＩＤにより構成されるメタデータが生成され、暗号化されて記憶される。暗号化されて記憶されたメタデータは、後述する処理により、ユーザが保有するホームサーバ４にダウンロードされる。

次に、図１４のフローチャートを参照して、図９および図１０を用いて説明した課金サーバ７が実行するユーザ登録処理について説明する。

ステップＳ８１において、ウェブページ公開処理部２０１は、ページ情報記憶部２０２に記憶されているユーザ登録のためのウェブページを、インターネット５に公開する。

ステップＳ８２において、操作入力情報取得部２０４は、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどから、通信部２０３を介して、ユーザ登録要求を受けたか否かを判断する。ステップＳ８２において、ユーザ登録要求を受けていないと判断された場合、処理は、ステップＳ８１に戻り、それ以降の処理が繰り返される。

ステップＳ８２において、ユーザ登録要求を受けたと判断された場合、操作入力情報取得部２０４は、ユーザ登録要求を受けたことをウェブページ公開処理部２０１に通知するので、ステップＳ８３において、ウェブページ公開処理部２０１は、ユーザ登録画面に対応するデータを、通信部２０３およびインターネット５を介して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどに送出する。

ステップＳ８４において、操作入力情報取得部２０４は、例えば、決済方法などの課金方法に関する情報や、ユーザの氏名やメールアドレスなどの個人情報を含む、ユーザ登録データの供給を受け、ユーザ情報登録処理部２０５に供給する。

ステップＳ８５において、ユーザ情報登録処理部２０５は、ユーザ情報データベース２０６にユーザ登録データを供給して記憶させる。ユーザ情報データベース２０６は供給されたユーザ登録データを記憶する。

ステップＳ８６において、認証処理部２０７は、新たに登録されたユーザに対して、ユーザを固有に区別可能なユーザＩＤを発行し、ユーザ情報データベース２０６に登録するとともに、発行したユーザＩＤを、通信部２０３およびインターネット５を介して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどに送出して、処理が終了される。

このような処理により、課金サーバ７にユーザ情報が登録される。登録されたユーザ情報は、後述する鍵情報の供給時、および、課金処理時に利用される。

次に、図１５のフローチャートを参照して、図５および図６を用いて説明したメタデータ作成サーバ６が実行するメタデータ供給処理について説明する。

ステップＳ１０１において、ウェブページ公開処理部１５４は、ページ情報記憶部１５５に記憶されているメタデータ要求を受けるためのウェブページを、インターネット５に公開する。

ステップＳ１０２において、メタデータ供給制御部１５２は、通信部１５３を介して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどから、所定の番組ＩＤにより区別される番組に対応するメタデータを要求する操作入力を示す信号の入力を受けたか否かを判断する。ステップＳ１０２において、メタデータを要求する操作入力を示す信号の入力を受けていないと判断された場合、処理は、ステップＳ１０１に戻り、それ以降の処理が繰り返される。

ステップＳ１０２において、メタデータを要求する操作入力を示す信号の入力を受けたと判断された場合、ステップＳ１０３において、メタデータ供給制御部１５２は、要求された番組に対応する、暗号化されたメタデータをメタデータ記憶部１５１から読み出して、通信部１５３およびインターネット５を介して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどに送出し、処理が終了される。

このような処理により、暗号化されたメタデータが、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどに送出される。送出されたメタデータは、ホームサーバ４に記憶され、後述する処理により復号されて、検索処理に用いられる。

次に、図１６のフローチャートを参照して、図９および図１０を用いて説明した課金サーバ７が実行する復号鍵供給制御処理について説明する。

ステップＳ１２１において、ウェブページ公開処理部２０１は、ページ情報記憶部２０２に記憶されているメタデータを復号するための復号鍵の購入要求を受けるためのウェブページを、インターネット５に公開する。

ステップＳ１２２において、操作入力情報取得部２０４は、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどから、通信部２０３を介して、復号鍵を要求する操作入力を受けたか否かを判断する。ステップＳ１２２において、復号鍵を要求する操作入力を受けていないと判断された場合、処理は、ステップＳ１２１に戻り、それ以降の処理が繰り返される。

ステップＳ１２２において、復号鍵を要求する操作入力を受けたと判断された場合、操作入力情報取得部２０４は、復号鍵を要求する操作入力を受けたことを認証処理部２０７に通知するので、ステップＳ１２３において、認証処理部２０７は、例えば、通信部２０５を介して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどに、ユーザＩＤの送出を要求して、ユーザ情報データベース２０６に登録されているユーザＩＤを照会することなどにより、認証処理を実行する。

ステップＳ１２４において、鍵供給処理部２０８は、認証処理部２０７から供給される認証処理の結果を基に、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどを用いて復号鍵を要求する操作入力を実行したユーザは、正しく認証されたか否かを判断する。

ステップＳ１２４において、正しく認証されたと判断された場合、ステップＳ１２５において、鍵供給処理部２０８は、課金処理部２１０を制御して、ユーザから入力された情報、もしくは、ユーザ情報データベース２０６または課金情報データベース２１１に登録されている情報を基に、決済処理を実行させる。決済処理には、例えば、クレジットカード決済、電子マネー決済などがある。課金処理部２１０は、一般的なこれらの決済方法を用いて、決済処理を実行する。

ステップＳ１２６において、鍵供給処理部２０８は、課金処理部２１０から供給される信号を基に、正しく決済が終了したか否かを判断する。

ステップＳ１２６において、正しく決済が終了したと判断された場合、ステップＳ１２７において、鍵供給処理部２０８は、操作入力情報取得部２０４から供給される、ユーザからの復号鍵の要求を示す信号から、要求された復号鍵に対応するメタデータの番組ＩＤを取得する。

ステップＳ１２８において、鍵供給処理部２０８は、番組ＩＤに対応する復号鍵を鍵情報データベース２０９から読み出し、通信部２０３およびインターネット５を介して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどに送出する。

ステップＳ１２９において、課金処理部２１０は、ユーザが選択した決済方法、金額、または、決済結果などを、課金情報データベース２１１に登録する。課金情報データベース２１１は、登録された課金情報を記憶して、処理が終了される。

ステップＳ１２４において、正しく認証されなかったと判断された場合、または、ステップＳ１２５において、正しく決済が終了しなかったと判断された場合、ステップＳ１３０において、認証処理部２０７または課金処理部２１０は、通信部２０３およびインターネット５を介して、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどに、処理が正しく終了しなかったことをユーザに通知するためのエラーメッセージを出力して、処理が終了される。

このような処理により、メタデータを復号するための復号鍵が、ユーザにより購入されて、ユーザが保有するホームサーバ４、または、図示しないパーソナルコンピュータなどに送信される。この復号鍵は、後述する処理により、メタデータの復号に用いられる。また、この復号鍵の購入によりユーザから得られた対価のうちの少なくとも一部は、表示選択字幕データを作成した放送局１に支払われるので、表示選択字幕が付加された番組の割合が増えることが予測され、聴覚障害者がより多くの番組を楽しむことができるようになる。

次に、図１７のフローチャートを参照して、図１５のメタデータ供給処理、および、図１６の復号鍵供給制御処理と並行して、図３を用いて説明した、ユーザが保有するホームサーバ４において実行される、メタデータ記憶処理１について説明する。

ステップＳ１４１において、図１８を用いて後述するメタデータ取得処理が実行される。なお、メタデータ取得処理は、ここでは、ステップＳ１４１において実行されるものとしているが、後述するステップＳ１４９が実行される前であれば、いかなるタイミングで実行されても良い。

ステップＳ１４２において、ネットワークインターフェース７３は、インターネット５において公開されている、メタデータを復号するための復号鍵の購入要求を受けつけるウェブページにアクセスして、ウェブページを表示部７４に表示する。ユーザは、表示部７４に表示されたウェブページを参照して、操作入力部７１を用いて、メタデータの利用を希望する番組を指定するので、ネットワークインターフェース７３は、操作入力部７１から供給されるメタデータの利用を希望する番組を指定する情報、すなわち、番組ＩＤで指定される、暗号化されたメタデータを復号するための復号鍵の購入を要求する信号を、インターネット５を介して、課金サーバ７に送信する。

ネットワークインターフェース７３は、課金サーバ７から認証処理に必要な情報の入力を要求するウェブページに対応するデータを受信して、ウェブページを表示部７４に表示させる。ユーザは、表示部７４に表示された、認証処理に必要な情報の入力を要求するウェブページを参照して、操作入力部７１を用いて、例えば、ユーザＩＤなどの、認証処理に必要な情報を入力するので、ステップＳ１４３において、ネットワークインターフェース７３は、操作入力部７１から供給される認証処理に必要な情報を、インターネット５を介して、課金サーバ７に送信する。

ステップＳ１４４において、ネットワークインターフェース７３は、課金サーバ７から供給される信号を基に、正しく認証されたか否かを判断する。

ステップＳ１４４において、正しく認証されたと判断された場合、ネットワークインターフェース７３は、課金サーバ７から決済処理に必要な情報の入力を要求するウェブページに対応するデータを受信して、ウェブページを表示部７４に表示させる。ユーザは、表示部７４に表示された、決済処理に必要な情報の入力を要求するウェブページを参照して、操作入力部７１を用いて、決済処理に必要な情報を入力するので、ステップＳ１４５において、ネットワークインターフェース７３は、例えば、決済方法の指定や、決済のための金融機関などとの契約において設定されているユーザＩＤやパスワードなどの、操作入力部７１から供給される決済処理に必要な情報を、インターネット５を介して、課金サーバ７に送信する。

ステップＳ１４６において、ネットワークインターフェース７３は、課金サーバ７から供給される信号を基に、正しく決済が終了したか否かを判断する。

ステップＳ１４６において、正しく決済が終了したと判断された場合、ステップＳ１４７において、ネットワークインターフェース７３は、指定された番組ＩＤに対応する復号鍵を、インターネット５を介して、課金サーバ７から受信し、鍵情報記憶部７６に供給する。

ステップＳ１４８において、鍵情報記憶部７６は、供給された復号鍵を番組ＩＤに対応つけて記憶する。

ステップＳ１４９において、復号処理部７７は、鍵情報記憶部７６に記憶された復号鍵を用いて、暗号化メタデータ記憶部７５に記憶されている暗号化されたメタデータを復号して、メタデータ記憶部７８に供給する。

ステップＳ１５０において、メタデータ記憶部７８は、復号済みのメタデータを記憶して、処理が終了される。

ステップＳ１４４において、正しく認証されなかったと判断された場合、または、ステップＳ１４７において、正しく決済が終了しなかったと判断された場合、ステップＳ１５１において、ネットワークインターフェース７３は、インターネット５を介して、課金サーバ７から、処理が正しく終了されなかったことを示すエラーメッセージを受信して、表示部７４に出力して表示させ、処理が終了される。

このような処理により、暗号化されたメタデータがメタデータ作成サーバ６からダウンロードされ、メタデータを復号するための復号鍵の購入のための処理が実行されて、課金サーバ７から復号鍵が取得されるので、メタデータを復号して、検索処理に利用するための復号鍵が、ホームサーバ４の内部に記憶される。

次に、図１８のフローチャートを参照して、図１７のステップＳ１４１において実行されるメタデータ取得処理について説明する。

ステップＳ１６１において、ネットワークインターフェース７３は、インターネット５において公開されている、メタデータ要求を受けるためのウェブページにアクセスして、ウェブページを表示部７４に表示する。ユーザは、表示部７４に表示されたウェブページを参照して、操作入力部７１を用いて、メタデータの利用を希望する番組を指定するので、ネットワークインターフェース７３は、操作入力部７１から供給されるユーザの操作入力によって指定された番組に対応する番組名または番組ＩＤを、インターネット５を介して、メタデータ作成サーバ６に供給する。

ステップＳ１６２において、ネットワークインターフェース７３は、インターネット５を介して、メタデータ作成サーバ６から、暗号化されたメタデータを受信したか否かを判断する。ステップＳ１６２において、メタデータを受信していないと判断された場合、処理は、ステップＳ１６１に戻り、それ以降の処理が繰り返される。

ステップＳ１６２において、メタデータを受信したと判断された場合、ステップＳ１６３において、ネットワークインターフェース７３は、受信した暗号化されたメタデータを、暗号化メタデータ記憶部７５に供給する。暗号化メタデータ記憶部７５は、供給された暗号化メタデータを記憶して、処理が終了される。

このような処理により、暗号化されたメタデータをメタデータ作成サーバ６からダウンロードすることができる。

次に、図１９のフローチャートを参照して、図３を用いて説明した、ユーザが保有するホームサーバ４において実行される検索処理について説明する。

操作入力部７１は、ステップＳ１８１において、ユーザから、検索したい番組を指定する入力を受け、マッチング処理部９７に供給し、ステップＳ１８２において、再生開始位置を検索するための検索キーとなるテキストデータの入力を受け、マッチング処理部９７に供給する。例えば、図２を用いて説明した放送番組が録画されており、ユーザが、その「７時のニュース」のうち、興味がある部分を再生させるための検索処理を行おうとした場合、操作入力部７１は、「７時のニュース」という番組を指定するための操作入力を受けるとともに、「７時のニュース」のうちの「車椅子」というテキストの入力を受け、マッチング処理部９７に供給する。

ステップＳ１８３において、マッチング処理部９７は、ステップＳ１８１においてユーザに指定された番組に対応する番組ＩＤ、および、ステップＳ１８２においてユーザに指定されたテキストを検索キーとして、メタデータ記憶部７８に記憶されているメタデータとのマッチング処理を実行し、検索キーを含むテキストデータと、そのテキストデータに対応するタイムコードを検出して、録画データ検索出力部８０に供給する。例えば、メタデータ記憶部７８に、図７を用いて説明したメタデータが記憶されている場合、マッチング処理部９７によって実行されるマッチング処理により、「車椅子」というテキストを含むテキスト２に対応する開始時刻「１９:００:４６:０１」および終了時刻「１９：００：５６：５１」が検出されるので、マッチング処理部９７は、テキスト２に対応する開始時刻「１９:００:４６:０１」および終了時刻「１９：００：５６：５１」、並びに、テキスト２に対応する「今日の初めの話題は、車椅子に関することです」を、録画データ検索出力部８０に供給する。

なお、同一番組ＩＤにより区別される複数のテキスト群に、検索キーであるテキストデータが含まれていた場合、マッチング処理部９７は、検索キーであるテキストデータに対応する複数のタイムコードおよびテキストデータを検出することができるようにしても良く、このとき、例えば、検索キーであるテキストデータが含まれていた複数のテキスト群を表示部７４に表示させて、ユーザにより選択可能なようにしたり、ユーザの操作入力に基づいて、タイムコードにおいて早い時刻であるものから順番に、再生開始位置を順次変更することが可能なようにすることなどにより、複数の検出結果のうち、ユーザが所望する再生開始位置を含むテキストデータを、簡単な操作によって選択することができるようにしておくと好適である。

ステップＳ１８４において、録画データ検索出力部８０は、図８を用いて説明したように、供給されたテキストデータに対応する音声データの音数（多くの場合、文字数となる）とタイムコードから、ユーザが指定した「車椅子」というテキストが発話されたと推定される時刻を検出し、検出された時刻情報、すなわち、再生開始位置の検索キーとなるテキスト「車椅子」の発話タイミングに対応する時刻より、所定の時間Δｔだけ早い時刻に対応する時刻情報を算出する。

ステップＳ１８５において、録画データ検索出力部８０は、算出された時刻情報を基に、録画データ記憶部７２から、番組ＩＤで指定される録画データの、検索キーとなるテキストに対応する再生開始位置と推定される時刻より、所定の時間だけ早い位置を検索して、出力端子６１−１および出力端子６１−２を介して、表示選択字幕データデコーダ３に出力して、処理が終了される。

このような処理により、ユーザが入力したテキストデータを含むテキスト群の開始時刻および終了時刻に対応するタイムコードが検出され、検出されたタイムコードに基づいて、検索キーとなるテキストデータに対応する録画再生の開始位置の時刻情報が算出されて、算出された時刻情報を基に、録画データが検索される。本発明を適用することにより、例えば、録画データに含まれる字幕データに対応するテキストデータを全て検索して、ユーザが入力したテキストデータに対応する録画再生の開始位置が決定される場合と比較して、簡単に、高速に、ユーザが所望する再生開始位置を検索することが可能となるばかりでなく、テキスト群の長さやテキスト群における検索キーの位置にかかわらず、検索キーに対応する映像および音声に近い位置から録画データを再生させることが可能となる。

次に、図２０のフローチャートを参照して、図９および図１０を用いて説明した課金サーバ７が実行する課金処理について説明する。

ステップＳ２０１において、課金処理部２１０は、課金情報データベース２１１に登録されている情報を参照して、復号鍵を購入したユーザの課金情報を生成する。具体的には、課金処理部２１０は、課金情報データベース２１１に登録されている情報を参照して、ユーザ別に、決算を行った金融機関（例えば、クレジットカード会社、電子マネーのサービス提供元など）ごとに、復号鍵の購入により発生した代金を集計して、課金情報をする。

ステップＳ２０２において、課金処理部２１０は、所定の金融機関などに対する課金処理を実行する。具体的には、課金処理部２１０は、例えば、カード会社などの金融機関が保有する、決済処理を実行する図示しない課金サーバに、インターネット５、または、所定の専用線を介してアクセスし、ステップＳ２０１において生成されたユーザの課金情報を送信する。

ステップＳ２０３において、課金処理部２１０は、課金情報データベース２１１に登録されている情報を参照して、番組ごとの表示選択字幕データに対応するメタデータを復号するための復号鍵の供給数を算出する。

ステップＳ２０４において、課金処理部２１０は、ステップＳ２０３の算出結果に基づいて、放送局１ごとに、提供された表示選択字幕データに対応するメタデータを復号するための復号鍵の供給数を算出する。

ステップＳ２０５において、課金処理部２１０は、ステップＳ２０４の算出結果に基づいて、放送局ごとの支払い金額を算出する。具体的には、課金処理部２１０は、ユーザから得られた復号鍵の対価から、課金サーバ７を保有するサービス提供者が得る利益（放送局１と課金サーバ７を保有するサービス提供者との契約により決められるものであり、所定の金額であっても、復号鍵の対価のうちの何割かであっても良い）を引いた金額を算出し、放送局ごとの支払い金額とする。

ステップＳ２０６において、課金処理部２１０は、ステップＳ２０５の処理によって算出された支払い金額を基に、それぞれの放送局へ対価を支払う処理を実行し、処理が終了される。具体的には、課金処理部２１０は、放送局１により指定された金融機関（例えば、銀行など）が保有する実行する図示しない課金サーバに、インターネット５、または、所定の専用線を介してアクセスし、ステップＳ２０５において算出された支払い金額を、指定された口座に振り込むために必要な情報を送信する。

このような処理により、メタデータの復号に用いられる復号鍵の配布に対する対価の課金処理を行うことができる。また、この復号鍵の購入によりユーザから得られた対価のうちの少なくとも一部は、表示選択字幕データを作成した放送局１に支払われるので、表示選択字幕が付加された番組の割合が増えることが予測され、聴覚障害者がより多くの番組を楽しむことができるようになる。

以上説明した処理により、表示選択字幕データを用いて、ユーザにより入力されたテキストデータを用いて、録画データから、ユーザが所望する情報を精度良く検索すること、すなわち、ユーザが検索キーとして入力したテキストに対応する音声が発話された時刻に近い時刻から、録画データの再生を開始させることが可能となる。また、検索処理に利用されるメタデータを復号するための復号鍵を課金サーバ７により有料でユーザに配布するようにすることにより、放送局に対して、表示選択字幕データの作成に対する対価を支払うようにすることができるので、産業の発展に貢献可能であるのみならず、字幕データが放送信号に添付される割合を向上することにつながり、聴覚障害者にとっても非常に有益となる。

なお、ここでは、メタデータは、メタデータ作成サーバ６によって作成され、インターネット５を介して、ユーザが保有するホームサーバ４に供給されるものとして説明したが、メタデータは、メタデータ作成サーバ６サーバで作成されなくても、例えば、ホームサーバ４や、表示選択字幕デコーダ３をはじめとする、いずれかの装置において作成されるものとしてもよく、ホームサーバ４がメタデータを取得することが可能であれば、本発明を適用することが可能であることはいうまでもない。また、ホームサーバ４が取得するメタデータが復号されていないものである場合にも、本発明は適用可能であり、そのようなとき、ホームサーバ４は、メタデータを復号するための復号鍵を取得し、復号処理を実行する機能を省略することが可能である。

上述した一連の処理は、ソフトウェアにより実行することもできる。そのソフトウェアは、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。

この記録媒体は、図５または図７に示すように、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク１２１（フレキシブルディスクを含む）、光ディスク１２２（CD-ROM（Compact Disk-Read Only Memory），ＤＶＤ（Digital Versatile Disk）を含む）、光磁気ディスク１２３（ＭＤ（Mini-Disk)（商標）を含む）、もしくは半導体メモリ１２４などよりなるパッケージメディアなどにより構成される。

また、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。

なお、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。

また、複数の装置により構成されるシステムの一部、または、全部が実行する処理が、同一の情報処理装置の処理によって実現される場合であっても、本発明は適用可能であることは言うまでもない。

本発明を適用した情報処理システムの構成について説明するための図である。 図１の放送局から放送される放送信号について説明するための図である。 図１の表示選択字幕デコーダおよびホームサーバについて説明するためのブロック図である。 図３の表示選択字幕デコーダによって生成される録画データについて説明するための図である。 図１のメタデータ作成サーバの構成について説明するためのブロック図である。 図５のメタデータ作成サーバが実行する処理について説明するための機能ブロック図である。 メタデータ作成サーバにより作成されるメタデータについて説明するためのブロック図である。 検索のキーとなるテキストの開始点を検出する方法について説明するための図である。 図１の課金サーバの構成について説明するためのブロック図である。 図９の課金サーバが実行する処理について説明するための機能ブロック図である。 表示選択字幕デコーダの処理１について説明するためのフローチャートである。 録画データ作成処理１について説明するためのフローチャートである。 メタデータ作成処理１について説明するためのフローチャートである。 ユーザ登録処理について説明するためのフローチャートである。 メタデータ供給処理について説明するためのフローチャートである。 復号鍵供給制御処理について説明するためのフローチャートである。 メタデータ記憶処理１について説明するためのフローチャートである。 メタデータ取得処理について説明するためのフローチャートである。 検索処理について説明するためのフローチャートである。 課金処理について説明するためのフローチャートである。

符号の説明

１ 放送局
２ テレビジョン受像機
３ 表示選択字幕デコーダ
４ ホームサーバ
５ インターネット
６ メタデータ作成サーバ
７ 課金サーバ
１５ 映像データ
１６ 音声データ
１７ 表示選択字幕データ
２１ 入力端子
３３ 出力信号生成部
３５ 表示選択字幕データデコーダ
３６ ＯＳＤ
３７ 合成処理部
３９ 番組ＩＤ情報抽出部
４０ タイマ
４１ 操作入力部
７１ 操作入力部
７２ 録画データ記憶部
７３ ネットワークインターフェース
７７ 復号処理部
７８ メタデータ記憶部
７９ マッチング処理部
８０ 録画データ検出出力部
９５ 録画開始時刻情報
１４１ 放送データ取得部
１４３ 番組ＩＤ情報抽出部
１４４ メタデータ生成部
１４５ 表示選択字幕データデコーダ
１４７ タイムコード付加処理部
１４９ 暗号化処理部
１５２ メタデータ供給制御部
１６１ メタデータ
１６５ テキストデータ
１６６ タイムコード
１６７ 番組ＩＤ
２０４ 操作入力情報取得部
２０５ ユーザ情報登録処理部
２０６ ユーザ情報データベース
２０７ 認証処理部
２０８ 鍵供給処理部
２１０ 課金処理部
２１１ 課金情報データベース

Claims (6)

1. テキスト情報を検索キーとして、録画データを検索する情報処理装置において、
   第１の時刻情報が付加された前記録画データの記憶を制御する録画データ記憶制御手段と、
   前記録画データの番組を区別するための区別情報、前記録画データに関するテキストデータ、および、前記テキストデータに対応する第２の時刻情報を含むメタデータを記憶するメタデータ記憶手段と、
   ユーザの操作入力を受ける操作入力手段と、
   前記操作入力手段により前記ユーザから入力された、検索を実行する番組を指定する情報および検索キーとなるテキスト情報と、前記メタデータ記憶手段により記憶された前記メタデータとのマッチング処理を実行して、検索キーとなる前記テキスト情報に対応する前記第２の時刻情報および前記テキストデータを検出するマッチング処理手段と、
   前記録画データ記憶制御手段により記憶が制御されている前記録画データから、前記マッチング処理手段により検出された前記第２の時刻情報に対応する記録位置を検索し、検索された前記テキストデータのうち、検索キーとなる前記テキスト情報と一致するテキストの位置を検出して、検出結果に基づいて前記録画データを検索して読み出す検索手段と
   を備えることを特徴とする情報処理装置。
2. 前記検索手段は、検索キーとなる前記テキスト情報と一致するテキストの位置より所定時間だけ前の時刻を、前記録画データの読み出しの開始位置として検索する
   ことを特徴とする請求項１に記載の情報処理装置。
3. 暗号化された前記メタデータを取得するメタデータ取得手段と、
   暗号化された前記メタデータを復号するために用いられる鍵情報を取得する鍵情報取得手段と、
   前記メタデータ取得手段により取得された暗号化された前記メタデータを、前記鍵情報取得手段により取得された前記鍵情報を用いて復号する復号処理手段と
   を更に備え、
   前記メタデータ記憶手段により記憶される前記メタデータは、前記復号処理手段により復号された前記メタデータである
   ことを特徴とする請求項１に記載の情報処理装置。
4. メタデータを利用して、第１の時刻情報が付加された録画データを検索する情報処理装置の情報処理方法において、
   前記録画データの番組を区別するための区別情報、前記録画データに関するテキストデータ、および、前記テキストデータに対応する第２の時刻情報を含む前記メタデータの記憶を制御するメタデータ記憶制御ステップと、
   検索を実行する番組を指定する情報および検索キーとなるテキスト情報の入力を制御する入力制御ステップと、
   前記入力制御ステップの処理により入力が制御された前記番組を指定する情報および前記テキスト情報と、前記メタデータとのマッチング処理を実行して、前記テキスト情報に対応する前記第２の時刻情報と、前記テキスト情報を含む前記テキストデータを検出する検出ステップと、
   前記検出ステップの処理により検出された前記テキストデータのうち、前記テキスト情報の位置を算出する算出ステップと、
   前記検出ステップの処理により検出された前記第２の時刻情報に対応する記録位置を検索し、検索された記録位置、および、前記算出ステップの処理により算出された前記テキストデータのうちの前記テキスト情報の位置を基に、前記録画データを検索して読み出す読み出しステップと
   を含むことを特徴とする情報処理方法。
5. メタデータを利用して、第１の時刻情報が付加された録画データを検索する処理をコンピュータに実行させるためのプログラムであって、
   前記録画データの番組を区別するための区別情報、前記録画データに関するテキストデータ、および、前記テキストデータに対応する第２の時刻情報を含む前記メタデータの記憶を制御するメタデータ記憶制御ステップと、
   検索を実行する番組を指定する情報および検索キーとなるテキスト情報の入力を制御する入力制御ステップと、
   前記入力制御ステップの処理により入力が制御された前記番組を指定する情報および前記テキスト情報と、前記メタデータとのマッチング処理を実行して、前記テキスト情報に対応する前記第２の時刻情報と、前記テキスト情報を含む前記テキストデータを検出する検出ステップと、
   前記検出ステップの処理により検出された前記テキストデータのうち、前記テキスト情報の位置を算出する算出ステップと、
   前記検出ステップの処理により検出された前記第２の時刻情報に対応する記録位置を検索し、検索された記録位置、および、前記算出ステップの処理により算出された前記テキストデータのうちの前記テキスト情報の位置を基に、前記録画データを検索して読み出す読み出しステップと
   を含むことを特徴とする処理をコンピュータに実行させるためのプログラム。
6. 放送信号を取得して処理する第１の情報処理装置と、
   テキスト情報を検索キーとして、録画データを検索する第２の情報処理装置と、
   前記第２の情報処理装置で実行される検索処理に利用されるメタデータを生成する第３の情報処理装置と、
   前記第２の情報処理装置で実行される検索処理に利用される前記メタデータを復号する復号鍵を供給する第４の情報処理装置と
   によって構成される情報処理システムにおいて、
   前記第１の情報処理装置は、
   前記放送信号を取得する第１の放送信号取得手段と、
   前記第１の放送信号取得手段により取得された前記放送信号から、前記放送信号の番組を固有に区別可能な区別情報を取得する第１の区別情報取得手段と、
   前記第１の放送信号取得手段により取得された前記放送信号に、第１の時刻情報と、前記第１の区別情報取得手段により取得された前記区別情報とを付加して前記録画データを生成する情報付加手段と
   を備え、
   前記第２の情報処理装置は、
   前記第１の時刻情報と前記区別情報とが付加された前記録画データの記憶を制御する録画データ記憶制御手段と、
   暗号化された前記メタデータを取得するメタデータ取得手段と、
   暗号化された前記メタデータを復号するために用いられる前記復号鍵を取得する復号鍵取得手段と、
   前記メタデータ取得手段により取得された暗号化された前記メタデータを、前記復号鍵取得手段により取得された前記復号鍵を用いて復号する復号処理手段と、
   前記復号処理手段により復号された、前記録画データの番組を区別するための前記区別情報、前記録画データに関するテキストデータ、および、前記テキストデータに対応する第２の時刻情報を含む前記メタデータを記憶するメタデータ記憶手段と、
   ユーザの操作入力を受ける操作入力手段と、
   前記操作入力手段により前記ユーザから入力された、検索を実行する番組を指定する情報および検索キーとなるテキスト情報と、前記メタデータ記憶手段により記憶された前記メタデータとのマッチング処理を実行して、検索キーとなる前記テキスト情報に対応する前記第２の時刻情報および前記テキストデータを検出するマッチング処理手段と、
   前記録画データ記憶制御手段により記憶が制御されている前記録画データから、前記マッチング処理手段により検出された前記第２の時刻情報に対応する記録位置を検索し、検索された前記テキストデータのうち、検索キーとなる前記テキスト情報と一致するテキストの位置を検出して、検出結果に基づいて前記録画データを検索して読み出す検索手段と
   を備え、
   前記第３の情報処理装置は、
   前記放送信号を取得する第２の放送信号取得手段と、
   前記第２の放送信号取得手段により取得された前記放送信号から、前記放送信号の番組を固有に区別可能な前記区別情報を取得する第２の区別情報取得手段と、
   前記第２の放送信号取得手段により取得された前記放送信号から、ユーザにより表示するか否かを選択することが可能な字幕データを抽出してデコードする字幕データデコード手段と、
   前記字幕データデコード手段によりデコードされた前記字幕データに対応するテキストデータにタイムコードを付加するタイムコード付加手段と、
   前記タイムコード付加手段により前記タイムコードが付加された前記テキストデータに、前記区別情報取得手段により取得された前記区別情報を付加して、前記メタデータを生成するメタデータ生成手段と、
   前記メタデータ生成手段により生成された前記メタデータを暗号化する暗号化手段と
   を備え、
   前記第４の情報処理装置は、
   前記第２の情報処理装置から、前記ユーザの認証に関する情報を取得する認証情報取得手段と、
   前記ユーザの登録情報の記憶を制御する登録情報記憶制御手段と、
   前記認証情報取得手段により取得された前記ユーザの認証に関する情報、および、前記登録情報記憶制御手段により記憶が制御されている前記ユーザの登録情報を基に、認証処理を実行する認証処理手段と、
   前記認証処理手段により前記ユーザが正しく認証された場合、前記第２の情報処理装置への、前記メタデータを復号する前記復号鍵の供給を制御する復号鍵供給制御手段と
   を備えることを特徴とする情報処理システム。

Images