JP5237803B2 - ユーザにより定義された基準に基づきドキュメントのサマリを生成する方法及び関連するオーディオビジュアル装置 - Google Patents

Description

発明の詳細な説明

本発明は、オーディオビジュアルドキュメントのサマリを生成する方法と、サマリを生成する装置とに関する。本発明は、オーディオビジュアルドキュメントの表示のフレームワークの範囲内にある。

今日、オーディオビジュアルプログラムの視聴を可能にする多数の装置が存在する。これらの装置として、テレビ受信機、デコーダ、オーディオビジュアルプロガラムの記録受信機などがあげられる。このような装置のユーザは、大量のオーディオビジュアル情報を取得することが可能である。従って、ユーザは各プログラムに費やす時間があまりなく、しばしばサマリを表示することによってそれらをブラウズすることを所望する。フットボールの試合などのプログラムは、ゴールなどの他のものより関心がある瞬間やベストアクションを有する。時間のあまりないユーザは、最も面白いシーケンスから構成されるサマリのみを視聴することを所望するかもしれない。テレビ番組の放送局は、それらが放送するプログラムの一部に対応するオーディオビジュアルサマリを送信することができる。これらのサマリは、例えば、フィルム配信のプレビュー予告などである。しかしながら、これは放送局がサマリを構成することを必要とする。さらに、このようなサマリの放送は、配信ネットワーク上の無視できない帯域幅を占有する。

放送局は、異なる長さのサマリを提案することができる。しかしながら、ユーザ又は視聴者は、放送局により決定され続ける時間及びコンテンツを自らは規定することはできない。シーケンスの一部をスキップすることによりシーケンスの部分的な視聴を行うことによって、サマリを構成するシーケンスの時間又はタイプを変更することはできない。例えば、ニュースプログラムについて、プログラムデザイナーに利用可能な現在の技術によると、放送局は予め決定された時間にシーケンスの時間を調整する必要がある。同じレポートが、配信される日時に従って複数のエディットを生じさせる可能性がある。例えば、１時のニュースの間に放送された同一のレポートは５分間を有するが、それは８時のニュースでは３分間に短縮される必要がある。

さらに、プログラムやレポートに対する視聴者の関心やそれらの時間に関係なく、視聴者の存在及び利用性は、原則的には、放送の全時間がユーザによるプログラムの正確な理解を仮定することが可能となるよう要求される。

ＧｉｒｇｅｎｓｏｈｎによるＵＳ６，８０７，３６２の文献は、オーディオビジュアルドキュメントからサマリを生成する方法について記載している。当該ドキュメントは、同じ時間のいくつかのクリップに分割され、各クリップが不満足値に関連付けされる。プログラムは、サマリを生成するため、不満足値に従ってクリップを抽出する。

ＵＳ２００５／１４１，８５９の文献は、オーディオビジュアルドキュメントのシーケンスからサマリを生成する方法について記載している。キャパシティパラメータが各シーケンスに関連付けされ、当該パラメータに従って、装置はシーケンスをサマリに含めるか含めない。これら２つのドキュメントは、ある特性を有するシーケンスを選択することによってサマリを生成する方法を示す。これらのドキュメントの何れも、ユーザにより選択されたシーケンスの理解を向上させる問題を解消するものでない。

本発明は、時間の選択及び／又は選択されたテーマに関してユーザにさらなるフレキシビリティを与えることによって、放送局により送信されるオーディオビジュアルプログラムのサマリの生成を可能にする方法に関する。一実施例によると、本発明は、その時間がユーザにより調整可能なコンテンツの生成を可能にする。オーディオビジュアル受信機が、ユーザにより規定された基準に従って生成されたサマリの時間を調整する。

このため、本発明は、オーディオビジュアル受信機に記録され、シーケンス群により構成されるオーディオビジュアルドキュメントのサマリの生成方法であって、少なくとも１つの第１シーケンスが、少なくとも１つの第２シーケンスの識別子に関連付けされ、当該方法は、前記サマリに含めるための表示により少なくとも１つの第１シーケンスの選択コマンドを入力するステップと、ユーザにより選択されていない第２シーケンスを前記サマリに追加するステップとを有し、前記追加されるシーケンスは、前記選択された第１シーケンスに係る前記リストにおいて識別される方法に関する。

このようにして、生成されたサマリは、ユーザにより選択された第１シーケンスと、サマリの全体的な理解に役立つ第２シーケンスの両方を有する。依存性パラメータは、第１シーケンスが少なくとも１つの第２シーケンスに関連付けされることを可能にする。第２シーケンスは、ユーザにより選択された第１シーケンスに追加され、この追加は特にサマリをより良好に理解することを可能にする。他の改良によると、ユーザはサマリの時間を入力する。第１及び第２シーケンスの合計時間は、許容される時間を超過してはならない。このため、ユーザは、自分のサマリの生成をより良好に制御可能となる。他の改良によると、第２シーケンスとのリンクが、第１シーケンスの理解のため第２シーケンスの重要性を規定した依存値に関連付けされる。最も重要な第２シーケンスが、サマリに優先的に追加される。このようにして、最も重要なシーケンスのみが追加される。

他の改良によると、関連するシーケンスがサマリに含められるか判断するため、関連するシーケンスがデフォルト値と比較される。このようにして、当該処理は自律的なものとなり、ユーザは第２シーケンスを選択するための閾値を規定する必要がなくなる。他の改良によると、ユーザは第１シーケンスを選択するための基準を入力する。このようにして、ユーザはそれらを手動により選択することが不要となり、モジュールは、各シーケンスに係る属性値と入力された基準とを比較することによってこれを実行する。

他の改良によると、サマリが許容された時間を超過する場合、新たなサマリの第２生成処理が、より少数の第１シーケンスを選択するようにユーザにより入力された選択基準の値を増加することにより開始される。このようにして、サマリの時間はユーザにより入力された時間に対応する。

上述した改良の変形によると、サマリが許容される時間を超過する場合、新たなサマリの第２の生成処理が、第２シーケンスを選択するよう最小依存値を増加させることにより開始される。このようにして、サマリの時間はより少数の第２シーケンスを選択するようユーザにより入力された時間に対応する。第３の変形は、上述した２つの変形を組み合わせることからなる。他の改良によると、サマリの生成に従って、本方法はそれの時間の指標を視聴するステップを有する。

本発明はまた、各シーケンスに分割された少なくとも１つのオーディオビジュアルドキュメントを格納する手段と、前記少なくとも１つのドキュメントの各部分を視聴する手段とを有するオーディオビジュアルプログラム受信機であって、少なくとも１つの第１シーケンスが、少なくとも１つの第２シーケンスの識別子のリストに関連付けされ、受信機は、少なくとも１つの第１シーケンスの選択コマンドを入力する手段と、選択された第１シーケンスと選択コマンドにより選択されない第２シーケンスとから構成されるサマリを生成する手段とを有し、前記追加された第２シーケンスは、前記選択された第１シーケンスに係るリストにおいて識別される受信機に関する。

本発明の実施例による表示装置２に備えられたマルチメディア受信機１の構成がまず記載される。ここではデコーダについて記載されるが、例えば、パーソナルコンピュータ、ＰＶＲ（すなわち、本出願により製造販売されているＴＨＯＭＳＯＮモデルＤＴＨ７０００などの大容量のランダムアクセス記録装置）、オーディオビジュアルコンテンツにアクセス可能であり、メニュー生成表示手段を有する何れかの装置など、他の装置もまた考えることができ、本発明を適用可能である。受信機は、プログラムメモリ１２に接続された中央処理ユニット３と、オーディオ／ビデオデータのリアルタイムによる送信を可能にする高ビットレートデジタルバス６と通信するためのインタフェース５とを有する。このネットワークは、好ましくは、パブリックなものであり、リモートサーバへのアクセスを可能にする。ＩＰネットワークが最も一般的である。受信機はまた、復調手段４に係る受信機アンテナを介し放送ネットワークからオーディオ／ビデオデータを受信することが可能である。受信機はさらに、リモコン８の信号を受信する赤外線信号受信機７、オーディオビジュアルコンテンツを格納するデータベースのためのメモリ９、テレビ画面２に送信されるオーディオビジュアル信号を生成するオーディオ／ビデオ復号ロジック１０を有する。リモコンには、矢印キー↑、↓、→及び←と、ボタン“ＯＫ”及び“選択”とを備える。これらの機能については以降に記載される。メモリ９は、効果的には、オーディオビジュアルコンテンツの少なくとも数時間分の記録が可能な数百メガバイトのハードディスクである。このオーディオビジュアルコンテンツは、データベースに記録されたタイトルにより特定される。

受信機はまた、ＯＳＤ（Ｏｎ Ｓｃｒｅｅｎ Ｄｉｓｐｌａｙ）回路としばしば呼ばれる画面上のデータの表示回路１１を有する。ＯＳＤ回路１１は、メニューや絵文字（表示チャネルに対応する数字など）の画面表示を可能にし、本発明によりナビゲートメニューを表示可能であり、特に１以上のボタンバーを表示可能なテキストグラフィックス生成手段である。ＯＳＤ回路１１は、中央処理ユニット３とメモリ１２に記録されたソフトウェアモジュール１３とにより制御される。ソフトウェアモジュール１３は、効果的には、ＲＯＭ（Ｒｅａｄ−Ｏｎｌｙ Ｍｅｍｏｒｙ）に記録されたプログラムの形式により実現される。それはまた、ＡＳＩＣタイプの特殊回路などの形式により実現可能である。

デジタルバス６及び／又は配信ネットワークは、マルチメディアコンテンツを有するデータと、当該コンテンツの記述データとを受信機に送信する。記述データは、アクセス可能なマルチメディアコンテンツの“属性”と一般に呼ばれる分類要素を有する。記述データは、例えば、ある基準に従ってドキュメントを特徴付けることを可能にする属性値である。本発明では、ドキュメントは各シーケンスについて属性値を初期化する供給者によりシーケンスに分割される。すべてのデータは、受信機のメモリ９のデータベースに格納される。その後、モジュール１３は、このデータベースから情報を抽出し、画面上に表示されるブラウジングメニューと、特に１以上のボタンを生成するためこれを処理する。

実施例の各要素を詳述した後、これらの要素がどのように協調するか説明される。本発明は、ある程度の理解度を保証しながら、シーケンスから構成され可変的な時間を有するオーディオビジュアルドキュメント抽出の時間を視聴者が制御することを可能にすることを所望するフレームワークにおいて記載されることに留意すべきである。ユーザとの相互作用手段は、ユーザがそれを視聴するのに費やすことを所望する時間にシーケンスを調整するようダイナミックな編集を規定及び処理することを可能にする。

図２は、本発明の実施例による処理の全体的なフローチャートを示す。まず、ドキュメントはシーケンスに分割され（ステップ２．１）、基準に関連する属性値が各シーケンスについて計算される（ステップ２．２）。

第１の基準は時間であり、各シーケンスは、ドキュメントの参照されるスタート時刻と時間を有する。第２の基準がテーマである。例えば、ユーザはプライオリティとして強力なエモーションを有するシーケンスを選択することができ、その後、選択モジュールはこれらのシーケンスを選択する。本実施例では、ドラマ、アクション、風景の有無などの複数のテーマ基準がある。他の基準はペアレンタルコントロールである。各シーケンスは、暴力レベルを規定する１〜６のコードによりマーク付けされ、レベル６は、最も暴力的であり、通常は青少年には禁止されている。これにより、ユーザは、１〜４の範囲内のレベルを選択可能であり、過度の暴力的シーケンスをサマリに導入することを防ぐことができる。このため、この基準の導入は一部のシーケンスが禁止されることを可能にする。

本発明の重要な特徴によると、ドキュメントの制作者により決定された基準は、一部のシーケンスが生成されるサマリの理解にとって重要であるとマーク付けされることを可能にする。第１の変形は、理解インデックスを規定することから構成される。シーケンスの理解インデックスの数値が高くなるに従って、ユーザがドキュメントの意味的内容の継続性に追随することがより重要かつ有用となる。ユーザにより選択される基準に関係なく、理解するため最も重要なシーケンスがサマリに含まれることが有用である。

属性セットは、オーディオビジュアルドキュメントに関するテーブルを構成する。図３は、このようなテーブルを概略的に示す。

本例では、ドキュメントは１６個のシーケンスに分割される。この分割は、原則的にシーケンスの有用な又は芸術的な値を変化させることなく、先行するシーケンスから分離可能となるように実行される。シーケンスへの分離ステップの終了時、シーケンスに係る属性値と共に、ドキュメントは１つのブロックにダウンロードすることができるように合成される。図３の例では、選択基準は、シーケンスのドラマティックレベル、アクションレベル、シーケンスが風景を示す事実、ペアレンタルコントロールの数値である。ユーザにアクセス可能なこれら４つの基準に加えて、テーブルは各シーケンスの時間の指標を有する。後述されるように、ユーザは生成されるサマリの最大及び最小時間を設定することができる。シーケンスの時間パラメータが、理解インデックスの数値と共にその後に考慮される。

他の変形は、シーケンス間の依存性パラメータを規定することから構成される。各“第１”シーケンスについて、制作者は、好ましくは、サマリ内の第１シーケンスに先行及び／又は追随する必要がある１以上の依存した又は“第２の”シーケンスを関連付けるか、又は関連付けない。図３のテーブルには図示されないこの変形は、第１シーケンスの依存するシーケンスの識別子のおそらくエンプティなリストから構成される依存性パラメータを利用することから構成される。例えば、シーケンス３はシーケンス４に関連付けされていると仮定する。このとき、シーケンス３がユーザにより規定された基準に従って選択及び視聴される場合、上記基準に必ずしも該当しないシーケンス４もまた選択される。シーケンス４が選択される場合にシーケンス３が必ずしも選択されないように、関連付けは一対一の対応付け（ｂｉｊｅｃｔｉｖｅ）になっていないことに留意されたい。この変形は、追加する第２シーケンスの選択においてプライオリティが規定されることを可能にする各第２シーケンスと理解インデックスとを関連付けることを排除しない。このように、サマリの基準プログラムは、第２シーケンスの追加中にオーダーを決定することができる。

その後、ドキュメントが、ユーザに利用可能とされる（ステップ２．３）。

ユーザがドキュメントを選択し、それの属性テーブルと共にダウンロードすると仮定する。受信機１のハードディスク９にすべてが記録される。その後、ユーザは、“ＣＶＭ”と呼ばれるコンテンツ視聴モジュールをスタートする。好適な実施例によると、このモジュールは、概念的にはアプリケーション処理データパケットであるが、専用回路が利用されるオーディオ又はビデオ受信機と同様に、物質的にはマイクロプロセッサにより生成されるプログラムである。シンプルな方法では、このモジュールは、ハードディスクに記録されるすべてのドキュメントに関する画面情報に表示されるメニューにより提供される。ユーザはこのメニューをブラウズし、方向キーを使用して記録されたドキュメントを視覚的にハイライトする。リモコン１１の“ＯＫ”ボタンを押下することによって、ユーザはハイライとされるドキュメントのサマリを生成するため、モジュールの実行を開始する。この実行処理はまた、画面上に表示されるアイコンを起動することによって実行することも可能である。リモコン１１（又は対応するアイコン）の“ＥＮＤ”ボタンを押下することにより、ＣＶＭモジュールは何れかの時点でイグジットされることが可能となる。

それの実行の開始時、ＣＶＭモジュールは、タイトル及びテキスト情報（俳優、監督の名前）、ドキュメントのフル状態の時間、シーケンス数、テーブルにおいて利用可能な属性のリストなど、ドキュメントに関連する一般的な情報を表示する。

その後、ＣＶＭモジュールは、ドキュメントのサマリを生成することを可能にするため、ユーザからの命令を待機する。各値の入力は、リモコン８の数字キーパッドによって、又は画面に各桁を示すアイコンを選択することによって実行される。ステップ２．４において、ユーザは、おそらく属性値を追加することによって１以上の基準を選択する。ステップ２．５において、ＣＶＭモジュールは、属性テーブルを探索し、ユーザにより選択された属性が決定された閾値より高い値を有するすべてのシーケンスを選択する。この閾値はユーザにより決定されるか、またはイベント制作者により規定されたデフォルト値である。例えば、アクション属性は、各シーケンスのアクションレベルを規定し、当該属性のレベルは１〜６に割り当てられる。ここで、レベル６が多数のアクションを有するシーケンス（追跡シーンなど）に対応する。ユーザは最小レベル３を入力可能であり、この場合、３、４、５又は６に等しいレベルを有するすべてのシーケンスが、ＣＶＭモジュールにより選択される。一変形は、イベントの制作者が自らレベル値を、５などに初期化することからなる。ステップ２．６において、ＣＶＭモジュールは、ユーザにより入力された基準には該当しないが、サマリの理解に役立つシーケンスを追加する。ステップ２．７において、サマリは選択されたシーケンスを連結することにより生成される。

簡単化された実施例によると、ユーザは、第１シーケンスを視聴することにより、又はこれらのシーケンスを特定する画像を視聴することによって、第１シーケンスを手動により選択する。その後、ＣＶＭモジュールは、生成されたサマリの良好な理解に役立つ第２シーケンスを追加する。追加された第２シーケンスの選択は、各第２シーケンスに係る理解インデックスを考慮することにより効果的に実行可能であり、与えられた第１シーケンスのベストなインデックスを有するシーケンスが、優先的に追加される。

ＣＶＭモジュールにより生成されるサマリが、ユーザにより決定された時間を超過しないことにより改良される。図４を使用して、この改良を考慮した生成フローチャートが説明される。

ユーザは、各シーケンスに分割されたドキュメントを以前に選択している。ステップ４．１において、ユーザは、サマリの少なくとも１つの生成基準と最大時間とを入力する。その後、モジュールはそれの変数を初期化する。生成されるサマリの時間は０に設定され、テーブルのシーケンスを指示するインデックスが、第１シーケンスの属性を読み込むため１に設定される（４．２）。ステップ４．３において、ＣＶＭモジュールは、現在シーケンスに関連付けされ、生成基準に対応する属性値を読み込む。その後にステップ４．４において、モジュールは、これらの属性の累積された値をテストし、それを最小選択値と比較する。当該値が低い場合、モジュールは、このシーケンスが生成されるサマリの良好な理解に有用であるかテストする（ステップ４．５）。当該テストは、理解インデックスと閾値との比較から構成される。理解インデックスが閾値より大きい場合、シーケンスは保持される。当該値が選択値以上である場合、シーケンスはまた保持される。この場合、シーケンスは現在のサマリに追加され（ステップ４．６）、サマリの合計時間が、追加されたシーケンスの前の時間となる（ステップ４．７）。そうでない場合、テーブルテストステップのエンドに直接到達する。ステップ４．８において、モジュールは、テーブルのエンドに到達したか、処理すべきシーケンスが残ってないかテストする。そうでない場合、モジュールは、ユニットのシーケンスのインデックスを増加し、次のシーケンスの属性の読み込むステップ４．３にジャンプすることからなるステップ４．９に移行する。最後のシーケンスに到達した場合、モジュールは、サマリの合計時間がユーザにより示される最大時間に到達したかテストする（ステップ４．１０）。そうである場合、サマリは長すぎ、ＣＶＭモジュールは最小選択値を増加し（ステップ４．１１）、ステップ４．２に戻る。その後、サマリの合計時間がユーザにより指定された時間に近づくように、より少数の第１シーケンスが選択される。一変形は、理解インデックスにより第２シーケンスを選択するのに利用される閾値を増加することからなる。このようにして、生成されたサマリがより短くなるように、より少数の第２シーケンスがステップ４．６において追加される。第２の変形は、理解インデックスにより第２シーケンスを選択するのに利用される閾値と最小選択値の両方を増加することからなる。しかしながら、ステップ４．１０のテストが、サマリの合計時間がユーザにより示される最大時間を超過しないことを示す場合、サマリが決定される。

理解のため重要なシーケンスが他のシーケンスに関連付けされる場合、ＣＶＭモジュールは、まず最小選択値より大きな合計属性値を有するシーケンスを選択する。この選択が行われると、ＣＶＭモジュールは、２回目のテーブルの探索を行い、少なくとも以前に選択された１つのシーケンスのすべての依存したシーケンスを追加する。その時間が長すぎる場合、ＣＶＭモジュールは、最小選択値を増加することによって、選択から第１シーケンスを排除し、モジュールはより少数の依存するシーケンスを保持し、サマリが短縮される。このようにして、最も重要な第２シーケンスのみが、サマリの時間に到達するまでサマリに追加される。

一改良によると、ＣＶＭモジュールは、生成されたサマリの視聴コマンドを統合する。図５は、このようなサマリを視聴するための画面表示の一例を示す。サマリを構成するシーケンスが画面３０の上部に表示され、コマンドバナー４１が画面の下部に表示される。このバナーは、プログラムの通常表示に戻るＣＶＭのエンド（４２）、スタート又は前のシーケンスへのリターン（４３）、次のシーケンスへのスキップ（４４）、フレームのフリーズ（４５）、通常／低速モーションスピードによる視聴（４６）、連続的／ストップフレーム視聴（４７）など、ユーザに提供されるコマンドアイコンを含む。

効果的には、サマリの合計時間とスタートに関して提供された時刻とを示す図示されないウィンドウが、画面上に表示される。このようにして、ユーザはサマリを視聴するのに要する時間を確認する。

本発明が請求される本発明の領域から逸脱することなく、他の多数の具体的な形式による実施例を可能にすることは当業者に明らかである。このため、本実施例は具体例としてみなされる必要があり、添付された請求項の範囲により規定される領域において変更可能である。

特に、本発明は、テレビデコーダに限定されず、オーディオビジュアルプログラムを受信する何れの装置にも適用可能である。オーディオビジュアルプログラムは、オーディオビジュアルプログラムの伝送を可能にするビデオカセット又は他の何れかのサポートの形式により受信可能であり、当該受信手段は、オーディオビジュアルサポートを読み込む手段となる。

図１は、本発明を実現するテレビ受信機を示す。 図２は、本発明による方法の各ステップのフローチャートを示す。 図３は、ドキュメントの各シーケンスに係るパラメータのテーブルの一例を示す。 図４は、本発明の実施例の各ステップのフローチャートを示す。 図５は、コンテンツ視聴モジュールの制御のための画面表示を示す。

Claims (4)

1. オーディオビジュアル受信機に記録され、シーケンス群により構成されるオーディオビジュアルドキュメントのサマリを生成する方法であって、
   前記ドキュメントの各第１シーケンスは、各第１シーケンスと１以上の第２シーケンスとを関連付ける第２シーケンスの各識別子のリストを構成する依存性パラメータと関連付けされ、各第２シーケンスに依存値が割り当てられ、
   当該方法は、
   前記サマリの再生の時間を入力するステップと、
   前記サマリに含めるための表示により少なくとも１つの第１シーケンスの選択コマンドを入力するステップと、
   少なくとも１つの第２シーケンスを前記サマリに複数回追加するステップであって、前記追加された第２シーケンスは、前記選択された第１シーケンスに関連付けされたリストにおいて識別され、前記第１シーケンスに係る第２シーケンスは、前記サマリの理解における有用性を示す理解インデックスに従って追加されるステップと、
   を有し、
   前記サマリの合計時間が前記入力された時間に到達すると、前記追加するステップの繰り返しを中断する方法。
2. 前記理解インデックスが前記入力された値より大きい場合、前記第２シーケンスは前記サマリに追加される、請求項１記載の方法。
3. 各シーケンスに分割される少なくとも１つのオーディオビジュアルドキュメントを格納する手段と、前記ドキュメントの各部分を視聴する手段とを有するオーディオビジュアルドキュメントのサマリを生成する装置であって、
   当該装置は、前記ドキュメントの各第１シーケンスを１以上の第２シーケンスに関連付ける各識別子のリストからなる依存性パラメータを格納する手段を有し、依存値が各第２シーケンスに割り当てられ、
   当該受信機は、前記サマリの再生の時間を入力する手段と、少なくとも１つの第１シーケンスの選択コマンドを入力する手段と、選択された前記第１シーケンスと第２シーケンスとから構成されるサマリを生成する手段とを有し、
   前記追加された第２シーケンスは、前記選択された第１シーケンスに関連付けされたリストにおいて識別され、
   前記サマリを生成する手段は、前記サマリの理解における有用性を示す各自の理解インデックスに従って第２シーケンスを追加し、前記サマリの合計時間が前記入力された時間に到達すると、前記第２シーケンスの追加を中断する装置。
4. 選択された第２シーケンスの理解インデックスが前記入力された値より大きい場合、前記サマリを生成する手段は、前記第２シーケンスを前記サマリに追加する、請求項３記載の装置。
   

Images