JP2004531920A - デジャヴュ・ビデオシステム用のユーザ・インタフェースを提供するシステム及び方法 - Google Patents

Abstract

主要なマルチメディア文書と複数の補助的なマルチメディア文書を表示画面の中央に同時に表示することができるビデオ表示システムで使用するためのユーザ・インタフェース・システムが開示される。ビデオ表示システムは、主要なマルチメディア文書を表示画面の中央部に表示する。ユーザ・インタフェース・システムは、複数の補助的なマルチメディア文書を表示するフォーマットを選択するユーザ命令を受信する。複数の補助的なマルチメディア文書は、個別の補助的なマルチメディア文書が主要なマルチメディア文書の周辺に配置されるコラージュ・フォーマットで表示することができる。複数の補助的なマルチメディア文書は、１本以上の水平線状に、又は、１本以上の垂直線状に表示してもよい。ユーザ・インタフェース・システムは、複数の補助的なマルチメディア文書の表示を制御する能力を備えている。

Description

【０００１】
〔技術分野〕
本発明は、ビデオ表示システム用のユーザ・インタフェースを提供するシステム及び方法に係り、特に、「デジャヴュ」として知られているビデオ表示システム用のユーザ・インタフェースを提供するシステム及び方法に関する。
【０００２】
〔背景技術〕
「デジャヴュ」は、ある情景や事象を始めて体験したときに、その情景及び事象を覚えているように思われる体験に与えられた名称である。「デジャヴュ」は「既視体験」とも呼ばれる。デジャヴュの一つの説明として、デジャヴュを体験した人は、その人の現在の体験に非常に類似している経験を記憶から思い出す、と説明することができる。実際の経験と記憶している経験が類似しているため、人は、自分が以前の経験を繰り返しているように感じることがある。
【０００３】
「デジャビデオ」という名称は、ビューアー（見る人）が、現在見ているビデオセグメントから、記憶している手がかりに基づいて、ビデオセグメント（若しくは、その他のマルチメディア文書）にアクセスすることができる視覚表示システムを表すために用いられている。デジャビデオ方式システムでは、ビューアーに提示されたビデオセグメントは、
ビューアーが既に見たことのあるもの、或いは、既に聴いたことのあるものとの関連性を見つけることによってビューアーに新しいコンテンツを探索させることによりビューアーが経験を深めることを補助する。
【０００４】
デジャビデオ方式システムは、トランスペアレント表示モード若しくはオーバーレイ表示モードで補助的な情報を提供することによって、ビデオに見えた対象に関するより多くの情報を提供することが可能である。トランスペアレント表示モードの場合、下側にあるビデオ画像は、上に重ねられたビデオ画像を通して見ることができる。オーバーレイ表示モードの場合、下側にあるビデオ画像は、上に重ねられたビデオ画像を通して見ることができない。第１のビデオクリップのあるシーンから第２のビデオクリップの別のシーンへの滑らかな変化は、画像モーフィングのような視覚的効果を用いることによって実現できる。
【０００５】
デジャビデオ方式システムは、ビデオセグメント若しくはその他のマルチメディア文書から自動的に取り出されたリンクを取り入れるように構成することができる。ビデオセグメントは、ビデオセグメント及びその他の文書の対象間の関連性、エンティティ、若しくは、別の特徴を判定するため、ビデオ処理システムで処理される。関連性は、これらの補助的な文書からの情報にアクセスするため利用されるので、アクセスされた情報は、元のビデオセグメントと共に、或いは、元のビデオセグメントの代わりに表示され得る。
【０００６】
デジャビデオ方式システムは、フレーム特徴付け、及び、対象（フェース）識別のような技術を使用して視覚的な関連性を自動的に抽出する。デジャビデオ方式システムは、ユーザのため、（１）主要なマルチメディア文書と、（２）主要なマルチメディア文書に視覚的若しくは概念的に密接に関連している補助的な類似したマルチメディア文書と、にアクセスする。マルチメディア文書には、ビデオ要素、オーディオ要素、テキスト要素、ウェブサイト、或いは、これらの任意の組み合わせが含まれる。
【０００７】
技術的に、デジャビデオ方式システムにおいてマルチメディア文書を表示するユーザ・インタフェースを提供する改良型のシステム及び方法が必要とされている。また、技術的に、デジャビデオ方式システムにおいて、ユーザがマルチメディア文書に選択的にアクセスし表示することができる改良型のシステム及び方法が必要とされている。
【０００８】
〔発明の開示〕
上記の従来技術の欠点を解決するため、本発明の主たる目的は、デジャビデオ方式のビデオ表示システムにおいてマルチメディア文書の表示を制御するシステム及び方法を提供することである。
【０００９】
本発明は、主要なマルチメディア文書と複数の補助的なマルチメディア文書を同時に表示する能力を備えたビデオ表示システム用のユーザ・インタフェース・システムを含む。ビデオ表示システムは、表示画面の中央部にマルチメディア文書を表示する。ユーザ・インタフェース・システムは、複数のマルチメディア文書を表示するフォーマットを選択するユーザ命令を受信する。複数のマルチメディア文書は、ユーザにより選択されたフォーマットで表示画面に表示される。
【００１０】
本発明の有利な実施例によれば、複数のマルチメディア文書は、個別の補助的なマルチメディア文書が主要なマルチメディア文書の周辺に配置されているコラージュ・フォーマットで表示される。
【００１１】
本発明の有利な実施例によれば、複数の補助的なマルチメディア文書は、個別の補助的なマルチメディア文書が表示画面の１本以上の水平線状（水平方向直線状）に配置されている水平線状フォーマットで表示される。
【００１２】
本発明の別の有利な実施例によれば、複数の補助的なマルチメディア文書は、個別の補助的なマルチメディア文書が表示画面の１本以上の垂直線状（垂直方向直線状）に配置されている垂直線状フォーマットで表示される。
【００１３】
本発明の更に別の実施例によれば、ユーザ・インタフェース・システムは、複数の補助的なマルチメディア文書の表示を制御するためユーザ命令を受信する能力を備えている。
【００１４】
上記の説明では、当業者が本発明の詳細な説明をより良く理解できるようにするため、本発明の機能及び技術的利点がかなり広範に亘って記載されている。請求項に係る発明の対象となる本発明の更なる機能及び利点は後述される。当業者は、本発明の同じ目的を実現するため他の構成を変更若しくは設計するための基礎として、開示された概念及び具体的な実施例を容易に使用できることを認める筈である。当業者は、このような等価的な構造は、最広義の本発明の範囲に包摂されることを認めるであろう。
【００１５】
本発明の詳細な説明を始める前に、本願明細書で使用されるある種の語句の定義を説明しておく方がよい。用語「含む」及び「有する」、並びに、これらの派生語は、無制限に包含することを意味する。用語「又は」は包括的であり、「及び／又は」の意味である。「関連した」や「関連させられた」等の句、及び、それらの派生句は、「包含する」、「包含される」、「相互に連結する」、「格納する」、「格納される」、「つながる」若しくは「連結する」、「つなぐ」若しくは「結び付く」、「連絡可能である」、「協働する」、「交互にする」、「並列にする」、「接近する」、「付く」若しくは「付けられる」、「もつ」、「所有する」などを表す。用語「コントローラ」、「プロセッサ」、又は、「機器」は、少なくとも一つの動作を制御する装置、システム、或いは、それらの一部を意味し、このような装置は、ハードウェア、ファームウェア、ソフトウェア、或いは、それらのうちの少なくとも二つの組み合わせによって実現される。尚、特定のコントローラに関連付けられた機能は、局所的でも遠隔的でもよく、集中型若しくは分散型のいずれでもよい。このような語句の定義は、本願明細書の全体で行われているので、当業者は、殆どの場合ではなくても、多くの場合に、このような定義がこのような定義された語句の過去並びに未来の用法にも当てはまることを認めるであろう。
【００１６】
本発明と本発明の効果が十分に理解されるように、以下の記述では、添付図面を参照する。添付図面中、同じ番号は同じ対象を表している。
【００１７】
〔発明を実施するための形態〕
本願明細書において本発明の原理を説明するため使用される図１乃至８と種々の実施例は、一例として使用されたものに過ぎず、本発明の範囲を限定するものとして解釈されるべきではない。以下の典型的な実施例の説明中、本は積みえは、デジャビデオ方式ビデオ表示システムに統合され、或いは、デジャビデオ方式ビデオ表示システムと共に使用される。当業者は、本発明の典型的な実施例が任意のタイプの類似したビデオ表示装置に使用するため容易に変更できることを認めるであろう。
【００１８】
デジャビデオ方式システムは、ユーザのため、（１）主要なマルチメディア文書と、（２）主要なマルチメディア文書に視覚的若しくは概念的に密接に関連している補助的な類似したマルチメディア文書と、にアクセスする。マルチメディア文書には、ビデオ要素、オーディオ要素、テキスト要素、ウェブサイト、或いは、これらの任意の組み合わせが含まれる。
【００１９】
マルチメディア文書間の類似性は、幾つかのレベルで選択的に定義される。下位レベルの類似性の定義は、ビデオ要素、オーディオ要素、モーション、字幕などの個別の特徴に着目する。上位レベルの類似性の定義は、シーン（情景）、イベント（事象）などの上位レベルの特徴に着目する。
【００２０】
デジャビデオ方式システムの二つの主要な処理は、オーサリング処理とナビゲーション（表示）処理である。オーサリング処理は、ビデオセグメント（及び、その他のタイプのマルチメディア文書）の間に関連性を作成する。オーサリング処理中に、興味深い特徴並びに対応した結合規則が、未来の検索目的のためビデオシーケンスに対して計算される。ナビゲーション処理中に、ユーザは、得られた関連性に基づいて関連付けられたビデオセグメント（及び、その他のタイプのマルチメディア文書）にアクセスする。デジャビデオ方式システムが主要なマルチメディア文書（通常はビデオセグメント）を表示するとき、デジャビデオ方式システムは、主要なマルチメディア文書及び様々なレベルの類似性に基づいて、入手可能なハイパーリンクされているマルチメディア文書の選択肢も表示する。
【００２１】
図１は、デジャビデオ方式ビデオ表示システム１００の有利な一実施例のブロック構成図である。ビデオ信号（及びその他のマルチメディア・コンテンツを供給する複数のチャネル（１１０，１１５，．．．，１２０）の各々は、バッファユニット１２５に接続される。チャネル毎に計算された特徴及び結合規則は、それぞれのチャネルを介してバッファユニット１２５へ送信される。バッファユニット１２５は、動的ビデオデータベース１３０に接続される。チャネル毎の結合規則は、動的ビデオデータベース１３０へ転送される。動的ビデオデータベース１３０は、照合エンジン１３５に接続される。ユーザがチャネルを見るとき、そのチャネルの結合規則は、照合エンジン１３５を使用して、動的ビデオデータベース１４０内の規則と比較される。
【００２２】
ユーザ嗜好ユニット１４０及びウェブ・ソース１４５は、照合エンジン１３５に接続される。照合処理中に、照合エンジン１３５は、ユーザの嗜好を考慮するための情報を獲得するためユーザ嗜好ユニット１４０へアクセスする。照合処理中に、照合エンジン１３５は、ウェブ・サイトからの情報を求めてウェブ・ソース１４５にアクセスする。
【００２３】
照合規則に基づいて、照合エンジン１３５は、複数のチャネル（１１０，１１５，．．．，１２０）及びウェブ・ソース１４５から、ハイパーリンクされた文書を獲得する。ハイパーリンクされた文書は、後で見るためにメモリ（図１に図示せず）に格納されるか、又は、主表示チャネル１５５から再生されている主要なマルチメディア文書と同時に再生するためデジャビデオ方式表示装置１５０へそのまま送信される。
【００２４】
主表示チャネル１５５は主要なマルチメディア文書のソースである。主表示チャネル１５５はバッファユニット１６０に接続され、バッファユニット１６０は、ビデオ・コンテンツ及び関連性ユニット１６５に接続される。ビデオ・コンテンツ及び関連性ユニット１６５は照合エンジン１３５に接続される。
【００２５】
図１に示された実施例の場合、主要なマルチメディア文書は、主表示チャネル１５５から（バッファユニット１６０とビデオ・コンテンツ及び関連性ユニット１６５を介して）照合エンジン１３５に受信される。補助的な類似したマルチメディア文書は、複数のチャネル（１１０，１１５，．．．，１２０）から（バッファユニット１２５及び動的ビデオデータベース１３０）を介して受信され、ウェブ・ソース１４５から受信される。チューナー回路（図示せず）は、（多数の異なる利用可能なチャネルの中から）主表示チャネル１５５の場所を占める一つの望ましいチャネルを選択するために使用される。
【００２６】
図２は、典型的なデジャビデオ方式表示装置１５０の構成図である。本発明の有利な一実施例によれば、デジャビデオ方式表示装置１５０は、ビデオレコーダ２５０及びテレビ受像機２０５を含む。ビデオレコーダ２５０は、照合エンジン１３５から入ってくるマルチメディア信号を受信する。ビデオレコーダ２５０は、マルチメディア信号を表示用のテレビ受像機２０５へ送信する。
【００２７】
記録モードでは、ビデオレコーダ２５０は、ビデオレコーダ２５０に内蔵されるか、若しくは、ビデオレコーダ２５０に接続された記憶媒体に記録し記憶されるベースバンドビデオ信号を生成するため、入ってくる無線周波（ＲＦ）テレビ信号を復調する。再生モードでは、ビデオレコーダ２５０は、ビューアーによって選択された記憶されているビデオ信号（即ち、番組）を記憶媒体から読み出し、テレビ受像機２０５へ送信する。ビデオレコーダ２５０は、デジタル信号を受信し、デジタル信号を記録し、デジタル信号と相互作用し、デジタル信号を再生する機能を備えているタイプのビデオレコーダでもよい。
【００２８】
ビデオレコーダ２５０は、記録用テープを利用するタイプのビデオレコーダ、ハードディスクを利用するタイプのビデオレコーダ、固体メモリを利用するタイプのビデオレコーダ、又は、その他のタイプの記録装置を利用するタイプのビデオレコーダでもよい。ビデオレコーダ２５０がビデオ・カセット・レコーダ（ＶＣＲ）である場合、ビデオレコーダ２５０は、入ってくるマルチメディア信号を磁気カセットテープに格納し、磁気カセットテープからマルチメディア信号を取り出す。ビデオレコーダ２５０が、ＲｅｐｌａｙＴＶ^ＴＭレコーダ若しくはＴｉＶＯ^ＴＭレコーダのようなハードディスク型装置である場合、ビデオレコーダ２５０は、磁気カセットテープではなく、コンピュータ磁気ハードディスクとの間で入ってくるマルチメディア信号の格納と取り出しのやり取りを行う。更に別の実施例では、ビデオレコーダ２５０は、局部的な読み書き可能（Ｒ／Ｗ）デジタル多用途ディスク（ＤＶＤ−ＲＷ）若しくは読み書き可能（Ｒ／Ｗ）コンパクトディスク（ＣＤ−ＲＷ）との間で格納と取り出しを行う。局部的な記憶媒体は、固定式（例えば、ハードディスク）でもよく、或いは、可搬式（例えば、ＤＶＤ−ＲＷ、ＣＤ−ＲＷ）でもよい。
【００２９】
ビデオレコーダ２５０は、ビューアーによって操作される遠隔制御装置２２５からコマンド（例えば、チャネル・アップ、チャネル・ダウン、ボリューム・アップ、ボリューム・ダウン、記録、再生、早送り（ＦＦ）、巻き戻しなど）を受信する赤外線（ＩＲ）センサ２６０を含む。テレビ受像機２０５は、画面２１０、赤外線（ＩＲ）センサ２１５、及び、１台以上の手動制御部２２０（破線で図示されている）を含む従来型のテレビである。ＩＲセンサ２１５は、ビューアーによって操作される遠隔制御装置２２５からコマンド（例えば、ボリューム・アップ、ボリューム・ダウン、電源投入、電源切断など）を受信する。
【００３０】
ビデオレコーダ２５０は、特定のタイプの入ってくるマルチメディア信号だけを受信することに限定されない。入ってくる信号は、デジタル信号でも、アナログ信号でも、インターネット・プロトコル（ＩＰ）パケットでも、その他のタイプのフォーマットの信号でもよい。
【００３１】
本発明の原理を説明する際の平易さと明瞭さを考えて、以下の説明は、一般的に、ビデオレコーダ２５０が字幕テキスト情報を含む入力アナログ・マルチメディア信号を受信する実施例を対象としている。勿論、当業者に明らかであるように、本発明の原理は、デジタルテレビ信号、無線放送テレビ信号、ローカル記憶システム、ＭＰＥＧデータを含むＩＰパケットの入力ストリームなどと共に使用するために簡単に適合させられる。
【００３２】
更に、当業者に明らかであるように、本発明の原理は、音声・テキスト変換装置からのテキスト、サードパーティ情報ソースからのテキスト、抽出されたビデオテキストからのテキスト、埋め込まれた画面テキストからのテキストなどを、これらのテキストに限定されることなく包含する他のテキストのソースと共に使用するために簡単に適合させられる。従って、用語「トランスクリプト」は、字幕テキスト、音声・テキスト変換装置からのテキスト、サードパーティ情報ソースからのテキスト、抽出されたビデオテキストからのテキスト、埋め込まれた画面テキストからのテキストなどを、これらのテキストに限定されることなく包含する任意のテキストソースからのテキストファイルを意味するものとして定義されるべきである。
【００３３】
図３は、本発明の一実施例による典型的なビデオレコーダ２５０の詳細な構成図である。ビデオレコーダ２５０は、ＩＲセンサ２６０と、ビデオプロセッサ３１０と、ＭＰＥＧ２エンコーダ３２０と、ハードディスク装置３３０と、ＭＰＥＧ２デコーダ３４０と、コントローラ３５０と、を含む。ビデオレコーダ２５０は、ビデオユニット３６０と、デジャビデオ方式表示コントローラ３７０と、メモリ３８０とを更に含む。コントローラ３５０は、視聴モード、記録モード、再生モード、早送り（ＦＦ）モード、巻き戻しモード、及び、その他の類似した機能を含むビデオレコーダ２５０の全体的な動作を指令する。コントローラ３５０は、本発明の原理によるマルチメディア文書の作成、表示及び相互作用を指令する。
【００３４】
視聴モードでは、コントローラ３５０は、照合エンジン１３５からの入力マルチメディア信号をビデオプロセッサ３１０に復調、処理させ、ビデオ信号をハードディスク装置３３０に記憶すると共に、若しくは、記憶することなく、（或いは、ビデオ信号をハードディスク装置３３０から取り出して）テレビ受像機２０５へ送信させる。ビデオプロセッサ３１０は、照合エンジン１３５から入力マルチメディア信号を受信し、マルチメディア信号を、テレビ受像機２０５に表示するために適したベースバンドテレビ信号（例えば、スーパー・ビデオ信号）へ変換する無線周波（ＲＦ）フロントエンド回路を含む。ビデオプロセッサ３１０は、ＭＰＥＧ２デコーダ３４０からの通常の信号と、メモリ３８０からのビデオフレームを受信し、ベースバンドテレビ信号（例えば、スーパー・ビデオ信号）をテレビ受像機２０５へ送信する能力も備えている。
【００３５】
記録モードでは、コントローラ３５０は、入力マルチメディア信号をハードディスク装置３３０に記憶させる。コントローラ３５０の制御下で、ＭＰＥＧ２エンコーダ３２０は、照合エンジン１３５から入力アナログ・マルチメディア信号を受信し、受信したマルチメディア信号を、ハードディスク装置３３０に格納するためのＭＰＥＧフォーマットへ変換する。デジタル・マルチメディア信号の場合には、信号は、ＭＰＥＧ２エンコーダ３２０で符号化されることなく、ハードディスク装置３３０にそのまま記憶されることに注意する必要がある。
【００３６】
再生モードでは、コントローラ３５０は、ハードディスク装置３３０に、記憶されたマルチメディア信号（即ち、プログラム）のストリームをＭＰＥＧ２デコーダ３４０へ送り、ＭＰＥＧ２デコーダ３４０は、ハードディスク装置３３０からのＭＰＥＧ２データを、例えば、ビデオプロセッサ３１０がテレビ受像機２０５へ送信するスーパー・ビデオ（Ｓ−ビデオ）信号に変換する。
【００３７】
尚、ＭＰＥＧ２エンコーダ３２０及びＭＰＥＧ２デコーダ３４０に対してＭＰＥＧ２標準が選択されているのは例示に過ぎないことに注意する必要がある。本発明の別の実施例では、ＭＰＥＧエンコーダ及びデコーダは、ＭＰＥＧ−１標準とＭＰＥＧ−２標準とＭＰＥＧ−４標準のうちの一つ以上の標準、或いは、一つ以上の別のタイプの標準に適合する。
【００３８】
本願と請求項に係る発明の上で、ハードディスク装置３３０は、読取りと書込みの両方が可能である任意の大容量記憶装置を包含するように定義されている。この大容量記憶装置には、例えば、従来の磁気ディスク装置や、読み書き可能なデジタル多用途ディスク（ＤＶＤ−ＲＷ）及び追記型ＣＤ−ＲＯＭ用の光ディスク装置や、ＶＣＲテープなどが含まれるが、これらの例に限定されない。実際上、ハードディスク装置３３０は、ビデオレコーダ２５０に常時内蔵されるという通常の意味では固定されている必要が無い。それどころか、ハードディスク装置３３０は、記録されたビデオ番組を蓄積するためビデオレコーダ２５０に専用とされている任意の大容量記憶装置を含む。かくして、ハードディスク装置３３０は、数枚の読み書き可能なＤＶＤ若しくは追記型ＣＤ−ＲＯＭを収容するジュークボックス装置（図示せず）のような付属型周辺装置、若しくは、可搬型ディスク装置（内蔵式と付属式とに係らず）を含む。図３に概略的に示されているように、このタイプの可搬型ドライブ装置は、追記型ＣＤ−ＲＯＭディスク３３５を収容し、読み出す能力を備えている。
【００３９】
更に、本発明の有利な一実施例では、ハードディスク装置３３０は、ビデオレコーダ２５０がネットワーク接続（例えば、インターネット・プロトコル（ＩＰ）接続）を介してアクセスし、制御する外部大容量記憶装置を含む。この外部大容量記憶装置には、例えば、ビューアーの家庭用パーソナル・コンピュータ（ＰＣ）内のハードディスク装置、或いは、ビューアーのインターネット・サービス・プロバイダ（ＩＳＰ）側のサーバー上のハードディスク装置が含まれる。
【００４０】
コントローラ３５０は、ビデオプロセッサ３１０から、ビデオプロセッサ３１０によって受信されたビデオ信号に関する情報を獲得する。コントローラ３５０がビデオレコーダ２５０はビデオ番組を受信していると判定したとき、コントローラ３５０は、そのビデオ番号が記録するため選択されたビデオ番組であるかどうかを判定する。ビデオ番組を記録する必要がある場合、コントローラ３５０は、上述の方法でビデオ番組をハードディスク装置３３０に記録する。ビデオ番組を記録する必要が無い場合、コントローラ３５０は、ビデオプロセッサ３１０にビデオ番組を処理させ、既に説明した方法でビデオ番組をテレビ受像機２０５へ送信させる。
【００４１】
メモリ３８０は、ランダム・アクセス・メモリ（ＲＡＭ）、若しくは、ランダム・アクセス・メモリ（ＲＡＭ）とリード・オンリー・メモリ（ＲＯＭ）の組み合わせにより構成される。メモリ３８０は、フラッシュメモリのような不揮発性ランダム・アクセス・メモリ（ＲＡＭ）により構成してもよい。テレビ受像機２０５の代替的な有利な実施例において、メモリ３８０は、ハードディスク装置（図示せず）のような大容量記憶データ装置により構成される。メモリ３８０は、読み書き可能なＤＶＤ若しくは追記型ＣＤ−ＲＯＭを読む付属型周辺装置でもよく、或いは、若しくは、可搬型ディスク装置（内蔵式と付属式とに係らず）でもよい。図３に概略的に示されているように、このタイプの可搬型ドライブ装置は、追記型ＣＤ−ＲＯＭディスク３８５を収容し読む能力を備えている。
【００４２】
主要なマルチメディア文書は、表示画面２１０の中央に表示される。表示画面２１０上の補助的なマルチメディア文書の同時表示を調整するため、コントローラ３５０は、ビデオユニット３６０を使用する。ビデオユニット３６０は、補助的なマルチメディア文書の配置のフォーマットを設定する。より詳しく説明するように、ビデオユニット３６０は、デジャビデオ方式表示コントローラ３７０からの命令に従って表示画面２１０で各補助的なマルチメディア文書の場所を決める。
【００４３】
ビデオユニット３６０は、１９９９年７月９日に出願された、発明の名称が”ＭＥＴＨＯＤ ＡＮＤ ＡＰＰＡＲＡＴＵＳ ＦＯＲ ＬＩＮＫＩＮＧ Ａ ＶＩＤＥＯ ＳＥＧＭＥＮＴ ＴＯ ＡＮＯＴＨＥＲ ＳＥＧＭＥＮＴ ＯＲ ＩＮＦＯＲＭＡＴＩＯＮ ＳＯＵＲＣＥ”である米国特許出願第０９／３５１，０８６号に記載されている上述のビデオセグメントを結び付ける方法及び装置を使用する。補助的なマルチメディア文書は、異種タイプの情報を表示してもよい。例えば、補助的なマルチメディア文書は、別の文書のロケーション（例えば、ユニバーサル・リソース・ロケータ、即ち、ＵＲＬ）へのポインタ又はリンクを表示してもよい。補助的なマルチメディア文書は、ビデオ文書の全体を表示してもよい。或いは、補助的なマルチメディア文書は、大規模なビデオ文書の一部（即ち、サムネイル）を表示してもよい。補助的なマルチメディア文書は、ビデオ文書の要約（例えば、動画像のタイトル、映画からの数枚のビデオ画像）を表示してもよい。
【００４４】
デジャビデオ方式表示コントローラ３７０は、ユーザ入力２６０から（コントローラ３５０）を介してユーザ命令を受け取る。ユーザ命令に応じて、デジャビデオ方式表示コントローラ３７０は、コントローラ３５０及びビデオ入力３６０に、補助的なマルチメディア文書のためにユーザが選択した表示フォーマットを供給する。
【００４５】
本発明の有利な一実施例は、デジャビデオ方式システム１００用のユーザ・インタフェースを提供することができるコンピュータソフトウェア４００を含む。特に、コンピュータソフトウェア４００は、補助的なマルチメディア文書を表示画面２１０に表示するため、ユーザが選択した一つ以上のフォーマットを提供することが可能である。図４には、本発明のコンピュータプログラムが格納されたメモリ３８０の選択された一部分が示されている。メモリ３８０は、オペレーティング・システム・インタフェース・プログラム４１０と、コラージュ表示アプリケーション４２０と、水平線状表示アプリケーション４３０と、垂直線状表示アプリケーション４４０と、マルチメディア文書選択アプリケーション４５０と、線状表示制御アプリケーション４６０と、を格納する。
【００４６】
デジャビデオ方式表示コントローラ３７０及びコンピュータソフトウェア４００は、一体として、本発明を実現することができるユーザ・インタフェース・コントローラを構成する。オペレーティング・システム・インタフェース・プログラム４１０は、コンピュータソフトウェア４００の動作をコントローラ３５０のオペレーティング・システムと連係させる。
【００４７】
デジャビデオ方式表示コントローラ３７０は、ユーザ入力２６０から（コントローラ３５０を介して）ユーザ命令を受信する。ユーザは、デジャビデオ方式表示コントローラ３７０に対して、補助的なマルチメディア文書を主要なマルチメディア文書の周辺にコラージュ形式で並べるように指令する。このタイプのユーザ要求に応じて、デジャビデオ方式表示コントローラ３７０は、メモリ３８０内に格納されたソフトウェア４００のコラージュ表示アプリケーション４２０にアクセスする。コラージュ表示アプリケーション４２０は、補助的なマルチメディア文書を、表示画面２１０上で主要なマルチメディア文書の周囲の付近に配置させる。
【００４８】
これは、図５により明瞭に表されている。図５には、表示画面２１０に表示された主要なマルチメディア文書５１０が示されている。補助的なマルチメディア文書５２０、５３０、５４０、５５０、５６０、５７０、５８０及び５９０は、主要なマルチメディア文書５１０の周囲に配置されている。このフォーマットは、コラージュ・フォーマットと呼ばれる。コラージュ・フォーマットでは、個別のマルチメディア文書は、互いを部分的に覆うように、即ち、相互に重なり合うように表示される。個別のマルチメディア文書は、主要なマルチメディア文書５１０を部分的に覆い、主要なマルチメディア文書５１０と重なり合う。
【００４９】
ユーザが補助的なマルチメディア文書のうちの一つ（例えば、文書５６０）を主要なマルチメディア文書５１０として表示させることを望む場合、ユーザは、ユーザ入力２６０及びコントローラ３５０を介してデジャビデオ方式コントローラ３７０へ命令を送る。この命令に応答して、デジャビデオ方式コントローラ３７０は、メモリ３８０内に格納されたソフトウェア４００のマルチメディア文書選択アプリケーション４５０にアクセスする。マルチメディア文書選択アプリケーション４５０は、選択された補助的なマルチメディア文書（本例の場合には文書５６０）を主要なマルチメディア文書５１０として表示させる。以前に主要なマルチメディア文書５１０として表示されていたマルチメディア文書は、新しい文書５６０として表示される。
【００５０】
ユーザは、デジャビデオ方式コントローラ３７０に、補助的なマルチメディア文書を、主要なマルチメディア文書５１０の下側に水平線状フォーマットで並べることを指令する場合もある。このタイプのユーザ要求に応じて、デジャビデオ方式表示コントローラ３７０は、メモリ３８０内に格納されたソフトウェア４００の水平線状表示アプリケーション４３０にアクセスする。水平線状表示アプリケーション４３０は、図６に示されているように、補助的なマルチメディア文書を、表示画面２１０上で主要なマルチメディア文書５１０の下側に表示させる。
【００５１】
図６は、表示画面２１０に表示された主要なマルチメディア文書５１０を示す図である。補助的なマルチメディア文書５２０、５３０、５４０、５５０、５６０、５７０、５８０及び５９０は、主要なマルチメディア文書５１０の下側に水平線状で表示されている。このフォーマットは、水平線状フォーマットと呼ばれる。水平線状フォーマットの場合、個別のマルチメディア文書は、互い若しくは主要なマルチメディア文書５１０を部分的に覆ったり、互いに若しくは主要なマルチメディア文書５１０と重なり合ったりしないように表示される。
【００５２】
より詳細に説明するように、本発明のシステム及び方法は、表示画面２１０上で主要なマルチメディア文書５１０の下側の水平線の範囲内で左右のどちらでも補助的なマルチメディア文書５２０乃至５９０の表示を動かすことが可能である。
【００５３】
コラージュ・フォーマットの場合と同様に、ユーザが水平線状フォーマットの補助的なマルチメディア文書のうちの一つ（例えば、文書５３０）を主要なマルチメディア文書５１０として表示させることを望む場合、ユーザは、ユーザ入力２６０及びコントローラ３５０を介してデジャビデオ方式表示コントローラ３７０へ命令を送る。この命令に応答して、デジャビデオ方式コントローラ３７０は、メモリ３８０内に格納されたソフトウェア４００のマルチメディア文書選択アプリケーション４５０にアクセスする。マルチメディア文書選択アプリケーション４５０は、選択された補助的なマルチメディア文書（本例の場合には文書５３０）を主要なマルチメディア文書５１０として表示させる。以前に主要なマルチメディア文書５１０として表示されていたマルチメディア文書は、新しい文書５３０として表示される。
【００５４】
ユーザは、デジャビデオ方式コントローラ３７０に、主要なマルチメディア文書５１０の二つの垂直縁の一方若しくは両方に沿って補助的なマルチメディア文書を並べるように指令する場合もある。このフォーマットは、「垂直線状」フォーマットと呼ばれる。垂直線状フォーマットでは、個別のマルチメディア文書は、互い若しくは主要なマルチメディア文書５１０を部分的に覆ったり、互いに若しくは主要なマルチメディア文書５１０と重なり合ったりしないように表示される。
【００５５】
このタイプのユーザ要求に応じて、デジャビデオ方式表示コントローラ３７０は、メモリ３８０内に格納されたソフトウェア４００の垂直線状表示アプリケーション４４０にアクセスする。垂直線状表示アプリケーション４４０は、図７に示されているように、補助的なマルチメディア文書を、主要なマルチメディア文書５１０の二つの垂直縁の一方若しくは両方に沿って表示画面２１０に表示させる。
【００５６】
より詳細に説明するように、本発明のシステム及び方法は、表示画面２１０上で主要なマルチメディア文書５１０の側方に配置された垂直線の範囲内で上下に補助的なマルチメディア文書５２０乃至５９０の表示を動かすことが可能である。
【００５７】
コラージュ・フォーマット及び垂直線状フォーマットの場合と同様に、ユーザが垂直線状フォーマットの補助的なマルチメディア文書のうちの一つを主要なマルチメディア文書５１０として表示させることができる。これは、既に説明したようにマルチメディア文書選択アプリケーション４５０を使用することによって実現される。
【００５８】
補助的なマルチメディア文書の数が、それらのすべてを水平線状フォーマット若しくは垂直線状フォーマットで同時に表示するために利用可能な場所の数を越える場合がある。例えば、図６に示されるような水平線状フォーマットでは、主要なマルチメディア文書５１０の下側に８個の補助的なマルチメディア文書を同時に表示させるための場所が存在する。表示すべき補助的なマルチメディア文書の個数が９個以上である場合、ユーザは、補助的なマルチメディア文書のすべてを、水平線状フォーマットの８個の場所をもつウィンドウ内に順番に表示させる命令を送る。ユーザは、このような命令を、ユーザ入力２６０及びコントローラ３５０を介して、デジャビデオ方式表示コントローラ３７０へ送信してもよい。
【００５９】
この命令に応答して、デジャビデオ方式コントローラ３７０は、メモリ３８０内に格納されたソフトウェア４００の直線状表示制御アプリケーション４６０にアクセスする。本発明の一実施例によれば、直線状表示制御アプリケーション４６０は、マルチメディア文書５２０の表示を中止させ、次に、直前までマルチメディア文書５２０によって占められていた場所にマルチメディア文書５３０を表示させる。この処理は、マルチメディア文書５９０がマルチメディア文書５８０によって直前に占領されていた場所に表示されるまで、マルチメディア文書の各々について繰り返される。続いて、９番目のマルチメディア文書（図示せず）がマルチメディア文書５９０によって直前に占領されていた場所に表示される。
【００６０】
マルチメディア文書を順番に移す処理は、補助的なマルチメディア文書毎に繰り返されるので、マルチメディア文書は、水平線状フォーマットの８個の場所をもつウィンドウ内を右から左へ移動するように見える。この処理における移動方向は、左から右の方向となるように選択してもよい。最後のマルチメディア文書が文書５９０によって最初に占領されていた場所から文書５８０によって最初に占領されていた場所へ移されると、次に、文書５２０が文書５９０によって最初に占領されていた場所に表示される。このようにして、マルチメディア文書の完全な巡回が形成され、同時に８個の文書が順番に表示される。勿論、個々で使用した個数の８個は例示に過ぎない。表示画面２１０に表示されるマルチメディア文書の寸法に応じて様々な個数を使用することができる。
【００６１】
マルチメディア文書を順番に移動させる処理は、垂直線状フォーマットと組み合わせて使用してもよく、この場合、マルチメディア文書は、垂直線状フォーマットの「ウィンドウ」内の場所を上から下（若しくは、下から上）に移動するように見える。
【００６２】
マルチメディア文書がこのようにして順番に表示される間に、ユーザは、マルチメディア文書の表示の順次移動を停止させる命令を送ることができる。ユーザは、このような命令を、ユーザ入力２６０及びコントローラ３５０を介してデジャビデオ方式表示コントローラ３７０へ送信してもよい。
【００６３】
表示の順次移動を停止させる命令に応じて、デジャビデオ方式表示コントローラ３７０は、メモリ３８０に格納されたソフトウェア４００の直線状表示制御アプリケーション４６０にアクセスする。直線状表示制御アプリケーション４６０は、マルチメディア文書の表示の順次移動を再開させるためのユーザ命令を受信するまで、マルチメディア文書の表示の順次移動を停止させる。
【００６４】
同様に、マルチメディア文書がこのようにして順番に表示される間に、ユーザは、マルチメディア文書の表示の順次移動の向きを逆転させる命令を送ることができる。ユーザは、このような命令を、ユーザ入力２６０及びコントローラ３５０を介してデジャビデオ方式表示コントローラ３７０へ送信してもよい。
【００６５】
表示の順次移動の向きを逆転させる命令に応じて、デジャビデオ方式表示コントローラ３７０は、メモリ３８０に格納されたソフトウェア４００の直線状表示制御アプリケーション４６０にアクセスする。直線状表示制御アプリケーション４６０は、マルチメディア文書の表示の順次移動の向きを元の向きへ戻すためのユーザ命令を受信するまで、マルチメディア文書の表示の順次移動の向きを逆転させる。
【００６６】
更に、マルチメディア文書がこのようにして順番に表示される間に、ユーザは、マルチメディア文書の表示の順次移動の速度を制御する命令を送ることができる。ビューアーの読取り能力と読取り速度は、人それぞれによって異なる。この速度制御機能によって、ビューアーは、マルチメディア文書の表示を読取り、表示に対して応答するために十分な時間が得られるように、表示の移動の速度を調節することができるようになる。
【００６７】
表示の順次移動の速度を増減させる命令に応じて、デジャビデオ方式表示コントローラ３７０は、メモリ３８０に格納されたソフトウェア４００の直線状表示制御アプリケーション４６０にアクセスする。直線状表示制御アプリケーション４６０は、ユーザによって与えられた命令に従って、マルチメディア文書の表示の順次移動の速度を増減させる。
【００６８】
マルチメディア文書が順番に表示されている間は、いつでも、ユーザは、順番に表示されているマルチメディア文書のうちの何れか一つを、主要なマルチメディア文書５１０の場所に表示させるために選択することができる。これは、上述のマルチメディア文書選択アプリケーション４５０を使用して実現される。
【００６９】
本発明のユーザ・インタフェースの別の有利な実施例によれば、二つ以上の水平線状フォーマットを同時に表示させることができる。同様に、二つ以上の垂直線状フォーマットを同時に表示させてもよい。本発明のユーザ・インタフェースの更に別の実施例によれば、一つ以上の水平線状フォーマット、及び、一つ以上の垂直線状フォーマットが同時に表示される。
【００７０】
少なくとも２本の水平線状フォーマットのラインが同時に表示されるとき、一方の水平線状フォーマットのラインは、主要なマルチメディア文書の画像組成に関する関連性に関係したマルチメディア文書を表示することが可能であり、別の水平線状フォーマットのラインは、顔による物体識別に関する関連性に関係したマルチメディア文書を表示することが可能である。或いは、水平線状フォーマットの各ラインは、特定のユーザ・プロファイルに基づく関連性に関係したマルチメディア文書を表示することができる。
【００７１】
同じ原理は、少なくとも２本の垂直線状フォーマットのラインが同時に表示される場合にも当てはまる。同じ原理は、少なくとも１本の水平線状フォーマットのラインと、少なくとも１本の垂直線状のフォーマットのラインが同時に表示される場合にも適用される。
【００７２】
本発明の他の有利な実施例によれば、マルチメディア文書は、表示画面２１０上に現れたり、消えたりするように表示される。例えば、表示画面２１０上の利利用可能なスペースが既にマルチメディア文書で一杯になっている場合を考える。別のマルチメディア文書を表示画面２１０に追加しなければならないとき、表示画面２１０上の「古い」マルチメディア文書の一つは、見えなくなり、「新しい」マルチメディア文書がその場所に現れる。この処理は、任意の個数のマルチメディア文書を表示するため、必要に応じて繰り返される。
【００７３】
図８は、本発明の方法の有利な実施例の動作を説明するフローチャート８００である。フローチャート８００に記載されたステップは、デジャビデオ方式表示装置１５０で実行され、より詳細には、デジャビデオ方式表示コントローラ３７０とコンピュータソフトウェア４００を含むインタフェース・コントローラで実行される。
【００７４】
デジャビデオ方式表示装置１５０は、照合エンジン１３５から、主要なマルチメディア文書及び補助的なマルチメディア文書を受け取る（ステップ８１０）。デジャビデオ方式表示装置１５０は、表示画面２１０の中央部に表示するため主要なマルチメディア文書のフォーマットを設定する（ステップ８１５）。
【００７５】
デジャビデオ方式表示装置１５０は、補助的なマルチメディア文書を表示するためのフォーマットを選択するユーザ命令を受信する（ステップ８２０）。次に、デジャビデオ表示装置１５０は、ユーザ命令によって水平線状フォーマットを使用することが要求されているかどうかを判定する（判定ステップ８２５）。ユーザ命令が水平線状フォーマットを要求した場合、デジャビデオ方式表示装置１５０は、表示のため補助的なマルチメディア文書のフォーマットを設定するため、その水平線状フォーマットを使用する（ステップ８３０）。
【００７６】
ユーザ命令が水平線状フォーマットを要求していない場合、デジャビデオ方式表示装置１５０は、ユーザ命令によって垂直線状フォーマットを使用することが要求されているかどうかを判定する（判定ステップ８３５）。ユーザ命令が垂直線状フォーマットを要求した場合、デジャビデオ方式表示装置１５０は、表示のため補助的なマルチメディア文書のフォーマットを設定するため、その垂直線状フォーマットを使用する（ステップ８４０）。
【００７７】
ユーザ命令が垂直線状フォーマットを要求していない場合、デジャビデオ方式表示装置１５０は、ユーザ命令によってコラージュ・フォーマットを使用することが要求されているかどうかを判定する（判定ステップ８４５）。ユーザ命令がコラージュ・フォーマットを要求した場合、デジャビデオ方式表示装置１５０は、表示のため補助的なマルチメディア文書のフォーマットを設定するため、そのコラージュ・フォーマットを使用する（ステップ８５０）。
【００７８】
ユーザ命令がコラージュ・フォーマットを要求していない場合、デジャビデオ方式表示装置１５０は、有効なフォーマット要求を含むユーザ命令を受信するまで、補助的なマルチメディア文書を表示しない（ステップ８５５）。
【００７９】
本発明は詳細に説明されているが、当業者は、最広義の意味で本発明の精神及び範囲から逸脱することなく、様々な変更、置換及び代替をなし得ることを認めるであろう。
【００８０】
コンピュータプログラムは、フレキシブルディスクのようなコンピュータ読取り可能な媒体に格納されたソフトウェア、インターネットのようなネットワークを介してダウンロード可能なソフトウェア、或いは、その他の形で市販され得るソフトウェアのようなあらゆるソフトウェアを表していることが認められるであろう。
【図面の簡単な説明】
【図１】
デジャビデオ方式表示システムの有利な実施例のブロック図である。
【図２】
典型的なデジャビデオ方式ビデオ表示装置の有利な実施例の説明図である。
【図３】
図２に示された典型的なデジャビデオ方式ビデオ表示装置の有利な実施例のブロック図である。
【図４】
デジャビデオ方式ビデオ表示システム用の本発明の改良型ユーザ・インタフェースを提供するため使用されるコンピュータソフトウェアの説明図である。
【図５】
中央に配置された主要なマルチメディア文書と周辺に配置されコラージュ形式に並べられた小さいマルチメディア文書を表示するデジャビデオ方式ビデオ表示装置の表示画面の説明図である。
【図６】
中央に配置された主要なマルチメディア文書と主要なマルチメディア文書の下側の水平線状に並べられた小さいマルチメディア文書を表示するデジャビデオ方式ビデオ表示装置の表示画面の説明図である。
【図７】
中央に配置された主要なマルチメディア文書と主要なマルチメディア文書の一方の端に沿った垂直線状に並べられた小さいマルチメディア文書を表示するデジャビデオ方式ビデオ表示装置の表示画面の説明図である。
【図８】
本発明の方法の有利な実施例の動作を説明するフローチャートである。

Claims (16)

1. 主要なマルチメディア文書と複数の補助的なマルチメディア文書を表示画面に同時に表示する能力を備えたビデオ表示システムであって、
   当該ビデオ表示システムはユーザ・インタフェース・システムを含み、
   ユーザ・インタフェース・システムは、該複数の補助的なマルチメディア文書を該主要なマルチメディア文書と共に表示するためのフォーマットを選択する少なくとも一つの命令をユーザから受け取る能力を備えたユーザ・インタフェース・コントローラを具備し、
   該ユーザ・インタフェース・コントローラは、該表示画面に、該ユーザによって選択されたフォーマットで該複数の補助的なマルチメディア文書を表示する能力を備えている、
   ビデオ表示システム。
2. 該複数の補助的なマルチメディア文書を該主要なマルチメディア文書と共に表示するための該フォーマットは、水平線状フォーマットと、垂直線状フォーマットと、コラージュ・フォーマットのうちの少なくとも一つのフォーマットである、請求項１記載のビデオ表示システム。
3. 該ユーザ・インタフェース・コントローラは、該複数の補助的なマルチメディア文書の中から主要なマルチメディア文書として表示されるべき一つの補助的なマルチメディア文書を選択する少なくとも一つの命令をユーザから受け取る能力を備え、
   該ユーザ・インタフェース・コントローラは、該複数の補助的なマルチメディア文書の中から選択された一つの補助的なマルチメディア文書を主要なマルチメディア文書として該表示画面に表示させる能力を備えている、
   請求項１記載のビデオ表示システム。
4. ユーザ命令の受信に応じて、該ユーザ・インタフェース・コントローラは、該水平線状フォーマット、該垂直線状フォーマット又は該コラージュ・フォーマットの範囲内で、該複数の補助的なマルチメディア文書を該表示画面上で順番に移動させる能力を備えている、請求項２記載のビデオ表示システム。
5. ユーザ命令の受信に応じて、該ユーザ・インタフェース・コントローラは、該複数の補助的なマルチメディア文書の移動の向きを逆転させる能力を備えている、請求項４記載のビデオ表示システム。
6. ユーザ命令の受信に応じて、該ユーザ・インタフェース・コントローラは、該複数の補助的なマルチメディア文書の移動の速度を制御する能力を備えている、請求項４記載のビデオ表示システム。
7. 該ユーザ・インタフェース・コントローラは、該複数の補助的なマルチメディア文書を該主要なマルチメディア文書と共に表示するためのフォーマットを選択する少なくとも一つの命令をユーザから受け取り、該ユーザによって選択されたフォーマットで該表示画面に該複数の補助的なマルチメディア文書を表示させるため、接続されているメモリに格納されたコンピュータソフトウェア命令を実行する能力を備えているデジャビデオ方式コントローラを具備する、請求項１記載のビデオ表示システム。
8. 該複数のマルチメディア文書は、別の文書のロケーションへのリンクを格納するマルチメディア文書と、ビデオ文書の全体を格納するマルチメディア文書と、より大規模なビデオ文書の一部分を格納するマルチメディア文書と、ビデオ文書の要約を格納するマルチメディア文書のうちの少なくとも一つのマルチメディア文書を含む、請求項１記載のビデオ表示システム。
9. 該ユーザ・インタフェース・コントローラは、個別のマルチメディア文書が該表示画面上に現れたり、見えなくなったりするように、該複数の補助的なマルチメディア文書を該表示画面に表示させる能力を備えている、請求項１記載のビデオ表示システム。
10. 主要なマルチメディア文書と複数の補助的なマルチメディア文書を表示画面に同時に表示する能力を備えたビデオ表示システムにおいて、該ビデオ表示システム用のユーザ・インタフェースを提供する方法であって、
    該複数の補助的なマルチメディア文書を該主要なマルチメディア文書と共に表示するためのフォーマットを選択する少なくとも一つの命令をユーザからユーザ・インタフェース・コントローラに受け取る手順と、
    該ユーザによって選択されたフォーマットで該複数の補助的なマルチメディア文書を該表示画面に表示する手順と、
    を有する方法。
11. 該複数の補助的なマルチメディア文書を該主要なマルチメディア文書と共に表示するための該フォーマットは、水平線状フォーマットと、垂直線状フォーマットと、コラージュ・フォーマットのうちの少なくとも一つのフォーマットである、請求項１０記載の方法。
12. 該複数の補助的なマルチメディア文書の中から主要なマルチメディア文書として表示されるべき一つの補助的なマルチメディア文書を選択する少なくとも一つの命令をユーザからユーザ・インタフェース・コントローラに受け取る手順と、
    該複数の補助的なマルチメディア文書の中から選択された一つの補助的なマルチメディア文書を主要なマルチメディア文書として該表示画面に表示させる手順と、
    を更に有する請求項１０記載の方法。
13. 該水平線状フォーマット、該垂直線状フォーマット又は該コラージュ・フォーマットの範囲内で、該複数の補助的なマルチメディア文書を該表示画面上で順番に移動させる手順を更に有する請求項１１記載の方法。
14. 該複数の補助的なマルチメディア文書の移動の速度の制御と移動の向きの逆転のうちの少なくとも一方を行う手順を更に有する請求項１３記載の方法。
15. 個別のマルチメディア文書が該表示画面上に現れたり、見えなくなったりするように、該複数の補助的なマルチメディア文書を該表示画面に表示させる手順を更に有する請求項１０記載の方法。
16. プログラマブル装置に請求項１乃至８のうち何れか一項記載のビデオ表示システムの機能を実現させるためのコンピュータプログラム。

Images