JP5015149B2 - 対話型マルチメディア・プレゼンテーション管理の同期方法 - Google Patents

対話型マルチメディア・プレゼンテーション管理の同期方法 Download PDF

Info

Publication number
JP5015149B2
JP5015149B2 JP2008519399A JP2008519399A JP5015149B2 JP 5015149 B2 JP5015149 B2 JP 5015149B2 JP 2008519399 A JP2008519399 A JP 2008519399A JP 2008519399 A JP2008519399 A JP 2008519399A JP 5015149 B2 JP5015149 B2 JP 5015149B2
Authority
JP
Japan
Prior art keywords
timing signal
presentation
time
video
application
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008519399A
Other languages
English (en)
Other versions
JP2009500911A (ja
Inventor
ジェウスバリー,アンドリュー・ウィリアム
フィンガー,ジェームズ・シー
コール,オリビア
ヒューズ,ロバート・ケイ,ジュニア
ヘイズ,シーン
タン,シー−モング
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of JP2009500911A publication Critical patent/JP2009500911A/ja
Application granted granted Critical
Publication of JP5015149B2 publication Critical patent/JP5015149B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005Reproducing at a different information rate from the information rate of recording
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G06F15/163Interprocessor communication
    • G06F15/173Interprocessor communication using an interconnection network, e.g. matrix, shuffle, pyramid, star, snowflake
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44Browsing; Visualisation therefor
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2541Blu-ray discs; Blue laser DVR discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2579HD-DVDs [high definition DVDs]; AODs [advanced optical discs]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Mathematical Physics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

【関連発明】
【0001】
この出願は、2005年7月1日に出願された米国特許仮出願第60/695,944号に基づく優先権を主張する特許出願である。上記米国特許仮出願は、この出願において援用する。
【技術分野及び背景技術】
【0002】
マルチメディア・プレーヤは、ユーザが消費するためにビデオ、オーディオ又はデータ・コンテンツの組合せ(マルチメディア・プレゼンテーション)をレンダリングする装置である。
【0003】
DVDプレーヤのようなマルチメディア・プレーヤは、現在は、ビデオ・コンテンツの再生の間に、いくぶんはあるとしても、それほど多くのユーザ対話機能を備えていない。ビデオ・コンテンツの再生は、再生速度調節以外のユーザ入力を受け取るために中断されるのが一般的である。例えば、DVDプレーヤのユーザは、オーディオ注釈、俳優の伝記又はゲームなどの機能を彼が選択し受け取ることを可能にするオプションを含んでいるメニュに戻るには、彼が再生している映画を停止しなければならないのが一般的である。
【0004】
対話型の(インタラクティブな)マルチメディア・プレーヤは、従来のビデオ、オーディオ又はデータ・コンテンツ(「対話型マルチメディア・プレゼンテーション」)と同時に、対話型コンテンツの組合せをレンダリングするデバイス(そのようなデバイスはハードウェア、ソフトウェア、ファームウェア又はそれの任意の組合せを含んでいることがある)である。任意のタイプのデバイスが対話型マルチメディア・プレーヤでありうるが、光学的なメディア・プレーヤ(例えばDVDプレーヤ)、コンピュータ及び他の電子機器のようなデバイスは、商業的に価値のある対話型マルチメディアの提供の作成を可能にしそれらに対する消費者の需要を可能にする立場にある。というのは、それらが大量の比較的安価なポータブル・データ記憶装置へのアクセスを提供するからである。
【0005】
対話型コンテンツは、一般に、単独で又は他のビデオ、オーディオ又はデータ・コンテンツと同時に提供可能な任意のユーザが選択可能な可視的又は可聴的なオブジェクトである。ひとつの種類の可視的オブジェクトとして、例えば、映画に現われる人々、自動車又は建物などのビデオ・コンテンツの中であるものを識別し及び/又はそれに従うために用いることができる円などのグラフィック・オブジェクトがある。ひとつの種類の可聴的なオブジェクトとして、ユーザが円のような可視のオブジェクトを選択したことを、リモート・コントロール又はマウスのようなデバイスを使用して円などの視覚的オブをユーザが選択したことを示すために再生されるクリック音がある。対話型コンテンツの他の例には、これらに制限はされないのであるが、メニュ、キャプション及びアニメーションなどがある。
【0006】
対話型マルチメディア・プレーヤ及び対話型マルチメディア・プレゼンテーションへの投資を向上させるために、対話型マルチメディア・プレゼンテーションの対話型コンテンツ・コンポーネントとそのようなプレゼンテーションの従来のビデオ、オーディオ又はデータ・コンテンツとを正確な同期を保証することが望ましい。正確な同期は、一般に、ビデオ、オーディオ又はデータ・コンテンツ・コンポーネントの予測可能でグリッチのない再生よりも優先される。例えば、映画の中で円が自動車の周囲に示される場合、映画は円が描かれるのを待つために一般に休止するべきでなく、自動車が移動するにつれて円が自動車に続くべきである。
【0007】
特許請求の範囲に記載されている主題は、特定の対話型マルチメディア・プレゼンテーション・システム又はその特徴の欠点の任意のもの又は全部を解決するインプリメンテーションに限定されないことを理解すべきである。
【発明の概要】
【0008】
一般に、対話型マルチメディア・プレゼンテーションは、所定のプレゼンテーション再生期間と、ビデオ・コンテンツ・コンポーネントと、対話型コンテンツ・コンポーネントとの中の1つ又は複数を含む。ビデオ・コンテンツ・コンポーネントは、例として映画を意味するが、実際には、ビデオ、オーディオ、データ又はこれらの任意の組合せでありうる。ビデオ・コンテンツ・コンポーネントは、ビデオ・コンテンツ・マネジャによってレンダリングされるように、多数のフレーム及び/又はサンプルとして構成されている。ビデオ・コンテンツ・マネジャは、1又は複数のソース(例えば、光媒体やそれ以外のソース)から、クロック信号などのタイミング信号に基づくレートで、ビデオ・データ(ビデオ、オーディオ、データ・サンプル又はこれらの組合せ)を受け取る。タイミング信号のレートは、ビデオ・コンテンツの再生速度に基づいて変動する。すなわち、例えば、映画が休止したり、低速で順方向に再生、高速で順方向に再生、低速で逆方向に再生又は高速で逆方向に再生されたりする。
【0009】
対話型コンテンツは、連続的なクロック信号などのタイミング信号に基づくレートで対話型コンテンツ・マネジャによってレンダリングされるように構成されている。プレゼンテーションの対話型コンテンツ・コンポーネントは、1又は複数のアプリケーションという形式を有する。宣言型の形式の1つのタイプとして、エクステンシビル・マークアップ・ランゲージ(XML)データ構造がある。アプリケーション命令は、メディアのプレゼンテーションを編成し、フォーマット化し、同期させるために、ときにはビデオ・コンテンツ・コンポーネントと同時に提供される。
【0010】
この出願において論じられる方法、システム、装置及び製造物は、特定のメディア・オブジェクトがレンダリング可能であるとき、時間又は時間間隔を特定するアプリケーション命令を用いることを含む。この時間又は時間間隔は、対話型マルチメディア・プレゼンテーションの再生速度に基づくレートを有する第1のタイミング信号(例えば、ビデオ・コンテンツ・マネジャによって用いられるタイミング信号など)か、又は、連続的な所定のレートを有する第2のタイミング信号(例えば、対話型コンテンツ・マネジャによって用いられるタイミング信号)のいずれかを基準として特定可能である。
【0011】
上述したように使用可能なアプリケーション命令のひとつの例としては、XMLデータ構造と関連付けられたマークアップ要素がある。XMLデータ構造の例としては、タイミング文書(ドキュメント)又はコンテナのタイミングや、文書又はコンテナの別のタイプがある。特定のシンタクス又は要素の使用コンテンツによって定義されたマークアップ要素の属性は、第1又は第2のタイミング信号のいずれかに基づいて時間を特定するのに用いられる。例示的な属性として、高精細DVD映画と関連付けられているアプリケーションにおいて用いる1又は複数のXML方式によって特定される「クロック」属性がある。
【0012】
この概要は、概念の選択肢を単純化された形態で導入するために提供されている。これらの概念は、以下の詳細な説明において更に説明がなされる。この概要に記載されたもの以外の要素又はステップも可能であり、どの要素又はステップも必須ではない。この概要は、特許請求された主題のキーとなる特徴又は本質的な特徴を識別することを意図していない。また、特許請求された主題の範囲を決定するのに役立てるという意図もない。
【発明を実施するための最良の形態】
【0013】
次に図面を参照する。図面では、同じ参照番号は同じコンポーネントを示している。図1は、対話型マルチメディア・プレゼンテーション・システム(「プレゼンテーション・システム」)100の単純化された機能ブロック図である。プレゼンテーション・システム100は、オーディオ/ビデオ・コンテンツ(「AVC」)マネジャ102、対話型コンテンツ(「IC」)マネジャ104、プレゼンテーション・マネジャ106、タイミング信号管理ブロック108及びミキサ/レンダラ(レンダリング装置)110を含んでいる。一般に、プレゼンテーション・システム100の特定の機能がどのようにインプリメントされるかは、設計上の選択によって決定される。そのような機能は、ハードウェア、ソフトウェア、ファームウェア又はこれらの組合せを使用してインプリメントすることができる。
【0014】
オペレーション(動作)では、プレゼンテーション・システム100は、対話型マルチメディア・プレゼンテーション・コンテンツ(「プレゼンテーション・コンテンツ」)120を扱う。プレゼンテーション・コンテンツ120は、ビデオ・コンテンツ・コンポーネント(「ビデオ・コンポーネント」)122と対話型コンテンツ・コンポーネント(「構成エレメントのIC」)124とを含んでいる。ビデオ・コンポーネント122とICコンポーネント124とは、それぞれが、AVCマネジャ102とICマネジャ104とによって、別のデータ・ストリームとして扱われるのが一般的であるが、これは必ずそうである必要はない。
【0015】
プレゼンテーション・システム100は、さらに、再生されたプレゼンテーション127としてユーザ(図示せず)へのプレゼンテーション・コンテンツ120のプレゼンテーションを促進する。再生されたプレゼンテーション127は、ミキサ/レンダラ110によって作成されディスプレイ又はスピーカ(図示せず)のようなデバイスによってユーザが受け取ることが可能なプレゼンテーション・コンテンツ120と関連付けられている可視的及び/又は可聴的な情報を表す。説明目的のために、プレゼンテーション・コンテンツ120及び再生されたプレゼンテーション127は任意のフォーマットの高解像度DVD映画コンテンツを表わすと仮定する。しかし、プレゼンテーション・コンテンツ120及び再生されたプレゼンテーション127が、現在既知であるか又は今後開発される任意のタイプの対話型マルチメディア・プレゼンテーションであることは理解されるはずである。
【0016】
ビデオ・コンポーネント122は、プレゼンテーション・コンテンツ120の従来型のビデオ、オーディオ又はデータ・コンポーネントを表わす。例えば、一般的に、映画には、1又は複数のバージョン(例えば、成人の聴衆のためのバージョン及びより若い聴衆のためのバージョン)と、各タイトル(タイトルについてはプレゼンテーション・マネジャ106との関係で後述する)と関連する1又は複数の章(図示せず)を備えた1又は複数のタイトル131と、1又は複数のオーディオ・トラック(例えば、映画は字幕付き又は字幕なしで1又は複数の言語で再生される)と、監督のコメントや追加場面や予告編などの特別コンテンツとが含まれる。タイトルと章との区別は純粋に論理的な区別であることが認識されるだろう。例えば、単一の知覚された媒体セグメントは、単一のタイトル/章の一部でありえるし、又は、複数のタイトル/章から構成されていることもありうる。適用可能な論理的な区別を決定することは、コンテンツ・オーサリング・ソースに依存する。ビデオ・コンポーネント122は、映画と呼ばれることがあるが、実際には、ビデオ、オーディオ、データ又はこれらの任意の組合せでもありうる。
【0017】
ビデオ・コンポーネント122を形成するビデオ、オーディオ又はデータは、1又は複数のメディア・ソース160(典型的な目的のために、2つのメディア・ソース160がA/Vマネジャ102内に示される)から生じる。メディア・ソースとは、ビデオ、オーディオ又はデータが由来するかそこから得られるあらゆるデバイス、場所又はデータである。メディア・ソースの例には、制限は意味しないが、ネットワーク、ハード・ドライブ、光媒体、代替的な物理ディスク、及び特定のビデオ、オーディオ又はデータの記憶装置での位置を参照するデータ構造が含まれる。
【0018】
特別のメディア・ソースからのビデオ、オーディオ又はデータのサンプルのグループは、クリップ123(ビデオ・コンポーネント122、AVCマネジャ102及びプレイリスト128の中に示されている)として参照される。AVCマネジャ102を参照すると、クリップ123と関連する情報は、1又は複数のメディア・ソース160から受け取られ、デコーダ・ブロック161でデコードされる。デコーダ・ブロック161は、メディア・ソース160から受け取られた情報からレンダリング可能なビデオ、オーディオ又はデータ・コンテンツを検索するために用いられる任意のデバイス、テクニック又はステップを表わす。例えば、デコーダ・ブロック161は、エンコーダ/デコーダのペア、デマルチプレクサ又は復号器(デクリプタ)を含んでいることがある。デコーダとメディア・ソースの1対1の関係が示されているが、1台のデコーダが複数のメディア・ソースに役立つことがあり、その逆が正しいこともある。
【0019】
オーディオ/ビデオ・コンテンツ・データ(「A/Vデータ」)132は、AVCマネジャ102によってレンダリングされる準備がなされたビデオ・コンポーネント122と関連付けられたデータであり、ミキサ/レンダラ110に送信される。A/Vデータ134のフレームは、一般に、個々のアクティブなクリップ123に対して、当該クリップの一部のレンダリングを含む。特定のフレーム中でレンダリングされるクリップの正確な部分又は量は、クリップのビデオ、オーディオ又はデータ・コンテンツの特性や、クリップをエンコード又はデコードするのに用いられるフォーマット、テクニック又はレートなどいくつかのファクタに基づく。
【0020】
ICコンポーネント124は、メディア・オブジェクト125を含む。このメディア・オブジェクト125は、ユーザによる選択が可能な可視的又は可聴的なオブジェクトであり、この可視的又は可聴的なオブジェクトのプレゼンテーションのための任意の命令(アプリケーション155として示されており、後述する)と共に、オプションではあるがビデオ・コンポーネント122と同時にプレゼンテーションが可能である。メディア・オブジェクト125は静的な場合もアニメーション(動画)である場合もある。メディア・オブジェクトの例としては、他のものもありうるが、ビデオ・サンプル又はクリップ、オーディオ・サンプル又はクリップ、グラフィクス、テキスト及びこれらの組合せを含む。
【0021】
メディア・オブジェクト125は、1又は複数のソース(図示せず)から生じる。ソースは、メディア・オブジェクトが由来するかそこから得られる任意のデバイス、場所又はデータである。メディア・オブジェクト125のためのソースの例には、制限は意味しないが、ネットワーク、ハード・ドライブ、光媒体、代替的な物理ディスク、及び特定のメディア・オブジェクトの記憶位置を参照するデータ構造が含まれる。メディア・オブジェクト125のフォーマットの例には、これらに制限されないが、ポータブル・ネットワーク・グラフィクス(「PNG」)、ジョイント写真エキスパート・グループ(「JPEG」)、動画エキスパート・グループ(「MPEG」)、マルチプル・イメージ・ネットワーク・グラフィックス(「MNG」)、オーディオ・ビデオ・インタリーブ(「AVI」)、エクステンシブル・マークアップ・ランゲージ(「XML」)、ハイパーテキスト・マークアップ・ランゲージ(「HTML」)及び拡張可能なHTML(「XHTML」)が含まれる。
【0022】
アプリケーション155は、プレゼンテーション・システム100がユーザにメディア・オブジェクト125を与える際の機構(メカニズム)を提供する。アプリケーション155は、任意の信号処理方法、又は、データに対する所定の動作を電子的に制御する記憶された命令を表わす。ここでの説明のために、ICコンポーネント124が図2及び3との関係で後述される3つのアプリケーション155を含むと仮定する。第1のアプリケーションは、映画に先立って著作権表示を示す。第2のアプリケーションは、映画の視覚的な側面と同時に、ユーザが選択可能な複数のアイテムを有するメニュを提供するメディア・オブジェクトを提供する。第3のアプリケーションは、映画の中に現れる1又は複数のアイテム(例えば、人、自動車、ビルディング又は製品(プロダクト))を識別及び/又はそれらに続くために用いられるグラフィック・オーバーレイ(円など)を提供する1又は複数のメディア・オブジェクトを示す。
【0023】
対話型コンテンツ・データ(「ICデータ」)134は、ICマネジャ104によってレンダリングされるように準備されミキサ/レンダラ110に送信されるICコンポーネント124に関連するデータである。それぞれのアプリケーションは関連するキュー(図示せず)を有し、このキューはアプリケーションのレンダリングに関連する1又は複数の作業項目(ワーク・アイテム)(図示せず)を保持する。
【0024】
プレゼンテーション・マネジャ106は、AVCマネジャ104及びICマネジャ102の両方と通信するように構成されており、プレゼンテーション・コンテンツ120の取り扱いと、ユーザへの再生されたプレゼンテーション127の提供とを促進する。プレゼンテーション・マネジャ106は、プレイリスト128へのアクセスを有する。プレイリスト128は、他のものに加えて、ユーザへのプレゼンテーションが可能なクリップ123及びアプリケーション155(メディア・オブジェクト125を含んで)の時系列シーケンスを含む。クリップ123及びアプリケーション155/メディア・オブジェクト125は、1又は複数のタイトル131を形成するように構成されうる。例示的な目的のために、ここで1つのタイトル131について論じる。プレイリスト128は、エクステンシブル・マークアップ・ランゲージ(「XML」)ドキュメント又は別のデータ構造を使用してインプリメントできる。
【0025】
プレゼンテーション・マネジャ106は、プレイリスト128を用いて、タイトル131のためのプレゼンテーション・タイムライン130を確認する。概念的には、特定のクリップ123及びアプリケーション155をユーザにプレゼンテーション可能である場合に、プレゼンテーション・タイムライン130はタイトル131の中での時刻を示す。サンプル・プレゼンテーション・タイムライン130は、クリップ123とアプリケーション155との間の例示的な関係を図解しているのであるが、図2との関係で示され論じられる。状況によっては、プレイリスト128及び/又はプレゼンテーション・タイムライン130を用いてビデオ・コンテンツ・タイムライン(「ビデオ・タイムライン」)142及び対話型コンテンツ・タイムライン(「ICタイムライン」)144を確認するのが有用である。
【0026】
プレゼンテーション・マネジャ106は、これだけには限定されないがプレゼンテーション・タイムライン130に関する情報を含む情報を、AVCマネジャ102及びICマネジャ104に提供する。プレゼンテーション・マネジャ206からの入力に基づいて、AVCマネジャ102はレンダリングのためにA/Vデータ132を準備し、ICマネジャ104はレンダリングのためにICデータ134を準備する。
【0027】
タイミング信号管理ブロック108は様々なタイミング信号158を生じ、このタイミング信号158は、AVCマネジャ102及びICマネジャ104のそれぞれによるA/Vデータ132及びICデータ134の準備及び作成のタイミングを制御するのに用いられる。特に、タイミング信号158は、A/Vデータ132とICデータ134とのフレーム・レベルでの同期を達成するのに用いられる。タイミング信号管理ブロック108及びタイミング信号158の詳細は、図4との関係で後述する。
【0028】
ミキサ/レンダラは、ビデオ平面(図示せず)においてA/Vデータ132をレンダリングし、グラフィクス平面において(図示せず)でICデータ134をレンダリングする。グラフィクス平面は、必ずではないが一般的にはビデオ平面の上にオーバレイされて、ユーザのために再生されたプレゼンテーション127を作成する。
【0029】
図1への参照を継続するが、図2は、プレイリスト128の中のタイトル131のためのサンプル・プレゼンテーション・タイムライン130の図解である。時間は水平軸220に示さていれる。ビデオ・コンポーネント122(クリップ123が図解されている)及びICコンポーネント124(メディア・オブジェクト125を提供するアプリケーション155が図解されている)が垂直軸225に示されている。2個のクリップ123が示されていて、第1のビデオ・クリップ(「ビデオ・クリップ1」)230と、第2のビデオ・クリップ(「ビデオ・クリップ2」)250とである。ここで論じるために、図1に関して上述したように、第1のアプリケーションは、著作権表示260を含む1又は複数のメディア・オブジェクト(例えばイメージ及び/又はテキスト)を提供する役割を有すると仮定される。第2のアプリケーションは、メニュ280のユーザが選択可能なアイテム(例えば関連するテキスト又はグラフィックスを備えたボタン)を提供するメディア・オブジェクトを提供する役割を有する。第3のアプリケーションは、グラフィック・オーバーレイ290を提供する1又は複数のメディア・オブジェクトを提供する役割を有する。メニュ280は、ビデオ・クリップ1(230)及びビデオ・クリップ2(250)と同時に表示される。また、グラフィック・オーバーレイ290は、ビデオ・クリップ1(230)及びメニュ280と同時に表示することができる。
【0030】
タイトル131をユーザに提供可能な水平軸220に沿った特定の長さの時間は、タイトル131の再生期間292と呼ばれる。再生期間292の中の特定の時間はタイトル時間と呼ばれる。プレゼンテーション・タイムライン130には、4つのタイトル時間(TT)が示されている。すなわち、TT1(293)、TT2(294)、TT3(295)及びTT4(296)である。1つのタイトルは一度再生されるか、又は、二度以上(例えば、ループの態様で)再生されることがあるので、再生期間292はタイトル131の反復に基づいて決定される。再生期間292は、これらには限定されないが所定の再生速度(例えば、通常のすなわち1倍の再生速度)、所定のフレーム・レート、又は所定のタイミング信号状態を含む任意の所望の基準との関係で決定されうる。再生速度、フレーム・レート及びタイミング信号は、図4との関係で後述される。エンコード技術やディスプレイ技術やそれぞれのタイトルに対するクリップ及びメディア・オブジェクトの間の再生シーケンス及びタイミング関係に関する特別な規則などのインプリメンテーションに特有のファクタはタイトルの再生期間及びその中のタイトル時間の正確な値に影響すると考えられる。再生期間及びタイトル時間という用語は、そのようなインプリメンテーションに特有の詳細をすべて包含することが意図されている。ICコンポーネント124と関連するコンテンツがプレゼンテーション可能であるタイトルは既に決定されているのが一般的であるが、ユーザがそのようなコンテンツと対話するときに講じられた行動は、再生されたプレゼンテーション127が再生されている間のユーザ入力に基づいてのみ決定されると考えられる。例えば、ユーザは、あるアプリケーション、メディア・オブジェクト及び/又は再生されたプレゼンテーション127の再生の間と関連する付加的なコンテンツを、選択、付勢(アクティブ化)又は消勢(非アクティブ化)することができる。
【0031】
再生期間292の中の他の時間及び/又は期間も定義され、ここで論じられる。映像(ビデオ)プレゼンテーション間隔240は、ビデオ・コンポーネント122と関連する特定のコンテンツがその間に再生可能である再生期間292の開始及び終了時間によって定義される。例えば、ビデオ・クリップ1(230)は、タイトル時間TT2(294)とTT4(294)との間のプレゼンテーション間隔240を有し、ビデオ・クリップ2(250)は、タイトル時間TT3(295)とTT4(296)との間のプレゼンテーション間隔240を有する。アプリケーション・プレゼンテーション間隔、アプリケーション再生期間、プレゼンテーション間隔、及びページ期間も定義され、図3との関係で後述する。
【0032】
更に図2を参照すると、2つのタイプの時間間隔が、再生期間292の中に存在する。第1のタイプの時間間隔は、ビデオ・コンポーネント122がプレゼンテーションを予定されていないものである。時間間隔1(297)は、映画のプレゼンテーションに先行して著作権表示260が表示される時間であるが、第1のタイプの時間間隔の例である。著作権表示260を示すアプリケーションは時間間隔1(297)にプレゼンテーションを予定されているが、アプリケーションが第1のタイプの時間間隔の間にプレゼンテーションを予定されていることは必要ないと考えられる。
【0033】
第2のタイプの時間間隔は、ビデオ・コンポーネント122がプレゼンテーションを予定されているものである。時間間隔2(298)及び時間間隔3(299)は、第2のタイプの時間間隔の例である。時には、複数のビデオが第2のタイプの時間間隔の間にプレゼンテーションを予定されていることがある。常にではないが多くの場合には、対話型コンテンツは第2のタイプの時間間隔の間にプレゼンテーション可能である。例えば、時間間隔2(298)では、メニュ280及びグラフィック・オーバーレイ290が、ビデオ・クリップ230と同時にプレゼンテーションを予定されている。時間間隔3(299)では、メニュ280は、ビデオ・クリップ1(230)及びビデオ・クリップ2(250)と同時のプレゼンテーションが予定されている。
【0034】
図1及び2を更に参照しながら図3を参照すると、図3は、単独のアプリケーション155の機能ブロック図である。アプリケーション155は、一般的に、メディア・オブジェクトに260、280及び290を提供する役割を有するアプリケーションを表している。アプリケーション155は命令304(後述する)を含んでいる。アプリケーション155は、リソース・パッケージ・データ構造340(後述する)、アプリケーション再生期間320及び1又は複数のアプリケーション・プレゼンテーション間隔321と関連している。
【0035】
アプリケーション再生期間320は、アプリケーション155と関連したメディア・オブジェクト125が再生されたプレゼンテーション127の受信者にプレゼンテーション可能及び/又はその受信者に選択可能な再生期間292の長さ(一部又は全体)との関係で、特定の長さの時間である。図2のコンテキストでは、例えば、著作権表示260の役割を有するアプリケーション155は、TT1(293)とTT2(294)との間の時間の長さで構成されるアプリケーション再生期間を有する。メニュ280の役割を有するアプリケーションは、TT2(294)とTT4(296)との間の時間の長さで構成されるアプリケーション再生期間を有する。グラフィカル・オーバーレイ290の役割を有するアプリケーションは、TT2(294)とTT3(295)との間の時間の長さで構成されるアプリケーション再生期間を有する。
【0036】
特定のアプリケーションと関連するアプリケーション再生期間320がプレゼンテーション・タイムライン上で概念化されるときに得られた開始及び終了タイトル時間より定義された間隔は、アプリケーション・プレゼンテーション間隔321と呼ばれる。例えば、著作権表示206の役割を有するアプリケーションは、TT1(293)で始まりTT2(294)で終了するアプリケーション・プレゼンテーション間隔を有する。メニュ280の役割を有するアプリケーションは、TT2(294)及びTT4(296)で始まるアプリケーション・プレゼンテーション間隔を有する。また、グラフィック・オーバーレイ290の役割を有するアプリケーションは、TT2(294)及びTT3(295)で始まるアプリケーション・プレゼンテーション間隔を有する。
【0037】
図3を再び参照すると、ある場合には、アプリケーション155は、複数のページを有することがある。ページは、特定のアプリケーション再生期間320及び/又はアプリケーション・プレゼンテーション間隔321の間に同時にプレゼンテーション可能な1又は複数のメディア・オブジェクトの論理的なグルーピングである。しかし、特別のページと関連するメディア・オブジェクトは、同時に、シリアルに、又はこれらの組合せで提供されることがある。示されているように、最初のページ330は最初のメディア・オブジェクト331と関連しており、また、後続のページ335はメディア・オブジェクト336と関連している。それぞれのページは、それ自身のページ期間を有する。示されているように、最初のページ330はページ期間332を有する。また、後続のページ335はページ期間337を有する。ページ期間は、特定のページと関連するメディア・オブジェクト125がユーザにプレゼンテーション可能(又は、ユーザによって選択可能)であるアプリケーション再生期間330の長さ(一部又は全体)との関係で、特定の長さの時間である。特定のページと関連するページ再生期間がプレゼンテーション・タイムライン上で概念化される時に得られた開始及び終了タイトル時間によって定義された間隔は、ページ・プレゼンテーション間隔343と呼ばれる。ページ・プレゼンテーション間隔343は、アプリケーション・プレゼンテーション間隔321のサブ間隔である。特別のメディア・オブジェクト・プレゼンテーション間隔345も、ページ・プレゼンテーション間隔343の中で定義されることがある。
【0038】
与えられたタイトルと関連するアプリケーション及びページの数と、各アプリケーション又はページと関連するメディア・オブジェクトとは、一般的に、設計選択事項である論理的な区別である。アプリケーションの実行の間にメモリにロードされるアプリケーションと関連するリソースの数又は量を管理する(例えば制限する)ことが望ましい場合には、複数のページが用いられることがある。アプリケーションのためのリソースは、メディア・オブジェクトをレンダリングするための命令304と同様に、アプリケーションによって用いられるメディア・オブジェクトを含んでいる。例えば、複数のページを備えたアプリケーションがプレゼンテーション可能である場合には、そのアプリケーションの現在プレゼンテーション可能なページと関連するリソースだけをメモリにロードするだけのことが可能な場合がある。
【0039】
リソース・パッケージ・データ構造340は、アプリケーションの実行に先立ってメモリにアプリケーション・リソースをロードすることを容易にするのに用いられる。リソース・パッケージ・データ構造340は、そのアプリケーションのためのリソースが位置するメモリ位置を参照する。リソース・パッケージ・データ構造340は、それが参照するリソースと一緒に又は別個に、任意の望ましい場所に記憶される。例えば、リソース・パッケージ・データ構造340は、ビデオ・コンポーネント122と離れたエリアにおいて、高解像度DVDなどの光媒体に配置されることがある。あるいは、リソース・パッケージ・データ構造340は、ビデオ・コンポーネント122の中に埋め込まれることがある。更には、リソース・パッケージ・データ構造は、遠隔的に配置されることがある。遠隔的な配置の例は、ネットワーク・サーバである。アプリケーション実行のための及びアプリケーションの間のリソースのトランジションの扱いに関するトピックの詳細は、ここでは論じない。
【0040】
アプリケーション155それ自体を再び参照すると、命令304は、実行されると、ユーザ入力に基づいて、アプリケーション155と関連するメディア・オブジェクト125のレンダリングと関係するタスクを行なう。1つのタイプのユーザ入力(又はその結果)は、ユーザ・イベントである。ユーザ・イベントは、ICコンポーネント124に関係のある再生されたプレゼンテーション127の受信者によって始められたアクション又は発生(オカレンス)である。ユーザ・イベントは、必ずというわけではないが、一般的には非同期である。ユーザ・イベントの例には、制限的ではないが、メニュ280の中のボタンの選択や、グラフィカル・オーバーレイ290と関連する円の選択など、再生されたプレゼンテーション127の中のメディア・オブジェクトとのユーザの対話(インタラクション)が含まれる。そのようなインタラクションは、現時点で既知であるか将来開発される任意のタイプのユーザ入力デバイスを用いて生じる。そのデバイスには、キーボード、リモート・コントロール、マウス、スタイラス又は音声コマンドが含まれる。アプリケーション155はユーザ・イベント以外のイベントに応答することがあるが、そのようなイベントについてはここでは論じない。
【0041】
あるインプリメンテーションでは、命令304は、コンピュータ可読媒体(図9との関係で後述する)においてエンコードされたコンピュータ実行可能な命令である。ここに論じる例では、命令304は、スクリプト308又はマークアップ・エレメント302、306、310、312、360のいずれかを使用してインプリメントされる。スクリプト又はマークアップ・エレメントのいずれかが単独で用いられることもありうるが、一般に、スクリプト及びマークアップ・エレメントの組合せは高解像度DVD映画のための対話型機能の包括的なセットの生成を可能にする。
【0042】
スクリプト308は、命令的なプログラミング言語のような非宣言的なプログラミング言語で書かれた命令304を含んでいる。命令的なプログラミング言語は、プロセッサによって実行される一連のコマンドにより計算について記述する。スクリプト308が用いられるほとんどの場合、スクリプトはユーザ・イベントに応答するのに用いられる。しかし、スクリプト308は、マークアップ・エレメントを単独で使用しても容易に又は効率的にインプリメントされない問題を処理する場合など、それ以外のコンテキストでも役立つ。そのようなコンテキストの例には、システム・イベントやリソース管理(例えば、キャッシュに入れられたリソースや永久的に記憶されているリソースへのアクセスなど)が含まれる。あるインプリメンテーションでは、スクリプト308は、ECMA−262仕様においてECMAインターナショナルによって定義されたECMAScriptである。ECMA−262に含まれる一般的なスクリプト用のプログラミング言語には、JavaScriptとJScriptとが含まれる。いくつかの設定では、ホスト環境及び1セットのアプリケーション・プログラム・インターフェースと共にECMA−327のようなECMAScript262の部分集合を用いて308をインプリメントするのが望ましいことがある。
【0043】
マークアップ・エレメント302、306、310、312及び360は、エクステンシブル・マークアップ・ランゲージ(「XML」)のような宣言的なプログラミング言語で書かれた命令304を表現する。XMLでは、エレメントは、XML文書において開始タグと終了タグとを使用して定義された情報の論理的単位である。XML文書はエンティティ(コンテナとも称される)と呼ばれる記憶装置から構成されるデータ・オブジェクトであり、解析(パーシング又はパージング)された(parsed)データ又は解析(パーシング)されていない(unparsed)データを含む。解析されたデータは、キャラクタから構成される。それらのうちのいくつかはキャラクタ・データを形成し、また、それらのうちのいくつかがマークアップを形成する。マークアップは、ドキュメントの記憶領域レイアウト及び論理構造の記述をエンコードする。XML文書には1つのルート・エレメントが存在し、そのどの部分も他のエレメントのコンテンツに現われない。他のすべてのエレメントのために、開始タグと終了タグとは互い内部に入れ子状になった状態で他のエレメントのコンテンツの中にある。
【0044】
XMLスキーマは、XML文書のクラスのシンタックスの定義である。1つのタイプのXMLスキーマは、汎用のスキーマである。いくつかの汎用のスキーマはワールド・ワイド・ウェブ・コンソーシアム(W3C)によって定義される。別のタイプのXMLスキーマは、専用スキーマである。例えば、高解像度DVDコンテキストでは、1又は複数の専用XMLスキーマが高精細度ビデオ用のDVD仕様に従ってXML文書と共に用いるためにDVDフォーラムによって発布された。他の対話型マルチメディア・プレゼンテーション用スキーマと同様に高解像度DVD映画用の他のスキーマも可能であることが認識されるだろう。
【0045】
ハイ・レベルでは、XMLスキーマは、(1)エレメント名とエレメント・タイプとを関連付ける、グローバル・エレメントの宣言と、(2)そのタイプのエレメントに対して属性、サブエレメント及びキャラクタ・データを定義するタイプ定義とを含む。エレメントの属性は、名前/値のペアを用いてエレメントの特定のプロパティを指定する。ここで、1つの属性は単一のエレメントのプロパティを特定している。
【0046】
コンテンツ・エレメント302は、ユーザ・イベント・エレメント360を含む場合もあるが、アプリケーション155によってユーザにプレゼンテーション可能な特定のメディア・オブジェクト・エレメント312を識別するのに用いられる。メディア・オブジェクト・エレメント312は、これに対し、特定のメディア・オブジェクト125を定義するデータが配置されている場所を指定するのが一般的である。そのような場所は、例えば、継続的なローカル又はリモートの記憶装置における場所であり、インターネット、私的に管理されるネットワーク又はワールド・ワイド・ウェブなどの有線又は無線、公的又は私的なネットワーク上の場所を含めた、有線や無線の公的又は私的なネットワークの上や光媒体上の場所などが含まれる。メディア・オブジェクト・エレメント312によって指定された場所は、更に、リソース・パッケージ・データ構造340への参照など、場所への参照であることもある。このように、メディア・オブジェクト125の場所は間接的に指定されることがある。
【0047】
タイミング・エレメント306は、一般的に、特定のアプリケーション155によってユーザにプレゼンテーション可能である特定のコンテンツ・エレメント302の外観を指定するのに用いられる。タイミング・エレメントの例には、XML文書の時間コンテナの中にある、パー(par)、タイミング又はseqエレメントが含まれる。
【0048】
スタイル・エレメント310は、特定のアプリケーションによってユーザにプレゼンテーション可能な特定のコンテンツ・エレメント302の外観を指定するために一般に用いられる。
【0049】
ユーザ・イベント・エレメント360は、ユーザ・イベントを定義する又はユーザ・イベントに応答するのに用いられるコンテンツ・エレメント302、タイミング・エレメント306又はスタイル・エレメント310を表わす。
【0050】
マークアップ・エレメント302、306、310及び360は、それらの関連するメディア・オブジェクト・エレメント312/メディア・オブジェクト125のあるプロパティを指定するのに使用可能な属性を有する。あるインプリメンテーションでは、これらの属性/プロパティは、1又は複数のクロック又はタイミング信号(図4との関係で後述する)の値を表わす。時間又は時間期間を表すプロパティを有するマークアップ・エレメントの属性の使用は、ユーザは再生されたプレゼンテーション127を受け取る間にICコンポーネント124とビデオ・コンポーネント122との間の同期を達成する1つの方法である。
【0051】
マークアップ・エレメントを含むサンプルXML文書が、下に示されている(ただし、スクリプト308は示されない)。サンプルXML文書は、コンテンツ・エレメント302上でクロップ・アニメーションを実行するスタイル310及びタイミング306エレメントを含んでいる。ここで、コンテンツ・エレメント302は「id」と呼ばれるメディア・オブジェクト・エレメント312を参照する。「id」メディア・オブジェクト・エレメントと関連するメディア・オブジェクト125を定義するデータの場所は示されていない。
【0052】
このサンプルXML文書は、「xml」と呼ばれるルート・エレメントから始まる。ルート・エレメントに続いて、いくつかのネームスペース「xmlns」フィールドが、このサンプルXML文書のためのシンタックスとその中のコンテナとを定義する様々なスキーマを見つけることができるワールド・ワイド・ウェブ上の場所を参照する。高解像度DVD映画と共に用いるためのXML文書のコンテキストでは、例えば、ネームスペース・フィールドは、DVDフォーラムと関連するウェブサイトを参照することがある。
【0053】
「id」と呼ばれる1つのコンテンツ・エレメント302が、「ボデイ」とラベル付けされたタグによって記述されるコンテナの中で定義される。コンテンツ・エレメント「id」と関連するスタイル・エレメント310(この例では、「スタイリング」というラベルの下にあるエレメント)は、「head」とラベル付けされたタグによって記述されるコンテナの中で定義される。タイミング素子306(「タイミング」というラベルの下にあるエレメント)も、「ヘッド」とラベル付けされたタグによって記述されるコンテナの中で定義される。
【0054】
【表1−A】
Figure 0005015149
【0055】
【表1−B】
Figure 0005015149
図1ないし3を継続して参照しながら図4を参照すると、図4は、タイミング信号管理ブロック108様々なコンポーネントとタイミング信号158とをより詳細に図解する単純化された機能ブロック図である。
【0056】
タイミング信号管理ブロック108は、プレゼンテーション・システム100の中の特定の時間又は時間期間を決定するために用いられるクロック及び/又はタイミング信号を取り扱う役割を有する。示されているように、連続タイミング信号401が、クロック・ソース402によって所定のレートで作成される。クロック・ソース402は、汎用コンピュータ又は専用電子機器のような処理システムと関連するクロックでありうる。クロック・ソース402によって作成されるタイミング信号401は、一般に、現実世界のクロックがそうであるように連続的に変化するのであるが、現実時間の1秒の間に、クロック・ソース402は、所定のレートで、タイミング信号401に相当する1秒を生じる。タイミング信号401は、ICフレーム・レート計算機404、A/Vフレーム・レート計算機406、時間基準計算機408及び時間基準計算機490に入力される。
【0057】
ICフレーム・レート計算機404は、タイミング信号401に基づいてタイミング信号405を生成する。タイミング信号405は、「ICフレーム・レート」と呼ばれ、ICデータ134のフレームがICマネジャ104によって生成されるレートを表わす。ICフレーム・レートの例示的な1つの値は、30フレーム/秒である。ICフレーム・レート計算機404は、タイミング信号405を生成するタイミング信号401のレートを低下又は増加させる。
【0058】
ICデータ134のフレームは、一般に、個々の有効なアプリケーション155及び/又はそのページに対して、それぞれのユーザ・イベントに従う有効なアプリケーション及び/又はそのページと関連する各メディア・オブジェクト125のレンダリングを含む。例示目的ではあるが、有効なアプリケーションは、再生期間292の現在のタイトル時間がプレゼンテーション・タイムライン130に基づいて含まれるアプリケーション・プレゼンテーション間隔321を有する。アプリケーションは、複数のアプリケーション・プレゼンテーション間隔を有しうると考えられる。アプリケーションの状態に関しては、ユーザ入力又は資源(リソース)の利用性に基づいて何の特別の区別もなされないと考えられる。
【0059】
A/Vフレーム・レート計算機406は、また、タイミング信号401に基づいて、タイミング信号407を生成する。タイミング信号407は、「A/Vフレーム・レート」と呼ばれ、A/Vデータ132のフレームがAVCマネジャ102によって生成されるレートを表わす。A/Vフレーム・レートは、ICフレーム・レート405と同じ場合と異なる場合とがある。A/Vフレーム・レートの例示的な値は、24フレーム/秒である。A/Vフレーム・レート計算機406は、タイミング信号407を生成するタイミング信号401のレートを低下又は増加させる。
【0060】
クロック・ソース470はタイミング信号471を生成し、このタイミング信号471はクリップ123と関連する情報がメディア・ソース161から生成されるレートを管理する。クロック・ソース470は、クロック402と同じクロックであるか又はクロック・ソース402と同じクロックに基づく。あるいは、クロック470及び402はまったく異なり、及び/又は異なるソースを有する。クロック・ソース470は、再生速度入力480に基づいてタイミング信号471のレートを調節する。再生速度入力480は、再生されたプレゼンテーション127の再生速度に影響する受け取られたユーザ入力を表す。例えば、再生速度は、ユーザが映画のある部分から別の部分にジャンプするとき(「トリック再生」と呼ばれる)や、ユーザが映画を停止、遅い順送り、早い順送り、遅い逆再生又は速い逆再生をするときに影響を受ける。トリック再生は、メニュ280(図2に示される)から選択することによって、又は、他の態様で達成される。
【0061】
時間基準452は、アクティブ・クリップ123と関連する特定のプレゼンテーション間隔240の中で経過した時間の長さを表す。ここでの説明のため、アクティブ・クリップは、再生期間292の現在のタイトル時間が含まれるプレゼンテーション間隔240を有しプレゼンテーション・タイムライン130に基づくものである。時間基準452は、「経過したクリップ再生時間」と称される。時間基準計算機454は、時間基準452を受け取り、メディア時間基準455を生成する。メディア時間基準455は、1又は複数の時間基準452に基づいて経過した再生期間292の全体量を表わす。一般に、2以上のクリップが同時に再生されている場合には、ただ1つの時間基準452が用いられて、メディア時間基準455が生成される。メディア時間基準455を決定するのに用いられる特定のクリップと、複数のクリップに基づいてメディア時間基準455がどのように決定されるかとは、インプリメンテーションの好適性の問題である。
【0062】
時間基準計算機408は、タイミング信号401とメディア時間基準455と再生速度入力480とを受け取り、タイトル時間基準409を生成する。タイトル時間基準409は、時間基準計算機408への入力の1つ以上に基づいた再生期間292の間に経過した時の全体量を表わす。タイトル時間を計算する例示的な方法が、図6に関して示され説明される。
【0063】
時間基準計算機490は、タイミング信号401及びタイトル時間基準409を受け取り、アプリケーション時間基準492及びページ時間基準494を生じる。単一のアプリケーション時間基準492は、連続タイミング信号401に関して、特定のアプリケーション再生期間320(図3との関係で示され論じられる)の経過時間の量を表わす。アプリケーション時間基準492は、現在のタイトル時間が特定のアプリケーションのアプリケーション・プレゼンテーション間隔321の中にあることをタイトル時間基準409が示すときに決定される。アプリケーション時間基準492は、アプリケーション・プレゼンテーション間隔321の満了時にリセットされる(例えば、非アクティブになるか、再びスタートする)。アプリケーション時間基準492は、また、ユーザ・イベントに応答してやトリック再生が生じるときなど他の状況でもリセットされる。
【0064】
ページ時間基準494は、連続タイミング信号401に関して、単一のページ再生期間332、337(図3との関係でも示され論じられる)の経過時間の量を表わす。現在のタイトル時間が適用可能なページ・プレゼンテーション間隔343の中に含まれることをタイトル時間基準409が示すときに、アプリケーションの特定のページのページ時間基準494が決定される。ページ・プレゼンテーション間隔は、アプリケーション・プレゼンテーション間隔321のサブ間隔である。ページ時間基準494は、適用可能なページ・プレゼンテーション間隔343の終了時にリセットされることがある。ページ時間基準494は、また、ユーザ・イベント応じてやトリック再生が生じるときなどそれ以外の状況でもリセットされることがある。メディア・オブジェクト・プレゼンテーション間隔345は、アプリケーション・プレゼンテーション間隔321及び/又はページ・プレゼンテーション間隔343のサブ間隔でありうるが、定義可能でもあると考えられる。
【0065】
表2は、プレゼンテーション・システム100による再生されたプレゼンテーション127の再生の間の例示的な発生と、アプリケーション時間基準492、ページ時間基準494、タイトル時間基準409及びメディア時間基準455におけるそのような発生の影響を図解する。
【0066】
【表2】
Figure 0005015149
図5は、アプリケーション時間基準492とページ時間基準4とタイトル時間基準409とメディア時間基準455とにおける再生されたプレゼンテーション127の再生の間のいくつかのオカレンス502の効果をより詳細に示している概略図である。オカレンス502及びその結果は、タイミング信号401のような連続的なタイミング信号の値との関係で示されている。特に示されていない場合には、高精細DVD映画の特定のタイトルが、通常の速度で再生されており、3つのシリアルにプレゼンテーション可能なページを有する単一のアプリケーションが、ユーザ対話機能を提供する。
【0067】
タイミング信号がゼロの値を有するときには、映画の再生が開始される。タイミング信号が10の値を有するときに、アプリケーションは有効になりアクティブになる。アプリケーションのページ1と関連するページ時間494と同様に、アプリケーション時間492も、0の値を仮定する。ページ2及びページ3は、非アクティブである。タイトル時間409及びメディア時間455は、両方とも、10の値を有する。
【0068】
アプリケーションのページ2は、タイミング信号値15においてロードする。アプリケーション時間及びページ1の時間は5の値を有し、他方で、タイトル時間及びメディア時間は15の値を有する。
【0069】
タイミング信号が20の値を有するときに、アプリケーションのページ3がロードする。アプリケーション時間は10の値を有し、ページ2の時間は5の値を有し、ページ1の時間は非アクティブである。タイトル時間及びメディア時間は、20の値を有する。
【0070】
タイミング信号の値が22において、映画が休止する。アプリケーション時間は12の値を有し、ページ3の時間は2の値を有し、ページ1とページ2とは非アクティブである。タイトル時間及びメディア時間は、22の値を有する。映画は、タイミング信号の値24において再開する。ここで、アプリケーション時間は14の有し、ページ3の時間は4の値を有し、タイトル時間及びメディア時間は22の値を有する。
【0071】
タイミング信号値27では、新たなクリップが開始する。アプリケーション時間は17の値を有し、ページ3の時間は7の値を有し、タイトル時間は25の値を有する。メディア時間は0にリセットされる。
【0072】
ユーザは、タイミング信号の値32において、アプリケーションを非アクティブ化する。アプリケーション時間は22の値を有し、ページ時間は12の値を有し。タイトル時間は30の値を有する。また、メディア時間は5の値を有する。
【0073】
タイミング信号の値39では、ユーザは、同じクリップの別の部分まで逆方向にジャンプする。そのアプリケーションは、ジャンプによって移動した場所で有効であると仮定され、すぐに再度アクティブとなる。アプリケーション時間は0の値を有し、ページ1の時間はゼロの値を有し、それ以外のページは非アクティブであり、タイトル時間は27の値を有し、メディア時間は2の値を有する。
【0074】
タイミング信号値46では、ユーザは、通常の速度の2倍で順方向に高速で再生されている映画の再生速度を変更する。高速で順方向の再生は、タイミング信号の値53まで継続する。示されるように、アプリケーション及びページ時間は、映画の再生速度の変化に影響されずに、連続的なタイミング信号を用いて一定のペースで変化し続ける。その一方で、タイトル及びメディア時間は、映画の再生速度に比例して変化する。アプリケーションの特定のページがいつロードされるかはタイトル時間409及び/又はメディア時間455に結び付けられていることは注目されるべきである(図3に関して、アプリケーション・プレゼンテーション間隔321及びページ・プレゼンテーション間隔343を論じている箇所を参照のこと)。
【0075】
タイミング信号の値48では、新たなタイトルが開始し、タイトル時間409及びメディア時間455は0の値にリセットされる。最初のタイトルに関しては、これは、タイトル時間が62の値を有しメディア時間が36の値を有するときに発生する。アプリケーション時間492及びページ期間494のリセット(図示せず)は、タイトル時間409及びメディア時間455のリセットの後に続く。
【0076】
様々なタイムライン、クロック・ソース、タイミング信号及びタイミング信号基準にアクセスすることにより、プレゼンテーション・システム100が再生されたプレゼンテーション127の中でICデータ124とA/Vデータ132とのフレーム・レベルの同期を達成し、ユーザ対話機能の期間にそのようなフレーム・レベルの同期を維持する能力が向上する。
【0077】
図1ないし図4も更に参照するが、図6は、プレゼンテーション・システム100のような対話型マルチメディア・プレゼンテーション・システムがプレゼンテーション・コンテンツ120/再生されたプレゼンテーション127のIC成分(コンポーネント)124及びビデオ成分122のような対話型マルチメディア・プレゼンテーションの現在の対話型及びビデオ成分を同期して提供する能力を向上させる1つの方法の流れ図である。この方法では、2つの異なるタイミング信号を用いて、プレゼンテーションの再生期間292のような再生期間の少なくとも一部の全体の経過した再生時間(タイトル時間409で表わされている)を測定する。
【0078】
この方法はブロック600で始まり、ブロック602に進み、そこで、プレゼンテーションの再生期間の中の非ビデオ時間間隔が識別される。非ビデオ時間間隔とは、ビデオ成分122がプレゼンテーションされる予定になっていない時間間隔である。ビデオ成分122はプレゼンテーションの予定ではないことがあるが、その他のビデオ(例えばアプリケーション155に関連したビデオ・データ)は、プレゼンテーションが予定されていることがありうることに注意すべきである。
【0079】
非ビデオ時間間隔が識別されうるのは、プレゼンテーション・タイムライン130上の再生期間292を参照する場合である。これは、プレイリスト128のようなプレゼンテーション用の再生リストから確認される。例示目的のために図2を参照すると、時間間隔1である297(これは、著作権表示260の表示する責任を負うアプリケーションが有効な場合に映画に先行する時間間隔である)は、非ビデオ時間間隔である。時間間隔1である297は、タイトル時間TT1である293とTT2である294との間で定義される。アプリケーションは時間間隔1である297にプレゼンテーションがなされる予定であるが、アプリケーションが非ビデオ時間間隔中にプレゼンテーションが予定される必要がないことが認識されるだろう。
【0080】
更に図6を参照すると、非ビデオ時間間隔中に、ブロック604で、第1の経過した再生時間が連続タイミング信号を用いて測定される。第1の経過した再生時間は、再生期間262の部分的な経過した再生時間である。タイトル時間409までに表わされる第1の経過した再生時間は、タイミング信号401を使用して時間基準計算機408によって計算されうる。
【0081】
プレゼンテーションの再生期間の中のビデオ時間間隔は、ブロック606で識別される。ビデオ時間間隔とは、ビデオ成分122がプレゼンテーションの予定の時間間隔である。ビデオ成分122はビデオ、オーディオ、データ又はその任意の組合せを含むことがあり、単に視覚的な情報だけを意味しないことを注意すべきである。図2に示されている典型的なプレゼンテーション・タイムライン130では、時間間隔2の298及び時間間隔3の299は、両方ともビデオ時間間隔である。複数のクリップが1つのビデオ時間間隔中にプレゼンテーションの予定のことがある。複数のクリップが特定のビデオ時間間隔(例えば、メインの映画とピクチャ・イン・ピクチャ型の映画との両方が再生されている場合)でプレゼンテーション可能なときには、特定のクリップはメイン・クリップであると考えられる。一般に、必ずではないが、メインの映画は、メインのクリップであると考えられる。対話型のコンテンツもまた時間間隔298及び299の間にプレゼンテーション可能であるが、対話型のコンテンツは、ビデオ時間間隔中にプレゼンテーション可能であることは必要ない。
【0082】
図6を再び参照すると、ビデオ時間間隔中に、ブロック608で、第2の経過した再生時間が、プレゼンテーションの再生速度に基づくタイミング信号を使用して測定される。1番目の経過した再生時間のように、第2の経過した再生時間は、タイトル時間409(図4に示される)によって表わされる再生期間262の部分的な経過した再生時間である。第2の経過した再生時間は、メディア時間基準455を用いて時間基準計算機408によって計算されることがある。メディア時間基準455は、クロック・ソース470によって発生されたタイミング信号471に間接的に基づく。メディア時間基準455がタイミング信号471に間接的に基づく方法は、以下のように説明できる。クロック・ソース470は再生速度入力480に基づいたタイミング信号471のレートを調節する、クリップ123はタイミング信号471に基づいたメディア・ソース160から検索される、経過したクリップ再生時間452が時間基準計算機454に受け取られる、この計算機は経過したクリップ再生時間452に基づいたメディア時間基準455を発生する。あるいは、時間基準計算機408は、タイトル時間409を計算するためにタイミング信号471を直接使用することがある。
【0083】
図6のダイヤモンド610及びそれ以後のボックス612で示されるように、再生されたプレゼンテーション127は、ビデオ時間間隔中に進むときに、合計の経過した再生時間であるタイトル時間409は、第2の経過した再生時間を用いて決定される。このように、合計の経過した再生時間の値は、ビデオ成分122の再生の間に起こっていることを反映し、優先順位を決める。メディア・ソース160からの読み出しクリップに関して問題があるか遅れがある場合には、1又は複数の経過したクリップ再生時間452が休止し、また、タイトル時間409も休止する。IC成分124は、タイトル時間409に基づいたアプリケーション・プレゼンテーション間隔321を有するアプリケーション155を含むが、ビデオ成分122のプレゼンテーションと同期状態に維持されることが可能となる。グラフィカルなオーバレイ290が後に続く運動している自動車の例では、メディア・ソース160からの自動車の読み出しフッテージと関係する問題又は遅れが出ているときであっても、円は自動車と共に移動する。
【0084】
ダイヤモンド614及びその後の箱616で示されるように、再生されたプレゼンテーション127が非ビデオ時間間隔中に進む場合には、全体の経過した再生時間であるタイトル時間409は、第1の経過した再生時間を用いて決定される。従って、非ビデオ時間間隔中は、再生されたプレゼンテーション127の正確な前進は、タイミング信号401のような連続タイミング信号に基づいたタイトル時間409の計算により達成される。
【0085】
再生速度に基づくタイミング信号(タイミング信号471及び(又は)メディア時間基準455)又は連続タイミング信号(タイミング信号401)のいずれかに基づいたタイトル時間409の正確な計算を促進するためには、トランジションに先立つ少なくとも1つのユニットのタイトル時間409への1つのタイプの時間間隔からのトランジションを認識することが望ましい。例えば、非ビデオ間隔からビデオ間隔へのトランジションに先立って、ビデオ間隔の中で示されるA/Vデータ132(例えば主映像クリップの最初のフレーム)の最初のフレームを、レンダリングのために準備することが可能である。その後、A/Vデータ132の最初のフレームは、プレゼンテーション・タイムライン130に基づいたプレゼンテーションのそれが予定のタイトル時にプレゼンテーション可能であろう。ビデオ間隔からビデオ間隔(最初のフレーム(あらかじめICデータ134を与えることができた場合))までのトランジションと同様である。
【0086】
図1ないし4も引き続き参照するが、図7は、プレゼンテーション・システム100のような対話型マルチメディア・プレゼンテーション・システムの能力を向上させることにより、プレゼンテーション・コンテンツ120/再生されたプレゼンテーション127のICコンポーネント124及びビデオ・コンポーネント122などの対話型マルチメディア・プレゼンテーションの対話型及びビデオ・コンポーネントを同期して提供する別の方法の流れ図である。この方法は、クロック・ソースにアクセスするステップと、様々な時間基準を形成するステップとを含む。
【0087】
プレゼンテーション・システム100のコンテキストでは、プレゼンテーション・コンテンツ120/再生されたプレゼンテーション127は、再生期間292を有する。ICコンポーネント124は、1又は複数のメディア・オブジェクト125をレンダリングする命令304を有するアプリケーション155を含む。アプリケーション155は、再生期間292のコンテキストではアプリケーション・プレゼンテーション間隔321によって表わされるアプリケーション再生期間320を有する。ビデオ・コンポーネント122は、1又は複数のクリップ123を含む。
【0088】
この方法はブロック700で始まり、プレゼンテーションの再生速度に基づいて第1のタイミング信号が生じるブロック702で継続する。プレゼンテーション・システム100のコンテキストでは、タイミング信号471はクロック・ソース470によって生じる。クロック・ソース470は、再生速度入力480に基づいてタイミング信号471のレートを調節する。
【0089】
ブロック704では、第2のタイミング信号が、連続的な所定のレートで生じる。プレゼンテーション・システム100のコンテキストでは、タイミング信号401は、クロック・ソース402によって生じる。
【0090】
タイトル時間基準が、ブロック706で形成される。プレゼンテーション・システム100のコンテキストでは、時間基準計算機408は、タイミング信号401に基づいて再生期間292の経過した再生時間を測定することにより、タイトル時間基準409を形成する。タイトル時間基準409は、図6に関して上述したように、クロック・ソース470によって作られたタイミング信号471に間接的に基づく場合がある。あるいは、タイトル時間基準409は、直接に、タイミング信号471に基づくか、又は、再生速度入力480に基づく別のタイミング信号に基づく場合がある。メディア時間基準455は、時間基準計算機408に入力されて、タイトル時間基準409を形成する。
【0091】
ダイヤモンド708では、タイトル時間がアプリケーション・プレゼンテーション間隔の中にあるかどうかが判断される。タイトル時間がアプリケーション・プレゼンテーション間隔の中にない場合には、アプリケーションは、ブロック715において、非アクティブであると見なされる。タイトル時間がアプリケーション・プレゼンテーション間隔の中にある場合には、既に論じたように、アプリケーションは有効である。プレゼンテーション・システム100のコンテキストでは、タイトル時間基準409が適用可能なアプリケーション・プレゼンテーション間隔321の中に含まれる場合には、関連するアプリケーション155が有効であると見なされる。
【0092】
ダイヤモンド710では、更に、アプリケーション・リソース(例えば、リソース・パッケージ・データ構造340によって参照されたリソース)がロードされるかどうかが判断される。必要なら、リソース・ローディングは、ブロック712で行なわれる。プレゼンテーション・システム100のコンテキストでは、アプリケーションが当初から有効になるとき、又は、(例えば、トリック再生の後での)プレゼンテーションの再生速度の変化に基づいてアプリケーションが有効になるときなど、特定のアプリケーション155が再生される前に、アプリケーション155のためのリソースは、ファイル・キャッシュなどのメモリにロードされる。リソースには、メディア・オブジェクトをレンダリングする命令304に加え、アプリケーションと関連するメディア・オブジェクト125が含まれる。特定のアプリケーションのためのメディア・オブジェクト125と命令304とが、集合的にリソース・パッケージと称される。図3との関係で上述したように、リソース・パッケージ・データ構造340は、特定のアプリケーションのリソース・パッケージの要素の記憶位置を参照する。リソース・パッケージ・データ構造340は、ビデオ・コンポーネント122の中に埋め込まれ、ビデオ・コンテンツ・ストリームの中から探してアプリケーション・リソースを見つけるのではなく、ビデオ成分から直接に読み出される。あるいは、リソースは、ビデオ・ストリームの中に直接に埋め込まれたり、又は、別のアプリケーション・パッケージ(例えば光媒体に記憶されている)からロードされたりする。
【0093】
図7のフローチャートを再び参照すると、アプリケーション時間基準は、ブロック714で形成される。アプリケーション時間基準は、第2のタイミング信号に基づいてアプリケーション再生期間の経過した再生時間を測定することにより形成される。プレゼンテーション・システム100のコンテキストでは、タイトル時間基準409がアプリケーション・プレゼンテーション間隔321の中に含まれる場合には、アプリケーション時間基準492が形成される。時間基準計算機490は、タイミング信号401に基づいて、アプリケーション時間基準492を生じる。アプリケーション・プレゼンテーション間隔321が満了すると、アプリケーション時間基準492が、リセットされる(例えば、非アクティブになる、又は、再始動する)。アプリケーション時間基準492は、トリック再生が生じるときなど、他の状況でもリセットすることがある。
【0094】
ダイヤモンド716では、現在の経過した再生時間が適用可能なページ・プレゼンテーション間隔の中にあるかどうかが判断され、それが肯定されると、ページ時間基準がブロック718で形成される。ページ時間基準は、第2のタイミング信号(タイミング信号401)に基づいて、適用可能なページ再生期間332及び337の経過した再生時間を測定することによって形成される。現在の経過した再生時間が適用可能なページ・プレゼンテーション間隔の中にない場合には、適用可能なページは、ブロック717において、非アクティブであると判断される。プレゼンテーション・システム100のコンテキストでは、タイトル時間基準409が適用可能なページ・プレゼンテーション間隔343の中にある場合、ページ時間基準494が形成される。
【0095】
アプリケーション及びページ時間基準は、アプリケーション・プレゼンテーション間隔が満了するとき、又は、それ以外の状況においても、リセットする。例えば、トリック再生の後、タイトル時間409がアプリケーション・プレゼンテーション間隔321の中にあると仮定すると、アプリケーション(及び適用可能なものとしてのページ時間基準)が再開することがある(0において、又は、別の開始値において)。
【0096】
ブロック720で、命令がメディア・オブジェクトに関連付けられる。プレゼンテーション・システム100のコンテキストでは、1つのタイプの命令はアプリケーション155と関連する命令304である。命令304は、XMLマークアップ・エレメント302、306及び310のような1つ以上の宣言型言語データ構造、312又は360を表わすか又は帰着する、それについて、回を確立するための1つ以上のクロック又はタイミング信号の基準状態に、単独で又はスクリプト308と結合して使用した、で、又は時間期間、の内に、そのメディア・オブジェクト125が与えられる。コンテンツ・コンテナ、タイミング・コンテナ又はスタイル・コンテナの中のマークアップ・エレメントは、タイミング信号401又はタイミング信号471を参照するか、又は、タイミング信号401又はタイミング信号471を参照する1又は複数の属性を有する。
【0097】
そのエレメント及び属性は、タイミング信号401及び(又は)タイミング信号407を直接又は間接的に参照することができる。例えば、タイミング信号401は、クロック・ソース402、ICフレーム・レート計算機404、A/Vフレーム・レート計算機406、アプリケーション時間492又はページ時間494を介して、間接的に参照されることがある。同様に、例えば、タイミング信号407は、クロック・ソース470、経過したクリップ再生時間452、時間基準計算機454、メディア時間基準455、時間基準計算機408又はタイトル時間基準409を介して間接的に参照されることがある。
【0098】
ある例では、1又は複数の属性が、ある高解像度DVD映画と共に用いられるXMLスキーマのような専用XMLスキーマにおいて定義される。そのような属性の1つの例を、ここでは「クロック属性」と呼ぶが、このクロック属性は、高精細度ビデオ用のDVD仕様に従うXML文書と共に用いるために、DVDフォーラムによって発布された1又は複数のXMLスキーマによって定義される。クロック属性は、タイミング信号401又はタイミング信号471を直接又は間接的に参照するコンテンツ、タイミング又はスタイル・コンテナの中の様々な構成要素で使用可能である。別の例では、時間コンテナの中のパー、タイミング又はseqエレメントが、タイミング信号401若しくはタイミング信号471を参照する、又は、タイミング信号401若しくはタイミング信号471を参照する1又は複数の属性を有する。このように、XML文書のタイミング・コンテナの中のマークアップ・エレメントは、ページ時間及びタイトル時間の両方に関してメディア・オブジェクト・プレゼンテーション間隔345を定義するのに用いられる。更に別の例では、ある特定の期間が経過したときに通知を受けるようにアプリケーションによって用いられるタイマ要素が定義されることもある。更にまた次の例では、ユーザ・イベントや他のタイプのイベントを、異なる時間スケールにリンクされている時間によって定義されることがある。特別のイベントが有効な時間又は時間間隔を、タイミング信号401又はタイミング信号471を参照することによって確立されることがある。
【0099】
クロック、タイミング信号、時間基準計算機及び(又は)時間基準への論理的な参照を含む表現は、XML文書の中でエレメント又はエレメントの属性を用いてメディア・オブジェクト125を提示する条件を定義するのに用いられる。例えば、「AND」、「OR」及び「NOT」などのブール・オペランドは、それ以外のオペランド又はタイプと共に、そのような表現又は条件を定義するのに用いられる。
【0100】
ダイヤモンド722及びブロック724に示されているように、命令に基づいてメディア・オブジェクトをレンダリングする時間に到達すると、メディア・オブジェクトがレンダリングされる。メディア・オブジェクトがレンダリングされるべきか及びいつレンダリングされるべきかをユーザ入力が命じるため、メディア・オブジェクトは常にレンダリングされるとは限らない。
【0101】
プレゼンテーション・システム100のコンテキストでは、特定のアプリケーション155の実行中に、当該アプリケーションと関連するドキュメント・オブジェクト・モデル(「DOM」)ツリー(図示せず)が、マークアップ・エレメントの状態のために当該コンテキストを維持し、また、当該アプリケーションと関連するスクリプト・ホスト(図示せず)が、スクリプトの変数、機能及び他の状態のためのコンテキストを維持する。アプリケーション命令304の実行が進行し、ユーザ入力が受け取られると、影響を受ける任意のエレメントの特性は記録され、再生されたプレゼンテーション127の中でメディア・オブジェクト125の行為をトリガするのに用いられる。プレゼンテーション・コンテンツ120/再生されたプレゼンテーション127の対話型及びビデオ・コンポーネントの間の同期は、DOMと関連するクロックではなくDOMの外部の1又は複数のクロックに基づいて達成されることが理解できるだろう。
【0102】
命令304の実行の結果として生じる作業項目(図示せず)は、キュー(図示せず)の中に置かれ、ICフレーム・レート405によって提供されるレートで実行される。作業項目の実行の結果として生じるICデータ134は、レンダラ/ミキサ110に送信される。ミキサ/レンダラ110は、グラフィクス平面においてICデータ134をレンダリングして、再生されたプレゼンテーション127の対話型の部分をユーザのために提供する。
【0103】
図6及び7に図解されているプロセスは、以下で図8を参照して説明するプロセッサ802のような、1又は複数の汎用でマルチパーパスの又はシングルパーパスのプロセッサにおいてインプリメント可能である。特に断らない限りは、ここで説明する方法は特別の順序やシーケンスに制約されない。また、説明された方法や構成エレメントのいくつかについて、同時的な発生又は実行が可能である。
【0104】
図8は、汎用の計算ユニット800のブロック図であって、プレゼンテーション・システム100の様々な機能コンポーネントをインプリメントするのに用いられる、プレゼンテーション・システム100の様々な機能コンポーネントによってアクセスされる、又はプレゼンテーション・システム100の様々な機能コンポーネントに含まれる、機能コンポーネントを図解している。計算ユニット800の1又は複数のコンポーネントは、ICマネジャ104とプレゼンテーション・マネジャ106とAVCマネジャ102とをインプリメントする、それによってアクセスされる、又はそれに含まれる。例えば、図8の1又は複数のコンポーネントが、様々な方法でプレゼンテーション・システム100(全体又は一部)の機能をインプリメントするために、一緒に又は別々にパッケージにされることがある。
【0105】
プロセッサ802は、コンピュータ可読媒体804及びコンピュータ・プログラム806に応答する。プロセッサ802は、現実の又は仮想的なプロセッサでありうるが、コンピュータ実行可能命令を実行することにより、電子機器の機能をコントロールする。プロセッサ802は、アセンブリ、コンパイル又はマシン・レベルで命令を実行して、特定のプロセスを行う。そのような命令は、ソース・コード又は任意の他の既知のコンピュータ・プログラム設計ツールを用いて、作成される。
【0106】
コンピュータ可読な媒体804は、ローカル又は遠隔的な装置の任意の数の組合せを表し、プロセッサ802によって実行可能な命令のように、コンピュータ可読なデータを記録、記憶又は送信するコンピュータが読める既知の又は今後開発されうる任意の形式を有することができる。特に、コンピュータ可読な媒体804は、半導体メモリ(例えば、ROM、任意のタイプのプログラマブルROM(PROM)、RAM又はフラッシュ・メモリなど)、磁気記憶装置(フロッピ・ディスク(登録商標)ドライブ、ハードディスク・ドライブ、磁気ドラム、磁気テープ又は光磁気ディスクなど)、光学的記憶デバイス(任意のタイプのコンパクト・ディスク、ディジタル・バーサタイル・ディスクなど)、バブル・メモリ、キャッシュ・メモリ、コア・メモリ、ホログラフィック・メモリ、メモリ・スティック(登録商標)、紙テープ、穿孔カード、又はこれらの任意の組合せを含む。コンピュータ可読媒体804は、更に、伝送メディア及びそれと関連するデータを含んでいることがある。伝送メディア/データの例は、制限を意味しないが、有線又は無線送信の任意のフォームで具体化されたデータ、変調搬送波信号によって運ばれるパケット化された又は非パケット化データを含む。
【0107】
コンピュータ・プログラム806は、任意の信号処理方法を、又は、データに対する所定のオペレーションを電子的に制御する記憶されている命令を表わす。一般に、コンピュータ・プログラム806は、コンポーネント・ベースのソフトウェア開発のための周知のプラクティスに従ってソフトウエア・コンポーネントとしてインプリメントされたコンピュータ実行可能命令であり、(コンピュータ可読媒体804のような)コンピュータ可読媒体においてエンコードされている。コンピュータ・プログラムは、様々な態様で組み合わせられる又は配信されることがある。
【0108】
プレゼンテーション・システム100のコンテキストに説明された機能/コンポーネントは、コンピュータ・プログラムのどのような特定の実施例によるインプリメンテーションにも制限されない。むしろ、機能は、データを伝える又は変換するプロセスであり、プレゼンテーション・システム100の機能要素の任意の組合せに配置され又はそれによってアクセスされるハードウェア、ソフトウェア、ファームウェア又はそれらの任意の組合せによって実現される、又は、そのようなハードウェア、ソフトウェア、ファームウェア又はそれらの任意の組合せにおいて実行される。
【0109】
図8に続いて、図9は、プレゼンテーション・システム100のすべて又は部分がインプリメントされる又は用いられる動作環境900の典型的な構成のブロック図である。動作環境900は、様々の汎用又は専用コンピュータ環境を一般的に示している。動作環境900は適切な動作環境の単なる1つの例であり、ここに記載されているシステム及び方法の使用又は機能の範囲に関してどのような制限の示唆も意図していない。例えば、動作環境900は、パーソナル・コンピュータ、ワークステーション、サーバ、携帯機器、ラップトップ、タブレット、光学メディア・プレーヤのような他のタイプの電子機器、別のタイプのメディア・プレーヤ(現に知られているか今後開発される)又はその任意の特徴部分などのコンピュータのタイプでありうる。動作環境900は、また、分散コンピューティング・ネットワーク又はウェブ・サービスでもありうる。動作環境900の具体例は、高精細DVD映画の再生を容易にするような、DVDプレーヤやそれと関連するオペレーティング・システムなどの環境である。
【0110】
示されているように、動作環境900は、プロセッサ802、コンピュータ可読媒体804及びコンピュータ・プログラム806を含む計算ユニット800のコンポーネントを含む又はそれらにアクセスする。記憶装置904は、光ディスク・ドライブ906によって処理される光ディスクのような動作環境900と特に関連する追加的又は異なるコンピュータ可読媒体を含んでいる。1又は複数の内部バス920は、周知であり広く利用可能なエレメントであるが、コンピュータ環境900又はそれのエレメントへ、又はそれらから、データ、アドレス、制御信号及び他の情報を運ぶのに用いられる。
【0111】
入力インターフェース908は、コンピュータ環境900に入力を供給する。入力は、ユーザ・インターフェースなど現時点で既知の又は今後開発されるインターフェースの任意のタイプを用いて、収集される。ユーザ・インターフェースは、リモート・コントロール、ディスプレイ、マウス、ペン、スタイラス、トラックボール、キーボード、マイクロホン、スキャニング装置、及びデータの入力に用いられるあらゆるタイプのデバイスなど、タッチ入力装置でありうる。
【0112】
出力インターフェース910は、コンピュータ環境900からの出力を提供する。出力インターフェース910の例には、ディスプレイ、プリンター、スピーカ、ドライブなど(光ディスク・ドライブ906及び他のディスク・ドライブなど)が含まれる。
【0113】
外部通信インターフェース912は、チャンネル信号、データ信号又はコンピュータ可読媒体などの通信媒体を介して、別の実体から情報を受け取る、又は、別の実体へ情報を送信するコンピュータ環境の能力を強化するのに用いることができる。外部通信インターフェース912は、関連するネットワーク・サポート・デバイス、ソフトウェア又はインターフェースと共に、ケーブル・モデム、データ端末装置、メディア・プレーヤ、データ記憶装置、携帯情報端末、それ以外のデバイス又はそれらの組合せでありうるし、又は、これらを含むこともある。
【0114】
図10は、プレゼンテーション・システム100又は動作環境1000が共に用いられうるクライアント・サーバのアーキテクチャ1000の単純化された機能ダイアグラムである。プレゼンテーション・システム100及び/又は動作環境900の1又は複数の特徴が、アーキテクチャ1000のクライアント側1002又はアーキテクチャ1000のサーバ側1004に表わされている。示されているように、通信フレーム・ワーク1303(例えば、有線又は無線の任意のタイプの任意の公的又は私的なネットワーク)は、クライアント側1002とサーバ側1004との間の通信を容易にする。
【0115】
クライアント側1002においては、ハードウェア、ソフトウェア、ファームウェア又はこれらの任意の組合せにおいてインプリメント可能な1又は複数のクライアント1006が、クライアント・データ・ストア1008に応答する。クライアント・データ・ストア1008は、クライアント1006に対してローカルな情報を記憶するのに用いられるコンピュータ可読媒体804でありうる。サーバ側1004においては、1又は複数のサーバ1010が、サーバ・データ・ストア1012に応答する。クライアント・データ・ストア1008のように、サーバ・データ・ストア1012は、サーバ1010に対してローカルな情報を記憶するのに用いられるコンピュータ可読媒体904でありうる。
【0116】
オーディオ/ビデオ・コンテンツと同期して対話型コンテンツをユーザに提示するために用いられる対話型マルチメディア・プレゼンテーション・システムの様々な特徴について、以上で説明してきた。対話型マルチメディア・プレゼンテーションについて、再生期間、可変再生速度、ビデオ・コンポーネント及びICコンポーネントを有するものとして、一般的に説明した。しかし、上述したコンポーネントのすべてを使用する必要はないし、用いられる場合であってもこれらのコンポーネントを同時に用いなければならないなどということはないことは理解されるはずである。コンピュータ・プログラムであるとしてプレゼンテーション・システム100のコンテキストにおいて説明された機能/コンポーネントは、コンピュータ・プログラムの任意の特定の実施例によるインプリメンテーションに制限されない。むしろ、機能は、データを伝達する又は変換するプロセスであって、一般的に、ハードウェア、ソフトウェア、ファームウェア又はそれらの任意の組合せにおいて実装(インプリメント)され、また、それらにおいて実行される。
【0117】
ここでは本発明を構造的な特徴及び/又は方法的な行為に特有の用語を用いて記載しているが、特許請求の範囲において定義されている本発明は、上述した特定の特徴又は行為に必ずしも制限されないと理解すべきである。むしろ、上述した特定の特徴及び行為は、特許請求の範囲に記載の発明を実現する例示的な形態として開示されている。
【0118】
ある1つのエレメント(構成要素)が別のエレメントに応答するものとして示されているときには、これらのエレメントが直接的又は間接的に結合されている場合があることも理解すべきである。ここで示されている接続は、複数のエレメント間の結合のため又は通信のためのインターフェースを実際に達成するための論理的又は物理的なものでありうる。接続は、ソフトウェア・プロセスの間のプロセス間の通信として、又は、ネットワーク接続されたコンピュータの間でのマシン間の通信として、他の方法と共に実装することが可能である。
【0119】
ここで用いられている「典型的(例示的)」という用語は、例示、インスタンス又は図解として役立つということを意味している。ここで「例示的」として説明された実装(インプリメンテーション)や特徴は、必ずしも、他の実装や特徴と比較して特に好適であるとか効果的であるように構成されているわけではない。
【0120】
以上で説明した特定の実施例以外の実施例は、特許請求の範囲に記載された発明の精神及び範囲から逸脱せずに想到可能であり、本願発明の範囲は、特許請求の範囲の記載によって画定される。
【図面の簡単な説明】
【0121】
【図1】 対話型マルチメディア・プレゼンテーション・システムの単純化された機能ブロック図である。
【図2】 図1に示されているプレイリストから確認可能な例示的なプレゼンテーション・タイムラインのグラフィカルな図解である。
【図3】 図1に示されている対話型マルチメディア・プレゼンテーションと関連付けられたアプリケーションの単純化された機能ブロック図である。
【図4】 図1に示されたタイミング信号管理ブロックをより詳細に図解する単純化された機能ブロック図である。
【図5】 図4に示されたいくつかの時間基準の値における例示的な発生(オカレンス)の効果を連続タイミング信号との関係で示す図である。
【図6】 図2に図解されているいくつかの時間間隔を参照して図1に示された対話型マルチメディア・プレゼンテーションの経過した再生時間の全体を決定する方法の流れ図である。
【図7】 図4に示されているタイミング信号管理ブロックのいくつかの特徴を用いて対話型マルチメディア・プレゼンテーションを再生する方法の流れ図である。
【図8】 図1に示されている対話型マルチメディア・プレゼンテーション・システムの特徴と関係して使用可能な汎用計算ユニットの単純化された機能ブロック図である。
【図9】 図1に示されている対話型マルチメディア・プレゼンテーション・システムを実装可能又は使用可能な動作環境の例示的なコンフィギュレーションの単純化された機能ブロック図である。
【図10】 図1に示されている対話型マルチメディア・プレゼンテーション・システムを実装可能又は使用可能なクライアント・サーバ・アーキテクチャの単純化された機能ブロック図である。

Claims (17)

  1. 再生速度とビデオ・コンテンツ・コンポーネントと対話型コンテンツ・コンポーネントとを有する対話型マルチメディア・プレゼンテーションを再生する方法であって、前記ビデオ・コンテンツ・コンポーネントは第1のフレーム・レートで生じる1組のオーディオ・ビジュアル・フレームを含み、前記対話型コンテンツ・コンポーネントは複数のメディア・オブジェクトをレンダリングする命令を有するアプリケーションを含み、前記複数のメディア・オブジェクトはそれぞれが前記第1のフレーム・レートとは異なる第2のフレーム・レートで生じる1組の対話型コンテンツ・フレームとしてレンダリングされることが可能である、方法において、
    前記第1のフレーム・レートと関連する第1のタイミング信号を、前記再生速度に基づくレートで発生するステップと、
    前記第2のフレーム・レートと関連する第2のタイミング信号を、連続的な所定のレートで発生するステップと、
    メディア・オブジェクトがレンダリング可能である時間を特定する命令にアクセスするステップであって、前記ビデオ・コンテンツ・コンポーネントのプレゼンテーションが予定されているときには、前記命令は前記第1のタイミング信号に基づいて前記時間を特定し、前記ビデオ・コンテンツ・コンポーネントのプレゼンテーションが予定されていないときには、前記命令は前記第2のタイミング信号に基づいて前記時間を特定する、ステップと、
    前記対話型マルチメディア・プレゼンテーションが再生される間、前記メディア・オブジェクトを前記時間においてレンダリングするステップであって、
    前記命令が前記第1のタイミング信号に基づいて前記時間を特定するときには、前記メディア・オブジェクトと関連する前記1組の対話型コンテンツ・フレームの中の対話型コンテンツ・フレームを、前記ビデオ・コンテンツ・コンポーネントを含む前記1組のオーディオ・ビジュアル・フレームの中のオーディオ・ビジュアル・フレームとフレーム・レベルで同期してレンダリングし、
    前記命令が前記第2のタイミング信号に基づいて前記時間を特定するときには、前記ビデオ・コンポーネントとは独立に、前記メディア・オブジェクトと関連する前記1組の対話型コンテンツ・フレームの中の対話型コンテンツ・フレームをレンダリングする、ステップと、
    を含むことを特徴とする方法。
  2. 請求項1記載の方法において、前記命令はアプリケーション命令を含むことを特徴とする方法。
  3. 請求項2記載の方法において、前記アプリケーション命令は宣言的な形式を有することを特徴とする方法。
  4. 請求項3記載の方法において、前記アプリケーション命令はエクステンシブル・マークアップ・ランゲージ(XML)データ構造と関連付けられた要素を含むことを特徴とする方法。
  5. 請求項4記載の方法において、前記時間は前記要素の属性を用いて特定されることを特徴とする方法。
  6. 請求項5記載の方法において、前記属性はクロック属性を含むことを特徴とする方法。
  7. 請求項4記載の方法において、前記XMLデータ構造のシンタクスはDVDフォーラムによって公開されている高精細ビデオのための仕様に従うことを特徴とする方法。
  8. 請求項2記載の方法において、前記アプリケーション命令はスクリプト形式を有することを特徴とする方法。
  9. 請求項1記載の方法において、前記第1のタイミング信号は前記ビデオ・コンテンツ・コンポーネントがビデオ・ソースから受け取られるレートを調整するのに用いられ、前記ビデオ・コンテンツ・コンポーネントはビデオとオーディオとデータとで構成されるグループから選択されるサンプルを含むことを特徴とする方法。
  10. 請求項1記載の方法において、前記第2のタイミング信号はクロック信号を含むことを特徴とする方法。
  11. 請求項1記載の方法において、前記第1のタイミング信号と前記第2のタイミング信号とは同一のクロック信号から導かれることを特徴とする方法。
  12. 請求項1記載の方法において、前記再生速度はゼロ速度と低速順速度と高速順速度と低速逆速度と高速逆速度とを含むことを特徴とする方法。
  13. 請求項1記載の方法に含まれるステップをコンピュータに実行させるコンピュータ実行可能な命令が記憶されているコンピュータ可読な記憶媒体。
  14. 再生速度とビデオ・コンテンツ・コンポーネントと対話型コンテンツ・コンポーネントとを有する対話型マルチメディア・プレゼンテーションを再生する装置であって、前記ビデオ・コンテンツ・コンポーネントは第1のフレーム・レートで生じる1組のオーディオ・ビジュアル・フレームを含み、前記対話型コンテンツ・コンポーネントは複数のメディア・オブジェクトをレンダリングする命令を有するアプリケーションを含み、前記複数のメディア・オブジェクトはそれぞれが前記第1のフレーム・レートとは異なる第2のフレーム・レートで生じる1組の対話型コンテンツ・フレームとしてレンダリングされることが可能である、装置において、
    コンピュータ可読記憶媒体と、
    前記コンピュータ可読記憶媒体と前記コンピュータ可読記憶媒体に記憶されているコンピュータ・プログラムとに応答するプロセッサと、
    を備えており、前記コンピュータ・プログラムは、前記プロセッサにロードされると、
    前記再生速度に基づくレートを有しており、前記第1のフレーム・レートと関連する第1のタイミング信号にアクセスするステップと、
    連続的な所定のレートを有しており、前記第2のフレーム・レートと関連する第2のタイミング信号にアクセスするステップと、
    メディア・オブジェクトがレンダリング可能である時間を特定する命令にアクセスするステップであって、前記ビデオ・コンテンツ・コンポーネントのプレゼンテーションが予定されているときには、前記命令は前記第1のタイミング信号に基づいて前記時間を特定し、前記ビデオ・コンテンツ・コンポーネントのプレゼンテーションが予定されていないときには、前記命令は、前記第2のタイミング信号に基づいて前記時間を特定する、ステップと、
    前記対話型マルチメディア・プレゼンテーションが再生される間、前記命令に基づいて前記メディア・オブジェクトを前記時間においてレンダリングするステップであって、
    前記命令が前記第1のタイミング信号に基づいて前記時間を特定するときには、前記メディア・オブジェクトと関連する前記1組の対話型コンテンツ・フレームの中の対話型コンテンツ・フレームを、前記ビデオ・コンテンツ・コンポーネントを含む前記1組のオーディオ・ビジュアル・フレームの中のオーディオ・ビジュアル・フレームとフレーム・レベルで同期してレンダリングし、
    前記命令が前記第2のタイミング信号に基づいて前記時間を特定するときには、前記ビデオ・コンポーネントとは独立に、前記メディア・オブジェクトと関連する前記1組の対話型コンテンツ・フレームの中の対話型コンテンツ・フレームをレンダリングする、ステップと、
    を前記プロセッサに実行させることを特徴とする装置。
  15. 請求項14記載の装置において、前記プロセッサは光ディスク・プレーヤと関連付けられていることを特徴とする装置。
  16. 請求項15記載の装置において、前記光ディスク・プレーヤはDVDフォーラムによって公開されている高精細ビデオのための仕様に従うことを特徴とする装置。
  17. 請求項15記載の装置において、前記プロセッサは電子デバイスと関連付けられていることを特徴とする装置。
JP2008519399A 2005-07-01 2006-06-20 対話型マルチメディア・プレゼンテーション管理の同期方法 Expired - Fee Related JP5015149B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US69594405P 2005-07-01 2005-07-01
US60/695,944 2005-07-01
US11/355,209 2006-02-15
US11/355,209 US8799757B2 (en) 2005-07-01 2006-02-15 Synchronization aspects of interactive multimedia presentation management
PCT/US2006/024155 WO2007005294A2 (en) 2005-07-01 2006-06-20 Synchronization aspects of interactive multimedia presentation management

Publications (2)

Publication Number Publication Date
JP2009500911A JP2009500911A (ja) 2009-01-08
JP5015149B2 true JP5015149B2 (ja) 2012-08-29

Family

ID=37591293

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008519399A Expired - Fee Related JP5015149B2 (ja) 2005-07-01 2006-06-20 対話型マルチメディア・プレゼンテーション管理の同期方法

Country Status (5)

Country Link
US (1) US8799757B2 (ja)
EP (1) EP1899970A4 (ja)
JP (1) JP5015149B2 (ja)
KR (1) KR101265890B1 (ja)
WO (1) WO2007005294A2 (ja)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4232746B2 (ja) * 2005-02-24 2009-03-04 ソニー株式会社 再生装置、表示制御方法
US7721308B2 (en) * 2005-07-01 2010-05-18 Microsoft Corproation Synchronization aspects of interactive multimedia presentation management
US20070006238A1 (en) * 2005-07-01 2007-01-04 Microsoft Corporation Managing application states in an interactive media environment
US8108787B2 (en) * 2005-07-01 2012-01-31 Microsoft Corporation Distributing input events to multiple applications in an interactive media environment
US8799757B2 (en) 2005-07-01 2014-08-05 Microsoft Corporation Synchronization aspects of interactive multimedia presentation management
US8656268B2 (en) * 2005-07-01 2014-02-18 Microsoft Corporation Queueing events in an interactive media environment
US8020084B2 (en) * 2005-07-01 2011-09-13 Microsoft Corporation Synchronization aspects of interactive multimedia presentation management
US7941522B2 (en) 2005-07-01 2011-05-10 Microsoft Corporation Application security in an interactive media environment
US8305398B2 (en) * 2005-07-01 2012-11-06 Microsoft Corporation Rendering and compositing multiple applications in an interactive media environment
US7814412B2 (en) * 2007-01-05 2010-10-12 Microsoft Corporation Incrementally updating and formatting HD-DVD markup
US8331405B2 (en) 2007-02-02 2012-12-11 Cisco Technology, Inc. Mechanism for channel synchronization
US9158776B2 (en) 2007-08-06 2015-10-13 Apple Inc. Slideshows comprising various forms of media
EP2048890A1 (en) * 2007-10-11 2009-04-15 Thomson Licensing System and method for an early start of audio-video rendering
EP2257040A1 (en) * 2009-05-29 2010-12-01 Thomson Licensing Method and apparatus for distributing a multimedia content
US20110060993A1 (en) * 2009-09-08 2011-03-10 Classified Ventures, Llc Interactive Detailed Video Navigation System
US9552330B2 (en) * 2012-03-23 2017-01-24 International Business Machines Corporation Indicating a page number of an active document page within a document
US9207834B2 (en) 2012-06-11 2015-12-08 Edupresent Llc Layered multimedia interactive assessment system
US9281011B2 (en) * 2012-06-13 2016-03-08 Sonic Ip, Inc. System and methods for encoding live multimedia content with synchronized audio data
WO2014014963A1 (en) * 2012-07-16 2014-01-23 Questionmine, LLC Apparatus and method for synchronizing interactive content with multimedia
US9613011B2 (en) 2012-12-20 2017-04-04 Cable Television Laboratories, Inc. Cross-reference of shared browser applications
US9832178B2 (en) 2012-12-20 2017-11-28 Cable Television Laboratories, Inc. Administration of web page
US9639623B2 (en) 2012-12-20 2017-05-02 Cable Television Laboratories, Inc. Method for remotely controlling a video playing within a first web page at a first device from a second device using a document object model
US20140366091A1 (en) * 2013-06-07 2014-12-11 Amx, Llc Customized information setup, access and sharing during a live conference
US10191647B2 (en) 2014-02-06 2019-01-29 Edupresent Llc Collaborative group video production system
US11831692B2 (en) * 2014-02-06 2023-11-28 Bongo Learn, Inc. Asynchronous video communication integration system
US10142585B2 (en) * 2015-04-28 2018-11-27 Rovi Guides, Inc. Methods and systems for synching supplemental audio content to video content
US10231001B2 (en) 2016-05-24 2019-03-12 Divx, Llc Systems and methods for providing audio content during trick-play playback
JP2018032912A (ja) * 2016-08-22 2018-03-01 株式会社リコー 情報処理装置、情報処理方法、情報処理プログラムおよび情報処理システム

Family Cites Families (177)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5195092A (en) * 1987-08-04 1993-03-16 Telaction Corporation Interactive multimedia presentation & communication system
US5208745A (en) * 1988-07-25 1993-05-04 Electric Power Research Institute Multimedia interface and method for computer system
AU2010192A (en) * 1991-05-21 1992-12-30 Videotelecom Corp. A multiple medium message recording system
JP2512250B2 (ja) * 1991-09-13 1996-07-03 松下電器産業株式会社 動画表示ワ―クステ―ション
US5394547A (en) * 1991-12-24 1995-02-28 International Business Machines Corporation Data processing system and method having selectable scheduler
US5452435A (en) * 1993-03-31 1995-09-19 Kaleida Labs, Inc. Synchronized clocks and media players
US5515490A (en) * 1993-11-05 1996-05-07 Xerox Corporation Method and system for temporally formatting data presentation in time-dependent documents
US5574934A (en) 1993-11-24 1996-11-12 Intel Corporation Preemptive priority-based transmission of signals using virtual channels
JP2701724B2 (ja) * 1993-12-28 1998-01-21 日本電気株式会社 シナリオ編集装置
USRE44685E1 (en) * 1994-04-28 2013-12-31 Opentv, Inc. Apparatus for transmitting and receiving executable applications as for a multimedia system, and method and system to order an item using a distributed computing system
US6122433A (en) * 1994-10-20 2000-09-19 Thomson Licensing S.A. HDTV trick play stream derivation for VCR
US5717468A (en) * 1994-12-02 1998-02-10 International Business Machines Corporation System and method for dynamically recording and displaying comments for a video movie
JP3701051B2 (ja) * 1995-07-04 2005-09-28 パイオニア株式会社 情報記録装置及び情報再生装置
US5659539A (en) * 1995-07-14 1997-08-19 Oracle Corporation Method and apparatus for frame accurate access of digital audio-visual information
JP3471526B2 (ja) 1995-07-28 2003-12-02 松下電器産業株式会社 情報提供装置
US5966121A (en) * 1995-10-12 1999-10-12 Andersen Consulting Llp Interactive hypervideo editing system and interface
US5760780A (en) * 1996-01-31 1998-06-02 Hewlett-Packard Company Computer graphics system using caching of pixel Z values to improve rendering performance
US5631694A (en) * 1996-02-01 1997-05-20 Ibm Corporation Maximum factor selection policy for batching VOD requests
US6240555B1 (en) 1996-03-29 2001-05-29 Microsoft Corporation Interactive entertainment system for presenting supplemental interactive content together with continuous video programs
JP3617887B2 (ja) * 1996-10-14 2005-02-09 シャープ株式会社 撮像装置
US5949410A (en) 1996-10-18 1999-09-07 Samsung Electronics Company, Ltd. Apparatus and method for synchronizing audio and video frames in an MPEG presentation system
US5877763A (en) * 1996-11-20 1999-03-02 International Business Machines Corporation Data processing system and method for viewing objects on a user interface
US5893062A (en) * 1996-12-05 1999-04-06 Interval Research Corporation Variable rate video playback with synchronized audio
US6128712A (en) * 1997-01-31 2000-10-03 Macromedia, Inc. Method and apparatus for improving playback of interactive multimedia works
TW405110B (en) * 1997-04-15 2000-09-11 Hitachi Ltd Method of digital image signal recording and/or regeneration and its device
KR100243209B1 (ko) * 1997-04-30 2000-02-01 윤종용 오류정정 능력을 개선한 디지털 기록/재생 장치와 그 방법
US6215505B1 (en) * 1997-06-20 2001-04-10 Nippon Telegraph And Telephone Corporation Scheme for interactive video manipulation and display of moving object on background image
US6069633A (en) * 1997-09-18 2000-05-30 Netscape Communications Corporation Sprite engine
US6100881A (en) * 1997-10-22 2000-08-08 Gibbons; Hugh Apparatus and method for creating interactive multimedia presentation using a shoot lost to keep track of audio objects of a character
US5956026A (en) * 1997-12-19 1999-09-21 Sharp Laboratories Of America, Inc. Method for hierarchical summarization and browsing of digital video
US6665835B1 (en) * 1997-12-23 2003-12-16 Verizon Laboratories, Inc. Real time media journaler with a timing event coordinator
US6453459B1 (en) * 1998-01-21 2002-09-17 Apple Computer, Inc. Menu authoring system and method for automatically performing low-level DVD configuration functions and thereby ease an author's job
US6385596B1 (en) 1998-02-06 2002-05-07 Liquid Audio, Inc. Secure online music distribution system
US6426778B1 (en) * 1998-04-03 2002-07-30 Avid Technology, Inc. System and method for providing interactive components in motion video
US6067638A (en) * 1998-04-22 2000-05-23 Scientific Learning Corp. Simulated play of interactive multimedia applications for error detection
EP1034656A2 (en) * 1998-06-11 2000-09-13 Koninklijke Philips Electronics N.V. Trick play signal generation for a digital video recorder
US6212595B1 (en) 1998-07-29 2001-04-03 International Business Machines Corporation Computer program product for fencing a member of a group of processes in a distributed processing environment
US20030025599A1 (en) * 2001-05-11 2003-02-06 Monroe David A. Method and apparatus for collecting, sending, archiving and retrieving motion video and still images and notification of detected events
US6715126B1 (en) 1998-09-16 2004-03-30 International Business Machines Corporation Efficient streaming of synchronized web content from multiple sources
JP3961693B2 (ja) 1998-09-28 2007-08-22 株式会社東芝 映像表示装置
US6608630B1 (en) * 1998-11-09 2003-08-19 Broadcom Corporation Graphics display system with line buffer control scheme
GB2344453B (en) 1998-12-01 2002-12-11 Eidos Technologies Ltd Multimedia editing and composition system having temporal display
US6637031B1 (en) 1998-12-04 2003-10-21 Microsoft Corporation Multimedia presentation latency minimization
US6384846B1 (en) * 1998-12-11 2002-05-07 Hitachi America Ltd. Methods and apparatus for rendering multiple images using a limited rendering resource
GB2344925A (en) 1998-12-16 2000-06-21 Memory Corp Plc Optical storage disc storing compressed and uncompressed data
US6892351B2 (en) * 1998-12-17 2005-05-10 Newstakes, Inc. Creating a multimedia presentation from full motion video using significance measures
US6430570B1 (en) 1999-03-01 2002-08-06 Hewlett-Packard Company Java application manager for embedded device
EP1926305A1 (en) * 1999-03-30 2008-05-28 Tivo, Inc. Television viewer interface system
US6711620B1 (en) 1999-04-14 2004-03-23 Matsushita Electric Industrial Co. Event control device and digital broadcasting system
US6340977B1 (en) * 1999-05-07 2002-01-22 Philip Lui System and method for dynamic assistance in software applications using behavior and host application models
US6369830B1 (en) * 1999-05-10 2002-04-09 Apple Computer, Inc. Rendering translucent layers in a display system
US6629150B1 (en) * 1999-06-18 2003-09-30 Intel Corporation Platform and method for creating and using a digital container
US6772413B2 (en) 1999-12-21 2004-08-03 Datapower Technology, Inc. Method and apparatus of data exchange using runtime code generator and translator
US20040220926A1 (en) * 2000-01-03 2004-11-04 Interactual Technologies, Inc., A California Cpr[P Personalization services for entities from multiple sources
AU2773301A (en) * 2000-01-06 2001-07-16 Hd Media, Inc. System and method for distributing and controlling the output of media in publicspaces
US20020157103A1 (en) 2000-01-07 2002-10-24 Deyang Song Method for digital media playback in a broadcast network
US8117644B2 (en) 2000-01-07 2012-02-14 Pennar Software Corporation Method and system for online document collaboration
US20050251732A1 (en) * 2000-01-20 2005-11-10 Interactual Technologies, Inc. System, method and article of manufacture for executing a multimedia event on a plurality of client computers using a synchronization host engine
US7367042B1 (en) * 2000-02-29 2008-04-29 Goldpocket Interactive, Inc. Method and apparatus for hyperlinking in a television broadcast
CA2340144A1 (en) 2000-03-09 2001-09-09 Ethereal Minds, Inc. System and method for pre-loading still imagery data in an interactive multimedia presentation environment
US7725812B1 (en) * 2000-03-31 2010-05-25 Avid Technology, Inc. Authoring system for combining temporal and nontemporal digital media
US6628283B1 (en) * 2000-04-12 2003-09-30 Codehorse, Inc. Dynamic montage viewer
DE10021286B4 (de) * 2000-05-02 2005-03-10 Kara Can Verfahren und Vorrichtung zur Kompression und/oder Dekompression von Daten
US6505153B1 (en) * 2000-05-22 2003-01-07 Compaq Information Technologies Group, L.P. Efficient method for producing off-line closed captions
US7669238B2 (en) * 2000-06-21 2010-02-23 Microsoft Corporation Evidence-based application security
US7131143B1 (en) * 2000-06-21 2006-10-31 Microsoft Corporation Evaluating initially untrusted evidence in an evidence-based security policy manager
KR100424481B1 (ko) 2000-06-24 2004-03-22 엘지전자 주식회사 디지털 방송 부가서비스 정보의 기록 재생장치 및 방법과그에 따른 기록매체
US8495679B2 (en) 2000-06-30 2013-07-23 Thomson Licensing Method and apparatus for delivery of television programs and targeted de-coupled advertising
US7350204B2 (en) 2000-07-24 2008-03-25 Microsoft Corporation Policies for secure software execution
EP1312206A1 (en) 2000-08-16 2003-05-21 Koninklijke Philips Electronics N.V. Method of playing multimedia applications
US6785729B1 (en) 2000-08-25 2004-08-31 International Business Machines Corporation System and method for authorizing a network user as entitled to access a computing node wherein authenticated certificate received from the user is mapped into the user identification and the user is presented with the opprtunity to logon to the computing node only after the verification is successful
WO2002017179A1 (en) 2000-08-25 2002-02-28 4C Soft Inc Electronic study method using multimedia
US7200357B2 (en) 2000-10-20 2007-04-03 Universal Electronics Inc. Automotive storage and playback device and method for using the same
US20020099738A1 (en) * 2000-11-22 2002-07-25 Grant Hugh Alexander Automated web access for back-end enterprise systems
US7210037B2 (en) * 2000-12-15 2007-04-24 Oracle International Corp. Method and apparatus for delegating digital signatures to a signature server
US6728681B2 (en) * 2001-01-05 2004-04-27 Charles L. Whitham Interactive multimedia book
US6792426B2 (en) * 2001-01-10 2004-09-14 International Business Machines Corporation Generic servlet for browsing EJB entity beans
US6738911B2 (en) 2001-02-02 2004-05-18 Keith Hayes Method and apparatus for providing client-based network security
US20020138593A1 (en) * 2001-03-26 2002-09-26 Novak Michael J. Methods and systems for retrieving, organizing, and playing media content
AUPR464601A0 (en) * 2001-04-30 2001-05-24 Commonwealth Of Australia, The Shapes vector
US20020188616A1 (en) * 2001-06-07 2002-12-12 Chinnici Roberto R. Database access bridge system and process
CA2450834C (en) 2001-06-18 2013-08-13 Daon Holdings Limited An electronic data vault providing biometrically protected electronic signatures
WO2003005190A1 (en) 2001-07-06 2003-01-16 E-Genie Australia Pty Limited Method and system for computer software application execution
US6565153B2 (en) 2001-07-31 2003-05-20 Johnson Controls Technology Corporation Upper back support for a seat
EP1286349A1 (en) 2001-08-21 2003-02-26 Canal+ Technologies Société Anonyme File and content management
US6920613B2 (en) 2001-08-27 2005-07-19 Xerox Corporation Video/text bi-directional linkage for software fault clearance applications
FR2829644A1 (fr) 2001-09-10 2003-03-14 St Microelectronics Sa Procede securise de transmission de donnees multimedia
JP3852568B2 (ja) * 2001-09-11 2006-11-29 ソニー株式会社 マルチメディアプレゼンテーション作成装置および方法
US7356763B2 (en) * 2001-09-13 2008-04-08 Hewlett-Packard Development Company, L.P. Real-time slide presentation multimedia data object and system and method of recording and browsing a multimedia data object
US7161599B2 (en) * 2001-10-18 2007-01-09 Microsoft Corporation Multiple-level graphics processing system and method
US20040205479A1 (en) 2001-10-30 2004-10-14 Seaman Mark D. System and method for creating a multimedia presentation
US20030152904A1 (en) 2001-11-30 2003-08-14 Doty Thomas R. Network based educational system
US6925499B1 (en) 2001-12-19 2005-08-02 Info Value Computing, Inc. Video distribution system using disk load balancing by file copying
US20030142137A1 (en) * 2002-01-28 2003-07-31 International Business Machines Corporation Selectively adjusting the order of windows in response to a scroll wheel rotation
KR100544180B1 (ko) 2002-03-09 2006-01-23 삼성전자주식회사 마크업 문서를 사용하여 av 데이터를 인터랙티브 모드로 재생하는 장치
TWI247295B (en) 2002-03-09 2006-01-11 Samsung Electronics Co Ltd Reproducing method and apparatus for interactive mode using markup documents
US7127700B2 (en) 2002-03-14 2006-10-24 Openwave Systems Inc. Method and apparatus for developing web services using standard logical interfaces to support multiple markup languages
US20030182364A1 (en) 2002-03-14 2003-09-25 Openwave Systems Inc. Method and apparatus for requesting and performing batched operations for web services
US7496845B2 (en) 2002-03-15 2009-02-24 Microsoft Corporation Interactive presentation viewing system employing multi-media components
US7080043B2 (en) * 2002-03-26 2006-07-18 Microsoft Corporation Content revocation and license modification in a digital rights management (DRM) system on a computing device
JP2003284003A (ja) 2002-03-27 2003-10-03 Sanyo Electric Co Ltd デジタル映像信号再生装置
US20030204602A1 (en) 2002-04-26 2003-10-30 Hudson Michael D. Mediated multi-source peer content delivery network architecture
JP4436617B2 (ja) 2002-04-26 2010-03-24 パナソニック株式会社 逆多重化装置
US7496599B2 (en) * 2002-04-30 2009-02-24 Microsoft Corporation System and method for viewing relational data using a hierarchical schema
US6928619B2 (en) * 2002-05-10 2005-08-09 Microsoft Corporation Method and apparatus for managing input focus and z-order
KR100866790B1 (ko) 2002-06-29 2008-11-04 삼성전자주식회사 인터렉티브 모드에서의 포커싱 방법 및 그 장치
US20040034622A1 (en) 2002-08-13 2004-02-19 Espinoza Danny Javier Applications software and method for authoring and communicating multimedia content in a multimedia object communication and handling platform
US7290057B2 (en) 2002-08-20 2007-10-30 Microsoft Corporation Media streaming of web content data
US7038581B2 (en) 2002-08-21 2006-05-02 Thomson Licensing S.A. Method for adjusting parameters for the presentation of multimedia objects
US20040107179A1 (en) * 2002-08-22 2004-06-03 Mdt, Inc. Method and system for controlling software execution in an event-driven operating system environment
US20040039909A1 (en) 2002-08-22 2004-02-26 David Cheng Flexible authentication with multiple levels and factors
JP2004086551A (ja) 2002-08-27 2004-03-18 Matsushita Electric Ind Co Ltd イベント制御装置及び方法
CN1695197B (zh) 2002-09-12 2012-03-14 松下电器产业株式会社 播放设备、播放方法、以及记录介质的记录方法
US7519616B2 (en) * 2002-10-07 2009-04-14 Microsoft Corporation Time references for multimedia objects
US7840856B2 (en) * 2002-11-07 2010-11-23 International Business Machines Corporation Object introspection for first failure data capture
US7328076B2 (en) * 2002-11-15 2008-02-05 Texas Instruments Incorporated Generalized envelope matching technique for fast time-scale modification
KR100484181B1 (ko) * 2002-12-02 2005-04-20 삼성전자주식회사 멀티미디어 문서 저작 장치 및 방법
CA2414053A1 (en) * 2002-12-09 2004-06-09 Corel Corporation System and method for manipulating a document object model
US7290263B1 (en) 2002-12-19 2007-10-30 Extreme, Networks, Inc. Method and system for a scriptable command line interface
JP3840183B2 (ja) * 2003-01-10 2006-11-01 株式会社東芝 情報再生装置及び情報再生方法
JP2007524875A (ja) 2003-01-10 2007-08-30 ネクサウェブ テクノロジーズ インコーポレイテッド ネットワーク・ベースの処理のためのシステムおよび方法
JP2004221900A (ja) 2003-01-14 2004-08-05 Sony Corp 画像情報復号装置及び画像情報復号方法
US7302057B2 (en) 2003-01-31 2007-11-27 Realnetworks, Inc. Method and process for transmitting video content
KR100984442B1 (ko) * 2003-01-31 2010-09-29 파나소닉 주식회사 재생장치 및 재생방법
US7437659B2 (en) 2003-02-03 2008-10-14 Microsoft Corporation Automatic correction, and skipping of document design problems based on document types
US20040187157A1 (en) * 2003-03-18 2004-09-23 Yen-Hwong Chong Multifunctional integrated multimedia viewer system
US7735104B2 (en) 2003-03-20 2010-06-08 The Directv Group, Inc. System and method for navigation of indexed video content
US7620301B2 (en) * 2003-04-04 2009-11-17 Lg Electronics Inc. System and method for resuming playback
JP4727908B2 (ja) * 2003-04-23 2011-07-20 シャープ株式会社 コンテンツ再生装置、コンピュータプログラム、及び記録媒体
US20040221174A1 (en) 2003-04-29 2004-11-04 Eric Le Saint Uniform modular framework for a host computer system
US6906643B2 (en) 2003-04-30 2005-06-14 Hewlett-Packard Development Company, L.P. Systems and methods of viewing, modifying, and interacting with “path-enhanced” multimedia
JP2004357275A (ja) 2003-05-07 2004-12-16 Nec Corp 映像記録装置、記録媒体、映像記録方法及びプログラム
US20040244003A1 (en) 2003-05-30 2004-12-02 Vidiator Enterprises Inc. Apparatus and method for task scheduling for media processing
US7739715B2 (en) * 2003-06-24 2010-06-15 Microsoft Corporation Variable play speed control for media streams
KR100897466B1 (ko) 2003-06-30 2009-05-14 파나소닉 주식회사 기록매체, 재생장치, 기록방법, 재생방법
AU2004258523B2 (en) 2003-07-07 2009-12-10 Irdeto B.V. Reprogrammable security for controlling piracy and enabling interactive content
KR20050022072A (ko) 2003-08-26 2005-03-07 삼성전자주식회사 인터렉티브 데이터 처리방법 및 장치
KR101102717B1 (ko) 2003-09-17 2012-01-05 파나소닉 주식회사 애플리케이션 실행장치, 애플리케이션 실행방법, 집적회로, 및 컴퓨터 판독가능한 기록매체
TW200518070A (en) * 2003-10-10 2005-06-01 Matsushita Electric Ind Co Ltd Recording medium, reproduction device, program, and reproduction method
US7511718B2 (en) * 2003-10-23 2009-03-31 Microsoft Corporation Media integration layer
US7436535B2 (en) * 2003-10-24 2008-10-14 Microsoft Corporation Real-time inking
US8065616B2 (en) * 2003-10-27 2011-11-22 Nokia Corporation Multimedia presentation editor for a small-display communication terminal or computing device
EP1683349B1 (en) * 2003-11-12 2015-05-20 Panasonic Corporation Recording medium, playback apparatus and method, recording method, and computer-readable program
CN100550178C (zh) * 2003-11-12 2009-10-14 松下电器产业株式会社 再现装置和方法以及记录方法
JP4507569B2 (ja) 2003-11-19 2010-07-21 ソニー株式会社 情報処理装置および情報処理方法、プログラム、並びに記録媒体
US7681114B2 (en) * 2003-11-21 2010-03-16 Bridgeborn, Llc Method of authoring, deploying and using interactive, data-driven two or more dimensional content
US7882034B2 (en) 2003-11-21 2011-02-01 Realnetworks, Inc. Digital rights management for content rendering on playback devices
EP1536606A1 (fr) 2003-11-27 2005-06-01 Nagracard S.A. Méthode d'authentification d'applications
BRPI0407057A (pt) 2003-11-28 2006-01-17 Sony Corp Aparelho de reprodução, método de reprodução, programa de reprodução, e, meio de gravação
US20050128520A1 (en) 2003-12-16 2005-06-16 Jeff Glickman Digital signature protection for software
US20050149729A1 (en) 2003-12-24 2005-07-07 Zimmer Vincent J. Method to support XML-based security and key management services in a pre-boot execution environment
JP4166707B2 (ja) 2004-01-20 2008-10-15 パイオニア株式会社 映像内容認識装置、録画装置、映像内容認識方法、録画方法、映像内容認識プログラム、および録画プログラム
US7801303B2 (en) 2004-03-01 2010-09-21 The Directv Group, Inc. Video on demand in a broadcast network
JP4009634B2 (ja) 2004-03-04 2007-11-21 日本電気株式会社 アクセス制御方法、アクセス制御システム、メタデータ制御機、及び送信系装置
JP2005318472A (ja) * 2004-04-30 2005-11-10 Toshiba Corp 動画像のメタデータ
US7509497B2 (en) * 2004-06-23 2009-03-24 Microsoft Corporation System and method for providing security to an application
US8201191B2 (en) * 2004-06-30 2012-06-12 Time Warner Cable Inc. Apparatus and methods for implementation of network software interfaces
US20060041522A1 (en) 2004-08-18 2006-02-23 Xerox Corporation. Abstract document management systems and methods
JP4039417B2 (ja) * 2004-10-15 2008-01-30 株式会社日立製作所 記録再生装置
US7593980B2 (en) 2004-11-30 2009-09-22 Cisco Technology, Inc. Application server system and method
US20060123451A1 (en) 2004-12-07 2006-06-08 Showtime Networks Inc. Enhanced content in an on-demand environment
CN101176341B (zh) * 2005-05-18 2010-05-19 松下电器产业株式会社 内容再现装置
KR20060125465A (ko) 2005-06-02 2006-12-06 엘지전자 주식회사 기록매체, 데이터 재생방법 및 재생장치와 데이터 저장방법및 저장장치
US8656268B2 (en) * 2005-07-01 2014-02-18 Microsoft Corporation Queueing events in an interactive media environment
US7500175B2 (en) 2005-07-01 2009-03-03 Microsoft Corporation Aspects of media content rendering
US7721308B2 (en) * 2005-07-01 2010-05-18 Microsoft Corproation Synchronization aspects of interactive multimedia presentation management
US20070006079A1 (en) * 2005-07-01 2007-01-04 Microsoft Corporation State-based timing for interactive multimedia presentations
US7941522B2 (en) * 2005-07-01 2011-05-10 Microsoft Corporation Application security in an interactive media environment
US8799757B2 (en) 2005-07-01 2014-08-05 Microsoft Corporation Synchronization aspects of interactive multimedia presentation management
US20070006078A1 (en) * 2005-07-01 2007-01-04 Microsoft Corporation Declaratively responding to state changes in an interactive multimedia environment
US8108787B2 (en) * 2005-07-01 2012-01-31 Microsoft Corporation Distributing input events to multiple applications in an interactive media environment
US20070006238A1 (en) * 2005-07-01 2007-01-04 Microsoft Corporation Managing application states in an interactive media environment
US8305398B2 (en) * 2005-07-01 2012-11-06 Microsoft Corporation Rendering and compositing multiple applications in an interactive media environment
US8020084B2 (en) * 2005-07-01 2011-09-13 Microsoft Corporation Synchronization aspects of interactive multimedia presentation management
US20070174387A1 (en) 2006-01-20 2007-07-26 International Business Machines Corporation Methods and apparatus for implementing real-time collective moderation of collaborative environments
US7861150B2 (en) * 2006-11-07 2010-12-28 Microsoft Corporation Timing aspects of media content rendering
US8495592B2 (en) 2006-11-28 2013-07-23 International Business Machines Corporation Presenting completion progress status of an installer via join points

Also Published As

Publication number Publication date
WO2007005294A2 (en) 2007-01-11
EP1899970A2 (en) 2008-03-19
US20070006063A1 (en) 2007-01-04
KR20080021073A (ko) 2008-03-06
EP1899970A4 (en) 2011-12-21
JP2009500911A (ja) 2009-01-08
US8799757B2 (en) 2014-08-05
KR101265890B1 (ko) 2013-05-20
WO2007005294A3 (en) 2007-06-07

Similar Documents

Publication Publication Date Title
JP5015149B2 (ja) 対話型マルチメディア・プレゼンテーション管理の同期方法
JP4959695B2 (ja) 対話型マルチメディア・プレゼンテーション管理の同期性
JP4959696B2 (ja) 対話型マルチメディアプレゼンテーションの状態ベースタイミング
JP5015150B2 (ja) 対話式マルチメディア環境の状態変化への宣言式応答
JP4812833B2 (ja) 対話型マルチメディアプレゼンテーション管理の同期化の態様
US20070006065A1 (en) Conditional event timing for interactive multimedia presentations
JP2008545335A5 (ja)
JP5619838B2 (ja) 対話型マルチメディア・プレゼンテーション管理の同期性
JP2009500909A5 (ja)

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090525

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20110908

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120313

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120508

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120606

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150615

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5015149

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees