JP2006523418A - インタラクティブコンテンツ同期化装置及び方法 - Google Patents
インタラクティブコンテンツ同期化装置及び方法 Download PDFInfo
- Publication number
- JP2006523418A JP2006523418A JP2006507755A JP2006507755A JP2006523418A JP 2006523418 A JP2006523418 A JP 2006523418A JP 2006507755 A JP2006507755 A JP 2006507755A JP 2006507755 A JP2006507755 A JP 2006507755A JP 2006523418 A JP2006523418 A JP 2006523418A
- Authority
- JP
- Japan
- Prior art keywords
- content
- interactive
- synchronized
- multimedia element
- interactive content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 229
- 238000000034 method Methods 0.000 title claims abstract description 48
- 230000001360 synchronised effect Effects 0.000 claims abstract description 131
- 230000005540 biological transmission Effects 0.000 claims abstract description 10
- 239000000872 buffer Substances 0.000 claims description 8
- 230000003139 buffering effect Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
- G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2537—Optical discs
- G11B2220/2562—DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S707/00—Data processing: database and file management or data structures
- Y10S707/99941—Database schema or data structure
- Y10S707/99944—Object-oriented database structure
- Y10S707/99945—Object-oriented database structure processing
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10—TECHNICAL SUBJECTS COVERED BY FORMER USPC
- Y10S—TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y10S707/00—Data processing: database and file management or data structures
- Y10S707/99941—Database schema or data structure
- Y10S707/99948—Application of database or data structure, e.g. distributed, multimedia, or image
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Computer Security & Cryptography (AREA)
- Primary Health Care (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Television Signal Processing For Recording (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
本発明は、インタラクティブコンテンツを同期化する装置及び方法に係り、本発明によるインタラクティブコンテンツ同期化装置は、インタラクティブコンテンツに含まれたマルチメディア要素がAVコンテンツと同期されたマルチメディア要素であるか否かを判断する同期マルチメディア要素判断部と、インタラクティブ制御命令対応応用プログラムインターフェースを、AVコンテンツを再生するAVコンテンツ再生エンジン及び同期マルチメディア要素判断部でAVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する同期マルチメディア要素再生エンジンに伝送する応用プログラムインターフェース伝送部とより構成され、本発明によれば、多様なマルチメディア要素が含まれたAVコンテンツ及びインタラクティブコンテンツに、DVDコンテンツのような特定AVコンテンツと他のマルチメディア要素との間に同期化如何を知らせる情報を含めることによって、ユーザの入力に対応して特定AVコンテンツ及びそれと同期されたマルチメディア要素を同時にナビゲーションできる。
Description
本発明はインタラクティブコンテンツを同期化する装置及び方法に係り、さらには、インタラクティブコンテンツを同期して再生する装置及び方法に関する。
現在インターネットの基盤をなしているマークアップ言語は、テキスト基盤から始まって、最近には多様なマルチメディア要素まで取り扱うことができるようにして、ウェブページをさらにダイナミックかつ華麗に構成することを可能にしている。最近には、さらに一層DVDコンテンツのような特定AVコンテンツが多様なマルチメディア要素と共に再生可能になった。しかし、現在広く使われているHTMLを説明すれば、定義されたタグ及び属性を使用して、このような要素を1マークアップ文書内に再生可能にするが、特定AVコンテンツのクロックに同期を合わせて再生する方法は、全くないという問題点があった。但し、SMIL(Synchronized Multimedia Integration Language)のようなXML言語とこれを利用した時間属性とを通じて、ブラウザーに含まれるマルチメディア要素の再生開始時間、再生持続時間、再生終了時間をタグ及び属性の形態に取り扱い可能しただけで、再生されるコンテンツを同期化して、ナビゲーションを制御する方式は規定されていないという問題点があった。また、このような同期化を具現するために、各要素を制御しようとすれば、多数のタグ及び属性が必要になるので、マークアップ文書の製作が複雑になる問題点があった。
本発明が解決しようとする技術的課題は、多様なマルチメディア要素が含まれたAVコンテンツ及びインタラクティブコンテンツに、DVDコンテンツのような特定AVコンテンツと他のマルチメディア要素との間に同期化如何を知らせる情報を含めることによって、ユーザの入力に対応して特定AVコンテンツ及びそれと同期されたマルチメディア要素を同時にナビゲーションできる装置及び方法を提供し、さらに、多様なマルチメディア要素を効率的に同期化して再生できる装置及び方法を提供することである。
前記課題を解決するための本発明によるインタラクティブコンテンツの同期化装置は、所定のインタラクティブコンテンツに含まれたマルチメディア要素が所定のAVコンテンツと同期されたマルチメディア要素であるか否かを判断する同期マルチメディア要素判断部と、所定のインタラクティブ制御命令に対応する応用プログラムインターフェース(API:Application Program Interface)を、前記AVコンテンツを再生するAVコンテンツ再生エンジン及び前記同期マルチメディア要素判断部で、AVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する同期マルチメディア要素再生エンジンに伝送するAPI伝送部とより構成される。
前記他の技術的課題を解決するための本発明によるインタラクティブコンテンツの同期再生装置は、所定のインタラクティブコンテンツに含まれたマルチメディア要素が所定のAVコンテンツと同期されたマルチメディア要素であるか否かを判断し、所定のインタラクティブ制御命令に対応するAPIを伝送するインタラクティブコンテンツ同期化部と、前記インタラクティブコンテンツ同期化部から伝送されたAPIを受信し、前記受信されたAPIによって、前記AVコンテンツを再生するAVコンテンツ再生エンジンと、前記インタラクティブコンテンツ同期化部から伝送されたAPIを受信し、前記受信されたAPIによって、前記インタラクティブコンテンツ同期化部で前記AVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する同期マルチメディア要素再生エンジンとより構成される。
前記さらに他の技術的課題を解決するための本発明によるインタラクティブコンテンツの同期化方法は、(a)所定のインタラクティブコンテンツに含まれたマルチメディア要素が所定のAVコンテンツと同期されたマルチメディア要素であるか否かを判断する段階と、(b)所定のインタラクティブ制御命令に対応するAPIを前記AVコンテンツを再生するAVコンテンツ再生エンジン及び前記(a)段階でAVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する同期マルチメディア要素再生エンジンに伝送する段階とより構成される。
前記さらに他の技術的課題を解決するための本発明によるインタラクティブコンテンツの同期再生方法は、(a)所定のインタラクティブコンテンツに含まれたマルチメディア要素が所定のAVコンテンツと同期されたマルチメディア要素であるか否かを判断し、所定のインタラクティブ制御命令に対応するAPIを伝送する段階と、(b)前記(a)段階で伝送されたAPIを受信し、前記受信されたAPIによって、前記AVコンテンツを再生する段階と、(c)前記(a)段階で伝送されたAPIを受信し、前記受信されたAPIによって、前記(a)段階で前記AVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する段階とより構成される。
以下、図面を参照して本発明の望ましい実施例を詳細に説明する。
図1は、本発明の一実施例によるインタラクティブコンテンツの同期再生装置の構成図である。
インタラクティブコンテンツの同期再生装置は、コンテンツ読出部11、コンテンツバッファ12、インタラクティブコンテンツ同期化部13、AVコンテンツ再生エンジン14、同期マルチメディア要素再生エンジン15、非同期マルチメディア要素再生エンジン16より構成される。
コンテンツ読出部11は、DVD ROM、CD ROMのような保存媒体からAVコンテンツ及びインタラクティブコンテンツを含むAVコンテンツ及びインタラクティブコンテンツを読出(リード)すか、またはインターネットからダウンロード方式でAVコンテンツ及びインタラクティブコンテンツを読出す。コンテンツバッファ12は、コンテンツ読出部11から読出されたAVコンテンツ及びインタラクティブコンテンツをバッファリングする。コンテンツバッファ12は、AVコンテンツ及びインタラクティブコンテンツの安定的な再生のためのものであって、読出速度が非常に速い理想的な環境では必要ないこともある。
インタラクティブコンテンツ同期化部13は、コンテンツバッファ12にバッファリングされたAVコンテンツ及びインタラクティブコンテンツに含まれたインタラクティブコンテンツをパージングする。このとき、AVコンテンツ及びマルチメディア要素の再生を制御する情報が入っているインタラクティブコンテンツをコンテンツバッファ12からあらかじめ読込んでパージングする。但し、読出速度が非常に速い理想的な環境では、コンテンツ読出部11から読出されたAVコンテンツ及びインタラクティブコンテンツに含まれたインタラクティブコンテンツをパージングすることもある。一般的に、インタラクティブコンテンツは、ユーザにインタラクティブ方式でDVD映像を制御するためのコンテンツを称し、主にDVDフォーラム(http://www.dvdforum.org)で提案されたENAV(Ehanced NAVigation)を基準としたインタラクティブコンテンツを称す。
インタラクティブコンテンツ同期化部13は、パージングされたAVコンテンツ及びインタラクティブコンテンツに含まれたインタラクティブコンテンツを解釈して、AVコンテンツ及びインタラクティブコンテンツに含まれたマルチメディア要素が、AVコンテンツと同期されたマルチメディア要素であるか否かを判断し、ユーザからインタラクティブ制御命令を受信し、受信されたインタラクティブ制御命令に対応するAPIをAVコンテンツ再生エンジン14及び同期マルチメディア要素再生エンジン15に伝送する。ここで、AVコンテンツは、同期化の基本となるコンテンツであって、ここに、他のコンテンツが同期を合せる。同期化の基本となるAVコンテンツは、一般的に、DVDコンテンツとなる。インタラクティブコンテンツを解釈することによって、このAVコンテンツと同期を合せねばならないマルチメディア要素が何かが分かり、したがって、他のマルチメディア要素と区別させて、これらのみを制御可能になる。すなわち、APIを、AVコンテンツを再生するAVコンテンツ再生エンジン14及びAVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する同期マルチメディア要素再生エンジン15に伝送する。ここで、APIとは、運用体系や他の応用プログラムに処理要求を行えるように、運用体系または他の応用プログラムによって所定の特別な方法を称す。このAPIは、プログラム内で特定サブルーチンに連結を提供する関数を呼び出すことによって具現される。
AVコンテンツ再生エンジン14は、インタラクティブコンテンツ同期化部13から伝送されたAPIを受信し、受信されたAPIによって、AVコンテンツを再生する。同期マルチメディア要素再生エンジン15は、インタラクティブコンテンツ同期化部13から伝送されたAPIを受信し、受信されたAPIによって、インタラクティブコンテンツ同期化部13でAVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する。ユーザがリモコンの特定キーを押して、再生、停止などのインタラクティブ制御命令を入力すれば、インタラクティブコンテンツ同期化部13は、インタラクティブ制御命令を受信し、受信されたインタラクティブ制御命令に対応するAPIをAVコンテンツ再生エンジン14及び同期マルチメディア要素再生エンジン15に伝送し、AVコンテンツ再生エンジン14及び同期マルチメディア要素再生エンジン15は、伝送されたAPIを受信し、受信されたAPIによって、AVコンテンツとマルチメディア要素とを再生することによって、AVコンテンツ及びインタラクティブコンテンツ製作者が意図した通りに、AVコンテンツとマルチメディア要素とが同期されて再生される。
非同期マルチメディア要素再生エンジン16は、インタラクティブコンテンツ同期化部13でAVコンテンツと同期されたマルチメディア要素と判断されていないマルチメディア要素を再生する。AVコンテンツと関係なく再生されるマルチメディア要素の例としては、バナー広告のように、反復的に再生されるマルチメディア要素が挙げられる。
同期マルチメディア要素再生エンジン15及び非同期マルチメディア要素再生エンジン16は、インタラクティブコンテンツ再生エンジンの一部であり、停止映像のブラウザーに対する再生エンジンもインタラクティブコンテンツ再生エンジンに含まれる。結局、ディスプレイ装置上で、AVコンテンツによって具現されるAV映像(一般的に、DVD映像となる)、インタラクティブコンテンツによって具現されるブラウザー及びマルチメディア要素が合成されて一つの画面にディスプレイされる。
図2は、本発明の一実施例によるインタラクティブコンテンツ同期化装置の構成図である。
インタラクティブコンテンツ同期化装置は、同期マルチメディア要素判断部21及びAPI伝送部22より構成される。
同期マルチメディア要素判断部21は、AVコンテンツ及びマルチメディア要素を含むインタラクティブコンテンツをパージングしかつ解釈して、インタラクティブコンテンツに含まれたマルチメディア要素が、AVコンテンツと同期されたマルチメディア要素であるか否かを判断する。ここで、一般的に、AVコンテンツは、DVDコンテンツであり、インタラクティブコンテンツは、マークアップ文書であり、インタラクティブコンテンツ同期化装置は、ブラウザーとして具現される。このマークアップ文書には、AVコンテンツと同期されたマルチメディア要素であるかについての情報が、一般的にメタタグの形式で含まれうる。さらに、新たに定義されたタグの形式で、新たに定義された属性の形式で、スクリプトの形式で、または2進データの形式で含まれることもある。
詳細に説明すると、同期マルチメディア要素判断部21は、インタラクティブコンテンツパージング部211及びインタラクティブコンテンツ解釈部212より構成される。
インタラクティブコンテンツパージング部211は、マークアップ文書のインタラクティブコンテンツをパージングして、DOM(Document Object Model)ツリーを生成する。DOMツリーは、マークアップ文書のような構造的な文書内に定義された要素をそれぞれ一つの客体とモデリングして、ツリー構造の論理的な形態で表現したものである。インタラクティブコンテンツ解釈部212は、インタラクティブコンテンツパージング部211で生成されたDOMツリーを解釈して、DOMツリーの各ノードの要素がAVコンテンツと同期されたマルチメディア要素であるか否かを判断する。
API伝送部22は、ユーザからインタラクティブ制御命令を受信し、受信されたインタラクティブ制御命令に対応するAPIをAVコンテンツを再生するAVコンテンツ再生エンジン及び同期マルチメディア要素判断部21でAVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する同期マルチメディア要素再生エンジンに伝送する。インタラクティブ制御命令には、再生(Play)命令、停止(Stop)命令、プレビュー(Prev)命令、またはネクストビュー(Next)命令がある。一般的に、このような命令は、ユーザがリモコンなどの入力端末を通じて入力する。同期マルチメディア要素再生エンジンは、インタラクティブコンテンツを表示するブラウザーで具現されることもあるが、一般的に、プラグインプレーヤで具現される。プラグインとは、第3者が作ったソフトウェアを利用して、ブラウザーが表示できない各種形式のファイルをブラウザーのウィンドウ内に表示する方式を称す。すなわち、プラグインは、マークアップ文書に含まれるか、またはマークアップ文書によって呼び出される多様なフォーマットのファイルを開けるようにする。ウェブブラウザーと一体に動作するので、別途のウィンドウを開かずとも、あたかもウェブブラウザー自体がそのファイルを表示する機能を有しているように動作する。このようなプラグの方式を利用したプラグインプレーヤには、代表的にウィンドウメディアプレーヤ、フラッシュプレーヤ、またはリアルプレーヤがある。前述されたマルチメディア要素は、ほとんどウィンドウメディアプレーヤ、フラッシュプレーヤ、リアルプレーヤ上で再生されるオーディオファイル、実写動画ファイル、及びアニメーション動画ファイルが該当するため、このようなプラグインプレーヤを利用して、再生可能になる。
詳細に説明すると、API伝送部22は、インタラクティブ制御命令受信部221及びインタラクティブ制御命令に対応するAPI伝送部222より構成される。
インタラクティブ制御命令受信部221は、ユーザから再生命令、停止命令、プレビュー命令、またはネクストプレビュー命令であるインタラクティブ制御命令を受信する。インタラクティブ制御命令に対応するAPI伝送部222は、インタラクティブ制御命令受信部221から受信されたインタラクティブ制御命令に対応するAPIを、AVコンテンツを再生するAVコンテンツ再生エンジン及び同期マルチメディア要素判断部21でAVコンテンツと同期されたマルチメディア要素と判断されたオーディオファイル、実写動画ファイル、及びアニメーション動画ファイルであるマルチメディア要素を再生するウィンドウメディアプレーヤ、フラッシュプレーヤ、またはリアルプレーヤである同期マルチメディア要素再生エンジンに伝送する。
すなわち、インタラクティブコンテンツをパージングして、DOMツリーを形成することによって、DOMツリーの各ノードにある要素を認知可能になる。このとき、ユーザのリモコンを通じたインタラクティブ制御命令入力に対応可能になる。DOMツリーの各ノードの要素がブラウザーで処理できる要素であれば、ブラウザー自体で当該要素を表示し、ブラウザーで処理できない要素であれば、当該要素を表示可能にするプラグインプレーヤによって当該要素を表示する。ユーザがリモコンなどの特定キーの入力を通じて、インタラクティブ制御命令を入力すれば、インタラクティブ制御命令に該当するイベントによって処理するが、もし、当該イベントがAVコンテンツを再生、停止、プレビュー、ネクストプレビュー、すなわち、ナビゲーションするためのイベントであれば、AVコンテンツ再生エンジン及びプラグインプレーヤによって当該イベントに対応するAPIをAV再生エンジン及び同期されたマルチメディア要素を再生するプラグインプレーヤに送る。このとき、最初のDOMツリー形成時、認知された同期化情報を利用して、同期されていないマルチメディア要素を再生するプラグインプレーヤにはAPIを送らないようにすることによって、AVコンテンツと同期されたマルチメディア要素のみがAVコンテンツの同期に合わせて、再生が可能になる。
図3は、本発明のインタラクティブコンテンツの一例であるマークアップ文書を示す図である。図示されたマークアップ文書は、AVコンテンツ及びインタラクティブコンテンツ製作者が、自信が製作したコンテンツ内で、AVコンテンツ以外にマルチメディア要素が含まれる場合、マルチメディア要素がAVコンテンツと同期化が必要であるか否かをブラウザーに認知できるようにした例である。
図示されたように、<object>タグを使用して、二つのフラッシュアニメーションがAVコンテンツ(ここでは、DVDコンテンツ)と共にマークアップ文書内に含まれて再生されている。第1<object>タグには、DVDコンテンツの再生が定義されており、第2<object>タグと第3<object>タグとにフラッシュアニメーションの再生が定義されている。製作者は、マークアップ文書に含まれるマルチメディア要素のうちDVDコンテンツと同期化が必要な要素ということを表すために、<meta>タグを使用し、<meta>タグの“name”属性を“synchronization_id”と規定し、<meta>タグの“contents”属性を“2”と規定することによって、文書の解釈が終わった後、“id=2”を有する<object>タグによって含まれるアニメーションがDVDコンテンツと同期化が必要な要素ということが分かる。
もちろん、DVDコンテンツの場合、VOBU(Video Object Unit)単位で再生されるので、DVDコンテンツと同期を合わせて再生されるオーディオ、アニメーションのようなマルチメディア要素の場合、VOBU単位のタイムテーブル情報がさらに必要であることもあるが、本発明では、どのような方法で同期を合せるかについては取り扱っていない。したがって、第2<object>タグによって含まれるフラッシュアニメーションは、AVコンテンツと関係ない別個のアニメーションであり、第3<object>タグによって含まれるフラッシュアニメーションは、AVコンテンツと同期を合わせて再生されねばならないアニメーションである。また、“type”属性を使用して、当該マルチメディア要素を再生できるプラグインプレーヤについての情報も知らせる。
図4は、本発明のインタラクティブコンテンツの一例であるマークアップ文書を示す図である。図示されたマークアップ文書は、AVコンテンツ及びインタラクティブコンテンツ製作者が自身が製作したコンテンツ内で、AVコンテンツ以外にマルチメディア要素が含まれる場合、マルチメディア要素がAVコンテンツと同期化が必要であるか否かをブラウザーに認知できるようにした例である。
図示されたように、前記図3と同様に、<object>タグを使用して二つのフラッシュアニメーションがAVコンテンツ(ここでは、DVDコンテンツ)と共にマークアップ文書内に含まれて再生される。第1<object>タグには、DVDコンテンツの再生が定義されており、第2<object>タグと第3<object>タグとにフラッシュアニメーションの再生が定義されている。しかし、前記図3のように、<meta>タグのような特定タグに同期化情報を記録することではなく、“synchronization”という属性を新たに定義することによって、AVコンテンツと同期化が必要であるか否かが分かる。図示されたように、“synchronization”は、ブール代数を属性値として有し、“真”である場合には、AVコンテンツと同期を合わせて再生されねばならない要素であり、“偽”である場合には、同期化が必要ない要素であることを意味する。したがって、第2<object>タグによって含まれるフラッシュアニメーションは、AVコンテンツと関係ない別個のアニメーションであり、第3<object>タグによって含まれるフラッシュアニメーションは、AVコンテンツと同期を合わせて再生されねばならないアニメーションである。また、“type”属性を使用して、当該マルチメディア要素を再生できるプラグインプレーヤについての情報も知らせる。
前記図3と前記図4とは、AVコンテンツとの同期化情報をメタタグ及び属性の形態で定義したが、新たなタグで定義されることもあり、Java(登録商標)スクリプトのようなプログラム言語で定義されることもある。すなわち、多様な方法を使用して、このような情報を含みうる。製作者は、自身が製作したAVコンテンツ及びインタラクティブコンテンツに含まれたマルチメディア要素がAVコンテンツと同期化が必要であるか否かを表す情報をマークアップ文書内に含み、本発明によって具現されたブラウザーは、当該情報を通じて、ユーザの入力に対応してAVコンテンツと共に当該マルチメディア要素を制御できるようになる。
図5は、本発明のインタラクティブ制御命令に対応するAPIの一例を示す図面である。
ユーザがリモコンのようなユーザ入力装置を通じてAVコンテンツをナビゲーションしようとする場合に対応するために、インタラクティブ制御命令に対応するAPIを備えていなければならない。このとき、リモコンの特定キー入力イベントに対応するAPIをRCKeyEventインターフェースといえば、RCKeyEventインターフェースは、リモコンの動作に関連した特定情報を提供する。キーコード属性は、ユーザによって押されるボタンにあらかじめ割当てられたキーコード値を表し、キー名称は、押されるボタンの名称を表している。RCKeyEventインターフェースは、図示されたような形態でDOMに適用される。
図示されたように適用されたRCKeyEventのイベントは、“rckeypress”、“rckeydown”、または“rckeyup”によって発生しうる。前記RCKeyEventのうち、DVDフォーラム(http://www.dvdforum.org)から提案されたENAVモードでAVコンテンツをナビゲーションするために必要な最小のキーコードは、“12”、“13”、“16”、そして“17”になりうるが、ENAVモードで前記のようなキーコード値を有するボタンが押された時、該当するAPIが伝送されて、AV再生エンジン及びインタラクティブコンテンツ再生エンジンを制御できる。本発明によれば、AVコンテンツと同期を合わせて、再生されねばならない他のマルチメディア要素も、AVコンテンツと同じナビゲーションを行えるように制御せねばならない。すなわち、ユーザ入力装置で発生するナビゲーションイベントによる制御命令を、AVコンテンツ再生エンジンだけでなく、各マルチメディア要素を再生するプラグインプレーヤにも伝送せねばならない。
したがって、ブラウザーは、ENAVモードでユーザによってキーコード“12”、“13”、“16”、そして“17”に該当する“PlayPause”、“Stop”、“Prev”、そして“Next”に対して、AVコンテンツ再生エンジンだけでなく、AVコンテンツと同期されたプラグインプレーヤにも同時にAPIを送る。
図6は、本発明のインタラクティブコンテンツの一例であるマークアップ文書を示す図である。図示されたように、マークアップ文書には、AVコンテンツ以外のマルチメディア要素として、同期化が不要なフラッシュアニメーションと同期化が必要なウィンドウメディア動画とが規定されている。フラッシュアニメーションとウィンドウメディア動画とを再生するためのプラグインプレーヤとしては、フラッシュプレーヤ及びウィンドウメディアプレーヤが規定されている。
図7は、本発明のAVコンテンツ再生エンジン及びプラグインプレーヤに対する制御命令の一例を示す図である。図示された表を参照すれば、ENAVモードでユーザによって“Play”に該当するイベントが発生すれば、ブラウザーは、dvdVideo.InputRCKey12というAPIをDVDコンテンツ再生エンジンに送るだけでなく、MediaPlayer.Play()と規定されたウィンドウメディアプレーヤに、FlashPlayer.Play()と規定されたフラッシュプレーヤに送る。すなわち、図示された表によれば、マルチメディア要素を再生する全ての再生エンジン及びプラグインプレーヤにそれぞれ所定のAPIを送る。しかし、前述されたように、ブラウザーは、マークアップ文書内に含まれた同期化情報を通じて、どんなマルチメディア要素がAVコンテンツと同期されるかをあらかじめ知っているため、同期化が不要なマルチメディア要素にはAPIを送らない。したがって、ユーザのナビゲーションイベントによってAVコンテンツ及び同期化が必要なマルチメディア要素は、同じ制御を受ける。
図8は、本発明の一実施例によるインタラクティブコンテンツ同期再生方法のフローチャートである。
インタラクティブコンテンツ同期再生方法は、次のような段階より構成される。
所定の保存媒体からAVコンテンツ及びインタラクティブコンテンツを読出すか、またはインターネットからダウンロード方式でAVコンテンツ及びインタラクティブコンテンツを含むAVコンテンツ及びインタラクティブコンテンツを読出す(81)。次いで、読出されたAVコンテンツ及びインタラクティブコンテンツをバッファリングする(82)。読出速度が非常に速い理想的な環境では、バッファリング段階が省略されることもある。次いで、バッファリングされたAVコンテンツ及びインタラクティブコンテンツに含まれたインタラクティブコンテンツをパージングするか、または理想的な環境では、直ぐ読出されたAVコンテンツ及びインタラクティブコンテンツに含まれたインタラクティブコンテンツをパージングしかつ解釈して、インタラクティブコンテンツに含まれたマルチメディア要素が、AVコンテンツと同期されたマルチメディア要素であるか否かを判断する(83)。インタラクティブコンテンツに含まれたマルチメディア要素が、AVコンテンツと同期されたマルチメディア要素である場合(84)、ユーザからインタラクティブ制御命令を受信し、受信されたインタラクティブ制御命令に対応するAPIを伝送する(85)。次いで、伝送されたAPIを受信し、受信されたAPIによって、AVコンテンツを再生する(86)。次いで、伝送されたAPIを受信し、受信されたAPIによって、AVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する(87)。インタラクティブコンテンツに含まれたマルチメディア要素が、AVコンテンツと同期されたマルチメディア要素ではない場合(84)、インタラクティブ制御命令と別個にマルチメディア要素を再生する(88)。
図9は、本発明の一実施例によるインタラクティブコンテンツ同期化方法のフローチャートである。
インタラクティブコンテンツ同期化方法は、次のような段階より構成される。
マルチメディア要素を含むインタラクティブコンテンツをパージングしかつ解釈して、インタラクティブコンテンツに含まれたマルチメディア要素が、AVコンテンツと同期されたマルチメディア要素であるか否かを判断する(91)。ここで、一般的に、AVコンテンツはDVDコンテンツであり、インタラクティブコンテンツはマークアップ文書である。このマークアップ文書には、AVコンテンツと同期されたマルチメディア要素であるかについての情報がメタタグの形式で、新たに定義されたタグの形式で、新たに定義された属性の形式で、スクリプトの形式で、または2進データの形式で含まれうる。
次いで、ユーザからインタラクティブ制御命令を受信し、受信されたインタラクティブ制御命令に対応するAPIを、AVコンテンツを再生するAVコンテンツ再生エンジン及びAVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する同期マルチメディア要素再生エンジンに伝送する(92)。ここで、インタラクティブ制御命令には、再生命令、停止命令、プレビュー命令、またはネクストビュー命令があり、同期マルチメディア要素の再生エンジンは、プラグインプレーヤである。このプラグインプレーヤとしては、ウィンドウメディアプレーヤ、フラッシュプレーヤ、またはリアルプレーヤがある。ウィンドウメディアプレーヤ、フラッシュプレーヤ、またはリアルプレーヤ上で再生されるオーディオファイル、実写動画ファイル及びアニメーション動画ファイルがAVコンテンツ以外のマルチメディア要素となる。
図10は、図9の91段階の詳細フローチャートである。図9の91段階は、次のような段階より構成される。
マークアップ文書のインタラクティブコンテンツをパージングして、DOMツリーを生成する(101)。次いで、生成されたDOMツリーを解釈して、生成されたDOMツリーの各ノードの要素がAVコンテンツと同期されたマルチメディア要素であるか否かを判断する(102)。
図11は、図9の92段階の詳細フローチャートである。図9の92段階は、次のような段階より構成される。
ユーザから再生命令、停止命令、プレビュー命令、またはネクストビュー命令であるインタラクティブ制御命令を受信する(111)。次いで、受信されたインタラクティブ制御命令に対応するAPIを、AVコンテンツを再生するAVコンテンツ再生エンジン及びAVコンテンツと同期されたマルチメディア要素と判断されたオーディオファイル、実写動画ファイル、及びアニメーション動画ファイルであるマルチメディア要素を再生するウィンドウメディアプレーヤ、フラッシュプレーヤ、またはリアルプレーヤである同期マルチメディア要素再生エンジンに伝送する(112)。
一方、前述した本発明の実施例は、コンピュータで実行されうるプログラムに作成可能であり、コンピュータ可読記録媒体を利用して、前記プログラムを動作させる汎用デジタルコンピュータで具現されうる。
また、前述した本発明の実施例で使われたデータの構造は、コンピュータ可読記録媒体に色々な手段を通じて記録されうる。
前記コンピュータ可読記録媒体は、マグネチック保存媒体(例えば、ROM、フロッピー(登録商標)ディスク、ハードディスクなど)、光学的判読媒体(例えば、CD−ROM、DVDなど)及びキャリアウェーブ(例えば、インターネットを通じた伝送)のような保存媒体を含む。
以上、本発明について望ましい実施例を中心に説明した。当業者は、本発明が、本発明の本質的な特性から逸脱しない範囲で変形された形態に具現されうることが分かる。したがって、開示された実施例は、限定的な観点ではなく、説明的な観点で考慮されねばならない。本発明の範囲は、前述した説明ではなく、特許請求の範囲に現れており、それと同等な範囲内にある全ての差異点は、本発明に含まれたと解釈されねばならない。
前述した本発明によれば、多様なマルチメディア要素が含まれたAVコンテンツ及びインタラクティブコンテンツに、DVDコンテンツのような特定AVコンテンツとオーディオ、実写動画、アニメーション動画のような異なるマルチメディア要素間に同期化如何を知らせる情報を含めることによって、ユーザの入力に対応して特定AVコンテンツ及びそれと同期されたマルチメディア要素を同時にナビゲーション(すなわち、再生、停止、ネクストビュー、プレビューなど)でき、さらには、多様なマルチメディア要素を効率的に同期化して再生できる。また、このような同期化を具現するためには、同期化情報が含まれるように定義されたタグまたは属性のみを規定すればよいので、マークアップ文書の製作がはるかに容易になる。
Claims (40)
- 所定のインタラクティブコンテンツに含まれたマルチメディア要素が所定のAVコンテンツと同期されたマルチメディア要素であるか否かを判断する同期マルチメディア要素判断部と、
所定のインタラクティブ制御命令に対応するAPIを、前記AVコンテンツを再生するAVコンテンツ再生エンジン及び前記同期マルチメディア要素判断部で、AVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する同期マルチメディア要素再生エンジンに伝送するAPI伝送部とを含むことを特徴とするインタラクティブコンテンツ同期化装置。 - 前記AVコンテンツは、DVDコンテンツであり、前記インタラクティブコンテンツは、マークアップ文書及び/またはマークアップ文書で参照するリソースであることを特徴とする請求項1に記載のインタラクティブコンテンツ同期化装置。
- 前記同期マルチメディア要素判断部は、前記AVコンテンツと同期されたマルチメディア要素であるかについての情報がメタタグの形式で、新たに定義されたタグの形式で、新たに定義された属性の形式で、スクリプトの形式で、または2進データの形式で含まれたマークアップ文書のインタラクティブコンテンツをパージングしかつ解釈して、前記インタラクティブコンテンツに含まれたマルチメディア要素が前記AVコンテンツと同期されたマルチメディア要素であるか否かを判断することを特徴とする請求項2に記載のインタラクティブコンテンツ同期化装置。
- 前記同期マルチメディア要素判断部は、
前記マークアップ文書のインタラクティブコンテンツをパージングして、DOMツリーを生成するインタラクティブコンテンツパージング部と、
前記インタラクティブコンテンツパージング部で生成されたDOMツリーを解釈して、前記生成されたDOMツリーの各ノードの要素が前記AVコンテンツと同期されたマルチメディア要素であるか否かを判断するインタラクティブコンテンツ解釈部とを含むことを特徴とする請求項3に記載のインタラクティブコンテンツ同期化装置。 - 前記インタラクティブ制御命令は、再生命令、停止命令、プレビュー命令、またはネクストプレビュー命令であり、前記同期マルチメディア要素の再生エンジンは、プラグインプレーヤであることを特徴とする請求項1に記載のインタラクティブコンテンツ同期化装置。
- 前記プラグインプレーヤは、ウィンドウメディアプレーヤ、フラッシュプレーヤ、またはリアルプレーヤであることを特徴とする請求項5に記載のインタラクティブコンテンツ同期化装置。
- 前記マルチメディア要素は、前記ウィンドウメディアプレーヤ、前記フラッシュプレーヤ、または前記リアルプレーヤ上で再生されるオーディオファイル、実写動画ファイル及びアニメーション動画ファイルを含むことを特徴とする請求項6に記載のインタラクティブコンテンツ同期化装置。
- 前記API伝送部は、
ユーザから再生命令、停止命令、プレビュー命令、またはネクストビュー命令であるインタラクティブ制御命令を受信するインタラクティブ制御命令受信部と、
前記インタラクティブ制御命令受信部に受信されたインタラクティブ制御命令に対応するAPIを、前記AVコンテンツを再生するAVコンテンツ再生エンジン及び前記同期マルチメディア要素判断部で、AVコンテンツと同期されたマルチメディア要素と判断された前記オーディオファイル、前記実写動画ファイル、及び前記アニメーション動画ファイルであるマルチメディア要素を再生する前記ウィンドウメディアプレーヤ、前記フラッシュプレーヤ、または前記リアルプレーヤである同期マルチメディア要素の再生エンジンに伝送するインタラクティブ制御命令に対応するAPI伝送部とを含むことを特徴とする請求項7に記載のインタラクティブコンテンツ同期化装置。 - 所定のインタラクティブコンテンツに含まれたマルチメディア要素が所定のAVコンテンツと同期されたマルチメディア要素であるか否かを判断し、所定のインタラクティブ制御命令に対応するAPIを伝送するインタラクティブコンテンツ同期化部と、
前記インタラクティブコンテンツ同期化部から伝送されたAPIを受信し、前記受信されたAPIによって、前記AVコンテンツを再生するAVコンテンツ再生エンジンと、
前記インタラクティブコンテンツ同期化部から伝送されたAPIを受信し、前記受信されたAPIによって、前記インタラクティブコンテンツ同期化部で前記AVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する同期マルチメディア要素再生エンジンと、を含むことを特徴とするインタラクティブコンテンツ同期再生装置。 - 所定の保存媒体から前記AVコンテンツ及び前記インタラクティブコンテンツを読出するか、またはインターネットからダウンロード方式で前記AVコンテンツ及び前記インタラクティブコンテンツを読出するコンテンツ読出部を含むことを特徴とする請求項9に記載のインタラクティブコンテンツ同期再生装置。
- 前記インタラクティブコンテンツ同期化部は、前記コンテンツ読出部から読出されたAVコンテンツ及びインタラクティブコンテンツに含まれたインタラクティブコンテンツをパージングすることを特徴とする請求項10に記載のインタラクティブコンテンツ同期再生装置。
- 前記コンテンツ読出部から読出されたAVコンテンツ及びインタラクティブコンテンツをバッファリングするコンテンツバッファを含むことを特徴とする請求項10に記載のインタラクティブコンテンツ同期再生装置。
- 前記インタラクティブコンテンツ同期化部は、前記コンテンツバッファにバッファリングされたAVコンテンツ及びインタラクティブコンテンツに含まれたインタラクティブコンテンツをパージングしかつ解釈して、前記インタラクティブコンテンツに含まれたマルチメディア要素が前記AVコンテンツと同期されたマルチメディア要素であるか否かを判断することを特徴とする請求項12に記載のインタラクティブコンテンツ同期再生装置。
- 前記インタラクティブコンテンツ同期化部で前記AVコンテンツと同期されたマルチメディア要素と判断されていないマルチメディア要素を再生する非同期マルチメディア要素の再生エンジンを含むことを特徴とする請求項9に記載のインタラクティブコンテンツ同期再生装置。
- (a)所定のインタラクティブコンテンツに含まれたマルチメディア要素が所定のAVコンテンツと同期されたマルチメディア要素であるか否かを判断する段階と、
(b)所定のインタラクティブ制御命令に対応するAPIを前記AVコンテンツを、再生するAVコンテンツ再生エンジン及び前記(a)段階でAVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する同期マルチメディア要素再生エンジンに伝送する段階とを含むことを特徴とするインタラクティブコンテンツ同期化方法。 - 前記AVコンテンツは、DVDコンテンツであり、前記インタラクティブコンテンツは、マークアップ文書及び/またはマークアップ文書で参照するリソースであることを特徴とする請求項15に記載のインタラクティブコンテンツ同期化方法。
- 前記(a)段階は、前記AVコンテンツと同期されたマルチメディア要素であるかについての情報がメタタグの形式で、新たに定義されたタグの形式で、新たに定義された属性の形式で、スクリプトの形式で、または2進データの形式で含まれたマークアップ文書であるインタラクティブコンテンツをパージングしかつ解釈して、前記インタラクティブコンテンツに含まれたマルチメディア要素が前記AVコンテンツと同期されたマルチメディア要素であるか否かを判断することを特徴とする請求項16に記載のインタラクティブコンテンツ同期化方法。
- 前記(a)段階は、
(a1)前記マークアップ文書であるインタラクティブコンテンツをパージングして、DOMツリーを生成する段階と、
(a2)前記(a1)段階で生成されたDOMツリーを解釈して、前記生成されたDOMツリーの各ノードの要素が前記AVコンテンツと同期されたマルチメディア要素であるか否かを判断する段階と、を含むことを特徴とする請求項17に記載のインタラクティブコンテンツ同期化方法。 - 前記インタラクティブ制御命令は、再生命令、停止命令、プレビュー命令、またはネクストプレビュー命令であり、前記同期マルチメディア要素の再生エンジンは、プラグインプレーヤであることを特徴とする請求項15に記載のインタラクティブコンテンツ同期化方法。
- 前記プラグインプレーヤは、ウィンドウメディアプレーヤ、フラッシュプレーヤ、またはリアルプレーヤであることを特徴とする請求項19に記載のインタラクティブコンテンツ同期化方法。
- 前記マルチメディア要素は、前記ウィンドウメディアプレーヤ、前記フラッシュプレーヤ、または前記リアルプレーヤ上で再生されるオーディオファイル、実写動画ファイル、及びアニメーション動画ファイルを含むことを特徴とする請求項20に記載のインタラクティブコンテンツ同期化方法。
- 前記(b)段階は、
(b1)ユーザから再生命令、停止命令、プレビュー命令、またはネクストプレビュー命令のインタラクティブ制御命令を受信する段階と、
(b2)前記(b1)段階で受信されたインタラクティブ制御命令に対応するAPIを、前記AVコンテンツを再生するAVコンテンツ再生エンジン及び前記(a)段階でAVコンテンツと同期されたマルチメディア要素と判断された前記オーディオファイル、前記実写動画ファイル、及び前記アニメーション動画ファイルであるマルチメディア要素を再生する前記ウィンドウメディアプレーヤ、前記フラッシュプレーヤ、または前記リアルプレーヤの同期マルチメディア要素の再生エンジンに伝送する段階とを含むことを特徴とする請求項21に記載のインタラクティブコンテンツ同期化方法。 - (a)所定のインタラクティブコンテンツに含まれたマルチメディア要素が所定のAVコンテンツと同期されたマルチメディア要素であるか否かを判断し、所定のインタラクティブ制御命令に対応するAPIを伝送する段階と、
(b)前記(a)段階で伝送されたAPIを受信し、前記受信されたAPIによって、前記AVコンテンツを再生する段階と、
(c)前記(a)段階で伝送されたAPIを受信し、前記受信されたAPIによって、前記(a)段階で前記AVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する段階とを含むことを特徴とするインタラクティブコンテンツ同期再生方法。 - (a−2)所定の保存媒体から前記AVコンテンツ及び前記インタラクティブコンテンツを読出するか、またはインターネットからダウンロード方式で前記AVコンテンツ及び前記インタラクティブコンテンツを読出する段階を含むことを特徴とする請求項23に記載のインタラクティブコンテンツ同期再生方法。
- 前記(a)段階は、前記(a−2)段階で読出されたAVコンテンツ及びインタラクティブコンテンツに含まれたインタラクティブコンテンツをパージングすることを特徴とする請求項24に記載のインタラクティブコンテンツ同期再生方法。
- (a−1)前記(a−2)段階で読出されたAVコンテンツ及びインタラクティブコンテンツをバッファリングする段階を含むことを特徴とする請求項24に記載のインタラクティブコンテンツ同期再生方法。
- 前記(a)段階は、前記(a−1)段階でバッファリングされたAVコンテンツ及びインタラクティブコンテンツに含まれたインタラクティブコンテンツをパージングしかつ解釈して、前記インタラクティブコンテンツに含まれたマルチメディア要素が前記AVコンテンツと同期されたマルチメディア要素であるか否かを判断することを特徴とする請求項26に記載のインタラクティブコンテンツ同期再生方法。
- (d)前記(a)段階で前記AVコンテンツと同期されたマルチメディア要素と判断されていないマルチメディア要素を再生する段階を含むことを特徴とする請求項23に記載のインタラクティブコンテンツ同期再生方法。
- (a)所定のインタラクティブコンテンツに含まれたマルチメディア要素が所定のAVコンテンツと同期されたマルチメディア要素であるか否かを判断する段階と、
(b)所定のインタラクティブ制御命令に対応するAPIを、前記AVコンテンツを再生するAVコンテンツ再生エンジン及び前記(a)段階でAVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する同期マルチメディア要素再生エンジンに伝送する段階と、を含むことを特徴とするインタラクティブコンテンツ同期化方法をコンピュータで実行させるためのプログラムを記録したコンピュータ可読記録媒体。 - (a)所定のインタラクティブコンテンツに含まれたマルチメディア要素が所定のAVコンテンツと同期されたマルチメディア要素であるか否かを判断し、所定のインタラクティブ制御命令に対応するAPIを伝送する段階と、
(b)前記(a)段階で伝送されたAPIを受信し、前記受信されたAPIによって、前記AVコンテンツを再生する段階と、
(c)前記(a)段階で伝送されたAPIを受信し、前記受信されたAPIによって、前記(a)段階で前記AVコンテンツと同期されたマルチメディア要素と判断されたマルチメディア要素を再生する段階と、を含むことを特徴とするインタラクティブコンテンツ同期再生方法をコンピュータで実行させるためのプログラムを記録したコンピュータ可読記録媒体。 - (a)データストリームを受信する段階と、
(b)前記データストリームAVコンテンツとインタラクティブコンテンツとにパージングする段階と、
(c)前記インタラクティブコンテンツが前記AVコンテンツと同期された同期インタラクティブコンテンツに対応するか、または前記AVコンテンツと非同期された非同期インタラクティブコンテンツに対応するかを識別する段階と、
(d)ナビゲーション制御命令を受信する段階と、
(e)前記識別結果に基づいて、前記受信されたナビゲーション制御命令に対応する前記AVコンテンツ及び前記同期インタラクティブコンテンツを選択的にデコーディングする段階とを含むことを特徴とするデータストリーム同期化方法。 - 前記非同期インタラクティブコンテンツを選択的にデコーディングする段階をさらに含むことを特徴とする請求項31に記載のデータストリーム同期化方法。
- 前記(e)段階は、
前記AVコンテンツと前記同期インタラクティブコンテンツとを選択的にデコーディングするために、前記ナビゲーション制御情報に対応するAPIを利用する段階を含むことを特徴とする請求項31に記載のデータストリーム同期化方法。 - 前記データストリームの前記AVコンテンツ及び前記インタラクティブコンテンツのさらに安定的な再生を許容するために、前記受信されたデータストリームをバッファリングする段階をさらに含むことを特徴とする請求項31に記載のデータストリーム同期化方法。
- 前記AVコンテンツは、DVDコンテンツを含むことを特徴とする請求項31に記載のデータストリーム同期化方法。
- 前記インタラクティブコンテンツは、ENAV命令に基づいてユーザが前記DVDコンテンツを制御するように許容することを特徴とする請求項35に記載のデータストリーム同期化方法。
- 前記選択的なデコーディングは、前記同期インタラクティブコンテンツが前記ナビゲーション制御命令に応答して前記AVコンテンツと同じ方式でナビゲーションできるように制御されることを特徴とする請求項36に記載のデータストリーム同期化方法。
- 前記インタラクティブコンテンツは、前記AVコンテンツ及び前記インタラクティブコンテンツでのマルチメディア要素の選択的なデコーディングを制御する情報を含むマークアップ文書を含むことを特徴とする請求項31に記載のデータストリーム同期化方法。
- 前記(e)段階は、前記パージングされたインタラクティブコンテンツからDOMツリーを生成する段階と、
前記AVコンテンツと同期された前記マルチメディア要素を表す前記DOMツリーの各ノードを識別する段階とをさらに含むことを特徴とする請求項38に記載のデータストリーム同期化方法。 - 前記AVコンテンツと同期された前記マルチメディア要素に対応するプラグインを識別する段階をさらに含み、
前記プラグインは、前記AVコンテンツと同期された前記マルチメディア要素を選択的にデコーディングするために使われることを特徴とする請求項39に記載のデータストリーム同期化方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020030015693A KR20040080736A (ko) | 2003-03-13 | 2003-03-13 | 인터랙티브 컨텐츠 동기화 장치 및 방법 |
PCT/KR2004/000524 WO2004081806A1 (en) | 2003-03-13 | 2004-03-12 | Method of and apparatus for synchronizing interactive contents |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006523418A true JP2006523418A (ja) | 2006-10-12 |
Family
ID=36121690
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006507755A Pending JP2006523418A (ja) | 2003-03-13 | 2004-03-12 | インタラクティブコンテンツ同期化装置及び方法 |
Country Status (11)
Country | Link |
---|---|
US (2) | US7401100B2 (ja) |
EP (1) | EP1602036A4 (ja) |
JP (1) | JP2006523418A (ja) |
KR (1) | KR20040080736A (ja) |
CN (1) | CN1701321A (ja) |
BR (1) | BRPI0406193A (ja) |
CA (1) | CA2497778A1 (ja) |
MX (1) | MXPA05003232A (ja) |
RU (1) | RU2292584C2 (ja) |
TW (1) | TWI260510B (ja) |
WO (1) | WO2004081806A1 (ja) |
Families Citing this family (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101494076B (zh) * | 2004-05-11 | 2012-09-05 | 松下电器产业株式会社 | 再生装置 |
KR100702854B1 (ko) * | 2004-12-14 | 2007-04-03 | 한국전자통신연구원 | 통합 스트리밍 콘텐츠 제작 및 실행 장치 및 방법 |
JP2006227843A (ja) * | 2005-02-16 | 2006-08-31 | Sony Corp | コンテンツ情報管理システム、コンテンツ情報管理装置及びコンテンツ情報管理方法、並びにコンピュータ・プログラム |
US20060259521A1 (en) * | 2005-05-16 | 2006-11-16 | Anthony Armenta | Interface for synchronization of documents between a host computer and a portable device |
US7684566B2 (en) | 2005-05-27 | 2010-03-23 | Microsoft Corporation | Encryption scheme for streamed multimedia content protected by rights management system |
US7461335B2 (en) * | 2005-05-31 | 2008-12-02 | Sap Ag | Dynamic conversion of data into markup language format |
US20080152165A1 (en) * | 2005-07-01 | 2008-06-26 | Luca Zacchi | Ad-hoc proximity multi-speaker entertainment |
US20070006078A1 (en) * | 2005-07-01 | 2007-01-04 | Microsoft Corporation | Declaratively responding to state changes in an interactive multimedia environment |
JP2009503757A (ja) * | 2005-07-22 | 2009-01-29 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 光ディスクプログラムの再生を制御する方法及び装置 |
WO2007013769A1 (en) * | 2005-07-29 | 2007-02-01 | Lg Electronics Inc. | Recording medium, method and apparatus for reproducing data, and method and apparatus for recording data |
WO2007018308A1 (en) | 2005-08-09 | 2007-02-15 | Matsushita Electric Industrial Co., Ltd. | Recording medium, playback apparatus, method and program |
US8321690B2 (en) | 2005-08-11 | 2012-11-27 | Microsoft Corporation | Protecting digital media of various content types |
US7783993B2 (en) * | 2005-09-23 | 2010-08-24 | Palm, Inc. | Content-based navigation and launching on mobile devices |
CN101313364B (zh) * | 2005-11-21 | 2011-12-21 | 皇家飞利浦电子股份有限公司 | 使用数字图像的元数据和内容特征来找到相关音频伴奏的系统和方法 |
JP2007257714A (ja) * | 2006-03-22 | 2007-10-04 | Toshiba Corp | 情報再生装置及び再生方法 |
US7801847B2 (en) * | 2006-03-27 | 2010-09-21 | Microsoft Corporation | Media file conversion using plug-ins |
US8010645B2 (en) * | 2006-05-12 | 2011-08-30 | Sharp Laboratories Of America, Inc. | Method and apparatus for providing feeds to users |
US20080009238A1 (en) * | 2006-07-05 | 2008-01-10 | Motorola, Inc. | Avoidance of multimedia signal degradation in a communication device located proximate to another multimedia signal source |
US7814412B2 (en) * | 2007-01-05 | 2010-10-12 | Microsoft Corporation | Incrementally updating and formatting HD-DVD markup |
US8161369B2 (en) | 2007-03-16 | 2012-04-17 | Branchfire, Llc | System and method of providing a two-part graphic design and interactive document application |
EP2247101A4 (en) * | 2008-02-19 | 2014-07-09 | Samsung Electronics Co Ltd | METHOD AND DEVICE FOR USING AN API-BASED IPTV SERVICE |
US8151179B1 (en) * | 2008-05-23 | 2012-04-03 | Google Inc. | Method and system for providing linked video and slides from a presentation |
US8235870B2 (en) | 2008-08-15 | 2012-08-07 | Phresh, Llc | Method and apparatus for integrating physical exercise and interactive multimedia |
KR101521595B1 (ko) * | 2008-10-14 | 2015-05-19 | 삼성전자 주식회사 | 인터렉티브 컨텐츠 구성을 위한 데이터 처리 장치, 그 방법및 기록매체 |
US9323730B2 (en) * | 2012-09-05 | 2016-04-26 | Hbr Labs Llc | Platform and method for real-time synchronized co-browsing of web pages |
US20140149606A1 (en) * | 2012-11-23 | 2014-05-29 | Samsung Electronics Co., Ltd. | Server, multimedia apparatus and control method thereof for synchronously playing multimedia contents through a plurality of multimedia devices |
US9529785B2 (en) | 2012-11-27 | 2016-12-27 | Google Inc. | Detecting relationships between edits and acting on a subset of edits |
US9971752B2 (en) | 2013-08-19 | 2018-05-15 | Google Llc | Systems and methods for resolving privileged edits within suggested edits |
US9348803B2 (en) | 2013-10-22 | 2016-05-24 | Google Inc. | Systems and methods for providing just-in-time preview of suggestion resolutions |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10312468A (ja) * | 1997-05-13 | 1998-11-24 | Nippon Telegr & Teleph Corp <Ntt> | シナリオ記述方式 |
JP2001075944A (ja) * | 1999-06-30 | 2001-03-23 | Sony Corp | コンテンツ生成方法及び装置、並びに、プログラム提供媒体 |
JP2002176638A (ja) * | 2000-12-07 | 2002-06-21 | Cyberspace:Kk | データ通信システムおよび装置、データ通信方法、記録媒体 |
JP2002268999A (ja) * | 2001-03-09 | 2002-09-20 | Toshiba Corp | コンテンツ再生方法及び装置 |
WO2002100101A2 (en) * | 2001-06-05 | 2002-12-12 | Koninklijke Philips Electronics N.V. | Method and apparatus for time shifting of broadcast content that has synchronized web content |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR0138845B1 (ko) * | 1994-12-13 | 1998-06-01 | 양승택 | 엠핵(mheg)엔진에서의 멀티미디어 정보 동기 제어기 및 그 제어방법 |
EP2101496B1 (en) * | 1996-02-28 | 2013-01-23 | Panasonic Corporation | High-resolution optical disk for recording stereoscopic video, optical disk reproducing device and optical disk recording device |
US6282714B1 (en) * | 1997-01-31 | 2001-08-28 | Sharewave, Inc. | Digital wireless home computer system |
US6243772B1 (en) * | 1997-01-31 | 2001-06-05 | Sharewave, Inc. | Method and system for coupling a personal computer with an appliance unit via a wireless communication link to provide an output display presentation |
US6631403B1 (en) * | 1998-05-11 | 2003-10-07 | At&T Corp. | Architecture and application programming interfaces for Java-enabled MPEG-4 (MPEG-J) systems |
TW498305B (en) * | 1999-03-10 | 2002-08-11 | Matsushita Electric Ind Co Ltd | Optical disc, optical disc recording and reproducing apparatus, and optical disc recording and reproducing method |
WO2000060598A1 (en) * | 1999-04-02 | 2000-10-12 | Matsushita Electric Industrial Co., Ltd. | Optical disc, recording device and reproducing device |
US7178106B2 (en) * | 1999-04-21 | 2007-02-13 | Sonic Solutions, A California Corporation | Presentation of media content from multiple media sources |
US7346920B2 (en) * | 2000-07-07 | 2008-03-18 | Sonic Solutions, A California Corporation | System, method and article of manufacture for a common cross platform framework for development of DVD-Video content integrated with ROM content |
KR100399999B1 (ko) * | 2001-02-05 | 2003-09-29 | 삼성전자주식회사 | 멀티스트림이 기록된 기록매체, 그 기록장치, 그기록방법, 그 재생장치, 및 그 재생방법 |
JP2002259720A (ja) * | 2001-03-02 | 2002-09-13 | Internatl Business Mach Corp <Ibm> | コンテンツ要約システム、映像要約システム、ユーザ端末、要約映像生成方法、要約映像受信方法、およびプログラム |
EP1267352A3 (en) * | 2001-06-14 | 2004-10-13 | Samsung Electronics Co., Ltd. | Information storage medium containing preload information, apparatus and method for reproducing therefor |
-
2003
- 2003-03-13 KR KR1020030015693A patent/KR20040080736A/ko not_active Application Discontinuation
-
2004
- 2004-03-12 RU RU2005109169/09A patent/RU2292584C2/ru active
- 2004-03-12 TW TW093106603A patent/TWI260510B/zh not_active IP Right Cessation
- 2004-03-12 JP JP2006507755A patent/JP2006523418A/ja active Pending
- 2004-03-12 BR BR0406193-4A patent/BRPI0406193A/pt not_active IP Right Cessation
- 2004-03-12 MX MXPA05003232A patent/MXPA05003232A/es active IP Right Grant
- 2004-03-12 EP EP04720268A patent/EP1602036A4/en not_active Withdrawn
- 2004-03-12 US US10/798,272 patent/US7401100B2/en not_active Expired - Fee Related
- 2004-03-12 CA CA002497778A patent/CA2497778A1/en not_active Abandoned
- 2004-03-12 CN CNA2004800009392A patent/CN1701321A/zh active Pending
- 2004-03-12 WO PCT/KR2004/000524 patent/WO2004081806A1/en active Application Filing
-
2008
- 2008-06-02 US US12/131,246 patent/US20080229181A1/en not_active Abandoned
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10312468A (ja) * | 1997-05-13 | 1998-11-24 | Nippon Telegr & Teleph Corp <Ntt> | シナリオ記述方式 |
JP2001075944A (ja) * | 1999-06-30 | 2001-03-23 | Sony Corp | コンテンツ生成方法及び装置、並びに、プログラム提供媒体 |
JP2002176638A (ja) * | 2000-12-07 | 2002-06-21 | Cyberspace:Kk | データ通信システムおよび装置、データ通信方法、記録媒体 |
JP2002268999A (ja) * | 2001-03-09 | 2002-09-20 | Toshiba Corp | コンテンツ再生方法及び装置 |
WO2002100101A2 (en) * | 2001-06-05 | 2002-12-12 | Koninklijke Philips Electronics N.V. | Method and apparatus for time shifting of broadcast content that has synchronized web content |
Also Published As
Publication number | Publication date |
---|---|
US7401100B2 (en) | 2008-07-15 |
TWI260510B (en) | 2006-08-21 |
CA2497778A1 (en) | 2004-09-23 |
RU2005109169A (ru) | 2005-09-20 |
US20080229181A1 (en) | 2008-09-18 |
EP1602036A1 (en) | 2005-12-07 |
WO2004081806A1 (en) | 2004-09-23 |
CN1701321A (zh) | 2005-11-23 |
RU2292584C2 (ru) | 2007-01-27 |
TW200421116A (en) | 2004-10-16 |
KR20040080736A (ko) | 2004-09-20 |
MXPA05003232A (es) | 2005-07-05 |
US20040255235A1 (en) | 2004-12-16 |
BRPI0406193A (pt) | 2005-08-09 |
EP1602036A4 (en) | 2009-06-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2006523418A (ja) | インタラクティブコンテンツ同期化装置及び方法 | |
JP4694813B2 (ja) | イベント発生情報が記録された情報保存媒体、その再生装置及び再生方法 | |
CA2780950C (en) | Storage medium storing text-based subtitle data including style information, and apparatus and method of playing back the storage medium | |
JP3953405B2 (ja) | 情報貯蔵媒体に記録されたコンテンツをインタラクティブモードにて再生する方法及びその装置 | |
JP5142453B2 (ja) | 再生装置 | |
JP2006518063A5 (ja) | ||
JP2012009040A (ja) | メディアストリームの選択用および上演用のブックマークおよびウオッチポイント | |
JP5285052B2 (ja) | モード情報を含む動画データが記録された記録媒体、再生装置及び再生方法 | |
KR102055766B1 (ko) | 동영상 요약 정보 재생 장치, 동영상 요약 정보 제공 서버 및 그 방법 | |
KR20060122662A (ko) | 메타 데이터를 제공하기 위한 애플리케이션이 포함된정보저장매체, 메타 데이터를 제공하는 장치 및 방법 | |
JP4194625B2 (ja) | 動画で再生される複数個のタイトルが記録された情報記録媒体、その再生装置及び再生方法 | |
JP2006524407A (ja) | 動画データ及び付加データを記録した情報記録媒体、その再生装置及び方法 | |
US7650063B2 (en) | Method and apparatus for reproducing AV data in interactive mode, and information storage medium thereof | |
WO2008108536A1 (en) | Method and apparatus for modifying text-based subtitles | |
US8326130B2 (en) | Video image data reproducing apparatus | |
JP4755217B2 (ja) | 動画で再生される複数個のタイトルが記録された情報記録媒体、その再生装置及び再生方法 | |
JP4191191B2 (ja) | 動画で再生される複数個のタイトルが記録された情報記録媒体、その再生装置及び再生方法 | |
KR101014665B1 (ko) | 프리로드 정보가 기록된 정보저장매체, 그 재생장치 및재생방법 | |
KR100553891B1 (ko) | 마크업 문서를 사용하여 av 데이터를 인터랙티브 모드로 재생하는 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070226 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100309 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20100803 |