JP4187394B2 - ストリーミング・メディアでのユーザによって制御される選択的オーバーレイのための方法および装置 - Google Patents
ストリーミング・メディアでのユーザによって制御される選択的オーバーレイのための方法および装置 Download PDFInfo
- Publication number
- JP4187394B2 JP4187394B2 JP2000266515A JP2000266515A JP4187394B2 JP 4187394 B2 JP4187394 B2 JP 4187394B2 JP 2000266515 A JP2000266515 A JP 2000266515A JP 2000266515 A JP2000266515 A JP 2000266515A JP 4187394 B2 JP4187394 B2 JP 4187394B2
- Authority
- JP
- Japan
- Prior art keywords
- streams
- video
- audio
- stream
- event
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 67
- 230000004044 response Effects 0.000 claims description 20
- 238000010586 diagram Methods 0.000 description 21
- 230000008569 process Effects 0.000 description 18
- 238000004891 communication Methods 0.000 description 11
- 125000004122 cyclic group Chemical group 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 6
- 230000001360 synchronised effect Effects 0.000 description 6
- 230000008859 change Effects 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 230000002093 peripheral effect Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000001914 filtration Methods 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 230000004807 localization Effects 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/60—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals
- H04N5/602—Receiver circuitry for the reception of television signals according to analogue transmission standards for the sound signals for digital sound signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/426—Internal components of the client ; Characteristics thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4341—Demultiplexing of audio and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
- H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/50—Tuning indicators; Automatic tuning control
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Human Computer Interaction (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
- Stereophonic System (AREA)
- Television Systems (AREA)
Description
【発明の属する技術分野】
本発明は、コンピュータ・ソフトウェアの分野に関し、具体的には、ユーザにストリーミング・メディアを供給する方法に関する。
【0002】
【従来の技術】
関連出願の相互参照
本発明は、本出願と同一の日付に出願され、本出願と同一の譲受人に譲渡され、参照によって本明細書に組み込まれる、米国特許出願第_______号明細書(整理番号AT9−99−250)および米国特許出願第_______号明細書(整理番号AT9−99−255)に関連する。
【0003】
「インターネットワーク」とも称するインターネットは、通信において、データ転送と、送信側ネットワークからのメッセージの受信側ネットワークによって使用されるプロトコルへの変換(必要であればパケットを用いる)を処理するゲートウェイによって一緒に接合された、おそらくは異種のコンピュータ・ネットワークの組である。先頭が大文字の用語「Internet」(本明細書では「インターネット」と表記する)は、TCP/IPプロトコル集を使用するネットワークおよびゲートウェイの集合を指す。
【0004】
インターネットは、情報と娯楽の両方の供給源として、文化的に定着しつつある。多くの企業が、マーケティング活動の一部に組み込まれた形でインターネット・サイトを作成し、その企業が提供する製品またはサービスについて消費者に知らせ、ブランド・ロイヤルティを生むための他の情報を提供している。米国の連邦、州、および地方の政府機関の多く、特に国税庁および州務長官など、事実上社会のすべての階層と対話しなければならない機関も、情報のためにインターネット・サイトを使用している。情報ガイドまたは公文書の探索可能データベースをオンラインで提供することによって、運営コストを減らすことができる。
【0005】
さらに、インターネットは、マルチメディア・コンテンツを配布するために、従来の地理的境界および技術的境界を破壊した。従来、マルチメディア・コンテンツは、放送テレビジョン(時にはラジオと組み合わされる)、映画(フィルム)、および、より最近ではケーブル・テレビジョンを介して配布されてきた。このマルチメディア・コンテンツのほとんどが、限られた地理的区域内でのみ使用可能であり、1つの言語で提示された。
【0006】
より広範囲の聴衆に到達し、消費者により多くの選択肢を提供するために、テレビジョン方法は、SAP放送を使用した。このSAP放送では、テレビジョン放送に、同一のビデオ・コンテンツに関する複数の異なる言語のオーディオ・トラックが含まれる。しかし、SAPは、すべてか無かの選択である。すなわち、ユーザは、1つのオーディオ・トラックを選択しなければならない。複数のオーディオ・トラックを一緒にミキシングする可能性は、SAPを使用する場合には存在しない。
【0007】
テレビ放送会社が、番組編成の提示を介してユーザにより多くの選択肢を提供するために使用したもう1つの方法が、「同時放送」である。この技術では、同時に放送されるテレビジョン番組に対応する異なるオーディオ・トラックが、ラジオを介して放送された。しかし、これには、2つの異なるメディアの使用が伴う。さらに、オーディオ・サウンド・トラックの、選択的にフィルタリングできる部分ではなく、全体だけが放送された。さらに、この方法には、他のビデオ構成要素が全く含まれず、単一の制御点がなかった。「同時放送」は、2つの制御点すなわち、テレビジョンと、それとは別のラジオを必要とした。
【0008】
【発明が解決しようとする課題】
現在、誰もが、世界中のどこにいても、世界中のどこかから放送されるコンテンツを見る潜在能力を得ることができる。この潜在能力は、実現される必要があり、世界市場での競争相手から放送会社を差別化する方法として視聴者中心のコンテンツを提供しながら総合的な帯域幅を減らすために新しい技術を必要とする。また、視聴者がイベントまたは番組を見るのを奨励するために、できる限り多数の異なる種類の視聴者にアピールすることが望ましい。場合によっては、イベントまたは番組が、異なる言語で放送される場合がある。この種のカスタマイズは、通常は、言語ごとに別々の放送を必要とする。この種のカスタマイズは、版ごとのオーディオおよびビデオの帯域幅を必要とする。その結果、各版のイベントを再放送することによって、帯域幅が浪費される。したがって、現在の消費者の視聴パターン、要求、および必要に合わせるためのイベントの提示のカスタマイズを可能にし、イベントをカスタマイズするのに必要な帯域幅を減らす、改良された方法および装置を有することが有利である。
【0009】
【課題を解決するための手段】
本発明は、コンピュータ化されたマルチメディア・システムでのイベントのマルチメディア提示を調整する方法および装置を提供する。ビデオ・ストリームの組、オーディオ・ストリームの組、および情報ストリームの組が、イベントのために、コンピュータ化されたマルチメディア・システムに結合されたネットワークを介して供給される。ビデオ・ストリームは、イベントのビデオ・ストリームの組から提示のために選択される。オーディオ・ストリームは、イベントのオーディオ・ストリームの組から提示のために選択される。情報ストリームは、イベントの情報ストリームの組から提示のために選択される。ユーザ入力に応答して、選択されたビデオ・ストリームおよび選択されたオーディオ・ストリームが、ビデオ出力装置およびオーディオ出力装置のそれぞれの部分に割り当てられる。イベントは、選択されたビデオ・ストリームおよびオーディオ・ストリームの割り当てに従って提示される。
【0010】
【発明の実施の形態】
ここで図面、具体的には図1を参照すると、本発明を実施することができる分散データ処理システムの絵図が示されている。
【0011】
分散データ処理システム100には、ネットワーク102が含まれ、このネットワーク102は、分散データ処理システム100内で接続されるさまざまな装置およびコンピュータの間の通信リンクを提供するのに使用される媒体である。ネットワーク102には、ワイヤまたは光ファイバ・ケーブルなどの永久的接続、または電話接続を介して行われる一時的接続を含めることができる。
【0012】
図示の例では、サーバ・システム104が、記憶装置106と共にネットワーク102に接続される。サーバ・システム104には、データ・ストリーミングを提供するための1つまたは複数のサーバ・コンピュータを含めることができる。たとえば、あるサーバを、データ・ストリームの管理および制御のために使用することができ、サーバ・システム104内の別のサーバを、クライアントへのリソース・データ・ストリームを始めるのに使用する。これらのデータ・ストリームの情報は、サーバ・システム104内、または、記憶装置106などのリモート記憶装置上に格納することができる。さらに、クライアント108、110、および112も、ネットワーク102に接続される。これらのクライアント108、110、および112は、たとえば、制限なしに、パーソナル・コンピュータ、セット・トップ・ボックス、ウェブTV装置、またはデータ・ストリーム受信用の他のハードウェア装置とすることができる。クライアント108、110、および112は、サーバ・システム104に対するクライアントである。図示の例では、サーバ・システム104が、クライアント108、110、および112にデータ・ストリームを供給する。分散データ処理システム100には、図示されていない追加のサーバ、クライアント、および他の装置を含めることができる。
【0013】
クライアント108、110、および112には、サーバ・システム104または図示されていない他のサーバ・システムから受信したデータ・ストリームのミキシングおよびフィルタリングのための機構が含まれる。これらの機構は、図示の例では、ハードウェア、ソフトウェア、ファームウェア、またはそれらの組合せで実施することができる。
【0014】
分散データ処理システム100は、たとえばインターネットとすることができ、ネットワーク102は、TCP/IPプロトコル集を使用して互いに通信するネットワークおよびゲートウェイの全世界の集合を表すものとすることができる。インターネットの心臓部には、データおよびメッセージを経路指定する数千の商用コンピュータ・システム、政府コンピュータ・システム、教育コンピュータ・システムおよび他のコンピュータ・システムからなる主要なノードまたはホスト・コンピュータの間の高速データ通信回線のバックボーンがある。
【0015】
ネットワーク102のもう1つの実施形態は、広帯域統合サービス・ディジタル網(BISDN)とも称する、広帯域ネットワークとしての実施形態である。そのようなネットワークでは、広帯域サービスは、通常、1.5Mbpsまたは統合サービス・ディジタル網(ISDN)の1次速度、T1、もしくはDS1より高いデータ伝送速度をサポートすることができるチャネルを提供する。広帯域システムでは、転送モードの種類は、通常は、ISDNのフレームワークを提供する同期光通信ネットワーク(SONET)技術およびインテリジェント・ネットワーク(IN)技術を使用する非同期転送モード(ATM)である。そのようなネットワークでは、音声、データ、ビデオ、およびオーディオを含む情報が、ネットワークを介してさまざまなクライアントに転送される。
【0016】
さらに、ネットワーク102は、実施形態に応じてケーブル通信システムとすることもできる。もちろん、分散データ処理システム100は、たとえばイントラネットまたはローカル・エリア・ネットワークなどの複数の異なるタイプのネットワークとして実施することもできる。図1は、例示を目的とするものであり、本発明の処理に関するアーキテクチャ的制限を目的とするものではない。
【0017】
図2を参照すると、本発明に従って、図1のサーバ・システム104などのサーバ・システムとして実施することができるデータ処理システムのブロック図が示されている。データ処理システム200は、サーバ・システム内で、ビデオ・サーバまたは他のアプリケーション・サーバとして使用することができる。
【0018】
データ処理システム200は、システム・バス206に接続された複数のプロセッサ202および204を含む対称マルチプロセッサ(SMP)システムとすることができる。その代わりに、単一プロセッサ・システムを使用することができる。システム・バス206には、メモリ・コントローラ/キャッシュ208も接続され、メモリ・コントローラ/キャッシュ208は、ローカル・メモリ209へのインターフェースを提供する。入出力バス・ブリッジ210は、システム・バス206に接続され、入出力バス212へのインターフェースを提供する。メモリ・コントローラ/キャッシュ208および入出力バス・ブリッジ210は、図示のように統合することができる。
【0019】
入出力バス212に接続されたPCI(Peripheral Component Interconnect)バス・ブリッジ214は、PCIローカル・バス216へのインターフェースを提供する。複数のモデム218およびネットワーク・アダプタ220を、PCIローカル・バス216に接続することができる。通常のPCIバス実施形態では、4つのPCI拡張スロットまたはアドイン・コネクタがサポートされる。図1のクライアント108、110、および112への通信リンクは、アドイン・ボードを介してPCIローカル・バス216に接続されたモデム218およびネットワーク・アダプタ220を介して提供することができる。
【0020】
追加のPCIバス・ブリッジ222および224は、追加のPCIバス226および228へのインターフェースを提供し、このPCIバス226および228から、追加のモデムまたはネットワーク・アダプタをサポートすることができる。この形で、データ処理システム200は、複数のネットワーク・コンピュータに接続することができる。メモリ・マップ式グラフィックス・アダプタ230およびハード・ディスク232も、図示のように、直接にまたは間接的のいずれかで、入出力バス212に接続することができる。
【0021】
当業者は、図2に示されたハードウェアを変更できることを諒解するであろう。たとえば、光ディスク駆動装置および類似物などの他の周辺装置も、図示のハードウェアに追加してまたはその代わりに、使用することができる。図示の例は、本発明に関するアーキテクチャ的制限を暗示する目的のものではない。
【0022】
図2に示されたデータ処理システムは、たとえば、拡張対話式エグゼクティブ(AIX)オペレーティング・システムが稼動する、米国ニューヨーク州アーモンクのInternational Business Machines Corporation社の製品であるIBM RS/6000とすることができる。
【0023】
ここで図3を参照すると、本発明を実施することができるデータ処理システムのブロック図が示されている。データ処理システム300は、コンピュータの1例である。データ処理システム300では、PCI(Peripheral Component Interconnect)ローカル・バス・アーキテクチャが使用される。図示の例ではPCIバスが使用されるが、マイクロ・チャネルおよびISAなどの他のバス・アーキテクチャを使用することができる。プロセッサ302および主記憶304は、PCIブリッジ308を介してPCIローカル・バス306に接続される。PCIブリッジ308には、プロセッサ302用の統合されたメモリ・コントローラおよびキャッシュ・メモリを含めることもできる。PCIローカル・バス306への追加の接続は、直接構成要素相互接続を介するかアドイン・ボードを介して行うことができる。図示の例では、ローカル・エリア・ネットワーク(LAN)アダプタ310、SCSIホスト・バス・アダプタ312、および拡張バス・インターフェース314が、直接構成要素接続によってPCIローカル・バス306に接続される。対照的に、オーディオ・アダプタ316、グラフィックス・アダプタ318、およびオーディオ/ビデオ・アダプタ(A/V)319は、拡張スロットに挿入されるアドイン・ボードによってPCIローカル・バス306に接続される。拡張バス・インターフェース314は、キーボードおよびマウス・アダプタ320、モデム322、および追加メモリ324の接続を提供する。図示の例では、SCSIホスト・バス・アダプタ312は、ハード・ディスク装置326、テープ駆動装置328、CD−ROM駆動装置330、およびディジタル多用途ディスク読取専用メモリ装置(DVD−ROM)332の接続を提供する。通常のPCIローカル・バス実施形態は、3つまたは4つのPCI拡張スロットまたはアドイン・コネクタをサポートする。
【0024】
オペレーティング・システムが、プロセッサ302上で稼動し、図3のデータ処理システム300内のさまざまな構成要素を調整し、それらの制御を提供するのに使用される。オペレーティング・システムは、International Business Machines Corporation社が販売するOS/2などの市販オペレーティング・システムとすることができる。「OS/2」は、International Business Machines Corporation社の商標である。Javaなどのオブジェクト指向プログラミング・システムが、オペレーティング・システムと共に稼動することができ、これによって、データ処理システム300上で実行されるJavaプログラムまたはJavaアプリケーションからオペレーティング・システムへの呼出しが提供される。オペレーティング・システム、オブジェクト指向オペレーティング・システム、およびアプリケーションまたはプログラムのための命令は、ハード・ディスク装置326などの記憶装置に配置され、プロセッサ302による実行のために主記憶304にロードすることができる。
【0025】
当業者は、図3のハードウェアを実施形態に応じて変更できることを諒解するであろう。たとえば、光ディスク駆動装置および類似物などの他の周辺装置を、図3に示されたハードウェアに追加してまたはその代わりに、使用することができる。図示の例は、本発明に関するアーキテクチャ的制限を暗示する目的のものではない。たとえば、本発明の処理は、マルチプロセッサ・データ処理システムに適用することができる。さらに、データ処理システム300は、ノートブック・コンピュータまたはパーソナル・ディジタル・アシスタント(PDA)の形とすることができる。さらに、このデータ処理システムは、制限なしに、たとえば、本発明の処理を実施するのに適当なハードウェアおよびソフトウェアを含むテレビジョンまたはセットトップ・ケーブル・ボックスとすることができる。
【0026】
本発明は、帯域幅使用量を減らし、番組またはイベントの改良されたクライアント・カスタマイズを提供する、方法、装置、およびコンピュータ実施される命令を提供する。本発明の機構は、マルチメディア・データ処理システムでのマルチメディア提示の調整を対象とする。これは、番組またはイベントを、異なるオーディオ構成要素および異なるビデオ構成要素に関する異なるデータ・ストリームに分解することによって達成される。追加のオプションのデータ・ストリームを追加して、番組またはイベントのカスタマイズを可能にすることができる。データ処理システムは、番組またはイベントに関連するビデオ・ストリームの組およびオーディオ・ストリームの組を受信することができる。これらのデータ・ストリームを、ユーザ入力に基づいて選択的に提示することができる。ユーザ入力に応じて、ビデオ・データ・ストリームおよびオーディオ・データ・ストリームのある部分を提示し、それ以外の部分を省略することができる。さらに、ユーザ入力によって、ビデオ・ストリームを選択的に表示画面に配置することができる。また、テキストまたはグラフィックスを含む情報ストリームを受信し、番組またはイベントの提示に関連して選択的に表示することができる。ユーザ・サイトでのこれらのデータ・ストリームの組合せによって、複数の版のイベントを視聴者に放送する必要のないカスタマイズがもたらされる。
【0027】
視聴者が番組またはイベントをカスタマイズできるようにすることによって、番組発信元が異なる地理的領域または異なる視聴者に基づいて番組またはイベントの複数の版を放送する必要がなくなるので、帯域幅使用量を減らすことができる。
【0028】
ここで図4に移ると、本発明の処理を大まかに示すブロック図が示されている。図3のデータ処理システム300などのクライアント400は、発信元サーバ404に番組編成コンテンツの要求402を送信する。発信元サーバ404は、図2のデータ処理システム200などのデータ処理システムであり、クライアント400によって要求された番組編成コンテンツのホストである。発信元サーバ404は、1組のデータ・ストリーム406として、要求された番組編成をクライアント400に送り返す。データ・ストリーム406は、番組編成またはイベントをクライアント400のユーザに提示するのに使用することができる。さらに、データ・ストリーム406には、1つまたは複数のビデオ・ストリーム構成要素、1つまたは複数の情報ストリーム構成要素、および1つまたは複数のオーディオ・ストリーム構成要素を含めることができる。
【0029】
クライアント400および発信元サーバ404を、これらが直接に接続されているかのように説明し、図4に図示した。しかし、クライアント400および発信元サーバ404は、分散データ処理システム100などの分散データ処理システムの一部であり、図1のネットワーク102などのネットワークを介して互いにリンクされることが好ましい。
【0030】
次に図5に移ると、本発明によるメディア・ストリームの選択に使用される機能的構成要素のブロック図が示されている。この例では、クライアント500に、出力システム506への出力のためにネットワーク504からデータ・ストリーム510を受信するデータ・ストリーム処理システム502が含まれる。ネットワーク504から受信されるデータ・ストリームの選択は、ユーザ制御508を介して制御され、このユーザ制御508は、データ・ストリーム処理システム502を制御する。
【0031】
複数のデータ・ストリームを、ネットワーク504から接続510を介して受信することができる。これらのデータ・ストリームは、たとえば、オーディオ、ビデオ、テキスト、グラフィックス、または、出力システム506を介してクライアント500のユーザに表示することのできる他の情報とすることができる。データ・ストリーム処理システム502によるネットワーク504からのデータ・ストリームの選択フィルタリングは、ユーザ制御508を介して制御される。選択されたデータ・ストリームまたはデータ・ストリームの選択された部分は、出力システム506を介してユーザに表示され、この出力システム506は、高精細度テレビジョンまたはスピーカなどの表示装置およびオーディオ出力装置の駆動に使用することができる。
【0032】
ここで図6を参照すると、本発明の好ましい実施形態による、例の表示を示す図が示されている。この例では、提示システム600が、表示装置602、オーディオ・ソース604、606、および608と共に提示されている。提示システム600は、クライアントの一部であり、これを介してユーザが番組を視聴する。この例では、オーディオ・ソース604は、左スピーカであり、オーディオ・ソース608は、右スピーカである。オーディオ・ソース606は、この例では中央スピーカである。ビデオ610は、テキスト・ボックス612、テキスト・ボックス614、およびビデオ616と共に表示装置602に表示される。ビデオ610は、この例では主データ・ストリームであり、テキスト・ボックス612およびテキスト・ボックス614が、ビデオ610の上にオーバーレイされている。
【0033】
テキスト・ボックス612およびテキスト・ボックス614は、この例では2つのデータ・ストリームから生成される。テキスト・ボックス612は、静止テキスト・ボックスであり、番組に関する統計、これから現れる番組、またはユーザが選択できる他の情報などの情報を供給するのに使用することができる。この例のテキスト・ボックス614は、「ポップアップ」であり、ビデオ610内の特定の物体または人物に関する情報を提供するのに使用することができる。
【0034】
さらに、テキスト・ボックス614内のデータ・パケットには、特定の物体または人物に追従してテキスト・ボックス614を再位置決めするためのデータを含めることができる。ビデオ616は、別のデータ・ストリームを使用して表示されて、ユーザに追加の眺めを提供する。たとえば、ビデオ616は、番組内の異なる眺めを提供することができ、また、ビデオ610内で現在表示されていないシーンを示すことができる。当初、ユーザは、オーディオ・ソース604、606、および608を介する供給のためにさまざまなオーディオ・ストリームを選択することができる。たとえば、表示される番組編成がスポーツ・イベントである場合には、ユーザは、特定の選手を選択し、その選手に関するオーディオ情報をオーディオ・ソース608を介して再生させるか、その選手の位置に配置されたマイクロフォンからの直接供給をオーディオ・ソース604を介して再生させることができる。
【0035】
たとえば、インターネットまたは広帯域ネットワークを介して放送されるフットボールの試合を検討されたい。エンド・ユーザは、複数のオーディオ・ストリームから選択し、複数のオーディオ・ストリームをミキシングすることができる。たとえば、どちらかのチームのクォーターバックのマイクロフォン、どちらかのチームの監督のマイクロフォン、またはアナウンサのオーディオ・ストリームであり、これらが複数存在する(たとえば、ジョン・マッデン(John Madden)、フィル・シムズ(Phil Simms)、ハウイ・ロング(Howie Long)、ブルース・ビードル(Bruce Beadle)、マイケル・パオリーニ(Michael Paolini)など)可能性がある。この形で、ユーザは、ジョン・マッデンが不快だと思った場合に、彼の音声を聞こえなくする(選択解除する)ことができる。その代わりに、ユーザは、チャネル/カバレッジを変更する必要なしに、49erのクォーターバックのマイクロフォン(または対戦相手のチーム、好きな別のアナウンサ、または完全に別の言語)を聞くことを選択することができる。
【0036】
フットボールの例をさらに続けると、本発明を用いると、このスポーツをよく知らない視聴者のために別のオーディオ・トラックを設けることが可能である。この別のオーディオ・トラックでは、試合のルールを説明し、実況をさらに詳細に説明することになるはずである。また、フットボール固有の専門用語も説明されるはずである。ユーザは、この追加情報をテキスト・ストリームとして提示させることを選択することができる。
【0037】
本発明の使用のもう1つの例では、フットボールの主題を継続すると、ユーザが、チームAの選手の音声を右チャネル、チームBの選手の音声を左チャネル、アナウンサの音声を後チャネルに配置することができる。さらに、ユーザは、ボールを持っている選手を選択し、この選手の音声が常に中央チャネルになるようにすることができる。
【0038】
ビデオを表す1つの主データ・ストリーム(どのオーディオ・オーバーレイ・ストリームが選択されていても変化しない)と、オーディオ・オーバーレイまたはビデオ・オーバーレイを表す多数の小さいアドオン・データ・ストリームを、番組の提示に使用することができる。これらのストリームは、互いにミキシングするか、チャネル(左、右、後、中央など)またはDolby Laboratories社の最新の「Dolby Digital」または他の類似技術を使用して3次元定位位置に割り当てることができる。さらに、音量を、オーバーレイごとに調整することができる。「Dolby Digital」などの技術に関する情報は、米国特許第5912976号明細書に記載されている。
【0039】
ビデオ・オーバーレイに関して、複数のビデオ・オーバーレイをストリーム化し、オーディオ・ストリーミングに似た形で選択し、ミキシングして、最終的なビデオに「オーバーレイ」することもできる。たとえば、所望のオーバーレイが、テキストを含む、特定のビデオ表示位置にある吹き出し形のポップアップである場合には、追加のオーバーレイ・ストリームは、ビデオ自体を有する必要はなく、その代わりにオーバーレイ・ビデオを作成するための情報を有するはずである。したがって、データ・ストリームのサイズは、主ビデオ・ストリームよりはるかに小さくなるはずである。さらに、イベントのために選択されたデータ・ストリームに加えて、たとえば株式市況データまたはニュースの見出しなどの関連しない情報を、ユーザに提示することもできる。たとえば、見られているイベントまたは番組編成が、フットボールの試合である場合に、選手に関する統計などのデータを有するポップアップ吹き出しの表示専用のビデオ・オーバーレイ・ストリームを有することが可能であり、このポップアップ吹き出しは、その選手自身の上に表示することができる。さらに、賭けの配当率、選手に関する他の興味深い事実、またはイベントに関する規則および情報を、この形で表示することができる。別のタイプのデータ・ストリームには、経歴のタグを付けられた選手の埋込み画像を含めることもできる。
【0040】
他の種類の番組編成の場合、他のポップアップ・ウィンドウを提供することができる。たとえば、殺人ミステリ番組の場合、将来の出来事に関するヒントを与えるポップアップ・ウィンドウを表示することができ、俳優、脚本、または演出家に関する事実も、番組に関連して表示することができる。殺人ミステリ番組の場合、ユーザによって行われる選択に応じて、異なるレベルのヒントを与えることができる。
【0041】
この形で、フットボールの試合の例の文脈では、たとえば、選手に関する統計(おそらく選手自身の上に表示される)、賭けの配当率、配当または興味深い事実、何がおきているかと規則を説明する情報(初心者向け)、異なる進行中のスポーツ・イベント・データの要約(進行中の他のゲームからのスコアおよび統計など)、株式市場データ、およびニュースの見出しなどのデータを含むポップアップ吹き出しを表示するための専用のビデオ・オーバーレイ・ストリームを有することが可能である。もう1つのストリーム・タイプには、経歴のタグを付けられた選手の埋込み画像を含めることもできる。
【0042】
もう1つの実施形態では、オーバーレイを選択可能にすることが可能である。すなわち、ユーザは、オーバーレイ・ストリームの「クリック」と同等のことを行って、追加のオーバーレイ・ストリームにトリガを掛けるか、それを定位置にロックすることができる。たとえば、選手の「氏名オーバーレイ」を選択することによって、たとえば、その選手の経歴を有するオーバーレイを出すことができる。1方向システムでは、これは、すべての選手の経歴を継続的にサイクルするオーバーレイ・チャネルを有し、クライアントに放送の時点で興味のある経歴を「選択」させることによって行うことができる。
【0043】
さらに、ユーザは、自分のクライアントを使用して異なるオプションを選択することができ、したがって、放送中に視聴したい情報のより多くの制御を有することができる。
【0044】
ここで図7ないし10に移ると、本発明の好ましい実施形態に従ってクライアントに送信されるデータ・ストリームに含まれるデータ構造を示す図が示されている。図7では、データ・パケット700が示されており、このデータ・パケットには、ヘッダ702およびペイロード704が含まれる。ヘッダ702には、データ・パケット700のペイロード704に含まれるデータの経路指定および処理に使用される情報が含まれる。
【0045】
図8では、データ・パケット700などのデータ・パケット内にあるヘッダ情報の例が示されている。この例では、ヘッダ706に、IDフィールド708、チャネル・フィールド710、位置フィールド712、および音量フィールド714が含まれる。
【0046】
この例では、ヘッダ706は、オーディオ・パケットを識別するヘッダである。IDフィールド708は、データ・パケットのタイプを識別するのに使用される。この例のチャネル・フィールド710は、データ・パケットがユーザに提示される1つまたは複数のチャネルを識別するのに使用することができる。たとえば、チャネル・フィールド710は、サラウンド・システムのチャネルなどのチャネルを識別するのに使用することができる。チャネルは、この例では、右、左、後、または中央である。さらに、Dolby Digitalなどのサウンド技術を使用する3次元定位位置を使用することができるように、位置フィールド712も含まれる。この定位情報によって、ユーザによる変更が可能なデフォルト位置決めを供給することができる。音量フィールド714は、このデータ・パケットのデータの音量を他のデータ・パケットに対して相対的に調整できるようにして、異なるデータ・ストリームのオーバーレイまたは強調を可能にするために含まれる。オーディオ情報の提示のために、他のフィールドを、ヘッダ706に示されたフィールドに追加してまたはその代わりに使用することができる。
【0047】
図9のヘッダ716は、ビデオ・ストリーム内で使用されるビデオ・パケットに見られるヘッダ情報の例である。この例では、ヘッダ716に、IDフィールド718、タイム・スタンプ・フィールド720、およびCRCフィールド722が含まれる。IDフィールド718は、パケット内に含まれるデータのタイプを識別するのに使用され、タイム・スタンプ・フィールド720は、この例では、同期化の目的に使用される。CRCフィールド722は、実施形態に応じて、エラー検出または同期化の目的に使用することができる。CRCフィールド722が、同期化のために使用される場合には、CRCデータが、別のデータ・ストリームについて計算され、視聴者に送信または放送される前にこのフィールドに配置される。このCRCデータは、たとえば、他のデータ・ストリームのフレームまたはフレームの一部について計算することができる。このデータ・ストリームと他のデータ・ストリームを受信した時に、CRCデータを、他のデータ・ストリームのフレームについて計算する。この計算されたCRCデータを、CRCフィールド722に格納されたCRCデータと比較する。これらのCRC値の間の一致を使用して、2つのデータ・ストリームの間の同期点を識別する。
【0048】
次に、図10に、ビデオ・ストリーム内のデータ・パケットに使用されるヘッダのもう1つの例を示す。ヘッダ724には、IDフィールド726、タイプ・フィールド728、位置フィールド730、持続時間フィールド732、およびZ深さフィールド734が含まれる。IDフィールド726は、ビデオ・データを含むものとしてこのデータ・パケットを識別するのに使用される。タイプ・フィールド728は、この例では、テキストなどのビデオのタイプまたは動画ビデオ・ストリーム内のフレームを識別するのに使用することができる。位置フィールド730は、画面上の、データを表示する位置を識別するのに使用することができる。持続時間フィールド732によって、データを表示する時間を識別することができる。Z深さフィールド734は、このデータが表示される、他のビデオ・ストリームに対する相対的な深さまたは順序を識別するのに使用することができる。
【0049】
この例では、ヘッダ724は、画面上の吹き出しまたはポップアップとして表示されるテキストを含むビデオ・ストリームに使用されるヘッダの例である。この場合、持続時間フィールド732によって、テキストが表示される長さが識別され、Z深さフィールド734によって、他のビデオ・ストリームに関してテキストがどこに配置されるかが識別される。Z深さは、ビデオ・ストリームまたはオーバーレイが表示装置に表示される順序を決定するのに使用される。位置フィールド730は、画面上のXY位置を与える。ポップアップ内に表示されるテキストは、ペイロード内にある。この形で、テキスト表示専用のビデオ・オーバーレイ・ストリームを、動画ビデオ・データ・ストリームと共に使用することができる。
【0050】
本発明は、これらの異なるデータ・ストリームの選択可能性も提供する。たとえば、ユーザは、選択されたボタンを押して、追加のオーバーレイ・ストリームにトリガを掛けるか、ストリームを定位置にロックすることができる場合がある。たとえば、選手の「氏名オーバーレイ」を選択することによって、その選手の経歴を含むオーバーレイを出すことができる。1方向システムでは、これは、すべての選手の経歴を継続的にサイクルするオーバーレイ・チャネルを有し、クライアント計算機に放送の時点で興味のある経歴を選択させることによって行うことができる。この形で、ユーザは、異なるオプションを選択し、番組中にユーザが視聴を望む情報に対するより多くの制御を有することができる。選択は、使用中のネットワークの帯域幅およびタイプに応じて、1方向通信または両方向通信を介して実施することができる。
【0051】
オーバーレイ・ストリームは、サーバから制御することができる。その場合には、コマンドをオーバーレイに埋め込むことができ、また、コマンドの組を埋め込んで、クライアント側でオーバーレイの選択または選択解除を行わせることができる。そのような機構を用いると、選択されたオーバーレイをオフに切り替えて重要なイベントを放送し、その後、前の番組編成を再開することが可能になる。
【0052】
ここで図11に移ると、本発明の好ましい実施形態による、データ・ストリームを処理するのに使用される処理の流れ図が示されている。まず、ユーザが、分散データベースから取り出す番組編成を選択する(ステップ800)。ユーザは、選択した番組に対応する複数のビデオ・ストリームおよびオーディオ・ストリームを受信する(ステップ802)。ユーザは、リアル・タイムで直接にまたはユーザ定義の構成の使用を介してのいずれかでオーディオ・ストリームを選択し(ステップ804)、複数のオーディオ・ストリームが選択された場合(ステップ806)、ユーザは、選択したオーディオ・ストリームの提示プロファイルを構成する(ステップ808)。たとえば、3つのオーディオ・ストリームが選択される場合、ユーザは、1つのオーディオ・ストリームを左チャネル、1つのオーディオ・ストリームを中央チャネル、1つのオーディオ・ストリームを右チャネルで再生するようにシステムを構成することができる。その代わりに、ユーザは、あるオーディオ・ストリームの音量が他の2つのオーディオ・ストリームの音量より大きくなるように、選択されたオーディオ・ストリームの提示を構成することができる。
【0053】
次に、ユーザは、受信した複数のビデオ・ストリームから、表示されるビデオ・ストリームを1つまたは複数選択する(ステップ811)。複数のビデオ・ストリームが選択される場合(ステップ814)、ユーザは、複数のビデオ・ストリームの提示を構成する(ステップ816)。たとえば、あるビデオ・ストリームをビデオ表示装置の左側に提示し、第2のビデオ・ストリームをビデオ表示装置の右側に提示することができる。もう1つの例では、あるビデオ・ストリームがビデオ表示画面全体を占め、第2のビデオ・ストリームを第1のビデオ・ストリームの中の小さいウィンドウに配置することができる。また、ビデオ・ストリームは、不透明度およびスケーリングなどならびに他の要因について構成可能である。不透明度とは、イベントにオーバーレイされるメニューで、メニューを通してイベントを見ることができる場合の半透明性である。スケーリングは、ビデオ・ストリームの表示装置での表示のサイズを指定するのに使用することができる。
【0054】
ユーザによってメディア・ストリームが選択され、構成された後に、オーディオ・ストリームとビデオ・ストリームを互いに同期化し(ステップ818)、ユーザが構成した形でユーザに提示する(ステップ820)。
【0055】
ステップ806をもう一度参照すると、複数のオーディオ・ストリームが選択されない場合には、ユーザは、受信した複数のビデオ・ストリームから、表示されるビデオ・ストリームを1つまたは複数選択する(ステップ811)。
【0056】
ステップ814をもう一度参照すると、複数のビデオ・ストリームが選択されない場合には、オーディオ・ストリームとビデオ・ストリームを互いに同期化し(ステップ818)、ユーザが構成した形でユーザに提示する(ステップ820)。複数の機構を、データ・ストリームの同期化に使用することができる。たとえば、各メディア・ストリームで、データの各パケットと共にタイム・スタンプを送信することができ、同一のタイム・スタンプを有するデータ・パケットが同時に提示されるように、選択されたデータ・ストリームのそれぞれを同期化してユーザに提示する。
【0057】
各データ・ストリームに、周期的な割合で現れる、データ内のスパイクを含めることもできる。データ内のスパイクは、たとえば、ビデオもオーディオも含まないデータ・パケットとすることができる。さらに、各データ・ストリームには、より長い周期的な割合で現れる、より大きいスパイクが含まれる。たとえば、短い方のスパイクが、30フレームごとに現れ、長い方のスパイクが、10秒ごとに現れるものとすることができる。選択されたデータ・ストリームは、スパイクがデータ・ストリーム内で同時に現れるようにユーザに提示されるように同期化することができる。長い方のスパイクによって、データ・ストリームが1つまたは2つの小さいデータ・スパイクの期間だけ離れた場合に、システムが、それ自体を周期的に再同期化できるようになる。
【0058】
同期化の第3の方法が、巡回冗長検査(CRC)値である。CRCデータを使用するデータ・ストリームの同期化には、第1のデータ・ストリームに関するCRCデータの計算と、この計算された値を第2のデータ・ストリームのデータ・パケットのヘッダに置くことが含まれる。CRC値は、第1のデータ・ストリームのデータ・パケットと同期していなければならない第2のデータ・ストリームのデータ・パケットに置かれる。
【0059】
図12に移ると、本発明の好ましい実施形態による、データ・ストリームの同期化に使用されるCRC値を生成するための処理の流れ図が示されている。図示の処理は、ビデオ・ストリームに使用されるが、他のタイプのデータ・ストリームに適用することができる。
【0060】
この処理は、未処理のフレームを選択することによって開始される(ステップ900)。このステップでは、データ・ストリームとして送信されるコンテンツの最初の未処理のフレームを選択する。その後、そのフレームのCRC値を計算する(ステップ902)。CRC値は、フレーム全体またはフレームの異なる部分について計算することができる。たとえば、CRC値は、フレームの最初の5バイト、フレームの中央の5バイト、およびフレームの最後の5バイトに基づくものとすることができる。
【0061】
次に、第2データ・ストリームのうちで、このフレームと同期化される部分を識別する(ステップ904)。その後、データ・ストリームのその部分のデータ・パケットのヘッダにCRC値を置く(ステップ906)。その後、追加の未処理のフレームが処理に関して存在するかどうかに関する判定を行う(ステップ908)。追加の未処理のフレームが存在する場合、この処理はステップ900に戻る。そうでない場合には、処理が終了する。
【0062】
図12の処理は、データ・ストリームを送信または放送する時に使用することができる。その代わりに、データ・ストリームの送信または放送の前にこの処理を開始することができる。その場合には、CRC値を記憶し、データ・ストリームを送信する時に第2データ・ストリームに追加することができる。
【0063】
ここで図13に移ると、本発明の好ましい実施形態による、CRCデータを使用してデータ・ストリームを同期化する処理の流れ図が示されている。図12に示された処理を、視聴者側で実施して、番組またはイベントの提示のために着信データ・ストリームを同期化することができる。
【0064】
この処理は、データ・ストリームの受信によって開始される(ステップ1000)。ステップ1000では、データ・ストリームが、提示のために受信される。これらのデータ・ストリームは、提示の前にバッファに置かれる(ステップ1002)。バッファに格納された第1のデータ・ストリームのフレームについて、CRC値を計算する(ステップ1004)。その後、計算されたCRC値を、バッファに格納された第2のデータ・ストリーム内のCRC値と比較して、第2データ・ストリーム内で、一致するCRC値を含む点を識別する(ステップ1006)。図示の例では、CRC値は、第2データ・ストリーム内の、CRC値が第1データ・ストリームの位置からの計算されたCRC値と一致しなければならない点のヘッダ内に置かれる。その後、第1および第2のデータ・ストリームを、一致する点または同期化点で提示し(ステップ1008)、処理はステップ1000に戻る。本発明は、使用中のネットワーク・タイプの帯域幅に応じて、1方向通信または両方向通信を介して実施することができる。
【0065】
したがって、本発明は、カスタマイズされた経験をユーザに提供する。本発明は、複数の異なるタイプのデータ・ストリームすなわちオーディオおよびビデオを提供することによってこのカスタマイズされた経験を提供する。これらのデータ・ストリームは、クライアントに配送され、クライアントは、これらのデータ・ストリームから選択して、ユーザが見る番組またはイベントをカスタマイズすることができる。さらに、本発明を用いると、カスタマイズされた番組編成を供給するのに必要な帯域幅の量を減らすことができる。現在、データ・ストリームは、視聴者に送信される番組の版またはカスタマイズごとに作成され、そのオーディオおよびビデオを選択的に変更することはできない。この長所は、新規データ・ストリームを作成し、番組またはイベントの所望のカスタマイズごとに変更不能な形でオーディオおよびビデオを送信するのではなく、1組のデータ・ストリームを送信し、そこから、異なるユーザが、番組またはイベントをカスタマイズするためにデータ・ストリームのサブセットを選択できるようにすることによって提供される。
【0066】
本発明を、完全に機能するデータ処理システムに関連して説明してきたが、本発明の処理を、命令のコンピュータ可読媒体およびさまざまな形で配布することができ、本発明が、配布の実行に実際に使用される信号担持媒体の特定の種類に無関係に同等に適用されることを当業者が諒解するであろうことに留意されたい。コンピュータ可読媒体の例には、フロッピ、ディスク、ハード・ディスク装置、RAM、およびCD−ROMなどの記録可能型媒体と、ディジタル通信リンクおよびアナログ通信リンクなどの伝送型媒体が含まれる。
【0067】
まとめとして、本発明の構成に関して以下の事項を開示する。
【0068】
(1)イベントのマルチメディア・データ・ストリームのユーザによって制御される選択のためのデータ処理システムにおける方法であって、
ビデオ・ストリームの組を受信するステップと、
オーディオ・ストリームの組を受信するステップと、
前記ビデオ・ストリームの組の選択されたビデオ・ストリームを提示するステップと、
前記オーディオ・ストリームの組の選択されたオーディオ・ストリームを提示するステップと、
前記データ処理システムへのユーザ入力に応答して、前記イベントのために提示される前記ビデオ・ストリームの組の前記選択されたビデオ・ストリームおよび前記オーディオ・ストリームの組の前記選択されたオーディオ・ストリームを選択的に変更するステップと
を含む方法。
(2)前記ビデオ・ストリームが、表示装置に提示され、提示される前記ビデオ・ストリームの組の前記選択されたビデオ・ストリームおよび前記オーディオ・ストリームの組の前記選択されたオーディオ・ストリームを選択的に変更する前記ステップが、
前記ビデオ・ストリームが提示される、前記表示装置内の位置を変更するステップ
を含む、上記(1)に記載の方法。
(3)提示される前記ビデオ・ストリームの組の前記選択されたビデオ・ストリームおよび前記オーディオ・ストリームの組の前記選択されたオーディオ・ストリームを選択的に変更する前記ステップが、
提示のために前記ビデオ・ストリームの組の異なる選択されたビデオ・ストリームを選択するステップ
を含む、上記(1)に記載の方法。
(4)提示される前記ビデオ・ストリームの組の前記選択されたビデオ・ストリームおよび前記オーディオ・ストリームの組の前記選択されたオーディオ・ストリームを選択的に変更する前記ステップが、
提示のために前記ビデオ・ストリームの組の追加の選択されたビデオ・ストリームを選択するステップ
を含む、上記(1)に記載の方法。
(5)提示される前記ビデオ・ストリームの組の前記選択されたビデオ・ストリームおよび前記オーディオ・ストリームの組の前記選択されたオーディオ・ストリームを選択的に変更する前記ステップが、
提示のために前記オーディオ・ストリームの組の異なる選択されたオーディオ・ストリームを選択するステップ
を含む、上記(1)に記載の方法。
(6)提示される前記ビデオ・ストリームの組の前記選択されたビデオ・ストリームおよび前記オーディオ・ストリームの組の前記選択されたオーディオ・ストリームを選択的に変更する前記ステップが、
提示のために前記オーディオ・ストリームの組のもう1つの選択されたオーディオ・ストリームを選択するステップ
を含む、上記(1)に記載の方法。
(7)テキストを含む情報ストリームの組を受信するステップと、
ユーザ入力に応答して、表示装置上に前記情報ストリームの組の選択された情報ストリームを選択的に提示するステップと
をさらに含む、上記(1)に記載の方法。
(8)前記ビデオ・ストリームの組および前記オーディオ・ストリームの組が、タイム・スタンプを含み、
前記タイム・スタンプを使用して、前記ビデオ・ストリームの前記選択されたビデオ・ストリームと、前記オーディオ・ストリームの前記選択されたオーディオ・ストリームとを同期化するステップ
をさらに含む、上記(1)に記載の方法。
(9)前記ビデオ・ストリームの組および前記オーディオ・ストリームの組が、前記ビデオおよびオーディオのデータ・ストリーム内に周期的に配置されるデータ・パケットを含み、
前記データ・パケットを使用して、前記ビデオ・ストリームの前記選択されたビデオ・ストリームと、前記オーディオ・ストリームの前記選択されたオーディオ・ストリームとを同期化するステップ
をさらに含む、上記(1)に記載の方法。
(10)前記ビデオ・ストリームの組および前記オーディオ・ストリームの組からのいくつかの選択されたストリームが、前記ビデオ・ストリームの組および前記オーディオ・ストリームの組からの他のストリームに基づく基準巡回冗長検査データを含み、
前記選択されたストリームからの第1ストリームの部分を、前記他のストリームからの第2ストリームの部分と同期化するステップであって、前記第2ストリームの計算された巡回冗長検査データを計算すること、および前記計算された巡回冗長検査データを前記第1ストリームからの前記基準巡回冗長検査データと比較して同期化点を識別することによって同期化するステップ
をさらに含む、上記(1)に記載の方法。
(11)前記データ処理システムが、コンピュータである、上記(1)に記載の方法。
(12)前記データ処理システムが、パーソナル・ディジタル・アシスタントである、上記(1)に記載の方法。
(13)前記データ処理システムが、テレビジョンである、上記(1)に記載の方法。
(14)コンピュータ化されたマルチメディア・システムでイベントのマルチメディア提示を調整する方法であって、
前記コンピュータ化されたマルチメディア・システムに結合されたネットワークを介して、前記イベントのビデオ・ストリームの組、オーディオ・ストリームの組、および情報ストリームの組を供給するステップと、
前記イベントの前記ビデオ・ストリームの組から提示のためにビデオ・ストリームを選択するステップと、
前記イベントの前記オーディオ・ストリームの組から提示のためにオーディオ・ストリームを選択するステップと、
前記イベントの前記情報ストリームの組から提示のために情報ストリームを選択するステップと、
ユーザ入力に応答して、前記選択されたビデオ・ストリームおよび前記選択されたオーディオ・ストリームを、ビデオ出力装置およびオーディオ出力装置のそれぞれの部分に割り当てるステップと、
選択されたビデオ・ストリームおよびオーディオ・ストリームの割当に従って前記イベントを提示するステップと
を含む方法。
(15)前記イベントの前記ビデオ・ストリームの組から提示のためにビデオ・ストリームを選択する前記ステップが、前記コンピュータ化されたマルチメディア・システムで実行される、上記(14)に記載の方法。
(16)前記イベントの前記オーディオ・ストリームの組から提示のためにオーディオ・ストリームを選択する前記ステップが、前記コンピュータ化されたマルチメディア・システムで実行される、上記(14)に記載の方法。
(17)前記ビデオ・ストリームの組および前記オーディオ・ストリームの組が、第1供給源から供給される、上記(14)に記載の方法。
(18)ユーザ選択に応答して、第2供給源から第2ビデオ・ストリームを供給するステップ
をさらに含む、上記(17)に記載の方法。
(19)ユーザ選択に応答して、第2供給源から第2オーディオ・ストリームを供給するステップ
をさらに含む、上記(17)に記載の方法。
(20)前記ビデオ・ストリームの組、前記オーディオ・ストリームの組、および前記情報ストリームの組が、少なくとも2つの異なる供給源から供給される、上記(14)に記載の方法。
(21)前記ビデオ・ストリームの組、前記オーディオ・ストリームの組、および前記情報ストリームの組が、広帯域ネットワークを介して供給される、上記(14)に記載の方法。
(22)イベントのマルチメディア・データ・ストリームのユーザによって制御される選択のためのデータ処理システムであって、
ビデオ・ストリームの組を受信する第1受信手段と、
オーディオ・ストリームの組を受信する第2受信手段と、
前記ビデオ・ストリームの組の選択されたビデオ・ストリームを提示する第1提示手段と、
前記オーディオ・ストリームの組の選択されたオーディオ・ストリームを提示する第2提示手段と、
前記データ処理システムへのユーザ入力に応答して、前記イベントのために提示される前記ビデオ・ストリームの組の前記選択されたビデオ・ストリームおよび前記オーディオ・ストリームの組の前記選択されたオーディオ・ストリームを選択的に変更する変更手段と
を含むデータ処理システム。
(23)前記ビデオ・ストリームが、表示装置に提示され、前記変更手段が、
前記ビデオ・ストリームが提示される、前記表示装置内の位置を変更する変更手段
を含む、上記(22)に記載のデータ処理システム。
(24)前記変更手段が、
提示のために前記ビデオ・ストリームの組の異なる選択されたビデオ・ストリームを選択する第1選択手段
を含む、上記(22)に記載のデータ処理システム。
(25)前記変更手段が、
提示のために前記ビデオ・ストリームの組の追加の選択されたビデオ・ストリームを選択する第2選択手段
を含む、上記(22)に記載のデータ処理システム。
(26)前記変更手段が、
提示のために前記オーディオ・ストリームの組の異なる選択されたオーディオ・ストリームを選択する第3選択手段
を含む、上記(22)に記載のデータ処理システム。
(27)前記変更手段が、
提示のために前記オーディオ・ストリームの組のもう1つの選択されたオーディオ・ストリームを選択する第4選択手段
を含む、上記(22)に記載のデータ処理システム。
(28)テキストを含む情報ストリームの組を受信する受信手段と、
ユーザ入力に応答して、表示装置上に前記情報ストリームの組の選択された情報ストリームを選択的に提示する提示手段と
をさらに含む、上記(22)に記載のデータ処理システム。
(29)前記ビデオ・ストリームの組および前記オーディオ・ストリームの組が、タイム・スタンプを含み、
前記タイム・スタンプを使用して、前記ビデオ・ストリームの前記選択されたビデオ・ストリームと、前記オーディオ・ストリームの前記選択されたオーディオ・ストリームとを同期化する第1同期化手段
をさらに含む、上記(22)に記載のデータ処理システム。
(30)前記ビデオ・ストリームの組および前記オーディオ・ストリームの組が、前記ビデオおよびオーディオのデータ・ストリーム内に周期的に配置されるデータ・パケットを含み、
前記データ・パケットを使用して、前記ビデオ・ストリームの前記選択されたビデオ・ストリームと、前記オーディオ・ストリームの前記選択されたオーディオ・ストリームとを同期化する第2同期化手段
をさらに含む、上記(22)に記載のデータ処理システム。
(31)前記ビデオ・ストリームの組および前記オーディオ・ストリームの組からのいくつかの選択されたストリームが、前記ビデオ・ストリームの組および前記オーディオ・ストリームの組からの他のストリームに基づく基準巡回冗長検査データを含み、
前記選択されたストリームからの第1ストリームの部分を、前記他のストリームからの第2ストリームの部分と同期化する第3同期化手段であって、前記第2ストリームの計算された巡回冗長検査データを計算すること、および前記計算された巡回冗長検査データを前記第1ストリームからの前記基準巡回冗長検査データと比較して同期化点を識別することによって同期化する第3同期化手段
をさらに含む、上記(22)に記載のデータ処理システム。
(32)前記データ処理システムが、コンピュータである、上記(22)に記載のデータ処理システム。
(33)前記データ処理システムが、パーソナル・ディジタル・アシスタントである、上記(22)に記載のデータ処理システム。
(34)前記データ処理システムが、テレビジョンである、上記(22)に記載のデータ処理システム。
(35)コンピュータ化されたマルチメディア・システムでイベントのマルチメディア提示を調整するデータ処理システムであって、
前記コンピュータ化されたマルチメディア・システムに結合されたネットワークを介して、前記イベントのビデオ・ストリームの組、オーディオ・ストリームの組、および情報ストリームの組を供給する供給手段と、
前記イベントの前記ビデオ・ストリームの組から提示のためにビデオ・ストリームを選択する第1選択手段と、
前記イベントの前記オーディオ・ストリームの組から提示のためにオーディオ・ストリームを選択する第2選択手段と、
前記イベントの前記情報ストリームの組から提示のために情報ストリームを選択する第3選択手段と、
ユーザ入力に応答して、前記選択されたビデオ・ストリームおよび前記選択されたオーディオ・ストリームを、ビデオ出力装置およびオーディオ出力装置のそれぞれの部分に割り当てる割当手段と、
選択されたビデオ・ストリームおよびオーディオ・ストリームの割当に従って前記イベントを提示する提示手段と
を含むデータ処理システム。
(36)前記イベントの前記ビデオ・ストリームの組から提示のためにビデオ・ストリームを選択する前記第1選択手段が、前記コンピュータ化されたマルチメディア・システムで実行される、上記(35)に記載のデータ処理システム。
(37)前記イベントの前記オーディオ・ストリームの組から提示のためにオーディオ・ストリームを選択する前記第2選択手段が、前記コンピュータ化されたマルチメディア・システムで実行される、上記(35)に記載のデータ処理システム。
(38)前記ビデオ・ストリームの組および前記オーディオ・ストリームの組が、第1供給源から供給される、上記(35)に記載のデータ処理システム。
(39)ユーザ選択に応答して、第2供給源から第2ビデオ・ストリームを供給する手段をさらに含む、上記(38)に記載のデータ処理システム。
(40)ユーザ選択に応答して、第2供給源から第2オーディオ・ストリームを供給する供給手段
をさらに含む、上記(38)に記載のデータ処理システム。
(41)前記ビデオ・ストリームの組、前記オーディオ・ストリームの組、および前記情報ストリームの組が、少なくとも2つの異なる供給源から供給される、上記(35)に記載のデータ処理システム。
(42)前記ビデオ・ストリームの組、前記オーディオ・ストリームの組、および前記情報ストリームの組が、広帯域ネットワークを介して供給される、上記(35)に記載のデータ処理システム。
(43)イベントのマルチメディア・データ・ストリームのユーザによって制御される選択のための、コンピュータ可読媒体内のコンピュータ・プログラム製品であって、
ビデオ・ストリームの組を受信する第1命令と、
オーディオ・ストリームの組を受信する第2命令と、
前記ビデオ・ストリームの組の選択されたビデオ・ストリームを提示する第3命令と、
前記オーディオ・ストリームの組の選択されたオーディオ・ストリームを提示する第4命令と、
前記データ処理システムへのユーザ入力に応答して、提示される前記ビデオ・ストリームの組の前記選択されたビデオ・ストリームおよび前記オーディオ・ストリームの組の前記選択されたオーディオ・ストリームを選択的に変更する第5命令と
を含むコンピュータ・プログラム製品。
(44)コンピュータ化されたマルチメディア・システムでイベントのマルチメディア提示を調整する、コンピュータ可読媒体内のコンピュータ・プログラム製品であって、
前記コンピュータ化されたマルチメディア・システムに結合されたネットワークを介して、前記イベントのビデオ・ストリーム、オーディオ・ストリーム、および情報ストリームの組を供給する第1命令と、
前記イベントの使用可能なビデオ・ストリームの前記組から提示のためにビデオ・ストリームを選択する第2命令と、
前記イベントの使用可能なオーディオ・ストリームの前記組から提示のためにオーディオ・ストリームを選択する第3命令と、
前記イベントの使用可能な情報ストリームの前記組から提示のために情報ストリームを選択する第4命令と、
ユーザ入力に応答して、前記選択されたビデオ・ストリームおよび前記選択されたオーディオ・ストリームを、ビデオ出力装置およびオーディオ出力装置のそれぞれの部分に割り当てる第5命令と、
前記選択されたビデオ・ストリームの割当に従って前記イベントを提示する第6命令と
を含むコンピュータ・プログラム製品。
【図面の簡単な説明】
【図1】本発明を実施することができる分散データ処理システムの絵図である。
【図2】本発明によるサーバとして実施することができるデータ処理システムのブロック図である。
【図3】本発明を実施することができるデータ処理システムのブロック図である。
【図4】本発明の処理を大まかに示すブロック図である。
【図5】本発明に従って示される、メディア・ストリームの選択に使用される機能的構成要素のブロック図である。
【図6】本発明の好ましい実施形態に従って示される例の表示を示す図である。
【図7】本発明の好ましい実施形態に従って示される、クライアントに送信されるデータ・ストリームに含まれるデータ構造を示す図である。
【図8】本発明の好ましい実施形態に従って示される、クライアントに送信されるデータ・ストリームに含まれるデータ構造を示す図である。
【図9】本発明の好ましい実施形態に従って示される、クライアントに送信されるデータ・ストリームに含まれるデータ構造を示す図である。
【図10】本発明の好ましい実施形態に従って示される、クライアントに送信されるデータ・ストリームに含まれるデータ構造を示す図である。
【図11】本発明の好ましい実施形態に従って示されるデータ・ストリームを処理するのに使用される処理の流れ図である。
【図12】本発明の好ましい実施形態に従って示されるデータ・ストリームの同期化に使用されるCRC値を生成するための処理の流れ図である。
【図13】本発明の好ましい実施形態に従って示される、CRCデータを使用するデータ・ストリームを同期化する処理の流れ図である。
【符号の説明】
700 データ・パケット
702 ヘッダ
704 ペイロード
706 ヘッダ
708 IDフィールド
710 チャネル・フィールド
712 位置フィールド
714 音量フィールド
716 ヘッダ
718 IDフィールド
720 タイム・スタンプ・フィールド
722 CRCフィールド
724 ヘッダ
726 IDフィールド
728 タイプ・フィールド
730 位置フィールド
732 持続時間フィールド
734 Z深さフィールド
Claims (17)
- コンピュータ化されたマルチメディア・システムが、ある1つのイベントのマルチメディア提示を調製する方法であって、
前記コンピュータ化されたマルチメディア・システムに結合されたネットワークを介して、前記イベントのビデオ・ストリームの組、オーディオ・ストリームの組、および情報ストリームの組の供給を受けるステップと、
前記イベントの前記ビデオ・ストリームの組からの、提示用の複数のビデオ・ストリームの選択を受け入れるステップと、
前記イベントの前記オーディオ・ストリームの組からの、提示用の複数のオーディオ・ストリームの選択を受け入れるステップと、
前記イベントの前記情報ストリームの組からの、提示用の情報ストリームの選択を受け入れるステップと、
ユーザ入力に応答して、前記選択された各ビデオ・ストリームをビデオ出力装置上のユーザが指定する各表示領域部分に割り当てるとともに前記選択された各オーディオ・ストリームをオーディオ出力装置のユーザが指定する各チャンネルに割り当てるステップと、
前記選択されたビデオ・ストリームおよびオーディオ・ストリームの割当に従い、かつこれらのストリームを同期化しながら、前記イベントを提示するステップとを含む方法。 - 前記イベントの前記ビデオ・ストリームの組からの、提示用のビデオ・ストリームを選択する前記ステップが、前記コンピュータ化されたマルチメディア・システムで実行される、請求項1に記載の方法。
- 前記イベントの前記オーディオ・ストリームの組からの、提示用のオーディオ・ストリームを選択する前記ステップが、前記コンピュータ化されたマルチメディア・システムで実行される、請求項1に記載の方法。
- 前記ビデオ・ストリームの組および前記オーディオ・ストリームの組が、第1供給源から供給される、請求項1に記載の方法。
- ユーザ選択に応答して、第2供給源から第2ビデオ・ストリームの供給を受けるステップをさらに含む、請求項4に記載の方法。
- ユーザ選択に応答して、第2供給源から第2オーディオ・ストリームの供給を受けるステップをさらに含む、請求項4に記載の方法。
- 前記ビデオ・ストリームの組、前記オーディオ・ストリームの組、および前記情報ストリームの組が、少なくとも2つの異なる供給源から供給される、請求項1に記載の方法。
- 前記ビデオ・ストリームの組、前記オーディオ・ストリームの組、および前記情報ストリームの組が、広帯域ネットワークを介して供給される、請求項1に記載の方法。
- コンピュータ化されたマルチメディア・システムにおけるある1つのイベントのマルチメディア提示を調製するデータ処理システムであって、
前記コンピュータ化されたマルチメディア・システムに対し、それに結合されたネットワークを介して、前記イベントのビデオ・ストリームの組、オーディオ・ストリームの組、および情報ストリームの組を供給する供給手段と、
前記イベントの前記ビデオ・ストリームの組から提示用の複数のビデオ・ストリームを選択するための第1選択手段と、
前記イベントの前記オーディオ・ストリームの組から提示用の複数のオーディオ・ストリームを選択するための第2選択手段と、
前記イベントの前記情報ストリームの組から提示用の情報ストリームを選択するための第3選択手段と、
ユーザ入力に応答して、前記選択された各ビデオ・ストリームをビデオ出力装置上のユーザが指定する各表示領域部分に割り当てるとともに前記選択された各オーディオ・ストリームをオーディオ出力装置のユーザが指定する各チャンネルに割り当てる割当手段と、
前記選択されたビデオ・ストリームおよびオーディオ・ストリームの割当に従い、かつこれらのストリームを同期化しながら、前記イベントを提示する提示手段とを含むデータ処理システム。 - 前記イベントの前記ビデオ・ストリームの組から提示用のビデオ・ストリームを選択するための前記第1選択手段が、前記コンピュータ化されたマルチメディア・システムで実行される、請求項9に記載のデータ処理システム。
- 前記イベントの前記オーディオ・ストリームの組から提示用のオーディオ・ストリームを選択するための前記第2選択手段が、前記コンピュータ化されたマルチメディア・システムで実行される、請求項9に記載のデータ処理システム。
- 前記ビデオ・ストリームの組および前記オーディオ・ストリームの組が、第1供給源から供給される、請求項9に記載のデータ処理システム。
- ユーザ選択に応答して、第2供給源から第2ビデオ・ストリームを供給する手段をさらに含む、請求項12に記載のデータ処理システム。
- ユーザ選択に応答して、第2供給源から第2オーディオ・ストリームを供給する供給手段をさらに含む、請求項12に記載のデータ処理システム。
- 前記ビデオ・ストリームの組、前記オーディオ・ストリームの組、および前記情報ストリームの組が、少なくとも2つの異なる供給源から供給される、請求項9に記載のデータ処理システム。
- 前記ビデオ・ストリームの組、前記オーディオ・ストリームの組、および前記情報ストリームの組が、広帯域ネットワークを介して供給される、請求項9に記載のデータ処理システム。
- コンピュータ化されたマルチメディア・システムに、ある1つのイベントのマルチメディア提示を調製する手順を実行させるためのプログラムを記録したコンピュータ読取り可能な記録媒体であって、
前記手順は、
前記コンピュータ化されたマルチメディア・システムに結合されたネットワークを介して、前記イベントのビデオ・ストリーム、オーディオ・ストリーム、および情報ストリームの組の供給を受ける第1手順と、
前記イベントの使用可能なビデオ・ストリームの前記組からの、提示用の複数のビデオ・ストリームの選択を受け入れる第2手順と、
前記イベントの使用可能なオーディオ・ストリームの前記組からの、提示用の複数のオーディオ・ストリームの選択を受け入れる第3手順と、
前記イベントの使用可能な情報ストリームの前記組からの、提示用の情報ストリームの選択を受け入れる第4手順と、
ユーザ入力に応答して、前記選択された各ビデオ・ストリームをビデオ出力装置上のユーザが指定する各表示領域部分に割り当てるとともに前記選択された各オーディオ・ストリームをオーディオ出力装置のユーザが指定する各チャンネルに割り当てる第5手順と、
前記選択されたビデオ・ストリームおよびオーディオ・ストリームの割当に従い、かつ これらのストリームを同期化しながら、前記イベントを提示する第6手順とを含むコンピュータ読取り可能な記録媒体。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US09/409594 | 1999-09-30 | ||
US09/409,594 US8341662B1 (en) | 1999-09-30 | 1999-09-30 | User-controlled selective overlay in a streaming media |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2001169264A JP2001169264A (ja) | 2001-06-22 |
JP4187394B2 true JP4187394B2 (ja) | 2008-11-26 |
Family
ID=23621176
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000266515A Expired - Fee Related JP4187394B2 (ja) | 1999-09-30 | 2000-09-04 | ストリーミング・メディアでのユーザによって制御される選択的オーバーレイのための方法および装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US8341662B1 (ja) |
JP (1) | JP4187394B2 (ja) |
KR (1) | KR100454187B1 (ja) |
CN (1) | CN1290895A (ja) |
GB (1) | GB2356758B (ja) |
TW (1) | TW488168B (ja) |
Families Citing this family (55)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7571244B2 (en) | 2000-07-15 | 2009-08-04 | Filippo Costanzo | Audio-video data switching and viewing system |
KR20020057837A (ko) * | 2002-03-29 | 2002-07-12 | 문의선 | 스트리밍 서비스 방법 및 장치 |
US10489449B2 (en) | 2002-05-23 | 2019-11-26 | Gula Consulting Limited Liability Company | Computer accepting voice input and/or generating audible output |
US8611919B2 (en) | 2002-05-23 | 2013-12-17 | Wounder Gmbh., Llc | System, method, and computer program product for providing location based services and mobile e-commerce |
FI116816B (fi) * | 2002-10-14 | 2006-02-28 | Nokia Corp | Median suoratoisto |
BRPI0713992A2 (pt) * | 2006-06-30 | 2012-11-20 | Directv Group Inc | canal de vÍdeo matriciado interativo exibido em um monitor de vÍdeo, aparelho para exibir um canal de vÍdeo em mosaico, sistema de exibiÇço seletiva de cÉlula de vÍdeo em um canal de vÍdeo |
WO2008027464A2 (en) | 2006-08-30 | 2008-03-06 | The Directv Group, Inc. | Mosaic channel video stream with interactive services |
US20090013264A1 (en) * | 2007-06-28 | 2009-01-08 | Anand Ganesh Basawapatna | Enhanced interactive electronic meeting system |
KR20090031142A (ko) * | 2007-09-21 | 2009-03-25 | 삼성전자주식회사 | 컨텐츠 생성시 관련된 컨텐츠를 표시하는 gui 제공방법및 이를 적용한 멀티미디어 기기 |
US9942673B2 (en) * | 2007-11-14 | 2018-04-10 | Sonova Ag | Method and arrangement for fitting a hearing system |
US20090183215A1 (en) * | 2008-01-16 | 2009-07-16 | Qualcomm Incorporated | Hybrid services: data, audio, and clipcast |
US20100169303A1 (en) | 2008-12-31 | 2010-07-01 | David Biderman | Playlists for real-time or near real-time streaming |
US8156089B2 (en) | 2008-12-31 | 2012-04-10 | Apple, Inc. | Real-time or near real-time streaming with compressed playlists |
US8260877B2 (en) | 2008-12-31 | 2012-09-04 | Apple Inc. | Variant streams for real-time or near real-time streaming to provide failover protection |
KR101750049B1 (ko) | 2009-11-13 | 2017-06-22 | 삼성전자주식회사 | 적응적인 스트리밍 방법 및 장치 |
KR101750048B1 (ko) | 2009-11-13 | 2017-07-03 | 삼성전자주식회사 | 변속 재생 서비스 제공 방법 및 장치 |
KR101777347B1 (ko) | 2009-11-13 | 2017-09-11 | 삼성전자주식회사 | 부분화에 기초한 적응적인 스트리밍 방법 및 장치 |
KR101786051B1 (ko) | 2009-11-13 | 2017-10-16 | 삼성전자 주식회사 | 데이터 제공 방법 및 장치와 데이터 수신 방법 및 장치 |
KR101737084B1 (ko) | 2009-12-07 | 2017-05-17 | 삼성전자주식회사 | 메인 콘텐트에 다른 콘텐트를 삽입하여 스트리밍하는 방법 및 장치 |
KR101777348B1 (ko) | 2010-02-23 | 2017-09-11 | 삼성전자주식회사 | 데이터 전송 방법 및 장치와 데이터 수신 방법 및 장치 |
KR20110105710A (ko) * | 2010-03-19 | 2011-09-27 | 삼성전자주식회사 | 복수의 챕터를 포함하는 콘텐트를 적응적으로 스트리밍하는 방법 및 장치 |
GB201105502D0 (en) | 2010-04-01 | 2011-05-18 | Apple Inc | Real time or near real time streaming |
US8805963B2 (en) | 2010-04-01 | 2014-08-12 | Apple Inc. | Real-time or near real-time streaming |
CN102238179B (zh) | 2010-04-07 | 2014-12-10 | 苹果公司 | 实时或准实时流传输 |
KR101837687B1 (ko) | 2010-06-04 | 2018-03-12 | 삼성전자주식회사 | 콘텐트의 품질을 결정하는 복수의 인자에 기초한 적응적인 스트리밍 방법 및 장치 |
US8640181B1 (en) | 2010-09-15 | 2014-01-28 | Mlb Advanced Media, L.P. | Synchronous and multi-sourced audio and video broadcast |
WO2012143745A1 (en) * | 2011-04-21 | 2012-10-26 | Sony Ericsson Mobile Communications Ab | Method and system for providing an improved audio experience for viewers of video |
US8843586B2 (en) * | 2011-06-03 | 2014-09-23 | Apple Inc. | Playlists for real-time or near real-time streaming |
US8856283B2 (en) | 2011-06-03 | 2014-10-07 | Apple Inc. | Playlists for real-time or near real-time streaming |
US9043850B2 (en) * | 2013-06-17 | 2015-05-26 | Spotify Ab | System and method for switching between media streams while providing a seamless user experience |
TWM487509U (zh) * | 2013-06-19 | 2014-10-01 | 杜比實驗室特許公司 | 音訊處理設備及電子裝置 |
US10545651B2 (en) | 2013-07-15 | 2020-01-28 | Fox Broadcasting Company, Llc | Providing bitmap image format files from media |
US10110649B2 (en) | 2013-08-01 | 2018-10-23 | Spotify Ab | System and method for transitioning from decompressing one compressed media stream to decompressing another media stream |
US9529888B2 (en) | 2013-09-23 | 2016-12-27 | Spotify Ab | System and method for efficiently providing media and associated metadata |
US9716733B2 (en) | 2013-09-23 | 2017-07-25 | Spotify Ab | System and method for reusing file portions between different file formats |
US11936936B2 (en) * | 2013-10-09 | 2024-03-19 | Disney Enterprises, Inc. | Method and system for providing and displaying optional overlays |
US9063640B2 (en) | 2013-10-17 | 2015-06-23 | Spotify Ab | System and method for switching between media items in a plurality of sequences of media items |
US9792957B2 (en) | 2014-10-08 | 2017-10-17 | JBF Interlude 2009 LTD | Systems and methods for dynamic video bookmarking |
US10460765B2 (en) | 2015-08-26 | 2019-10-29 | JBF Interlude 2009 LTD | Systems and methods for adaptive and responsive video |
US9979997B2 (en) | 2015-10-14 | 2018-05-22 | International Business Machines Corporation | Synchronization of live audio and video data streams |
US11856271B2 (en) | 2016-04-12 | 2023-12-26 | JBF Interlude 2009 LTD | Symbiotic interactive video |
US9762851B1 (en) | 2016-05-31 | 2017-09-12 | Microsoft Technology Licensing, Llc | Shared experience with contextual augmentation |
US9992429B2 (en) | 2016-05-31 | 2018-06-05 | Microsoft Technology Licensing, Llc | Video pinning |
US9872060B1 (en) * | 2016-06-28 | 2018-01-16 | Disney Enterprises, Inc. | Write confirmation of a digital video record channel |
GB2552349B (en) * | 2016-07-20 | 2019-05-22 | Law Malcolm | Sample synchronisation |
WO2018027237A1 (en) | 2016-08-05 | 2018-02-08 | Sportscastr.Live Llc | Systems, apparatus, and methods for scalable low-latency viewing of broadcast digital content streams of live events |
US11050809B2 (en) | 2016-12-30 | 2021-06-29 | JBF Interlude 2009 LTD | Systems and methods for dynamic weighting of branched video paths |
WO2018213481A1 (en) | 2017-05-16 | 2018-11-22 | Sportscastr.Live Llc | Systems, apparatus, and methods for scalable low-latency viewing of integrated broadcast commentary and event video streams of live events, and synchronization of event information with viewed streams via multiple internet channels |
US10257578B1 (en) * | 2018-01-05 | 2019-04-09 | JBF Interlude 2009 LTD | Dynamic library display for interactive videos |
US11601721B2 (en) | 2018-06-04 | 2023-03-07 | JBF Interlude 2009 LTD | Interactive video dynamic adaptation and user profiling |
US11075971B2 (en) * | 2019-04-04 | 2021-07-27 | Evertz Microsystems Ltd. | Systems and methods for operating a media transmission network |
US11323780B2 (en) | 2019-04-04 | 2022-05-03 | Evertz Microsystems Ltd. | Systems and methods for determining delay of a plurality of media streams |
US11882337B2 (en) | 2021-05-28 | 2024-01-23 | JBF Interlude 2009 LTD | Automated platform for generating interactive videos |
US11934477B2 (en) | 2021-09-24 | 2024-03-19 | JBF Interlude 2009 LTD | Video player integration within websites |
CN114363669B (zh) * | 2021-12-29 | 2023-05-30 | 北京达佳互联信息技术有限公司 | 信息显示方法、装置、电子设备及存储介质 |
Family Cites Families (81)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4316285A (en) * | 1980-09-11 | 1982-02-16 | Bell Telephone Laboratories, Incorporated | Framing circuit for digital receiver |
DE3751410T2 (de) * | 1986-04-18 | 1996-04-11 | Nagra Plus Sa | Decoder für ein Fernsehgebührensystem. |
US4847698A (en) * | 1987-07-16 | 1989-07-11 | Actv, Inc. | Interactive television system for providing full motion synched compatible audio/visual displays |
US4847700A (en) * | 1987-07-16 | 1989-07-11 | Actv, Inc. | Interactive television system for providing full motion synched compatible audio/visual displays from transmitted television signals |
US4847699A (en) * | 1987-07-16 | 1989-07-11 | Actv, Inc. | Method for providing an interactive full motion synched compatible audio/visual television display |
US5195092A (en) | 1987-08-04 | 1993-03-16 | Telaction Corporation | Interactive multimedia presentation & communication system |
US5258843A (en) | 1987-09-04 | 1993-11-02 | Texas Instruments Incorporated | Method and apparatus for overlaying displayable information |
US5068733A (en) | 1990-03-20 | 1991-11-26 | Bennett Richard H | Multiple access television |
US5249164A (en) | 1990-06-27 | 1993-09-28 | Koz Mark C | Digital color tv for personal computers |
US5594507A (en) | 1990-09-28 | 1997-01-14 | Ictv, Inc. | Compressed digital overlay controller and method for MPEG type video signal |
US5168356A (en) * | 1991-02-27 | 1992-12-01 | General Electric Company | Apparatus for segmenting encoded video signal for transmission |
US5611038A (en) | 1991-04-17 | 1997-03-11 | Shaw; Venson M. | Audio/video transceiver provided with a device for reconfiguration of incompatibly received or transmitted video and audio information |
US5861881A (en) * | 1991-11-25 | 1999-01-19 | Actv, Inc. | Interactive computer system for providing an interactive presentation with personalized video, audio and graphics responses for multiple viewers |
US5724091A (en) | 1991-11-25 | 1998-03-03 | Actv, Inc. | Compressed digital data interactive program system |
US6553178B2 (en) | 1992-02-07 | 2003-04-22 | Max Abecassis | Advertisement subsidized video-on-demand system |
US6675386B1 (en) * | 1996-09-04 | 2004-01-06 | Discovery Communications, Inc. | Apparatus for video access and control over computer network, including image correction |
US5508732A (en) | 1993-03-22 | 1996-04-16 | International Business Machines Corporation | Data server, control server and gateway architecture system and method for broadcasting digital video on demand |
US5408465A (en) | 1993-06-21 | 1995-04-18 | Hewlett-Packard Company | Flexible scheme for admission control of multimedia streams on integrated networks |
US5557724A (en) | 1993-10-12 | 1996-09-17 | Intel Corporation | User interface, method, and apparatus selecting and playing channels having video, audio, and/or text streams |
WO1995012282A1 (en) | 1993-10-27 | 1995-05-04 | Princeton Electronic Billboard, Inc. | Downstream control of electronic billboard |
US5574934A (en) | 1993-11-24 | 1996-11-12 | Intel Corporation | Preemptive priority-based transmission of signals using virtual channels |
US5548726A (en) | 1993-12-17 | 1996-08-20 | Taligeni, Inc. | System for activating new service in client server network by reconfiguring the multilayer network protocol stack dynamically within the server node |
US5422674A (en) | 1993-12-22 | 1995-06-06 | Digital Equipment Corporation | Remote display of an image by transmitting compressed video frames representing background and overlay portions thereof |
IL108957A (en) | 1994-03-14 | 1998-09-24 | Scidel Technologies Ltd | Video sequence imaging system |
WO1995034170A1 (en) | 1994-06-08 | 1995-12-14 | Futurevision Of America Corp. | Interactive broadband multimedia system |
DE69515386T2 (de) | 1994-07-15 | 2000-08-24 | Matsushita Electric Ind Co Ltd | Verfahren zur Verbindung von MPEG-Videosequenzen |
US5671377A (en) | 1994-07-19 | 1997-09-23 | David Sarnoff Research Center, Inc. | System for supplying streams of data to multiple users by distributing a data stream to multiple processors and enabling each user to manipulate supplied data stream |
US5884028A (en) | 1994-07-29 | 1999-03-16 | International Business Machines Corporation | System for the management of multiple time-critical data streams |
US5568167A (en) | 1994-09-23 | 1996-10-22 | C-Cube Microsystems, Inc. | System for providing antialiased video overlays |
US5548704A (en) | 1994-11-08 | 1996-08-20 | The Consulting Team, Inc. | Method for windowing using mainframe hosted CICS |
US5600368A (en) | 1994-11-09 | 1997-02-04 | Microsoft Corporation | Interactive television system and method for viewer control of multiple camera viewpoints in broadcast programming |
US5758257A (en) | 1994-11-29 | 1998-05-26 | Herz; Frederick | System and method for scheduling broadcast of and access to video programs and other data using customer profiles |
US5671226A (en) * | 1995-02-09 | 1997-09-23 | Mitsubishi Denki Kabushiki Kaisha | Multimedia information processing system |
DE59601149D1 (de) * | 1995-04-13 | 1999-02-25 | Siemens Ag | Verfahren und einrichtung zum speichern, suchen und abspielen von audiovisuellen informationen und datenfiles |
KR0166210B1 (ko) * | 1995-06-30 | 1999-03-20 | 김주용 | 디지탈 비데오 디스크용 데이터 디코더 장치 및 방법 |
US5652615A (en) | 1995-06-30 | 1997-07-29 | Digital Equipment Corporation | Precision broadcast of composite programs including secondary program content such as advertisements |
US5659539A (en) | 1995-07-14 | 1997-08-19 | Oracle Corporation | Method and apparatus for frame accurate access of digital audio-visual information |
US6006257A (en) | 1995-09-29 | 1999-12-21 | Comverse Networks Systems, Inc. | Multimedia architecture for interactive advertising in which secondary programming is varied based upon viewer demographics and content of primary programming |
US6002394A (en) | 1995-10-02 | 1999-12-14 | Starsight Telecast, Inc. | Systems and methods for linking television viewers with advertisers and broadcasters |
KR0178743B1 (ko) * | 1995-10-31 | 1999-05-01 | 김광호 | Mpeg-ii오디오용 음성다중장치 |
US5754807A (en) | 1995-11-20 | 1998-05-19 | Advanced Micro Devices, Inc. | Computer system including a multimedia bus which utilizes a separate local expansion bus for addressing and control cycles |
US5872588A (en) | 1995-12-06 | 1999-02-16 | International Business Machines Corporation | Method and apparatus for monitoring audio-visual materials presented to a subscriber |
KR19990072063A (ko) | 1995-12-08 | 1999-09-27 | 엔, 마이클 그로브 | 컴퓨터 네트워크 상에 광고를 게재하기 위한 방법 및 시스템 |
WO1997026729A2 (en) | 1995-12-27 | 1997-07-24 | Robinson Gary B | Automated collaborative filtering in world wide web advertising |
US6047327A (en) | 1996-02-16 | 2000-04-04 | Intel Corporation | System for distributing electronic information to a targeted group of users |
US5859660A (en) | 1996-02-29 | 1999-01-12 | Perkins; Michael G. | Non-seamless splicing of audio-video transport streams |
US5901287A (en) | 1996-04-01 | 1999-05-04 | The Sabre Group Inc. | Information aggregation and synthesization system |
US5867799A (en) | 1996-04-04 | 1999-02-02 | Lang; Andrew K. | Information system and method for filtering a massive flow of information entities to meet user information classification needs |
US5848396A (en) | 1996-04-26 | 1998-12-08 | Freedom Of Information, Inc. | Method and apparatus for determining behavioral profile of a computer user |
CA2200121A1 (en) | 1996-05-02 | 1997-11-02 | John Charles Mitchell | Compressed domain video text overlay for multimedia communication systems |
US5778187A (en) | 1996-05-09 | 1998-07-07 | Netcast Communications Corp. | Multicasting method and apparatus |
US5894320A (en) | 1996-05-29 | 1999-04-13 | General Instrument Corporation | Multi-channel television system with viewer-selectable video and audio |
US5892754A (en) | 1996-06-07 | 1999-04-06 | International Business Machines Corporation | User controlled adaptive flow control for packet networks |
US5778184A (en) | 1996-06-28 | 1998-07-07 | Mci Communications Corporation | System method and computer program product for processing faults in a hierarchial network |
US5838678A (en) | 1996-07-24 | 1998-11-17 | Davis; Joseph W. | Method and device for preprocessing streams of encoded data to facilitate decoding streams back-to back |
US5856973A (en) | 1996-09-10 | 1999-01-05 | Thompson; Kenneth M. | Data multiplexing in MPEG server to decoder systems |
US6018659A (en) | 1996-10-17 | 2000-01-25 | The Boeing Company | Airborne broadband communication network |
US5781227A (en) | 1996-10-25 | 1998-07-14 | Diva Systems Corporation | Method and apparatus for masking the effects of latency in an interactive information distribution system |
US5931901A (en) | 1996-12-09 | 1999-08-03 | Robert L. Wolfe | Programmed music on demand from the internet |
FI106990B (fi) | 1996-12-31 | 2001-05-15 | Nokia Mobile Phones Ltd | Menetelmä informaation välittämiseksi käyttäjälle |
US5826165A (en) | 1997-01-21 | 1998-10-20 | Hughes Electronics Corporation | Advertisement reconciliation system |
US6351565B1 (en) * | 1997-02-07 | 2002-02-26 | Matsushita Electric Industrial Co, Ltd. | Data structure for image transmission, method of image transmission, image decoding apparatus, and data recording media |
EP1026897A3 (en) | 1997-03-11 | 2000-08-30 | Actv, Inc. | A digital interactive system for providing full interactivity with live programming events |
JP3248446B2 (ja) | 1997-03-13 | 2002-01-21 | ヤマハ株式会社 | サーバコンピュータ |
US6057833A (en) * | 1997-04-07 | 2000-05-02 | Shoreline Studios | Method and apparatus for providing real time enhancements and animations over a video image |
US5893091A (en) | 1997-04-11 | 1999-04-06 | Immediata Corporation | Multicasting with key words |
US6044376A (en) | 1997-04-24 | 2000-03-28 | Imgis, Inc. | Content stream analysis |
US6122263A (en) | 1997-06-10 | 2000-09-19 | Telefonaktiebolaget Lm Ericsson | Internet access for cellular networks |
US6014694A (en) * | 1997-06-26 | 2000-01-11 | Citrix Systems, Inc. | System for adaptive video/audio transport over a network |
JP4062577B2 (ja) | 1997-07-21 | 2008-03-19 | ジェムスター ディベロプメント コーポレイション | 表示及び記録制御インタフェースのためのシステム及び方法 |
GB2327837B (en) | 1997-07-29 | 1999-09-15 | Microsoft Corp | Providing enhanced content with broadcast video |
US6009410A (en) | 1997-10-16 | 1999-12-28 | At&T Corporation | Method and system for presenting customized advertising to a user on the world wide web |
US6029045A (en) | 1997-12-09 | 2000-02-22 | Cogent Technology, Inc. | System and method for inserting local content into programming content |
US6097441A (en) * | 1997-12-31 | 2000-08-01 | Eremote, Inc. | System for dual-display interaction with integrated television and internet content |
ATE237900T1 (de) | 1998-03-04 | 2003-05-15 | United Video Properties Inc | Programmführungssystem mit gezielter werbung |
US6285317B1 (en) | 1998-05-01 | 2001-09-04 | Lucent Technologies Inc. | Navigation system with three-dimensional display |
US6144375A (en) | 1998-08-14 | 2000-11-07 | Praja Inc. | Multi-perspective viewer for content-based interactivity |
US6578201B1 (en) * | 1998-11-20 | 2003-06-10 | Diva Systems Corporation | Multimedia stream incorporating interactive support for multiple types of subscriber terminals |
US6366298B1 (en) | 1999-06-03 | 2002-04-02 | Netzero, Inc. | Monitoring of individual internet usage |
US6493832B1 (en) * | 1999-03-17 | 2002-12-10 | Sony Corporation | Communication apparatus which handles a time stamp |
US7010492B1 (en) | 1999-09-30 | 2006-03-07 | International Business Machines Corporation | Method and apparatus for dynamic distribution of controlled and additional selective overlays in a streaming media |
-
1999
- 1999-09-30 US US09/409,594 patent/US8341662B1/en not_active Expired - Lifetime
-
2000
- 2000-09-04 JP JP2000266515A patent/JP4187394B2/ja not_active Expired - Fee Related
- 2000-09-13 TW TW089118706A patent/TW488168B/zh not_active IP Right Cessation
- 2000-09-20 CN CN00128676A patent/CN1290895A/zh active Pending
- 2000-09-27 KR KR10-2000-0056798A patent/KR100454187B1/ko not_active IP Right Cessation
- 2000-09-28 GB GB0023758A patent/GB2356758B/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
KR20010050679A (ko) | 2001-06-15 |
KR100454187B1 (ko) | 2004-11-02 |
US8341662B1 (en) | 2012-12-25 |
JP2001169264A (ja) | 2001-06-22 |
CN1290895A (zh) | 2001-04-11 |
GB2356758B (en) | 2004-02-18 |
GB0023758D0 (en) | 2000-11-08 |
TW488168B (en) | 2002-05-21 |
GB2356758A (en) | 2001-05-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4187394B2 (ja) | ストリーミング・メディアでのユーザによって制御される選択的オーバーレイのための方法および装置 | |
US7010492B1 (en) | Method and apparatus for dynamic distribution of controlled and additional selective overlays in a streaming media | |
US11794102B2 (en) | Cloud-based game streaming | |
KR100773632B1 (ko) | 분산 커뮤니티 네트워크를 제공하는 향상된 비디오 프로그래밍 시스템 및 방법 | |
EP1110394B1 (en) | Simulating two way connectivity for one way data streams for multiple parties | |
EP1535460A2 (en) | Information platform | |
JP2006081895A (ja) | オンラインゲームの観客用システム | |
WO2001060071A2 (en) | Interactive multimedia user interface using affinity based categorization | |
KR20010067282A (ko) | 공유 화이트보드를 제공하는 강화된 비디오 프로그래밍장치 및 방법 | |
WO2003094020A1 (en) | Managing user interaction for live multimedia broadcast | |
JP2004015750A (ja) | ライブ配信サーバ、及びライブ配信方法 | |
KR20030094214A (ko) | 피어투피어 통신망에서의 매체의 동기식제어 | |
WO2008126079A2 (en) | Graphics for limited resolution display devices | |
EP1093070A2 (en) | Method and apparatus for dynamic targeting of streaming media using statistical data | |
US20020073221A1 (en) | Method for the transmission and synchronization of multimedia data through computer networks | |
US11878250B2 (en) | Content enhancement system and method | |
Hardman et al. | CMIFed: a transportable hypermedia authoring system | |
CA2304286A1 (en) | System and method for linking interactive web pages and television signals |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040203 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20040426 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20040507 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040720 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20050330 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050624 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20050729 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20060324 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
RD14 | Notification of resignation of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7434 Effective date: 20080903 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080909 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110919 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120919 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130919 Year of fee payment: 5 |
|
LAPS | Cancellation because of no payment of annual fees |