JP2002536889A - 統計的マルチプレクサのバンド幅を十分にすることを確実にする方法および装置 - Google Patents
統計的マルチプレクサのバンド幅を十分にすることを確実にする方法および装置Info
- Publication number
- JP2002536889A JP2002536889A JP2000596742A JP2000596742A JP2002536889A JP 2002536889 A JP2002536889 A JP 2002536889A JP 2000596742 A JP2000596742 A JP 2000596742A JP 2000596742 A JP2000596742 A JP 2000596742A JP 2002536889 A JP2002536889 A JP 2002536889A
- Authority
- JP
- Japan
- Prior art keywords
- picture
- packets
- bandwidth
- multiplexer
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims abstract description 63
- 239000000872 buffer Substances 0.000 claims abstract description 40
- 239000003292 glue Substances 0.000 claims abstract description 25
- 230000008569 process Effects 0.000 claims description 10
- 230000005540 biological transmission Effects 0.000 description 38
- 238000004422 calculation algorithm Methods 0.000 description 25
- 238000010586 diagram Methods 0.000 description 8
- 230000002123 temporal effect Effects 0.000 description 8
- 230000006835 compression Effects 0.000 description 5
- 238000007906 compression Methods 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 3
- 238000003780 insertion Methods 0.000 description 3
- 230000037431 insertion Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- 101000686227 Homo sapiens Ras-related protein R-Ras2 Proteins 0.000 description 1
- 102100025003 Ras-related protein R-Ras2 Human genes 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B7/00—Radio transmission systems, i.e. using radiation field
- H04B7/24—Radio transmission systems, i.e. using radiation field for communication between two or more posts
- H04B7/26—Radio transmission systems, i.e. using radiation field for communication between two or more posts at least one of which is mobile
- H04B7/2612—Arrangements for wireless medium access control, e.g. by allocating physical layer transmission capacity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04J—MULTIPLEX COMMUNICATION
- H04J3/00—Time-division multiplex systems
- H04J3/16—Time-division multiplex systems in which the time allocation to individual channels within a transmission cycle is variable, e.g. to accommodate varying complexity of signals, to vary number of channels transmitted
- H04J3/1682—Allocation of channels according to the instantaneous demands of the users, e.g. concentrated multiplexers, statistical multiplexers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04J—MULTIPLEX COMMUNICATION
- H04J3/00—Time-division multiplex systems
- H04J3/16—Time-division multiplex systems in which the time allocation to individual channels within a transmission cycle is variable, e.g. to accommodate varying complexity of signals, to vary number of channels transmitted
- H04J3/1682—Allocation of channels according to the instantaneous demands of the users, e.g. concentrated multiplexers, statistical multiplexers
- H04J3/1688—Allocation of channels according to the instantaneous demands of the users, e.g. concentrated multiplexers, statistical multiplexers the demands of the users being taken into account after redundancy removal, e.g. by predictive coding, by variable sampling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04J—MULTIPLEX COMMUNICATION
- H04J3/00—Time-division multiplex systems
- H04J3/24—Time-division multiplex systems in which the allocation is indicated by an address the different channels being transmitted sequentially
- H04J3/247—ATM or packet multiplexing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23406—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving management of server-side video buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2365—Multiplexing of several video streams
- H04N21/23655—Statistical multiplexing, e.g. by controlling the encoder to alter its bitrate to optimize the bandwidth utilization
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2385—Channel allocation; Bandwidth allocation
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Multimedia (AREA)
- Computer Hardware Design (AREA)
- Time-Division Multiplex Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Radio Relay Systems (AREA)
- Television Systems (AREA)
Abstract
(57)【要約】
ビットストリームの出力速度を判定する技術。ビットストリームから読み出された情報を利用可能なバンド幅に適用することにより、出力速度を判定する。これらの技術を用いて、ビット速度可変ビットストリームを衛星アップリンク上に多重化する統計的マルチプレクサを構築する。各ビットストリームの最低出力速度および最高出力速度の判定が、マルチプレクサ中のビットストリームのキューまたはビットストリームの復号器にアンダーフローあるいはオーバーフローが発生しないような様式で行なわれる。マルチプレクサは、メモリバッファのフルネスを見て、フルネスと、出力がバンド幅を上回る状態が発生する可能性とを相関させる。各ビットストリームにバンド幅の最低速度を与えるほど十分なバンド幅が無い場合、グルーフレームを挿入するか、または、優先順位の低いチャネルをドロップすることができる。
Description
【0001】 (関連出願) 本出願は、1997年3月21日に出願され、Huangらに付与された、S
cientific−Atlanta、Inc.を譲受人とする「Using
a Rceiver Model to Multiplex Variabl
e−Rate Bit Streams Having Timing Con
straints」という名称の係属中の米国特許第08/823,007号の
一部継続出願である。
cientific−Atlanta、Inc.を譲受人とする「Using
a Rceiver Model to Multiplex Variabl
e−Rate Bit Streams Having Timing Con
straints」という名称の係属中の米国特許第08/823,007号の
一部継続出願である。
【0002】 (発明の分野) 本発明は概して、速度可変ビットストリームの伝送に関し、より詳細には、今
にも起こりそうな(imminent)バンド幅オーバーフローの検出および防
止に関する。
にも起こりそうな(imminent)バンド幅オーバーフローの検出および防
止に関する。
【0003】 (発明の背景) データ伝送における新しい問題として、データ伝送は高バンド幅を必要とし、
バーストし易く(bursty)、また時間的制約を有する問題がある。従来か
ら、データ伝送は、電話会社によって提供される公衆通信交換網上でまたはパケ
ットネットワーク上で行われてきた。公衆通信交換網は双方向音声アプリケーシ
ョン用に設計されているため、厳しい時間的制約を満足する比較的低バンド幅の
回路を提供する。パケットネットワークは、コンピュータシステム間のデータ転
送用に設計されている。唯一の制約は、データが送信先に到着する時期が不確定
である点である。転送用に利用可能なバンド幅の量は、ネットワークの輻輳の程
度によって異なる。そのため、パケットネットワークは、膨大な量のデータ(b
urst of data)中のデータが送信先に到着する時期または送信先に
到着する順番を保証しない場合が多い。
バーストし易く(bursty)、また時間的制約を有する問題がある。従来か
ら、データ伝送は、電話会社によって提供される公衆通信交換網上でまたはパケ
ットネットワーク上で行われてきた。公衆通信交換網は双方向音声アプリケーシ
ョン用に設計されているため、厳しい時間的制約を満足する比較的低バンド幅の
回路を提供する。パケットネットワークは、コンピュータシステム間のデータ転
送用に設計されている。唯一の制約は、データが送信先に到着する時期が不確定
である点である。転送用に利用可能なバンド幅の量は、ネットワークの輻輳の程
度によって異なる。そのため、パケットネットワークは、膨大な量のデータ(b
urst of data)中のデータが送信先に到着する時期または送信先に
到着する順番を保証しない場合が多い。
【0004】 従って、電話線ネットワークまたはパケットネットワークのいずれも、高いバ
ンド幅で、バーストし易いデータを時間制約を守って処理するよう良好に適合さ
れてはいない点が理解され得る。このようなデータの一例として、Motion Picture Experts Group(「MPEG」)MPEG−2
規格、または別の場合はISO/IEC13818−1および13818−2に
記載されている規格に従って圧縮されるデジタルテレビ用データがある。
ンド幅で、バーストし易いデータを時間制約を守って処理するよう良好に適合さ
れてはいない点が理解され得る。このようなデータの一例として、Motion Picture Experts Group(「MPEG」)MPEG−2
規格、または別の場合はISO/IEC13818−1および13818−2に
記載されている規格に従って圧縮されるデジタルテレビ用データがある。
【0005】 ここで図1を参照して、本発明の理解に必要なMPEG−2規格の詳細が示さ
れている。MPEG−2規格は、デジタル映像の表示を圧縮するための符号化ス
キームを定義する。この符号化スキームは、映像画像に大量の空間的冗長性およ
び時間的冗長性が存在する場合が多い事実を利用したものである。空間的冗長性
が存在するのは、所与の映像ピクチャに、領域全体が同じ外観のセクションが存
在するためである。このような領域が大きく、またこのような領域の割合が大き
くなるほど、画像中の空間的冗長性も増大する。時間的冗長性が存在するのは、
所与の映像画像自身と所与の映像画像の直前の画像および所与の画像の直後の画
像との間ではそれほど変化が無い場合が多いためである。2つの映像画像間の変
化量が小さいほど、時間的冗長性の量は増大する。画像中に存在する空間的冗長
性が多く、当該画像が属する画像シーケンス中に存在する時間的冗長性が多いほ
ど、画像を表示するために必要な情報のビット量が少なくなる。
れている。MPEG−2規格は、デジタル映像の表示を圧縮するための符号化ス
キームを定義する。この符号化スキームは、映像画像に大量の空間的冗長性およ
び時間的冗長性が存在する場合が多い事実を利用したものである。空間的冗長性
が存在するのは、所与の映像ピクチャに、領域全体が同じ外観のセクションが存
在するためである。このような領域が大きく、またこのような領域の割合が大き
くなるほど、画像中の空間的冗長性も増大する。時間的冗長性が存在するのは、
所与の映像画像自身と所与の映像画像の直前の画像および所与の画像の直後の画
像との間ではそれほど変化が無い場合が多いためである。2つの映像画像間の変
化量が小さいほど、時間的冗長性の量は増大する。画像中に存在する空間的冗長
性が多く、当該画像が属する画像シーケンス中に存在する時間的冗長性が多いほ
ど、画像を表示するために必要な情報のビット量が少なくなる。
【0006】 MPEG−2規格を用いて符号化された画像伝送において最大の利点が得られ
るのは、画像の伝送を調節可能なビット速度で行うことが可能である場合である
。ビット速度が調節可能なのは、受信側のデバイスが画像を受信する速度が一定
である一方、画像のビット数はそれぞれ異なるからである。従って、大きい画像
の方が、小さい画像よりも高速のビット速度を要求し、調節可能なビット速度で
伝送されるMPEG画像シーケンスは、時間制約付きの速度可変ビットストリー
ムである。例えば、無地の(solid)色付き背景の前にニュースの総合司会
者がいる様子を示す画像シーケンスは、コマーシャルまたはMTVの楽曲の表現
を示す画像シーケンスの場合よりも、より多くの空間的冗長性および時間的冗長
性を有する。また、ニュース総合司会者を示す画像のビット速度は、MTVの楽
曲表現用の画像のビット速度よりもはるかに遅い。
るのは、画像の伝送を調節可能なビット速度で行うことが可能である場合である
。ビット速度が調節可能なのは、受信側のデバイスが画像を受信する速度が一定
である一方、画像のビット数はそれぞれ異なるからである。従って、大きい画像
の方が、小さい画像よりも高速のビット速度を要求し、調節可能なビット速度で
伝送されるMPEG画像シーケンスは、時間制約付きの速度可変ビットストリー
ムである。例えば、無地の(solid)色付き背景の前にニュースの総合司会
者がいる様子を示す画像シーケンスは、コマーシャルまたはMTVの楽曲の表現
を示す画像シーケンスの場合よりも、より多くの空間的冗長性および時間的冗長
性を有する。また、ニュース総合司会者を示す画像のビット速度は、MTVの楽
曲表現用の画像のビット速度よりもはるかに遅い。
【0007】 MPEG−2圧縮スキームは、映像画像のシーケンスを圧縮されたピクチャシ
ーケンスとして表現し、各圧縮ピクチャを、特定の時間に復号する必要がある。
ピクチャの圧縮様式は3種類あり、1つの様式は内部コード化であり、この様式
では、残り全てのピクチャを参照せずに圧縮を行う。この符号化技術は、空間的
冗長性を低減するが時間的冗長性は低減せず、この符号化技術から得られるピク
チャは一般的には、符号化によって空間的冗長性および時間的冗長性の両方が低
減したピクチャよりも大型である。この様式で符号化されたピクチャをI−ピク
チャと呼ぶ。シーケンス中には特定の数のI−ピクチャが必要である。これは、
先ず第1にI−ピクチャは初期のピクチャシーケンスとして必要であり、第2に
、I−ピクチャは伝送エラーからの回復を可能とするからである。
ーケンスとして表現し、各圧縮ピクチャを、特定の時間に復号する必要がある。
ピクチャの圧縮様式は3種類あり、1つの様式は内部コード化であり、この様式
では、残り全てのピクチャを参照せずに圧縮を行う。この符号化技術は、空間的
冗長性を低減するが時間的冗長性は低減せず、この符号化技術から得られるピク
チャは一般的には、符号化によって空間的冗長性および時間的冗長性の両方が低
減したピクチャよりも大型である。この様式で符号化されたピクチャをI−ピク
チャと呼ぶ。シーケンス中には特定の数のI−ピクチャが必要である。これは、
先ず第1にI−ピクチャは初期のピクチャシーケンスとして必要であり、第2に
、I−ピクチャは伝送エラーからの回復を可能とするからである。
【0008】 時間的冗長性は、先行ピクチャあるいは後続ピクチャまたはこれら両方からの
一連の変化として、符号化ピクチャによって低減される。MPEG−2の場合、
これは、前方の動きが補償された予測および後方の動きが補償された予測を用い
て行われる。前方の動きが補償された予測のみを用いるピクチャの場合、そのピ
クチャを予測符号化ピクチャまたはPピクチャと呼ぶ。前方の動きが補償された
予測および後方の動きが補償された予測の両方を用いるピクチャの場合、そのピ
クチャを双方向予測符号化ピクチャまたは略してBピクチャと呼ぶ。Pピクチャ
は一般的には、I−ピクチャよりもビット数が少なく、ビット数が最少なのはB
ピクチャである。従って、MPEG−2フォーマットのピクチャの所与のシーケ
ンスを符号化するために必要なビット数は、上述したピクチャコード化配信方式
と、ピクチャのコンテンツそのものとによって異なる。上記の説明から明らかな
ように、ニュース総合司会者の画像を符号化するために必要なピクチャシーケン
スは、MTVの楽曲を表現するために必要なシーケンスよりも、I−ピクチャ数
ならびにBピクチャ数およびPピクチャ数が少ない。その結果、ニュース総合司
会者の画像のMPEG−2表示は、MTVシーケンスの画像のMPEG−2表示
よりもずっと小さくなる。
一連の変化として、符号化ピクチャによって低減される。MPEG−2の場合、
これは、前方の動きが補償された予測および後方の動きが補償された予測を用い
て行われる。前方の動きが補償された予測のみを用いるピクチャの場合、そのピ
クチャを予測符号化ピクチャまたはPピクチャと呼ぶ。前方の動きが補償された
予測および後方の動きが補償された予測の両方を用いるピクチャの場合、そのピ
クチャを双方向予測符号化ピクチャまたは略してBピクチャと呼ぶ。Pピクチャ
は一般的には、I−ピクチャよりもビット数が少なく、ビット数が最少なのはB
ピクチャである。従って、MPEG−2フォーマットのピクチャの所与のシーケ
ンスを符号化するために必要なビット数は、上述したピクチャコード化配信方式
と、ピクチャのコンテンツそのものとによって異なる。上記の説明から明らかな
ように、ニュース総合司会者の画像を符号化するために必要なピクチャシーケン
スは、MTVの楽曲を表現するために必要なシーケンスよりも、I−ピクチャ数
ならびにBピクチャ数およびPピクチャ数が少ない。その結果、ニュース総合司
会者の画像のMPEG−2表示は、MTVシーケンスの画像のMPEG−2表示
よりもずっと小さくなる。
【0009】 MPEG−2ピクチャは、低コストの消費者電子デバイス(例えば、デジタル
テレビセットまたはケーブルテレビ(「CATV」)サービスプロバイダによっ
て提供されるセットトップボックス)によって受信される。このようなデバイス
は低コストであるため、MPEG−2ピクチャの格納用として利用可能なメモリ
量に厳しい制約がある。その上、MPEG−2ピクチャは動画生成用に用いられ
ているため、MPEG−2ピクチャは、受信器中に適切な順序で到着させなけれ
ばならず、しかも、次のMPEG−2ピクチャが必要なときに利用できるような
時間間隔で送信する必要があり、かつ現在送信されているピクチャ用にメモリに
余裕を持たせておかなければならない。当該分野において、データが足りなくな
ったメモリのことをメモリがアンダーフローしたといい、許容収容量以上のデー
タを受信したメモリのことを、メモリがオーバーフローしたという。アンダーフ
ローの場合、次のMPEG−2ピクチャが到着するまでTVピクチャ中の動きを
停止させなければならず、オーバーフローの場合、メモリ中にうまく入らなかっ
たデータはそのまま欠損部分となる。
テレビセットまたはケーブルテレビ(「CATV」)サービスプロバイダによっ
て提供されるセットトップボックス)によって受信される。このようなデバイス
は低コストであるため、MPEG−2ピクチャの格納用として利用可能なメモリ
量に厳しい制約がある。その上、MPEG−2ピクチャは動画生成用に用いられ
ているため、MPEG−2ピクチャは、受信器中に適切な順序で到着させなけれ
ばならず、しかも、次のMPEG−2ピクチャが必要なときに利用できるような
時間間隔で送信する必要があり、かつ現在送信されているピクチャ用にメモリに
余裕を持たせておかなければならない。当該分野において、データが足りなくな
ったメモリのことをメモリがアンダーフローしたといい、許容収容量以上のデー
タを受信したメモリのことを、メモリがオーバーフローしたという。アンダーフ
ローの場合、次のMPEG−2ピクチャが到着するまでTVピクチャ中の動きを
停止させなければならず、オーバーフローの場合、メモリ中にうまく入らなかっ
たデータはそのまま欠損部分となる。
【0010】 図1は、デジタルピクチャソース12およびテレビ14を含むシステム10を
示し、デジタルピクチャソース12およびテレビ14は、TV画像のシーケンス
のMPEG−2ビットストリーム表示を搬送するチャネル16によって接続され
る。デジタルピクチャソース12は、画像18の未圧縮デジタル表示(「UDR
」)を生成し、生成された未圧縮デジタル表示は、調節可能なビット速度(「V
BR」)符号器20へと送られる。符号器20は、この未圧縮デジタル表示を符
号化して、速度可変ビットストリーム(「VRBS」)22を生成する。速度可
変ビットストリーム22は、調節可能な長さの圧縮化デジタルピクチャ24(a
...n)のシーケンスである。上述したように、MPEG−2規格に従って符
号化を行う場合、ピクチャの長さは、ピクチャによって表現される画像の複雑度
と、当該ピクチャがI−ピクチャ、PピクチャまたはBピクチャのいずれかであ
るかということとによって異なる。さらに、ピクチャの長さは、VBR符号器2
0の符号化速度によっても異なる。この速度は調節可能である。一般に、ピクチ
ャの符号化用のビット数が多いほど、ピクチャ品質も高くなる場合が多い。
示し、デジタルピクチャソース12およびテレビ14は、TV画像のシーケンス
のMPEG−2ビットストリーム表示を搬送するチャネル16によって接続され
る。デジタルピクチャソース12は、画像18の未圧縮デジタル表示(「UDR
」)を生成し、生成された未圧縮デジタル表示は、調節可能なビット速度(「V
BR」)符号器20へと送られる。符号器20は、この未圧縮デジタル表示を符
号化して、速度可変ビットストリーム(「VRBS」)22を生成する。速度可
変ビットストリーム22は、調節可能な長さの圧縮化デジタルピクチャ24(a
...n)のシーケンスである。上述したように、MPEG−2規格に従って符
号化を行う場合、ピクチャの長さは、ピクチャによって表現される画像の複雑度
と、当該ピクチャがI−ピクチャ、PピクチャまたはBピクチャのいずれかであ
るかということとによって異なる。さらに、ピクチャの長さは、VBR符号器2
0の符号化速度によっても異なる。この速度は調節可能である。一般に、ピクチ
ャの符号化用のビット数が多いほど、ピクチャ品質も高くなる場合が多い。
【0011】 速度可変ビットストリーム22は、チャネル16を介してVBR復号器26へ
と転送され、VBR復号器26は、圧縮化デジタルピクチャ24(a...n)
を復号して、未圧縮デジタルピクチャ28を生成する。次いで、これらの未圧縮
デジタルピクチャ28は、テレビ14に提供される。テレビ14がデジタルテレ
ビである場合、これらの未圧縮デジタルピクチャ28は、直接提供される。テレ
ビ14がデジタルテレビではない場合、未圧縮デジタルピクチャ(「UDP」)
28を標準的アナログテレビ信号に変換し、次いで変換した信号をテレビ14に
提供する他の構成要素が存在する。もちろん、1つの符号器20からの出力を受
信するVBR復号器26の数はいくつであってもよい。
と転送され、VBR復号器26は、圧縮化デジタルピクチャ24(a...n)
を復号して、未圧縮デジタルピクチャ28を生成する。次いで、これらの未圧縮
デジタルピクチャ28は、テレビ14に提供される。テレビ14がデジタルテレ
ビである場合、これらの未圧縮デジタルピクチャ28は、直接提供される。テレ
ビ14がデジタルテレビではない場合、未圧縮デジタルピクチャ(「UDP」)
28を標準的アナログテレビ信号に変換し、次いで変換した信号をテレビ14に
提供する他の構成要素が存在する。もちろん、1つの符号器20からの出力を受
信するVBR復号器26の数はいくつであってもよい。
【0012】 図1において、チャネル16は、ビットストリーム22をパケット30のシー
ケンスとして転送する。従って、図1において、圧縮化デジタルピクチャ24は
、長さが調節可能なパケット30のシーケンスとして現れる。従って、ピクチャ
24(a)は「n」個のパケットを有し得、ピクチャ24(n)は「k」個のパ
ケットを有し得る。各ピクチャ24はタイミング情報32を含む。タイミング情
報は、2種類の情報、すなわちクロック情報およびタイムスタンプを含む。クロ
ック情報は、復号器26と符号器20とを同期させるために用いられる。MPE
G−2規格では、このクロック情報をプログラムクロックリファレンス(PCR
)と呼ぶ。タイムスタンプは、ピクチャを復号化するタイミングを指定する復号
化タイムスタンプ(「DTS」)と、ピクチャを実際に表示するタイミングを指
定する表示タイムスタンプ(「PTS」)とを含む。タイムスタンプ中で指定さ
れる時間は、クロック情報として指定される。上述したように、VBR復号器2
6は、ピクチャ24が復号化され、TV14に提供されるまで、ピクチャ24の
格納用として比較的少量のメモリを含む。このメモリを図1中の34に示し、本
明細書中、以下においてこのメモリを復号器のビットバッファと呼ぶ。ビットバ
ッファ34は、少なくとも最大時のMPEG−2ピクチャを収容するくらいの大
きさでなければならない。さらに、チャネル16は、ビットバッファ34へのピ
クチャ24の提供を、復号器26がピクチャ24を適切なタイミングでTV14
に利用可能とし、かつ、ビットバッファ34にオーバーフローまたはアンダーフ
ローが発生しないような様式で行わなければならない。ビットバッファ34にア
ンダーフローが発生するのは、復号器にピクチャの復号を開始させるためのピク
チャのタイムスタンプ中に指定された時間までに、ピクチャ24中の一部のビッ
トがビットバッファに到着しなかった場合である。
ケンスとして転送する。従って、図1において、圧縮化デジタルピクチャ24は
、長さが調節可能なパケット30のシーケンスとして現れる。従って、ピクチャ
24(a)は「n」個のパケットを有し得、ピクチャ24(n)は「k」個のパ
ケットを有し得る。各ピクチャ24はタイミング情報32を含む。タイミング情
報は、2種類の情報、すなわちクロック情報およびタイムスタンプを含む。クロ
ック情報は、復号器26と符号器20とを同期させるために用いられる。MPE
G−2規格では、このクロック情報をプログラムクロックリファレンス(PCR
)と呼ぶ。タイムスタンプは、ピクチャを復号化するタイミングを指定する復号
化タイムスタンプ(「DTS」)と、ピクチャを実際に表示するタイミングを指
定する表示タイムスタンプ(「PTS」)とを含む。タイムスタンプ中で指定さ
れる時間は、クロック情報として指定される。上述したように、VBR復号器2
6は、ピクチャ24が復号化され、TV14に提供されるまで、ピクチャ24の
格納用として比較的少量のメモリを含む。このメモリを図1中の34に示し、本
明細書中、以下においてこのメモリを復号器のビットバッファと呼ぶ。ビットバ
ッファ34は、少なくとも最大時のMPEG−2ピクチャを収容するくらいの大
きさでなければならない。さらに、チャネル16は、ビットバッファ34へのピ
クチャ24の提供を、復号器26がピクチャ24を適切なタイミングでTV14
に利用可能とし、かつ、ビットバッファ34にオーバーフローまたはアンダーフ
ローが発生しないような様式で行わなければならない。ビットバッファ34にア
ンダーフローが発生するのは、復号器にピクチャの復号を開始させるためのピク
チャのタイムスタンプ中に指定された時間までに、ピクチャ24中の一部のビッ
トがビットバッファに到着しなかった場合である。
【0013】 複数のチャネル16が1つの超高バンド幅のデータリンクを共有し得るため、
ピクチャ24をVBR復号器26に適切な順序でかつ適切なタイミングで提供す
る工程は、より複雑になっている。例えば、CATVプロバイダは、衛星リンク
を用いて、多数のTV番組を中央地点から複数のCATVネットワークヘッドエ
ンドに提供し、これらのCATVネットワークヘッドエンドから、TV番組を同
軸ケーブルまたは光ファイバケーブルを介して個々の加入者に伝送することがで
き、または、衛星リンクを用いてTV番組を直接加入者に提供することもできる
。複数のチャネルが1つの媒体(例えば、衛星リンク)を共有する場合、その媒
体の状態をチャネル間で多重化されているという。
ピクチャ24をVBR復号器26に適切な順序でかつ適切なタイミングで提供す
る工程は、より複雑になっている。例えば、CATVプロバイダは、衛星リンク
を用いて、多数のTV番組を中央地点から複数のCATVネットワークヘッドエ
ンドに提供し、これらのCATVネットワークヘッドエンドから、TV番組を同
軸ケーブルまたは光ファイバケーブルを介して個々の加入者に伝送することがで
き、または、衛星リンクを用いてTV番組を直接加入者に提供することもできる
。複数のチャネルが1つの媒体(例えば、衛星リンク)を共有する場合、その媒
体の状態をチャネル間で多重化されているという。
【0014】 図2は、上記のような多重化された媒体を示す。ビットを含むパケットを搬送
する複数のチャネル16(0)〜16(n)が、速度可変ビットストリーム22
から、マルチプレクサ40に送られる。マルチプレクサ40は、これらのパケッ
トを必要なだけ処理して、高バンド幅(「HBW」)媒体42上に多重化する。
次いで、これらのパケットは媒体42を介してデマルチプレクサ44に送られ、
デマルチプレクサ44は、これらのパケットを個々のチャネル16(0..n)
用のパケットストリームに選別する。デジタルデータを搬送する複数のチャネル
間で高バンド幅媒体を共有する単純な様式として、各個々のチャネル16アクセ
スを、ごく短時間で高バンド幅媒体に繰返し与える様式がある。本明細書中、以
下、この様式をスロットと呼ぶ。
する複数のチャネル16(0)〜16(n)が、速度可変ビットストリーム22
から、マルチプレクサ40に送られる。マルチプレクサ40は、これらのパケッ
トを必要なだけ処理して、高バンド幅(「HBW」)媒体42上に多重化する。
次いで、これらのパケットは媒体42を介してデマルチプレクサ44に送られ、
デマルチプレクサ44は、これらのパケットを個々のチャネル16(0..n)
用のパケットストリームに選別する。デジタルデータを搬送する複数のチャネル
間で高バンド幅媒体を共有する単純な様式として、各個々のチャネル16アクセ
スを、ごく短時間で高バンド幅媒体に繰返し与える様式がある。本明細書中、以
下、この様式をスロットと呼ぶ。
【0015】 このスロット様式を行う1つの様式を、図2中の50に示す。ごく短い時間が
スロット52(n...0)として50に現れ、スロット52(0)等のスロッ
トの間、チャネル16に属する特定の数のパケット30(n...0)が、媒体
42に出力され得る。次いで、各チャネル16はスロット52を有し、全スロッ
トはまとめられてタイムスライス54を構成するようになる。媒体42がビット
速度および時間制約が異なるチャネル(例えば、チャネル16)を搬送する場合
、各チャネル16用のスロット52は、チャネル16の時間、オーバーフローお
よびアンダーフローに関する制約に収まる範囲で、最大限のピクチャをチャネル
16に送るのに必要な速度でビットを提供するパケットを出力する必要がある。
もちろん、殆どのときは、チャネルのスロット52は、最大数よりも少ない数の
パケットを媒体42に出力し、時にはパケットを全く搬送しない場合もあり得る
。各スロット52は媒体42の全バンド幅の特定部分を表すため、スロット52
が一杯でない場合、必ず媒体42のバンド幅の一部が無駄になっている。
スロット52(n...0)として50に現れ、スロット52(0)等のスロッ
トの間、チャネル16に属する特定の数のパケット30(n...0)が、媒体
42に出力され得る。次いで、各チャネル16はスロット52を有し、全スロッ
トはまとめられてタイムスライス54を構成するようになる。媒体42がビット
速度および時間制約が異なるチャネル(例えば、チャネル16)を搬送する場合
、各チャネル16用のスロット52は、チャネル16の時間、オーバーフローお
よびアンダーフローに関する制約に収まる範囲で、最大限のピクチャをチャネル
16に送るのに必要な速度でビットを提供するパケットを出力する必要がある。
もちろん、殆どのときは、チャネルのスロット52は、最大数よりも少ない数の
パケットを媒体42に出力し、時にはパケットを全く搬送しない場合もあり得る
。各スロット52は媒体42の全バンド幅の特定部分を表すため、スロット52
が一杯でない場合、必ず媒体42のバンド幅の一部が無駄になっている。
【0016】 媒体バンド幅を無駄にしないために、一般に、各タイムスライスを殆どパケッ
トで一杯にすることを確実にする技術が用いられている。この技術を、統計的多
重化と呼ぶ。この統計的多重化が利用しているのは、所与の瞬間において、一組
のチャネル中の各チャネルがビットを異なるビット速度で搬送し、媒体バンド幅
の大きさは、その瞬間においてチャネルが現在搬送している内容を伝送するだけ
大きければよいのであって、チャネルが伝送を最大速度で行っている場合に全チ
ャネルが搬送可能な内容を伝送するほど大きい必要はないという事実である。こ
れらのチャネルの出力に統計的解析を行い、全組のチャネルの実際の最大出力速
度を判定し、媒体バンド幅を、その実際のピーク速度を満たすようなサイズにす
る。このような様式で判定されたバンド幅は典型的には、図2の55に示すよう
な様式での多重化用に必要なバンド幅よりもずっと少量である。その結果、所与
の容量のバンド幅でより多くのチャネルを送信することが可能となる。スロット
レベルにおいて統計的多重化に必要なことは、チャネルがタイムスライス54中
に可変長さのスロットを有することを実際に可能にし、これにより、当該タイム
スライス54間においてチャネル16の実際の要求を満たす、メカニズムである
。このような可変長さのスロット56を有するタイムスライス54を55に示す
。
トで一杯にすることを確実にする技術が用いられている。この技術を、統計的多
重化と呼ぶ。この統計的多重化が利用しているのは、所与の瞬間において、一組
のチャネル中の各チャネルがビットを異なるビット速度で搬送し、媒体バンド幅
の大きさは、その瞬間においてチャネルが現在搬送している内容を伝送するだけ
大きければよいのであって、チャネルが伝送を最大速度で行っている場合に全チ
ャネルが搬送可能な内容を伝送するほど大きい必要はないという事実である。こ
れらのチャネルの出力に統計的解析を行い、全組のチャネルの実際の最大出力速
度を判定し、媒体バンド幅を、その実際のピーク速度を満たすようなサイズにす
る。このような様式で判定されたバンド幅は典型的には、図2の55に示すよう
な様式での多重化用に必要なバンド幅よりもずっと少量である。その結果、所与
の容量のバンド幅でより多くのチャネルを送信することが可能となる。スロット
レベルにおいて統計的多重化に必要なことは、チャネルがタイムスライス54中
に可変長さのスロットを有することを実際に可能にし、これにより、当該タイム
スライス54間においてチャネル16の実際の要求を満たす、メカニズムである
。このような可変長さのスロット56を有するタイムスライス54を55に示す
。
【0017】 ビットストリームを統計的に多重化する方法は、例えば、1996年4月9日
に発行された、Raoに付与された「Method for Configur
ing a Statistical Multiplexer to Dyn
amically Allocate Communication Chan
nel Bandwidth」という名称の米国特許第5,506,844号と
、1997年3月21日に出願された、「Using a Receiver
Model to Multiplex Variable Rate Bit
Streams Having Timing Constraints」と
いう名称の米国特許出願シリアル番号第08/823,007とに開示されてい
る。本明細書中、同文献の各々の開示内容を参考のため援用する。
に発行された、Raoに付与された「Method for Configur
ing a Statistical Multiplexer to Dyn
amically Allocate Communication Chan
nel Bandwidth」という名称の米国特許第5,506,844号と
、1997年3月21日に出願された、「Using a Receiver
Model to Multiplex Variable Rate Bit
Streams Having Timing Constraints」と
いう名称の米国特許出願シリアル番号第08/823,007とに開示されてい
る。本明細書中、同文献の各々の開示内容を参考のため援用する。
【0018】 上記参考特許および特許出願中に開示されているビットストリームを統計的に
多重化する方法は全て適切な様式で行なわれてはいるものの、これらの方法には
いくつかの制約があることが明らかになっている。例えば、Raoの特許では媒
体のバンド幅の利用範囲を最大化する方法が実際に開示されているものの、いく
つかの欠点もあり、それらの欠点の中でおそらく重要なものは、同特許では多重
化の調節をピクチャ品質を変更することにより行っている点に関連する。第2の
欠点は、同特許では、デジタル画像を区分的な一定のビットストリームとして符
号化する符号器を教示している点に関する。これらのビットストリームの圧縮度
は、速度可変ビットストリームの圧縮度よりも低い。
多重化する方法は全て適切な様式で行なわれてはいるものの、これらの方法には
いくつかの制約があることが明らかになっている。例えば、Raoの特許では媒
体のバンド幅の利用範囲を最大化する方法が実際に開示されているものの、いく
つかの欠点もあり、それらの欠点の中でおそらく重要なものは、同特許では多重
化の調節をピクチャ品質を変更することにより行っている点に関連する。第2の
欠点は、同特許では、デジタル画像を区分的な一定のビットストリームとして符
号化する符号器を教示している点に関する。これらのビットストリームの圧縮度
は、速度可変ビットストリームの圧縮度よりも低い。
【0019】 上記米国特許出願シリアル番号第08/823,007号に特有の制約は、高
バンド幅媒体が一定のバンド幅で構成されているため、統計的多重化が可能なの
は限られたピークビット速度の入力チャネルだけである点に関する。各タイムス
ライス毎に、各チャネルがマルチプレクサの高バンド幅媒体出力の一部分に割り
当てられる。従って、ビット速度の割り当ては基本的には静的であり、ピークビ
ット速度が1つ以上のチャネルから変化した場合のように条件が瞬間的に変化し
た場合、対応することができない。同様に、上記米国特許出願シリアル番号第0
8/823,007号では、MPEG−2ビットストリーム中のアンカー無し(
non−anchor)ピクチャ(例えば、I−B−Pシーケンス中のBピクチ
ャまたは全I−ピクチャシーケンス中の任意のI−ピクチャ)を、より小型の「
グルー」ピクチャと取り代えることにより、オーバーフローに関連する問題に対
処している。この対処様式は重大な革新ではあるが、これだけでは、所与の瞬間
における全チャネルのバンド幅要件全体がマルチプレクサの利用可能出力よりも
小さいことを保証しない(すなわち、バンド幅オーバーフロー状態の防止を保証
できていない)。また、上記米国特許出願シリアル番号第08/823,007
号は、オーバーフローが今にも起こりそうな場合と、その状況によって影響を受
け得るチャネルおよびチャネル中のピクチャとを検出する手段も提供していない
。
バンド幅媒体が一定のバンド幅で構成されているため、統計的多重化が可能なの
は限られたピークビット速度の入力チャネルだけである点に関する。各タイムス
ライス毎に、各チャネルがマルチプレクサの高バンド幅媒体出力の一部分に割り
当てられる。従って、ビット速度の割り当ては基本的には静的であり、ピークビ
ット速度が1つ以上のチャネルから変化した場合のように条件が瞬間的に変化し
た場合、対応することができない。同様に、上記米国特許出願シリアル番号第0
8/823,007号では、MPEG−2ビットストリーム中のアンカー無し(
non−anchor)ピクチャ(例えば、I−B−Pシーケンス中のBピクチ
ャまたは全I−ピクチャシーケンス中の任意のI−ピクチャ)を、より小型の「
グルー」ピクチャと取り代えることにより、オーバーフローに関連する問題に対
処している。この対処様式は重大な革新ではあるが、これだけでは、所与の瞬間
における全チャネルのバンド幅要件全体がマルチプレクサの利用可能出力よりも
小さいことを保証しない(すなわち、バンド幅オーバーフロー状態の防止を保証
できていない)。また、上記米国特許出願シリアル番号第08/823,007
号は、オーバーフローが今にも起こりそうな場合と、その状況によって影響を受
け得るチャネルおよびチャネル中のピクチャとを検出する手段も提供していない
。
【0020】 従って、バンド幅オーバーフローの可能性がある状況に対処するための改善さ
れた方法が必要とされている。このような改善された方法は、バンド幅の割当て
を改善するだけでなく、今にも起こりそうなバンド幅オーバーフローと、当該オ
ーバーフローによる影響を受け得るチャネルとを予測する方が尚のこと望ましい
。また、これらの改善は全て、マルチプレクサの効果全体に悪影響を与えること
なく達成されるべきである。
れた方法が必要とされている。このような改善された方法は、バンド幅の割当て
を改善するだけでなく、今にも起こりそうなバンド幅オーバーフローと、当該オ
ーバーフローによる影響を受け得るチャネルとを予測する方が尚のこと望ましい
。また、これらの改善は全て、マルチプレクサの効果全体に悪影響を与えること
なく達成されるべきである。
【0021】 (好適な実施例の詳細な説明) 本明細書は新規と考えられる本発明の機能を規定する特許請求の範囲で締めく
くられるが、本発明は、以下の説明を図面と共に考えればより深く理解されると
考えられる。図面中、類似の参照符号は以下の記載にも適用される。
くられるが、本発明は、以下の説明を図面と共に考えればより深く理解されると
考えられる。図面中、類似の参照符号は以下の記載にも適用される。
【0022】 最も簡単に言うと、本発明は、ルックアヘッドを行って、出力されるべき映像
情報を収容するくらいに十分なバンド幅がマルチプレクサシステムにあるかどう
かを確認する能力に関する。本明細書中以下に説明するプロセスは、チャネル毎
に必要な相対スペースを見て、ビット(またはMPEGパケット)を必要なだけ
割り当てる。本明細書中において以下により詳細に説明する統計的メモリバッフ
ァ(SMB)のフルネスを見ることにより、パニック状態(すなわち、バンド幅
必要条件がバンド幅利用可能性を越えた状態)を識別することが可能となる。こ
のような状態をひとたび識別できれば、このような状態を回避することができる
。
情報を収容するくらいに十分なバンド幅がマルチプレクサシステムにあるかどう
かを確認する能力に関する。本明細書中以下に説明するプロセスは、チャネル毎
に必要な相対スペースを見て、ビット(またはMPEGパケット)を必要なだけ
割り当てる。本明細書中において以下により詳細に説明する統計的メモリバッフ
ァ(SMB)のフルネスを見ることにより、パニック状態(すなわち、バンド幅
必要条件がバンド幅利用可能性を越えた状態)を識別することが可能となる。こ
のような状態をひとたび識別できれば、このような状態を回避することができる
。
【0023】 ここで図3を参照して、本発明の原理に従って実現(implement)さ
れた、MPEG−2ビットストリーム用の統計的マルチプレクサ80の概要が示
されている。マルチプレクサ80の主要な構成要素は、パケット収集コントロー
ラ82と、各速度可変ビットストリーム22(0)用の伝送コントローラ(「T
C」)84(0)と、パケット配信コントローラ86と、パケット配信コントロ
ーラ86の出力を受信し、受信した出力を伝送媒体42に適した形態で出力する
モジュレータ88とである。パケット収集コントローラ82は、速度可変ビット
ストリーム22(0..n)からパケットを収集し、所与のビットストリーム2
2(0)を搬送するパケットを、所与のビットストリームに対応する伝送コント
ローラ84(i)に配信する。好適な実施形態において、ビットストリーム22
(0...n)の全てのパケットは、バス90に出力される。各パケットは、ビ
ットストリームの所属先を示す指示(indication)を含み、パケット
収集コントローラは、この指示(it)を適切な伝送コントローラ84(i)に
経路設定することにより、パケット中に含まれるこの指示に応答する。ここで、
各ビットストリーム22(i)中のパケットは、符号器20(i)から送信され
た順序で伝送コントローラ84(i)に到着する点に留意されたい。
れた、MPEG−2ビットストリーム用の統計的マルチプレクサ80の概要が示
されている。マルチプレクサ80の主要な構成要素は、パケット収集コントロー
ラ82と、各速度可変ビットストリーム22(0)用の伝送コントローラ(「T
C」)84(0)と、パケット配信コントローラ86と、パケット配信コントロ
ーラ86の出力を受信し、受信した出力を伝送媒体42に適した形態で出力する
モジュレータ88とである。パケット収集コントローラ82は、速度可変ビット
ストリーム22(0..n)からパケットを収集し、所与のビットストリーム2
2(0)を搬送するパケットを、所与のビットストリームに対応する伝送コント
ローラ84(i)に配信する。好適な実施形態において、ビットストリーム22
(0...n)の全てのパケットは、バス90に出力される。各パケットは、ビ
ットストリームの所属先を示す指示(indication)を含み、パケット
収集コントローラは、この指示(it)を適切な伝送コントローラ84(i)に
経路設定することにより、パケット中に含まれるこの指示に応答する。ここで、
各ビットストリーム22(i)中のパケットは、符号器20(i)から送信され
た順序で伝送コントローラ84(i)に到着する点に留意されたい。
【0024】 伝送コントローラ84は、当該パケットに対応するビットストリーム22から
パケットを媒体42に出力する速度を判定する。実際の速度は、伝送速度コント
ローラ(「TRC」)92によって判定される。この速度判定は、少なくとも以
下の情報を基にして行われる:ビットストリーム22(0)中の少なくとも1つ
の現在のピクチャ、タイミング情報32および現在のピクチャのサイズ。映像バ
ッファ検査器(Video Buffer Verifier)(VBV)モデ
ル94は、仮定に基づいたビットバッファ34のモデルである。ビットバッファ
34にオーバーフローまたはアンダーフローが発生していない場合、VBVモデ
ル94は、タイミング情報およびピクチャサイズ情報を用いて、ビットストリー
ム22を復号器のビットバッファ34に提供する速度の範囲を判定する。伝送速
度コントローラ92はこの速度情報をパケット配信コントローラ86に提供し、
パケット配信コントローラ86は、全伝送コントローラ84(0...n)から
の情報を用いて、各タイムスライスの間に、次のタイムスライス中に伝送媒体4
2のバンド幅をビットストリーム22の間に割り当てる様式を判定する。パケッ
ト数が多いほど、1つのタイムスライス中にビットストリーム22(i)が出力
しなければならない量も多くなり、バンド幅が大きいほど、当該タイムスライス
間においてビットストリーム22(i)が受信する量も多くなる。
パケットを媒体42に出力する速度を判定する。実際の速度は、伝送速度コント
ローラ(「TRC」)92によって判定される。この速度判定は、少なくとも以
下の情報を基にして行われる:ビットストリーム22(0)中の少なくとも1つ
の現在のピクチャ、タイミング情報32および現在のピクチャのサイズ。映像バ
ッファ検査器(Video Buffer Verifier)(VBV)モデ
ル94は、仮定に基づいたビットバッファ34のモデルである。ビットバッファ
34にオーバーフローまたはアンダーフローが発生していない場合、VBVモデ
ル94は、タイミング情報およびピクチャサイズ情報を用いて、ビットストリー
ム22を復号器のビットバッファ34に提供する速度の範囲を判定する。伝送速
度コントローラ92はこの速度情報をパケット配信コントローラ86に提供し、
パケット配信コントローラ86は、全伝送コントローラ84(0...n)から
の情報を用いて、各タイムスライスの間に、次のタイムスライス中に伝送媒体4
2のバンド幅をビットストリーム22の間に割り当てる様式を判定する。パケッ
ト数が多いほど、1つのタイムスライス中にビットストリーム22(i)が出力
しなければならない量も多くなり、バンド幅が大きいほど、当該タイムスライス
間においてビットストリーム22(i)が受信する量も多くなる。
【0025】 説明をより詳細に進める。伝送コントローラ84は、ビットストリーム解析器
96を用いてタイミング情報およびピクチャサイズ情報を入手する。ビットスト
リーム解析器96は、ビットストリーム22が伝送コントローラ84に入来した
ときにビットストリーム22を読み出し、ビットストリーム22からタイミング
情報32およびピクチャサイズ98を回復させる。ビットストリーム解析器96
がこのようなことを行うことが可能なのは、MPEG−2規格によって、各ピク
チャ24の開始部分に印があることと、タイミング情報32が各ピクチャ24中
の所定の場所にあることとが定められているためである。上述したように、各ピ
クチャ24のタイミング情報32は、クロック値および復号タイムスタンプ(「
DTS」)を含む。伝送コントローラ84および後続の(later)復号器2
6は、このクロック値を用いて、自身を符号器20と同期させる。タイミング情
報は、ポケットサイズの基本ストリーム(Pocktsized Elemen
tary Stream)(「PES」)パケットのヘッダ中に見受けられ、ポ
ケットサイズの基本ストリーム(「PES」)パケットは、圧縮化映像データを
カプセル化する。この情報は、PESヘッダのPTSタイムスタンプパラメータ
およびDTSタイムスタンプパラメータ中に含まれる。MPEG−2規格は、タ
イムスタンプを少なくとも700ミリ秒(msec)毎に送ることを要求する。
DTSが圧縮されたピクチャと共に送られたかどうかが不明な場合、復号時間を
シーケンスヘッダおよびピクチャヘッダ中のパラメータから判定するか、または
、以前に伝送されたピクチャのDTS値から推定することができる。詳細につい
ては、ISO/IEC13818−1の添付書類Cを参照されたい。ビットスト
リーム解析器96は、1つのピクチャの開始部分から次のピクチャの開始部分ま
でのビット(またはパケット)を計数するだけで、ピクチャのサイズを判定する
。
96を用いてタイミング情報およびピクチャサイズ情報を入手する。ビットスト
リーム解析器96は、ビットストリーム22が伝送コントローラ84に入来した
ときにビットストリーム22を読み出し、ビットストリーム22からタイミング
情報32およびピクチャサイズ98を回復させる。ビットストリーム解析器96
がこのようなことを行うことが可能なのは、MPEG−2規格によって、各ピク
チャ24の開始部分に印があることと、タイミング情報32が各ピクチャ24中
の所定の場所にあることとが定められているためである。上述したように、各ピ
クチャ24のタイミング情報32は、クロック値および復号タイムスタンプ(「
DTS」)を含む。伝送コントローラ84および後続の(later)復号器2
6は、このクロック値を用いて、自身を符号器20と同期させる。タイミング情
報は、ポケットサイズの基本ストリーム(Pocktsized Elemen
tary Stream)(「PES」)パケットのヘッダ中に見受けられ、ポ
ケットサイズの基本ストリーム(「PES」)パケットは、圧縮化映像データを
カプセル化する。この情報は、PESヘッダのPTSタイムスタンプパラメータ
およびDTSタイムスタンプパラメータ中に含まれる。MPEG−2規格は、タ
イムスタンプを少なくとも700ミリ秒(msec)毎に送ることを要求する。
DTSが圧縮されたピクチャと共に送られたかどうかが不明な場合、復号時間を
シーケンスヘッダおよびピクチャヘッダ中のパラメータから判定するか、または
、以前に伝送されたピクチャのDTS値から推定することができる。詳細につい
ては、ISO/IEC13818−1の添付書類Cを参照されたい。ビットスト
リーム解析器96は、1つのピクチャの開始部分から次のピクチャの開始部分ま
でのビット(またはパケット)を計数するだけで、ピクチャのサイズを判定する
。
【0026】 タイミング情報およびピクチャサイズは、VBVモデル94において用いられ
る。ピクチャがマルチプレクサ80に入来し、ピクチャが復号器26において復
号されるまでの間、VBVモデル94は、ビットストリーム22中の各ピクチャ
に関するタイミング情報およびピクチャサイズ情報を必要とする。DTSバッフ
ァ100は、そのモデルに必要なピクチャ全てに関するタイミング情報を収容す
るくらいに十分な大きさでなければならない。VBVモデル94の挙動はMPE
G−2規格のセマンティクスのみによって定義されるのであって、特定のビット
バッファ34(i)によって定義されるのではない点に留意されたい。作動中の
MPEG−2復号器用のビットバッファは全て、ピクチャのタイミング情報によ
って示される時間において、復号器に次のピクチャを完全な形態で提供できなけ
ればならない。これは、任意の作動中のMPEG−2復号器用のビットバッファ
34(i)が、少なくともMPEG−2ピクチャが最大の場合にも耐えるほどの
十分な大きさでなければならないことを示す。この最小バッファサイズと、ピク
チャのタイミング情報と、個々のピクチャのサイズとが与えられると、VBVモ
デル94(i)は、作動中のあらゆるMPEG−2復号器のビットバッファ34
(i)について、ピクチャが復号される前に各ピクチャがビットバッファ34(
i)に到着し、かつビットバッファ34(i)にオーバーフローが発生しないこ
とを保証する、ビットストリーム22(i)の出力速度を判定することができる
。
る。ピクチャがマルチプレクサ80に入来し、ピクチャが復号器26において復
号されるまでの間、VBVモデル94は、ビットストリーム22中の各ピクチャ
に関するタイミング情報およびピクチャサイズ情報を必要とする。DTSバッフ
ァ100は、そのモデルに必要なピクチャ全てに関するタイミング情報を収容す
るくらいに十分な大きさでなければならない。VBVモデル94の挙動はMPE
G−2規格のセマンティクスのみによって定義されるのであって、特定のビット
バッファ34(i)によって定義されるのではない点に留意されたい。作動中の
MPEG−2復号器用のビットバッファは全て、ピクチャのタイミング情報によ
って示される時間において、復号器に次のピクチャを完全な形態で提供できなけ
ればならない。これは、任意の作動中のMPEG−2復号器用のビットバッファ
34(i)が、少なくともMPEG−2ピクチャが最大の場合にも耐えるほどの
十分な大きさでなければならないことを示す。この最小バッファサイズと、ピク
チャのタイミング情報と、個々のピクチャのサイズとが与えられると、VBVモ
デル94(i)は、作動中のあらゆるMPEG−2復号器のビットバッファ34
(i)について、ピクチャが復号される前に各ピクチャがビットバッファ34(
i)に到着し、かつビットバッファ34(i)にオーバーフローが発生しないこ
とを保証する、ビットストリーム22(i)の出力速度を判定することができる
。
【0027】 図4は、伝送コントローラ84およびパケット配信コントローラ86の好適な
実施形態の詳細を示す。図4は、n個の伝送コントローラのうち3つ(すなわち
、伝送コントローラ84(i)、(j)、(k))と、パケット配信コントロー
ラ86の2つの主要構成要素(すなわち、中央ビット速度コントローラ102お
よびスイッチ104)とを示す。伝送コントローラ84(i)から始まって、伝
送速度コントローラ92、解析器96およびVBVモデル94に加え、伝送コン
トローラは、統計的マルチプレクサバッファ(SMB)106と、バッファ10
6用のメータ108と、スロットル110とを含む。3つの伝送コントローラ(
i、jおよびk)のみを図示しているが、本発明はこの図示に限定されない点に
留意されたい。任意の数の伝送コントローラを用いてよい。また、各伝送コント
ローラは基本的には同じであるため、84(i)1つだけについて詳細に説明す
る。
実施形態の詳細を示す。図4は、n個の伝送コントローラのうち3つ(すなわち
、伝送コントローラ84(i)、(j)、(k))と、パケット配信コントロー
ラ86の2つの主要構成要素(すなわち、中央ビット速度コントローラ102お
よびスイッチ104)とを示す。伝送コントローラ84(i)から始まって、伝
送速度コントローラ92、解析器96およびVBVモデル94に加え、伝送コン
トローラは、統計的マルチプレクサバッファ(SMB)106と、バッファ10
6用のメータ108と、スロットル110とを含む。3つの伝送コントローラ(
i、jおよびk)のみを図示しているが、本発明はこの図示に限定されない点に
留意されたい。任意の数の伝送コントローラを用いてよい。また、各伝送コント
ローラは基本的には同じであるため、84(i)1つだけについて詳細に説明す
る。
【0028】 SMB106は、先入れ先出し方式のパイプバッファであり、ビットストリー
ム22(i)のビットが伝送コントローラ84(i)中にあるときにこれらのビ
ットを収容する。好適な実施形態において、SMB106は、ピクチャサイズと
符号器によって指定される最高ビット速度とに応じて、ピクチャ中の大部分また
は全てのビットを含む(図1の)バースト中の(in bursts)ピクチャ
24を受信する。本明細書中、このようなバーストをピクチャパルスと呼び、こ
のようなピクチャパルスによって表される時間周期を、映像フレーム速度の逆数
(inverse)Tpとして示す。例えば、NTSC映像コード化の場合、Tp =1/29.97=3ミリ秒(msec)である。上述したように、パケット配
信コントローラ86は、パケットをタイムスライス54として提供する。本明細
書中、これらのタイムスライスの1つの時間長さをTcで表す。1つの好適な実
施形態において、Tcは10msecである。
ム22(i)のビットが伝送コントローラ84(i)中にあるときにこれらのビ
ットを収容する。好適な実施形態において、SMB106は、ピクチャサイズと
符号器によって指定される最高ビット速度とに応じて、ピクチャ中の大部分また
は全てのビットを含む(図1の)バースト中の(in bursts)ピクチャ
24を受信する。本明細書中、このようなバーストをピクチャパルスと呼び、こ
のようなピクチャパルスによって表される時間周期を、映像フレーム速度の逆数
(inverse)Tpとして示す。例えば、NTSC映像コード化の場合、Tp =1/29.97=3ミリ秒(msec)である。上述したように、パケット配
信コントローラ86は、パケットをタイムスライス54として提供する。本明細
書中、これらのタイムスライスの1つの時間長さをTcで表す。1つの好適な実
施形態において、Tcは10msecである。
【0029】 SMB106はもちろん、予測される最大ピクチャパルスを読み出すのにかか
る時間の間に任意のサイズのピクチャパルスを受け取ることができるくらいの十
分な大きさでなければならない。さらに、SMB106からのデータ送出は、S
MB106にオーバーフローが発生しないことを保証する速度で行なわなければ
ならない。なぜならば、オーバーフローが発生すると、ビットストリーム22(
i)からビットが失われるからである。また、SMB106は、アンダーフロー
も発生してはならない。なぜならば、アンダーフローが発生すると、ビットスト
リームにヌル(null)パケットが挿入され、多重化された媒体が部分的に無
駄になるからである。メータ108は、SMB106のフルネス(fullne
ss)をモニタリングして、フルネスの程度に関する情報をTRC92に提供す
る。次いで、TRC92は、この情報を用いて、パケット配信コントローラ86
にパケットを提供するビット速度の範囲を必要に応じて変更して、SMB106
にオーバーフローまたはアンダーフローが発生しないようにする。最後に、TR
C92は、スロットル110を設定する。スロットル110の設定は、TRC9
2がパケット配信コントローラ86から受け取った、ビットストリーム22(i
)がタイムスライス54として媒体42に提供しようとするパケット30の数を
示す情報112(i)に基づいて行われる。
る時間の間に任意のサイズのピクチャパルスを受け取ることができるくらいの十
分な大きさでなければならない。さらに、SMB106からのデータ送出は、S
MB106にオーバーフローが発生しないことを保証する速度で行なわなければ
ならない。なぜならば、オーバーフローが発生すると、ビットストリーム22(
i)からビットが失われるからである。また、SMB106は、アンダーフロー
も発生してはならない。なぜならば、アンダーフローが発生すると、ビットスト
リームにヌル(null)パケットが挿入され、多重化された媒体が部分的に無
駄になるからである。メータ108は、SMB106のフルネス(fullne
ss)をモニタリングして、フルネスの程度に関する情報をTRC92に提供す
る。次いで、TRC92は、この情報を用いて、パケット配信コントローラ86
にパケットを提供するビット速度の範囲を必要に応じて変更して、SMB106
にオーバーフローまたはアンダーフローが発生しないようにする。最後に、TR
C92は、スロットル110を設定する。スロットル110の設定は、TRC9
2がパケット配信コントローラ86から受け取った、ビットストリーム22(i
)がタイムスライス54として媒体42に提供しようとするパケット30の数を
示す情報112(i)に基づいて行われる。
【0030】 上記ビット速度範囲を判定する際、TRC92は、所与のタイムスライス54
用の最低速度を、SMB106にオーバーフローが発生しないようにする速度お
よびVBVモデル94(i)にアンダーフローが発生しないようにする速度の最
大値に設定し、タイムスライス用の最高速度を、SMB106にアンダーフロー
が発生しないようにする速度およびVBVモデル94にオーバーフローが発生し
ないようにする速度の最低値に設定する。パケット配信コントローラ86につい
て話を進めて、パケット配信コントローラ86は、タイムスライス54Tcの間
に出力され得るパケット30を必要なだけビットストリーム22(1..n)に
割り当てて、各伝送コントローラ84について、TRC92によって提供される
速度および優先順位の範囲を同時に満たし、タイムスライス54の間に出力され
るパケット30の数を最大化する。好適な実施形態において、コントローラ86
は2つの構成要素を有し、中央ビット速度コントローラ102は、プロセッサ上
で動作するアルゴリズムであり、各伝送速度コントローラ92から受信した情報
を解析して、次のタイムスライス54において各ビットストリームから出力され
るパケット数を判定する。スイッチ104は、各ビットストリームについて、そ
のタイムスライス54の間にスロットル110によって可能にされるパケット3
0の数をとる。スイッチ104のインプリメンテーションは、各スロットルから
のパケット配信を、パケットがタイムスライス54にわたって均等に配信される
ような様式で行うようにされる。スイッチ104をこのようにインプリメントす
ると、パケットのストリームの復号器に対するバースト性(burstines
s)が低減され、これにより、復号器26に必要なトランスポートパケットバッ
ファの量が低減される。スイッチ104のこのようなインプリメンテーションは
、当該分野において周知である。従って、中央ビット速度コントローラ102は
、アルゴリズムを実行し、本明細書中、以下、このアルゴリズムを「ビット速度
割当てアルゴリズム」と呼ぶ。このビット速度割当てアルゴリズムは、同一譲受
人によって譲り受けられた、「Method and Apparatus f
or Detecting and Preventing Bandwidt
h Overflow in a Statistical Multiple
xer」という名称の同時係属中の出願シリアル番号第09/228,029号
に記載されているアルゴリズムに準拠して規定される。本明細書中、同出願を参
考として援用する。本明細書中、以下において「アグリゲートパニックアルゴリ
ズム」と呼ばれるアルゴリズムは、ビット速度割当てアルゴリズムにさらなる能
力を提供する。具体的には、このアルゴリズムは、マルチプレクサの高バンド幅
媒体出力がマルチプレクサのSMBにおいてバッファされたデータ(またはピク
チャ)の全体を配信するのに不十分になる時期を検出する能力を提供する。この
アルゴリズムは、さらに、この状況を修復する能力も提供する。
用の最低速度を、SMB106にオーバーフローが発生しないようにする速度お
よびVBVモデル94(i)にアンダーフローが発生しないようにする速度の最
大値に設定し、タイムスライス用の最高速度を、SMB106にアンダーフロー
が発生しないようにする速度およびVBVモデル94にオーバーフローが発生し
ないようにする速度の最低値に設定する。パケット配信コントローラ86につい
て話を進めて、パケット配信コントローラ86は、タイムスライス54Tcの間
に出力され得るパケット30を必要なだけビットストリーム22(1..n)に
割り当てて、各伝送コントローラ84について、TRC92によって提供される
速度および優先順位の範囲を同時に満たし、タイムスライス54の間に出力され
るパケット30の数を最大化する。好適な実施形態において、コントローラ86
は2つの構成要素を有し、中央ビット速度コントローラ102は、プロセッサ上
で動作するアルゴリズムであり、各伝送速度コントローラ92から受信した情報
を解析して、次のタイムスライス54において各ビットストリームから出力され
るパケット数を判定する。スイッチ104は、各ビットストリームについて、そ
のタイムスライス54の間にスロットル110によって可能にされるパケット3
0の数をとる。スイッチ104のインプリメンテーションは、各スロットルから
のパケット配信を、パケットがタイムスライス54にわたって均等に配信される
ような様式で行うようにされる。スイッチ104をこのようにインプリメントす
ると、パケットのストリームの復号器に対するバースト性(burstines
s)が低減され、これにより、復号器26に必要なトランスポートパケットバッ
ファの量が低減される。スイッチ104のこのようなインプリメンテーションは
、当該分野において周知である。従って、中央ビット速度コントローラ102は
、アルゴリズムを実行し、本明細書中、以下、このアルゴリズムを「ビット速度
割当てアルゴリズム」と呼ぶ。このビット速度割当てアルゴリズムは、同一譲受
人によって譲り受けられた、「Method and Apparatus f
or Detecting and Preventing Bandwidt
h Overflow in a Statistical Multiple
xer」という名称の同時係属中の出願シリアル番号第09/228,029号
に記載されているアルゴリズムに準拠して規定される。本明細書中、同出願を参
考として援用する。本明細書中、以下において「アグリゲートパニックアルゴリ
ズム」と呼ばれるアルゴリズムは、ビット速度割当てアルゴリズムにさらなる能
力を提供する。具体的には、このアルゴリズムは、マルチプレクサの高バンド幅
媒体出力がマルチプレクサのSMBにおいてバッファされたデータ(またはピク
チャ)の全体を配信するのに不十分になる時期を検出する能力を提供する。この
アルゴリズムは、さらに、この状況を修復する能力も提供する。
【0031】 ここで図5を参照して、本発明による、アグリゲートパニック状態の識別を示
す図が示されている。図150は基本的には、図3および4に示すマルチプレク
サの特定のタイムスライスの開始部分における全チャネルSMBの状態のスナッ
プショットを示す。明らかなように、図5では3つのチャネル(チャネル1、チ
ャネル2、チャネルM)を示しているが、本発明はこれらに限定されない。任意
の数のチャネルを用いてよい。各チャネルの各SMBは、現在送出されているピ
クチャ(またはピクチャ0、152(1)、152(2)および152(m))
を有し、各ピクチャは、当該ピクチャ中に残っている特定の数のパケットを有し
、各ピクチャの後、次の送出ピクチャ(またはピクチャ1、154(1)、15
4(2)および154(m))が後続し、これらの次の送出ピクチャ自身の後、
図5においてSMB156(2)、156(m)および158(2)中のピクチ
ャ2およびピクチャ3として表される別の送出ピクチャが後続する。図5に示す
ように、各SMBは、SMBそのものにおいてバッファされた異なる量または数
のピクチャを有し得ることを理解されたい。
す図が示されている。図150は基本的には、図3および4に示すマルチプレク
サの特定のタイムスライスの開始部分における全チャネルSMBの状態のスナッ
プショットを示す。明らかなように、図5では3つのチャネル(チャネル1、チ
ャネル2、チャネルM)を示しているが、本発明はこれらに限定されない。任意
の数のチャネルを用いてよい。各チャネルの各SMBは、現在送出されているピ
クチャ(またはピクチャ0、152(1)、152(2)および152(m))
を有し、各ピクチャは、当該ピクチャ中に残っている特定の数のパケットを有し
、各ピクチャの後、次の送出ピクチャ(またはピクチャ1、154(1)、15
4(2)および154(m))が後続し、これらの次の送出ピクチャ自身の後、
図5においてSMB156(2)、156(m)および158(2)中のピクチ
ャ2およびピクチャ3として表される別の送出ピクチャが後続する。図5に示す
ように、各SMBは、SMBそのものにおいてバッファされた異なる量または数
のピクチャを有し得ることを理解されたい。
【0032】 このアルゴリズムは処理ユニット上での処理時間を必要とするため、ビット速
度割当てアルゴリズムの結果を将来のタイムスライスに適用しなければならない
。すなわち、ビット速度割当てアルゴリズムが実行を開始する時期から実行結果
が適用される時期まで、処理遅延が生じる。この遅延は一定の遅延であり、前方
にあるタイムスライスの数として表され、「N_TC_AHEAD」として識別
される。N_TC_AHEADは、速度可変マルチプレクサのビット速度割当て
アルゴリズムのタイムスライス処理遅延(time slices proce
ssing delay)の数である。1つの実施形態において、N_TC_A
HEADは、前方の1つまたは2つのタイムスライスであり、これにより、処理
遅延は多くても2つのタイムスライス分である。
度割当てアルゴリズムの結果を将来のタイムスライスに適用しなければならない
。すなわち、ビット速度割当てアルゴリズムが実行を開始する時期から実行結果
が適用される時期まで、処理遅延が生じる。この遅延は一定の遅延であり、前方
にあるタイムスライスの数として表され、「N_TC_AHEAD」として識別
される。N_TC_AHEADは、速度可変マルチプレクサのビット速度割当て
アルゴリズムのタイムスライス処理遅延(time slices proce
ssing delay)の数である。1つの実施形態において、N_TC_A
HEADは、前方の1つまたは2つのタイムスライスであり、これにより、処理
遅延は多くても2つのタイムスライス分である。
【0033】 ビット速度割当てアルゴリズムは、特定のタイムスライスの実行を開始する際
、全SMBの自身のコンテンツ情報(knowledge)を調節して、現在時
間よりもN_TC_AHEADタイムスライス分だけ前方のSMBのスナップシ
ョットを生成しなければならない。従って、「time_now」がビット速度
割当てアルゴリズムが実行しようとする現在のシステム時間を表す場合、ビット
速度割当てアルゴリズムは、以下の時間において(at time)、自身のS
MB情報(knowledge)をスナップショットに調節する。
、全SMBの自身のコンテンツ情報(knowledge)を調節して、現在時
間よりもN_TC_AHEADタイムスライス分だけ前方のSMBのスナップシ
ョットを生成しなければならない。従って、「time_now」がビット速度
割当てアルゴリズムが実行しようとする現在のシステム時間を表す場合、ビット
速度割当てアルゴリズムは、以下の時間において(at time)、自身のS
MB情報(knowledge)をスナップショットに調節する。
【0034】 time_now+N_TC_AHEAD*Tc 図5を参照して、本発明のアグリゲートパニック方法アルゴリズムは、各タイ
ムスライスを実行し、ビット速度割当てアルゴリズムの場合と同様に、全チャネ
ルSMBの同じスナップショット上で動作し得る。これは、time_now+
N_TC_AHEAD*Tcに等しいシステム時間におけるスナップショットを
示す。ここで、time_nowは、アグリゲートパニックアルゴリズムが開始
したときのタイムスライスの開始部分におけるシステム時間である。このアグリ
ゲートパニックによる方法では、関連するチャネルSMBのパケット数の総和を
全部でm個のチャネルについて計算することにより、速度可変マルチプレクサ全
体中にバッファされているパケット「num_packets」の数を計算する
。
ムスライスを実行し、ビット速度割当てアルゴリズムの場合と同様に、全チャネ
ルSMBの同じスナップショット上で動作し得る。これは、time_now+
N_TC_AHEAD*Tcに等しいシステム時間におけるスナップショットを
示す。ここで、time_nowは、アグリゲートパニックアルゴリズムが開始
したときのタイムスライスの開始部分におけるシステム時間である。このアグリ
ゲートパニックによる方法では、関連するチャネルSMBのパケット数の総和を
全部でm個のチャネルについて計算することにより、速度可変マルチプレクサ全
体中にバッファされているパケット「num_packets」の数を計算する
。
【0035】 num_packets=;Pi(1≦i≦M) ここで、iはチャネルインデックスであり、PiはSMBi中のトランスポートパ
ケットの総数に等しく、SMBiは、チャネル「i」に対応するSMBである。
次に、最新の復号タイムスタンプ(「DTS」(本明細書中、以下において全S
MBの全ピクチャのlatest_DTSと呼ぶ))を判定する。最新のDTS
を有するピクチャは、最終ピクチャとして見なされ得、これにより、速度可変マ
ルチプレクサに全ピクチャを残し、次いで、これらのピクチャは、マルチプレク
サ中に格納される。上記の_DTSは、latest_DTSを有するピクチャ
の直前を先行するピクチャのDTSであり、これらの双方のピクチャを、図5に
おいてピクチャ156(2)および158(2)として図示し、これらのピクチ
ャ156(2)および158(2)はそれぞれ、previous_DTSおよ
びlatest_DTSである。このような様式でlatest_DTSを判定
する(例えば、SMB中の全ピクチャのDTSを比較するだけでlatest_
DTSを判定する)ためには、全チャネルビットストリームが同じシステム時間
に基づくことが必要である。これは、さらに、速度可変マルチプレクサにデータ
を入力する符号器は全て、同じシステムクロックにロックされることを示す。こ
のシステムクロックは、システムクロックリファレンス(「SCR」)として指
定され、全符号器が同じSCRにロックされた場合、全チャネルビットストリー
ムのDTSは、同じクロックによって参照される。従って、この様式は、DTS
のみを調べることにより最新のピクチャを判定することが可能な1つの様式であ
る。逆に言えば、全符号器が同じSCRにロックされない場合、最新のピクチャ
は、以下の式によって得られる。
ケットの総数に等しく、SMBiは、チャネル「i」に対応するSMBである。
次に、最新の復号タイムスタンプ(「DTS」(本明細書中、以下において全S
MBの全ピクチャのlatest_DTSと呼ぶ))を判定する。最新のDTS
を有するピクチャは、最終ピクチャとして見なされ得、これにより、速度可変マ
ルチプレクサに全ピクチャを残し、次いで、これらのピクチャは、マルチプレク
サ中に格納される。上記の_DTSは、latest_DTSを有するピクチャ
の直前を先行するピクチャのDTSであり、これらの双方のピクチャを、図5に
おいてピクチャ156(2)および158(2)として図示し、これらのピクチ
ャ156(2)および158(2)はそれぞれ、previous_DTSおよ
びlatest_DTSである。このような様式でlatest_DTSを判定
する(例えば、SMB中の全ピクチャのDTSを比較するだけでlatest_
DTSを判定する)ためには、全チャネルビットストリームが同じシステム時間
に基づくことが必要である。これは、さらに、速度可変マルチプレクサにデータ
を入力する符号器は全て、同じシステムクロックにロックされることを示す。こ
のシステムクロックは、システムクロックリファレンス(「SCR」)として指
定され、全符号器が同じSCRにロックされた場合、全チャネルビットストリー
ムのDTSは、同じクロックによって参照される。従って、この様式は、DTS
のみを調べることにより最新のピクチャを判定することが可能な1つの様式であ
る。逆に言えば、全符号器が同じSCRにロックされない場合、最新のピクチャ
は、以下の式によって得られる。
【0036】 latest_DTS=ピクチャjのDTS(チャネルiが(DTS(i,
j)−SCR(i))を最大化する場合) ここで、iは、m個のチャネルに関するチャネルインデックス(1≦i≦m)で
あり、jは、(0≦j≦SMB(i)中のピクチャの全数)の範囲であり、ピク
チャjは、チャネルiのj番目の送出ピクチャである。この場合、最新のピクチ
ャはこのピクチャであり、このピクチャのDTS値から関連チャネルのSCRを
減算したものが最大である。
j)−SCR(i))を最大化する場合) ここで、iは、m個のチャネルに関するチャネルインデックス(1≦i≦m)で
あり、jは、(0≦j≦SMB(i)中のピクチャの全数)の範囲であり、ピク
チャjは、チャネルiのj番目の送出ピクチャである。この場合、最新のピクチ
ャはこのピクチャであり、このピクチャのDTS値から関連チャネルのSCRを
減算したものが最大である。
【0037】 速度可変マルチプレクサの公知の分野において、各ピクチャは、直前の先行ピ
クチャのDTSによって与えられるシステム時間までに、復号器に到着しなけれ
ばならない。これにより、復号器中に少なくとも1つのピクチャが常時存在する
ことが保証される。なぜならば、ピクチャが復号されるまでに、既に次のピクチ
ャが復号器に到着していることが保証されるからである。従って、速度可変マル
チプレクサ中のデータ全体は、−tによって与えられる時間の分だけ、マルチプ
レクサから伝送されなければならない。−tは、以下の式によって表される。
クチャのDTSによって与えられるシステム時間までに、復号器に到着しなけれ
ばならない。これにより、復号器中に少なくとも1つのピクチャが常時存在する
ことが保証される。なぜならば、ピクチャが復号されるまでに、既に次のピクチ
ャが復号器に到着していることが保証されるからである。従って、速度可変マル
チプレクサ中のデータ全体は、−tによって与えられる時間の分だけ、マルチプ
レクサから伝送されなければならない。−tは、以下の式によって表される。
【0038】 −t=previous_DTS −(time_now+N_TC_AHEAD*Tc) ここで、time_nowは、現在のシステム時間(またはSCRの現在の値)
であり、Tcは、ビット速度割当てアルゴリズムのタイムスライスの時間長さ(
例えば、10msec)である。マルチプレクサからnum_packetsを
−tで与えられる時間分だけ伝送しなければならないため、マルチプレクサがこ
れを達成するくらいに十分なバンド幅を有するかどうかを判定することが可能で
ある。この判定は、num_packetsを、マルチプレクサがこの時間分だ
け伝送することが可能なパケット数の最大値と比較することにより、行なわれる
。本明細書中、以下、マルチプレクサが−tで伝送することが可能なパケットの
最大数を、num_packets_maxと呼び、以下のように計算する。
であり、Tcは、ビット速度割当てアルゴリズムのタイムスライスの時間長さ(
例えば、10msec)である。マルチプレクサからnum_packetsを
−tで与えられる時間分だけ伝送しなければならないため、マルチプレクサがこ
れを達成するくらいに十分なバンド幅を有するかどうかを判定することが可能で
ある。この判定は、num_packetsを、マルチプレクサがこの時間分だ
け伝送することが可能なパケット数の最大値と比較することにより、行なわれる
。本明細書中、以下、マルチプレクサが−tで伝送することが可能なパケットの
最大数を、num_packets_maxと呼び、以下のように計算する。
【0039】 num_packets_max =Rmux*−t/TP_size =(Rmux*Tc*−t)/(TP_size*Tc) =(Rmux*Tc/TP_size)*(−t/Tc) =Np_tc*−t/Tc ここで、Rmuxは、マルチプレクサの1秒あたりのビット単位の出力バンド幅
(定数)と等しく、TP_SIZEは、トランスポートパケット中のビット数で
あり、Np_tcは、マルチプレクサが1つのタイムスライスにおいて伝送する
ことができるパケット数に等しく、Tcは、タイムスライス中の期間に等しい。
(定数)と等しく、TP_SIZEは、トランスポートパケット中のビット数で
あり、Np_tcは、マルチプレクサが1つのタイムスライスにおいて伝送する
ことができるパケット数に等しく、Tcは、タイムスライス中の期間に等しい。
【0040】 従って、num_packetsがnum_packets_maxよりも大
きい場合、アグリゲートパニック状態が生じる。このイベントにおいて、マルチ
プレクサ全体中にバッファされるパケットの総数は、最後のピクチャが直前先行
するピクチャのDTSまでに対応する各復号器に到着するような様式で、タイミ
ング良く伝送できない場合がある。マルチプレクサの出力バンド幅は、この事態
を保証するには不十分である。この状況を修復するために、アンカー無し(no
n−anchor)ピクチャを、小型のグルーピクチャと取り換える。当業者な
らば容易に理解するように、グルーピクチャは、プレストアされた最小限にコー
ド化されたピクチャであり、離散的コサイン変換(「DCT」)係数が無く、ま
た0動きベクトル(0 motion vector)もゼロであるため、基本
的には複製(repeat)ピクチャである。より優先順位の低いチャネルから
始めて、当該チャネルのSMB中にバッファされたアンカー無しピクチャ全てを
、グルーピクチャと取り換える。グルーピクチャと取り換えられた各ピクチャに
ついて、マルチプレクサのSMBの1つにより小型のピクチャがあることを説明
するために、num_packetsを調節する必要が出てくる。従って、各グ
ルーフレーム挿入について、num_packetsを以下のように調節する。
きい場合、アグリゲートパニック状態が生じる。このイベントにおいて、マルチ
プレクサ全体中にバッファされるパケットの総数は、最後のピクチャが直前先行
するピクチャのDTSまでに対応する各復号器に到着するような様式で、タイミ
ング良く伝送できない場合がある。マルチプレクサの出力バンド幅は、この事態
を保証するには不十分である。この状況を修復するために、アンカー無し(no
n−anchor)ピクチャを、小型のグルーピクチャと取り換える。当業者な
らば容易に理解するように、グルーピクチャは、プレストアされた最小限にコー
ド化されたピクチャであり、離散的コサイン変換(「DCT」)係数が無く、ま
た0動きベクトル(0 motion vector)もゼロであるため、基本
的には複製(repeat)ピクチャである。より優先順位の低いチャネルから
始めて、当該チャネルのSMB中にバッファされたアンカー無しピクチャ全てを
、グルーピクチャと取り換える。グルーピクチャと取り換えられた各ピクチャに
ついて、マルチプレクサのSMBの1つにより小型のピクチャがあることを説明
するために、num_packetsを調節する必要が出てくる。従って、各グ
ルーフレーム挿入について、num_packetsを以下のように調節する。
【0041】 k_packets_saved=p(i,j)−g_packets num_packets=num_packets−k_packets_
saved ここで、p(i,j)は、チャネルiの送出ピクチャ数j中のパケット数と等し
く、jの範囲は(1≦j≦SMBi中の全ピクチャ数)であり、iの範囲はMチ
ャネルの場合に(1≦i≦M)であり、g_packetsは、プレストアされ
たグルーピクチャ中のパケット数(すなわち、好適な実施形態において標準解像
度のデジタル映像の場合に2に等しい定数)であり、k_packets_sa
vedは、オリジナルのアンカー無しピクチャとグルーピクチャとのパケット数
の差に等しい。
saved ここで、p(i,j)は、チャネルiの送出ピクチャ数j中のパケット数と等し
く、jの範囲は(1≦j≦SMBi中の全ピクチャ数)であり、iの範囲はMチ
ャネルの場合に(1≦i≦M)であり、g_packetsは、プレストアされ
たグルーピクチャ中のパケット数(すなわち、好適な実施形態において標準解像
度のデジタル映像の場合に2に等しい定数)であり、k_packets_sa
vedは、オリジナルのアンカー無しピクチャとグルーピクチャとのパケット数
の差に等しい。
【0042】 各チャネルについてこのプロセスを続け、アンカー無しピクチャをグルーピク
チャと取り換えて、num_packets≦num_packets_max
になるまで、num_packetsを計算しつづける。num_packet
s≦num_packets_maxになると、アグリゲートパニック状態がな
くなるため、マルチプレクサのバンド幅は、マルチプレクサ中の全パケットを最
後のピクチャに必要な時間までに伝送できるくらい十分になっているはずである
。従って、num_packetsがnum_packets≦num_pac
kets_maxになるまで調節されると、アグリゲートパニックアルゴリズム
は終了し、グルーピクチャの挿入も終了する。
チャと取り換えて、num_packets≦num_packets_max
になるまで、num_packetsを計算しつづける。num_packet
s≦num_packets_maxになると、アグリゲートパニック状態がな
くなるため、マルチプレクサのバンド幅は、マルチプレクサ中の全パケットを最
後のピクチャに必要な時間までに伝送できるくらい十分になっているはずである
。従って、num_packetsがnum_packets≦num_pac
kets_maxになるまで調節されると、アグリゲートパニックアルゴリズム
は終了し、グルーピクチャの挿入も終了する。
【0043】 ここで図6を参照して、本発明によるアグリゲートパニック状態をより詳細に
示す図が示されている。詳細には、上記において図5を参照して説明した方法で
は、マルチプレクサ中のデータ全体を調べ、そのデータ全体の最新のピクチャの
DTSを用いて、当該マルチプレクサから当該データ全体を伝送するのに十分な
バンド幅があるかどうかを判定する。図6中の図示および本明細書中の以下のよ
り詳細な説明に示すように、この方法は、データ全体を送出ピクチャ「k」(k
は、1〜最大数のピクチャの場合のSMB中のピクチャ数)まで解析できるよう
拡張可能である。図6は、チャネル1、2、...mの場合にSMB中にバッフ
ァされるピクチャを示す。各チャネルは、現在の送出ピクチャ160(1)、1
60(2)、160(m)を有し、現在の送出ピクチャは送出ピクチャ0であり
、ピクチャ0の直後に後続する次の送出ピクチャをピクチャ1と呼び、162(
1)、162(2)、162(m)に、図示のように各SMB中のさらなるピク
チャが後続する。各SMBは、図6に図示するようにバッファされる異なる数の
ピクチャを有し得、SMB 2およびSMB mは、ピクチャ2(それぞれ、1
64(2)および164(m))を含み、SMB 2はさらに、ピクチャ3(1
66)を含む。送出ピクチャの一部はマルチプレクサから既に伝送されているた
め、全SMB中の各現在の送出ピクチャ(または各ピクチャ0)は、ピクチャ全
体を為していない可能性がある点に留意されたい。
示す図が示されている。詳細には、上記において図5を参照して説明した方法で
は、マルチプレクサ中のデータ全体を調べ、そのデータ全体の最新のピクチャの
DTSを用いて、当該マルチプレクサから当該データ全体を伝送するのに十分な
バンド幅があるかどうかを判定する。図6中の図示および本明細書中の以下のよ
り詳細な説明に示すように、この方法は、データ全体を送出ピクチャ「k」(k
は、1〜最大数のピクチャの場合のSMB中のピクチャ数)まで解析できるよう
拡張可能である。図6は、チャネル1、2、...mの場合にSMB中にバッフ
ァされるピクチャを示す。各チャネルは、現在の送出ピクチャ160(1)、1
60(2)、160(m)を有し、現在の送出ピクチャは送出ピクチャ0であり
、ピクチャ0の直後に後続する次の送出ピクチャをピクチャ1と呼び、162(
1)、162(2)、162(m)に、図示のように各SMB中のさらなるピク
チャが後続する。各SMBは、図6に図示するようにバッファされる異なる数の
ピクチャを有し得、SMB 2およびSMB mは、ピクチャ2(それぞれ、1
64(2)および164(m))を含み、SMB 2はさらに、ピクチャ3(1
66)を含む。送出ピクチャの一部はマルチプレクサから既に伝送されているた
め、全SMB中の各現在の送出ピクチャ(または各ピクチャ0)は、ピクチャ全
体を為していない可能性がある点に留意されたい。
【0044】 ピクチャ1、162(1)、162(2)、162(m)を参照して、lat
est_DTS(1)という用語を、全SMB中のピクチャ1の全ての最新のD
TSとして定義する。同様に、previous_DTS(1)という用語は、
最新のDTS(1)の直前に先行するピクチャのDTSであることが理解される
。Num_packets(1)は、全SMB中のパケットのピクチャ1までの
総数である。これは、全SMBの現在の送出ピクチャ中の全パケットと、次の送
出ピクチャ中の全パケットとを含む。Num_packets(1)は、−t(
1)で与えられる時間以内でマルチプレクサから伝送されなければならない。こ
こで、 −t(1)=previous_DTS(1)−(time_now+N_
TC_AHEAD*Tc) マルチプレクサからこの時間分だけ伝送され得るパケットの最大数は、上記と同
様に以下のようにも与えられる。
est_DTS(1)という用語を、全SMB中のピクチャ1の全ての最新のD
TSとして定義する。同様に、previous_DTS(1)という用語は、
最新のDTS(1)の直前に先行するピクチャのDTSであることが理解される
。Num_packets(1)は、全SMB中のパケットのピクチャ1までの
総数である。これは、全SMBの現在の送出ピクチャ中の全パケットと、次の送
出ピクチャ中の全パケットとを含む。Num_packets(1)は、−t(
1)で与えられる時間以内でマルチプレクサから伝送されなければならない。こ
こで、 −t(1)=previous_DTS(1)−(time_now+N_
TC_AHEAD*Tc) マルチプレクサからこの時間分だけ伝送され得るパケットの最大数は、上記と同
様に以下のようにも与えられる。
【0045】 num_packets_max(1)=Np_tc*_−t(1)/Tc
num_packets(1)≦num_packets_max(1)である
場合、これは、マルチプレクサの出力バンド幅が、最新のピクチャが直前先行す
るピクチャのDTSまでに到着する時間以内でピクチャ1の全てをマルチプレク
サから伝送するのに十分なことを示す。この場合、ピクチャ1についてアグリゲ
ートパニック状態は発生せず、本明細書中において説明した方法は次のピクチャ
へと進む。これについて以下に全て説明する。
num_packets(1)≦num_packets_max(1)である
場合、これは、マルチプレクサの出力バンド幅が、最新のピクチャが直前先行す
るピクチャのDTSまでに到着する時間以内でピクチャ1の全てをマルチプレク
サから伝送するのに十分なことを示す。この場合、ピクチャ1についてアグリゲ
ートパニック状態は発生せず、本明細書中において説明した方法は次のピクチャ
へと進む。これについて以下に全て説明する。
【0046】 ピクチャ1についてアグリゲートパニック状態が発生するのは、num_pa
ckets(1)がnum_packets_max(1)よりも大きい場合で
ある。このイベントにおいて、マルチプレクサのバンド幅は、データ全体をピク
チャ1まで伝送して、直前先行するピクチャのDTSまでにピクチャ1の全ての
最新のピクチャを各復号器に伝送することを保証するには不十分である。この状
況を修復するために、この状態がなくなるまで、アンカー無しピクチャをより小
型のグルーピクチャと取り換える。
ckets(1)がnum_packets_max(1)よりも大きい場合で
ある。このイベントにおいて、マルチプレクサのバンド幅は、データ全体をピク
チャ1まで伝送して、直前先行するピクチャのDTSまでにピクチャ1の全ての
最新のピクチャを各復号器に伝送することを保証するには不十分である。この状
況を修復するために、この状態がなくなるまで、アンカー無しピクチャをより小
型のグルーピクチャと取り換える。
【0047】 従って、優先順位の最も低いチャネルから始まって、ピクチャ1がアンカー無
しピクチャである場合、上述したようにピクチャ1をグルーピクチャと取り換え
、次いで、以下の式にしたがってnum_packets(1)を調節する。
しピクチャである場合、上述したようにピクチャ1をグルーピクチャと取り換え
、次いで、以下の式にしたがってnum_packets(1)を調節する。
【0048】 k_packets_saved=p(i,1)−g_packets num_packets(1)=num_packets(1)−k_p
ackets_saved ここで、p(i,1)は、チャネルiの送出ピクチャ1のパケット数に等しく、
iは、優先順位の最も低いチャネルから優先順位の最も高いチャネルにインクリ
メントするチャネルインデックスであり、iの範囲は、mチャネルの場合に(1
≦i≦m)であり、k_packets_savedおよびg_packets
は、上述のように規定される。
ackets_saved ここで、p(i,1)は、チャネルiの送出ピクチャ1のパケット数に等しく、
iは、優先順位の最も低いチャネルから優先順位の最も高いチャネルにインクリ
メントするチャネルインデックスであり、iの範囲は、mチャネルの場合に(1
≦i≦m)であり、k_packets_savedおよびg_packets
は、上述のように規定される。
【0049】 グルーフレームを挿入するプロセスは、チャネルピクチャ1全てをグルーフレ
ーム挿入対象として調べ終えるまでまたはnum_packets(1)をnu
m_packet_max(1)未満になるまで調節するまで、継続される。n
um_packets(1)≦num_packets_max(1)である場
合、これは、多重化(mux)のバンド幅が全SMBのピクチャ1の全てのデー
タ全体を上述したような良好なタイミングで伝送するのに十分であることを示す
。
ーム挿入対象として調べ終えるまでまたはnum_packets(1)をnu
m_packet_max(1)未満になるまで調節するまで、継続される。n
um_packets(1)≦num_packets_max(1)である場
合、これは、多重化(mux)のバンド幅が全SMBのピクチャ1の全てのデー
タ全体を上述したような良好なタイミングで伝送するのに十分であることを示す
。
【0050】 上記のようにピクチャ1を処理した後、アグリゲートパニック方法は、ピクチ
ャ2に進み、同じ計算を行う。次いで、このアルゴリズムは、ピクチャからピク
チャへと進んで、パニック状態を有する状況を識別し、ピクチャ1について上述
したような後発するパニック状態の各々に対処する。このアルゴリズムは、図6
にピクチャ166として示す送出ピクチャNpmaxまで繰り返される。ここで
、Npmaxは、最大数のピクチャを有するSMB中のピクチャの数である。図
5および6を参照して上述したアルゴリズムは典型的には、各タイムスライスを
行う。これは、各SMBは、各タイムスライス中の新規データを既に受け取って
いる場合が多いからである。
ャ2に進み、同じ計算を行う。次いで、このアルゴリズムは、ピクチャからピク
チャへと進んで、パニック状態を有する状況を識別し、ピクチャ1について上述
したような後発するパニック状態の各々に対処する。このアルゴリズムは、図6
にピクチャ166として示す送出ピクチャNpmaxまで繰り返される。ここで
、Npmaxは、最大数のピクチャを有するSMB中のピクチャの数である。図
5および6を参照して上述したアルゴリズムは典型的には、各タイムスライスを
行う。これは、各SMBは、各タイムスライス中の新規データを既に受け取って
いる場合が多いからである。
【0051】 本発明をより容易に理解するためには、SMBのフルネスとパニック状態の発
生可能性との間に相関がある点を理解する必要がある。本明細書中において上述
したように、パニック状態が発生するのは、マルチプレクサから出力されるべき
パケットの数が、所与のタイムスライスにおいて当該マルチプレクサに利用可能
なバンド幅を上回る場合である。図5および6を参照して上述した方法では、S
MBのフルネスを見て、このフルネスの測定結果から、発生する可能性のあるパ
ニック状態の90%を検出することが可能である。残りの10%のパニック状態
については、同一譲受人に譲受られた、「Method and Appara
tus for Detecting and Preventing Ban
dwidth Overflow in a Statistical Mul
tiplexer」という名称の同時係属中の出願シリアル番号第09/228
,029号等に記載されているより高度な方法を用いることが可能である。本明
細書中、同出願の開示内容を参考のため援用する。
生可能性との間に相関がある点を理解する必要がある。本明細書中において上述
したように、パニック状態が発生するのは、マルチプレクサから出力されるべき
パケットの数が、所与のタイムスライスにおいて当該マルチプレクサに利用可能
なバンド幅を上回る場合である。図5および6を参照して上述した方法では、S
MBのフルネスを見て、このフルネスの測定結果から、発生する可能性のあるパ
ニック状態の90%を検出することが可能である。残りの10%のパニック状態
については、同一譲受人に譲受られた、「Method and Appara
tus for Detecting and Preventing Ban
dwidth Overflow in a Statistical Mul
tiplexer」という名称の同時係属中の出願シリアル番号第09/228
,029号等に記載されているより高度な方法を用いることが可能である。本明
細書中、同出願の開示内容を参考のため援用する。
【0052】 本発明の好適な実施形態について例示および説明を行ってきたが、本発明はこ
れらの実施形態に限定されないことは明らかである。当業者であれば、本明細書
中の特許請求の範囲に定義されているような本発明の精神および範囲から逸脱す
ることなく、多くの改変物、変更物、修正物、代替物および均等物を想起する。
れらの実施形態に限定されないことは明らかである。当業者であれば、本明細書
中の特許請求の範囲に定義されているような本発明の精神および範囲から逸脱す
ることなく、多くの改変物、変更物、修正物、代替物および均等物を想起する。
【図1】 図1は、デジタルテレビピクチャの符号化、伝送および復号化の様式を示すブ
ロック図である。
ロック図である。
【図2】 図2は、速度可変ビットストリームを高バンド幅の媒体上に多重化する様子を
示すブロック図である。
示すブロック図である。
【図3】 図3は、本発明の好適な実施形態を実現する統計的マルチプレクサのブロック
図である。
図である。
【図4】 図4は、図3の統計的マルチプレクサの一部のより詳細なブロック図である。
【図5】 図5は、本発明によるアグリゲートパニック状態の識別を示す図である。
【図6】 図6は、本発明によるアグリゲートパニック状態をより詳細に示す図である。
───────────────────────────────────────────────────── フロントページの続き (81)指定国 EP(AT,BE,CH,CY, DE,DK,ES,FI,FR,GB,GR,IE,I T,LU,MC,NL,PT,SE),OA(BF,BJ ,CF,CG,CI,CM,GA,GN,GW,ML, MR,NE,SN,TD,TG),AP(GH,GM,K E,LS,MW,SD,SL,SZ,TZ,UG,ZW ),EA(AM,AZ,BY,KG,KZ,MD,RU, TJ,TM),AE,AL,AM,AT,AU,AZ, BA,BB,BG,BR,BY,CA,CH,CN,C R,CU,CZ,DE,DK,DM,EE,ES,FI ,GB,GD,GE,GH,GM,HR,HU,ID, IL,IN,IS,JP,KE,KG,KP,KR,K Z,LC,LK,LR,LS,LT,LU,LV,MA ,MD,MG,MK,MN,MW,MX,NO,NZ, PL,PT,RO,RU,SD,SE,SG,SI,S K,SL,TJ,TM,TR,TT,TZ,UA,UG ,UZ,VN,YU,ZA,ZW Fターム(参考) 5C059 KK35 MA00 RB02 RC04 SS06 TA71 TC16 TC21 TD12 UA02 UA05 UA38 5C063 AA01 AB07 AC01 AC10 CA29 CA36 DA07 DA13 DB10 5K028 BB05 CC02 KK01 KK03 KK12 LL15 SS04 SS14
Claims (25)
- 【請求項1】 今にも起こりそうなバンド幅オーバーフロー状態をマルチプ
レクサにおいて識別する方法であって、該マルチプレクサは、ソースからの入来
ピクチャを受け取り、該ピクチャを出力する複数のメモリバッファを含み、該ピ
クチャは複数のパケットを含み、 所与の時間の間の該メモリバッファ中のパケットの総数を判定する工程と、 所与の時間の間に出力されるべきパケットの数と、該時間の間に該マルチプレ
クサが出力することのできるパケットの数とを比較する工程と、 を包含する、方法。 - 【請求項2】 前記ピクチャは、ビットストリームとして到着し、該ビット
ストリームは、構成要素のシーケンスであり、該構成要素は、調節可能な長さを
有し、各構成要素は、受信器に該構成要素を処理させるタイミングを示すタイミ
ング情報を含み、 前記出力速度を判定する工程は、所与の時間の間行なわれ、該受信器に該構成
要素を処理させなければならなくなる前に前記バッファから該構成要素を出力す
るような様式で最低速度を判定する工程を包含し、 該受信器に送信されたが該受信器によって未だ処理されていない該一連の構成
要素の構成要素のサイズ全体が、該受信器中のビットバッファのサイズを越えな
いような様式で、最高速度を判定する工程と、 をさらに包含する、請求項1に記載の方法。 - 【請求項3】 前記ピクチャは、デジタル的に符号化された映像画像である
、請求項1に記載の方法。 - 【請求項4】 前記ピクチャは、MPEG−2規格に従って符号化される、
請求項3に記載の方法。 - 【請求項5】 前記バンド幅は、前記メモリバッファのサイズと、前記受信
器中の映像バッファとによって規定される、請求項2に記載の方法。 - 【請求項6】 前記比較工程は、複数の将来のタイムスライスについてバン
ド幅出力要件とバンド幅能力とを比較する工程をさらに包含する、請求項1に記
載の方法。 - 【請求項7】 バンド幅オーバーフロー状態が存在するかどうかを判定する
工程をさらに包含する、請求項1に記載の方法。 - 【請求項8】 前記ビットストリームの一部をグルーフレームと取り換える
ことにより、前記オーバーフロー状態をなくす工程をさらに包含する、請求項7
に記載の方法。 - 【請求項9】 前記グルーフレームと取り換えられる部分は、グルーフレー
ム機会を有する情報の複数のチャネルのうち少なくとも1つから選択される、請
求項8に記載の方法。 - 【請求項10】 前記チャネルを優先順位の最も低い方から優先順位の最も
高い方に評価して、前記グルーフレーム機会を識別する工程をさらに包含する、
請求項9に記載の方法。 - 【請求項11】 グルーフレーム機会が識別されない場合、チャネルをドロ
ップする工程をさらに包含する、請求項10に記載の方法。 - 【請求項12】 チャネルを優先順位の最も低いものから優先順位の最も高
い順番にドロップする、請求項11に記載の方法。 - 【請求項13】 前記時間は、前記メモリバッファからの次の送出ピクチャ
のための時間を含む、請求項1に記載の方法。 - 【請求項14】 前記時間は、前記メモリバッファ中の全ピクチャのための
時間を含む、請求項1に記載の方法。 - 【請求項15】 今にも起こりそうなバンド幅オーバーフロー状態をマルチ
プレクサにおいて識別する方法であって、該マルチプレクサは、ソースからの入
来ピクチャを受け取り、該ピクチャを出力する複数のメモリバッファを含み、該
ピクチャは複数のパケットを含み、 前記メモリバッファ中の次の送出ピクチャを含む一連のピクチャについて、該
メモリバッファ中のパケットの総数を判定する工程と、 該一連のピクチャについて、出力されるべきパケットの数と、該マルチプレク
サが出力することのできるパケットの数とを比較する工程と、 該一連のピクチャの該バンド幅出力要件が該マルチプレクサのバンド幅能力以
下となるようにパケットを再割り当てする工程と、 を包含する、方法。 - 【請求項16】 前記ピクチャは、ビットストリームとして到着し、該ビッ
トストリームは、構成要素のシーケンスであり、該構成要素は、調節可能な長さ
を有し、各構成要素は、受信器に該構成要素を処理させるタイミングを示すタイ
ミング情報を含み、 前記出力速度を判定する工程は、所与の時間の間行なわれ、該受信器に該構成
要素を処理させなければならなくなる前に前記バッファから該構成要素を出力す
るような様式で最低速度を判定する工程を包含し、 該受信器に送信されたが該受信器によって未だ処理されていない該一連の構成
要素の構成要素のサイズ全体が、該受信器中のビットバッファのサイズを越えな
いような様式で、最高速度を判定する工程と、 をさらに包含する、請求項15に記載の方法。 - 【請求項17】 前記ピクチャは、デジタル的に符号化された映像画像であ
る、請求項15に記載の方法。 - 【請求項18】 前記ピクチャは、MPEG−2規格に従って符号化される
、請求項17に記載の方法。 - 【請求項19】 前記バンド幅は、前記メモリバッファのサイズと、前記受
信器中の映像バッファとによって規定される、請求項16に記載の方法。 - 【請求項20】 前記比較工程は、複数の将来のタイムスライスについてマ
ルチプレクサバンド幅出力とバンド幅能力とを比較する工程をさらに包含する、
請求項15に記載の方法。 - 【請求項21】 前記ビットストリームの一部をグルーフレームと取り換え
ることにより、前記オーバーフロー状態をなくす工程をさらに包含する、請求項
15に記載の方法。 - 【請求項22】 前記グルーフレームと取り換えられる部分は、グルーフレ
ーム機会を有する情報の複数のチャネルのうち少なくとも1つから選択される、
請求項21に記載の方法。 - 【請求項23】 前記チャネルを優先順位の最も低い方から優先順位の最も
高い方に評価して、前記グルーフレーム機会を識別する工程をさらに包含する、
請求項22に記載の方法。 - 【請求項24】 グルーフレーム機会が識別されない場合、チャネルをドロ
ップする工程をさらに包含する、請求項23に記載の方法。 - 【請求項25】 チャネルを優先順位の最も低いものから優先順位の最も高
い順番にドロップする、請求項24に記載の方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US09/240,344 US6418122B1 (en) | 1997-03-21 | 1999-01-29 | Method and apparatus for assuring sufficient bandwidth of a statistical multiplexer |
US09/240,344 | 1999-01-29 | ||
PCT/US2000/001877 WO2000045606A1 (en) | 1999-01-29 | 2000-01-27 | Method and apparatus for assuring sufficient bandwidth of a statistical multiplexer |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2002536889A true JP2002536889A (ja) | 2002-10-29 |
Family
ID=22906154
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000596742A Withdrawn JP2002536889A (ja) | 1999-01-29 | 2000-01-27 | 統計的マルチプレクサのバンド幅を十分にすることを確実にする方法および装置 |
Country Status (7)
Country | Link |
---|---|
US (1) | US6418122B1 (ja) |
EP (1) | EP1149499A1 (ja) |
JP (1) | JP2002536889A (ja) |
AU (1) | AU3472900A (ja) |
BR (1) | BR0007733A (ja) |
CA (1) | CA2361047C (ja) |
WO (1) | WO2000045606A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012521126A (ja) * | 2009-03-19 | 2012-09-10 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | フレキシブル時分割多重化において複数の情報信号を伝送する装置および方法 |
Families Citing this family (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6301428B1 (en) * | 1997-12-09 | 2001-10-09 | Lsi Logic Corporation | Compressed video editor with transition buffer matcher |
US8180675B2 (en) * | 2000-08-31 | 2012-05-15 | Prime Research Alliance E., Inc. | System and method for automatically managing avail inventory data and avail pricing |
US8151295B1 (en) | 2000-08-31 | 2012-04-03 | Prime Research Alliance E., Inc. | Queue based advertisement scheduling and sales |
US7185353B2 (en) | 2000-08-31 | 2007-02-27 | Prime Research Alliance E., Inc. | System and method for delivering statistically scheduled advertisements |
US20020144263A1 (en) * | 2000-08-31 | 2002-10-03 | Eldering Charles A. | Grouping of advertisements on an advertising channel in a targeted advertisement system |
US7653923B2 (en) | 2000-02-18 | 2010-01-26 | Prime Research Alliance E, Inc. | Scheduling and presenting IPG ads in conjunction with programming ads in a television environment |
US7328448B2 (en) | 2000-08-31 | 2008-02-05 | Prime Research Alliance E, Inc. | Advertisement distribution system for distributing targeted advertisements in television systems |
US7039932B2 (en) | 2000-08-31 | 2006-05-02 | Prime Research Alliance E., Inc. | Queue-based head-end advertisement scheduling method and apparatus |
US20020083439A1 (en) * | 2000-08-31 | 2002-06-27 | Eldering Charles A. | System for rescheduling and inserting advertisements |
US7228555B2 (en) * | 2000-08-31 | 2007-06-05 | Prime Research Alliance E., Inc. | System and method for delivering targeted advertisements using multiple presentation streams |
US20020083445A1 (en) * | 2000-08-31 | 2002-06-27 | Flickinger Gregory C. | Delivering targeted advertisements to the set-top-box |
US20020083441A1 (en) | 2000-08-31 | 2002-06-27 | Flickinger Gregory C. | Advertisement filtering and storage for targeted advertisement systems |
US6795506B1 (en) * | 1999-10-05 | 2004-09-21 | Cisco Technology, Inc. | Methods and apparatus for efficient scheduling and multiplexing |
US7331057B2 (en) | 2000-12-28 | 2008-02-12 | Prime Research Alliance E, Inc. | Grouping advertisement subavails |
US7292602B1 (en) * | 2001-12-27 | 2007-11-06 | Cisco Techonology, Inc. | Efficient available bandwidth usage in transmission of compressed video data |
US7529276B1 (en) | 2002-09-03 | 2009-05-05 | Cisco Technology, Inc. | Combined jitter and multiplexing systems and methods |
US7526001B2 (en) * | 2004-07-26 | 2009-04-28 | General Instrument Corporation | Statistical multiplexer having protective features from extraneous messages generated by redundant system elements |
US20090150926A1 (en) * | 2007-12-06 | 2009-06-11 | General Instrument Corporation | Method And Apparatus For Delivering SDV Programming With Targeted Advertising To Selected Groups Of Subscribers |
US9794562B2 (en) * | 2009-12-04 | 2017-10-17 | Arris Enterprises, Inc. | Generation and detection of private metadata in an encoded video transport stream |
US9485506B2 (en) * | 2012-09-11 | 2016-11-01 | Texas Instruments Incorporated | Method and system for constraining slice header processing overhead in video coding |
US20180144554A1 (en) | 2016-11-18 | 2018-05-24 | Eyedaptic, LLC | Systems for augmented reality visual aids and tools |
US20190012841A1 (en) | 2017-07-09 | 2019-01-10 | Eyedaptic, Inc. | Artificial intelligence enhanced system for adaptive control driven ar/vr visual aids |
US10984508B2 (en) | 2017-10-31 | 2021-04-20 | Eyedaptic, Inc. | Demonstration devices and methods for enhancement for low vision users and systems improvements |
US10979747B2 (en) | 2017-12-21 | 2021-04-13 | Arris Enterprises Llc | Statistical multiplexing system for variable bit rate encoding with constant bit rate encoder |
CN112601509B (zh) | 2018-05-29 | 2024-01-23 | 爱达扩视眼镜公司 | 用于低视力用户的混合式透视增强现实系统和方法 |
EP3856098A4 (en) * | 2018-09-24 | 2022-05-25 | Eyedaptic, Inc. | IMPROVED AUTONOMOUS HANDS-FREE CONTROL OF ELECTRONIC VISION AIDS |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5115309A (en) * | 1990-09-10 | 1992-05-19 | At&T Bell Laboratories | Method and apparatus for dynamic channel bandwidth allocation among multiple parallel video coders |
US5159447A (en) * | 1991-05-23 | 1992-10-27 | At&T Bell Laboratories | Buffer control for variable bit-rate channel |
CA2104753C (en) * | 1992-10-29 | 1999-02-16 | Kotikalapudi Sriram | Bandwidth allocation, transmission scheduling, and congestion avoidance in broadband atm networks |
US5381413A (en) * | 1992-12-28 | 1995-01-10 | Starlight Networks | Data throttling system for a communications network |
US5301187A (en) * | 1993-05-25 | 1994-04-05 | Xel Communications, Inc. | System for implementing broadband audio program telephony circuits using 2B1Q technology |
US5757801A (en) * | 1994-04-19 | 1998-05-26 | Multi-Tech Systems, Inc. | Advanced priority statistical multiplexer |
US5506844A (en) * | 1994-05-20 | 1996-04-09 | Compression Labs, Inc. | Method for configuring a statistical multiplexer to dynamically allocate communication channel bandwidth |
US5901149A (en) * | 1994-11-09 | 1999-05-04 | Sony Corporation | Decode and encode system |
US5956088A (en) | 1995-11-21 | 1999-09-21 | Imedia Corporation | Method and apparatus for modifying encoded digital video for improved channel utilization |
US5686963A (en) | 1995-12-26 | 1997-11-11 | C-Cube Microsystems | Method for performing rate control in a video encoder which provides a bit budget for each frame while employing virtual buffers and virtual buffer verifiers |
EP0931418A2 (en) | 1996-10-08 | 1999-07-28 | Tiernan Communications Incorporated | Apparatus and method for multi-service transport multiplexing |
US6052384A (en) | 1997-03-21 | 2000-04-18 | Scientific-Atlanta, Inc. | Using a receiver model to multiplex variable-rate bit streams having timing constraints |
US6219358B1 (en) * | 1998-09-11 | 2001-04-17 | Scientific-Atlanta, Inc. | Adaptive rate control for insertion of data into arbitrary bit rate data streams |
-
1999
- 1999-01-29 US US09/240,344 patent/US6418122B1/en not_active Expired - Lifetime
-
2000
- 2000-01-27 BR BR0007733-0A patent/BR0007733A/pt not_active Application Discontinuation
- 2000-01-27 JP JP2000596742A patent/JP2002536889A/ja not_active Withdrawn
- 2000-01-27 EP EP00913251A patent/EP1149499A1/en not_active Withdrawn
- 2000-01-27 CA CA002361047A patent/CA2361047C/en not_active Expired - Fee Related
- 2000-01-27 WO PCT/US2000/001877 patent/WO2000045606A1/en not_active Application Discontinuation
- 2000-01-27 AU AU34729/00A patent/AU3472900A/en not_active Abandoned
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012521126A (ja) * | 2009-03-19 | 2012-09-10 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | フレキシブル時分割多重化において複数の情報信号を伝送する装置および方法 |
US8804768B2 (en) | 2009-03-19 | 2014-08-12 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus and method for transmitting a plurality of information signals in flexible time-division multiplexing |
Also Published As
Publication number | Publication date |
---|---|
US6418122B1 (en) | 2002-07-09 |
WO2000045606A1 (en) | 2000-08-03 |
CA2361047A1 (en) | 2000-08-03 |
AU3472900A (en) | 2000-08-18 |
BR0007733A (pt) | 2001-11-06 |
CA2361047C (en) | 2008-08-19 |
EP1149499A1 (en) | 2001-10-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2002536889A (ja) | 統計的マルチプレクサのバンド幅を十分にすることを確実にする方法および装置 | |
EP1149498B1 (en) | Method for detecting and preventing bandwidth overflow in a statistical multiplexer | |
US6052384A (en) | Using a receiver model to multiplex variable-rate bit streams having timing constraints | |
EP1320996B1 (en) | Method and apparatus for determining a transmission bit rate in a statistical multiplexer | |
US6845107B1 (en) | Video data multiplexer, video data multiplexing control method, method and apparatus for multiplexing encoded stream, and encoding method and apparatus | |
US6847656B1 (en) | Statistical remultiplexing with bandwidth allocation among different transcoding channels | |
US5652749A (en) | Apparatus and method for segmentation and time synchronization of the transmission of a multiple program multimedia data stream | |
US6493388B1 (en) | Rate control and buffer protection for variable bit rate video programs over a constant rate channel | |
EP1130927A2 (en) | Apparatus, method and computer program product for transcoding a coded multiplex sound and moving pictuture sequence | |
JPH08321836A (ja) | マルチメディア・データの送信のセグメント化および時間同期化のための装置および方法 | |
JP2002535934A (ja) | リファレンス信号情報を規定時間間隔で配信する方法および装置 | |
EP1173023B1 (en) | Multiplex dependend video compression | |
EP1161838A1 (en) | Method and apparatus for generating time stamp information |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20070403 |