JP2002536889A - 統計的マルチプレクサのバンド幅を十分にすることを確実にする方法および装置 - Google Patents

統計的マルチプレクサのバンド幅を十分にすることを確実にする方法および装置

Info

Publication number
JP2002536889A
JP2002536889A JP2000596742A JP2000596742A JP2002536889A JP 2002536889 A JP2002536889 A JP 2002536889A JP 2000596742 A JP2000596742 A JP 2000596742A JP 2000596742 A JP2000596742 A JP 2000596742A JP 2002536889 A JP2002536889 A JP 2002536889A
Authority
JP
Japan
Prior art keywords
picture
packets
bandwidth
multiplexer
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2000596742A
Other languages
English (en)
Inventor
ジョエル スコエンブルム,
シー ジュン ホワン,
Original Assignee
サイエンティフィック−アトランタ, インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by サイエンティフィック−アトランタ, インコーポレイテッド filed Critical サイエンティフィック−アトランタ, インコーポレイテッド
Publication of JP2002536889A publication Critical patent/JP2002536889A/ja
Withdrawn legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B7/00Radio transmission systems, i.e. using radiation field
    • H04B7/24Radio transmission systems, i.e. using radiation field for communication between two or more posts
    • H04B7/26Radio transmission systems, i.e. using radiation field for communication between two or more posts at least one of which is mobile
    • H04B7/2612Arrangements for wireless medium access control, e.g. by allocating physical layer transmission capacity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04JMULTIPLEX COMMUNICATION
    • H04J3/00Time-division multiplex systems
    • H04J3/16Time-division multiplex systems in which the time allocation to individual channels within a transmission cycle is variable, e.g. to accommodate varying complexity of signals, to vary number of channels transmitted
    • H04J3/1682Allocation of channels according to the instantaneous demands of the users, e.g. concentrated multiplexers, statistical multiplexers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04JMULTIPLEX COMMUNICATION
    • H04J3/00Time-division multiplex systems
    • H04J3/16Time-division multiplex systems in which the time allocation to individual channels within a transmission cycle is variable, e.g. to accommodate varying complexity of signals, to vary number of channels transmitted
    • H04J3/1682Allocation of channels according to the instantaneous demands of the users, e.g. concentrated multiplexers, statistical multiplexers
    • H04J3/1688Allocation of channels according to the instantaneous demands of the users, e.g. concentrated multiplexers, statistical multiplexers the demands of the users being taken into account after redundancy removal, e.g. by predictive coding, by variable sampling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04JMULTIPLEX COMMUNICATION
    • H04J3/00Time-division multiplex systems
    • H04J3/24Time-division multiplex systems in which the allocation is indicated by an address the different channels being transmitted sequentially
    • H04J3/247ATM or packet multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23406Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving management of server-side video buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365Multiplexing of several video streams
    • H04N21/23655Statistical multiplexing, e.g. by controlling the encoder to alter its bitrate to optimize the bandwidth utilization
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2385Channel allocation; Bandwidth allocation

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Time-Division Multiplex Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Radio Relay Systems (AREA)
  • Television Systems (AREA)

Abstract

(57)【要約】 ビットストリームの出力速度を判定する技術。ビットストリームから読み出された情報を利用可能なバンド幅に適用することにより、出力速度を判定する。これらの技術を用いて、ビット速度可変ビットストリームを衛星アップリンク上に多重化する統計的マルチプレクサを構築する。各ビットストリームの最低出力速度および最高出力速度の判定が、マルチプレクサ中のビットストリームのキューまたはビットストリームの復号器にアンダーフローあるいはオーバーフローが発生しないような様式で行なわれる。マルチプレクサは、メモリバッファのフルネスを見て、フルネスと、出力がバンド幅を上回る状態が発生する可能性とを相関させる。各ビットストリームにバンド幅の最低速度を与えるほど十分なバンド幅が無い場合、グルーフレームを挿入するか、または、優先順位の低いチャネルをドロップすることができる。

Description

【発明の詳細な説明】
【0001】 (関連出願) 本出願は、1997年3月21日に出願され、Huangらに付与された、S
cientific−Atlanta、Inc.を譲受人とする「Using
a Rceiver Model to Multiplex Variabl
e−Rate Bit Streams Having Timing Con
straints」という名称の係属中の米国特許第08/823,007号の
一部継続出願である。
【0002】 (発明の分野) 本発明は概して、速度可変ビットストリームの伝送に関し、より詳細には、今
にも起こりそうな(imminent)バンド幅オーバーフローの検出および防
止に関する。
【0003】 (発明の背景) データ伝送における新しい問題として、データ伝送は高バンド幅を必要とし、
バーストし易く(bursty)、また時間的制約を有する問題がある。従来か
ら、データ伝送は、電話会社によって提供される公衆通信交換網上でまたはパケ
ットネットワーク上で行われてきた。公衆通信交換網は双方向音声アプリケーシ
ョン用に設計されているため、厳しい時間的制約を満足する比較的低バンド幅の
回路を提供する。パケットネットワークは、コンピュータシステム間のデータ転
送用に設計されている。唯一の制約は、データが送信先に到着する時期が不確定
である点である。転送用に利用可能なバンド幅の量は、ネットワークの輻輳の程
度によって異なる。そのため、パケットネットワークは、膨大な量のデータ(b
urst of data)中のデータが送信先に到着する時期または送信先に
到着する順番を保証しない場合が多い。
【0004】 従って、電話線ネットワークまたはパケットネットワークのいずれも、高いバ
ンド幅で、バーストし易いデータを時間制約を守って処理するよう良好に適合さ
れてはいない点が理解され得る。このようなデータの一例として、Motion Picture Experts Group(「MPEG」)MPEG−2
規格、または別の場合はISO/IEC13818−1および13818−2に
記載されている規格に従って圧縮されるデジタルテレビ用データがある。
【0005】 ここで図1を参照して、本発明の理解に必要なMPEG−2規格の詳細が示さ
れている。MPEG−2規格は、デジタル映像の表示を圧縮するための符号化ス
キームを定義する。この符号化スキームは、映像画像に大量の空間的冗長性およ
び時間的冗長性が存在する場合が多い事実を利用したものである。空間的冗長性
が存在するのは、所与の映像ピクチャに、領域全体が同じ外観のセクションが存
在するためである。このような領域が大きく、またこのような領域の割合が大き
くなるほど、画像中の空間的冗長性も増大する。時間的冗長性が存在するのは、
所与の映像画像自身と所与の映像画像の直前の画像および所与の画像の直後の画
像との間ではそれほど変化が無い場合が多いためである。2つの映像画像間の変
化量が小さいほど、時間的冗長性の量は増大する。画像中に存在する空間的冗長
性が多く、当該画像が属する画像シーケンス中に存在する時間的冗長性が多いほ
ど、画像を表示するために必要な情報のビット量が少なくなる。
【0006】 MPEG−2規格を用いて符号化された画像伝送において最大の利点が得られ
るのは、画像の伝送を調節可能なビット速度で行うことが可能である場合である
。ビット速度が調節可能なのは、受信側のデバイスが画像を受信する速度が一定
である一方、画像のビット数はそれぞれ異なるからである。従って、大きい画像
の方が、小さい画像よりも高速のビット速度を要求し、調節可能なビット速度で
伝送されるMPEG画像シーケンスは、時間制約付きの速度可変ビットストリー
ムである。例えば、無地の(solid)色付き背景の前にニュースの総合司会
者がいる様子を示す画像シーケンスは、コマーシャルまたはMTVの楽曲の表現
を示す画像シーケンスの場合よりも、より多くの空間的冗長性および時間的冗長
性を有する。また、ニュース総合司会者を示す画像のビット速度は、MTVの楽
曲表現用の画像のビット速度よりもはるかに遅い。
【0007】 MPEG−2圧縮スキームは、映像画像のシーケンスを圧縮されたピクチャシ
ーケンスとして表現し、各圧縮ピクチャを、特定の時間に復号する必要がある。
ピクチャの圧縮様式は3種類あり、1つの様式は内部コード化であり、この様式
では、残り全てのピクチャを参照せずに圧縮を行う。この符号化技術は、空間的
冗長性を低減するが時間的冗長性は低減せず、この符号化技術から得られるピク
チャは一般的には、符号化によって空間的冗長性および時間的冗長性の両方が低
減したピクチャよりも大型である。この様式で符号化されたピクチャをI−ピク
チャと呼ぶ。シーケンス中には特定の数のI−ピクチャが必要である。これは、
先ず第1にI−ピクチャは初期のピクチャシーケンスとして必要であり、第2に
、I−ピクチャは伝送エラーからの回復を可能とするからである。
【0008】 時間的冗長性は、先行ピクチャあるいは後続ピクチャまたはこれら両方からの
一連の変化として、符号化ピクチャによって低減される。MPEG−2の場合、
これは、前方の動きが補償された予測および後方の動きが補償された予測を用い
て行われる。前方の動きが補償された予測のみを用いるピクチャの場合、そのピ
クチャを予測符号化ピクチャまたはPピクチャと呼ぶ。前方の動きが補償された
予測および後方の動きが補償された予測の両方を用いるピクチャの場合、そのピ
クチャを双方向予測符号化ピクチャまたは略してBピクチャと呼ぶ。Pピクチャ
は一般的には、I−ピクチャよりもビット数が少なく、ビット数が最少なのはB
ピクチャである。従って、MPEG−2フォーマットのピクチャの所与のシーケ
ンスを符号化するために必要なビット数は、上述したピクチャコード化配信方式
と、ピクチャのコンテンツそのものとによって異なる。上記の説明から明らかな
ように、ニュース総合司会者の画像を符号化するために必要なピクチャシーケン
スは、MTVの楽曲を表現するために必要なシーケンスよりも、I−ピクチャ数
ならびにBピクチャ数およびPピクチャ数が少ない。その結果、ニュース総合司
会者の画像のMPEG−2表示は、MTVシーケンスの画像のMPEG−2表示
よりもずっと小さくなる。
【0009】 MPEG−2ピクチャは、低コストの消費者電子デバイス(例えば、デジタル
テレビセットまたはケーブルテレビ(「CATV」)サービスプロバイダによっ
て提供されるセットトップボックス)によって受信される。このようなデバイス
は低コストであるため、MPEG−2ピクチャの格納用として利用可能なメモリ
量に厳しい制約がある。その上、MPEG−2ピクチャは動画生成用に用いられ
ているため、MPEG−2ピクチャは、受信器中に適切な順序で到着させなけれ
ばならず、しかも、次のMPEG−2ピクチャが必要なときに利用できるような
時間間隔で送信する必要があり、かつ現在送信されているピクチャ用にメモリに
余裕を持たせておかなければならない。当該分野において、データが足りなくな
ったメモリのことをメモリがアンダーフローしたといい、許容収容量以上のデー
タを受信したメモリのことを、メモリがオーバーフローしたという。アンダーフ
ローの場合、次のMPEG−2ピクチャが到着するまでTVピクチャ中の動きを
停止させなければならず、オーバーフローの場合、メモリ中にうまく入らなかっ
たデータはそのまま欠損部分となる。
【0010】 図1は、デジタルピクチャソース12およびテレビ14を含むシステム10を
示し、デジタルピクチャソース12およびテレビ14は、TV画像のシーケンス
のMPEG−2ビットストリーム表示を搬送するチャネル16によって接続され
る。デジタルピクチャソース12は、画像18の未圧縮デジタル表示(「UDR
」)を生成し、生成された未圧縮デジタル表示は、調節可能なビット速度(「V
BR」)符号器20へと送られる。符号器20は、この未圧縮デジタル表示を符
号化して、速度可変ビットストリーム(「VRBS」)22を生成する。速度可
変ビットストリーム22は、調節可能な長さの圧縮化デジタルピクチャ24(a
...n)のシーケンスである。上述したように、MPEG−2規格に従って符
号化を行う場合、ピクチャの長さは、ピクチャによって表現される画像の複雑度
と、当該ピクチャがI−ピクチャ、PピクチャまたはBピクチャのいずれかであ
るかということとによって異なる。さらに、ピクチャの長さは、VBR符号器2
0の符号化速度によっても異なる。この速度は調節可能である。一般に、ピクチ
ャの符号化用のビット数が多いほど、ピクチャ品質も高くなる場合が多い。
【0011】 速度可変ビットストリーム22は、チャネル16を介してVBR復号器26へ
と転送され、VBR復号器26は、圧縮化デジタルピクチャ24(a...n)
を復号して、未圧縮デジタルピクチャ28を生成する。次いで、これらの未圧縮
デジタルピクチャ28は、テレビ14に提供される。テレビ14がデジタルテレ
ビである場合、これらの未圧縮デジタルピクチャ28は、直接提供される。テレ
ビ14がデジタルテレビではない場合、未圧縮デジタルピクチャ(「UDP」)
28を標準的アナログテレビ信号に変換し、次いで変換した信号をテレビ14に
提供する他の構成要素が存在する。もちろん、1つの符号器20からの出力を受
信するVBR復号器26の数はいくつであってもよい。
【0012】 図1において、チャネル16は、ビットストリーム22をパケット30のシー
ケンスとして転送する。従って、図1において、圧縮化デジタルピクチャ24は
、長さが調節可能なパケット30のシーケンスとして現れる。従って、ピクチャ
24(a)は「n」個のパケットを有し得、ピクチャ24(n)は「k」個のパ
ケットを有し得る。各ピクチャ24はタイミング情報32を含む。タイミング情
報は、2種類の情報、すなわちクロック情報およびタイムスタンプを含む。クロ
ック情報は、復号器26と符号器20とを同期させるために用いられる。MPE
G−2規格では、このクロック情報をプログラムクロックリファレンス(PCR
)と呼ぶ。タイムスタンプは、ピクチャを復号化するタイミングを指定する復号
化タイムスタンプ(「DTS」)と、ピクチャを実際に表示するタイミングを指
定する表示タイムスタンプ(「PTS」)とを含む。タイムスタンプ中で指定さ
れる時間は、クロック情報として指定される。上述したように、VBR復号器2
6は、ピクチャ24が復号化され、TV14に提供されるまで、ピクチャ24の
格納用として比較的少量のメモリを含む。このメモリを図1中の34に示し、本
明細書中、以下においてこのメモリを復号器のビットバッファと呼ぶ。ビットバ
ッファ34は、少なくとも最大時のMPEG−2ピクチャを収容するくらいの大
きさでなければならない。さらに、チャネル16は、ビットバッファ34へのピ
クチャ24の提供を、復号器26がピクチャ24を適切なタイミングでTV14
に利用可能とし、かつ、ビットバッファ34にオーバーフローまたはアンダーフ
ローが発生しないような様式で行わなければならない。ビットバッファ34にア
ンダーフローが発生するのは、復号器にピクチャの復号を開始させるためのピク
チャのタイムスタンプ中に指定された時間までに、ピクチャ24中の一部のビッ
トがビットバッファに到着しなかった場合である。
【0013】 複数のチャネル16が1つの超高バンド幅のデータリンクを共有し得るため、
ピクチャ24をVBR復号器26に適切な順序でかつ適切なタイミングで提供す
る工程は、より複雑になっている。例えば、CATVプロバイダは、衛星リンク
を用いて、多数のTV番組を中央地点から複数のCATVネットワークヘッドエ
ンドに提供し、これらのCATVネットワークヘッドエンドから、TV番組を同
軸ケーブルまたは光ファイバケーブルを介して個々の加入者に伝送することがで
き、または、衛星リンクを用いてTV番組を直接加入者に提供することもできる
。複数のチャネルが1つの媒体(例えば、衛星リンク)を共有する場合、その媒
体の状態をチャネル間で多重化されているという。
【0014】 図2は、上記のような多重化された媒体を示す。ビットを含むパケットを搬送
する複数のチャネル16(0)〜16(n)が、速度可変ビットストリーム22
から、マルチプレクサ40に送られる。マルチプレクサ40は、これらのパケッ
トを必要なだけ処理して、高バンド幅(「HBW」)媒体42上に多重化する。
次いで、これらのパケットは媒体42を介してデマルチプレクサ44に送られ、
デマルチプレクサ44は、これらのパケットを個々のチャネル16(0..n)
用のパケットストリームに選別する。デジタルデータを搬送する複数のチャネル
間で高バンド幅媒体を共有する単純な様式として、各個々のチャネル16アクセ
スを、ごく短時間で高バンド幅媒体に繰返し与える様式がある。本明細書中、以
下、この様式をスロットと呼ぶ。
【0015】 このスロット様式を行う1つの様式を、図2中の50に示す。ごく短い時間が
スロット52(n...0)として50に現れ、スロット52(0)等のスロッ
トの間、チャネル16に属する特定の数のパケット30(n...0)が、媒体
42に出力され得る。次いで、各チャネル16はスロット52を有し、全スロッ
トはまとめられてタイムスライス54を構成するようになる。媒体42がビット
速度および時間制約が異なるチャネル(例えば、チャネル16)を搬送する場合
、各チャネル16用のスロット52は、チャネル16の時間、オーバーフローお
よびアンダーフローに関する制約に収まる範囲で、最大限のピクチャをチャネル
16に送るのに必要な速度でビットを提供するパケットを出力する必要がある。
もちろん、殆どのときは、チャネルのスロット52は、最大数よりも少ない数の
パケットを媒体42に出力し、時にはパケットを全く搬送しない場合もあり得る
。各スロット52は媒体42の全バンド幅の特定部分を表すため、スロット52
が一杯でない場合、必ず媒体42のバンド幅の一部が無駄になっている。
【0016】 媒体バンド幅を無駄にしないために、一般に、各タイムスライスを殆どパケッ
トで一杯にすることを確実にする技術が用いられている。この技術を、統計的多
重化と呼ぶ。この統計的多重化が利用しているのは、所与の瞬間において、一組
のチャネル中の各チャネルがビットを異なるビット速度で搬送し、媒体バンド幅
の大きさは、その瞬間においてチャネルが現在搬送している内容を伝送するだけ
大きければよいのであって、チャネルが伝送を最大速度で行っている場合に全チ
ャネルが搬送可能な内容を伝送するほど大きい必要はないという事実である。こ
れらのチャネルの出力に統計的解析を行い、全組のチャネルの実際の最大出力速
度を判定し、媒体バンド幅を、その実際のピーク速度を満たすようなサイズにす
る。このような様式で判定されたバンド幅は典型的には、図2の55に示すよう
な様式での多重化用に必要なバンド幅よりもずっと少量である。その結果、所与
の容量のバンド幅でより多くのチャネルを送信することが可能となる。スロット
レベルにおいて統計的多重化に必要なことは、チャネルがタイムスライス54中
に可変長さのスロットを有することを実際に可能にし、これにより、当該タイム
スライス54間においてチャネル16の実際の要求を満たす、メカニズムである
。このような可変長さのスロット56を有するタイムスライス54を55に示す
【0017】 ビットストリームを統計的に多重化する方法は、例えば、1996年4月9日
に発行された、Raoに付与された「Method for Configur
ing a Statistical Multiplexer to Dyn
amically Allocate Communication Chan
nel Bandwidth」という名称の米国特許第5,506,844号と
、1997年3月21日に出願された、「Using a Receiver
Model to Multiplex Variable Rate Bit
Streams Having Timing Constraints」と
いう名称の米国特許出願シリアル番号第08/823,007とに開示されてい
る。本明細書中、同文献の各々の開示内容を参考のため援用する。
【0018】 上記参考特許および特許出願中に開示されているビットストリームを統計的に
多重化する方法は全て適切な様式で行なわれてはいるものの、これらの方法には
いくつかの制約があることが明らかになっている。例えば、Raoの特許では媒
体のバンド幅の利用範囲を最大化する方法が実際に開示されているものの、いく
つかの欠点もあり、それらの欠点の中でおそらく重要なものは、同特許では多重
化の調節をピクチャ品質を変更することにより行っている点に関連する。第2の
欠点は、同特許では、デジタル画像を区分的な一定のビットストリームとして符
号化する符号器を教示している点に関する。これらのビットストリームの圧縮度
は、速度可変ビットストリームの圧縮度よりも低い。
【0019】 上記米国特許出願シリアル番号第08/823,007号に特有の制約は、高
バンド幅媒体が一定のバンド幅で構成されているため、統計的多重化が可能なの
は限られたピークビット速度の入力チャネルだけである点に関する。各タイムス
ライス毎に、各チャネルがマルチプレクサの高バンド幅媒体出力の一部分に割り
当てられる。従って、ビット速度の割り当ては基本的には静的であり、ピークビ
ット速度が1つ以上のチャネルから変化した場合のように条件が瞬間的に変化し
た場合、対応することができない。同様に、上記米国特許出願シリアル番号第0
8/823,007号では、MPEG−2ビットストリーム中のアンカー無し(
non−anchor)ピクチャ(例えば、I−B−Pシーケンス中のBピクチ
ャまたは全I−ピクチャシーケンス中の任意のI−ピクチャ)を、より小型の「
グルー」ピクチャと取り代えることにより、オーバーフローに関連する問題に対
処している。この対処様式は重大な革新ではあるが、これだけでは、所与の瞬間
における全チャネルのバンド幅要件全体がマルチプレクサの利用可能出力よりも
小さいことを保証しない(すなわち、バンド幅オーバーフロー状態の防止を保証
できていない)。また、上記米国特許出願シリアル番号第08/823,007
号は、オーバーフローが今にも起こりそうな場合と、その状況によって影響を受
け得るチャネルおよびチャネル中のピクチャとを検出する手段も提供していない
【0020】 従って、バンド幅オーバーフローの可能性がある状況に対処するための改善さ
れた方法が必要とされている。このような改善された方法は、バンド幅の割当て
を改善するだけでなく、今にも起こりそうなバンド幅オーバーフローと、当該オ
ーバーフローによる影響を受け得るチャネルとを予測する方が尚のこと望ましい
。また、これらの改善は全て、マルチプレクサの効果全体に悪影響を与えること
なく達成されるべきである。
【0021】 (好適な実施例の詳細な説明) 本明細書は新規と考えられる本発明の機能を規定する特許請求の範囲で締めく
くられるが、本発明は、以下の説明を図面と共に考えればより深く理解されると
考えられる。図面中、類似の参照符号は以下の記載にも適用される。
【0022】 最も簡単に言うと、本発明は、ルックアヘッドを行って、出力されるべき映像
情報を収容するくらいに十分なバンド幅がマルチプレクサシステムにあるかどう
かを確認する能力に関する。本明細書中以下に説明するプロセスは、チャネル毎
に必要な相対スペースを見て、ビット(またはMPEGパケット)を必要なだけ
割り当てる。本明細書中において以下により詳細に説明する統計的メモリバッフ
ァ(SMB)のフルネスを見ることにより、パニック状態(すなわち、バンド幅
必要条件がバンド幅利用可能性を越えた状態)を識別することが可能となる。こ
のような状態をひとたび識別できれば、このような状態を回避することができる
【0023】 ここで図3を参照して、本発明の原理に従って実現(implement)さ
れた、MPEG−2ビットストリーム用の統計的マルチプレクサ80の概要が示
されている。マルチプレクサ80の主要な構成要素は、パケット収集コントロー
ラ82と、各速度可変ビットストリーム22(0)用の伝送コントローラ(「T
C」)84(0)と、パケット配信コントローラ86と、パケット配信コントロ
ーラ86の出力を受信し、受信した出力を伝送媒体42に適した形態で出力する
モジュレータ88とである。パケット収集コントローラ82は、速度可変ビット
ストリーム22(0..n)からパケットを収集し、所与のビットストリーム2
2(0)を搬送するパケットを、所与のビットストリームに対応する伝送コント
ローラ84(i)に配信する。好適な実施形態において、ビットストリーム22
(0...n)の全てのパケットは、バス90に出力される。各パケットは、ビ
ットストリームの所属先を示す指示(indication)を含み、パケット
収集コントローラは、この指示(it)を適切な伝送コントローラ84(i)に
経路設定することにより、パケット中に含まれるこの指示に応答する。ここで、
各ビットストリーム22(i)中のパケットは、符号器20(i)から送信され
た順序で伝送コントローラ84(i)に到着する点に留意されたい。
【0024】 伝送コントローラ84は、当該パケットに対応するビットストリーム22から
パケットを媒体42に出力する速度を判定する。実際の速度は、伝送速度コント
ローラ(「TRC」)92によって判定される。この速度判定は、少なくとも以
下の情報を基にして行われる:ビットストリーム22(0)中の少なくとも1つ
の現在のピクチャ、タイミング情報32および現在のピクチャのサイズ。映像バ
ッファ検査器(Video Buffer Verifier)(VBV)モデ
ル94は、仮定に基づいたビットバッファ34のモデルである。ビットバッファ
34にオーバーフローまたはアンダーフローが発生していない場合、VBVモデ
ル94は、タイミング情報およびピクチャサイズ情報を用いて、ビットストリー
ム22を復号器のビットバッファ34に提供する速度の範囲を判定する。伝送速
度コントローラ92はこの速度情報をパケット配信コントローラ86に提供し、
パケット配信コントローラ86は、全伝送コントローラ84(0...n)から
の情報を用いて、各タイムスライスの間に、次のタイムスライス中に伝送媒体4
2のバンド幅をビットストリーム22の間に割り当てる様式を判定する。パケッ
ト数が多いほど、1つのタイムスライス中にビットストリーム22(i)が出力
しなければならない量も多くなり、バンド幅が大きいほど、当該タイムスライス
間においてビットストリーム22(i)が受信する量も多くなる。
【0025】 説明をより詳細に進める。伝送コントローラ84は、ビットストリーム解析器
96を用いてタイミング情報およびピクチャサイズ情報を入手する。ビットスト
リーム解析器96は、ビットストリーム22が伝送コントローラ84に入来した
ときにビットストリーム22を読み出し、ビットストリーム22からタイミング
情報32およびピクチャサイズ98を回復させる。ビットストリーム解析器96
がこのようなことを行うことが可能なのは、MPEG−2規格によって、各ピク
チャ24の開始部分に印があることと、タイミング情報32が各ピクチャ24中
の所定の場所にあることとが定められているためである。上述したように、各ピ
クチャ24のタイミング情報32は、クロック値および復号タイムスタンプ(「
DTS」)を含む。伝送コントローラ84および後続の(later)復号器2
6は、このクロック値を用いて、自身を符号器20と同期させる。タイミング情
報は、ポケットサイズの基本ストリーム(Pocktsized Elemen
tary Stream)(「PES」)パケットのヘッダ中に見受けられ、ポ
ケットサイズの基本ストリーム(「PES」)パケットは、圧縮化映像データを
カプセル化する。この情報は、PESヘッダのPTSタイムスタンプパラメータ
およびDTSタイムスタンプパラメータ中に含まれる。MPEG−2規格は、タ
イムスタンプを少なくとも700ミリ秒(msec)毎に送ることを要求する。
DTSが圧縮されたピクチャと共に送られたかどうかが不明な場合、復号時間を
シーケンスヘッダおよびピクチャヘッダ中のパラメータから判定するか、または
、以前に伝送されたピクチャのDTS値から推定することができる。詳細につい
ては、ISO/IEC13818−1の添付書類Cを参照されたい。ビットスト
リーム解析器96は、1つのピクチャの開始部分から次のピクチャの開始部分ま
でのビット(またはパケット)を計数するだけで、ピクチャのサイズを判定する
【0026】 タイミング情報およびピクチャサイズは、VBVモデル94において用いられ
る。ピクチャがマルチプレクサ80に入来し、ピクチャが復号器26において復
号されるまでの間、VBVモデル94は、ビットストリーム22中の各ピクチャ
に関するタイミング情報およびピクチャサイズ情報を必要とする。DTSバッフ
ァ100は、そのモデルに必要なピクチャ全てに関するタイミング情報を収容す
るくらいに十分な大きさでなければならない。VBVモデル94の挙動はMPE
G−2規格のセマンティクスのみによって定義されるのであって、特定のビット
バッファ34(i)によって定義されるのではない点に留意されたい。作動中の
MPEG−2復号器用のビットバッファは全て、ピクチャのタイミング情報によ
って示される時間において、復号器に次のピクチャを完全な形態で提供できなけ
ればならない。これは、任意の作動中のMPEG−2復号器用のビットバッファ
34(i)が、少なくともMPEG−2ピクチャが最大の場合にも耐えるほどの
十分な大きさでなければならないことを示す。この最小バッファサイズと、ピク
チャのタイミング情報と、個々のピクチャのサイズとが与えられると、VBVモ
デル94(i)は、作動中のあらゆるMPEG−2復号器のビットバッファ34
(i)について、ピクチャが復号される前に各ピクチャがビットバッファ34(
i)に到着し、かつビットバッファ34(i)にオーバーフローが発生しないこ
とを保証する、ビットストリーム22(i)の出力速度を判定することができる
【0027】 図4は、伝送コントローラ84およびパケット配信コントローラ86の好適な
実施形態の詳細を示す。図4は、n個の伝送コントローラのうち3つ(すなわち
、伝送コントローラ84(i)、(j)、(k))と、パケット配信コントロー
ラ86の2つの主要構成要素(すなわち、中央ビット速度コントローラ102お
よびスイッチ104)とを示す。伝送コントローラ84(i)から始まって、伝
送速度コントローラ92、解析器96およびVBVモデル94に加え、伝送コン
トローラは、統計的マルチプレクサバッファ(SMB)106と、バッファ10
6用のメータ108と、スロットル110とを含む。3つの伝送コントローラ(
i、jおよびk)のみを図示しているが、本発明はこの図示に限定されない点に
留意されたい。任意の数の伝送コントローラを用いてよい。また、各伝送コント
ローラは基本的には同じであるため、84(i)1つだけについて詳細に説明す
る。
【0028】 SMB106は、先入れ先出し方式のパイプバッファであり、ビットストリー
ム22(i)のビットが伝送コントローラ84(i)中にあるときにこれらのビ
ットを収容する。好適な実施形態において、SMB106は、ピクチャサイズと
符号器によって指定される最高ビット速度とに応じて、ピクチャ中の大部分また
は全てのビットを含む(図1の)バースト中の(in bursts)ピクチャ
24を受信する。本明細書中、このようなバーストをピクチャパルスと呼び、こ
のようなピクチャパルスによって表される時間周期を、映像フレーム速度の逆数
(inverse)Tpとして示す。例えば、NTSC映像コード化の場合、Tp =1/29.97=3ミリ秒(msec)である。上述したように、パケット配
信コントローラ86は、パケットをタイムスライス54として提供する。本明細
書中、これらのタイムスライスの1つの時間長さをTcで表す。1つの好適な実
施形態において、Tcは10msecである。
【0029】 SMB106はもちろん、予測される最大ピクチャパルスを読み出すのにかか
る時間の間に任意のサイズのピクチャパルスを受け取ることができるくらいの十
分な大きさでなければならない。さらに、SMB106からのデータ送出は、S
MB106にオーバーフローが発生しないことを保証する速度で行なわなければ
ならない。なぜならば、オーバーフローが発生すると、ビットストリーム22(
i)からビットが失われるからである。また、SMB106は、アンダーフロー
も発生してはならない。なぜならば、アンダーフローが発生すると、ビットスト
リームにヌル(null)パケットが挿入され、多重化された媒体が部分的に無
駄になるからである。メータ108は、SMB106のフルネス(fullne
ss)をモニタリングして、フルネスの程度に関する情報をTRC92に提供す
る。次いで、TRC92は、この情報を用いて、パケット配信コントローラ86
にパケットを提供するビット速度の範囲を必要に応じて変更して、SMB106
にオーバーフローまたはアンダーフローが発生しないようにする。最後に、TR
C92は、スロットル110を設定する。スロットル110の設定は、TRC9
2がパケット配信コントローラ86から受け取った、ビットストリーム22(i
)がタイムスライス54として媒体42に提供しようとするパケット30の数を
示す情報112(i)に基づいて行われる。
【0030】 上記ビット速度範囲を判定する際、TRC92は、所与のタイムスライス54
用の最低速度を、SMB106にオーバーフローが発生しないようにする速度お
よびVBVモデル94(i)にアンダーフローが発生しないようにする速度の最
大値に設定し、タイムスライス用の最高速度を、SMB106にアンダーフロー
が発生しないようにする速度およびVBVモデル94にオーバーフローが発生し
ないようにする速度の最低値に設定する。パケット配信コントローラ86につい
て話を進めて、パケット配信コントローラ86は、タイムスライス54Tcの間
に出力され得るパケット30を必要なだけビットストリーム22(1..n)に
割り当てて、各伝送コントローラ84について、TRC92によって提供される
速度および優先順位の範囲を同時に満たし、タイムスライス54の間に出力され
るパケット30の数を最大化する。好適な実施形態において、コントローラ86
は2つの構成要素を有し、中央ビット速度コントローラ102は、プロセッサ上
で動作するアルゴリズムであり、各伝送速度コントローラ92から受信した情報
を解析して、次のタイムスライス54において各ビットストリームから出力され
るパケット数を判定する。スイッチ104は、各ビットストリームについて、そ
のタイムスライス54の間にスロットル110によって可能にされるパケット3
0の数をとる。スイッチ104のインプリメンテーションは、各スロットルから
のパケット配信を、パケットがタイムスライス54にわたって均等に配信される
ような様式で行うようにされる。スイッチ104をこのようにインプリメントす
ると、パケットのストリームの復号器に対するバースト性(burstines
s)が低減され、これにより、復号器26に必要なトランスポートパケットバッ
ファの量が低減される。スイッチ104のこのようなインプリメンテーションは
、当該分野において周知である。従って、中央ビット速度コントローラ102は
、アルゴリズムを実行し、本明細書中、以下、このアルゴリズムを「ビット速度
割当てアルゴリズム」と呼ぶ。このビット速度割当てアルゴリズムは、同一譲受
人によって譲り受けられた、「Method and Apparatus f
or Detecting and Preventing Bandwidt
h Overflow in a Statistical Multiple
xer」という名称の同時係属中の出願シリアル番号第09/228,029号
に記載されているアルゴリズムに準拠して規定される。本明細書中、同出願を参
考として援用する。本明細書中、以下において「アグリゲートパニックアルゴリ
ズム」と呼ばれるアルゴリズムは、ビット速度割当てアルゴリズムにさらなる能
力を提供する。具体的には、このアルゴリズムは、マルチプレクサの高バンド幅
媒体出力がマルチプレクサのSMBにおいてバッファされたデータ(またはピク
チャ)の全体を配信するのに不十分になる時期を検出する能力を提供する。この
アルゴリズムは、さらに、この状況を修復する能力も提供する。
【0031】 ここで図5を参照して、本発明による、アグリゲートパニック状態の識別を示
す図が示されている。図150は基本的には、図3および4に示すマルチプレク
サの特定のタイムスライスの開始部分における全チャネルSMBの状態のスナッ
プショットを示す。明らかなように、図5では3つのチャネル(チャネル1、チ
ャネル2、チャネルM)を示しているが、本発明はこれらに限定されない。任意
の数のチャネルを用いてよい。各チャネルの各SMBは、現在送出されているピ
クチャ(またはピクチャ0、152(1)、152(2)および152(m))
を有し、各ピクチャは、当該ピクチャ中に残っている特定の数のパケットを有し
、各ピクチャの後、次の送出ピクチャ(またはピクチャ1、154(1)、15
4(2)および154(m))が後続し、これらの次の送出ピクチャ自身の後、
図5においてSMB156(2)、156(m)および158(2)中のピクチ
ャ2およびピクチャ3として表される別の送出ピクチャが後続する。図5に示す
ように、各SMBは、SMBそのものにおいてバッファされた異なる量または数
のピクチャを有し得ることを理解されたい。
【0032】 このアルゴリズムは処理ユニット上での処理時間を必要とするため、ビット速
度割当てアルゴリズムの結果を将来のタイムスライスに適用しなければならない
。すなわち、ビット速度割当てアルゴリズムが実行を開始する時期から実行結果
が適用される時期まで、処理遅延が生じる。この遅延は一定の遅延であり、前方
にあるタイムスライスの数として表され、「N_TC_AHEAD」として識別
される。N_TC_AHEADは、速度可変マルチプレクサのビット速度割当て
アルゴリズムのタイムスライス処理遅延(time slices proce
ssing delay)の数である。1つの実施形態において、N_TC_A
HEADは、前方の1つまたは2つのタイムスライスであり、これにより、処理
遅延は多くても2つのタイムスライス分である。
【0033】 ビット速度割当てアルゴリズムは、特定のタイムスライスの実行を開始する際
、全SMBの自身のコンテンツ情報(knowledge)を調節して、現在時
間よりもN_TC_AHEADタイムスライス分だけ前方のSMBのスナップシ
ョットを生成しなければならない。従って、「time_now」がビット速度
割当てアルゴリズムが実行しようとする現在のシステム時間を表す場合、ビット
速度割当てアルゴリズムは、以下の時間において(at time)、自身のS
MB情報(knowledge)をスナップショットに調節する。
【0034】 time_now+N_TC_AHEAD*Tc 図5を参照して、本発明のアグリゲートパニック方法アルゴリズムは、各タイ
ムスライスを実行し、ビット速度割当てアルゴリズムの場合と同様に、全チャネ
ルSMBの同じスナップショット上で動作し得る。これは、time_now+
N_TC_AHEAD*Tcに等しいシステム時間におけるスナップショットを
示す。ここで、time_nowは、アグリゲートパニックアルゴリズムが開始
したときのタイムスライスの開始部分におけるシステム時間である。このアグリ
ゲートパニックによる方法では、関連するチャネルSMBのパケット数の総和を
全部でm個のチャネルについて計算することにより、速度可変マルチプレクサ全
体中にバッファされているパケット「num_packets」の数を計算する
【0035】 num_packets=;Pi(1≦i≦M) ここで、iはチャネルインデックスであり、PiはSMBi中のトランスポートパ
ケットの総数に等しく、SMBiは、チャネル「i」に対応するSMBである。
次に、最新の復号タイムスタンプ(「DTS」(本明細書中、以下において全S
MBの全ピクチャのlatest_DTSと呼ぶ))を判定する。最新のDTS
を有するピクチャは、最終ピクチャとして見なされ得、これにより、速度可変マ
ルチプレクサに全ピクチャを残し、次いで、これらのピクチャは、マルチプレク
サ中に格納される。上記の_DTSは、latest_DTSを有するピクチャ
の直前を先行するピクチャのDTSであり、これらの双方のピクチャを、図5に
おいてピクチャ156(2)および158(2)として図示し、これらのピクチ
ャ156(2)および158(2)はそれぞれ、previous_DTSおよ
びlatest_DTSである。このような様式でlatest_DTSを判定
する(例えば、SMB中の全ピクチャのDTSを比較するだけでlatest_
DTSを判定する)ためには、全チャネルビットストリームが同じシステム時間
に基づくことが必要である。これは、さらに、速度可変マルチプレクサにデータ
を入力する符号器は全て、同じシステムクロックにロックされることを示す。こ
のシステムクロックは、システムクロックリファレンス(「SCR」)として指
定され、全符号器が同じSCRにロックされた場合、全チャネルビットストリー
ムのDTSは、同じクロックによって参照される。従って、この様式は、DTS
のみを調べることにより最新のピクチャを判定することが可能な1つの様式であ
る。逆に言えば、全符号器が同じSCRにロックされない場合、最新のピクチャ
は、以下の式によって得られる。
【0036】 latest_DTS=ピクチャjのDTS(チャネルiが(DTS(i,
j)−SCR(i))を最大化する場合) ここで、iは、m個のチャネルに関するチャネルインデックス(1≦i≦m)で
あり、jは、(0≦j≦SMB(i)中のピクチャの全数)の範囲であり、ピク
チャjは、チャネルiのj番目の送出ピクチャである。この場合、最新のピクチ
ャはこのピクチャであり、このピクチャのDTS値から関連チャネルのSCRを
減算したものが最大である。
【0037】 速度可変マルチプレクサの公知の分野において、各ピクチャは、直前の先行ピ
クチャのDTSによって与えられるシステム時間までに、復号器に到着しなけれ
ばならない。これにより、復号器中に少なくとも1つのピクチャが常時存在する
ことが保証される。なぜならば、ピクチャが復号されるまでに、既に次のピクチ
ャが復号器に到着していることが保証されるからである。従って、速度可変マル
チプレクサ中のデータ全体は、−tによって与えられる時間の分だけ、マルチプ
レクサから伝送されなければならない。−tは、以下の式によって表される。
【0038】 −t=previous_DTS −(time_now+N_TC_AHEAD*Tc) ここで、time_nowは、現在のシステム時間(またはSCRの現在の値)
であり、Tcは、ビット速度割当てアルゴリズムのタイムスライスの時間長さ(
例えば、10msec)である。マルチプレクサからnum_packetsを
−tで与えられる時間分だけ伝送しなければならないため、マルチプレクサがこ
れを達成するくらいに十分なバンド幅を有するかどうかを判定することが可能で
ある。この判定は、num_packetsを、マルチプレクサがこの時間分だ
け伝送することが可能なパケット数の最大値と比較することにより、行なわれる
。本明細書中、以下、マルチプレクサが−tで伝送することが可能なパケットの
最大数を、num_packets_maxと呼び、以下のように計算する。
【0039】 num_packets_max =Rmux*−t/TP_size =(Rmux*Tc*−t)/(TP_size*Tc) =(Rmux*Tc/TP_size)*(−t/Tc) =Np_tc*−t/Tc ここで、Rmuxは、マルチプレクサの1秒あたりのビット単位の出力バンド幅
(定数)と等しく、TP_SIZEは、トランスポートパケット中のビット数で
あり、Np_tcは、マルチプレクサが1つのタイムスライスにおいて伝送する
ことができるパケット数に等しく、Tcは、タイムスライス中の期間に等しい。
【0040】 従って、num_packetsがnum_packets_maxよりも大
きい場合、アグリゲートパニック状態が生じる。このイベントにおいて、マルチ
プレクサ全体中にバッファされるパケットの総数は、最後のピクチャが直前先行
するピクチャのDTSまでに対応する各復号器に到着するような様式で、タイミ
ング良く伝送できない場合がある。マルチプレクサの出力バンド幅は、この事態
を保証するには不十分である。この状況を修復するために、アンカー無し(no
n−anchor)ピクチャを、小型のグルーピクチャと取り換える。当業者な
らば容易に理解するように、グルーピクチャは、プレストアされた最小限にコー
ド化されたピクチャであり、離散的コサイン変換(「DCT」)係数が無く、ま
た0動きベクトル(0 motion vector)もゼロであるため、基本
的には複製(repeat)ピクチャである。より優先順位の低いチャネルから
始めて、当該チャネルのSMB中にバッファされたアンカー無しピクチャ全てを
、グルーピクチャと取り換える。グルーピクチャと取り換えられた各ピクチャに
ついて、マルチプレクサのSMBの1つにより小型のピクチャがあることを説明
するために、num_packetsを調節する必要が出てくる。従って、各グ
ルーフレーム挿入について、num_packetsを以下のように調節する。
【0041】 k_packets_saved=p(i,j)−g_packets num_packets=num_packets−k_packets_
saved ここで、p(i,j)は、チャネルiの送出ピクチャ数j中のパケット数と等し
く、jの範囲は(1≦j≦SMBi中の全ピクチャ数)であり、iの範囲はMチ
ャネルの場合に(1≦i≦M)であり、g_packetsは、プレストアされ
たグルーピクチャ中のパケット数(すなわち、好適な実施形態において標準解像
度のデジタル映像の場合に2に等しい定数)であり、k_packets_sa
vedは、オリジナルのアンカー無しピクチャとグルーピクチャとのパケット数
の差に等しい。
【0042】 各チャネルについてこのプロセスを続け、アンカー無しピクチャをグルーピク
チャと取り換えて、num_packets≦num_packets_max
になるまで、num_packetsを計算しつづける。num_packet
s≦num_packets_maxになると、アグリゲートパニック状態がな
くなるため、マルチプレクサのバンド幅は、マルチプレクサ中の全パケットを最
後のピクチャに必要な時間までに伝送できるくらい十分になっているはずである
。従って、num_packetsがnum_packets≦num_pac
kets_maxになるまで調節されると、アグリゲートパニックアルゴリズム
は終了し、グルーピクチャの挿入も終了する。
【0043】 ここで図6を参照して、本発明によるアグリゲートパニック状態をより詳細に
示す図が示されている。詳細には、上記において図5を参照して説明した方法で
は、マルチプレクサ中のデータ全体を調べ、そのデータ全体の最新のピクチャの
DTSを用いて、当該マルチプレクサから当該データ全体を伝送するのに十分な
バンド幅があるかどうかを判定する。図6中の図示および本明細書中の以下のよ
り詳細な説明に示すように、この方法は、データ全体を送出ピクチャ「k」(k
は、1〜最大数のピクチャの場合のSMB中のピクチャ数)まで解析できるよう
拡張可能である。図6は、チャネル1、2、...mの場合にSMB中にバッフ
ァされるピクチャを示す。各チャネルは、現在の送出ピクチャ160(1)、1
60(2)、160(m)を有し、現在の送出ピクチャは送出ピクチャ0であり
、ピクチャ0の直後に後続する次の送出ピクチャをピクチャ1と呼び、162(
1)、162(2)、162(m)に、図示のように各SMB中のさらなるピク
チャが後続する。各SMBは、図6に図示するようにバッファされる異なる数の
ピクチャを有し得、SMB 2およびSMB mは、ピクチャ2(それぞれ、1
64(2)および164(m))を含み、SMB 2はさらに、ピクチャ3(1
66)を含む。送出ピクチャの一部はマルチプレクサから既に伝送されているた
め、全SMB中の各現在の送出ピクチャ(または各ピクチャ0)は、ピクチャ全
体を為していない可能性がある点に留意されたい。
【0044】 ピクチャ1、162(1)、162(2)、162(m)を参照して、lat
est_DTS(1)という用語を、全SMB中のピクチャ1の全ての最新のD
TSとして定義する。同様に、previous_DTS(1)という用語は、
最新のDTS(1)の直前に先行するピクチャのDTSであることが理解される
。Num_packets(1)は、全SMB中のパケットのピクチャ1までの
総数である。これは、全SMBの現在の送出ピクチャ中の全パケットと、次の送
出ピクチャ中の全パケットとを含む。Num_packets(1)は、−t(
1)で与えられる時間以内でマルチプレクサから伝送されなければならない。こ
こで、 −t(1)=previous_DTS(1)−(time_now+N_
TC_AHEAD*Tc) マルチプレクサからこの時間分だけ伝送され得るパケットの最大数は、上記と同
様に以下のようにも与えられる。
【0045】 num_packets_max(1)=Np_tc*_−t(1)/Tc
num_packets(1)≦num_packets_max(1)である
場合、これは、マルチプレクサの出力バンド幅が、最新のピクチャが直前先行す
るピクチャのDTSまでに到着する時間以内でピクチャ1の全てをマルチプレク
サから伝送するのに十分なことを示す。この場合、ピクチャ1についてアグリゲ
ートパニック状態は発生せず、本明細書中において説明した方法は次のピクチャ
へと進む。これについて以下に全て説明する。
【0046】 ピクチャ1についてアグリゲートパニック状態が発生するのは、num_pa
ckets(1)がnum_packets_max(1)よりも大きい場合で
ある。このイベントにおいて、マルチプレクサのバンド幅は、データ全体をピク
チャ1まで伝送して、直前先行するピクチャのDTSまでにピクチャ1の全ての
最新のピクチャを各復号器に伝送することを保証するには不十分である。この状
況を修復するために、この状態がなくなるまで、アンカー無しピクチャをより小
型のグルーピクチャと取り換える。
【0047】 従って、優先順位の最も低いチャネルから始まって、ピクチャ1がアンカー無
しピクチャである場合、上述したようにピクチャ1をグルーピクチャと取り換え
、次いで、以下の式にしたがってnum_packets(1)を調節する。
【0048】 k_packets_saved=p(i,1)−g_packets num_packets(1)=num_packets(1)−k_p
ackets_saved ここで、p(i,1)は、チャネルiの送出ピクチャ1のパケット数に等しく、
iは、優先順位の最も低いチャネルから優先順位の最も高いチャネルにインクリ
メントするチャネルインデックスであり、iの範囲は、mチャネルの場合に(1
≦i≦m)であり、k_packets_savedおよびg_packets
は、上述のように規定される。
【0049】 グルーフレームを挿入するプロセスは、チャネルピクチャ1全てをグルーフレ
ーム挿入対象として調べ終えるまでまたはnum_packets(1)をnu
m_packet_max(1)未満になるまで調節するまで、継続される。n
um_packets(1)≦num_packets_max(1)である場
合、これは、多重化(mux)のバンド幅が全SMBのピクチャ1の全てのデー
タ全体を上述したような良好なタイミングで伝送するのに十分であることを示す
【0050】 上記のようにピクチャ1を処理した後、アグリゲートパニック方法は、ピクチ
ャ2に進み、同じ計算を行う。次いで、このアルゴリズムは、ピクチャからピク
チャへと進んで、パニック状態を有する状況を識別し、ピクチャ1について上述
したような後発するパニック状態の各々に対処する。このアルゴリズムは、図6
にピクチャ166として示す送出ピクチャNpmaxまで繰り返される。ここで
、Npmaxは、最大数のピクチャを有するSMB中のピクチャの数である。図
5および6を参照して上述したアルゴリズムは典型的には、各タイムスライスを
行う。これは、各SMBは、各タイムスライス中の新規データを既に受け取って
いる場合が多いからである。
【0051】 本発明をより容易に理解するためには、SMBのフルネスとパニック状態の発
生可能性との間に相関がある点を理解する必要がある。本明細書中において上述
したように、パニック状態が発生するのは、マルチプレクサから出力されるべき
パケットの数が、所与のタイムスライスにおいて当該マルチプレクサに利用可能
なバンド幅を上回る場合である。図5および6を参照して上述した方法では、S
MBのフルネスを見て、このフルネスの測定結果から、発生する可能性のあるパ
ニック状態の90%を検出することが可能である。残りの10%のパニック状態
については、同一譲受人に譲受られた、「Method and Appara
tus for Detecting and Preventing Ban
dwidth Overflow in a Statistical Mul
tiplexer」という名称の同時係属中の出願シリアル番号第09/228
,029号等に記載されているより高度な方法を用いることが可能である。本明
細書中、同出願の開示内容を参考のため援用する。
【0052】 本発明の好適な実施形態について例示および説明を行ってきたが、本発明はこ
れらの実施形態に限定されないことは明らかである。当業者であれば、本明細書
中の特許請求の範囲に定義されているような本発明の精神および範囲から逸脱す
ることなく、多くの改変物、変更物、修正物、代替物および均等物を想起する。
【図面の簡単な説明】
【図1】 図1は、デジタルテレビピクチャの符号化、伝送および復号化の様式を示すブ
ロック図である。
【図2】 図2は、速度可変ビットストリームを高バンド幅の媒体上に多重化する様子を
示すブロック図である。
【図3】 図3は、本発明の好適な実施形態を実現する統計的マルチプレクサのブロック
図である。
【図4】 図4は、図3の統計的マルチプレクサの一部のより詳細なブロック図である。
【図5】 図5は、本発明によるアグリゲートパニック状態の識別を示す図である。
【図6】 図6は、本発明によるアグリゲートパニック状態をより詳細に示す図である。
───────────────────────────────────────────────────── フロントページの続き (81)指定国 EP(AT,BE,CH,CY, DE,DK,ES,FI,FR,GB,GR,IE,I T,LU,MC,NL,PT,SE),OA(BF,BJ ,CF,CG,CI,CM,GA,GN,GW,ML, MR,NE,SN,TD,TG),AP(GH,GM,K E,LS,MW,SD,SL,SZ,TZ,UG,ZW ),EA(AM,AZ,BY,KG,KZ,MD,RU, TJ,TM),AE,AL,AM,AT,AU,AZ, BA,BB,BG,BR,BY,CA,CH,CN,C R,CU,CZ,DE,DK,DM,EE,ES,FI ,GB,GD,GE,GH,GM,HR,HU,ID, IL,IN,IS,JP,KE,KG,KP,KR,K Z,LC,LK,LR,LS,LT,LU,LV,MA ,MD,MG,MK,MN,MW,MX,NO,NZ, PL,PT,RO,RU,SD,SE,SG,SI,S K,SL,TJ,TM,TR,TT,TZ,UA,UG ,UZ,VN,YU,ZA,ZW Fターム(参考) 5C059 KK35 MA00 RB02 RC04 SS06 TA71 TC16 TC21 TD12 UA02 UA05 UA38 5C063 AA01 AB07 AC01 AC10 CA29 CA36 DA07 DA13 DB10 5K028 BB05 CC02 KK01 KK03 KK12 LL15 SS04 SS14

Claims (25)

    【特許請求の範囲】
  1. 【請求項1】 今にも起こりそうなバンド幅オーバーフロー状態をマルチプ
    レクサにおいて識別する方法であって、該マルチプレクサは、ソースからの入来
    ピクチャを受け取り、該ピクチャを出力する複数のメモリバッファを含み、該ピ
    クチャは複数のパケットを含み、 所与の時間の間の該メモリバッファ中のパケットの総数を判定する工程と、 所与の時間の間に出力されるべきパケットの数と、該時間の間に該マルチプレ
    クサが出力することのできるパケットの数とを比較する工程と、 を包含する、方法。
  2. 【請求項2】 前記ピクチャは、ビットストリームとして到着し、該ビット
    ストリームは、構成要素のシーケンスであり、該構成要素は、調節可能な長さを
    有し、各構成要素は、受信器に該構成要素を処理させるタイミングを示すタイミ
    ング情報を含み、 前記出力速度を判定する工程は、所与の時間の間行なわれ、該受信器に該構成
    要素を処理させなければならなくなる前に前記バッファから該構成要素を出力す
    るような様式で最低速度を判定する工程を包含し、 該受信器に送信されたが該受信器によって未だ処理されていない該一連の構成
    要素の構成要素のサイズ全体が、該受信器中のビットバッファのサイズを越えな
    いような様式で、最高速度を判定する工程と、 をさらに包含する、請求項1に記載の方法。
  3. 【請求項3】 前記ピクチャは、デジタル的に符号化された映像画像である
    、請求項1に記載の方法。
  4. 【請求項4】 前記ピクチャは、MPEG−2規格に従って符号化される、
    請求項3に記載の方法。
  5. 【請求項5】 前記バンド幅は、前記メモリバッファのサイズと、前記受信
    器中の映像バッファとによって規定される、請求項2に記載の方法。
  6. 【請求項6】 前記比較工程は、複数の将来のタイムスライスについてバン
    ド幅出力要件とバンド幅能力とを比較する工程をさらに包含する、請求項1に記
    載の方法。
  7. 【請求項7】 バンド幅オーバーフロー状態が存在するかどうかを判定する
    工程をさらに包含する、請求項1に記載の方法。
  8. 【請求項8】 前記ビットストリームの一部をグルーフレームと取り換える
    ことにより、前記オーバーフロー状態をなくす工程をさらに包含する、請求項7
    に記載の方法。
  9. 【請求項9】 前記グルーフレームと取り換えられる部分は、グルーフレー
    ム機会を有する情報の複数のチャネルのうち少なくとも1つから選択される、請
    求項8に記載の方法。
  10. 【請求項10】 前記チャネルを優先順位の最も低い方から優先順位の最も
    高い方に評価して、前記グルーフレーム機会を識別する工程をさらに包含する、
    請求項9に記載の方法。
  11. 【請求項11】 グルーフレーム機会が識別されない場合、チャネルをドロ
    ップする工程をさらに包含する、請求項10に記載の方法。
  12. 【請求項12】 チャネルを優先順位の最も低いものから優先順位の最も高
    い順番にドロップする、請求項11に記載の方法。
  13. 【請求項13】 前記時間は、前記メモリバッファからの次の送出ピクチャ
    のための時間を含む、請求項1に記載の方法。
  14. 【請求項14】 前記時間は、前記メモリバッファ中の全ピクチャのための
    時間を含む、請求項1に記載の方法。
  15. 【請求項15】 今にも起こりそうなバンド幅オーバーフロー状態をマルチ
    プレクサにおいて識別する方法であって、該マルチプレクサは、ソースからの入
    来ピクチャを受け取り、該ピクチャを出力する複数のメモリバッファを含み、該
    ピクチャは複数のパケットを含み、 前記メモリバッファ中の次の送出ピクチャを含む一連のピクチャについて、該
    メモリバッファ中のパケットの総数を判定する工程と、 該一連のピクチャについて、出力されるべきパケットの数と、該マルチプレク
    サが出力することのできるパケットの数とを比較する工程と、 該一連のピクチャの該バンド幅出力要件が該マルチプレクサのバンド幅能力以
    下となるようにパケットを再割り当てする工程と、 を包含する、方法。
  16. 【請求項16】 前記ピクチャは、ビットストリームとして到着し、該ビッ
    トストリームは、構成要素のシーケンスであり、該構成要素は、調節可能な長さ
    を有し、各構成要素は、受信器に該構成要素を処理させるタイミングを示すタイ
    ミング情報を含み、 前記出力速度を判定する工程は、所与の時間の間行なわれ、該受信器に該構成
    要素を処理させなければならなくなる前に前記バッファから該構成要素を出力す
    るような様式で最低速度を判定する工程を包含し、 該受信器に送信されたが該受信器によって未だ処理されていない該一連の構成
    要素の構成要素のサイズ全体が、該受信器中のビットバッファのサイズを越えな
    いような様式で、最高速度を判定する工程と、 をさらに包含する、請求項15に記載の方法。
  17. 【請求項17】 前記ピクチャは、デジタル的に符号化された映像画像であ
    る、請求項15に記載の方法。
  18. 【請求項18】 前記ピクチャは、MPEG−2規格に従って符号化される
    、請求項17に記載の方法。
  19. 【請求項19】 前記バンド幅は、前記メモリバッファのサイズと、前記受
    信器中の映像バッファとによって規定される、請求項16に記載の方法。
  20. 【請求項20】 前記比較工程は、複数の将来のタイムスライスについてマ
    ルチプレクサバンド幅出力とバンド幅能力とを比較する工程をさらに包含する、
    請求項15に記載の方法。
  21. 【請求項21】 前記ビットストリームの一部をグルーフレームと取り換え
    ることにより、前記オーバーフロー状態をなくす工程をさらに包含する、請求項
    15に記載の方法。
  22. 【請求項22】 前記グルーフレームと取り換えられる部分は、グルーフレ
    ーム機会を有する情報の複数のチャネルのうち少なくとも1つから選択される、
    請求項21に記載の方法。
  23. 【請求項23】 前記チャネルを優先順位の最も低い方から優先順位の最も
    高い方に評価して、前記グルーフレーム機会を識別する工程をさらに包含する、
    請求項22に記載の方法。
  24. 【請求項24】 グルーフレーム機会が識別されない場合、チャネルをドロ
    ップする工程をさらに包含する、請求項23に記載の方法。
  25. 【請求項25】 チャネルを優先順位の最も低いものから優先順位の最も高
    い順番にドロップする、請求項24に記載の方法。
JP2000596742A 1999-01-29 2000-01-27 統計的マルチプレクサのバンド幅を十分にすることを確実にする方法および装置 Withdrawn JP2002536889A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US09/240,344 US6418122B1 (en) 1997-03-21 1999-01-29 Method and apparatus for assuring sufficient bandwidth of a statistical multiplexer
US09/240,344 1999-01-29
PCT/US2000/001877 WO2000045606A1 (en) 1999-01-29 2000-01-27 Method and apparatus for assuring sufficient bandwidth of a statistical multiplexer

Publications (1)

Publication Number Publication Date
JP2002536889A true JP2002536889A (ja) 2002-10-29

Family

ID=22906154

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000596742A Withdrawn JP2002536889A (ja) 1999-01-29 2000-01-27 統計的マルチプレクサのバンド幅を十分にすることを確実にする方法および装置

Country Status (7)

Country Link
US (1) US6418122B1 (ja)
EP (1) EP1149499A1 (ja)
JP (1) JP2002536889A (ja)
AU (1) AU3472900A (ja)
BR (1) BR0007733A (ja)
CA (1) CA2361047C (ja)
WO (1) WO2000045606A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012521126A (ja) * 2009-03-19 2012-09-10 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ フレキシブル時分割多重化において複数の情報信号を伝送する装置および方法

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6301428B1 (en) * 1997-12-09 2001-10-09 Lsi Logic Corporation Compressed video editor with transition buffer matcher
US8180675B2 (en) * 2000-08-31 2012-05-15 Prime Research Alliance E., Inc. System and method for automatically managing avail inventory data and avail pricing
US8151295B1 (en) 2000-08-31 2012-04-03 Prime Research Alliance E., Inc. Queue based advertisement scheduling and sales
US7185353B2 (en) 2000-08-31 2007-02-27 Prime Research Alliance E., Inc. System and method for delivering statistically scheduled advertisements
US20020144263A1 (en) * 2000-08-31 2002-10-03 Eldering Charles A. Grouping of advertisements on an advertising channel in a targeted advertisement system
US7653923B2 (en) 2000-02-18 2010-01-26 Prime Research Alliance E, Inc. Scheduling and presenting IPG ads in conjunction with programming ads in a television environment
US7328448B2 (en) 2000-08-31 2008-02-05 Prime Research Alliance E, Inc. Advertisement distribution system for distributing targeted advertisements in television systems
US7039932B2 (en) 2000-08-31 2006-05-02 Prime Research Alliance E., Inc. Queue-based head-end advertisement scheduling method and apparatus
US20020083439A1 (en) * 2000-08-31 2002-06-27 Eldering Charles A. System for rescheduling and inserting advertisements
US7228555B2 (en) * 2000-08-31 2007-06-05 Prime Research Alliance E., Inc. System and method for delivering targeted advertisements using multiple presentation streams
US20020083445A1 (en) * 2000-08-31 2002-06-27 Flickinger Gregory C. Delivering targeted advertisements to the set-top-box
US20020083441A1 (en) 2000-08-31 2002-06-27 Flickinger Gregory C. Advertisement filtering and storage for targeted advertisement systems
US6795506B1 (en) * 1999-10-05 2004-09-21 Cisco Technology, Inc. Methods and apparatus for efficient scheduling and multiplexing
US7331057B2 (en) 2000-12-28 2008-02-12 Prime Research Alliance E, Inc. Grouping advertisement subavails
US7292602B1 (en) * 2001-12-27 2007-11-06 Cisco Techonology, Inc. Efficient available bandwidth usage in transmission of compressed video data
US7529276B1 (en) 2002-09-03 2009-05-05 Cisco Technology, Inc. Combined jitter and multiplexing systems and methods
US7526001B2 (en) * 2004-07-26 2009-04-28 General Instrument Corporation Statistical multiplexer having protective features from extraneous messages generated by redundant system elements
US20090150926A1 (en) * 2007-12-06 2009-06-11 General Instrument Corporation Method And Apparatus For Delivering SDV Programming With Targeted Advertising To Selected Groups Of Subscribers
US9794562B2 (en) * 2009-12-04 2017-10-17 Arris Enterprises, Inc. Generation and detection of private metadata in an encoded video transport stream
US9485506B2 (en) * 2012-09-11 2016-11-01 Texas Instruments Incorporated Method and system for constraining slice header processing overhead in video coding
US20180144554A1 (en) 2016-11-18 2018-05-24 Eyedaptic, LLC Systems for augmented reality visual aids and tools
US20190012841A1 (en) 2017-07-09 2019-01-10 Eyedaptic, Inc. Artificial intelligence enhanced system for adaptive control driven ar/vr visual aids
US10984508B2 (en) 2017-10-31 2021-04-20 Eyedaptic, Inc. Demonstration devices and methods for enhancement for low vision users and systems improvements
US10979747B2 (en) 2017-12-21 2021-04-13 Arris Enterprises Llc Statistical multiplexing system for variable bit rate encoding with constant bit rate encoder
CN112601509B (zh) 2018-05-29 2024-01-23 爱达扩视眼镜公司 用于低视力用户的混合式透视增强现实系统和方法
EP3856098A4 (en) * 2018-09-24 2022-05-25 Eyedaptic, Inc. IMPROVED AUTONOMOUS HANDS-FREE CONTROL OF ELECTRONIC VISION AIDS

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5115309A (en) * 1990-09-10 1992-05-19 At&T Bell Laboratories Method and apparatus for dynamic channel bandwidth allocation among multiple parallel video coders
US5159447A (en) * 1991-05-23 1992-10-27 At&T Bell Laboratories Buffer control for variable bit-rate channel
CA2104753C (en) * 1992-10-29 1999-02-16 Kotikalapudi Sriram Bandwidth allocation, transmission scheduling, and congestion avoidance in broadband atm networks
US5381413A (en) * 1992-12-28 1995-01-10 Starlight Networks Data throttling system for a communications network
US5301187A (en) * 1993-05-25 1994-04-05 Xel Communications, Inc. System for implementing broadband audio program telephony circuits using 2B1Q technology
US5757801A (en) * 1994-04-19 1998-05-26 Multi-Tech Systems, Inc. Advanced priority statistical multiplexer
US5506844A (en) * 1994-05-20 1996-04-09 Compression Labs, Inc. Method for configuring a statistical multiplexer to dynamically allocate communication channel bandwidth
US5901149A (en) * 1994-11-09 1999-05-04 Sony Corporation Decode and encode system
US5956088A (en) 1995-11-21 1999-09-21 Imedia Corporation Method and apparatus for modifying encoded digital video for improved channel utilization
US5686963A (en) 1995-12-26 1997-11-11 C-Cube Microsystems Method for performing rate control in a video encoder which provides a bit budget for each frame while employing virtual buffers and virtual buffer verifiers
EP0931418A2 (en) 1996-10-08 1999-07-28 Tiernan Communications Incorporated Apparatus and method for multi-service transport multiplexing
US6052384A (en) 1997-03-21 2000-04-18 Scientific-Atlanta, Inc. Using a receiver model to multiplex variable-rate bit streams having timing constraints
US6219358B1 (en) * 1998-09-11 2001-04-17 Scientific-Atlanta, Inc. Adaptive rate control for insertion of data into arbitrary bit rate data streams

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012521126A (ja) * 2009-03-19 2012-09-10 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ フレキシブル時分割多重化において複数の情報信号を伝送する装置および方法
US8804768B2 (en) 2009-03-19 2014-08-12 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method for transmitting a plurality of information signals in flexible time-division multiplexing

Also Published As

Publication number Publication date
US6418122B1 (en) 2002-07-09
WO2000045606A1 (en) 2000-08-03
CA2361047A1 (en) 2000-08-03
AU3472900A (en) 2000-08-18
BR0007733A (pt) 2001-11-06
CA2361047C (en) 2008-08-19
EP1149499A1 (en) 2001-10-31

Similar Documents

Publication Publication Date Title
JP2002536889A (ja) 統計的マルチプレクサのバンド幅を十分にすることを確実にする方法および装置
EP1149498B1 (en) Method for detecting and preventing bandwidth overflow in a statistical multiplexer
US6052384A (en) Using a receiver model to multiplex variable-rate bit streams having timing constraints
EP1320996B1 (en) Method and apparatus for determining a transmission bit rate in a statistical multiplexer
US6845107B1 (en) Video data multiplexer, video data multiplexing control method, method and apparatus for multiplexing encoded stream, and encoding method and apparatus
US6847656B1 (en) Statistical remultiplexing with bandwidth allocation among different transcoding channels
US5652749A (en) Apparatus and method for segmentation and time synchronization of the transmission of a multiple program multimedia data stream
US6493388B1 (en) Rate control and buffer protection for variable bit rate video programs over a constant rate channel
EP1130927A2 (en) Apparatus, method and computer program product for transcoding a coded multiplex sound and moving pictuture sequence
JPH08321836A (ja) マルチメディア・データの送信のセグメント化および時間同期化のための装置および方法
JP2002535934A (ja) リファレンス信号情報を規定時間間隔で配信する方法および装置
EP1173023B1 (en) Multiplex dependend video compression
EP1161838A1 (en) Method and apparatus for generating time stamp information

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20070403