JP2008521270A - 送信者側チャネル適応型のビデオ送信 - Google Patents
送信者側チャネル適応型のビデオ送信 Download PDFInfo
- Publication number
- JP2008521270A JP2008521270A JP2007540816A JP2007540816A JP2008521270A JP 2008521270 A JP2008521270 A JP 2008521270A JP 2007540816 A JP2007540816 A JP 2007540816A JP 2007540816 A JP2007540816 A JP 2007540816A JP 2008521270 A JP2008521270 A JP 2008521270A
- Authority
- JP
- Japan
- Prior art keywords
- dct
- video signal
- channel
- compressed video
- fullness
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 53
- 230000003044 adaptive effect Effects 0.000 title claims abstract description 25
- 238000000034 method Methods 0.000 claims abstract description 37
- 238000012545 processing Methods 0.000 claims abstract description 19
- 239000003550 marker Substances 0.000 claims description 11
- 238000000638 solvent extraction Methods 0.000 claims description 6
- 230000011218 segmentation Effects 0.000 claims description 4
- 238000003780 insertion Methods 0.000 abstract 1
- 230000037431 insertion Effects 0.000 abstract 1
- 230000008569 process Effects 0.000 description 12
- 230000006978 adaptation Effects 0.000 description 7
- 239000010410 layer Substances 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000004590 computer program Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000005192 partition Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000002356 single layer Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23406—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving management of server-side video buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/164—Feedback from the receiver or from the transmission channel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本発明は、チャネル適応型のビデオ送信システム及び方法に関する。システム１０が提供され、圧縮されたビデオ信号からヘッダコード及び離散コサイン変換（ＤＣＴ）ランレングスコードを生成する可変長デコーディングシステム（ＶＬＤ）１４、マークされたＤＣＴ係数セグメントを定義するため、マーカーをＤＣＴランレングスコードに挿入するＤＣＴコードマーキングシステム１６、及び現在のチャネル状態に基づいて、マークされたＤＣＴ係数セグメントを保持するかを判定するビットストリーム処理システム１８を有する。
Description
本発明は、ロバストなワイヤレスビデオ送信全般に関し、より詳細には、送出者側のチャネル適応型のビデオ送信を実現するシステム及び方法に関する。
無線技術の出現により、大量の需要がワイレスビデオストリーミングアプリケーションを供給することに向けられている。残念なことに、効率的になるため、ストリーミングビデオは、ビデオ品質を最大にするために変化するチャネル状態に知的に適応することができる必要がある。この問題を克服するために様々な挑戦が存在し、これは、制限された変動するチャネルのキャパシティ及び厳しいビットレート及びリアルタイムデジタルビデオの遅延要件により直目する困難性を含む。
チャネル適応型通信を提供する既存の技術は、受信機のフィードバックを通してチャネル帯域幅を測定すること、リアルタイムトランスコーディングを使用して変化する帯域幅を整合するためにデジタルビデオビットレートを調節することを含む。かかるシステムは、たとえば、商標名ＶｉＸＳTMの下で提供される。それらのアプローチによる問題は、フィードバック及び調節プロセスが時間を要するので、適応が現実のチャネル状態の後で常に遅れることである。
別のソリューションは、異なるサブストリーム又はレイヤにビデオデータを区分すること、それぞれのレイヤの重要性を決定すること、レイヤを異なるプライオリティで送信することを含む。チャネルが十分なスループットを有するとき、全てのレイヤは、上手く送信及び受信される。チャネルのスループットがドロップするとき、より重要なデータが通過し、重要でないデータがベストエフォートベースで通過する。この技術を使用して、チャネル適応は、トランスコードの後で行われ、これにより適応の応答時間が短縮化される。受信機からの特定のフィードバックなしにチャネル状態を感知するメカニズムが提案される。しかし、このソリューションの主要な制限は、たとえば標準的なMPEG-2，MPEG-4及び／又はH.26Lデコーダによりデコードされる前に、受信機がサブストリームをシングルストリームにアセンブルする必要があることである。これは、このソリューションの適用性を制限し、潜在的に受信機のコストを増加する。
これに応じて、送出者側のチャネル適応型のビデオ送信を提供する改善されたシステム及び方法が必要とされる。
本発明は、とりわけ、チャネル適応型の送信システム及び方法を供給することで、上述された問題に対処するものである。第一の態様では、本発明は、圧縮されたビデオ信号をチャネル状態に適合させるチャネル適応型送信システムを提供するものであり、圧縮されたビデオ信号から離散コサイン変換（ＤＣＴ）ランレングスコード（及びヘッダコード）を発生する可変長デコードシステム（ＶＬＤ）、マークされたＤＣＴ係数セグメントを定義するためにＤＣＴランレングスコードにマーカーを挿入するＤＣＴコードカーキングシステム、及び、現在のチャネル状態に基づいて、マークされたＤＣＴ係数セグメントを保持するかを判定するビットストリーム処理システムを有する。
第二の態様では、本発明は、圧縮されたビデオ信号をチャネル状態に適応させるチャネル適応型の送信方法を提供するものであり、圧縮されたビデオ信号を受信するステップ、圧縮されたビデオ信号から離散コサイン変換（ＤＣＴ）ランレングスコードを発生するステップ、マークされたＤＣＴ係数セグメントを定義するためにＤＣＴランレングスコードにマーカーを挿入するステップ、及び、現在のチャネル状態に基づいて、マークされたＤＣＴ係数セグメントを保持するかを判定するステップを含む。
第三の態様では、本発明は、圧縮されたビデオ信号をチャネル状態に適応させる記録可能な媒体に記憶されたプログラムプロダクトを提供するものであり、圧縮されたビデオ信号から離散コサイン変換（ＤＣＴ）ランレングスコードを発生する手段、マークされたＤＣＴ係数セグメントを定義するためにＤＣＴランレングスコードにマーカーを挿入する手段、及び、現在のチャネル状態に基づいて、マークされたＤＣＴ係数セグメントを保持するかを判定する手段を含む。
第四の態様では、本発明は、圧縮されたビデオ信号をチャネル状態に適応させるチャネル適応型送信システムを提供するものであり、圧縮されたビデオ信号からＤＣＴデータのブロックから構成される離散コサイン変換（ＤＣＴ）ランレングスコードを発生する可変長デコードシステム（ＶＬＤ）、それぞれのＤＣＴブロックをパケットヘッダにより識別されるミニパケットのペアに区分するＤＣＴコード区分システム、及び、現在のチャネル状態に基づいてそれぞれミニパケットを保持するかを判定するミニパケット処理システムを有する。
第五の態様では、本発明は、圧縮されたビデオ信号をチャネル状態に適応させるチャネル適応型送信システムを提供するものであり、圧縮されたビデオ信号を受信するステップ、圧縮されたビデオ信号から離散コサイン変換（ＤＣＴ）ランレングスコードを発生するステップ、ＤＣＴランレングスコードのそれぞれＤＣＴブロックを第一及び第二のミニパケットに区分するステップを含み、それぞれミニパケットはパケットヘッダから識別可能であり、現在のチャネル状態に基づいて、それぞれのミニパケットを保持するかを判定するステップを含む。
第六の態様では、本発明は、圧縮されたビデオ信号をチャネル状態に適応させる記録可能な媒体に記憶されたプログラムプロダクトを提供するものであり、圧縮されたビデオ信号を受信する手段、圧縮されたビデオ信号から離散コサイン変換（ＤＣＴ）ランレングスコードを発生する手段、ＤＣＴランレングスコードのそれぞれＤＣＴブロックを第一及び第二のミニパケットに区分する手段を含み、それぞれミニパケットはパケットヘッダから識別可能であり、現在のチャネル状態に基づいて、それぞれのミニパケットを保持するかを判定する手段を有する。
本発明のこれらの特徴及び他の特徴は、添付図面と共に行われる本発明の様々な態様の以下の詳細な説明から容易に理解されるであろう。
本発明は、受信機のデコーディング機能からの更なる供給を必要とすることなしに、階層型のビデオ送信システムの適応型のパフォーマンスを提供する。以下に詳細に記載されるように、これは、チャネル適応の後にビデオレイヤを１つのレイヤにマージする送信システムを提供することで達成される。このようにして、受信機は、一般に配置される単一のレイヤのデコーダを利用し、多数のビデオレイヤを処理する機能を必要としない。本発明はワイヤレスシステムを参照して記載されるが、本発明は、変化するチャネル状態に適応する必要がある送信システムに適用することができることを理解されたい。
以下では、かかる送出者側の適応型送信システムを実現するため、２つの例示的な実施の形態が記載される。第一の実施の形態は、必要な場合に廃棄されるＤＣＴコードを識別するビットストリームマーキング技術を利用し、第二の実施の形態は、必要な場合にそれぞれ廃棄することができる、それぞれのＤＣＴブロックを２つのミニパケットに区分するミニパケット技術を利用する。
図１は、送出者側のチャネル適応を提供するためのビットストリームマーキングプロセスを利用する適合送信システム１０のブロック図を示す。この実施の形態では、圧縮されたビデオストリームが分析され、異なるセグメントを描写するために「マーカー」がストリームに挿入される。送信の間、送信バッファステータスは、チャネル条件をアクセスするためにモニタされる。バッファが余りにフルになった場合、ビットストリームの所定のマークされたセグメントが廃棄される。さもなければ、マーカーが除かれる。
図１に示されるように、ＭＰＥＧ−２ビデオ１２は、送信システム１０に入力し、ここで、可変長デコーディングシステム（ＶＬＤ）１４によりはじめに処理される。入力されたＭＰＥＧ−２ビデオ１２は、予め決定されたビットレートに既にトランスコードされており、すなわち、本発明を実現するために更なるトランスコードが必要とされない。また、本実施の形態は、ＭＰＥＧ−２信号の処理を参照して記載されているが、本発明は他のタイプの圧縮されたビデオ信号（たとえばＭＰＥＧ−４，Ｈ．２６Ｌ等）にも適用することができる。
ＶＬＤ１４は、ヘッダコードのストリーム、及びＭＰＥＧ−２ビデオ１２からの離散コサイン変換（ＤＣＴ）ランレングスコードを生成し、これらは、ＤＣＴコードマーキングシステム１６に供給される。ＤＣＴコードマーキングシステム１６は、ＤＣＴ係数セグメント（“segments”）を識別するため、ＤＣＴランレングスコード間に固有の識別可能なマーカー（たとえばビットストリング）を選択的に挿入する。マーカーは、オリジナルビットストリームの仕様により使用されていない、たとえば任意のコード又はビットのセットを有する。マーカーを何処に挿入すべきかに関する判定は、公知又は後に開発される技術、プロセス及び／又はアルゴリズムを使用する、セグメンテーションシステム２８により達成される。たとえば、低周波の、ＤＣデータ及びヘッダコードよりも消費可能である高周波データを識別することが好ましい。このケースでは、ランレングスＤＣＴコードのストリングにおける（すなわちそれぞれのＤＣＴブロックにおける）高周波ＤＣＴ係数は、後に容易に識別され、必要な場合に廃棄することができるようにマークされる。
ひとたびこのプロセスが完了すると、ビットストリーム処理システム１８は、送信バッファ制御ユニット２４かランフィードバックに基づいて、次にマークされたＤＣＴ係数セグメントを保持又は廃棄する。より詳細には、送信ユニット２２からのフィードバックを調べることで、送信バッファ制御ユニット２４は、バッファ３０において所望のフルネスを維持するため、次にマークされたセグメントが廃棄されるべきかを判定することができる。たとえば、送信バッファ制御ユニット２４は、バッファ３０の予め決定されたフルネス（fullness）の閾値３２（たとえば７５％）を超えたかを見る。超えた場合、送信バッファ制御ユニット２４は、ビットストリーム処理システム１８に合図して、次にマークされたＤＣＴ係数セグメントを廃棄する。マークされたセグメントは、フルネスの閾値３２以下にバッファのフルネスが下がるまで、必要に応じて廃棄される。
送信制御バッファユニット２４からの信号が次にマークされたＤＣＴ係数セグメントを廃棄する場合、ビットストリーム処理システム１８は、マーカーそれら自身を含む、（セグメントの終了をマークする）エンドマーカーへの（セグメントの開始をマークする）開始マーカーで始まるビットを廃棄する。送信制御バッファユニット２４からの制御信号が次にマークされたセグメントをそのまま保持した場合、そのマーカーのみが除かれる。
ビットストリーム処理システム１８がその処理を終了した後、ビットストリームは、パケット化システム２０によりパケット化され、適応されたビデオ信号が発生され、次いで、送信ユニット２２によりチャネル２６を通して送信することができる。先に記載されたチャネル状態を確認し、反応するためにバッファ３０を調べるプロセスは、例示される目的のみを提供するものであり、チャネル状態を評価し、チャネル状態に基づいてビットストリームからマークされたＤＣＴ係数セグメントを除去するか、除去を引き起こす他のプロセス、本発明の範囲に含まれることを理解されたい。
本発明の第二の実施の形態は、図２に記載される。この実施の形態では、たとえば、高周波のＤＣＴ係数を識別するため、固有のビットをマークセグメントに挿入する代わりに、それぞれＤＣＴブロックは、パケットヘッダにより識別された２以上の「ミニパケット」に区分される。ミニパケットは、送信バッファ制御ユニット５２からの信号に基づいて廃棄されるか、保持される。
したがって、先に記載された第一の実施の形態と同様に、適応型の送信システム４０は、圧縮されたビデオ信号、ＭＰＥＧ−２ビデオ１２を受信し、ＤＣＴランレングスコードを生成するＶＬＤ４２を含む。コードは、ＤＣＴコード区分システム４４により区分され、このシステムは、それぞれのＤＣＴブロックを２以上のミニパケットに分割する。一般に、２を超えるミニパケットは、後のパケットより価値がある。さらに、ブロック当たりの２を超えるミニパケットは、データ間の粒状度の高い識別について区分される。
ミニパケット処理システム４６は、送信バッファ制御ユニット５２からの信号に基づいて次のミニパケットを保持するか、又は廃棄する。送信バッファ制御ユニット５２は、たとえば、第一の実施の形態で先に記載された同じプロセスを使用して、次のミニパケットを保持又は廃棄するかを判定する。すなわち、バッファ５４のフルネスが予め決定されたフルネスの閾値５６を超える場合、送信バッファ制御ユニット５２は、ミニパケット処理システム４６に次のミニパケットを廃棄するように合図する。
ミニパケット処理システム４６による処理の後、結果的に得られるミニパケットは、パケット化システム４８によりパケット化され、適応されたビデオ信号が発生され、送信ユニット５０により送信される。先に記載されたチャネル状態を確認し、反応するためにバッファ５４を調べるプロセスは、例示目的のみで提供されていること、チャネル状態を評価し、チャネル状態に基づいてビットストリームからミニパケットを除去するか、ミニパケットの除去を引き起こすか他のプロセスが本発明の範囲に含まれることが理解される。
本明細書で記載されたシステム、機能、メカニズム、方法、エンジン及びモジュールは、ハードウェア、ソフトウェア、又はハードウェアとソフトウェアの組み合わせで実現することができることを理解されたい。これらは、本明細書で記載される方法を実行するために適合される任意のタイプのコンピュータシステム又は他の装置により実現される。ハードウェアとソフトウェアの典型的な組み合わせは、ロードされ実行されたときに、本明細書で記載された方法を実行するようにコンピュータシステムを制御するコンピュータプログラムをもつ汎用コンピュータシステムである。代替的に、本発明の機能タスクの１以上を実行する特定のコンピュータを含む特定用途のコンピュータが使用される。更なる実施の形態では、本発明の一部又は全部は、たとえばインターネットのようなネットワークを通して分散されたやり方で実現される。
本発明は、本明細書で記載された方法及び機能の実現を可能にする全ての特徴を有し、コンピュータシステムにロードされたとき、これらの方法及び機能を実行することができるコンピュータプログラムプロダクトで実現される。この文脈における用語「コンピュータシステム」、「シフトウェアプログラム」、「プログラム」、「プログラムプロダクト」、「シフトウェア」等は、情報処理機能を有するシステムに（ａ）別の言語、コード又は表記への変換、及び／又は（ｂ）異なる材料形式における再生、のいずれか又は両者を直接又は間接的に、特定の機能を実行させることが意図される命令のセットからなる、任意の言語、コード又は表記での表現を意味する。
本発明の上述した説明は、例示及び説明の目的で与えられた。開示された正確な構成に本発明を制限するものではないことが意図され、多くの変更及び変形が可能である。当業者にとって明らかであるかかる変更及び変形は、特許請求の範囲により定義されたように、本発明の範囲に含まれることが意図される。
Claims (22)
- 圧縮されたビデオ信号をチャネル状態に適合させるチャネル適応型送信システムであって、
圧縮されたビデオ信号から離散コサイン変換（ＤＣＴ）ランレングスコードを発生する可変長デコードシステムと、
マークされたＤＣＴ係数セグメントを定義するため、前記ＤＣＴランレングスコードにマーカーを挿入するＤＣＴコードカーキングシステムと、
現在のチャネル状態に基づいて、マークされたＤＣＴ係数セグメントを保持するかを判定するビットストリーム処理システムと、
を有するチャネル適応型送信システム。 - 送信バッファのフルネスとフルネスの閾値とを比較することで、チャネル状態を判定する送信バッファ制御ユニットを更に有する、
請求項１記載のチャネル適応型送信システム。 - 前記送信バッファ制御ユニットは、前記送信バッファのフルネスが前記フルネスの閾値を超える場合、次にマークされたＤＣＴ係数セグメントを廃棄するように前記ビットストリーム処理システムに指示する、
請求項２記載のチャネル適応型送信システム。 - 前記ビットストリーム処理システムの出力を適応されたビデオ信号にパケット化するパケット化システムと、
前記適応されたビデオ信号を出力する送信ユニットとを更に有する、
請求項１記載のチャネル適応型送信システム。 - 前記ＤＣＴコードマーキングシステムは、高周波ＤＣＴ係数セグメントを識別してマークするためのセグメント化システムを含む、
請求項１記載のチャネル適応型送信システム。 - 圧縮されたビデオ信号をチャネル状態に適応させるチャネル適応型の送信方法であって、
圧縮されたビデオ信号を受信するステップと、
圧縮されたビデオ信号から離散コサイン変換（ＤＣＴ）ランレングスコードを発生するステップと、
マークされたＤＣＴ係数セグメントを定義するため、ＤＣＴランレングスコードにマーカーを挿入するステップと、
現在のチャネル状態に基づいて、マークされたＤＣＴ係数セグメントを保持するかを判定するステップと、
を含む方法。 - 送信バッファのフルネスとフルネスの閾値とを比較することで、チャネル状態が判定される、
請求項６記載の方法。 - 前記送信バッファのフルネスが前記フルネスの閾値を超える場合、次にマークされたＤＣＴ係数セグメントが廃棄される、
請求項７記載の方法。 - 前記結果的に得られたビットストリームを適応されたビデオ信号にパケット化するステップと、
前記適応されたビデオ信号を出力するステップとを更に含む、
請求項６記載の方法。 - 前記挿入するステップは、高周波ＤＣＴ係数セグメントを識別してマークするステップを含む、
請求項６記載の方法。 - 圧縮されたビデオ信号をチャネル状態に適応させる記録可能な媒体に記憶されたプログラムであって、
圧縮されたビデオ信号から離散コサイン変換（ＤＣＴ）ランレングスコードを発生する手段と、
マークされたＤＣＴ係数セグメントを定義するため、ＤＣＴランレングスコードにマーカーを挿入する手段と、
現在のチャネル状態に基づいて、マークされたＤＣＴ係数セグメントを保持するかを判定する手段と、
を含むプログラム。 - 圧縮されたビデオ信号をチャネル状態に適応させるチャネル適応型送信システムであって、
圧縮されたビデオ信号からＤＣＴデータのブロックから構成される離散コサイン変換（ＤＣＴ）ランレングスコードを発生する可変長デコードシステムと、
それぞれのＤＣＴブロックをパケットヘッダにより識別されるミニパケットのペアに区分するＤＣＴコード区分システムと、
現在のチャネル状態に基づいてそれぞれミニパケットを保持するかを判定するミニパケット処理システムと、
を有するチャネル適応型送信システム。 - 送信バッファのフルネスとフルネスの閾値とを比較することで、チャネル状態を判定する送信バッファ制御ユニットを更に有する、
請求項１２記載のチャネル適応型送信システム。 - 前記送信バッファ制御ユニットは、前記送信バッファのフルネスが前記フルネスの閾値を超える場合、次のミニパケットを廃棄するように前記ミニパケット処理システムに指示する、
請求項１３記載のチャネル適応型送信システム。 - 前記ミニパケット処理システムを適応されたビデオ信号にパケット化するパケット化システムと、
前記適応されたビデオ信号を出力する送信ユニットとを更に有する、
請求項１２記載のチャネル適応型送信システム。 - 前記ＤＣＴコードマーキングシステムは、高周波ＤＣＴ係数を含むハイミニパケットを識別してマークするためのセグメント化システムを含む、
請求項１２記載のチャネル適応型送信システム。 - 圧縮されたビデオ信号をチャネル状態に適応させるチャネル適応型送信方法であって、
圧縮されたビデオ信号を受信するステップと、
圧縮されたビデオ信号から離散コサイン変換（ＤＣＴ）ランレングスコードを発生するステップと、
ＤＣＴランレングスコードのそれぞれＤＣＴブロックを第一及び第二のミニパケットに区分するステップと、それぞれミニパケットはパケットヘッダから識別可能であり、
現在のチャネル状態に基づいて、それぞれのミニパケットを保持するかを判定するステップと、
を含むチャネル適応型送信方法。 - 送信バッファのフルネスとフルネスの閾値とを比較することで、チャネル状態が判定される、
請求項１７記載の方法。 - 前記送信バッファのフルネスが前記フルネスの閾値を超える場合、次のミニパケットが廃棄される、
請求項１８記載の方法。 - 前記結果的に得られたビットストリームを適応されたビデオ信号にパケット化するステップと、
前記適応されたビデオ信号を出力するステップとを更に含む、
請求項１７記載の方法。 - 前記区分するステップは、高周波ＤＣＴ係数を含むミニパケットを識別してマークするステップを含む、
請求項１７記載の方法。 - 圧縮されたビデオ信号をチャネル状態に適応させる記録可能な媒体に記憶されたプログラムであって、
圧縮されたビデオ信号を受信する手段と、
圧縮されたビデオ信号から離散コサイン変換（ＤＣＴ）ランレングスコードを発生する手段と、
ＤＣＴランレングスコードのそれぞれＤＣＴブロックを第一及び第二のミニパケットに区分する手段と、それぞれミニパケットはパケットヘッダから識別可能であり、
現在のチャネル状態に基づいて、それぞれのミニパケットを保持するかを判定する手段と、
を含むプログラム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US62840904P | 2004-11-16 | 2004-11-16 | |
| PCT/IB2005/053746 WO2006054231A1 (en) | 2004-11-16 | 2005-11-14 | Sender side channel adaptive video transmission |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2008521270A true JP2008521270A (ja) | 2008-06-19 |
Family
ID=35589639
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2007540816A Pending JP2008521270A (ja) | 2004-11-16 | 2005-11-14 | 送信者側チャネル適応型のビデオ送信 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US20090080514A1 (ja) |
| EP (1) | EP1815687A1 (ja) |
| JP (1) | JP2008521270A (ja) |
| KR (1) | KR20070085310A (ja) |
| CN (1) | CN101057502A (ja) |
| WO (1) | WO2006054231A1 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013520125A (ja) * | 2010-02-17 | 2013-05-30 | ユニバーシティ−インダストリ コーポレーション グループ オブ キュン ヘ ユニバーシティ | ビデオ信号処理 |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8111767B2 (en) * | 2007-05-31 | 2012-02-07 | Renesas Electronics Corporation | Adaptive sliding block Viterbi decoder |
| US10412414B2 (en) | 2012-08-13 | 2019-09-10 | Gurulogic Microsystems Oy | Decoder and method for decoding encoded input data containing a plurality of blocks or packets |
| US9538239B2 (en) | 2012-08-13 | 2017-01-03 | Gurulogic Microsystems Oy | Decoder and method for decoding encoded input data containing a plurality of blocks or packets |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TW224553B (en) * | 1993-03-01 | 1994-06-01 | Sony Co Ltd | Method and apparatus for inverse discrete consine transform and coding/decoding of moving picture |
| EP0739138A3 (en) * | 1995-04-19 | 1997-11-05 | AT&T IPM Corp. | Method and apparatus for matching compressed video signals to a communications channel |
| JPH1051766A (ja) * | 1996-08-05 | 1998-02-20 | Mitsubishi Electric Corp | 画像符号化データ変換装置 |
| US7130265B1 (en) * | 1998-11-12 | 2006-10-31 | Sony Corporation | Data multiplexing device and data multiplexing method, and data transmitter |
| US6552673B2 (en) * | 2000-02-25 | 2003-04-22 | Texas Instruments Incorporated | Efficient table access for reversible variable length code decoding using a hash function |
| JP3921923B2 (ja) * | 2000-06-07 | 2007-05-30 | 日本電気株式会社 | 電子透かし挿入装置およびその方法 |
| KR100357266B1 (ko) * | 2000-12-06 | 2002-10-19 | 엘지전자 주식회사 | 데이터 분할 기법을 이용한 영상 부호화 전송방법 |
| US20030043908A1 (en) * | 2001-09-05 | 2003-03-06 | Gao Cheng Wei | Bandwidth scalable video transcoder |
| US7391807B2 (en) * | 2002-04-24 | 2008-06-24 | Mitsubishi Electric Research Laboratories, Inc. | Video transcoding of scalable multi-layer videos to single layer video |
-
2005
- 2005-11-14 WO PCT/IB2005/053746 patent/WO2006054231A1/en not_active Application Discontinuation
- 2005-11-14 JP JP2007540816A patent/JP2008521270A/ja active Pending
- 2005-11-14 KR KR1020077010745A patent/KR20070085310A/ko not_active Application Discontinuation
- 2005-11-14 CN CNA2005800391150A patent/CN101057502A/zh active Pending
- 2005-11-14 US US11/719,265 patent/US20090080514A1/en not_active Abandoned
- 2005-11-14 EP EP05803082A patent/EP1815687A1/en not_active Withdrawn
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013520125A (ja) * | 2010-02-17 | 2013-05-30 | ユニバーシティ−インダストリ コーポレーション グループ オブ キュン ヘ ユニバーシティ | ビデオ信号処理 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20090080514A1 (en) | 2009-03-26 |
| EP1815687A1 (en) | 2007-08-08 |
| KR20070085310A (ko) | 2007-08-27 |
| WO2006054231A1 (en) | 2006-05-26 |
| CN101057502A (zh) | 2007-10-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6747991B1 (en) | Filter and method for adaptively modifying the bit rate of synchronized video and audio streams to meet packet-switched network bandwidth constraints | |
| JP4690280B2 (ja) | メディアデータをストリーミングする方法、システム及びクライアント装置 | |
| US8239901B2 (en) | Buffer control method, relay apparatus, and communication system | |
| JP3740113B2 (ja) | ネットワークに適応したリアルタイムマルチメディアストリーミングシステム及びその方法 | |
| EP1514378B1 (en) | Multimedia server with simple adaptation to dynamic network loss conditions | |
| US20060291475A1 (en) | Selective forward error correction | |
| US6226328B1 (en) | Transcoding apparatus for digital video networking | |
| WO2006053947A1 (en) | Buffering packets of a media stream | |
| AU2002231829A1 (en) | Method and system for buffering streamed data | |
| US20070242663A1 (en) | Media stream relay device and method | |
| US20050063473A1 (en) | Method and apparatus for transmitting and receiving coded packet and program therefor | |
| WO2012161652A1 (en) | Methods for transmitting and receiving a digital signal, transmitter and receiver | |
| JP5344541B2 (ja) | データ送信装置、送信方法及びプログラム | |
| JP2008521270A (ja) | 送信者側チャネル適応型のビデオ送信 | |
| US7720067B2 (en) | Data transfer apparatus and transfer control method | |
| KR100770907B1 (ko) | 멀티미디어 패킷 데이터의 디패킷화 방법 | |
| JP4391412B2 (ja) | ディジタルストリームの動的多重化方法 | |
| WO2017061280A1 (ja) | 受信装置および方法 | |
| Wu et al. | MPEG4 compressed video over the Internet | |
| JP5213130B2 (ja) | データ配信システム、切替装置及びデータ配信方法 | |
| US7949052B1 (en) | Method and apparatus to deliver a DVB-ASI compressed video transport stream | |
| JP4373283B2 (ja) | 映像音声復号方法、映像音声復号装置、映像音声復号プログラム及びそのプログラムを記録したコンピュータ読み取り可能な記録媒体 | |
| KR101148072B1 (ko) | 멀티미디어 지원 시스템 및 그 지원방법 | |
| KR100918561B1 (ko) | 패딩 제거 기법을 이용한 전송 스트림 다중화 장치 및 방법 | |
| JP2011004163A (ja) | 送信装置 |