JP4688873B2 - 予測および非予測データフレームを伝送するための方法および装置 - Google Patents

予測および非予測データフレームを伝送するための方法および装置 Download PDF

Info

Publication number
JP4688873B2
JP4688873B2 JP2007518622A JP2007518622A JP4688873B2 JP 4688873 B2 JP4688873 B2 JP 4688873B2 JP 2007518622 A JP2007518622 A JP 2007518622A JP 2007518622 A JP2007518622 A JP 2007518622A JP 4688873 B2 JP4688873 B2 JP 4688873B2
Authority
JP
Japan
Prior art keywords
data
service
frame
frames
predicted
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007518622A
Other languages
English (en)
Other versions
JP2008504767A (ja
Inventor
サッリネン,サミ
ピエール,エリック
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gamecluster Ltd Oy
Original Assignee
Gamecluster Ltd Oy
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gamecluster Ltd Oy filed Critical Gamecluster Ltd Oy
Publication of JP2008504767A publication Critical patent/JP2008504767A/ja
Application granted granted Critical
Publication of JP4688873B2 publication Critical patent/JP4688873B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164Feedback from the receiver or from the transmission channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234381Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2401Monitoring of the client buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet

Description

本発明は、一般の通信システムに関する。具体的には、本発明は、デジタルビデオ放送(DVB)技術等のようなデジタルブロードバンドシステムおよびこのシステムに適用するビデオ符号化に関する。
デジタルビデオ放送(DVB)とは、衛星放送(DVB−S)、ケーブルテレビ(DVB−C)、または地上波放送(DVB−T)といった配布媒体によるデジタル放送技術を定義する規格のことをいう。この規格は、ソース符号化、チャネル符号化、限定受信方式(有料放送テレビおよびそれに関連するデータスクランブリング方法)、およびその他の様々な問題を対象としたものである。1990年代の初めに、欧州の主要な公共および民間のテレビ業界組織によってDVBプロジェクトが設立され、デジタルテレビサービスにMPEG−2(Moving Picture Experts Group)という音声/映像の圧縮基準を導入するための枠組みが作成された。このDVBプロジェクトは、着実にその認知度を上げ、DVBは、既に世界中で採用されるようになっている。
衛星回線の場合、DVB規格(たとえば、下記非特許文献1参照。)には、図1に示す伝送システムが定義されている。この規格は、イントラサービス108およびインターサービス112によって多重化されたベースバンド(ビデオ102、オーディオ104、および場合によってはデータ106を含む)信号を、複数の処理工程中に衛星チャネルへ適合させる。ここでは、これらの処理工程を総称して衛星チャネルアダプタと呼び、図面では点線110で示している。通常、前記ベースバンド信号には、下記非特許文献2によるソース符号化が適応されてきた。
以下の過程がデータストリームに適用される。
多重化アダプテーションおよびエネルギー拡散114によるトランスポート多重化アダプテーションおよびエネルギー拡散のためのランダム化、
外部コーダ116による外部符号化(コーディング)(すなわちリードソロモンブロックコードによる符号化)、
畳み込みインターリーバ118による畳み込みインターリービング、
内部コーダ120による内部符号化(すなわちパンクチャード畳み込みコードによる符号化)、
ベースバンド整形122による変調のためのベースバンド整形、
QPSK変調器124による変調。
DVB−S伝送に関する詳細は、下記非特許文献1およびその中で引用されている文献に記載されている。
また、デジタルビデオ信号のケーブル伝送に関しては、下記非特許文献3においてDVB−Cの構成要素およびその特徴が記載されている。図2は、ケーブルシステムにおける送信方向への主要な機能ブロックを示している。BBインターフェースブロック202は、同期バイトによってMPEG−2トランスポート層のフレーム構造(固定長パケット)に入力信号を適合させる。同期反転およびランダム化204では、いわゆる同期1バイトの反転およびデータストリームのランダム化により、信号の中に十分な数の遷移の発生が確保され、同期化等がより容易になる。その後、ランダム化されたトランスポートパケットに対してリードソロモンFEC(前方誤り訂正)符号化206が実施され、エラーの検出および訂正のためのコードワードが検索される。つぎに、エラー保護されたトランスポートパケットは、畳み込みインターリーバ208によってインターリーブされるが、DVB−Sにおけるような畳み込み符号化はおこなわれない。ステップ210においては、インターリーブされたバイトが、QAM(直交振幅変調)シンボル(mタプル)に変換され、つぎに各シンボルにおける最上位ビット(MSB)に対して差分符号化212がおこなわれる。ベースバンド整形214においては、mタプルのI軸およびQ軸へのマッピングと、つぎにルート余弦(コサイン)フィルタ処理と、がおこなわれる。最終段階としての信号のQAM変調216においては、信号空間ダイヤグラム中に16、32、64、128、または256の点を有する。変調された信号は、つぎに、物理インターフェースに送られるが、この場合の物理インターフェースは、RF(Radio Frequency)ケーブルチャネルである。
第3の例として、図3にDVB−Tシステムの概略を示す。多重化アダプテーション/エネルギー拡散302ブロックにおいては、信号がパケット化され(同期1バイト、MPEG−2データ187バイト)、エネルギー拡散のためのランダム化がおこなわれる。つぎに、外部符号化ブロック304においては、エラー保護のために、入力パケットに対してリードソロモン符号化がおこなわれる。ついで、外部インターリービング306がエラー保護されたパケットに対しておこなわれる。つぎに、インターリーブされたデータは、畳み込みコーダとしての内部コーダ308に任意の想定範囲内のパンクチャレートで送られる。内部インターリービング310の段階においては、1つまたは2つのビットストリームの入力に対するビット単位および(OFDM)シンボル単位の、両方のインターリービング段階を含んでいる(点線矢印を参照)。さらなる情報に関しては、非特許文献4における「階級モード」に記載されている。マッピング312において、データストリームは、信号空間にマッピングされる。フレーム適合314がおこなわれると、信号は、68のOFDMシンボルからなるフレームに編成される。OFDMフレームは、データの他に、フレーム同期化やチャネル評価等に対するパイロットおよびTPS(Transmission Parameter Signaling、送信パラメータシグナリング)信号320を含む。最後に、信号は、(複数のキャリアによって)OFDM変調316されるとともにD/A変換されてアナログ形態とされ、その後アナログ信号はフロントエンド318を介してエアインターフェースに導かれる。
近年、1990年代におけるインターネットの驚異的な発展により、IP(インターネットプロコトル)ネットワーク上でDVBサービスを提供する追加モデルが開発された。この点については非特許文献5に記載されている。これは明らかに、新たなハードウェア等にさらなる投資をする必要がなく、既存のネットワークを利用してDVBデータを伝送するという魅力的なアイデアであった。IP上に提供されるDVBサービスについて、図4において示す一般的なタイプの層モデルを参照して説明する。点線は、異なるドメイン同士(水平分離)および異なる層同士(垂直分離)の間のインターフェースを示す。図4における陰影をつけた背景部分、すなわち管理プレーンは、総括的な管理と制御の目的で使用することができる。コンテンツプロバイダは、クライアント(加入者)に情報フローを提供する1つの事業体、もしくは複数の事業体であり、IPトラフィックが透過的な配信ネットワーク上でサービスプロバイダによって実際に物理的に転送される情報フローを視覚化するためのパターンを通知する。コンテンツプロバイダのタスクには、たとえば、認証/承認サービス、サービスポータルメンテナンス、サービスの提供、サービス検索機構、メタデータサービス、実際のコンテンツサービス等がある。また、サービスプロバイダ(たとえば、ISPサービスプロバイダ)のタスクには、アドレッシングサービス、認証/承認サービス、ネーミングサービス(DNS等)、基本IP接続サービス、セッション制御手段、サービス課金、およびファイアーウォールのような様々な付加価値サービス、キャッシュ等がある。しかし、実際のところ、1つのみの事業体がコンテンツおよびサービス面を提供して技術的に実行することも十分に可能である。ホームドメインは、DVBサービスが消費されるドメインである。これは、単一のネットワークにおける1つ以上の端末装置を示すこともあれば、複数の装置を含む複数のネットワークを示すこともある。
つぎに、図4のそれぞれの層に関して説明する。物理層408は、通信リンクの端末同士でデータをやり取りするための最下層インターフェース手段を含んでいる。この層では、たとえば、コネクタの形状およびサイズ、「ビット」の定義、および同期アスペクト等を、たとえば、電圧レベルやそれぞれの持続時間、またはその他の物理的な大きさ等に関することを決定する。また、参照番号408は、リンク層に対しても用いられており、このリンク層は、アドレッシングのようなメディアアクセス制御機能、そして場合によりエラー制御、フロー制御、および誤って受信されたデータパケットの再伝送を取り扱う層である。ネットワーク層406は、ルーティング、パケット分割/再結合等を扱う層であり、対象とする端末間の接続全体に関して機能する。ルーティングとは、IPネットワークの場合、必要なIPアドレスを追加してパケットを送信することを意味する。原則として、ネットワーク層406は、より下位レベルの物理/リンク層408を意識する必要はない。同様に、総称的に参照番号406で示すトランスポート層は、端末間のフローおよびエラー制御機能を実行するとともに、たとえば、単一のIPリンクを使用する複数の異なるサービスを多重化する。多重化は、複数の異なるポート番号によって実現することができる。トランスポート層プロトコルに対して、特にIPネットワークにおいてよく選ばれるのは、UDP(ユーザデータグラムプロトコル)およびTCP(伝送制御プロトコル)であるが、TCPは、また、単なる多重化に加えてエラー検出/制御を提供する。セッション層404は、アプリケーションで使用される接続のセットアップおよび解除をおこなう。アプリケーション層402は、アプリケーションと、それらをインターフェースするAPIと、を含む。DVBにおいては、アプリケーション層402は、特にMHP(マルチメディアホームプラットフォーム)と呼ばれている。ホームドメインにおいて、DVBサービスに対するIPトラフィックは、たとえば共通のイーサネット(たとえば、100BASE−T)(たとえば、非特許文献6参照。)またはIEEE1394(たとえば、非特許文献7参照。)の物理/ネットワーク層技術を用いて実行することができる。
IPパケット中に含まれるDVBデータは、サービスに応じて加入者に対するマルチキャストまたはユニキャストとすることができる。たとえば、IPマルチキャストは、有料放送テレビタイプの伝送に使用でき、IPユニキャストは、オンデマンド形式サービスのビデオ/オーディオに使用できる。IPネットワークにおけるDVBについての詳細は、非特許文献5およびその中で参照されている出版物に記載されている。
同時におこなわれる最も重要な決定の1つは、選択されるソース符号化方法に関する。MPEG−2は、非常に高い圧縮比による多くの異なる圧縮技術を使用するビデオおよびオーディオ符号化方法を一体化させた有力な方法であるが、1つ大きな弱点がある。弱点とは、使用される圧縮方法が不可逆である、すなわち、符号化処理中に取消不能な形態で消失するデータが存在することである。このような犠牲を払わなければ、達成できる圧縮比(昨今は1:6から1:30等が典型的)は、特に優れたものにはならない。MPEG−2符号化には、相当量の処理が必要であるが、このことは一般的には、近年の高性能プロセッサにとって問題にはならない。
図5は、標準化されたMPEG−2ストリームを出力として生成するMPEG−2準拠のエンコーダ504を用いて、オーディオ/ビデオ信号502を符号化する一般的な手順を示している。オーディオ/ビデオサーバ506は、符号化されたデータストリームを受信して格納し、つぎに、該データストリームを伝送ネットワーク508を介して、たとえば、テレビに接続されたDVBセットトップボックスまたはカードがインストールされたDVB IRD(Integrated Receiver Decoder)等のレシーバ510に伝送する。レシーバ510は、データストリームを利用するための復号化に必要なソフトウェア/ハードウェア手段を有している。
MPEGタイプの符号化は、一般的な静止画圧縮フォーマットであるJPEGと共通する部分がいくつかある。JPEGは、人間の視覚の特徴を利用して、符号化プロセス中に、通常では不可視でありその意味で不必要な情報を原画から抽出する。符号化段階では、たとえば、離散余弦変換(時間から周波数への変換)と、エントロピー符号化と、を利用する。人間の肉眼で感知しやすい高周波輝度(明度)変化に比べて、画像の色における高周波変化は、符号化信号から省くことができる。フレーム内(図形内)の特徴に加え、MPEGは、一時的な冗長性を利用する。すなわち、MPEGでは連続したビデオフレームにおいて動きがない部分については、すべてをフレーム毎に符号化する必要はない。任意の領域内でコンテンツが変化した段階で、フレームを符号化して送出する。
MPEGにおいては、図形中の各ピクセルは輝度/明度値(Y)と、2つのカラーベクトル(U,V)と、によってパラメータ化される。つぎに、ピクセルは、ブロックと、マクロブロックと呼ばれるブロック群と、にグループ化される。ブロックは、一般的なフーリエ変換に幾分類似したDCTを利用して、周波数領域に変換される。DCTによって、周波数が増加したブロックから形成された余弦関数を表す多数の係数が得られる。このような係数から、ブロックの有する空間的な情報は、後に復号化手段によって解読可能である。DCT変換出力は、つぎに、効率的に量子化されてホフマン符号化される。ホフマン符号化においては、符号が異なれば消費するビット数も異なる。使用頻度の高い符号は、より少ないビット数を使用し、使用頻度の低い符号は、多くのビットを使用する。
MPEG符号化における、つぎの任意の時間相について考えると、一連の画像を含むビデオ信号(以下「フレーム」とする)において、所定のブロック中に含まれるデータが、その後にフレームが複数続くまでの少なくとも短時間の間、比較的不変のままであることは明らかである。このことは、ソース信号の特徴によるものである。たとえば、ニュース放送は、ニュースキャスターがデスクにつき、国内経済に関して最近起こった事柄について発言するクリップを含んでいる。後続のフレームでは、可能性として、ナレーターの顔領域付近のブロックに最も変化が生じているものの、絵画やポスター等の貼られた壁を含む背景部分には、変化が生じないということがある。おそらく、このような情報番組では、カメラの動きはわずかであろう。一方、最近のアクション映画における戦闘シーンの場合、連続する多数のフレームには、変化の生じない部分がほとんど含まれない。
したがって、ブロックの中には、先行フレームにおけるブロックを元に予測できるものもある。このような予測されるブロックを含むフレームをPフレームと呼ぶ。しかし、伝送エラーの悪影響を低減し、符号化信号に(再)同期化させるために、その他のフレームからの情報に依存しない完全なフレームが定期的に伝送される(1秒間に数回)。多くの点で重要なスタンドアロンフレームは、内部符号化フレームまたはIフレームと呼ばれている。Iフレームは、たとえば、サービスの加入者が最初にまたは少なくとも一時中断後に、サービスストリームを受信し始める時や、単なる差異データを元に妥当な復号化フレームを構成するのに必要なデータ履歴を受信側が持たない場合に必要となる。先行および後続フレームの両方からの情報を使用する双方向間予測フレームは、Bフレームと呼ばれる。
上記の手順は、さらに、ビデオ画像の先行フレームにおける他の位置から、画像の動きのあった部分のみを借用できるように動きベクトルを符号化することによって実行される。4つの8×8ピクセルブロックをグループ化して、16×16のマクロブロックにする。変化しないマクロブロックは、後続フレームにおいて再符号化されない。Pフレームの場合、エンコーダは、先行フレーム(Bフレームの場合は、先行フレームと後続フレーム)について、半ピクセル毎に、現在のマクロブロックに含まれる情報と適切に一致する他のマクロブロック位置を検索する。適切に一致するマクロブロックが近隣領域に見つからない場合には、マクロブロックは、内部符号化され、DCT係数は、完全に符号化される。検索領域において適切に一致するマクロブロックが見つかった場合には、すべての係数を伝送せずに、動きベクトルを使用して類似ブロックを示す。
図6に、MPEG符号化の空間的側面および時間的側面を示す。ここでは、イメージ的に2つの連続するフレームを、MPEGビデオエンコーダを備えたコンピュータで符号化する。1つのソースの同一位置に対応するマクロブロック602およびマクロブロック606は、両フレームにおいてほとんど同じデータを含むため、符号化は省略できる(Pフレーム)。一方、マクロブロック604およびマクロブロック608では、会議の場面には変化がないものの、男性が歩くことで変化する要素が生じており、再符号化の必要がある。ただし、符号化をおこなう必要のある要素として、歩いている男性は動いているだけでその形状は変わっていないため、左側の先行フレームにおけるマクロブロックとの一致度を右端の最新フレームにおいて判断するために、動きベクトルを利用することができる(図面中、点線矢印で強調表示している)。
また、MPEGオーディオ符号化は、聴覚マスキング効果のような人間の聴覚における、ある独特な特性を利用する。時間的側面および(周波数面での)空間的側面の両方に関して、復号化された信号において、知覚されるとしても最小の劣化を伴うだけで、1:10という優れた圧縮比を達成できると考えられる。MPEG−2は、指向性オーディオに対する5つのチャネルと、特別な低周波チャネルと、を有する。さらに符号化信号は、また、複数の代替言語チャネルを含むことができる。
莫大なMPEG−2規格は、複数の異なるビデオモードおよびオーディオモードを含むため、特にDVBサービスの場合に、好適なレベルの採用については、様々な状況において必然的に生じる比較の問題に関して、非特許文献8の中で定められており、ハードウェア製造業者の作業の簡便化が図られている。
DVBサービスの加入者に対する、サービスの配信に実際に影響を与えるオプション(サービスの加入/選択、サービスのパラメータの調整等)を提供するために、これらの作業を実行するリターンチャネルを設ける必要がある。DVBにおいては対話(インタラクティブ)機能に関する仕様は、一般に2つの仕様に分けられていた。1つは、ネットワークに依存しないものであり、ISO/OSI層を介しておよそ2つから3つ(たとえば、非特許文献9参照。)上位に存在するプロトコルスタックとみなすことができる。一方、DVB仕様の2つ目は、ISO/OSIモデルより下位(およそ1つから2つ)の層に関するものであり、対話機能のためにネットワークに依存したツールを特定する。たとえば、ケーブルを介したDVBリターンチャネル仕様(DVC−RCC)(たとえば、非特許文献10参照。)は、この目的だけではなく固定電話/携帯電話による対話システムおよび衛星の対話システムに対しても利用可能である。IPネットワークの場合、標準的なIPユニキャストは、サービス/コンテンツプロバイダとの対話機能のために使用することができる。DVBプロジェクトのウェブサイト<http://www.dvb.org/>を閲覧すれば、利用できるDVB関連資料に関するリストを見ることができる。
しかし、DVBサービスまたはコントロールデータを配信するための多様な既存のデータ転送構成があるにもかかわらず、許容可能な転送時間を実現するためには、現在利用できるリソースではまだ不十分である。たとえば、リアルタイムゲームのようなサービスは、加入者にリアルタイムゲームを体験させるには、応答時間を短くすることが必要である。図7に、ゲームのシナリオを示すが、図7においては、サービスプロバイダは、配信ネットワークとして動作するDSLまたはケーブルネットワーク704を介して、1人以上の加入者にゲーム情報を伝送するゲームサーバ702を有している。受信側においては、セットトップボックス708がサービスデータを受信し、復号化する。デコーダ709は、たとえば、専用のビデオ処理チップ、または複数の異なるタスクを割り当てられた一般的な処理装置である。つぎに、セットトップボックス708は、復号化したサービスデータをTV受像機もしくはモニタ706に視覚化のために伝送する。リモコン710を使用すれば、ローカルデバイスを制御したり、前記配信ネットワーク704上、もしくはこのような目的のために利用可能なその他の任意の転送路上で、サーバ702に対してサービスに関連した制御命令/リクエスト/フィードバックを送ったり(矢印を参照)することができる。サービス利用中に加入者が感じる全体的な遅延は、複数の問題を含んでいる。その中で明らかな問題を挙げると、データを符号化する時間、伝送遅延(使用される接続のタイプによって転送方向に対して非対称であり得る)、復号化遅延、追加的な安全バッファの遅延等がある。上述したように、符号化したMPEG−2ストリームは、一般に、複数の異なるフレームタイプを含んでおり、異なる特徴のないフレーム(Iフレーム)は、当然、予測フレーム(Pフレーム)よりサイズが大きい。フレームサイズが増大することで、伝送遅延および後続のバッファ遅延も増大する。相応するPフレームの3倍のサイズを有するIフレームは、ネットワークを介して伝送するのに3倍の時間がかかる。フレーム間で伝送時間が変化することは、対話機能サービスの有用性に不利な影響を及ぼす。Iフレームによって生じる伝送遅延を低減するための1つの解決手段は、符号化されたフレームにおいて画像品質を低減することによって(量子化等の増大によって)、フレームサイズを縮小することである。しかしこの解決手段は、ユーザがある程度十分であったにしてもサービスの品質全体が低下するため、ユーザが低減した画像品質に気づく可能性があり、一般的に適切な選択ではない。
欧州通信規格協会による欧州規格(ETSI EN)300 421 V.1.1.2 デジタルビデオ放送(DVB);フレーム構造、チャネル符号化および変調11/12GHz衛星サービス 国際標準化機構/国際電気標準会議(ISO/IEC) DIS13818−1(1994年6月);動画および関連する音声の符号化(MPEG−2) ETSI EN300 429 V1.2.1 デジタルビデオ放送(DVB);ケーブルシステムのためのフレーム構造、チャネル符号化および変調 ETSI EN300 744 V1.4.1 デジタルビデオ放送(DVB);地上デジタルテレビのためのフレーム構造、チャネル符号化および変調 ETSI TR102 033 V1.1.1 デジタルビデオ放送(DVB);IPベースネットワーク上でのDVBサービスの配信のための構造フレームワーク ETSI TS102 814 V1.2.1 デジタルビデオ放送(DVB);イーサネットホームネットワークセグメント ETSI TS102 813 V1.1.1 デジタルビデオ放送(DVB);IEEE1394ホームネットワークセグメント ETSI ETR154 デジタルビデオ放送(DVB);衛星、ケーブル、および地上波放送における映像および音声に関するMPEG−2システムの使用のための実行ガイドライン prETS300 802デジタルビデオ放送(DVB);DVB双方向サービスに関するネットワーク非依存プロトコル ETSI ES200 800V1.3.1 ケーブルテレビ配給システム(CATV)のための双方向チャネル
本発明の目的は、ユーザの観点からの相互サービスの伝送遅延に関して、従来技術において生じる問題を軽減することである。この目的は、"完全な"、一時的な非予測データフレームの伝送を変化させることにより達成される。これらにおいて特に重要な完全なデータフレームは、画像を構築するのに必要なすべてのデータ、または、要求に基づくための先行フレームまたはその先のフレームに用いる予測成分がない受信装置における他のデータ要素を十分に含んでいる。たとえば、ユーザがサービスデータの受信を開始するサービス開始時に、1つの非予測フレームが、デコーダを初期化し、履歴情報がなくても復号化を首尾良くおこなうために、受取人に伝送される。さらに、非予測フレームの伝送に対する類似の必要性は、様々なエラー状況の場合に発生し得る。すなわち、受信機が伝送エラーまたはバッファエラー等のため受信端でデータを適切に再生できない場合である。本発明の基本概念によれば、受信機は、受信されたサービスデータストリームを分析し、前記のエラー状況が発生した場合には、ゲームサーバのようなデータプロバイダに、リターンチャネルを介して新たな非予測フレームの受信が必要であることを通知する。
特に、上記構成は、サーバのようなデータソースが実質的にリアルタイムで単一の受取人に対するサービスデータを符号化する場合に最も有用である。おそらくは数十万または数百万のユーザが同時に存在する伝統的なDVBサービス(通常のテレビジョン放送など)の典型的な使用例を考慮すると、Iフレームのような非予測的フレームは、本発明によってはうまく供給することができない。なぜなら、所定のチャネルにちょうどエントリーし、サービス受信を開始した加入者に非予測フレームをできるだけ高速に供給し、信号への高速同期化を保証しなければならず、また、そのために、許容可能なサービススタートアップ時間を保証しなければならないからである。したがって、低減された遅延を要求するユニキャスト形式の相互サービスデータの伝送は、提示された解決方法によって、最も利益を得ることができるであろう。たとえば、リアルタイムアクションゲームを含むこのようなサービスにおいては、最悪の場合でも2経路の伝送遅延が数10msしか許容されない。
本発明によれば、サービスデータの伝送遅延の平均が低減されるため、受信端でのユーザ体験を高めることができる。データ符号化技術を用いることで、予測符号化を非予測符号化以上に強調することによって、符号化/復号化遅延さえもカットダウンすることができる。そして、非予測符号化は、少なくとも時折、所定の場合、より多くの処理力を必要とし、直接的に処理時間および遅延に影響する。この方法は、あるにしてもわずかな変化のシナリオに適用される。この変化は、連続フレーム間に存在し、種々異なる符号化フレームを形成するために要求される処理は、隣接するフレーム間の類似性を用いて、依存され、典型的に低減される。また、いくつかの伝送能力は別の目的のために用いられる。特にDVB技術/装置、具体的には、DVB−CおよびIP上でのDVB(両者ともMPEG−2ソース符号化を使用する)を利用する双方向サービスの提供に関して本発明を説明するが、ほぼ同様の特徴を有するその他のデジタルブロードバンドやブロードキャストシステムにおいても、本発明を使用することで有利となる。たとえば、MPEG−1、MPEG−4、H.263およびH.264のような符号化方法は、MPEG−2の符号化方法に多少類似したI/Pフレーム概念を使用することから、平均的な技能を有する者にとっては、上記符号化方法または対応する符号化方法のうちの1つを利用するシステムにおいて本発明を使用できることが明らかである。
本発明にかかる方法によれば、圧縮サービスデータを配信ネットワークを介して端末装置に伝送する方法であって、サービスデータストリームは、共通のデータタイプからなる予測データフレームおよび非予測データフレームの両方を含み、前記方法は、監視期間中に受領確認メッセージが受信されない場合を含む、予め定められた事象の発生を監視し(1004)、該事象が発生した場合、非予測データフレームを端末装置へ伝送し、端末装置をデータストリームに同期させ(1006、1014)前記事象が発生しない場合、サービスデータストリームの中において前記共通のデータタイプからなる予測データフレームだけを端末装置に伝送すること(1008)、を含むことを特徴とする。
上記サービスデータは、たとえば、上述のデジタルテレビジョンサービス(DVB)に基づくMPEG−2または他のデータであり、端末装置とは、より具体的には、たとえば、DVB IRDまたは「DVBセットトップボックス」といったものを示す。データタイプとは、たとえば、ビデオ(画像)フレームデータまたはオーディオデータといったデータの種類を示す。
また、本発明にかかる方法は、データソースによって配信ネットワークを介して伝送された圧縮サービスデータを受信する方法であって、サービスデータストリームは、共通のデータタイプからなる予測データフレームおよび非予測データフレームの両方を含み、前記方法は、データストリームの適切な復号化が実行不可能であるか否かを検証(1016)、実行不可能である場合には、データソースに新たな非予測データフレームの受信が必要であることを示(1018、1020)、新たな非予測データフレームの受信が必要であることを示す方法は、通常の受領確認メッセージの送信を行わないことを含むことを特徴とする。
本発明にかかる装置は、データソースによって配信ネットワークを介して送信されたサービスデータを受信し、前記データソースにデータを伝送する装置(1208)であって、サービスデータストリームは、共通のデータタイプからなる予測データフレームおよび非予測データフレームの両方を含み、前記装置は、指示を処理する処理手段(1202)と、データを格納するメモリ手段(1204)と、を備え、前記装置は、サービスデータストリームの適切な復号化が実行不可能であるか否かを検査し、実行不可能である場合には、前記データソースに新たな非予測データフレームの受信が必要であることを示し、新たな非予測データフレームの受信が必要であることを示す方法は、通常の受領確認メッセージの送信を行わないことを含むことを特徴とする。
また、本発明にかかる装置は、配信ネットワークを介して端末装置にサービスデータを伝送し、前記サービスに関する端末装置によって送信されたコントロール情報を受信する装置(1108)であって、サービスデータは、共通のデータタイプからなる予測データフレームおよび非予測データフレームの両方を含み、前記装置は、指示を処理する処理手段(1102)と、データを格納するメモリ手段(1104)と、を備え、前記装置は、監視期間中に受領確認メッセージが受信されない場合を含む、予め定められた事象の発生を監視し、該事象が発生した場合、前記非予測データフレームを端末装置に伝送し、端末装置をデータストリームに同期させる構成であり、前記事象が発生しない場合、サービスデータストリームの中において前記予測フレームだけを端末装置に伝送する構成であることを特徴とする。
以下、添付図面を参照しながら、本発明をより具体的に説明する。
図1から図7については、関連する従来技術とともに上記の記載で既に説明済みである。
図8−1は、連続したMPEG−2ビデオ画像フレームの配列を含む本発明の方法をさらに容易に理解するためのシナリオを示している。図8−1においては、MPEG−2ビデオ画像フレームのいくつかは非予測的Iフレーム802、806であり、残りの参照番号804は、予測Pフレームを示している。データストリームは、3つのPフレームからなる各ブロックの後に、1つのIフレームを挿入することによって形成される。Iフレームは、ユーザ装置による明示的な受信要求に対する応答として送信される。図8−1においては、Pフレームの異なる性質を表す矢印を含んでいる。すなわち、現在のビデオ画像フレームと、先行のビデオ画像フレームと、の差分が検出され、パラメータ化され、Pフレームとして配信ネットワークを介して伝送される。受信機は、履歴情報を含んでおり、たとえば、ステートマシンであり、これを使用することにより伝送段階において、データの欠損がない場合やデータに伝送エラーが入り込まない場合、ディスプレイ上に可視化するために、パラメータ化された差分フレームを復号化し、再び有効なビデオ画像フレームに変換することができる。しかし、Iフレームの伝送がいずれの方法においても調整できず、Iフレームが自動的に、たとえば、周期的に伝送される場合、このシナリオは、平均伝送遅延を低減するという利点を有しない。これは、たとえば、サービスデータストリームの監視機能と、Iフレーム伝送の要求をデータソースに供給する機能と、を有していてもそうである。なぜなら、規則的に伝送されるIフレームは、連続的に伝送(および受信)処理を遅くするからである。一例として、IフレームおよびPフレームのサイズを、対応するフレームの図の下方に示す。伝送遅延は、フレームサイズとともに増大する。
アクションゲームのようなリアルタイムアプリケーションにおいては、受信されたデータストリームを、映画再生などのような単純な放送サービスの場合と同じように、スムーズな再生を保証しながらバッファすることができない。これは、コントロールが応答しないなどによってユーザの不満足度が容易に増大するためである。Iフレームのような非予測フレームが規則的に伝送される場合、受信バッファは、サイズが比較的小さく、伝送遅延が低減されるPフレームのような純粋な予測フレームの場合よりも長くなければならない。
付加的なバッファリングの不利な作用、または受信側での連続的に変化するフレームレートは、受信フレームのサイズが急激な変化を克服するために、図8−2は、本発明の他の実施例を示している。この実施例では、大きなIフレーム812は、破線の垂直線810で示したトリガとなる事象が発生した場合、換言すると「要求に応じた」場合のみ伝送される。他の時間は、サイズの比較的小さい予測フレーム808が伝送される。
図9は、テレビセット916に外付け、または一体化されているセットトップボックス906が、波線矢印918で示した入力されるサービスデータストリームを、ソフトウェアおよび/またはハードウェアによって検証および分析するための手段を有する本発明の実施例を示している。この検証および分析は、サービスデータストリームを適切に復号化することができるか否か、またはこれが回復不能なエラーを含んでいるか否か、またはPフレームのようにいくつかの必要な部分を完全に損失しているか否か、についておこなわれる。エラーまたは損失したフレームに続くPフレームは、一般的に、もはやうまく復号化されることができない。前記検証は、受信データから検証フレーム構造を直接考察することによって、および受信データに含まれる所定のパラメータ(タイムコードまたは他のインデクス情報)を任意に再調査することによって実行することができる。所定のパラメータは、それ自体として受信データに含まれるか、または受信データに基づいて計算されるかする。また、前記検証は、局所的に生じたチェックサムデータを、受信され埋め込まれた値と比較/検出することにより実行することができる。さらに、受信バッファの検査でも新たな非予測的Iフレームに対する要求の必要性を指示することができる。たとえば、受信バッファにおけるバッファアンダーフローは、ネットワーク904を介してIフレーム要求922を、データソースとして動作するサーバ902に送信するためのトリガとして使用することができる。ネットワーク904は、たとえば、ワイヤレス、ケーブル、またはIPネットワークである。さらに、データ受信タイマの満了は、伝送経路におけるデータ損失を示すことができる。プロセシングユニット912は、セットトップボックス906の動作全体を制御することができる。一方、デコーダ回路/ソフトウェア914は、受信ストリームを分析し、データのさらなる受信およびIフレーム要求の伝送などのために必要な情報920を、プロセシングユニット912に供給する。
一方、サーバ902は、ソフトウェアおよび/またはハードウェアによってIフレーム要求またはその指示を受信するための手段と、引き続きIフレームをセットトップボックスに伝送するための手段と、を有する。対話型アプリケーション908は、サーバ902自体に常駐するか、または少なくともサーバに接続されており、符号化され(910)、セットトップボックス906に配信されたデータをプロセシングユニットに供給する。相応にして、データの符号化は、サーバ902に接続された外部符号化装置においておこなうこともできる。新たなIフレームの伝送が必要であるとの指示922の受信に基づき、このようなフレームがデータから計算され、所要のネットワーク伝送ユニットでカプセル化され、セットトップボックス906に送信される(924)。
前述したフレーム損失またはエラーフレームに関連する特別のシナリオの場合を除いたサービスデータストリーム伝送において、短縮予測フレームだけを使用することにより、受信バッファを最小化することができ、インタラクティブサービス状態におけるライブ画像、たとえば、ゲームシーンが、少ない遅延でディスプレイに描写されることができる。このような特別のシナリオの場合、遅延は一時的に増大し、サービスユーザは、サービス品質が間欠的に劣化すると感じるかもしれない。しかし、このことはいずれにしろこのようなシナリオでは発生してしまうものであり、新たなIフレームは、状況を補正し、セットトップボックスを後続の予測Pフレームに関連して同期させる。現在のサービス状態に基づいてIフレームを送信した後、サーバ902は、必然的に実際のリアルタイム状況から論理的に継続されるPフレームの送信を、有利には継続する。したがって、いずれの補正タイプのフレームも、サーバ902と、セットトップボックス906と、の間で有利には送信されず、全体的な平均遅延の拡大が回避される。
Iフレーム要求922は、実際は明示的である必要はなく、この目的のためには、他の形式のメッセージでも可能である。基本的に、サーバ902からのどんな指示でも、Iフレーム送信に対する必要性を低減することができ、また、十分であるとみなすことができる。この指示は、コントロールメッセージまたはフィードバックメッセージとすることができ、また、明示的なまたは暗示的なパラメータとしてこれらに含むことができる。他の方法としては、遠端においてデータ受信が成功したことについての特定の確認応答が受信されないことを、指示としてみなすことができる。たとえば、監視期間に関連する所定の満了時間を備えるタイマを、新たなIフレーム伝送を呼び出すための意思決定手続をトリガとして用いることができる。さらに、この指示は、セットトップボックス906からではなく別の構成要素から同様に受信されることもできる。たとえば、データを配信ネットワーク904に送信するネットワーク構成要素が、バッファのオーバーフローによってデータ損失/変質を受けた場合、この構成要素は、セットトップボックス906がこの状況に応答する前に、送信者にエラーを示すことができる。
図10は、本発明の方法のステップを実行するための一例を示したフローチャートである。方法の開始ステップ1002においては、データソースとして機能する上述のサーバ等の装置が自装置のメモリに、符号化、データ転送、および制御アプリケーションをロードし、必要なメモリ領域および変数を初期化し、たとえば、受信サービス要求等に基づいて必要な接続を確立し、符号化されたデータフレームを含むサービスデータの配信を始める。
ステップ1004においては、この装置は、以前の監視期間からIフレームの伝送のトリガとなる事象が発生したか、していないかを監視する。この監視は、たとえば、所定間隔においてのみ実行しても、連続的にその他の機能と同時に実行してもよい。このような事象は、たとえば、新たに形成された接続のパラメータ値/メッセージ指示である。なぜなら、少なくとも1つのIフレームが、初期化のためおよび将来のインターフレーム同期化のために受取人に送信されるはずであるからである。他の方法としては、遠端において新たなIフレームの受信に必要な指示のメッセージを受信した場合、所望の形式の事象であるとみなすことができる。これが実際の場合、新たなIフレームを予測Pフレームの代わりに伝送しなければならない。このことは、ステップ1006において判断され、ステップ1014においてIフレームの伝送動作が実行される。他の方法としては、ステップ1008においてPフレームが伝送される。符号化して送信すべきデータが1010で存在する限り、フレームに関連する事象の発生と伝送の判断ステップは、送信すべきデータがなくなるまで繰り返され、ステップ1012において、方法の実行が終了する。
上記事象は、監視ステップ1004の後でその発生が認識され得るという点において、所定のものである(その発生を監視対象とされる事象は、リスト等にして格納しておくことができる)。当然のことながら、一般的に実際の発生は、予め決まっているものではないが、事象が発生することによって起こり得る問題/エラー/サービスの開始または起動といった状況は、事前に把握しておくことができる。
破線1024は、セットトップボックスのような受信端の装置によって実行される方法ステップを囲んでいる。この装置は、サービスに関連する符号化データを受信する(1022)。受信された符号化データまたは受信すべきであるが失われてしまったデータに基づいて、具体的には、デコーダ状態に基づいて、現在の復号化状態についての分析が実行される(1016)。ステップ1018において判断され、データを適切に復号化するために新たなIフレームの受信が必要とされる場合、ステップ1020においてこの必要性が指示される。指示は、たとえば、特定メッセージの送信、またはデータソースに配信ネットワークまたは他の使用可能な接続を介して送信される一般的なメッセージに特定のパラメータ/パラメータ値が含まれていることを意味する。指示は、また、通常の受領確認メッセージなどの送信、または上述した他の受動的な手段の脱落、としてもよい。
図11は、予測フレームおよび非予測フレームの両フレームを有する符号化データを配信するためのサーバ/データソースとして作用可能なコンピュータ等の装置1101の基本要素のブロック図を示している。処理手段1102は、たとえば、メモリ1104に格納されたデータ符号化ルーチンを含むアプリケーションの形態の指示1105によって、動作の実行を制御する。メモリ1104は、必要な設定およびその他の補足的な情報に加えて、まだ符号化されていないデータフレームと、既に符号化されたデータフレームと、の両方を含んでいてもよい。データ伝送手段1108は、無線/赤外線トランシーバのようなワイヤレス手段1114と、ワイヤレスネットワーク(WLAN等)アダプタと、の両方を含んでいてもよい。また、データ伝送手段1108は、たとえば、従来のネットワークアダプタのような固定(有線)手段1112を含んでいてもよい。キーボード、もしくはその他のデータ入力手段1110、およびディスプレイ1106は、装置を管理および制御するインターフェースをユーザに提供するためにある。データエンコーダは、単なるソフトウェア手段であってもよいし、装置の他の部分に接続された特定のエンコーダチップを介して実行可能であってもよい。
同様に、図12は、符号化されたサービスデータストリームを受信するために本発明にかかる装置1201を示している。装置1201は、処理手段1202と、デコーダ1205と、を有するメモリ手段1204と、データ伝送手段1208と、を含んでいる。装置は、配信ネットワークおよびリターンチャネルの両方にワイヤレス手段または固定手段の少なくとも一方で接続されて、データ伝送手段1208は、非予測フレームの要求の伝送のために用いることができる。装置は、十分なユーザインターフェースを実行するために、キーパッド1210に加えてディスプレイ1206を任意に含んでいてもよい。データデコーダ1205は、単なるソフトウェア手段であってもよいし、装置の他の部分に接続された特定のデコーダチップを介して実行可能であってもよい。
一般に、本発明およびその方法ステップを実行するためのソフトェアは、フロッピー、CD−ROM、メモリカード、ハードディスク等の持ち運び可能なメディアで配布可能である。
本発明によるサービスデータ転送において使用されるプロトコルおよびプロトコルスタックは、特に複雑または特別ではなく、本発明を実行するために必要とされる転送能力を備える既存のものから選択することができ、このことも本発明の1つの利点と考えることができる。本発明は、装置に備わるものとして、もしくは少なくとも接続された追加のソフトウェア/ハードウェアモジュールとして、またはそれらを組み合わせたものとして実行可能である。
以上のことから、当業者においては分かるように、特許請求の範囲により規定される本発明の範囲を逸脱しなければ、様々な変更をおこなうことが可能である。同様に、使用される装置、方法ステップおよびそれらの順序、データフォーマット等は、本発明の基本的理念に基づく範囲で多様に変化させることが可能である。
DVB−S仕様に準拠するDVB伝送システムを示す説明図である。 DVB−C仕様に準拠するDVB伝送システムを示す説明図である。 DVB−T仕様に準拠するDVB伝送システムを示す説明図である。 IPネットワークの、DVBサービスデータの配信ネットワークとしての使用を示す説明図である。 典型的なMPEG−2伝送システムを示す説明図である。 MPEG−2ソース符号化を空間的および時間的に示す説明図である。 サービスデータソースにフィードバック/制御情報を提供可能なDVBセットトップボックスへのDSL/ケーブルネットワーク上でのサービス配信を示す説明図である。 非予測フレームが周期的に配信ネットワークを介して伝送されるシナリオを示す説明図である。 非予測フレームが要求された場合だけ送信され、一方、それ以外の場合は予測フレームだけが形成される本発明の択一的シナリオを示す説明図である。 本発明の(具体的な)方法を適用した際の受信側セットトップボックスの内部を示す説明図である。 本発明にかかる方法のフローチャートである。 本発明のサービスデータソースとして作用可能な装置のブロック図である。 本発明のサービスデータの受け手として作用可能な装置のブロック図である。

Claims (26)

  1. 圧縮サービスデータを配信ネットワークを介して端末装置に伝送する方法であって、
    サービスデータストリームは、共通のデータタイプからなる予測データフレームおよび非予測データフレームの両方を含み、
    前記方法は、
    監視期間中に受領確認メッセージが受信されない場合を含む、予め定められた事象の発生を監視し(1004)、
    該事象が発生した場合、非予測データフレームを端末装置へ伝送し、端末装置をデータストリームに同期させ(1006、1014)、
    前記事象が発生しない場合、サービスデータストリームの中の予測データフレームだけを端末装置に伝送すること(1008)、
    を含むことを特徴とする方法。
  2. 前記事象は、非予測データフレームの要求または指示の受信と、非予測データフレームの伝送を必要とすることを示す所定のパラメータを有するメッセージの受信と、非予測データフレームを伝送する必要があることを示すパラメータ値を有するメッセージの受信と、データ伝送接続の形成または初期化と、のうちの少なくともいずれか一つであることを特徴とする請求項1に記載の方法。
  3. 前記サービスは、デジタルブロードバンドサービス、デジタルブロードキャストサービス、およびDVB(デジタルビデオ放送)サービスのうちの少なくともいずれか一つであることを特徴とする請求項1に記載の方法。
  4. 前記圧縮サービスデータは、ビデオピクチャデータを含むことを特徴とする請求項1〜3のいずれか一つに記載の方法。
  5. 前記ビデオピクチャデータは、MPEG−2(Moving Picture Experts Group)によって符号化されることを特徴とする請求項4に記載の方法。
  6. 前記非予測データフレームは、Iフレームであることを特徴とする請求項5に記載の方法。
  7. 前記予測データフレームは、Pフレームであることを特徴とする請求項5に記載の方法。
  8. データソースによって配信ネットワークを介して伝送された圧縮サービスデータを受信する方法であって、
    サービスデータストリームは、共通のデータタイプからなる予測データフレームおよび非予測データフレームの両方を含み、
    前記方法は、
    データストリームの適切な復号化が実行不可能であるか否かを検証し(1016)、
    実行不可能である場合には、データソースに新たな非予測データフレームの受信が必要であることを示し(1018、1020)、
    新たな非予測データフレームの受信が必要であることを示す方法は、通常の受領確認メッセージの送信を行わないことを含む
    ことを特徴とする方法。
  9. 前記検証は、バッファ状態の検証と、タイマ満了の検証と、チェックサム値の計算と、受信されたデータ構造の検証と、受信データに含まれるか、または受信データに基づいて決定されたパラメータ値の検証と、のうちの少なくともいずれか一つであることを特徴とする請求項8に記載の方法。
  10. 前記サービスは、デジタルブロードバンドサービス、デジタルブロードキャストサービス、およびDVB(デジタルビデオ放送)サービスのうちの少なくともいずれか一つであることを特徴とする請求項8に記載の方法。
  11. 前記圧縮サービスデータは、ビデオピクチャデータを含むことを特徴とする請求項8〜10のいずれか一つに記載の方法。
  12. 前記ビデオピクチャデータは、MPEG−2(Moving Picture Experts Group)によって符号化されていることを特徴とする請求項11に記載の方法。
  13. データソースによって配信ネットワークを介して送信されたサービスデータを受信し、前記データソースにデータを伝送する装置(1208)であって、
    サービスデータストリームは、共通のデータタイプからなる予測データフレームおよび非予測データフレームの両方を含み、
    前記装置は、
    指示を処理する処理手段(1202)と、
    データを格納するメモリ手段(1204)と、を備え、
    前記装置は、サービスデータストリームの適切な復号化が実行不可能であるか否かを検査し、実行不可能である場合には、前記データソースに新たな非予測データフレームの受信が必要であることを示し、
    新たな非予測データフレームの受信が必要であることを示す方法は、通常の受領確認メッセージの送信を行わないことを含む
    ことを特徴とする装置。
  14. 前記検証は、バッファ状態の検証と、タイマ満了の検証と、チェックサム値の計算と、受信されたデータ構造の検証と、受信データに含まれるか、または受信データに基づいて決定されたパラメータ値の検証と、のうちの少なくともいずれか一つであることを特徴とする請求項13に記載の装置。
  15. 前記サービスは、デジタルブロードバンドサービス、デジタルブロードキャストサービス、およびDVB(デジタルビデオ放送)サービスのうちの少なくともいずれか一つであることを特徴とする請求項13に記載の装置。
  16. 前記サービスデータは、ビデオピクチャデータを含むことを特徴とする請求項13〜15のいずれか一つに記載の装置。
  17. 前記ビデオピクチャデータは、MPEG−2(Moving Picture Experts Group)によって符号化されていることを特徴とする請求項16に記載の装置。
  18. 前記装置は、IRD(Integrated Receiver Decoder)およびテレビセットトップボックスのうちの少なくともいずれか一つであることを特徴とする請求項13に記載の装置。
  19. 配信ネットワークを介して端末装置にサービスデータを伝送し、前記サービスに関する端末装置によって送信されたコントロール情報を受信する装置(1108)であって、
    サービスデータは、共通のデータタイプからなる予測データフレームおよび非予測データフレームの両方を含み、
    前記装置は、
    指示を処理する処理手段(1102)と、
    データを格納するメモリ手段(1104)と、を備え、
    前記装置は、監視期間中に受領確認メッセージが受信されない場合を含む、予め定められた事象の発生を監視し、該事象が発生した場合、前記非予測データフレームを端末装置に伝送し、端末装置をデータストリームに同期させる構成であり、前記事象が発生しない場合、サービスデータストリームの中において前記予測データフレームだけを端末装置に伝送する構成であることを特徴とする装置。
  20. 前記事象は、非予測データフレームの要求または指示の受信と、非予測データフレームの伝送を必要とすることを示す所定のパラメータを有するメッセージの受信と、非予測データフレームを伝送する必要があることを示すパラメータ値を有するメッセージの受信と、データ伝送接続の形成または初期化と、
    のうちの少なくともいずれか一つであることを特徴とする請求項19に記載の装置。
  21. 前記サービスは、デジタルブロードバンドサービス、デジタルブロードキャストサービス、およびDVB(デジタルビデオ放送)サービスのうちの少なくともいずれか一つであることを特徴とする請求項19に記載の装置。
  22. 前記サービスデータは、ビデオピクチャデータを含むことを特徴とする請求項19〜21のいずれか一つに記載の装置。
  23. 前記ビデオピクチャデータは、MPEG−2(Moving Picture Experts Group)によって符号化されていることを特徴とする請求項22に記載の装置。
  24. 前記装置は、サーバであることを特徴とする請求項19〜23のいずれか一つに記載の装置。
  25. 請求項1〜8のいずれか一つに記載の方法ステップを実行する符号化手段を含むコンピュータプログラム。
  26. 請求項25に記載のコンピュータで実行可能なプログラムを有する持ち運び可能なメディア。
JP2007518622A 2004-07-01 2004-07-01 予測および非予測データフレームを伝送するための方法および装置 Active JP4688873B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/FI2004/000412 WO2006003232A1 (en) 2004-07-01 2004-07-01 A method and a device for transferring predictive and non-predictive data frames

Publications (2)

Publication Number Publication Date
JP2008504767A JP2008504767A (ja) 2008-02-14
JP4688873B2 true JP4688873B2 (ja) 2011-05-25

Family

ID=35782490

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007518622A Active JP4688873B2 (ja) 2004-07-01 2004-07-01 予測および非予測データフレームを伝送するための方法および装置

Country Status (9)

Country Link
US (1) US20080263616A1 (ja)
EP (1) EP1766981B1 (ja)
JP (1) JP4688873B2 (ja)
KR (1) KR101062882B1 (ja)
CN (1) CN1998240B (ja)
AT (1) ATE445971T1 (ja)
DE (1) DE602004023655D1 (ja)
ES (1) ES2338232T3 (ja)
WO (1) WO2006003232A1 (ja)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7725595B1 (en) * 2005-05-24 2010-05-25 The United States Of America As Represented By The Secretary Of The Navy Embedded communications system and method
CN101193292A (zh) * 2006-11-24 2008-06-04 联想(北京)有限公司 一种基于多载波技术的无线视频收发方法及装置
KR101420878B1 (ko) * 2007-11-22 2014-07-21 삼성전자주식회사 동영상 프레임의 선택적 오류 은폐 방법 및 장치
EP2290978A1 (en) 2008-05-30 2011-03-02 NEC Corporation Server device, communication method, and program
US8254449B2 (en) * 2008-08-29 2012-08-28 Georgia Tech Research Corporation Video traffic bandwidth prediction
CN101383959B (zh) * 2008-10-23 2012-01-11 中兴通讯股份有限公司 流媒体业务中获取关键帧的方法、系统及用户设备
US8189492B2 (en) * 2009-03-18 2012-05-29 Microsoft Corporation Error recovery in an audio-video multipoint control component
US8254445B2 (en) * 2009-08-06 2012-08-28 Georgia Tech Research Corporation Video transmission using video quality metrics
US8400918B2 (en) * 2009-08-06 2013-03-19 Georgia Tech Research Corporation Video traffic smoothing
CN102547411A (zh) * 2010-12-14 2012-07-04 康佳集团股份有限公司 流视频的传输和播放方法及其实现装置
JP5816858B2 (ja) * 2011-01-24 2015-11-18 パナソニックIpマネジメント株式会社 動画伝送システム
JP2012156654A (ja) * 2011-01-24 2012-08-16 Panasonic Corp 送信装置及びそれを用いた動画伝送システム
JP2012156650A (ja) * 2011-01-24 2012-08-16 Panasonic Corp 動画伝送システム
JP6066561B2 (ja) * 2012-01-26 2017-01-25 キヤノン株式会社 映像処理装置、映像処理方法およびプログラム
US9351011B2 (en) 2012-11-28 2016-05-24 Intel Corporation Video pipeline with direct linkage between decoding and post processing
US20150172340A1 (en) * 2013-01-11 2015-06-18 Telefonaktiebolaget L M Ericsson (Publ) Technique for Operating Client and Server Devices in a Broadcast Communication Network
US10545651B2 (en) 2013-07-15 2020-01-28 Fox Broadcasting Company, Llc Providing bitmap image format files from media
US9634982B2 (en) * 2013-07-18 2017-04-25 Cisco Technology, Inc. Utilizing multiple interfaces when sending data and acknowledgement packets
US10123040B2 (en) 2016-08-30 2018-11-06 Qualcomm Incorporated Intra-coded video frame caching for video telephony sessions
JP6630323B2 (ja) 2017-08-31 2020-01-15 慎之輔 浅原 動画配信装置、方法、プログラム、動画配信システム
CN112969066B (zh) * 2021-01-29 2023-09-01 北京博雅慧视智能技术研究院有限公司 预测单元的选择方法、装置、电子设备及介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09149421A (ja) * 1995-09-18 1997-06-06 Oki Electric Ind Co Ltd 画像符号化装置、画像復号化装置及び画像伝送システム
JP2002314972A (ja) * 2001-04-09 2002-10-25 Nec Corp 配信システムとその配信方法、及び配信プログラム
JP2002330437A (ja) * 2001-05-01 2002-11-15 Sony Corp 画像伝送方法、画像伝送方法のプログラム、画像伝送方法のプログラムを記録した記録媒体及び画像伝送装置
JP2002344932A (ja) * 2001-05-22 2002-11-29 Mega Chips Corp 動画像配信システム、動画像配信方法及びそれらのプログラム
JP2003298555A (ja) * 2002-03-29 2003-10-17 Mitsubishi Electric Corp データ通信装置およびデータ通信方法
JP2004056819A (ja) * 2002-07-17 2004-02-19 Matsushita Electric Ind Co Ltd 映像データ送信装置、映像データ送受信システム、及び、その方法
JP2004080785A (ja) * 2002-08-13 2004-03-11 Microsoft Corp 迅速なデジタル・チャンネル変更
WO2004049719A1 (en) * 2002-11-27 2004-06-10 Koninklijke Philips Electronics N.V. I-picture insertion on request

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3275423B2 (ja) * 1993-03-04 2002-04-15 キヤノン株式会社 記録装置
JP3263807B2 (ja) * 1996-09-09 2002-03-11 ソニー株式会社 画像符号化装置および画像符号化方法
US6546013B1 (en) * 1997-03-21 2003-04-08 Scientific-Atlanta, Inc. Method and apparatus for delivering reference signal information within a specified time interval
US6167155A (en) * 1997-07-28 2000-12-26 Physical Optics Corporation Method of isomorphic singular manifold projection and still/video imagery compression
AR016812A1 (es) * 1997-08-14 2001-08-01 Samsung Electronics Co Ltd Metodo para transmitir informacion de video comprimida, disposiciones de compresion y de grabacion de video y aparato de reproduccion de video
US6680944B1 (en) * 1998-03-09 2004-01-20 Sony Corporation Apparatus for and method of predictive time stamping of isochronous data packets transmitted over an IEEE 1394-1995 serial bus network
JP3110390B2 (ja) * 1998-08-28 2000-11-20 日本電気アイシーマイコンシステム株式会社 画像再生装置
WO2001002183A1 (fr) * 1999-07-05 2001-01-11 Sony Corporation Systeme et procede d'impression de donnees, et support d'enregistrement
GB2359209A (en) * 2000-02-09 2001-08-15 Motorola Ltd Apparatus and methods for video distribution via networks
ATE309578T1 (de) * 2000-12-22 2005-11-15 Koninkl Philips Electronics Nv Internet-bezahlungsprozess auf rückkehrverkehrbasis
US7035526B2 (en) * 2001-02-09 2006-04-25 Microsoft Corporation Advancing playback of video data based on parameter values of video data
EP1261204A2 (en) * 2001-03-29 2002-11-27 Matsushita Electric Industrial Co., Ltd. Method and apparatus for data reproduction
US7206501B2 (en) * 2001-10-12 2007-04-17 The Directv Group, Inc. Method and apparatus for identifying MPEG picture coding types
EP1383334B1 (en) * 2002-07-17 2012-02-01 Panasonic Corporation Video data transmitting apparatus, video data receiving apparatus, and broadcasting system
US7533402B2 (en) * 2002-09-30 2009-05-12 Broadcom Corporation Satellite set-top box decoder for simultaneously servicing multiple independent programs for display on independent display device
JP3534742B1 (ja) * 2002-10-03 2004-06-07 株式会社エヌ・ティ・ティ・ドコモ 動画像復号方法、動画像復号装置、及び動画像復号プログラム
US20040146211A1 (en) 2003-01-29 2004-07-29 Knapp Verna E. Encoder and method for encoding

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09149421A (ja) * 1995-09-18 1997-06-06 Oki Electric Ind Co Ltd 画像符号化装置、画像復号化装置及び画像伝送システム
JP2002314972A (ja) * 2001-04-09 2002-10-25 Nec Corp 配信システムとその配信方法、及び配信プログラム
JP2002330437A (ja) * 2001-05-01 2002-11-15 Sony Corp 画像伝送方法、画像伝送方法のプログラム、画像伝送方法のプログラムを記録した記録媒体及び画像伝送装置
JP2002344932A (ja) * 2001-05-22 2002-11-29 Mega Chips Corp 動画像配信システム、動画像配信方法及びそれらのプログラム
JP2003298555A (ja) * 2002-03-29 2003-10-17 Mitsubishi Electric Corp データ通信装置およびデータ通信方法
JP2004056819A (ja) * 2002-07-17 2004-02-19 Matsushita Electric Ind Co Ltd 映像データ送信装置、映像データ送受信システム、及び、その方法
JP2004080785A (ja) * 2002-08-13 2004-03-11 Microsoft Corp 迅速なデジタル・チャンネル変更
WO2004049719A1 (en) * 2002-11-27 2004-06-10 Koninklijke Philips Electronics N.V. I-picture insertion on request

Also Published As

Publication number Publication date
ES2338232T3 (es) 2010-05-05
EP1766981B1 (en) 2009-10-14
WO2006003232A1 (en) 2006-01-12
DE602004023655D1 (de) 2009-11-26
CN1998240A (zh) 2007-07-11
KR20070055432A (ko) 2007-05-30
EP1766981A1 (en) 2007-03-28
JP2008504767A (ja) 2008-02-14
US20080263616A1 (en) 2008-10-23
KR101062882B1 (ko) 2011-09-07
ATE445971T1 (de) 2009-10-15
CN1998240B (zh) 2010-04-14

Similar Documents

Publication Publication Date Title
JP4688873B2 (ja) 予測および非予測データフレームを伝送するための方法および装置
KR102000666B1 (ko) 미디어 데이터를 송수신하기 위한 인터페이스 장치 및 방법
EP2304955B1 (en) A real-time transport protocol (rtp) packetization method for fast channel change applications using scalable video coding (svc)
JP3931595B2 (ja) データ修正装置及びデータ修正方法
CN109788314B (zh) 一种视频流数据传输的方法和装置
US9219940B2 (en) Fast channel change for hybrid device
EP2556440A1 (en) Video content distribution
US20160041993A1 (en) Apparatus and methods for lightweight transcoding
JP5027657B2 (ja) デコーダにデータを供給する方法および装置
CN103918258A (zh) 减少视频编码中的数据量
Nightingale et al. Video adaptation for consumer devices: opportunities and challenges offered by new standards
Fitzek et al. Video streaming in wireless internet
CN103327365A (zh) 一种基于有线数字电视网的应用点播与互动系统
US20110242276A1 (en) Video Content Distribution
US20100246685A1 (en) Compressed video decoding delay reducer
KR20070048663A (ko) 디코더에 데이터를 공급하는 방법 및 디바이스
KR20050042301A (ko) 에러 보정을 이용한 복호화 방법
CN102316359A (zh) 传输视频数据的方法和装置
WO2006003234A1 (en) A method and a device for service data delivery
KR20050099078A (ko) 실시간 스트리밍 서비스 시 부호화 모드 선택 방법
MING Adaptive network abstraction layer packetization for low bit rate H. 264/AVC video transmission over wireless mobile networks under cross layer optimization
Ahn et al. Absar, Javed, see Kurniawati, Evelyn, T-CE May 04 655–665 Aghvami, Hamid, see Allen, Ben, T-CE May 04 420–428 Ahn, Kyung Seung, Juphil Cho and Heung Ki Baik. FPEF-Based Blind Adaptive Channel Equalization with Arbitrary Decision Delay; T-CE Nov 04 984–990
KR20050089458A (ko) 패킷 손실에 대응하는 복호화 방법

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100413

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100712

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100824

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101122

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110118

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110215

R150 Certificate of patent or registration of utility model

Ref document number: 4688873

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140225

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250