JP2009535866A - ビデオ属性と共にビデオデータを提供するビデオ受信機 - Google Patents

ビデオ属性と共にビデオデータを提供するビデオ受信機 Download PDF

Info

Publication number
JP2009535866A
JP2009535866A JP2009504854A JP2009504854A JP2009535866A JP 2009535866 A JP2009535866 A JP 2009535866A JP 2009504854 A JP2009504854 A JP 2009504854A JP 2009504854 A JP2009504854 A JP 2009504854A JP 2009535866 A JP2009535866 A JP 2009535866A
Authority
JP
Japan
Prior art keywords
video
channel
attribute data
processor
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009504854A
Other languages
English (en)
Inventor
イリヤ・クレバノフ
アレン・ジェー・ポーター
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ATI Technologies ULC
Original Assignee
ATI Technologies ULC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ATI Technologies ULC filed Critical ATI Technologies ULC
Publication of JP2009535866A publication Critical patent/JP2009535866A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/02Handling of images in compressed format, e.g. JPEG, MPEG

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

圧縮されたビデオビットストリームを受信して、復号化されたビデオ画素と、該画素に対応するビデオ属性と、を同期させてビデオプロセッサに供給する装置及び方法を開示する。圧縮されたビデオビットストリームは受信されて復号化される。復号化されたピクチャはビデオ属性を有している。ビデオ属性のサブセットは、ディスプレイ装置に接続されているビデオプロセッサに供給される。該ビデオ属性は、ピクチャデータ或いは画素データと同期してビデオプロセッサに供給され、もって、対応するピクチャが表示される前にビデオ属性はビデオプロセッサに与えられる。

Description

本発明は、ビデオ受信機に関し、詳しくは、ビデオデータを復号化して、該復号化されたビデオデータと共にビデオ属性を提供する受信機内で行われるビデオデータ転送方法に関する。
デジタルビデオは今日広く普及している。デジタルビデオは、アナログビデオ信号をサンプリングして量子化することによって形成される。デジタルビデオをそのまま伝送する場合、大幅な帯域幅が必要となるので、デジタルビデオデータは、通常、受信機に伝送される前に符号化される。
標準符号化アルゴリズムには、ISOのMPEG−1、MPEG−2、ITU−TのH.261、H.264、DV、QuickTime、又はその他のアルゴリズムがある。周知のビデオ圧縮アルゴリズムは、典型的に、ビデオシーケンスの画像の不可逆変換を伴い、これらの画像は、その後、エントロピー符号化されて効率よく圧縮される。例えば、MPEG−1及びMPEG−2は、ソースビデオシーケンスの画像における画素のブロックの離散コサイン変換を利用し、ランレングス符号化及びエントロピー(ハフマン)符号化を行ってデータを更に圧縮する。受信機において、ビデオ(映像)は圧縮解除され、そして、該圧縮解除されたビデオには更なる処理が行われて、伝送されたビデオが表示される。
符号化されたビデオは、数多くのフォーマットと属性を有することができる。例えば、様々なサイズの画像、カラーフォーマット(クロマフォーマット)、構造(例えば、プログレッシブ又はインターレース)等が符号化される。
典型的なデジタルビデオ受信機は、デコーダユニットと、ビデオプロセッサと、を備えている。デコーダユニットは、圧縮されたビデオストリームを受け取り、復号化されたビデオシーケンスを生成する。復号化は、符号化の際に行われる変換手順の逆の手順によって可能となる。ビデオデータは、復号化の後、ビデオプロセッサに供給される。ビデオプロセッサは、ディスプレイ装置でビデオを再生するために必要な信号処理を更に行う。例えば、ビデオプロセッサは、復号化されたビデオをディスプレイ装置の表示解像度に合わせるために該ビデオをスケーリングし、RGBディスプレイにYCrCb符号化ビデオを表示するためにカラースペース(色空間)変換等を行う。
復号化されたビデオストリームの属性は、元のビデオソースを符号化する方法次第で、所定のフレームの境界又は所定のフレーム内で変化することがある。この変化は、例えば、放送用ビデオストリーム内にコマーシャルが挿入されるときに起こり得る。または、この変化は、デコーダが2つ又はそれ以上のソースから連結シーケンスを圧縮解除したときに2つのシーケンスの境界で起こり得る。
例えば、MPEG−2は、フィールドを符号化或いはフレームを符号化するものである。フィールド符号化ビデオ、即ち、フレームの奇数ライン(トップフィールド)の後に該フレームの偶数ライン(ボトムフィールド)が続き、このトップフィールドとボトムフィールドとが交互に来る。対照的に、フレーム符号化ビデオは、ノンインターレース(ライン毎に走査するプログレッシブ式の)ビデオから成る。MPEG−2のビデオシーケンスは、同じシーケンス内にあるフィールド又はフレームであるピクチャが混合されたものを有する。エンコーダは、入力されたフレームを符号化するために、2つのフィールドピクチャ又は1つのフレームピクチャを使用することをフレーム・バイ・フレーム(frame by frame)に基づいて決定する。デコーダによって不適正なピクチャ構造が使用されると激しいひずみが生じる可能性があるので、ビデオ受信機は、ピクチャが処理されて該ピクチャに対応するフレームが表示される前に、該ピクチャの構造の種類に関する情報を受信して処理する必要がある。
ビデオストリーム内で変化する可能性のあるその他の特性としては、解像度、ピクチャ構造の種類(フィールド又はフレーム)及びクロマフォーマット(ピクセルフォーマット)がある。
従来のビデオ受信機においては、復号化されたビデオフレームの特性又は属性の変化は、デコーダによって検出され、次いで、ビデオプロセッサに伝わる。デコーダとビデオプロセッサとの間で属性データを転送するのには、通常、ソフトウェアが使用される。
しかし、ソフトウェアは、動作の遅延を起こすことがしばしばあり、圧縮解除されたビデオフレームの新しい特性又は属性をビデオプロセッサがデコーダから受信する前に、該ビデオプロセッサが間違ったパラメータで動作するので、復号化されたビデオは望ましくないアーティファクトを表示してしまう。ビデオ属性の変化の頻度と、属性の変化をビデオプロセッサに転送する際の遅延とによって、容認できない数のフレームが再生時に不適切に表示される恐れがある。
従って、デジタルビデオストリームのビデオ属性の変化に迅速に反応できるビデオ受信機が必要とされている。
本発明の概念によると、圧縮されたビデオビットストリームを受信して、復号化されたビデオ画素及びビデオ属性をビデオプロセッサに供給する装置及び方法が提供される。
本発明の概念によると、ビデオ受信機が提供されており、該ビデオ受信機は、ビデオデコーダと、チャネルエンコーダと、を備え、ビデオデコーダは、符号化されたビデオデータストリームを受信して、該符号化されたビデオデータストリームを画素ストリームと属性データとに復号化し、画素ストリームはビデオ画像を表示しており、属性データはビデオ画像を記述しており、チャネルエンコーダは、第1チャネルの画素ストリームと第2チャネルの属性データとを符号化して、第1チャネルと第2チャネルとを合成し、もって、画像のビデオ画素と画像の属性データとの間で定められた関係が存在する。
本発明の概念によると、圧縮されたビデオビットストリームから映像を表示する方法が提供される。この方法は、圧縮されたビデオビットストリームを復号化して、圧縮解除された画素ストリームとビデオ属性データとを形成する工程と、画素ストリームを処理してディスプレイ装置に提示するために、画素ストリームをビデオプロセッサに転送する工程と、画素ストリームとの間で定められた関係を維持した状態で、ビデオ属性データをビデオプロセッサに転送する工程と、ビデオプロセッサにおいて、ビデオ属性データを使用してビデオ画像を処理し、処理されたビデオフレームの各々をディスプレイ装置で表示する工程と、を含んでいる。
本発明のその他の概念及び特徴は、添付の図面を参照して以下の実施例から当業者には明白である。
添付の図面は、以下で説明する本発明の実施例を示している。
図1は、デジタル符号化されたビデオのストリームを処理することができる従来のビデオ受信機のブロック線図を簡素化した図である。受信機100は、デコーダ104と、ビデオプロセッサ124と、を備える。デコーダ104は、受信した符号化されたビデオストリームを復号化して画素値にする。ビデオプロセッサ124は、表示用のビデオ画像を、該プロセッサ124に接続されているディスプレイ装置122に提供する。デコーダ104及びビデオプロセッサ124はホストプロセッサ106と通信している。
ビデオプロセッサ124は、スケーラ(scaler)114と、デインターレーサ(deinterlacer)120と、カラーコンバータ116と、ビデオ出力インターフェース118と、を備えている。ビデオ出力インターフェース118はディスプレイ122に接続されている。更に、ビデオプロセッサ124は、ビデオ出力インターフェース118によって表示されるフレームを記憶するフレームバッファを提供するローカルメモリ110を備えている。
通常、ビデオ出力インターフェース118は、テレビ、コンピュータモニタ、LCD或いはその他の表示装置等の形態のディスプレイ装置122に接続されているランダム・アクセス・メモリ・ディジタル・アナログ変換器(RAMDAC)である。
スケーラ114とデインターレーサ120とカラーコンバータ116とは、ハードウェア或いはソフトウェアで実現可能な機能ブロックである。ビデオ出力インターフェース118とスケーラ114とデインターレーサ120とカラーコンバータ116の動作パラメータはプログラム可能である。例えば、カラーコンバータ116が使用する入出力されるカラースペースはプログラム可能である。同様に、スケーリング比(scaling ratio)及びデインターレーシング・アルゴリズムもプログラム可能である。プログラミングは、例えば、ハードウェアレジスタ(図示せず)、ソフトウェアの変数等を設定することによって可能である。
バス126は、復号化されたビデオデータをデコーダ104からビデオプロセッサ124に転送するために使用される。バス126は、メモリーバス、専用のシリアル或いはパラレルリンク等でもよい。図示されているように、デコーダ104は、データをビデオプロセッサ124に直接送る。しかし、デコーダ104は、復号化されたビデオデータを、ローカルメモリ110或いは他の場所で形成可能なバッファ(図示せず)に送ることも可能である。
解像度、クロマフォーマット及びピクチャ構造等のビデオ属性データは、デコーダ104からプロセッサ106に転送される。ホストプロセッサ106は、ビデオプロセッサ124の動作パラメータを設定する。これは、例えば、スケーラ114と、カラーコンバータ116と、デインターレーサ120と、ビデオ出力インターフェース118の動作を調整するためにビデオプロセッサ124のレジスタ(図示せず)を設定することによって可能となる。
デコーダ104は、圧縮/符号化されたビデオストリームを受信する。この符号化されたビデオストリームのソースは、復調されたデジタル衛星チャネル或いはケーブルテレビチャネル、地上波放送チャネル、ローカルビデオアーカイブ、フラッシュメモリ等のコンピュータの読み取り可能メモリ、光学ドライブ等の周辺装置等である。
符号化されたビデオストリームは、符号化されたビデオデータを記述するシンタックスエレメントを含んでいる。例えばMPEGー2のストリームのフォーマットは、階層的に組織化されており、シーケンス、GOP(ピクチャ群)(group of pictures)、ピクチャ、スライス、マクロブロック、及びブロックから成る。ブロックはDCT係数を含んでいる。マクロブロックは、輝度サンプルの4つのブロックと、対応する数の色差ブロックと、を含んでおり、該色差ブロックは、画素のフォーマット又はクロマフォーマットに依存する。即ち、4:2:2の符号化されたクロマフォーマットにおいては、マクロブロックは、4つのYブロックと、2つのCrブロックと、2つのCbブロックと、を有している。同様に、4:4:4の符号化されたクロマフォーマットにおいて、マクロブロックは、4つのYブロックと、4つのCrブロックと、4つのCbブロックと、を有している。スライスは、幾つかのマクロブロックを含むピクチャのサブセット(横方向のストリップ)である。ピクチャは、フィールド又はフレームである。フレームは、Iフレーム(フレーム内フレーム)、Pフレーム(予測フレーム)、及びBフレーム(双方向予測フレーム)である。MPEG−2のビデオシンタックスは、文献、“Jack, Keith. 2005 Video Demystified: A handbook for the digital engineer. 4th ed. Oxford: Elsevier”に記載されており、この文献の内容を本書の一部に含めるものとする。
シンタックスエレメントは、縦方向のサイズの値と、横方向のサイズの値と、アスペクト比と、カラーフォーマットと、ピクチャ構造の種類と、使用される量子化マトリックスと、を含んでいる。これらのうちの幾つか又は全ては、MPEG2のシーケンス及び個々のピクチャ(フィールド又はフレーム)用に定められている。現画像のカラーフォーマット、サイズ及び構造を含むビデオの属性がシンタックスエレメントから抽出されて、ビデオ属性データの集合体が形成される。従来のデコーダ104は、直列配置された読み取り可能なレジスタ108にビデオ属性データを記憶することができる。レジスタは、フレームの各シーケンスに対して定期的に更新可能であるか、又は、それ以上の周期で更新可能である。
プロセッサ106は、動作の際、符号化されたビデオストリームを処理するビデオデコーダ104を初期化する。デコーダ104は、符号化の作業手順とは逆の手順を行うことによって、符号化されたビデオストリームを復号化する。即ち、デコーダ104は、該ストリームをエントロピー復号化し、該ストリームを埋設されたシンタックスに従って解析して、ランレングス値を抽出し、逆離散コサイン変換及び動き補償を行う。ビデオストリームが解析される際、属性情報が抽出されて、レジスタは、対応する属性データでロードされる。画素は、その係数を逆離散コサイン変換(IDCT)することによって復元される。動き補償ベクトルが存在する場合、該動き補償ベクトルは復号化された画素に加えられ、基準フレームと現フレームとの間にある動きの修正を行う。復号化されたフレームの画素は、バス126を介してビデオプロセッサ124に画素ストリームとして転送される。
プロセッサ106は、レジスタ108を読み込んで属性データを抽出し、抽出された属性情報に基づいて、ビデオプロセッサ124の動作パラメータを初期化する。
ビデオストリームのその後のフレームも同様に処理されて、最終的に動画がディスプレイ装置122に表示される。ビデオプロセッサ124の動作パラメータは、新たな属性データが得られるようになった際に、プロセッサ106によって更新される。
ビデオデータは、妥当な一定のフレームレートで表示される必要がある。従って、フレームデータは、ディスプレイ装置122上での次のリフレッシュサイクルの前に該ディスプレイ装置122に供給される。画素データは、フレームが表示される順に、デコーダ104によって出力される。
しかし、ビデオプロセッサ124の動作パラメータは、基本的に、所定の速度で更新されることはない。該動作パラメータは、ビデオ属性データを記憶するレジスタに対する変化がプロセッサ106によって検出されたときに更新されて、該プロセッサ106は、対応する動作パラメータを更新する機会を有する。
ビデオ属性の変化は、基本的には、滅多に起こらないので、ビデオプロセッサ124の動作パラメータの更新が、通常、表示の品質に影響を及ぼすことはない。しかし、属性が急に変化すると、アーティファクト(artifacts)が目に映る可能性がある。例えば、復号化されたフレームの画像の属性が以前のフレームから変化したのにもかかわらず、ビデオプロセッサ124の動作パラメータが新しい画像の属性に更新されなかった場合、該フレームは、アーティファクトを備えた状態で表示されてしまう。同様に、ビデオプロセッサ124の動作パラメータが早期に更新された場合でも、アーティファクトが発生する結果となる可能性がある。
図2は、本発明の実施例におけるビデオ受信機200を論理的に示している。ビデオ受信機200は、カスタムハードウェア、ソフトウェアで制御される汎用演算ハードウェア或いはこれらの組み合わせで形成可能である。コンピュータの読み取り可能な媒体からソフトウェアを汎用演算装置のメモリにロードできる。
図示されているように、ビデオ受信機200は、デコーダ234とビデオプロセッサ236とを備える。デコーダ234は、受信されデジタル符号化されたストリームを画素値のストリームに復号化する。ビデオプロセッサ236は、これらの画素値を使用して映像をディスプレイ装置に提供する。デコーダ234は、バス224A、224Bを介して、ビデオプロセッサ236と通信している。
また、デコーダ234に到達する圧縮されたビデオデータは、衛星テレビチャネル、ケーブルテレビチャネル、地上波放送チャネル、ローカルビデオアーカイブ、或いはDVDプレーヤ等の周辺装置のような従来のソースから来る。
本発明の実施例においては、ストリームが復号化されると、ビデオ属性は、復号化された画素ストリームと間で定められた関係を維持した状態で、デコーダ234によってビデオプロセッサ236に供給される。復号化されたビデオのビデオ属性は、例えば、同期して供給、フレーム・バイ・フレームで供給、選択された複数のフレームの間隔で供給、又は、属性が以前のフレームから変化するたびに供給される。
ビデオ画素データと属性データとはデコーダ234にて同期して、別々のチャネル224A、224Bでビデオプロセッサ236に供給される。
詳しくは、図3は、ビデオ受信機200の簡略化した機能ブロック線図である。図示されるように、デコーダ234は、MPEGデコーダ202と、2つの同期チャネル224A、224Bを形成するために使用されているチャネルフォーマッタ204と、を備える。チャネル224Aは、ビデオデータ用のチャネルであり、チャネル224Bは、属性データ用のチャネルである。図示された実施例において、チャネルフォーマッタ204は、属性フォーマッタ220と、ITU−R BT.1364に順守したエンコーダ222と、ITU−R BT.601−4に順守したエンコーダ230と、ITU−R BT.656−4に順守したエンコーダ232と、を備えている。“Format of Ancillary Data Signals Carried in Digital Component Studio Interlaces”と題するITU−R勧告BT.1364と、“Encoding Parameters of Digital Television For Studios”と題するITU−R勧告BT.601−4と、“Interlaces for Digital Component Video Signals in 525-Line and 625-Line Television Systems Operating at the 4:2:2 Level of Recommendation ITU-R BT.601(part A)”と題するITU−R勧告BT.656−4とを本書の一部に含める。ITU−R BT.656−4で定められている4:2:2クロマフォーマットによって、4:2:0の符号化されたビデオ信号が伝送可能となる。MPEG−2は、4:2:2及び4:2:0の双方のクロマサブサンプリング(chroma subsampling)を可能にする。4:2:0のクロマフォーマットは、“main profile at high level (MP@HL)”と称されており商業的に重要なMPEG−2プロファイルに使用される。即ち、ITU−R BT.656インターフェースを使用して4:2:0フォーマット信号を伝送できることは有効である。4:2:0信号のクロマサンプルは、単純に複製されて、(図4に示される)ITU−R BT.656で定められた4:2:2フォーマットに合うようになる。若しくは、4:2:0の符号化された信号は、クロマデータに割り当てられた帯域幅の半分のみを使用して、そのまま送信されることも可能である。
MPEGデコーダ202は、パーサ(parser)206と、可変長デコーダ(VLD)208と、動き補償ブロック(MB)210と、ランレングスデコーダ及び逆量子化(RL&IQ)ブロック212と、逆離散コサイン変換(IDCT)ブロック214と、ピクチャ復元ブロック215と、フレームを記憶するメモリ216と、を備えており、MPEGデコーダ202のこれらの構成部品は、従来のMPEGデコーダに備えられており当業者には周知となっている。
MPEGデコーダ202は、拡張属性情報を属性フォーマッタ220に出力する点で、従来のMPEGデコーダとは若干異なる。即ち、MPEGデコーダ202は、画像サイズ、カラーフォーマット及びピクチャ構造を出力する。また、属性情報は、属性データとしてフォーマットされ、ソフトウェアの変数等としてレジスタ218に記憶されるようにすることが可能である。
属性フォーマッタ220は、選択されたビデオ属性データをレジスタ218から読み取り、これらのデータを以下で説明するマッピングに従って任意でフォーマットする。伝送される所望のビデオ属性は、解像度、ピクチャ構造の種類(フレーム又はフィールド)、クロマフォーマット等を含んでいる。ビデオ属性は、MPEGデコーダ202によって、各フレーム又は各フィールドと同期して復号化され、この復号化された属性のサブセットは、ビデオデータストリームとともにビデオプロセッサ236に伝送される。
図示された実施例において、属性フォーマッタ220は、フォーマットされた属性データを好ましくはITU−R BT.1364に順守したエンコーダ222に出力する。該エンコーダ222は、この属性データをITU−R BT.1364に順守したストリームに変換する。
復号化されたビットストリームのフレーム又はフィールドに対応する画素データは、好ましくはITU−R BT.601−4に順守したエンコーダ230によって、フレームメモリ216から読み出されて、ITU−R BT.601−4に従って符号化される。
従って、フレーム属性データと画素の出力とは、例えば、バス224で送られる2つの同期チャネル224A、224Bを介して同期してビデオプロセッサ236に供給される。チャネルフォーマッタ204は、更に、好ましくはITU−R BT.656−4に順守したエンコーダ232を備えており、該エンコーダ232は、ビデオ画素データストリーム228と、ビデオ属性データストリーム226と、を多重化する。
ビデオプロセッサ236は、スケーラ250と、デインターレーサ252と、カラースペースコンバータ254と、出力インターフェース(出力I/F)256と、を備えている。出力インターフェース256は従来のRAMDACでもよい。ビデオプロセッサ236は、また、メモリ258を備えている。バス260は、スケーラー250と、デインターレーサ252と、カラースペースコンバータ254と、出力インターフェース256と、メモリ258と、を互いに接続する。
ビデオプロセッサ236は、更に、チャネルフォーマッタ204と相補性を有するチャネルデコーダ238を備えている。図示された実施例において、チャネルデコーダ238は、ITU−R BT.656−4に順守したデコーダ240を備えている。該デコーダ240は、デマルチプレクサ(demultiplexer)として機能し、ITU−R BT.1364に順守したデコーダ242と通信している。
デコーダ242の出力は、スケーラ250とデインターレーサ252とカラースペースコンバータ254と出力インターフェース256とに接続されている属性デコーダ244に供給される。
ビデオストリームはビデオデコーダ202に受信される。パーサ206は、入力されたビットストリームを解析して、シーケンスヘッダ、シーケンス拡張ヘッダ、ユーザデータ及びその他の拡張ヘッダ等のビットストリームに使用される符号化構造をアセンブルする。次いで、GOPを記述したGOPヘッダが読み込まれる。シーケンスヘッダ及びシーケンスヘッダ拡張部の後に解析される次の符号化構造は、ピクチャヘッダとピクチャヘッダ拡張部である。これらの符号化構造の先にはスタートコードが付いており、デコーダは、このスタートコードを検出して、符号化構造のアセンブルを開始する。ピクチャヘッダ及びピクチャヘッダ拡張部の構造に含まれる属性情報は、復号化されている現ピクチャの特性に加えられる。ピクチャヘッダ及びピクチャ拡張ヘッダは、ピクチャの所要の属性を全て提供する。DCT係数は、ブロック212、214によって、ランレングス復号化及び逆量子化されて、画素ドメイン値に変換される。この過程は、次の画像に対しても繰り返し行われる。
ビットストリームを解析することによって、ビデオデコーダ202は、(ピクチャ、マクロブロック、ブロック等に基づいて)復元されている現画像に対応する画像属性データを認識することができる。従って、ビデオデコーダ202は、メモリ216から読み出されてレジスタ218に入力される各フレーム又はフレームの各サブセットと一緒に、定められた関係を維持してこれらの属性(画像属性データ)の全て又はサブセットを提供することができる。即ち、デコーダ202は、メモリ216内のフレームの圧縮解除された画素の復元に先だって、該フレームを記述する全ての属性を抽出する。この属性の全て又はサブセットは、適切にフォーマットされてビデオプロセッサ236に伝送される。
属性フォーマッタ220は、下記の表1に示されるマッピングに従って属性値をフォーマットできる。ピクチャのラインデータがメモリ216から読み出されて、ビデオ画素エンコーダ230に入力されるとき、属性フォーマッタ220は、画像の対応する属性データを属性データエンコーダ222に提供する。その後、属性データ及びビデオ画素データは、チャネルエンコーダ232によって多重化されて、チャネル224A、224Bでビデオプロセッサ236に送られる。
Figure 2009535866
チャネルエンコーダ204は、図4に示されるITU−R勧告BT.656−4によって推奨されているインターフェース信号構造を使用している。各ラインにおいて、ITU−R BT.601−4に順守したストリームから取り出された720の輝度値(Y)302及びクロマ値Cr304、Cb306は、フォーマット308を用いて伝送される。その後、アクティブビデオの終了(EAV)シーケンス322及びアクティブビデオの開始(SAV)シーケンス318は時間基準信号の役割を果たす。これらの時間基準信号間にあるデジタルブランキング間隔320は補助信号を送るために使用される。
図4は、ITU−R勧告BT.1364に順守した補助データパケットのフォーマットタイプ1を例示している。補助データパケット400は、EAV信号322とSAV信号318との間の間隔320にある。8ビット演算において、各ワードは8ビットを有しており、10ビット演算においては、各ワードは10ビットの値を示している。補助データフラグ(ADF)402の後には、データタイプ404、データブロックナンバー406、データカウント408及びユーザデータ410が配置されており、ユーザデータ410の後には、チェックサム412が配置されている。ADF402は、3つのワードから成り、データID404は1ワードである。ITU−R BT.1364において詳述したように、ADFは、16進数の3つのワードシーケンス(00.0、FF.C及びFF.C)から成っている。この表記(例えば、FF.C)において、(10ビットのワードの場合)8つの最も重要なビットは整数部分によって示されており、他の2つのビットは、少数部分によって示されている。従って、ADFシーケンス(00.0、FF.C及びFF.C)の場合、最初のワードのビットは全てゼロに設定されており、次の2つのワードのビットは全て1に設定されている。データブロックナンバー406及びデータカウント408はそれぞれ1ワードを有している。ユーザデータは255ワードである。チェックサム412はエラーを検知するために使用されている。
ユーザ定義プリアンブル422は、転送されるデータがクロマフォーマット、解像度、ピクチャ構造等のうちの1つであることを示している。表1は、属性のプリアンブルのマッピングの単純な例を示している。
ユーザ定義属性コード424は、その後のワードが関係する属性の種類(クロマフォーマット、解像度、ピクチャ構造の種類等)を識別している。次のワード426は、伝送されている特定のデータを示しており、該データは、クロマフォーマット属性に対応するデータであり、4:2:2等である。クロマフォーマット属性コードの後の01.0という値は、例えば、4:2:2のクロマフォーマットが使用されることを示すために使用可能である。クロマフォーマット属性コードの後の02.0という値は、4:4:4の画素のサンプリングフォーマットが使用されることを示すために使用されている。
解像度の情報の場合、比較的多くのワードが使用される。ロケーション424のワード(属性コード)は、その次のワードにおいて解像度情報があることを示している。ロケーション426のワードの値は、表1に示されるような、横方向の解像度或いは縦方向の解像度が特定されるのか否かを示している。解像度の値は、ロケーション428、430で特定されており、ロケーション428、430は、それぞれ、解像度のMSB(most significant bits)及びLSB(least significant bits)を提供する。8ビットの演算であっても、16ビットの値は、2つのワードを使用して記憶可能であり、解像度の実用的な値としては十分である。
無論、上記の符号化スキームは一例に過ぎず、属性を符号化する方法は、他の方法であっても、同様に使用できる。他の種類の属性データも適切に符号化可能である。
補助チャネルを使用して、属性は互いに統合されて各フレームとともに伝送可能である。或いは、該属性は、値に変化があるときに伝送可能としてもよい。対応するロジックは、属性フォーマッタ220の一部を構成する。
ビデオプロセッサ236に送信されるビデオストリームの属性の変化を含むチャネル224Bは、インターフェース規約で定められた補助信号を使用して送られる。補助信号はビデオ信号と同期して送信されるので、デコーダ234との間でITU−R勧告BT.656−4を使用すれば、ビデオ属性データ(クロマフォーマット、解像度等)がビデオ画素データと同期して転送される。ITU−R BT.656−4は、柔軟に補助データをパッケージ化してビデオと同期して提供する。例えば、ITU−R BT656−4は、テレテキストクローズキャプション(teletext close caption)及び類似の情報をビデオ情報とともに送るためにしばしば使用される。補助チャネル224Bは、チャネル224Aで送られるビデオ画素データと時分割多重化されて、ビデオ画素データストリーム内に配置されている横方向のブランキング間隔において送信される。
チャネル224A及びチャネル224Bを送る物理的なリンク224はシリアルリンク又はパラレルリンクである。リンク224は、また、ITU−R BT.656−4に順守する。ITU−R BT.656−4は、データを伝送するための8つの(任意で10の)導体対と、27MHzの同期クロック用の対と、を規定している。インターフェースは、単体のソースと単体のディスティネーションとの単方向接続を提供している。
ビデオプロセッサ236は、チャネルデコーダ240を使用して、バス224で受信したデータストリームを、スケーラ250に供給されるITU−R BT.601−4順守ストリームと、デコーダ242に供給されるITU−R BT.1364順守補助データストリームと、に分離する。図示された実施例においては、スケーラ250は、ビデオデータ入力を受信するためのITU−R BT.601−4順守入力インターフェースを有している。
属性デコーダ/制御ブロック244は、デコーダ242から受信した属性データを復号化して、該ブロック244に接続されているブロック、即ち、スケーラ250と、デインターレーサ252と、カラーコンバータ254と、出力インターフェース256を、処理中の現フレームの属性に対応する適切な制御ビットでプログラムする。
ビデオチャネル224Aと同期属性データチャネル224Bとを使用することによって、スケーラ250、デインターレーサ252、カラーコンバータ254、及び出力インターフェース256をプログラムするのに必要な全ての属性データを、ビデオプロセッサ236内で処理中のフレームと同時に受信することができる。
ビデオシーケンスにおけるフレームの新しい属性又は変更された属性をビデオプロセッサに転送することが遅延した結果として生じたアーティファクトは、属性データと、関連するフレームのビデオデータとが良好に同期することによって、取り除かれる。新しい特性を同期伝送することによって、ビデオプロセッサのパラメータは、その特性の影響を受けるフレームが表示されるときに、調整される。従って、識別されたアーティファクトは取り除かれて、ビデオディスプレイ装置は、増加/減少した解像度、新しいクロマフォーマット等を備えるフレームを絶え間なく表示し続ける。
属性データは、表示される画像と同時に、或いは、表示される画像よりも先にビデオプロセッサ236に供給される。また、提供されるチャネルの性質は、本実施例で使用されるチャネルの性質と異なっていてもよい。例えば、ITU−R BT.1364、ITU−R BT.601−4及びITU−R BT.656−4に順守したストリームを使用する必要はない。ビデオデータと補助データとを同期させて多重化する方法は数多くあり、これらの方法は当業者には明白である。
無論、上記実施例は、本発明の一例として示したに過ぎず、本発明を限定するものではない。本発明の実施例の構成要素の配置、形態、詳細事項、及び動作の順序の変更が可能である。
受信機200の各種機能ブロックは、それぞれ別々の部品として実現してもよく、また、単体の集積回路(IC)として実現してもよい。
他の実施例において、デコーダ234とビデオプロセッサ236との間のインターフェースは、ビデオ画素チャネル224Aに対する接続と、属性データを送るチャネル224Bに対する接続とをそれぞれ物理的に別個にしてもよいが、該チャネル224A、1224Bは、同期するために同一のクロック源を共有する。従って、リンク224は、コンピュータ装置及びコンピュータの周辺装置、ワイヤレストランスミッタ及び受信機、ビデオプレーヤ及びレコーダ等の2つの装置の間にある。従って、リンク224は、電気的なリンク、光学的なリンク或いはワイヤレスリンクを含めた数多くの形態で形成可能である。
本発明は、特許請求の範囲に記載されているように、上記実施例及びその変形例を全て包含している。
従来のビデオ受信機の概略のブロック線図を簡素化した図。 本発明の実施例におけるビデオ受信機の論理ブロック線図。 図2のビデオ受信機の機能ブロック線図。 図2のビデオ受信機においてデコーダからビデオプロセッサにデータを送るために使用される信号のフォーマットのブロック線図。

Claims (18)

  1. ビデオ受信機であって、
    ビデオデコーダと、
    チャネルエンコーダと、
    を備え、
    前記ビデオデコーダは、符号化されたビデオデータストリームを受信して、前記符号化されたビデオデータストリームを画素ストリームと属性データとに復号化し、前記画素ストリームはビデオ画像を表示しており、前記属性データは前記ビデオ画像を記述しており、
    前記チャネルエンコーダは、第1チャネルの前記画素ストリームと第2チャネルの前記属性データとを符号化して、前記第1チャネルと前記第2チャネルとを合成し、もって、画像のビデオ画素と前記画像の属性データとの間で定められた関係が存在することを特徴とするビデオ受信機。
  2. 前記チャネルエンコーダは、前記第1チャネルと前記第2チャネルとを同期させて合成する請求項1に記載のビデオ受信機。
  3. 前記ビデオ受信機は、更に、ビデオプロセッサを備えており、前記ビデオプロセッサは、前記第1チャネルと前記第2チャネルとを受信して前記画素ストリームと前記属性データとを抽出するチャネルデコーダを備えている請求項2に記載のビデオ受信機。
  4. 前記ビデオプロセッサは、ビデオスケーラとカラースペースコンバータとデインターレーサの少なくとも1つを備えている請求項3に記載のビデオ受信機。
  5. 前記チャネルデコーダは、前記属性データを供給するために、前記ビデオスケーラと前記カラースペースコンバータと前記デインターレーサの前記少なくとも1つと通信している請求項4に記載のビデオ受信機。
  6. 前記ビデオデコーダは、ランレングスデコーダ、逆離散コサイン変換ブロック、又は、可変長デコーダを備えている請求項1〜請求項5のいずれかに記載のビデオ受信機。
  7. 前記チャネルエンコーダは、前記属性データを定められたフォーマットに符号化する属性エンコーダを備えている請求項1〜請求項6のいずれかに記載のビデオ受信機。
  8. 前記チャネルエンコーダは、前記第1チャネルと前記第2チャネルとを時分割多重化するマルチプレクサを備えている請求項1に記載のビデオ受信機。
  9. 前記チャネルエンコーダは、ITU−R BT.656−4に順守したエンコーダから成る請求項8に記載のビデオ受信機。
  10. 前記ビデオデコーダと前記ビデオプロセッサとは、前記第1チャネル及び前記第2チャネルを送るシリアルリンク又はパラレルリンクによって接続されている請求項3、請求項4、請求項6及び請求項7のいずれかに記載のビデオ受信機。
  11. 前記画像の前記属性データは、前記画像の前記画素ストリームと同時に伝送される請求項1〜請求項10のいずれかに記載のビデオ受信機。
  12. 圧縮されたビデオビットストリームから映像を表示する方法であって、
    前記圧縮されたビデオビットストリームを復号化して、圧縮解除された画素ストリームとビデオ属性データとを形成する工程と、
    前記画素ストリームを処理してディスプレイ装置に提示するために、前記画素ストリームをビデオプロセッサに転送する工程と、
    前記画素ストリームと前記ビデオ属性データとの間で定められた関係が維持されるように、前記ビデオ属性データを前記ビデオプロセッサに転送する工程と、
    前記ビデオプロセッサにおいて、前記ビデオ属性データを使用してビデオ画像を処理し、処理されたビデオフレームの各々を前記ディスプレイ装置で表示する工程と、
    を含むことを特徴とする方法。
  13. 前記ビデオ属性データは、前記画素ストリームと同期して前記ビデオプロセッサに転送される請求項12に記載の方法。
  14. 前記ビデオ画像を処理する前記工程は、
    前記ビデオ画像をスケーリングする工程と、
    前記画素ストリームを色変換して前記ディスプレイ装置に提示する工程と、
    前記ビデオ属性データに従って前記画素ストリームを選択的にデインターレース処理して前記ディスプレイ装置に提示する工程と、
    の少なくとも1つを含む請求項12又は請求項13に記載の方法。
  15. 前記方法は、更に、前記画素ストリームと前記ビデオ属性データとを時分割多重化する工程を備えている請求項12〜請求項14のいずれかに記載の方法。
  16. 前記画素ストリームを転送する工程及び前記ビデオ属性データを転送する工程は、MPEG−2で符号化されたビットストリームを備えるビデオビットストリームを転送する工程から成る請求項12〜請求項14のいずれかに記載の方法。
  17. 前記圧縮されたビデオビットストリームは、MPEG−1で符号化されたビットストリームを備える請求項12〜請求項16のいずれかに記載の方法。
  18. コンピュータの読み取り可能な媒体であって、
    前記媒体は、プロセッサによって実行可能な指令を記憶しており、
    前記指令は、前記プロセッサと通信するメモリにロードされたとき、前記プロセッサを適用して請求項12〜請求項17のいずれかに記載の方法を実行することを特徴とする媒体。
JP2009504854A 2006-04-13 2007-04-13 ビデオ属性と共にビデオデータを提供するビデオ受信機 Pending JP2009535866A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/402,902 US8548063B2 (en) 2006-04-13 2006-04-13 Video receiver providing video attributes with video data
PCT/IB2007/001115 WO2007119171A2 (en) 2006-04-13 2007-04-13 Video receiver providing video attributes with video data

Publications (1)

Publication Number Publication Date
JP2009535866A true JP2009535866A (ja) 2009-10-01

Family

ID=38609882

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009504854A Pending JP2009535866A (ja) 2006-04-13 2007-04-13 ビデオ属性と共にビデオデータを提供するビデオ受信機

Country Status (5)

Country Link
US (1) US8548063B2 (ja)
EP (1) EP2067352A2 (ja)
JP (1) JP2009535866A (ja)
CN (1) CN101611621B (ja)
WO (1) WO2007119171A2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012151594A (ja) * 2011-01-18 2012-08-09 Canon Inc 映像信号処理装置および映像信号処理方法およびそれを用いた投射型画像表示装置

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011055288A (ja) * 2009-09-02 2011-03-17 Toshiba Corp 可視光通信装置及びデータ受信方法
JP5232319B2 (ja) 2011-10-20 2013-07-10 株式会社東芝 通信装置及び通信方法
TWI447693B (zh) * 2011-12-07 2014-08-01 Orise Technology Co Ltd 用於三角式排列顯示面板之像素資料轉換方法及裝置
TWI428902B (zh) * 2011-12-07 2014-03-01 Orise Technology Co Ltd 用於三角式排列顯示面板之像素資料轉換方法及裝置
JP5390667B2 (ja) * 2012-06-11 2014-01-15 株式会社東芝 映像送信機器及び映像受信機器
WO2014106921A1 (ja) * 2013-01-04 2014-07-10 ソニー株式会社 送信装置、受信装置、送信方法、受信方法、及び送受信システム
GB2583087B (en) * 2019-04-11 2023-01-04 V Nova Int Ltd Decoding a video signal in a video decoder chipset

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2848326B2 (ja) * 1996-03-28 1999-01-20 日本電気株式会社 Mpeg符号化画像復号装置
EP0920212B1 (en) * 1997-11-21 2007-01-17 Matsushita Electric Industrial Co., Ltd. Video signal coding apparatus
US6141062A (en) * 1998-06-01 2000-10-31 Ati Technologies, Inc. Method and apparatus for combining video streams
US7394854B2 (en) * 2000-07-21 2008-07-01 Matsushita Electric Industrial Co., Ltd. Signal transmission system
US7088398B1 (en) * 2001-12-24 2006-08-08 Silicon Image, Inc. Method and apparatus for regenerating a clock for auxiliary data transmitted over a serial link with video data
AU2003290536A1 (en) * 2002-10-23 2004-05-13 Divxnetworks, Inc. Method and system for supercompression of compressed digital video
US7606305B1 (en) * 2003-02-24 2009-10-20 Vixs Systems, Inc. Method and system for transcoding video data
US8879857B2 (en) * 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012151594A (ja) * 2011-01-18 2012-08-09 Canon Inc 映像信号処理装置および映像信号処理方法およびそれを用いた投射型画像表示装置

Also Published As

Publication number Publication date
WO2007119171A2 (en) 2007-10-25
CN101611621A (zh) 2009-12-23
WO2007119171A3 (en) 2009-04-30
US8548063B2 (en) 2013-10-01
US20070262979A1 (en) 2007-11-15
EP2067352A2 (en) 2009-06-10
CN101611621B (zh) 2012-01-25

Similar Documents

Publication Publication Date Title
KR100510207B1 (ko) 복수의 포맷을 가진 비디오 신호들을 처리하기 위한 프로세서 및 그 처리 방법
US8817885B2 (en) Method and apparatus for skipping pictures
KR101056096B1 (ko) 압축 및 압축복원 비디오 비트스트림 모두에 대한 움직임 보상 프레임 레이트 상향 변환을 위한 방법 및 시스템
JP2009535866A (ja) ビデオ属性と共にビデオデータを提供するビデオ受信機
JP2002514363A (ja) イメージ処理システムにおけるピクセルブロック圧縮装置
JPH10224751A (ja) デジタルテレビデータストリームでのvbiデータの通信
US10334277B2 (en) Signaling target display parameters of color remapping information supplemental enhancement information messages
US7379498B2 (en) Reconstructing a compressed still image by transformation to a compressed moving picture image
CN106973295B (zh) 视频编码方法/装置以及视频解码方法/装置
US11445160B2 (en) Image processing device and method for operating image processing device
EP3562165B1 (en) Custom data indicating nominal range of samples of media content
KR100531259B1 (ko) 영상 처리 시스템에서 메모리 효율적인 압축 방법 및 장치
JP2933561B2 (ja) 動画符号変換装置
KR100549208B1 (ko) 메모리 효율적인 이미지 처리 시스템에서의 오버헤드 데이터 프로세서 및 처리 방법
Baron et al. MPEG overview
US6008853A (en) Sub-frame decoder with area dependent update rate for digital camcorder transmission standard
KR20030000309A (ko) 비디오 스냅 영상용 변환 부호화 장치
JP2003179826A (ja) 画像再生表示装置
KR100820019B1 (ko) 모스트 통신에서 화상 압축 장치 및 제어 방법
US7804899B1 (en) System and method for improving transrating of MPEG-2 video
KR20010037712A (ko) Hd급 비디오 디코더를 이용한 sd급 영상의 2화면 디스플레이 장치
Bancroft 2.10. 1 Conventions used in HDTV Standards Documents and this Chapter 2.10. 1.1 60 Hz Temporal Frequency Reference to" 60 Hz" in the context of video temporal frequencies implies the 59.94 Hz frequency arising from