JP2001527351A - 低ノイズ符号化/復号化の装置および方法 - Google Patents
低ノイズ符号化/復号化の装置および方法Info
- Publication number
- JP2001527351A JP2001527351A JP2000526053A JP2000526053A JP2001527351A JP 2001527351 A JP2001527351 A JP 2001527351A JP 2000526053 A JP2000526053 A JP 2000526053A JP 2000526053 A JP2000526053 A JP 2000526053A JP 2001527351 A JP2001527351 A JP 2001527351A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- resolution
- filtering
- relatively low
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 52
- 230000003044 adaptive effect Effects 0.000 claims abstract description 18
- 238000001914 filtration Methods 0.000 claims description 47
- 238000012545 processing Methods 0.000 claims description 11
- 230000004044 response Effects 0.000 claims description 11
- 230000008569 process Effects 0.000 claims description 7
- 230000000750 progressive effect Effects 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 6
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 230000001747 exhibiting effect Effects 0.000 claims 1
- 238000013139 quantization Methods 0.000 description 28
- 238000007906 compression Methods 0.000 description 19
- 230000006835 compression Effects 0.000 description 18
- 239000011159 matrix material Substances 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 9
- 238000012937 correction Methods 0.000 description 8
- 238000005070 sampling Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 238000004737 colorimetric analysis Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- 230000002411 adverse Effects 0.000 description 1
- 230000002742 anti-folding effect Effects 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/16—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/179—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scene or a shot
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/527—Global motion vector estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
- H04N7/012—Conversion between an interlaced and a progressive signal
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Television Systems (AREA)
Abstract
Description
像圧縮に関する。
り提案されたディジタル高精細度テレビジョン(HDTV)の標準を承認して米
国におけるディジタル地上テレビジョン放送への道を開いた。GAのHDTVシ
ステムはMPEG2ビデオ圧縮標準を採用した。詳細については、「インフォメ
ーション・テクノロジィ‐動画および関連するオーディオ情報の一般的符号化:
ビデオ」ISO/IEC13818‐2:1996(E)を参照のこと。現代の
高度なビデオ圧縮方法、例えば、ソース処理、動き評価と圧縮、変換表示と統計
的符号化、を利用して、MPEG圧縮方式は伝送ビットレートを50分の1以上
の率で圧縮することができる。1秒間のフル(full)HD(High De
finition)信号は圧縮前に約10万ビットを必要とする。GAの仕様書
で提案されたように、毎秒60フィールドで1920x1080ピクセル(pi
xel:画素)の画像は、ディジタル放送用に毎秒18メガビットに圧縮される
。
とMPEGビデオ・エンコーダ)から成り、その後に出力バッファが続く。プレ
プロセッサへの入力はRGB形式のアナログ・ビデオである。プレプロセッサ(
pre−processor)は入力信号をディジタル化し、各カラー成分につ
いてガンマ補正を行ない、撮像カメラの非線形応答を補償する。ガンマ補正は、
圧縮された画像、特に画像の暗い部分、に含まれている量子化雑音の可視性を減
少させる。次に、プレプロセッサは、ディジタル化され且つガンマ補正されたR
GBサンプルをSMPTE240M YC1C2カラー・スペース(color
space)に変換する。最後に、その結果生じるクロミナンス成分はサブサ
ンプル(sub−sample)され、4:2:0のディジタル・ビデオ入力信
号を形成する。今述べた仕事に加えて、プレプロセッサは画像の変換も行う。例
えば、ディジタル衛星放送システムで、ビデオ信号は水平方向にライン当り72
0画素からライン当り544画素にデシメート(decimate)され、必要
とされる帯域幅を更に減少させる。このビデオ信号はMPEG2ビデオ・エンコ
ーダに送られる。
間的冗長性をある程度除去することにより、入力ディジタルビデオ信号を圧縮す
る。一般に、圧縮を行うには、上述したようにいくつかの異なる技術を連続的に
利用する。量子化精度を調節することにより、エンコーダは圧縮されたビットス
トリームをアプリケーションで指定されるあらゆるレート(rate)で発生す
ることができる。MPEG2システムにおける量子化は、元の画像情報あるいは
動き評価からの残存情報である、データブロックのDCT(離散コサイン変換)
係数に基づいて行われる。量子化マトリックスをスケーラブル量子化ステップ・
ザイズと組み合わせて使用し、量子化器は送信用の各DCTブロックからDCT
係数のうちほんの小部分(small fraction)だけを選択して量子
化し、その結果、データは著しく減らされる。量子化マトリックスは、DCT係
数の統計的分布とビデオ信号の内容により、フレームをベース(base)とし
て変えることができる。1フレーム内の異なる領域について、マクロブロックの
複雑性に基づき量子化ステップ・サイズをスケーリング(scaling)する
ことにより、各マクロブロック毎に微調整することができる。一定の出力ビット
レートについて、出力バッファはエンコーダで使用される制御信号を供給し、特
定のフレームについて量子化ステップ・サイズを調節し、利用できる帯域幅内で
量子化解像度を最大にする。
れていることが視聴者に気づかれない高周波成分を除去する。残りの低周波成分
は、利用できる帯域幅内で適合するように量子化される。信号に導入される量子
化雑音も、画像の再構成時に視聴者に気づかれないものでなければならない。し
かしながら、実際のシステムでは、送信しようとする情報と利用できる帯域幅に
対する量子化ステップ・サイズとの間にトレードオフ(trade−off)が
なされる。もしシステムが量子化のために係数を十分に低下(drop)させな
ければ、システムは量子化ステップ・サイズを増大させ、その結果、再構成され
た画像にブロック状のアーティファクト(blocky artifact)を
生じる。もし圧縮処理の間に画像があまりにも多くの高周波情報を失うならば、
再構成された画像には他の顕著なエッジ・アーティファクトが含まれる。
f Picture:GOP)内の各フレームには変動する高周波成分が含まれ
る。例えば、Iフレームは、符号化の間、高周波係数がかなり低下され、それに
対し、PフレームとBフレームは、Iフレームで低下されたものに相当する高周
波成分を保持する。高周波情報は、互いを再構成するために使用されたフレーム
間で異なるので、再構成されたGOPにはアーティファクトが含まれれる。
を更に圧縮すれば、表示される画像の質が低下するだけである。トランスポンダ
で一度に送信できる番組は1つだけなので、衛星放送のプロバイダはHD信号を
送信することを好まない。今のところ、2つの番組を同時に1つの衛星チャンネ
ル(例えば、24MHz4‐PSK変調)に適合させるのに十分なだけHD番組
を圧縮すると、視聴者にとって受け入れられない画質となる。したがって、チャ
ンネルの使用が能率的でないので、衛星放送のプロバイダはHDTVを放送する
ことをためらっている。同様に、地上放送のプロバイダは、SD(Standa
rd Definition:標準精細度)番組がいくつか存在できる1つのチ
ャンネルを1つの番組が独占する場合にはHD番組をフルに提供する約束をため
らっている。
別し、元の信号形式を必要に応じて異なる形式に選択的に変換する。変換された
信号は瀘波され、必要に応じて元の形式に再変換される。瀘波された信号は、比
較的低い解像度に変換され、目標のビットレートに圧縮される。最後に、圧縮さ
れた信号は出力データ・チャンネルに送られる。
2次元の(例えば、垂直方向と水平方向の)フィルタを備えている。エンコーダ
と、出力バッファとフィルタはそれぞれ、総合能率を改善するために他の装置で
利用される情報を発生する。このような情報は、例えば、画像の動き、画像のコ
ントラスト、量子化マトリックスの選択、スケール・ファクタの選択、各装置か
らのビットレート、画像のテクスチャ(image texture)などに関
する。この情報は、符号化処理を監督するコントローラによって、あるいは装置
内に在る個々のコントローラによって、装置間に伝達される。
1部分フレームにわたる共通性(commonalty)を識別する。これはそ
の画像グループ、フレームあるいは部分フレームを目標のビットレーレに能率的
に符号化するためにフィルタおよび/またはエンコーダの動作を変更するために
有利に使用することができる。一般に、エンコーダを調節するよりもフィルタを
調節するほうが誘発されるノイズが少ないので、フィルタが調節される。また、
このフィルタは実際には、1組のフィルタであって、必要に応じて、個々のフィ
ルタ係数を調節することにより、最大限の融通性が得られる。これらのフィルタ
は、反折返し(anti‐aliasing)水平低域フィルタ、垂直低域フィ
ルタ、および2次元低域フィルタであって、通常、今挙げた順に配置される。コ
ントローラは受信した情報を現在のフィルタ/エンコーダのセットアップと対照
して評価し、1つまたはそれ以上の支配的な共通性に従って、1つまたはそれ以
上のフィルタの調節および/またはエンコーダの調節を行う。最終結果として、
入力信号はフィルタにより低域瀘波され、これによって一般にエンコーダは、一
様に符号化されているデータの支配的な共通性に関連して、1画像グループ、1
フレーム、または部分フレームにわたり画像を一様に符号化することができる。
り方では存在していたであろうアーティファクトなしに表示される。画像当りフ
レーム1920x1020の画素を有する高精細度信号の場合、水平解像度は、
瀘波以後で且つ符号化前で、ライン当り1280画素に減少され、送信された信
号の帯域幅を更に減少させる。その結果として、僅かなソフトウェアの変更によ
りHD受像機が受信し復号化しそして表示することのできるハイブリッド画像解
像度が生じる。
号は映画検出器20により受信される。検出器20は、受信された信号が、テレ
シネ方式により毎秒24フレームから毎秒30フレームに再フォーマット化され
た映画(フィルム)信号であるかどうか識別する。再フォーマット化された映画
信号は、以下に述べるように、適応形画像プロセッサ22の適正なセクションに
送られる。もし入力信号が再フォーマット化された映画信号でなければ、この信
号は適応形画像プロセッサ22の別のセクションに進む。テレシネ映画信号の識
別は既知の方法で行われる。
エンコーダ24から制御情報を受け取り、画像フレームを瀘波して、エンコーダ
24がその画像フレームを、利用できるビットレートの範囲内にあり且つ顕著な
アーティファクトから免れるように、能率的に符号化できるようにする。プロセ
ッサ22は、平均ビットレートに制約されるMPEG2符号化ビットストリーム
の再構成された画像の質を改善するために必要とされる2つの次元(2‐D:例
えば、水平方向と垂直方向)でこの信号を瀘波する。目標はソースの局所的2‐
D周波数の内容を変更し、画像の鮮鋭度および符号化アーティファクトに関して
、再構成されたMPEG2画像にもっとも害の少ない方法でMPEG2符号化能
率を改善することである。
情報は冗長性のものであるか、あるいは視聴者に目立たないものである。実際上
、望ましいビットレートを達成するために、視聴者に目立つ高周波情報はある程
度除去される。MPEG2符号化の前にプロセッサ22を備えるシステムが発生
する画像は以下に述べるように、プロセッサ22のないシステムよりも優れてい
る。
は、コントローラ28を介して、プロセッサ22と出力バッファ26から画像パ
ラメータを受け取り、利用できるビットレートに従うようMPEG2圧縮を調節
する。圧縮はGA仕様書に記述されているように行れる。エンコーダ24は圧縮
されたデータを出力バッファ26に送る。バッファ26より、圧縮されたデータ
は所定のレートで供給され、トランスポート符号化され変調され、そして既知の
信号処理技術を使用して、送信チャンネルを経由して送信される。変調に先立ち
、圧縮された信号は統計的マルチプレクサに送られ、単一のチャンネルで送信す
るための多数の番組を多重化される。バッファ26以後の信号処理装置はよく知
られているので、図面を簡略化するために、図1に示されていない。
成することができる。図1のシステムは、既知の工業標準に従ってフォーマット
化されたテレビジョン(カメラ)番組と映画(フィルム)番組の両方を受け入れ
るように構成される。1つの一般的な構成は、例えば「発明の背景」で述べたよ
うに、図1のシステムがプレプロセッサからの出力を受け取ることであろう。シ
ステムは、適正なハードウェアおよび/またはソフトウェアを付け加えることに
より、他のタイプのビデオ信号も受け入れるように構成できる。このような構成
は図1を簡略化するために図示されていない。
信号における或る関係の存在を認識する:(タイプ1)毎秒60フィールド飛越
し走査されたソース、(タイプ2)毎秒60フィールド飛越し走査された毎秒3
0フレームの映画、(タイプ3)毎秒60フィールド飛越し走査された毎秒24
フレームの映画、(タイプ4)順次走査されたソース、(タイプ5)毎秒60フ
レーム順次走査された毎秒30フレームの映画、および(タイプ6)毎秒60フ
レーム順次走査された毎秒24フレームの映画。検出は外部からの制御信号(図
示せず)に応答して行われ、あるいは現在の標準精細度(Standard D
efinition:SD)MPEG2エンコーダに使用されているような既知
の技術により行われる。信号形式(フォーマット)の情報は、以下に述べるように
、信号と共に適応形画像プロセッサ22に送られる。また、映画検出器20は、
信号が飛越し走査タイプのものであるかそれとも順次走査タイプのものであるか
を検出し、その情報をプロセッサ22に送る。これらの走査タイプは例示的なも
のであり、プロセッサ22を通して信号が方向づけされるパラメータを定める。
その他のフィールド/フレームレートで実施することもできる。
すいくつかのプログラム可能な機能を遂行する。プロセッサ22は、各フレーム
に作用し、処理されたフレームは最適に符号化され、視聴者に目立つノイズを除
去しまたは大いに減少させる。一般に、プロセッサ22は、変動する空間的2D
(2次元)低域フィルタと見なされる。各画像フレームを空間的にダウン‐サンプ
ル(down−sample)し、信号から選択された2D高周波成分を適応的
に瀘波するからである。この適応的瀘波は、一連のフレームにわたって、単一の
フレームについて、あるいは各画素毎に、調節することができ、処理済みフレー
ムを形成する。
ができる。しかしながら、この実施例では、プロセッサ22はGA仕様書で定め
られるHDデータで動作するようにプログラムされる。これは、画像当り192
0x1080画素かまたは画像当り1280x720画素にすることができる。
GA仕様書によれば、各HD形式は、放送用に毎秒約18メガビットを必要とす
る。説明を簡略化するために、1920x1080形式だけを詳細に説明する。
この説明は、1280x720形式あるいは他のいかなる形式(フォーマット)に
ついても等しく当てはまる。
れる信号形式情報に依り、画像信号はコントローラ28(図1)により飛越し走
査/順次走査変換器221(タイプ1)、デテレシネ装置222(タイプ2、3
)に送られ、あるいは未変更(タイプ4−6)を通って空間的帯域制限低域フィ
ルタ223に送られる。フィルタ223は、装置221と222が信号を処理し
た後で、これらの装置の出力を受け取る。
221はその信号を受信し、その信号を毎秒60フレームの割合で順次フレーム
に変換する。順次フレームは各フレーム内にすべての画像情報を含んでいる。典
型的に、順次走査信号を瀘波しても、飛越し走査信号のフィールド情報を瀘波す
るときに生じるようなアーティファクトを生じない。変換器221は既知の方法
を利用して、飛越しフィールドを順次フレームに変換する。
れた映画の冗長フィールドを除去し、元の順次走査された映画を再構成する。こ
の順次形式により、後に続く垂直低域瀘波は動きのアーティファクトを免れるこ
とができる。もし映画ソース(タイプ2またはタイプ3)の入力がタイプ1のソ
ース(source)として処理されたなら、垂直低域瀘波により、映画ソース
の素材(material)を検出して適正に処理するMPEG2エンコーダの
性能は低下する。符号化能率も低下する。装置222は信号を順次形式に変換し
、冗長フィールド/フレームを除去してから瀘波する。冗長情報は異なって瀘波
されることもあるからである。瀘波する前に冗長情報を除去しないと、この情報
は瀘波後には同じものではなくなり、エンコーダはこの信号をタイプ2/3の信
号として認識しないこともある。そうなれば、エンコーダは、冗長のため除去さ
れたであろう情報を符号化することになる。
ることにより簡略化される。もし装置222が出力として順次フィルム画像を毎
秒24フレームおよび毎秒30フレームの割合で供給するならば、2個の出力ク
ロックおよびサポート回路が必要となる。
する。フィルタ223は、完成した画像フレームとして表されるビデオ情報を期
待している。空間的低域フィルタ223は実際には1組のフィルタである。例え
ば、第1のフィルタは反折り返し水平低域フィルタである。第2のフィルタは垂
直低域フィルタである。最後のフィルタは前述した2D低域フィルタである。各
フィルタ・タップの係数は、図1に見られるように、エンコーダ24とバッファ
26からの制御情報に従って適応的に設定される。順次信号は水平方向に低域瀘
波され、サンプルレート(sample rate)変換器226における後続
のダウン・サンプリング(down sampling)からの折返しを除去す
る。ライン当り1920画素の最終水平出力は、あとで述べるように、ライン当
り1280画素になる。最後の信号内の折返し雑音を除去するために、低域フィ
ルタ223はライン当り640サイクルのカットオフ周波数を有する。装置22
3内に含まれている水平反折返しフィルタは、以下のタップ係数を有する17タ
ップの有限インパルス応答(Finite Impulse Response
:FIR)フィルタである: [f0,f1,...,f15,f16]=[−4,10,0,−30,48,0,
−128,276,680,276,−128,0,48,−30,0,10,
−4]/1024
帯域幅を更に減らすために付加的な垂直低域瀘波を必要とする。MPEG符号化
以前に垂直高周波エネルギを除去することは、受け入れられる総合画質を達成す
るために必要である。最高位相感度の垂直周波数領域が減衰される。垂直カット
オフ周波数はナイキスト周波数の或る端数に設定される。例えば、或るビデオ素
材について適正なカットオフ周波数はHD入力信号のライン周波数の約2分の1
である。1080ライン/画像高さ(l/ph(picture height
))を有するHD信号の場合、これは540(l/ph)のカットオフに相当す
る。この周波数はプログラム可能であり、プログラム可能なカットオフ周波数は
、図1のエンコーダ24およびバッファ26より得られるパラメータからコント
ローラ28によって定められる(すなわち、望ましいビットレート、量子化マト
リックスなど)。装置223内に含まれる垂直低域フィルタは、以下の係数を有
する17タップFIRフィルタである: [f0,f1,...,f15,f16]=[−4,−7,14,28,−27, −81,37,316,472,316,37,−81,−27,28,14,
−7,−4]/1024
かまたはその2倍になる。一般に、垂直低域フィルタは水平反折返しフィルタの
後に続く。
垂直瀘波を行い、それにより一様な垂直解像度を維持する。現在、飛越し走査ビ
デオ信号についてはデシメーションよりも瀘波のほうが好まれる。飛越し走査画
像シークェンスについて垂直ライン解像度を変換することは複雑なハードウェア
とソフトウェアを必要とし、その結果、受像機のコストが高くなる。垂直サンプ
ルレートの変換は、タップの複雑性が増大しそれとナイキスト・サンプリング(
オーバーサンプリングなし)とが相俟って、垂直高周波性能を弱める。現在、受
像機のコストを考慮すると、アーティファクトと符号化ビットレートを低減させ
るために垂直解像度を低下させることは思いとどまらせられる。上述した垂直低
域フィルタの代りに、現在の垂直サンプルレート変換器の技術を使用することに
より、表示画像は著しく劣化される。しかしながら、能率的で且つコスト面で効
果的な垂直サンプルレート変換器を、本発明の原理から離れることなく、ここで
述べた垂直フィルタの代りに使用することができる。
でき、再構成された画像にアーティファクトを発生することなく目標のビットレ
ートを達成するために、もし必要ならば、画素レベルに利用される。一般に、フ
レームに基づく係数の変更で十分である。比較的遅いプロセッサの場合、代りの
方法は、それらのフィルタについていくつかの異なる係数の組を予めプログラム
し、処理されている画像情報について最も適切な組を選択することである。適応
形フィルタの融通性は比較的大きいので、システム全体は、適応形フィルタのな
いシステムと比較して、アーティファクトの少ないデータストリームを発生する
ことができる。
ローラ228は、量子化雑音を著しく導入せずに信号をフレームに基づきエンコ
ーダ24で一様に符号化することができるかどうか確かめる。そうであれば、以
下に述べるように、信号はその形式に依り装置224、225または226に進
む。しかしながら、符号化処理により信号中にノイズおよび/またはアーティフ
ァクトが導入されそうであれば、更に適応形瀘波を行うために信号は装置223
内の2次元低域フィルタに送られる。プロセッサ22、エンコーダ24、および
出力バッファ26(図1)からの制御パラメータによって、コントローラ28(
または装置223内の個別のユニット・コントローラ)は、更なる瀘波が必要か
どうか確かめる。この判定を行うために使用される制御パラメータは、例えば、
動きおよびコントラストの測定値、利用できる量子化テーブル(表)、符号化能
率および現在の目標ビットレートである。
て斜め方向に沿って、画像フレームからの高周波情報を低減させる。人間の目は
斜め方向と比較して、垂直方向と水平方向における高周波ノイズに非常に敏感で
ある。エンコーダ24による一様な量子化を可能にするために斜め方向に高周波
情報を十分に除去すると、その結果、観察できるノイズの少ない、より良質の信
号を生じる。斜めフィルタは、以前のすべての瀘波と同様に、画像フレーム全体
について動作し、プログラム可能である。
マトリックスと両立できる。量子化マトリックスはしばしば、Iフレームの量子
化についてダイヤモンド形のマトリックスを使用する。しかしながら、これらの
マトリックスはしばしばノイズを誘発する。何故ならば、BフレームとPフレー
ムはエンコーダ24内で生じる圧縮/動き補償処理の間、高周波成分を保持する
他のタイプの量子化マトリックスを使用するからである。プロセッサ22のフィ
ルタが各画像フレームから高周波情報を除去してから、MPEG2エンコーダ2
4は、動き評価回路内でI、PおよびBフレームの中へデータを処理する。した
がって、一般に、高周波成分は、IフレームとPおよびBフレームから除去され
る。再構成のとき、画像は通常、MPEG2符号化により生じるアーティファク
トから免れる。
する前に、コントローラ28は信号のパラメータ(例えば、動き、コントラスト
など)を評価し、そして、必要とされる斜め瀘波を含む装置223内のすべての
フィルタの係数設定を確認する。一定のフレームの濾波処理の間、コントローラ
28はプロセッサ22、エンコーダ24およびバッファ26から信号のパラメー
タを監視し、必要に応じて係数を変更し、最小限度のアーティファクト/ノイズ
で目標ビットレートを維持する。各フレームは、最新の信号パラメータの基づい
て瀘波され圧縮のためにエンコーダ24に送られ、それから、後続する情報がフ
ィルタ223の中に入力されると、バッファ26に送られる。
3:2プルダウン装置224に加えられる。装置224は選択されたフレームを
複製して、毎秒30フレームの出力信号を供給する。これは既知の方法で行われ
る。次に、信号は装置224から水平ダウン・サンプリング変換器226に進む
。
号を、順次走査形式から飛越し走査形式に変換する。この変換は既知の方法で行
われる。飛越し形式へ戻る変換がなければ、装置221からの順次フレームレー
トは60Hzなので、その信号の中には2倍の量のデータが含まれる。飛越し走
査された信号は変換器226に加えられる。
ムの割合で順次信号を受け取る。また、装置224と225は、上述のように、
信号を変換器226に供給する。変換器226はHD信号を、選択された伝送形
式にダウン・サンプルする。この形式は標準的な形式である必要はない。望まれ
るいかなる画像比およびフレーム・サイズでもよい。しかしながら、非標準的な
形式は受像機の変更を必要とする。
226はその水平情報をダウン・サンプルし、1280x1080のハイブリッ
ド画素フレーム形式を出力する。GAHDTVと互換性のある受像機は、192
0x1080画素および1280x720画素を含む画像フレームを受信するこ
とができる。したがって、GAと互換性の受像機は、1280画素の水平解像度
および1080画素の垂直解像度をサポートするよう変更される。互換性の受像
機のハードウェアは、垂直解像度の増加に関連して水平画素1280を水平画素
1920にアップ・サンプルする。しかしながら、画像フレーム解像度1280
x1080画素(水平x垂直)を、定められた形式として受信するのにGAに従
う受像機は必要とされずプログラムもされない。ハードウェアはこの解像度を受
信し復号化するために使用できるが、復号化して水平解像度だけを増加させるた
めにサポート用のソフトウェアを付け加えなければならない。ソフトウェアを追
加することは、他の非標準的なフォーマットのために必要とされる新しいハード
ウェアを再設計し且つ追加することに比較して、簡単であり且つ安上りである。
ら、現在の表示技術では、ライン当り1920画素の解像度を表示することはで
きないからである。現在のところ、最良のテレビジョン・モニタが表示できる解
像度はライン当り約1200〜1300画素までにすぎない。したがって、水平
方向の出力解像度をライン当り1280画素に制限することは、画質にほとんど
悪影響を及ぼさない。既存の復号化および復元用の受像機ハードウェアによって
サポートされる表示解像度(1280x1080)を発生することにより、ソフ
トウェアの変更だけが必要なので、受像機製造者のうけるインパクトは最小であ
る。ある種の、例えば衛星放送用の受像機の場合、ソフトウェアの変更は、衛星
リンクを経由して、ダウンロードし且つ遠隔的にインストールすることができる
。これらの受像機では、サービス技術者が関与する必要はない。
リッド形式は有利である。衛星トランスポンダは約24Mビット/秒(Mbps
)のデータストリームを送信する。地上HDTV放送は、18MbpsでのHD
番組を含む19Mbpsまでを、およびその他の情報(例えば、オーディオ、番
組ガイド、条件付きアクセスなど)を、送信することができる。現在の衛星トラ
ンスポンダは各々がせいぜい1つのHDTV番組を送ることができ、これでは利
益が十分にあがらないと衛星番組のプロバイダは主張している。水平フレームの
解像度を1920から1280に低減するだけでは、単一の衛星トランスポンダ
で2つのHD番組を同時に送信するのに十分ではない。プロセッサ22によって
行われる瀘波は、このような2つのHD送信を単一のチャンネルで可能にするの
で有利である。
ス、双曲線など)を有し、各フィルタの瀘波は斜め方向である。1つの可能な形
状、2D双曲線、はこのアプリケーションでは特に有利であり、図3に示すよう
な振幅対周波数特性を有する。調節可能フィルタのカットオフ周波数は通例、画
像グループ、フレームあるいは選択された部分フレームがエンコーダ24により
一様に圧縮されるように設定される。もし必要であれば、付加的な水平および垂
直の高周波情報も瀘波されるが、これは一般に必要とされない。画像の複雑性が
変化するにつれて、あるいは利用できるビットレートが増加するにつれて、斜め
フィルタおよび他の以前のフィルタによって瀘波されるデータの量は減少する。
2Dフィルタは、例えば、各方向において13個のタップ(13x13)を有す
る2次元のFIRとして、あるいは2D無限インパルス応答(Infinite
Impulse Response:IIR)フィルタとして、説明すること
ができる。
13x13タップのフィルタである。 0 0 0 1 -3 5 -5 5 -3 1 0 0 0 0 0 1 -1 -3 9 -11 9 -3 -1 1 0 0 0 1 -1 -4 4 6 -13 6 4 -4 -1 1 0 1 -1 -4 1 14 -13 4 -13 14 1 -4 -1 1 -3 -3 4 14 5 -47 61 -47 5 14 4 -3 -3 5 9 6 -13 -47 -55 193 -55 -47 -13 6 9 5 -5 -11 -13 4 61 193 556 193 61 4 -13 -11 -5 5 9 6 -13 -47 -55 193 -55 -47 -13 6 9 5 -3 -3 4 14 5 -47 61 -47 5 14 4 -3 -3 1 -1 -4 1 14 -13 4 -13 14 1 -4 -1 1 0 1 -1 -4 4 6 -13 6 4 -4 -1 1 0 0 0 1 -1 -3 9 -11 9 -3 -1 1 0 0 0 0 0 1 -3 5 -5 5 -3 1 0 0 0
対称性を呈し、独立した28個の係数を与える。対称的な係数領域は、調節可能
なフィルタを比較的早くセットアップさせることができる。しかしながら、もし
、例えば、瀘波されている画像または領域が画像の一部分において異なる特性を
呈するならば、各八分円は異なることが起こり得る。
動することがある。したがって、プロセッサ22は、以下に述べるように、ビッ
トレートの制約下で良い画質を維持するために、異なる動作パラメータを呈する
。
れるパラメータに依りフィルタを適応的に瀘波するために適応的に変更すること
ができる。例えば、異なる処理のために画像をいくつかの領域に分割するために
画像フレームの変化を利用することができる。支配的なエッジ部は符号化誤差を
その付近においてマスクするので、エッジ部は画像の重要な特徴であり、また画
像領域を定めることができる。肌や空のような、複雑性の低い領域を識別するた
めに比色法が使用される。テクスチャも領域として識別され処理される。テクス
チャは一般にエッジほど重要ではない。テクスチャによって、他の領域よりも多
く瀘波される領域が識別される。また、比較的高い符号化能率を必要とししたが
って比較的瀘波を必要としない、重要な形状や動作を見つけだすために映画的な
構成を使用することができる。一般に、背景は、カメラ光学の被写界深度によっ
て和らげられ、いっそう激しく瀘波される。プロセッサ22による異なる処理の
ために画像の注目される中心部を定めるためにパンおよび走査情報が使用される
。
ロセッサ22が性能を高めるために使用するコントローラ28を介して情報を提
供する。このような情報には、例えば、ビットレートの情報も含まれる。このビ
ットレートの情報には、GOP(1画像グループ)についての平均ビットレート、
フレームのビットレート、およびマクロブロックまたはブロックのビットレート
も含まれる。プロセッサ22の性能を高める他の情報には、離散コサイン変換の
複雑性、使用されている量子化マトリックスのタイプ、および使用されている量
子化マトリックスのステップ・サイズが含まれる。また、プロセッサ22は、そ
の動作を調節して符号化性能を改善するためにコントローラ28を介してエンコ
ーダ24に情報を提供する。
ムの中に形成された後で、例えば、Grand Alliance(GA)の仕
様書に記述されているような既知の方法で受像機に送られる。受像機で完全(f
ull)HD画素解像度にまでアップ‐サンプリング(up−sampling
)が要求される場合を除き、プロセッサ22によって行われる信号処理はGAと
互換性のある受像機内のデコーダにとってトランスペアレントである。
の技術を使用してデータパケットおよび番組情報を再生するために処理される。
上述したハイブリッド形式のHD番組の場合、ディスプレイがフル(full)
HD信号を要求するならば、信号はディスプレイ・プロセッサにおいて水平方向
にアップ・サンプルされる。その画像信号における垂直ラインの数は変更されな
い。これにより、解像度1920x1080のフルHD信号は、高精細度画像再
生装置による表示のために再構成される。画像表示装置がフルHD信号以下のも
のを要求するならば、画像再構成の間、信号は適正にダウンサンプルされてから
、既知の方法で表示される。GAと互換性のある既存の受像機はハイブリッド信
号を再構成できるようにソフトウェアの変更を必要とする。ソフトウェアの変更
により、GA標準化モードに割り当てられた水平/垂直ハードウェアおよびソフ
トウェア処理のルーチンが、入来する信号に対し必要に応じて、独立して選択で
きる。
。ステップ30で、信号形式が識別され、この識別情報がビデオ信号と共に送ら
れる。形式情報は、例えば、信号が元は毎秒24フレーム形式を有する映画から
生じたものであるか、そしてその信号が飛越し走査されたものか順次走査された
ものか、を示す。もしそのビデオ信号が飛越し走査されていれば、ステップ31
で、この信号は毎秒60フレームの割合で順次信号に変換される。もし信号が3
:2プルダウンにより変換されていれば、ステップ32で、冗長フレームが除去
される。もし信号がすでにカメラの順次形式になっていれば、信号はステップ3
4のフィルタに直接進む。ステップ34で、ビデオ信号は空間的に低域瀘波され
る。これには、上述したように、垂直、水平および斜めの瀘波が含まれる。ステ
ップ31で飛越し走査信号から変換された順次信号は、ステップ35で、再び変
換されて順次信号に戻される。ステップ36で、信号は3:2プルダウンを受け
、ステップ32で以前に削除された冗長フレームに取って代る。ステップ30か
ら上記のステップ34へ直接進行しているビデオ信号は、ステップ34からステ
ップ38へ直接進行する。ステップ38で、ステップ34と35と36のうちの
1つからのビデオ信号は、ハイブリッドHD信号の解像度1280x1080に
サブサンプルされ、または希望により、別の出力形式にサブサンプルされる。ス
テップ40で、このハイブリッド信号は、前述のように、MPEG2符号化され
る。ステップ42で、符号化された信号はトランスポート処理され、ステップ4
4で、例えば、RF地上放送チャンネルのような出力チャンネルを介して送信す
るため、必要に応じて、トランスポート信号は変調される。最後に、ステップ4
6で、変調された信号は送信される。ステップ42〜46は既知の方法で行われ
る。
。このフローチャートでは、受信された信号の画像解像度は、上記の1280x
1080ハイブリッドHD信号であると仮定されている。ステップ50で、送信
された信号はチューナで受信され復調される。復調された信号は、ステップ52
でMPEG2復号化され復元される。ステップ54で、信号と共に送られた制御
情報によりビデオ信号の解像度が1画像につき1280x1080画素であると
確認される。Grand Alliance MPEG2プロトコルにより、画
像解像度の情報が、送信された信号と共に供給される。一般に、このハイブリッ
ド信号は、他の規定された解像度と同様に、独特の符号によって識別される。ま
た、ハイブリッド信号は、別の方法で、例えば、送信されたデータのユーザ・デ
ータ内の情報によって明確にされる。ステップ56における表示処理の間に、ハ
イブリッド・ビデオ信号は水平方向に1920x1080フルHD信号にアップ
サンプルされる。ハイブリッド信号は、前述したように、受像機内に存在するハ
ードウェアとソフトウェアに関連して、新しいソフトウェアでアップサンプルさ
れる。最後に、ステップ58で、フルHDビデオ信号は1920x1080ディ
スプレイ上で表示される。ステップ50と52および58では既知の方法を使用
する。
るためにいくつもの構成で利用することができる。特定のシステムの要件に依っ
て、適応的および非適応的オプションが使用できる。これらのオプションのいく
つかについて以下に説明する。
て、すべての画像を一様に処理させることである。別の非適応的方策は、表示画
像の中心が最も興味ある領域であると仮定する。またこれは、画像の周辺は視聴
者にとって比較的興味が少なく且つ重要性も少ないと仮定する。プロセッサ22
のフィルタの係数は、画素の空間的位置の関数であるパラメータによりコントロ
ーラ28によって設定される。
、比色法、またはソース画像に基づき測定される画像の複雑性を使用して、画像
をいくつかの領域に分割することである。プロセッサ22の瀘波特性は異なる領
域について適応的に変更される。
レートとの相違の関数として適応的に変更することである。この場合、単一のパ
ラメータにより、2‐D周波数応答に対するフィルタの係数の遷移を調整する。
ンコーダ24で使用される量子化マトリックスと両立するように設計することで
ある。量子化マトリックスは2‐D形状を有する低域フィルタとして見られる。
この方策では、フィルタの係数値は、量子化マトリックス・ステップ・サイズの
関数である。ステップ・サイズはエンコーダの動作により変更されるので、それ
と対応する変化が、対応するフィルタ係数に対して起こる。
している。このようなシステムは、符号化アーティファクトおよび他のノイズを
削減することによりMPEG2圧縮性能を拡張するために、MPEG2レート制
御に関連して動作するのが好ましい。HDTV展開の多能性と経済性は本発明を
使用することにより改善される。直接衛星放送システム(すなわち、24MHz
4‐PSK)で1つのトランスポンダによって送信されるHD番組の数は、1つ
の番組から2つの番組に、あるいは多数のSD番組を有する1つのHD番組に、
増加される。本発明の原理に従い、6MHzの地上放送チャンネルで多数のSD
番組を有する1つのHD番組を送信できる能力が達成できる。以前、放送局は1
つのチャンネルで1つのHD番組を、あるいは1つのチャンネルで多数のSD番
組を、送信することに制限されていた。
は、データ蓄積システムのような、他の装置にも応用できる。ディジタル・ビデ
オディスク(DVD)のようなシステムで、ビデオ・データは符号化され、後で
再生するために貯えられる。蓄積媒体の有する利用できる蓄積スペースの量は限
られている。もし符号化された番組、映画または他のビデオ・シークェンスが蓄
積媒体上で利用できるスペースの量を超過すると、番組を適合させるための更な
る符号化/圧縮によって、受け入れられないアーティファクトを生じることもあ
る。上述した発明は、番組がディスクにうまく収まるよう番組を比較的低いビッ
トレートに能率的に符号化するために使用することができる。あるいは、多数の
番組が1枚のディスクに収まるようにすることもできる。テープへのディジタル
蓄積でも上述のような利点が得られる。
り方では存在していたであろうアーティファクトなしに表示される。画像当りフ
レーム1920x1080の画素を有する高精細度信号の場合、水平解像度は、
瀘波以後で且つ符号化前で、ライン当り1280画素に減少され、送信された信
号の帯域幅を更に減少させる。その結果として、僅かなソフトウェアの変更によ
りHD受像機が受信し復号化しそして表示することのできるハイブリッド画像解
像度が生じる。
Claims (22)
- 【請求項1】 第1と第2の異なる画像形式をそれぞれ呈する第1と第2の
ビデオ信号を処理する方法であって、前記第1または第2のビデオ信号の存在を
検出するステップを含み、更に A.前記第1のビデオ信号が検出されたときに、 (a)前記第1のビデオ信号を異なる形式に変換して、変換済み信号を発生
するステップと、 (b)前記変換済み信号を瀘波して、瀘波済み信号を発生するステップと、 (c)前記瀘波済み信号を、前記第1の信号の元の形式に再変換して、再変
換済み信号を発生するステップと (d)前記再変換済み信号を比較的低い解像度に変換して、比較的低解像度
の信号を発生するステップと、 (e)前記比較的低解像度の信号を符号化して、符号化済み信号を発生する
ステップと、 (f)前記符号化済み信号を出力チャンネルに運ぶステップと、から成り、 B.前記第2のビデオ信号が検出されたときに、 (g) 前記第2のビデオ信号を瀘波して瀘波済み信号を発生するステップ と、 (h)前記瀘波済み信号を比較的低い解像度に変換して、比較的低解像度の
信号を発生するステップと、 (i)前記比較的低解像度の信号を符号化して、符号化済み信号を発生する
ステップと、 (j)前記符号化済み信号を出力チャンネルに運ぶステップと、から成る前
記ビデオ信号処理方法。 - 【請求項2】 前記第1のビデオ信号が飛越し走査信号であり、且つステッ
プ(a)で前記飛越し走査信号が順次走査信号に変換される、請求項1記載の方
法。 - 【請求項3】 前記第1のビデオ信号がテレシネ・フィルムの信号であり、
且つステップ(a)で前記テレシネ・フィルム信号がデテレシネ信号に変換され
る、請求項1記載の方法。 - 【請求項4】 前記第2のビデオ信号が順次走査信号である、請求項1記載
の方法。 - 【請求項5】 前記瀘波するステップで低域瀘波が行われる、請求項1記載
の方法。 - 【請求項6】 前記瀘波するステップで、2次元瀘波が行われる、請求項5
記載の方法。 - 【請求項7】 前記瀘波するステップで、4グループの画像と1フレームと
1部分フレームのうちの1つに調節される適応的瀘波が得られる、請求項1記載
の方法。 - 【請求項8】 前記瀘波するステップで、時間的に低域瀘波が行われ、前記
信号の特性に応答して瀘波特性を適応的に変化させる、請求項1記載の方法。 - 【請求項9】 前記瀘波するステップで、空間的に低域瀘波が行われ、前記
信号の特性に応答して瀘波特性を適応的に変化させる、請求項1記載の方法。 - 【請求項10】 前記符号化するステップがMPEG2と互換性のある、請
求項1記載の方法。 - 【請求項11】 前記比較的低解像度の信号が毎フレーム1280x102
0データサンプルの解像度を有する、請求項1記載の方法。 - 【請求項12】 前記第1と第2のビデオ信号が毎フレーム1920x10
80データサンプルの解像度を有する高精細度信号である、請求項1記載の方法
。 - 【請求項13】 飛越し走査ビデオ信号とテレシネ・フィルム形式信号の何 れか1つを処理する方法であって、 前記飛越し走査ビデオ信号と前記テレシネ・フィルム信号のうち1つの存在を
検出するステップと、 前記検出された信号を、順次走査信号とデテレシネ信号の何れか1つに変換し
て、変換済み信号を発生する、ステップと、 前記変換済み信号を瀘波して、瀘波済み信号を発生するステップと、 前記瀘波済み信号を、飛越し走査信号とテレシネ信号の何れか1つに再変換し
て、再変換済み信号を発生するステップと、 前記再変換済み信号を比較的低い解像度に変換して、比較的低解像度の信号を
発生するステップと、 前記比較的低解像度の信号を符号化して、符号化済み信号を発生するステップ
と、 前記符号化済み信号を出力チャネルに運ぶステップと、から成る前記方法。 - 【請求項14】 前記瀘波するステップが低域瀘波であり、前記符号化する
ステップがMPEG2符号化である、請求項13記載の方法。 - 【請求項15】 前記比較的低解像度の信号が毎フレーム1280x102
0データサンプルの解像度を有する、請求項13記載の方法。 - 【請求項16】 非テレシネ式順次走査ビデオ信号を処理する方法であって
、 前記検出された信号を瀘波して、瀘波済み信号を発生するステップと、 前記瀘波済み信号を比較的低い解像度に変換し、比較的低解像度の信号を発生
するステップと、 前記比較的低解像度の信号を符号化し符号化済み信号を発生するステップと、 前記符号化済み信号を出力チャンネルに運ぶステップと、から成る前記方法。 - 【請求項17】 前記瀘波するステップが低域瀘波であり、且つ前記符号化
するステップがMPEG2符号化である、請求項16記載の方法。 - 【請求項18】 前記比較的低解像度の信号が毎秒1280x1020デー
タサンプルの解像度を有する、請求項16記載の方法。 - 【請求項19】 高精細度ビデオ信号処理システムにおいて、毎フレーム1
280x1020データサンプルの解像度を含む1つ以上の画像解像度を呈する
、受信されたディジタル・ビデオ信号を処理する方法であって、 前記信号を復号化して、復号化済み信号を発生するステップと、 前記復号化済み信号の画像解像度を確定するステップと、 前記復号化済み信号がライン当り1280サンプルの水平画像解像度を有する
ならば、前記復号化済み信号からの水平情報を異なる解像度に変換して、変換済
み信号を発生するステップと、 前記変換済み信号を出力装置に運ぶステップと、から成る前記方法。 - 【請求項20】 前記変換がアップ・コンバージョンであり、且つ前記異な
る解像度がライン当り1980水平サンプルである、請求項19記載の方法。 - 【請求項21】 前記変換がダウン‐コンバージョンであり、且つ前記異な
る解像度が比較的低い解像度である、請求項19記載の方法。 - 【請求項22】 前記受信されたディジタルビデオ信号がMPEG2と互換
性のある、請求項19記載の方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/US1997/023992 WO1999033273A1 (en) | 1997-12-23 | 1997-12-23 | Low noise encoding and decoding method |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009157518A Division JP4724240B2 (ja) | 2009-07-02 | 2009-07-02 | ビデオ信号を処理する方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2001527351A true JP2001527351A (ja) | 2001-12-25 |
JP2001527351A5 JP2001527351A5 (ja) | 2005-12-22 |
JP4359804B2 JP4359804B2 (ja) | 2009-11-11 |
Family
ID=22262380
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000526053A Expired - Lifetime JP4359804B2 (ja) | 1997-12-23 | 1997-12-23 | ビデオ信号を処理する方法 |
Country Status (8)
Country | Link |
---|---|
EP (1) | EP1040666B1 (ja) |
JP (1) | JP4359804B2 (ja) |
KR (1) | KR100591211B1 (ja) |
AU (1) | AU767848B2 (ja) |
CA (1) | CA2315016C (ja) |
DE (1) | DE69719099T2 (ja) |
HU (1) | HU228608B1 (ja) |
WO (1) | WO1999033273A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006527975A (ja) * | 2003-06-16 | 2006-12-07 | トムソン ライセンシング | 圧縮ビデオの高速チャンネル変更を可能にする復号化方法および装置 |
JP2007005918A (ja) * | 2005-06-21 | 2007-01-11 | Nippon Hoso Kyokai <Nhk> | 圧縮符号化前置処理装置および伸長復号化後置処理装置、並びに、圧縮符号化装置および伸長復号化装置 |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6873368B1 (en) | 1997-12-23 | 2005-03-29 | Thomson Licensing Sa. | Low noise encoding and decoding method |
KR100987770B1 (ko) * | 2003-12-16 | 2010-10-13 | 삼성전자주식회사 | 비월 주사 영상 신호의 필드간 장면 전환시의 화면 깨짐현상을 최소화한 ipc 시스템 |
JP2009500941A (ja) | 2005-07-08 | 2009-01-08 | エルジー エレクトロニクス インコーポレイティド | 情報を圧縮/圧縮解除するためにビデオ信号のコーディング情報をモデリングする方法 |
KR101154999B1 (ko) | 2005-07-08 | 2012-07-09 | 엘지전자 주식회사 | 영상 신호의 코딩정보를 압축/해제하기 위해 모델링하는 방법 |
US7894523B2 (en) | 2005-09-05 | 2011-02-22 | Lg Electronics Inc. | Method for modeling coding information of a video signal for compressing/decompressing coding information |
MY152568A (en) | 2005-10-12 | 2014-10-31 | Thomson Licensing | Region of interest h.264 scalable video coding |
US8369417B2 (en) | 2006-05-19 | 2013-02-05 | The Hong Kong University Of Science And Technology | Optimal denoising for video coding |
US8831111B2 (en) | 2006-05-19 | 2014-09-09 | The Hong Kong University Of Science And Technology | Decoding with embedded denoising |
EP1879399A1 (en) | 2006-07-12 | 2008-01-16 | THOMSON Licensing | Method for deriving motion data for high resolution pictures from motion data of low resolution pictures and coding and decoding devices implementing said method |
US20140072058A1 (en) | 2010-03-05 | 2014-03-13 | Thomson Licensing | Coding systems |
WO2008130500A2 (en) | 2007-04-18 | 2008-10-30 | Thomson Licensing | Coding systems |
US8339512B2 (en) * | 2009-03-05 | 2012-12-25 | Sony Corporation | Method and apparatus for enhancement of high-definition video content |
WO2011090798A1 (en) | 2010-01-22 | 2011-07-28 | Thomson Licensing | Data pruning for video compression using example-based super-resolution |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5049993A (en) * | 1990-10-03 | 1991-09-17 | Bell Communications Research, Inc. | Format conversion preprocessing method and circuit |
DE69206833T2 (de) * | 1991-02-08 | 1996-08-29 | Grass Valley Group | Gerät mit progressiver Abtastung zur Erzeugung von Fernseh-Spezialeffekten und zugehörendes Verfahren |
JPH06153069A (ja) * | 1992-10-30 | 1994-05-31 | Sony Corp | 画像の変換装置、複製装置、再生装置、および表示装置 |
US5253059A (en) * | 1992-05-15 | 1993-10-12 | Bell Communications Research, Inc. | Method and circuit for adjusting the size of a video frame |
US5828786A (en) * | 1993-12-02 | 1998-10-27 | General Instrument Corporation | Analyzer and methods for detecting and processing video data types in a video data stream |
JP2947400B2 (ja) * | 1994-05-31 | 1999-09-13 | 日本ビクター株式会社 | フレーム周波数変換装置 |
US5734419A (en) * | 1994-10-21 | 1998-03-31 | Lucent Technologies Inc. | Method of encoder control |
GB9504307D0 (en) * | 1995-03-03 | 1995-04-19 | Philips Electronics Uk Ltd | Video image processing |
US5530484A (en) * | 1995-05-19 | 1996-06-25 | Thomson Multimedia S.A | Image scanning format converter suitable for a high definition television system |
GB9607645D0 (en) * | 1996-04-12 | 1996-06-12 | Snell & Wilcox Ltd | Processing of video signals prior to compression |
-
1997
- 1997-12-23 WO PCT/US1997/023992 patent/WO1999033273A1/en not_active Application Discontinuation
- 1997-12-23 AU AU58083/98A patent/AU767848B2/en not_active Expired
- 1997-12-23 CA CA2315016A patent/CA2315016C/en not_active Expired - Lifetime
- 1997-12-23 EP EP97954261A patent/EP1040666B1/en not_active Expired - Lifetime
- 1997-12-23 DE DE69719099T patent/DE69719099T2/de not_active Expired - Lifetime
- 1997-12-23 KR KR1020007005882A patent/KR100591211B1/ko not_active IP Right Cessation
- 1997-12-23 JP JP2000526053A patent/JP4359804B2/ja not_active Expired - Lifetime
- 1997-12-23 HU HU0100443A patent/HU228608B1/hu unknown
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006527975A (ja) * | 2003-06-16 | 2006-12-07 | トムソン ライセンシング | 圧縮ビデオの高速チャンネル変更を可能にする復号化方法および装置 |
JP4789265B2 (ja) * | 2003-06-16 | 2011-10-12 | トムソン ライセンシング | 圧縮ビデオの高速チャンネル変更を可能にする復号化方法および装置 |
US9161033B2 (en) | 2003-06-16 | 2015-10-13 | Thomson Licensing | Decoding method and apparatus enabling fast channel change of compressed video |
US10511849B2 (en) | 2003-06-16 | 2019-12-17 | Interdigital Vc Holdings, Inc. | Decoding method and apparatus enabling fast channel change of compressed video |
JP2007005918A (ja) * | 2005-06-21 | 2007-01-11 | Nippon Hoso Kyokai <Nhk> | 圧縮符号化前置処理装置および伸長復号化後置処理装置、並びに、圧縮符号化装置および伸長復号化装置 |
Also Published As
Publication number | Publication date |
---|---|
AU767848B2 (en) | 2003-11-27 |
CA2315016A1 (en) | 1999-07-01 |
JP4359804B2 (ja) | 2009-11-11 |
WO1999033273A1 (en) | 1999-07-01 |
KR20010032606A (ko) | 2001-04-25 |
DE69719099T2 (de) | 2003-09-11 |
HU228608B1 (en) | 2013-04-29 |
AU5808398A (en) | 1999-07-12 |
CA2315016C (en) | 2011-10-04 |
EP1040666A1 (en) | 2000-10-04 |
KR100591211B1 (ko) | 2006-06-19 |
DE69719099D1 (de) | 2003-03-20 |
HUP0100443A3 (en) | 2002-12-28 |
EP1040666B1 (en) | 2003-02-12 |
HUP0100443A2 (hu) | 2001-06-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6873368B1 (en) | Low noise encoding and decoding method | |
RU2201654C2 (ru) | Способ низкошумового кодирования и декодирования | |
US6249547B1 (en) | Methods and apparatus for decoding high definition and standard definition digital video images using a single decoder apparatus | |
US5825424A (en) | MPEG system which decompresses and recompresses image data before storing image data in a memory and in accordance with a resolution of a display device | |
US5818530A (en) | MPEG compatible decoder including a dual stage data reduction network | |
JP4359804B2 (ja) | ビデオ信号を処理する方法 | |
WO1990009081A1 (en) | A receiver-compatible enhanced definition television system | |
CA2150467C (en) | Picture-in-picture tv with insertion of a mean only frame into a full size frame | |
US6345388B1 (en) | Method and apparatus for transmitting and receiving television signal | |
US20020186769A1 (en) | System and method for transcoding | |
US6192188B1 (en) | Programmable audio/video encoding system capable of downloading compression software from DVD disk | |
JPH08331543A (ja) | ディジタルテレビジョン放送システム | |
US6898245B2 (en) | Low complexity video decoding | |
CN1133327C (zh) | 低噪声编码解码装置和方法 | |
US6321026B1 (en) | Recordable DVD disk with video compression software included in a read-only sector | |
EP1239679A2 (en) | Low noise encoding and decoding apparatus and method | |
AU2003248178B2 (en) | Low noise encoding and decoding apparatus and method | |
JP4724240B2 (ja) | ビデオ信号を処理する方法 | |
KR100647202B1 (ko) | 저잡음 엔코딩 및 디코딩 방법 | |
MXPA00006182A (en) | Low noise encoding and decoding method | |
PL185157B1 (pl) | Sposób przetwarzania formatu sygnałów wizyjnych | |
Reimers et al. | JPEG and MPEG Source Coding of Video Signals |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20041210 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20041210 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20060728 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20060810 |
|
A072 | Dismissal of procedure [no reply to invitation to correct request for examination] |
Free format text: JAPANESE INTERMEDIATE CODE: A073 Effective date: 20061003 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20061120 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070529 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20070823 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20070830 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071121 |
|
RD05 | Notification of revocation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7425 Effective date: 20080319 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20080415 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090106 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20090330 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20090406 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090701 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090729 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090729 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120821 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120821 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130821 Year of fee payment: 4 |
|
EXPY | Cancellation because of completion of term |