JP5010099B2 - ダイナミック偽輪郭効果の補償を改善したビデオ画像の処理方法およびビデオ画像の処理装置 - Google Patents

ダイナミック偽輪郭効果の補償を改善したビデオ画像の処理方法およびビデオ画像の処理装置 Download PDF

Info

Publication number
JP5010099B2
JP5010099B2 JP2004516777A JP2004516777A JP5010099B2 JP 5010099 B2 JP5010099 B2 JP 5010099B2 JP 2004516777 A JP2004516777 A JP 2004516777A JP 2004516777 A JP2004516777 A JP 2004516777A JP 5010099 B2 JP5010099 B2 JP 5010099B2
Authority
JP
Japan
Prior art keywords
video
image
noise
subfield
motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004516777A
Other languages
English (en)
Other versions
JP2005531799A (ja
JP2005531799A5 (ja
Inventor
ヴァイトブルッフ セバスティアン
テボールト セドリック
コレア カルロス
ドーザー インゴ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of JP2005531799A publication Critical patent/JP2005531799A/ja
Publication of JP2005531799A5 publication Critical patent/JP2005531799A5/ja
Application granted granted Critical
Publication of JP5010099B2 publication Critical patent/JP5010099B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/223Analysis of motion using block-matching
    • G06T7/231Analysis of motion using block-matching using full search
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2007Display of intermediate tones
    • G09G3/2018Display of intermediate tones by time modulation using two or more time intervals
    • G09G3/2022Display of intermediate tones by time modulation using two or more time intervals using sub-frames
    • G09G3/2029Display of intermediate tones by time modulation using two or more time intervals using sub-frames the sub-frames having non-binary weights
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2007Display of intermediate tones
    • G09G3/2044Display of intermediate tones using dithering
    • G09G3/2051Display of intermediate tones using dithering with use of a spatial dither pattern
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/21Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
    • H04N5/213Circuitry for suppressing or minimising impulsive noise
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0261Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/02Improving the quality of display appearance
    • G09G2320/0266Reduction of sub-frame artefacts
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/28Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using luminous gas-discharge panels, e.g. plasma panels

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Control Of Gas Discharge Display Tubes (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Description

本発明は、ビデオ画像の処理方法、特に光放出をパルス幅変調(PWM)する方式のマトリクス状のディスプレイ画面において、ダイナミック偽輪郭効果の補償を改善する方法に関する。本発明はさらにこの方法を実施する装置にも関する。本発明はプラズマディスプレイパネルPDPに関連しているが、ディジタルマイクロミラーデバイスDMDなどのPWM方式の他のディスプレイにも適用可能である。
本発明の背景
プラズマディスプレイパネルは以前から知られているが、近年大きくTVメーカの関心を引くようになってきている。実際に、最近の技術によれば、大画面で薄型、しかもビューアングルの制限のないフラットカラーパネルが得られるようになった。こうしたディスプレイのサイズは従来のCRT画像管で達成されてきたものに比べて格段に大きくすることができる。
欧州の最新世代のTV機器についていえば、画像品質を改善するための種々の手段が模索されている。ここには、プラズマディスプレイ技術などの新技術で製造されるTV機器は従前の技術によるTV機器よりも格段に良好な画質を提供しなければならないという強い要求がある。一方ではプラズマディスプレイ技術は魅力的な厚さに対してほとんど無限の画面サイズの可能性を提供するが、他方では画質を低減させてしまう新たな種類のアーティファクトを発生させる。こうしたアーティファクトの多くは従来のCRT画像管で発生する既知のアーティファクトとは異なっている。これらのアーティファクトは、よく知られた従来のアーティファクトとは異なっているため視聴者の眼につきやすい。
本発明は“ダイナミック偽輪郭効果”と称される新しいアーティファクトを扱う。これはマトリクス状の画面の上を観察点が動くとき、グレーレベルおよび色の障害に相応して、画像内の色エッジのゴーストの形態で現れる。この種のアーティファクトは、画像が例えば(顔や腕の表示などで)人間の肌を表現するために滑らかなグラデーションを有する場合に強められる。また、観察者が頭をふったりして視覚認知に依存する誤差が眼の網膜に生じたときには静止画像でも同様の問題が発生する。
偽輪郭効果を低減または消去するための幾つかのアプローチが提案されている。偽輪郭効果はプラズマ技術のサブフィールド編成に直接に関連するので、これらのアプローチのほとんどはプラズマディスプレイパネルのサブフィールド編成を最適化しようとしている。サブフィールド編成については後述するが、ここでは8以上の照明サブ期間で8ビットグレーレベルの分解を行うことであると理解されたい。
Pioneer社で提案されているアプローチではコード内にホールのない連続サブフィールドを用いる。ただしグレーレベル数をサブフィールド数にまで低減することにより、画質もダメージを受ける。
ダイナミック偽輪郭効果を補償する別のアプローチとして、本出願人による欧州出願第01250158.1号明細書の手法が上げられる。この手法は重心符号化に基づいており、ビデオレベルの進行とともに照明の重心も進行するサブフィールドシーケンスのみを用いる。これはディザによって回復されるビデオレベルを低減することにより達成される。こうした符号化は動きのシーケンスに適しているが、ディザノイズがあるため静止画像または動きのない画像では効率が悪い。
本発明の概要
本発明の課題は動きおよびノイズに関する画像の活性に依存して符号化の選択を最適化する新しい手法を提案することである。
本発明は、ディスプレイ機器での表示のためにビデオ画像を処理する方法に関する。ディスプレイ機器は画像のピクセルに相応する複数の輝度エレメントを有しており、ビデオフレームまたはビデオフィールドの時間が2以上のN個のサブフィールドSFに分割され、そのあいだ輝度エレメントはnビットのサブフィールドコードワードに相応する小さいパルスで光放出のために活性化される。このサブフィールドコードワードはピクセルを照明するp個の可能なビデオレベルを符号化するために用いられる。ここで本発明の方法は画像が静止画像であるか動画像であるかを判別するステップと、静止画像である場合、動きの検出されない画像に適合化された第1のサブフィールド符号化法を用いてビデオ画像を処理するステップと、動画像である場合、動きの検出される画像に適合化された、ダイナミック偽輪郭効果を低減する第2の符号化法を用いてビデオ画像を処理するステップとを有する。
有利な実施形態によれば、第1のサブフィールド符号化法はnビットのビデオレベルがn個以上の照明サブ期間または照明サブフィールドに分解される標準符号化法であり、第2のサブフィールド符号化法はp個の可能なビデオレベルのセットのうちm個(n<m<p)のビデオレベルのサブセットが選択される符号化法である。値mは、サブフィールドコードワードに相応する光形成の時間的重心が、第1の限界値以下の低いレベルおよび/または第2の限界値以上の高いレベルを除いて、ビデオレベルに対して連続的に増大するという規則にしたがって選択される。
この場合、光形成の時間的重心は式
によって定義される。ここでsfWはi番目のサブフィールドのウェイトであり、δはi番目のサブフィールドが活性化されているならば1,活性化されていないならば0であり、sfCGはi番目のサブフィールドの光形成に対する時間的重心である。
さらに、サブフィールドが固有数を有し、かつ色成分値に対して固有の一連のウェイトを有するようにサブフィールドが編成されている場合、1つ以上の相応のサブフィールドコードワードが存在し、可能なサブフィールドコードワードのセットは、サブフィールドコードワード内で各ビットのウェイトがサイズに応じて順序付けられているとき最小バイナリ値を有する各ビデオレベルに対して当該のサブフィールドコードワードを取り出すことにより低減される。
また、低減されたサブフィールドコードワードのセットからのビデオレベルの選択は、最上位ビットMSB側に同じラジカルを有するサブフィールドコードワードの各グループの1つのビデオレベル、すなわち、サブフィールドコードワードの次に高いグループに属し、先行して選択されたビデオレベルの重心を超える最小の重心を有するビデオレベルを取り出すことによって行われる。ここでサブフィールドコードワードの次に高いグループが先行の重心よりも小さい重心を有するサブフィールドを有さない場合、さらに次の高さのグループが次のビデオレベルを選択するために選択され、これが続けられる。
本発明の別の実施形態によれば、まず、静止画像および動画像がノイズ画像であるかノイズなし画像であるかを判別し、ノイズ画像に対してはアダプティブノイズディザを、またノイズなし画像に対してはノイズフリーディザを使用する。アダプティブノイズディザは例えばR.W.Floyd and I.Steinberg, "Adaptive algorithm for spatial gray scale", SID Int. Symp. Dig. Tech. Papers., 1975, pp36-37に記載されているエラー拡散アルゴリズムである。ノイズフリーディザは例えば本出願人による欧州出願第00250099.9号明細書または欧州出願第01250199.5号明細書に記載されている3Dディザである。
本発明の別の実施形態によれば、動き情報が例えばビデオICを介してすでに得られている場合、第1のサブフィールド符号化法と第2のサブフィールド符号化法との切り換え判別は次のアルゴリズムにしたがった動き検出の観点で行われる。すなわち
各フレームに対して
MOTIONがNならばMOTION‐COUNTER=2×MOTION‐LIMIT
MOTIONがOFFならばMOTION‐COUNTER=MOTION‐COUNTER−1
MOTION‐COUNTER<MOTION‐LIMITのときには第1のサブフィールド符号化法が活性化され、そうでないときには第2のサブフィールド符号化法が維持され、
MOTION‐COUNTERは0から2×MOTION‐LIMITまで計数することができ、
MOTION‐COUNTER<0のときMOTION‐COUNTER=0
となる。
同様に、アダプティブノイズディザとノイズフリーディザとの切り換えの判別は次のアルゴリズムにしたがって行われる。すなわち、
各フレームに対して
NOISEがONならばNOISE‐COUNTER=NOISE‐COUNTER+1
NOISEがOFFならばNOISE‐COUNTER=NOISE‐COUNTER−1
NOISE‐COUNTER>NOISE‐LIMITのときアダプティブノイズディザが活性化され、そうでないときにはノイズフリーディザが使用され、
NOISE‐COUNTERは0から2×NOISE‐LIMITまで計数することができ、
NOISE‐COUNTER<0ならばNOISE‐COUNTER=0
NOISE‐COUNTER>2×NOISE‐LIMITならばNOISE‐COUNTER=2×NOISE‐LIMIT
となる。
本発明の別の実施形態では、例えば動き情報が得られていない場合、動き検出が次の方法によって行われる。すなわち、M個の検出領域Z(i,j)へ画像を分割し、各検出領域Z(i,j)に対して領域内容のヒストグラムを計算し、各領域について計算されたヒストグラムと先行の画像の相応のヒストグラムとを比較し、差が所定の範囲を超える場合にはMOTIONをONとする。
この実施形態によれば、領域のヒストグラムはそれぞれ下方ビデオ境界および上方ビデオ境界による個別の領域の個数を選択して定義される。
次のアルゴリズムは画像内の動きを検出するためにインプリメントされる。
このアルゴリズムはきわめてシンプルであるという利点を有する。特別なフレームメモリは必要ない。なぜなら僅かなビットで表されるヒストグラムのみを記憶すればよいからである。
本発明のさらに別の実施形態によれば、ノイズ検出は2つの連続線A(i),B(i)を比較する次の方法を用いて行うこともできる。すなわち、画像を2つの連続線から取り出されたN個のピクセルのセットから成るセグメントLへ分割し、セグメントLに対するノイズ推定値を
にしたがって計算し、画像全体に対するノイズ推定値をノイズ推定値の最小値として、すなわちNoise=min(Noise(L))として定義し、この値と閾値とを比較してNOISEがONであるかOFFであるかを判別する。
本発明の別の実施形態では、ノイズ検出は次の方法にしたがって行われる。すなわち、
画像のブランキング領域内にm個のピクセル×l(エル)本の線から成るn’個の領域Reg(n’)を定義し、各領域の平均値を式

にしたがって計算し、ここでi,jは各領域のピクセルの水平位置および垂直位置を表し
ており、各領域について平均2乗誤差を
にしたがって計算し、画像全体の最終的なノイズを推定する。
本発明の別の実施形態によれば、最終的なノイズの推定は種々の平均2乗誤差MSE(n’)ヒストグラム表現を用いて行われる。このヒストグラム表現では最小値がディジタル画像内の最小誤差、すなわちMSEmin=1/12によって定義されている。なぜなら
だからである。ここでxはダイナミック誤差のうち積分された2乗誤差を表しており、ダイナミック誤差は1の定量化により[−1/2;1/2]となる。ヒストグラムの水平軸上ではMSE×12のドメインを表す種々のセグメントが選択される。垂直軸上では各ドメインの出現が
のように計算される。こうしてヒストグラムの出現のなかの最高値が選択され、画像全体のMSEが定量化される。NOISE‐LIMITに応じて、MSE>NOISE‐LIMITならばNOISE=ON、そうでないならばNOISE=OFFとなる。
本発明の別の実施形態によれば、ノイズは次のステップを用いて判別される。すなわち、各画像を小さなブロックBlock(n)へ分割し、各ブロックに対して平均2乗誤差の推定を
のように行い、ここでtは現時点のフレームを表しており、t−1は先行フレームを表しており、i,jは各ピクセルの水平位置および垂直位置を表しており、ノイズレベルを全ブロックBlock(n)に対する最小MSE(n)として定義し、MSE(n)とMOTION‐BLOCKの値とを比較し、MSE(n)≧MOTION‐BLOCKならばMOTION‐COUNTERを増大し、MOTION‐COUNTERは各フレームの開始時にイニシャライズされ、MOTION‐COUNTER≧MOTION‐LIMITのときにはMOTION=ON、そうでないときにはMOTION=OFFとする。
本発明の別の実施形態によれば、フレームメモリを用いて次の方法が実行される。すなわち、現時点でのフレームtを小さなブロックBlock(n)へ分割し、先行フレームt−1のサーチエリアの相応のブロックごとに平均2乗誤差を
のように計算し、ここでNはBlock(n)のサイズを表しており、サーチエリア(δx,δy)の各位置に対してBlock(n)の最小MSEを計算し、ノイズ推定のためにMSEmin(n)=minδx,δy(MSE(δx,δy))を選択し、MSEmin(n)が(δx,δy)=(0,0)に対して与えられているならばMOTION(n)=1、そうでないならばMOTION(n)=0とし、MSEmin(n)を用いてノイズ推定のために誤差のヒストグラムを計算し、
の値を計算し、この値とMOTION‐LIMITとを比較し、MOTION‐SUM≧MOTION‐LIMITならばMOTION=ON、そうでないならばMOTION=OFFとする。
図面
本発明の実施例を図示し、以下に詳細に説明する。
図1には標準的なサブフィールド符号化の原理が示されている。図2には偽輪郭効果の説明が示されている。図3には図2のケースで2つのフレームを表示するときのダークエッジのアピアランスが示されている。図4には光形成の時間的重心が示されている(ただしこれはビデオレベルに対して単調に増加してはいない)。図5にはサブフィールドの編成内でのサブフィールドの重心の時間的位置が示されている。図6には時間的重心とビデオレベルとの関係の曲線における重心の変化特性が示されている。図7には時間的重心とビデオレベルとの座標系において、選択されたポイントに対して単調に増大する曲線と、サブフィールド符号化のために選択されたポイントのサブセットとが示されている。図8には本発明の有利な実施例での判別のコンセプトが示されている。図9には本発明で使用される動き検出アルゴリズムが示されている。図10には本発明で使用されるノイズ検出アルゴリズムが示されている。図11には動き情報およびノイズ情報がフロントエンドICから得られたときの本発明のインプリメンテーションがブロック図で示されている。図12には本発明の別の実施例のインプリメンテーションがブロック図で示されている。図13には動きおよび/またはノイズに関する外部情報が得られないときに検出領域で画像を分割する様子が示されている。図14には領域の内容ヒストグラム表現が示されている。図15にはノイズ検出のための画像のセグメント化の様子が示されている。図16にはセグメント化のインプリメンテーションの種々の手段が示されている。図17にはプラズマパネルへ送信される典型的な画像が示されている。図18にはノイズ検出アルゴリズムで使用されるヒストグラムが示されている。図19には図13〜図18のアルゴリズムを用いて動きおよび/またはノイズの情報が判別されたときの本発明のインプリメンテーションがブロック図で示されている。図20にはブロックマッチングに基づく動きおよび/またはノイズの判別の新しいコンセプトが示されている。図21には図20のコンセプトのインプリメンテーションがブロック図で示されている。
実施例の説明
本発明は光放出のPWM変調を用いたマトリクス状のディスプレイ画面(例えばプラズマディスプレイパネル)での偽輪郭効果の補償方法に関する。本発明の方法によれば、動きが検出されない場合には第1のサブフィールド符号化法、特に標準的な符号化法が使用され、動きが検出される場合には第2のサブフィールド符号化法が使用される。
周知のようにプラズマディスプレイパネルPDPは放電セルのマトリクスアレイを使用している。この場合、グレーレベルは光放出をアナログ制御しても表現できず、PDPは各セルのパルス幅変調PWMによって、すなわちフレーム期間あたりの光パルス数を変調することによってグレーレベルを制御する。この時間変調は人間の眼では眼の時間応答に相応する期間にわたって統合される。標準的な符号化スキーマ、例えば(8ビットビデオレベルデータワードの場合)8個のサブフィールドの最小値が1フレーム期間に対するサブフィールド編成内で用いられる。8個のサブフィールド符号化法の組み合わせにより、256個の異なるビデオレベルを形成することができる。このアドレシングスキーマは図1に示されている。図1では色成分ごとの各ビデオレベルは
1/2/4/8/16/32/64/128
のウェイトを有する8ビットの組み合わせによって表される。
PDP技術による符号化を実現するために、フレーム期間はサブフィールドと称される8個の照明期間に分割され、これはそれぞれサブフィールドコードワードの1bitに相応する。ビット“2”の光パルス数はビット“1”の光パルス数の2倍である。したがって上述のように、8個のサブ期間を組み合わせれば256個のグレーレベルを形成することができる。
しかし、この標準的な方法では、サブフィールド編成に応じた光放出パターンがグレーレベルおよび色の障害に相応して新たな範疇の画質のデグラデーションを引き起こすという問題が生じる。この障害はダイナミック偽輪郭と称されており、PDP画面上の観察点が動くとき、画像の色エッジのアピアランスに相応に生じる。これは肌の表示などの均一な領域内に強い輪郭線が見えるような印象を観察者に与える。こうしたデグラデーションは、画像が滑らかなグラデーションを有するとき、また光放出期間が数msを越えるときに強められる。暗いシーンではこの効果は平均的なグレーレベル(例えば輝度値32〜223)を有するシーンにおいてほどは障害とはならない。さらに観察者が頭をふったときには静止画像においても同様の問題が発生するので、この誤差は人間の視覚認知力に依存すると結論されることがある。動画像の視覚認知の基本的な機構を良く理解するために、簡単なケースを考察してみよう。輝度レベル128〜127の遷移がビデオフレームあたり5ピクセルの速さで行われ、眼がこの動きを追うケースを検討する。
図2には濃い影の付けられた輝度レベル128のエリアと、それよりは薄い影の付けられた輝度レベル127のエリアが示されている。図1のサブフィールド編成がこれらの輝度レベル128,127の形成に使用されており、このことが図2の右方に示されている。図2の3本の平行線は眼が動きを追う方向を表している。エリアの境界を表す2本の外側線の箇所に誤り信号が認められる。これらのあいだに眼は輝度の欠落を認め、相応のエリア内に暗いエッジが見えるように感じる。このことは図2の下方に示されている。輝度の欠落がエリア内に認められるというこの効果は、眼が光を受け取っていた点から動いたとき、1個のピクセルの全ての照明期間を統合できないために生じる。つまり観察点が動くと、光パルスの一部しか統合されないのである。したがって相応の輝度が欠落し、暗いエッジが発生してしまう。
図3の左方には、図2のような動画像を観察しているときの眼の細胞の特性を表す曲線が示されている。眼の細胞は水平遷移から充分な距離を有しており、相応のピクセルからの光を充分に統合している。遷移の近傍にある細胞のみが同じ画像からの充分な光を統合できない。グレースケールの場合にはこの効果は人工的な白エッジまたは黒エッジの出現に相応する。カラー画像の場合にはこの効果は種々の色成分とは無関係に発生し、肌などの均一なはずのエリアに色エッジが出現したように見える。カラーTVPDPでは同じ現象が3つの色成分RGBに発生するが、カラーレベルおよびサブフィールドでの符号化に依存して強度が異なってくる。このため画像上に色エッジが出現したように見え、不自然で不快な感じを与える。さらに、この効果がシャープな遷移のケースで、例えば白のビデオレベルから黒のビデオレベルへの遷移で発生すると、蛍光遅延効果に結びついて、動いているオブジェクトのシャープネスに強いデグラデーションが生じる。動画像の画質は、最上位ビットのウェイトを低減するために8個以上のサブフィールド、例えば10個または12個のサブフィールド編成を用いることにより改善されるが、これは偽輪郭の最大レベルの発生に直接に結びつく。本発明によれば、動きが検出されない場合には標準符号化スキーマが用いられ、1つのレベルから他のレベルへの遷移が存在する場合、つまり動きが検出される場合には、偽輪郭効果を考慮に入れて他のタイプの符号化スキーマを使用する。こうした符号化スキーマは例えば重心符号化GCCとして知られる符号化法である。
後者の専用の符号化スキーマについて図4〜図7に即して以下に説明する。
上述のようにPDPは光パルスをパルス幅変調して放出する。人間の眼がこれらの光パルスを1フレーム期間のあいだ統合できれば、正しい輝度印象が認められる。図4には、周知のバイナリコードのような基本的なサブフィールド符号の場合に、ビデオレベルが増大していくとき光放出の時間的重心CG1,CG2,CG3がどのように変化するかが示されている。濃い影を付けられたサブフィールドはこのサブフィールド期間中光形成が活性化されていることを表しており、それよりも薄い影を付けられたサブフィールドはこのサブフィールド期間中光形成が活性化されないことを表している。図4からわかるように、時間的重心CG1〜CG3はビデオレベルにともなって単調に増大してはいない。この特性によりこのタイプのサブフィールド符号化が偽輪郭効果を受けやすくなるのである。サブフィールドコードワードに応じた光形成の時間的重心についての数学的に厳密な定義は、式
によって定められる。式中、sfWはi番目のサブフィールドのウェイトであり、i番目のサブフィールドがサブフィールドコードワードにしたがって“オン”に切り換えられているならばδは1であり、そうでないならば0である。sfCGはi番目のサブフィールドの時間的重心である。図5ではサブフィールド編成内のサブフィールドごとの相応の時間的重心が垂直線で示されている。
次に図6では256個全てのビデオレベルの時間的重心がサブフィールド編成に対する曲線の形式で示されている。これは11個のサブフィールド、および
1 2 3 5 8 12 18 27 41 58 80
のウェイトを有している。
時間的重心は上述の式によって計算される。図6の曲線はけっして単調ではなく、何回もジャンプしている。このジャンプは偽輪郭効果を発生させる。重心符号化スキーマはビデオレベルを選択することによってこのジャンプを抑圧する。相応のサブフィールドコードワードは滑らかに増大する時間的重心を有している。これはそれぞれ近似点が選択される場合にジャンプのない単調な曲線によって表される。このために種々の数学的な最適化手段、例えばガウシアン適合化法が知られており、2乗誤差の最小化が行われる。もちろんこれは本発明の1つの実施例である。図7に単調な曲線の例が示されている。ビデオレベルのサブセットに対する選択されたビデオレベルは小さな四角形によって表される。
基本的なGCC符号化は前述した通りである。ただし本発明では、次の想定に基づいた他の実施例も使用可能である。低いビデオレベル範囲では、時間的重心が滑らかに増大している箇所のビデオレベルのみが選択されるという上述の規則がつねに充分には遵守されない。なぜならこの範囲では可能なレベル数が小さく、仮に増大する場合にのみ時間的重心を選択することにすると、ビデオレベルが暗い画像における良好なビデオ品質を得るのに充分でなくなってしまうからである。人間の眼は暗いビデオ画像の範囲に対してきわめて感受性が高いのである。また暗いビデオ画像範囲における偽輪郭効果はとりあえず無視できるので、この範囲では上述の規則が破られてもかまわない。
高いビデオレベル範囲では、時間的重心は低下している。このことは図6からも見て取れる。サブフィールドが最高のサブフィールドウェイトで照明されるとき、それよりも低いウェイトのサブフィールドは先行の時間位置で照明され、全体的に光放出の時間的重心が低減される。このようにこのビデオレベル範囲では規則が遵守されない。このエリアでは人間の眼が異なるビデオレベルを区別できないので、前述の規則を遵守することはさほど重要ではないのである。発生する偽輪郭効果はこのビデオレベル範囲では無視できる。これはWeber−Fechnerの法則、すなわち人間の眼は相対的なビデオ振幅の変化にのみ感受性を有するという法則に則っている。高いビデオレベル範囲では相対的なビデオ振幅変化は低いビデオレベル範囲または中間のビデオレベル範囲に比べて低い。このためビデオレベルおよび相応のサブフィールドコードワードがビデオレベルのサブセットの設定のために選択されるという上述の規則は、第1の限界値と第2の限界値とのあいだのビデオレベル範囲では曲線の単調性のみが要求されるという幾分緩い規則へ修正することができる。実験では、例えば、低いビデオレベル範囲に対しては10%の最大ビデオレベルが適切であり、高いビデオレベル範囲に対しては80%の最大ビデオレベルが適切であることがわかった。
別の実施例によれば、可能なサブフィールドコードワードのフィールドは、最小ウェイトコードワードmWCを取り出すことによって低減される。このコードワードは、各ビデオレベルごとの光放出のために活性化される最小サブフィールド、すなわち最小バイナリ値を有するサブフィールドの全てのコードワードである。この符号化の原理を実施例に則して説明する。次のサブフィールド編成、すなわち
1 2 3 5 8 12 18 27 41 58 80
がこの実施例に対して考察される。
これらの数はサブフィールドのウェイトを表している。サブフィールド編成によりビデオレベル23は次のコード、すなわち
で符号化することができる。
このサブフィールドコードワードのセットのうち、最後の太字のものが最小ウェイトコードワードである。このコードは最下位ビットに最大のエントリを有している。最下位ビットLSBは表の左側に存在することに注意されたい。
プラズマセルの応答の最良の忠実度を得るために、有利には、選択されたコードが各サブフィールドコードワードでは2つの1のエントリのあいだに2つ以上連続する0エントリがないようにするという規則を遵守する。これはプラズマセルのアドレシングの際に、2つの活性化されたサブフィールドのあいだに2以上の不活性のサブフィールドが生じないようにするということを意味する。こうしたコードはリフレッシュコードとも称される。なぜならプラズマセルが短時間ずつ連続して活性化され、セル内の電荷が比較的長い不活性期間にも消失しないからである。このコンセプトは既に本出願人の欧州出願第00250066.8号明細書で説明されている。リフレッシュコンセプトの開示についてはこの明細書を参照されたい。mWCコードワードはこの規則を遵守しているので、相応のmWCコードワードを有する全てのビデオレベルを使用することができる。サブフィールド編成が異なるケースでは、mWCコードワードを“1つの不活性サブフィールド規則”にしたがって制限し、同じ結果が得られるようにしなければならない。この制限は選択されたレベルの数を大きくは低減しないので、フレキシビリティが犠牲になることはない。また一方でプラズマセルの応答の忠実度が増大するという重要な利点も達成される。
ただしGCCスキーマでは256幅より小さいレベルが使用される。したがってこの符号化コンセプトで8ビット以上のビデオ画像を表示するにはディザ法を用いなければならない。また静止画像であってもデガンマタイゼーションプロセス(逆ガンマプロセス)のためにディザが必要となる。周知のようにPDPはほぼリニアであり、標準的な画像が既に予め補正されるのと同様に、人工ガンマ関数を要する。人工2乗ガンマ関数は暗いレベルでの情報量を低減する。ディザ法はこの情報を回復するために用いられる。
本発明の別の実施例には付加的なステップが設けられており、ここでは静止画像および動画像がノイズ画像であるかまたはノイズなし画像であるかが判別され、判別結果を考慮して専用のディザ法が使用される。より詳細に言えば、この実施例の方法は
・静止画像に対するサブフィールド標準符号化
−ノイズのある静止画像に対して最適化された専用のディザアルゴリズム
−ノイズのない静止画像に対して最適化された専用のディザアルゴリズム
・動画像に対する重心符号化GCC
−ノイズのある動画像に対して最適化された専用のディザアルゴリズム
−ノイズのない動画像に対して最適化された専用のディザアルゴリズム
として定義される。
つまり、画像の活性、すなわち動きの有無およびノイズの有無を考慮して、使用すべき符号化法のタイプが定められる。GCC符号化は直接に標準符号化に基づいていることを付言しておく。なぜならGCC符号化は標準符号化のサブセットであり、1つのモードと他のモードとの切り換えを認知されうる効果なしに行うことができるからである。ただしGCCが静止画像に適用されると画像にはわずかではあるがノイズが現れるし、逆に標準符号化が動画像に適用されると偽輪郭効果が現れるようになる。したがって標準符号化からGCCへの切り換えのほうに高い優先順位があり、GCCから標準符号化への逆の切り換えは充分な情報が得られる場合にのみ行う。このことは図8に示されている。
動きおよび/またはノイズを検出する種々のアルゴリズムを以下にPDP画面のケースに即して説明する。PDP画面はフロントエンドICまたはフラットディスプレイICと称される専用ICを使用している。こうしたICはフレームメモリを有しており、動きおよびノイズに関する情報を送出する。
本発明の方法は固定の解像度を有するプログレッシブディスプレイであるPDP画面内にインプリメントされる。
したがって下記のような製品に対して多くのビデオ変換を計画しておかなければならない。すなわち
・入力フォーマットから画面の固有解像度へのビデオフォーマット変換:これは主に複数のビデオフォーマット、例えばVGA,XGA,SXGAなどを有するPCの分野で要求される
・入力フレーム周波数(50Hz〜120Hz)から利用可能モード(50Hz,60Hz,75Hz)へのフレームフォーマット変換:これは主に種々のグラフィックカードから到来するPCソースで要求される
・主にビデオシステム(ケーブルTV、ビデオレコーダ、DVDプレーヤ)から到来するインタレースされたソースからのプログレッシブ変換
などである。
上述の機能はフロントエンドICで利用可能である。
図8に示されている上述のコンセプトによれば、動きに関する情報が得られた際に、すなわちMOTION=ONとなったときに、GCC符号化が活性化される(瞬時の切り換え)。そうでない場合は動きの判別がフィルタリングされる。判別における揺れ(オシレーション)は強制的に回避される。フィルタリング法は図9に示されており、
各フレームに対して
MOTIONがONならばMOTION‐COUNTER=2×MOTION‐LIMIT
MOTIONがOFFならばMOTION‐COUNTER=MOTION‐COUNTER−1
MOTION‐COUNTER<MOTION‐LIMITのときには標準符号化法が活性化され、そうでないときにはGCC法が維持され、
MOTION‐COUNTERは0から2×MOTION‐LIMITまで計数することができ、
MOTION‐COUNTER<0のときMOTION‐COUNTER=0
の各ステップを含む。
ノイズの場合にも判別には類似の原理が使用されるが、こちらはディザ法に関連している。上述したように、動きおよびノイズの情報に依存して、プラズマICにインプリメントされた種々のディザ法のうち最適なものが選択される。揺れを回避するために、ノイズ検出のフィルタリングも図10に示されているようにインプリメントされている。プロセスの例を示すと、
各フレームに対して
NOISEがONならばNOISE‐COUNTER=NOISE‐COUNTER+1
NOISEがOFFならばNOISE‐COUNTER=NOISE‐COUNTER−1
NOISE‐COUNTER>NOISE‐LIMITのときアダプティブノイズディザが活性化され、そうでないときにはノイズフリーディザが使用され、
NOISE‐COUNTERは0から2×NOISE‐LIMITまで計数することができ、
NOISE‐COUNTER<0ならばNOISE‐COUNTER=0
NOISE‐COUNTER>2×NOISE‐LIMITならばNOISE‐COUNTER=2×NOISE‐LIMIT
のようになる。
種々のディザ法が使用される。アダプティブノイズディザは例えばR.W.Floyd and I.Steinberg," Adaptive algorithm for spatial gray scale", SID Int. Symp. Dig. Tech. Papers., 1975, pp36-37に記載されているエラー拡散アルゴリズムを用いている。ノイズフリーディザは例えば本出願人による欧州出願第00250099.9号明細書または欧州出願第01250199.5号明細書に記載されている3Dディザである。
本発明のインプリメンテーションの例を図11に即して説明する。この実施例では、上述のように、システムがフロントエンドIC10を含んでいる。IC10は例えばフレームレート変換、フォーマット変換、プログレッシブ変換、ビデオベーシック機能などの複数の機能を担当する。フロントエンドICはPC、DVDプレーヤ、VCRなどから種々の入力信号を受け取り、プログレッシブ信号RGBをPDPの固有フォーマットおよび専用プラズマIC11に対する適正なフレームレートで出力する。フロントエンドICはさらにMOTIONおよびNOISEも出力する。プラズマIC11はサブフィールド標準符号化、重心符号化GCC、マトリクスおよびセルベースディザ、エラー拡散ディザなどの種々のアルゴリズムを含んでいる。さらにプラズマIC11は電力管理回路およびプラズマ制御回路も有している。フロントエンドICから送出された動き情報およびノイズ情報に基づいて、専用プラズマIC11はどのタイプのアルゴリズムを使用するかを判別する。図11に示されているように、プラズマIC11からデータ情報とスキャンパルスおよびサステインパルスがプラズマ画面12のドライバへ送信される。
図12には別のインプリメンテーションの例が示されている。この場合、マイクロコントローラ13がフロントエンドICと対応するプラズマIC11とのあいだにインプリメントされている。MOTIONおよびNOISEの情報はマイクロコントローラ13へ送信される。マイクロコントローラは専用プラズマIC11の種々の設定を管理しており、
・フロントエンドICからの動きビットに依存したGCCのONまたはOFF
・最適なディザアルゴリズム
の切り換えを行う。
マイクロコントローラはディザフィルタリングを制御する。さらにフロントエンドICの種々の設定もデータCTを用いてマイクロコントローラによって制御される。
次に専用プラズマIC内で動きおよびノイズを検出する簡単な手段を説明する。これは動きおよびノイズに関する外部情報を有さないコンフィグレーションにおいて有利である。この場合の手段を図13〜図19に即して説明する。
実際には、このコンセプトは入力画像を図13に示されているような複数の検出領域20へ分割することに基づいている。この図の領域の形状、サイズおよび個数は単なる例示にすぎず、当該の分野の技術者であれば他の形状、サイズおよび個数を選択できることは明らかである。
第1に、ヒストグラム計算に基づく動き検出について説明する。座標Z(i,j)で定義される各領域20に対して、領域内容のヒストグラムが計算される。このヒストグラムは各領域を表しており、後の活性判別に用いられる。
領域のヒストグラムはまず個別の領域の個数を選択することにより定義される。これはそれぞれ図14に示されているような上方ビデオ境界および下方ビデオ境界によって定義される。
前述の実施例で言えば、1つの領域は8個の値のセットで表され、それぞれ定義された範囲(例えば[32;64])内に位置するピクセルの個数が定められている。こうしたヒストグラムが各領域ごとに計算され記憶される。
前述の実施例では8個の等価の領域を有する画像が表現されていた。領域の相応のサイズおよび個数はもちろん本発明の範囲内で変更可能である。
各領域ごとに、ヒストグラムは先行フレームの相応のヒストグラムと比較される。強い変化があるか否かを判別するために限界値が設定される。フレームnに対する判別の例を次に示す。
もちろん前述したように、揺れ、すなわち偽輪郭の出現および消失を回避するためのフィルタリングが行われる。このアルゴリズムはきわめてシンプルであるが、標準符号化とGCC符号化とのあいだの切り換えが不可視であるため充分に満足できるものである。このアルゴリズムの利点はフレームメモリを省略できることである。なぜならヒストグラムのみを僅か数ビットのオンチップメモリに記憶すればよいからである。
専用プラズマIC内にインプリメントされるノイズ検出について以下に図15〜図18に即して説明する。
この方法は2つの連続線のあいだに多くの類似性が存在し、ノイズのみが強い差となっているという事実に基づいている。
これを説明するためにセグメント化のコンセプトを次のように定義する。
図15では、セグメントLは2つの連続線から取り出されたN個のピクセルの組である。このセグメントLのノイズ推定値は
のように定義される。フレーム全体のノイズ推定値はノイズ推定値の最小値
NOISE=min(NOISE(L))
と定義される。
正確性を向上させるために種々のセグメントがフレーム全体にわたって分散される。こうした分散の例が図16に示されている。
図の左方には垂直線A,Aでセグメントへの分割が行われることが示されている。図の右方にはセグメントが線ごとにシフトされていることが示されている。シフトは行方向で1個以上のピクセルP,P’のぶんだけ行われている。さらにセグメント間のオーバラップがプログレッシブスキャン変換または人工テストパターンによって生じる問題を回避するために行われる。このオーバラップは図16の下方に示されている。この場合、一方の線または行は垂直方向に隣接する2つのセグメントにとって既知である。
さらにノイズ検出のフィールドでは、ノイズレベルの付加的な推定が画像の不活性の部分について行われる。こうした推定はディジタル画像の場合には不活性部分が人工的に形成されるのでさほど正確にはならない(例えばDVDプレーヤ)。図17にはプラズマパネルへ送信される典型的な画像が示されている。
ブランキング領域は種々のサイズを有するが、ノイズ推定に使用することができる。このためにn’個の分析領域Reg(n’)がこのブランキング領域に定義される。分析領域はm個のピクセル×l(エル)本の線から成り、図17に示されている。ノイズ推定値を処理するために、第1の計算により各領域の平均値が

のようにして求められる。ここでi,jは各領域のピクセルの水平位置および垂直位置である。ついで各領域に対して、平均2乗誤差が
のように計算される。この値は、信号ノイズ比が主として
PSNR=10log10(255/MSE)
と定義されるため、ノイズを直接に表している。
しかしこのコンセプトではMSE(n)を分析領域ごとに計算している。最終的なノイズを推定するために、種々のMSEヒストグラム表現に基づく新たなコンセプトを用いて正確な情報を導出する。図18ではヒストグラムの最小値がディジタル画像内の最小誤差MSEmin=1/12によって定義される。なぜなら
が成り立つからである。ここでここでxはダイナミック誤差のうち積分された2乗誤差を表しており、ダイナミック誤差は1の定量化により[−1/2;1/2]となる。この場合、最大PSNRは
PSNRmax=10log10(12・255)=58.92dB
となる。
ヒストグラムの水平軸上ではMSE×12のドメインを表す種々のセグメントが選択される。例えば20≦MSE<25のとき、240≦12×MSE<300である。ここではノイズ推定値が求められているのみであるので、これ以上の正確さは不要である。
垂直軸上では各ドメインの出現が次のように計算される。
こうしてヒストグラムの出現のなかの最高値が選択され、画像全体のMSEが定量化される。この実施例では選択されたMSEがPSNR37〜38dBに相応する。そののちNOISE‐LIMITに応じて、ノイズの有無が判別される。つまりMSE>NOISE‐LIMITならばNOISE=ON、そうでないならばNOISE=OFFとなる。
このパラメータNOISEもパラメータMOTIONと同様に揺れを回避するためフィルタリングしなければならないことは明らかである。
さらにモードの活性化のための全体的な検出が内部で行われるか、図19に示されているような外部のマイクロコントローラへ送信される。
図19には前述の方法のインプリメンテーションの例が示されている。ここではフロントエンドIC10’がフレームレート変換、フォーマット変換、プログレッシブ変換、およびビデオベーシック機能を担当している。このフロントエンドICは入力信号、例えばPCまたはDVDからの信号を受け取り、RGBデータを専用プラズマIC11’へ出力する。フロントエンドIC10’は動きまたはノイズに関する情報を有さない。
実際には専用プラズマIC11’は到来する画像の分析を担当する。プラズマIC11’は前述の方法の結果、すなわちMOTION信号およびNOISE信号をマイクロコントローラ13’へ出力する。マイクロコントローラはGCCのON/OFFに関する情報およびエラー拡散アルゴリズム(ERRD)または3Dディザ(DIT3D)に関する情報を送信する。つまりマイクロコントローラは上述の最終的なアルゴリズムの選択を管理しているのである。通常、プラズマIC11’はデータ情報を送信し、スキャンパルスおよびサステインパルスをプラズマディスプレイパネル12のドライバへ送信する。
このアルゴリズムの利点はフレームメモリを省略できることである。なぜならヒストグラムのみを僅か数ビットのオンチップメモリに記憶すればよいからである。
付加的なフレームメモリを用いれば検出の精度が高まることは明らかであるが、これはプラズマエレクトロニクスに対して付加的なコストを要求する。これを以下に説明する。この手段では、各画像を小さなブロックBlock(n)へ分割し、各ブロックに対して平均2乗誤差の推定を
のように行い、ここでtは現時点のフレームを表しており、t−1は先行フレームを表しており、i,jは各ピクセルの水平位置および垂直位置を表している。次にノイズレベルを全ブロックBlock(n)に対する最小MSE(n)として定義する。さらにMSE(n)とMOTION‐BLOCKの値とを比較し、MSE(n)≧MOTION‐BLOCKならばMOTION‐COUNTERを増大する。つまりMSE(n)≧MOTION‐BLOCKならばMOTION‐COUNTER++である。MOTION‐COUNTERは各フレームの開始時にイニシャライズされる。MOTION‐COUNTER≧MOTION‐LIMITのときにはMOTION=ON、そうでないときにはMOTION=OFFとする。
より多くの情報が得られる場合であっても、前述の検出のアダプティブフィルタリングをさらに行う。フィルム入力画像の場合にはAABB...のように反復される。
このとき、画像A,A間の比較または画像B,B間の比較は情報を与えてくれない。画像A,B間で比較した場合にのみ関連する情報が得られる。フィルタリングが使用されないと全てのフレームに揺れが現れてしまう。
前述の方法は僅かな計算しか要さず、きわめてシンプルである。
これよりも複雑な方法を図20に即して説明する。この方法はフレームメモリおよび複雑な計算を要するので、アルゴリズムのコストは増大する。
この場合、現時点のフレームtと先行のフレームt−1とが比較される。
画像の動きおよび変形はピクセルごとに直接比較することはできない。この場合、現時点のフレームに対してノイズレベルおよび動きレベルの推定が行われる。これは先行のフレームのエリア内にMSEが最小となる同じサイズのブロックをサーチすることにより行われる。最小MSEはノイズレベルに相応している。なぜなら動きが回復されているからである。もちろん複雑な動きや変形を完全に回復することはできないので、ノイズの推定が上述のようなヒストグラム(ブランキング領域のノイズ推定値)を用いて図18に示されているように行われる。主たる特徴はヒストグラムの出現の最高値がノイズに相応し、他の値は主に変形や複雑な動きに起因する誤差に相応するという着想である。
この手法はいわゆるブロックマッチングアルゴリズムである。
まず現時点でのフレームが小さなブロックBlock(n)へ分割され、先行フレームのサーチエリアの相応のブロックごとに平均2乗誤差が
のように計算される。ここでNはBlock(n)のサイズを表している。さらにサーチエリア(δx,δy)の各位置に対してBlock(n)の最小MSEが計算され、このMSEmin(n)=minδx,δy(MSE(δx,δy))がノイズ推定のために選択される。なおMSEmin(n)が(δx,δy)=(0,0)に対して与えられているならばMOTION(n)=1、そうでないならばMOTION(n)=0である。前述したように、種々のMSEmin(n)がブランキング領域のノイズ推定のために誤差のヒストグラムの正確な計算に対して用いられる。さらに
の値が計算され、この値とMOTION‐LIMITとが比較され、MOTION‐SUM≧MOTION‐LIMITならばMOTION=ON、そうでないならばMOTION=OFFとなる。
上述の方法は図21に示されているシステムにインプリメントされている。このシステムはフレームメモリ14’が接続されている点で図19のシステムとは異なっている。フレームメモリ14’は連続するフレーム(フレームt)を記憶し、プラズマIC11’へ先行フレームt−1を出力する。
このコンセプトのハードウェアの簡単化は利用するピクセル情報を少なくすることによって達成される。例えば画像のサブサンプリングを行ったり、輝度情報のみを用いるようにすればよい。
より多くの情報が得られる場合であっても、前述の検出のアダプティブフィルタリングを行わなくてはならないことは明らかである。フィルム入力画像の場合にはAABB...のように反復される。
このとき、画像A,A間の比較または画像B,B間の比較は情報を与えてくれない。画像A,B間で比較した場合にのみ関連する情報が得られる。フィルタリングが使用されないと全てのフレームに揺れが現れてしまう。
上述の方法には
・PDP全体のグレースケール描画が動きのある画像および動きのない画像の双方に対して改善される
・種々の複雑さのアルゴリズムが提供される
・最良に適合するモードの最終的な判別が精細な調整や製品の要求への適合の可能なマイクロコントローラで行われる
という利点がある。
ただし選択されたアルゴリズムに依存して、専用のチップに多少のリソースが要求される。またこの方法は付加的な外部フレームメモリを要する。
標準的なサブフィールド符号化の原理を示す図である。
偽輪郭効果の説明図である。
2つのフレームを表示するときのダークエッジのアピアランスを示す図である。
光形成の時間的重心を示す図である。
サブフィールド編成内でのサブフィールドの重心の時間的位置を示す図である。
時間的重心とビデオレベルとの関係における重心の変化特性を示すグラフである。
時間的重心とビデオレベルとの関係を示すグラフである。
本発明の有利な実施例での判別のコンセプトを示す図である。
本発明で使用される動き検出アルゴリズムを示す図である。
本発明で使用されるノイズ検出アルゴリズムを示す図である。
動き情報およびノイズ情報がフロントエンドICから得られたときの本発明のインプリメンテーションのブロック図である。
本発明の別の実施例のインプリメンテーションのブロック図である。
動きおよび/またはノイズに関する外部情報が得られないときに検出領域で画像を分割する様子を示す図である。
領域の内容ヒストグラム表現である。
ノイズ検出のための画像のセグメント化の様子を示す図である。
セグメント化のインプリメンテーションの種々の手段を示す図である。
プラズマパネルへ送信される典型的な画像を示す図である。
ノイズ検出アルゴリズムで使用されるヒストグラムである。
図13〜図18のアルゴリズムを用いて動きおよび/またはノイズの情報が判別されたときの本発明のインプリメンテーションのブロック図である。
ブロックマッチングに基づく動きおよび/またはノイズの判別の新しいコンセプトを示す図である。
図20のコンセプトのインプリメンテーションのブロック図である。

Claims (4)

  1. 画像のピクセルを形成する複数の輝度エレメントを有しており、ビデオフレームまたはビデオフィールドの時間を複数のサブフィールド(SF)と称される点灯期間に分割し、該点灯期間のあいだ輝度エレメントをnビットのサブフィールドコードワードに相応する所定数の光パルスで光放出のために活性化し、ここで各ビットのウェイトはサイズに応じて順序付けられ、前記サブフィールドコードワードはピクセルを点灯するp個の可能なビデオレベルを符号化するために用いられる、ディスプレイ装置での表示のためのビデオ画像の処理方法において、
    画像が静止画像であるかまたは動画像であるかを判別するステップと、
    静止画像である場合、動きの検出されない画像に適合化された第1のサブフィールド符号化法を用いてビデオ画像を処理するステップと、
    動画像である場合、動きの検出される画像に適合化された、ダイナミック偽輪郭効果を低減する第2の符号化法を用いてビデオ画像を処理するステップであって、ピクセルを点灯するp個の可能なビデオレベルのセットのなかからm個のビデオレベルのサブセットを選択し、ここでn<m<pであり、1個より多い対応のサブフィールドコードワードが存在するとき、各ビデオレベルに対して最小バイナリ値を有するサブフィールドコードワードのみを取り出すことにより可能なサブフィールドコードワードのセットを低減する、該ステップと、
    を含み、前記サブフィールドコードワードに相応する光放出の時間的重心が、第1の所定のビデオレベル以下の低いレベルおよび/または第2の所定のビデオレベル以上の高いレベルを除いて、ビデオレベルに対して連続的に増大するビデオレベルのみを選択するという規則にしたがって、前記m個のビデオレベルのサブセットを選択することを特徴とするビデオ画像の処理方法。
  2. 放出の時間的重心を式
    によって定義し、ここでsfWはi番目のサブフィールドのウェイトであり、δはi番目のサブフィールドが活性化されているならば1,活性化されていないならば0であり、sfCGはi番目のサブフィールドの光放出に対する時間的重心である、請求項1記載の方法。
  3. 請求項記載の方法を実行するビデオ画像の処理装置において、
    動き情報およびノイズ情報を送出するフロントエンドIC、専用プラズマIC、プラズマパネルを有する
    ことを特徴とするビデオ画像の処理装置。
  4. 請求項1または2記載の方法を実行するビデオ画像の処理装置において、
    動き情報およびノイズ情報を送出しないフロントエンドIC、動きおよびノイズを検出する専用の方法を実行するための専用プラズマIC、マイクロコントローラ、プラズマパネルを有する
    ことを特徴とするビデオ画像の処理装置。
JP2004516777A 2002-06-28 2003-06-17 ダイナミック偽輪郭効果の補償を改善したビデオ画像の処理方法およびビデオ画像の処理装置 Expired - Fee Related JP5010099B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP02291612A EP1376521A1 (en) 2002-06-28 2002-06-28 Processing video pictures for improving dynamic false contour effect compensation
EP02291612.6 2002-06-28
PCT/EP2003/050232 WO2004003881A1 (en) 2002-06-28 2003-06-17 Method and apparatus for processing video pictures improving dynamic false contour effect compensation

Publications (3)

Publication Number Publication Date
JP2005531799A JP2005531799A (ja) 2005-10-20
JP2005531799A5 JP2005531799A5 (ja) 2012-05-31
JP5010099B2 true JP5010099B2 (ja) 2012-08-29

Family

ID=29716957

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004516777A Expired - Fee Related JP5010099B2 (ja) 2002-06-28 2003-06-17 ダイナミック偽輪郭効果の補償を改善したビデオ画像の処理方法およびビデオ画像の処理装置

Country Status (7)

Country Link
US (1) US7339632B2 (ja)
EP (2) EP1376521A1 (ja)
JP (1) JP5010099B2 (ja)
CN (1) CN100458883C (ja)
AU (1) AU2003254499A1 (ja)
TW (1) TWI226796B (ja)
WO (1) WO2004003881A1 (ja)

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100550984B1 (ko) * 2003-11-28 2006-02-13 삼성에스디아이 주식회사 플라즈마 디스플레이 패널의 구동 장치, 플라즈마디스플레이 패널의 화상 처리 방법 및 플라즈마디스플레이 패널
EP1544836A1 (en) * 2003-12-17 2005-06-22 Deutsche Thomson-Brandt GmbH Method and apparatus for processing video pictures in particular in film mode sequences
KR20050091509A (ko) * 2004-03-12 2005-09-15 삼성전자주식회사 디스플레이장치
JP4886992B2 (ja) * 2004-03-16 2012-02-29 パナソニック株式会社 画像処理装置、表示装置、画像処理方法及びプログラム
KR100571201B1 (ko) * 2004-05-21 2006-04-17 엘지전자 주식회사 하프톤 노이즈를 감소시킬 수 있는 플라즈마 표시 패널의구동 장치 및 구동 방법
KR100627297B1 (ko) 2005-01-12 2006-09-25 삼성에스디아이 주식회사 플라즈마 표시 장치 및 그 화상 처리 방법
JP2007101960A (ja) * 2005-10-05 2007-04-19 Fujitsu Hitachi Plasma Display Ltd デジタル表示装置の表示方法及びデジタル表示装置
EP1801768B1 (en) 2005-12-22 2010-11-17 Imaging Systems Technology, Inc. SAS Addressing of surface discharge AC plasma display
EP2002418A1 (en) * 2006-04-03 2008-12-17 Thomson Licensing Method and device for coding video levels in a plasma display panel
EP1845509A1 (en) * 2006-04-11 2007-10-17 Deutsche Thomson-Brandt Gmbh Method and apparatus for motion dependent coding
US9198084B2 (en) 2006-05-26 2015-11-24 Qualcomm Incorporated Wireless architecture for a traditional wire-based protocol
EP2126836B1 (en) * 2007-01-19 2013-03-06 Thomson Licensing Identifying banding in digital images
WO2009032255A2 (en) * 2007-09-04 2009-03-12 The Regents Of The University Of California Hierarchical motion vector processing method, software and devices
CN101753908B (zh) * 2008-12-02 2011-07-20 青岛海信电器股份有限公司 一种适用于pdp的动画显示方法及pdp电视机
US9398089B2 (en) 2008-12-11 2016-07-19 Qualcomm Incorporated Dynamic resource sharing among multiple wireless devices
US9264248B2 (en) 2009-07-02 2016-02-16 Qualcomm Incorporated System and method for avoiding and resolving conflicts in a wireless mobile display digital interface multicast environment
WO2011045924A1 (ja) * 2009-10-13 2011-04-21 パナソニック株式会社 プラズマディスプレイ装置の駆動方法、プラズマディスプレイ装置およびプラズマディスプレイシステム
US9582238B2 (en) * 2009-12-14 2017-02-28 Qualcomm Incorporated Decomposed multi-stream (DMS) techniques for video display systems
CN101887680B (zh) * 2009-12-25 2012-05-30 四川虹欧显示器件有限公司 降低动态伪轮廓的方法及系统
TWI563479B (en) * 2009-12-30 2016-12-21 Tatung Co Field emission display
CN101887679B (zh) * 2009-12-31 2012-05-30 四川虹欧显示器件有限公司 降低动态伪轮廓的方法及系统
US10135900B2 (en) 2011-01-21 2018-11-20 Qualcomm Incorporated User input back channel for wireless displays
US8964783B2 (en) 2011-01-21 2015-02-24 Qualcomm Incorporated User input back channel for wireless displays
US9413803B2 (en) 2011-01-21 2016-08-09 Qualcomm Incorporated User input back channel for wireless displays
US9787725B2 (en) 2011-01-21 2017-10-10 Qualcomm Incorporated User input back channel for wireless displays
US9065876B2 (en) 2011-01-21 2015-06-23 Qualcomm Incorporated User input back channel from a wireless sink device to a wireless source device for multi-touch gesture wireless displays
US20130013318A1 (en) 2011-01-21 2013-01-10 Qualcomm Incorporated User input back channel for wireless displays
US9503771B2 (en) 2011-02-04 2016-11-22 Qualcomm Incorporated Low latency wireless display for graphics
US10108386B2 (en) 2011-02-04 2018-10-23 Qualcomm Incorporated Content provisioning for wireless back channel
US8659701B2 (en) * 2011-12-19 2014-02-25 Sony Corporation Usage of dither on interpolated frames
US9525998B2 (en) 2012-01-06 2016-12-20 Qualcomm Incorporated Wireless display with multiscreen service
WO2015073373A1 (en) 2013-11-12 2015-05-21 Dolby Laboratories Licensing Corporation Pre-dithering in high dynamic range video coding
US10198658B2 (en) * 2014-07-11 2019-02-05 Sony Semiconductor Solutions Corporation Image processing device, imaging device, image processing method, and program
TWI563495B (en) * 2014-11-05 2016-12-21 Jadard Technology Inc Display device and image segment adjustment method thereof
CN105741747A (zh) * 2014-12-08 2016-07-06 王丽香 一种提升pdp图像灰阶质量且降低显示功耗的方法
CN105741746A (zh) * 2014-12-08 2016-07-06 王丽香 一种改善pdp显示器高温误放电的驱动波形
CN106057167B (zh) * 2016-07-21 2019-04-05 京东方科技集团股份有限公司 一种对文字边缘暗化处理的方法及装置
EP3316578A1 (en) 2016-10-25 2018-05-02 Thomson Licensing Method and apparatus for encoding and decoding a picture
CN107665666B (zh) * 2017-10-31 2019-10-01 京东方科技集团股份有限公司 显示模组的伽马电压校正方法及系统
CN113396454A (zh) * 2019-01-25 2021-09-14 株式会社索思未来 控制装置、控制方法及显示系统
CN110248132B (zh) * 2019-05-31 2020-12-01 成都东方盛行电子有限责任公司 一种视频帧率插值方法
JPWO2022030133A1 (ja) * 2020-08-07 2022-02-10
CN113099308B (zh) * 2021-03-31 2023-10-27 聚好看科技股份有限公司 一种内容显示方法、显示设备及图像采集器

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1039831A (ja) * 1996-07-22 1998-02-13 Matsushita Electric Ind Co Ltd ディスプレイの駆動回路と表示装置
US6661470B1 (en) * 1997-03-31 2003-12-09 Matsushita Electric Industrial Co., Ltd. Moving picture display method and apparatus
JPH10307561A (ja) * 1997-05-08 1998-11-17 Mitsubishi Electric Corp プラズマディスプレイパネルの駆動方法
JP3577888B2 (ja) * 1997-05-19 2004-10-20 松下電器産業株式会社 多階調画像表示装置
JP3414265B2 (ja) * 1997-11-18 2003-06-09 松下電器産業株式会社 多階調画像表示装置
JP2994634B2 (ja) * 1997-12-10 1999-12-27 松下電器産業株式会社 表示装置
JPH11231831A (ja) * 1998-02-13 1999-08-27 Samson Yokohama Kenkyusho:Kk プラズマディスプレイ装置の駆動方法
FR2776414B1 (fr) * 1998-03-23 2000-05-12 Thomson Multimedia Sa Procede et dispositif pour adressage de panneaux a plasma
EP0978816B1 (en) * 1998-08-07 2002-02-13 Deutsche Thomson-Brandt Gmbh Method and apparatus for processing video pictures, especially for false contour effect compensation
EP0978817A1 (en) * 1998-08-07 2000-02-09 Deutsche Thomson-Brandt Gmbh Method and apparatus for processing video pictures, especially for false contour effect compensation
FR2785076B1 (fr) * 1998-10-23 2002-11-15 Thomson Multimedia Sa Procede d'adressage pour ecran a plasma base sur un adressage separe des lignes paires et impaires
JP3457251B2 (ja) * 1999-04-12 2003-10-14 松下電器産業株式会社 画像表示装置
EP1049068A1 (en) * 1999-04-28 2000-11-02 THOMSON multimedia S.A. Method and apparatus for processing video signals
US7023450B1 (en) * 1999-09-29 2006-04-04 Thomson Licensing Data processing method and apparatus for a display device
EP1162571B1 (en) * 2000-06-09 2004-04-21 Deutsche Thomson-Brandt Gmbh Method and apparatus for processing video pictures for false contour effect compensation
EP1172765A1 (en) * 2000-07-12 2002-01-16 Deutsche Thomson-Brandt Gmbh Method for processing video pictures and apparatus for processing video pictures
EP1207510A1 (en) * 2000-11-18 2002-05-22 Deutsche Thomson-Brandt Gmbh Method and apparatus for processing video pictures

Also Published As

Publication number Publication date
WO2004003881A8 (en) 2005-03-17
EP1532607A1 (en) 2005-05-25
JP2005531799A (ja) 2005-10-20
CN1662944A (zh) 2005-08-31
US20050253972A1 (en) 2005-11-17
TWI226796B (en) 2005-01-11
TW200400756A (en) 2004-01-01
CN100458883C (zh) 2009-02-04
EP1532607B1 (en) 2015-10-21
WO2004003881A1 (en) 2004-01-08
US7339632B2 (en) 2008-03-04
EP1376521A1 (en) 2004-01-02
AU2003254499A1 (en) 2004-01-19

Similar Documents

Publication Publication Date Title
JP5010099B2 (ja) ダイナミック偽輪郭効果の補償を改善したビデオ画像の処理方法およびビデオ画像の処理装置
KR100670986B1 (ko) 디스플레이 구동 방법
KR100339983B1 (ko) 의사-윤곽 잡음을 검출하는 검출기와 그 검출기를 사용한 표시장치
US20010028347A1 (en) Image display apparatus and image evaluation apparatus
JP2004133467A (ja) パルス数変調方式デジタルディスプレイパネルにおける擬似輪郭減少のための方法及び装置
JP2000056728A (ja) 偽輪郭効果補償のためにビデオ画像を処理する方法及び装置
JPH11212517A (ja) 多階調画像表示装置
JP4928662B2 (ja) 表示装置に表示するためにビデオ画像を処理する方法及び装置
KR100869656B1 (ko) 서브-필드에서 이미지를 디스플레이하는 방법 및 유닛
JP5193181B2 (ja) プラズマディスプレイパネル内でビデオレベルを符号化するための方法および装置
KR100603242B1 (ko) 동영상 처리방법 및 장치
KR100887678B1 (ko) 비디오 화상을 처리하기 위한 방법 및 비디오 화상을처리하기 위한 장치
JP4991066B2 (ja) ビデオ画像を処理する方法及び装置
JP3577888B2 (ja) 多階調画像表示装置
KR100687558B1 (ko) 화상 표시 방법 및 화상 표시 장치
JP2007279745A (ja) 動きに依存した符号化方法及び装置
JP3379359B2 (ja) 画像表示装置
JP2003177697A (ja) 映像表示装置
KR100946737B1 (ko) 비디오 화상을 처리하기 위한 방법 및 그 방법을 구현하기 위한 시스템
JP3113569B2 (ja) 中間調表示制御方法および装置
JP2000098960A (ja) 動画像表示装置
KR100589312B1 (ko) 플라즈마 디스플레이 구동 회로
JP2001083925A (ja) 表示装置の動き検出方法及び表示装置
US6882115B2 (en) Method and apparatus of processing video signal in plasma display panel
JP2003177708A (ja) 多階調画像表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060607

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100317

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20100614

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20100621

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100915

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20101007

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20101007

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20101008

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20101008

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110930

RD13 Notification of appointment of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7433

Effective date: 20111213

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20111221

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20111213

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120104

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20120328

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120502

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120601

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5010099

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150608

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees