JP5072891B2 - 画像表示装置 - Google Patents

画像表示装置 Download PDF

Info

Publication number
JP5072891B2
JP5072891B2 JP2009068425A JP2009068425A JP5072891B2 JP 5072891 B2 JP5072891 B2 JP 5072891B2 JP 2009068425 A JP2009068425 A JP 2009068425A JP 2009068425 A JP2009068425 A JP 2009068425A JP 5072891 B2 JP5072891 B2 JP 5072891B2
Authority
JP
Japan
Prior art keywords
backlight
light emission
brightness
liquid crystal
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009068425A
Other languages
English (en)
Other versions
JP2010224014A (ja
Inventor
中 亮 助 野
場 雅 裕 馬
野 雄 磨 佐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2009068425A priority Critical patent/JP5072891B2/ja
Priority to US12/563,507 priority patent/US8390563B2/en
Publication of JP2010224014A publication Critical patent/JP2010224014A/ja
Application granted granted Critical
Publication of JP5072891B2 publication Critical patent/JP5072891B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/36Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
    • G09G3/3611Control of matrices with row and column drivers
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406Control of illumination source
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0626Adjustment of display parameters for control of overall brightness
    • G09G2320/0646Modulation of illumination source brightness and image signal correlated to each other
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0673Adjustment of display parameters for control of gamma adjustment, e.g. selecting another gamma curve
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/16Calculation or use of calculated indices related to luminance levels in display data

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Liquid Crystal (AREA)

Description

本発明は、画像表示装置に関するものである。
従来から、液晶表示装置において、表示ダイナミックレンジの拡大、低消費電力化等の目的で、バックライトの輝度制御が行われている。
例えば、特開2005−309338号公報(特許文献1)ではバックライトの輝度変調率を入力画像中の最大輝度値から求めることで、入力画像中の最大輝度が表示できるようにバックライトの輝度制御を行っている。
特開2005−309338号公報
しかし、画像中の輝度の最大値に応じてバックライトの輝度変調率の制御を行うと、入力画像の輝度範囲が広い場合等に、入力画像中の明るい部位を優先的に表示することとなり、入力画像中の暗い部位を十分に暗く表示できず、結果として黒が白く浮くような画質劣化が目立つという問題がある。
本発明は、画像中の明るい部分を十分に明るく暗い部分も十分に暗く表示できる高表示ダイナミックレンジな画像表示が可能な画像表示装置を低消費電力なものとして提供する。
本発明の一態様としての画像表示装置は、光を出射するバックライトと、前記バックライトから出射される光を変調することにより画像表示を行う液晶パネルと、前記バックライトの発光強度に応じて定まる前記液晶パネルにより表示可能な明度範囲の中心値と、入力画像の各画素の明度の最大値及び最小値それぞれとの明度差が等しい中心値とが同じになるように、前記バックライトの発光強度を算出する発光強度算出部と、算出された発光強度で発光するように前記バックライトの発光を制御するバックライト制御部と、前記算出された発光強度に応じて前記入力画像の各画素の信号を補正する信号補正部と、補正された入力画像に基づいて前記液晶パネルの変調を制御する液晶制御部と、を備える。
本発明により、画像中の明るい部分を十分に明るく暗い部分も十分に暗く表示できる高表示ダイナミックレンジな画像表示を低消費電力で実現できる。
第1実施形態による画像表示装置の構成例を示す図。 第1実施形態によるバックライトの構成例を示す図。 バックライトの点灯方式を説明する図。 第1実施形態による発光強度算出部の構成例を示す図。 第1実施形態による発光強度算出部の他の構成例を示す図。 第1実施形態による発光強度算出部の他の構成例を示す図。 第1実施形態による信号補正部の構成例を示す図。 第1実施形態による信号補正部の他の構成例を示す図。 第1実施形態による信号補正部の動作による効果。 第1実施形態による効果を具体的に説明する図。 液晶パネルの構成例を示す図。 第2実施形態による画像表示装置の構成例を示す図。 第2実施形態によるバックライトの構成例を示す図。 光源の構成例を示す図。 第2実施形態による発光強度算出部の構成例を示す図。 光源の輝度分布の例を示す図。 バックライトの輝度分布の算出方法を模式的に示す図。 第2実施形態による信号補正部の構成例を示す図。
以下に図面を参照して、本発明の実施形態を詳細に説明する。
(第1実施形態)
本発明の第1実施形態による画像表示装置について図面を参照して説明する。
画像表示装置の構成
本実施形態による画像表示装置の構成を図1に示す。本実施形態による画像表示装置は、発光強度算出部11と、信号補正部12と、バックライト制御部13と、バックライト14と、液晶制御部15と、複数の画素がマトリクス状に配列された液晶パネル16と、を備えている。
発光強度算出部11は、1フレームの画像信号に基づいて、表示に適したバックライト14の輝度変調率(発光強度)を算出する。信号補正部12は算出されたバックライト14の輝度変調率に基づいて、上記画像信号における各画素の輝度(光透過率)を補正し、補正された画像信号を液晶制御部15に出力する。バックライト制御部13は発光強度算出部11によって算出された輝度変調率に従ってバックライト14の点灯(発光)を制御する。バックライト14はバックライト制御部13の制御により点灯する。液晶制御部15は信号補正部12によって補正された画像信号に基づいて液晶パネル16を制御する。液晶パネル16は液晶制御部15の制御によりバックライト14からの透過光量を変化させる。すなわち、液晶パネル16は、バックライト14の発光を変調することにより画像表示を行う。
以下に各部の構成および動作の詳細を述べる。
バックライト14
バックライト14はバックライト制御部13の制御により強弱に点灯し、液晶パネル16を背面から照射する。バックライト14の一具体例の構成を図2(a−1)、図2(a−2)、図2(b)、図2(c)に示す。図2(a−1)、図2(a−2)、図2(b)、図2(c)に示すようにバックライトは少なくとも1つ以上の光源を備えている。光源の配置は、図2(a−1)、図2(a−2)、図2(b)に示すように、液晶パネル16背面に光源を配置する直下式でもよいし、図2(c)に示すように液晶パネル16側面に光源を配置し、図示しない導光板やリフレクタにより液晶パネル16背面に光を導くことにより液晶パネル16を背面から照射するエッジライト式でもよい。光源はLED、冷陰極管、熱陰極管等が適している。特にLEDは最大発光可能輝度と最小発光可能輝度の幅が広く、高いダイナミックレンジでの発光制御が可能であるので、光源として用いるのが好ましい。バックライト14はバックライト制御部13によって発光強度(発光輝度)および発光タイミングが制御可能となっている。
バックライト制御部13
バックライト制御部13は発光強度算出部11によって算出されたバックライト14の輝度変調率に基づきバックライト14の点灯を制御する。輝度変調率とは、バックライト14を最も明るく点灯させたときのバックライト14の発光輝度に対して、どれくらいの比率の発光輝度でバックライト14を発光させるかを示す値とする。図3(a)および図3(b)にPWM(Pulse Width Modulation)方式を用いてバックライト14を制御する場合のバックライト制御部13の出力例を示す。図3(a)、図3(b)は、バックライト14が常に点灯している時の発光輝度に対して、各々、輝度変調率0.5、輝度変調率0.75に対応するPWM制御信号を出力する場合の出力例を示している。PWM方式では1周期の間の点灯期間の割合を変化させることによりバックライト14の輝度制御を行う。このようにバックライト制御部13は、バックライト14の発光強度(発光輝度)および発光タイミングを制御する。
発光強度算出部11
発光強度算出部11は画像信号から表示に適したバックライト14の輝度変調率を算出する。この発光強度算出部11の一具体例の構成を図4に示す。図4の発光強度算出部11は最大値/最小値算出部17と、ガンマ変換部1と、中心値算出部18と、乗算器10aと、ガンマ変換部2を備えている。
最大値/最小値算出部17は、複数の画素の信号値から、それら信号値のうちの最大値および最小値を算出する。最大値/最小値算出部17において、最大値および最小値の算出の対象となる空間範囲は、液晶パネル16全体の範囲でも良いし、これより小さい範囲でも良い。
ガンマ変換部1は入力された信号値の最大値および最小値をガンマ変換により、各々最大明度L MAXおよび最小明度L MINに変換する。入力画像信号が[0,255]の範囲の信号であるとすると、この変換は例えば、
Figure 0005072891
Figure 0005072891
で表される。ここで、SMAXおよびSMINは各々最大値/最小値算出部17で算出された信号値の最大値および最小値である。γ、αは任意の実数で良いが、一般的に最も簡略にこの変換を行う場合にはα=0.0、γ=2.2/3.0が用いられる。γ、αをこれらの値に設定してガンマ変換を行うことにより、信号値は、明度と呼ばれる人の明るさ知覚に比例する尺度の値へと変換される。これらのガンマ変換は乗算器等を用いて直接に算出しても良いし、ルックアップテーブルを用いて算出してもよい。以降では、最大値/最小値算出部17とガンマ変換部1との組によって算出された明度L MAXおよびL MINを各々最大明度、最小明度と呼ぶ。
中心値算出部18は、ガンマ変換部1で算出された最大明度および最小明度の中心の値である中心値を算出する。この中心値は最大明度からの距離と最小明度からの距離が等しくなるような値である。すなわち中心値は、対象となる空間範囲における複数の画素の信号値の明度の中心の値である。例えば数式3のように最大明度と最小明度との平均値を算出することにより中心値L MID求めることができる。
Figure 0005072891
乗算器10は、中心値算出部18で算出された中心値(最大明度と最小明度との中心の値)に、液晶パネル16の特性に応じて算出される値(以降では明度ゲインと呼ぶ)を乗じる。乗算部10によるこの乗算値は、バックライト14の明度変調率と呼ぶ。
本実施形態では、液晶パネル16の表示ダイナミックレンジがD である場合の明度ゲインKを数式4のように算出する。
Figure 0005072891
ここで、液晶パネルの表示ダイナミックレンジとは、液晶パネル単体の表示コントラスト特性により決定される値であり、液晶パネルの、(最大表示可能明度)/(最小表示可能明度)の値とする。例えば、液晶パネルがコントラスト比1000:1((最大表示可能輝度):(最小表示可能輝度))のコントラスト特性を有する場合には、ここで言う液晶パネルの表示ダイナミックレンジは、{1000(1/3)}/{1(1/3)}すなわち10である。
このように算出された明度ゲインを、中心値算出部18で算出された中心値(最大明度と最小明度との中心の値)に乗じることにより、中心値算出部18で算出された中心値(最大明度と最小明度との中心の値)と、本画像表示装置で表示可能となる相対輝度の範囲の中心とを一致させることができる。以下これについてさらに詳細に説明する。
中心値算出部18で算出された中心値をL MID、液晶パネルの表示ダイナミックレンジをD とすると、発光強度算出部11において算出されるバックライトの明度変調率L SETは、中心値L MIDに明度ゲインKを乗じた値、すなわち、
Figure 0005072891
となる。バックライト14がこの明度変調率どおりの明度で発光するとした場合、本画像表示装置で表示可能となる最大の明度L および最小の明度L は、
Figure 0005072891
となる。したがって、本画像表示装置で表示可能となる明度の範囲の中心L は、
Figure 0005072891
であり、すなわち、
Figure 0005072891
となり、中心値算出部18で算出された中心値(最大明度と最小明度との中心の値)と、本画像表示装置で表示可能となる明度の範囲の中心とが一致する。このように、中心値算出部18で算出された最大明度と最小明度との中心の値に、数式4に従って算出された明度ゲインを乗じることにより、中心値算出部18で算出された最大明度と最小明度との中心の値と、本画像表示装置で表示可能となる明度の範囲の中心とを一致させることができる。
ガンマ変換部2は入力されたバックライトの明度変調率L* SETをガンマ変換により、バックライトの輝度変調率LSETに変換する。この変換は例えば、
Figure 0005072891
で表される。γ、αは任意の実数で良いが、一般的に最も簡略にこの変換を行う場合にはα=0.0、γ=3.0が用いられる。γ、αをこれらの値としてガンマ変換することにより、明度は、光のエネルギーに比例する明るさの尺度に相当する輝度へと変換される。この変換は乗算器等を用いて直接に算出しても良いし、ルックアップテーブルを用いて算出してもよい。
発光強度算出部11における、明度ゲインの乗算および明度変調率のガンマ変換は、乗算器10aおよびガンマ変換部2によって行なっても良いし、図5に示すように、あらかじめ、最大明度と最小明度との中心値と、バックライトの輝度変調率との関係をルックアップテーブル(LUT)化しておき、このルックアップテーブル10bを参照することによって実現しても良い。
なお、以上のようにバックライト14の輝度変調率を算出したとしても、後述する信号補正部12における画像信号の光透過率の補正(輝度の補正)を行わない場合には、バックライト14の発光強度の変調により単に表示画像が暗くなるだけであることに注意されたい。
また、発光強度算出部11において、中心値算出部18で算出された中心値(最大明度と最小明度との中心値)に乗ぜられる明度ゲインの値は数式4に従った値に限られたものではなく、バックライト14の発光強度の変調によって表示可能となる明度範囲の中心が、入力画像の明度の中心値に一致するような値であればどのような値でも良い。したがって、上記乗算器10aにおいて明度の中心値に乗ぜられる値は、数式4に従って算出される値に近い値であってもよいし、バックライト発光強度の変調によって表示可能となる明度範囲の中心が、入力画像の明度の中心値に一致するように経験的・実験的に決定された値であってよい。
発光強度算出部11の変更例
本実施形態の発光強度算出部11において、図6(a)に示すように、最大値/最小値算出部17の前段にガウシアンフィルタなどの公知の空間ローパスフィルタ19を配置し、最大値および最小値を算出する前に、画像信号にローバスフィルタリングを施す構成とすることができる。
本ローパスフィルタ19は、処理対象の画像信号の空間的近傍の画像信号の重み付き平均をフィルタされた新たな画像信号とする処理を、画像信号中のそれぞれの座標に対して行なう。つまり、フィルタされた新たな画像信号は、フィルタされる以前の画像信号に基づき、
Figure 0005072891
のように算出される。上式において、S´(x、y)は座標(x、y)における新たな画像信号の値、S(ξ、ψ)は座標(ξ、ψ)におけるフィルタされる以前の画像信号の値、w(ξ、ψ)は座標(ξ、ψ)における重みの値であり、r、rは重みテーブルの半径である。
このようにすることにより、最大値/最小値算出部17で算出される最大値および最小値が、画像中のごく少数の画素のみの信号に依存するということを回避でき、バックライト14の発光強度の時間変化を安定化することができ、バックライト14の発光強度の時間変化に起因して発生する表示画像上のちらつきを回避することができる。
または、本実施形態の発光強度算出部11において、図6(b)に示すように、最大値/最小値算出部17の前段に解像度変換部20を配置して、最大値および最小値を算出する前に、画像信号に解像度変換を施す構成とすることもできる。解像度変換部20は、本画像表示装置に入力された画像信号をより粗い空間解像度の信号に変換する。解像度変換部20の解像度変換手法は、入力信号にローパスフィルタを施してから疎にサンプリングする手法でもよいし、その他、公知の解像度変換手法でもよい。このようにすることにより、解像度変換時の空間ローパスフィルタ効果により、上述したように、バックライト14の発光強度の時間変化に起因して発生する表示画像上のちらつきを回避することができるとともに、最大値/最小値算出部17での処理の対象となる画素数を少なくすることができ、最大値/最小値算出部17の演算量を少なくすることができる。
信号補正部12
信号補正部12は発光強度算出部11において算出されたバックライト14の輝度変調率と、入力された画像信号とに基づいて、液晶パネル16の各画素における画像信号の輝度(透過率)を補正し、補正された画像信号を液晶制御部15に出力する。この信号補正部12の一具体例の構成を図7に示す。
この信号補正部12はガンマ変換部3と、除算部37と、ガンマ補正部38と、を備えている。
ガンマ変換部3は、入力された画像信号をR、G、Bの光透過率に変換する。つまり、ガンマ変化部3は、入力画像信号が[0,255]の範囲の信号であるとすると、(6)式で表される変換を行う。
Figure 0005072891
ここで、S、S、SはR、G、Bに対応する画像信号値であり、T、T、TはそれぞれR、G、B各色に対応する光透過率である。ガンマ変換部3のγ、αの値は任意の実数で良いが、一般的に最も簡略にこの変換を行う場合にはα=0.0、γ=2.2が用いられる。
除算部37はガンマ変換部3によって算出された各画素のR、G、Bの光透過率を、発光強度算出部11で算出されたバックライト14の輝度変調率で除算することにより、補正光透過率を算出する。除算部37による演算は、具体的にはガンマ変換部3によって算出された各画素のR、G、Bの光透過率を発光強度算出部11で算出されたバックライト14の輝度変調率で除算することで行う。ただし除算部37に、あらかじめ入出力に対応する値の関係を保持したルックアップテーブルを保持させておき、除算部37はこのルックアップテーブルを参照して補正光透過率を算出するようにしても良い。
ガンマ補正部38は除算部37において算出された補正光透過率にガンマ補正を施し、液晶制御部15に出力するための画像信号に変換する。出力される画像信号をR、G、Bに対応する[0,255]の範囲の信号であるとすると、このガンマ補正は例えば、下記の(7)式を用いて行われる。
Figure 0005072891
ここで、T´、T´、T´はそれぞれR、G、B各色に対応する補正光透過率であり、S´、S´、S´はそれぞれR、G、Bに対応する出力画像信号値である。γ、αは任意の実数で良いが、γを液晶パネル16のガンマ値、αを液晶パネル16の最小光透過率とすることにより、入力信号に忠実な画像の再生を可能とすることが可能である。また、ガンマ補正はこの変換に限らず、必要に応じて公知の変換方式で代用しても良いし、液晶パネル16のガンマ変換テーブルに従った逆変換としてもよい。これらの変換は乗算器等を用いて直接に算出としても良いし、ルックアップテーブルを用いて算出してもよい。
信号補正部12の変更例
信号補正部12の動作は入力されたバックライト14の輝度変調率と画像信号によって決まるので、信号補正部12は、図8に示すように、発光強度算出部11において算出されたバックライト14の輝度変調率と画像信号とに基づいて設定されたルックアップテーブル10cを参照して、透過率の補正された画像信号を算出する構成としても良い。
信号補正部12にかかる効果
以上のように実施された信号補正部12の動作による効果を、図9(a)および図9(b)を参照して説明する。補正前の光透過率はバックライト14の相対輝度が最大、すなわち1.0である場合を想定している。したがって、液晶の光透過率の補正なしにバックライト14の輝度を変更した場合、実際の表示は入力された画像信号で想定されていた表示とは大きく異なる表示となる。そこで、発光強度算出部11において算出されたバックライト14の輝度変調率を用いて、信号補正部12において液晶の光透過率の補正を行う。信号補正部12では、補正前の光透過率を発光強度算出部11で算出されたバックライト14の輝度変調率で除算する。これにより、図9(a)に示すように、補正光透過率は補正前の光透過率と比べて大きな値に設定されることとなる。そして、実際に観察者に提示される映像は(バックライトの輝度)×(液晶の光透過率)で近似されうるので、図9(b)に示すように、補正光透過率にバックライトの輝度を乗じて得られる相対輝度の映像が表示され、これにより、入力された画像信号が想定している表示に近い表示を得ることができる。
発光強度算出部11および信号補正部12にかかる効果
図10は、本実施形態にかかる発光強度算出部11の動作を模式的に示す図である。
図10において横軸は明度(人の明るさ知覚に比例する明るさの尺度に相当する値)である。上述したように、本実施形態にかかる発光強度算出部11は、中心値算出部18で算出された最大明度と最小明度との中心値(すなわち、対象となる空間範囲における複数の画素の信号値の明度の中心値)と、本画像表示装置で表示可能となる明度の範囲の中心とが一致するようバックライト14の発光輝度を算出するように構成されている。したがって、入力画像中の複数の画素の信号値の明度が、図10内上側の矢印で示された範囲に分布している場合、発光強度算出部11では、その内の最大値と最小値との中心と、本画像表示装置で表示可能となる明度の範囲の中心とが一致するようバックライト14の明度が算出されるため、バックライト14の明度は図10内に太い縦線HLで示した明度で発光し、その結果、本画像表示装置で表示可能となる明度の範囲は図10内下側の矢印A1で示された範囲となる。その結果、入力画像中の複数の画素のうち、少なくとも図10内破線矢印BL1、BL2で示された範囲の明度の信号値をもつ画素は、入力信号値どおりの明度を忠実に再現することはできなくなる。したがって、入力画像の明度に対して、表示される画像に生じる最大の誤差は、図10内破線矢印BL1、BL2で示された大きさの明度差となる。
発光強度算出部11がこのように動作することにより、本実施形態によれば、入力画像の明度に対して表示される画像に生じる最大の誤差を、最小とすることができる。
これに対し、例えば、画像信号の最大明度にバックライト14の明度が一致するようにバックライト14を点灯させると、バックライト14の明度、すなわち、表示可能な明度範囲の上限が明度の大きい側に偏り、それに伴い、表示可能な明度範囲の下限も明度の大きい側に偏ることとなるので、結果として、明度が小さい側の誤差が大きくなってしまう。つまり、表示される画像に生じる最大の誤差が暗い側で大きくなってしまう。その結果、表示画像において、黒が白く浮くような画質劣化が目立ってしまうこととなる。
このように、本実施形態によれば、中心値算出部18で算出された最大明度と最小明度との中心値(すなわち対象となる空間範囲における複数の画素の信号値の明度の中心値)と、本画像表示装置で表示可能となる明度の範囲の中心とを一致するよう構成されていることにより、入力画像の明度に対して表示される画像に生じる最大の誤差を、最小とすることができる。
一般に、視覚の感度は、刺激のサイズが非常に小さい場合(直径約0.1[deg]以下)には、刺激の面積にほぼ比例して高くなるが、それ以上の大きさの刺激に対しては、刺激面積が光覚に与える影響は小さく、視感度は刺激の強度のみに依存するといわれている(視覚情報処理ハンドブック、朝倉書店、5.1.2 a閾値面積曲線(リコーの法則))。
したがって、主観的な画質劣化を軽減するためには、誤差を有する面積や画素の数を減らすことよりも、誤差そのものの大きさをより小さくすることの方がより有効であると考えられる。
本実施形態によれば、表示画像上に発生する明度差(誤差)自体を最小とすることが可能であるので、主観的な画質劣化を最小限に留めることが可能である。
また、上述したとおり、本実施形態では、ガンマ変換部2においてα=0.0、γ=2.2/3.0としてガンマ変換することにより、信号値は明度に相当する値に変換する。上述のとおり明度は人の明るさ知覚に比例する明るさの尺度である。一方、輝度と呼ばれる尺度は、光のエネルギーに比例する明るさの尺度である。一般に、輝度は人が感じる明るさの強度には比例しない。そのため、人が知覚する明るさの差異を評価するためには、輝度の差ではなく、明度の差を用いるのが適切である。上述のとおり本実施形態によれば、表示画像上に発生する明度差(誤差)を最小とすることが可能であるので、主観的な画質劣化を最小限に留めることが可能である。
(補足)液晶パネル16のコントラスト特性と表示可能範囲
バックライト14の明度に対して、表示可能となる明度の範囲が、図10に示されるような範囲に限定されるのは、液晶パネル16のコントラスト特性により、実現しうる最小の光透過率に限界があるからでる。例えば、液晶パネル16のコントラスト比が1000:1である場合、その液晶パネル16ではバックライト14の明度に対して、1/10倍〜1倍の範囲の明度しか表示できない。
また、一般に、液晶パネルで変調可能な明度の範囲は、画像信号の明度の範囲に対して狭いため、入力される画像信号によってはバックライト14の明度をいかように変調しようとも入力画像信号どおりには表示できないような場合が生じる。たとえば、入力された画像信号の明度が0から1まで広く分布している場合、この画像信号すべてを液晶表示装置で忠実に再現することは出来ない。
また、入力された画像信号のほとんどが暗い部分であり、一部のみが明るいような画像信号であった場合に、画像信号の最大明度にバックライト14の明度が合うようにバックライト14を点灯させると、画像信号の一部のみを占める明るい部分は画像信号に忠実に再現できるが、一方で画像信号のほとんどを占める暗い部分は再現できなくなってしまうこととなる。
液晶パネル16および液晶制御部15
液晶パネル16は、本実施形態ではアクティブマトリクス型であり、図11に示すように、アレイ基板24上に複数本の信号線21およびこれと交差する複数本の走査線22が図示しない絶縁膜を介して配置されており、両線の各交差領域には画素23が形成されている。信号線21および走査線22の端部は、信号線駆動回路25および走査線駆動回路26にそれぞれ接続されている。各画素23は、薄膜トランジスタ(TFT)からなるスイッチ素子31と、画素電極32と、液晶層35と、補助容量33と、対向電極34とを備えている。なお、対向電極34は全ての画素23に共通の電極となっている。
スイッチ素子31は、画像信号書込み用のスイッチ素子であり、そのゲートは1水平ライン毎に共通に走査線22に接続され、ソースは1垂直ライン毎に信号線21に共通に接続されている。さらに、ドレインは画素電極32に接続されるとともに、この画素電極32と電気的に並列に配置された補助容量33に接続されている。
画素電極32は、アレイ基板24上に形成され、この画素電極32と電気的に相対する対向電極34は、図示しない対向基板上に形成されている。対向電極34には、図示しない対向電圧発生回路から所定の対向電圧が与えられている。また画素電極32と対向電極34との間には液晶層35が保持され、アレイ基板24と上記対向基板の周囲は図示しないシール材により封止されている。なお、液晶層35に用いる液晶材料は、どのようなものでも良いが、例えば、強誘電性液晶やOCB(Optically Compensated Bend)モードの液晶等が液晶材料として好適である。
走査線駆動回路26は、図示しないシフトレジスタ、レベルシフタおよびバッファ回路等から構成されている。この走査線駆動回路26は、図示しない表示比率制御部から制御信号として出力された垂直スタート信号や垂直クロック信号に基づいて、各走査線22に行選択信号を出力する。
信号線駆動回路25は、図示しないアナログスイッチ、シフトレジスタ、サンプルホールド回路、ビデオバス等から構成されている。この信号線駆動回路25には、図示しない表示比率制御部から制御信号として出力された水平スタート信号および水平クロック信号が入力されるとともに、画像信号が入力されている。
液晶制御部15は、液晶透過率補正部12による補正後の液晶透過率となるように液晶パネル16を制御する。
本実施形態にかかる効果
本実施形態にかかる画像表示装置によれば、表示画像上に発生する明度差(誤差)を最小とすることが可能であるので、主観的な画質劣化を最小限に留めることが可能であり、広ダイナミックレンジかつ低消費電力な画像表示が可能となる。
(第2実施形態)
本発明の第2実施形態による画像表示装置について図を参照して説明する。
画像表示装置の構成
本実施形態による画像表示装置の構成を図12に示す。第2実施形態による画像表示装置は、第1実施形態による画像表示装置と比べて、バックライトを構成する複数の光源の発光強度および発光タイミングが、バックライト制御部43によって個別に制御可能である点が大きく異なっている。また、本実施形態による画像表示装置は輝度分布算出部47を有していることが望ましく、本実施形態では輝度分布算出部47を有しているものとする。
以下に各部の構成および動作の詳細を述べる。
バックライト44
バックライト44は複数の光源を有する。これらの光源はバックライト制御部43の制御により個別に強弱に点灯し、液晶パネル46を背面から照射する。
このバックライト44の一具体例の構成を図13(a−1)、図13(a−2)、図13(b)、図13(c)に示す。図13(a−1)、図13(a−2)、図13(b)、図13(c)に示すようにバックライトは少なくとも1つ以上の光源を備えている。光源の配置は、図13(a−1)、図13(a−2)、図13(b)に示すように、液晶パネル46背面に光源を配置する直下式でもよいし、図13(c)に示すように液晶パネル46側面に光源を配置し、図示しない導光板やリフレクタにより液晶パネル46背面に光を導くことにより液晶パネル46を背面から照射するエッジライト式でもよい。
図13では各光源は単一の発光素子から構成されるかのように示されているが、光源は図14(a)のように単一の発光素子により構成しても良いし、図14(b)のように液晶パネル46と平行な面に沿って複数の発光素子を配置する構成としても良い。
発光素子はLED、冷陰極管、熱陰極管等が適している。特にLEDは最大発光可能輝度と最小発光可能輝度の幅が広く、高いダイナミックレンジでの発光制御が可能であるので、発光素子として用いるのが好ましい。光源はバックライト制御部43によって発光強度(発光輝度)および発光タイミングが制御可能となっている。
バックライト制御部43
バックライト制御部43は発光強度算出部41によって算出された各光源の輝度変調率に基づきバックライト44を構成する各光源を強弱に点灯させる。バックライト制御部43は、バックライト44を構成する各光源の発光強度(発光輝度)および発光タイミングを独立に制御可能である。
発光強度算出部41
第2の実施の形態による発光強度算出部41の構成例を図15に示す。発光強度算出部41は画像信号から表示に適した各光源の輝度変調率を算出する。第2実施形態による発光強度算出部41は、最大値/最小値算出部21の構成が第1実施形態による発光強度算出部41の最大値/最小値算出部17と大きく異なっている。
第2実施形態による発光強度算出部41の最大値/最小値算出部21は、バックライト44を構成する各光源に対して、その光源の液晶パネル46に対する照射範囲に対応した空間範囲内で、複数の画素の信号値から、それら信号値のうちの最大値および最小値を算出する。最大値/最小値算出部21において、各光源に対する最大値および最小値の算出の対象となる空間範囲は、各光源の照射範囲に概略一致した空間範囲でも良いし、これより大きい空間範囲でも小さい空間範囲でも良い。
第2実施形態によるガンマ変換部1は、入力された各光源に対する信号値の最大値および最小値をガンマ変換により、第1実施形態によるガンマ変換部1と同様にして、各々各光源に対する最大明度および最小明度に変換する。
第2実施形態による中心値算出部51は、ガンマ変換部1で算出された各光源に対する最大明度および最小明度から、第1実施形態による中心値算出部51と同様にして、各光源に対する最大明度と最小明度との中心値を算出する。
第2実施形態による発光強度算出部41は、中心値算出部51で算出された各光源に対する最大明度と最小明度との中心値に、第1実施形態による発光強度算出部41と同様に、液晶パネル46の特性に応じて算出された値(明度ゲイン)を乗じ、バックライト44をなす各光源の明度変調率を算出する。
第2実施形態によるガンマ変換部2は、算出された各光源の明度変調率を、第1実施形態によるガンマ変換部2と同様に、ガンマ変換により、各光源の輝度変調率に変換する。
輝度分布算出部47
第2の実施の形態による輝度分布算出部47は、発光強度算出部41において算出されたそれぞれの輝度変調率で各光源を点灯させた際に実際に液晶パネル46に入射する光の輝度分布の予測値を算出する。
バックライト44をなす各光源は実際のハードウェア構成に応じた発光分布を持つため、光源の点灯により液晶パネル46に入射する光の強度もそれに応じた分布を持つ。ここでは液晶パネル46に入射する光の強度を単にバックライトの輝度または光源の輝度と表現する。光源の輝度分布の例を図16に示す。この輝度分布は、各光源の照射範囲の中心に対して対称であり、光源の照射範囲の中心から離れるに連れて相対輝度が減少している分布となっている。第n番目の光源nを輝度変調率LSET,nで点灯させたときの各座標における相対輝度は、この輝度分布を用いて、
Figure 0005072891
で表すことができる。(8)式においてx´n、y´nは光源nの照射範囲の中心からの点の相対座標であり、LP,nはその点における光源nの輝度である。
バックライト44の各光源を相対輝度LSET,nで点灯させたときの各画素における輝度は、各光源のその画素における輝度に各光源の輝度変調率を乗じた値の和として算出される。
バックライトの輝度分布(各画素の輝度)の算出方法を図17に模式的に示す。つまり、バックライトの輝度分布は各光源の輝度分布LP,nを用いて、下記の(6)式で算出される。
Figure 0005072891
(9)式においてx、yは液晶パネル46上での画素の座標であり、x0,n、y0,nは液晶パネル46上での光源nの照射範囲の中心の座標である。Nは光源の総数である。(9)式ではある画素でのバックライトの輝度を求めるにあたって、全ての光源の輝度変調率および輝度分布を用いるように定義されているが、その画素での輝度に対して影響の少ない光源の輝度変調率および輝度分布は、その画素の輝度の算出において省略することができる。
各光源の輝度分布は、これを適切な関数で近似して直接に算出しても良いし、予め用意したルックアップテーブルを用いて算出してもよい。
信号補正部42
信号補正部42は輝度分布算出部47において算出されたバックライトの輝度分布と、入力された画像信号とに基づいて、液晶パネル46の各画素における画像信号の透過率を補正し、補正された透過率の画像信号を液晶制御部45に出力する。この信号補正部42の一具体例の構成を図18に示す。
この信号補正部42はガンマ変換部3と、除算部61と、ガンマ補正部38と、を備えている。
第2実施形態による信号補正部42は、除算部61がガンマ変換部3によって算出された各画素のR、G、Bの光透過率と、輝度分布算出部47で算出されたバックライトの輝度の分布とから補正光透過率を算出するという点で第1実施形態による信号補正部12と大きく異なっている。
第2実施形態による除算部61はガンマ変換部3によって算出された各画素のR、G、Bの光透過率を、輝度分布算出部47で算出されたバックライトの輝度分布の値で除算することにより補正光透過率を算出する。ただし、除算部61に、あらかじめ入出力に対応する値の関係を保持したルックアップテーブルを保持させておき、除算部61はこのルックアップテーブルを参照して補正光透過率を算出するようにしても良い。
液晶パネル46および液晶制御部45
第2実施形態による液晶パネル46および液晶制御部45は、第1実施形態による液晶パネル16および液晶制御部15と同じ構成を有する。
本実施形態にかかる効果
本実施形態にかかる画像表示装置によれば、表示画像上に発生する明度差(誤差)を最小とすることが可能であるので、主観的な画質劣化を最小限に留めることが可能であり、第1実施形態にかかる画像表示装置よりもさらに広ダイナミックレンジかつ低消費電力な画像表示が可能となる。
11、41:発光強度算出部
12、42:信号補正部
13、43:バックライト制御部
14、44:バックライト
15、45:液晶制御部
16、46:液晶パネル
17、21:最大値/最小値算出部
18、51:中心値算出部
1、2、3:ガンマ変換部
10a:乗算器
10b:ルックアップテーブル
10c:ルックアップテーブル
19:ローパスフィルタ
20:解像度変換部
37、61:除算部
38:ガンマ補正部
47:輝度分布算出部

Claims (7)

  1. 光を出射するバックライトと、
    前記バックライトから出射される光を変調することにより画像表示を行う液晶パネルと、
    前記バックライトの発光強度に応じて定まる前記液晶パネルにより表示可能な明度範囲の中心値と、入力画像の各画素の明度の最大値及び最小値それぞれとの明度差が等しい中心値とが同じになるように、前記バックライトの発光強度を算出する発光強度算出部と、
    算出された発光強度で発光するように前記バックライトの発光を制御するバックライト制御部と、
    前記算出された発光強度に応じて前記入力画像の各画素の信号を補正する信号補正部と、
    補正された入力画像に基づいて前記液晶パネルの変調を制御する液晶制御部と、
    を備えた画像表示装置。
  2. 前記信号補正部は、各前記画素の輝度を、前記算出された発光強度に応じて定まるバックライトの発光輝度で除算することにより補正を行う
    ことを特徴とする請求項1に記載の画像表示装置。
  3. 前記発光強度算出部は、前記各画素の明度の最大値及び最小値それぞれとの明度差が等しい前記中心値に対して、あらかじめ設定された定数を乗じることによって前記バックライトの発光強度を算出する
    ことを特徴とする請求項2に記載の画像表示装置。
  4. 前記発光強度算出部は、前記入力画像に空間ローパスフィルタをかけ、フィルタリング後の入力画像の各画素の明度の最大値及び最小値それぞれとの明度差が等しい中心値が、前記液晶パネルにより表示可能な前記明度範囲の中心値と同じになるように、前記バックライトの発光輝度を算出する
    ことを特徴とする請求項2に記載の画像表示装置。
  5. 前記発光輝度算出部は、前記入力画像の空間解像度を低下させる解像度変換部を有し、前記入力画像を前記解像度変換部により解像度変換し、変換された入力画像の各画像の明度の最大値及び最小値それぞれとの明度差が等しい中心値が、前記液晶パネルにより表示可能な前記明度範囲の中心値と同じになるように、前記バックライトの発光輝度を算出する
    ことを特徴とする請求項2に記載の画像表示装置。
  6. 前記バックライトは、それぞれ発光強度を個別に制御可能な複数の光源を含み、
    前記発光強度算出部は、前記光源毎に、前記液晶パネルにおける前記光源の照射範囲に応じた空間範囲内の画素を用いて、前記発光輝度を算出する
    ことを特徴とする請求項1に記載の画像表示装置。
  7. 前記中心値を求める対象の画素の個数は3以上である
    ことを特徴とする請求項1に記載の画像表示装置。
JP2009068425A 2009-03-19 2009-03-19 画像表示装置 Expired - Fee Related JP5072891B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2009068425A JP5072891B2 (ja) 2009-03-19 2009-03-19 画像表示装置
US12/563,507 US8390563B2 (en) 2009-03-19 2009-09-21 Image display apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009068425A JP5072891B2 (ja) 2009-03-19 2009-03-19 画像表示装置

Publications (2)

Publication Number Publication Date
JP2010224014A JP2010224014A (ja) 2010-10-07
JP5072891B2 true JP5072891B2 (ja) 2012-11-14

Family

ID=42737157

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009068425A Expired - Fee Related JP5072891B2 (ja) 2009-03-19 2009-03-19 画像表示装置

Country Status (2)

Country Link
US (1) US8390563B2 (ja)
JP (1) JP5072891B2 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4987887B2 (ja) * 2009-01-16 2012-07-25 株式会社東芝 画像表示装置
US8947339B2 (en) * 2009-12-21 2015-02-03 Sharp Laboratories Of America, Inc. Noise-compensated LCD display
JP4966383B2 (ja) * 2010-01-13 2012-07-04 株式会社東芝 液晶表示装置
KR101146992B1 (ko) * 2010-05-07 2012-05-23 삼성모바일디스플레이주식회사 평판 표시 장치 및 그의 구동 방법
JP5197697B2 (ja) * 2010-09-06 2013-05-15 株式会社東芝 映像表示装置および情報処理装置
JP5197698B2 (ja) * 2010-09-07 2013-05-15 株式会社東芝 映像表示装置および情報処理装置
JP6241155B2 (ja) * 2012-11-29 2017-12-06 ブラザー工業株式会社 制御装置およびコンピュータプログラム
US9654701B2 (en) * 2013-01-25 2017-05-16 Dolby Laboratories Licensing Corporation Global display management based light modulation
JP6164922B2 (ja) * 2013-05-14 2017-07-19 キヤノン株式会社 画像表示装置及びその制御方法
JP2019053208A (ja) 2017-09-15 2019-04-04 キヤノン株式会社 表示装置及びその制御方法
JP7239362B2 (ja) * 2019-03-20 2023-03-14 ソニー・オリンパスメディカルソリューションズ株式会社 医療用画像処理装置及び医療用観察システム
JP7500966B2 (ja) * 2019-12-24 2024-06-18 セイコーエプソン株式会社 回路装置、表示装置、電子機器、移動体及び制御方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3523170B2 (ja) * 2000-09-21 2004-04-26 株式会社東芝 表示装置
JP4628770B2 (ja) * 2004-02-09 2011-02-09 株式会社日立製作所 照明装置を備えた画像表示装置及び画像表示方法
WO2005085007A1 (en) 2004-02-20 2005-09-15 Sharp Kabushiki Kaisha Display device, method of controlling same, computer program for controlling same, and computer program storage medium
JP2005309338A (ja) 2004-04-26 2005-11-04 Mitsubishi Electric Corp 画像表示装置および画像表示方法
JP2007025187A (ja) * 2005-07-15 2007-02-01 Sanyo Epson Imaging Devices Corp 電気光学装置及び電子機器
JP2007163647A (ja) * 2005-12-12 2007-06-28 Mitsubishi Electric Corp 画像表示装置
JP4203090B2 (ja) * 2006-09-21 2008-12-24 株式会社東芝 画像表示装置および画像表示方法
JP4237220B2 (ja) * 2006-11-13 2009-03-11 シャープ株式会社 透過型ディスプレイ装置
JP4643545B2 (ja) * 2006-11-20 2011-03-02 株式会社日立製作所 液晶表示装置
JP4655079B2 (ja) * 2007-11-06 2011-03-23 ソニー株式会社 液晶表示装置、液晶表示モジュールおよび液晶表示装置の駆動方法
JP5491702B2 (ja) * 2008-03-28 2014-05-14 株式会社東芝 画像表示装置および画像表示方法

Also Published As

Publication number Publication date
US20100238201A1 (en) 2010-09-23
US8390563B2 (en) 2013-03-05
JP2010224014A (ja) 2010-10-07

Similar Documents

Publication Publication Date Title
JP5072891B2 (ja) 画像表示装置
JP5491702B2 (ja) 画像表示装置および画像表示方法
JP5122927B2 (ja) 画像表示装置および画像表示方法
JP5734580B2 (ja) 画素データの補正方法及びこれを遂行するための表示装置
KR101324453B1 (ko) 로컬 디밍 방법과 이를 이용한 액정표시장치
JP4979776B2 (ja) 画像表示装置および画像表示方法
JP4818351B2 (ja) 画像処理装置及び画像表示装置
JP5666163B2 (ja) 光源駆動方法
JP4960507B2 (ja) 映像表示装置及び制御装置
US9076397B2 (en) Image display device and image display method
US8358293B2 (en) Method for driving light source blocks, driving unit for performing the method and display apparatus having the driving unit
JP5183240B2 (ja) 画像表示装置および画像表示方法
JP5165788B1 (ja) 映像表示装置
JP7338622B2 (ja) 画像処理装置、表示装置、画像処理方法
KR20120092790A (ko) 표시 패널의 구동 방법 및 이를 수행하는 표시 장치
US8274471B2 (en) Liquid crystal display device and method for driving the same
JP2005134724A (ja) 液晶表示装置
JP2010117578A (ja) 表示装置、液晶表示装置、および表示方法
JP2019164206A (ja) 表示装置、表示装置の制御方法、プログラム、及び、記憶媒体

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100928

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20101228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110329

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110420

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120727

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120821

R151 Written notification of patent or utility model registration

Ref document number: 5072891

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150831

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313121

Free format text: JAPANESE INTERMEDIATE CODE: R313115

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees