JP5138809B2 - 領域適応型バックライトを管理するための方法およびシステム - Google Patents

領域適応型バックライトを管理するための方法およびシステム Download PDF

Info

Publication number
JP5138809B2
JP5138809B2 JP2011501839A JP2011501839A JP5138809B2 JP 5138809 B2 JP5138809 B2 JP 5138809B2 JP 2011501839 A JP2011501839 A JP 2011501839A JP 2011501839 A JP2011501839 A JP 2011501839A JP 5138809 B2 JP5138809 B2 JP 5138809B2
Authority
JP
Japan
Prior art keywords
image
backlight
led
value
light emitting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011501839A
Other languages
English (en)
Other versions
JP2011528125A (ja
Inventor
フェン シャオファン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of JP2011528125A publication Critical patent/JP2011528125A/ja
Application granted granted Critical
Publication of JP5138809B2 publication Critical patent/JP5138809B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406—Control of illumination source
    • G09G3/342—Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines
    • G09G3/3426—Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines the different display panel areas being distributed in two dimensions, e.g. matrix
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/36—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
    • G09G3/3611—Control of matrices with row and column drivers
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0238—Improving the black level
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0247—Flicker reduction other than flicker reduction circuits used for single beam cathode-ray tubes
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0261—Improving the quality of display appearance in the context of movement of objects on the screen or movement of the observer relative to the screen
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0271—Adjustment of the gradation levels within the range of the gradation scale, e.g. by redistribution or clipping
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0626—Adjustment of display parameters for control of overall brightness
    • G09G2320/0646—Modulation of illumination source brightness and image signal correlated to each other
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/066—Adjustment of display parameters for control of contrast
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/16—Calculation or use of calculated indices related to luminance levels in display data

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Liquid Crystal (AREA)

Description

本発明は、ＬＥＤバックライトアレイのバックライト駆動値を生成、修正、および適用するための方法およびシステムに関する。
ＬＣＤディスプレイ等のように、ディスプレイには、個別に処理および調節が可能な素子が設けられたバックライトアレイを備えているものがある。表示される画像の特性は、バックライトアレイの素子を系統的に処理することにより改善することが可能である。
本発明の実施形態は、ＬＥＤバックライトアレイのバックライト駆動値を生成、修正、および適用するための方法およびシステムを含む。
一つの方法は、配列された発光素子を有するバックライト層と、拡散層と、表示パネルとを備えた表示装置のための方法において、上記発光素子の駆動値を変更する方法である。
上記方法は、
ａ）上記発光素子のそれぞれの対象駆動値を含む初期バックライト画像（BL0）を取得するステップと、
ｂ）上記発光素子の上記配列に応じて位置づけられた、上記対象駆動値の間に配置された仮想駆動値を含み、かつ、上記初期バックライト画像を、上記仮想駆動値の位置を含むマスクと畳み込むことによって確立される初期駆動値画像（Led1）を確立するステップと、
ｃ）上記初期駆動値画像を第１の行列と畳み込むことによって、増加した光放射に合わせて、上記発光素子の駆動値を調整して、近似バックライト画像（bl1）を決定するステップと、
ｄ）上記初期バックライト画像と上記近似バックライト画像との差異であるバックライト不足画像（bl2）を決定するステップと、
ｅ）上記バックライト不足画像を第２の行列と畳み込むことによって、補正バックライト画像（bl3）を生成して、それによって、光分布を評価するステップと、
ｆ）上記補正バックライト画像を上記初期バックライト画像に加算することによって、修正初期バックライト画像（BL1）を決定するステップと、
を含んでいてもよい。
また、他の方法は、配列された発光素子を有するバックライト層と、拡散層と、表示パネルとを備えた表示装置のための方法において、上記バックライト層に合わせて対象画像を修正する方法である。
上記方法は、
ａ）上記発光素子のそれぞれの駆動値を含む上記対象画像（BL1）を取得するステップと、
ｂ）上記対象画像を、上記配列に応じて位置づけられた、上記対象駆動値の間に配置された仮想値を含むマスクと合成して、中間画像（Led1）を生成するステップと、
ｃ）上記中間画像を行列と畳み込みを行って、近似バックライト画像（BL2）を生成するステップと、
ｄ）上記対象画像と上記近似バックライト画像との差異を表す差異画像を決定するステップと、
ｅ）倍率（β）を決定するステップと、
ｆ）上記差異画像を上記倍率でスケーリングし、それによって、変倍差異画像を生成するステップと、
ｇ）上記中間画像を上記変倍差異画像に加算して、修正画像を生成するステップと、
ｈ）上記修正画像の値がゼロ未満のとき、該値をゼロに設定するステップと、
を含んでいてもよい。
また、一つの方法は、配列された発光素子を有するバックライト層と、拡散層と、表示パネルとを備えた表示装置のための方法において、上記発光素子の駆動値を含むバックライト画像を後処理する方法である。
上記方法は、
ａ）上記駆動値を含む上記バックライト画像を取得するステップと、
ｂ）上記バックライト画像中に１より大きい駆動値ledi,jを検索するステップと、
ｃ）上記駆動値ledi,jに隣接する駆動値の係数を、次の式により計算するステップと、
Ci-1,j= max(0,1-ledi-1,j)
Ci+1,j= max(0,1-ledi+1,j)
Ci,j-1= max(0,1-ledi,j-1)
Ci,j+1= max(0,1-ledi,j+1)
ｄ）上記駆動値および上記隣接する駆動値を、次の式により更新するステップと、
ledi,j= 1
ledi-1,j = ledi-1,j + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
ledi+1,j = ledi+1,j + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
ledi,j-1 = ledi,j-1 + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
ledi,j+1 = ledi,j+1 + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
（ｋは、隣接する駆動値からの寄与における減少を補正するために使われる定数）
を含んでいてもよい。
さらに、一つの方法は、配列された発光素子を有するバックライト層と、拡散層と、表示パネルとを備えた表示装置のための方法において、上記バックライト層のためのバックライト画像を生成する方法である。
上記方法は、
ａ）上記表示パネルの第１の解像度の画像を表す画素値の配列を含む入力画像を取得するステップと、
ｂ）上記入力画像に、上記拡散層の点像分布関数を表す第１の行列によって、ローパスフィルタ処理を施して、ローパスフィルタ処理された（ＬＰＦ）画像を生成するステップと、
ｃ）上記ＬＰＦ画像を、上記第１の解像度よりも低い中間解像度にサンプリングし、それによって、中間画像（LEDlp）を生成するステップと、
ｄ）上記入力画像に、上記ＬＰＦ画像の生成に使用された上記第１の行列よりも小さい第２の行列によって、ローパスフィルタ処理を施し、それによって、第２のローパスフィルタ処理された（ＳＬＰＦ）画像を生成するステップと、
ｅ）上記ＳＬＰＦ画像を、各ブロックが上記バックライト層の発光素子に対応するとともに、各ブロックの間で一部重なりがある複数のブロックに分割するステップと、
ｆ）上記ＳＬＰＦ画像の各ブロックについて、最大値を決定し、それによって、各ブロックの最大値を含む最大画像（LEDmax）を生成するステップと、
ｇ）上記最大画像の対応する値および上記中間画像の対応する値の一方に基づいて、対象駆動値を含む合成画像（LED1）を生成するステップと、
を含んでいてもよい。
また、一つの方法は、配列された発光素子を有するバックライト層と、拡散層と、表示パネルとを備えた表示装置のための方法において、上記バックライト層のためのバックライト画像を生成する方法である。
上記方法は、
ａ）上記表示パネルの第１の解像度の画像を表す画素値の配列を含む入力画像を取得するステップと、
ｂ）上記拡散層の点像分布関数を表す第１の行列によって、上記入力画像にローパスフィルタ処理を施して、ローパスフィルタ処理された（ＬＰＦ）画像を生成するステップと、
ｃ）上記ＬＰＦ画像を、上記第１の解像度よりも低い中間解像度にサンプリングし、それによって、中間画像（LEDlp）を生成するステップと、
ｄ）上記ＬＰＦ画像の生成に使用された上記第１の行列よりも小さい第２の行列によって、上記入力画像にローパスフィルタ処理を施し、それによって、第２のローパスフィルタ処理された（ＳＬＰＦ）画像を生成するステップと、
ｅ）上記ＳＬＰＦ画像を、各ブロックが上記バックライト層の発光素子に対応するとともに、各ブロックの間で一部重なりがある複数のブロックに分割するステップと、
ｆ）上記ＳＬＰＦ画像の各ブロックについて、最大値を決定し、それによって、各ブロックの最大値を含む最大画像（LEDmax）を生成するステップと、
ｇ）上記最大画像の対応する値および上記中間画像の対応する値の一方に基づいて、対象駆動値を含む合成画像（LED1）を生成するステップと、
ｈ）上記発光素子の上記配列に応じて位置づけられた、上記対象駆動値の間に配置された仮想駆動値を含み、かつ、上記合成画像を上記仮想駆動値の位置を含むマスクを用いて畳み込むことにより確立される初期駆動値画像（Led1）を確立するステップと、
ｉ）上記初期駆動値画像を第３の行列を用いて畳み込むことによって、近似バックライト画像を決定して、増加した光放射に合わせて、上記発光素子の駆動値を調整するステップと、
ｊ）上記合成画像と上記近似バックライト画像との差異であるバックライト不足画像を決定するステップと、
ｋ）上記バックライト不足画像を第４の行列を用いて畳み込むことによって、補正バックライト画像を生成し、それによって、光分布を評価するステップと、
ｌ）上記補正バックライト画像を上記合成画像に加算することによって、修正合成画像を決定するステップと、
を含んでいてもよい。
本発明の前述および他の目的、特徴、ならびに、効果は、後述する詳細な説明を、添付の図面と共に考慮すれば、より容易に理解できるであろう。
図１は、ＬＥＤバックライトアレイを備えた一般的なＬＣＤディスプレイを示す図である。 図２は、ＬＥＤバックライトの駆動値を決定する、本発明の典型的な実施形態を示すチャートである。 図３は、典型的なＬＥＤ点像分布関数を示す画像である。 図４は、典型的な前処理のアルゴリズムを示すチャートである。 図５は、ＬＥＤ駆動値を導出する典型的な方法を示すチャートである。 図６は、典型的なＬＥＤバックライト駆動値およびエラー拡散後の対応する応答を示す画像である。 図７は、典型的なＬＥＤバックライト駆動値および後処理後の対応する応答を示す画像である。 図８は、ＬＥＤバックライト画像の典型的な逆ガンマ補正曲線を示すグラフである。 図９は、典型的なＬＣＤ画像の典型的な逆ガンマ補正曲線を示すグラフである。
本発明の各実施形態は、図面を参照することにより最も良く理解されるであろう。図面では、全体を通じて同じ部材が同じ番号で示される。上述した各図は、詳細な説明の一部として明確に包含される。
図中に一般的に記載され、例示されている本発明の各構成要素は、広く様々な範囲の異なる構成にアレンジしたり、設計したりすることが可能であることは、容易に理解できるであろう。したがって、本発明に係る方法およびシステムについて以下に説明する各実施形態のより詳細な説明は、本発明の範囲を限定するものではなく、単に本発明の現状において好適な実施形態を例示したものである。
本発明の各実施形態の構成要素は、ハードウェア、ファームウェアおよび／またはソフトウェアの形態で実現可能である。ここで開示される例示的な実施形態は、これらの形態の１つを示したものに過ぎないが、当業者であれば、本発明の範囲を逸脱することなく、これらの形態のうちいずれの形態でも各構成要素を実現することができることは、理解できるであろう。
発光ダイオード（ＬＥＤ）のバックライトを用いる液晶ディスプレイ（ＬＣＤ）を備えたハイダイナミックレンジ（ＨＤＲ）のディスプレイにおいては、バックライトＬＥＤを調整するための低解像度のＬＥＤ画像と、高解像度のＬＣＤ画像とに、入力画像を変換するアルゴリズムを使用することができる。高コントラストと電力の節約とを実現するために、バックライトはできるだけ高いコントラストを備えているべきである。高解像度のＬＣＤ画像と組み合わされたバックライト画像のコントラストが高いほど、そのようなバックライト画像は、従来の方法を用いたディスプレイよりも、非常に高いダイナミックレンジを持つ画像を生成することができる。しかしながら、高コントラストのバックライトには、動きによってフリッカが誘因されるという問題がある。動いているオブジェクトがＬＥＤの境界を跨ると、バックライトに突然の変化が起こる。この過程で、いくつかのＬＥＤは光の出力量を減らし、いくつかのＬＥＤは光の出力量を増やす。これにより、対応するＬＣＤは、急激に変化して、バックライトの急激な変化を補正する。ＬＥＤの駆動とＬＣＤの駆動とのタイミングの差、または、補正の誤差により、表示出力の変動が発生し、これにより、動くオブジェクトに沿って発生するフリッカが目立ってしまう。現状の解決策は無限インパルス応答（ＩＩＲ）フィルタ処理を用いて、時間遷移を滑らかにするものであるが、これは正確でなく、また、ハイライトのクリッピングを生ずることもある。
偏向板の消光比および液晶（ＬＣ）材質の欠陥により、ＬＣＤのダイナミックレンジには限界がある。高ダイナミックレンジの画像を表示するために、低解像度のＬＥＤバックライトシステムを用いて、ＬＣＤに送り込む光を調整することができる。調整されたＬＥＤバックライトとＬＣＤとを組み合わせることによって、非常に高いダイナミックレンジの（ＨＤＲ）ディスプレイを実現することができる。コスト上の理由により、ＬＥＤは、一般的に、ＬＣＤよりも空間解像度が非常に低い。ＬＥＤの解像度が低いために、ＨＤＲディスプレイは、この技術に基づいて、高い空間解像度の非常に動きにあるパターンを表示することはできない。しかし、非常に明るい領域(> 2000 cd/m2)と非常に暗い領域（< 0.5 cd/m2）とを同時に持つような画像を表示することができる。人間の目は、局所的な領域に対するダイナミックレンジが限られているため、通常の使用においては、このことは重大な問題にはならず、視覚マスキングにより、高い空間周波数のコンテンツの限られたダイナミックレンジをほとんど認識することはない。
調整されたＬＥＤバックライトのＬＣＤが持つ別の問題は、動きの軌跡に沿ったフリッカ（すなわち、表示出力の変動）である。これは、ＬＥＤの点像分布関数（ＰＳＦ）のエラーとともに、ＬＣＤとＬＥＤとの時間応答のミスマッチが原因となり得る。いくつかの実施形態は、フリッカの影響を低減するための時間ローパスフィルタ処理を含んでいる。
図１を参照しながら、本発明のいくつかの実施形態を説明する。図１は、ＬＥＤ層２を備えたＨＤＲディスプレイを概略的に示している。ＬＥＤ層２は、ＬＣＤ層６のバックライトとして、アレイ状に配置された個々のＬＥＤ８を備えている。ＬＥＤ層２の各ＬＥＤのアレイから発した光は、拡散層４を通過してＬＣＤ層６を明るくする。
いくつかの実施形態において、バックライト画像は、次の式（１）によって与えられる。
ここで、LED(i,j)は、バックライトアレイの各ＬＥＤのＬＥＤ出力レベルである。psf(x,y)は、拡散層の点像分布関数である。「*」は、畳み込み演算を示している。バックライト画像は、さらに、ＬＣＤによって調整される。
表示される画像は、ＬＥＤバックライトとＬＣＤの透過率: TLCD(x,y)との積である。
ＬＥＤとＬＣＤとを組み合わせることによって、ディスプレイのダイナミックレンジが、ＬＥＤのダイナミックレンジとＬＣＤのダイナミックレンジとの積になる。単純化のために、いくつかの実施形態では、０と１との間に正規化されたＬＣＤ出力およびＬＥＤ出力を使用する。
本発明のいくつかの好適な実施形態について、図２を参照しながら説明する。図２は、入力画像を低解像度のＬＥＤバックライト画像と高解像度のＬＣＤ画像とに変換するアルゴリズムのフローチャートを示している。ＬＣＤの解像度はｍ×ｎ画素であり、各画素は、黒を表す０から、最大の透過率を表す１までの範囲の値をとる。ＬＥＤの解像度はＭ×Ｎ画素（Ｍ＜ｍ、Ｎ＜ｎ）である。入力画像の解像度は、ＬＣＤ画像の解像度と同じであると仮定する。もし、入力画像が異なる解像度を持つ場合、入力画像の解像度をＬＣＤ画像の解像度に変換するために、スケーリングの工程またはクロッピングの工程を使用してもよい。いくつかの実施形態では、入力画像は０から１までの値に正規化されてもよい。
これらの実施形態において、ディスプレイの拡散スクリーンの点像拡散関数を用いて、入力画像にローパスフィルタ処理（Ｓ１１）を施すことにより、ＬＰＦ画像を作成してもよい。その後、このＬＰＦ画像は、中間解像度（すなわち、Ｍ１×Ｎ１）にサブサンプルされてもよい（Ｓ１４）。いくつかの実施形態において、中間解像度は、ＬＥＤのアレイサイズの倍数（すなわち、ａＭ×ａＮ）であってもよい。好適な実施形態では、中間解像度は、ＬＥＤの解像度の２倍（すなわち、２Ｍ×２Ｎ）であってもよい。いくつかの実施形態では、フリッカを低減するために特別な解像度を用いてもよい。このサブサンプルされた画像をLEDlp画像と呼んでもよい。
また、ＨＤＲ入力画像１０は、より小さいフィルタカーネル（例えば、５×５のフィルタカーネル）を用いて、ローパスフィルタ処理（Ｓ１２）が施されることにより、鏡面反射パターンのサイズをシミュレートしてもよい。そして、このより小さいローパスフィルタ画像（ＳＬＰＦ画像）は、各ブロックが１つのＬＥＤに対応し、ブロック間である程度の重なりがあるようなａＭ×ａＮ個のブロック群に分割されてもよい（Ｓ１３）。例えば、好適な実施形態では、ブロックサイズは、（１＋ｋ）＊（ｍ／Ｍ×ｎ／Ｎ）（ｋ：重なり係数）であってもよい。好適な実施形態では、ｋの値は０．２５に設定されてもよい。そして、各ブロックについて、最大値を決定してもよい（Ｓ１５）。これらの最大ブロック値を用いて、Ｍ×Ｎ画素の解像度を持つLEDmax画像を作成してもよい。
いくつかの実施形態では、様々なLEDmax画像およびLEDlp画像から選択することにより、合成LED1画像を生成してもよい（Ｓ１６）。好適な実施形態では、次の式に示すように、LEDlp画像の２倍とLEDmax画像とのうちの大きいほうを選択することにより、LED1画像を決定してもよい。
いくつかの実施形態では、LED1画像の各値は、例えば数式（４）を用いることにより、１未満に限定されてもよい。
局所極大値を考慮することにより、スペキュラーハイライトを失わないようにできる。また、LEDlp画像の２倍の値を用いることにより、最大のＬＣＤ動作範囲が使用されることが保障される。これらの実施形態は、高いダイナミックレンジと高い空間周波数とを持ち、画像の調整が優れている。
得られるLED1画像は、Ｍ×Ｎ画素の大きさであり、０から１までの範囲をとる。より均一なバックライト画像を提供するために、拡散スクリーンのＰＳＦの間隔は、ＬＥＤの間隔よりも大きい。そのため、互いに近接するＬＥＤ素子の間には、かなりのクロストークが存在する。
図３は、一般的なLED PSFを示しており、照明の中心円の内部にある黒い線５５は、ＬＥＤアレイ素子間の境界を示している。図３から、ＰＳＦがＬＥＤ素子の境界を越えることが分かる。
各ＬＥＤのＰＳＦであるため、どのＬＥＤも、隣接する各ＬＥＤからの影響を受ける。数式（２）を用いてバックライトを計算することができるが、ＬＥＤ駆動信号が与えられたときに、目標とするバックライト画像を得るようなＬＥＤ駆動信号を導出することは、逆問題である。すなわち、これは不適切な逆畳み込み問題である。数式（５）に示すような畳み込みカーネルを用いてＬＥＤ駆動信号を導出するのがひとつのアプローチである。クロストーク補正カーネル係数（c1およびc2）は負であり、隣接するＬＥＤからのクロストークを補正する。
クロストーク補正行列は、すぐ隣のＬＥＤからのクロストークの影響を低減するが、得られるバックライト画像は、コントラストが低すぎてまだ不正確である。さらに、切り捨てる必要があり、また、より多くの誤差の原因となり得る、範囲外の駆動値を多数生成するという別の問題もある。
ＬＣＤ出力は１より大きくはなり得ないので、例えば次の式のように、バックライトが目標とする輝度I(x,y)よりも大きくなるように、ＬＥＤ駆動値が導出されなければならない（Ｓ１７）。
数式（６）において、「：」は、中括弧内の関数が望ましいＬＥＤ値をとるような制約条件を示すために用いられている。コントラスト比（ＣＲ）が限定されているため、漏れにより、LCD(x,y)は０にはなり得ない。目標とする値がＬＣＤの漏れよりも小さいとき、ＬＥＤ値を減らして暗輝度を再現することにより、この問題は解決される。
いくつかの実施形態では、全体のＬＥＤ出力が低減されるか、または、最小化されるように、消費電力を低減することをもうひとつの目的としてもよい。
フリッカは、ＬＣＤとＬＥＤとのミスマッチを伴ったまま組み合わされたＬＥＤの非定常応答が原因となり得る。ミスマッチは、空間的なミスマッチおよび時間的なミスマッチのいずれでもあり得る。フレーム間の全体および局所的なＬＥＤ出力の変動を減少させることにより、フリッカを低減または最小化する（Ｓ１８）ことが可能である。
ｘ0およびｙ0は、ＬＥＤの中心からの距離を示している。数式（９）を成立させるためには、一連の非ＬＥＤのグリッドポイント、あるいは、仮想ポイントを導入して、ＬＥＤ出力の変動を最小化する。いくつかの実施形態では、１つ以上の仮想ポイントが２つのＬＥＤの間に挿入される。仮想ポイントがない場合、オブジェクト（輝点）が、あるＬＥＤから別のＬＥＤに移動するとき、１つ目のＬＥＤが弱まり、２つ目のＬＥＤが強まる。これが急に起こることにより、フリッカとなる。仮想ポイントがある場合、明るいオブジェクトは最初に仮想ポイントに移動し、その後に２つ目のＬＥＤに移動する。仮想ポイントにより、最初のＬＥＤはその出力をゆっくりと弱め、２つ目のＬＥＤはその出力を強めることになる。いくつかの実施形態では、時間ＩＩＲフィルタ処理により、フリッカをさらに低減することができる。数式（６）と数式（９）とを組み合わせると、以下の数式（１０）が得られる。
いくつかの実施形態では、数式（１０）または他の制約条件を満たすバックライト駆動値を導出する（Ｓ１７）アルゴリズムには、次の各ステップが含まれる。
１．前処理：隣接するＬＥＤに非ＬＥＤの仮想ポイントを割り振る。仮想ポイントは、望ましいバックライト値を持つ、ＬＥＤの存在しない（オフグリッドの）ポイントである。
２．LED>0という制約条件を用いて、ＬＥＤ駆動値を導出するマルチパスルーチン。
３．後処理：１（最大値）より大きい駆動値を持つＬＥＤについて、閾値処理を施して１にし、その後、異方性誤差の拡散処理を用いて、誤差を隣接するＬＥＤに拡散する。
図４は、好適な前処理のアルゴリズムを示している。ＬＥＤの対象画像（BL0）は、ＬＥＤポイントと仮想ポイントとの両方から導出される（BL0はステップＳ１６において、LED１に設定されてもよい）。この例では、対象画像は、ＬＥＤグリッド上の位置するポイントと、仮想（オフグリッド）ポイントと、の２種類のポイントから構成される。
１．最初に、ＬＥＤ駆動値の初期値４５を目標値（BL0）４０と同じに設定する。ＬＥＤグリッドポイントである場合、LedMask４２は１であり、仮想ポイントである場合、LedMask４２は０である。いくつかの実施形態では、ＬＥＤ駆動値の初期値４５（Led1）を、バックライトの目標値（BL0）４０とLedMask４２とのドット積とする（Ｓ４１）ことにより、Led1がBL0の画素素子間の仮想ポイントを含むようにしてもよい。
２．ＬＥＤ駆動値の初期値４５（Led1）を、切り捨てられたＰＳＦ（psf2）カーネル４３（例えば、３×３）によって畳み込む（Ｓ４４）ことにより、バックライト（bl1）を近似してもよい。
３．バックライトの不足（bl2）は、次のように引き算を行う（Ｓ４７）ことにより決定してもよい。
４．この不足を補正するために、隣接する４つのＬＥＤのＬＥＤ駆動値を、次式のような畳み込み演算（Ｓ４９）によって決定された不足調整分（bl3）だけ増加させてもよい。
ここで、kは、ＬＥＤポイントから仮想ポイントへの低いクロストーク値を補正するための定数である。dkは、拡散行列（拡散カーネル）５０である。実際には、これら２つの項はまとめることができる。
５．その後、次式を用いて、不足調整分を目標値の初期値４０に加算する（Ｓ５２）ことにより、修正後の目標値（BL1）を決定することができる。
上記工程２において、ＰＳＦカーネル４３によって畳み込みを行う目的は、周囲のＬＥＤから発せられた光を補正することにある。具体的には、ＬＥＤから発せされた光が広く分散すると、最終的な光量は、周囲のＬＥＤから発せられた光が重なる分をさらに含むことになる。単一のＬＥＤの照度が所望する照度よりも小さい場合、これを補正するための最も単純な方法は、隣接するＬＥＤの照度を増加させることである。従って、ＰＤＦカーネル４３を用いた畳み込み処理は、周囲のＬＥＤの照度を増加させる処理に相当すると考えてもよい。拡散法および発光強度の正規化に応じて、ＰＳＦカーネル４３のサイズおよび値を変えてもよい。
拡散行列５０を用いた畳み込みにより、拡散層４およびＬＣＤ層６の結果として、ＬＥＤから発せられた光の分散を推定する。拡散行列５０の各値は、拡散層４およびＬＣＤ層６によって決定される固有の値である。実際、ディスプレイの拡散層およびＬＣＤ層を通じて到達する光の発光分散を測定することにより、上記の各値を決定してもよい。このように、拡散行列５０のサイズおよび各値は変化し得る。
対象値からのＬＥＤ駆動値の導出は、計算コストが高く、ハードウェアでの実行が困難な、反復アルゴリズムを必要とする不適切な逆問題である。本発明に係る実施形態のいくつかの側面を、図５を参照して説明する。これらの実施形態において、マルチパスアルゴリズムを、ＬＥＤ駆動値６６の導出に用いることができる（いくつかの実施形態は図２のステップＳ１７の一部を含んでいてもよい）。いくつかの実施形態において、ＬＥＤ駆動値６６は、上述した前処理ステップにおいて変更された対象値（BL1）を用いて初期化される（Ｓ６０）。対象値BL1は、実際の画像ポイント間に点在する仮想点を含むＬＥＤマスク（ledMASK）と組み合わされて、Ｌｅｄ１となる。
反復方法において、バックライトは、ＬＥＤ駆動値、例えば、長さＭＮの１Ｄベクトルの掛け算によって算出される。ここで、ＭＮは、クロストーク行列（ＭＮ×ＭＮ）を有するＬＥＤの総数である。これは、計算コストが高く、また、互いに遠く離れたＬＥＤ間のクロストークは非常に小さいため不要である。
いくつかの実施形態において、バックライトは、ＬＥＤ駆動値Led1を、BL2に関する７×５のサイズの、切り捨てられたＰＳＦ６７を用いて畳み込みを行うことによって、近似される（Ｓ６１）。ＰＳＦ６７との畳み込みは、拡散層４およびＬＣＤ層６の結果として、複数のＬＥＤから出た光の分布の評価を与える。ＰＳＦ６７の値は、拡散層４およびＬＣＤ層６によって決定される固有の値である。実際に、値は、ディスプレイの拡散層及びＬＣＤ層を通過する光の発光分布を計測することによって決定される。このように、ＰＳＦ６７のサイズおよび値は、変化し得る。
いくつかの実施形態において、反復方法はさらに、一定数回、繰り返して用いられる（Ｓ６２）。典型的な実施例においては、４回の反復がよい結果を生む。新しいＬＥＤ駆動値Ledi+1は、対象値（BL1）と予測値（BL2）との間の差分に係数を掛けた値によって、増加または減少される（Ｓ６３）。スケール係数（β）は、典型的な実施例においては０．２８であり、また、ＰＳＦおよび他の要因に基づいてさまざまな値をとり得る。
いくつかの実施形態において、中間ＬＥＤ駆動値Ledi+1は、さらにledMASKと掛け算される。そして、その結果が、０より大きくなるように、かつ、ledMASKによって規定されるＬＥＤグリッドポイントにのみ見出されるように、制限される（Ｓ６４）。制限された中間ＬＥＤ駆動値はさらに、切り捨てられたＰＳＦ６７を用いて畳み込みされる（Ｓ６５）。この処理は、所望のＬＥＤ駆動値６６を得るために数回反復して繰り返され、概して４回の反復の後に収束する。
本発明のいくつかの実施形態の側面を、図６を参照して説明する。図６は、得られたＬＥＤ駆動値７０および予測バックライト値７１を示す。典型的な実施形態において、所望のバックライト値、例えば、３を得るためには、１つの仮想ポイントの隣接する４つのＬＥＤには１．１８のＬＥＤ駆動値が必要であり、ＬＥＤポイントには２．９９のＬＥＤ駆動値が必要である。図６に示すように、得られたＬＥＤ駆動値は１よりも大きいが、ＬＥＤは最大値の１まででのみ駆動される。いくつかの実施形態において、異方性誤差拡散の後処理が、隣接する各ＬＥＤの切り捨て誤差を分配するために用いられる。
典型的な実施形態において、この処理を完遂するために以下のステップが用いられる。
ledi,j> 1 を満たすledi,jを検索する。
隣接する４つのＬＥＤについての係数をそれぞれ算出する。
Ci-1,j= max(0,1-ledi-1,j)
Ci+1,j= max(0,1-ledi+1,j)
Ci,j-1= max(0,1-ledi,j-1)
Ci,j+1= max(0,1-ledi,j+1)
ＬＥＤ値を更新する。
ledi,j= 1
ledi-1,j = ledi-1,j + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
ledi+1,j = ledi+1,j + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
ledi,j-1 = ledi,j-1 + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
ledi,j+1 = ledi,j+1 + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
いくつかの実施形態では、上述のステップは、ハードウェアによる実行のために、以下のステップで近似できる。
ledi,j > 1 を満たすledi,jを検索する。
led1からled4まで昇順に４つの隣接する各ＬＥＤをソートする。
If (led4 - led1 < threshold),
ledi,j= 1
ledn = ledn + k(ledi,j-1)>>2; n=1,2,3,4
else
ledi,j= 1
led1 = led1 + k(ledi,j-1)>>3
led2 = led2 + k(ledi,j-1)>>2
led3 = led3 + k(ledi,j-1)>>2
led4 = led4 + k(ledi,j-1)>>1
ここで、k>1は、隣接する各ＬＥＤからの減少した寄与を補正するための定数である。典型的な実施形態では、それは約２５パーセントである。いくつかの実施形態では、上述した異方性誤差拡散が、より大きい隣接領域において実行される。図７は、後処理の後のＬＥＤ駆動値８０および予測バックライト値８１を示す図である。ＬＥＤ駆動値８０は、物理的限界内である、０と１との間の値をとる。一方、予測バックライト値８１は、対象値よりもさらに大きい。
いくつかの実施形態において、ＬＥＤ出力は駆動値に関して非線形であり、また、駆動値は整数であるので、逆ガンマ補正（Ｓ１９）および量子化は、ＬＥＤ駆動回路２０に送られるＬＥＤ駆動値を決定するために実行される。
図８は、各ＬＥＤの典型的な逆ガンマ補正処理を示す図である。図２に示される全ての処理において、量子化された駆動値は、再びガンマ補正され（Ｓ２７）、実際のＬＥＤ出力を生じる。
いくつかの実施形態では、バックライト画像は、ＬＥＤ画像から予測される。ＬＥＤ画像は、ＬＣＤの解像度（ｍ×ｎ）にアップサンプルされ（Ｓ２６）、拡散スクリーンのＰＳＦと畳み込まれて（Ｓ２５）、ＬＥＤバックライト画像（LED_BL）２４を生成する。ＬＣＤの透過率は、数式（１１）から算出される（Ｓ２３）。ここで、ＨＤＲ入力画像１０はLED_BLによって分割される。
また、ＬＣＤの非線形応答を補正するために、逆ガンマ補正が実行され（Ｓ２２）、結果として得られたＬＣＤ画像が、ＬＣＤ駆動回路２１に送られる。図９は、典型的な逆ガンマ補正曲線を示すグラフである。
いくつかの実施形態において、フリッカの効果を低減するために、時間ローパスフィルタ処理（Ｓ１８）が、急な時間変動を平滑化するために用いられる。数式（１２）に、典型的なフィルタリング処理を示す。
ここで、kupは、概して、数式（６）を満たすために、kdownよりも高くなるように選ばれる。典型的な実施形態では、kupは０．５に設定され、また、kdownは０．７５に設定される。
要約すれば、ディスプレイバックライトの対象値を変更する方法は、以下のステップを含んでいてもよい。
ａ）初期バックライト対象値画像（BL0）を取得するステップ；
ｂ）上記入力画像の画素素子間に配置された仮想ポイントを含む初期ＬＥＤ駆動値（led0）画像を、上記BL0画像を上記仮想ポイントの位置を含むＬＥＤマスクと畳み込むことにより、確立するステップ；
ｃ）上記led0画像を切り捨て点像分布関数（psf2）カーネルと畳み込むことにより、近似されたバックライト画像（bl1）を決定するステップ；
ｄ）上記BL0画像と上記bl1画像との差異に基づいた、バックライト不足画像（bl2）を決定するステップ；
ｅ）上記bl2画像を上記拡散カーネルと畳み込むことにより、補正されたバックライト画像（bl3）を生成するステップ；
ｆ）上記bl3画像を上記BL0画像に加えることにより、変更されたＬＥＤ対象値画像BL1を決定するステップ。
上記切り捨て点像分布関数（psf2）は、３×３のカーネルであり、次表によって表される。
拡散カーネルは、３×３のカーネルであり、次表によって表される。
さらに、ディスプレイバックライトアレイのための、変更されたＬＥＤ対象値画像を生成する方法は、以下のステップを含んでいてもよい。
ａ）対象バックライト画像（BL1）を取得するステップ；
ｂ）上記BL1画像を、実際の画像ポイントの間に点在する仮想ポイントを含むＬＥＤマスクと合成して、led1画像を生成するステップ；
ｃ）上記led1画像を、点像分布関数（ＰＳＦ）と畳み込み、近似されたバックライト画像BL2を生成するステップ；
ｄ）上記対象バックライト画像BL1と上記近似されたバックライト画像BL2との差異を表す差異画像を決定するステップ；
ｅ）スケール係数βを決定するステップ；
ｆ）上記差異画像を、上記スケール係数によってスケーリングし、それによって、スケーリングされた差異画像を生成するステップ；
ｇ）上記Led1画像を上記スケーリングされた差異画像に加えて、修正されたＬＥＤ画像ledi+1を生成するステップ；
上記修正されたledi+1画像の値が０より小さい場合、当該値を０に設定するステップ。
上記点像分布関数は、５×７のカーネルであり、次表によって表される。
加えて、変更されたＬＥＤ対象値画像の生成する方法は、さらに、ステップｄからｈまでを、固定回数繰り返すことを含んでいる。
加えて、ディスプレイバックライトアレイのための、バックライト画像駆動値を後処理する方法は、以下のステップを含んでいてもよい。
ａ）バックライト画像駆動値を含むバックライト画像を取得するステップ；
ｂ）上記バックライト画像の、１より大きいバックライト画像駆動値ledi,jを検索するステップ；
ｃ）上記駆動値ledi,jの隣接位置に関する係数を、次の式により計算するステップ
Ci-1,j= max(0,1-ledi-1,j)
Ci+1,j= max(0,1-ledi+1,j)
Ci,j-1= max(0,1-ledi,j-1)
Ci,j+1= max(0,1-ledi,j+1)；
ｄ）上記バックライト画像駆動値および上記隣接位置の値を、次の式により更新するステップ
ledi,j= 1
ledi-1,j = ledi-1,j + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
ledi+1,j = ledi+1,j + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
ledi,j-1 = ledi,j-1 + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
ledi,j+1 = ledi,j+1 + k(ledi,j-1)* Ci-1,j / Σ(Ci,j);
ここで、ｋは、隣接する各ＬＥＤからの減少した寄与の補正のために用いられる定数である。
さらに、ディスプレイバックライトアレイのための、バックライト画像を生成する方法は、以下のステップを含んでいてもよい。
ｅ）ＬＣＤ解像度で画像を表す画素値の配列を含む入力画像を取得するステップ；
ｆ）上記入力画像を、ディスプレイ拡散スクリーンの点像分布関数を用いてローパスフィルタ処理を行って、ローパスフィルタ処理された（ＬＰＦ）画像を生成するステップ；
ｇ）上記ＬＰＦ画像を中間解像度にサブサンプリングし、それによって、LEDlp画像を生成するステップ；
ｈ）上記入力画像を、上記ＬＰＦ画像を生成するために用いられるカーネルよりも小さいカーネルを用いてローパスフィルタ処理し、それによって、第２のローパスフィルタ処理された（ＳＬＰＦ）画像を生成するステップ；
ｉ）上記ＳＬＰＦ画像を、各アレイ素子の間である程度の重なりがある、上記ディスプレイバックライトアレイのディスプレイバックライトＬＥＤ素子に対応する各ブロックであるブロック群に分割するステップ；
ｊ）上記ＳＬＰＦ画像の上記各ブロックのそれぞれの最大値を決定し、それによって、LEDmax画像のLEDmax値を生成するステップ；
対応するLEDmax画像値および対応するLEDlp画像値のうちの１つに基づいた値を含むLED1画像を生成するステップ。
LED1画像が、対応するLEDmax画像値と、対応するLEDlp画像値の２倍との大きい方となるように、上記LEDlp画像および上記LEDmax画像から値を選択することによって、LED1画像は生成される。
中間解像度は、上記バックライトアレイの解像度の倍数である。
上記ＳＬＰＦ画像の上記各ブロックのサイズは、次の数式を用いて決定される。
ここで、ｋは、重なり係数である。ＭおよびＮは、ＬＥＤバックライトアレイの次元である。ｍおよびｎは、ＬＣＤアレイの次元である。
バックライト画像を生成する方法は、さらに、以下のステップを含んでいてもよい。
上記LED1画像からＬＥＤバックライト画像を導出するステップ；
上記ＬＥＤバックライト画像に逆ガンマ補正を行い、それによって、上記ディスプレイバックライトアレイの逆ガンマ補正された（ＩＧＣ）ＬＥＤ画像を生成するステップ。
加えて、以下のステップを行ってもよい。
ａ）上記ＩＧＣ ＬＥＤ画像にガンマ補正を行い、それによって、LED2画像を生成するステップ；
ｂ）上記LED2画像を上記ＬＣＤ解像度にアップサンプリングするステップ；
ｃ）上記LED2画像を、上記ディスプレイの拡散層の点像分布関数を用いて畳み込み、それによって、LED_BL画像を生成するステップ；
ｄ）上記LED_BL画像によって上記入力画像を分割し、ＬＣＤ画像を生成するステップ；
上記ＬＣＤ画像に逆ガンマ補正を行い、それによって、逆ガンマ補正された（ＩＧＣ）ＬＣＤ画像を生成するステップ。
ＬＥＤバックライト画像を導出する上記ステップは、以下のステップを含む。
ａ）初期バックライト対象値画像BL0を取得するステップ；
ｂ）上記BL0画像を上記仮想ポイント位置を含むＬＥＤマスクを用いて畳み込むことにより、上記入力画像の画素要素間に配置された仮想ポイントを含む初期ＬＥＤ駆動値（led0）画像を確立するステップ；
ｃ）上記led0画像を切り捨てられた点像分布関数（psf2）カーネルを用いて畳み込むことにより、近似されたバックライト画像（bl1）を決定するステップ；
ｄ）上記BL0画像と上記bl1画像との間の差異に基づいて、バックライト不足画像（bl2）を決定するステップ；
ｅ）上記bl2画像を、拡散カーネルを用いて畳み込むことにより、補正されたバックライト画像（bl3）を生成するステップ；
上記bl3画像を上記BL0画像に加えることにより、変更されたＬＥＤ対象値画像（BL1）を決定するステップ。
さらに、上記LED1画像に時間ローパスフィルタ処理を行ってもよい。
ディスプレイバックライトアレイのための、バックライト画像を生成する完全な方法は、以下のステップを含んでいてもよい。
ａ）ＬＣＤ解像度で画像を表す画素値の配列を含む入力画像を取得するステップ；
ｂ）上記入力画像を、ディスプレイ拡散スクリーンの点像分布関数を用いてローパスフィルタ処理して、ローパスフィルタ処理された（ＬＰＦ）画像を生成するステップ；
ｃ）上記ＬＰＦ画像を中間解像度にサブサンプリングし、それによって、LEDlp画像を生成するステップ；
ｄ）上記入力画像を、上記ＬＰＦ画像を生成するために用いられるカーネルよりも小さいカーネルを用いてローパスフィルタ処理し、それによって、第２のローパスフィルタ処理された（ＳＬＰＦ）画像を生成するステップ；
ｅ）上記ＳＬＰＦ画像を、各アレイ素子間にある程度の重なりがある上記ディスプレイバックライトアレイのディスプレイバックライトＬＥＤ素子に対応する各ブロックであるブロック群に分割するステップ；
ｆ）上記ＳＬＰＦ画像の上記各ブロックのそれぞれの最大値を決定し、それによって、LEDmax画像のLEDmax値を生成するステップ；
ｇ）対応するLEDmax画像値および対応するLEDlp画像値のうちの１つに基づいた値を含むLED1画像を生成するステップ；
ｈ）対象バックライト画像BL0を上記仮想ポイント位置を含むＬＥＤマスクを用いて畳み込むことにより、上記入力画像の各画素素子間に配置された仮想ポイントを含む対象ＬＥＤ駆動値（led0）画像を確立するステップ；
ｉ）上記led0画像を、切り捨てられた点像分布関数（psf2）カーネルを用いて畳み込むことにより、近似されたバックライト画像（bl1）を決定するステップ；
ｊ）上記BL0画像と上記bl1画像との差異を表すバックライト不足画像（bl2）を決定するステップ；
ｋ）上記bl2画像を拡散カーネルを用いて畳み込むことにより、補正されたＬＥＤ駆動値画像（bl3）を生成するステップ；および、上記BL0画像を上記bl3画像に加えることにより、変更されたＬＥＤ対象値画像（BL1）を決定するステップ。
上記方法は、さらに、上記BL1画像に時間ローパスフィルタ処理を行うステップを含んでいる。
上記方法では、BL0画像値が、対応するLEDmax値と、対応するLEDlp値の２倍との大きい方となるように、上記LEDlp画像および上記LEDmax画像から値を選択することにより、上記BL0画像が生成される。
上記中間解像度は、上記バックライトアレイの解像度の倍数である。
上記ＳＬＰＦ画像上の上記各ブロックのサイズは、次式によって決定される。
ここで、ｋは、重なり係数である。ＭおよびＮは、ＬＥＤバックライトアレイの次元である。ｍおよびｎは、ＬＣＤアレイの次元である。
上述した説明において採用された用語や表現は、説明のための用語として用いられるものであり、何ら限定を伴うものではない。また、ここで説明された特徴に相当するもの、またはその一部を除いて、これらの用語および表現の使用において何ら意図はない。
このように記述された本発明は、様々に変更可能であることは明らかである。そのような変更は本発明の意図および範囲から逸脱するものではなく、当業者にとって明らかであるそのような全ての変更は、以下の請求項の範囲に含まれる。

Claims (17)

  1. 配列された発光素子を有するバックライト層と、拡散層と、表示パネルとを備えた表示装置のための方法において、
    上記発光素子の駆動値を変更する方法であって、
    ａ）上記発光素子のそれぞれの対象駆動値を含む初期バックライト画像（BL0）を取得するステップと、
    ｂ）上記発光素子が位置するグリッドポイントに対応して上記対象駆動値を含むとともに、上記発光素子間の位置に対応する仮想ポイントに対応して仮想駆動値を含み、かつ、上記初期バックライト画像を、上記グリッドポイントおよび上記仮想ポイントに対応して値が設定されたマスクと、畳み込むことによって確立される初期駆動値画像（Led1）を確立するステップと、
    ｃ）上記初期駆動値画像を上記拡散層の切り捨て点像分布関数（ｐｓｆ２）と畳み込むことによって、増加した光放射に合わせて、上記発光素子の駆動値を調整して、近似バックライト画像（bl1）を決定するステップと、
    ｄ）上記初期バックライト画像と上記近似バックライト画像との差異であるバックライト不足画像（bl2）を決定するステップと、
    ｅ）上記バックライト不足画像を上記発光素子から放射された光の拡散を表す点像分布関数（ＰＳＦ）と畳み込むことによって、補正バックライト画像（bl3）を生成して、それによって、光分布を評価するステップと、
    ｆ）上記補正バックライト画像を上記初期バックライト画像に加算することによって、修正初期バックライト画像（BL1）を決定するステップと、を含むことを特徴とする方法。
  2. 配列された発光素子を有するバックライト層と、拡散層と、表示パネルとを備えた表示装置のための方法において、
    上記バックライト層に合わせて対象画像を修正する方法であって、
    ａ）上記発光素子のそれぞれの駆動値を含む上記対象画像（BL1）を取得するステップと、
    ｂ）上記対象画像を、上記発光素子が位置するグリッドポイントおよび上記発光素子間の位置に対応する仮想ポイントに対応して値が設定されたマスクと畳み込むことによって、中間画像（Led1）を生成するステップと、
    ｃ）上記中間画像を上記拡散層の切り捨て点像分布関数（ｐｓｆ２）と畳み込みを行って、近似バックライト画像（BL2）を生成し、それによって、光分布を評価するステップと、
    ｄ）上記対象画像と上記近似バックライト画像との差異を表す差異画像を決定するステップと、
    ｅ）倍率（β）を決定するステップと、
    ｆ）上記差異画像を上記倍率でスケーリングし、それによって、変倍差異画像を生成するステップと、
    ｇ）上記中間画像を上記変倍差異画像に加算して、修正画像を生成するステップと、
    ｈ）上記修正画像の値がゼロ未満のとき、該値をゼロに設定するステップと、を含むことを特徴とする方法。
  3. ｉ）上記修正画像を上記拡散層の切り捨て点像分布関数（ｐｓｆ２）と畳み込むことによって、修正近似バックライト画像を決定するステップと、
    ｊ）上記中間画像を上記修正画像に設定するステップとをさらに含み、
    上記ステップｄ）からｊ）を定数回繰り返すことを特徴とする請求項２に記載の方法。
  4. 配列された発光素子を有するバックライト層と、拡散層と、表示パネルとを備えた表示装置のための方法において、
    上記バックライト層のためのバックライト画像を生成する方法であって、
    ａ）上記表示パネルの第１の解像度の画像を表す画素値の配列を含む入力画像を取得するステップと、
    ｂ）上記入力画像に、上記拡散層の切り捨て点像分布関数（ｐｓｆ２）によって、ローパスフィルタ処理を施して、ローパスフィルタ処理された（ＬＰＦ）画像を生成するステップと、
    ｃ）上記ＬＰＦ画像を、上記第１の解像度よりも低い中間解像度でサンプリングし、それによって、中間画像（LEDlp）を生成するステップと、
    ｄ）上記入力画像に、上記ＬＰＦ画像の生成に使用された上記切り捨て点像分布関数（ｐｓｆ２）よりも次元が小さいフィルタカーネルによって、ローパスフィルタ処理を施し、それによって、第２のローパスフィルタ処理された（ＳＬＰＦ）画像を生成するステップと、
    ｅ）上記ＳＬＰＦ画像を、各ブロックが上記バックライト層の発光素子に対応するとともに、各ブロックの間で一部重なりがある複数のブロックに分割するステップと、
    ｆ）上記ＳＬＰＦ画像の各ブロックについて、最大値を決定し、それによって、各ブロックの最大値を含む最大画像（LEDmax）を生成するステップと、
    ｇ）上記最大画像の対応する値および上記中間画像の対応する値の一方に基づいて、対象駆動値を含む合成画像（LED1）を生成するステップと、を含むことを特徴とする方法。
  5. 上記合成画像の対象駆動値が、対応する最大画像の値と、対応する中間画像の値の２倍との大きい方となるように、上記中間画像および上記最大画像から値を選択することによって、上記合成画像が生成されることを特徴とする請求項４に記載の方法。
  6. 上記中間解像度は、上記発光素子の上記配列の大きさの倍数であることを特徴とする請求項４に記載の方法。
  7. 上記ＳＬＰＦ画像のブロックの大きさは、次の式によって決定される
    (1+k)*(m/M × n/N)
    ここで、ｋは重なり係数であり、ＭおよびＮは上記発光素子の配列の次元であり、ｍおよびｎは上記第１の解像度の画素値の配列の次元である、ことを特徴とする請求項４に記載の方法。
  8. 上記合成画像からバックライト画像（ＬＥＤ）を導出するステップと、
    上記バックライト画像に逆ガンマ補正を行い、それによって、逆ガンマ補正された（ＩＧＣ）バックライト画像を生成するステップと、をさらに含むことを特徴とする請求項４に記載の方法。
  9. ｈ）上記ＩＧＣバックライト画像にガンマ補正を行い、それによって、ガンマ補正されたバックライト画像を生成するステップと、
    ｉ）上記ガンマ補正されたバックライト画像を上記第１の解像度にアップサンプリングするステップと、
    ｊ）上記ガンマ補正されたバックライト画像を上記拡散層の切り捨て点像分布関数（ｐｓｆ２）と畳み込みを行い、それによって、第２の中間画像（LED_BL）を生成するステップと、
    ｋ）上記入力画像を上記第２の中間画像によって分割して、表示画像を生成するステップと、
    ｌ）上記表示画像に逆ガンマ補正を行い、それによって、逆ガンマ補正された（ＩＧＣ）表示画像を生成するステップと、をさらに含むことを特徴とする請求項８に記載の方法。
  10. バックライト画像を導出する上記ステップは、
    ａ）上記発光素子のそれぞれの上記対象駆動値を含む、上記合成画像（BL0）を取得するステップと、
    ｂ）上記発光素子が位置するグリッドポイントに対応して上記対象駆動値を含むとともに、上記発光素子間の位置に対応する仮想ポイントに対応して仮想駆動値を含み、かつ、上記合成画像を、上記グリッドポイントおよび上記仮想ポイントに対応して値が設定されたマスクと畳み込むことによって確立される初期駆動値画像を確立するステップと、
    ｃ）上記初期駆動値画像を、上記拡散層の切り捨て点像分布関数（ｐｓｆ２）と畳み込むことによって、近似バックライト画像（bl1）を決定して、増加した光放射に合わせて、上記発光素子の駆動値を調整するステップと、
    ｄ）上記合成画像と上記近似バックライト画像との差異であるバックライト不足画像（bl2）を決定するステップと、
    ｅ）上記バックライト不足画像を、上記発光素子から放射された光の拡散を表す点像分布関数（ＰＳＦ）と畳み込むことによって、補正バックライト画像（bl3）を生成し、それによって、光分布を評価するステップと、
    ｆ）上記補正バックライト画像を上記合成画像に加算することによって、変更合成画像（BL1）を決定するステップと、を含むことを特徴とする請求項８に記載の方法。
  11. 時間ローパスフィルタ処理を上記合成画像に施すステップをさらに含むことを特徴とする請求項８に記載の方法。
  12. 配列された発光素子を有するバックライト層と、拡散層と、表示パネルとを備えた表示装置のための方法において、
    上記バックライト層のためのバックライト画像を生成する方法であって、
    ａ）上記表示パネルの第１の解像度の画像を表す画素値の配列を含む入力画像を取得するステップと、
    ｂ）上記拡散層の切り捨て点像分布関数（ｐｓｆ２）によって、上記入力画像にローパスフィルタ処理を施して、ローパスフィルタ処理された（ＬＰＦ）画像を生成するステップと、
    ｃ）上記ＬＰＦ画像を、上記第１の解像度よりも低い中間解像度にサンプリングし、それによって、中間画像（LEDlp）を生成するステップと、
    ｄ）上記ＬＰＦ画像の生成に使用された上記切り捨て点像分布関数（ｐｓｆ２）よりも次元が小さいフィルタカーネルによって、上記入力画像にローパスフィルタ処理を施し、それによって、第２のローパスフィルタ処理された（ＳＬＰＦ）画像を生成するステップと、
    ｅ）上記ＳＬＰＦ画像を、各ブロックが上記バックライト層の発光素子に対応するとともに、各ブロックの間で一部重なりがある複数のブロックに分割するステップと、
    ｆ）上記ＳＬＰＦ画像の各ブロックについて、最大値を決定し、それによって、各ブロックの最大値を含む最大画像（LEDmax）を生成するステップと、
    ｇ）上記最大画像の対応する値および上記中間画像の対応する値の一方に基づいて、対象駆動値を含む合成画像（LED1）を生成するステップと、
    ｈ）上記発光素子が位置するグリッドポイントに対応して上記対象駆動値を含むとともに、上記発光素子間の位置に対応する仮想ポイントに対応して仮想駆動値を含み、かつ、上記合成画像を、上記グリッドポイントおよび上記仮想ポイントに対応して値が設定されたマスクを用いて畳み込むことにより確立される初期駆動値画像（Led1）を確立するステップと、
    ｉ）上記初期駆動値画像を上記拡散層の切り捨て点像分布関数（ｐｓｆ２）を用いて畳み込むことによって、近似バックライト画像を決定して、増加した光放射に合わせて、上記発光素子の駆動値を調整するステップと、
    ｊ）上記合成画像と上記近似バックライト画像との差異であるバックライト不足画像を決定するステップと、
    ｋ）上記バックライト不足画像を上記発光素子から放射された光の拡散を表す点像分布関数（ＰＳＦ）を用いて畳み込むことによって、補正バックライト画像を生成し、それによって、光分布を評価するステップと、
    ｌ）上記補正バックライト画像を上記合成画像に加算することによって、修正合成画像（BL1）を決定するステップと、を含むことを特徴とする方法。
  13. 時間ローパスフィルタ処理を上記修正合成画像に施すステップをさらに含むことを特徴とする請求項１２に記載の方法。
  14. 上記合成画像の値が、対応する最大画像の値と、対応する中間画像の値の２倍との大きい方となるように、上記中間画像および上記最大画像から値を選択することによって、上記合成画像が生成されることを特徴とする請求項１２に記載の方法。
  15. 上記中間解像度は、上記発光素子を有する上記バックライト層の解像度の倍数であることを特徴とする請求項１２に記載の方法。
  16. 上記ＳＬＰＦ画像のブロックの大きさは、次式によって決定される
    (1+k)*(m/M × n/N)
    ここで、ｋは重なり係数であり、ＭおよびＮは上記発光素子の配列の次元であり、ｍおよびｎは上記第１の解像度の画素値の配列の次元である、ことを特徴とする請求項１２に記載の方法。
  17. 上記発光素子の駆動値を含むバックライト画像を後処理する方法であって、
    ａ）上記駆動値を含む上記バックライト画像を取得するステップと、
    ｂ）上記バックライト画像中に１より大きい駆動値ledi,jを検索するステップと、
    ｃ）上記駆動値ledi,jに隣接する駆動値の係数を、次の式により計算するステップと、
    Ci-1,j= max(0,1-ledi-1,j)
    Ci+1,j= max(0,1-ledi+1,j)
    Ci,j-1= max(0,1-ledi,j-1)
    Ci,j+1= max(0,1-ledi,j+1)
    ｄ）上記駆動値および上記隣接する駆動値を、次の式により更新するステップと、
    ledi,j= 1
    ledi-1,j = ledi-1,j + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
    ledi+1,j = ledi+1,j + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
    ledi,j-1 = ledi,j-1 + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
    ledi,j+1 = ledi,j+1 + k(ledi,j-1)* Ci-1,j / Σ(Ci,j)
    （ｋは、隣接する駆動値からの寄与における減少を補正するために使われる定数）
    を含むことを特徴とする請求項１から１６のいずれか１項に記載の方法。
JP2011501839A 2008-07-22 2009-07-22 領域適応型バックライトを管理するための方法およびシステム Expired - Fee Related JP5138809B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/177,758 2008-07-22
US12/177,758 US8531380B2 (en) 2008-07-22 2008-07-22 Methods and systems for area adaptive backlight management
PCT/JP2009/063450 WO2010010963A1 (en) 2008-07-22 2009-07-22 Methods and systems for area adaptive backlight management

Publications (2)

Publication Number Publication Date
JP2011528125A JP2011528125A (ja) 2011-11-10
JP5138809B2 true JP5138809B2 (ja) 2013-02-06

Family

ID=41568173

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011501839A Expired - Fee Related JP5138809B2 (ja) 2008-07-22 2009-07-22 領域適応型バックライトを管理するための方法およびシステム

Country Status (5)

Country Link
US (1) US8531380B2 (ja)
EP (1) EP2308039B1 (ja)
JP (1) JP5138809B2 (ja)
CN (1) CN102099849B (ja)
WO (1) WO2010010963A1 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2541846T3 (es) 2008-10-14 2015-07-27 Dolby Laboratories Licensing Corporation Simulación de luz posterior a resoluciones reducidas para determinar la modulación espacial de luz para imágenes de alto rango dinámico
CN105842916A (zh) * 2009-04-15 2016-08-10 杜比实验室特许公司 显示器、显示方法及生成光的方法
EP2612319B1 (en) 2010-08-31 2017-10-04 Dolby Laboratories Licensing Corporation Method and apparatus for adjusting drive values for dual modulation displays
JP5197698B2 (ja) * 2010-09-07 2013-05-15 株式会社東芝 映像表示装置および情報処理装置
WO2013004012A1 (en) * 2011-07-06 2013-01-10 Harman International (Shanghai) Management Co., Ltd. Apparatus and method for re-sampling and processing digital images
KR101705541B1 (ko) 2012-06-15 2017-02-22 돌비 레버러토리즈 라이쎈싱 코오포레이션 이중 변조 디스플레이들을 제어하기 위한 시스템들 및 방법들
KR20160019060A (ko) * 2013-06-10 2016-02-18 톰슨 라이센싱 큰 동적 범위 픽처들의 평균 휘도를 적응시키기 위한 인코딩과 디코딩 방법들 및 대응하는 인코더 및 디코더
JP5911518B2 (ja) * 2014-01-29 2016-04-27 キヤノン株式会社 表示装置、表示装置の制御方法、及び、プログラム
CN108702514B (zh) * 2016-03-09 2020-07-07 华为技术有限公司 一种高动态范围图像处理方法及装置
CN110689497B (zh) * 2019-09-27 2020-05-12 信通达智能科技有限公司 基于目标识别的数据提取装置及方法
CN114846536B (zh) * 2020-12-01 2023-12-12 京东方科技集团股份有限公司 数据处理方法及装置、显示装置

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2582644B2 (ja) 1989-08-10 1997-02-19 富士写真フイルム株式会社 平面型画像表示装置
GB2317290B (en) 1996-09-11 2000-12-06 Seos Displays Ltd Image display apparatus
JP2001228418A (ja) * 1999-12-08 2001-08-24 Ricoh Co Ltd マルチビーム光源ユニットの調整方法、その調整装置、その光源ユニットの組立方法及びそれを用いる画像形成装置
JP4574057B2 (ja) 2000-05-08 2010-11-04 キヤノン株式会社 表示装置
US6864886B1 (en) * 2000-08-10 2005-03-08 Sportvision, Inc. Enhancing video using a virtual surface
US6891524B2 (en) 2000-08-14 2005-05-10 Canon Kabushiki Kaisha Display device with amplification control
CN101004518B (zh) 2001-02-27 2018-07-20 杜比实验室特许公司 高动态范围显示装置
US7546602B2 (en) * 2001-07-10 2009-06-09 Microsoft Corporation Application program interface for network software platform
EP2337010A3 (en) 2002-03-13 2011-11-02 Dolby Laboratories Licensing Corporation High dynamic range display devices
US8180099B2 (en) * 2002-07-16 2012-05-15 Trw Limited Rain detection apparatus and method
US7312779B1 (en) * 2003-09-23 2007-12-25 Northrop Grumman Corporation Method of color calibration for transmissive displays
US7762470B2 (en) * 2003-11-17 2010-07-27 Dpd Patent Trust Ltd. RFID token with multiple interface controller
JP2005195734A (ja) * 2004-01-05 2005-07-21 Fujitsu Ltd 発光制御装置、表示装置、表示制御装置及び表示制御プログラム
US8115728B2 (en) * 2005-03-09 2012-02-14 Sharp Laboratories Of America, Inc. Image display device with reduced flickering and blur
US8026894B2 (en) * 2004-10-15 2011-09-27 Sharp Laboratories Of America, Inc. Methods and systems for motion adaptive backlight driving for LCD displays with area adaptive backlight
US7525528B2 (en) * 2004-11-16 2009-04-28 Sharp Laboratories Of America, Inc. Technique that preserves specular highlights
JP5116208B2 (ja) * 2004-11-19 2013-01-09 株式会社ジャパンディスプレイイースト 画像信号表示装置
JP2007012323A (ja) * 2005-06-28 2007-01-18 Cheil Ind Co Ltd 面光源装置及び液晶表示装置
US7898520B2 (en) * 2005-11-30 2011-03-01 3M Innovative Properties Company Method and apparatus for backlight simulation
JP5176397B2 (ja) * 2006-06-01 2013-04-03 ソニー株式会社 表示装置及びその駆動方法
EP2439727B1 (en) * 2006-06-02 2017-11-29 Samsung Display Co., Ltd. Display apparatus having multiple segmented backlight comprising a plurality of light guides
JP2008051905A (ja) 2006-08-22 2008-03-06 Sharp Corp 液晶表示装置、及びそのバックライト駆動方法
JP4855191B2 (ja) 2006-09-13 2012-01-18 シャープ株式会社 透過型ディスプレイ装置、およびその表示制御方法
US20090251401A1 (en) * 2006-09-15 2009-10-08 Thomson Licensing Display Utilizing Simultaneous Color Intelligent Backlighting and luminescence Controlling Shutters
JP2008102379A (ja) * 2006-10-20 2008-05-01 Hitachi Ltd 画像表示装置及び画像表示方法
JP4264558B2 (ja) * 2006-11-10 2009-05-20 ソニー株式会社 バックライト装置、バックライト駆動方法及びカラー画像表示装置
JP5332172B2 (ja) * 2006-11-10 2013-11-06 セイコーエプソン株式会社 画像表示制御装置
US8941580B2 (en) * 2006-11-30 2015-01-27 Sharp Laboratories Of America, Inc. Liquid crystal display with area adaptive backlight
RU2443072C1 (ru) * 2008-01-09 2012-02-20 Долби Лэборетериз Лайсенсинг Корпорейшн Подавление блика lcd
US8068087B2 (en) * 2008-05-29 2011-11-29 Sharp Laboratories Of America, Inc. Methods and systems for reduced flickering and blur

Also Published As

Publication number Publication date
JP2011528125A (ja) 2011-11-10
CN102099849B (zh) 2014-04-09
EP2308039A4 (en) 2011-10-19
EP2308039B1 (en) 2014-09-24
WO2010010963A1 (en) 2010-01-28
US20100020003A1 (en) 2010-01-28
EP2308039A1 (en) 2011-04-13
US8531380B2 (en) 2013-09-10
CN102099849A (zh) 2011-06-15

Similar Documents

Publication Publication Date Title
JP5138809B2 (ja) 領域適応型バックライトを管理するための方法およびシステム
JP5026619B2 (ja) 視野角によって誘発される色シフト低減するための方法およびシステム
JP4796038B2 (ja) 画像表示方法
US8031166B2 (en) Liquid crystal display method and the appratus thereof
JP5595516B2 (ja) 画像データ・ブロックの統計的属性を使ったバックライト制御のための方法およびシステム
US8610654B2 (en) Correction of visible mura distortions in displays using filtered mura reduction and backlight control
EP2409194B1 (en) Area adaptive backlight display and method with reduced computation and halo artifacts
US20070285382A1 (en) Methods and Systems for Motion Adaptive Backlight Driving for LCD Displays with Area Adaptive Backlight
CN108665866B (zh) 获取背光源扩散传输参数的方法及显示控制方法和装置
KR101696743B1 (ko) 표시장치를 위한 백라이트 단계 선택
KR101608856B1 (ko) 디밍 구동 방법 및 이를 수행하기 위한 표시 장치
TWI439996B (zh) 調整顯示器背光的方法及相關裝置
US20100013750A1 (en) Correction of visible mura distortions in displays using filtered mura reduction and backlight control
KR20100007458A (ko) 광원 디밍 방법, 이를 수행하기 위한 광원 장치 및 이 광원장치를 갖는 액정표시장치
KR101233495B1 (ko) 비디오 재생을 위한 관리 기술
KR101389359B1 (ko) 디스플레이장치 및 그의 밝기 조정방법
EP2056284A1 (en) A liquid crystal display method and apparatus
CN110706659B (zh) 显示器的补偿方法、显示器及显示装置
US8217888B2 (en) Method for processing images in liquid crystal display
US11593923B2 (en) Image data processing apparatus and display device for controlling local dimming
CN110534067B (zh) 区域调光的影像处理方法与显示装置
JP2024001374A (ja) 映像処理装置、表示装置、および映像処理方法
TW202209295A (zh) 區域調光方法與顯示裝置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120626

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120827

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121016

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121114

R150 Certificate of patent or registration of utility model

Ref document number: 5138809

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151122

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees