JP2014052549A - Image display device, control method of image display device, control program, and recording medium - Google Patents

Image display device, control method of image display device, control program, and recording medium Download PDF

Info

Publication number
JP2014052549A
JP2014052549A JP2012197790A JP2012197790A JP2014052549A JP 2014052549 A JP2014052549 A JP 2014052549A JP 2012197790 A JP2012197790 A JP 2012197790A JP 2012197790 A JP2012197790 A JP 2012197790A JP 2014052549 A JP2014052549 A JP 2014052549A
Authority
JP
Japan
Prior art keywords
pattern
light source
image
approximate pattern
input image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012197790A
Other languages
Japanese (ja)
Other versions
JP6188298B2 (en
Inventor
Naoko Kondo
尚子 近藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2012197790A priority Critical patent/JP6188298B2/en
Publication of JP2014052549A publication Critical patent/JP2014052549A/en
Application granted granted Critical
Publication of JP6188298B2 publication Critical patent/JP6188298B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

PROBLEM TO BE SOLVED: To suppress local breakdown of a display video.SOLUTION: An image display device includes: an LED data calculation unit 22 that specifies an approximation pattern in which brightness distribution of an input image is approximated and the amount of change is equal to or less than a predetermined value, and calculates LED data on the basis of the specified approximation pattern; and a liquid crystal transmittance calculation unit 23 that calculates the liquid crystal transmittance on the basis of the input image and the approximation pattern specified by the LED data calculation unit 22.

Description

本発明は、バックライトの輝度を制御する機能(バックライト調光機能)を有する画像表示装置、画像表示装置の制御方法、制御プログラムおよび記録媒体に関するものである。   The present invention relates to an image display device having a function of controlling the luminance of a backlight (backlight dimming function), a control method for the image display device, a control program, and a recording medium.

液晶表示装置など、バックライトを備えた画像表示装置では、入力画像に基づきバックライトの輝度を制御することにより、バックライトの消費電力を抑制したり、表示画像の画質を改善したりすることができる。特に、画面を複数のエリアに分割し、エリア内の入力画像に基づき、当該エリアに対応したバックライト光源の輝度を制御することにより、さらなる低消費電力化と高画質化が可能となる。以下、このようにエリア内の入力画像に基づきバックライト光源の輝度を制御しながら、表示パネルを駆動する方法を「エリアアクティブ駆動」と称する。   In an image display device having a backlight, such as a liquid crystal display device, the backlight power consumption is controlled based on the input image, thereby suppressing the power consumption of the backlight or improving the image quality of the display image. it can. In particular, by dividing the screen into a plurality of areas and controlling the luminance of the backlight light source corresponding to the area based on the input image in the area, it is possible to further reduce power consumption and improve image quality. Hereinafter, such a method of driving the display panel while controlling the luminance of the backlight light source based on the input image in the area is referred to as “area active driving”.

エリアアクティブ駆動を行う画像表示装置では、バックライト光源として、例えば、RGB3色のLED(Light Emitting Diode)または白色LED等が使用される。各エリアに対応したLEDの輝度(発光時の輝度)は、当該各エリア内の画素の輝度の最大値または平均値などに基づいて求められ、LEDデータとしてバックライト用の駆動回路に与えられる。また、そのLEDデータと入力画像とに基づいて表示用データ(液晶表示装置であれば、液晶の光透過率を制御するためのデータ)が生成され、当該表示用データは表示パネル用の駆動回路に与えられる。画面上における各画素の輝度は、液晶表示装置の場合には、バックライトからの光の輝度と表示用データに基づく光透過率との積となる。   In an image display device that performs area active drive, for example, RGB three-color LEDs (Light Emitting Diodes) or white LEDs are used as a backlight light source. The luminance of the LED corresponding to each area (luminance at the time of light emission) is obtained based on the maximum value or the average value of the luminance of the pixels in each area, and is provided as LED data to the backlight drive circuit. Further, display data (in the case of a liquid crystal display device, data for controlling the light transmittance of the liquid crystal) is generated based on the LED data and the input image, and the display data is a display panel drive circuit. Given to. In the case of a liquid crystal display device, the luminance of each pixel on the screen is the product of the luminance of light from the backlight and the light transmittance based on the display data.

ところで、或るエリアのLEDから出射された光は、当該エリアを照射するだけではなく、周囲のエリアも照射する。換言すると、或るエリアには、当該エリアのLEDから出射された光だけではなく、周囲のエリアのLEDから出射された光も照射される。そのため、各エリアに表示される輝度は、各LEDから出射される光の拡散(広がり)を考慮して算出されなければならない。   Incidentally, light emitted from an LED in a certain area not only irradiates the area but also irradiates surrounding areas. In other words, a certain area is irradiated not only with the light emitted from the LEDs in the area but also with the light emitted from the LEDs in the surrounding area. Therefore, the luminance displayed in each area must be calculated in consideration of the diffusion (spreading) of the light emitted from each LED.

そのため、従来、実際の輝度分布を実測して、補正テーブルを生成し、表示用データを補正することにより、出力画像の破綻を回避する手法がある。例えば、特許文献1には、エリアごとに、入力画像と、LEDデータから拡散を考慮して補正した表示輝度とに基づいて表示素子の光透過率を算出することが記載されている。また、特許文献2には、エリアアクティブ駆動において、隣接するエリアの輝度の不均一を解消するために、入力画像を補正して光透過率を算出することが記載されている。   Therefore, conventionally, there is a method of avoiding the breakdown of the output image by actually measuring the actual luminance distribution, generating a correction table, and correcting the display data. For example, Patent Document 1 describes that for each area, the light transmittance of the display element is calculated based on an input image and display brightness corrected in consideration of diffusion from LED data. Patent Document 2 describes that in area active driving, an input image is corrected and light transmittance is calculated in order to eliminate uneven luminance in adjacent areas.

特開2009−192963号公報(2009年8月27日公開)JP 2009-192963 A (released August 27, 2009) 特開2010−256912号公報(2010年11月11日公開)JP 2010-256912 A (published November 11, 2010)

しかしながら、上述のような従来技術において、実際に測定することにより得られる実測輝度分布を完全に数値化することは困難である。そのため、補正後の表示輝度と、実測輝度との不一致が生じ、適切な光透過率を算出することが出来ない場合がある。それゆえ、出力画像に破綻が生じることがある。   However, in the conventional technology as described above, it is difficult to completely quantify the actually measured luminance distribution obtained by actual measurement. For this reason, a mismatch between the corrected display luminance and the actually measured luminance may occur, and an appropriate light transmittance may not be calculated. Therefore, the output image may break down.

具体的に図10、21〜26に基づいて従来技術の問題点を説明する。   Specifically, problems of the prior art will be described with reference to FIGS.

図10に示す入力画像61が入力された場合、従来技術では、図21に示すLEDデータを生成する。なお、図10において、点Aは白丸の中心点であり、点Bは入力画像61の右端点であり、点CはA−B線上の白丸(80%)と背景(20%)との境界点であり、点DはA−B線上のバックライト制御エリアの境界点である。   When the input image 61 shown in FIG. 10 is input, the conventional technology generates LED data shown in FIG. In FIG. 10, the point A is the center point of the white circle, the point B is the right end point of the input image 61, and the point C is the boundary between the white circle (80%) and the background (20%) on the line AB. Point D is a boundary point of the backlight control area on the line AB.

このとき、入力画像61と図21に示すLEDデータとに基づいて、入力画像からLEDデータを除算して求めた液晶透過率を図22に示す。ところが、上述のように、この図21に示すLEDデータに基づいてLEDを駆動した場合、実際には、図24に示すような輝度分布となる。そのため、この場合、出力画像の輝度分布は図23に示すように、D点付近において、映像の破綻が生じる。   FIG. 22 shows the liquid crystal transmittance obtained by dividing the LED data from the input image based on the input image 61 and the LED data shown in FIG. However, as described above, when the LED is driven based on the LED data shown in FIG. 21, the luminance distribution is actually as shown in FIG. Therefore, in this case, as shown in FIG. 23, the luminance distribution of the output image is broken in the vicinity of point D.

そこで、上述の従来技術は、図24に示す実際の輝度分布を実測して、補正テーブルを生成し、補正テーブルで液晶透過率を補正して、出力画像の輝度分布の破綻を回避するものである。このときの液晶透過率を図25に示す。しかしながら、図24に示す輝度分布を完全に数値化することは困難である。そのため、液晶透過率を適切に補正することができず、出力画像の輝度分布が図26に示すように破綻する場合がある。特に、従来技術では、各エリアのLEDデータおよび液晶透過率を独立して制御しているため、図26に示すようにC−D間にHaloが生じる等、表示映像の破綻が局所的に生じることがある。   Therefore, the above-described conventional technique avoids the breakdown of the luminance distribution of the output image by actually measuring the actual luminance distribution shown in FIG. 24, generating a correction table, and correcting the liquid crystal transmittance with the correction table. is there. The liquid crystal transmittance at this time is shown in FIG. However, it is difficult to completely quantify the luminance distribution shown in FIG. For this reason, the liquid crystal transmittance cannot be appropriately corrected, and the luminance distribution of the output image may break as shown in FIG. In particular, in the prior art, since the LED data and the liquid crystal transmittance of each area are independently controlled, a display video failure occurs locally, such as a halo between CDs as shown in FIG. Sometimes.

また、この問題を回避するために実測輝度分布を高精度に再現する場合、計算処理を実行する回路規模が増大し、コストが増大するという問題が生じる。   Further, when the measured luminance distribution is reproduced with high accuracy in order to avoid this problem, there arises a problem that the circuit scale for executing the calculation process increases and the cost increases.

本発明は、上記の問題点に鑑みてなされたものであり、その目的は、局所的な表示映像の破綻を抑制する画像表示装置、画像表示装置の制御方法、制御プログラムおよび記録媒体を実現することにある。   The present invention has been made in view of the above-described problems, and an object of the present invention is to realize an image display device, a control method for the image display device, a control program, and a recording medium that suppress local display video failure. There is.

本発明に係る画像表示装置は、上記課題を解決するために、表示パネルの1辺または2辺に沿って複数の光源が配列された画像表示装置であって、直線で構成され、変化量が所定値以下である近似パターンの中から、入力画像の光源配列方向成分の輝度分布を近似した近似パターンを特定するパターン特定手段と、上記パターン特定手段が特定した近似パターンに基づいて、上記複数の光源の出力を制御するための光源データを算出する光源データ算出手段と、上記入力画像および上記パターン特定手段が特定した近似パターンに基づいて、上記表示パネルの光透過率を制御するための光透過率を算出する光透過率算出手段と、上記光源データ算出手段が算出した光源データに基づいて、上記複数の光源を駆動する光源駆動手段と、上記光透過率算出手段が算出した光透過率に基づいて、上記表示パネルを駆動する表示パネル駆動手段とを備えることを特徴としている。   In order to solve the above problems, an image display device according to the present invention is an image display device in which a plurality of light sources are arranged along one or two sides of a display panel. Based on the approximate pattern specified by the pattern specifying means, the pattern specifying means for specifying the approximate pattern approximating the luminance distribution of the light source array direction component of the input image from the approximate patterns that are equal to or less than the predetermined value, Light source data calculating means for calculating light source data for controlling the output of the light source, and light transmission for controlling the light transmittance of the display panel based on the input image and the approximate pattern specified by the pattern specifying means A light transmittance calculating means for calculating a rate, a light source driving means for driving the plurality of light sources based on the light source data calculated by the light source data calculating means, and the light transmittance Based on the light transmission rate calculating means has calculated, it is characterized by comprising a display panel driving means for driving the display panel.

また、本発明に係る画像表示装置の制御方法は、上記課題を解決するために、表示パネルの1辺または2辺に沿って複数の光源が配列された画像表示装置の制御方法であって、直線で構成され、変化量が所定値以下である近似パターンの中から、入力画像の光源配列方向成分の輝度分布を近似した近似パターンを特定するパターン特定ステップと、上記パターン特定ステップにおいて特定された近似パターンに基づいて、上記複数の光源の出力を制御するための光源データを算出する光源データ算出ステップと、上記入力画像および上記パターン特定ステップにおいて特定された近似パターンに基づいて、上記表示パネルの光透過率を制御するための光透過率を算出する光透過率算出ステップと、上記光源データ算出ステップにおいて算出された光源データに基づいて、上記複数の光源を駆動する光源駆動ステップと、上記光透過率算出ステップにおいて算出された光透過率に基づいて、上記表示パネルを駆動する表示パネル駆動ステップとを含むことを特徴としている。   In addition, a method for controlling an image display device according to the present invention is a method for controlling an image display device in which a plurality of light sources are arranged along one or two sides of a display panel in order to solve the above-described problem. A pattern specifying step that specifies an approximate pattern that approximates the luminance distribution of the light source array direction component of the input image from the approximate patterns that are configured with straight lines and whose variation is equal to or less than a predetermined value, and that is specified in the pattern specifying step Based on the approximate pattern, the light source data calculating step for calculating the light source data for controlling the output of the plurality of light sources, and the input image and the approximate pattern specified in the pattern specifying step, Calculated in the light transmittance calculating step for calculating the light transmittance for controlling the light transmittance and the light source data calculating step. A light source driving step for driving the plurality of light sources based on the light source data, and a display panel driving step for driving the display panel based on the light transmittance calculated in the light transmittance calculating step. It is characterized by.

上記の構成によれば、上記光源データ算出手段は、直線で構成され、変化量が所定値以下である近似パターンであって、入力画像の光源配列方向成分の輝度分布を近似した近似パターンに基づいて、光源データを算出する。また、上記光透過率算出手段は、同じ近似パターンに基づいて、光透過率を算出する。互いに隣接する光源との変化量が所定値以下であるため、光源データの示す輝度分布と、当該光源データに基づいて上記複数の光源を駆動したときの実際の輝度分布とが局所的に大きく異なることを防ぐことができる。よって、従来に比べて、局所的に発生する表示映像の破綻を防ぐことができるという効果を奏する。   According to the above configuration, the light source data calculation means is an approximate pattern that is configured by a straight line and whose variation is equal to or less than a predetermined value, and is based on an approximate pattern that approximates the luminance distribution of the light source array direction component of the input image. To calculate light source data. The light transmittance calculating unit calculates the light transmittance based on the same approximate pattern. Since the amount of change between light sources adjacent to each other is less than or equal to a predetermined value, the luminance distribution indicated by the light source data and the actual luminance distribution when the plurality of light sources are driven based on the light source data are greatly different locally. Can be prevented. Therefore, compared to the conventional case, there is an effect that it is possible to prevent the failure of the display image that occurs locally.

また、本発明に係る画像表示装置は、上記入力画像を複数のエリアに分割し、各エリアの輝度の大きさを示す評価値をそれぞれ特定し、各エリアの評価値を順に並べた評価値列を生成する画像評価手段をさらに備え、上記パターン特定手段は、上記評価値列と、上記評価値列と最も近似する上記近似パターンとの対応関係が予め定められたパターン特定情報を参照して、上記画像評価手段が生成した評価値列に対応する近似パターンを特定することが好ましい。   Further, the image display device according to the present invention divides the input image into a plurality of areas, specifies evaluation values indicating the luminance levels of the respective areas, and sets the evaluation values of the respective areas in order. The pattern specifying means refers to pattern specifying information in which a correspondence relationship between the evaluation value sequence and the approximate pattern that is closest to the evaluation value sequence is predetermined, It is preferable to specify an approximate pattern corresponding to the evaluation value sequence generated by the image evaluation unit.

上記の構成によれば、上記パターン特定手段は、予め定められた近似パターンの中から入力画像と最も近似するパターンを選択する。このように、入力画像を、種別数が制限された近似パターンに近似することにより、光源データおよび液晶透過率の算出処理を簡略化することができ、回路規模を縮小することができる。   According to said structure, the said pattern specific | specification means selects the pattern most approximated with an input image from the predetermined approximate patterns. Thus, by approximating the input image to an approximate pattern with a limited number of types, the light source data and liquid crystal transmittance calculation processing can be simplified, and the circuit scale can be reduced.

また、本発明に係る画像表示装置は、上記画像評価手段は、上記エリアに含まれる画素または絵素の最大値を、当該エリアの評価値として特定することが好ましい。   In the image display device according to the present invention, it is preferable that the image evaluation unit specifies a maximum value of pixels or picture elements included in the area as an evaluation value of the area.

また、本発明に係る画像表示装置は、上記画像評価手段は、上記エリアに含まれる画素または絵素の平均値を、当該エリアの評価値として特定することが好ましい。   In the image display device according to the present invention, it is preferable that the image evaluation unit specifies an average value of pixels or picture elements included in the area as an evaluation value of the area.

また、本発明に係る画像表示装置は、上記画像評価手段は、上記エリアに含まれる画素値または絵素値のヒストグラムを取り、最も個数の多い画素値または絵素値を、当該エリアの評価値として特定することが好ましい。   Further, in the image display device according to the present invention, the image evaluation means takes a histogram of pixel values or pixel values included in the area, and determines the largest number of pixel values or pixel values as the evaluation value of the area. It is preferable to specify as.

また、本発明に係る画像表示装置は、上記光源データ算出手段は、上記パターン特定情報において、上記パターン特定手段が特定した近似パターンに反転フラグが付加されている場合、上記パターン特定手段が特定した近似パターンを反転したパターンに基づいて、上記光源データを算出することが好ましい。   Further, in the image display device according to the present invention, the light source data calculating unit specifies the pattern specifying unit when an inversion flag is added to the approximate pattern specified by the pattern specifying unit in the pattern specifying information. It is preferable to calculate the light source data based on a pattern obtained by inverting the approximate pattern.

上記の構成によれば、或る近似パターンを反転した近似パターンは、上記反転フラグにより選択することができるため、適用可能な近似パターンの種別数を減らすことなく、予め設定すべき近似パターンの種別数を減らすことができる。よって、適用の自由度を維持しながら、回路規模の増大を抑制することができる。   According to the above configuration, since an approximate pattern obtained by inverting a certain approximate pattern can be selected by the inversion flag, the type of approximate pattern to be set in advance without reducing the number of applicable approximate pattern types The number can be reduced. Therefore, it is possible to suppress an increase in circuit scale while maintaining the degree of freedom of application.

また、本発明に係る画像表示装置は、上記画像評価手段は、さらに、上記入力画像全体の輝度の大きさを示す全体評価値を特定するものであり、上記光源データ算出手段は、上記パターン特定手段が特定した近似パターンを上記全体評価値に基づいてオフセット補正して、上記光源データを算出することが好ましい。   In the image display device according to the present invention, the image evaluation unit further specifies an overall evaluation value indicating a luminance level of the entire input image, and the light source data calculation unit includes the pattern specifying unit. Preferably, the light source data is calculated by correcting the offset of the approximate pattern specified by the means based on the overall evaluation value.

上記の構成によれば、或る近似パターンの全体の値を増減した近似パターンは、上記オフセット補正により導出することができるため、適用可能な近似パターンの種別数を減らすことなく、予め設定すべき近似パターンの種別数を減らすことができる。よって、適用の自由度を維持しながら、回路規模の増大を抑制することができる。   According to the above configuration, an approximate pattern obtained by increasing or decreasing the entire value of a certain approximate pattern can be derived by the offset correction. Therefore, the approximate pattern should be set in advance without reducing the number of applicable approximate patterns. The number of types of approximate patterns can be reduced. Therefore, it is possible to suppress an increase in circuit scale while maintaining the degree of freedom of application.

上記光透過率算出手段は、下記の式に基づいて、光透過率を算出することが好ましい。   The light transmittance calculating means preferably calculates the light transmittance based on the following equation.

LCD_rate(i,j) = Offset + Pat_Max - LCD_Pat_#j if(revers = '0')
= Offset + LED_Pat_#n if(revers = '1')
Assist(i,j,c) = (1 - Cin(i,j,c)) * LCD_rate(i,j) * K
Cout(i,j,c) = Cin(i,j,c) + (Cin(i,j,c) * Assist(i,j,c))
Cin(i,j,c):入力画像のi行j列の画素の絵素値
Cout(i,j,c):i行j列の画素の絵素の光透過率
K:任意の値
Offset:入力画像全体の輝度の大きさを示す全体評価値
Pat_Max:近似パターンの最大値
LCD_Pat_#j:近似パターンにおけるj列の画素の出力値
revers:反転フラグ
また、本発明に係る画像表示装置は、上記課題を解決するために、表示パネルの背面に複数の光源がマトリクス状に配列された画像表示装置であって、それぞれ直線で構成され、変化量が所定値以下である水平成分近似パターンおよび垂直成分近似パターンの中から、入力画像の水平成分の輝度分布を近似した水平成分近似パターンおよび入力画像の垂直成分の輝度分布を近似した垂直成分近似パターンをそれぞれ特定するパターン特定手段と、上記パターン特定手段が特定した水平成分近似パターンおよび垂直成分近似パターンに基づいて、上記複数の光源の出力を制御するための光源データを算出する光源データ算出手段と、上記入力画像および上記パターン特定手段が特定した水平成分近似パターンおよび垂直成分近似パターンに基づいて、上記表示パネルの光透過率を制御するための光透過率を算出する光透過率算出手段と、上記光源データ算出手段が算出した光源データに基づいて、上記複数の光源を駆動する光源駆動手段と、上記光透過率算出手段が算出した光透過率に基づいて、上記表示パネルを駆動する表示パネル駆動手段とを備えることを特徴としている。
LCD_rate (i, j) = Offset + Pat_Max-LCD_Pat_ # j if (revers = '0')
= Offset + LED_Pat_ # n if (revers = '1')
Assist (i, j, c) = (1-Cin (i, j, c)) * LCD_rate (i, j) * K
Cout (i, j, c) = Cin (i, j, c) + (Cin (i, j, c) * Assist (i, j, c))
Cin (i, j, c): Pixel value of pixel in i row and j column of the input image
Cout (i, j, c): Light transmittance of picture element of pixel in i row and j column
K: Any value
Offset: Overall evaluation value indicating the brightness of the entire input image
Pat_Max: Maximum value of approximate pattern
LCD_Pat_ # j: Output value of pixels in column j in the approximate pattern
revers: reversal flag In order to solve the above-mentioned problem, the image display device according to the present invention is an image display device in which a plurality of light sources are arranged in a matrix on the back surface of the display panel, each of which is configured by a straight line. The horizontal component approximate pattern that approximates the luminance distribution of the horizontal component of the input image and the vertical component that approximates the luminance distribution of the vertical component of the input image from among the horizontal component approximate pattern and vertical component approximate pattern whose variation is equal to or less than a predetermined value Light source data for calculating light source data for controlling the outputs of the plurality of light sources based on a pattern specifying unit for specifying each component approximate pattern and a horizontal component approximate pattern and a vertical component approximate pattern specified by the pattern specifying unit Near the horizontal component approximate pattern and vertical component specified by the calculating means, the input image and the pattern specifying means Based on the similar pattern, the light transmittance calculating means for calculating the light transmittance for controlling the light transmittance of the display panel, and the plurality of light sources based on the light source data calculated by the light source data calculating means. A light source driving unit for driving and a display panel driving unit for driving the display panel based on the light transmittance calculated by the light transmittance calculating unit are provided.

なお、上記画像表示装置は、コンピュータによって実現してもよく、この場合には、コンピュータを上記画像表示装置の各手段として動作させることにより、上記画像表示装置をコンピュータにて実現させる制御プログラム、及びそれを記録したコンピュータ読み取り可能な記録媒体も本発明の範疇に入る。   The image display device may be realized by a computer. In this case, a control program for causing the image display device to be realized by the computer by causing the computer to operate as each unit of the image display device, and A computer-readable recording medium on which it is recorded also falls within the scope of the present invention.

以上のように、本発明に係る画像表示装置は、直線で構成され、変化量が所定値以下である近似パターンの中から、入力画像の光源配列方向成分の輝度分布を近似した近似パターンを特定するパターン特定手段と、上記パターン特定手段が特定した近似パターンに基づいて、上記複数の光源の出力を制御するための光源データを算出する光源データ算出手段と、上記入力画像および上記パターン特定手段が特定した近似パターンに基づいて、上記表示パネルの光透過率を制御するための光透過率を算出する光透過率算出手段と、上記光源データ算出手段が算出した光源データに基づいて、上記複数の光源を駆動する光源駆動手段と、上記光透過率算出手段が算出した光透過率に基づいて、上記表示パネルを駆動する表示パネル駆動手段とを備えている構成である。   As described above, the image display device according to the present invention specifies an approximate pattern that approximates the luminance distribution of the light source array direction component of the input image from the approximate patterns that are configured with straight lines and whose variation is equal to or less than a predetermined value. A light source data calculating means for calculating light source data for controlling the outputs of the plurality of light sources based on the approximate pattern specified by the pattern specifying means, the input image and the pattern specifying means. Based on the identified approximate pattern, the light transmittance calculating means for calculating the light transmittance for controlling the light transmittance of the display panel, and the light source data calculated by the light source data calculating means, Light source driving means for driving the light source, and display panel driving means for driving the display panel based on the light transmittance calculated by the light transmittance calculating means. And is a configuration that.

また、本発明に係る画像表示装置の制御方法は、直線で構成され、変化量が所定値以下である近似パターンの中から、入力画像の光源配列方向成分の輝度分布を近似した近似パターンを特定するパターン特定ステップと、上記パターン特定ステップにおいて特定された近似パターンに基づいて、上記複数の光源の出力を制御するための光源データを算出する光源データ算出ステップと、上記入力画像および上記パターン特定ステップにおいて特定された近似パターンに基づいて、上記表示パネルの光透過率を制御するための光透過率を算出する光透過率算出ステップと、上記光源データ算出ステップにおいて算出された光源データに基づいて、上記複数の光源を駆動する光源駆動ステップと、上記光透過率算出ステップにおいて算出された光透過率に基づいて、上記表示パネルを駆動する表示パネル駆動ステップとを含む。   In addition, the control method for the image display device according to the present invention specifies an approximate pattern that approximates the luminance distribution of the light source array direction component of the input image from the approximate patterns that are configured with straight lines and whose variation is equal to or less than a predetermined value. A pattern specifying step, a light source data calculating step for calculating light source data for controlling outputs of the plurality of light sources based on the approximate pattern specified in the pattern specifying step, and the input image and the pattern specifying step. On the basis of the approximate pattern identified in step, based on the light transmittance calculation step for calculating the light transmittance for controlling the light transmittance of the display panel, and on the light source data calculated in the light source data calculation step, Light calculated in the light source driving step for driving the plurality of light sources and the light transmittance calculating step Based on the excessive rate, and a display panel driving step of driving the display panel.

よって、従来に比べて、局所的に発生する表示映像の破綻を防ぐことができるという効果を奏する。   Therefore, compared to the conventional case, there is an effect that it is possible to prevent the failure of the display image that occurs locally.

本発明の実施形態を示すものであり、液晶表示装置の要部構成を示すブロック図である。1, showing an embodiment of the present invention, is a block diagram illustrating a main configuration of a liquid crystal display device. FIG. 上記液晶表示装置が実行する表示処理の一例を示すフローチャートである。It is a flowchart which shows an example of the display process which the said liquid crystal display device performs. 上記液晶表示装置の画像評価部の処理例の概要を示す図である。It is a figure which shows the outline | summary of the example of a process of the image evaluation part of the said liquid crystal display device. 近似パターンの一例を示す図である。It is a figure which shows an example of an approximate pattern. 評価値列(Index)と近似パターンとの対応関係を示すパターン特定情報の一例を示す図である。It is a figure which shows an example of the pattern specific information which shows the correspondence of an evaluation value sequence (Index) and an approximate pattern. 近似パターンにおける各LEDの出力値を示す図である。It is a figure which shows the output value of each LED in an approximate pattern. 或る近似パターンと、当該近似パターンを反転した近似パターンとを示す図である。It is a figure which shows a certain approximate pattern and the approximate pattern which reversed the said approximate pattern. 或る近似パターンと、当該近似パターンをオフセット補正した近似パターンとを示す図である。It is a figure which shows a certain approximate pattern and the approximate pattern which carried out the offset correction | amendment of the said approximate pattern. 入力画像の絵素値と、液晶透過率との関係を示す図である。It is a figure which shows the relationship between the pixel value of an input image, and a liquid crystal transmittance. 入力画像の一例を示す図である。It is a figure which shows an example of an input image. 図10に示す入力画像が入力された場合に、LEDデータ算出部が算出したLEDデータの一例を示す図である。It is a figure which shows an example of the LED data which the LED data calculation part calculated when the input image shown in FIG. 10 is input. 図11に示すLEDデータに基づいてLEDドライバがLEDを駆動した場合の実際の輝度分布を示す図である。It is a figure which shows actual luminance distribution when an LED driver drives LED based on the LED data shown in FIG. 図10に示す入力画像が入力された場合に、液晶透過率算出部が算出した液晶透過率を示す図である。FIG. 11 is a diagram illustrating a liquid crystal transmittance calculated by a liquid crystal transmittance calculating unit when the input image shown in FIG. 10 is input. 図11に示すLEDデータに基づいてLEDドライバがLEDを駆動し、図13に示す液晶透過率に基づいて液晶ドライバが液晶パネルを駆動した場合の表示輝度分布を示す図である。It is a figure which shows display luminance distribution when a LED driver drives LED based on the LED data shown in FIG. 11, and a liquid crystal driver drives a liquid crystal panel based on the liquid crystal transmittance shown in FIG. 液晶パネルの2辺に配列されたLEDを示す図である。It is a figure which shows LED arranged on 2 sides of a liquid crystal panel. 2種類の評価エリア(水平成分評価エリア、垂直成分評価エリア)を示す図である。It is a figure which shows two types of evaluation areas (a horizontal component evaluation area and a vertical component evaluation area). 入力画像の一例を示す図である。It is a figure which shows an example of an input image. 図17に示す入力画像から特定した水平成分の近似パターンおよび垂直成分の近似パターンの一例を示す図である。It is a figure which shows an example of the approximate pattern of the horizontal component specified from the input image shown in FIG. 17, and the approximate pattern of a vertical component. 液晶パネルの背面にマトリクス状に配列されたLEDを示す図である。It is a figure which shows LED arranged in the matrix form on the back surface of a liquid crystal panel. 連続して入力される複数の入力画像に対する各LEDデータの時間的な変化を示す図である。It is a figure which shows the time change of each LED data with respect to the several input image input continuously. 従来技術を示すものであり、図10に示す入力画像が入力された場合のLEDデータの一例を示す図である。It is a figure which shows a prior art and shows an example of LED data when the input image shown in FIG. 10 is input. 従来技術を示すものであり、図10に示す入力画像が入力された場合の液晶透過率を示す図である。It is a figure which shows a prior art and shows the liquid-crystal transmittance | permeability at the time of the input image shown in FIG. 10 being input. 従来技術を示すものであり、図21に示すLEDデータに基づいてLEDドライバがLEDを駆動し、図22に示す液晶透過率に基づいて液晶ドライバが液晶パネルを駆動した場合の表示輝度分布を示す図である。FIG. 21 shows a conventional technique, and shows a display luminance distribution when the LED driver drives an LED based on the LED data shown in FIG. 21 and the liquid crystal driver drives a liquid crystal panel based on the liquid crystal transmittance shown in FIG. FIG. 従来技術を示すものであり、図21に示すLEDデータに基づいてLEDドライバがLEDを駆動した場合の実際の輝度分布を示す図である。It is a figure which shows a prior art and shows actual luminance distribution when an LED driver drives LED based on the LED data shown in FIG. 従来技術を示すものであり、図10に示す入力画像が入力された場合に、実際の輝度分布を考慮して補正した液晶透過率を示す図である。It is a figure which shows a prior art and shows the liquid-crystal transmittance | permeability correct | amended in consideration of actual luminance distribution, when the input image shown in FIG. 10 is input. 従来技術を示すものであり、図21に示すLEDデータに基づいてLEDドライバがLEDを駆動し、図25に示す液晶透過率に基づいて液晶ドライバが液晶パネルを駆動した場合の表示輝度分布を示す図である。FIG. 21 shows a conventional technique, and shows a display luminance distribution when the LED driver drives an LED based on the LED data shown in FIG. 21 and the liquid crystal driver drives a liquid crystal panel based on the liquid crystal transmittance shown in FIG. FIG. 近似パターンと各LEDに対応する出力値を算出するための要素情報とが対応付けられたLED要素情報の一例を示す図である。It is a figure which shows an example of LED element information with which the approximate pattern and the element information for calculating the output value corresponding to each LED were matched. 近似パターンと各画素に対応する出力値を算出するための要素情報とが対応付けられたLCD要素情報の一例を示す図である。It is a figure which shows an example of the LCD element information with which the approximate pattern and the element information for calculating the output value corresponding to each pixel were matched.

本発明の一実施形態について図1から図15に基づいて説明すると以下の通りである。   An embodiment of the present invention will be described below with reference to FIGS.

〔液晶表示装置の構成〕
図1は、液晶表示装置(画像表示装置)1の要部構成の一例を示すブロック図である。図1に示すように、液晶表示装置1は、制御部11、液晶パネル(表示パネル)12、LED(光源)13、液晶ドライバ(表示パネル駆動手段)14およびLEDドライバ(光源駆動手段)15を備えている。
[Configuration of liquid crystal display device]
FIG. 1 is a block diagram illustrating an example of a main configuration of a liquid crystal display device (image display device) 1. As shown in FIG. 1, the liquid crystal display device 1 includes a control unit 11, a liquid crystal panel (display panel) 12, an LED (light source) 13, a liquid crystal driver (display panel driving unit) 14, and an LED driver (light source driving unit) 15. I have.

液晶パネル12は、画素がマトリクス状に配置されている液晶表示素子である。各画素は、赤(R)、緑(G)、青(B)色光を透過する色フィルタが配されたサブピクセル(副画素)を含む。また、液晶パネル12は、画像の表示が可能な表示面を有する。   The liquid crystal panel 12 is a liquid crystal display element in which pixels are arranged in a matrix. Each pixel includes a sub-pixel (sub-pixel) provided with a color filter that transmits red (R), green (G), and blue (B) light. The liquid crystal panel 12 has a display surface on which an image can be displayed.

なお、サブピクセルに配される色フィルタの色の個数は、上述した3色に限定されるものではなく、例えば、2色や4色であってもよい。また、本実施形態では、液晶パネル12の画素数は、1920×1080(フルHD)であるとする。ただし、これに限るものではなく、液晶パネル12の画素数は任意でよい。   Note that the number of colors of the color filter arranged in the sub-pixel is not limited to the above-described three colors, and may be two colors or four colors, for example. In the present embodiment, the number of pixels of the liquid crystal panel 12 is assumed to be 1920 × 1080 (full HD). However, the present invention is not limited to this, and the number of pixels of the liquid crystal panel 12 may be arbitrary.

LED13は、導光板を介して、液晶パネル12の背面(画像の表示面とは反対側の面)側から光を照射するものである。すなわち、LED13は、バックライトとして機能するものである。LED13は、図1に示すように、液晶パネル12の一方の長辺側に沿って配置される。本実施形態では、48個のLEDが配置されているものとする。   The LED 13 irradiates light from the back surface (surface opposite to the image display surface) side of the liquid crystal panel 12 through the light guide plate. That is, the LED 13 functions as a backlight. The LED 13 is disposed along one long side of the liquid crystal panel 12 as shown in FIG. In the present embodiment, it is assumed that 48 LEDs are arranged.

なお、液晶表示装置1のバックライトとして使用する光源はLEDに限るものではなく、任意の光源でよい。また、本実施形態では、エッジライト方式を採用し、液晶パネル12の一方の長辺側にのみLED13を配置しているがこれに限るものではない。例えば、液晶パネル12の長辺側および短辺側の2辺に沿ってLED13を配置してもよい。また、直下型方式を採用して、液晶パネル12の背面側にLED13を配置してもよい。また、本実施形態では、48個のLED13を配置しているが、使用するLED13の個数は任意でよい。   The light source used as the backlight of the liquid crystal display device 1 is not limited to the LED, and may be an arbitrary light source. In this embodiment, the edge light method is adopted and the LEDs 13 are arranged only on one long side of the liquid crystal panel 12, but the present invention is not limited to this. For example, you may arrange | position LED13 along two sides of the long side of the liquid crystal panel 12, and a short side. Further, a direct type may be adopted and the LED 13 may be disposed on the back side of the liquid crystal panel 12. In the present embodiment, 48 LEDs 13 are arranged, but the number of LEDs 13 to be used may be arbitrary.

液晶ドライバ14は、制御部11からの指示に基づいて、液晶パネル12を駆動する駆動回路である。具体的には、液晶ドライバ14は、液晶パネル12の各画素(各サブピクセル)に電圧を印加し、各画素(各サブピクセル)の液晶透過率を制御するものである。   The liquid crystal driver 14 is a drive circuit that drives the liquid crystal panel 12 based on an instruction from the control unit 11. Specifically, the liquid crystal driver 14 applies a voltage to each pixel (each subpixel) of the liquid crystal panel 12 and controls the liquid crystal transmittance of each pixel (each subpixel).

LEDドライバ15は、制御部11からの指示(LEDデータ)に基づいて、各LED13を駆動する駆動回路である。すなわち、LEDドライバ15は、各LED13が照射する光の強度をそれぞれ制御するものである。より具体的には、LEDドライバ15は、制御部11からLEDデータ列を取得し、取得したLEDデータ列に基づいて各LED13の出力を制御する。ここで、LEDデータ列とは、各LED13の出力を示すLEDデータを、LED13が配列されている順に並べたものである。つまり、本実施形態では、LEDデータ列とは、48個のLEDデータが並べられたものである。   The LED driver 15 is a drive circuit that drives each LED 13 based on an instruction (LED data) from the control unit 11. That is, the LED driver 15 controls the intensity of light emitted from each LED 13. More specifically, the LED driver 15 acquires an LED data string from the control unit 11, and controls the output of each LED 13 based on the acquired LED data string. Here, the LED data string is an array of LED data indicating the output of each LED 13 in the order in which the LEDs 13 are arranged. That is, in the present embodiment, the LED data string is an array of 48 LED data.

制御部11は、マイコンなどからなり、液晶表示装置1が備えている各部それぞれを制御することで、液晶表示装置1全体を制御するものである。本実施形態では、制御部11は、機能ブロックとして、画像評価部(画像評価手段)21、LEDデータ算出部(パターン特定手段、光源データ算出手段)22および液晶透過率算出部(光透過率算出手段)23を備える構成である。これらの制御部11の各機能ブロック(21〜23)は、CPU(central processing unit)が、ROM(read only memory)等で実現された記憶装置に記憶されているプログラムをRAM(random access memory)等で実現された一時記憶部に読み出して実行することで実現してもよい。また、各機能ブロック(21〜23)は、ソフトウェアで実現するのではなく、ハードウェアで実現してもよい。   The control unit 11 includes a microcomputer and controls the entire liquid crystal display device 1 by controlling each unit included in the liquid crystal display device 1. In the present embodiment, the control unit 11 includes, as functional blocks, an image evaluation unit (image evaluation unit) 21, an LED data calculation unit (pattern specifying unit, light source data calculation unit) 22, and a liquid crystal transmittance calculation unit (light transmittance calculation). Means) 23 is provided. Each functional block (21 to 23) of the control unit 11 includes a CPU (central processing unit) that stores a program stored in a storage device realized by a ROM (read only memory) or the like (RAM (random access memory)). It may be realized by reading out to a temporary storage unit realized by the above or the like and executing it. Each functional block (21 to 23) may be realized not by software but by hardware.

画像評価部21は、液晶表示装置1の外部から入力画像を取得し、取得した入力画像を解析するものである。具体的には、画像評価部21は、入力画像を複数のエリアに分割し、各エリアの評価値をそれぞれ特定し、各エリアの評価値を順に並べた評価値列を生成する。それと共に、画像評価部21は、入力画像全体の評価値を特定する。ここで、評価値とは、或る領域の輝度の大きさを示す指標である。画像評価部21は、評価値列をLEDデータ算出部22に出力し、入力画像全体の評価値を液晶透過率算出部23に出力する。また、画像評価部21は、さらに入力画像全体の評価値をLEDデータ算出部22に出力してもよい。なお、以下では、入力画像全体の評価値を全体評価値と称する。   The image evaluation unit 21 acquires an input image from the outside of the liquid crystal display device 1 and analyzes the acquired input image. Specifically, the image evaluation unit 21 divides the input image into a plurality of areas, specifies the evaluation values of each area, and generates an evaluation value sequence in which the evaluation values of each area are arranged in order. At the same time, the image evaluation unit 21 specifies the evaluation value of the entire input image. Here, the evaluation value is an index indicating the luminance level of a certain area. The image evaluation unit 21 outputs the evaluation value sequence to the LED data calculation unit 22 and outputs the evaluation value of the entire input image to the liquid crystal transmittance calculation unit 23. The image evaluation unit 21 may further output an evaluation value of the entire input image to the LED data calculation unit 22. Hereinafter, the evaluation value of the entire input image is referred to as an overall evaluation value.

LEDデータ算出部22は、画像評価部21の解析結果に基づいて、LEDデータ(光源データ)を算出するものである。具体的には、LEDデータ算出部22は、画像評価部21から評価値列を取得し、評価値列に対応する近似パターン(詳細は後述する)を特定し、特定した近似パターンからLEDデータを算出する。LEDデータ算出部22は、算出したLEDデータをLEDドライバ15に出力する。また、LEDデータ算出部22は、特定した近似パターンを液晶透過率算出部23に出力する。   The LED data calculation unit 22 calculates LED data (light source data) based on the analysis result of the image evaluation unit 21. Specifically, the LED data calculation unit 22 acquires an evaluation value sequence from the image evaluation unit 21, identifies an approximate pattern (details will be described later) corresponding to the evaluation value sequence, and obtains LED data from the identified approximate pattern. calculate. The LED data calculation unit 22 outputs the calculated LED data to the LED driver 15. Further, the LED data calculation unit 22 outputs the specified approximate pattern to the liquid crystal transmittance calculation unit 23.

なお、LEDデータ算出部22は、画像評価部21から評価値列および全体評価値を取得する場合、評価値列に対応する近似パターンを特定し、全体評価値に基づいて近似パターンをオフセット補正してLEDデータを算出する。   In addition, when acquiring the evaluation value sequence and the overall evaluation value from the image evaluation unit 21, the LED data calculation unit 22 specifies an approximate pattern corresponding to the evaluation value sequence, and offset-corrects the approximate pattern based on the overall evaluation value. LED data is calculated.

液晶透過率算出部23は、液晶表示装置1の外部から入力画像を取得すると共に、画像評価部21から全体評価値を取得し、LEDデータ算出部22から近似パターンを取得する。そして、液晶透過率算出部23は、取得した入力画像、近似パターンおよび全体評価値から補正係数を算出し、取得した入力画像と算出した補正係数とに基づいて、液晶透過率(光透過率)を算出するものである。液晶透過率算出部23は、算出した液量透過率を液晶ドライバ14に出力する。   The liquid crystal transmittance calculation unit 23 acquires an input image from the outside of the liquid crystal display device 1, acquires an overall evaluation value from the image evaluation unit 21, and acquires an approximate pattern from the LED data calculation unit 22. Then, the liquid crystal transmittance calculating unit 23 calculates a correction coefficient from the acquired input image, approximate pattern, and overall evaluation value, and based on the acquired input image and the calculated correction coefficient, the liquid crystal transmittance (light transmittance). Is calculated. The liquid crystal transmittance calculating unit 23 outputs the calculated liquid amount transmittance to the liquid crystal driver 14.

なお、画像評価部21および液晶透過率算出部23は、液晶表示装置1の外部から入力画像を取得しているがこれに限るものではない。液晶表示装置1が記憶部(不図示)を備えている場合、画像評価部21および液晶透過率算出部23は、記憶部から画像を読み出して入力画像を取得してもよい。   Note that the image evaluation unit 21 and the liquid crystal transmittance calculation unit 23 acquire an input image from the outside of the liquid crystal display device 1, but are not limited thereto. When the liquid crystal display device 1 includes a storage unit (not shown), the image evaluation unit 21 and the liquid crystal transmittance calculation unit 23 may read an image from the storage unit and acquire an input image.

〔液晶表示装置の表示処理〕
次に液晶表示装置1が実行する表示処理の一例について図2に基づいて説明する。図2は、液晶表示装置1が実行する表示処理の一例を示すフローチャートである。
[Display processing of liquid crystal display devices]
Next, an example of display processing executed by the liquid crystal display device 1 will be described with reference to FIG. FIG. 2 is a flowchart illustrating an example of display processing executed by the liquid crystal display device 1.

図2に示すように、まず、画像評価部21および液晶透過率算出部23は、液晶表示装置1の外部から入力画像を取得する(S1)。次に、画像評価部21は、取得した入力画像を複数のエリアに分割する(S2)。そして、画像評価部21は、各エリアの評価値をそれぞれ特定し、各エリアの評価値を順に並べた評価値列を生成する(S3)。さらに、画像評価部21は、入力画像から全体評価値を特定する(S4)。   As shown in FIG. 2, first, the image evaluation unit 21 and the liquid crystal transmittance calculation unit 23 acquire an input image from the outside of the liquid crystal display device 1 (S1). Next, the image evaluation unit 21 divides the acquired input image into a plurality of areas (S2). And the image evaluation part 21 specifies the evaluation value of each area, respectively, and produces | generates the evaluation value row | line | column which arranged the evaluation value of each area in order (S3). Further, the image evaluation unit 21 specifies an overall evaluation value from the input image (S4).

次に、LEDデータ算出部22は、画像評価部21が生成した評価値列に対応する近似パターンを特定し(S5)、特定した近似パターンからLEDデータを算出する(S6)。   Next, the LED data calculation unit 22 specifies an approximate pattern corresponding to the evaluation value sequence generated by the image evaluation unit 21 (S5), and calculates LED data from the specified approximate pattern (S6).

また、液晶透過率算出部23は、取得した入力画像、LEDデータ算出部22が特定した近似パターンおよび画像評価部21が特定した全体評価値から補正係数を算出し、取得した入力画像と算出した補正係数とに基づいて、液晶透過率を算出する(S7)。   Further, the liquid crystal transmittance calculation unit 23 calculates a correction coefficient from the acquired input image, the approximate pattern specified by the LED data calculation unit 22 and the overall evaluation value specified by the image evaluation unit 21, and calculates the acquired input image. The liquid crystal transmittance is calculated based on the correction coefficient (S7).

そして、LEDドライバ15は、LEDデータ算出部22が算出したLEDデータに基づいてLED13を駆動すると共に、液晶ドライバ14は、液晶透過率算出部23が算出した液晶透過率に基づいて液晶パネル12を駆動する(S8)。   The LED driver 15 drives the LED 13 based on the LED data calculated by the LED data calculation unit 22, and the liquid crystal driver 14 drives the liquid crystal panel 12 based on the liquid crystal transmittance calculated by the liquid crystal transmittance calculation unit 23. Drive (S8).

次の入力画像があれば(S9でYES)、上記のS1〜S8を繰り返し、次の入力画像が無ければ(S9でNO)、表示処理を終了する。   If there is a next input image (YES in S9), the above S1 to S8 are repeated, and if there is no next input image (NO in S9), the display process is terminated.

〔実施例〕
次に、画像評価部21、LEDデータ算出部22および液晶透過率算出部23のより具体的な処理例について図3〜図14に基づいて説明する。
〔Example〕
Next, more specific processing examples of the image evaluation unit 21, the LED data calculation unit 22, and the liquid crystal transmittance calculation unit 23 will be described with reference to FIGS.

なお、ここでは、入力画像は0〜255(8bit)階調であり、画素はRGBを含む1ピクセル、絵素はR,G,Bのサブピクセルであるとする。また、LEDデータの値は、0〜1023の10bitであるとする。   Here, it is assumed that the input image has 0 to 255 (8 bit) gradation, the pixel is one pixel including RGB, and the picture element is an R, G, B subpixel. The value of the LED data is assumed to be 10 bits from 0 to 1023.

(画像評価部の処理例)
まず、画像評価部21の処理例について図3に基づいて説明する。図3は、画像評価部21の処理例の概要を示す図である。
(Example of processing by the image evaluation unit)
First, a processing example of the image evaluation unit 21 will be described with reference to FIG. FIG. 3 is a diagram illustrating an outline of a processing example of the image evaluation unit 21.

画像評価部21は、図3(b)に示すように、図3(a)に示す入力画像41を長辺方向に対して垂直に5つのエリア41a〜41eに分割する。ただし、入力画像の分割方法はこれに限るものではない。本実施形態では、LED13が液晶パネル12の長辺方向に沿って配置されているため、入力画像41を長辺方向に対して垂直に分割している。例えば、LED13が液晶パネル12の短辺方向に沿って配置されている場合、入力画像41を短辺方向に対して垂直に分割する。   As shown in FIG. 3B, the image evaluation unit 21 divides the input image 41 shown in FIG. 3A into five areas 41a to 41e perpendicular to the long side direction. However, the method of dividing the input image is not limited to this. In the present embodiment, since the LEDs 13 are arranged along the long side direction of the liquid crystal panel 12, the input image 41 is divided perpendicularly to the long side direction. For example, when the LEDs 13 are arranged along the short side direction of the liquid crystal panel 12, the input image 41 is divided perpendicularly to the short side direction.

また、LED13が配列されている方向に対して垂直に入力画像を分割していれば、エリアの個数、面積等は任意でよい。例えば、図3(b)に示す例では、5つのエリア41a〜41eに分割しているが、複数のエリアであればよい。また、図3(b)に示す例では、入力画像41を5等分しているが、5つのエリア41a〜41eが互いに異なっていてもよい。なお、エリアの個数は、入力画像中心の評価値を得るために、奇数であることが望ましい。また、エリアの個数が多くなると、評価の精度が高くなる。ただし、エリアの個数がLED13の個数を超えると、評価の精度は向上しないため、LED13の個数以下とすることが望ましい。   Further, if the input image is divided perpendicularly to the direction in which the LEDs 13 are arranged, the number of areas, the area, and the like may be arbitrary. For example, in the example shown in FIG. 3B, the area is divided into five areas 41a to 41e, but may be a plurality of areas. In the example shown in FIG. 3B, the input image 41 is divided into five equal parts, but the five areas 41a to 41e may be different from each other. The number of areas is desirably an odd number in order to obtain an evaluation value at the center of the input image. Further, the accuracy of evaluation increases as the number of areas increases. However, if the number of areas exceeds the number of LEDs 13, the accuracy of evaluation is not improved.

次に評価値の特定方法について説明する。本実施例では、まず、画像評価部21は、エリア41a〜41e毎に、エリア内の絵素値の最大値を抽出して代表値とする。例えば、エリア41aにn個の画素があり、R1,G1,B1=(10,20,30)、・・・、Rn,Gn、Bn=(100,150,100)の場合、最大値である150をこのエリア41aの代表値とする。   Next, a method for specifying the evaluation value will be described. In this embodiment, first, the image evaluation unit 21 extracts the maximum value of the pixel values in the area for each of the areas 41a to 41e and sets it as a representative value. For example, if there are n pixels in the area 41a and R1, G1, B1 = (10, 20, 30),..., Rn, Gn, Bn = (100, 150, 100), the maximum value is obtained. 150 is a representative value of the area 41a.

ここで、代表値の抽出方法は上述の例に限るものではない。例えば、エリア内の絵素値ではなく、エリア内の画素値を参照してもよい。また、エリア内の画素値または絵素値の平均値を代表値としてもよい。また、エリア内の画素値または絵素値のヒストグラムを取り、最も個数の多い画素値または絵素値を代表値としてもよい。また、エリア内の任意の画素または絵素の値を代表値としてもよい。   Here, the representative value extraction method is not limited to the above-described example. For example, the pixel value in the area may be referred to instead of the pixel value in the area. Further, an average value of pixel values or pixel values in the area may be used as the representative value. In addition, a histogram of pixel values or pixel values in the area may be taken, and the largest number of pixel values or pixel values may be used as representative values. In addition, the value of an arbitrary pixel or picture element in the area may be used as the representative value.

次に、画像評価部21は、抽出した代表値をそのままを評価値とするのではなく、0〜255を複数のレベルに分けて、代表値が該当するレベルの値を評価値とする。具体的には、0〜255を4等分し、0〜63を「レベル0」、64〜127を「レベル1」、128〜191を「レベル2」、192〜255を「レベル3」とする。例えば、エリア41aの代表値が150であるため、エリア41aの評価値は「2」となる。   Next, the image evaluation unit 21 does not use the extracted representative value as it is as the evaluation value, but divides 0 to 255 into a plurality of levels and sets the value of the level corresponding to the representative value as the evaluation value. Specifically, 0 to 255 are divided into four equal parts, 0 to 63 are “level 0”, 64 to 127 are “level 1”, 128 to 191 are “level 2”, and 192 to 255 are “level 3”. To do. For example, since the representative value of the area 41a is 150, the evaluation value of the area 41a is “2”.

このようにして、画像評価部21は、各エリア41a〜41eの評価値を特定し、特定した評価値を順に並べて評価値列(Index)を生成する。ここでは、図3(c)に示すように、評価値列が「2,3,3,3,2」であったとする。   In this way, the image evaluation unit 21 specifies the evaluation values of the areas 41a to 41e, and generates the evaluation value string (Index) by arranging the specified evaluation values in order. Here, it is assumed that the evaluation value sequence is “2, 3, 3, 3, 2” as shown in FIG.

なお、上記のレベルの区分の仕方は任意でよい。本実施例では、0〜255を4等分しているが、レベルの個数、レベルの範囲等は任意でよい。また、レベルに区分することなく、代表値をそのまま評価値としてもよい。   Note that the level classification method described above may be arbitrary. In this embodiment, 0 to 255 is divided into four equal parts, but the number of levels, the level range, etc. may be arbitrary. Also, the representative value may be used as the evaluation value as it is without being divided into levels.

最後に、画像評価部21は、入力画像41に含まれる絵素の最大値を全体評価値(Frame Level)として特定する。ここでは、全体評価値が「200」であったとする。なお、全体評価値の特定方法は、上記の代表値の抽出方法と同じであればよい。   Finally, the image evaluation unit 21 specifies the maximum value of the picture elements included in the input image 41 as the overall evaluation value (Frame Level). Here, it is assumed that the overall evaluation value is “200”. The method for specifying the overall evaluation value may be the same as the method for extracting the representative value.

このように、画像評価部21は、入力画像41に対して、所定のエリアに分割して評価し、評価値列という形で数値化する。入力画像41の輝度分布を、LED13が配列している方向に関して、右上がり、左上がり、部分的、均一などの大きな傾向としてつかみ、数値として扱うことができる。すなわち、画像評価部21は、入力画像41の輝度分布を、LED13が配列している方向に関して、近似して数値化する。なお、入力画像41の輝度分布とは、入力画像41を表示した際の輝度の大きさの分布であり、入力画像41の画素値または絵素値の分布に相当するものである。   As described above, the image evaluation unit 21 divides and evaluates the input image 41 into predetermined areas, and digitizes the input image 41 in the form of an evaluation value sequence. With respect to the direction in which the LEDs 13 are arranged, the luminance distribution of the input image 41 can be grasped as a large tendency such as rising to the right, rising to the left, partial or uniform, and can be handled as a numerical value. That is, the image evaluation unit 21 approximates and digitizes the luminance distribution of the input image 41 with respect to the direction in which the LEDs 13 are arranged. Note that the luminance distribution of the input image 41 is a distribution of luminance magnitude when the input image 41 is displayed, and corresponds to a distribution of pixel values or pixel values of the input image 41.

(LEDデータ算出部の処理例)
まず、近似パターンについて図4に基づいて説明する。図4は、近似パターンの一例を示す図である。近似パターンとは、直線で構成され、変化量が所定値以下であるものである。また、近似パターンは、図4に示すように、予め複数種類設定される。本実施例では、近似パターンは、4つの直線から成り、各直線の傾きは所定値以下である。
(Processing example of LED data calculation unit)
First, the approximate pattern will be described with reference to FIG. FIG. 4 is a diagram illustrating an example of the approximate pattern. An approximate pattern is composed of straight lines and the amount of change is not more than a predetermined value. In addition, as shown in FIG. 4, a plurality of types of approximate patterns are set in advance. In this embodiment, the approximate pattern is composed of four straight lines, and the inclination of each straight line is equal to or less than a predetermined value.

また、図5に示すように、評価値列(Index)と近似パターンとの対応関係を予め設定しておく。図5に示す評価値列(Index)と近似パターンとの対応関係を示すLUT(Look Up Table)をパターン特定情報と称する。なお、図5では、評価値列と近似パターンの種別を示す識別番号(種別番号)とが対応付けられている。また、図5に示す「Revers」は近似パターンの上下反転を意味し、これに関して詳細は後述する。   Further, as shown in FIG. 5, the correspondence between the evaluation value sequence (Index) and the approximate pattern is set in advance. The LUT (Look Up Table) indicating the correspondence between the evaluation value string (Index) and the approximate pattern shown in FIG. 5 is referred to as pattern specifying information. In FIG. 5, an evaluation value string and an identification number (type number) indicating the type of the approximate pattern are associated with each other. Further, “Revers” shown in FIG. 5 means upside down of the approximate pattern, which will be described in detail later.

ここで、評価値列(「00000」〜「33333」)毎に、評価値列の各値を直線で結んだ形状と最も近似する近似パターンをそれぞれ対応付けて、パターン特定情報を設定する。換言すると、各評価値列(「00000」〜「33333」)と最もグラフ形状が近似する近似パターンをそれぞれ対応付けて、パターン特定情報を設定する。   Here, for each evaluation value string (“00000” to “33333”), the pattern specifying information is set by associating the approximate pattern that most closely approximates the shape obtained by connecting the values of the evaluation value string with a straight line. In other words, the pattern specifying information is set by associating each evaluation value sequence (“00000” to “33333”) with the approximate pattern that most closely approximates the graph shape.

すなわち、LEDデータ算出部22は、直線で構成され、変化量が所定値以下である近似パターンの中から、入力画像の光源配列方向成分の輝度分布を近似した近似パターンを特定する。なお、光源配列方向成分とは、本実施例の場合、長辺方向(水平方向)である。   That is, the LED data calculation unit 22 identifies an approximate pattern that approximates the luminance distribution of the light source array direction component of the input image from the approximate patterns that are configured with straight lines and whose variation is equal to or less than a predetermined value. In the present embodiment, the light source arrangement direction component is the long side direction (horizontal direction).

なお、近似パターンの種別数、および、近似パターンを構成する直線の本数は任意でよい。本実施例では、近似パターンが4つの直線からなり、各直線が「傾き0の直線」、「右上がりの直線」、「右上がりの直線」である。この場合、近似パターンは、81種類用意することができ、そのうち全部または一部を近似パターンとして採用する。近似パターンの種別数を多くすることにより、より入力画像(映像)に適したディミングが可能になる。   The number of types of approximate patterns and the number of straight lines constituting the approximate pattern may be arbitrary. In this embodiment, the approximate pattern is composed of four straight lines, and each straight line is a “straight line having 0 slope”, a “right-up line”, and a “right-up line”. In this case, 81 types of approximate patterns can be prepared, and all or some of them are adopted as approximate patterns. By increasing the number of types of approximate patterns, dimming suitable for an input image (video) becomes possible.

しかしながら、近似パターンの種別数を多くすると、評価値列(Index)とのマッチングが難しくなることによって回路規模が増大する。また、近似パターンを構成する直線の本数が多くなると、より複雑なパターンが用いられることにより、狭い範囲で複雑かつ大きな輝度変化が生じやすくなり、バックライトの光に輝度ムラがあるように見えることがある。さらに、近似パターンの種別数を多くすると、液晶補正との不適合の発生によって、映像が破綻するリスクが高くなる。これらの理由により、近似パターンを構成する直線の本数は3〜5本にすることが妥当である。   However, if the number of types of approximate patterns is increased, matching with the evaluation value sequence (Index) becomes difficult, and the circuit scale increases. In addition, if the number of straight lines that make up the approximate pattern increases, more complex patterns are used, and complex and large luminance changes are likely to occur in a narrow range, and the backlight light appears to have uneven luminance. There is. Furthermore, when the number of types of approximate patterns is increased, there is a higher risk that the video will fail due to the occurrence of incompatibility with the liquid crystal correction. For these reasons, it is appropriate that the number of straight lines constituting the approximate pattern is 3 to 5.

このように、LEDデータ算出部22は、近似パターンと、評価値列と近似パターンとの対応関係を示すパターン特定情報とを予め定めておく。そして、LEDデータ算出部22は、パターン特定情報を参照して、画像評価部21から取得した評価値列に対応する近似パターンを特定する。なお、パターン特定情報において、近似パターンに反転フラグが付加されている場合(「Revers」が「1」となっている場合)、LEDデータ算出部22は、評価値列に対応する近似パターンの形状を上下反転した近似パターンを特定したものとする。   As described above, the LED data calculation unit 22 predetermines the approximate pattern and the pattern specifying information indicating the correspondence between the evaluation value sequence and the approximate pattern. Then, the LED data calculation unit 22 refers to the pattern identification information and identifies an approximate pattern corresponding to the evaluation value sequence acquired from the image evaluation unit 21. In the pattern specifying information, when the reverse flag is added to the approximate pattern (when “Revers” is “1”), the LED data calculation unit 22 determines the shape of the approximate pattern corresponding to the evaluation value sequence. It is assumed that the approximate pattern obtained by vertically inverting is specified.

LEDデータ算出部22が、特定した近似パターンからLEDデータ(LEDデータ列)を算出する具体例を以下に説明する。   A specific example in which the LED data calculation unit 22 calculates LED data (LED data string) from the specified approximate pattern will be described below.

LEDデータ算出部22は、近似パターンと各LED13に対応する出力値を算出するための要素情報とが対応付けられたLED要素情報を参照して、特定した近似パターンに対応する要素情報から、近似パターンにおける各LED13の出力値を算出する。   The LED data calculation unit 22 refers to the LED element information in which the approximate pattern and the element information for calculating the output value corresponding to each LED 13 are associated, and approximates from the element information corresponding to the identified approximate pattern. The output value of each LED 13 in the pattern is calculated.

LEDデータ算出部22は、予めLED要素情報を設定する。ここで、各LED13の出力値を算出するための要素情報とは、横軸がLED番号、縦軸が各LED13の出力値とするグラフに、近似パターンの形状を当てはめた場合における、近似パターンを構成する各直線の始点および傾き、並びに、近似パターンの最大値である。例えば、LED要素情報は、図27に示すようなLUTであってよい。   The LED data calculation unit 22 sets LED element information in advance. Here, the element information for calculating the output value of each LED 13 is an approximate pattern when the shape of the approximate pattern is applied to a graph in which the horizontal axis indicates the LED number and the vertical axis indicates the output value of each LED 13. These are the starting point and inclination of each straight line that constitutes, and the maximum value of the approximate pattern. For example, the LED element information may be an LUT as shown in FIG.

本実施例では、近似パターンが4つの直線(Line_A〜Line_D)で構成されているため、図27に示すように、4つの直線の始点(Start_A〜Start_D)および傾き(Step_A〜Step_D)、並びに、最大値(Pat_Max)が要素情報として記述されている。   In this embodiment, the approximate pattern is composed of four straight lines (Line_A to Line_D), so as shown in FIG. The maximum value (Pat_Max) is described as element information.

なお、上記のLED番号とは、LED13が配列されている、端(本実施形態では、図1の左端)からの順番を示す。また、近似パターンを構成する直線と、LED番号との対応関係は予め設定されているものとする。本実施例では、近似パターンが4つの直線から構成されているため、各LED13を配列順に4つのグループA〜Dに均等に分類する。すなわち、LED#0〜#11、LED#12〜#23、LED#24〜#35、LED#36〜#47の4つに分類する。なお、LED#nは、LED番号を示し、本実施例では、先頭を「0」とする。   In addition, said LED number shows the order from the end (this embodiment left end of FIG. 1) in which LED13 is arranged. In addition, it is assumed that the correspondence relationship between the straight line constituting the approximate pattern and the LED number is set in advance. In this embodiment, since the approximate pattern is composed of four straight lines, each LED 13 is equally classified into four groups A to D in the arrangement order. That is, the LED # 0 to # 11, LED # 12 to # 23, LED # 24 to # 35, and LED # 36 to # 47 are classified. LED # n indicates the LED number, and in this embodiment, the head is “0”.

また、本実施例では、LED13を均等に分類しているがこれに限るものではなく、グループに含まれるLED13の個数は任意でよい。   In this embodiment, the LEDs 13 are classified equally, but the present invention is not limited to this, and the number of LEDs 13 included in the group may be arbitrary.

LEDデータ算出部22は、図6に示すように、特定した近似パターンに対応付けられた要素情報(始点51〜54、傾き55〜58)に基づいて、近似パターンにおける各LED13の出力値を算出する。   As shown in FIG. 6, the LED data calculation unit 22 calculates the output value of each LED 13 in the approximate pattern based on the element information (start points 51 to 54 and inclinations 55 to 58) associated with the identified approximate pattern. To do.

具体的には、近似パターンにおいて各LED13に対応する出力値をグループ毎に以下のように算出する。   Specifically, the output value corresponding to each LED 13 in the approximate pattern is calculated for each group as follows.

LED_Pat_#n = Start + Step × LED_Group_#m
ここで、「LED_Pat_#n」は、近似パターンにおけるn番目のLED13の出力値を示す。LED_Group_#mは、グループ内でのLEDの端からの順序を示し、先頭を0番目とする。
LED_Pat_ # n = Start + Step × LED_Group_ # m
Here, “LED_Pat_ # n” indicates the output value of the nth LED 13 in the approximate pattern. LED_Group_ # m indicates the order from the end of the LED in the group, and the head is 0th.

例えば、図6に示すように、グループAの始点51の値が「0」であり、傾きが「512/12」とすると、LED番号#6のLED13の出力値は、
LED_Pat_#6 = 0 + 512/12 × 6 = 256
となる。また、グループBの始点52の値が「512」であり、傾きが「0」とすると、LED番号#14のLED13の出力値は、グループBにおいて3番目であるため、
LED_Pat_#14 = 512 + 0 × 3 = 512
となる。
For example, as shown in FIG. 6, when the value of the starting point 51 of group A is “0” and the slope is “512/12”, the output value of the LED 13 with LED number # 6 is
LED_Pat_ # 6 = 0 + 512/12 × 6 = 256
It becomes. If the value of the start point 52 of the group B is “512” and the inclination is “0”, the output value of the LED 13 with the LED number # 14 is the third in the group B.
LED_Pat_ # 14 = 512 + 0 × 3 = 512
It becomes.

LEDデータ算出部22は、近似パターンに反転フラグが付加されていない場合、近似パターンにおける各LED13の出力値を、そのままLEDデータとする。すなわち、LED_Data_#n = LED_Pat_#nとする。ここで、「LED_Data_#n」は、n番目のLED13のLEDデータを示す。   When the inversion flag is not added to the approximate pattern, the LED data calculation unit 22 uses the output value of each LED 13 in the approximate pattern as LED data as it is. That is, LED_Data_ # n = LED_Pat_ # n. Here, “LED_Data_ # n” indicates the LED data of the nth LED 13.

また、パターン特定情報において、近似パターンに反転フラグが付加されている場合、LEDデータ算出部22は、次のように、各LED13のLEDデータを算出する(図7参照)。具体的には、LED_Data_#n = Pat_Max - LED_Pat_#nとする。   In addition, in the pattern specifying information, when an inversion flag is added to the approximate pattern, the LED data calculation unit 22 calculates the LED data of each LED 13 as follows (see FIG. 7). Specifically, LED_Data_ # n = Pat_Max−LED_Pat_ # n.

また、LEDデータ算出部22は、画像評価部21から評価値列および全体評価値を取得する場合、次のように、近似パターンにおける各LED13の出力値をオフセット補正してLEDデータを算出する(図8参照)。具体的には、LED_Data_#n = LED_Pat_#n + (Offset - Pat_Max)とする。ここで、「Offset」は、8bitの全体評価値(Frame Level)を10bitに変換した値である。   Moreover, when acquiring the evaluation value sequence and the overall evaluation value from the image evaluation unit 21, the LED data calculation unit 22 performs the offset correction on the output value of each LED 13 in the approximate pattern as follows to calculate the LED data ( (See FIG. 8). Specifically, LED_Data_ # n = LED_Pat_ # n + (Offset−Pat_Max). Here, “Offset” is a value obtained by converting an 8-bit overall evaluation value (Frame Level) to 10 bits.

このように、近似パターンに対応する各LED13の出力値を上記のLED要素情報で設定することにより、個々の値をLUTに保持する場合に比べて回路規模を小さくすることができる。また、LED13の個数が増加した場合であっても、要素情報の規模が増加しない。   Thus, by setting the output value of each LED 13 corresponding to the approximate pattern with the above LED element information, the circuit scale can be reduced as compared with the case where each value is held in the LUT. Even if the number of LEDs 13 increases, the scale of element information does not increase.

また、或る近似パターンを上下反転した近似パターン、および、或る近似パターンの全体の値を増減した近似パターンは、計算によって求める。これにより、近似パターンの種別数を減らすことができ、LED要素情報の規模を縮小することができる。   In addition, an approximate pattern obtained by inverting an approximate pattern vertically and an approximate pattern obtained by increasing or decreasing the entire value of the approximate pattern are obtained by calculation. Thereby, the number of types of approximate patterns can be reduced, and the scale of the LED element information can be reduced.

近似パターンを使用する本発明では、従来の方法と比較して、バックライト制御の自由度が低下する。しかしながら、上記の工夫によって、回路規模の増大を抑制しながら、自由度を向上させることができる。   In the present invention using the approximate pattern, the degree of freedom of backlight control is reduced as compared with the conventional method. However, the above-described device can improve the degree of freedom while suppressing an increase in circuit scale.

このように、入力画像の輝度分布に最も近似し、変化量が所定値以下である近似パターンに基づいてLEDデータを算出することにより、局所的に発生する表示映像の破綻を防ぐことができる。また、入力画像の輝度分布が有する大きな傾向に合わせて近似パターンを選択し、LEDデータの自由度を下げる、つまり、LEDデータに制限をかける。これにより、実際に出力されるLEDの出力(LEDデータ)の計算を簡略化することができ、回路規模を縮小することができる。   As described above, by calculating the LED data based on the approximate pattern that most closely approximates the luminance distribution of the input image and the change amount is equal to or less than a predetermined value, it is possible to prevent the failure of the display video that occurs locally. In addition, an approximate pattern is selected according to a large tendency of the luminance distribution of the input image, and the degree of freedom of the LED data is lowered, that is, the LED data is limited. Thereby, calculation of the output (LED data) of the LED actually output can be simplified, and the circuit scale can be reduced.

さらに、液晶表示装置1の機種等に応じて、設定する近似パターンを変えることにより、多様な要望に柔軟に対応することができる。一般に、従来技術で使用されている輝度拡散フィルタは光学系が異なれば、作成しなおす必要があるが、本発明を用いることにより、液晶表示装置毎の光学的シミュレーションおよび光学系毎の輝度拡散フィルタが不要となる。   Furthermore, by changing the approximate pattern to be set according to the model of the liquid crystal display device 1, various requests can be flexibly met. In general, the luminance diffusion filter used in the prior art needs to be recreated if the optical system is different. By using the present invention, an optical simulation for each liquid crystal display device and a luminance diffusion filter for each optical system are used. Is no longer necessary.

LEDデータ算出部22は、換言すると、直線で構成され、変化量が所定値以下である近似パターンの中から、入力画像の光源配列方向成分の輝度分布を近似した近似パターンを特定し、特定した近似パターンに基づいて、複数のLED13の出力を制御するためのLEDデータを算出するものであると言える。   In other words, the LED data calculation unit 22 specifies and specifies an approximate pattern that approximates the luminance distribution of the light source array direction component of the input image from the approximate patterns that are configured with straight lines and the change amount is equal to or less than a predetermined value. It can be said that LED data for controlling the outputs of the plurality of LEDs 13 is calculated based on the approximate pattern.

(液晶透過率算出部の処理例)
次に、液晶透過率算出部23の処理例について説明する。液晶透過率算出部23は、入力画像、全体評価値および近似パターンに基づいて、以下のように液晶透過率を算出する。
(Processing example of liquid crystal transmittance calculation unit)
Next, a processing example of the liquid crystal transmittance calculating unit 23 will be described. The liquid crystal transmittance calculation unit 23 calculates the liquid crystal transmittance as follows based on the input image, the overall evaluation value, and the approximate pattern.

まず、近似パターンにおいて、各画素に対応する出力値を算出する。具体的には、液晶透過率算出部23は、近似パターンと各画素に対応する出力値を算出するための要素情報とが対応付けられたLCD要素情報を参照して、特定した近似パターンに対応する要素情報から、近似パターンにおける各画素の出力値を算出する。   First, an output value corresponding to each pixel is calculated in the approximate pattern. Specifically, the liquid crystal transmittance calculating unit 23 refers to the LCD element information in which the approximate pattern and the element information for calculating the output value corresponding to each pixel are associated, and corresponds to the identified approximate pattern. The output value of each pixel in the approximate pattern is calculated from the element information.

液晶透過率算出部23は、予めLCD要素情報を設定する。ここで、各画素に対応する出力値を算出するための要素情報とは、横軸が画素番号、縦軸が各画素の出力値とするグラフに、近似パターンの形状を当てはめた場合における、近似パターンを構成する各直線の始点および傾き、並びに、近似パターンの最大値である。例えば、LCD要素情報は、図28に示すようなLUTであってよい。   The liquid crystal transmittance calculating unit 23 sets LCD element information in advance. Here, the element information for calculating the output value corresponding to each pixel is an approximation when the shape of the approximate pattern is applied to a graph in which the horizontal axis is the pixel number and the vertical axis is the output value of each pixel. The starting point and inclination of each straight line constituting the pattern, and the maximum value of the approximate pattern. For example, the LCD element information may be an LUT as shown in FIG.

本実施例では、近似パターンが4つの直線(Line_A〜Line_D)で構成されているため、図28に示すように、4つの直線の始点(Start_A〜Start_D)および傾き(Step_A〜Step_D)、並びに、最大値(Pat_Max)が要素情報として記述されている。   In the present embodiment, since the approximate pattern is composed of four straight lines (Line_A to Line_D), as shown in FIG. The maximum value (Pat_Max) is described as element information.

なお、上記の画素番号とは、画素が配列されている、端からの順番を示す。本実施形態では、近似パターンが入力画像の水平方向成分で近似されたものであるため、画素番号は、図1の左端を先頭とする列番号である。また、近似パターンを構成する直線と、画素番号との対応関係は予め設定されているものとする。本実施例では、近似パターンが4つの直線から構成されているため、水平成分の各画素(1920個)を配列順に4つのグループA〜Dに均等に分類する。   In addition, said pixel number shows the order from the end in which the pixel is arranged. In this embodiment, since the approximate pattern is approximated by the horizontal component of the input image, the pixel number is a column number starting from the left end of FIG. Also, it is assumed that the correspondence between the straight lines constituting the approximate pattern and the pixel numbers is set in advance. In this embodiment, since the approximate pattern is composed of four straight lines, each horizontal component pixel (1920 pixels) is equally classified into four groups A to D in the arrangement order.

また、本実施例では、各画素を均等に分類しているがこれに限るものではなく、グループに含まれる画素の個数は任意でよい。   In this embodiment, the pixels are equally classified, but the present invention is not limited to this, and the number of pixels included in the group may be arbitrary.

具体的には、近似パターンにおいて各画素に対応する出力値をグループ毎に以下のように算出する。   Specifically, the output value corresponding to each pixel in the approximate pattern is calculated for each group as follows.

LCD_Pat_#j = Start + Step × LCD_Group_#m
ここで、「LCD_Pat_#j」は、近似パターンにおいてj列の画素に対応する出力値を示す。LCD_Group_#mは、グループ内での画素の端からの順序を示す。
LCD_Pat_ # j = Start + Step × LCD_Group_ # m
Here, “LCD_Pat_ # j” indicates an output value corresponding to the j columns of pixels in the approximate pattern. LCD_Group_ # m indicates the order from the end of the pixel in the group.

このようにして、液晶透過率算出部23は、近似パターンにおける各画素の出力値を算出し、算出した出力値、並びに、入力画像および全体評価値に基づいて、以下のように、液晶透過率を算出する。   In this way, the liquid crystal transmittance calculating unit 23 calculates the output value of each pixel in the approximate pattern, and based on the calculated output value, the input image, and the overall evaluation value, the liquid crystal transmittance is as follows. Is calculated.

LCD_rate(i,j) = Offset + Pat_Max - LCD_Pat_#j if(revers = '0')
= Offset + LCD_Pat_#j if(revers = '1')
Assist(i,j,c) = (1 - Cin(i,j,c)) * LCD_rate(i,j) * K
Cout(i,j,c) = Cin(i,j,c) + (Cin(i,j,c) * Assist(i,j,c))
ここで、「Cin(i,j,c)」は、入力画像のi行j列の画素の絵素値(c = R or G or B)である。また、「Cout(i,j,c)」は、i行j列の画素の絵素(c = R or G or B)の液晶透過率である。また、「Assist(i,j,c)」は、補正係数である。「K」は、補正強度である。「LCD_rate(i,j)」は、補正係数を導出するための中間値となるものである。
LCD_rate (i, j) = Offset + Pat_Max-LCD_Pat_ # j if (revers = '0')
= Offset + LCD_Pat_ # j if (revers = '1')
Assist (i, j, c) = (1-Cin (i, j, c)) * LCD_rate (i, j) * K
Cout (i, j, c) = Cin (i, j, c) + (Cin (i, j, c) * Assist (i, j, c))
Here, “Cin (i, j, c)” is a pixel value (c = R or G or B) of a pixel in i row and j column of the input image. “Cout (i, j, c)” is the liquid crystal transmittance of the pixel (c = R or G or B) of the pixel in i row and j column. “Assist (i, j, c)” is a correction coefficient. “K” is the correction intensity. “LCD_rate (i, j)” is an intermediate value for deriving a correction coefficient.

また、「Cout(i,j,c)」が0〜1の値をとるようにするために、「Cin(i,j,c)」および「LCD_rate(i,j)」を規格化し、「K」は0〜1の任意の値とする。本実施例における「Cout(i,j,c)」と「Cin(i,j,c)」との関係を図9に示す。図9は、入力画像の絵素値と、液晶透過率との関係を示す図である。図9では、横軸が「Cin(i,j,c)」であり、縦軸が「Cout(i,j,c)」である。また、「if(revers = '0')」は、パターン特定情報において、近似パターンに反転フラグが付加されていない場合であり、「if(revers = '1')」は、パターン特定情報において、近似パターンに反転フラグが付加されている場合を示す。   In addition, in order to make “Cout (i, j, c)” take a value of 0 to 1, “Cin (i, j, c)” and “LCD_rate (i, j)” are standardized and “ “K” is an arbitrary value from 0 to 1. FIG. 9 shows the relationship between “Cout (i, j, c)” and “Cin (i, j, c)” in the present embodiment. FIG. 9 is a diagram illustrating the relationship between the pixel value of the input image and the liquid crystal transmittance. In FIG. 9, the horizontal axis is “Cin (i, j, c)” and the vertical axis is “Cout (i, j, c)”. In addition, “if (revers = '0')” is a case where the inversion flag is not added to the approximate pattern in the pattern identification information, and “if (revers = '1')” is in the pattern identification information, A case where an inversion flag is added to the approximate pattern is shown.

後述の図11に示すように入力画像の輝度分布に合わせてLEDデータを小さくするため、液晶透過率を補正しない場合、表示輝度が低下する。そのため、液晶透過率を補正することで、輝度の低下を防ぐことができる。図9に示すように、中間調の補正を大きくし、低階調・高階調での補正を小さくすることにより、階調潰れを防ぐことができる。   As shown in FIG. 11 described later, in order to reduce the LED data in accordance with the luminance distribution of the input image, the display luminance is lowered when the liquid crystal transmittance is not corrected. Therefore, it is possible to prevent a decrease in luminance by correcting the liquid crystal transmittance. As shown in FIG. 9, gradation correction can be prevented by increasing halftone correction and reducing correction at low gradations and high gradations.

(本発明の効果)
最後に、図10に示す入力画像61が入力された場合に、各部の出力結果を以下に示す。
(Effect of the present invention)
Finally, when the input image 61 shown in FIG. 10 is input, the output result of each unit is shown below.

まず、図10に示す入力画像61が入力された場合に、LEDデータ算出部22が算出したLEDデータを図11に示す。図11は、横軸が図10における点Aから点Bの位置に対応するLEDであり、縦軸がLEDデータの値である。また、図12に、図11に示すLEDデータに基づいてLEDドライバ15がLED13を駆動した場合の実際の輝度分布を示す。   First, FIG. 11 shows the LED data calculated by the LED data calculation unit 22 when the input image 61 shown in FIG. 10 is input. In FIG. 11, the horizontal axis represents LEDs corresponding to the positions from point A to point B in FIG. 10, and the vertical axis represents LED data values. FIG. 12 shows an actual luminance distribution when the LED driver 15 drives the LED 13 based on the LED data shown in FIG.

次に、図13に、図10に示す入力画像61が入力された場合に、液晶透過率算出部23が算出した液晶透過率を示す。図13は、横軸が図10における点Aから点Bに位置する絵素(画素)であり、縦軸が液晶透過率の値である。   Next, FIG. 13 shows the liquid crystal transmittance calculated by the liquid crystal transmittance calculator 23 when the input image 61 shown in FIG. 10 is input. In FIG. 13, the horizontal axis represents picture elements (pixels) located from point A to point B in FIG. 10, and the vertical axis represents the liquid crystal transmittance value.

そして、図14に、図11に示すLEDデータに基づいてLEDドライバ15がLED13を駆動し、図13に示す液晶透過率に基づいて液晶ドライバ14が液晶パネル12を駆動した場合の表示輝度分布を示す。   14 shows the display luminance distribution when the LED driver 15 drives the LED 13 based on the LED data shown in FIG. 11 and the liquid crystal driver 14 drives the liquid crystal panel 12 based on the liquid crystal transmittance shown in FIG. Show.

このように、本発明では、入力画像の輝度分布を近似した近似パターンであって、変化量が所定値以下の近似パターンに基づいて、LEDデータおよび液晶透過率を算出しているため、図21〜図26に示す従来のディミング方法と比較して、局所的な映像の破綻が生じることを防ぐことができる。なお、正確には、図14に示すように、表示輝度分布は、D点付近において、入力画像の輝度分布と比較してずれている。しかしながら、局所的な急激な変化ではなく緩やかな変化であるため、この差異は視覚的に認知されない。   As described above, in the present invention, the LED data and the liquid crystal transmittance are calculated based on the approximate pattern that approximates the luminance distribution of the input image and the change amount is equal to or less than the predetermined value. Compared with the conventional dimming method shown in FIG. 26, it is possible to prevent the local video from being broken. To be precise, as shown in FIG. 14, the display luminance distribution is deviated from the luminance distribution of the input image in the vicinity of the point D. However, this difference is not visually perceived because it is a gradual change, not a local sudden change.

また、入力画像に最も近似する何れかの近似パターンを選択することにより、表示品質の低下を抑制しながら、回路規模を縮小することができる。   Further, by selecting any one of the approximate patterns that most closely approximates the input image, it is possible to reduce the circuit scale while suppressing deterioration in display quality.

〔変形例1〕
本実施形態では、液晶パネル12の長辺側にのみLED13を配列しているがこれに限るものではない。例えば、図15に示すように、LED13を液晶パネル12の長辺側および短辺側に沿って配置してもよい。すなわち、液晶パネル12に対して2辺入光としてもよい。
[Modification 1]
In the present embodiment, the LEDs 13 are arranged only on the long side of the liquid crystal panel 12, but the present invention is not limited to this. For example, as shown in FIG. 15, the LEDs 13 may be arranged along the long side and the short side of the liquid crystal panel 12. That is, it is good also as 2 side incident light to the liquid crystal panel 12.

この場合、画像評価部21は、図16に示すように、2種類の評価エリア(水平成分評価エリア、垂直成分評価エリア)を設定する。具体的には、画像評価部21は、図16(a)に示すように、入力画像を長辺方向(水平方向)に対して垂直に5つの評価エリア(水平成分評価エリア)に分割する。それと共に、画像評価部21は、図16(b)に示すように、入力画像を短辺方向(垂直方向)に対して垂直に3つの評価エリア(垂直成分評価エリア)に分割する。   In this case, the image evaluation unit 21 sets two types of evaluation areas (horizontal component evaluation area and vertical component evaluation area) as shown in FIG. Specifically, the image evaluation unit 21 divides the input image into five evaluation areas (horizontal component evaluation areas) perpendicular to the long side direction (horizontal direction) as shown in FIG. At the same time, as shown in FIG. 16B, the image evaluation unit 21 divides the input image into three evaluation areas (vertical component evaluation areas) perpendicular to the short side direction (vertical direction).

そして、画像評価部21は、各水平成分評価エリアに対する評価値をそれぞれ特定し、水平成分の評価値列を生成する。それと共に、画像評価部21は、各垂直成分評価エリアに対する評価値をそれぞれ特定し、垂直成分の評価値列を生成する。また、画像評価部21は、全体評価値を特定する。   Then, the image evaluation unit 21 specifies an evaluation value for each horizontal component evaluation area, and generates a horizontal component evaluation value sequence. At the same time, the image evaluation unit 21 specifies an evaluation value for each vertical component evaluation area, and generates a vertical component evaluation value sequence. Further, the image evaluation unit 21 specifies an overall evaluation value.

次に、LEDデータ算出部22は、水平成分の評価値列に対応する水平成分の近似パターン(水平成分近似パターン)を特定し、水平成分の近似パターンから水平成分のLEDデータを算出する。それと共に、LEDデータ算出部22は、垂直成分の評価値列に対応する垂直成分の近似パターン(垂直成分近似パターン)を特定し、垂直成分の近似パターンから垂直成分のLEDデータを算出する。ここで、水平成分のLEDデータは長辺側のLED13のLEDデータであり、垂直成分のLEDデータは短辺側のLED13のLEDデータである。   Next, the LED data calculation unit 22 specifies a horizontal component approximate pattern (horizontal component approximate pattern) corresponding to the horizontal component evaluation value sequence, and calculates horizontal component LED data from the horizontal component approximate pattern. At the same time, the LED data calculation unit 22 specifies a vertical component approximate pattern (vertical component approximate pattern) corresponding to the vertical component evaluation value sequence, and calculates vertical component LED data from the vertical component approximate pattern. Here, the LED data of the horizontal component is LED data of the LED 13 on the long side, and the LED data of the vertical component is LED data of the LED 13 on the short side.

例えば、図17に示す入力画像が入力された場合、LEDデータ算出部22は、図18に示す水平成分の近似パターンおよび垂直成分の近似パターンを特定する。   For example, when the input image shown in FIG. 17 is input, the LED data calculation unit 22 specifies the approximate pattern of the horizontal component and the approximate pattern of the vertical component shown in FIG.

次に、液晶透過率算出部23は、入力画像、全体評価値、並びに、水平成分の近似パターンおよび垂直成分の近似パターンに基づいて、以下のように液晶透過率を算出する。   Next, the liquid crystal transmittance calculator 23 calculates the liquid crystal transmittance as follows based on the input image, the overall evaluation value, and the approximate pattern of the horizontal component and the approximate pattern of the vertical component.

LCD_rate_h(j) = Offset + Pat_Max - LCD_Pat_h_#j if(revers = '0')
= Offset + LED_Pat_h_#n if(revers = '1')
LCD_rate_v(i) = Offset + Pat_Max - LCD_Pat_v_#i if(revers = '0')
= Offset + LED_Pat_v_#n if(revers = '1')
LCD_rate_f(i,j) = (LCD_rate_h(j) + LCD_rate_v(i))/2
Assist(i,j,c) = (1 - Cin(i,j,c)) * LCD_rate_f(i,j) * K
Cout(i,j,c) = Cin(i,j,c) + (Cin(i,j,c) * Assist(i,j,c))
ここで、「LCD_Pat_h_#j」は、水平成分の近似パターンにおいてj列の画素に対応する出力値を示し、「LCD_Pat_v_#i」は、垂直成分の近似パターンにおいてi列の画素に対応する出力値を示す。各出力値は、水平成分の近似パターンとj列の各画素に対応する出力値を算出するための要素情報とが対応付けられたLCD水平成分要素情報、または、垂直成分の近似パターンとi列の各画素に対応する出力値を算出するための要素情報とが対応付けられたLCD垂直成分要素情報を参照して算出される。
LCD_rate_h (j) = Offset + Pat_Max-LCD_Pat_h_ # j if (revers = '0')
= Offset + LED_Pat_h_ # n if (revers = '1')
LCD_rate_v (i) = Offset + Pat_Max-LCD_Pat_v_ # i if (revers = '0')
= Offset + LED_Pat_v_ # n if (revers = '1')
LCD_rate_f (i, j) = (LCD_rate_h (j) + LCD_rate_v (i)) / 2
Assist (i, j, c) = (1-Cin (i, j, c)) * LCD_rate_f (i, j) * K
Cout (i, j, c) = Cin (i, j, c) + (Cin (i, j, c) * Assist (i, j, c))
Here, “LCD_Pat_h_ # j” indicates an output value corresponding to a pixel in column j in the horizontal component approximate pattern, and “LCD_Pat_v_ # i” indicates an output value corresponding to a pixel in column i in the approximate vertical component pattern. Indicates. Each output value is the LCD horizontal component element information in which the horizontal component approximate pattern and the element information for calculating the output value corresponding to each pixel in the j column are associated, or the vertical component approximate pattern and the i column. It is calculated with reference to LCD vertical component element information associated with element information for calculating an output value corresponding to each pixel.

また、「LCD_rate_f(i,j)」、「LCD_rate_h(j)」および「LCD_rate_v(i)」は、補正係数を導出するための中間値となるものである。   In addition, “LCD_rate_f (i, j)”, “LCD_rate_h (j)”, and “LCD_rate_v (i)” are intermediate values for deriving a correction coefficient.

また、「Cout(i,j,c)」が0〜1の値をとるようにするために、「Cin(i,j,c)」、「LCD_rate_f(i,j)」、「LCD_rate_h(j)」および「LCD_rate_v(i)」を規格化し、「K」は0〜1の任意の値とする。   In addition, in order to make “Cout (i, j, c)” take a value of 0 to 1, “Cin (i, j, c)”, “LCD_rate_f (i, j)”, “LCD_rate_h (j ) ”And“ LCD_rate_v (i) ”, and“ K ”is an arbitrary value between 0 and 1.

なお、上記「LCD_rate_f(i,j)」は、
LCD_rate_f(i,j) = LCD_rate_h(j) * LCD_rate_v(i)
として算出してもよい。
The above "LCD_rate_f (i, j)"
LCD_rate_f (i, j) = LCD_rate_h (j) * LCD_rate_v (i)
May be calculated as

〔変形例2〕
本実施形態では、液晶パネル12の長辺側にLED13を配列しているがこれに限るものではない。例えば、図19に示すように、LED13を液晶パネル12の背面にマトリクス状に配置してもよい。ここでは、27行48列のLED13を配置するものとする。
[Modification 2]
In the present embodiment, the LEDs 13 are arranged on the long side of the liquid crystal panel 12, but the present invention is not limited to this. For example, as shown in FIG. 19, the LEDs 13 may be arranged in a matrix on the back surface of the liquid crystal panel 12. Here, 27 rows and 48 columns of LEDs 13 are arranged.

この場合、画像評価部21は、上述の変形例1と同様に、2種類の評価エリア(水平成分評価エリア、垂直成分評価エリア)を設定し、水平成分の評価値列および垂直成分の評価値列を生成する。また、画像評価部21は、全体評価値を特定する。   In this case, the image evaluation unit 21 sets two types of evaluation areas (horizontal component evaluation area and vertical component evaluation area) in the same manner as the first modification described above, and sets the horizontal component evaluation value sequence and the vertical component evaluation value. Generate a column. Further, the image evaluation unit 21 specifies an overall evaluation value.

次に、LEDデータ算出部22は、水平成分の評価値列および垂直成分の評価値列にそれぞれ対応する水平成分の近似パターン(水平成分近似パターン)および垂直成分の近似パターン(垂直成分近似パターン)を特定する。そして、水平成分の近似パターンおよび垂直成分の近似パターンから水平成分のLEDデータおよび垂直成分のLEDデータをそれぞれ算出する。   Next, the LED data calculation unit 22 includes a horizontal component approximate pattern (horizontal component approximate pattern) and a vertical component approximate pattern (vertical component approximate pattern) respectively corresponding to the horizontal component evaluation value sequence and the vertical component evaluation value sequence. Is identified. Then, the horizontal component LED data and the vertical component LED data are respectively calculated from the horizontal component approximate pattern and the vertical component approximate pattern.

ここで、水平成分のLEDデータおよび垂直成分のLEDデータをそれぞれ「LED_data_h_#n」、「LED_data_v_#m」とすると、m行n列のLED13のLEDデータを、
LED_data_f(m,n) = (LED_data_h_#n + LED_data_v_#m)/2
もしくは、
LED_data_f(m,n) = LED_data_h_#n * LED_data_v_#m
として算出する。
Here, assuming that the LED data of the horizontal component and the LED data of the vertical component are “LED_data_h_ # n” and “LED_data_v_ # m”, respectively, the LED data of the LED 13 of m rows and n columns is
LED_data_f (m, n) = (LED_data_h_ # n + LED_data_v_ # m) / 2
Or
LED_data_f (m, n) = LED_data_h_ # n * LED_data_v_ # m
Calculate as

次に、液晶透過率算出部23は、入力画像、全体評価値、並びに、水平成分の近似パターンおよび垂直成分の近似パターンに基づいて、上記変形例1と同様に液晶透過率を算出する。   Next, the liquid crystal transmittance calculating unit 23 calculates the liquid crystal transmittance in the same manner as in the first modification based on the input image, the overall evaluation value, and the approximate pattern of the horizontal component and the approximate pattern of the vertical component.

〔変形例3〕
本実施形態では、パターン特定情報において、評価値列と近似パターンとを予め対応付けているが、評価エリア、レベル、近似パターン等の数が多くなると、LUTで両者を対応付けることが困難となる。例えば、評価エリアが9個で、レベルが0〜24とした場合などである。
[Modification 3]
In the present embodiment, in the pattern specifying information, the evaluation value sequence and the approximate pattern are associated in advance. However, when the number of evaluation areas, levels, approximate patterns, and the like increases, it becomes difficult to associate the two with the LUT. For example, there are nine evaluation areas and levels 0-24.

そこで、このような場合、評価値列と各近似パターンとの差分を算出し、最も差分の小さい近似パターンを選択するようにしてもよい。ただし、輝度不足が生じないように、評価値列の方が小さい値となる近似パターンを選択するようにする。   Therefore, in such a case, the difference between the evaluation value sequence and each approximate pattern may be calculated, and the approximate pattern with the smallest difference may be selected. However, an approximate pattern having a smaller value in the evaluation value sequence is selected so that insufficient luminance does not occur.

〔変形例4〕
本実施形態では、近似パターンは、各グループの始点、各グループの直線の傾きおよび最大出力値で定義されているが、これに限るものではない。例えば、近似パターンにおける各LED13の出力値を全て数値として規定してもよい。
[Modification 4]
In this embodiment, the approximate pattern is defined by the start point of each group, the slope of the straight line of each group, and the maximum output value, but is not limited to this. For example, all output values of the LEDs 13 in the approximate pattern may be defined as numerical values.

〔変形例5〕
本実施形態では、物理的な次元において、LEDデータにおける変化量を所定値以下としているが、さらに、時間的な次元において、LEDデータにおける変化量を所定値以下としてもよい。
[Modification 5]
In the present embodiment, the change amount in the LED data is set to a predetermined value or less in the physical dimension, but the change amount in the LED data may be set to a predetermined value or less in the temporal dimension.

具体的には、図20に示すように、動画を表示する場合、或る入力画像に対するLEDデータと、次の入力画像に対するLEDデータとの差分が所定値以下になるように、LEDデータを決定してもよい。例えば、或る入力画像に対するLEDデータ(LED_out)は、
LED_out = Pre_LED + (New_LED- Pre_LED) * T
として求めてもよい。ここで、「Pre_LED」は、上記或る入力画像の1つ前の入力画像に対するLEDデータである(1つ前の入力画像に対する「LED_out」である)。また、「New_LED」は、或る入力画像から生成した評価値列に対応する近似パターンから算出したLEDデータである。「T」は、補正係数であり、0〜1の任意の値とする。
Specifically, as shown in FIG. 20, when displaying a moving image, the LED data is determined so that the difference between the LED data for a certain input image and the LED data for the next input image is less than or equal to a predetermined value. May be. For example, LED data (LED_out) for an input image is
LED_out = Pre_LED + (New_LED- Pre_LED) * T
You may ask as. Here, “Pre_LED” is LED data for the input image immediately before the certain input image (“LED_out” for the previous input image). “New_LED” is LED data calculated from an approximate pattern corresponding to an evaluation value sequence generated from a certain input image. “T” is a correction coefficient, and is an arbitrary value between 0 and 1.

これにより、LED13の輝度は徐々に変化するため、シーンチェンジ等、急激な映像変化の際に、フリッカ等が発生することを防止することができる。   Thereby, since the luminance of the LED 13 changes gradually, it is possible to prevent the occurrence of flicker or the like during a sudden video change such as a scene change.

本実施形態では、物理的な次元において、液晶の補正係数を導出するための中間値における変化量を所定値以下としているが、さらに、時間的な次元において、液晶の補正係数を導出するための中間値における変化量を所定値以下としてもよい。   In the present embodiment, the amount of change in the intermediate value for deriving the liquid crystal correction coefficient in the physical dimension is set to a predetermined value or less. Further, in the temporal dimension, the liquid crystal correction coefficient for deriving the correction coefficient The amount of change in the intermediate value may be a predetermined value or less.

具体的には、上記LEDデータと同様に、動画を表示する場合、或る入力画像に対する液晶の補正係数を導出するための中間値と、次の入力画像に対する液晶の補正係数を導出するための中間値との差分が所定値以下になるように、中間値を決定してもよい。例えば、或る入力画像に対する液晶の補正係数を導出するための中間値(LCD_rate)は、
LCD_rate = Pre_LCD_rate + (New_LCD_rate - Pre_LCD_rate) * T
として求めてもよい。ここで、「Pre_LCD_rate」は、上記或る入力画像の1つ前の入力画像に対する液晶の補正係数を導出するための中間値(1つ前の入力画像に対する「LCD_rate」である)。また、「New_ LCD_rate」は、或る入力画像から生成した評価値列に対応する近似パターンから算出した液晶の補正係数を導出するための中間値である。「T」は、補正係数であり、0〜1の任意の値とする。
Specifically, as with the above LED data, when displaying a moving image, an intermediate value for deriving a liquid crystal correction coefficient for a certain input image and a liquid crystal correction coefficient for the next input image are derived. The intermediate value may be determined so that the difference from the intermediate value is equal to or less than a predetermined value. For example, the intermediate value (LCD_rate) for deriving the liquid crystal correction coefficient for a certain input image is:
LCD_rate = Pre_LCD_rate + (New_LCD_rate-Pre_LCD_rate) * T
You may ask as. Here, “Pre_LCD_rate” is an intermediate value (“LCD_rate” for the previous input image) for deriving a liquid crystal correction coefficient for the previous input image of the certain input image. “New_LCD_rate” is an intermediate value for deriving a liquid crystal correction coefficient calculated from an approximate pattern corresponding to an evaluation value sequence generated from a certain input image. “T” is a correction coefficient, and is an arbitrary value between 0 and 1.

これにより、液晶の補正係数を導出するための中間値の輝度は徐々に変化するため、シーンチェンジ等、急激な映像変化の際に、フリッカ等が発生することを防止することができる。   Thereby, since the brightness of the intermediate value for deriving the correction coefficient of the liquid crystal gradually changes, it is possible to prevent occurrence of flicker or the like when a sudden video change such as a scene change occurs.

〔変形例6〕
本実施形態では、表示装置として液晶パネルを搭載した液晶表示装置を例示しているが、これに限るものではない。表示装置は、バックライトを有し、表示パネルの光透過率を設定可能なものであればよく、例えば、カラーコルトンのような看板等であってもよい。
[Modification 6]
In the present embodiment, a liquid crystal display device mounted with a liquid crystal panel is exemplified as the display device, but the present invention is not limited to this. The display device only needs to have a backlight and can set the light transmittance of the display panel. For example, the display device may be a signboard such as a color corton.

〔補足〕
本発明は上述した実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能である。すなわち、請求項に示した範囲で適宜変更した技術的手段を組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
[Supplement]
The present invention is not limited to the above-described embodiments, and various modifications can be made within the scope shown in the claims. That is, embodiments obtained by combining technical means appropriately modified within the scope of the claims are also included in the technical scope of the present invention.

最後に、液晶表示装置1の各ブロック、特に制御部11は、ハードウェアロジックによって構成してもよいし、次のようにCPUを用いてソフトウェアによって実現してもよい。   Finally, each block of the liquid crystal display device 1, particularly the control unit 11, may be configured by hardware logic, or may be realized by software using a CPU as follows.

すなわち、液晶表示装置1は、各機能を実現する制御プログラムの命令を実行するCPU(central processing unit)、上記プログラムを格納したROM(read only memory)、上記プログラムを展開するRAM(random access memory)、上記プログラムおよび各種データを格納するメモリ等の記憶装置(記録媒体)などを備えている。そして、本発明の目的は、上述した機能を実現するソフトウェアである液晶表示装置1の制御プログラムのプログラムコード(実行形式プログラム、中間コードプログラム、ソースプログラム)をコンピュータで読み取り可能に記録した記録媒体を、上記液晶表示装置1に供給し、そのコンピュータ(またはCPUやMPU)が記録媒体に記録されているプログラムコードを読み出し実行することによっても、達成可能である。   That is, the liquid crystal display device 1 includes a CPU (central processing unit) that executes instructions of a control program that realizes each function, a ROM (read only memory) that stores the program, and a RAM (random access memory) that expands the program. And a storage device (recording medium) such as a memory for storing the program and various data. An object of the present invention is a recording medium in which a program code (execution format program, intermediate code program, source program) of a control program of the liquid crystal display device 1 which is software for realizing the above-described functions is recorded so as to be readable by a computer. This can also be achieved by supplying the liquid crystal display device 1 and reading and executing the program code recorded on the recording medium by the computer (or CPU or MPU).

上記記録媒体としては、例えば、磁気テープやカセットテープ等のテープ系、フロッピー(登録商標)ディスク/ハードディスク等の磁気ディスクやCD−ROM/MO/MD/DVD/CD−R等の光ディスクを含むディスク系、ICカード(メモリカードを含む)/光カード等のカード系、あるいはマスクROM/EPROM/EEPROM(登録商標)/フラッシュROM等の半導体メモリ系などを用いることができる。   Examples of the recording medium include a tape system such as a magnetic tape and a cassette tape, a magnetic disk such as a floppy (registered trademark) disk / hard disk, and an optical disk such as a CD-ROM / MO / MD / DVD / CD-R. Card system such as IC card, IC card (including memory card) / optical card, or semiconductor memory system such as mask ROM / EPROM / EEPROM (registered trademark) / flash ROM.

また、液晶表示装置1を通信ネットワークと接続可能に構成し、上記プログラムコードを通信ネットワークを介して供給してもよい。この通信ネットワークとしては、特に限定されず、例えば、インターネット、イントラネット、エキストラネット、LAN、ISDN、VAN、CATV通信網、仮想専用網(virtual private network)、電話回線網、移動体通信網、衛星通信網等が利用可能である。また、通信ネットワークを構成する伝送媒体としては、特に限定されず、例えば、IEEE1394、USB、電力線搬送、ケーブルTV回線、電話線、ADSL回線等の有線でも、IrDAやリモコンのような赤外線、Bluetooth(登録商標)、802.11無線、HDR、携帯電話網、衛星回線、地上波デジタル網等の無線でも利用可能である。なお、本発明は、上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。   The liquid crystal display device 1 may be configured to be connectable to a communication network, and the program code may be supplied via the communication network. The communication network is not particularly limited. For example, the Internet, intranet, extranet, LAN, ISDN, VAN, CATV communication network, virtual private network, telephone line network, mobile communication network, satellite communication. A net or the like is available. Further, the transmission medium constituting the communication network is not particularly limited. For example, even in the case of wired such as IEEE 1394, USB, power line carrier, cable TV line, telephone line, ADSL line, etc., infrared rays such as IrDA and remote control, Bluetooth ( (Registered trademark), 802.11 wireless, HDR, mobile phone network, satellite line, terrestrial digital network, and the like can also be used. The present invention can also be realized in the form of a computer data signal embedded in a carrier wave in which the program code is embodied by electronic transmission.

本発明は、入力画像に基づいてバックライトの輝度を制御する機能を有する画像表示装置に利用することができる。   The present invention can be used for an image display device having a function of controlling the luminance of a backlight based on an input image.

1 液晶表示装置(画像表示装置)
11 制御部
12 液晶パネル(表示パネル)
13 LED(光源)
14 液晶ドライバ(表示パネル駆動手段)
15 LEDドライバ(光源駆動手段)
21 画像評価部(画像評価手段)
22 LEDデータ算出部(パターン特定手段、光源データ算出手段)
23 液晶透過率算出部(光透過率算出手段)
1 Liquid crystal display device (image display device)
11 Control unit 12 Liquid crystal panel (display panel)
13 LED (light source)
14 Liquid crystal driver (display panel drive means)
15 LED driver (light source drive means)
21 Image evaluation unit (image evaluation means)
22 LED data calculation unit (pattern identification means, light source data calculation means)
23 Liquid crystal transmittance calculation unit (light transmittance calculation means)

Claims (12)

表示パネルの1辺または2辺に沿って複数の光源が配列された画像表示装置であって、
直線で構成され、変化量が所定値以下である近似パターンの中から、入力画像の光源配列方向成分の輝度分布を近似した近似パターンを特定するパターン特定手段と、
上記パターン特定手段が特定した近似パターンに基づいて、上記複数の光源の出力を制御するための光源データを算出する光源データ算出手段と、
上記入力画像および上記パターン特定手段が特定した近似パターンに基づいて、上記表示パネルの光透過率を制御するための光透過率を算出する光透過率算出手段と、
上記光源データ算出手段が算出した光源データに基づいて、上記複数の光源を駆動する光源駆動手段と、
上記光透過率算出手段が算出した光透過率に基づいて、上記表示パネルを駆動する表示パネル駆動手段とを備えることを特徴とする画像表示装置。
An image display device in which a plurality of light sources are arranged along one or two sides of a display panel,
Pattern specifying means for specifying an approximate pattern that approximates the luminance distribution of the light source array direction component of the input image from the approximate pattern that is configured by a straight line and the change amount is equal to or less than a predetermined value;
Light source data calculating means for calculating light source data for controlling the outputs of the plurality of light sources based on the approximate pattern specified by the pattern specifying means;
A light transmittance calculating means for calculating a light transmittance for controlling the light transmittance of the display panel based on the input image and the approximate pattern specified by the pattern specifying means;
Light source driving means for driving the plurality of light sources based on the light source data calculated by the light source data calculating means;
An image display device comprising: display panel driving means for driving the display panel based on the light transmittance calculated by the light transmittance calculating means.
上記入力画像を複数のエリアに分割し、各エリアの輝度の大きさを示す評価値をそれぞれ特定し、各エリアの評価値を順に並べた評価値列を生成する画像評価手段をさらに備え、
上記パターン特定手段は、上記評価値列と、上記評価値列と最も近似する上記近似パターンとの対応関係が予め定められたパターン特定情報を参照して、上記画像評価手段が生成した評価値列に対応する近似パターンを特定することを特徴とする請求項1に記載の画像表示装置。
Further comprising image evaluation means for dividing the input image into a plurality of areas, specifying an evaluation value indicating the magnitude of luminance of each area, and generating an evaluation value sequence in which the evaluation values of each area are arranged in order,
The pattern specifying means refers to the evaluation value string generated by the image evaluation means with reference to pattern specifying information in which a correspondence relationship between the evaluation value string and the approximate pattern closest to the evaluation value string is predetermined. The image display apparatus according to claim 1, wherein an approximate pattern corresponding to is specified.
上記画像評価手段は、上記エリアに含まれる画素値または絵素値の最大値を、当該エリアの評価値として特定することを特徴とする請求項2に記載の画像表示装置。   The image display device according to claim 2, wherein the image evaluation unit specifies a maximum value of a pixel value or a pixel value included in the area as an evaluation value of the area. 上記画像評価手段は、上記エリアに含まれる画素値または絵素値の平均値を、当該エリアの評価値として特定することを特徴とする請求項2に記載の画像表示装置。   The image display device according to claim 2, wherein the image evaluation unit specifies an average value of pixel values or picture element values included in the area as an evaluation value of the area. 上記画像評価手段は、上記エリアに含まれる画素値または絵素値のヒストグラムを取り、最も個数の多い画素値または絵素値を、当該エリアの評価値として特定することを特徴とする請求項2に記載の画像表示装置。   3. The image evaluation means takes a histogram of pixel values or pixel values included in the area, and specifies the largest number of pixel values or pixel values as an evaluation value of the area. The image display device described in 1. 上記光源データ算出手段は、上記パターン特定情報において、上記パターン特定手段が特定した近似パターンに反転フラグが付加されている場合、上記パターン特定手段が特定した近似パターンを反転したパターンに基づいて、上記光源データを算出することを特徴とする請求項2〜5の何れか1項に記載の画像表示装置。   In the pattern specifying information, the light source data calculating means, when an inversion flag is added to the approximate pattern specified by the pattern specifying means, based on a pattern obtained by inverting the approximate pattern specified by the pattern specifying means, 6. The image display device according to claim 2, wherein light source data is calculated. 上記画像評価手段は、さらに、上記入力画像全体の輝度の大きさを示す全体評価値を特定するものであり、
上記光源データ算出手段は、上記パターン特定手段が特定した近似パターンを上記全体評価値に基づいてオフセット補正して、上記光源データを算出することを特徴とする請求項2〜6の何れか1項に記載の画像表示装置。
The image evaluation means further specifies an overall evaluation value indicating a luminance level of the entire input image,
7. The light source data calculating means calculates the light source data by offset-correcting the approximate pattern specified by the pattern specifying means based on the overall evaluation value. The image display device described in 1.
上記光透過率算出手段は、下記の式に基づいて、光透過率を算出することを特徴とする請求項2〜7の何れか1項に記載の画像表示装置。
LCD_rate(i,j) = Offset + Pat_Max - LCD_Pat_#j if(revers = '0')
= Offset + LED_Pat_#n if(revers = '1')
Assist(i,j,c) = (1 - Cin(i,j,c)) * LCD_rate(i,j) * K
Cout(i,j,c) = Cin(i,j,c) + (Cin(i,j,c) * Assist(i,j,c))
Cin(i,j,c):入力画像のi行j列の画素の絵素値
Cout(i,j,c):i行j列の画素の絵素の光透過率
K:任意の値
Offset:入力画像全体の輝度の大きさを示す全体評価値
Pat_Max:近似パターンの最大値
LCD_Pat_#j:近似パターンにおけるj列の画素の出力値
revers:反転フラグ
The image display device according to claim 2, wherein the light transmittance calculating unit calculates the light transmittance based on the following expression.
LCD_rate (i, j) = Offset + Pat_Max-LCD_Pat_ # j if (revers = '0')
= Offset + LED_Pat_ # n if (revers = '1')
Assist (i, j, c) = (1-Cin (i, j, c)) * LCD_rate (i, j) * K
Cout (i, j, c) = Cin (i, j, c) + (Cin (i, j, c) * Assist (i, j, c))
Cin (i, j, c): Pixel value of pixel in i row and j column of the input image
Cout (i, j, c): Light transmittance of picture element of pixel in i row and j column
K: Any value
Offset: Overall evaluation value indicating the brightness of the entire input image
Pat_Max: Maximum value of approximate pattern
LCD_Pat_ # j: Output value of pixels in column j in the approximate pattern
revers: Reverse flag
表示パネルの背面に複数の光源がマトリクス状に配列された画像表示装置であって、
それぞれ直線で構成され、変化量が所定値以下である水平成分近似パターンおよび垂直成分近似パターンの中から、入力画像の水平成分の輝度分布を近似した水平成分近似パターンおよび入力画像の垂直成分の輝度分布を近似した垂直成分近似パターンをそれぞれ特定するパターン特定手段と、
上記パターン特定手段が特定した水平成分近似パターンおよび垂直成分近似パターンに基づいて、上記複数の光源の出力を制御するための光源データを算出する光源データ算出手段と、
上記入力画像、並びに、上記パターン特定手段が特定した水平成分近似パターンおよび垂直成分近似パターンに基づいて、上記表示パネルの光透過率を制御するための光透過率を算出する光透過率算出手段と、
上記光源データ算出手段が算出した光源データに基づいて、上記複数の光源を駆動する光源駆動手段と、
上記光透過率算出手段が算出した光透過率に基づいて、上記表示パネルを駆動する表示パネル駆動手段とを備えることを特徴とする画像表示装置。
An image display device in which a plurality of light sources are arranged in a matrix on the back surface of a display panel,
The horizontal component approximate pattern that approximates the luminance distribution of the horizontal component of the input image and the luminance of the vertical component of the input image from among the horizontal component approximate pattern and vertical component approximate pattern that are each composed of straight lines and whose variation is less than a predetermined value Pattern specifying means for specifying each vertical component approximate pattern approximating the distribution;
Light source data calculating means for calculating light source data for controlling the outputs of the plurality of light sources based on the horizontal component approximate pattern and the vertical component approximate pattern specified by the pattern specifying means;
Light transmittance calculating means for calculating light transmittance for controlling the light transmittance of the display panel based on the input image and the horizontal component approximate pattern and vertical component approximate pattern specified by the pattern specifying means; ,
Light source driving means for driving the plurality of light sources based on the light source data calculated by the light source data calculating means;
An image display device comprising: display panel driving means for driving the display panel based on the light transmittance calculated by the light transmittance calculating means.
表示パネルの1辺または2辺に沿って複数の光源が配列された画像表示装置の制御方法であって、
直線で構成され、変化量が所定値以下である近似パターンの中から、入力画像の光源配列方向成分の輝度分布を近似した近似パターンを特定するパターン特定ステップと、
上記パターン特定ステップにおいて特定された近似パターンに基づいて、上記複数の光源の出力を制御するための光源データを算出する光源データ算出ステップと、
上記入力画像および上記パターン特定ステップにおいて特定された近似パターンに基づいて、上記表示パネルの光透過率を制御するための光透過率を算出する光透過率算出ステップと、
上記光源データ算出ステップにおいて算出された光源データに基づいて、上記複数の光源を駆動する光源駆動ステップと、
上記光透過率算出ステップにおいて算出された光透過率に基づいて、上記表示パネルを駆動する表示パネル駆動ステップとを含むことを特徴とする画像表示装置の制御方法。
A control method for an image display device in which a plurality of light sources are arranged along one or two sides of a display panel,
A pattern specifying step for specifying an approximate pattern that approximates the luminance distribution of the light source array direction component of the input image from among the approximate patterns that are configured with straight lines and whose variation is equal to or less than a predetermined value;
A light source data calculating step for calculating light source data for controlling the outputs of the plurality of light sources based on the approximate pattern specified in the pattern specifying step;
A light transmittance calculating step for calculating a light transmittance for controlling the light transmittance of the display panel based on the input image and the approximate pattern specified in the pattern specifying step;
A light source driving step for driving the plurality of light sources based on the light source data calculated in the light source data calculating step;
A display panel driving step for driving the display panel based on the light transmittance calculated in the light transmittance calculating step.
請求項1〜9の何れか1項に記載の画像表示装置を動作させるための制御プログラムであって、コンピュータを上記各手段として機能させるための制御プログラム。   A control program for operating the image display apparatus according to any one of claims 1 to 9, wherein the control program causes a computer to function as each of the means. 請求項11に記載の制御プログラムを記録したコンピュータ読み取り可能な記録媒体。   The computer-readable recording medium which recorded the control program of Claim 11.
JP2012197790A 2012-09-07 2012-09-07 Image display device, control method for image display device, control program, and recording medium Expired - Fee Related JP6188298B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012197790A JP6188298B2 (en) 2012-09-07 2012-09-07 Image display device, control method for image display device, control program, and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012197790A JP6188298B2 (en) 2012-09-07 2012-09-07 Image display device, control method for image display device, control program, and recording medium

Publications (2)

Publication Number Publication Date
JP2014052549A true JP2014052549A (en) 2014-03-20
JP6188298B2 JP6188298B2 (en) 2017-08-30

Family

ID=50611068

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012197790A Expired - Fee Related JP6188298B2 (en) 2012-09-07 2012-09-07 Image display device, control method for image display device, control program, and recording medium

Country Status (1)

Country Link
JP (1) JP6188298B2 (en)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008001512A1 (en) * 2006-06-28 2008-01-03 Sharp Kabushiki Kaisha Image display device
JP2008009415A (en) * 2006-06-01 2008-01-17 Sony Corp Display apparatus and driving method therefor
JP2009192963A (en) * 2008-02-18 2009-08-27 Sharp Corp Image display device and image display method
WO2009125848A1 (en) * 2008-04-11 2009-10-15 ソニー株式会社 Display control device, method, and program
WO2009131058A1 (en) * 2008-04-22 2009-10-29 ソニー株式会社 Device and method for controlling display, and program
JP2010078982A (en) * 2008-09-26 2010-04-08 Toshiba Corp Image display apparatus and its method
JP2010139678A (en) * 2008-12-11 2010-06-24 Renesas Technology Corp Display drive
WO2011007438A1 (en) * 2009-07-16 2011-01-20 富士通株式会社 Display device and control method
WO2011030587A1 (en) * 2009-09-09 2011-03-17 シャープ株式会社 Display device
US20110148941A1 (en) * 2009-12-18 2011-06-23 Dong-Woo Kim Driving method for local dimming of liquid crystal display device and apparatus using the same
WO2012014754A1 (en) * 2010-07-28 2012-02-02 日立コンシューマエレクトロニクス株式会社 Image display device
JP2013205763A (en) * 2012-03-29 2013-10-07 Canon Inc Display device and control method therefor
WO2014038336A1 (en) * 2012-09-07 2014-03-13 シャープ株式会社 Image display device, control method for image display device, control program, and recording medium

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008009415A (en) * 2006-06-01 2008-01-17 Sony Corp Display apparatus and driving method therefor
WO2008001512A1 (en) * 2006-06-28 2008-01-03 Sharp Kabushiki Kaisha Image display device
JP2009192963A (en) * 2008-02-18 2009-08-27 Sharp Corp Image display device and image display method
WO2009125848A1 (en) * 2008-04-11 2009-10-15 ソニー株式会社 Display control device, method, and program
WO2009131058A1 (en) * 2008-04-22 2009-10-29 ソニー株式会社 Device and method for controlling display, and program
JP2009267475A (en) * 2008-04-22 2009-11-12 Sony Corp Display control device and method, and program
JP2010078982A (en) * 2008-09-26 2010-04-08 Toshiba Corp Image display apparatus and its method
JP2010139678A (en) * 2008-12-11 2010-06-24 Renesas Technology Corp Display drive
WO2011007438A1 (en) * 2009-07-16 2011-01-20 富士通株式会社 Display device and control method
WO2011030587A1 (en) * 2009-09-09 2011-03-17 シャープ株式会社 Display device
US20110148941A1 (en) * 2009-12-18 2011-06-23 Dong-Woo Kim Driving method for local dimming of liquid crystal display device and apparatus using the same
WO2012014754A1 (en) * 2010-07-28 2012-02-02 日立コンシューマエレクトロニクス株式会社 Image display device
JP2013205763A (en) * 2012-03-29 2013-10-07 Canon Inc Display device and control method therefor
WO2014038336A1 (en) * 2012-09-07 2014-03-13 シャープ株式会社 Image display device, control method for image display device, control program, and recording medium

Also Published As

Publication number Publication date
JP6188298B2 (en) 2017-08-30

Similar Documents

Publication Publication Date Title
US10229642B2 (en) Liquid crystal display device
JP5595516B2 (en) Method and system for backlight control using statistical attributes of image data blocks
WO2017143635A1 (en) Method and system for reducing power consumption of display panel
JP6309777B2 (en) Display device, display panel driver, and display panel driving method
KR101337076B1 (en) Liquid crystal display device and driving method having the same
KR101965207B1 (en) Display apparatus
JP2008203292A (en) Image display device and image display method
KR101990335B1 (en) Data clipping method and device, and display device using the same
JP2010066743A (en) Liquid crystal display device and method for driving the same
US11676549B2 (en) Method of controlling display of display device, apparatus thereof, and display apparatus
CN103325351A (en) Image processing apparatus and image processing method
JP2011039451A (en) Display device, luminance unevenness correction method, and device and method for generating correction data
WO2020238038A1 (en) Driving method and apparatus for light-emitting element
US20150206331A1 (en) Display device, display panel driver and driving method of display panel
JP6174032B2 (en) Image display device, control method for image display device, control program, and recording medium
US9311886B2 (en) Display device including signal processing unit that converts an input signal for an input HSV color space, electronic apparatus including the display device, and drive method for the display device
JP2010085947A (en) Backlight and display
WO2019148667A1 (en) Method and device employing backlight partitioning to display image having high dynamic contrast ratio
KR102227478B1 (en) Display controlling apparatus, display controlling method, and display apparatus
KR102520697B1 (en) Display device using subpixel rendering and image processing method thereof
CN108962155A (en) Luminance regulating method and display
JP6188298B2 (en) Image display device, control method for image display device, control program, and recording medium
KR20170135569A (en) Display device with 4-colors for high dynamic range (hdr)
JP5389966B2 (en) Display device and luminance unevenness correction method for display device
JP2011099961A (en) Display device, display method, display program, and computer-readable recording medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150701

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160425

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160524

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160725

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161220

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170220

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170725

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170801

R150 Certificate of patent or registration of utility model

Ref document number: 6188298

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees