CN101178876A - 图像显示控制装置 - Google Patents
图像显示控制装置 Download PDFInfo
- Publication number
- CN101178876A CN101178876A CNA2007101881603A CN200710188160A CN101178876A CN 101178876 A CN101178876 A CN 101178876A CN A2007101881603 A CNA2007101881603 A CN A2007101881603A CN 200710188160 A CN200710188160 A CN 200710188160A CN 101178876 A CN101178876 A CN 101178876A
- Authority
- CN
- China
- Prior art keywords
- image
- display control
- control apparatus
- image display
- brightness
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
- G09G3/36—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
- G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
- G09G3/3406—Control of illumination source
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
- H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
- H04B1/40—Circuits
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0626—Adjustment of display parameters for control of overall brightness
- G09G2320/0646—Modulation of illumination source brightness and image signal correlated to each other
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0626—Adjustment of display parameters for control of overall brightness
- G09G2320/0653—Controlling or limiting the speed of brightness adjustment of the illumination source
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0666—Adjustment of display parameters for control of colour parameters, e.g. colour temperature
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0673—Adjustment of display parameters for control of gamma adjustment, e.g. selecting another gamma curve
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/10—Special adaptations of display systems for operation with variable images
- G09G2320/103—Detection of image changes, e.g. determination of an index representative of the image change
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2330/00—Aspects of power supply; Aspects of display protection and defect management
- G09G2330/02—Details of power systems and of start or stop of display operation
- G09G2330/021—Power management, e.g. power saving
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2360/00—Aspects of the architecture of display systems
- G09G2360/16—Calculation or use of calculated indices related to luminance levels in display data
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Chemical & Material Sciences (AREA)
- Crystallography & Structural Chemistry (AREA)
- Liquid Crystal Display Device Control (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
本发明提供了一种图像显示控制装置,其可以实现基于统计值的、实时的动态图像的图像校正,并即使在同时进行用于实现省电的照明的自适应减光和用于防止随该减光而引起的画质劣化的自适应图像校正的情况下,实现实时性、抑制电路规模及低功耗性。其中,统计信息取得部(212)在1帧中设定有效评价像素区域Z1。统计信息取得部(212)取得关于有效评价像素区域Z1的统计值后,结束统计值取得处理,在1帧的剩余的期间(时刻t8~t9)内,结束使用该统计值的校正系数等的运算处理,并开始下一个帧的输入(时刻t10),然后实施使用计算出的校正系数的图像校正。在计算出校正系数的同时,还可以同时计算出减光处理后的背光亮度。
Description
技术领域
本发明涉及图像显示控制装置等。
背景技术
在专利文献1中记载了一种为了校正显示图像的亮度信号而使用一览表(LUT)的图像校正装置。
此外,在专利文献2中公开了一种技术:为了实现省电化而降低背光的发光光量,另一方面,调整图像数据,以便可以尽量地提高液晶显示画面的穿透率。
专利文献1:日本特开2004-310671号公报
专利文献2:日本特开平11-65531号公报
虽然为了图像校正而使用一览表(LUT)可以简化运算处理,但是存储器存取却耗费时间,因此,在要求快速性的情况下,需要使用快速的硬件来实时地进行图像校正。
但是,当进行自适应的图像校正时,由于为以下步骤:取得上一帧的统计值,使用取得的统计值对校正系数等进行运算,并使用该校正系数等来校正下一帧的图像,因此,从1帧的图像输入结束到计算出校正系数为止,需要等待下一帧的图像的校正处理。即,校正系数的运算所需要的时间导致动态图像的图像校正发生延迟。所以,无法实现严格意义上的实时处理。
此外,不只是单纯的图像校正,在同时进行用于实现省电的背光的自适应减光和用于防止随该减光而引起的画质劣化的自适应图像校正时,由于处理内容复杂导致运算量增加,进一步难以进行实时处理。
此外,若在同时进行用于实现省电的背光的自适应减光和用于防止随该减光的画质劣化的自适应图像校正的情况下,快速进行庞大的运算,则需要使同种的硬件并列地进行动作,从而导致电路占有面积和功耗增大。这些问题成为可以高画质地再生显示单波段广播这样的串流图像的便携式终端的小型化、低功耗化(电池的长寿命化)的障碍。
发明内容
本发明鉴于上述问题而提出,目的在于提供一种图像显示控制装置。根据本发明,可以实现基于统计值的、实时的动态图像的图像校正。此外,例如,即使是在同时进行用于实现省电的照明的自适应减光和用于防止随该减光而引起的画质劣化的自适应图像校正的情况下,也可以实现动态图像的实时处理、抑制电路规模及电路的低功耗化。
本发明的图像显示控制装置是用于对动态图像的图像信号进行校正的图像显示控制装置,其包括:统计信息取得部,对应各帧取得上述图像信号的统计信息;运算器,使用上一帧的上述统计信息,生成用于图像信号校正的校正系数;以及图像校正部,使用上述校正系数来校正上述图像信号,在上述图像显示控制装置中,在上述各帧的一部分上设定有有效评价像素区域,上述统计信息取得部取得关于与上述有效评价像素区域相对应的上述图像信号的上述统计信息,在上述统计信息的取得结束时,不等上述各帧结束即结束上述统计信息的取得处理,并将所取得的上述统计信息提供给上述运算器,上述运算器在到上述各帧结束为止的期间内,基于上述统计信息来计算出上述校正系数,上述图像校正部使用计算出的上述校正系数,进行上述动态图像的、上述上一帧的下一个帧的图像信号的校正。
当取得1帧的图像的统计信息时,即使将该帧的一部分图像(例如,周边部分的图像)从统计信息的取得对象中排除,也不会对获得的统计值的精度造成大的影响。因此,在统计信息取得部中,不等取得1帧的全体图像的统计值即结束统计值取得处理,在到一帧结束为止的剩余的时间内,进行基于取得的统计值的校正系数的计算。此外,使用计算出的所述校正系数来进行下一帧的图像信号的校正。因此,即使依次输入动态图像的各帧的图像信号,也可以无需等待地进行基于统计值的恰当的图像校正,从而实现图像校正的实时处理。
此外,根据本发明的图像校正控制装置的另一方面,上述统计信息取得部在不进行上述各帧的最后一行的统计值的取得就结束上述统计值的取得处理,上述运算器(218)在相当于上述各帧的最后一行的时间内结束上述校正系数的计算。
由于优选对尽可能多的图像取得统计值,所以仅将最后一行从统计值的取得对象中排除。此外,如果在校正系数的运算形式上想办法,完全可能在相当于最后一行的时间内计算出校正系数。根据本发明,为了取得尽可能多地取得统计值,统计值的精度几乎没有降低,因此,可以实现实时的且高精度的图像校正。
并且,根据本发明的图像显示控制装置的其他方面,上述运算器使用上述上一帧的统计信息,并对进行调光控制时的减光后的照明亮度进行运算,同时,生成用于上述图像信号的校正的上述校正系数,其中,上述调光控制是对应上述图像信号而自适应地对图像显示用的照明进行减光的控制,并且,上述图像信号的校正用于补偿随上述照明的减光而引起的画质下降。
在本发明中,将上述本发明的技术适用于同时进行用于实现省电的背光的自适应减光和用于防止随该减光而引起的画质劣化的自适应图像校正时的图像显示控制。虽然由于需要同时进行减光后的照明亮度的运算和图像的校正系数的运算而增加运算量,但是如果在运算形式上想办法,还是可以实现快速的运算。因此,即使在这种情况下,也可无需等待地进行基于统计值的恰当的图像校正,并实现图像校正的实时处理。
此外,根据本发明的图像显示控制装置的其他方面,上述图像显示控制装置还包括:代码存储部,存储用于指定上述运算器的动作步骤的多个代码;顺序指示部,控制来自上述代码存储部的上述代码的输出顺序;以及解码器,对从上述代码存储部输出的上述代码进行解码,并生成用于提供给上述运算器的指令和数据中的至少一个。
在本发明中,通过基于共通的运算器(共用运算器)的实时运算来实现照明的自适应减光处理和图像校正处理。通过该运算,实时地算出图像校正用校正系数和减光后的照明亮度,并进行使用计算出的校正系数的图像校正。通过对信号处理步骤进行编码化后的微码来控制共用运算器的运算。通过使用共用化的运算器,从而无需并列设置同种的硬件即可实现实时运算,可以通过最小的电路、最小的功耗,实现快速的调光控制及图像校正。因此,例如,即使在同时进行用于实现省电的照明的自适应减光和用于防止随该减光而引起的画质劣化的自适应图像校正的情况下,也可以实现实时性、抑制电路规模及低功耗性。
此外,根据本发明的图像显示控制装置的其他方面,上述运算器包括第一多路转换器及第二多路转换器、算术逻辑运算单元、以及分配上述算术逻辑运算单元的运算结果的分配器,从上述解码器,分别向上述第一多路转换器及第二多路转换器提供系数,向上述算术逻辑运算单元提供运算命令,向上述分配器提供分配信息。
在本发明中,明确了以下技术内容:明确了共用运算器的具体结构的一例,并且,明确了向各个构成要素提供怎样的指令或数据。即,在本实施例中,通过多个多路转换器、算术逻辑运算单元(ALU)、以及分配器来构成共用运算器。向多路转换器提供用于运算的系数,向ALU提供指令(操作码),并向分配器提供分配目的地信息。
此外,根据本发明的图像显示控制装置的其他方面,上述运算器还包括:多个输出目的地寄存器;以及反馈路径,将上述多个输出目的地寄存器所存储的信号的至少一部分反馈给输入侧。
在本发明中,明确了运算器具有用于将运算结果反馈给输入侧的反馈路径的这个技术内容。由此,可以实现以下处理:例如,首先,通过第一运算处理求得减光后的照明亮度,并将该运算结果反馈给输入侧,根据该求得的照明亮度来求得图像的校正系数。此外,因为运算器具有反馈路径,所以可以进行用于防止随场景转换而引起的闪烁(视觉上的闪烁)的递归(IIR)的滤波处理。
此外,根据本发明的图像显示控制装置的其他方面,上述代码存储部所存储的上述代码是对基于程序设计语言的算法的记述进行转换而获得的微码,该程序设计语言用于对应显示图像对上述图像显示用的照明进行自适应减光并对图像信号进行校正以补偿随上述照明的减光而引起的画质下降。
例如,通过将由高级程序设计语言制成的算法一并进行转换,并生成微码,写入ROM(读出专用存储器),从而可以有效地制成代码表。通过变更算法(微码),可以比较容易地变更共用运算器的运算内容。因此,可以灵活地对应设计变更。
此外,本发明的光电装置的驱动装置安装有图像显示控制装置。
本发明的图像显示控制装置(图像显示控制LSI)被安装在光电装置(包括液晶显示装置)的驱动装置(驱动器)中。本发明的图像显示控制装置(图像显示控制LSI)具有以下特性:可处理串流图像这样的动态图像的实时性、卓越的省电性以及可以实现小型化。因此,提高了驱动装置(驱动器)的附加价值。
此外,本发明的光电装置的控制装置安装有本发明图像显示控制装置。
本发明的图像显示控制装置(图像显示控制LSI)被安装在光电装置(包括液晶显示装置)的控制装置(控制器)中。本发明的图像显示控制装置(图像显示控制LSI)具有以下特性:可处理串流图像这样的动态图像的实时性、卓越的省电性以及可以实现小型化。因此,提高了控制装置(控制器)的附加价值。
此外,本发明的光电装置的驱动控制装置安装有本发明图像显示控制装置。
本发明的图像显示控制装置(图像显示控制LSI)被安装在光电装置(包括液晶显示装置)的驱动控制装置(将驱动器和控制器一体化的装置)中。本发明的图像显示控制装置(图像显示控制LSI)具有以下特性:可处理串流图像这样的动态图像的实时性、卓越的省电性以及可以实现小型化。因此,提高了驱动控制装置(将驱动器和控制器一体化的装置)的附加价值。
此外,本发明的电子设备安装有本发明的图像显示控制装置。
例如,通过将本发明的图像显示控制装置(LSI)安装于便携式终端(包括便携式电话终端、PDA终端、可便携式计算机),从而可以以高画质来显示单波段广播等的串流图像,且可以延长电池的寿命。
根据本发明的实施例,例如,可以获得以下效果:
(1)无需等待取得1帧的全体图像的统计值即结束统计值取得处理,在到1帧结束为止的剩余时间内,实施基于所取得的统计值的校正系数等的计算,从而即使依次输入动态图像的各帧的图像信号,也可以在没有等待时间的情况下,进行基于统计值的恰当的图像校正,实现图像校正得的实时处理。而且,因为不需要特别的电路,所以不会难以实施。
(2)此外,通过仅将最后一行从统计值的取得对象中排除,在相对于该一行的时间内完成校正系数等的计算,从而可以实现实时且高精度的图像校正。
(3)通过将本发明的技术适用于同时进行自适应减光和自适应图像校正时的图像显示控制,可以实时地实现基于统计值的高度运算,其中,该自适应减光是用于实现省电化的背光的自适应减光,该自适应图像校正是用于防止随该减光而引起的画质劣化的自适应图像校正。
(4)通过使用微程序控制方式的运算器,无需并列设置同种的硬件即可实现实时运算,可以以最小的电路、最小的功耗,实现快速的自适应调光控制和自适应图像校正。
(5)此外,通过在运算器中设置反馈路径,可以实现确定为以下的顺序的处理:求出减光后的照明亮度,然后基于该求得的照明亮度来求出图像的校正系数。而且,由于运算器具有反馈路经,所以可以进行用于防止随场景转换而引起的闪烁(视觉上的闪烁)的递归型(IIR)滤波处理。
(6)通过同时进行自适应减光处理以及图像校正,可以将画质的降低抑制在最小限度,同时,可以通过照明亮度的自适应调光而大幅度地减少功耗(确认最大30%的削减)。此外,因为可以以最小限度的硬件来实现,从而还可以实现节省空间。而且,即使在串流映像这样的动态图像的处理中,也可以完全不产生延迟时间地实现实时的高精度的处理。
(7)根据本发明,可以实现液晶显示装置等的驱动装置(驱动器)、控制装置(控制器)、驱动控制装置(将驱动器和控制器一体化的装置)的高附加价值。
(8)通过将本发明的图像显示控制装置(LSI)安装于便携式终端(包括便携式电话终端、PDA终端、可便携式计算机),从而可以高画质地显示单波段广播等的串流图像,并且可以延长电池的寿命。
(9)根据本发明,即使在实现基于统计值的实时的动态图像的图像校正,并且,还同时进行用于实现省电化的照明的自适应减光以及用于防止随该减光而引起的画质劣化的自适应图像校正的情况下,也可以实现实时性、抑制电路规模以及低功耗性。
(10)根据本发明,可以同时实现快速性(实时性)、低功耗性、达成抑制电路规模的增大,同时,可以实现照明的自适应减光、用于补偿随该减光而引起的画质下降的现有技术中没有的高精度的图像校正。
附图说明
图1(A)~图1(C)是用于对本发明的图像显示控制装置(图像显示控制LSI)中所采用的、与显示图像相对应的自适应的调光控制以及图像校正的内容进行说明的图;
图2是表示背光(back light)削减率、无调光时的图像校正量(Gy)、有调光时的图像校正量(Gy’)、以及随调光的图像校正量的强化部分(ΔGy)相对于1帧图像的平均亮度(Yave)的变化的特性图;
图3是表示随调光的图像校正量的强化部分(ΔGy=Gy’-Gy)的特性线对应背光的亮度削减率如何变化的示意图;
图4(A)~图4(C)分别是用于说明色度校正的图;
图5(A)~图5(D)是用于说明本发明的图像显示控制装置的概要以及滤波处理的内容的图;
图6(A)~图6(D)分别是用于对本发明的图像显示装置的安装形态进行说明的框图;
图7是表示本发明图像显示控制装置(图像显示控制LSI)的整体结构的概要的框图;
图8是主计算机提供给图像显示控制装置的控制信号的内容的示意图;
图9是表示如图7所示的图像显示控制装置的具体结构的框图,对图像校正芯200的结构作进一步的具体描述;
图10是说明代码表的制作步骤的示意图;
图11是表示如图9所示的直方图(histogram)制作部(统计信息取得部)的内部的具体结构的电路图;
图12是将直方图制作部(统计信息取得部)的周围的主要结构进行抽出并表示的框图;
图13是用于可进行基于统计值的实时的图像校正的、直方图制作部(统计信息取得部)中的定时(timing)控制的一例的示意图;
图14是表示以下处理的具体处理步骤的流程图:在1帧期间的中途,结束统计值取得处理,并到1帧期间结束为止,计算出校正系数和调光系数,根据计算出的校正系数来校正下一帧的图像;以及
图15是表示为了进一步降低功耗,在不需要统计值取得动作时,停止直方图制作部(统计信息取得部)中的统计值的计数动作的结构的框图。
具体实施方式
本发明可广泛被适用于基于统计值的动态图像的校正。并且,本发明在以下方面为一项重要的技术:在同时进行用于实现省电的照明的自适应减光、以及对由该减光而引起的画质劣化进行补充的图像校正的情况下,确保该实时性。因此,在对本发明的实施例进行说明之前,先使用图1~图6对与显示图像相对应的自适应调光控制以及图像校正的内容进行说明。
(调光控制与图像校正之间的关系)
图1(A)~图1(C)是用于对在本发明的图像显示控制装置(图像显示控制LSI)中所采用的、与显示图像相对应的自适应调光控制以及图像校正的内容进行说明的图。
如图1(A)所示,在本发明的实施例中,同时进行液晶面板(LCD)10的自适应图像校正、以及照明(LED:以下称为背光)12的亮度的自适应校正(自适应调光)。在图1(A)中,Gy’是有调光时的被强化后的图像校正量。该Gy’是通过将无调光时的图像校正量Gy加上随调光的图像校正量的强化部分ΔGy而获得的。此外,Gs是随自适应调光的背光12的亮度的校正量。
图1(B)示出无调光时的图像校正量Gy。即,Gy是将背光12的亮度进行固定时的图像校正量。例如,对亮度低的部分进行提高亮度这样的校正,对亮度高的部分进行降低亮度这样的校正。
图1(C)示出随调光的图像校正量的强化部分ΔGy。由于发暗的图像与明亮的图像相比,较难受到背光12减光的影响,因此原则上当为发暗图像时,背光12的减光量增大。但是,因为随着减光,显示图像的亮度会降低,所以需要强化图像校正,以便对亮度降低进行补偿。随调光(Gs)的图像校正的强化部分为ΔGy。
在本发明中,如图1(A)所示,为了实现省电而积极地进行背光12的减光,另一方面,为了对随该减光而引起的画质下降进行补偿,通过在通常的图像校正量(Gy)上加上随调光(Gs)的图像校正量的强化部分(ΔGy),从而确定最终的图像校正量Gy。
(关于图像校正量的自适应调光)
图2是表示背光削减率、无调光时的图像校正量(Gy)、有调光时的图像校正量(Gy’)、随调光的图像校正量的强化部分(ΔGy)相对于1帧图像的平均亮度(Yave)变化的特性图。
在图2中,特性线A表示背光亮度削减率(%)的特性,特性线B表示无调光时的图像校正量(Gy)的特性,特性线C表示有调光时图像校正量(Gy’)的特性,特性线D表示随调光的图像校正量的强化部分(ΔGy)的特性。
首先,着眼于表示背光亮度削减率变化的特性线A。很明显,平均亮度(Yave)越低,背光亮度削减率越高,随着平均亮度(Yave)的变高,背光亮度削减率降低。这是因为越是平均亮度高的图像,背光减光的影响越大,所以其结果:对于平均亮度低的图像优先实现省电而大幅度地减光,而对于平均亮度高的图像则优先实现抑制画质降低而小幅度地减光。
然后,着眼于表示无调光时的图像校正量Gy变化的特性线B。如图2所示,到平均亮度值Gammath1为止,实施几乎定量的亮度提高的校正,若平均亮度值增大,则亮度的提高量减少,当平均亮度值大于平均亮度值Gammath2时,进行降低亮度的校正。即,基本上是当平均亮度低时进行提高亮度这样的校正,并当平均亮度过高时进行降低亮度这样的校正。
接下来,着眼于表示有调光时的图像校正量Gy’变化的特性线C。很明显,平均亮度越低,图像校正量越大,而平均亮度越高,图像校正量越小。这是因为:以特性线B为基础来决定图像校正量,并在此基础上,为了防止设定有大减光率的低亮度侧的画质降低,而越是低亮度侧越需要对图像校正量进行强化。
下面,着眼于表示随调光的图像校正量的强化部分(ΔGy=Gy’-Gy)变化的特性线D。如上所述,随调光的图像校正量的强化部分ΔGy在低亮度侧增大,并随亮度值的增大而逐渐降低。但是,图像校正量的强化部分从平均亮度值Gammath3附近开始缓缓地上升。这是因为:随着背光12的减光,越是高亮度的图像越担心其画质下降,所以为了抑制平均亮度高的图像的亮度下降,需要进一步强化图像校正。
(省电性的强弱和ΔGy的关系)
图3是随调光的图像校正量的强化部分(ΔGy=Gy’-Gy)的特性线对应背光的亮度削减率如何变化的示意图。在图3中,特性线A表示高省电(背光亮度削减率30%)时的特性线,特性线B表示低省电(背光亮度削减率10%)时的特性线,特性线C表示普通省电(背光亮度削减率20%)时的特性线。
如上所述,任一条特性线都示出以下这种倾向:随调光的图像校正量的强化部分ΔGy在低亮度侧增大,并随亮度值的增大而逐渐降低,但是,也示出了在亮度值高的区域ΔGy又逐渐上升的倾向。此外,越是强化省电性并增大背光的亮度削减率,随调光的图像校正量的强化部分ΔGy越随之增大。
(色度的校正强化)
由于背光的减光,画面整体的色度下降。因此,进行色度校正以保存调光前后的色度。基本上,按照下面的算式(1)来进行色度的校正。此外,虽然在下面的算式中,仅示出了蓝色度(Cb=Y-B),但是红色度(Cr=Y-R)也是相同的。
Cb[cb]=Fc×Gc+Cb......(1)
在上面的算式(1)中,cb是色度校正输入色差,Cb是色度校正输出色差,Gc是色度校正量,Fc是色度校正系数曲线。
图4(A)~图4(C)是用于说明色度校正的图。图4(A)是输出色差(Cb或Cr)相对于输入色差(cb或cr)的示意图。在图4(A)中,实线所示的特性线和虚线所示的直线之间的差分相当于上面算式(1)中的色度校正量Gc。图4(B)是校正系数(Fc)相对于输入色度(cb或cr)的特性的示意图。其中,由于在上面的算式(1)中,示出了未考虑调光时的色度校正,但是实际上还需要将色度校正量Gc加上随调光的色度校正的强化部分ΔGc。ΔGc可以在调光前后,平均色度相等的条件下通过解方程式而求得。
此外,如果仅以亮度为基础来确定减光量,则会存在减光过度,红(R)和蓝(B)的鲜明度受损的情况。即,以由于发暗图像受到减光的影响小,因此照明的减光量大为原则。但是,即使对于发暗图像,例如在画面中心有鲜艳的大蔷薇花时,为了抑制该蔷薇花的色度下降,从而对减光量进行限制是妥当的。但是,因为红(R)和蓝(B)对亮度(Y)的贡献率低,所以根据仅凭借亮度(Y)进行判断其为发暗图像这样的判断,会使照明过度降低。因此,为了防止这样的过度减光,不仅依据亮度(Y),还要将色度(红色度(Cr)、蓝色度(Cb))也作为基准来确定减光,并当亮度和色度满足规定的关系时,优先色度地对减光量进行限制。据此,在色度高的图像中,可抑制减光,并可抑制显示图像的色度降低。
图4(C)是用于说明以下处理的图,该处理为:使用通过平均亮度和平均色度之间的关系而决定的阈值,确定优先保存减光和色度中的哪一个。如图4(C)所示,设定通过亮度的平均值和色差(=色度)的平均值的关系而决定的阈值,将该阈值作为界限,判断是根据亮度进行减光还是根据色度进行减光。
在图4(C)中,斜线所示的区域ZP2是基于色度(cr,cb)的调光区域,ZP1是基于亮度(Y)的调光区域。例如,当平均亮度值为“64”时,由于图像发暗,因此如果仅凭借亮度进行判断,则减光量就会大大增加。但是,当平均色度为例如“96”时,由于为色度高的图像,因此需要抑制由于减光而引起的色度下降。因此,在这种情况下,以色度为基准来确定减光量(与以亮度为基准时相比,减小减光量)。即,对以亮度为基准的减光量设置基于色度的规定限制,由此,抑制极端降低色度这样的过度减光。
(用于防止随场景转换(scene change)而引起的闪烁的滤波处理)
当以动态图像的各帧进行照明亮度的自适应调光和图像校正时,由于随场景转换的照明亮度和图像校正量的急剧变化,会产生视觉的闪烁(flicker)。因此,以帧为单位对所要求的照明校正和图像校正的双方进行与各个特性相适应的滤波处理。因为对于照明亮度的变化是白和黑的变化而言,由于在视觉上容易识别,所以进行时间常数长的滤波处理,另一方面,因为对于图像校正量的变化是中间色调的变化,难以引起注意,所以重视对动态图像的场景转换的适应性,并进行时间常数短的滤波处理。据此,可以实现随动态图像的场景转换的图像校正,同时,可以有效地抑制随照明的自适应校正的闪烁。
此外,如果独立进行各个滤波处理,则会有破坏照明校正和图像校正之间的平衡且降低画质的情况。因此,以帧为单位对所要求的照明亮度进行第一滤波处理,并根据该结果求得图像校正量,对该图像校正量进行第二滤波处理(采用进行串联处理的结构)。由于在计算出照明亮度的减光量之后,计算与该减光量相适应的图像校正量,所以通常可以确保第一及第二滤波处理的平衡。
图5(A)~图5(D)是用于说明本发明的图像显示控制装置的概要及滤波处理的内容的图。即,图5(A)是表示图像显示控制装置的整体结构的框图,图5(B)是进一步具体示出图5(A)所示结构的框图,图5(C)是表示调光控制时进行的滤波处理的时间常数的图,图5(D)是表示图像校正时进行的滤波处理的时间常数的图。
如图5(A)所示,输入亮度(Y)、蓝色度(Cb)、红色度(Cr)的平均值中的最大值(将其记为Wave),对该输入信号进行线性处理(C),计算背光亮度(K),通过时间常数长的时间轴滤波器22对该背光亮度(K)进行滤波,从而获得最终的背光亮度(表示减光后的背光亮度的调光系数)Kflt。通过滤波系数P对时间轴滤波器22的特性进行控制。滤波系数P的值和图像的平均亮度的变化率(ΔYave)之间的关系如图5(C)所示。
根据最终背光亮度(Kflt),由图像校正量计算部24计算亮度校正以及色度校正的校正量Gym。由将时间常数较短地设定的时间轴滤波器26对图像校正量Gym进行滤波处理,由此,求得最终的图像校正量(Gy’)。通过滤波系数q对时间轴滤波器26的特性进行控制。滤波系数q的值和图像的平均亮度的变化率(ΔYave)之间的关系如图5(D)所示。
如图5(B)所示,背光用的时间轴滤波器22是递归型(IIR)滤波器,图像校正量用的时间轴滤波器26同样也是递归型(IIR)滤波器。背光用的时间轴滤波器22的传递函数是Hb1[z],图像校正量用的时间轴滤波器26的传递函数是Himg[Z]。因此,图像显示控制装置中的滤波处理的传递函数通过Hb1[z]/Himg[Z]加以表示。此外,图像校正用计算部24通过非线性的传递函数来实现。此外,在图5(B)中,参考符号28、30表示延时元件。
下面,参照附图对本发明的实施例进行说明。
(第一实施例)
下面,以具有同时进行调光控制和图像校正的功能的图像显示控制装置为例进行说明。但是,如上所述,本发明并不仅限定于此,可以被广泛的适用于根据统计值来进行动态图像得图像校正的情况。
(图像显示控制装置的安装形态)
图6(A)~图6(D)分别是用于说明本发明的图像显示装置的安装形态的框图。
在图6(A)中,便携式电话终端(电子设备的一例)100中安装有图像显示控制装置(图像显示控制LSI)。该便携式电话终端100包括天线AN、通信/图像处理部102、CCD照相机104、主计算机106、图像显示控制装置(图像显示控制LSI)108、驱动器110(包括面板驱动器112和背光驱动器114)、显示面板(例如,液晶面板(LCD))116、背光(LED)118。
在图6(B)中,在驱动装置(驱动器)110自身中安装有图像显示控制装置(图像显示控制LSI)108,从主计算机106向该图像显示控制装置(图像显示控制LSI)108输入图像信号和控制信息。
在图6(C)中,在驱动器110的控制装置(控制器)130中安装有图像显示控制装置(图像显示控制LSI)108。在图6(D)中,在驱动控制装置(将驱动器和控制器一体化的装置)140中安装有图像显示控制装置(图像显示控制LSI)108。
本发明的图像显示控制装置(图像显示控制LSI)108具备可以处理串流(streaming)图像这样的动态图像的实时性、和卓越的省电性以及可以实现小型化等特性。因此,通过安装本发明的图像显示控制装置(图像显示控制LSI),驱动装置(驱动器)110、控制装置(控制器)130、驱动控制装置(将驱动器和控制器一体化的装置)以及电子设备100的附加价值提高。
(图像显示控制装置的整体结构)
图7是表示本发明图像显示控制装置(图像显示控制LSI)的整体结构的概要的框图。
在此,图像显示控制装置108被安装在便携式终端(包括便携式电话终端、PDA终端、可便携的计算机终端)中。便携式终端包括例如,接收单波段广播(one segment broadcasting)的天线AN、通信/图像处理部102、主计算机106。主计算机106例如将接收到的串流映像信号提供给图像显示控制装置108。此外,虽然也可以将通过CCD照相机拍摄的图像信号提供给图像显示控制装置108(参照图6(A)),但是在图7中省略了CCD照相机。
如图7所示,图像显示控制装置108包括:图像输入接口(I/F)150,接收从主计算机106赋予的图像信号(RGB(颜色信号形式)或YUV(亮度信号和色差信号的形式)),当该图像信号为RGB时转换为YUV的图像信号;寄存器152,临时存储从主计算机106赋予的控制信息;图像校正芯(core)200,确定调光后的背光亮度(调光系数Kflt),同时,对图像信号进行图像校正处理以补偿随减光而引起的画质下降;以及图像输出接口(I/F)154,将YUV形式的图像信号转换成RGB形式图像信号并输出、或以YUV形式直接输出。
图像校正芯200包括:定时部210,从图像输入接口(I/F)150输出的YUV形式的图像信号中抽出同步信号,并生成表示各部的动作定时的定时信号;直方图制作部(统计信息取得部)212,取得运算所需的统计信息;顺序计数器214;代码表216,存储将校正算法(algorithm)细化后的微码;解码器217,解码微码并生成指令和数据;共用运算器218,由最小限度的电路构成,并共同用于调光和图像校正的各个处理;系数缓冲器220,临时存储通过运算而生成的、用于图像校正的校正系数;以及图像校正部222,使用校正系数来校正图像信号。
图8是主计算机提供给图像显示控制装置的控制信号的内容的示意图。从通信/图像处理部102向主计算机106输入例如以MPEG4为标准的图像信号,而且,从图像输入接口(I/F)302向主计算机106输入模式信息(例如指定高清晰显示模式的模式信号)以及画质信息(例如表示伽马校正、对比度、色度强度的信息或场景加权系数信息等)。
从主计算机106输出图像信号(RGB形式或YUV形式),此外,还输出作为控制信息的伽马校正强度(L1)、对比度强度(L2)、色度强度(L3)、图像校正用场景加权系数(L4)、背光亮度削减率(省电程度:L5)、以及背光用场景加权系数(L6)。图像校正用场景加权系数(L4)相当于图5的滤波系数P,背光用场景加权系数(L6)相当于图5的滤波系数q。
上述控制信息在被临时存储在寄存器152中后,被提供给共用运算器218。共用运算器218基于被赋予的控制信息,使用来自解码器217的指令和数据进行规定的运算,并生成用于图像校正的校正系数及背光亮度(调光系数Kflt)。
图9是表示如图7所示的图像显示控制装置的具体结构的框图。在图9中,进一步具体地示出了图像校正芯200的结构。此外,在图9中,对和图7相同的部分标注了相同的参考符号。
在图9中,共用运算器218包括:第一及第二多路转换器(400a、400b);算术逻辑运算单元(ALU)402;分配器404,分配算术逻辑运算单元(ALU)的运算结果;多个输出目的地寄存器(目的寄存器)406。输出目的地寄存器406包括划分为各输出目的地的寄存器组408a~408c。此外,形成有反馈路径,其用于将存储于多个寄存器组408a~408c的各个寄存器组中的运算结果的至少一部分反馈给第一及第二多路转换器(400a、400b)的输入侧。
下面,对图9的图像校正芯200的各部的功能以及动作进行具体说明。直方图制作部(统计信息取得部)212取得1帧的图像信号的统计信息(关于亮度的统计信息以及关于色度的统计信息)。此外,将在第三实施例中对直方图制作部(统计信息取得部)212的具体内部结构进行说明。
代码表(代码存储部)216存储用于指定共用运算器218的动作步骤的多个微码。此外,将在第二实施例中对代码表216的制作步骤进行说明。
顺序计数器(顺序指示部)214对代码表216进行指示(pointing),并控制从代码表216输出微码的顺序。解码器217对从代码表216中依次输出的微码进行解码,并生成用于提供给共用运算器的指令及数据(系数等)中的至少一个。
从解码器217向第一及第二多路转换器(400a、400b)提供用于运算的系数,并从解码器217向算术逻辑运算单元(ALU)402提供运算指令(操作码(opecode)),从解码器217向分配器404提供分配目的地信息(目的信息)。
共用运算器218实时地计算图像校正用的校正系数和减光后的背光亮度(调光系数Kflt)。根据共用运算器218的运算,其结果进行使用图5(A)~图5(D)所说明的数字信号处理。此外,实质上进行了使用图2~图5所说明的以下所有的串联处理:色度的增强处理、用于防止高色度图像的画质下降而限制背光亮度的减光率的处理、以及第一及第二递归滤波处理。
如上所述,通过将信号处理步骤编码化后的微码来对共用运算器218的运算进行控制。通过使用共用化后的最小限度的电路结构的运算器,无需并列设置同种的硬件即可实现实时运算。因此,可以通过最小的电路、最小的功耗,实现高速的调光控制以及图像校正。
共用运算器218的运算结果被临时存储在被划分为每个输出目的地的寄存器组408a~408c中。将计算出的背光亮度(调光系数Kflt)输出给背光(LED)驱动器,而且,校正系数被存储在系数缓冲器410中。将系数缓冲器410中所存储的校正系数与下一帧的图像信号的输入同步地提供给图像校正部222,从而进行图像的校正(亮度以及色度的增强)。
此外,通过反馈路径,将多个寄存器组408a~408c的各个寄存器组中存储的运算结果的至少一部分反馈给第一及第二多路转换器(400a、400b)的输入侧。据此,首先,求得减光后的照明亮度,将该运算结果返回给输入侧,并根据该求得的照明亮度来进行求得图像的校正系数的处理。并且,进行上述第一及第二递归(IIR)滤波处理。
下面,对如图10所示的代码表的制作步骤进行说明。图10是代码表的制作步骤的示意图。
在图10中,首先,对应显示图像,对图像显示用的背光进行自适应减光,并且准备基于程序设计语言(例如,高级程序设计语言)的算法(增强运算算法)(步骤S500),其中,该程序设计语言用于校正图像信号以补偿随背光减光而引起的画质下降。
然后,将通过程序设计语言制成的算法一并进行转换,并生成微码(步骤S502)。
接下来,将生成的微码写入ROM(读出专用存储器)(步骤S503)。
这样,可以有效地制成代码表216。此外,通过改变算法(微码),可以比较容易地改变共用运算器218的运算内容。因此,可以加灵活对应设计的改变。
下面,对直方图制作部(统计信息取得部)212的内部具体结构的一例进行说明。
如上所述,在本发明的图像显示控制装置中,取得与1帧的图像信号的亮度和色度相关的统计值,基于该统计值,对背光亮度及图像信号(色度以及亮度)进行自适应校正。此外,如上所述,在进行图像校正时,即使是平均亮度低的图像,平均色度高时,与省电相比优先色度,从而进行限制背光的减光率的校正。为了进行这样的控制,需要快速取得所需的亮度和色度的统计值信息。
图11是表示图9的直方图制作部(统计信息取得部)的内部具体结构的电路图。如图11所示,设置有用于制作亮度直方图的多个统计单元(EX0~EX255)。EX0~EX255中任意一个都是相同的电路结构。即,用于制作亮度直方图的多个统计单元(EX0~EX255)的各个统计单元包括:比较器1,将输入的图像信号的亮度值和基准亮度值(该基准亮度值在每个统计单元中都不同)进行比较;加法计数器(up counter)2;“与”门(AND gate)3;以及统计值缓冲器4。将亮度值定为256灰阶,对应于各灰阶的基准亮度值(1)~(255)的各基准亮度值被赋予各个比较器(EX0~EX255)。
将图像信号的亮度信号(Y)并列输入各统计单元(EX0~EX255),并通过各比较器1,将与各灰阶相对应的基准亮度值(1)~(255)同时进行比较。各比较器1作为亮度值的一致检测电路而发挥功能,当输入亮度值与基准亮度值一致时,比较器的输出为高电平,由此,将提供给“与”门3的另一个输入端子的动作时钟提供给统计值缓冲器4。
统计值缓冲器4在提供时钟的定时,调入加法计数器2的计数值并将其锁住(latch)。这样,图像信号所包含的各像素的亮度值被分类为每个灰阶值并进行计数。由于输入图像的亮度值被并列输入到各统计单元,因此可以超快速地取得统计值。
亮度最大值/最小值检测器5根据各统计单元(EX0~EX255)的计数值,求得亮度(Y)的最大值、最小值。此外,标准偏差运算部6计算表示亮度(Y)的分布的标准偏差值。使用这样计算出的统计值来进行自适应调光和图像校正。
此外,如图11的下侧所示,还设置有用于求得亮度(Y)的平均值的统计单元ES(Y)、用于求得蓝色度(Cb)的平均值的统计单元ES(Cb)、用于求得红色度(Cr)的平均值的统计单元ES(Cr)。各统计单元(ES(Y)、ES(Cb)、ES(Cr))是相同的结构。
即,各统计单元(ES(Y)、ES(Cb)、ES(Cr))包括:加法器(7a~7c),将Y、Cb、Cr的值进行累加;以及合计值缓冲器(8a~8c),存储累加值。平均值运算部(9a~9c)分别计算亮度(Y)的平均值、色度(Cb)的平均值、色度(Cr)的平均值并加以输出。
如图4(C)所说明的,根据亮度(Y)和色度(Cb、Cr)关系,选择亮度(Y)或色度(Cb、Cr)的任一个作为用于计算调光系数的基础。上述的亮度(Y)的平均值、色度(Cb)的平均值、色度(Cr)的平均值用于进行这样的判断。
此外,如图11的左下方所示的“与”门A1的设置目的是:根据统计值有效信号,开启(geting)赋予各统计单元(EX0~EX255)的动作时钟,并根据需要,停止时钟供给。同样地,“与”门A2的设置目的是:根据平均有效信号,开启赋予各统计单元(ES(Y)、ES(Cb)、ES(Cr))的动作时钟,并根据需要,停止时钟供给。当不需要取得统计值时,停止时钟供给并停止统计值取得动作,从而可以减少功耗。关于这一点将使用图15进一步作具体说明。
(能够实现实时处理的结构)
当进行自适应的图像校正时,由于通过为以下步骤:取得上一帧的统计值,使用取得的统计值对校正系数进行运算,并使用该校正系数来校正下一帧的图像,因此,从1帧的图像输入结束到计算出校正系数为止,需要等待下一帧的图像的校正处理。即,校正系数的运算所需要的时间导致动态图像的图像校正发生延迟。
为了避免发生这样的延迟,在本发明中采用了以下结构。下面,通过图12~图14对用于能够实现实时处理的结构进行说明。
图12是抽出直方图制作部(统计信息取得部)周围的主要结构并加以表示的框图。如图12所示,从主计算机106向直方图制作部(统计信息取得部)212赋予控制信息,同时,直方图制作部(统计信息取得部)212根据来自定时部210的定时信息,制作亮度直方图等,并将统计值信息输出给运算器(其中,定时部210并不是必须的,也可以是直方图制作部(统计信息取得部)212本身独立地生成定时信号)。
在此,通过对直方图制作部(统计信息取得部)212取得统计值的结束定时进行控制,从而可以进行实时处理。
即,当直方图制作部(统计信息取得部)212取得1帧的图像的统计信息时,若不等取得1帧的全部图像的统计值即结束统计值取得处理,则在直至1帧结束为止而剩下的时间内,可以计算出基于取得的统计值的校正系数。
即使将帧的一部分的图像(例如,周边部分的图像)从统计信息的取得对象中排除,也不会对所获得的统计值的精度造成大的影响,从而可以确保统计值的精度。
图13是用于可进行基于统计值的实时的图像校正的、直方图制作部(统计信息取得部)中的定时控制的一例的示意图。如图13的下侧所示,在1帧的图像中设定有效评价像素区域Z1,剩下的区域设定为无效区域Z2。作为统计值取得对象的像素仅为有效评价像素区域Z1所包含的像素,无效区域Z2中所包含的像素不作为制作统计值的基础。
如图13所示,在本实施例中,将1帧的最后一行设定为无效区域Z2。但并不限定于此,由于优选对尽可能多的图像取得统计值,所以仅将最后一行从统计值的取得对象中排除。此外,通过采用未使用LUT而使用微程序控制的运算电路的结构(图7、图9的结构),所以可以实现超快速的运算,因此,若存在一行的空余时间,则即可求得减光后的照明亮度和校正系数。
在图13中,时刻t1、t10表示输入图像信号的垂直同步信号(Vsync)的定时。从时刻t2~时刻t8为止,取得关于有效评价像素区域Z1的统计值(即,使用图11的结构,取得统计值的计数、亮度最大值/最小值、标准偏差值、亮度平均值、蓝色度(Cb)的平均值、红色度(Cr))。
此外,在时刻t8结束取得统计值的处理。接着,在相当于作为无效区域的最后一行(最终行)的时间(时刻t8~t9)内,根据取得的统计值,例如,图9的共用运算器218实施超快速的运算,并计算出背光亮度(调光系数Kfit)和校正系数。
当在时刻t10开始下一帧时,图9的图像校正部222使用计算出的校正系数来校正图像信号。即,配合减光的程度,进行增强亮度及色度的图像校正。
如上所述,在相当于1帧的期间中,结束统计值的取得和校正系数的运算,因此,即使不延迟地输入下一帧,也可以马上开始图像校正,因此,可以实现动态图像的实时校正。
此外,虽然在上述说明中,对从上一帧取得统计值的情况进行了说明,但是也可以是基于上一帧以及过去的帧两者来取得统计值。
汇总以上说明的动作如图14所示。图14是表示以下处理的具体处理步骤的流程图:在1帧期间的中途,结束统计值取得处理,并到1帧期间结束为止计算出校正系数和调光系数,根据计算出的校正系数来校正下一帧的图像。
图14的处理是使用图9的结构加以实现的。如图14所示,首先,通过主计算机设定需要的系数(计算统计值所需的标准偏差值阈值和最大值最小值阈值等)(步骤ST700)。
然后,输入图像信号(视频信号)(步骤ST701)。接着,根据除最后一行的1帧的图像数据,制作表示图像信号的亮度分布、亮度的累积值、和色度的累积值的直方图(计算统计值的基础数据)(步骤ST702)。然后,根据制成的直方图来求得表示统计特性的系数(统计值)(步骤ST703)。接着,将求得的统计值提供给图9的运算器218,并根据统计值,计算校正系数和背光亮度(调光系数)(步骤ST704)。
ST704的处理在1帧期间内结束。而且,开始下一帧的图像信号的输入,并对该图像信号实施使用校正系数的实时的图像校正,此外,与此并行地将背光亮度(调光系数)向LED驱动器进行输出,并同时开始生成新的直方图(步骤ST705)。
如上所述,根据本发明,可以在完全不产生延迟时间的情况下,实现基于统计值的自适应动态图像的校正。
(发展应用例)
图15是表示说明为了进一步减少功耗,在不需要统计值取得动作时,停止直方图制作部(统计信息取得部)中的统计值的计数动作的结构的框图。此外,在图15中,对和前面附图相同的部分标注了相同的参考符号。
如图11所说明的,直方图制作部(统计信息取得部)212包括用于开启动作时钟(CLK)的“与”门A1和“与”门A2。在图15中,从定时部210提供动作时钟(CLK)。此外,定时部210通过将输入到图像输入接口(I/F)的图像信号所包含的同步时钟进行分离来生成动作时钟(CLK)。
“与”门A1根据统计值有效信号开启赋予各统计单元(EX0~EX255)的动作时钟,同样地,“与”门A2根据平均有效信号开启赋予各统计单元(ES(Y)、ES(Cb)、ES(Cr))的动作时钟。
统计值有效信号及平均有效信号例如从主计算机106所包括的亮度变化检测器107输出。亮度变化检测器107根据移动矢量,在连续的帧间,判断在图像上是否发生变化,其中,该移动矢量是从通信/图像处理部102所包括的编码译码器(codec)发送来的。
或者,也可以根据从通信/图像处理部102发送来的状态通知信号,获知在图像上没有变化。例如,当状态通知信号表示临时停止(停止动作)模式时,可以临时停止动态图像再生,并判定在帧间的图像上没有变化。
此外,亮度变化检测器107也可以直接监视帧存储器105的图像数据,并检测有无图像的变化。
当亮度变化检测器107判定在连续的帧间没有图像的变化时,由于不需要制作新的统计值,所以将统计值有效信号和平均有效信号定为低电平,并禁止来自“与”门A1及A2的、动作时钟Q1及Q2的输出。由此,各统计单元(EX0~EX255、以及ES(Y)、ES(Cb)、ES(Cr))停止计数动作。因此,可以进一步减少功耗。
以上,通过实施例对本发明进行了说明,但是,本发明并不仅限定于此,在不脱离本发明宗旨的范围内可以有各种变形、应用。
如上所述,根据本发明的实施例,可以获得以下的主要效果。
无需等待取得一帧的全部图像的统计值即结束统计值取得处理,在到一帧结束为止的剩余时间内,计算出基于所取得的统计值的校正系数等,从而即使依次输入动态图像的各帧的图像信号,也可以在无需等待时间的情况下进行基于统计值的恰当的图像校正,从而实现图像校正的实时处理。因为不需要特别的结构,所以可以较容易地加以实施。
此外,通过仅将最后一行从统计值的取得对象中排除,并在相对于该一行的时间内完成校正系数等的计算,从而可以实现实时且高精度的图像校正。
并且,在同时进行用于省电化的背光的自适应减光、和用于防止随该减光而引起的画质劣化的自适应图像校正时的图像显示控制中,通过适用本发明的技术,可以低功耗且实时地实现基于统计值的高度的运算。
此外,通过采用微程序控制方式的运算方法,无需并列设置同种的硬件即可进行实时运算,并可通过最小的电路、最小的功耗来实现高速的自适应调光控制以及自适应图像校正。
而且,通过在运算器中设置反馈路径,可以实现确定为以下的顺序的处理:求出减光后的照明亮度,然后基于该求得的照明亮度来求出图像的校正系数。此外,由于运算器具有反馈路经,所以可以进行用于防止随场景转换而引起的闪烁(视觉上的闪烁)的递归型(IIR)滤波处理。
通过同时进行自适应减光处理及图像校正,从而可以将画质的降低抑制在最小限度,同时,可以通过照明亮度的自适应调光来大幅度地降低功耗(确认最大30%的降低)。此外,因为可以以最小限度的硬件来加以实现,所以可以实现节省空间。而且,即使在串流映象这样的动态图像的处理中,也可以在完全不会发生延迟时间的情况下,实现实时的高精度处理。
此外,根据本发明,可以实现液晶显示装置等的驱动装置(驱动器)、控制装置(控制器)、驱动控制装置(将驱动器和控制器一体化的装置)的高附加价值。
并且,通过将本发明的图像显示控制装置(LSI)安装于便携式终端(包括便携式电话终端、PDA终端、可便携的计算机),从而可以高画质地显示单波段广播等的串流图像,且可以增长电池的寿命。
此外,根据本发明,即使在实现基于统计值的实时的动态图像的图像校正,同时,将用于省电化的照明的自适应减光和用于防止随该减光而引起的画质劣化的自适应图像校正同时进行的情况下,也可以实现实时性、抑制电路规模以及低功耗性。
根据本发明,可以同时实现快速性(实时性)、低功耗性、抑制电路规模增大,同时,可以同时进行照明的自适应减光、和用于补偿随该减光而引起的画质降低的、现有技术中没有的高精度图像校正。
本发明对于在基于图像的统计值,实时地对动态图像进行自适应校正的情况非常有效,例如,优选作为与串流再生相对应的图像显示控制装置。此外,将本发明作为在配合显示图像而对显示用的照明的亮度进行自适应减光,同时,校正图像信号以补偿随该减光而引起的画质下降的图像显示控制装置(图像显示控制LSI)也非常有用。此外,将本发明作为显示面板的驱动装置(驱动器)、显示面板的控制装置(控制器)、显示面板的驱动控制装置(将驱动器和控制器一体化的装置)、便携式终端等的电子设备也非常有用。
附图标记说明
100便携式电话终端(电子设备)
102通信/图像处理部 104 CCD照相机
106主计算机 108图像显示控制装置
110驱动器 112面板驱动器
114背光驱动器 116显示面板
118背光(LED) 150图像输入接口(I/F)
152用于存储来自主计算机的控制信息的寄存器
154 图像输出接口(I/F) 200图像校正芯
210定时部
212直方图制作部(统计信息取得部)
214顺序计数器 216代码表
217解码器 218共用运算器
220系数缓冲器 222图像校正部
400a、400b第一及第二多路转换器
402算术逻辑运算单元(ALU)
404分配器 406分配目的地寄存器
408a~408c划分为每个分配目的地的寄存器组
410系数缓冲器
Claims (11)
1.一种用于对动态图像的图像信号进行校正的图像显示控制装置,其特征在于,包括:
统计信息取得部,对应各帧取得所述图像信号的统计信息;
运算器,使用上一帧的所述统计信息,生成用于图像信号校正的校正系数;以及
图像校正部,使用所述校正系数来校正所述图像信号,
在所述各帧的一部分上设定有有效评价像素区域,
所述统计信息取得部取得关于与所述有效评价像素区域相对应的所述图像信号的所述统计信息,在所述统计信息的取得结束时,不等所述各帧结束即结束所述统计信息的取得处理,并将所取得的所述统计信息提供给所述运算器,
所述运算器在到所述各帧结束为止的期间内,基于所述统计信息来计算出所述校正系数,
所述图像校正部使用计算出的所述校正系数,进行所述动态图像的、所述上一帧的下一个帧的图像信号的校正。
2.根据权利要求1所述的图像显示控制装置,其特征在于,
所述统计信息取得部在不进行所述各帧的最后一行的统计值的取得就结束所述统计值的取得处理,所述运算器在相当于所述各帧的最后一行的时间内结束所述校正系数的计算。
3.根据权利要求1或2所述的图像显示控制装置,其特征在于,
所述运算器使用所述上一帧的统计信息,并对进行调光控制时的减光后的照明亮度进行运算,同时,生成用于所述图像信号的校正的所述校正系数,其中,所述调光控制是对应所述图像信号而自适应地对图像显示用的照明进行减光的控制,并且,所述图像信号的校正用于补偿随所述照明的减光而引起的画质下降。
4.根据权利要求3所述的图像显示控制装置,其特征在于,所述图像显示控制装置还包括:
代码存储部,存储用于指定所述运算器的动作步骤的多个代码;
顺序指示部,控制来自所述代码存储部的所述代码的输出顺序;以及
解码器,对从所述代码存储部输出的所述代码进行解码,并生成用于提供给所述运算器的指令和数据中的至少一个。
5.根据权利要求4所述的图像显示控制装置,其特征在于,
所述运算器包括第一多路转换器及第二多路转换器、算术逻辑运算单元、以及分配所述算术逻辑运算单元的运算结果的分配器,
从所述解码器,分别向所述第一多路转换器及第二多路转换器提供系数,向所述算术逻辑运算单元提供运算命令,向所述分配器提供分配信息。
6.根据权利要求5所述的图像显示控制装置,其特征在于,
所述运算器还包括:
多个输出目的地寄存器;以及
反馈路径,将所述多个输出目的地寄存器所存储的信号的至少一部分反馈给输入侧。
7.根据权利要求4至6中任一项所述的图像显示控制装置,其特征在于,
所述代码存储部所存储的所述代码是对基于程序设计语言的算法的记述进行转换而获得的微码,该程序设计语言用于对应显示图像对所述图像显示用的照明进行自适应减光并对图像信号进行校正以补偿随所述照明的减光而引起的画质下降。
8.一种光电装置的驱动装置,安装有权利要求1至7中任一项所述的图像显示控制装置。
9.一种光电装置的控制装置,安装有权利要求1至7中任一项所述的图像显示控制装置。
10.一种光电装置的驱动控制装置,安装有权利要求1至7中任一项所述的图像显示控制装置。
11.一种电子设备,安装有权利要求1至7中任一项所述的图像显示控制装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006304668 | 2006-11-10 | ||
JP2006304668 | 2006-11-10 | ||
JP2007272739 | 2007-10-19 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101178876A true CN101178876A (zh) | 2008-05-14 |
Family
ID=39405107
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNA2007101881603A Pending CN101178876A (zh) | 2006-11-10 | 2007-11-12 | 图像显示控制装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US7969408B2 (zh) |
JP (1) | JP5332172B2 (zh) |
KR (1) | KR100908935B1 (zh) |
CN (1) | CN101178876A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101625759B (zh) * | 2009-07-30 | 2011-10-12 | 重庆医科大学 | 图像质量评价方法 |
WO2012155560A1 (zh) * | 2011-07-07 | 2012-11-22 | 中兴通讯股份有限公司 | 一种显示控制方法和系统 |
CN106502610A (zh) * | 2016-10-31 | 2017-03-15 | 维沃移动通信有限公司 | 一种显示亮度调整方法及移动终端 |
CN114495811A (zh) * | 2021-12-31 | 2022-05-13 | 常熟菜根集成电路有限公司 | 时钟可控的led双线数据传输显示方法及实现电路 |
CN114979607A (zh) * | 2021-02-20 | 2022-08-30 | Oppo广东移动通信有限公司 | 图像处理方法、图像处理器及电子设备 |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4475268B2 (ja) * | 2006-10-27 | 2010-06-09 | セイコーエプソン株式会社 | 画像表示装置、画像表示方法、画像表示プログラム、及び画像表示プログラムを記録した記録媒体、並びに電子機器 |
JP5332173B2 (ja) * | 2006-11-10 | 2013-11-06 | セイコーエプソン株式会社 | 画像表示制御装置 |
US8149336B2 (en) * | 2008-05-07 | 2012-04-03 | Honeywell International Inc. | Method for digital noise reduction in low light video |
US20100002145A1 (en) * | 2008-07-07 | 2010-01-07 | Spence John P | Adaptive optimization of a video signal |
US8531380B2 (en) * | 2008-07-22 | 2013-09-10 | Sharp Laboratories Of America, Inc. | Methods and systems for area adaptive backlight management |
JP6439418B2 (ja) * | 2014-03-05 | 2018-12-19 | ソニー株式会社 | 画像処理装置及び画像処理方法、並びに画像表示装置 |
JP6707945B2 (ja) * | 2016-03-28 | 2020-06-10 | セイコーエプソン株式会社 | 表示装置及び表示装置の制御方法 |
CN106782375B (zh) * | 2016-12-27 | 2018-02-13 | 惠科股份有限公司 | 液晶显示器件及其驱动方法 |
RU2713387C9 (ru) * | 2018-01-12 | 2020-03-18 | Мицубиси Электрик Корпорейшн | Устройство отображения |
EP3926617A1 (en) * | 2020-06-19 | 2021-12-22 | INTEL Corporation | Display backlight smoothing by temporal low pass filtering |
CN114333709B (zh) * | 2021-12-21 | 2023-05-23 | 惠州视维新技术有限公司 | 显示屏的背光补偿方法、装置、显示屏设备和存储介质 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2969408B2 (ja) * | 1992-02-12 | 1999-11-02 | シャープ株式会社 | 映像表示装置 |
EP0718753A1 (en) * | 1994-12-22 | 1996-06-26 | Motorola, Inc. | Data processing system for evaluating fuzzy logic rules and method therefor |
JP3351496B2 (ja) * | 1995-02-20 | 2002-11-25 | 株式会社富士通ゼネラル | 映像表示装置 |
US7728845B2 (en) * | 1996-02-26 | 2010-06-01 | Rah Color Technologies Llc | Color calibration of color image rendering devices |
JPH1165531A (ja) * | 1997-08-20 | 1999-03-09 | Fujitsu Ltd | 画像表示装置および画像表示用lsi |
JP2002056391A (ja) * | 2000-08-10 | 2002-02-20 | Naoyuki Murakami | 画像解析機能を持つビデオ機器 |
WO2002026905A2 (en) * | 2000-09-26 | 2002-04-04 | Matsushita Electric Industrial Co., Ltd. | Display unit and drive system thereof and an information display unit |
US7133070B2 (en) * | 2001-09-20 | 2006-11-07 | Eastman Kodak Company | System and method for deciding when to correct image-specific defects based on camera, scene, display and demographic data |
KR100466785B1 (ko) * | 2002-01-18 | 2005-01-17 | (주)플렛디스 | 평판 디스플레이 패널의 화질 제어장치 및 방법 |
US7202850B2 (en) * | 2002-11-26 | 2007-04-10 | Matsushita Electric Industrial Co., Ltd. | Image display control apparatus and image display control method |
JP4494765B2 (ja) | 2002-11-26 | 2010-06-30 | パナソニック株式会社 | 画像表示制御装置および画像表示制御方法 |
JP3956887B2 (ja) | 2003-04-10 | 2007-08-08 | セイコーエプソン株式会社 | 画像処理装置および画像処理方法並びに画像処理プログラム |
JP4628770B2 (ja) | 2004-02-09 | 2011-02-09 | 株式会社日立製作所 | 照明装置を備えた画像表示装置及び画像表示方法 |
JP2006014016A (ja) * | 2004-06-28 | 2006-01-12 | Seiko Epson Corp | 自動画像補正回路 |
JP5374802B2 (ja) * | 2005-04-26 | 2013-12-25 | セイコーエプソン株式会社 | 画像表示装置、画像表示方法、画像表示プログラムおよび画像表示プログラムを記録した記録媒体 |
JP4504294B2 (ja) * | 2005-09-30 | 2010-07-14 | 株式会社東芝 | 映像信号処理装置及び映像信号処理方法 |
JP4479709B2 (ja) * | 2006-10-27 | 2010-06-09 | セイコーエプソン株式会社 | 画像表示装置、画像表示方法、画像表示プログラム、及び画像表示プログラムを記録した記録媒体、並びに電子機器 |
JP5169132B2 (ja) * | 2006-11-10 | 2013-03-27 | セイコーエプソン株式会社 | 画像表示制御装置 |
JP5332173B2 (ja) * | 2006-11-10 | 2013-11-06 | セイコーエプソン株式会社 | 画像表示制御装置 |
-
2007
- 2007-10-19 JP JP2007272739A patent/JP5332172B2/ja active Active
- 2007-10-31 US US11/980,685 patent/US7969408B2/en active Active
- 2007-11-08 KR KR1020070113661A patent/KR100908935B1/ko not_active IP Right Cessation
- 2007-11-12 CN CNA2007101881603A patent/CN101178876A/zh active Pending
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101625759B (zh) * | 2009-07-30 | 2011-10-12 | 重庆医科大学 | 图像质量评价方法 |
WO2012155560A1 (zh) * | 2011-07-07 | 2012-11-22 | 中兴通讯股份有限公司 | 一种显示控制方法和系统 |
CN106502610A (zh) * | 2016-10-31 | 2017-03-15 | 维沃移动通信有限公司 | 一种显示亮度调整方法及移动终端 |
CN106502610B (zh) * | 2016-10-31 | 2019-10-18 | 维沃移动通信有限公司 | 一种显示亮度调整方法及移动终端 |
CN114979607A (zh) * | 2021-02-20 | 2022-08-30 | Oppo广东移动通信有限公司 | 图像处理方法、图像处理器及电子设备 |
CN114979607B (zh) * | 2021-02-20 | 2024-04-12 | Oppo广东移动通信有限公司 | 图像处理方法、图像处理器及电子设备 |
CN114495811A (zh) * | 2021-12-31 | 2022-05-13 | 常熟菜根集成电路有限公司 | 时钟可控的led双线数据传输显示方法及实现电路 |
Also Published As
Publication number | Publication date |
---|---|
US20090015720A1 (en) | 2009-01-15 |
JP2008139841A (ja) | 2008-06-19 |
US7969408B2 (en) | 2011-06-28 |
JP5332172B2 (ja) | 2013-11-06 |
KR20080042713A (ko) | 2008-05-15 |
KR100908935B1 (ko) | 2009-07-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101178876A (zh) | 图像显示控制装置 | |
CN101178875A (zh) | 图像显示控制装置 | |
CN101178877A (zh) | 图像显示控制装置 | |
US7990402B2 (en) | Image display control device | |
CN101779230B (zh) | 动态背光适配 | |
CN101593508B (zh) | 基于直方图的动态背光控制系统和方法 | |
US9390681B2 (en) | Temporal filtering for dynamic pixel and backlight control | |
CN102726036B (zh) | 用于在液晶显示器上显示的图像的增强 | |
US10783837B2 (en) | Driving method and driving device of display device, and related device | |
CN105185328A (zh) | 液晶显示亮度控制方法和装置以及液晶显示设备 | |
US7986295B2 (en) | Image display control device | |
CN105047142A (zh) | 液晶显示亮度控制方法和装置以及液晶显示设备 | |
CN105161064A (zh) | 液晶显示亮度控制方法和装置以及液晶显示设备 | |
CN105047140A (zh) | 一种基于图像内容自适应的动态背光控制系统及方法 | |
KR20080080040A (ko) | 화상 표시 장치 및 전자기기 | |
US9165510B2 (en) | Temporal control of illumination scaling in a display device | |
US9583045B2 (en) | Display control circuit and method thereof | |
CN110992898B (zh) | 一种多分区背光控制的方法及设备 | |
CN105578094A (zh) | 一种图像边缘融合处理系统 | |
CN101621704A (zh) | 图形图像的颜色增强 | |
CN101772954A (zh) | 用于视频回放的管理技术 | |
CN104715735A (zh) | 一种背光调整的方法和装置 | |
US10504452B2 (en) | Pixel contrast control systems and methods | |
CN102547071B (zh) | 一种视频解码紧耦合的动态对比度增强电路 | |
US9093037B2 (en) | Method and associated apparatus for power-saving display |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
AD01 | Patent right deemed abandoned |
Effective date of abandoning: 20080514 |
|
C20 | Patent right or utility model deemed to be abandoned or is abandoned |