CN104205204A - 图像显示装置及方法 - Google Patents

图像显示装置及方法 Download PDF

Info

Publication number
CN104205204A
CN104205204A CN201380015618.9A CN201380015618A CN104205204A CN 104205204 A CN104205204 A CN 104205204A CN 201380015618 A CN201380015618 A CN 201380015618A CN 104205204 A CN104205204 A CN 104205204A
Authority
CN
China
Prior art keywords
image
mentioned
section
dynamic range
backlight illumination
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380015618.9A
Other languages
English (en)
Other versions
CN104205204B (zh
Inventor
渡辺干夫
田丸雅也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to CN201511009825.0A priority Critical patent/CN105609035B/zh
Publication of CN104205204A publication Critical patent/CN104205204A/zh
Application granted granted Critical
Publication of CN104205204B publication Critical patent/CN104205204B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406Control of illumination source
    • G09G3/3413Details of control of colour illumination sources
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2092Details of a display terminals using a flat panel, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406Control of illumination source
    • G09G3/342Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines
    • G09G3/3426Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines the different display panel areas being distributed in two dimensions, e.g. matrix
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/36Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
    • G09G3/3607Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals for displaying colours or for displaying grey scales with a specific pixel layout, e.g. using sub-pixels
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/36Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
    • G09G3/3611Control of matrices with row and column drivers
    • G09G3/3648Control of matrices with row and column drivers using an active matrix
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0613The adjustment depending on the type of the information to be displayed
    • G09G2320/062Adjustment of illumination source parameters
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0626Adjustment of display parameters for control of overall brightness
    • G09G2320/0646Modulation of illumination source brightness and image signal correlated to each other
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/066Adjustment of display parameters for control of contrast
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/16Calculation or use of calculated indices related to luminance levels in display data

Abstract

本发明的目的在于在将宽动态范围图像显示时、将宽动态范围的摄影场景忠实地显示再现。有关本发明的一方式的图像显示方法,取得利用第1图像以及与第1图像相比以低感度或低曝光所拍摄的第2图像实施了动态范围扩大处理的第3图像、或不伴随动态范围扩大处理的第4图像,并使其显示到透射型显示面板上,在判别上述取得的图像为第3图像时,使第3图像中的对应于高亮度部的段的背光亮度比对应于低亮度部的段的背光亮度高。

Description

图像显示装置及方法
技术领域
本发明涉及图像显示装置及方法,特别涉及控制透射型显示面板的背光亮度的技术。
背景技术
以往,提出了具备将配设在液晶面板的背面的背光单元的各段的背光亮度单独地控制的功能(背光局部调光(BLD、back local dimming)功能)的液晶显示装置(专利文献1)。
该液晶显示装置对应于在液晶面板上显示的图像的亮度水平,按照每个区域,以使得在图像明亮的区域中变亮、在暗的区域中变暗的方式控制背光亮度。由此,使明暗部分的对比度变大,能够显示动态范围宽的图像。
此外,专利文献2所记载的显示器具有使光成像到背投屏幕上的第1光调制器和背投屏幕内的第2光调制器,通过这两个光调制器将光调制,能够显示具有宽动态范围的图像。
现有技术文献
专利文献
专利文献1:特开2010-097909号公报
专利文献2:米国特許第7581837号公报
发明内容
发明所要解决的课题
专利文献1所记载的发明按照每个区域,以使显示在液晶面板上的图像的亮的区域变亮、暗的区域变暗的方式控制(BLD控制)背光亮度。因此,根据专利文献1所记载的发明,能够显示宽动态范围的图像。但是,在专利文献1所记载的发明中,例如低亮度区域及中间亮度区域也被变更背光亮度,色阶(灰度等级、gradation)变得反差强,有显示不自然的图像的情况。
专利文献2所记载的发明也能够显示具有宽动态范围的图像。但是,在专利文献2中,没有公开将自然的观感良好的图像显示再现的技术。
本发明是鉴于这样的情况而做出的,目的是提供一种能够将宽动态范围的摄影场景忠实地显示再现的图像显示装置及方法。
用于解决课题的手段
为了达到上述目的,有关本发明的一方式的图像显示装置,具备:图像取得机构,取得使用第1图像和与第1图像相比以低感度或低曝光拍摄的第2图像实施了动态范围扩大处理的第3图像、或不伴随动态范围扩大处理的第4图像;透射型显示面板,显示由图像取得机构取得的第3图像或第4图像;背光单元,配设于透射型显示面板的背面,能够将针对该透射型显示面板的背光按照每个划分的段(segment)进行亮度控制;判别机构,判别由图像取得机构取得的图像是第3图像还是第4图像;控制机构,在根据判别机构的判别结果将由图像取得机构取得的图像判别为第3图像时,控制背光单元,以使得与该第3图像中的通过动态范围扩大处理被抑制的高亮度部对应的段的背光亮度相比于与低亮度部对应的段的背光亮度高。
根据本发明的一方式,在将通过将第1图像和相对于第1图像以低感度或低曝光拍摄的第2图像合成从而生成的宽动态范围的第3图像、即与低亮度部的色阶相比高亮度部的色阶被抑制了的第3图像显示于透射型显示面板时,将背光单元的各段的背光亮度单独地控制,显示为宽动态范围的图像。即,控制(BLD控制)背光单元,以使得与第3图像中的被抑制的高亮度部对应的段的背光亮度比与低亮度部对应的段的背光亮度高。由此,虽然第3图像是高亮度部被抑制的宽动态范围的图像,但该被抑制的高亮度部的亮度被扩展,能够将与第3图像对应的摄影场景忠实地显示再现。
另外,上述方式中的透射型显示面板,包括以背光为光源的透射型显示面板、和以外光和背光的两者为光源的混合方式的显示面板这两者。
在有关本发明的其他方式的图像显示装置中,控制机构在根据判别机构的判别结果将由图像取得机构取得的图像判别为第4图像时,控制背光单元,以使得全部段分别成为相同的背光亮度。由此,能够将与第4图像对应的摄影场景忠实地显示再现。
在有关本发明的另一其他方式的图像显示装置中,图像取得机构取得第3图像以及有关与该第3图像建立了关联的宽动态范围合成的合成信息;判别机构基于取得的合成信息,判别由图像取得机构取得的图像是第3图像还是第4图像。这是因为,即使将图像解析,也不能判别是否是宽动态范围的摄影场景的图像,所以利用与第3图像建立关联并记录的有关宽动态范围合成的合成信息。
在有关本发明的另一其他方式的图像显示装置中,第3图像中,预先设定的阈值以下的低亮度部仅使用第1图像而生成,超过阈值的高亮度部至少使用第2图像而生成;合成信息包括阈值。仅使用第3图像中的第1图像而生成的低亮度部被充分地分配了色阶,但至少使用第2图像而生成的高亮度部在宽动态范围合成时色阶被抑制。上述阈值表示色阶没有被抑制的低亮度部和色阶被抑制的高亮度部之间的的边界的亮度值。
在有关本发明的另一其他方式的图像显示装置中,控制机构基于合成信息中所包含的阈值,将第3图像中的超过阈值的像素判别为高亮度部的像素。
在有关本发明的另一其他方式的图像显示装置中,优选的是,控制机构具有按照每个背光单元的段从第3图像中提取与各段对应的多个像素的提取机构,在判别为提取出的多个像素中的一定的比例以上的像素与高亮度部的像素相对应、或者判别为提取出的多个像素的平均值为与高亮度部相对应的亮度值时,控制背光单元,以使得该段的背光亮度变高。
第3图像的像素不与背光单元的段一对一地对应,段更大。段的背光亮度基于与该段对应的多个像素的像素值来决定。即,在与段对应的多个像素中的一定的比例以上的像素与高亮度部的像素相对应、或者多个像素的平均值被判别为与高亮度部相对应的亮度值的情况下,进行BLD控制以使得该段的背光亮度变高。
在有关本发明的另一其他方式的图像显示装置中,优选的是,控制机构具有存储机构,所述存储机构存储表示对应于背光单元的各段的多个像素的代表亮度值与背光亮度之间的关系的表或计算式,基于由提取机构提取出的多个像素的代表亮度值以及存储机构中所存储的表或计算式来计算对应的背光亮度,基于按照每个背光单元的段所计算出的背光亮度来控制背光单元。
即,根据与各段相对应的多个像素的代表亮度值的大小,变更该段的背光亮度,由此将被抑制了的高亮度部的亮度提高。此时的背光亮度使用预先存储的表示亮度值(代表亮度值)与背光亮度的关系的表或计算式来求出。
在有关本发明的另一其他方式的图像显示装置中,优选的是,图像取得机构取得第3图像以及有关与第3图像建立了关联的宽动态范围合成的合成信息;合成信息包括与第3图像的动态范围的宽度关联的信息;存储机构存储与第3图像的动态范围的宽度相对应的多个表或计算式、即动态范围越宽使背光亮度越高的表或计算式;控制机构基于合成信息中所包含的与动态范围的宽度关联的信息,从存储机构取得相对应的表或计算式,使用该表或计算式来计算背光亮度。
第3图像存在动态范围的宽度(高亮度部的抑制的大小)不同的多个种类,具有包括与动态范围的宽度关联的信息在内的合成信息,另一方面,表示亮度值与背光亮度之间的关系的表或计算式对应于第3图像的动态范围的宽度而准备有多个。并且,在第3图像的BLD控制时,使用与第3图像的动态范围的宽度对应的表或计算式来计算背光亮度。
在有关本发明的另一其他方式的图像显示装置中,优选的是,图像取得机构取得第3图像以及与第3图像建立了关联的增益修正表、即与第1图像与第3图像之间的色阶变换特性的差相对应的增益修正表;控制机构基于取得的增益修正表以及与背光单元的各段相对应的多个像素的代表亮度值,按照每个段来计算背光亮度。
第1图像和第3图像,图像处理时的色阶变换特性(伽马特性等)不同。在第3图像的取得时,还取得与第1图像与第3图像之间的色阶变换特性的差相对应的增益修正表。控制机构使用与第3图像一起取得的增益修正表,基于该增益修正表以及与背光单元的各段相对应的多个像素的代表亮度值,按照每个段来计算背光亮度。
有关本发明的另一其他方式的图像显示方法,包括:图像取得工序,取得使用第1图像以及与第1图像相比以低感度或低曝光所拍摄的第2图像实施了动态范围扩大处理的第3图像、或不伴随动态范围扩大处理的第4图像;显示工序,使透射型显示面板显示通过图像取得工序取得的第3图像或第4图像;判别工序,判别通过图像取得工序取得的图像是第3图像还是第4图像;控制工序,对背光单元进行控制,该背光单元配设于透射型显示面板的背面、且能够将针对该透射型显示面板的背光按照每个划分的段来进行亮度控制;控制工序中,在根据判别工序的判别结果将通过图像取得工序取得的图像判别为第3图像时,控制背光单元,以使得第3图像中的与通过动态范围扩大处理被抑制的高亮度部对应的段的背光亮度相比于与低亮度部相对应的段的背光亮度变高。
发明的效果
根据本发明,取得与低亮度部的色阶相比高亮度部的色阶被抑制了的图像(第3图像),当将该第3图像再现显示时,进行BLD控制,以使得与被抑制了的高亮度部相对应的段的背光亮度相比于与低亮度部相对应的段的背光亮度变高。因此,能够将宽动态范围的实际的摄影场景忠实地显示再现。
附图说明
图1是表示有关本发明的图像显示装置的实施方式的框图。
图2是图1所示的液晶显示部的立体图。
图3是表示将包括宽DR图像的图像摄像并记录的数字照相机、和显示宽DR图像的图像显示装置的主要部的框图。
图4是表示有关本发明的摄像特性、图像处理特性、显示器特性及再现特性的曲线图。
图5A是表示在保存宽DR图像的图像文件的头部中所记录的标签信息的一例的图。
图5B是表示在保存宽DR图像的图像文件的头部中所记录的标签信息中的增益修正信息的一例的图。
图6是表示图像数据与背光亮度的关系的曲线图。
图7是表示有关本发明的实施方式的图像显示方法的整体的流程的流程图。
图8是表示宽DR图像用的BLD处理的流程图。
图9是概念性地表示伴随LED段的背光亮度的控制而调整LCD数据的调整方法的图。
图10是表示以往的摄像特性、图像处理特性、显示器特性及再现特性的曲线图。
图11是表示宽DR图像的一例的图像。
图12是表示作为本发明的其他实施方式的智能电话的外观的立体图。
图13是表示图12所示的智能电话的构成的框图。
具体实施方式
以下,按照附图对有关本发明的图像显示装置及方法的实施方式进行说明。
[图像显示装置的构成]
图1是表示有关本发明的图像显示装置的实施方式的框图,图2是图1所示的液晶显示部的立体图。
图1所示的图像显示装置1是具备背光局部调光(BLD)功能的显示器。图像显示装置1具备中央处理装置(CPU)10、存储器12、操作部14、液晶显示部(LCD)16(LCD面板16a(透射型显示面板)、背光单元(LED阵列)16b)、影像信号生成部20、LCD画质参数生成部22、LCD控制部24、LCD驱动部26、背光控制信号生成部28(控制机构、提取机构)、发光二极管(LED)驱动器30、图像存储装置32及标签信息解析部34。
CPU10基于来自操作部14的输入,按照规定的控制程序综合控制图像显示装置整体的动作。CPU10包括图像取得功能,该图像取得功能取得图像存储装置32中所保存的图像文件,并将保存在图像文件中的压缩图像数据(例如被JPEG(Joint Photographic Experts Group、联合图像专家小组)压缩的图像数据)扩展(日语:伸張),取得扩展后的图像数据。
存储器12包括作为易失性存储器的SDRAM(Synchronous DynamicRandom Access Memory、同步动态随机存储器)、及作为可擦写的非易失性存储器的EEPROM(Electronically Erasable and Programmable Read OnlyMemory、带电可擦可编程只读存储器;存储机构)等。SDRAM作为CPU10的控制程序的执行时的工作区使用,此外还作为将再现的图像数据暂时保持的存储区使用。另一方面,在EEPROM中,存储有包括BLD控制程序的程序、在BLD控制中使用的表或计算式、以及各种参数等。
LCD显示部16具备透过型的LCD面板16a和背光单元16b。背光单元16b如图2所示那样配设在LCD面板16a的背面上,由按照LED段排列有1个LED的LED阵列构成。背光单元16b能够按照每个LED段控制发光亮度(背光亮度)。即,背光单元16b采用按照每个LED段单独控制背光亮度的BLD控制。另外,LED段通常将水平200像素、垂直200像素左右作为1个段。
另外,有关本发明的LCD显示部16并不限定于透过型的显示面板。例如可以使用利用外光的反射和背光的两者作为光源的类型的混合方式的显示面板(液晶面板)作为LCD显示部16。
影像信号生成部20将暂时存储在存储器12中的图像数据变换为用来显示到LCD面板16a上的影像信号,进行与LCD显示部16的伽马(gamma)特性对应的伽马修正(逆伽马修正),将其向LCD控制部24输出。对于LCD控制部24的其他输入,从LCD画质参数生成部22输入画质调整用的参数(例如明亮度等)。LCD控制部24基于从影像信号生成部20输入的影像信号及参数对LCD驱动部26进行控制。LCD驱动部26通过与从LCD控制部24施加的影像信号对应的控制信号,驱动LCD面板16a,并按照每个LCD元件(显示元件)控制其透过率。
另一方面,背光控制信号生成部28包括提取与背光单元16b的各LED段对应的多个像素的像素提取功能(提取机构)、以及背光局部调光(BLD)控制功能(控制机构)等。背光控制信号生成部28基于再现显示在LCD显示部16上的图像及由标签信息解析部34提取的标签信息,生成用来控制各LED段的亮度的背光控制信号。另外,关于背光控制信号生成部28的详细情况在后面叙述。
LED驱动器30通过从背光控制信号生成部28施加的背光控制信号单独地驱动背光单元16b的LED段,使各LED段发出分别被BLD控制的背光。
图像存储装置32例如由硬盘装置等构成,保存有用来显示到LCD显示部16上的静止图像或运动图像的图像文件。另外,图像存储装置32并不限于内置在图像显示装置1中,也可以是经由接口连接在图像显示装置1上、能够拆装的外部记录媒体(例如存储卡等)。
标签信息解析部34从用于显示而从图像存储装置32读出的图像文件的头部将标签信息读出,提取在该标签信息中包含的宽动态范围(宽DR)合成信息等。并且,标签信息解析部34将该提取出的宽DR合成信息等向背光控制信号生成部28输出。
[宽DR图像]
接着,对采用有关本发明的图像显示方法的宽DR图像进行说明。
图3是表示将包括宽DR图像的图像摄像而记录的数字照相机50、和显示宽DR图像等的图像显示装置1的主要部的框图。
在图3中,数字照相机50具有具备摄像元件的摄像部52,所述摄像元件具有感度不同的两种光敏二极管群、或虽然感度相同但曝光时间能够单独控制的两种光敏二极管群。摄像部52在宽DR摄像时具有感度较高的像素(以下称作“主像素”)和感度较低的像素(以下称作“副像素”),将来自主像素和副像素的图像数据同时输出。这里,由主像素构成的图像(高感度图像)是标准(通常)的明亮度的图像,由副像素构成的图像(低感度图像)是曝光不足的图像。在摄像元件具有感度不同的两种光敏二极管群的情况下,低感度图像是从感度较低的光敏二极管群得到的图像。此外,在摄像元件具有感度相同的两个光敏二极管群的情况下,低感度图像是从与得到标准的明亮度的图像的曝光时间相比曝光时间短的光敏二极管群得到的图像。
从摄像部52输出的主像素及像素的图像数据分别被OB(optical black)修正部54a、54b将光学上的黑区域(光学黑(OB)区域)的信号成分除去,被白平衡(WB、white balance)增益修正部56a、56b白平衡修正后,被施加于动态范围(DR)合成部58。
如图4所示,设被施加于DR合成部58的高感度图像及低感度图像的RAW数据分别为14位数据(0~16383)。此外,设高感度图像与低感度图像的感度比为n:1(n>1)。即,低感度图像相对于高感度图像,感度比为1/n。
在将这些高感度图像和低感度图像进行宽DR合成的情况下,如图4的第1象限所示那样将高感度图像压缩为1/n,以表示低亮度部和高亮度部的边界的规定的阈值S1为基准,阈值S1以下的像素使用高感度图像的像素,超过阈值S1的像素使用低感度图像的像素,将这些像素合成。另外,作为超过阈值S1、并且高感度图像饱和以内的像素,也可以将高感度图像的像素和低感度图像的像素以适当的比率混合。此外,通过将高感度图像压缩为1/n,能够将噪声成分也压缩为1/n,与仅使用低感度图像的情况相比能够成为高画质。
回到图3,将由DR合成部58合成后的宽DR图像通过伽马修正部60进行伽马修正。伽马修正部60是进行与对通常的图像(高感度图像)的伽马修正相同的伽马修正的部分,进行具有图4的第2象限的虚线所表示的特性的伽马修正。此外,在该伽马修正时,从14位数据变换为8位数据(0~255)。
将由伽马修正部60进行了伽马修正后的宽DR图像接着通过增益修正部62来进行增益修正。宽DR图像如上述那样为通常的图像的1/n的感度,所以低感度部变暗。增益修正部62如图3的第2象限的实线所示那样进行增益修正,以使包括宽DR图像的低感度部在内的半色调(half tone)变大。即,如果设与阈值S1对应的高感度图像的值R1的伽马修正后的值为D1,则进行增益修正,以使宽DR图像的伽马修正及增益修正后的值成为D1。
如由图4的第2象限的实线表示那样,可知宽DR图像中,与低亮度部的色阶相比、高亮度部的色阶被抑制。
将由增益修正部62进行了增益修正后的宽DR图像通过未图示的去马赛克(demosaic)处理部(同步处理部)进行去马赛克处理(同步处理)后,通过YC处理部64变换为亮度信号Y和色差信号Cr、Cb,按照JPEG方式压缩,并记录至未图示的数字照相机50的记录介质等。
图3所示的数字照相机50具有伽马修正部60和增益修正部62,但也可以将这些色阶变换用1个修正部来进行。
[BLD控制]
接着,对有关本发明的图像显示装置1的BLD控制进行说明。
在图3中,如果取得如上述那样被摄像的宽DR图像,则基于该宽DR图像生成LCD数据C(i,j),并按照背光控制信号生成部28的BLD算法生成LED数据E(m,n)(背光控制信号)。对LCD数据C(i,j)进行增益修正及基于LCD显示部16的伽马特性的逆伽马修正等,并施加于LCD面板16a。由此,以使其具有与宽DR图像对应的透过率的方式来控制LCD面板16a的各显示元件。
此外,背光单元16b的各LED段通过LED数据E(m,n)来控制发光亮度。
例如,对于显示图4的第2象限的阈值D1以下的亮度的像素的LED段进行BLD控制,以成为通常的亮度。由此,宽DR图像的低亮度部仅被赋予LCD显示部16的逆伽马特性(第3象限的D1以下的特性)。其结果,阈值S1以下的低亮度部的图像如第4象限所示那样被作为与被摄体亮度成比例的明亮度的图像来显示。
另一方面,对于显示超过图4的第2象限的阈值D1的亮度的像素的LED段进行BLD控制,以变得比通常的背光亮度高。由此,在记录图像中,能够将被抑制了高亮度部的色阶的宽DR图像的高亮度部扩展,能够将宽DR的摄影场景更忠实地显示再现。例如,在设通常的图像的显示亮度的最大值为250cd/m2的情况下,如果使宽DR图像的显示亮度的最大值为750cd/m2,则能够将DR扩大为3倍而显示。
另外,如图4的第4象限所示那样,高亮度部也可以与低亮度部同样与被摄体亮度成比例而线性地变化。此外,在显示亮度的最大值被限制的情况下,高亮度部也可以沿着折线或曲线变化,以使其最大值与被摄体亮度的最大值一致。
图5A表示保存宽DR图像的图像文件的头部所记录的标签信息的一例。
数字照相机50在宽DR图像的摄像时,如图5A所示那样,除了通常的摄影信息以外还记录DR合成信息及增益修正信息作为标签信息。
DR合成信息具有高亮度部压缩率k(高感度图像与低感度图像的感度比)、和表示宽DR图像的低亮度部和高亮度部的边界的阈值D1(图4的第2象限所示的阈值D1)。通过高亮度部压缩率k,能够检测宽DR图像的高亮度部在怎样的程度上被抑制。此外,通过阈值D1,能够判别宽DR图像的低亮度部和高亮度部。
此外,增益修正信息如图5B所示,是对表示对于宽DR图像进行了怎样的增益修正的增益修正表Tg进行表示的信息。该增益修正表Tg是对应于通常的图像(高感度图像)与宽DR图像的图像处理时的色阶变换特性(伽马特性等)的差的修正表(参照图4的第2象限)。
图1所示的标签信息解析部34从图像文件的头部提取上述DR合成信息、增益修正信息,将其向背光控制信号生成部28传递。背光控制信号生成部28如图6所示,对于宽DR图像的各LED段的与多个图像数据的代表亮度值DRR(Data Reproduced and Representing the segment、数据再现和表示段)中的阈值D1以下的代表亮度值DRR对应的LED段,生成作为通常亮度E1的背光控制信号。背光控制信号生成部28对于与超过阈值D1的代表亮度值DRR对应的LED段,生成根据该代表亮度值DRR的值使背光亮度变高的背光控制信号(LED数据)。
在图6中,表示了相对于超过阈值D1的代表亮度值DRR、背光亮度E的特性不同的3个曲线图。背光控制信号生成部28例如通过DR合成信息中包含的高亮度部压缩率k决定某个输入输出特性的曲线图。高亮度部压缩率k越大,宽DR图像的高亮度部被越大地抑制,所以决定斜率较大的曲线图。
在存储器12的EEPROM中,存储有与图6所示的曲线图对应的多个表。背光控制信号生成部28基于根据高亮度部压缩率k从多个表决定的表、和与宽DR图像的LED段对应的代表亮度值DRR,按照每个LED段生成背光控制信号。
此外,也可以基于存储在头部中的增益修正表Tg(相当于上述多个表的某个表)、和宽DR图像的图像数据,按照每个LED段生成背光控制信号。进而,也可以代替与图6所示的曲线图对应的表而存储计算式。
[图像显示方法]
接着,对有关本发明的图像显示方法的实施方式进行说明。
图7是表示有关本发明的实施方式的图像显示方法的整体的流程的流程图。
在图7中,由操作部14选择希望的图像文件,从图像存储装置32取得再现显示的图像文件(步骤S10)。标签信息解析部34取得所取得的图像文件的头信息(步骤S12)。在作为头信息而包含宽DR图像用的DR合成信息的情况下,将该DR合成信息向背光控制信号生成部28输出。
背光控制信号生成部28根据是否从标签信息解析部34输入了DR合成信息,判别所取得的图像文件内的图像是宽DR图像还是通常图像(步骤S14)。背光控制信号生成部28如果判别为通常图像(“No”的情况下),则进行步骤S16的通常图像用的BLD处理(步骤S16)。另一方面,如果判别为宽DR图像(“Yes”的情况下),则背光控制信号生成部28进行宽DR图像用的BLD处理(步骤S18)。
通常图像用的BLD处理进行背光单元16b的控制,以使背光单元16b的全LED段分别成为相同的背光亮度(图6所示的背光亮度E1)。
另一方面,宽DR图像用的BLD处理进行基于图8所示的流程图的背光单元16b的控制。
以下,按照图8所示的流程图对宽DR图像用的BLD处理进行说明。
首先,将所取得的图像文件内的宽DR图像进行JPEG扩展(步骤S20)。这里,将JPEG扩展的宽DR图像的各像素设为DR(i,j)。
接着,决定LED段(m,n),取得该LED段(m,n)内的多个像素DR(i,j)(步骤S22)。这里,(m,n)表示LED段的坐标(参照图2)。
即,像素DR(i,j)与LED段(m,n)不是一对一地对应,LED段(m,n)更大。所以,在决定LED段(m,n)的背光亮度的情况下,需要基于与该LED段(m,n)内对应的多个像素DR(i,j)的像素值决定。
接着,取得LED段(m,n)内的多个像素DR(i,j)中的超过阈值D1(参照图6)的像素数M(步骤S24)。并且,判别所取得的像素数M是否超过规定的值M1(固定值)(步骤S26)。作为M1,例如设为1个LED段(m,n)内的像素数的70%的值。另外,也可以求出多个像素DR(i,j)的平均值,判别该平均值是否超过阈值D1。
在像素数M不超过M1的情况下(“No”的情况下),向步骤S28转移。另一方面,在像素数M超过M1的情况下(“Yes”的情况下),向步骤S29转移。
在步骤S28中,将LED段(m,n)的LED数据E(m,n)设定为通常亮度E1(参照图6)。
另一方面,在步骤S29中,计算LED段(m,n)内的多个像素DR(i,j)的代表亮度值DRR(m,n)。作为多个像素DR(i,j)的代表亮度值,可以采用多个像素DR(i,j)的最大值或平均值等。
接着,在步骤S30中,基于增益修正表Tg、代表亮度值DRR(m,n)及高亮度部压缩率k,通过下式计算LED段(m,n)的LED数据E(m,n)。
[数式1]
E(m,n)=F1(Tg(k,DRR(m,n)))
另外,LED数据E(m,n)的计算处理并不限定于上述[数式1]式。例如,在图6中表示显现高亮度部与背光亮度的关系的多个曲线图,但也可以在这些曲线图对应的多个表或计算式中,通过高亮度部压缩率k决定使用的表或计算式,基于该决定的表或计算式和多个像素的像素DR(i,j)的代表亮度值DRR(m,n)来计算LED数据E(m,n)。
接着,判别全部段的LED数据的计算是否结束(步骤S32),在没有结束的情况下(“No”的情况下),在将LED段的坐标更新后(步骤S34),转移至步骤S22,重复从上述步骤S22到步骤S32的处理。另一方面,如果全部段的LED数据的计算结束(“Yes”的情况下),则将对于宽DR图像的BLD处理中的LED数据的计算处理结束。
通过用这样计算出的LED数据E(m,n)控制LED段(m,n)的背光亮度E,能够提高宽DR图像的被抑制的高亮度部的亮度,能够将实际的摄影场景忠实地显示再现。
图9是概念性地表示伴随LED段(m,n)的背光亮度E的控制而调整LCD数据(i,j)的调整方法的图。
如图9的(a)部所示,被控制背光亮度E的LED段用安装在段内的规定数量的LED发光。在相邻的LED段的LED亮度较大地不同的情况下,有在LED段间可看到段差(difference)的情况。为了防止这一点,通过将针对属于各LED段的显示元件的LCD数据C(i,j)在段边界附近变更,降低亮度的段差。
例如,如图9的(b)部所示,在LED段(m+1,n),(m,n),(m-1,n)的背光亮度E(m+1,n),E(m,n),E(m-1,n)间有段差的情况下,将由虚线表示的原来的LCD数据C(i,j)变更为由实线表示的LCD数据C(i,j)。即,将原来的LCD数据C(i,j)基于像素D(i,j)、和像素D(i,j)属于的LED段(m,n)的背光亮度E(m,n)、以及上下左右的背光亮度E(m,n-1),E(m,n+1),E(m-1,n),E(m+1,n),变更为由下式表示的数据。
[数式2]
C(i,j)=F2{(D(i,j),E(m,n),E(m-1,n),E(m+1,n),E(m,n-1),E(m,n+1)}
图10表示对宽DR图像不进行BLD控制的情况下的再现特性。如图10的第4象限所示,虽然对高亮度部分配了色阶,相比低亮度部分被抑制,但色阶变得反差弱(软调、low contrast),成为所谓的暗沉(dull)的图像。
相对于此,在本发明中,如图4所示那样,高亮度部通过BLD控制被抑制的亮度被扩展,高亮度部的色阶变得反差强(硬调、hight contrast),能够将宽DR的摄影场景更忠实地显示再现。
图11是表示宽DR图像的一例的图像,在上部包含有高亮度部。在本发明中,能够使该高亮度部的色阶变得反差强,能够使色阶表现变丰富。另外,宽DR图像的高亮度部的色阶的分配较少,相反对比度被强调,结果亮度的变化变大,但由于高亮度部的亮度的变化不易检测到,所以对于画质的影响较少。
另一方面,宽DR图像的低亮度部由于被以恒常(steady)的一定亮度照射,所以对比度被不必要地强调,不发生成为不自然的图像等的问题,能够提供良好的画质。
作为图像处理装置1的其他的实施方式,例如可以举出便携电话机或智能电话、PDA(Personal Digital Assistants、掌上电脑)、便携型游戏机。以下,举出智能电话为例,参照附图详细地说明。
[智能电话的结构]
图12是表示作为图像处理装置1的其他实施方式的智能电话500的外观的立体图。
图12所示的智能电话500具有平板状的壳体502,在壳体502的一方的表面上具备作为显示部的显示面板521和作为输入部的操作面板522为一体的显示输入部520。此外,壳体502具备扬声器531、麦克风532、操作部540和照相机部541。另外,壳体502的结构并不限定于此,例如也可以采用显示部和输入部独立的结构,或采用折叠构造、或具有滑动机构的结构。
图13是表示图12所示的智能电话500的结构的框图。如图13所示,智能电话500具备无线通信部510、显示输入部520、通话部530、操作部540、照相机部541、存储部550、外部输入输出部560、GPS(Global PositioningSystem、全球定位系统)接收部570、运动传感器部580、电源部590和主控制部501。此外,智能电话500具备进行经由基站装置BS和移动通信网NW的移动无线通信的无线通信功能。
无线通信部510是按照主控制部501的指示、对收容在移动通信网NW中的基站装置BS进行无线通信的单元。使用该无线通信,进行声音数据、图像数据等的各种文件数据、电子邮件数据等的收发、Web数据或流数据等的接收。
显示输入部520是通过主控制部501的控制而显示图像(静止图像及运动图像)或字符信息等、在视觉上向用户传递信息,并且检测对于所显示的信息的用户操作,即所谓触摸面板。显示输入部520具备显示面板521和操作面板522。
显示面板521使用LCD(Liquid Crystal Display、液晶显示器)、OELD(Organic Electro-Luminescence Display、有机电激发光显示器)等作为显示设备。作为显示面板521,除了透过型显示(液晶)面板以外,可以使用混合方式的显示面板。显示面板521具有有关上述实施方式的背光局部调光控制功能。有关本实施方式的智能电话500在将存储在存储部550中的图像、经由无线通信部510或外部输入输出部560等输入的图像、或由照相机部541摄像的图像显示到显示面板521上时,进行有关上述实施方式的BLD控制。
操作面板522被载置为可辨识显示于显示面板521的显示面上的图像、检测通过用户的手指或笔尖操作的1或多个坐标的设备。如果将该设备通过用户的手指或笔尖操作,则将起因于操作而发生的检测信号向主控制部501输出。接着,主控制部501基于接收到的检测信号,检测显示面板521上的操作位置(坐标)。
如图12所示,智能电话500的显示面板521和操作面板522为一体而构成显示输入部520。操作面板522配置为,将显示面板521完全覆盖。在采用了该配置的情况下,操作面板522也可以具备对于显示面板521外的区域也检测用户操作的功能。换言之,操作面板522也可以具备关于重叠在显示面板521上的重叠部分的检测区域(以下称作显示区域)、和关于不重叠在其以外的显示面板521上的外缘部分的检测区域(以下称作非显示区域)。
另外,也可以使显示区域的大小与显示面板521的大小完全一致,但不需要使两者一定一致。此外,操作面板522也可以具备外缘部分和其以外的内侧部分的两个感应区域。进而,外缘部分的宽度是根据壳体502的大小等适当设计的。进而,作为在操作面板522中采用的位置检测方式,可以举出矩阵开关方式、电阻膜方式、表面弹性波方式、红外线方式、电磁感应方式、静电电容方式等,采用哪种方式都可以。
通话部530具备扬声器531及麦克风532,将经由麦克风532输入的用户的声音变换为能够由主控制部501处理的声音数据并向主控制部501输出,或者将由无线通信部510或外部输入输出部560接收到的声音数据解码并从扬声器531输出。此外,如图12所示,例如可以将扬声器531搭载在与设有显示输入部520的面相同的面上,将麦克风532搭载在壳体502的侧面上。
操作部540是使用键开关等的硬件键,受理来自用户的指示。例如如图13所示,操作部540搭载在智能电话500的壳体502的显示部的下部、下侧面上,是如果用手指等按下则成为开启、如果将手指拿开则通过弹簧等的复原力成为关闭状态的按钮式的开关。
存储部550存储主控制部501的控制程序及控制数据、包括用来生成将有关本发明的视差扩大缩小的希望的单眼3D图像的图像处理程序的应用软件、第1、第2半月滤波器群、第1、第2变换滤波器群、第1、第2逆滤波器群、与通信对方的名称或电话号码等建立了对应的地址数据、收发的电子邮件的数据、以及通过Web浏览器下载的Web数据或下载的内容数据,此外还暂时存储流数据等。此外,存储部550由智能电话内置的内部存储部551和具有拆装自如的外部存储器插槽的外部存储部552构成。另外,构成存储部550的各个内部存储部551和外部存储部552使用闪存存储器型(flash memory type)、硬盘型(hard disk type),多媒体卡微型(multimedia card micro type)、卡型存储器(例如Micro SD(注册商标)存储器等)、RAM(Random Access Memory、随机存取存储器)、ROM(ReadOnly Memory、只读存储器)等的存储媒体来实现。
外部输入输出部560起到与连结在智能电话500上的全部外部设备之间的接口的作用,用来与其他外部设备通过通信等(例如通用串行总线(USB)、IEEE1394等)或网络(例如因特网、无线LAN、蓝牙(Bluetooth)(注册商标)、RFID(Radio Frequency Identification、无线射频识别)、红外线通信(Infrared Data Association、红外线数据协会:IrDA)(注册商标)、UWB(Ultra Wideband、超宽带)(注册商标)、ZigBee(注册商标)等)直接或间接地连接。
作为与智能电话500连结的外部设备,例如有有线/无线耳机、有线/无线外部充电器、有线/无线数据端口、经由卡插槽连接的存储卡(Memorycard)或SIM(Subscriber Identity Module Card、客户识别模块卡)/UIM(UserIdentity Module Card、用户识别模块卡)卡、经由音频视频I/O(Input/Output)端子连接的外部音频视频设备、无线连接的外部音频视频设备、有线/无线连接的智能电话、有线/无线连接的个人计算机、有线/无线连接的PDA、有线/无线连接的个人计算机、耳塞等。外部输入输出部可以将从这样的外部设备接受到的传送来的数据向智能电话500的内部的各构成要素传递,或将智能电话500的内部的数据向外部设备传送。
GPS接收部570按照主控制部501的指示,接收从GPS卫星ST1~STn发送来的GPS信号,执行基于接收到的多个GPS信号的测位运算处理,检测根据该智能电话500的纬度、经度、高度构成的位置。GPS接收部570在能够从无线通信部510或外部输入输出部560(例如无线LAN)取得位置信息时,能够使用该位置信息来检测位置。
运动传感器部580例如具备3轴的加速度传感器等,按照主控制部501的指示,检测智能电话500的物理性的运动。通过检测智能电话500的物理性的运动,智能电话500的运动的方向及加速度被检测。该检测结果被输出至主控制部501。
电源部590按照主控制部501的指示,向智能电话500的各部供给储存在电池(未图示)中的电力。
主控制部501具备微处理器,按照存储部550存储的控制程序及控制数据动作,将智能电话500的各部总括来进行控制。此外,主控制部501具备应用处理功能和经由无线通信部510为了进行声音通信或数据通信而对通信系统的各部进行控制的移动通信控制功能。
应用处理功能通过主控制部501按照存储部550存储的应用软件来动作从而实现。作为应用处理功能,例如有控制外部输入输出部560而与对置设备进行数据通信的红外线通信功能、进行电子邮件的收发的电子邮件功能、阅览Web页的Web浏览器功能、从2D图像生成3D图像的功能等。
此外,主控制部501具备基于接收数据及下载的流数据等的图像数据(静止图像或运动图像的数据)将影像显示到显示输入部520上等的图像处理功能。所谓图像处理功能,是指主控制部501将上述图像数据解码、对该解码结果实施图像处理、将图像显示到显示输入部520上的功能。
进而,主控制部501执行对于显示面板521的显示控制、和检测经由操作部540、操作面板522的用户操作的操作检测控制。
通过显示控制的执行,主控制部501显示用来起动应用软件的图标或滚动条等的软键(software key),或显示用来制作电子邮件的窗口。另外,所谓滚动条,是指对于不能包含在显示面板521的显示区域中的较大的图像等、用于受理将图像的显示部分移动的指示的软键。
此外,通过操作检测控制的执行,主控制部501检测经由操作部540的用户操作,或经由操作面板522受理对于上述图标的操作或对于上述窗口的输入栏的字符串的输入,或者受理经由滚动条的显示图像的滚动请求。
进而,主控制部501具备通过操作检测控制的执行、判定对于操作面板522的操作位置是与显示面板521重叠的重叠部分(显示区域)还是其以外的与显示面板521不重叠的外缘部分(非显示区域)、对操作面板522的感应区域及软键的显示位置进行控制的操作面板控制功能。
此外,主控制部501还可以检测对操作面板522的手势操作,根据检测出的手势操作执行预先设定的功能。所谓手势操作,不是以往的单纯的接触操作,而是用手指等描绘轨迹或同时指定多个位置,或将它们组合而从多个位置对至少1个描绘轨迹的操作。
照相机部541是使用CMOS(Complementary Metal OxideSemiconductor、互补金属氧化物半导体)或CCD(Charge-Coupled Device、电荷耦合元件)等的摄像元件进行电子摄影的数字照相机。此外,照相机部541通过主控制部501的控制,能够将通过摄像得到的图像数据变换为例如JPEG(Joint Photographic coding Experts Group、联合图像专家小组)等的压缩的图像数据,记录至存储部550、或者经由外部输入输出部560或无线通信部510输出。在图12所示的智能电话500中,照相机部541搭载在与显示输入部520相同的表面上,但照相机部541的搭载位置并不限定于此。照相机部541也可以搭载在显示输入部520的背面上,或者也可以搭载多个照相机部541。另外,在搭载有多个照相机部541的情况下,也可以将供摄影的照相机部541切换而单独摄影、或同时使用多个照相机部541而摄影。
此外,照相机部541可以用于智能电话500的各种功能。例如,可以在显示面板521上显示由照相机部541取得的图像、或利用照相机部541的图像作为操作面板522的操作输入之一。此外,当GPS接收部570检测位置时,也可以参照来自照相机部541的图像检测位置。进而,也可以参照来自照相机部541的图像,不使用3轴的加速度传感器或与3轴的加速度传感器并用来判断智能电话500的照相机部541的光轴方向,或者判断当前的使用环境。当然,也可以将来自照相机部541的图像在应用软件内利用。
除此以外,也可以对静止图像或运动图像的图像数据附加由GPS接收部570取得的位置信息、由麦克风532取得的声音信息(也可以由主控制部501等进行声音文本变换而成为文本信息)、由运动传感器部580取得的姿势信息等并记录至存储部550,或者经由外部输入输出部560或无线通信部510输出。
另外,在上述实施方式中,数字照相机50及智能电话500的照相机部541具有动态范围扩大功能(宽动态范围合成功能),但也可以不具有该功能。对于由不具有动态范围扩大功能的摄像机构拍摄的图像,也能够采用本发明的BLD控制功能。
此外,本发明并不限定于上述实施方式,当然在不脱离本发明的主旨的范围内能够进行各种变形。
附图标记说明
1图像显示装置;10中央处理装置(CPU);12存储器;16 LCD显示部;16a LCD面板;16b背光单元;20影像信号生成部;22 LCD画质参数生成部;24 LCD控制部;26 LCD驱动部;28背光控制信号生成部;30 LED驱动器;32图像存储装置;34标签信息解析部。

Claims (10)

1.一种图像显示装置,其特征在于,具备:
图像取得机构,取得利用第1图像以及与上述第1图像相比以低感度或低曝光所拍摄的第2图像实施了动态范围扩大处理而得到的第3图像、或不伴随动态范围扩大处理的第4图像;
透射型显示面板,显示由上述图像取得机构所取得的第3图像或第4图像;
背光单元,配设于上述透射型显示面板的背面,能够按照每个划分的段将针对该透射型显示面板的背光进行亮度控制;
判别机构,判别由上述图像取得机构所取得的图像是上述第3图像还是第4图像;以及
控制机构,在根据上述判别机构的判别结果将由上述图像取得机构所取得的图像判别为上述第3图像时,控制上述背光单元,以使得该第3图像中的与通过上述动态范围扩大处理被抑制了的高亮度部相对应的段的背光亮度比与低亮度部相对应的段的背光亮度高。
2.如权利要求1所述的图像显示装置,其特征在于,
上述控制机构在根据上述判别机构的判别结果将由上述图像取得机构所取得的图像判别为上述第4图像时,控制上述背光单元,以使得全部段为各自相同的背光亮度。
3.如权利要求1或2所述的图像显示装置,其特征在于,
上述图像取得机构取得上述第3图像以及有关与该第3图像建立了关联的宽动态范围合成的合成信息;
上述判别机构基于取得的上述合成信息,判别由上述图像取得机构所取得的图像是上述第3图像还是第4图像。
4.如权利要求3所述的图像显示装置,其特征在于,
上述第3图像中,预先设定的阈值以下的低亮度部仅使用上述第1图像而生成,超过上述阈值的高亮度部至少使用上述第2图像而生成;
上述合成信息包括上述阈值。
5.如权利要求4所述的图像显示装置,其特征在于,
上述控制机构基于上述合成信息中所包含的阈值,将上述第3图像中的超过上述阈值的像素判别为高亮度部的像素。
6.如权利要求1~5中任一项所述的图像显示装置,其特征在于,
上述控制机构具有提取机构,该提取机构按照每个上述背光单元的段从上述第3图像中提取与各段对应的多个像素;
在判别为上述提取出的多个像素中的一定的比例以上的像素与上述高亮度部的像素相对应、或者判别为上述提取出的多个像素的平均值为与上述高亮度部相对应的亮度值的情况下,控制上述背光单元,以使得该段的背光亮度高。
7.如权利要求6所述的图像显示装置,其特征在于,
上述控制机构具有存储机构,该存储机构存储表示与上述背光单元的各段相对应的多个像素的代表亮度值与背光亮度之间的关系的表或计算式;
基于由上述提取机构所提取出的多个像素的代表亮度值以及上述存储机构中所存储的表或计算式来计算对应的背光亮度,基于按照每个上述背光单元的段所计算出的背光亮度来控制上述背光单元。
8.如权利要求7所述的图像显示装置,其特征在于,
上述图像取得机构取得上述第3图像以及有关与该第3图像建立了关联的宽动态范围合成的合成信息;
上述合成信息包括与上述第3图像的动态范围的宽度关联的信息;
上述存储机构存储与上述第3图像的动态范围的宽度相对应、且动态范围越宽则使背光亮度越高的表或计算式;
上述控制机构基于上述合成信息中所包含的与动态范围的宽度关联的信息,从上述存储机构取得对应的表或计算式,使用该表或计算式来计算上述背光亮度。
9.如权利要求6所述的图像显示装置,其特征在于,
上述图像取得机构取得上述第3图像以及与该第3图像建立了关联、且与上述第1图像与第3图像之间的色阶变换特性的差相对应的增益修正表;
上述控制机构基于上述取得的增益修正表以及与上述背光单元的各段相对应的多个像素的代表亮度值,按照每个段计算背光亮度。
10.一种图像显示方法,其特征在于,
包括:
图像取得工序,取得利用第1图像以及与上述第1图像相比以低感度或低曝光所摄像的第2图像实施了动态范围扩大处理的第3图像、或不伴随动态范围扩大处理的第4图像;
显示工序,使透射型显示面板显示通过上述图像取得工序所取得的第3图像或第4图像;
判别工序,判别通过上述图像取得工序所取得的图像是上述第3图像还是第4图像;以及
控制工序,控制背光单元,该背光单元配设于上述透射型显示面板的背面、能够将针对该透射型显示面板的背光按照每个划分的段进行亮度控制;
上述控制工序中,在根据上述判别工序的判别结果将由上述图像取得工序所取得的图像判别为上述第3图像时,控制上述背光单元,以使得该第3图像中的与通过上述动态范围扩大处理被抑制了的高亮度部相对应的段的背光亮度比与低亮度部相对应的段的背光亮度高。
CN201380015618.9A 2012-03-22 2013-03-12 图像显示装置及方法 Active CN104205204B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201511009825.0A CN105609035B (zh) 2012-03-22 2013-03-12 图像显示装置及方法

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012065738 2012-03-22
JP2012-065738 2012-03-22
PCT/JP2013/056732 WO2013141071A1 (ja) 2012-03-22 2013-03-12 画像表示装置及び方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201511009825.0A Division CN105609035B (zh) 2012-03-22 2013-03-12 图像显示装置及方法

Publications (2)

Publication Number Publication Date
CN104205204A true CN104205204A (zh) 2014-12-10
CN104205204B CN104205204B (zh) 2016-01-20

Family

ID=49222531

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201380015618.9A Active CN104205204B (zh) 2012-03-22 2013-03-12 图像显示装置及方法
CN201511009825.0A Active CN105609035B (zh) 2012-03-22 2013-03-12 图像显示装置及方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201511009825.0A Active CN105609035B (zh) 2012-03-22 2013-03-12 图像显示装置及方法

Country Status (4)

Country Link
US (2) US9117410B2 (zh)
JP (1) JP5683745B2 (zh)
CN (2) CN104205204B (zh)
WO (1) WO2013141071A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106683601A (zh) * 2015-11-10 2017-05-17 佳能株式会社 显示控制装置及其控制方法
CN107211097A (zh) * 2015-01-21 2017-09-26 奥林巴斯株式会社 摄像装置、摄像方法以及图像显示装置
CN112164007A (zh) * 2020-09-29 2021-01-01 Oppo广东移动通信有限公司 图像显示方法和装置、终端和可读存储介质
CN112825243A (zh) * 2019-11-21 2021-05-21 西安诺瓦星云科技股份有限公司 图像显示方法及装置、视频处理器和图像显示系统

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5498532B2 (ja) * 2012-05-23 2014-05-21 シャープ株式会社 映像表示装置
JP6786235B2 (ja) * 2015-08-26 2020-11-18 キヤノン株式会社 画像表示装置
US10192495B2 (en) * 2015-10-15 2019-01-29 Canon Kabushiki Kaisha Display apparatus with lighting device, control method for display apparatus, and storage medium
JP6957332B2 (ja) * 2017-01-17 2021-11-02 キヤノン株式会社 画像処理装置および画像処理方法
JP6755811B2 (ja) * 2017-02-07 2020-09-16 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
JP6545763B2 (ja) * 2017-09-08 2019-07-17 シャープ株式会社 画像処理装置、テレビジョン受像機、画像処理方法、制御プログラム、および記録媒体
JP2019053208A (ja) 2017-09-15 2019-04-04 キヤノン株式会社 表示装置及びその制御方法
US11170722B2 (en) * 2018-03-13 2021-11-09 Nippon Seiki Co., Ltd. Display device with a backlight
CN108520727B (zh) * 2018-03-28 2020-09-25 维沃移动通信有限公司 屏幕亮度调节方法及移动终端
KR102626767B1 (ko) * 2018-05-22 2024-01-17 소니그룹주식회사 화상 처리 장치, 표시 장치, 및 화상 처리 방법
CN110248098B (zh) * 2019-06-28 2021-08-24 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
WO2021140711A1 (ja) * 2020-01-09 2021-07-15 株式会社ソニー・インタラクティブエンタテインメント 表示制御装置、ヘッドマウントディスプレイ、および画像表示方法
CN111415629B (zh) * 2020-04-28 2022-02-22 Tcl华星光电技术有限公司 一种显示设备驱动方法、显示设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004328532A (ja) * 2003-04-25 2004-11-18 Konica Minolta Photo Imaging Inc 撮像装置、画像処理装置及び画像記録装置
WO2006082883A1 (ja) * 2005-02-03 2006-08-10 Nikon Corporation 表示装置、電子機器およびカメラ
CN101075420A (zh) * 2006-05-19 2007-11-21 株式会社东芝 图像显示装置和图像显示方法
JP2009063694A (ja) * 2007-09-05 2009-03-26 Seiko Epson Corp 画像処理装置、画像表示装置、画像処理方法及びプログラム
CN101635797A (zh) * 2008-07-23 2010-01-27 株式会社日立制作所 摄像装置
JP2010187300A (ja) * 2009-02-13 2010-08-26 Nikon Corp 画像生成装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2312380B1 (en) 2001-02-27 2020-11-18 Dolby Laboratories Licensing Corporation A method and device for displaying an image
US20080007574A1 (en) * 2006-07-05 2008-01-10 Fujifilm Corporation Image display method
JP2009002976A (ja) * 2007-06-19 2009-01-08 Renesas Technology Corp 表示駆動回路
JP2010097909A (ja) 2008-10-20 2010-04-30 Panasonic Corp バックライト及び液晶表示装置
JP4991949B1 (ja) * 2011-04-07 2012-08-08 シャープ株式会社 映像表示装置およびテレビ受信装置
JP2014036401A (ja) * 2012-08-10 2014-02-24 Sony Corp 撮像装置、画像信号処理方法及びプログラム
US8866928B2 (en) * 2012-12-18 2014-10-21 Google Inc. Determining exposure times using split paxels

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004328532A (ja) * 2003-04-25 2004-11-18 Konica Minolta Photo Imaging Inc 撮像装置、画像処理装置及び画像記録装置
WO2006082883A1 (ja) * 2005-02-03 2006-08-10 Nikon Corporation 表示装置、電子機器およびカメラ
CN101075420A (zh) * 2006-05-19 2007-11-21 株式会社东芝 图像显示装置和图像显示方法
JP2009063694A (ja) * 2007-09-05 2009-03-26 Seiko Epson Corp 画像処理装置、画像表示装置、画像処理方法及びプログラム
CN101635797A (zh) * 2008-07-23 2010-01-27 株式会社日立制作所 摄像装置
JP2010187300A (ja) * 2009-02-13 2010-08-26 Nikon Corp 画像生成装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107211097A (zh) * 2015-01-21 2017-09-26 奥林巴斯株式会社 摄像装置、摄像方法以及图像显示装置
CN106683601A (zh) * 2015-11-10 2017-05-17 佳能株式会社 显示控制装置及其控制方法
CN111312132A (zh) * 2015-11-10 2020-06-19 佳能株式会社 显示控制装置及其控制方法
CN111312133A (zh) * 2015-11-10 2020-06-19 佳能株式会社 显示控制装置及其控制方法
CN106683601B (zh) * 2015-11-10 2020-07-14 佳能株式会社 显示控制装置及其控制方法
CN111312132B (zh) * 2015-11-10 2023-08-22 佳能株式会社 显示控制装置及其控制方法
CN111312133B (zh) * 2015-11-10 2024-01-09 佳能株式会社 显示控制装置及其控制方法
CN112825243A (zh) * 2019-11-21 2021-05-21 西安诺瓦星云科技股份有限公司 图像显示方法及装置、视频处理器和图像显示系统
CN112164007A (zh) * 2020-09-29 2021-01-01 Oppo广东移动通信有限公司 图像显示方法和装置、终端和可读存储介质

Also Published As

Publication number Publication date
CN105609035B (zh) 2019-03-01
CN104205204B (zh) 2016-01-20
JP5683745B2 (ja) 2015-03-11
US20150332636A1 (en) 2015-11-19
CN105609035A (zh) 2016-05-25
US9536479B2 (en) 2017-01-03
JPWO2013141071A1 (ja) 2015-08-03
WO2013141071A1 (ja) 2013-09-26
US20150009246A1 (en) 2015-01-08
US9117410B2 (en) 2015-08-25

Similar Documents

Publication Publication Date Title
CN104205204B (zh) 图像显示装置及方法
JP6967160B2 (ja) 画像処理方法および関連デバイス
CN107431760B (zh) 摄像装置、摄像装置的图像处理方法以及存储介质
CN104272161B (zh) 摄像装置和对焦控制方法
CN106797453B (zh) 图像处理装置、摄像装置、图像处理方法以及图像处理程序
CN104995911B (zh) 图像处理装置、摄影装置、滤波器生成装置、图像复原方法以及程序
US10200663B2 (en) Image processing device, imaging device, image processing method, and program
CN104995912B (zh) 摄像装置、图像处理装置及图像处理方法
CN104205203B (zh) 图像显示装置、摄影装置、图像显示系统及方法
CN104380706B (zh) 图像处理装置、摄像装置、计算机及图像处理方法
CN105009563B (zh) 复原滤波器生成装置和方法、图像处理装置、摄像装置、复原滤波器生成程序以及记录介质
CN105075239B (zh) 复原滤波器生成装置以及方法、图像处理装置以及方法、摄像装置以及记录介质
CN104488019A (zh) 图像显示装置以及方法
CN104205804A (zh) 图像处理装置、拍摄装置、程序以及图像处理方法
CN104380727B (zh) 图像处理装置和图像处理方法
CN113973173B (zh) 图像合成方法和电子设备
CN106165409B (zh) 图像处理装置、摄像装置、图像处理方法及程序
CN104428815B (zh) 图像变形装置及其动作控制方法
CN106134189A (zh) 图像处理装置、摄像装置、图像处理方法及程序
CN104272732B (zh) 图像处理装置、方法及摄像装置
CN113810764B (zh) 视频编辑方法和视频编辑装置
CN104205827A (zh) 图像处理装置及方法、以及摄像装置
CN104247412B (zh) 图像处理装置、摄像装置、图像处理方法、记录介质以及程序
CN115631250B (zh) 图像处理方法与电子设备
CN110073656A (zh) 图像处理装置、摄像装置、图像处理方法及图像处理程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant