CN108810315B - 信息处理装置、图像处理系统、控制系统和信息处理方法 - Google Patents

信息处理装置、图像处理系统、控制系统和信息处理方法 Download PDF

Info

Publication number
CN108810315B
CN108810315B CN201810390473.5A CN201810390473A CN108810315B CN 108810315 B CN108810315 B CN 108810315B CN 201810390473 A CN201810390473 A CN 201810390473A CN 108810315 B CN108810315 B CN 108810315B
Authority
CN
China
Prior art keywords
image data
information
dynamic range
luminance
processing apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810390473.5A
Other languages
English (en)
Other versions
CN108810315A (zh
Inventor
和田聪
矢泽刚
吉泽慧
山本直实
鸟越真
今野裕司
田鹿博司
香川英嗣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to CN202110263261.2A priority Critical patent/CN112954131B/zh
Publication of CN108810315A publication Critical patent/CN108810315A/zh
Application granted granted Critical
Publication of CN108810315B publication Critical patent/CN108810315B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03GELECTROGRAPHY; ELECTROPHOTOGRAPHY; MAGNETOGRAPHY
    • G03G15/00Apparatus for electrographic processes using a charge pattern
    • G03G15/50Machine control of apparatus for electrographic processes using a charge pattern, e.g. regulating differents parts of the machine, multimode copiers, microprocessor control
    • G03G15/5029Machine control of apparatus for electrographic processes using a charge pattern, e.g. regulating differents parts of the machine, multimode copiers, microprocessor control by measuring the copy material characteristics, e.g. weight, thickness
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03GELECTROGRAPHY; ELECTROPHOTOGRAPHY; MAGNETOGRAPHY
    • G03G15/00Apparatus for electrographic processes using a charge pattern
    • G03G15/04Apparatus for electrographic processes using a charge pattern for exposing, i.e. imagewise exposure by optically projecting the original image on a photoconductive recording material
    • G03G15/043Apparatus for electrographic processes using a charge pattern for exposing, i.e. imagewise exposure by optically projecting the original image on a photoconductive recording material with means for controlling illumination or exposure
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03GELECTROGRAPHY; ELECTROPHOTOGRAPHY; MAGNETOGRAPHY
    • G03G15/00Apparatus for electrographic processes using a charge pattern
    • G03G15/50Machine control of apparatus for electrographic processes using a charge pattern, e.g. regulating differents parts of the machine, multimode copiers, microprocessor control
    • G03G15/5016User-machine interface; Display panels; Control console
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/23Reproducing arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/6002Corrections within particular colour systems
    • H04N1/6008Corrections within particular colour systems with primary colour signals, e.g. RGB or CMY(K)
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/603Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/6083Colour correction or control controlled by factors external to the apparatus
    • H04N1/6086Colour correction or control controlled by factors external to the apparatus by scene illuminant, i.e. conditions at the time of picture capture, e.g. flash, optical filter used, evening, cloud, daylight, artificial lighting, white point measurement, colour temperature
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/6083Colour correction or control controlled by factors external to the apparatus
    • H04N1/6088Colour correction or control controlled by factors external to the apparatus by viewing conditions, i.e. conditions at picture output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/28Indexing scheme for image data processing or generation, in general involving image processing hardware

Abstract

本发明提供一种信息处理装置、图像处理系统、控制系统和信息处理方法。信息处理装置被构造为确定用于用光照射打印物的照明条件。通过基于馈送的输入图像数据将图像输出到记录介质上来产生打印物。该信息处理装置包括:输入单元,其被构造为接收对输入图像数据的辉度动态范围信息的输入和对关于输入图像数据的在进行摄像时的曝光条件信息的输入;获取单元,其被构造为获取记录介质的特性信息;以及确定单元,其被构造为基于辉度动态范围信息、曝光条件信息和特性信息来确定照明条件。

Description

信息处理装置、图像处理系统、控制系统和信息处理方法
技术领域
本发明涉及一种用于确定用于照射输出有图像的打印物的照明条件的信息处理装置、图像处理系统、控制系统和信息处理方法。
背景技术
传统上,使用诸如喷墨方法、电子照相方法和热转印方法等的各种打印方法的图像处理装置(诸如数字复印机、打印机和传真机等)已被广泛使用。这些图像处理装置在使用装置内部配设的图像处理单元或该装置附带的软件(如果图像处理装置是打印机,则通常称为打印机驱动器)对输入图像数据进行图像处理之后,将图像打印到记录介质上以产生打印物。如上所述进行的图像处理是在假定在预定环境下观察打印物的情况下进行的。因此,在与假定环境不同的环境下,打印物可能无法以观察者期望的颜色显现。
现在将描述喷墨打印机情况下的具体示例。通常,对要由打印机输出的彩色图像进行了颜色设计,以使得该彩色图像能够匹配色域,例如在作为显示设备的阴极射线管(CRT)或液晶显示器上的、由国际标准定义的标准红色、绿色和蓝色(sRGB)。sRGB色域是在CRT等上的80cd/m2的辉度和5000K的色温的情况下定义的。在本公开中,假定希望在与80cd/m2的辉度等同的光的环境下观察由喷墨打印机用与该sRGB色域匹配的彩色图像打印的打印物。在下文中,将与80cd/m2的辉度和5000K的色温相对应的光称为“标准照明”。
由于这样的原因,当在具有明显偏离标准照明的辉度或色温的照明环境下观察打印物时,打印物可能被不希望地观察为与上述设计的期望颜色不同的颜色。为了解决这样的问题,提出了如下技术:即使在与上述的标准照明不同的观察环境下,也产生可被观察为与标准照明下相似的亮度和颜色的打印物。
日本特开第2012-044475号公报讨论了一种技术,该技术根据壁的辉度在黑色周围切换查找表,这是因为图像中的黑色区域由于与观察位置相对的壁的亮度(反射)而被无意地变得突出。此外,日本特开第2016-054356号公报讨论了,预先针对各种打印模式独立地测量和保持漫反射分量和镜面反射分量,并且根据壁的辉度预测黑色浓度或颜色饱和度的变化。然后,基于上述预测选择用于增加浓度或颜色饱和度的打印模式。
以这种方式,根据日本特开第2012-044475号公报和日本特开第2016-054356号公报,存在如下问题:黑暗部分的黑色浓度和颜色饱和度由于观察环境而无意地降低,并且打印物没有被观察为与在标准照明下观察时相似的亮度和颜色。这个问题可以通过选择打印模式或预先准备的多个查找表来改进。
如上所述,日本特开第2012-044475号公报和日本特开第2016-054356号公报讨论了用于对打印物进行打印的图像处理技术,使得即使在除标准照明以外的环境下,该打印物也能够被观察为与在标准照明下颜色和亮度相似的颜色和亮度。
另一方面,当具有宽的辉度动态范围的数据(例如,由数字照相机拍摄的RAW数据)作为输入图像数据输入到打印机时,输入图像数据经受这样的辉度转换处理:将图像数据压缩到打印机可以输出的辉度动态范围内。这意味着,在标准照明下,打印物被观察者在这样的辉度动态范围内观察,该辉度动态范围与打印物的辉度动态范围和照射打印物所用的标准照明的辉度动态范围的总和对应。然而,即使增加标准照明的辉度动态范围也不足以再现由输入图像数据(诸如RAW数据等)保持的宽辉度动态范围。
为了解决这样的问题,本发明的目的在于,在更宽的辉度范围内再现具有宽辉度动态范围的输入图像数据(诸如RAW数据等)。
发明内容
根据本发明的一个方面,一种信息处理装置被构造为确定用于用光照射打印物的照明条件,所述打印物是通过基于馈送的输入图像数据将图像输出到记录介质上而产生的,所述信息处理装置包括:输入单元,其被构造为接收对输入图像数据的辉度动态范围信息的输入和对关于输入图像数据的在进行摄像时的曝光条件信息的输入;获取单元,其被构造为获取记录介质的特性信息;以及确定单元,其被构造为基于辉度动态范围信息、曝光条件信息和特性信息来确定照明条件。
根据下面参照附图对示例性实施例的描述,本发明的其他特征将变得清楚。
附图说明
图1A是例示图像处理装置的构造的框图。图1B是例示图像输出装置的构造的框图。
图2例示了图像处理装置和图像输出装置的处理构造的示例。
图3A例示了图像处理过程。图3B例示了伽玛曲线的示例。
图4例示了有助于更好地理解的辉度动态范围的总体思想。
图5A和图5B各自例示了输入辉度范围和输出辉度范围之间的关系。
图6A和图6B各自例示了输入辉度范围和输出辉度范围之间的关系。
图7例示了呈现给用户的显示单元。
图8是例示根据第一示例性实施例的处理的流程的流程图。
图9例示了用于转换图像数据的处理。
图10A、图10B和图10C各自例示了控制照明条件的系统的构造的示例。
图11A是例示根据第三示例性实施例的处理的流程图。图11B是例示根据第二示例性实施例的处理的流程图。
图12是例示打印物和照明之间的位置关系的概念图。
图13例示了图像处理装置和图像输出装置的处理构造的示例。
图14例示了用户输入观察环境照明的画面的示例。
图15是例示根据第四示例性实施例的处理的流程图。
图16例示了用户构造设置的画面的示例。
图17例示了根据第五示例性实施例的转换处理和用于确定照明条件的方法。
图18例示了输入辉度范围和输出辉度范围之间的关系。
图19例示了输入辉度范围和输出辉度范围之间的关系。
图20例示了呈现给用户的画面的示例。
图21A和图21B例示了韦伯-费希纳定律。
图22例示了用于呈现照明条件的方法的示例。
具体实施方式
在以下描述中,将参照附图描述本发明的示例性实施例。在下面的描述中,坎德拉(cd/m2)将被用作光强度的单位,但光强度的单位不限于此,并且可以为此使用流明(lm)或勒克司(lx)。
图12是例示房间500的横截面的概念图。房间照明502安装在天花板501上。将由下面描述的喷墨式打印机输出的打印物504装饰在壁503上。房间照明502是对应于80cd/m2的辉度和5000K的色温的标准照明。在本公开中,假定由打印机输出的打印物为了在标准照明下被观察而经受了颜色设计。另一方面,如博物馆和摄影展中所见的,打印物504也可以结合房间照明502和辅助照明505来展示。图12中的虚线指示关于辅助照明505如何照射打印物504的总体思路。在这种情况下,使用上述专利文献即日本特开第2016-054356号公报讨论的技术,根据观察环境改变打印模式是有效的。
现在,将参照图4描述本示例性实施例的构造。如图4所示,通常,从诸如照相机等的摄像单元输入的输入图像数据的辉度动态范围,比打印物+具有固定照度的照明的辉度动态范围宽。在这种情况下,使输入图像数据经受用于根据作为不发光物体的记录介质(例如纸张)的辉度范围来降低辉度范围的处理。另一方面,本示例性实施例旨在通过调节照明条件(例如使用辅助照明),来根据打印物+具有可变照度的照明的辉度动态范围再现输入图像数据的辉度动态范围。
图1A例示了根据本示例性实施例的用作图像处理装置100的信息处理装置的构造的示例。中央处理单元(CPU)104使用随机存取存储器(RAM)106作为工作存储器,执行存储在只读存储器(ROM)105和存储单元103中的操作系统(OS)和各种程序,由此经由系统总线109来控制将在下面描述的构造。
输入单元101是串行总线接口,例如,通用串行总线(USB)。然后,诸如键盘和鼠标的输入设备,以及诸如存储卡读取器、数字照相机和扫描器等的图像输入设备,连接到输入单元101。CPU 104经由输入单元101输入用户指令、图像数据等,并且在作为监视器的显示单元102上显示图形用户界面(GUI)、图像、处理进程、结果等。
存储单元103是存储有各种程序和各种数据的记录介质,例如硬盘驱动器(HDD)和固态驱动器(SSD)。存储在存储单元103中的程序包括用于实现将在下面描述的图像处理的程序。
通信单元107是用于连接到诸如以太网(注册商标)、蓝牙(注册商标)、无线保真(Wi-Fi)和对等(P2P)等的有线或无线网络110的网络接口。输出单元108是诸如USB的串行总线接口,并且将图像数据等输出到连接到串行总线的图像输出装置111或存储卡写入器。
CPU 104经由通信单元107与网络110中的服务器装置和其他计算机装置进行通信。CPU 104可以从网络110中的服务器装置、其他计算机装置等接收各种程序和数据来进行处理,并且将处理结果的数据提供给网络110中的服务器装置或其他计算机装置。CPU104可以经由通信单元107进行通信的计算机装置还包括图像输出装置111,并且,CPU 104也可以将图像数据输出到图像输出装置111。
图像处理装置100通过将用于实现以下将描述的图像处理的程序供给到诸如个人计算机、平板电脑和智能电话等的计算机装置来实现。在平板电脑或智能电话被用作图像处理装置100的情况下,输入单元101和显示单元102可以通过彼此堆叠而被构造为触摸面板。
图1B是例示假定喷墨式打印机被用作图像输出装置111时的构造的示例的框图。控制单元120包括诸如微处理器等的CPU 120a和RAM120b、ROM 120c等作为存储器。例如,RAM 120b在用作CPU 120a的工作区域的同时,在其中暂时存储各种数据,例如,从图像处理装置100接收的图像数据和生成的记录数据。ROM 120c存储有CPU 120a的控制程序和各种数据,例如记录操作所需的参数。
控制单元120进行如下处理:经由接口121在图像输出装置111和图像处理装置100之间输入/输出记录图像数据等所使用的数据和参数。此外,控制单元120进行用于从操作面板122接收诸如字符间距和字符类型等的各种信息的输入的处理。此外,控制单元120经由接口121从驱动器126输出用于驱动滑架电机123和传送电机124的ON(开)信号或OFF(关)信号。此外,控制单元120将排出信号等输出到驱动器127,由此控制驱动以从记录头125排出墨。控制单元120读出存储在RAM120b中的程序,由此实现上述处理过程中的各个处理过程。
图1A和图1B例示图像处理装置100和图像输出装置111被构造为彼此不同的装置的图像处理系统的示例,但是本示例性实施例的应用不限于上述构造。本示例性实施例可以应用于图像处理装置100和图像输出装置111被构造为集成装置的图像形成装置。例如,本示例性实施例可以应用于将图像输出装置111的构造引入到图像处理装置100中,并且将打印机控制为所谓的打印机驱动器软件的系统。此外,本示例性实施例也可以应用于例如包括图像读取设备的图像复印装置。
图2是例示图1A和图1B所示的图像处理装置100和图像输出装置111的处理构造的示例的框图。图1A和图1B所示的处理构造通过将用于实现该处理构造的程序及其功能供给到图像处理装置100和图像输出装置111并执行该程序来实现。
图像数据经由图像数据输入单元201从数字照相机等输入,并且同时,诸如摄像时的信息(例如,曝光条件信息和辉度动态范围信息)的图像数据信息经由图像数据信息输入单元202输入。打印辉度确定单元203从输入图像数据和图像数据信息中产生用于打印图像数据的打印数据(输出辉度数据)。所生成的打印数据被发送到图像输出装置111中的打印处理单元204。然后,在打印数据经过图像输出装置111中的各个处理过程之后,输出打印物。
另一方面,图像输出装置111的记录介质特性获取单元205通过用户选择要使用的记录介质,预先从数据库化的数据中获取指示记录介质的特性的特性信息。然后,所获取的记录介质的特性数据被发送到图像处理装置100的照明条件确定单元206。照明条件确定单元206基于输入图像数据的辉度动态范围与由打印辉度确定单元203计算的打印数据的辉度动态范围之间的差、以及记录介质的特性数据,来确定所需的照明条件。下面将详细描述用于确定该照明条件的方法。然后,照明条件呈现单元207将所确定的照明条件呈现给用户。
图3A例示了当图像输出装置111被假定为喷墨式打印机时用于将彩色输入图像数据输出到记录介质上的图像处理。图像输出装置111的打印处理单元204接收红色(R)、绿色(G)和蓝色(B)中的各个颜色的8位的图像数据(辉度数据),即,由诸如联合图像专家组(JPEG)的常用图像文件保持的各个颜色的256个色调。在图像数据经受了多个处理过程之后,图像输出装置111最终输出1位的位图像数据(记录数据),该位图像数据针对黑色(K)、青色(C)、品红色(M)和黄色(Y)中的各个颜色,指示是否排出墨滴。在下面的描述中,将描述这些处理过程。
首先,图像处理装置100从数字照相机等接收针对R、G和B颜色中的各个颜色的、由8位辉度信号表示的输入图像数据。然后,图像处理装置100对接收到的R、G和B的辉度信号数据进行预颜色空间转换处理301。在本示例中,图像处理装置100使用三维查找表(LUT)将辉度信号数据转换为各个颜色的8位或10位R'、G'和B'数据。进行该预颜色空间转换处理301以校正由输入的R、G和B图像数据表示的颜色空间与图像输出装置111可再现的颜色空间之间的差异。更具体地,该处理被称为色域(域)映射处理,并且实施从RGB到XYZ的转换(作为颜色空间转换),然后实施从XYZ到R'G'B'的转换,由此由输入数据保持的色域被转换成打印机可再现的色域。在该处理中,由输入数据保持的辉度范围,即XYZ数据中的Y分量,被转换为由图像输出装置111可再现的辉度范围。结果,由图像输出装置111可表示的辉度范围与标准照明下的打印物的辉度范围相对应。下面将详细描述该辉度范围。
接下来,R'、G'和B'颜色中的各个颜色的数据在与从图像处理装置100发送到图像输出装置111的同时经受了预颜色空间转换处理301和辉度转换处理。图像输出装置111使用三维LUT进行颜色转换处理302,用于将经受了预颜色空间转换处理301的R'、G'和B'颜色中的各个颜色的数据转换成K、C、M和Y颜色中的各个颜色的10位数据。在颜色转换处理302中,作为颜色转换,由辉度信号表示的输入系统的RGB系统图像数据被转换为与由图像输出装置111使用的K、C、M和Y中的各个的墨相对应的墨颜色数据。
接下来,使用与各个颜色相对应的一维LUT,对于经受了颜色转换处理302的K、C、M和Y颜色中的各个颜色的10位墨颜色数据进行输出γ处理303。图3B例示了在输出γ处理303中使用的伽玛曲线(S形γ)的示例。通常,不建立线性关系作为如下关系:记录介质的每单位面积供给的墨滴(点)的数量与诸如通过测量记录图像而获取的反射浓度的记录特性之间的关系。因此,应该校正四种颜色中的各个颜色的输入色调级别,以便建立K、C、M和Y颜色中的各个的10位输入色调级别与根据此记录的图像的浓度级别之间的线性关系。换句话说,γ处理的目的在于当由图像输出装置111输出打印物时进一步精确地再现输入图像数据。通常,即使输入图像数据通过线性处理被处理并由图像输出装置111在该状态下输出,由于记录介质的特性,打印物的结果与输入图像之间也不建立线性关系。这样提高了预先测量要使用的记录介质的特性并设计伽玛曲线(使得输入和输出之间可以具有更线性的关系)的必要性。
返回参照图3A,对经受了输出γ处理303的墨颜色数据进行诸如抖动或误差扩散处理(ED)的量化处理304。更具体地,墨颜色数据从针对K、C、M和Y颜色中的各个颜色的10位数据被转换成指示是排出还是不排出墨滴的、针对各个颜色的1位二进制数据。基于转换后的二值数据将墨滴从记录头125排出,并输出打印物。
接下来,将参照图5A描述与预颜色空间转换处理301同时进行的辉度转换处理中的输入辉度范围和输出辉度范围之间的关系。图5A例示了在将输入辉度范围线性转换为输出辉度范围的理想示例的情况下的关系。如果打印物的输出辉度范围可以充分表达输入数据的辉度范围,则可以只通过将输入转换为输出来适当地实现转换,以便产生相对于输入为线性的输出,如由图5A中的实线1001所示。然而,通常,在标准照明下,通过打印在非发光物体(诸如纸张等)上的打印物可表达的辉度范围比输入辉度范围窄。纸张上的输出辉度,即纸白上的最大辉度,由在观察该打印物的环境下照射打印物的照明强度确定。通常,在喷墨式打印机中采用的颜色设计是sRGB颜色空间的情况下,假定辉度动态范围为0至80cd/m2来进行转换处理。因此,如果输入图像数据的辉度范围落入0至80cd/m2的范围内,则使输入图像数据经受这类处理,使得辉度范围不会由此改变。然而,对于辉度范围超过这个范围的输入图像数据,应该进行转换处理,以便使输入图像数据可以落在输出侧(即在记录介质上)可表达的辉度动态范围的范围内。
图5B例示了通常处理,即,当打印物被打印在诸如纸张的记录介质上时,假定在标准照明下观察打印物而实际进行的转换处理。图5B例示了指示用于通过喷墨式打印机输出辉度动态范围为0至200%的输入图像数据的辉度转换(伽玛曲线)的示例。在这种情况下,进行如实线1003那样弯曲的转换处理,而不是像虚线1002那样的线性转换。
当图像被输出在作为非发光物体的诸如纸张的等记录介质上时,反射率的最大值为100%。在本示例中,光泽纸的白色背景上的辉度(以下称为纸白区域)被假定为对应于100%的反射率,并且在上述sRGB颜色空间的情况下被定义为80cd/m2。因此,光泽纸的纸白区域上的辉度80cd/m2对应于100%的反射率。在假定在标准照明下观察打印物而建立的通常处理中,具有0至200%的动态范围的输入图像数据如实线1003所示被转换。通常,作为接近人体肤色的反射率的所谓的18%灰度反射率(gray reflectance),维持与输入图像数据的辉度类似的输出辉度。因此,通常使用的伽玛曲线被设计为使得实线1003与虚线1002交叠的范围为0至18%,如图5B所示。此外,可以根据设计者的意图改变曲线的形状。
[处理方法]
接下来,将描述图像处理装置100中的打印辉度确定单元203的特定数据处理方法。如上所述,本示例性实施例旨在通过主动地控制当观察打印物时的照明条件来再现摄像场景,即再现记录介质上的输入图像数据的辉度动态范围。因此,本示例性实施例在如下假设下被构建:输入图像的辉度动态范围比在用辉度为80cd/m2的标准光源照射打印物时的动态范围宽。
在本示例性实施例中,输入到图像处理装置100的图像数据输入单元201的图像数据是通过对由最近的数字照相机等处理的RAW数据进行线性显影而生成的RGB数据。RAW数据是在数据经受各种处理并在照相机内被转换为JPEG数据之前的处于未处理状态的图像数据。此外,RAW数据的辉度动态范围比JPEG数据的辉度动态范围宽。诸如曝光条件等的RAW数据的摄像信息随着RAW数据被输入到图像数据输入单元201而被输入到图像数据信息输入单元202。该信息可以被接收为数字照相机的可交换图像文件格式(Exif)数据。Exif数据包括图像数据的动态范围和摄像时的曝光状态,即所谓的曝光补偿值。在本示例性实施例中,假定图像数据具有负值作为曝光补偿值,即假定为曝光不足的图像数据。
如上所述,打印辉度确定单元203将作为输入图像数据的RGB辉度数据从RGB转换为XYZ,并进一步将图像数据从XYZ转换为R'G'B',从而确定各个像素的像素值。
图6A和图6B各自例示了根据本示例性实施例的辉度转换处理中的输入辉度动态范围和输出辉度动态范围之间的关系。首先,假定输入到图像数据信息输入单元202的信息是例如具有0到200%的动态范围的RAW图像数据和表示曝光补偿值=-1(即,一次曝光值的曝光不足)的信息,将描述在这种情况下的关系。现在,如果在将曝光补偿值设置为-1的情况下拍摄图像,则在数字照相机侧对输出辉度进行转换,以在正确曝光的情况下(即,在曝光补偿值为0的情况下)匹配输入辉度的一半。然后,转换后的数据被输入到打印机。此时输入的数据是以输入辉度动态范围中的200%处的辉度值减少一半的方式转换的数据,如图6A中的虚线1004所示。换句话说,输出辉度动态范围落在100%以内。
类似地,如果输入图像数据是具有0至400%的动态范围的RAW图像数据并且在将曝光补偿值设置为-2的情况下拍摄,则在数字照相机侧对输出辉度进行转换以匹配输入辉度的四分之一。然后,转换后的数据被输入到打印机。此时输入的数据是以输入辉度动态范围中的400%处的辉度值减少为四分之一的方式转换的数据,如图6A中的虚线1005所示。在这种情况下,输出动态范围也落在100%以内。
因此,在上述两个示例中的任何一个的情况下,输出辉度被以落入0至100%的范围内的方式转换,并且是在打印机侧可再现的辉度,使得辉度值不必比此更窄。
另一方面,如果输入图像数据是具有0至400%的辉度动态范围的RAW图像数据并且是指示曝光补偿值=-1(即,一次曝光值的曝光不足)的信息,则输入数据是400%的辉度值被转换成一半的数据。在这种情况下,输出辉度动态范围超过了打印机侧可再现的辉度值范围。因此,输出辉度应该被以落入打印机可再现的0到100%的范围内的方式转换。图6B中的虚线1007指示在打印机侧转换后的数据。
在根据本示例性实施例的构造中,通过使用辅助照明以高于标准照明(假定提供80cd/m2的辉度)的照度的光来照射打印物。通过该照射,图6A中的虚线1004和虚线1005所示的辉度升高到实线1006所示的辉度,并且,图6B中的虚线1007所示的辉度升高到由实线1008所示的辉度。因此,在虚线1004、虚线1005和虚线1007中的任何一个的情况下,当在标准照明下观察记录介质上输出的打印物时,该打印物与如图5B所示的通过通常处理所输出的打印物相比,显现为非常暗的图像。
以上述方式,图像处理装置100接收在诸如数字照相机的摄像设备侧上线性显影的RAW数据,以及作为RAW数据的摄像时的信息的、指示辉度动态范围和负曝光补偿值(曝光条件)的信息。然后,图像处理装置100基于接收到的信息进行用于将图像数据转换为图像输出装置111可表达的辉度动态范围的处理。在本示例性实施例中使用RAW数据是因为可以对RAW数据进行线性处理,而且,即使当打印物被辅助照明照射时RAW数据也维持18%的灰度图像,从而使得摄像场景的图像能够在正确的曝光下被再现。此外,RAW数据包含12位到16位大的、针对一个像素的色调数量,因此具有使得能够以平滑渐变的方式获取图像并即使在经受了图像处理之后也减少图像质量劣化的优点。
接下来,将描述针对各种类型的记录介质的处理。如上所述,假定光泽纸的纸白区域上的反射率和辉度值分别为100%和80cd/m2。然而,取决于所用记录介质的表面状况,记录介质具有比光泽纸低的反射率,因此在具有100%反射率的纸白区域上,辉度值也低于80cd/m2。其示例包括光泽度较低的无光泽纸和普通纸。然后,在本示例性实施例中,假定无光泽纸的纸白区域上的辉度值是60cd/m2,并且普通纸的纸白区域上的辉度值是40cd/m2。辅助照明的所需强度取决于记录介质上的辉度而不同,以补偿与输入图像数据的辉度动态范围相对应的不足。这种差异可以通过以下方式来处理:预先针对各种类型的记录介质在诸如ROM等的存储单元中,保存指示应该使用什么样的条件进行转换的数据,并且在选择要使用的记录介质时获取对应的数据。
[用于确定照明条件的方法]
接下来,将描述用于确定照明条件的方法。如上所述,由图像输出装置111打印的打印物具有比输入图像数据更窄的辉度动态范围,因此在标准照明下显现为暗图像。为了解决这个问题,除了标准照明以外,本示例性实施例还使用辅助照明来再现基本上等同于输入图像数据的辉度动态范围的辉度范围。
现在,假定用80cd/m2的标准照明照射光泽纸上的打印物。当输入图像数据的辉度动态范围为0至200%时,如果打印物的纸白区域具有两倍于80cd/m2的辉度,即160cd/m2的辉度,则可以再现最大值为200%的辉度动态范围。本示例性实施例在如下假设下被构造:以80cd/m2的标准照明照射打印物,因此使用辅助照明来以对应于不足的80cd/m2照射打印物。由于该照射,如图6A中的实线1006所示,要观察的打印物的输出辉度动态范围升高。类似地,当输入图像数据的辉度动态范围为0至400%时,如果打印物的纸白区域具有四倍于80cd/m2的辉度,即320cd/m2的辉度,则可以再现最大值为400%的辉度动态范围。因此,通过使用辅助照明,以对应于不足的240cd/m2照射打印物,如实线1006所示,要观察的输出辉度动态范围升高。
类似地,假定当在无光泽纸上输出相同的输入图像时,标准照明下纸白区域上的辉度,即与100%的反射率对应的辉度为60cd/m2。那么,使用240cd/m2来再现由输入图像数据保持的0至400%的辉度动态范围。因此,图像处理装置100向用户呈现照明条件,从而提示用户通过使用辅助照明以与不足相对应的240-60=180cd/m2照射打印物。类似地,假定当在普通纸上输出相同的输入图像时,标准照明下纸白区域上的辉度,即与100%的反射率对应的辉度为40cd/m2。那么,使用160cd/m2来再现由输入图像数据保持的0至400%的辉度动态范围。因此,图像处理装置100向用户呈现照明条件,从而提示用户通过使用辅助照明以与不足相对应的160-40=120cd/m2照射打印物。在这种情况下确定的照明条件是记录介质的纸白区域上的辉度不足。换句话说,该照明条件意味着纸白区域上的辉度的不足是该值,并通知用户用辅助照明照射打印物以补偿该不足的辉度。上述处理由参照图1A描述的CPU 104进行。
原则上假定辅助照明的波长带基本上等同于标准照明,因此照射纸白区域的光的强度可以被认为是标准照明和辅助照明的总和。此外,在本示例性实施例中,除了作为观察环境照明的标准照明之外,还使用具有可变照度的辅助照明作为用于控制照射打印物的照明条件的方法。本示例性实施例可以被构造为使用具有可变照度的一个或多个照明源,或者可以被构造为仅使用具有可变照度的照明而不使用标准照明。即使在这种情况下,也通过类似的方法计算照明条件。
[呈现照明条件的方法]
通过上述用于确定照明条件的方法而计算出的辅助照明的辉度值被呈现给用户(操作者)。图7例示了图1A所示的显示单元102上显示的辅助照明条件的示例。
将参照图8中所示的流程图来描述到目前为止描述的数据处理的流程。首先,在步骤S101中,图像处理装置100分析输入图像数据(RAW数据)和作为摄像时的信息的输入图像数据信息。此时所需的输入图像数据信息是“指示辉度动态范围的信息”和“摄像时的曝光信息(曝光补偿值)”。接下来,在步骤S102中,图像输出装置111获取图像输出装置111在打印中要使用的记录介质的特性。这是由图2所示的记录介质特性获取单元205获取的信息,该信息被从预先测量的数据中选择并存储在诸如ROM 120c的存储单元中。在本示例性实施例中,该信息是要在打印中使用的记录介质的纸白区域上的辉度值。在步骤S103中,图像处理装置100将输入图像数据的辉度值转换为打印辉度值。在本示例性实施例中,图像处理装置100将线性显影的曝光不足图像转换为,与参照图6A和图6B所述的0至100%的反射率相对应的辉度范围中的数据。在步骤S104中,图像处理装置100确定用于将在步骤S103中转换的辉度范围返回到由输入图像数据原始保持的辉度范围的照明条件,即,再现输入图像数据的辉度范围所需的照明条件。然后,图像处理装置100将所确定的照明条件呈现给用户。最后,在步骤S105中,图像输出装置111基于经受了上述处理的记录数据从记录头125排出墨,从而产生打印物。
通过上述处理,在本示例性实施例中,图像处理装置100基于指示输入图像数据的辉度动态范围的信息和关于曝光条件的信息,计算应该照射由图像输出装置111(诸如打印机)输出的打印物的照明条件。结果,本示例性实施例使得能够在比打印物的辉度动态范围宽的、输入图像数据的辉度动态范围内再现图像。
对RAW图像进行的转换处理不限于线性转换。可以进行如图9中的虚线1009所示的施加轻微伽玛曲线的转换处理。通过该处理,打印物的辉度如实线1010所示升高。如上所述,在0至18%的范围内实施线性转换以维持18%的灰度反射率,并且,在辉度范围比这高的、在不控制照射打印物的照明的所谓通常处理高中,进行应用了伽玛曲线的转换处理。另一方面,由于本示例性实施例是通过假定通过控制照明来提高输出辉度范围来构造的,所以在0至18%的范围内进行与实施上述线性转换时相比导致辉度降低的处理,即,导致产生较暗图像作为图像的处理。
在第一示例性实施例中,图像处理装置100被构造为向用户(操作者)呈现最佳照明条件并且使用户基于所呈现的条件来调节照明,但是本发明不限于此方法。将描述第二示例性实施例作为控制系统的示例,该控制系统基于由上述方法确定的照明条件自动调节展示打印物的照明装置侧上的照明条件。
图10A至图10C各自是例示其示例的构造图。图10A所示的示例是以下机制。在展示照明装置400上的预定位置处展示打印物401。然后,将由上述方法确定的辅助照明条件从控制个人计算机(PC)403发送到展示照明装置400,并且用来自照明402的设定光照射打印物401。图中的虚线表示关于从照明402向打印物401发射光的总体思路。除了使用控制PC403改变照明条件的方法之外,照明条件的调节还可以通过将照明条件写入诸如安全数字(SD)卡的便携式存储器中并且给展示照明装置400侧配备读出该照明条件的功能来实现。
图10B例示了这样的系统,其中,多个展示照明装置经由诸如Wi-Fi的无线通信连接到中央控制PC 410,并且,从控制PC 410设置在各个照明装置上展示的打印物所需的照明条件。另外,图10C例示以下系统。指示符号化照明条件(如所谓的条形码)的加密码420被打印在打印物本身上。然后,当打印物安装在展示照明装置上时,内置在展示照明装置中的读取设备读出加密码,并自动调节照明条件。理想的是,打印物上的加密码以使用透明墨等防止被容易地视觉识别的方式打印。
第三示例性实施例是用于在高动态范围(HDR)中表达打印物以应对照相机、液晶电视等的显示设备开始支持HDR的当前趋势的措施。换句话说,作为打印的展示品的HDR中的打印物的表达是通过如下来实现的:组合作为辅助方法的照明,以便在作为非发光介质的纸张上的打印物上再现由输入图像数据保持的宽辉度动态范围。然后,将描述第三示例性实施例作为这样的示例,其中,图像处理装置切换在通过使用辅助照明等的调节方式在HDR中表达打印物的情况下的操作以及在如传统技术一样仅利用标准照明的情况下的操作。
图11A是例示根据本示例性实施例的处理的流程图,并且是将步骤S106和S107添加到图8所示的上述流程图的流程图。步骤S101和S102类似于图8。在步骤S106中,图像处理装置基于步骤S101中的分析结果来确定输入图像数据是否是应该进行HDR图像处理的数据。如果确认图像是线性显影的RAW数据并且是在曝光不足条件(即在步骤S101中的输入图像数据的分析中曝光补偿值为负值)下拍摄的图像,则图像处理装置将HDR处理执行标志设置为ON。另一方面,如果输入图像数据是正常JPEG数据,则图像处理装置将HDR处理执行标志设置为OFF。图像处理装置基于在该步骤(步骤S106)中设置的HDR处理执行标志来确定是否进行HDR图像处理。在执行标志被设置为ON的情况下(步骤S106中为“是”),在步骤S103中,图像处理装置进行与第一示例性实施例类似的图像处理(以下称为图像处理A)。在执行标志被设置为OFF的情况下,即,不需要HDR图像处理的情况下(在步骤S106中为“否”),处理进行到步骤S107,其中图像处理装置进行参照图5B描述的传统图像处理(以下称为图像处理B)。在步骤S103中进行图像处理A的情况下,执行调节照明条件,使得在步骤S104中,图像处理装置确定照明条件并将所确定的照明条件呈现给用户。在步骤S105中,图像输出装置基于经受了图像处理A和图像处理B中的任何一种的图像数据将图像输出到用户指定的记录介质上,从而产生打印物。
图11B是与在第二示例性实施例中描述的展示照明装置相对应的处理的流程图,并且图11A中的步骤S104被步骤S108替代。该处理是用于将指示照明条件的加密数据嵌入经受了需要调节照明条件的图像处理A的图像数据中的处理。在步骤S105中,图像输出装置的图像数据(该图像数据将照明条件作为加密数据嵌入其中)输出到记录介质上,从而产生打印物。
以上述方式,在本示例性实施例中,图像处理装置基于输入图像数据自动确定是否应该进行HDR处理。
在上述示例性实施例中,假定在80cd/m2的标准照明下观察打印物的情况下,调节照明条件。另一方面,在第四示例性实施例中,用户测量并获取观察打印物的观察环境的照明条件。然后,图像处理装置利用所获取的观察环境的照明条件来呈现实际上应该照射打印物的照明条件。
图13是例示根据本示例性实施例的图像处理装置100和图像输出装置111的处理构造的示例的框图。主要构造与图2类似,但图像处理装置100在本图中还包括观察条件获取单元208。用户通过预定方法测量用户观察打印物的环境的亮度,并且观察条件获取单元208获取作为该测量结果的观察环境照明的值。图14例示了用户输入作为测量结果的观察环境照明的值的画面的示例。用户测量观察环境照明的方法可以是使用专用照度计的测量,或者可以是使用作为智能电话的免费应用提供的智能电话照相机的、照度的简化测量。
然后,照明条件确定单元206计算照明条件,并且照明条件呈现单元207将该计算的结果呈现给用户。在本示例中,基于输入图像数据的辉度动态范围与打印数据的辉度动态范围之间的差、记录介质的特性数据以及由观察条件获取单元208获取的观察环境照明的值,来计算照明条件。例如,如果从用户获取的观察环境照明的值是70cd/m2,并且再现输入辉度动态范围所需的照明条件是320cd/m2,则呈现320-70=250cd/m2作为所需的照明条件。
图15是例示根据本示例性实施例的处理过程的流程图。除了步骤S109之外,该处理与根据第一示例性实施例参照图8描述的处理类似。在步骤S101中,图像处理装置100分析输入图像数据信息。在步骤S102中,图像输出装置111获取记录介质的特性。接下来,在步骤S109中,图像处理装置100获取观察环境照明条件。更具体地,观察环境照明条件是指示由图13所示的观察条件获取单元208获取的观察环境照明条件的亮度的信息。
以上述方式,在本示例性实施例中,图像处理装置100包括从用户获取观察环境的照明条件的获取单元,并且,图像处理装置100基于所获取的值确定照射打印物的照明条件。该构造使得图像处理装置100可以确定对于用户的观察环境最佳的照明条件。
在第五示例性实施例中,用户输入可设置为辅助照明的上限值,该辅助照明连同观察打印物的观察环境的照明的亮度一起照射打印物。然后,第五示例性实施例的特征在于,如果基于输入图像数据计算的辅助照明的值超过从用户获取的上限值,则使输入图像数据在不进行线性转换的情况下根据照明条件的上限值而经受伽玛处理。
图16例示了根据本示例性实施例的用户构造设置的画面的示例。在本示例中,用户在设置第四示例性实施例中已经描述的用户所测量的观察环境的照明的亮度的同时,指定用户要使用的辅助照明能够照射打印物的亮度的上限值。在本示例性实施例中,将描述在辅助照明的上限值为160cd/m2的情况下的操作。
将参照图17描述根据本示例性实施例的转换处理和用于确定照明条件的方法。如果输入图像数据具有0至200%的辉度动态范围并且是以设定为-1的曝光补偿值(一次曝光值的曝光不足)拍摄的RAW图像数据,则除了作为观察环境的亮度的80cd/m2之外,还应该使用80cd/m2作为辅助照明照射打印物。由于辅助照明的上限值为160cd/m2,所以打印物可以用80cd/m2照射。因此,如虚线1701所示进行转换处理,并且向用户呈现照明条件,以提示用户以80cd/m2作为辅助照明照射打印物。结果,如图17中的实线1702所示,可以在由输入数据保持的0至200%的辉度动态范围内再现线性显影的图像。
类似地,假定输入图像数据具有0至400%的辉度动态范围并且是以设置为-2的曝光补偿值(两次曝光值的曝光不足)拍摄的RAW图像数据,现在将描述在这种情况下的操作。如果除了作为观察环境的亮度的80cd/m2外还可以用240cd/m2作为辅助照明照射打印物,则可以在由输入数据保持的0至400%的辉度动态范围内再现线性显影的图像。然而,辅助照明最多只能以160cd/m2的上限值照射打印物。在这种情况下,通过以作为观察环境的亮度的80cd/m2和作为辅助照明的上限的160cd/m2照射打印物,在可能的范围内再现输入辉度动态范围。在本示例中,如图中虚线1703所示,对辉度动态范围为0至400%的输入图像数据应用伽玛。这是用于根据总共为240cd/m2的亮度将输出辉度动态范围调节为0至300%的处理,并且可以提高用总共为240cd/m2的照明照射的打印物的辉度范围,如实线1704所示。如图16所示,向用户呈现条件以提示用户设置作为辅助照明的亮度的上限值的160cd/m2
在任何上述情况下,与上述示例性实施例类似,在辉度为0至18%的范围内进行导致与在进行线性转换时相比辉度降低的转换处理。
在上述示例性实施例中,假定调节了观察环境的照明条件的情况下,对输入图像数据进行转换处理,但是第六示例性实施例将被描述为在调节照明条件时和在没有调节观察环境的照明条件的情况下观察图像时都支持的情况。更具体地,如果观察环境的照明的亮度比预定亮度暗,则对输入图像数据进行线性显影,并且,如果观察环境的照明的亮度是预定的亮度或更亮,则在对输入图像数据应用伽玛的同时对其进行显影。
图18例示当在标准照明被设置为0cd/m2(即,在完全黑暗的房间中)的情况下仅用辅助照明照射打印物时的辉度动态范围之间的关系。在这种情况下,在没有辅助照明的情况下不能观察图像,这基本上排除了打印物仅用标准照明进行照射的可能性。如果输入图像数据具有0至200%的辉度动态范围并且曝光补偿值为-1,则对输入图像数据进行如虚线1801那样的转换处理。然后,由于以被设置为160cd/m2的辅助照明照射打印物,辉度范围如实线1803所示那样升高。
类似地,如果输入图像数据具有0至400%的辉度动态范围并且曝光补偿值为-2,则对输入图像数据进行如虚线1802那样的转换处理。然后,由于以被设置为320cd/m2的辅助照明照射打印物,辉度范围如实线1803所示那样升高。
另一方面,将描述在不调节照明条件的情况下可以观察图像的情况下的操作。现在,假定与第一示例性实施例类似,标准照明的亮度是80cd/m2。本示例性实施例旨在通过根据输入图像数据的辉度动态范围添加辅助照明来再现具有高动态范围的图像,但是同时可能的情况包括缺少辅助照明的照射,即,即使在仅用标准照明照射图像时也观察图像。如上所述,线性显影的图像在标准照明下被观察为比在如下假设下应用伽玛时显影的图像暗的图像:在标准照明下观察图像。因此,在本示例性实施例中,如果标准照明等于或大于80cd/m2,则输入图像数据在对其应用伽玛时被显影,同样重要的还在于仅使用标准照明来观察图像的情况。如果标准照明低于80cd/m2,则假定在用辅助照明照射的同时观察图像的情况下,输入图像数据被线性显影。然后,即使在进行用于应用伽玛的处理的情况下,即,即使在假定未调节照明条件而观察图像的情况下输入图像数据被显影的情况下,也进行转换处理以便相比于如下情况降低辉度:考虑到在调节照明条件的情况下观察图像,相对于18%灰度反射率,对图像进行线性显影。
基于作为由第一示例性实施例中描述的sRGB定义的标准观察环境的、被设置为80cd/m2的阈值,确定应该采用哪种转换(线性转换或伽玛转换)作为输入和输出之间的辉度转换的特性,但是阈值不限于该亮度。此外,本示例性实施例已经基于如下的示例进行了描述,其中,如果标准照明的亮度是阈值或更亮,则在对输入图像数据应用伽玛时将输入图像数据显影,并且,如果标准照明的亮度比阈值暗,则对输入图像数据进行线性显影,但是,本示例性实施例可以被构造为:在标准照明的亮度比阈值暗时和在标准照明的亮度是阈值或者更亮时进行不同的伽玛转换。
在第七示例性实施例中,当没有用于获取观察环境的亮度的措施时,预先根据代表性使用情况粗略地设置标准照明的亮度并且设置辅助照明条件。各个常见环境的照度各不相同,因为日本的办公环境为600勒克斯,欧洲和美国的办公环境为500勒克斯,日本的家庭环境为300勒克斯,而欧洲和美国的家庭环境是200勒克斯。当各个值的单位被换算成坎德拉(cd/m2)时,日本的办公环境约为200cd/m2,欧洲和美国的办公环境约为170cd/m2,日本的家庭环境为约100cd/m2,而欧洲和美国的家庭环境约为70cd/m2
将参照图19描述在用户选择日本的办公室环境作为观察环境的情况下的操作。如上所述,观察环境的照明的亮度被认为是200cd/m2。在上面的描述中,当打印物被80cd/m2的标准光源照射时纸上的反射率被定义为100%,从而如上所述,在标准照明的亮度为200cd/m2时输出辉度的范围为200÷80=250%。
然后,如果输入图像数据具有0至400%的辉度动态范围,并且是以被设置为-2的曝光补偿值(两次曝光值的曝光不足)拍摄的RAW图像,则进行如图19中的虚线1901所示的转换处理。然后,除了作为观察环境的亮度(即,250%的输出辉度)的200cd/m2之外,打印物还被对应于不足的150%(即,80÷100×150=120cd/m2)作为辅助照明照射。由于该照射,打印物的辉度如实线1902所示那样升高,并且能够再现由输入数据保持的0至400%的辉度动态范围。此时,如图20所示,向用户呈现条件以提示用户将120cd/m2设置为辅助照明的亮度。
此外,已经基于如下示例描述了上述示例性实施例,其中,RAW数据被输入作为输入图像数据,并且使用Exif数据中的曝光补偿值作为摄像条件来进行图像处理。使用RAW数据的原因如下。如果原始图像对于R、G和B中的各个以8位(即,总共24位)表达颜色,则例如当图像被组合时这是不够的,并且使用RAW数据的目的还包括,作为目的之一,避免由于当图像被组合时产生分数以及发生舍入误差而导致的图像劣化。另一方面,近年来,提出了使用24位以上的颜色数据来组合图像的概念。这个概念被称为高动态范围渲染,并且能够处理24位以上的颜色数据的图像格式统称为高动态范围摄像(HDRI)。本发明的一个示例性实施例可以被构造为,使用那些数据当中的例如由杜比实验室开发的HDRI文件格式的JPEG-HDR数据(能够在维持与传统JPEG的兼容性的同时最多以32位颜色存储图像)而不是RAW数据。
此外,已经基于输入图像数据和关于摄像条件的信息从诸如照相机的摄像单元直接输入到打印机的示例描述了上述示例性实施例,但是,上述示例性实施例不限于这种构造。例如,本发明的一个示例性实施例可以被构造为从存储介质(例如存储卡)接收输入图像数据和关于摄像条件的信息。
现在,在一些示例中,要观察的展示品(打印物+辅助照明)的外观的图像质量(即,在这种情况下观察者感受到的辉度动态范围),即便在考虑到人眼对光强度的敏感度而将最佳照明条件设置为具有一定范围时也保持相同,并且将描述该示例。
通常,人类五感与对数成正比,这就是所谓的韦伯-费希纳定律(以下简称WF定律)。WF定律由下式(1)和(2)表达,并且将感知值改变1的刺激值可以通过人的感觉来辨认:
Δ刺激量/刺激量=K,其中K是常数值 (1),并且
感知量=K×Log(刺激量) (2)。
然后,人眼对光强度的敏感度也遵循该WF定律。例如,夜空中星星的大小就是其中的一个示例。从最亮的第一级星到可见的第六级星的光强度彼此不同,使得光强度这样增加:每当级别增加1个量级时,该光强度就乘以100的五次方根(2.512)。换句话说,第一级星和第六级星之间的光强度有100倍的差别。
图21A是列出了在使用这些星级作为一个示例的情况下指示由式(1)表达的关系的数值的示例的表格,并且,图21B是以图形方式指示式(2)的曲线图。在该示例中,刺激值是指示光强度的数值。该表指示,当刺激值为100时,人的感觉可以辨认与刺激值251.2的差异,并且当刺激值为400时,人的感觉可以辨认与刺激值1004.8的差异。另外,在图21B中,K从图21A所示的表中被确定为K=1.512。如上所述,人的感觉可以辨认将感知值改变1的刺激值。图21B所示的曲线图意味着人的感觉可以将对应于500的刺激值的光强度(感知值大约为4)和对应于1850的刺激值的光强度(感知值大约为5)彼此辨认开,但是感觉它们之间的光强度大致相同。此外,该曲线图意味着关于较弱的光,人的感觉可以辨认100的刺激值(感知值大约为3),并且感觉与100至500的刺激值对应的光强度大致相同。
在本示例中,已经通过示例描述了夜空中的星星的光,但是即使当光强度相同时K的值也依赖于条件即周围环境而不同。即使在黑暗房间和明亮房间中的各个中观察到相同的光变化,在黑暗房间和明亮房间之间,可辨认的Δ刺激值也是不同的。这意味着,根据环境的不同,光被感知为相同强度的光的范围是不同的。
图22例示了考虑到上述的人类敏感度的用于呈现照明条件的方法的示例。通过预先测量观察环境照明(在这种情况下,仅用图12所示的房间照明502照射的打印物504的纸白区域上的辉度)并输入其值,除了该观察环境照明之外,该方法还呈现所需的辅助照明条件的上限值、最佳值和下限值。
以上述方式,根据WF定律,即使在辅助照明的照度被设置为比理论值低的值时,也可以向观察者提供类似的效果。从节能的角度来看,这也可以说是有效的。作为确定下限值、最佳值和上限值的特定方法,当测量观察环境照明的辉度并且输入其值时,如第一示例性实施例中所述的,根据输入图像数据信息确定最佳值。在该最佳值中,观察环境照明已经被考虑在内。然后,可以从下式(3)和(4)计算上限值和下限值:
上限值=最佳值×系数1 (3),并且
下限值=最佳值×系数2 (4)。
系数1和系数2被认为随着最佳值的值而改变,但是,可以通过如下来处理该改变:根据预先进行的实验中的最佳值的值,即观察环境照明的条件,预先确定这些值应该设置为多大的值。认为应当根据最佳值的值准备多个系数。这意味着人类视觉识别光强度的能力程度有一定范围。然后,这些值可以预先被数据库化并记录在诸如ROM的存储单元中。
本发明通过适当地确定照射打印物的照明条件,使得具有宽辉度动态范围的输入图像数据(例如,RAW数据)能够在更宽的辉度范围内再现。
虽然针对示例性实施例描述了本发明,但是,应该理解,本发明不限于公开的示例性实施例。权利要求的范围应当被赋予最宽的解释,以便涵盖所有这类变型例以及等同的结构和功能。

Claims (20)

1.一种信息处理装置,其被构造为确定用于用光照射打印物的照明条件,所述打印物是通过基于图像数据将图像输出到记录介质上而产生的,所述信息处理装置包括:
输入单元,其被构造为接收对表示通过转换图像数据而获得的图像数据的辉度动态范围的辉度动态范围信息的输入和对表示关于图像数据的在进行摄像时的曝光条件的曝光条件信息的输入,其中基于曝光条件将图像数据转换为转换的图像数据,并且其中转换的图像数据的辉度动态范围小于图像数据的辉度动态范围;
获取单元,其被构造为获取记录介质的特性信息;以及
确定单元,其被构造为基于输入图像数据的辉度动态范围信息与计算的要打印数据的辉度动态范围信息之间的差、曝光条件信息以及特性信息来确定照明条件。
2.根据权利要求1所述的信息处理装置,其中,获取单元基于指示输出有打印物的记录介质的类型的信息来获取特性信息。
3.根据权利要求1所述的信息处理装置,其中,确定单元利用由特性信息指示的、纸白色区域上的辉度值来计算照明条件。
4.根据权利要求1所述的信息处理装置,其中,曝光条件信息是曝光补偿值,并且该曝光条件信息的值是负的。
5.根据权利要求1所述的信息处理装置,其中,确定的照明条件是指示记录介质的纸白色区域上的辉度的信息。
6.根据权利要求1所述的信息处理装置,其中,所述图像数据是RAW图像数据或JPEG-HDR数据。
7.根据权利要求1所述的信息处理装置,其中,在由辉度动态范围信息指示的辉度动态范围比在记录介质上可再现的辉度动态范围宽的情况下,进行转换处理,以使转换后的、由辉度动态范围信息指示的辉度动态范围比在记录介质上可再现的辉度动态范围小。
8.根据权利要求7所述的信息处理装置,其中,确定的照明条件是通过用光照射打印物来再现由辉度动态范围信息指示的辉度动态范围的条件。
9.根据权利要求1所述的信息处理装置,所述信息处理装置还包括呈现单元,所述呈现单元被构造为呈现关于确定的照明条件的信息。
10.根据权利要求9所述的信息处理装置,其中,通过用来自观察环境照明的光和来自具有可变照度的照明的光照射打印物来观察打印物,并且
其中,由呈现单元呈现的信息是关于具有可变照度的照明的照明条件的信息。
11.根据权利要求10所述的信息处理装置,所述信息处理装置还包括第二获取单元,所述第二获取单元被构造为从用户获取关于观察环境照明的信息,
其中,确定单元还基于关于观察环境照明的信息来确定照明条件。
12.根据权利要求10所述的信息处理装置,所述信息处理装置还包括第三获取单元,所述第三获取单元被构造为从用户获取由具有可变照度的照明实现的照明条件的上限值,
其中,确定单元还基于所述上限值来确定照明条件。
13.根据权利要求1-12任一项所述的信息处理装置,所述信息处理装置还包括生成单元,所述生成单元被构造为基于转换的图像数据来生成具有比图像数据的辉度动态范围更小的辉度动态范围的输出辉度数据。
14.根据权利要求13所述的信息处理装置,其中,通过对转换的图像数据进行线性转换来生成输出辉度数据。
15.根据权利要求13所述的信息处理装置,其中,通过如下方式来生成输出辉度数据:针对转换的图像数据的辉度动态范围等于或小于18%的辉度值对转换的图像数据进行线性转换,并且,在针对转换的图像数据的辉度动态范围高于18%的辉度值应用伽玛的同时对转换的图像数据进行转换。
16.一种图像处理系统,所述图像处理系统包括:
根据权利要求13所述的信息处理装置;以及
图像输出装置,其被构造为基于输出辉度数据来产生打印物。
17.一种控制系统,所述控制系统包括:
信息处理装置;以及
控制装置,其被构造为基于由确定单元确定的照明条件来控制照射打印物所用的照明,
其中,所述信息处理装置被构造为确定用于用光照射打印物的照明条件,所述打印物是通过基于图像数据将图像输出到记录介质上而产生的,所述信息处理装置包括:
输入单元,其被构造为接收对表示通过转换图像数据而获得的图像数据的辉度动态范围的辉度动态范围信息的输入和对表示关于图像数据的在进行摄像时的曝光条件的曝光条件信息的输入,其中基于曝光条件将图像数据转换为转换的图像数据,并且其中转换的图像数据的辉度动态范围小于图像数据的辉度动态范围;
获取单元,其被构造为获取记录介质的特性信息;以及
确定单元,其被构造为基于输入图像数据的辉度动态范围信息与计算的要打印数据的辉度动态范围信息之间的差、曝光条件信息以及特性信息来确定照明条件。
18.根据权利要求17所述的控制系统,其中,信息处理装置和控制装置彼此无线连接。
19.一种用于确定用于用光照射打印物的照明条件的信息处理方法,所述打印物是通过基于图像数据将图像输出到记录介质上而产生的,所述信息处理方法包括:
接收对表示通过转换图像数据而获得的图像数据的辉度动态范围的辉度动态范围信息的输入和对表示关于图像数据的在进行摄像时的曝光条件的曝光条件信息的输入,其中基于曝光条件将图像数据转换为转换的图像数据,并且其中转换的图像数据的辉度动态范围小于图像数据的辉度动态范围;
获取记录介质的特性信息;以及
基于输入图像数据的辉度动态范围信息与计算的要打印数据的辉度动态范围信息之间的差、曝光条件信息以及特性信息来确定照明条件。
20.根据权利要求19所述的信息处理方法,其中,在获取步骤基于指示输出有打印物的记录介质的类型的信息来获取特性信息。
CN201810390473.5A 2017-04-28 2018-04-27 信息处理装置、图像处理系统、控制系统和信息处理方法 Active CN108810315B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110263261.2A CN112954131B (zh) 2017-04-28 2018-04-27 信息处理装置、图像处理系统和信息处理方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-089640 2017-04-28
JP2017089640A JP6789877B2 (ja) 2017-04-28 2017-04-28 情報処理装置、画像処理システム、制御システム及び情報処理方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202110263261.2A Division CN112954131B (zh) 2017-04-28 2018-04-27 信息处理装置、图像处理系统和信息处理方法

Publications (2)

Publication Number Publication Date
CN108810315A CN108810315A (zh) 2018-11-13
CN108810315B true CN108810315B (zh) 2021-03-19

Family

ID=63916603

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201810390473.5A Active CN108810315B (zh) 2017-04-28 2018-04-27 信息处理装置、图像处理系统、控制系统和信息处理方法
CN202110263261.2A Active CN112954131B (zh) 2017-04-28 2018-04-27 信息处理装置、图像处理系统和信息处理方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202110263261.2A Active CN112954131B (zh) 2017-04-28 2018-04-27 信息处理装置、图像处理系统和信息处理方法

Country Status (3)

Country Link
US (1) US10678159B2 (zh)
JP (1) JP6789877B2 (zh)
CN (2) CN108810315B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018212278A1 (ja) * 2017-05-17 2018-11-22 パナソニックIpマネジメント株式会社 映像記録装置及び映像記録検証システム並びに映像記録方法及び映像検証方法
US10497105B2 (en) * 2017-11-01 2019-12-03 Google Llc Digital image auto exposure adjustment
JP2019096928A (ja) * 2017-11-17 2019-06-20 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム、並びに画像表示装置
JP7073191B2 (ja) * 2018-05-25 2022-05-23 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
JP2020009695A (ja) * 2018-07-11 2020-01-16 キヤノン株式会社 情報処理装置、制御システム、画像処理システム及び情報処理方法
JP7431595B2 (ja) * 2020-01-31 2024-02-15 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH065932B2 (ja) * 1986-05-28 1994-01-19 富士写真フイルム株式会社 画像記録装置
US5822039A (en) * 1993-02-10 1998-10-13 Noritsu Koki Co., Ltd. Photographic printing and developing apparatus
US5719661A (en) * 1994-07-27 1998-02-17 Fuji Photo Film Co., Ltd. Image reproducing apparatus and method of determining reproduction conditions
JP3803411B2 (ja) * 1995-12-25 2006-08-02 オリンパス株式会社 情報再生システム及び情報記録媒体
US5969796A (en) * 1996-07-30 1999-10-19 Fuji Photo Film Co., Ltd. Method for determining a state of processing solution in a printer processor and a printer processor
JP3825965B2 (ja) * 2000-08-31 2006-09-27 キヤノン株式会社 画像処理方法、装置および記録媒体
US20060098973A1 (en) * 2004-11-08 2006-05-11 Patrick Verdier Universal exposure meter method for film and digital cameras
EP1871093A4 (en) * 2005-03-15 2009-09-02 Omron Tateisi Electronics Co IMAGE PROCESSOR, IMAGE PROCESSING METHOD AND SYSTEM, PROGRAM, AND RECORDING MEDIUM
EP1909484B1 (en) * 2005-07-12 2014-01-15 Nikon Corporation Image processing device, image processing program, and image processing method
KR20070106428A (ko) * 2006-04-28 2007-11-01 가부시끼가이샤 도시바 기록 매체의 검증 장치 및 검증 방법
JP4218723B2 (ja) * 2006-10-19 2009-02-04 ソニー株式会社 画像処理装置、撮像装置、画像処理方法およびプログラム
JP2009010566A (ja) 2007-06-27 2009-01-15 Yamaguchi Univ 写真画像のダイナミックレンジを拡大する方法及び撮像装置
JP2009171008A (ja) * 2008-01-11 2009-07-30 Olympus Corp 色再現装置および色再現プログラム
JP2009229768A (ja) * 2008-03-21 2009-10-08 Noritsu Koki Co Ltd テストプリント、このテストプリントを出力するカラー画像プリンタ、このテストプリントを用いたカラー画像プリンタの調整方法
JP5153566B2 (ja) * 2008-10-24 2013-02-27 キヤノン株式会社 画像処理システムおよび画像処理装置、および画像処理方法
CN101540832B (zh) 2009-04-24 2011-02-09 段江 图像信号的动态范围匹配方法
JP5371719B2 (ja) 2009-12-02 2013-12-18 キヤノン株式会社 撮像装置およびその制御方法
JP5143254B2 (ja) * 2010-07-22 2013-02-13 キヤノン株式会社 画像形成装置
JP2012044475A (ja) 2010-08-19 2012-03-01 Canon Inc 画像処理方法及び画像出力装置
JP2012247873A (ja) * 2011-05-25 2012-12-13 Sony Corp 画像処理装置および方法
US8988552B2 (en) * 2011-09-26 2015-03-24 Dolby Laboratories Licensing Corporation Image formats and related methods and apparatuses
JP5802520B2 (ja) * 2011-11-11 2015-10-28 株式会社 日立産業制御ソリューションズ 撮像装置
JP5316625B2 (ja) * 2011-11-11 2013-10-16 カシオ計算機株式会社 画像合成装置、及びプログラム
JP5772572B2 (ja) * 2011-12-26 2015-09-02 富士通株式会社 画像処理装置、画像処理方法、およびプログラム
KR101696630B1 (ko) * 2012-03-13 2017-01-16 돌비 레버러토리즈 라이쎈싱 코오포레이션 이미지 및 오브젝트 개선을 위한 라이팅 시스템 및 방법
CN104364824A (zh) * 2012-06-13 2015-02-18 松下知识产权经营株式会社 物体检测装置
JP6074254B2 (ja) 2012-12-18 2017-02-01 キヤノン株式会社 画像処理装置およびその制御方法
US9275445B2 (en) * 2013-08-26 2016-03-01 Disney Enterprises, Inc. High dynamic range and tone mapping imaging techniques
US9852499B2 (en) 2013-12-13 2017-12-26 Konica Minolta Laboratory U.S.A., Inc. Automatic selection of optimum algorithms for high dynamic range image processing based on scene classification
JP6282156B2 (ja) 2014-03-31 2018-02-21 キヤノン株式会社 画像装置、画像処理方法、制御プログラム及び記憶媒体
JP6493395B2 (ja) * 2014-04-30 2019-04-03 ソニー株式会社 画像処理装置と画像処理方法
JP6357881B2 (ja) * 2014-05-28 2018-07-18 富士ゼロックス株式会社 画像処理装置及びプログラム
JP6363916B2 (ja) 2014-09-02 2018-07-25 キヤノン株式会社 画像処理装置およびその方法
JP6362050B2 (ja) * 2014-10-15 2018-07-25 パナソニックIpマネジメント株式会社 撮影装置、照明制御装置および照明制御方法
JP5932068B1 (ja) 2015-01-06 2016-06-08 オリンパス株式会社 画像処理装置、撮像装置、画像処理方法、画像処理プログラム
JP6537385B2 (ja) * 2015-07-17 2019-07-03 日立オートモティブシステムズ株式会社 車載環境認識装置
EP3196633B1 (en) * 2016-01-20 2021-11-17 Canon Kabushiki Kaisha Apparatus and method for measuring a reflection characteristic of an object

Also Published As

Publication number Publication date
US10678159B2 (en) 2020-06-09
CN108810315A (zh) 2018-11-13
JP6789877B2 (ja) 2020-11-25
CN112954131A (zh) 2021-06-11
US20180314182A1 (en) 2018-11-01
JP2018191045A (ja) 2018-11-29
CN112954131B (zh) 2022-04-19

Similar Documents

Publication Publication Date Title
CN108810315B (zh) 信息处理装置、图像处理系统、控制系统和信息处理方法
JP4883789B2 (ja) 画像処理装置および画像処理方法
CN1229970C (zh) 图像处理装置、图像处理方法和存储介质
JP3931903B2 (ja) 画像データの出力画像調整
US7187473B2 (en) Image processing method and apparatus, and recording medium used therewith
KR20070027231A (ko) 표시된 화상의 인쇄를 위한 화상처리 방법 및 장치
JP2007006039A (ja) 色処理方法およびその装置
JP2008252698A (ja) 画像処理装置および画像処理方法
US8115978B2 (en) Information processing method and information processing apparatus for simulating a result output from a first output device based on input data represented in a color space that is dependent on the input device by a second output device
JP3882793B2 (ja) 画像データの出力画像調整
JP2010288250A (ja) 画像処理装置、画像処理方法、プログラムおよび記録媒体
JP4788394B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP3960336B2 (ja) 画像データの画質調整
JP2007174126A (ja) 画像処理装置及び方法
CN113205460A (zh) 图像处理装置、图像处理方法和存储介质
JP2005215353A (ja) 複数の階調特性で再生可能な画像データを生成する画像データ生成装置、および、これに対応する画像再生装置
US10992842B2 (en) Information processing apparatus, control system, image processing system, and information processing method to derive illumination condition based on exposure condition
US11700346B2 (en) Image processing apparatus, image processing method, and storage medium for generating preview image data to be displayed on a display
JP2007081742A (ja) 色処理方法およびその装置
JP2019205138A (ja) 画像処理装置、処理方法、及びプログラム
JP4360411B2 (ja) 画像データの画質調整
JP4375418B2 (ja) 画像データの画質調整
JP3535778B2 (ja) 画像処理方法、装置および記録媒体
JP4042803B2 (ja) 画像データの出力画像調整
JP2021044765A (ja) 画像処理装置、画像出力装置、画像処理方法、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant