CN109983754B - 图像处理装置、图像处理方法以及记录介质 - Google Patents

图像处理装置、图像处理方法以及记录介质 Download PDF

Info

Publication number
CN109983754B
CN109983754B CN201780070657.7A CN201780070657A CN109983754B CN 109983754 B CN109983754 B CN 109983754B CN 201780070657 A CN201780070657 A CN 201780070657A CN 109983754 B CN109983754 B CN 109983754B
Authority
CN
China
Prior art keywords
image data
luminance
still image
dynamic range
printing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780070657.7A
Other languages
English (en)
Other versions
CN109983754A (zh
Inventor
小塚雅之
柏木吉一郎
山本雅哉
上坂靖
森美裕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority claimed from PCT/JP2017/040732 external-priority patent/WO2018092711A1/ja
Publication of CN109983754A publication Critical patent/CN109983754A/zh
Application granted granted Critical
Publication of CN109983754B publication Critical patent/CN109983754B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06KGRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K15/00Arrangements for producing a permanent visual presentation of the output data, e.g. computer output printers
    • G06K15/02Arrangements for producing a permanent visual presentation of the output data, e.g. computer output printers using printers
    • G06K15/18Conditioning data for presenting it to the physical printing elements
    • G06K15/1867Post-processing of the composed and rasterized print image
    • G06K15/1872Image enhancement
    • G06K15/1878Adjusting colours
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40Picture signal circuits
    • H04N1/407Control or modification of tonal gradation or of extreme levels, e.g. background level
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • G06T5/92Dynamic range modification of images or parts thereof based on global image properties
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/6058Reduction of colour to a range of reproducible colours, e.g. to ink- reproducible colour gamut
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/6097Colour correction or control depending on the characteristics of the output medium, e.g. glossy paper, matt paper, transparency or fabrics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

提供能得到用于印刷高品质的印刷物的静止图像数据的图像处理装置、图像处理方法以及程序。图像处理装置具备:取得部,其取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据、以及表示印刷装置的印刷能力的能力信息;变换部,其将由取得部取得的第1静止图像数据对应于由取得部取得的能力信息所表示的印刷能力变换成以亮度范围比第1动态范围小的第2动态范围定义的第2静止图像数据;和输出部,其将由变换部变换得到的第2静止图像数据输出到印刷装置。

Description

图像处理装置、图像处理方法以及记录介质
技术领域
本公开涉及图像处理装置以及图像处理方法。
背景技术
专利文献1公开了通过将曝光不同的多个图像合成来记录动态范围大的HDR(HighDynamic Range:高动态范围)静止图像的摄像装置。
现有技术文献
专利文献
专利文献1:JP特开2015-056807号公报
发明内容
在专利文献1公开的技术中,很难得到用于印刷高品质的印刷物的静止图像数据。
本公开提供能得到用于印刷高品质的印刷物的静止图像数据的图像处理装置以及图像处理方法。
本公开中的图像处理装置具备:取得部,其取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据、和表示印刷装置的印刷能力的能力信息;变换部,其将由所述取得部取得的所述第1静止图像数据对应于由所述取得部取得的所述能力信息所表示的所述印刷能力变换成以亮度范围比所述第1动态范围小的第2动态范围定义的第2静止图像数据;和输出部,其将由所述变换部变换得到的所述第2静止图像数据输出到所述印刷装置。
本公开中的图像处理方法取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据,取得表示印刷装置的印刷能力的能力信息,将取得的所述第1静止图像数据对应于取得的所述能力信息所表示的所述印刷能力变换成以亮度范围比所述第1动态范围小的第2动态范围定义的第2静止图像数据,将变换得到的所述第2静止图像数据输出到所述印刷装置。
另外,这些整体或具体的方案可以通过系统、方法、集成电路、计算机程序或计算机可读的CD-ROM等记录介质实现,也可以通过系统、方法、集成电路、计算机程序以及记录介质的任意组合实现。
本公开中的图像处理装置以及图像处理方法能得到用于印刷高品质的印刷物的静止图像数据。
附图说明
图1是用于说明影像技术的发展的示意图。
图2是用于说明HDR显示技术的示意图。
图3A是用于说明PQ(Perceptual Quantization:感知量化)方式的示意图。
图3B是用于说明HLG(Hybrid Log Gamma:混合对数伽马)方式的示意图。
图4是比较示出与HDR对应的HDR图像的一例和与SDR(Standard Dynamic Range:标准动态范围)对应的SDR图像的一例的图。
图5是表示图像摄像时的亮度的尺度的一例的图。
图6是表示摄像到的图像的亮度的一例的图。
图7A是表示将图6所示的原图像母盘制作成SDR图像的结果的亮度的一例的图。
图7B是示意性表示用于将原信号值变换成SDR信号值(母盘制作)的、原信号值与SDR信号值的关系的一例的图。
图8A是表示将图6所示的原图像母盘制作成HDR图像的结果的亮度的一例的图。
图8B是示意性表示用于将原信号值变换成HDR信号值(母盘制作)的、原信号值与HDR信号值的关系的一例的图。
图9是用于说明与HDR或SDR对应的摄像装置、由摄像装置得到的图像数据的文件格式、和显示图像数据的显示装置或印刷图像数据的印刷装置的示意图。
图10是用于说明通过将2个图像合成来得到扩大了动态范围的图像的HDR拍摄模式的示意图。
图11是用于说明通过将2个图像合成来得到扩大了动态范围的图像的HDR拍摄模式的示意图。
图12是用于说明为了HDR显示用而摄像到的HDR图像的示意图。
图13是用于说明使SDR印刷装置印刷图像的情况下的课题的示意图。
图14是示意性表示实施方式1中的图像处理装置的硬件结构的一例的框图。
图15是示意性表示实施方式1中的图像处理装置的功能结构的第1例的框图。
图16是表示将实施方式1中的测试图案印刷在纸张上的结果的一例的图。
图17是示意性表示实施方式1所示的变换部中的、用于从第1动态范围向第2动态范围进行变换的第1动态范围的信号值与第2动态范围的信号值的关系的一例的图。
图18是表示实施方式1中的图像处理装置的动作的一例的流程图。
图19是示意性表示实施方式1的变形例1中的图像处理装置的功能结构的一例的框图。
图20是示意性表示实施方式1的变形例2中的图像处理装置的功能结构的一例的框图。
图21是示意性表示实施方式1的变形例3中的图像处理装置的功能结构的一例的框图。
图22是用于说明实施方式1(或变形例1~5)中的图像处理装置的实施例的示意图。
图23是示意性表示实施方式中的显示装置与印刷装置之间的通信协议的第1例的图。
图24是示意性表示实施方式中的显示装置与印刷装置之间的通信协议的第2例的图。
图25是示意性表示实施方式中的显示装置与印刷装置之间的通信协议的第3例的图。
图26是示意性表示实施方式中的显示装置与印刷装置之间的通信协议的第4例的图。
具体实施方式
(本公开的目的)
本公开用于使用HDR(High Dynamic Range:高动态范围)显示技术和HDR摄像技术这2种技术来提供HDR静止图像这样的新的用户价值和新的照片文化。所谓上述的新的用户价值,是指生成使临场感提高且减少了过白(明亮的区域的灰度被损害的状态,也称作白色失调)以及过黑(暗的区域的灰度被损害的状态)等的静止图像数据。另外,所谓上述的新的照片文化,是指将用与HDR静止图像的摄像对应的摄像机摄像而得到的HDR静止图像显示在与HDR显示对应的显示装置(以下称作“HDR显示装置”)来鉴赏。作为HDR显示装置,例如是HDRTV(HDR电视机)、HDR对应平板终端、HDR对应智能手机、HDR对应PC(Personal Computer:个人计算机)、HDR对应显示器等。另外,HDR静止图像也称作HDR照片。
本公开提供图像处理装置以及图像处理方法,能生成在对应SDR显示但不对应HDR显示的显示装置(以下称作“SDR显示装置”)以及对应SDR静止图像的印刷但不对应HDR静止图像的印刷的印刷装置(以下称作“SDR印刷装置”)中也能显示或印刷的静止图像数据。即,本公开提供图像处理装置以及图像处理方法,不仅对于与HDR静止图像的图像处理对应的装置,而且对于与SDR静止图像的图像处理对应但与HDR静止图像的图像处理不对应的装置,也提供能进行HDR静止图像的再生的静止图像数据,由此能提高HDR静止图像数据的便利性。另外,在本公开中,HDR静止图像的再生包含HDR静止图像的显示以及对HDR静止图像进行图像处理的基础上的印刷。即,在本公开中,再生包含显示以及印刷。
(HDR显示技术的背景)
图1是用于说明影像技术的发展的示意图。
到此为止,作为影像的高画质化,着重点在于显示像素数的扩大。并且,1920×1080像素的高清(HD:High Definition)影像正取代现有的720×480像素的标清(SD:Standard Definition)影像而得到普及。
近年来,为了进一步的高画质化,提出3840×2160像素的超高清(UHD:Ultra HighDefinition)影像、或像素数进一步多的4096×2160像素的影像(所谓的4K影像)。另外,同4K影像一起,还研讨了亮度范围(以下也称作“动态范围”)的扩展、色域的扩大、帧频的增加等。
关于动态范围,作为用于在维持暗部灰度的同时以更接近于现实的明亮度来表现现行的电视信号难以表现的镜面反射光等明亮的光的方式,提出HDR(High DynamicRange:高动态范围)。到此为止的电视信号被称作SDR(Standard Dynamic Range:标准动态范围),最大亮度是100nit。另一方面,在HDR中,设想将最大亮度扩大到1000nit以上。并且,在SMPTE(Society of Motion Picture and Television Engineers:电影和电视工程师协会)、ITU-R(International Telecommunication Union-Radiocommunication Sector:国际电信联盟无线电通信组)等中,母盘制作显示器用的规格的标准化也在进展中。作为HDR的具体的运用目标,与HD、UHD同样,有广播、封装介质(Blu-ray(注册商标)Disc等)、因特网发布等。
(HDR显示技术)
图2是用于说明HDR显示技术的示意图。
HDR并不仅仅是用于实现非常明亮的电视机的方式。所谓HDR,是如下那样的方式:将影像的亮度范围(动态范围)从以作为SDR的一例的BT.709(Broadcasting Service(Television)709)的规格确定的0.1nit-100nit扩展到例如以SMPTE(Society of MotionPicture and Television Engineers:电影和电视工程师协会)中的ST2084确定的0-10000nit,从而能表现过去不能表现的明亮的太阳、天空以及光线的反射等亮度高的图像,或者能同时记录明亮的部分和暗的部分。另外,这里所说的亮度是光学上的亮度,是表征光源的明亮度的物理量。在HDR中,有以下2种方式:适合在摄像后进行分级(grading)处理(调整影像的颜色、色调的处理)的影像(打包的影像)以及被IP(Internet Protocol:网际协议)分发的影像等的ST2084(PQ方式);和适合实况广播的影像以及由用户摄像的影像的Hybrid Log Gamma(HLG方式)。
如此地,在HDR的显示技术中有以下方式:能实现SDR与HDR的互换性的HLG方式;和不具有SDR与HDR的单纯的显示互换性的PQ方式。另外,PQ方式也称作HDR10方式。
图3A是用于说明PQ方式的示意图。图3B是用于说明HLG方式的示意图。
如图3A所示那样,PQ方式是不具有SDR与HDR的互换性的方式。在该方式的情况下,SDR和HDR被单独分级并被单独传送。另外,在该方式的情况下,在使以Ultra HD Blu-ray(注册商标)再生的影像显示在SDRTV(对应SDR但不对应HDR的电视机)的情况下,需要进行将HDR的影像数据变换成SDR的影像数据的SDR变换。
如图3B所示那样,ITU-R(The ITU Radiocommunication Sector:国际电信联盟无线电通信组)的2100Hybrid Log Gamma(HLG)是具有SDR与HDR的互换性的方式。在该方式的情况下,进行HLG用的分级,仅传送HLG用流。HLG用流具有对SDR的互换性。因此,在使HDR的影像数据显示在SDRTV的情况下,不需要进行将HDR的影像数据变换成SDR的影像数据的SDR变换。
图4是比较示出与HDR对应的HDR图像的一例和与SDR对应的SDR图像的一例的图。在图4中以HDR图像和SDR图像示出室内的比较暗的景色和窗外的比较明亮的景色同时存在的明暗差相对大的1张图像。
HDR图像是通过再生HDR静止图像数据或HDR动态图像数据而得到的图像。SDR图像是通过再生SDR静止图像数据或SDR动态图像数据而得到的图像。如图4的上段例示的那样,在HDR图像中,窗外的比较明亮的景色和室内的比较暗的景色均以合适的明亮度表现。另一方面,在SDR图像中,如图4的下段例示的那样,在调整了曝光以便表现窗外的比较明亮的景色的情况下,室内的比较暗的景色会变得过暗而在一部分出现过黑,从而难以看到。假设在调整了曝光以便适当地表现室内的景色的情况下,窗外的景色会变得过于明亮而在一部分出现过白,从而难以看到(未图示)。如此,HDR图像能实现在SDR图像中难以实现的、在比较明亮的景色和比较暗的景色同时存在的明暗差相对大的1张图像中减少了过白和过黑这两者的、灰度性高的图像。
图5是表示图像摄像时的亮度的尺度的一例的图。
在用摄像机对被摄体进行摄像的情况下,一般如图5所示那样,将反射率成为18%的18%灰色作为明亮度的基准点。18%灰色是成为明亮度的基准的基准反射率。图5所示的光圈级数(Stop number)相对地表征亮度,以18%灰色的亮度为基准点,将基准点的光圈级数设为0。光圈级数定义为:每当亮度成为2倍就增加1,每当亮度成为1/2倍就减少1。
在用摄像机对被摄体进行摄像时,从摄像机的图像传感器(例如CMOS(complementary Metal-Oxide Semiconductor:互补金属氧化物半导体)或CCD(ChargeCoupled Device:电荷耦合器件)等)得到的亮度对应于基于光圈、快门速度、敏感度设定等的曝光而发生变化。即,即使对相同明亮度的被摄体进行摄像,从图像传感器得到的亮度也会对应于曝光而成为不同的值。为此,光圈级数的值自身不是绝对的值,而是相对的值。即,不能用光圈级数来表征亮度。
另外,在用摄像机对被摄体进行摄像时,通常对应于被摄体的明亮度来调整曝光。例如在用摄像机对图5的(1)中作为暗的被摄体的一例而示出的夜晚的场景进行摄像的情况下,一般为了不引起占据图像的大部分的暗的区域的过黑,而通过减慢快门速度、打开光圈等设定,来对摄像机进行使暗的区域的灰度得到表现并使图像中的面积比较少的明亮的区域过白这样的曝光的调整。
在用摄像机对图5的(2)中作为中等程度的明亮度的被摄体的一例而示出的白天的室内的场景进行摄像的情况下,一般对摄像机进行使暗的部分与明亮的部分的平衡良好这样的曝光的调整。
在用摄像机对图5的(3)中作为明亮的被摄体的一例而示出的白天的室外的场景进行摄像的情况下,一般通过加快快门速度、缩小光圈等设定,来对摄像机进行防止占据图像的大部分的明亮的区域的过白这样的曝光的调整。
为了将如此得到的相对的亮度变换成绝对的亮度,需要计算曝光相对于基准点的相对关系。
图6是表示摄像到的图像的亮度的一例的图。
以下将图6所示的摄像到的图像作为原图像70。在原图像70中,将具有与成为明亮度的基准的0级(0Stop)对应的亮度18nit的像素的区域设为区域A来示出。另外,在原图像70中,将具有与2.3级(2.3Stops)对应的亮度90nit的像素的区域设为区域B来示出。另外,在原图像70中,将具有与大致黑色的-3级(-3Stops)对应的亮度2.3nit的像素的区域设为区域C来示出。另外,在原图像70中,将具有与6级(6Stops)对应的亮度1150nit的像素的区域设为区域D来示出。在区域D中包含通过对太阳进行摄像而得到的像素,可得到非常明亮的亮度(例如原图像70中最明亮的亮度)。另外,在原图像70中,将具有与4级(4Stops)对应的亮度290nit的像素的区域设为区域E来示出。在以区域E示出的区域中包含通过对引起镜面反射的场所进行摄像而得到的像素。
接下来,说明将原图像70向SDR图像变换的SDR分级处理(母盘制作处理)。
SDR分级处理是对用摄像机摄像到的具有100nit以上的高亮度成分的内容的影像(原图像)进行变换以使其适合BT.709等广播规格的处理,通过对原图像实施折拐曲线(knee curve)处理来实现。折拐曲线处理是通过折拐曲线来对输入信号进行变换的处理,折拐曲线是对一定值(knee point:拐点)以上的输入信号压缩增益来进行输出的输入输出变换曲线。在SDR分级处理中,对原图像中一定值(拐点)以下的亮度将增益设为1(即,保持所输入的亮度原样不变地输出),对一定值(拐点)以上的亮度压缩增益使其收于给定的亮度内。给定的亮度例如可以是显示处理后的图像的显示装置中能显示的最大亮度,在使处理后的图像适合BT.709的情况下可以是100nit。因此,例如在对原图像70实施SDR分级处理的情况下,在通常的分级处理中,直到拐点(例如80nit前后)为止都将当前图像70的亮度原样不变地以线性保持,对于拐点以上的亮度,则降低各亮度以使当前图像70的最高亮度收于100nit。
图7A是表示将图6所示的原图像70母盘制作成SDR图像71的结果的亮度的一例的图。图7B是示意性表示用于将原信号值变换成SDR信号值(以下也称作“母盘制作”)、的原信号值与SDR信号值的关系的一例的图。另外,所谓原信号值,是原图像(例如原图像70)的0nit~最大亮度(例如1150nit)的亮度范围的亮度(以下称作“原图像的亮度”),所谓SDR信号值,是SDR的亮度范围的亮度(以下称作“SDR的亮度”)。另外,在图7B中,将原信号值的最大值设为10000,但原信号值的最大值根据原图像而变化。例如关于图6所示的原图像70,原信号值的最大值是1150。
在原图像70中,与0级(0Stop)对应的像素是具有成为明亮度的基准的基准亮度的像素。因此,在通过从原图像70向SDR图像71的母盘制作将原图像70变换成SDR图像71后,也不变更原图像70中与0级(0Stop)对应的原图像70的亮度(18nit)地设为SDR的亮度(18nit)(参考图7A的SDR图像71中以区域A示出的区域)。
在此,说明通过图7B所示的折拐曲线进行从原图像70向SDR图像71的母盘制作的示例。其中,图7B所示的原信号值的最大值不是10000而是1150。另外,拐点设为90。在该母盘制作中,在原图像70的与90nit对应的原图像70的亮度以下的亮度范围(0~90nit),不变更原图像70的亮度地设为SDR的亮度。即,原图像70中0~90nit的像素在母盘制作后的SDR图像71中也成为0~90nit的像素。另外,在原图像70的比与90nit对应的原图像70的亮度大的原图像70的亮度范围(90~1150nit),将原图像70的亮度线性变换成90~100nit的亮度范围的SDR的亮度。即,原图像70中90~1150nit的像素在母盘制作后的SDR图像71中成为90~100nit的像素。
例如对于原图像70中与90nit对应的像素来说,在通过从原图像70向SDR图像71的母盘制作而将原图像70变换成SDR图像71后,也不变更原图像70中与90nit对应的原图像70的亮度地设为SDR的亮度(参考图7A的SDR图像71中以区域B示出的区域)。
另外,例如对于原图像70中与2.3nit对应的像素来说,在通过从原图像70向SDR图像71的母盘制作而将原图像70变换成SDR图像71后,也与上述同样,不变更原图像70中与2.3nit对应的原图像70的亮度地设为SDR的亮度(参考图7A的SDR图像71中以区域C示出的区域)。
另一方面,例如对于原图像70中与1150nit对应的像素来说,在从原图像70向SDR图像71的母盘制作中,将原图像70中与1150nit对应的原图像70的亮度变换成SDR的最大亮度即100nit(参考图7A的SDR图像71中以D示出的区域)。
另外,例如对于原图像70中与290nit对应的像素来说,在从原图像70向SDR图像71的母盘制作中,将原图像70中与290nit对应的原图像70的亮度变换成95nit(参考图7A的SDR图像71中以区域E示出的区域)。
图8A是表示将图6所示的原图像70母盘制作成HDR图像72的结果的亮度的一例的图。图8B是示意性表示用于将原信号值变换成HDR信号值(母盘制作)的、原信号值与HDR信号值的关系的一例的图。另外,所谓HDR信号值,是HDR的亮度范围的亮度(以下称作“HDR的亮度”)。另外,在该实施例中,在从原图像70向HDR图像72的母盘制作中,容许将直到2000nit为止的亮度都设为HDR的亮度。另一方面,如上述那样,原图像70的最大亮度是1150nit。因此,在HDR图像72中能将原图像70的亮度原样不变地保持。
原图像70中与0级(0Stop)对应的像素是具有成为明亮度的基准的基准亮度的像素。因此,关于该像素,在通过从原图像70向HDR图像72的母盘制作将原图像70变换成HDR图像72后,也不变更原图像70中的亮度地设为HDR的亮度(图8A的HDR图像72中以区域A示出的区域)。
同样地,例如分别关于原图像70中与90nit对应的像素、原图像70中与2.3nit对应的像素、原图像70中与1150nit对应的像素、和原图像70中与290nit对应的像素,在通过从原图像70向HDR图像72的母盘制作将原图像70变换成HDR图像72后,也不变更原图像70的亮度地设为HDR的亮度(参考图8A的HDR图像72中以区域B、区域C、区域D、区域E示出的区域)。
图9是用于说明与HDR或SDR对应的摄像装置、通过摄像装置得到的图像数据的文件格式、和显示图像数据的显示装置或印刷图像数据的印刷装置的示意图。
图9所示的HDR摄像装置10与HDR下的摄像对应。HDR摄像装置10具备HDR摄像部11、SDR摄像部14、变换部12和JPEG压缩部13。HDR摄像装置10构成为能与以下情况对应:将在HDR摄像部11中以HDR拍摄模式摄像得到的图像数据用SDR显示装置40显示或用SDR印刷装置50印刷。具体地,在HDR摄像装置10中,在HDR摄像部11中以HDR拍摄模式摄像得到的HDR图像的HDR静止图像数据在变换部12中被变换成SDR静止图像数据。并且,在HDR摄像装置10中,通过变换部12中的变换得到的SDR静止图像数据在JPEG压缩部13中被JPEG压缩,将通过该压缩而得到的JPEG格式的SDR静止图像数据输出。另外,在HDR摄像装置10中,关于在SDR摄像部14中以现有的摄映模式(SDR摄映模式)摄像得到的SDR图像的SDR静止图像数据,也在JPEG压缩部13中被JPEG压缩,将通过压缩得到的JPEG格式的SDR静止图像数据输出。
SDR摄像装置20具备SDR摄像部21和JPEG压缩部22。在SDR摄像装置20中,与在HDR摄像装置10中以现有的摄映模式(SDR摄映模式)进行摄像的情况同样,通过SDR摄像部21中的摄像得到的SDR图像的SDR静止图像数据在JPEG压缩部22中被JPEG压缩,将通过该压缩得到的JPEG格式的SDR静止图像数据输出。
因此,在HDR显示装置30、SDR显示装置40以及SDR印刷装置50中,取得对基于HDR的HDR静止图像数据进行SDR变换而得到的SDR静止图像数据、或基于SDR摄像的SDR静止图像数据,将基于该SDR静止图像数据的SDR图像再生(显示或印刷)。
接下来使用图10以及图11来说明HDR拍摄模式。
图10以及图11是用于说明通过将2个图像合成来得到扩大了亮度范围(动态范围)的图像的HDR拍摄模式的示意图。
在智能手机以及数字摄像机等中有能对亮度范围(动态范围)大的影像进行摄像的HDR拍摄模式的设备。在HDR拍摄模式下,如图10以及图11的(a)所示那样,为了得到亮度范围(动态范围)大的HDR图像数据,以收于由SDR确定的亮度范围的方式对用2重曝光(将同一被摄体在相互不同的曝光状态下进行多次摄像的手法)等得到的2个SDR图像进行合成。由此,如图10以及图11的(b)所示那样,能在SDR显示装置显示HDR图像。
接下来使用图12来说明为了HDR显示用而摄像到的HDR图像。
图12是用于说明为了HDR显示用而摄像到的HDR图像的示意图。
如图12所示那样,HDR显示用的HDR图像以成为摄像的对象的场景的明亮度比SDR拍摄模式大的亮度范围(动态范围)被摄像。对通过该摄像得到的图像数据实施分级处理来生成HDR显示用的HDR图像,将该HDR图像传送到各装置来再生。HDR图像由于亮度范围(动态范围)比SDR图像大,因此不能原样不变地在SDR显示装置进行显示。为了在SDR显示装置显示HDR图像,需要从HDR图像向SDR图像进行变换。
另一方面,在使用图10以及图11说明的HDR拍摄模式下,合成后的图像由于以收于由SDR确定的亮度范围的方式被生成,因此能在HDR显示装置30和SDR显示装置40(或SDR印刷装置50)双方进行再生。
回到图9继续说明。近年来提出HDRTV等HDR显示装置,能不进行SDR变换地显示用于显示HDR图像的HDR图像数据。
另一方面,在具有HDR拍摄模式(HDR摄像功能)的摄像机中,与HDRTV不同,主要以逆光补正等为目的来使用HDR技术。并且,用该摄像机使用HDR技术摄像到的静止图像有时会在SDR显示装置或SDR印刷装置再生。因此,尽管该摄像机具备能生成影像用的HDR图像数据的摄像元件,能进行利用HDR技术的摄像,但也有时会对以HDR拍摄模式摄像到的HDR图像进行SDR变换,并输出SDR静止图像数据。如此地,在具有HDR摄像功能的摄像机中,尽管能生成可有效利用HDRTV的显示能力这样的亮度范围(动态范围)大的HDR图像数据,但也有时不生成HDR图像数据。
图13是用于说明使SDR印刷装置50印刷图像的情况下的课题的示意图。
为了有效利用HDRTV(例如HDR显示装置30)的HDR显示功能,在生成HDR显示用的HDR图像数据时,不将HDR图像数据变换成SDR图像数据,只要将原样不变的HDR图像数据用HDRTV进行显示即可。
图13所示的HDR摄像装置10A具备HDR摄像部11、SDR摄像部14、变换部12、JPEG压缩部13、HDR图像补正部15和HEVC(High Efficiency Video coding:高效视频编码)压缩部16。HDR摄像装置10A为了生成HDR图像数据而在HDR图像补正部15中进行HDR图像补正。
在HDR图像补正部15中,例如使用PQ曲线等HDR-EOTF(HDR-Electro-OpticalTransfer Function:HDR-电光传递函数)将用HDR摄像部11进行摄像而得到的RAW数据变换成能用HDRTV(例如与HDR10规格对应的HDR显示装置30)显示的10比特图像。并且,HDR摄像装置10A将由HDR图像补正部15得到的HDR图像数据例如从HEVC压缩部16经由HDMI(注册商标,High-Definition Multimedia Interface:高清多媒体接口)输出到HDRTV(例如HDR显示装置30)。由此,在接收到该HDR图像数据的HDRTV(例如HDR显示装置30)中显示与该HDR图像数据相应的HDR图像。
另外,能通过对HDR图像数据进行伪HDR变换,并将通过伪HDR变换得到的SDR形式的伪HDR图像输出到SDR显示装置40,来使SDR显示装置40显示比显示SDR图像数据更高品质的图像。另外,所谓伪HDR变换,是将HDR图像向具有与SDR显示装置40能显示的最大亮度值匹配的亮度范围(动态范围)的SDR形式的图像(伪HDR图像)进行变换。
但是,在SDR印刷装置50中,不能高品质地印刷HDR图像数据。因此,在SDR印刷装置50中,印刷以现有的SDR拍摄模式进行摄像而得到的SDR图像数据。即,在SDR印刷装置50中,即使得到高品质的HDR图像数据,也不能印刷基于高品质的HDR图像数据的高品质的图像。
以下适当参考附图来详细说明实施方式。其中,有时会省略需要以上的详细说明。例如有时会省略已经广为人知的事项的详细说明、以及针对实质相同的结构的重复说明等。这是为了避免以下的说明变得不必要地冗长,使本领域技术人员的理解容易。
另外,附图以及以下的说明为了本领域技术人员充分理解本公开而提供,意图并不在于由此限定权利请求书记载的主题。
另外,各图并不一定严格进行图示,而是为了易于理解本公开而适当进行了省略等的示意图。另外,在各图中,有时会对实质相同的构成要素标注相同附图标记,省略或简化说明。
(1.实施方式1)
在本实施方式中,公开生成用于使得能在SDR印刷装置50中印刷高品质的图像的静止图像数据的图像处理装置。
(1-1.结构)
图14是示意性表示实施方式1中的图像处理装置100的硬件结构的一例的框图。
如图14所示那样,图像处理装置100作为硬件结构而具备CPU(CentralProcessing Unit:中央处理单元)101、主存储器102、存储设备103、输入IF(Interface:接口)104和通信IF(Interface:接口)105。
CPU101是执行存储于存储设备103等中的控制程序的处理器。
主存储器102是用作CPU101执行控制程序时使用的工作区的易失性的存储区域。主存储器102例如能由半导体存储器等构成。
存储设备103是保持控制程序以及内容等的非易失性的存储区域。存储设备103例如能由磁盘、光盘、光磁盘或半导体存储器等构成。
输入IF104是键盘、鼠标、触摸板、按钮、触控面板等。
通信IF105是经由通信网络与其他装置进行通信的通信接口。所谓其他装置,例如是后述的印刷装置200、输入装置300等。通信IF105例如是适合IEEE802.11a、b、g、n规格的无线LAN(Local Area Network:局域网)接口,但也可以是适合在第3代移动通信系统(3G)、第4代移动通信系统(4G)或LTE(注册商标,LONG Term Evolution:长期演进)等移动通信系统中利用的通信规格的无线通信接口,还可以是适合Bluetooth(注册商标)规格的无线通信接口。另外,通信IF105可以是有线LAN接口、USB(Universal Serial Bus:通用串行总线)接口等有线通信接口。
图15是示意性表示实施方式1中的图像处理装置的功能结构的第1例的框图。
图像处理装置100具备取得部110、变换部120和输出部130。图像处理装置100可以作为组装到摄像装置的装置实现,也可以作为单独的装置实现。另外,在图像处理装置100有线连接或无线连接印刷装置200。印刷装置200是图9所示的SDR印刷装置50的一例。
取得部110取得通过摄像得到的第1静止图像数据D1和表示印刷装置200的印刷能力的能力信息I1。第1静止图像数据D1是以第1动态范围定义亮度范围的静止图像数据。第1动态范围例如是HDR(High Dynamic Range:高动态范围)。
取得部110例如可以取得表示印刷装置200使用于印刷的纸张(或者对印刷装置200设定的纸张)的种类的纸信息来作为能力信息I1。纸信息例如可以包含在用户使印刷装置200印刷图像时的指示(以下也称作“印刷指示”)中。
另外,取得部110也可以取得通过在印刷装置200使用于印刷的纸张上印刷特定的图案(以下也称作“测试图案”)而得到的印刷结果来作为能力信息I1。取得部110也可以通过用户将印刷结果输入到图像处理装置100(或者印刷装置200)来取得该印刷结果。关于该印刷结果后述。
取得部110例如可以从与图像处理装置100有线连接或无线连接的摄像装置、信息终端或存储装置等取得第1静止图像数据D1。取得第1静止图像数据D1的取得部110例如可以通过通信IF105(参考图14)实现。
取得部110例如可以通过接受来自用户的输入操作来取得包含作为能力信息I1的纸信息的印刷指示。取得能力信息I1的取得部110例如可以通过输入IF104(参考图14)实现。另外,取得部110也可以不取得印刷指示地取得能力信息I1。
变换部120将由取得部110取得的第1静止图像数据D1对应于由取得部110取得的能力信息I1所表示的印刷能力变换成第2静止图像数据D2。第2静止图像数据D2是以亮度范围比第1动态范围小的第2动态范围定义的静止图像数据。
在能力信息I1是包含表示纸张的种类的信息的纸信息的情况下,变换部120通过参考表示预先确定的关系的信息,来确定与由取得部110取得的纸信息所表示的纸张的种类对应的反射亮度。另外,表示该预先确定的关系的信息是表示多个纸张的种类和与多个纸张的种类分别对应的反射亮度之间的关系的信息。并且,变换部120将以由纸信息确定的反射亮度作为最大亮度的亮度范围(动态范围)设为第2动态范围,将第1静止图像数据D1向第2静止图像数据D2变换。另外,所谓反射亮度,是对纸张照射规定的亮度的光时由该纸张反射的该光的亮度。规定的亮度例如可以以表征一般的室内的明亮度的亮度定义,或者可以是其他任意确定的亮度。并且,能预先对多个种类的纸张分别照射规定的亮度的光,测量由各纸张反射的光的亮度,从测量的结果得到表示该预先确定的关系(多个纸张的种类和反射亮度之间的关系)的信息。表示该预先确定的关系的信息例如可以由表征多个纸张的种类和反射亮度之间的关系的表格示出,也可以存储在存储设备103中。另外,表示该预先确定的关系的信息也可以从外部的信息处理装置(未图示)经由通信网络取得。
在由取得部110取得的能力信息I1包含表示印刷结果的信息的情况下,变换部120将对应于该印刷结果决定的亮度范围(动态范围)设为第2动态范围。并且,变换部120基于该第2动态范围将第1静止图像数据D1向第2静止图像数据D2变换。
变换部120例如可以通过CPU101、主存储器102、存储设备103(参考图14)等实现。变换部120可以通过由半导体集成电路等构成的专用电路实现。
输出部130将通过变换部120从第1静止图像数据D1变换得到的第2静止图像数据D2输出到印刷装置200。输出部130例如可以通过通信IF105(参考图14)来实现。
印刷装置200接收来自图像处理装置100的第2静止图像数据D2以及来自用户的印刷指示。并且,印刷装置200在接收到的印刷指示中所指定的种类的纸张上印刷由接收到的第2静止图像数据D2表示的静止图像。
另外,图像处理装置100可以对印刷装置200输出用于印刷测试图案的印刷指示,并使印刷装置200执行该测试图案的印刷。另外,图像处理装置100可以具备显示器(未图示)。或者可以在图像处理装置100连接显示器。并且,图像处理装置100可以在将执行测试图案的印刷的印刷指示输出到印刷装置200后,在显示器显示用于使用户输入通过在纸张上印刷测试图案而得到的印刷结果的输入指示。该输入指示例如可以是促使用户输入从印刷了测试图案的纸张得到的印刷结果的消息、图像或UI(User Interface:用户界面)等。
图16是表示将实施方式1中的测试图案150印刷在纸张上的结果的一例的图。
在本实施方式中,作为特定的图案(测试图案),例如将图16所示的测试图案150印刷在印刷装置200使用于印刷的纸张P1上。在图16中作为一例示出的测试图案150中包含图案1~3和图案4~6。图案1~3如图16所示那样,是如下那样的图案:在纸张P1上,在左侧上段(图16中的左侧上段)的区域纵向并列地配置3条成为比较基准的黑色,在各黑色的右侧的区域配置灰色,各灰色的浓度从上起依次变浅。即,图案1~3是如下那样的图案:以配置于纸张P1的左侧(图16中的左侧)的3条黑色作为比较基准,配置于各黑色的右侧的灰色从深灰色向浅灰色以3阶段变化。图案4~6如图16所示那样是如下那样的图案:在纸张P1上,在左侧下段(图16中的左侧下段)的区域纵向并列配置成为3条比较基准的白色,在各白色的右侧的区域配置灰色,各灰色的浓度从上起依次变浅。即,图案4~6是如下那样的图案:以配置于纸张P1的左侧(图16中的左侧)的3条白色为比较基准,配置于各白色的右侧的灰色从浅灰色向更浅的灰色以3阶段变化。另外,如图16所示那样,对图案1~6并列记载用于将图案1~6相互区别的数字1~6。
另外,图案1~6的配置位置并不限定于任何图16所示的配置位置。各图案也可以横向配置。另外,图案1~6以外的图案也可以包含在测试图案150中。另外,测试图案150中包含的图案的数量可以是5以下,也可以是7以上。例如,也可以除了图案1~6以外,在图16所示的测试图案150中进一步包含灰色的浓度更细致变化的单个或多个图案。
在图像处理装置100中,例如,通过例如显示器等对用户示出促使用户参考印刷了测试图案150的纸张P1将能判别比较基准的黑色或白色和灰色的灰度的图案(或不能判别的图案)的编号输入到图像处理装置100(或印刷装置200)的输入指示。另一方面,在图像处理装置100中,在例如存储设备103等中存储将图案1~3的各编号与图案4~6的各编号的组合(例如9种组合)和亮度范围(动态范围)建立对应的表格。并且,,通过由用户进行按照该输入指示的输入操作,图像处理装置100取得图案1~6的编号的组合。将如此得到的编号的组合在本实施方式中称作“印刷结果”。该编号的组合是印刷结果的一例。另外,在图16所示的测试图案150中,也可以取代编号而使用字母、记号、其他字符、或它们的组合等。
在图像处理装置100中,从与图案1~6的编号的例如9种组合分别预先建立对应的亮度范围之中选择与由用户输入的2个编号(即,图案1~3中的任一个编号和图案4~6中的任一个编号)对应的1个亮度范围,作为与该纸张对应的第2动态范围。示出这些动作的具体的一例。例如在图像处理装置100中,通过显示器等示出促使用户输入图案1~3当中能判别灰度的最小的图案的编号和图案4~6当中能判别灰度的最大的图案的编号的输入指示。并且,图像处理装置100基于按照该输入指示从用户输入的2个图案的编号来选择与该图案的编号的组合预先建立对应的亮度范围,将选择出的亮度范围设为第2动态范围。如此,在图像处理装置100中决定第2动态范围。
图17是示意性表示实施方式1所示的变换部120中的、用于从第1动态范围向第2动态范围进行变换的第1动态范围的信号值与第2动态范围的信号值的关系的一例的图。另外,第1动态范围的信号值例如是HDR中的亮度,第2动态范围的信号值是具有比HDR的最大亮度小的最大亮度的亮度范围(动态范围)的亮度。
在显示装置中,通过对每个像素调整光的3原色即RGB(Red、Green、Blue:红、绿、蓝)的发光的强弱来显示图像。因此,在显示装置中,图像以绝对亮度表现。另一方面,在印刷装置中,通过在纸张上印刷包含CMYK(Cyan、Magenta、Yellow、blacK:青、品红、黄、黑)的多种涂料来显示图像。印刷在纸张上的图像以对应于涂布在纸张上的涂料而反射的光的亮度表现。因此,该图像中的最大亮度成为未涂布涂料的白色(纸张的白色)的区域的亮度。另外,在纸张上反射的光的明亮度会根据纸张的种类(纸张的反射率)、向纸张照射的光的亮度、向纸张照射的光的角度等发生变化。
因此,为了在纸张上印刷扩展了亮度范围(动态范围)的高品质的图像,在设想了纸张的种类、对设置印刷有图像的纸张的环境进行照射的光源的种类以及明亮度等的基础上进行将HDR图像的信号电平从第1动态范围向第2动态范围变换的变换处理是有效的。
变换部120例如如图17所示那样,通过进行将第1动态范围向以纸张的表现能力的上限(即,以纸张的白色表现的亮度)作为最大亮度的第2动态范围进行变换的处理,来将作为第1静止图像数据D1的HDR图像数据向第2静止图像数据D2进行变换。以纸张的白色表现的最大亮度例如能根据纸张的反射率求取。变换部120例如可以使用纸张的反射率算出规定的亮度的光被该纸张的白色反射时的反射光的亮度(以下称作“反射亮度”),将算出的反射亮度作为该纸张的表现能力的上限。
另外,变换部120可以取得第1静止图像数据D1中的最大亮度,通过以使第1静止图像数据D1中的最大亮度成为反射亮度的方式变换亮度范围(动态范围),来将第1静止图像数据D1向第2静止图像数据D2变换。
(1-2.动作)
图18是表示实施方式1中的图像处理装置100的动作的一例的流程图。
取得部110取得第1静止图像数据D1(步骤S101)。
取得部110取得能力信息I1(步骤S102)。
变换部120基于与由取得部110取得的能力信息I1所表示的印刷能力相应的第2动态范围将由取得部110取得的第1静止图像数据D1变换成第2静止图像数据D2(步骤S103)。
输出部130将通过变换部120从第1静止图像数据D1变换得到的第2静止图像数据D2输出到印刷装置200(步骤S104)。
(1-3.效果等)
如以上那样,在本实施方式中,图像处理装置具备:取得部,其取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据和表示印刷装置的印刷能力的能力信息;变换部,其将由取得部取得的第1静止图像数据对应于由取得部取得的能力信息所表示的印刷能力变换成以亮度范围比第1动态范围小的第2动态范围定义的第2静止图像数据;和输出部,其将由变换部变换得到的第2静止图像数据输出到印刷装置。
另外,在本实施方式中,图像处理方法取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据,取得表示印刷装置的印刷能力的能力信息,将取得的第1静止图像数据对应于取得的能力信息所表示的印刷能力变换成以亮度范围比第1动态范围小的第2动态范围定义的第2静止图像数据,将变换得到的第2静止图像数据输出到印刷装置。
另外,图像处理装置100是图像处理装置的一例。第1静止图像数据D1是第1静止图像数据的一例。印刷装置200是印刷装置的一例。能力信息I1是能力信息的一例。取得部110是取得部的一例。第2静止图像数据D2是第2静止图像数据的一例。变换部120是变换部的一例。输出部130是输出部的一例。
例如在实施方式1所示的示例中,图像处理装置100具备:取得部110,其取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据D1和表示印刷装置200的印刷能力的能力信息I1;变换部120,其将由取得部110取得的第1静止图像数据D1对应于由取得部110取得的能力信息I1所表示的印刷能力变换成以亮度范围比第1动态范围小的第2动态范围定义的第2静止图像数据D2;和输出部13,其将由变换部120变换得到的第2静止图像数据D2输出到印刷装置200。
另外,在实施方式1所示的示例中,在由图像处理装置100执行的图像处理方法中,取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据D1(步骤S101),取得表示印刷装置200的印刷能力的能力信息I1(步骤S102),将取得的第1静止图像数据D1对应于取得的能力信息I1所表示的印刷能力变换成以亮度范围比第1动态范围小的第2动态范围定义的第2静止图像数据D2(步骤S103),将变换得到的第2静止图像数据D2输出到印刷装置200(步骤S104)。
如此构成的图像处理装置100能将第1静止图像数据D1变换成以对应于印刷装置200的印刷能力决定的第2动态范围定义的第2静止图像数据D2,并将该第2静止图像数据D2输出到印刷装置200。因此,图像处理装置100能以与印刷装置200的印刷能力相应的亮度范围(动态范围)使印刷装置200印刷基于第1静止图像数据D1的图像。因而,图像处理装置100能使印刷装置200高品质地印刷基于第1静止图像数据D1的图像。
在该图像处理装置中,取得部可以取得表示印刷装置使用于印刷的纸张的种类的纸信息来作为能力信息。变换部也可以通过参考多个纸张的种类和对该纸张照射光时由该纸张反射的该光的反射亮度之间的关系来确定与由取得部取得的纸信息所表示的纸张的种类对应的反射亮度。并且,变换部可以将以确定出的反射亮度作为最大亮度的亮度范围设为第2动态范围,从第1静止图像数据向第2静止图像数据进行变换。
例如在实施方式1所示的示例中,在图像处理装置100中,取得部110取得表示印刷装置200使用于印刷的纸张的种类的纸信息来作为能力信息I1。变换部120通过参考多个纸张的种类和对该纸张照射光时由该纸张反射的该光的反射亮度之间的关系来确定与由取得部110取得的纸信息所表示的纸张的种类对应的反射亮度。并且,变换部120将以确定出的反射亮度作为最大亮度的亮度范围设为第2动态范围,从第1静止图像数据D1向第2静止图像数据D2进行变换。
这样构成的图像处理装置100能将第1静止图像数据D1变换成以基于印刷装置200使用于印刷的纸张的种类的第2动态范围定义的第2静止图像数据D2,并将该第2静止图像数据D2输出到印刷装置200。因此,图像处理装置100能使印刷装置200以与该纸张的表现能力相应的亮度范围(动态范围)印刷基于第1静止图像数据D1的图像。因而,图像处理装置100能使印刷装置200高品质地印刷基于第1静止图像数据D1的图像。
在该图像处理装置中,取得部也可以取得在印刷装置使用于印刷的纸张上由该印刷装置印刷特定的图案而得到的印刷结果来作为能力信息。变换部可以将以对应于由取得部取得的该印刷结果决定的亮度范围设为第2动态范围,从第1静止图像数据向第2静止图像数据进行变换。
另外,图16所示的测试图案150是特定的图案的一例。图像处理装置100从参考了印刷有图16所示的测试图案150的纸张P1的用户得到的图案1~6的编号的组合是印刷结果的一例。
例如在实施方式1所示的示例中,在图像处理装置100中,取得部110取得在印刷装置200使用于印刷的纸张上由印刷装置200印刷特定的图案而得到的印刷结果来作为能力信息I1。变换部120将对应于由取得部110取得的该印刷结果而决定的亮度范围设为第2动态范围,从第1静止图像数据D1向第2静止图像数据D2进行变换。
在这样构成的图像处理装置100中,能在印刷装置200使用于印刷的纸张上印刷特定的图案,从用户取得基于印刷有特定的图案的纸张P1的印刷结果,并对应于所取得的印刷结果来决定第2动态范围。并且,图像处理装置100能将第1静止图像数据D1变换成以该第2动态范围定义的第2静止图像数据D2,并将该第2静止图像数据D2输出到印刷装置200。即,图像处理装置100能容易地估计印刷装置200使用于印刷的纸张的表现能力(即,将以该纸张的白色表现的亮度设为最大亮度的亮度范围),能通过将适合该纸张的表现能力的亮度范围(动态范围)设为第2动态范围而容易地决定第2动态范围。因此,图像处理装置100能使印刷装置200高品质地印刷基于第1静止图像数据D1的图像。
在该图像处理装置中,第1动态范围可以是HDR。
例如在实施方式1所示的示例中,在图像处理装置100中,第1动态范围是HDR。
因此,该图像处理装置100能尽可能不损害与HDR对应的第1静止图像数据D1的亮度范围(动态范围)地使印刷装置200高品质地印刷基于第1静止图像数据D1的图像。
(1-4.实施方式1的变形例)
接下来参考图19~图21来说明实施方式1的变形例1~5。另外,在以下的说明中,对与实施方式1说明的构成要素实质相同的构成要素标注与该构成要素相同的附图标记,省略说明。另外,在以下的说明中,图像处理装置100A、100B、100C分别是图像处理装置的一例。取得部110A、110B、110C分别是取得部的一例。变换部120C是变换部的一例。印刷装置200A、200B分别是印刷装置的一例。
(1-4-1.变形例1)
首先说明实施方式1的变形例1。
图19是示意性表示实施方式1的变形例1中的图像处理装置100A的功能结构的一例的框图。
图像处理装置100A具备取得部110A、变换部120和输出部130。变形例1中的图像处理装置100A与实施方式1中的图像处理装置100相比较,从输入装置300取得能力信息I1这一点与图像处理装置100不同。图像处理装置100A中的其他结构由于与实施方式1中的图像处理装置100实质相同,因此省略详细的说明。
取得部110A与实施方式1的图像处理装置100中的取得部110同样地取得第1静止图像数据D1和能力信息I1。
取得部110A可以与实施方式1的图像处理装置100中的取得部110同样地,例如从与图像处理装置100A有线连接或无线连接的摄像装置、信息终端或存储装置等取得第1静止图像数据D1。取得第1静止图像数据D1的取得部110A例如可以通过通信IF105(参考图14)实现。
取得部110A例如可以从与图像处理装置100A有线连接或无线连接的输入装置300取得能力信息I1。取得部110A取得的能力信息I1与实施方式1同样,可以是纸信息,也可以是印刷结果。取得能力信息I1的取得部110A例如可以通过通信IF105(参考图14)实现。
输入装置300例如是用于用户将印刷指示输出到印刷装置200的信息终端,例如是智能手机、平板终端或PC等。输入装置300具备输入IF以及通信IF(未图示),将包含在该输入IF输入的纸信息的印刷指示使用该通信IF发送到图像处理装置100A。输入装置300所具备的输入IF例如可以与输入IF104(参考图14)是同样的结构。另外,输入装置300所具备的通信IF只要是能与图像处理装置100A通信的结构即可,例如可以是与通信IF105(参考图14)同样的结构。
如此,图像处理装置100A可以经由外部的输入装置300取得包含能力信息11的印刷指示。另外,图像处理装置100A也可以从输入装置300取得由用户输入到输入装置300的印刷结果。
(1-4-2.变形例2)
接下来说明实施方式1的变形例2。
图20是示意性表示实施方式1的变形例2中的图像处理装置100B的功能结构的一例的框图。
图像处理装置100B具备取得部110B、变换部120和输出部130。变形例2中的图像处理装置100B与实施方式1中的图像处理装置100相比较,在从印刷装置200A取得能力信息I1这一点上与图像处理装置100不同。图像处理装置100B中的其他结构由于与实施方式1中的图像处理装置100实质相同,因此省略详细的说明。
取得部110B与实施方式1中的取得部110以及变形例1中的取得部110A同样地取得第1静止图像数据D1和能力信息I1。
取得部110B可以与实施方式1的图像处理装置100中的取得部110同样地,例如从与图像处理装置100B有线连接或无线连接的摄像装置、信息终端或存储装置等取得第1静止图像数据D1。取得第1静止图像数据D1的取得部110B例如可以通过通信IF105(参考图14)实现。
取得部110B例如可以从与图像处理装置100B有线连接或无线连接的印刷装置200A取得能力信息I1。取得部110B取得的能力信息I1与实施方式1以及变形例1同样,可以是纸信息,也可以是印刷结果。取得能力信息I1的取得部110B例如可以通过通信IF105(参考图14)实现。
印刷装置200A具备用于用户将印刷指示输入到印刷装置200A的输入IF201。印刷装置200A若从用户接受到向输入IF201的印刷指示,就将该印刷指示经由印刷装置200A所具备的通信IF(未图示)发送到图像处理装置100B。输入IF201例如具备触控面板、输入按钮以及显示器等当中的1个或多个而构成。印刷装置200A所具备的通信IF只要是能与图像处理装置100B通信的结构即可,例如可以是与通信IF105(参考图14)同样的结构。
如此,图像处理装置100B可以经由印刷装置200A取得包含能力信息I1的印刷指示。另外,图像处理装置100B也可以从印刷装置200A取得由用户输入到印刷装置200A的印刷结果。
(1-4-3.变形例3)
接下来说明实施方式1的变形例3。
图21是示意性表示实施方式1的变形例3中的图像处理装置100C的功能结构的一例的框图。
图像处理装置100C具备取得部110C、变换部120C和输出部130。变形例3中的图像处理装置100C与变形例2中的图像处理装置100B相比较,在从印刷装置200B取得与能力信息I1不同的能力信息I2这一点上与图像处理装置100B不同。另外,变形例3中的图像处理装置100C的变换部120C中的处理与变形例2中的变换部120中的处理不同。图像处理装置100C中的其他结构由于与变形例2中的图像处理装置100B实质相同,因此省略详细的说明。
取得部110C取得第1静止图像数据D1和能力信息I2。
取得部110C与实施方式1的图像处理装置100中的取得部110同样地,例如可以从与图像处理装置100C有线连接或无线连接的摄像装置、信息终端或存储装置等取得第1静止图像数据D1。取得第1静止图像数据D1的取得部110C例如可以通过通信IF105(参考图14)实现。
取得部110C从与图像处理装置100C有线连接或无线连接的印刷装置200B取得能力信息I2。具体地,取得部110C取得用印刷装置200B的扫描仪202扫描印刷装置200B使用于印刷的纸张(例如印刷前什么都未印刷的纸张)而得到的扫描图像来作为能力信息I2。取得部110C例如通过通信IF105(参考图14)实现。
变换部120C基于由取得部110C取得的扫描图像的亮度(反射亮度)来确定与用扫描仪202扫描的纸张对应的最大亮度。并且,变换部120C基于该最大亮度决定第2动态范围。即,变换部120C将以基于能力信息I2确定的反射亮度作为为最大亮度的亮度范围(动态范围)设为第2动态范围,从第1静止图像数据向第2静止图像数据进行变换。变换部120C例如通过CPU101、主存储器102、存储设备103等(参考图14)实现。
变换部120C也可以对应于扫描仪202的种类来变更变换处理。变换部120C例如可以对应于扫描仪202所具有的光源的明亮度和扫描仪202所具有的图像传感器的敏感度中的至少一方来补正所得到的图像的亮度。变换部120C例如可以对图像的亮度进行补正,以使得扫描仪202所具有的光源的明亮度越明亮,则得到的图像的亮度越小。另外,变换部120C例如可以对图像的亮度进行补正,以使得扫描仪202所具有的图像传感器的敏感度越高,则得到的图像的亮度越小。另外,在该情况下,图像处理装置100C可以在存储设备103中存储将表征扫描仪202的种类的信息和表征用于补正图像的亮度的补正处理的信息预先建立关系的补正信息。另外,图像处理装置100C可以从印刷装置200B取得表征扫描仪202的种类的信息,根据补正信息确定与表征所取得的扫描仪202的种类的信息对应的补正处理,并进行所确定出的补正处理,由此进行与扫描仪202的种类相应的变换处理。另外,在本变形例中,补正信息也可以不存储在存储设备103中。图像处理装置100C可以从外部的信息处理装置经由通信IF105(参考图14)取得补正信息。
印刷装置200B具备扫描仪202。印刷装置200B能通过用扫描仪202扫描印刷装置200B使用于印刷的纸张(例如印刷前的什么都未印刷的纸张)来获得扫描图像。印刷装置200B将得到的扫描图像作为能力信息I2经由印刷装置200B所具备的通信IF(未图示)发送到图像处理装置100C。
例如图像处理装置100C可以具备显示器。并且,图像处理装置100C可以使显示器显示扫描指示。该扫描指示可以是促使用户用与图像处理装置100C连接的印刷装置200B所具备的扫描仪202扫描印刷装置200B使用于印刷的纸张的消息、图像或UI等。在该情况下,图像处理装置100C可以通过与连接于图像处理装置100C的印刷装置200B进行有线通信或无线通信来判定印刷装置200B是否具备扫描仪202。另外,图像处理装置100C可以在显示器显示促使用户进行纸张的扫描的扫描指示,在印刷装置200B中进行了纸张的扫描并在该扫描中得到纸张的扫描图像的情况下,对印刷装置200B进行控制,以便将得到的扫描图像发送到图像处理装置100C。
如以上那样,在本变形例的图像处理装置中,取得部可以取得通过扫描印刷装置使用于印刷的纸张而得到的扫描图像来作为能力信息。变换部可以基于由取得部取得的该扫描图像的亮度来确定对该纸张照射光时由该纸张反射的该光的反射亮度,将以所确定出的反射亮度作为最大亮度的亮度范围设为第2动态范围,从第1静止图像数据向第2静止图像数据进行变换。
另外,能力信息I2是能力信息的一例。
例如在变形例3所示的示例中,在图像处理装置100C中,取得部110C取得通过扫描印刷装置200B使用于印刷的纸张而得到的扫描图像来作为能力信息I2。变换部120C基于由取得部110C取得的该扫描图像的亮度来确定对该纸张照射光时由该纸张反射的该光的反射亮度,将以所确定出的反射亮度作为最大亮度的亮度范围设为第2动态范围,从第1静止图像数据D1向第2静止图像数据D2进行变换。
在这样构成的图像处理装置100C中,能通过用扫描仪202扫描印刷装置200B使用于印刷的纸张来取得扫描图像,对应于所取得的扫描图像来决定第2动态范围。并且,图像处理装置100C能将第1静止图像数据D1变换成以该第2动态范围定义的第2静止图像数据D2,并将该第2静止图像数据D2输出到印刷装置200B。即,图像处理装置100C能容易地估计印刷装置200B使用于印刷的纸张的表现能力(即,将以该纸张的白色表现的亮度设为最大亮度的亮度范围),通过将适合该纸张的表现能力的亮度范围(动态范围)设为第2动态范围,能容易地决定第2动态范围。因此,图像处理装置100C能使印刷装置200B高品质地印刷基于第1静止图像数据D1的图像。
另外,图像处理装置100C可以从印刷装置200B取得由用户输入到印刷装置200B的印刷结果。
(1-4-4.变形例4)
接下来说明实施方式的变形例4。
在实施方式1(以及实施方式1的变形例1~3)中,说明了图像处理装置100(100A、100B或100C)是与印刷装置200(200A或200B)分体的独立的装置的结构例,但本公开并不受该结构的任何限定。例如可以将印刷装置200组装到图像处理装置100或图像处理装置100A,也可以将印刷装置200A组装到图像处理装置100B,还可以将印刷装置200B组装到图像处理装置100C。在该情况下,在图像处理装置100(100A、100B或100C)中,可以省略能与印刷装置200(200A或200B)通信的通信IF105。
(1-4-5.变形例5)
接下来说明实施方式1的变形例5。
在实施方式1以及变形例1~4中,说明了变换部120(120C)进行将第1静止图像数据D1变换成第2静止图像数据D2的处理的结构例,但本公开并不受该结构的任何限定。
在第1静止图像数据D1的最大亮度小于与纸张对应的反射亮度(根据纸信息确定的反射亮度、或从扫描图像取得的反射亮度)的情况下,变换部120(120C)也可以不进行从第1静止图像数据D1向第2静止图像数据D2的变换。
在该情况下,取得部110(110A、110B或110C)取得第1静止图像数据D1,并且进一步取得以亮度范围(动态范围)比第1动态范围小的第3动态范围定义的第3静止图像数据D3(参考图22)。第3动态范围例如是SDR(Standard Dynamic Range:标准动态范围)。
另外,取得部110(110A、110B或110C)可以与取得第1静止图像数据D1时同样,从与图像处理装置100(100A、100B或100C)有线连接或无线连接的摄像装置、信息终端或存储装置等取得第3静止图像数据D3。例如对于对被摄体进行摄像来生成第1静止图像数据D1的摄像装置(例如图9所示的HDR摄像装置10等)来说,在该摄像装置能在该被摄体的摄像时生成第1静止图像数据D1并且还生成第3静止图像数据D的情况下,取得部110(110A、110B或110C)能从该摄像装置取得第3静止图像数据D3。
并且,输出部130将由取得部110(110A、110B或110C)取得的第3静止图像数据D3输出到印刷装置200(200A或200B)。
即,在变形例5中的图像处理装置中,取得部可以取得第1静止图像数据,并且可以进一步取得以亮度范围比第1动态范围小的第3动态范围定义的第3静止图像数据。在第1静止图像数据的最大亮度小于与该纸张对应的反射亮度的情况下,变换部不进行从第1静止图像数据向第2静止图像数据的变换,输出部可以将由取得部取得的第3静止图像数据输出到印刷装置。
另外,第3静止图像数据D3是第3静止图像数据的一例。
例如在变形例5所示的示例中,在图像处理装置100(100A、100B或100C)中,取得部110(110A、110B或110C)取得第1静止图像数据D1,并且进一步取得以亮度范围比第1动态范围小的第3动态范围定义的第3静止图像数据D3。在第1静止图像数据D1的最大亮度小于与该纸张对应的反射亮度的情况下,变换部120(120C)不进行从第1静止图像数据D1向第2静止图像数据D2的变换,输出部130将由取得部110(110A、110B或110C)取得的第3静止图像数据D3输出到印刷装置200(200A或200B)。
在HDR的第1静止图像数据D1的最大亮度小于与纸张对应的反射亮度的情况下,这样构成的图像处理装置100(100A、100B或100C)能将SDR的第3静止图像数据D3输出到印刷装置200(200A或200B),由印刷装置200(200A或200B)印刷基于第3静止图像数据D3的图像。
例如有如下情况:第1静止图像数据D1的最大亮度小于与印刷装置200(200A或200B)使用于印刷的纸张对应的反射亮度,为此,即使进行从第1静止图像数据D1向第2静止图像数据D2的变换处理,在印刷装置200(200A或200B)中也不能印刷高品质的图像。在这样的情况下,图像处理装置100(100A、100B或100C)不进行从第1静止图像数据D1向第2静止图像数据D2的变换处理,而将SDR的第3静止图像数据D3输出到印刷装置200(200A或200B)。因此,根据变形例5所示的结构例,能在图像处理装置100(100A、100B或100C)中减少变换处理所涉及的负载。
(1-5.总结)
图22是用于说明实施方式1(或变形例1~5)中的图像处理装置100(100A、100B或100C)的实施例的示意图。
如图22所示那样,图像处理装置100(100A、100B或100C)取得HDR图像即第1静止图像数据D1,并将其原样不变地输出到HDR显示装置30。HDR显示装置30由于与HDR对应,因此能高品质地显示第1静止图像数据D1。
另外,图像处理装置100(100A、100B或100C)取得第1静止图像数据D1和SDR印刷装置50的能力信息I1(I2)。并且,图像处理装置100(100A、100B或100C)基于所取得的能力信息I1(I2)将第1静止图像数据D1变换成第2静止图像数据D2,并将变换得到的第2静止图像数据D2输出到SDR印刷装置50。SDR印刷装置50不能原样不变地印刷第1静止图像数据D1。但是,由于SDR印刷装置50与图像处理装置100(100A、100B或100C)中从第1静止图像数据D1变换得到的第2静止图像数据D2对应,因此能使用第2静止图像数据D2在纸张上印刷基于第2静止图像数据D2的图像。另外,第2静止图像数据D2由于以比SDR图像即第3静止图像数据D3大的亮度范围(动态范围)来定义,因此能在纸张上印刷比基于第3静止图像数据D3的SDR图像更高品质的图像。
另外,在第1静止图像数据D1的最大亮度小于与纸张对应的反射亮度的情况下,图像处理装置100(100A、100B或100C)不进行从第1静止图像数据D1向第2静止图像数据D2的变换,而将第3静止图像数据D3输出到SDR印刷装置50。SDR印刷装置50由于与SDR图像即第3静止图像数据D3对应,因此能原样不变地印刷基于第3静止图像数据D3的图像。
(1-6.通信协议的示例)
接下来参考图23~图26来说明本实施方式中的通信协议的示例(第1例~第4例)。另外,在以下的说明中,对相互实质相同的构成要素赋予相同附图标记,省略重复的说明。
图23是示意性表示实施方式中的显示装置400与印刷装置500之间的通信协议的第1例的图。
显示装置400例如是电视机、录像机、视频播放机或数字摄像机等具有图像显示功能或图像再生功能的装置。印刷装置500是打印机等具有印刷功能的装置。
显示装置400的通信协议从下级起依次具备作为物理层的USB物理层440、作为传输层的PTP传输层430、作为变换层的DPS层420、以及作为应用层的DPS应用层410而构成。印刷装置500的通信协议从下级起依次具备作为物理层的USB物理层540、作为传输层的PTP传输层530、作为变换层的DPS层520以及作为应用层的DPS应用层510而构成。另外,在图23中,作为物理层而利用USB物理层440、540,示出对显示装置400与印刷装置500之间进行USB连接的结构例,但也可以用无线通信(例如Wi-Fi)对显示装置400与印刷装置500之间进行连接。
在图23中示出在传输层中利用被规定为ISO15740的图片传输协议(PTP:PictureTransfer Protocol)的结构例。变换层规定针对应用层的I/F(InterFace),将来自应用层的输入输出变换成PTP协议。在DPS层存在DPS发现(DPS Discovery),该DPS发现进行在显示装置400与印刷装置500之间是否具有相互对应的功能的协商。在DPS层420存在DPS发现421,在DPS层520存在DPS发现521。
在对显示装置400与印刷装置500之间进行USB连接的情况下,在以向显示装置400以及印刷装置500的USB线缆的连接作为契机而确立了PTP下的相互连接后,显示装置400以及印刷装置500相互通过DPS发现421、521来确认连接对方。这之后,对成为印刷对象的静止图像进行保持的显示装置400作为存储服务器412,来对成为存储客户端511的印刷装置500提供文件。印刷装置500作为打印服务器512,接受来自成为打印客户端411的显示装置400的请求。显示装置400的打印客户端411对打印服务器512询问打印机的能力,并适当将该询问结果在显示装置400的UI(User Interface:用户界面)上进行显示。
另外,在显示装置400进行静止图像的一览显示等,由用户从该显示之中选择成为印刷的对象的静止图像,由此,在从用户对显示装置400进行了印刷的指示的情况下,显示装置400对打印服务器512请求所指示的静止图像的印刷。印刷装置500作为存储客户端511,对显示装置400的存储服务器412请求与进行了印刷的指示的静止图像对应的文件。显示装置400对应于该请求将保持的静止图像作为文件通知给印刷装置500。
图24是示意性表示实施方式中的显示装置400A与印刷装置500A之间的通信协议的第2例的图。
显示装置400A与第1例同样,例如是电视机、录像机、视频播放机或数字摄像机等具有图像显示功能或图像再生功能的装置。印刷装置500A与第1例同样是打印机等具有印刷功能的装置。
显示装置400A的通信协议从下级起依次具备TCP/IP层440A、UPnP层430A、控制中间层420A以及应用层410A而构成。印刷装置500A的通信协议从下级起依次具备TCP/IP层540A、UPnP层530A、控制中间层520A以及应用层510A而构成。
显示装置400A以及印刷装置500A的通信协议利用Wi-Fi来作为物理层(未图示),并采用TCP/IP层440A、540A来作为其上的传输层。并且,显示装置400A以及印刷装置500A在TCP/IP层440A、540之上利用UPnP作为用于相互发现连接对方的协议。在显示装置400A以及印刷装置500A通过UPnP层430A、530A的功能而相互识别连接对方后,得到进行印刷任务的控制等的控制中间层420A、520A的帮助,在显示装置400A与印刷装置500A之间交换实际的印刷数据。另外,打印机按每个机种具有独自的印刷命令,在PC(Personal Computer:个人计算机)中能通过驱动器来吸收每次打印的印刷命令的差异。在电视机或录像机等显示装置400A中,与这样的PC不同,难以采取安装驱动器这样的机制。因此,显示装置400A可以使用通用的印刷用记述语言。
作为这样的语言的示例,有以W3C规定的XHTML-打印(XHTML-print)。在利用XHTML-打印的印刷中,显示装置400A基于XHTML-打印内容411A来作成印刷的指示,将作成的印刷指示送往印刷装置500A。在印刷装置500A中,基于以XHTML-打印记述的该印刷指示来在XHTML描绘处理部511A中进行图像文件或文本字符串等的布局、光栅化处理,生成实际进行印刷的数据。印刷处理部512A印刷这样得到的数据。
图25是表示实施方式中的显示装置400B与印刷装置500B之间的通信协议的第3例的图。
显示装置400B与第1例以及第2例同样,例如是电视机、录像机、视频播放机或数字摄像机等具有图像显示功能或图像再生功能的装置。另外,印刷装置500B与第1例以及第2例同样地是打印机等具有印刷功能的装置。另外,印刷装置500B是在印刷第1静止图像数据D1时不对应HDR而仅对应SDR的装置。
显示装置400B的通信协议从下级起依次具备Wi-Fi层440B、PTP传输层430、DPS层420以及DPS应用层410B而构成。印刷装置500B的通信协议从下级起依次具备Wi-Fi层540B、PTP传输层530、DPS层520以及DPS应用层510而构成。
第3例所示的显示装置400B与印刷装置500B之间的通信协议以利用第1例所示的PTP的通信协议为基础。显示装置400B的打印客户端411通过与印刷装置500B的打印服务器512的通信来掌握连接对方即印刷装置500B的功能。
例如在印刷装置500B是仅处理8比特JPG这样的SDR静止图像数据的装置的情况下,显示装置400B不能将显示装置400B所保持的HDR静止图像数据原样不变地交付给印刷装置500B。在这样的情况下,显示装置400B将显示装置400B所保持的HDR静止图像数据与印刷装置500B的功能相匹配地用分级模块413B进行调整,设为8比特JPG文件。即,显示装置400B与印刷装置500B的功能相匹配地从HDR静止图像数据作成8比特JPG文件。
显示装置400B作为针对来自印刷装置500B的存储客户端511的请求的响应,将从HDR静止图像数据得到的8比特JPG文件提供给印刷装置500B。即,第3例所示的显示装置400B是包含实施方式1以及变形例1~5中说明的图像处理装置100、100A~100C中的任一者的结构。
另外,在上述的示例中,说明了显示装置400B与印刷装置500B的功能相匹配地作成8比特JPG文件的静止图像数据的结构,但本公开并不限定于该结构。显示装置400B也可以预先作成与HDR静止图像文件对应的8比特JPG文件。例如为了与仅接受8比特JPG文件的印刷装置相对应,期望数字摄像机以与HDR对应的第1静止图像数据D1和8比特JPG文件(例如第3静止图像数据D3)这两者的格式来生成通过摄像得到的图像。
其中,与规定有sRGB以及BT.709等标准的显示环境的显示装置400B不同,在印刷装置500B中,存在因印刷所使用的纸张以及墨水的种类等而在印刷的品质中出现差异的可能性。因此,对于显示装置400B来说,有时对应于印刷装置500B的设定、能力而变更从HDR静止图像文件作成8比特JPG文件时的分级方法会更好。因此,显示装置400B可以对应于印刷装置500B的设定、能力在每次都作成8比特JPG文件。
另外,印刷装置500B可以是印刷装置200(200A或200B)。
图26是示意性表示实施方式中的显示装置400C与印刷装置500C之间的通信协议的第4例的图。
在第4例中,显示装置400C与第3例同样,例如是电视机、录像机、视频播放机或数字摄像机等具有图像显示功能或图像再生功能的装置。另外,印刷装置500C与第3例同样,是打印机等具有印刷功能的装置,在印刷第1静止图像数据D1时,是不对应HDR而仅对应SDR的装置。
显示装置400C的通信协议从下级起依次具备Wi-Fi层440B、PTP传输层430、DPS层420以及DPS应用层410而构成。印刷装置500C的通信协议从下级起依次具备Wi-Fi层540B、PTP传输层530、DPS层520以及DPS应用层510C而构成。
第4例所示的显示装置400C与印刷装置500C之间的通信协议与第3例所示的结构相比较,在由印刷装置500C的分级模块513C进行第3例中由显示装置400B的分级模块413B进行的处理这一点上不同。即,第4例所示的印刷装置500C是包含实施方式1以及变形例1~5中说明的图像处理装置100、100A~100C中的任一者的结构。
显示装置400C的存储服务器412作为针对来自印刷装置500C的存储客户端511的请求的响应,将HDR静止图像数据原样不变地提供给印刷装置500C。在印刷装置500C中,分级模块513C对应于印刷装置500C使用的纸张以及墨水的种类以及与印刷品质相关的设定等将接收到的HDR静止图像数据适当地进行分级来印刷。
另外,印刷装置500C可以是印刷装置200(200A或200B)。
(其他实施方式)
如以上那样,作为本申请中公开的技术的例示而说明了实施方式1以及变形例1~5。但是,本公开中的技术并不限定于此,也能运用在进行了变更、置换、附加、省略等的实施方式中。另外,还能组合上述实施方式1以及变形例1~5中说明的各构成要素来形成新的实施方式。
因此,以下例示其他实施方式。
关于第1静止图像数据D1中使用的亮度信息,虽然使用了绝对的亮度值,但也可以在生成第2静止图像数据D2时取代绝对的亮度值而使用根据摄像到的照片的明暗部各部的光圈级数(STOP number)算出的亮度。即,变换部120(120C)可以不使用第1静止图像数据D1的绝对亮度而使用相对亮度,将第1静止图像数据D1变换成第2静止图像数据D2。
在实施方式中,将印刷能力说明为以纸张单体的反射率等表示的能力。但是,也可以将印刷能力设为加入了印刷装置的印刷特性的加法运算特性。即,在印刷能力中也可以还考虑印刷装置的墨水的特性以及墨水的喷出特性等。并且,可以考虑第1静止图像数据D1的第1动态范围、和能通过纸张的种类、光源的种类及明亮度、以及墨水的特性等表现的亮度范围(动态范围),来将第1静止图像数据D1变换成第2静止图像数据D2。
也可以取代通过变换部120进行信号的变换处理,而控制印刷装置的墨水喷出量,以便得到与信号的变换处理同等的效果。即,可以取代生成第2静止图像数据D2,而控制印刷装置的墨水喷出量,以便由印刷装置输出与印刷第2静止图像数据D2的情况同等的印刷物。
在实施方式1以及变形例1~5中,各构成要素可以由专用的硬件(例如包含半导体集成电路的电子电路)构成,或者也可以通过由处理器执行适合各构成要素的软件程序来实现。各构成要素可以通过由CPU(Central Processing Unit:中央处理单元)或处理器等程序执行部读出并执行记录于硬盘或半导体存储器等记录介质的软件程序来实现。
另外,各实施方式中以附图示出的框图中的功能块的分割只不过仅仅是一例。例如可以将多个功能块作为1个功能块来实现,或者将1个功能块分割成多个,或者将一部分功能转移到其他功能块中。另外,多个功能块的功能可以由单一的硬件或软件并行进行处理,或者也可以以时分方式进行处理。另外,也可以多个功能块的一部分功能用硬件实现,剩余的功能用软件实现。
另外,执行实施方式中以附图示出的流程图中的各步骤的顺序只不是仅仅是一例,也可以以与实施方式中说明的顺序不同的顺序来执行各步骤。另外,也可以与其他步骤同时(即,并行)执行上述步骤的一部分。
在此,实现上述各实施方式的图像处理方法的软件是如下那样的程序。
即,该程序使计算机执行如下图像处理方法:取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据,取得表示印刷装置的印刷能力的能力信息,将取得的第1静止图像数据对应于取得的能力信息所表示的印刷能力变换成以亮度范围比第1动态范围小的第2动态范围定义的第2静止图像数据,将变换得到的第2静止图像数据输出到印刷装置。
另外,上述图像处理方法和使计算机执行该图像处理方法的计算机程序以及记录该程序的计算机可读取的记录介质包含在本公开的范围内。在此,作为计算机可读取的记录介质,例如能举出软盘、硬盘、CD-ROM、MO、DVD、DVD-ROM、DVD-RAM、BD(Blu-ray(注册商标)Disc)、半导体存储器等。计算机程序并不限定于记录于上述记录介质,也可以经由电气通信线路、无线或有线通信线路、因特网等网络等进行传送。
另外,构成上述的各装置的构成要素的一部分或全部可以由能在各装置拆装的IC卡或单体的模块构成。
另外,构成上述的各装置的构成要素的一部分或全部可以由1个LSI(Large ScaleIntegration:大规模集成电路)构成。
另外,各处理部并不限定于LSI或IC,也可以由专用电路或通用处理器实现。或者,也可以由能对电路结构进行编程的FPGA(Field Programmable Gate Array:现场可编程门阵列)、或能重构LSI内部的电路单元的连接、设定的可重构处理器实现。
另外,也可以将上述的程序记录在记录介质中对其进行发布或流通。例如能将发布的程序安装在装置类中,并使装置类的处理器执行,由此使装置类进行各种处理。
另外,也可以将本公开中的计算机程序或数字信号经由电气通信线路、无线或有线通信线路、因特网等网络、数据广播等进行传送。
另外,本公开也可以通过将程序或数字信号记录于记录介质来进行移送,或者通过将程序或数字信号经由网络等进行移送,从而由独立的其他计算机系统来实施。
另外,在实施方式中,各处理(各功能)可以通过由单一的装置(系统)集中处理而实现,或者也可以通过由多个装置分散处理而实现。
如以上那样,作为本公开中的技术的例示而说明了实施方式。为此,提供附图以及详细的说明。
因此,在附图以及详细的说明中记载的构成要素之中,不仅可包含为了解决课题而必须的构成要素,还能为了例示上述技术而包含不是为了解决课题而必须的构成要素。因此,不应当因为这些不是必须的构成要素记载于附图、详细的说明中就直接认定这些不是必须的构成要素是必须的。
另外,上述的实施方式用于例示本公开中的技术,因此能在权利请求书或其均等的范围内进行各种变更、置换、附加、省略等。
产业上的可利用性
本公开能运用在能得到用于印刷高品质的印刷物的静止图像数据的图像处理装置以及图像处理方法中。具体地,能在电视机或显示器等影像显示装置、录像机或视频播放机等影像再生装置、数字摄像机或视频摄像机等摄像装置、智能手机或平板计算机等终端装置、打印机等印刷装置、或者PC或服务器等计算机装置等中运用本公开。
附图标记说明
1、2、3、4、5、6 图案
10、10A HDR摄像装置
11 HDR摄像部
12 变换部
13 JPEG压缩部
14 SDR摄像部
15 HDR图像补正部
16 HEVC压缩部
20 SDR摄像装置
21 SDR摄像部
22 JPEG压缩部
30 HDR显示装置
40 SDR显示装置
50 SDR印刷装置
100、100A、100B、100C 图像处理装置
101 CPU
102 主存储器
103 存储设备
104 输入IF
105 通信IF
110、110A、110B、110C 取得部
120、120C 变换部
130 输出部
150 测试图案
200、200A、200B 印刷装置
201 输入IF
202 扫描仪
300 输入装置
400、400A、400B、400C 显示装置
410、410B、510、510C DPS应用层
410A、510A 应用层
411 打印客户端
411A XHTML-打印内容
412 存储服务器
413B、513C 分级模块
420、520 DPS层
420A、520A 控制中间层
421、521 DPS发现
430、530 PTP传输层
430A、530A UPnP层
431A、531A UPnP发现
440、540 USB物理层
440A、540A TCP/IP层
440B、540B Wi-Fi层
500、500A、500B、500C 印刷装置
511 存储客户端
512 打印服务器
511A XHTML描绘处理部
512A 印刷处理部
D1 第1静止图像数据
D2 第2静止图像数据
D3 第3静止图像数据
I1、I2 能力信息
P1 纸张

Claims (8)

1.一种图像处理装置,具备:
取得部,其取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据、和表示与第3动态范围对应的印刷装置在印刷中使用的纸张的种类的纸信息;
变换部,其将由所述取得部取得的所述第1静止图像数据变换成以亮度范围比所述第1动态范围小且比所述第3动态范围大的第2动态范围定义的第2静止图像数据,其中,所述变换部通过参考多个纸张的种类和对该纸张照射光时由该纸张反射的所述光的反射亮度之间的关系,来确定与由所述取得部取得的所述纸信息所表示的纸张的种类对应的所述反射亮度、即以所述纸张的白色表现的亮度,所述第2动态范围以确定出的所述反射亮度作为最大亮度;和
输出部,其将由所述变换部变换得到的所述第2静止图像数据输出到所述印刷装置。
2.一种图像处理装置,具备:
取得部,其取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据、和通过扫描与第3动态范围对应的印刷装置在印刷中使用的纸张而得到的扫描图像;
变换部,其将由所述取得部取得的所述第1静止图像数据变换成以亮度范围比所述第1动态范围小且比所述第3动态范围大的第2动态范围定义的第2静止图像数据,其中,所述变换部基于所述扫描图像的亮度来确定对所述纸张照射光时由该纸张反射的所述光的反射亮度、即以所述纸张的白色表现的亮度,所述第2动态范围以确定出的所述反射亮度作为最大亮度;和
输出部,其将由所述变换部变换得到的所述第2静止图像数据输出到所述印刷装置。
3.一种图像处理装置,具备:
取得部,其取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据、和通过在与第3动态范围对应的印刷装置在印刷中使用的纸张上印刷特定的图案而得到的印刷结果;
变换部,其将由所述取得部取得的所述第1静止图像数据变换成以亮度范围比所述第1动态范围小且比所述第3动态范围大的第2动态范围定义的第2静止图像数据,其中,所述变换部基于所述印刷结果来确定对所述纸张照射光时由该纸张反射的所述光的反射亮度、即以所述纸张的白色表现的亮度,所述第2动态范围以确定出的所述反射亮度作为最大亮度且具有对应于由所述取得部取得的所述印刷结果决定的亮度范围;和
输出部,其将由所述变换部变换得到的所述第2静止图像数据输出到所述印刷装置。
4.根据权利要求1~3中任一项所述的图像处理装置,其中,
所述取得部取得所述第1静止图像数据,并且进一步取得以亮度范围比所述第1动态范围小的所述第3动态范围定义的第3静止图像数据,
在所述第1静止图像数据的最大亮度小于与所述纸张对应的所述反射亮度的情况下,所述变换部不进行从所述第1静止图像数据向所述第2静止图像数据的变换,所述输出部将由所述取得部取得的所述第3静止图像数据输出到所述印刷装置。
5.根据权利要求1~3中任一项所述的图像处理装置,其中,
所述第1动态范围是HDR。
6.根据权利要求1~3中任一项所述的图像处理装置,其中,
所述图像处理装置还具备所述印刷装置。
7.一种图像处理方法,
取得通过摄像得到并以第1动态范围定义亮度范围的第1静止图像数据,
取得表示与第3动态范围对应的印刷装置在印刷中使用的纸张的种类的纸信息,
将取得的所述第1静止图像数据变换成以亮度范围比所述第1动态范围小且比所述第3动态范围大的第2动态范围定义的第2静止图像数据,其中,通过参考多个纸张的种类和对该纸张照射光时由该纸张反射的所述光的反射亮度之间的关系,来确定与取得的所述纸信息所表示的纸张的种类对应的所述反射亮度、即以所述纸张的白色表现的亮度,所述第2动态范围以确定出的所述反射亮度作为最大亮度,
将变换得到的所述第2静止图像数据输出到所述印刷装置。
8.一种记录介质,其上存储有计算机程序,所述计算机程序由处理器执行以实现权利要求7所述的图像处理方法。
CN201780070657.7A 2016-11-17 2017-11-13 图像处理装置、图像处理方法以及记录介质 Active CN109983754B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662423335P 2016-11-17 2016-11-17
US62/423,335 2016-11-17
JP2017-164937 2017-08-30
JP2017164937 2017-08-30
PCT/JP2017/040732 WO2018092711A1 (ja) 2016-11-17 2017-11-13 画像処理装置、画像処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
CN109983754A CN109983754A (zh) 2019-07-05
CN109983754B true CN109983754B (zh) 2021-03-19

Family

ID=67076235

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780070657.7A Active CN109983754B (zh) 2016-11-17 2017-11-13 图像处理装置、图像处理方法以及记录介质

Country Status (4)

Country Link
US (1) US10726315B2 (zh)
EP (1) EP3544280B1 (zh)
JP (1) JP6719061B2 (zh)
CN (1) CN109983754B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020064102A (ja) * 2018-10-15 2020-04-23 キヤノン株式会社 表示装置および表示方法
JP7431595B2 (ja) * 2020-01-31 2024-02-15 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
JP7431596B2 (ja) * 2020-01-31 2024-02-15 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
JP2022114384A (ja) * 2021-01-26 2022-08-05 キヤノン株式会社 画像処理装置、制御方法、およびプログラム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102346400A (zh) * 2010-07-22 2012-02-08 佳能株式会社 执行校准以保持图像质量的图像形成设备

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004120217A (ja) * 2002-08-30 2004-04-15 Canon Inc 画像処理装置、画像処理方法、プログラムおよび記録媒体
JP2006080834A (ja) 2004-09-09 2006-03-23 Fuji Xerox Co Ltd 画像形成装置
DE102004044647A1 (de) * 2004-09-15 2006-03-30 OCé PRINTING SYSTEMS GMBH Verfahren und Vorrichtung zum Umwandeln von Quellbilddaten in Zielbilddaten
JP4730837B2 (ja) * 2006-09-15 2011-07-20 株式会社リコー 画像処理方法、画像処理装置、プログラムおよび記録媒体
JP4739256B2 (ja) 2007-03-12 2011-08-03 富士フイルム株式会社 画像処理装置および方法並びにプログラム
JP2008294554A (ja) 2007-05-22 2008-12-04 Fuji Xerox Co Ltd 画像処理方法及び画像形成装置
JP2009117991A (ja) * 2007-11-02 2009-05-28 Fujifilm Corp 画像変換装置および画像変換プログラム
JP2011100204A (ja) * 2009-11-04 2011-05-19 Seiko Epson Corp 画像処理装置、画像処理方法、画像処理プログラム、撮像装置及び電子機器
JP6188427B2 (ja) * 2012-08-07 2017-08-30 キヤノン株式会社 画像処理装置、方法およびプログラム
JP6306845B2 (ja) 2013-09-12 2018-04-04 キヤノン株式会社 撮像装置及びその制御方法
CN105493490B (zh) 2014-06-23 2019-11-29 松下知识产权经营株式会社 变换方法和变换装置
GB2534929A (en) * 2015-02-06 2016-08-10 British Broadcasting Corp Method and apparatus for conversion of HDR signals
EP3493532B8 (en) * 2016-07-27 2021-04-14 Panasonic Intellectual Property Management Co., Ltd. Image processing device and image processing method
EP3639725A4 (en) * 2017-06-12 2020-06-10 Sony Corporation MEDICAL SYSTEM, MEDICAL DEVICE AND CONTROL METHOD
US20200029096A1 (en) * 2018-07-17 2020-01-23 Qualcomm Incorporated Combined inverse dynamic range adjustment (dra) and loop filter technique

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102346400A (zh) * 2010-07-22 2012-02-08 佳能株式会社 执行校准以保持图像质量的图像形成设备

Also Published As

Publication number Publication date
US20190303733A1 (en) 2019-10-03
JPWO2018092711A1 (ja) 2019-10-17
CN109983754A (zh) 2019-07-05
JP6719061B2 (ja) 2020-07-08
EP3544280A1 (en) 2019-09-25
EP3544280B1 (en) 2024-04-03
EP3544280A4 (en) 2019-11-13
US10726315B2 (en) 2020-07-28

Similar Documents

Publication Publication Date Title
WO2018092711A1 (ja) 画像処理装置、画像処理方法、およびプログラム
CN109983754B (zh) 图像处理装置、图像处理方法以及记录介质
JP4940639B2 (ja) 画像処理装置、画像処理方法及び画像処理プログラム
TWI285046B (en) Signal processor and method, and program
US8619349B2 (en) Profile creation method, profile creation apparatus and image processing apparatus for performing color conversion using a profile
JP2004328532A (ja) 撮像装置、画像処理装置及び画像記録装置
JP2004096500A (ja) 撮像装置、画像処理装置及び画像記録装置
US9443327B2 (en) Rendering and un-rendering using profile replacement
US8792131B2 (en) Image processing system, information processing system, control method, and program
US9204014B2 (en) Scanner device and method executed in scanner device
JP2006203555A (ja) 画像処理方法、画像処理装置及び画像処理プログラム
WO2005027532A1 (ja) 画像処理装置および画像処理方法
JP2007097032A (ja) 画像表示装置、画像表示方法およびディジタルカメラ
JP7431595B2 (ja) 画像処理装置、画像処理方法およびプログラム
JP7431596B2 (ja) 画像処理装置、画像処理方法およびプログラム
JP4533277B2 (ja) 画像処理装置、画像処理方法およびテーブル作成方法
US8531746B2 (en) Image processing apparatus
US11700346B2 (en) Image processing apparatus, image processing method, and storage medium for generating preview image data to be displayed on a display
JP4962295B2 (ja) 画像処理装置及び画像処理プログラム
JP2015005835A (ja) 画像処理装置、画像形成装置及び記録媒体
JP2004178428A (ja) 画像処理方法
JP2013219546A (ja) 画像処理装置、画像形成装置、画像処理プログラムおよびコンピュータ読み取り可能な記録媒体
JP2006279423A (ja) 色変換テーブル生成方法
US20120019880A1 (en) Scanner system
JP2008048419A (ja) 画像修正システムおよび方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant