CN103503027A - 摄像装置所用的颜色校准方法 - Google Patents
摄像装置所用的颜色校准方法 Download PDFInfo
- Publication number
- CN103503027A CN103503027A CN201280021805.3A CN201280021805A CN103503027A CN 103503027 A CN103503027 A CN 103503027A CN 201280021805 A CN201280021805 A CN 201280021805A CN 103503027 A CN103503027 A CN 103503027A
- Authority
- CN
- China
- Prior art keywords
- color
- reference mark
- apparent
- colour
- mapping
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000013507 mapping Methods 0.000 claims abstract description 57
- 238000012937 correction Methods 0.000 claims abstract description 23
- 238000006243 chemical reaction Methods 0.000 claims description 17
- 230000006870 function Effects 0.000 description 20
- 239000003086 colorant Substances 0.000 description 5
- 238000013459 approach Methods 0.000 description 4
- 230000001580 bacterial effect Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000005055 memory storage Effects 0.000 description 3
- 244000005700 microbiome Species 0.000 description 3
- 230000001915 proofreading effect Effects 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000003760 hair shine Effects 0.000 description 2
- 230000007935 neutral effect Effects 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 229920001817 Agar Polymers 0.000 description 1
- 241000894006 Bacteria Species 0.000 description 1
- 238000012897 Levenberg–Marquardt algorithm Methods 0.000 description 1
- 241000234435 Lilium Species 0.000 description 1
- 239000008272 agar Substances 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000000813 microbial effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000704 physical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/67—Circuits for processing colour signals for matrixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/643—Hue control means, e.g. flesh tone control
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
- G01J3/462—Computing operations in or between colour spaces; Colour management systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
- G01J3/52—Measurement of colour; Colour measuring devices, e.g. colorimeters using colour charts
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
- G01J3/52—Measurement of colour; Colour measuring devices, e.g. colorimeters using colour charts
- G01J3/524—Calibration of colorimeters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/6002—Corrections within particular colour systems
- H04N1/6005—Corrections within particular colour systems with luminance or chrominance signals, e.g. LC1C2, HSL or YUV
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/603—Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer
- H04N1/6033—Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer using test pattern analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/6075—Corrections to the hue
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
- G01J3/465—Measurement of colour; Colour measuring devices, e.g. colorimeters taking into account the colour perception of the eye; using tristimulus detection
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Spectroscopy & Molecular Physics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Mathematical Physics (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Facsimile Image Signal Circuits (AREA)
- Image Processing (AREA)
- Color Image Communication Systems (AREA)
- Color Television Image Signal Generators (AREA)
- Spectrometry And Color Measurement (AREA)
- Processing Of Color Television Signals (AREA)
- Studio Devices (AREA)
Abstract
一种摄像装置所用的用于提供从表观颜色向着实际颜色的映射的方法,包括:使用所述摄像装置来拍摄具有多个色片的基准比色图的图像,其中各色片具有相关联的基准颜色;测量所拍摄图像中的所述多个色片的表观颜色;在圆形色相空间内选择表示不同色相值的多个控制点;确定各控制点的角度偏移,以使得各色片的变换后的表观颜色与基准颜色之间的距离最小,其中所述角度偏移表示色相校正值,其中,对各控制点的角度偏移的插值提供了所述摄像装置所用的从表观颜色向着实际颜色的映射。
Description
本申请要求2011年3月4日提交的澳大利亚临时专利申请2011900785的优先权,其内容通过该引用而包含于此。
技术领域
本发明涉及摄像装置所用的用于提供从表观颜色到实际颜色的映射的方法和软件、以及用于使用该映射来对该装置所拍摄到的图像进行颜色校准的方法和软件。
背景技术
在现有示例中,数字照相机使用诸如电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)传感器等的传感器来拍摄图像。这些照相机传感器中的大多数针对该图像中的各位置或像素,仅可以读取各物理位置处的一个颜色,从而将原始数据返回作为来自例如红色、绿色和蓝色(RGB)的特定颜色空间的各通道的值的模式。例如,可以将各R、G和B值表示为0和诸如255等的所定义的最大值之间的数值,并且像素处的RGB值的组合表示特定颜色。
照相机通过参考照相机颜色空间来捕获RGB值。然而,很少发生照相机颜色空间与已知的基准颜色空间完全匹配。因而,在照相机解释为例如R=120、G=110、B=105的“表观颜色”和基准颜色空间中的例如R=100、G=100、B=100的“实际颜色”之间存在差异。因此,需要颜色校准方法来将如照相机所拍摄到的表观颜色映射到基准颜色空间中的实际颜色。这样确保了拍摄相同物体对象的图像的两个不同装置报告了相同的实际颜色值。此外,照明效果能够对所观察到的对象的颜色产生非常显著的影响。由于灯本身的固有物理性质,因此大多数灯不是纯白色的,这就导致测量颜色不同于真实颜色。
例如,通常通过经由适当矩阵对颜色矢量进行相乘并且经由多项式传递各颜色值,作为表观颜色到实际颜色的线性变换和非线性变换的组合来进行颜色映射。
计算这种变换是困难的过程,并且需要大量颜色样本、以及优选需要照相机传感器本身的知识。这种技术难以用在空间制约或时间制约使这种处理无法实行的一些情形中。诸如白平衡校正等的简单颜色校正在存在这些空间制约或时间制约的一些应用中足够了;然而在一些应用中,需要较高精度的映射。
本发明的目的是提供解决现有颜色映射方法的一个或多个限制的摄像装置所用的映射。
以上所包括的背景技术部分的论述是为了解释本发明的上下文。该论述不应被视为是对所引用的任何文献或其它材料被公开、被获知或属于本说明书权利要求书任一项的优先权日的公知常识的一部分的承认。
发明内容
本发明提供一种摄像装置所用的用于提供从表观颜色向着实际颜色的映射的方法,包括以下步骤:
使用所述摄像装置来拍摄具有多个色片的基准比色图的图像,其中各色片具有相关联的基准颜色;
测量所拍摄图像中的所述多个色片的表观颜色;
在圆形色相空间内选择表示不同色相值的多个控制点;以及
确定各控制点的角度偏移,以使得各色片的变换后的表观颜色与基准颜色之间的距离最小,其中所述角度偏移表示色相校正值,
其中,对各控制点的角度偏移的插值提供了所述摄像装置所用的从表观颜色向着实际颜色的映射。
例如,由于在识别细菌类型时使用细菌菌落的颜色、形状和纹理以及固体培养基(诸如琼脂等)的颜色,因此诸如识别固体培养基上生长的微生物生长(例如,细菌菌落)等的微生物评估目的所使用的图像必须精确。因此,在该示例中,本领域技术人员应当理解,图像的颜色接近实际颜色很重要。本领域技术人员还应当理解,关于诸如高端摄影等的其它应用,可以使用针对所拍摄图像的从表观颜色到实际颜色的映射。
可以在例如RGB、YUV、LAB、XYZ的任何颜色空间中测量表观颜色和基准颜色(输入颜色)。向着实际颜色(输出颜色)的映射可以将表观颜色变换到相同的颜色空间,或者可以将表观颜色变换到不同的颜色空间。可以在输入或输出颜色空间中测量变换后的表观颜色和基准颜色之间的距离。
控制点的色相值是指HSV(色相饱和度值)颜色空间中的色相值。HSV空间用作输入空间和输出空间之间的中间态。该颜色空间由椎体来表示,其中绕中心垂直轴的角度对应于色相,相对于该垂直轴的距离对应于饱和度,并且沿着该垂直轴的距离对应于值(明度)。圆形色相空间是指HSV椎体的圆形截面。
该方法能够根据少量的基准颜色来产生映射。例如,已经发现利用24个色片所产生的映射得到了在对细菌菌落进行微生物评估目的所用充分精确的摄像时使用的充分校准。所需要的片数量依赖于所需的映射的保真度,并且是可调整的。例如,如递交日相同的同一申请人的标题为“Method andSoftware for Analysing Microbial Growth”的共同待审的国际专利申请(其内容通过引用而包含于此)所述,可以使用利用映射进行了颜色校正的图像来训练机器学习算法以对细菌菌落进行分类。
通过在控制点的角度偏移之间进行插值以确定图像中的像素的表观色相的插值角度偏移,可以使用控制点的角度偏移来将表观色相映射到同一摄像装置在相同照明条件下所拍摄到的任何其它图像中的像素的实际色相。然后,将该插值角度偏移应用于表观色相以实现实际色相(并由此实现实际颜色)的近似。通过在圆形色相空间中应用变换,本发明的方法与原始颜色值的简单线性变换相比可以提供更加精确的近似。本领域技术人员应当理解,对“实际颜色”的参考并不要求将表观颜色完全映射到基准颜色空间。相反,该映射提供了实际颜色的近似。
摄像装置可以是诸如高分辨率彩色数字照相机、数字扫描器或数字摄像机等的数字照相机。
现在说明控制点的选择,所述多个控制点可以均匀地围绕所述圆形色相空间进行分布。控制点在圆形色相空间上的角度位置表示其色相值。例如,这些控制点可以形成围绕该空间的单个环,其中该环中的相邻控制点之间的距离是均等的。选择各控制点的位置可以包括:使用不同数量的控制点来计算一系列候选映射的误差;以及基于产生可接受误差的最小数量的控制点来从该一系列候选映射中选择映射。应当理解,为了计算效率和估计精度的利益,期望选择尽可能少的控制点。
测量所述摄像装置所拍摄到的图像中的色片的表观颜色还可以包括:测量色片的颜色;对测量到的颜色进行白平衡校正;对测量到的颜色进行明度校正;以及使用所得的白平衡校正和明度校正后的颜色来确定所述表观颜色。可以使用根据比色图中的R、G和B值应当相等的中性灰色片所确定的权重来进行白平衡校正。可以使用利用比色图中的明度已知的多个灰色片所计算出的曲线来校正明度。因而,利用已经针对白平衡和明度进行了校正的数据来进行颜色映射。与产生引起白平衡和明度的映射相比,这样降低了变换的复杂度,并由此缩短了所需的计算时间。
确定各控制点的角度偏移以使得各色片的变换后的表观颜色与基准颜色之间的距离最小的步骤可以包括:使包括各色片的所述变换后的表观颜色与所述基准颜色之间的距离的平方和的成本函数最小。所述成本函数还可以包括所述角度偏移的平方和。
在实施例中,所述方法还可以包括:确定各控制点的标度以使得各色片的所述变换后的表观颜色与所述基准颜色之间的距离最小,其中所述标度表示饱和度校正值,其中,对各控制点的标度的插值提供了所述摄像装置所用的从表观颜色向着实际颜色的另一映射。
将针对表观饱和度的插值标度应用于该表观饱和度以获得实际饱和度的近似。控制点可以表示离圆形色相空间中的色片的表观色相和饱和度的位置最近的色相值。控制点可以包括围绕圆形色相空间的控制点的一个或两个(或多个)环,其中各环具有不同的饱和度值。在一个示例中,使用控制点的两个环,其中各环中的控制点具有相同的色相但具有不同的饱和度值、诸如0.5和1等。控制点当然无需采用环的形式,并且可以以其它配置围绕圆形色相空间进行分布。
如上所述,确定各控制点的标度以使得各色片的变换后的表观颜色与基准颜色之间的距离最小的步骤可以包括:使包括各色片的所述变换后的表观颜色与所述基准颜色之间的距离的平方和的成本函数最小。所述成本函数还可以包括1减去各饱和度标度所得的值的平方和以促进最终标度近似为1。
可选地,代替简单地测量饱和度,可以使用与明度曲线相似的曲线来映射饱和度。
为了应用映射,所述方法可以包括:使用所述摄像装置来拍摄图像;以及针对所述图像中的一个或多个像素:确定所述像素的表观色相;在所述圆形色相空间内的两个以上的控制点的角度偏移之间进行插值,以确定与所述表观色相相关联的角度偏移;以及将所确定的角度偏移应用于所述表观色相。所述方法还可以包括针对所述图像中的一个或多个像素:确定所述像素的表观饱和度;在所述圆形色相空间内的两个以上的控制点的标度之间进行插值,以确定与所述表观饱和度相关联的标度;以及将所确定的标度应用于所述表观饱和度。
两个以上的控制点可以表示圆形色相空间中的离表观色相最近的色相值。在典型实施例中,已经发现了该情况,由此产生良好的映射。优选地,使用四个控制点和三次插值。可选地,可以使用更高阶插值方法来对角度偏移进行变换。然而,在这种情况下,将需要较大量的处理以确定最优的角度偏移。可以可选地使用线性插值,但线性插值不够平滑并且在跨越控制点时将在颜色空间中产生不连续。
一旦确定了像素的表观色相和饱和度,可以将颜色转换成例如显示所用的任何适当的颜色空间。
另外,本发明提供一种软件,其用在计算机中,所述计算机包括处理器和用于存储所述软件的存储器,所述软件包括所述处理器能够执行的一系列指令以执行根据上述的任一个实施例的方法。
本发明还涉及一种计算机可读介质,其包括软件,并且涉及一种设备,包括:处理器;存储器;以及驻存于所述处理器能够访问的存储器中的软件,所述软件能够被所述处理器执行以执行根据上述的任一个实施例的方法。
附图说明
现在将参考附图仅通过示例方式来说明本发明的实施例。应当理解,附图的特殊性无法取代前面对本发明的描述的一般性。
图1是用于进行根据本发明实施例的方法的示例处理系统和摄像装置。
图2是说明用于计算从表观颜色向着实际颜色的映射的方法的流程图。
图3是示出用于校正所拍摄图像的明度的示例曲线的图。
图4是示出圆形色相空间内的多个控制点的HSV空间的图。
图5是针对特定摄像装置的(a)横跨色相/饱和度空间的映射、(b)孤立的色相映射函数和(c)孤立的饱和度映射函数的图形表示。
图6是示出映射的精度的图。
图7是(a)颜色校准之前和(b)颜色校准之后的比色图的两个照片。
图8是说明用于将表观颜色映射到实际颜色的方法的流程图。
具体实施方式
将参考图1来说明本发明的实施例所使用的示例处理系统和摄像装置。处理系统10包括处理器12、存储器14、至少一个输入装置16、至少一个输出装置18、通信端口20、接口22和存储装置24。如图所示,处理系统10的各组件经由总线或总线组26连接到一起。
处理器12可以包括一个以上的处理装置,例如用于应对处理系统10内的不同功能。存储器14可以包括任何适当的存储器装置,并且例如包括易失性或非易失性存储器、固态存储装置、磁性装置等。存储器14可以存储处理器12所执行的指令。
输入装置16接收输入数据,并且例如可以包括键盘、鼠标或其它指示装置、追踪球、操纵杆或触摸屏、麦克风、诸如调制解调器或无线数据适配器等的数据接收器或天线、数据获取卡等。输入装置16可以是用户能够操作的以进行输入数据的输入,或者该输入装置16可以接收来自其它输入数据源的数据。
输出装置18产生或生成输出数据。输出装置18可以包括显示装置、一组音频扬声器、打印机、端口(例如USB端口)、外围组件适配器、诸如调制解调器或无线网络适配器等的数据发送器或天线等。
存储装置24可以包括例如易失性或非易失性存储器、固态存储装置、磁性装置等的任何形式的数据存储部件或信息存储部件。可以将文件系统和文件存储在存储装置24上。
通信端口20使得处理系统10能够经由硬有线或无线网络与其它装置进行通信。接口22使处理系统10连接至一个或多个外围装置。例如,接口22可以包括PCI卡或PC卡。
处理系统10可以是如下的任何形式:终端、服务器处理系统、专用硬件、计算机、计算机系统或计算机化装置、个人计算机(PC)、移动或蜂窝电话、移动数据终端、便携计算机、个人数字助理(PDA)、寻呼机或任何其它相似类型的装置。
图1还示出采用彩色数字照相机的形式的摄像装置30。照相机30可以经由物理或无线接口32与处理系统10进行通信。
可以使用存储在存储器14中的软件来在处理器12上执行用于产生从表观颜色向着实际颜色的映射的方法。参考图2,在步骤40中,拍摄基准比色图的图像。该比色图可以是包括各自具有相关联的基准红色、绿色和蓝色通道值的24个色片的标准“gretagmacbeth ColorCheckerTMColor RenditionChart”。可以通过手动地或经由使用软件所发送的电子信号启动照相机来拍摄图像。在颜色校准无效的状态下,将照相机传感器所捕获到的数据经由接口32发送至处理系统10。
在步骤42中,用户指示各色片在基准比色图中的位置。例如,软件可以使GUI显示来自照相机30的图像的预览,并且用户可以按特定顺序点击该图的四角方形以使得能够确定色片的位置。在其它替代例中,可以使用机器视觉技术或者通过将基准比色图放置在相对于照相机的固定距离处的特定已知位置来确定这些片的位置。
在步骤44中,在21×21的像素窗口中捕获到各位置的平均颜色并且将该平均颜色用于片颜色。当然,应当理解,可以使用不同大小的像素窗口来计算平均颜色。
在步骤46中,根据基准比色图中的单个片(即,第三最暗的灰色片)来计算白平衡。假定在该中性灰色片中R值、G值和B值相等。将白平衡表示为如下。
其中,将wg隐式地定义为1。计算权重wr和wb以产生与g′值相等的r′值和b′值。将使用所计算出的白平衡值W=[wr,1,wb]来校正照相机所拍摄到的图像的白平衡。
一旦计算出白平衡,在步骤48中,计算尽可能地一起映射表观灰色值的曲线C。这样提供了针对照相机的明度映射。该曲线的形式为g′=agb+c,其中g是输入颜色,g′是输出,并且a、b和c是所计算出的曲线C的参数。图3示出通过该处理所获得的示例曲线。一旦进行了估计,可以针对各颜色通道单独应用该曲线。颜色映射函数的最后阶段(步骤50)的目的是产生针对各像素的色相和饱和度的映射。
基于白平衡和颜色校正图像来测量多个色片的表观色相和饱和度,并且在步骤50中计算色相和饱和度映射。使用一系列控制点来提供色相映射以将表观色相值映射到实际色相值。该色相映射使用三次插值(或其它更高阶插值方法)来实现该映射。各控制点包括圆形色相空间中的固定的位置和最优化期间所计算出的角度偏移。对该偏移进行三次插值以提供针对特定色相值的将该特定色相值映射到实际色相的偏移。
饱和度映射函数使用一系列控制点以测量饱和度值。这些控制点相对于对色相值进行映射所使用的控制点可以相同或者不同。饱和度映射函数可以使用与色相映射函数相同的插值方式。注意,饱和度必须在范围[0,1]内,因而对来自该函数的输出值进行钳位以确保满足该范围。在替代例中,可以经由与应用于明度校正的曲线相似的曲线来进行饱和度映射。
如图4所示,色相映射函数和饱和度映射函数中所使用的控制点可以均匀地围绕圆形色相空间的边缘进行分布。该圆形色相空间包括由有色圆圈(例如,控制点52)表示的16个控制点。例如,色相为0度且饱和度为1的有色圆圈可以是红色,色相为90度且饱和度为1的有色圆圈可以是绿色,色相为180度且饱和度为1的有色圆圈可以是蓝色,并且色相为270度且饱和度为1的有色圆圈可以是紫色。图4还示出角度偏移54和标度56的方向。控制点的角度位置由它们的色相值来限定并且控制点的径向位置由它们的饱和度来限定。示出控制点的两个环,其中内环的饱和度为0.5并且外环的饱和度为1。在控制点的单个环的情况下,选择适当点仅需要单个值,其中该单个点对应于色相。将色相表示为角度,并且在选择控制点时,函数必须考虑到该角度。
控制点的最大数量由可利用的颜色样本的数量来限定。各控制点具有两个参数,并且各样本提供三个残差。因而,n个颜色样本最多可以具有3n/2个控制点。然而,实际上,测量处理在颜色测量中产生误差。选择控制点可以包括:使用不同数量的控制点来计算一系列候选映射的误差;以及基于产生可接受误差的最小数量的点来从该系列候选映射中选择映射。已经发现,对于具有24个片的图,12个控制点足够了。
由于已经估计出明度曲线,因此假定明度值是正确的;因而无需调整这些明度值。
使角度偏移和标度最优化以将来自图像的各片的表观颜色最佳地映射到基准比色图中的等同色片的实际颜色上。这通过计算映射f(p)来进行,由此使真实颜色和映射颜色之间的距离最小:
注意,将色相表示为角度,并且在选择控制点时,函数必须考虑到该角度。这通过使用成本函数来进行。该成本函数包括如下的项,其中这些项确保了标度维持约为1的值并且偏移维持约为0的值以防止非常大的变化(诸如360°的偏移等)。给出以下误差测量值:
其中,δi是控制点的偏移并且si是控制点的标度。期望选择δi和si以使ε即以下表达式最小。
可以使用Levenberg-Marquardt算法来获得其解,尽管任何其它不受制约的最小元也足够了。成本函数尝试在保持色相偏移接近0并且保持饱和度标度接近1的情况下、使一起对颜色进行映射时的误差最小。
因而,所涉及的是针对各控制点确定角度偏移54和标度56,由此使针对各片的变换后的表观颜色(例如,RGB)和基准颜色(例如,RGB)之间的距离的平方和最小、使角度偏移最小、并且使标度保持接近1(使1-标度最小)。
结果是采用针对控制点的角度偏移和/或标度的映射。图5示出针对特定照相机的(a)横跨色相/饱和度空间的映射、(b)孤立的色相映射函数和(c)孤立的饱和度映射函数的图形表示。图6提供与映射的精度有关的详细内容。y轴上的各位置表示24个色片的其中一个,并且x轴表示各自可以为0~1的颜色值。图7示出使用该映射来对图像进行颜色校正的示例。第一个图像(a)示出在用户选择了色片的位置之后如由照相机所拍摄到的输入图像。注意,在该示例中,已经对白平衡进行了粗略校正。第二个图像(b)示出校正后的颜色。相对于这些片可见的小的有色方形示出各片的真实颜色。
然后,可以使用该映射来对使用同一(或相同类型的)摄像装置所拍摄到的图像进行颜色校正。参考图8,用于将表观颜色映射到实际颜色的方法包括:在步骤60中,使用照相机来拍摄图像。可以确定各像素的表观RGB颜色值,并且可以使用先前计算出的权重/曲线来对颜色值进行白平衡校正和明度校正。然后,该方法包括:在步骤62中针对图像中的一个或多个像素,确定像素的表观色相和表观饱和度(步骤64),在圆形色相空间中的两个以上的控制点的角度偏移之间进行插值以确定与表观色相相关联的角度偏移(步骤66),在圆形色相空间中的两个以上的控制点的标度之间进行插值以确定与表观饱和度相关联的标度(步骤68),将该角度偏移应用于表观色相(步骤70),并且将该标度应用于表观饱和度(步骤72)。一旦应用了映射,可以将HSV空间颜色变换回至RGB空间、或者所期望的任何其它输出空间。
应当理解,可以在没有背离本发明的范围的情况下对前面所述的部分进行各种改变、添加和/或修改,并且有鉴于以上教导,本发明可以以本领域技术人员应理解的各种方式在软件、固件和/或硬件中实现。
Claims (13)
1.一种摄像装置所用的用于提供从表观颜色向着实际颜色的映射的方法,包括以下步骤:
使用所述摄像装置来拍摄具有多个色片的基准比色图的图像,其中各色片具有相关联的基准颜色;
测量所拍摄图像中的所述多个色片的表观颜色;
在圆形色相空间内选择表示不同色相值的多个控制点;以及
确定各控制点的角度偏移,以使得各色片的变换后的表观颜色与基准颜色之间的距离最小,其中所述角度偏移表示色相校正值,
其中,对各控制点的角度偏移的插值提供了所述摄像装置所用的从表观颜色向着实际颜色的映射。
2.根据权利要求1所述的方法,其中,所述多个控制点均匀地围绕所述圆形色相空间进行分布。
3.根据权利要求1或2所述的方法,其中,选择多个控制点的步骤包括:
使用不同数量的控制点来计算一系列候选映射的误差;以及
基于产生可接受误差的最小数量的控制点来从该一系列候选映射中选择映射。
4.根据权利要求1至3中任一项所述的方法,其中,测量色片的表观颜色的步骤包括:
测量色片的颜色;
对测量到的颜色进行白平衡校正;
对测量到的颜色进行明度校正;以及
使用所得的白平衡校正和明度校正后的颜色来确定所述表观颜色。
5.根据权利要求1至4中任一项所述的方法,其中,确定各控制点的角度偏移以使得各色片的变换后的表观颜色与基准颜色之间的距离最小的步骤包括:使包括各色片的所述变换后的表观颜色与所述基准颜色之间的距离的平方和的成本函数最小。
6.根据权利要求5所述的方法,其中,所述成本函数还包括所述角度偏移的平方和。
7.根据权利要求1至6中任一项所述的方法,其中,还包括:
确定各控制点的标度以使得各色片的所述变换后的表观颜色与所述基准颜色之间的距离最小,其中所述标度表示饱和度校正值,
其中,对各控制点的标度的插值提供了所述摄像装置所用的从表观颜色向着实际颜色的另一映射。
8.根据从属于权利要求5或6的权利要求7所述的方法,其中,所述成本函数还包括1减去各饱和度所得的值的平方和。
9.根据权利要求1至8中任一项所述的方法,其中,还包括:
使用所述摄像装置来拍摄图像;以及
针对所述图像中的一个或多个像素:
确定所述像素的表观色相,
在所述圆形色相空间内的两个以上的控制点的角度偏移之间进行插值,以确定与所述表观色相相关联的角度偏移,以及
将所确定的角度偏移应用于所述表观色相。
10.根据从属于权利要求7或8的权利要求9所述的方法,其中,还包括:
针对所述图像中的一个或多个像素:
确定所述像素的表观饱和度,
在所述圆形色相空间内的两个以上的控制点的标度之间进行插值,以确定与所述表观饱和度相关联的标度,以及
将所确定的标度应用于所述表观饱和度。
11.一种软件,其用在计算机中,所述计算机包括处理器和用于存储所述软件的存储器,所述软件包括所述处理器能够执行的一系列指令以执行根据权利要求1至10中任一项所述的方法。
12.一种计算机可读介质,其包括根据权利要求11所述的软件。
13.一种设备,包括:
处理器;
存储器;以及
驻存于所述处理器能够访问的存储器中的软件,所述软件包括所述处理器能够执行的一系列指令以执行根据权利要求1至10中任一项所述的方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
AU2011900785A AU2011900785A0 (en) | 2011-03-04 | Colour calibration method for an image capture device | |
AU2011900785 | 2011-03-04 | ||
PCT/AU2012/000208 WO2012119189A1 (en) | 2011-03-04 | 2012-03-02 | Colour calibration method for an image capture device |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103503027A true CN103503027A (zh) | 2014-01-08 |
CN103503027B CN103503027B (zh) | 2017-02-08 |
Family
ID=46797323
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201280021805.3A Active CN103503027B (zh) | 2011-03-04 | 2012-03-02 | 摄像装置所用的颜色校准方法 |
Country Status (8)
Country | Link |
---|---|
US (1) | US8896706B2 (zh) |
EP (1) | EP2681716B1 (zh) |
JP (2) | JP6382519B2 (zh) |
KR (1) | KR101917404B1 (zh) |
CN (1) | CN103503027B (zh) |
AU (1) | AU2012225194B2 (zh) |
ES (1) | ES2693670T3 (zh) |
WO (1) | WO2012119189A1 (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105321153A (zh) * | 2014-07-09 | 2016-02-10 | 三亚中兴软件有限责任公司 | 视频监控低照度图像色彩还原方法和装置 |
CN106455984A (zh) * | 2014-01-23 | 2017-02-22 | 史密夫及内修公开有限公司 | 用于伤口监测的系统和方法 |
CN111199565A (zh) * | 2018-11-16 | 2020-05-26 | 阿里巴巴集团控股有限公司 | 数据处理方法、装置、系统、电子设备和存储介质 |
CN111656759A (zh) * | 2018-11-13 | 2020-09-11 | 华为技术有限公司 | 图像色彩校正方法及装置、存储介质 |
CN113096025A (zh) * | 2020-01-08 | 2021-07-09 | 群创光电股份有限公司 | 编辑图像的方法及图像编辑系统 |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3851832B1 (en) | 2014-01-30 | 2024-01-17 | BD Kiestra B.V. | A system and method for image acquisition using supervised high quality imaging |
JP6399808B2 (ja) * | 2014-05-28 | 2018-10-03 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
WO2016005288A1 (en) | 2014-07-10 | 2016-01-14 | Smith & Nephew Plc | Improvements in and relating to polymer materials |
US10458848B2 (en) | 2015-03-25 | 2019-10-29 | 3M Innovative Properties Company | Dental imaging and illumination device |
EP3286732A2 (en) | 2015-04-23 | 2018-02-28 | BD Kiestra B.V. | Method and system for automatically counting microbial colonies |
AU2016250791B2 (en) | 2015-04-23 | 2021-10-21 | Bd Kiestra B.V. | Colony contrast gathering |
JP6663214B2 (ja) * | 2015-05-26 | 2020-03-11 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 表示方法および表示装置 |
GB201600746D0 (en) | 2016-01-14 | 2016-03-02 | Smith & Nephew | Improvements in and relating to polymer materials |
GB201600747D0 (en) | 2016-01-14 | 2016-03-02 | Smith & Nephew | Improvements in and relating to devices |
CN106504200B (zh) * | 2016-09-14 | 2022-12-09 | 上海方奥通信技术有限公司 | 基于色调偏移估计及逐点色调映射的图像光照补偿方法和系统 |
JP2019038470A (ja) | 2017-08-28 | 2019-03-14 | Toyo Tire株式会社 | 空気入りタイヤ |
US11328457B2 (en) | 2019-09-11 | 2022-05-10 | Microsoft Technology Licensing, Llc | System and method for tinting of computer-generated object(s) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080298676A1 (en) * | 2007-05-28 | 2008-12-04 | Canon Kabushiki Kaisha | Color processing method and apparatus |
US20090046171A1 (en) * | 2007-08-16 | 2009-02-19 | C2Cure, Inc. | Non-linear color correction |
CN101673399A (zh) * | 2009-09-29 | 2010-03-17 | 浙江工业大学 | 编码结构光三维视觉系统的标定方法 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0273398B1 (en) * | 1986-12-25 | 1995-02-08 | Konica Corporation | Method of correcting color images |
US5483259A (en) * | 1994-04-12 | 1996-01-09 | Digital Light & Color Inc. | Color calibration of display devices |
JP3486481B2 (ja) * | 1995-06-22 | 2004-01-13 | キヤノン株式会社 | 画像処理装置及び方法 |
JP3209402B2 (ja) * | 1996-11-01 | 2001-09-17 | 富士ゼロックス株式会社 | 画像処理装置 |
DE60041622D1 (de) * | 1999-11-11 | 2009-04-09 | Panasonic Corp | Farbtonübereinstimmungsverfahren und -vorrichtung |
US20030164968A1 (en) * | 2002-02-19 | 2003-09-04 | Canon Kabushiki Kaisha | Color processing apparatus and method |
US7190827B2 (en) | 2003-01-22 | 2007-03-13 | Hewlett-Packard Development Company, L.P. | Color space conversion using interpolation |
JP2005277484A (ja) * | 2004-03-23 | 2005-10-06 | Hitachi Ltd | 色信号変換装置 |
JP4523945B2 (ja) * | 2007-01-16 | 2010-08-11 | 日本電信電話株式会社 | 画像処理方法、画像処理装置および画像処理プログラム |
JP2009055465A (ja) * | 2007-08-28 | 2009-03-12 | Toshiba Corp | 画像処理装置および方法 |
-
2012
- 2012-03-02 WO PCT/AU2012/000208 patent/WO2012119189A1/en active Application Filing
- 2012-03-02 KR KR1020137026186A patent/KR101917404B1/ko active IP Right Grant
- 2012-03-02 CN CN201280021805.3A patent/CN103503027B/zh active Active
- 2012-03-02 EP EP12755459.0A patent/EP2681716B1/en active Active
- 2012-03-02 JP JP2013555705A patent/JP6382519B2/ja active Active
- 2012-03-02 ES ES12755459.0T patent/ES2693670T3/es active Active
- 2012-03-02 US US14/002,676 patent/US8896706B2/en active Active
- 2012-03-02 AU AU2012225194A patent/AU2012225194B2/en active Active
-
2017
- 2017-05-10 JP JP2017094224A patent/JP2017163593A/ja active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080298676A1 (en) * | 2007-05-28 | 2008-12-04 | Canon Kabushiki Kaisha | Color processing method and apparatus |
US20090046171A1 (en) * | 2007-08-16 | 2009-02-19 | C2Cure, Inc. | Non-linear color correction |
CN101673399A (zh) * | 2009-09-29 | 2010-03-17 | 浙江工业大学 | 编码结构光三维视觉系统的标定方法 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106455984A (zh) * | 2014-01-23 | 2017-02-22 | 史密夫及内修公开有限公司 | 用于伤口监测的系统和方法 |
CN105321153A (zh) * | 2014-07-09 | 2016-02-10 | 三亚中兴软件有限责任公司 | 视频监控低照度图像色彩还原方法和装置 |
CN111656759A (zh) * | 2018-11-13 | 2020-09-11 | 华为技术有限公司 | 图像色彩校正方法及装置、存储介质 |
CN111199565A (zh) * | 2018-11-16 | 2020-05-26 | 阿里巴巴集团控股有限公司 | 数据处理方法、装置、系统、电子设备和存储介质 |
CN111199565B (zh) * | 2018-11-16 | 2022-05-27 | 阿里巴巴集团控股有限公司 | 数据处理方法、装置、系统、电子设备和存储介质 |
CN113096025A (zh) * | 2020-01-08 | 2021-07-09 | 群创光电股份有限公司 | 编辑图像的方法及图像编辑系统 |
Also Published As
Publication number | Publication date |
---|---|
US20140204239A1 (en) | 2014-07-24 |
WO2012119189A1 (en) | 2012-09-13 |
CN103503027B (zh) | 2017-02-08 |
JP2017163593A (ja) | 2017-09-14 |
AU2012225194A1 (en) | 2013-03-21 |
JP2014508475A (ja) | 2014-04-03 |
ES2693670T3 (es) | 2018-12-13 |
KR101917404B1 (ko) | 2019-01-24 |
AU2012225194B2 (en) | 2014-11-13 |
EP2681716A4 (en) | 2014-10-01 |
KR20140035349A (ko) | 2014-03-21 |
EP2681716A1 (en) | 2014-01-08 |
US8896706B2 (en) | 2014-11-25 |
EP2681716B1 (en) | 2018-08-01 |
JP6382519B2 (ja) | 2018-08-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103503027A (zh) | 摄像装置所用的颜色校准方法 | |
JP5661720B2 (ja) | マルチディスプレイのキャリブレーションシステム | |
CN104052979B (zh) | 用于图像处理的装置和技术 | |
CN102158727B (zh) | 手机摄像头色彩还原性的检测方法和系统 | |
CN104581105B (zh) | 基于色温距离变换权重图和块可靠性修正的自动白平衡方法 | |
CN106559601B (zh) | 校准系统、校准方法以及图像形成装置 | |
CN104574371A (zh) | 高动态彩色数字相机特性化标定方法 | |
CN114979500B (zh) | 图像处理方法、图像处理装置、电子设备及可读存储介质 | |
CN112689140B (zh) | 白平衡同步方法及装置、电子设备和存储介质 | |
CN103594056A (zh) | Led显示屏的亮色度校正方法 | |
CN104933706B (zh) | 一种成像系统色彩信息标定方法 | |
CN103474046A (zh) | 一种提高从数码相机到显示器颜色再现效果的方法 | |
CN104036467A (zh) | 一种基于通道增益系数加权的图像色偏校正方法 | |
JP5761491B2 (ja) | 色処理装置及び色処理プログラム | |
CN115426487B (zh) | 色彩校正矩阵调整方法、装置、电子设备及可读存储介质 | |
GB2534018A (en) | Method and system for determining parameters of an image processing pipeline of a digital camera | |
CN111896109B (zh) | 一种基于数码相机原始响应值的光谱重建方法 | |
JP2014090410A (ja) | ホワイトバランス調整方法 | |
CN110300291B (zh) | 确定色彩值的装置和方法、数字相机、应用和计算机设备 | |
CN109685859B (zh) | 基于3d查找表的三维颜色自动调整方法 | |
CN114866755B (zh) | 自动白平衡方法、装置和计算机存储介质、电子设备 | |
CN116152361B (zh) | 用于估算色度的方法、电子设备及计算机可读存储介质 | |
Geng et al. | Application Processing of Film Industrial Grade Color Grading Simulation Style Based on LUT Color Matching Algorithm | |
CN116245964A (zh) | 色彩标定方法、装置、设备及存储介质 | |
CN104766348A (zh) | 一种基于颜色空间的偏色检测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |