CN109285113A - 一种基于梯度的改进彩色图像插值方法 - Google Patents

一种基于梯度的改进彩色图像插值方法 Download PDF

Info

Publication number
CN109285113A
CN109285113A CN201710598476.3A CN201710598476A CN109285113A CN 109285113 A CN109285113 A CN 109285113A CN 201710598476 A CN201710598476 A CN 201710598476A CN 109285113 A CN109285113 A CN 109285113A
Authority
CN
China
Prior art keywords
interpolation
color
pixel
follows
gradient
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710598476.3A
Other languages
English (en)
Other versions
CN109285113B (zh
Inventor
叶涛
杨俊雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Institute of Remote Sensing Equipment
Original Assignee
Beijing Institute of Remote Sensing Equipment
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Institute of Remote Sensing Equipment filed Critical Beijing Institute of Remote Sensing Equipment
Priority to CN201710598476.3A priority Critical patent/CN109285113B/zh
Publication of CN109285113A publication Critical patent/CN109285113A/zh
Application granted granted Critical
Publication of CN109285113B publication Critical patent/CN109285113B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4015Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

本发明公开了一种基于梯度的改进彩色图像插值方法,本发明方法首先根据Bayer滤波阵列判断单色图像相应像素位置的颜色,然后根据相应像素位置的单色彩完成缺失颜色的插值,最后按照从上到下、从左到右扫描整幅单色图像,完成整幅图像的彩色插值。本发明方法通过卷积技术,将梯度插值方法改进为逐行扫描、实时插值的方式,每一个卷积过程,得到相应像素点的三色取值。相比于传统的彩色图像插值方法,本方法的实时性和并行性均得到很大的提升。

Description

一种基于梯度的改进彩色图像插值方法
技术领域
本发明属于彩色相机彩色图像合成的技术领域,具体涉及一种基于梯度的改进彩色图像插值方法。
背景技术
考虑降低成本和缩小数码设备的体积,绝大多数数码摄影设备只使用单个图像传感器,并在图像传感器的表面覆盖一层色彩滤波阵列,这样,每个像素只采集到红色、绿色、蓝色三基色中的一种,而缺失另外两种基色信息,缺失的两个基色需要利用周围像素点的色彩信息插值得到,进而复原一副全彩色图像,该过程称作彩色图像插值或去马赛克。目前业界存在多种彩色滤波阵列,而Bayer彩色滤波阵列应用最为普遍。
传统的彩色图像插值法通常采用先计算并存储整幅绿色通道的图像,然后通过整体插值的方式计算红色或蓝色通道的图像,实时性差,且不利于在FPGA等并行硬件平台上的实现。
发明内容
本发明目的在于提供一种基于梯度的改进彩色图像插值方法,解决传统方法实时性差和不利于并行实现的问题。
一种基于梯度的改进彩色图像插值方法,包含以下步骤:
第一步判断单色图像相应像素位置的颜色
根据Bayer滤波阵列,设像素在单色图像中的坐标位置为(i,j),当(i+j)除以2的余数为0时,则判定像素颜色为绿色;当i除以2的余数为0且j除以2的余数不为0时,则判定像素颜色为蓝色;当i除以2的余数不为0且j除以2的余数为0时,则判定像素颜色为红色。
第二步根据像素的单色彩完成缺失颜色的插值
忽略边缘像素的影响,设像素在单色图像中的坐标位置为(i,j),该点的像素值为d(i,j),该点的颜色为红色、绿色或蓝色,其中G(i,j)、R(i,j)、B(i,j)分别表示图像中的坐标位置为(i,j)处像素的绿色分量、红色分量、蓝色分量的灰度值:
当单色图像坐标(i,j)处颜色为绿色时,其绿色分量为:
G(i,j)=d(i,j) (1)
在奇数行偶数列位置的蓝色和红色分量的插值分别为:
在偶数行奇数列位置的蓝色和红色分量的插值分别为:
当单色图像坐标(i,j)处颜色为蓝色时,其蓝色分量为:
B(i,j)=d(i,j) (6)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为该点水平方向的梯度,β为其竖直方向的梯度:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其红色分量的插值为:
当单色图像坐标(i,j)处颜色为红色时,其红色分量为:
R(i,j)=d(i,j) (11)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为该点水平方向的梯度,β为其竖直方向的梯度:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其蓝色分量的插值为:
从上到下,从左到右扫描整幅单色图像,结合公式(1)-(15),完成整幅图像的彩色插值。
更优的,其中第二步中水平方向的梯度α和竖直方向的梯度β通过二阶梯度公式获取:
一种基于梯度的改进彩色图像插值系统,包括:单色图像像素位置颜色判定模块和颜色插值模块;其中单色图像像素位置颜色判定模块根据Bayer滤波阵列对单色图像相应像素位置的颜色进行判定,颜色插值模块根据像素的单色彩完成缺失颜色的插值。
本发明方法通过卷积技术,将梯度插值方法改进为逐行扫描、实时插值的方式,每一个卷积过程,得到相应像素点的三色取值。相比于传统的彩色图像插值方法,本方法的实时性和并行性均得到很大的提升。
附图说明
图1现有技术中的专业数码相机的工作示意图;
图2Bayer滤波阵列示意图。
具体实例方式
一种基于梯度的改进彩色图像插值方法,包含以下步骤:
第一步判断单色图像相应像素位置的颜色
根据Bayer滤波阵列,设像素在单色图像中的坐标位置为(i,j),当(i+j)除以2的余数为0时,则判定像素颜色为绿色;当i除以2的余数为0且j除以2的余数不为0时,则判定像素颜色为蓝色;当i除以2的余数不为0且j除以2的余数为0时,则判定像素颜色为红色。
第二步根据像素的单色彩完成缺失颜色的插值
忽略边缘像素的影响,设像素在单色图像中的坐标位置为(i,j),该点的像素值为d(i,j),该点的颜色为红色、绿色或蓝色,其中G(i,j)、R(i,j)、B(i,j)分别表示图像中的坐标位置为(i,j)处像素的绿色分量、红色分量、蓝色分量的灰度值:
当单色图像坐标(i,j)处颜色为绿色时,其绿色分量为:
G(i,j)=d(i,j) (1)
在奇数行偶数列位置的蓝色和红色分量的插值分别为:
在偶数行奇数列位置的蓝色和红色分量的插值分别为:
当单色图像坐标(i,j)处颜色为蓝色时,其蓝色分量为:
B(i,j)=d(i,j) (6)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为该点水平方向的梯度,β为其竖直方向的梯度,二阶梯度公式为:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其红色分量的插值为:
当单色图像坐标(i,j)处颜色为红色时,其红色分量为:
R(i,j)=d(i,j) (12)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为改点水平方向的梯度,β为其竖直方向的梯度,其二阶梯度公式如下:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其蓝色分量的插值为:
从上到下,从左到右扫描整幅单色图像,结合公式(1)-(17),完成整幅图像的彩色插值。
以上就是本发明一种基于梯度的改进彩色图像插值方法的技术内容和方案。需要注意的是,以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和范围之内所作的任何修改、等同替换或改进等,均包含在本发明的保护范围之内。

Claims (3)

1.一种基于梯度的改进彩色图像插值方法,其特征在于包含以下步骤:
第一步 判断单色图像相应像素位置的颜色
根据Bayer滤波阵列,设像素在单色图像中的坐标位置为(i,j),当(i+j)除以2的余数为0时,则判定像素颜色为绿色;当i除以2的余数为0且j除以2的余数不为0时,则判定像素颜色为蓝色;当i除以2的余数不为0且j除以2的余数为0时,则判定像素颜色为红色;
第二步 根据像素的单色彩完成缺失颜色的插值
忽略边缘像素的影响,设像素在单色图像中的坐标位置为(i,j),该点的像素值为d(i,j),该点的颜色为红色、绿色或蓝色,其中G(i,j)、R(i,j)、B(i,j)分别表示图像中的坐标位置为(i,j)处像素的绿色分量、红色分量、蓝色分量的灰度值:
当单色图像坐标(i,j)处颜色为绿色时,其绿色分量为:
G(i,j)=d(i,j) (1)
在奇数行偶数列位置的蓝色和红色分量的插值分别为:
在偶数行奇数列位置的蓝色和红色分量的插值分别为:
当单色图像坐标(i,j)处颜色为蓝色时,其蓝色分量为:
B(i,j)=d(i,j) (6)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为该点水平方向的梯度,β为其竖直方向的梯度:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其红色分量的插值为:
当单色图像坐标(i,j)处颜色为红色时,其红色分量为:
R(i,j)=d(i,j) (11)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为该点水平方向的梯度,β为其竖直方向的梯度:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其蓝色分量的插值为:
从上到下,从左到右扫描整幅单色图像,结合公式(1)-(15),完成整幅图像的彩色插值。
2.如权利要求1所述的图像插值方法,其特征在于:所述第二步中水平方向的梯度α和竖直方向的梯度β通过二阶梯度公式获取:
3.一种基于梯度的改进彩色图像插值系统,包括:单色图像像素位置颜色判定模块和颜色插值模块;其中单色图像像素位置颜色判定模块根据Bayer滤波阵列对单色图像相应像素位置的颜色进行判定,颜色插值模块根据像素的单色彩完成缺失颜色的插值。
CN201710598476.3A 2017-07-21 2017-07-21 一种基于梯度的改进彩色图像插值方法 Active CN109285113B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710598476.3A CN109285113B (zh) 2017-07-21 2017-07-21 一种基于梯度的改进彩色图像插值方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710598476.3A CN109285113B (zh) 2017-07-21 2017-07-21 一种基于梯度的改进彩色图像插值方法

Publications (2)

Publication Number Publication Date
CN109285113A true CN109285113A (zh) 2019-01-29
CN109285113B CN109285113B (zh) 2022-11-22

Family

ID=65185582

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710598476.3A Active CN109285113B (zh) 2017-07-21 2017-07-21 一种基于梯度的改进彩色图像插值方法

Country Status (1)

Country Link
CN (1) CN109285113B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113115010A (zh) * 2020-01-11 2021-07-13 晋城三赢精密电子有限公司 基于rgb-ir图像传感器的图像格式转换方法及装置
CN113824936A (zh) * 2021-09-23 2021-12-21 合肥埃科光电科技有限公司 色彩滤波阵列线扫描相机色彩插值方法、装置及设备
CN113824935A (zh) * 2021-09-23 2021-12-21 合肥埃科光电科技有限公司 伪彩色线扫描相机的时间延迟积分方法、装置及设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050200733A1 (en) * 2004-03-15 2005-09-15 Microsoft Corporation System and method for adaptive interpolation of images from patterned sensors
CN104537625A (zh) * 2015-01-05 2015-04-22 中国科学院光电技术研究所 一种基于方向标志位的Bayer彩色图像插值方法
CN105577981A (zh) * 2015-12-22 2016-05-11 深圳大学 一种边缘自适应的色彩还原方法及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050200733A1 (en) * 2004-03-15 2005-09-15 Microsoft Corporation System and method for adaptive interpolation of images from patterned sensors
CN104537625A (zh) * 2015-01-05 2015-04-22 中国科学院光电技术研究所 一种基于方向标志位的Bayer彩色图像插值方法
CN105577981A (zh) * 2015-12-22 2016-05-11 深圳大学 一种边缘自适应的色彩还原方法及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李杰等: ""基于彩色图像插值算法的胶囊机器人微视觉"", 《计算机测量与控制》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113115010A (zh) * 2020-01-11 2021-07-13 晋城三赢精密电子有限公司 基于rgb-ir图像传感器的图像格式转换方法及装置
CN113824936A (zh) * 2021-09-23 2021-12-21 合肥埃科光电科技有限公司 色彩滤波阵列线扫描相机色彩插值方法、装置及设备
CN113824935A (zh) * 2021-09-23 2021-12-21 合肥埃科光电科技有限公司 伪彩色线扫描相机的时间延迟积分方法、装置及设备
CN113824936B (zh) * 2021-09-23 2024-02-09 合肥埃科光电科技股份有限公司 色彩滤波阵列线扫描相机色彩插值方法、装置及设备
CN113824935B (zh) * 2021-09-23 2024-04-09 合肥埃科光电科技股份有限公司 伪彩色线扫描相机的时间延迟积分方法、装置及设备

Also Published As

Publication number Publication date
CN109285113B (zh) 2022-11-22

Similar Documents

Publication Publication Date Title
US9532018B2 (en) Projection system, device and method for the output of calibration projection scenes
CN101006731B (zh) 图像处理装置及图像处理方法、摄像装置
EP2728545B1 (en) Image processing method and device based on bayer format
CN102273208B (zh) 图像处理设备和图像处理方法
US7376288B2 (en) Edge adaptive demosaic system and method
US8290271B2 (en) Method, medium and apparatus correcting projected image
CN111510691B (zh) 颜色插值方法及装置、设备、存储介质
US20060146153A1 (en) Method and apparatus for processing Bayer image data
US7333678B1 (en) Edge adaptive demosaic system and method
CN109285113A (zh) 一种基于梯度的改进彩色图像插值方法
US8773556B2 (en) Signal processing device, imaging device, and signal processing method for color interpolation
CN104618703A (zh) 一种白平衡调整方法
CN105551050A (zh) 一种基于光场的图像深度估计方法
US20090256928A1 (en) Method and device for detecting color temperature
WO2007075066A1 (en) Image processor, apparatus and method for lens shading compensation
US6967748B1 (en) Color image pickup device
CN103270757B (zh) 图像传感装置和控制其操作的方法
CN103780887B (zh) 一种视频信号处理方法及装置
CN113052765B (zh) 基于最优栅格密度模型的全景图像拼接方法
US8346019B2 (en) Image generation method and apparatus, program therefor, and storage medium which stores the program
CN104933671A (zh) 图像颜色融合方法
EP2717155A1 (en) Color distortion correction method and device for imaging systems and image output systems
WO2014084730A1 (en) System and method for generating image using multiple lenses and multiple imagers
CN104754321A (zh) 相机数组系统
KR100986607B1 (ko) 영상 보간 방법 및 그 방법이 기록된 컴퓨터로 읽을 수 있는 기록매체

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant