CN109285113A - 一种基于梯度的改进彩色图像插值方法 - Google Patents
一种基于梯度的改进彩色图像插值方法 Download PDFInfo
- Publication number
- CN109285113A CN109285113A CN201710598476.3A CN201710598476A CN109285113A CN 109285113 A CN109285113 A CN 109285113A CN 201710598476 A CN201710598476 A CN 201710598476A CN 109285113 A CN109285113 A CN 109285113A
- Authority
- CN
- China
- Prior art keywords
- interpolation
- color
- pixel
- follows
- gradient
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 25
- 230000000750 progressive effect Effects 0.000 abstract description 2
- 239000003086 colorant Substances 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
本发明公开了一种基于梯度的改进彩色图像插值方法,本发明方法首先根据Bayer滤波阵列判断单色图像相应像素位置的颜色,然后根据相应像素位置的单色彩完成缺失颜色的插值,最后按照从上到下、从左到右扫描整幅单色图像,完成整幅图像的彩色插值。本发明方法通过卷积技术,将梯度插值方法改进为逐行扫描、实时插值的方式,每一个卷积过程,得到相应像素点的三色取值。相比于传统的彩色图像插值方法,本方法的实时性和并行性均得到很大的提升。
Description
技术领域
本发明属于彩色相机彩色图像合成的技术领域,具体涉及一种基于梯度的改进彩色图像插值方法。
背景技术
考虑降低成本和缩小数码设备的体积,绝大多数数码摄影设备只使用单个图像传感器,并在图像传感器的表面覆盖一层色彩滤波阵列,这样,每个像素只采集到红色、绿色、蓝色三基色中的一种,而缺失另外两种基色信息,缺失的两个基色需要利用周围像素点的色彩信息插值得到,进而复原一副全彩色图像,该过程称作彩色图像插值或去马赛克。目前业界存在多种彩色滤波阵列,而Bayer彩色滤波阵列应用最为普遍。
传统的彩色图像插值法通常采用先计算并存储整幅绿色通道的图像,然后通过整体插值的方式计算红色或蓝色通道的图像,实时性差,且不利于在FPGA等并行硬件平台上的实现。
发明内容
本发明目的在于提供一种基于梯度的改进彩色图像插值方法,解决传统方法实时性差和不利于并行实现的问题。
一种基于梯度的改进彩色图像插值方法,包含以下步骤:
第一步判断单色图像相应像素位置的颜色
根据Bayer滤波阵列,设像素在单色图像中的坐标位置为(i,j),当(i+j)除以2的余数为0时,则判定像素颜色为绿色;当i除以2的余数为0且j除以2的余数不为0时,则判定像素颜色为蓝色;当i除以2的余数不为0且j除以2的余数为0时,则判定像素颜色为红色。
第二步根据像素的单色彩完成缺失颜色的插值
忽略边缘像素的影响,设像素在单色图像中的坐标位置为(i,j),该点的像素值为d(i,j),该点的颜色为红色、绿色或蓝色,其中G(i,j)、R(i,j)、B(i,j)分别表示图像中的坐标位置为(i,j)处像素的绿色分量、红色分量、蓝色分量的灰度值:
当单色图像坐标(i,j)处颜色为绿色时,其绿色分量为:
G(i,j)=d(i,j) (1)
在奇数行偶数列位置的蓝色和红色分量的插值分别为:
在偶数行奇数列位置的蓝色和红色分量的插值分别为:
当单色图像坐标(i,j)处颜色为蓝色时,其蓝色分量为:
B(i,j)=d(i,j) (6)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为该点水平方向的梯度,β为其竖直方向的梯度:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其红色分量的插值为:
当单色图像坐标(i,j)处颜色为红色时,其红色分量为:
R(i,j)=d(i,j) (11)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为该点水平方向的梯度,β为其竖直方向的梯度:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其蓝色分量的插值为:
从上到下,从左到右扫描整幅单色图像,结合公式(1)-(15),完成整幅图像的彩色插值。
更优的,其中第二步中水平方向的梯度α和竖直方向的梯度β通过二阶梯度公式获取:
一种基于梯度的改进彩色图像插值系统,包括:单色图像像素位置颜色判定模块和颜色插值模块;其中单色图像像素位置颜色判定模块根据Bayer滤波阵列对单色图像相应像素位置的颜色进行判定,颜色插值模块根据像素的单色彩完成缺失颜色的插值。
本发明方法通过卷积技术,将梯度插值方法改进为逐行扫描、实时插值的方式,每一个卷积过程,得到相应像素点的三色取值。相比于传统的彩色图像插值方法,本方法的实时性和并行性均得到很大的提升。
附图说明
图1现有技术中的专业数码相机的工作示意图;
图2Bayer滤波阵列示意图。
具体实例方式
一种基于梯度的改进彩色图像插值方法,包含以下步骤:
第一步判断单色图像相应像素位置的颜色
根据Bayer滤波阵列,设像素在单色图像中的坐标位置为(i,j),当(i+j)除以2的余数为0时,则判定像素颜色为绿色;当i除以2的余数为0且j除以2的余数不为0时,则判定像素颜色为蓝色;当i除以2的余数不为0且j除以2的余数为0时,则判定像素颜色为红色。
第二步根据像素的单色彩完成缺失颜色的插值
忽略边缘像素的影响,设像素在单色图像中的坐标位置为(i,j),该点的像素值为d(i,j),该点的颜色为红色、绿色或蓝色,其中G(i,j)、R(i,j)、B(i,j)分别表示图像中的坐标位置为(i,j)处像素的绿色分量、红色分量、蓝色分量的灰度值:
当单色图像坐标(i,j)处颜色为绿色时,其绿色分量为:
G(i,j)=d(i,j) (1)
在奇数行偶数列位置的蓝色和红色分量的插值分别为:
在偶数行奇数列位置的蓝色和红色分量的插值分别为:
当单色图像坐标(i,j)处颜色为蓝色时,其蓝色分量为:
B(i,j)=d(i,j) (6)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为该点水平方向的梯度,β为其竖直方向的梯度,二阶梯度公式为:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其红色分量的插值为:
当单色图像坐标(i,j)处颜色为红色时,其红色分量为:
R(i,j)=d(i,j) (12)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为改点水平方向的梯度,β为其竖直方向的梯度,其二阶梯度公式如下:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其蓝色分量的插值为:
从上到下,从左到右扫描整幅单色图像,结合公式(1)-(17),完成整幅图像的彩色插值。
以上就是本发明一种基于梯度的改进彩色图像插值方法的技术内容和方案。需要注意的是,以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和范围之内所作的任何修改、等同替换或改进等,均包含在本发明的保护范围之内。
Claims (3)
1.一种基于梯度的改进彩色图像插值方法,其特征在于包含以下步骤:
第一步 判断单色图像相应像素位置的颜色
根据Bayer滤波阵列,设像素在单色图像中的坐标位置为(i,j),当(i+j)除以2的余数为0时,则判定像素颜色为绿色;当i除以2的余数为0且j除以2的余数不为0时,则判定像素颜色为蓝色;当i除以2的余数不为0且j除以2的余数为0时,则判定像素颜色为红色;
第二步 根据像素的单色彩完成缺失颜色的插值
忽略边缘像素的影响,设像素在单色图像中的坐标位置为(i,j),该点的像素值为d(i,j),该点的颜色为红色、绿色或蓝色,其中G(i,j)、R(i,j)、B(i,j)分别表示图像中的坐标位置为(i,j)处像素的绿色分量、红色分量、蓝色分量的灰度值:
当单色图像坐标(i,j)处颜色为绿色时,其绿色分量为:
G(i,j)=d(i,j) (1)
在奇数行偶数列位置的蓝色和红色分量的插值分别为:
在偶数行奇数列位置的蓝色和红色分量的插值分别为:
当单色图像坐标(i,j)处颜色为蓝色时,其蓝色分量为:
B(i,j)=d(i,j) (6)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为该点水平方向的梯度,β为其竖直方向的梯度:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其红色分量的插值为:
当单色图像坐标(i,j)处颜色为红色时,其红色分量为:
R(i,j)=d(i,j) (11)
其绿色分量的插值由水平和竖直方向的梯度大小决定,设α为该点水平方向的梯度,β为其竖直方向的梯度:
当α<β时,表明d(i,j)与其水平方向上的像素点关系紧密,插值将在水平方向上进行,公式如下所示:
当α>β时,表明d(i,j)与其竖直方向上的像素点关系紧密,插值将在竖直方向上进行,公式如下所示:
当α=β时,表明d(i,j)与其水平方向上和垂直方向上的像素点关系同等紧密,插值将在整个邻域内进行,公式如下所示:
其蓝色分量的插值为:
从上到下,从左到右扫描整幅单色图像,结合公式(1)-(15),完成整幅图像的彩色插值。
2.如权利要求1所述的图像插值方法,其特征在于:所述第二步中水平方向的梯度α和竖直方向的梯度β通过二阶梯度公式获取:
3.一种基于梯度的改进彩色图像插值系统,包括:单色图像像素位置颜色判定模块和颜色插值模块;其中单色图像像素位置颜色判定模块根据Bayer滤波阵列对单色图像相应像素位置的颜色进行判定,颜色插值模块根据像素的单色彩完成缺失颜色的插值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710598476.3A CN109285113B (zh) | 2017-07-21 | 2017-07-21 | 一种基于梯度的改进彩色图像插值方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710598476.3A CN109285113B (zh) | 2017-07-21 | 2017-07-21 | 一种基于梯度的改进彩色图像插值方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109285113A true CN109285113A (zh) | 2019-01-29 |
CN109285113B CN109285113B (zh) | 2022-11-22 |
Family
ID=65185582
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710598476.3A Active CN109285113B (zh) | 2017-07-21 | 2017-07-21 | 一种基于梯度的改进彩色图像插值方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109285113B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113115010A (zh) * | 2020-01-11 | 2021-07-13 | 晋城三赢精密电子有限公司 | 基于rgb-ir图像传感器的图像格式转换方法及装置 |
CN113824936A (zh) * | 2021-09-23 | 2021-12-21 | 合肥埃科光电科技有限公司 | 色彩滤波阵列线扫描相机色彩插值方法、装置及设备 |
CN113824935A (zh) * | 2021-09-23 | 2021-12-21 | 合肥埃科光电科技有限公司 | 伪彩色线扫描相机的时间延迟积分方法、装置及设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050200733A1 (en) * | 2004-03-15 | 2005-09-15 | Microsoft Corporation | System and method for adaptive interpolation of images from patterned sensors |
CN104537625A (zh) * | 2015-01-05 | 2015-04-22 | 中国科学院光电技术研究所 | 一种基于方向标志位的Bayer彩色图像插值方法 |
CN105577981A (zh) * | 2015-12-22 | 2016-05-11 | 深圳大学 | 一种边缘自适应的色彩还原方法及系统 |
-
2017
- 2017-07-21 CN CN201710598476.3A patent/CN109285113B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050200733A1 (en) * | 2004-03-15 | 2005-09-15 | Microsoft Corporation | System and method for adaptive interpolation of images from patterned sensors |
CN104537625A (zh) * | 2015-01-05 | 2015-04-22 | 中国科学院光电技术研究所 | 一种基于方向标志位的Bayer彩色图像插值方法 |
CN105577981A (zh) * | 2015-12-22 | 2016-05-11 | 深圳大学 | 一种边缘自适应的色彩还原方法及系统 |
Non-Patent Citations (1)
Title |
---|
李杰等: ""基于彩色图像插值算法的胶囊机器人微视觉"", 《计算机测量与控制》 * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113115010A (zh) * | 2020-01-11 | 2021-07-13 | 晋城三赢精密电子有限公司 | 基于rgb-ir图像传感器的图像格式转换方法及装置 |
CN113824936A (zh) * | 2021-09-23 | 2021-12-21 | 合肥埃科光电科技有限公司 | 色彩滤波阵列线扫描相机色彩插值方法、装置及设备 |
CN113824935A (zh) * | 2021-09-23 | 2021-12-21 | 合肥埃科光电科技有限公司 | 伪彩色线扫描相机的时间延迟积分方法、装置及设备 |
CN113824936B (zh) * | 2021-09-23 | 2024-02-09 | 合肥埃科光电科技股份有限公司 | 色彩滤波阵列线扫描相机色彩插值方法、装置及设备 |
CN113824935B (zh) * | 2021-09-23 | 2024-04-09 | 合肥埃科光电科技股份有限公司 | 伪彩色线扫描相机的时间延迟积分方法、装置及设备 |
Also Published As
Publication number | Publication date |
---|---|
CN109285113B (zh) | 2022-11-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9532018B2 (en) | Projection system, device and method for the output of calibration projection scenes | |
CN101006731B (zh) | 图像处理装置及图像处理方法、摄像装置 | |
EP2728545B1 (en) | Image processing method and device based on bayer format | |
CN102273208B (zh) | 图像处理设备和图像处理方法 | |
US7376288B2 (en) | Edge adaptive demosaic system and method | |
US8290271B2 (en) | Method, medium and apparatus correcting projected image | |
CN111510691B (zh) | 颜色插值方法及装置、设备、存储介质 | |
US20060146153A1 (en) | Method and apparatus for processing Bayer image data | |
US7333678B1 (en) | Edge adaptive demosaic system and method | |
CN109285113A (zh) | 一种基于梯度的改进彩色图像插值方法 | |
US8773556B2 (en) | Signal processing device, imaging device, and signal processing method for color interpolation | |
CN104618703A (zh) | 一种白平衡调整方法 | |
CN105551050A (zh) | 一种基于光场的图像深度估计方法 | |
US20090256928A1 (en) | Method and device for detecting color temperature | |
WO2007075066A1 (en) | Image processor, apparatus and method for lens shading compensation | |
US6967748B1 (en) | Color image pickup device | |
CN103270757B (zh) | 图像传感装置和控制其操作的方法 | |
CN103780887B (zh) | 一种视频信号处理方法及装置 | |
CN113052765B (zh) | 基于最优栅格密度模型的全景图像拼接方法 | |
US8346019B2 (en) | Image generation method and apparatus, program therefor, and storage medium which stores the program | |
CN104933671A (zh) | 图像颜色融合方法 | |
EP2717155A1 (en) | Color distortion correction method and device for imaging systems and image output systems | |
WO2014084730A1 (en) | System and method for generating image using multiple lenses and multiple imagers | |
CN104754321A (zh) | 相机数组系统 | |
KR100986607B1 (ko) | 영상 보간 방법 및 그 방법이 기록된 컴퓨터로 읽을 수 있는 기록매체 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |