CN103685850B - 图像处理方法以及图像处理装置 - Google Patents
图像处理方法以及图像处理装置 Download PDFInfo
- Publication number
- CN103685850B CN103685850B CN201210544413.7A CN201210544413A CN103685850B CN 103685850 B CN103685850 B CN 103685850B CN 201210544413 A CN201210544413 A CN 201210544413A CN 103685850 B CN103685850 B CN 103685850B
- Authority
- CN
- China
- Prior art keywords
- image
- regional
- elementary area
- luminance gain
- brightness
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 title claims abstract description 35
- 238000003672 processing method Methods 0.000 title claims abstract description 19
- 230000001105 regulatory effect Effects 0.000 claims description 33
- 238000013507 mapping Methods 0.000 claims description 4
- 230000001629 suppression Effects 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 15
- 238000000034 method Methods 0.000 description 15
- 230000002401 inhibitory effect Effects 0.000 description 11
- 238000001914 filtration Methods 0.000 description 5
- 238000013461 design Methods 0.000 description 4
- 238000005728 strengthening Methods 0.000 description 2
- 241000023320 Luma <angiosperm> Species 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000003702 image correction Methods 0.000 description 1
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/94—Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/407—Control or modification of tonal gradation or of extreme levels, e.g. background level
- H04N1/4072—Control or modification of tonal gradation or of extreme levels, e.g. background level dependent on the contents of the original
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/409—Edge or detail enhancement; Noise or error suppression
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/409—Edge or detail enhancement; Noise or error suppression
- H04N1/4092—Edge or detail enhancement
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
Abstract
图像处理方法包含:取得输入图像经由区域性亮度调整之前与经由该区域性亮度调整之后之间的区域性亮度增益关系;以及依据该区域性亮度增益关系来针对待处理图像进行噪声抑制及边缘加强中至少其一以产生输出图像。图像处理装置包含区域性亮度调整电路及图像加强电路。该区域性亮度调整电路用以取得输入图像经由区域性亮度调整之前与经由该区域性亮度调整之后之间的区域性亮度增益关系。该图像加强电路耦接于该区域性亮度调整电路,用以依据该区域性亮度增益关系来针对待处理图像进行噪声抑制及边缘加强中至少其一以产生输出图像。
Description
技术领域
本发明是关于图像处理,尤指一种利用区域性亮度增益来处理图像以提升图像质量的图像处理方法及其相关的图像处理装置。
背景技术
在进行图像处理时,可通过调整图像的亮度(brightness)来进行增加图像对比度(imagecontrast)或提升动态范围(dynamicrange)等图像强化操作(imageenhancement),其中图像亮度的调整会伴随图像噪声的产生。传统上用来降低图像噪声的方法之一是依据同一参数来对该图像进行噪声抑制(noisereduction)处理,然而,当去噪能力(denoiselevel)较高时,边缘能力(edgelevel)会比较弱(亦即,该图像的图像细节(imagedetail)可能会模糊(blur)或遗失);反之,为了要保留/加强图像细节,该图像的噪声可能会偏高,因此,当一图像中的不同的图像区块经由不同的亮度调整操作以强化该图像时,对该图像进行后续的噪声抑制处理可能会造成某些图像区块有图像细节模糊/遗失或噪声抑制不足的情形发生。
因此,如何使图像经由区域性地调整图像亮度的图像强化之后,还能够抑制整张图像的噪声而不会发生图像细节模糊/遗失,为一个待解决的议题。
发明内容
有鉴于此,本发明的目的之一在于提供一种利用区域性亮度增益来处理图像以提升图像质量的图像处理方法及其相关的图像处理装置,来解决上述的问题。
依据本发明的一实施例,其揭示一种图像处理方法。该图像处理方法包含下列步骤:取得一输入图像经由一区域性亮度调整之前与经由该区域性亮度调整之后之间的一区域性亮度增益关系;以及依据该区域性亮度增益关系来对一待处理图像进行一噪声抑制及一边缘加强中至少其一以产生一输出图像。
依据本发明的一实施例,其揭示一种图像处理装置。该图像处理装置包含一区域性亮度调整电路以及一图像加强电路。该区域性亮度调整电路用以取得一输入图像经由一区域性亮度调整之前与经由该区域性亮度调整之后之间的一区域性亮度增益关系。该图像加强电路耦接于该区域性亮度调整电路,用以依据该区域性亮度增益关系来对一待处理图像进行一噪声抑制及一边缘加强中至少其一以产生一输出图像。
本发明所提供的图像处理方法及其相关的图像处理装置不仅可使图像经由区域性亮度调整以强化图像,也可以同时提供足够的噪声抑制及/或边缘强化的图像处理能力。
附图说明
图1为本发明图像处理装置的一第一实施例的示意图。
图2为本发明图像处理装置的一第二实施例的示意图。
图3为本发明区域性亮度调整的一实作范例的示意图。
图4为本发明区域性亮度调整的另一实作范例的示意图。
图5为本发明图像校正关系的一实施例的示意图。
图6为本发明图像校正关系的另一实施例的示意图。
图7为本发明依据区域性亮度增益关系来执行图像强化处理的一实作范例的流程图。
图8为本发明图像处理装置的一第三实施例的示意图。
图9为本发明图像处理装置的一第四实施例的示意图。
[主要组件标号说明]
具体实施方式
本发明的概念在于通过区域性亮度调整(localbrightnessadjustment)所得到的在图像上各区域的亮度增益,来区域性地进行噪声抑制及/或边缘加强(edgeenhancement)操作,以克服传统上对图像进行全域性(global)处理所产生的问题。换言之,本发明可对单一图像进行区域性亮度调整与分析,进而执行适合于不同区域的图像处理,以提升整体的图像质量,举例来说(但本发明不局限于此),本发明的概念可应用于区域性噪声抑制及/或区域性边缘加强。再者,上述的区域性亮度调整亦可通过多种图像调整方式来实现。于一实作范例中,上述的区域性亮度调整可为一区域色调映射(localtonemapping)。为了方便说明,以下是以区域性色调映射之中的区域性增益校正(localgaincorrection)来作为上述的区域性亮度调整的实作范例。
请参阅图1,图1为本发明图像处理装置的一第一实施例的示意图。由图1可知,图像处理装置100包含(但不局限于)一区域性亮度调整电路(localbrightnessadjustmentcircuit)110以及一图像加强电路(imageenhancementcircuit)120。于此实施例中,区域性亮度调整电路110用以取得一输入图像IMG_I经由一区域性亮度调整之前与经由该区域性亮度调整之后之间的一区域性亮度增益关系(localbrightnessgainrelation)LBG,更具体地说,区域性亮度调整电路110可对所接收的输入图像IMG_I进行该区域性亮度调整以产生一调整图像IMG_A,而区域性亮度增益关系LBG是对应于输入图像IMG_I与调整图像IMG_A。于一设计变化中,区域性亮度调整电路110亦可在不输出调整图像IMG_A的情形下取得区域性亮度增益关系LBG。请注意,输入图像IMG_I可以是一图像原始数据(rawdata)或一色域(colorspace)的一图像数据。举例来说,在输入图像IMG_I为一图像原始数据的情形下,输入图像IMG_I可以是一贝尔图形(Bayerpattern)图像数据(但本发明不局限于此),此外,调整图像IMG_A可经由一图像信号处理器(Imagesignalprocessor)(未绘示于图中)来转换为一RGB图像数据以供后续图像加强处理之用。另外,在输入图像IMG_I为一色域的一图像数据的情形下,输入图像IMG_I可以是一RGB图像数据或一YUV图像数据。
图像加强电路120耦接于区域性亮度调整电路110,用以依据区域性亮度增益关系LBG来对一待处理图像IMG_P进行一噪声抑制及一边缘加强中至少其一,以产生一输出图像IMG_O,也就是说,图像加强电路120可同时执行该噪声抑制及该边缘加强于待处理图像IMG_P,也可以分开执行该噪声抑制及该边缘加强于待处理图像IMG_P,也可以仅执行该噪声抑制及该边缘加强两者的其中之一。另外,图像加强电路120所参考的区域性亮度增益关系LBG可以是来自于目前帧(currentframe)的增益信息,也可以是来自于不同于目前帧的一帧(例如,相邻于目前帧的一帧)的增益信息。在区域性亮度增益关系LBG是来自于目前帧的增益信息的情形下,输入图像IMG_I经由区域性亮度调整电路110所执行的该区域性亮度调整之后,会产生待处理图像IMG_P,换言之,待处理图像IMG_P为调整图像IMG_A。然而,在区域性亮度增益关系LBG并非来自于目前帧的增益信息的情形下,不同于输入图像IMG_I的另一输入图像经由区域性亮度调整电路110所执行的该区域性亮度调整之后,会产生待处理图像IMG_P,换言之,待处理图像IMG_P是不同于调整图像IMG_A。为了方便说明,以下所揭示的实施例是基于区域性亮度增益关系LBG来自于目前帧的增益信息来说明之,然而,本领域技术人员于阅读以下说明之后应可轻易了解,同样的区域性亮度调整亦可应用于区域性亮度增益关系LBG并非来自于目前帧的增益信息的情境之下。
请参阅图2,图2为本发明图像处理装置的一第二实施例的示意图。由图2可知,图像处理装置200包含一区域性亮度调整电路210、一图像加强电路220以及一控制参数产生电路(controlparametergenerationcircuit)230。区域性亮度调整电路210用以取得一输入图像IMG_I经由一区域性亮度调整之前与经由该区域性亮度调整之后之间的一区域性亮度增益关系LBG;控制参数产生电路230耦接于区域性亮度调整电路210与图像加强电路220之间,用以依据区域性亮度增益关系LBG来产生至少一图像控制参数PR_I予图像加强电路230;图像加强电路220耦接于区域性亮度调整电路210,用以依据至少一图像控制参数PR_I来对一待处理图像IMG_P进行一噪声抑制及一边缘加强中至少其一,以产生一输出图像IMG_O。简言之,于此实施例中,区域性亮度调整电路210可对所接收的输入图像IMG_I进行该区域性亮度调整以产生待处理图像IMG_P至图像加强电路220,并取得相对应的区域性亮度增益关系LBG以供后续的噪声抑制及/或边缘加强之用。
请连同图3来参阅图2,图3为本发明区域性亮度调整的一实作范例的示意图。于此实作范例中,区域性亮度调整电路210可针对输入图像IMG_I之中的每一图像单元(例如,一像素(pixel)P_i),分别依据输入图像IMG_I之中包含该图像单元(例如,像素P_i)的一图像区块(例如,一图像区块IB_i)的一像素值来调整该图像单元(例如,像素P_i)的一亮度值(例如,亮度值Bi),以执行该区域性亮度调整,举例来说,区域性亮度调整电路210可提供多个曲线函数(例如,多个伽马函数(gammafunction))、依据图像区块IB_i之中所有像素值的一像素平均值(例如,亮度平均值)来得到该图像单元所对应的一特定曲线函数(例如,一特定伽马函数),以及依据该特定曲线函数来调整该图像单元的该亮度值。更具体地说,首先,可将像素P_i于RGB色域之中的最大像素值作为像素P_i的亮度值Bi,接下来,将图像区块IB_i之中所有像素值的亮度平均值代入该多个曲线函数以得到多个亮度值,并且将该多个亮度值与一预定亮度值(例如,人眼感到舒适的亮度)作比对,以自该多个亮度值之中找出与该预定亮度值最接近的一特定亮度值,进而得到该特定亮度值所对应的一特定伽马函数。最后,再将像素P_i的亮度值Bi代入该特定伽马函数,来将像素P_i的亮度值Bi调整为亮度值Bi’。由于本领域技术人员应可轻易地了解,通过上述区域性亮度调整,输入图像IMG_I之中的每一图像单元均可被调整至适当的亮度值(例如,人眼感到舒适的亮度),故进一步的说明在此便不再赘述。另外,通过上述区域性亮度调整,区域性亮度调整电路210便可分别计算输入图像IMG_I之中每一图像单元(例如,像素P_i)经由区域性亮度调整之前的一亮度值(例如,亮度值Bi)与该图像单元(例如,像素P_i)经由区域性亮度调整之后的一亮度值(例如,亮度值Bi’)的一比例值(例如,亮度增益Gi),以取得区域性亮度增益关系LBG。
以上所述是单一像素参考周围的图像区块来进行区域性亮度调整的方法,以调整像素像素P_i为例,其步骤可简单归纳如下:
(1)将像素P_i于RGB色域之中的最大像素值作为像素P_i的亮度值Bi;
(2)取得像素P_i周围的图像区块(例如,图像区块IB_i)之中所有像素值的一亮度平均值;
(3)将该亮度平均值代入多个曲线函数,以得到一特定伽马函数;
(4)通过将像素P_i的亮度值Bi代入该特定伽马函数,来将像素P_i的亮度值调整为亮度值Bi’;以及
(5)将亮度值Bi’除以亮度值Bi以得到区域性亮度增益关系LBG。
值得注意的是,上述的图像单元并不限定于单一像素。请连同图4来参阅图2,图4为本发明区域性亮度调整的另一实作范例的示意图。图4所示的区域性亮度调整操作是基于图3所示的区域性亮度调整操作,而两者之间主要的差别在于:图4所示的每一图像单元为包含多个像素的一区块(例如,图像单元IU_i),以及图4所示的区域性亮度调整操作还包含一缩小运算(downscaling)与一放大运算(upscaling)。于此实施例中,首先,区域性亮度调整电路210可将像素P_i(位于图像单元IU_i内)于RGB色域之中的最大像素值作为该像素的亮度值Bi,接下来,可将输入图像IMG_I分为多个图像区块,进而缩小输入图像IMG_I的图像尺寸(例如,自640×480缩小为32×32),其中每一图像区块(例如,图像单元IU_i)均包含多个像素。接下来,区域性亮度调整电路210可提供多个曲线函数(例如,多个伽马函数)、依据图像单元IU中所有像素的一亮度平均值来得到图像单元IU_i所对应的一特定曲线函数(例如,一特定伽马函数),以及依据该特定曲线函数来调整图像单元IU_i中各像素的亮度值。
在输入图像IMG_I的图像尺寸由640×480缩小为32×32的情形下,通过上述得到图像单元所对应的特定伽马函数的步骤,会得到32x32的曲线索引图像,其中所得到的特定伽马函数的曲线索引值会记录在32x32的曲线索引图像中。接下来,可对32x32的曲线索引图像进行一空间滤波处理(例如,低通滤波处理)以降低光晕现象(haloeffect)。32x32的曲线索引图像接着会被放大到输入图像IMG_I的尺寸(即,640×480)。最后,可将每一图像区块(例如,图像单元IU_i)中各像素(例如,P_i)像素的亮度值代入曲线索引图像中相对应的特定伽马函数,来调整各像素的亮度值。
请注意,为了避免调整图像IMG_P会有格子状的亮度分布,区域性亮度调整电路210可通过对32x32的曲线索引图像进行一曲线索引值(index)运算(例如,内插运算),来得到每一图像单元中各像素所分别对应的多个特定伽马函数,以将32x32的曲线索引图像放大到输入图像IMG_I的图像尺寸。因此,各图像单元中各像素的像素值可代入该像素所对应的特定伽马函数来调整该像素的亮度值。
以上所述是单一像素参考曲线索引图像来进行区域性亮度调整的方法,以调整像素P_i为例,其步骤可简单归纳如下:
(1)将像素P_i于RGB色域之中的最大像素值作为像素P_i的亮度值Bi;
(2)将输入图像IMG_I分为多个图像区块(其中每一图像区块(例如,图像单元IU_i)均包含多个像素),进而缩小输入图像IMG_I的图像尺寸(例如,自640×480缩小为32×32);
(3)分别依据各图像单元中所有像素的一亮度平均值来得到该图像单元所对应的一特定曲线函数,进而得到32x32的曲线索引图像;
(4)对32x32的曲线索引图像进行空间滤波处理;
(5)将32x32的曲线索引图像放大到输入图像IMG_I的图像尺寸(例如,自32×32放大为640×480);
(6)通过将像素P_i的亮度值Bi代入曲线索引图像中相对应的特定伽马函数,来将像素P_i的亮度值调整为亮度值Bi’;以及
(7)将亮度值Bi’除以亮度值Bi以得到区域性亮度增益关系LBG。
简言之,区域性亮度调整电路210便可分别计算输入图像IMG_I之中每一图像单元/每一像素经由区域性亮度调整之前的一亮度值与该图像单元/该像素经由区域性亮度调整之后的一亮度值的一比例值(例如,亮度增益Gi),以取得区域性亮度增益关系LBG。于一设计变化中,图1/图2所示的区域性亮度调整电路110/210在进行区域性亮度调整操作时,输入图像IMG_I亦可同时包含具有一像素以及具有多个像素的图像单元。
请再次参阅图2。在亮度调整电路210取得区域性亮度增益关系LBG之后,控制参数产生电路230便可分别依据区域性亮度增益关系LBG(例如,调整图像IMG_A/待处理图像IMG_P的每一图像单元的一亮度增益)来产生对应于每一图像单元的至少一图像控制参数。另外,控制参数产生电路230还可提供至少一图像校正关系(imagecorrectionrelation),以及根据区域性亮度增益关系LBG之中该图像单元所对应的一亮度增益与该至少一图像校正关系,来产生至少一图像控制参数PR_I。请连同图5来参阅图2,图5为本发明图像校正关系的一实施例的示意图。于此实施例中,该图像校正关系为一亮度增益G与用来同时控制该噪声抑制及该边缘加强的一噪声抑制控制参数PR_NR之间的转换关系,其中该图像校正关系可由校正而得之,更具体地说,亮度增益G大,则表示噪声成份高,故噪声抑制能力需要强一点,而边缘加强能力就会弱一点;反之,亮度增益G小,则表示噪声成份低,故噪声抑制能力需要弱一点,而边缘加强能力就会强一点。因此,亮度增益G大时,噪声抑制控制参数PR_NR的参数值也会高,以提供较强的噪声抑制能力与较弱的边缘加强能力;反之,亮度增益G小时,噪声抑制控制参数PR_NR的参数值也会低,以提供较弱的噪声抑制能力与较强的边缘加强能力。请注意,噪声抑制控制参数PR_NR亦可由边缘加强控制参数EE取代之,举例来说,亮度增益G大时,边缘加强控制参数EE的参数值会低,以提供较弱的边缘加强能力的与较强的噪声抑制能力,此外,上述的图像校正关系并非用来作为本发明的限制,换言之,控制参数产生电路230可视实际设计/需求而提供不同的图像校正关系,举例来说,控制参数产生电路230可提供用来执行该噪声抑制及该边缘加强两者的其中之一的图像校正关系、用来同时执行该噪声抑制及该边缘加强的一组合图像校正关系或者是如图6所示的用来执行彩度噪声抑制(ChromaNoiseReduction,CNR)的一图像校正关系(亦即,彩度噪声抑制控制参数PR_CNR与亮度增益G之间的转换关系)。
除了根据区域性亮度增益关系LBG之中一图像单元所对应的一亮度增益与至少一图像校正关系来产生至少一图像控制参数PR_I之外,控制参数产生电路230也可以提供至少一图像控制参数查找表,以及根据区域性亮度增益关系LBG之中该图像单元所对应的该亮度增益与该图像控制参数查找表,来产生至少一图像控制参数PR_I。换言之,控制参数产生电路230可参照内建的图像控制参数查找表来产生对应于所接收的区域性亮度增益关系LBG的至少一图像控制参数PR_I。关于图像加强电路220依据控制参数产生电路230所产生的至少一图像控制参数PR_I来强化图像的相关细节,请参阅以下说明。
请连同图2来参阅图7,图7为本发明依据区域性亮度增益关系来执行图像强化处理的一实作范例的流程图。首先,在步骤710中,控制参数产生电路230可参照图像校正关系/图像控制参数查找表,进而依据区域性亮度增益关系LBG来分别得到对应于亮度(luma/brightness)的至少一亮度噪声抑制控制参数PR_a、对应于亮度的至少一亮度边缘加强控制参数PR_b、对应于彩度(chroma)的至少一彩度噪声抑制控制参数PR_CNR以及同时对一图像单元执行噪声抑制及边缘加强时所需要的噪声抑制控制参数PR_NR。在步骤712及步骤714中,图像加强电路220可分别依据所得到的亮度噪声抑制控制参数PR_a以及亮度边缘加强控制参数PR_b,来将待处理图像IMG_P之中的一图像单元的亮度Y分别调整为亮度YNR及亮度YEE。相似地,在步骤716中,图像加强电路220可依据所得到的彩度噪声抑制控制参数PR_CNR来将待处理图像IMG_P之中的该图像单元的彩度UV调整为彩度UVO。接下来,在步骤720中,图像加强电路220可依据下列函式来得到输出图像IMG_O的亮度YO。
YO=(PR_d×YEE+NR×YNR)/(PR_d+NR)
上述函式的边缘加强控制参数PR_d可通过对待处理图像IMG_P之中的该图像单元执行一滤波处理(filtering)来得到,此外,由上述函式可知,较大的噪声抑制控制参数PR_NR的参数值可提供较强的噪声抑制能力与较弱的边缘加强能力;反之,较小的噪声抑制控制参数PR_NR的参数值可提供较弱的噪声抑制能力与较强的边缘加强能力。如此一来,图像加强电路220可对待处理图像IMG_P同时执行噪声抑制与边缘加强,进而输出一具有亮度YO及彩度UVO的输出图像IMG_O(如步骤730所示)。
简言之,控制参数产生电路230可根据区域性亮度增益关系LBG之中一亮度增益与至少一图像校正关系来提供至少一图像控制参数予一图像单元,以使图像加强电路220可适应性地强化输入图像IMG_I中不同亮度的图像单元的图像质量。值得注意的是,图2所示的图像控制参数PR_I并不局限于上述的控制参数PR_a、PR_b、PR_CNR及PR_NR,以及图像加强电路220可同时参照多个控制参数PR_a/PR_b/PR_CNR来对图像单元进行处理,因此,可依据不同的图像质量要求/观赏需求来采用所需的图像控制参数,进而得到想要的输出图像IMG_O。再者,图7所示的图像强化处理流程的实作方式仅供说明之需,并非用来作为本发明的限制。举例来说,在图像加强电路220系依序执行噪声抑制及边缘加强于待处理图像IMG_P的实作范例中,控制参数产生电路230可以不用产生噪声抑制控制参数PR_NR,此外,图像加强电路220可先依据亮度噪声抑制控制参数PR_a与亮度边缘加强控制参数PR_b的其中之一来调整待处理图像IMG_P之中的一图像单元的亮度,接着再依据亮度噪声抑制控制参数PR_a与亮度边缘加强控制参数PR_b的其中的另一来再次调整处理图像IMG_P之中的该图像单元的亮度,以输出经由图像加强处理后的输出图像IMG_O。进一步的说明如下。
请参阅图8,图8为本发明图像处理装置的一第三实施例的示意图。图8所示的图像处理装置800是基于图2所示的图像处理装置200的架构,其中主要的差别在于:图像加强电路820包含一储存单元825,用以储存一暂存图像IMG_B。图像加强电路820依据至少一图像控制参数PR_I来对待处理图像IMG_P进行该噪声抑制及该边缘加强的其中之一,以产生暂存图像IMG_B至储存单元825,以及依据亮度增益关系LBG来对储存单元825中的暂存图像IMG_B进行该噪声抑制及该边缘加强其中的另一,以产生输出图像IMG_O。于一实作范例中,图像加强电路820可依据同一图像控制参数来依序执行该噪声抑制与该边缘加强。于另一实作范例中,至少一图像控制参数PR_I可包含对应该噪声抑制的一控制参数以及对应该边缘加强的另一控制参数,以供图像加强电路820依序执行该噪声抑制与该边缘加强。另外,控制参数产生电路230为一选择性组件(optionaldevice),换言之,图像加强电路820亦可直接依据区域性亮度增益关系LBG来对待处理图像IMG_P进行该噪声抑制及该边缘加强中至少其一。于一设计变化中,控制参数产生电路230亦可实作于图像加强电路220之中。由于本领域技术人员通过阅读图1~图7的说明,应可轻易地了解图8所示的图像处理装置800的操作细节,故进一步的说明在此便不再赘述。
请参阅图9,图9为本发明图像处理装置的一第四实施例的示意图。图9所示的图像处理装置900是基于图2所示的图像处理装置200的架构,其中主要的差别在于:区域性亮度调整电路910包含一区域性亮度调整单元912以及一增益单元(gainunit)916。区域性亮度调整单元912用以对输入图像IMG_I执行一区域性亮度调整以产生待处理图像IMG_P,而增益单元916则是依据输入图像IMG_I/待处理图像IMG_P中每一图像单元的亮度值变化来取得区域性亮度增益关系LBG。由于本领域技术人员通过阅读图1~图7的说明,应可轻易地了解图9所示的图像处理装置900的操作细节,故进一步的说明在此便不再赘述。
综上所述,于一较佳实施例中,本发明所提供的图像处理方法及其相关的图像处理装置不仅可使图像经由区域性亮度调整以强化图像,也可以同时提供足够的噪声抑制以及边缘强化的图像处理能力。
以上所述仅为本发明的较佳实施例,凡依本发明权利要求范围所做的均等变化与修饰,皆应属本发明的涵盖范围。
Claims (20)
1.一种图像处理方法,包含:
取得一输入图像经由一区域性亮度调整之前与经由该区域性亮度调整之后之间的一区域性亮度增益关系;以及
依据该区域性亮度增益关系来对一待处理图像进行一噪声抑制及一边缘加强中至少其一以产生一输出图像;
其中该区域性亮度调整包含:
针对该输入图像的每一图像单元:
依据该输入图像之中包含该图像单元的一图像区块的一像素值来调整该图像单元的一亮度值;
其中该图像单元至少包含一像素;以及
其中取得该区域性亮度增益关系的步骤包含:
针对该输入图像的每一图像单元:
计算该图像单元经由该区域性亮度调整之前的一亮度值与该图像单元经由该区域性亮度调整之后的一亮度值的一比例值。
2.根据权利要求1所述的图像处理方法,其中该输入图像经由该区域性亮度调整之后会产生该待处理图像,或是不同于该输入图像的另一输入图像经由该区域性亮度调整之后会产生该待处理图像。
3.根据权利要求1所述的图像处理方法,其中该区域性亮度调整为一区域色调映射。
4.根据权利要求1所述的图像处理方法,其中依据该输入图像之中包含该图像单元的该图像区块的该像素值来调整该图像单元的该亮度值的步骤包含:
提供多个曲线函数;
依据该图像区块之中所有像素值的一像素平均值来得到该图像单元所对应的一特定曲线函数;以及
依据该特定曲线函数来调整该图像单元的该亮度值。
5.根据权利要求4所述的图像处理方法,其中依据该特定曲线函数来调整该图像单元的该亮度值的步骤包含:
依据该特定曲线函数来对该图像单元进行一曲线索引值运算,来得到该图像单元之中多个像素所分别对应的多个特定曲线函数;以及
依据该多个特定曲线函数来分别调整该多个像素的多个亮度值。
6.根据权利要求1所述的图像处理方法,其中该噪声抑制及该边缘加强是同时执行于该待处理图像。
7.根据权利要求1所述的图像处理方法,其中依据该区域性亮度增益关系来对该待处理图像进行该噪声抑制及该边缘加强中至少其一以产生该输出图像的步骤包含:
依据该区域性亮度增益关系来对该待处理图像进行该噪声抑制及该边缘加强其中之一,以产生一暂存图像;以及
依据该区域性亮度增益关系来对该暂存图像进行该噪声抑制及该边缘加强其中的另一,以产生该输出图像。
8.根据权利要求1所述的图像处理方法,其中依据该区域性亮度增益关系来对该待处理图像进行该噪声抑制及该边缘加强中至少其一以产生该输出图像的步骤包含:
针对该待处理图像的每一图像单元:
依据该区域性亮度增益关系来产生至少一图像控制参数;以及
依据该至少一图像控制参数来对该图像单元进行该噪声抑制及该边缘加强中至少其一;
其中该图像单元至少包含一像素。
9.根据权利要求8所述的图像处理方法,其中依据该区域性亮度增益关系来产生该至少一图像控制参数的步骤包含:
提供至少一图像校正关系;以及
根据该区域性亮度增益关系之中该图像单元所对应的一亮度增益与该至少一图像校正关系,来产生该至少一图像控制参数。
10.根据权利要求8所述的图像处理方法,其中依据该区域性亮度增益关系来产生该至少一图像控制参数的步骤包含:
提供至少一图像控制参数查找表;以及
根据该区域性亮度增益关系之中该图像单元所对应的一亮度增益与该图像控制参数查找表,来产生该至少一图像控制参数。
11.一种图像处理装置,包含:
一区域性亮度调整电路,用以取得一输入图像经由一区域性亮度调整之前与经由该区域性亮度调整之后之间的一区域性亮度增益关系;以及
一图像加强电路,耦接于该区域性亮度调整电路,用以依据该区域性亮度增益关系来对一待处理图像进行一噪声抑制及一边缘加强中至少其一以产生一输出图像;
其中该区域性亮度调整电路还针对该输入图像的每一图像单元,分别依据该输入图像之中包含该图像单元的一图像区块的一像素值来调整该图像单元的一亮度值,以执行该区域性亮度调整,其中该图像单元至少包含一像素;以及
其中该区域性亮度调整电路还针对该输入图像的每一图像单元,分别计算该图像单元经由该区域性亮度调整之前的一亮度值与该图像单元经由该区域性亮度调整之后的一亮度值的一比例值,以取得该区域性亮度增益关系。
12.根据权利要求11所述的图像处理装置,其中该区域性亮度调整电路还对该输入图像或不同于该输入图像的另一输入图像执行该区域性亮度调整,以产生相对应的该待处理图像。
13.根据权利要求11所述的图像处理装置,其中该区域性亮度调整为一区域色调映射。
14.根据权利要求11所述的图像处理装置,其中该区域性亮度调整电路还提供多个曲线函数、依据该图像区块之中所有像素值的一像素平均值来得到该图像单元所对应的一特定曲线函数,以及依据该特定曲线函数来调整该图像单元的该亮度值。
15.根据权利要求14所述的图像处理装置,其中该区域性亮度调整电路还依据该特定曲线函数来对该图像单元进行一曲线索引值运算,来得到该图像单元之中多个像素所分别对应的多个特定曲线函数,以及依据该多个特定曲线函数来分别调整该多个像素的多个亮度值。
16.根据权利要求11所述的图像处理装置,其中该图像加强电路同时对该待处理图像执行该噪声抑制及该边缘加强。
17.根据权利要求11所述的图像处理装置,其中该图像加强电路包含:
一储存单元,用以储存一暂存图像;
其中该图像加强电路依据该区域性亮度增益关系来对该待处理图像进行该噪声抑制及该边缘加强其中之一以产生该暂存图像于该储存单元,以及依据该区域性亮度增益关系来对该暂存图像进行该噪声抑制及该边缘加强其中的另一以产生该输出图像。
18.根据权利要求11所述的图像处理装置,还包含:
一控制参数产生电路,耦接于该区域性亮度调整电路与该图像加强电路之间,用以针对该待处理图像的每一图像单元,分别依据该区域性亮度增益关系来产生至少一图像控制参数;
其中该图像单元至少包含一像素,以及该图像加强电路分别依据该至少一图像控制参数来对该图像单元进行该噪声抑制及该边缘加强中至少其一来产生该输出图像。
19.根据权利要求18所述的图像处理装置,其中该控制参数产生电路还提供至少一图像校正关系,以及根据该区域性亮度增益关系之中该图像单元所对应的一亮度增益与该至少一图像校正关系,来产生该至少一图像控制参数。
20.根据权利要求18所述的图像处理装置,其中该控制参数产生电路还提供至少一图像控制参数查找表,以及根据该区域性亮度增益关系之中该图像单元所对应的一亮度增益与该至少一图像校正关系,来产生该至少一图像控制参数。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW101131519 | 2012-08-30 | ||
TW101131519A TWI519151B (zh) | 2012-08-30 | 2012-08-30 | 影像處理方法以及影像處理裝置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103685850A CN103685850A (zh) | 2014-03-26 |
CN103685850B true CN103685850B (zh) | 2016-04-06 |
Family
ID=50187692
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210544413.7A Expired - Fee Related CN103685850B (zh) | 2012-08-30 | 2012-12-14 | 图像处理方法以及图像处理装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US9189831B2 (zh) |
JP (1) | JP2014050099A (zh) |
CN (1) | CN103685850B (zh) |
TW (1) | TWI519151B (zh) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6271874B2 (ja) * | 2013-06-14 | 2018-01-31 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
KR20150040127A (ko) * | 2013-10-04 | 2015-04-14 | 삼성전자주식회사 | 전력 절감을 위하여 이미지를 처리하는 방법 및 디바이스 |
KR102251440B1 (ko) | 2014-11-05 | 2021-05-14 | 삼성전자주식회사 | 로컬 톤 맵핑 회로와 이를 포함하는 모바일 컴퓨팅 장치 |
US10122936B2 (en) * | 2015-09-02 | 2018-11-06 | Mediatek Inc. | Dynamic noise reduction for high dynamic range in digital imaging |
KR102434754B1 (ko) * | 2015-11-17 | 2022-08-23 | 삼성전자 주식회사 | 전자 장치 및 전자 장치의 컨텐츠 표시 방법 |
EP3491620B1 (en) | 2016-07-26 | 2021-04-28 | Microsoft Technology Licensing, LLC | Real-time adaptive shadow and highlight enhancement |
US10489884B2 (en) | 2016-09-23 | 2019-11-26 | Apple Inc. | Fast and edge-preserving upsampling of images |
CN109584175B (zh) * | 2018-11-21 | 2020-08-14 | 浙江大华技术股份有限公司 | 一种图像处理方法及装置 |
CN110278412B (zh) * | 2018-12-06 | 2021-11-23 | 义晶科技股份有限公司 | 影像显示系统及其控制信号数据量提高方法 |
US11423515B2 (en) | 2019-11-06 | 2022-08-23 | Canon Kabushiki Kaisha | Image processing apparatus |
CN113840048B (zh) * | 2021-09-02 | 2024-04-12 | 信利光电股份有限公司 | 一种智能调整摄像头画面四角亮度的方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010193384A (ja) * | 2009-02-20 | 2010-09-02 | Olympus Corp | 画像処理装置及び方法並びにプログラム |
CN102088543A (zh) * | 2010-11-25 | 2011-06-08 | 华亚微电子(上海)有限公司 | 一种基于多带带通滤波的peaking方法及装置 |
TW201222471A (en) * | 2010-11-26 | 2012-06-01 | Univ Nat Chunghsing | Image processing method and system by using adaptive inverse hyperbolic curve |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7535503B2 (en) * | 2002-02-01 | 2009-05-19 | Nikon Corporation | Image processing apparatus, image processing program, and image processing method for performing edge enhancement processing |
JP2003230052A (ja) | 2002-02-01 | 2003-08-15 | Nikon Corp | 電子カメラ、画像処理プログラムおよび画像処理方法 |
JP3914168B2 (ja) * | 2003-04-08 | 2007-05-16 | オリンパス株式会社 | 撮像システム、画像処理プログラム |
JP2005130297A (ja) * | 2003-10-24 | 2005-05-19 | Olympus Corp | 信号処理システム、信号処理方法、信号処理プログラム |
US7317842B2 (en) | 2003-10-30 | 2008-01-08 | Samsung Electronics Co., Ltd. | Global and local statistics controlled noise reduction system |
US8115833B2 (en) * | 2005-09-28 | 2012-02-14 | Olympus Corporation | Image-acquisition apparatus |
JP4837365B2 (ja) | 2005-11-16 | 2011-12-14 | オリンパス株式会社 | 画像処理システム、画像処理プログラム |
JP4628937B2 (ja) | 2005-12-01 | 2011-02-09 | オリンパス株式会社 | カメラシステム |
TWI323606B (en) | 2006-02-22 | 2010-04-11 | Huper Lab Co Ltd | Image noise reduction method based on local correlation |
JP2007336258A (ja) | 2006-06-15 | 2007-12-27 | Matsushita Electric Ind Co Ltd | 映像信号処理装置及び映像信号処理方法 |
US20120063515A1 (en) | 2010-09-09 | 2012-03-15 | Qualcomm Incorporated | Efficient Coding of Video Parameters for Weighted Motion Compensated Prediction in Video Coding |
TW201234863A (en) | 2010-12-22 | 2012-08-16 | Qualcomm Inc | Coding the position of a last significant coefficient of a video block in video coding |
-
2012
- 2012-08-30 TW TW101131519A patent/TWI519151B/zh not_active IP Right Cessation
- 2012-12-14 CN CN201210544413.7A patent/CN103685850B/zh not_active Expired - Fee Related
-
2013
- 2013-02-04 US US13/758,968 patent/US9189831B2/en active Active
- 2013-02-27 JP JP2013037670A patent/JP2014050099A/ja active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010193384A (ja) * | 2009-02-20 | 2010-09-02 | Olympus Corp | 画像処理装置及び方法並びにプログラム |
CN102088543A (zh) * | 2010-11-25 | 2011-06-08 | 华亚微电子(上海)有限公司 | 一种基于多带带通滤波的peaking方法及装置 |
TW201222471A (en) * | 2010-11-26 | 2012-06-01 | Univ Nat Chunghsing | Image processing method and system by using adaptive inverse hyperbolic curve |
Also Published As
Publication number | Publication date |
---|---|
JP2014050099A (ja) | 2014-03-17 |
TWI519151B (zh) | 2016-01-21 |
US9189831B2 (en) | 2015-11-17 |
US20140064613A1 (en) | 2014-03-06 |
CN103685850A (zh) | 2014-03-26 |
TW201410005A (zh) | 2014-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103685850B (zh) | 图像处理方法以及图像处理装置 | |
US7825942B2 (en) | Image processing method and apparatus adjusting image data in accordance with image data sub-pixels | |
CN1266950C (zh) | 一种视频图像的品质增强系统与方法 | |
US8238654B2 (en) | Skin color cognizant GMA with luminance equalization | |
US8050496B2 (en) | Color gamut mapping/enhancement technique using skin color detection | |
CN101686402B (zh) | 一种处理视频数据的方法和系统 | |
US7933445B2 (en) | Color gamut mapping/enhancement technique using skin color detection | |
US20060146351A1 (en) | Image-processing device and method for enhancing the luminance and the image quality of display panels | |
CN101715141A (zh) | 图像和视频的亮度、颜色和对比度的联合增强 | |
CA2786454A1 (en) | Enhancement of images for display on liquid crystal displays | |
CN101729913B (zh) | 影像饱和度的调整方法与系统 | |
EP1835727B1 (en) | Color correction method, color correction device, and color correction program | |
US8467604B2 (en) | Color enhancement | |
CN104935902A (zh) | 图像色彩增强方法、装置及电子设备 | |
US20080080784A1 (en) | Methods of and Apparatus for Adjusting Colour Saturation in an Input Image | |
JP4758999B2 (ja) | 画像処理プログラム、画像処理方法、画像処理装置 | |
CN1279764C (zh) | 一种视频图像的色饱和度增强系统与方法 | |
CN109636739B (zh) | 图像饱和度增强的细节处理方法及装置 | |
CN109377966B (zh) | 一种显示方法、系统及显示装置 | |
US20200043138A1 (en) | Chrominance and luminance enhancing systems and methods | |
US20120314969A1 (en) | Image processing apparatus and display device including the same, and image processing method | |
US20100284614A1 (en) | Blue sky color detection technique | |
CN109155845A (zh) | 图像处理装置、图像处理方法及程序 | |
JP2004198512A (ja) | 表示装置及び表示方法 | |
US8879866B2 (en) | Image processing circuit, semiconductor device, image processing device, and electronic appliance |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160406 Termination date: 20201214 |