CN113556545B - 图像处理方法及图像处理电路 - Google Patents
图像处理方法及图像处理电路 Download PDFInfo
- Publication number
- CN113556545B CN113556545B CN202010328270.0A CN202010328270A CN113556545B CN 113556545 B CN113556545 B CN 113556545B CN 202010328270 A CN202010328270 A CN 202010328270A CN 113556545 B CN113556545 B CN 113556545B
- Authority
- CN
- China
- Prior art keywords
- image
- value
- specific
- block
- image component
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims abstract description 84
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 238000002156 mixing Methods 0.000 claims abstract description 47
- 239000003086 colorant Substances 0.000 claims 1
- 238000000034 method Methods 0.000 description 22
- 230000008569 process Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 238000009499 grossing Methods 0.000 description 6
- 230000009467 reduction Effects 0.000 description 5
- 238000001914 filtration Methods 0.000 description 4
- 238000012937 correction Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请涉及图像处理方法及图像处理电路。图像处理方法包括:接收在特定颜色编码信道的输入图像画面的特定图像分量数据,特定图像分量数据由多个相同特性的图像分量值所组成;根据特定区块大小,在空间上将输入图像画面的多个像素单元分类至多个区块;从该特定图像分量数据中取得每一区块内的多个像素单元所相应的多个图像分量值,计算每一区块的图像分量平均值;根据多个区块的多个图像分量平均值,产生内插后的图像画面的多个图像分量值;以及将内插后的图像画面的图像分量值与输入图像画面的原始分量值进行混合以产生输出图像画面。
Description
技术领域
本发明是关于一种图像处理机制,特别有关于一种图像处理方法及图像处理电路。
背景技术
一般而言,假轮廓的现象是在输入图像经过压缩编码时,由于量化处理所导致原本图像平滑的色彩层次变化被转换成阶状变化,因而出现如人眼可感知到的等高线状的假影(artifact)。
为了除去假轮廓,现有的传统技术多半会对输入图像进行假轮廓的侦测,并在侦测到的假轮廓部份实施低通滤波(low-pass filtering)以做约化(smoothing)处理,传统的作法在电路上需要同时取得滤波范围内的所有像素数据,因此在硬件资源上需要使用大量的存储空间,包含需要使用到大量的触发器(flip-flop)、静态随机存取存储器(SRAM)及线缓冲器(line buffer)等等。由于电路上硬件资源有限,时常会在成本取舍上牺牲了低通滤波器的涵盖范围,因此导致约化处理效果时常有所不足,比较严重的假轮廓将无法得到完全平顺的结果。
发明内容
因此,本发明的目的之一在于提供一种图像处装置/电路及方法,以解决上述现有技术的问题。
根据本发明的实施例,公开了一种图像处理方法。该图像处理方法包括:接收在一特定颜色编码信道上的一输入图像画面的一特定图像分量数据,该特定图像分量数据由多个相同特性的图像分量值所组成;根据一特定区块大小,在空间上将该输入图像画面的多个像素单元分类至多个区块;对于每一区块,从该特定图像分量数据中取得该每一区块内的多个像素单元所相应的多个图像分量值,计算该每一区块的一图像分量平均值;根据该多个区块的多个图像分量平均值,产生一内插后的图像画面的多个图像分量值;以及将该内插后的图像画面的该多个图像分量值与该输入图像的多个原始分量值进行混合以产生一输出图像的修正后的多个图像分量值。
根据本发明的实施例,公开了一种图像处理电路。图像处理电路包括一接收电路与一处理电路。接收电路是用来接收在一特定颜色编码信道的一输入图像画面的一特定图像分量数据,该特定图像分量数据由多个相同特性的图像分量值所组成。处理电路耦接至该接收电路,并用来:根据一特定区块大小,在空间上将该输入图像画面的多个像素单元分类至多个区块;对于每一区块,从该特定图像分量数据中取得该每一区块内的多个像素单元所相应的多个图像分量值,计算该每一区块的一图像分量平均值;根据该多个区块的多个图像分量平均值,产生一内插后的图像画面的多个图像分量值;以及将该内插后的图像画面的该多个图像分量值与该输入图像画面的多个原始分量值进行混合以产生一输出图像画面的修正后的多个图像分量值。
附图说明
图1是本申请一实施例的图像处理装置的示意图。
图2是图1所示的混合电路的操作的一混合权重曲线的实施例示意图。
图3是本发明另一实施例的图像处理装置的示意图。
图4是本申请实施例的图像画面处理操作的方法流程图。
具体实施方式
本发明的技术精神旨在于提供一种以区块为基础(block-based)的大范围图像约化作法,以取得更平滑的约化结果,以固定区块为单位来统计一输入图像画面的数据,将输入图像简化为每个区块的图像特征值,并在各像素位置以一或多个附近区块的特征值内插(interpolation)作为约化结果。此作法在硬件实现上可将计算需调用的数据量简化,不需要大范围的数据来作滤波,可以对硬件资源更有效利用。其中每个区块的图像特征值实现上例如可以是每个区块内的多个像素单元的图像值的平均值或加权平均值等,图像特征值亦可以包含但不限于:区块亮度/色度/彩度平均、区块内亮度/色度/彩度最大值、区块内亮度/色度/彩度最小值、亮度分布直方图(histogram)等。每个区块运用统计数据,经过计算电路运算出一组亮度、色度与彩度的特征值,作为每个区块的代表值。之后将多个区块的图像特征值经由空间内插运算后,可得出每个像素单元经约化后的像素值,最后将输入图像画面和约化的图像结果经由图像混合(blending),得出最后去除假轮廓的输出图像画面。因此由上可知,本发明的以区块为基础的大范围图像约化作法,不需要同时取得一滤波范围内的所有像素数据,因此在硬件资源上不需要使用到大量的触发器、静态随机存取存储器及线缓冲器。
以下说明在计算每个区块的图像特征值时是采用计算平均值或加权平均值的作法,然而如上说明所述,亦可采用其他统计作法;计算平均值的作法并非是本案的限制。
图1是本申请一实施例的图像处理装置100的示意图。图像处理装置100例如使用于作为一电视芯片装置(但不限定),用以处理例如压缩后的图像数据(但不限定),用来抹平、减轻或去除图像画面中被人眼所感知到的假轮廓(false contouring)及/或减轻图像画面中突然产生的闪烁现象;该图像数据包括有多个图像帧/画面,每一图像帧/画面包含有多个像素单元的图像值所组成,每一像素单元的图像值例如是由一特定颜色编码格式(color encoding format)所表示,颜色编码格式或称为颜色空间或颜色模型,例如是YUV编码格式,其中Y的值表示亮度信息(亦即灰阶值)、U的值表示色度信息、V的值表示浓度信息,或是RGB编码格式所表示,其中RGB的值分别表示红绿蓝的色彩信息,然此并非是本案的限制,本案亦可采用其他不同的颜色编码格式,例如YCbCr及YPbPr等等。
在图1的实施例,图像处理装置100是用来处理颜色编码格式为YUV格式的图像画面,图像处理装置100是分别且独立处理每一图像画面所包含的亮度信息、色度信息及浓度信息,其先将每一图像画面所包含的亮度信息、色度信息及浓度信息分离至Y编码信道、U编码信道及V编码信道。图像处理装置100包括有多个图像处理电路105,其中这些图像处理电路105分别设置于YUV编码格式的不同的Y编码信道、U编码信道及V编码信道,以分别处理每一张输入图像画面中每一像素单元的图像值的亮度信息、色度信息以及浓度信息。如图1所示,图像处理装置100采用三个图像处理电路105以分别且独立地处理每一张输入图像画面中每一像素单元的图像值的亮度信息、色度信息以及浓度信息,以减轻、消除或抹平每一张输入图像画面中的假轮廓;应注意的是,在本实施例,为了较佳地减轻图像画面中的假轮廓,图像处理装置100启动三个图像处理电路105的操作,以对每一图像画面中的亮度信息、色度信息以及浓度信息均进行假轮廓的抹平,而在其他实施例中,图像处理装置100也可以选择只启动一个或两个图像处理电路105来处理图像值的不同图像分量的信息(亦即亮度信息、色度信息以及浓度信息),亦可达到部分减轻假轮廓的效果,例如图像处理装置100可以选择只启动位于Y编码信道上的一个图像处理电路105,只对图像画面中的亮度信息进行假轮廓的抹平,而不处理色彩信息,好处在于可减轻运算负载;然此并非本案的限制。而当一个图像处理电路105不被启动时,是表示该图像处理电路105会直接输出所接收到的图像分量信息,而不进行处理。
以下说明是先以处理亮度信息的图像处理电路105作为说明,而其亦适用于处理图像值的不同图像分量信息(色度信息、浓度信息)的操作。图像处理电路105包括接收电路110及处理电路115,对于处理亮度信息来说,该接收电路110用来接收一特定颜色编码格式(例如YUV编码格式)的一编码信道(例如Y编码信道)上的一输入图像数据,该输入图像数据包括一个或多个图像画面中多个像素单元的多个图像值的亮度值。处理电路115耦接至该接收电路110,用来根据一特定区块大小,在空间上将一图像画面的大小分割或分类为多个区块,每一区块例如均具有N*N个像素单元,例如以一个4K图像画面来说,如果区块大小是40*40个像素单元,则可以将该4K图像画面大小分割为96*54个区块;然此并非是本案的限制。
在实现上,该处理电路115包括一统计电路1151、一内插电路1152以及一混合电路1153。对于每一个区块,该处理电路115的统计电路1151会累加并平均该每一区块内的N*N个像素单元的N*N个亮度值,以产生该每一区块的一亮度平均值(在另一实施例亦可以是亮度的加权平均值),因此得而产生例如96*54个亮度平均值(但不限定)。当产生该些亮度平均值之后,该处理电路115的内插电路1152会根据该些区块的该些亮度平均值来产生每一该些区块内的每一像素单元的一内插后的亮度值,而混合电路1153将该内插后的亮度值与原始的亮度值进行混合以产生一修正后的亮度值,据此而得到最终一张修正画面的亮度值。由于该内插后的亮度值是由部分区块的部分平均值所决定产生的,因此该内插后的亮度值是进行模糊化后的图像结果,而令其与原始的亮度值进行适当地混合所产生的修正后的亮度值则可在尽量抹除假轮廓的同时令其他部分的图像仍保有足够的图像锐利度而不过度失真。
在实现上,对于产生一特定区块的一特定像素单元的一内插后的亮度值来说,该处理电路115的内插电路1152是参考该特定区块上下左右相邻的多个区块,例如M*M个区块而M例如是5(但不限定),该内插电路1152例如根据该特定区块的该特定像素单元与该特定区块的多个相邻区块的多个空间位置距离的远近,计算决定出多个内插权重值,例如M*M个内插权重值,其中当一空间位置距离越近时一相应的内插权重值越大,之后内插电路1152再根据该特定区块本身的亮度平均值、该多个相邻区块本身的多个平均值以及该多个内插权重值,相应地将M*M个内插权重值分别乘上M*M个相邻区块的M*M个亮度平均值以内插计算出该特定区块的该特定像素单元的一内插后的亮度值,之后混合电路1153根据该特定区块的该特定像素单元的一原始的亮度值以及该特定区块的该特定像素单元的该内插后的亮度值,决定一混合权重值,以及根据该混合权重值,混合该原始图像的亮度值与该内插后的亮度值来产生该特定像素单元的一最终的亮度值。因此,当对于一张画面中的每一区块的每一像素单元均进行上述处理操作之后,该处理电路115可产生一张修正后画面的亮度值。
就混合操作来说,请参照图2,图2是混合电路1153的操作的一混合权重曲线的实施例示意图。对于一特定区块的一特定像素单元来说,混合电路1153是将该特定像素单元的一原始的亮度值与该特定像素单元的一内插后的亮度值相减来产生一亮度差值,之后参照图2所示的混合权重曲线来决定一混合权重值,如图2所示,水平轴所表示为一图像分量的差值(例如亮度差值),垂直轴所表示为混合权重值(例如范围从0至1),当亮度差值越大时,所决定出的该混合权重值会越小,令最终所产生的一修正后的亮度值中有越小的比例是由该内插后的亮度值所决定或贡献,亦即该修正后的亮度值中有越大的比例是由该原始图像的亮度值所决定或贡献,反之,当亮度差值越小时,所决定出的该混合权重值会越大,令最终所产生的一修正后的亮度值中有越大的比例是由该内插后的亮度值所决定或贡献,亦即该修正后的亮度值中有越小的比例是由该原始图像的亮度值所决定或贡献,举例来说,修正后的亮度值Ydecont可由以下等式表示:
Ydecont=α1×Yint+(1-α1)×Yraw
其中α1是混合权重值,Yint是内插后的亮度值,以及Yraw是原始图像的亮度值;也就是说,等效上,当该亮度差值较小时,处理电路115才会进行较大程度的假轮廓抹平操作,而该亮度差值较大时,处理电路115会进行较小程度的假轮廓抹平操作,以避免抹除掉图像画面中真正的图像边缘。
此外,就产生该特定区块的一亮度平均值来说,在一实施例中该处理电路115的统计电路1151亦可另参考前一张图像画面中与该特定区块位于相同空间位置的一区块的一亮度平均值来决定该特定区块之该亮度平均值,例如,为了避免在时间上前后两张图像画面中的亮度信息差过大,该统计电路1151可参考前一张图像画面中与该特定区块位于相同空间位置的一区块的一亮度平均值来决定出一第一临界值TH1(例如一上限值),所计算的该特定区块的亮度平均值大于该第一临界值TH1时,该统计电路1151会直接取该第一临界值TH1作为该特定区块的一最终亮度平均值,以及可参考前一张图像画面中与该特定区块位于相同空间位置的该区块的该亮度平均值来决定出一第二临界值TH2(例如一下限值),所计算的该特定区块的亮度平均值小于该第二临界值TH2时,该统计电路1151会直接取该第二临界值TH2作为该特定区块的一最终亮度平均值。亦即,该处理电路在决定一张当前图像画面的一特定区块的一亮度平均值时可参考前一张图像画面的亮度来进行适当修正,令前后两张图像的亮度差异不过大,避免发生图像突发闪烁的现象。
另外,对于处理U分量的色度信息来说,就第二个图像处理电路105而言,其接收电路110用来接收YUV编码格式的一U编码信道上的色度信息的一输入图像数据,该输入图像数据包括多个图像画面中多个像素单元的多个图像值的色度值。处理电路115耦接至该接收电路110,用来根据一特定区块大小,在空间上将一图像画面的大小分割或分类为多个区块,每一区块例如均具有N*N个像素单元,例如以一个4K图像画面来说,如果区块大小是40*40个像素单元,则可以将该4K图像画面大小分割为96*54个区块;然此并非是本案的限制。
在实现上,对于每一个区块,该处理电路115的统计电路1151会累加并平均该每一区块内的N*N个像素单元的N*N个色度值,以产生该每一区块的一色度平均值(在另一实施例亦可以是色度的加权平均值),因此得而产生例如96*54个色度平均值(但不限定)。当产生这些色度平均值之后,该处理电路115的内插电路1152会根据这些区块的这些色度平均值来产生这些区块中每一区块内的每一像素单元的一内插后的色度值,而混合电路1153将该内插后的色度值与原始图像的色度值进行混合以产生一修正后的色度值,据此而得到最终一张修正画面的色度值。由于该内插后的色度值是由部分区块的部分平均值所决定产生的,因此该内插后的色度值是进行模糊化后的图像结果,而令其与原始图像的色度值进行适当地混合所产生的最终修正后的色度值则可在尽量抹除假轮廓的同时令其他部分的图像仍保有足够的图像锐利度而不过度失真。
在实现上,对于产生一特定区块的一特定像素单元的一内插后的色度值来说,该处理电路115的内插电路1152是参考该特定区块上下左右相邻的多个区块,例如M*M个区块而M例如是5(但不限定),该内插电路1152例如根据该特定区块的该特定像素单元与该特定区块的多个相邻区块的多个空间位置距离的远近,计算决定出多个内插权重值,例如M*M个内插权重值,其中当一空间位置距离越近时一相应的内插权重值越大,之后内插电路1152再根据该特定区块本身的色度平均值、该多个相邻区块本身的多个平均值以及该多个内插权重值,相应地将M*M个内插权重值分别乘上M*M个相邻区块的M*M个色度平均值以内插计算出该特定区块的该特定像素单元的一内插后的色度值,之后混合电路1153根据该特定区块的该特定像素单元的一原始图像的色度值以及该特定区块的该特定像素单元的该内插后的色度值,决定一混合权重值,以及根据该混合权重值,混合该原始图像的色度值与该内插后的色度值来产生该特定像素单元的一最终修正后的色度值。因此,当对于一张画面中的每一区块的每一像素单元均进行上述处理操作之后,该处理电路115可产生一张修正后画面的色度值。
相似地,就混合操作来说,对于一特定区块的一特定像素单元来说,混合电路1153是将该特定像素单元的一原始图像的色度值与该特定像素单元的一内插后的色度值相减来产生一色度差值,之后相似地参照图2所示之混合权重曲线来决定一混合权重值,当色度差值越大时,所决定出的该混合权重值会越小,令最终所产生的一修正后的色度值中有越小的比例是由该内插后的色度值所决定或贡献,亦即该修正后的色度值中有越大的比例是由该原始图像的色度值所决定或贡献,反之,当色度差值越小时,所决定出的该混合权重值会越大,令最终所产生的一修正后的色度值中有越大的比例是由该内插后的色度值所决定或贡献,亦即该修正后的色度值中有越小的比例是由该原始图像的色度值所决定或贡献,举例来说,修正后的色度值Udecont可由以下等式表示:
Udecont=α2×Uint+(1-α2)×Uraw
其中α2是混合权重值,Uint是内插后的色度值,以及Uraw是原始图像的色度值;也就是说,等效上,当该色度差值较小时,处理电路115才会进行较大程度的假轮廓抹平操作,当该色度差值较大时,处理电路115会进行较小程度的假轮廓抹平操作,以避免抹除掉图像画面中真正的图像边缘。
此外,就产生该特定区块的一色度平均值来说,在一实施例中该处理电路115的统计电路1151亦可另参考前一张图像画面中与该特定区块位于相同空间位置的一区块的一色度平均值来决定该特定区块的该色度平均值,例如,为了避免在时间上前后两张图像画面中的色度信息差过大,该统计电路1151可参考前一张图像画面中与该特定区块位于相同空间位置的一区块的一色度平均值来决定出一第三临界值TH3(例如一上限值),所计算的该特定区块的色度平均值大于该第三临界值TH3时,该统计电路1151会直接取该第三临界值TH3作为该特定区块的一最终色度平均值,以及可参考前一张图像画面中与该特定区块位于相同空间位置的该区块的该色度平均值来决定出一第四临界值TH4(例如一下限值),所计算的该特定区块的色度平均值小于该第四临界值TH4时,该统计电路1151会直接取该第四临界值TH4作为该特定区块的一最终色度平均值。亦即,该处理电路在决定一张当前图像画面的一特定区块的一色度平均值时可参考前一张图像画面的色度来进行适当修正,令前后两张图像的色度差异不过大,避免发生图像突发闪烁的现象。
另外,对于处理V分量的浓度信息来说,就第三个图像处理电路105而言,其接收电路110用来接收YUV编码格式的一V编码信道上的浓度信息的一输入图像数据,该输入图像数据报括多个图像画面中多个像素单元的多个图像值的浓度值。处理电路115耦接至该接收电路110,用来根据一特定区块大小,在空间上将一图像画面的大小分割或分类为多个区块,每一区块例如均具有N*N个像素单元,例如以一个4K图像画面来说,如果区块大小是40*40个像素单元,则可以将该4K图像画面大小分割为96*54个区块;然此并非是本案的限制。
在实现上,对于每一个区块,该处理电路115的统计电路1151会累加并平均该每一区块内的N*N个像素单元的N*N个浓度值,以产生该每一区块的一浓度平均值(在另一实施例亦可以是浓度的加权平均值),因此得而产生例如96*54个浓度平均值(但不限定)。当产生这些浓度平均值之后,该处理电路115的内插电路1152会根据这些区块的这些浓度平均值来产生这些区块中每一区块内的每一像素单元的一内插后的浓度值,而混合电路1153将该内插后的浓度值与原始图像的浓度值进行混合以产生一修正后的浓度值,据此而得到最终一张修正画面的浓度值。由于该内插后的浓度值是由部分区块的部分平均值所决定产生的,因此该内插后的浓度值是进行模糊化后的图像结果,而令其与原始图像的浓度值进行适当地混合所产生的最终修正后的浓度值则可在尽量抹除假轮廓的同时令其他部分的图像仍保有足够的图像锐利度而不过度失真。
在实现上,对于产生一特定区块的一特定像素单元的一内插后的浓度值来说,该处理电路115的内插电路1152是参考该特定区块上下左右相邻的多个区块,例如M*M个区块而M例如是5(但不限定),该内插电路1152例如根据该特定区块的该特定像素单元与该特定区块的多个相邻区块的多个空间位置距离的远近,计算决定出多个内插权重值,例如M*M个内插权重值,其中当一空间位置距离越近时一相应的内插权重值越大,之后内插电路1152再根据该特定区块本身的浓度平均值、该多个相邻区块本身的多个平均值以及该多个内插权重值,相应地将M*M个内插权重值分别乘上M*M个相邻区块的M*M个浓度平均值以内插计算出该特定区块的该特定像素单元的一内插后的浓度值,之后混合电路1153根据该特定区块的该特定像素单元的一原始图像的浓度值以及该特定区块的该特定像素单元的该内插后的浓度值,决定一混合权重值,以及根据该混合权重值,混合该原始图像的浓度值与该内插后的浓度值来产生该特定像素单元的一最终的浓度值。因此,当对于一张画面中的每一区块的每一像素单元均进行上述处理操作之后,该处理电路115可产生一张修正后画面的浓度值。
相似地,就混合操作来说,对于一特定区块的一特定像素单元来说,混合电路1153是将该特定像素单元的一原始图像的浓度值与该特定像素单元的一内插后的浓度值相减来产生一浓度差值,之后相似地参照图2所示的混合权重曲线来决定一混合权重值,当浓度差值越大时,所决定出的该混合权重值会越小,令最终所产生的一修正后的浓度值中有越小的比例是由该内插后的浓度值所决定或贡献,亦即该修正后的浓度值中有越大的比例是由该原始图像的浓度值所决定或贡献,反之,当浓度差值越小时,所决定出的该混合权重值会越大,令最终所产生的一修正后的浓度值中有越大的比例是由该内插后的浓度值所决定或贡献,亦即该修正后的浓度值中有越小的比例是由该原始图像的浓度值所决定或贡献,举例来说,修正后的浓度值Uraw可由以下等式表示:
Vdecont=α3×Vint+(1-α3)×Vraw
其中α3是混合权重值,Vint是内插后的浓度值,以及Vraw是原始图像的浓度值;也就是说,等效上,当该浓度差值较小时,处理电路115才会进行较大程度的假轮廓抹平操作,当该浓度差值较大时,处理电路115会进行较小程度的假轮廓抹平操作,以避免抹除掉图像画面中真正的图像边缘。
此外,就产生该特定区块的一浓度平均值来说,在一实施例中该处理电路115的统计电路1151亦可另参考前一张图像画面中与该特定区块位于相同空间位置的一区块的一浓度平均值来决定该特定区块的该浓度平均值,例如,为了避免在时间上前后两张图像画面中的浓度信息差过大,该统计电路1151可参考前一张图像画面中与该特定区块位于相同空间位置的一区块的一浓度平均值来决定出一第五临界值TH5(例如一上限值),所计算的该特定区块的浓度平均值大于该第五临界值TH5时,该统计电路1151会直接取该第五临界值TH5作为该特定区块的一最终浓度平均值,以及可参考前一张图像画面中与该特定区块位于相同空间位置的该区块的该浓度平均值来决定出一第六临界值TH6(例如一下限值),所计算的该特定区块的浓度平均值小于该第六临界值TH6时,该统计电路1151会直接取该第六临界值TH6作为该特定区块的一最终浓度平均值。亦即,该处理电路在决定一张目前图像画面之一特定区块之一浓度平均值时可参考前一张图像画面的浓度来进行适当修正,令前后两张图像的浓度差异不过大,避免发生图像突发闪烁的现象。须注意的是,上述的这些上限值的数值可以是相同的或是不同的,并且上述的这些下限值的数值也可以是相同的或是不同的,并且均可以被动态地调整,视用户的设计而定。
最后,当得到不同图像分量数据的图像信息后,该图像处理装置100会组合不同图像分量的图像信息来产生一张修正后的图像画面,令可在尽量抹除原始图像画面中由于图像压缩而所产生的假轮廓的同时令其他部分的图像仍保有足够的图像锐利度。
此外,应注意的是,本案的技术内容亦适用于RGB的颜色编码格式,请参照图3,图3是本发明另一实施例的图像处理装置300的示意图。图像处理装置300例如使用于作为一电视芯片装置,用以处理例如压缩后的图像数据,该图像数据包括有多个图像帧,每一图像帧包含有多个像素单元,每一像素单元的图像值例如是由RGB编码格式所表示,图像处理装置300所包括的分别设置于R编码信道、G编码信道及B编码信道上的三个图像处理电路105可分别且独立地处理RGB的颜色编码格式的不同分量(或称为颜色分量(color component))的图像数据,使得可在尽量抹除原始图像画面中由于图像压缩而所产生的假轮廓的同时令其他部分的图像仍保有足够的图像锐利度而不过度失真。
再者,为了令读者更易于明白本发明的技术精神,图4是本申请实施例的图像画面处理操作的方法流程图,倘若大体上可达到相同的结果,并不需要一定照图4所示的流程中的步骤顺序来进行,且图4所示的步骤不一定要连续进行,亦即其它步骤亦可插入其中。流程步骤的说明描述在下:
步骤405:开始;
步骤410:接收在一特定颜色编码信道上的一输入图像画面的一特定图像分量数据,该特定图像分量数据包括一个或多个图像画面中的多个相同特性的图像分量值所组成;
步骤415:根据一特定区块大小,在空间上将该输入图像画面的多个像素单元分类至多个区块;
步骤420:对于每一区块,从该特定图像分量数据中取得该每一区块内的多个像素单元所相应的多个图像分量值,计算该每一区块的一图像分量平均值;
步骤425:根据该多个区块的多个图像分量平均值,产生一内插后的图像画面的多个图像分量值;
步骤430:将该内插后的图像画面的多个图像分量值与该输入图像画面的多个原始分量值进行混合以产生一输出图像画面的修正后的多个图像分量值;以及
步骤435:结束。
以上所述仅为本发明的较佳实施例,凡依本发明申请专利范围所做的等同变化与更改,皆应属本发明的涵盖范围。
【符号说明】
100,300:图像处理装置
105:图像处理电路
110:接收电路
115:处理电路
1151:统计电路
1152:内插电路
1153:混合电路
Claims (10)
1.一种图像处理方法,包括:
接收在一特定颜色编码信道上的一输入图像画面的一特定图像分量数据,所述特定图像分量数据由多个相同特性的图像分量值所组成;
根据一特定区块大小,在空间上将所述输入图像画面的多个像素单元分类至多个区块;
对于每一区块,从该特定图像分量数据中取得该每一区块内的多个像素单元所相应的多个图像分量值,计算该每一区块的一图像分量平均值;
根据该多个区块的多个图像分量平均值,产生一内插后的图像画面的多个图像分量值;以及
将所述内插后的图像画面的所述多个图像分量值与所述输入图像画面的多个原始分量值进行混合以产生一输出图像画面的修正后的多个图像分量值。
2.根据权利要求1所述的图像处理方法,其中产生所述内插后的图像画面的多个图像分量值的步骤包含有:
对于所述输入图像画面中的一特定区块的一特定像素单元:
根据所述特定区块的所述特定像素单元与所述特定区块的多个相邻区块的空间位置距离,决定出多个内插权重值;
根据所述特定区块的一图像分量平均值、所述多个相邻区块的多个图像分量平均值以及所述多个内插权重值,产生所述特定区块的所述特定像素单元的一内插后的图像分量值;
根据所述特定区块的所述特定像素单元的一原始图像分量值以及所述特定区块的所述特定像素单元的所述内插后的图像分量值,决定一混合权重值;以及
根据所述混合权重值,混合所述原始图像分量值与所述内插后的图像分量值来产生所述特定像素单元的一修正后的图像分量值。
3.根据权利要求2所述的图像处理方法,其中决定所述混合权重值的步骤包含:
计算所述原始图像分量值与所述内插后的图像分量值的一图像分量差值;以及
根据所计算的所述图像分量差值,决定所述混合权重值。
4.根据权利要求3所述的图像处理方法,其中当所述图像分量差值越大时,该混合权重值越小,使得所述修正后的图像分量值的一较大比例是由所述原始图像分量值所贡献;以及当所述图像分量差值越小时,所述混合权重值越大,使得所述修正后的图像分量值的所述较大比例是由所述内插后的图像分量值所贡献。
5.根据权利要求1所述的图像处理方法,其中所述特定颜色编码信道是对应于一YUV颜色编码系统的一亮度、一色度及一浓度的其中一个。
6.根据权利要求1所述的图像处理方法,其中所述特定颜色编码信道是对应于一RGB颜色编码空间的其中一个特定颜色。
7.根据权利要求1所述的图像处理方法,其中计算所述每一区块的所述图像分量平均值的步骤是另参考所述输入图像画面的前一张输入图像内对应于同一空间位置上的一相应区块的一图像分量平均值以及一临界值,来计算出所述输入图像的所述每一区块的所述图像分量平均值。
8.根据权利要求7所述的图像处理方法,还包括:
对于所述每一区块,当所述临界值位于所述前一张输入图像画面内对应于所述同一空间位置上的所述相应区块的所述图像分量平均值与所述输入图像画面内对应于所述同一空间位置上的所述每一区块的所述图像分量平均值之间时,将所述输入图像画面内相应于所述同一空间位置上的所述每一区块的所述图像分量平均值修正为所述临界值。
9.根据权利要求8所述的图像处理方法,其中所述临界值是由所述前一张输入图像画面内对应于所述同一空间位置上的所述相应区块的所述图像分量平均值所决定。
10.一种图像处理电路,包括:
一接收电路,用来接收在一特定颜色编码信道的一输入图像画面的一特定图像分量数据,所述特定图像分量数据由多个相同特性的图像分量值所组成;以及
一处理电路,耦接至所述接收电路,用来:
根据一特定区块大小,在空间上将所述输入图像画面的多个像素单元分类至多个区块;
对于每一区块,从所述特定图像分量数据中取得所述每一区块内的多个像素单元所相应的多个图像分量值,计算所述每一区块的一图像分量平均值;
根据所述多个区块的多个图像分量平均值,产生一内插后的图像画面的多个图像分量值;以及
将所述内插后的图像画面的所述多个图像分量值与所述输入图像画面的多个原始分量值进行混合以产生一输出图像画面的修正后的多个图像分量值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010328270.0A CN113556545B (zh) | 2020-04-23 | 2020-04-23 | 图像处理方法及图像处理电路 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010328270.0A CN113556545B (zh) | 2020-04-23 | 2020-04-23 | 图像处理方法及图像处理电路 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113556545A CN113556545A (zh) | 2021-10-26 |
CN113556545B true CN113556545B (zh) | 2023-12-08 |
Family
ID=78101102
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010328270.0A Active CN113556545B (zh) | 2020-04-23 | 2020-04-23 | 图像处理方法及图像处理电路 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113556545B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113706665B (zh) * | 2021-10-28 | 2023-01-31 | 北京美摄网络科技有限公司 | 一种图像处理方法和装置 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004023316A (ja) * | 2002-06-14 | 2004-01-22 | Ricoh Co Ltd | 画像処理装置 |
JP2005130244A (ja) * | 2003-10-24 | 2005-05-19 | Ricoh Co Ltd | 画像処理装置および画像処理方法 |
CN101778297A (zh) * | 2009-01-08 | 2010-07-14 | 华晶科技股份有限公司 | 影像序列的干扰消除方法 |
CN102117610A (zh) * | 2009-12-31 | 2011-07-06 | 瑞轩科技股份有限公司 | 调整画面的亮度的方法 |
CN102147916A (zh) * | 2010-02-10 | 2011-08-10 | 索尼公司 | 图像处理装置、图像处理方法和程序 |
CN104104968A (zh) * | 2013-04-02 | 2014-10-15 | 联咏科技股份有限公司 | 图像处理电路及其环状假影消除方法 |
TW201519160A (zh) * | 2013-09-10 | 2015-05-16 | Apple Inc | 使用局部色調曲線計算之影像色調調整 |
CN107211141A (zh) * | 2015-01-30 | 2017-09-26 | 汤姆逊许可公司 | 对图像进行逆色调映射的方法和设备 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9911179B2 (en) * | 2014-07-18 | 2018-03-06 | Dolby Laboratories Licensing Corporation | Image decontouring in high dynamic range video processing |
KR20170087278A (ko) * | 2016-01-20 | 2017-07-28 | 한국전자통신연구원 | 비디오 압축 영상을 위한 거짓 등고선 검출과 제거 방법 및 장치 |
JP6912869B2 (ja) * | 2016-06-15 | 2021-08-04 | オリンパス株式会社 | 画像処理装置、画像処理プログラム、画像処理方法 |
-
2020
- 2020-04-23 CN CN202010328270.0A patent/CN113556545B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004023316A (ja) * | 2002-06-14 | 2004-01-22 | Ricoh Co Ltd | 画像処理装置 |
JP2005130244A (ja) * | 2003-10-24 | 2005-05-19 | Ricoh Co Ltd | 画像処理装置および画像処理方法 |
CN101778297A (zh) * | 2009-01-08 | 2010-07-14 | 华晶科技股份有限公司 | 影像序列的干扰消除方法 |
CN102117610A (zh) * | 2009-12-31 | 2011-07-06 | 瑞轩科技股份有限公司 | 调整画面的亮度的方法 |
CN102147916A (zh) * | 2010-02-10 | 2011-08-10 | 索尼公司 | 图像处理装置、图像处理方法和程序 |
CN104104968A (zh) * | 2013-04-02 | 2014-10-15 | 联咏科技股份有限公司 | 图像处理电路及其环状假影消除方法 |
TW201519160A (zh) * | 2013-09-10 | 2015-05-16 | Apple Inc | 使用局部色調曲線計算之影像色調調整 |
CN107211141A (zh) * | 2015-01-30 | 2017-09-26 | 汤姆逊许可公司 | 对图像进行逆色调映射的方法和设备 |
Non-Patent Citations (1)
Title |
---|
Geometrical_transformation-based_ghost_artifacts_removing_for_high_dynamic_range_image;Jaehyun Im, Sangsik Jang, Seungwon Lee, and Joonki Paik;2011 18th IEEE International Conference on Image Processing;357-360 * |
Also Published As
Publication number | Publication date |
---|---|
CN113556545A (zh) | 2021-10-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI407777B (zh) | 以影像特徵為基礎之動態對比強化裝置及其方法 | |
US7822272B2 (en) | Adaptive histogram equalization for images with strong local contrast | |
CN111292269B (zh) | 图像色调映射方法、计算机装置及计算机可读存储介质 | |
CN106485720A (zh) | 图像处理方法和装置 | |
US9449375B2 (en) | Image processing apparatus, image processing method, program, and recording medium | |
CN103826113B (zh) | 一种色彩还原方法及装置 | |
TW201433168A (zh) | 影像處理方法 | |
CN107424137B (zh) | 一种文本增强方法及装置、计算机装置、可读存储介质 | |
US9959599B2 (en) | System for enhanced images | |
TW202046698A (zh) | 影像調整方法以及相關的影像處理電路 | |
CN112534466A (zh) | 定向缩放系统和方法 | |
CN117769720A (zh) | 用于色调映射的方法、计算机程序和电子设备 | |
CN118505579A (zh) | 基于颜色校正和亮度通道优化的水下图像增强方法及相关装置 | |
CN113556545B (zh) | 图像处理方法及图像处理电路 | |
US7876364B2 (en) | False color suppression method for digital image | |
TWI743746B (zh) | 影像處理方法及影像處理電路 | |
US8655064B2 (en) | Image compression circuit for compressing pieces of image data of four adjacent pixels, image compression method, semiconductor device, and smartphone | |
WO2010128683A1 (en) | Blue sky color detection technique | |
TWI517097B (zh) | 增強影像對比之方法及裝置以及非暫時性計算機可讀媒體 | |
CN114078101A (zh) | 图像显示方法、电子设备及计算机可读存储介质 | |
CN104505053B (zh) | 显示信号转换方法和装置 | |
JP2009010636A (ja) | 適応ヒストグラム等化方法及び適応ヒストグラム等化装置 | |
CN113542864A (zh) | 视频的花屏区域检测方法、装置、设备及可读存储介质 | |
WO2022246663A1 (zh) | 图像处理方法、设备、系统和存储介质 | |
CN115131220A (zh) | 图像调节方法、装置和计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |