CN102948139B - 在时域噪声滤波中减少幻影伪像 - Google Patents
在时域噪声滤波中减少幻影伪像 Download PDFInfo
- Publication number
- CN102948139B CN102948139B CN201180018106.9A CN201180018106A CN102948139B CN 102948139 B CN102948139 B CN 102948139B CN 201180018106 A CN201180018106 A CN 201180018106A CN 102948139 B CN102948139 B CN 102948139B
- Authority
- CN
- China
- Prior art keywords
- frame
- pixel value
- filtering
- mixing factor
- motion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/63—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Picture Signal Circuits (AREA)
- Image Processing (AREA)
Abstract
一种数字视频序列的噪声滤波以减少幻影伪像的方法。所描述的方法的示例包括:基于参考帧计算针对数字视频序列的帧中的像素的运动值(302);基于所述运动值计算针对每一个像素的混合因数(304);通过应用混合因数到参考帧和所述帧中的对应的像素值产生经滤波的输出像素值(306);其中,所选择的经滤波的输出像素值向帧中的对应的像素值收敛(例如,逐步或者快速)以减少幻影伪像(308)并且输出经滤波的帧(310)。还公开了用于对数字视频序列滤波以减少幻影伪像的噪声滤波器和数字系统。
Description
背景技术
视频噪声滤波器已经变为消费类视频产品的区分点,因为噪声级别是视频质量的关键因素之一。成像传感器(例如,蜂窝电话相机、视频相机)拍摄的或者从模拟视频输入(例如,TV电缆、DVD/VCR)接收的视频通常被大量的随机噪声污染。视频噪声滤波器可以提高视频质量、编码效率,并且帮助进一步处理和分析,诸如增强、对象跟踪和识别。此外,视频噪声滤波器可以应用于很多应用,诸如蜂窝电话相机、视频监控和DVR等。
在很多应用中,视频噪声滤波器包括空间噪声滤波器(SNF)和时域噪声滤波器(TNF)。一般地,对于视频噪声滤波,时域噪声滤波比空间噪声滤波更有效,因为时域噪声滤波利用来自多个帧的信息。更普遍使用的TNF中的一个是时域无限脉冲响应(IIR)滤波器,具有非常低的计算复杂度并且利用来自全部先前帧的信息。然而,对视频序列使用时域IIR噪声滤波器可能导致幻影伪像(ghostingartifacts),其在视频序列的运动区域中引发粘滞轮廓(stickycontour),特别是在高滤波器强度下。如果视频序列中的对象在运动并且当对象运动了时对象的轮廓即边缘在以前位置保持可见,则出现粘滞轮廓。例如,如果框从左向右运动,则粘滞轮廓可以被作为在运动的框的左边的很多竖直线看见。这些可见轮廓可以被称为幻影伪像。运动自适应时域IIR噪声滤波器可以通过根据视频序列的运动幅度自动调整滤波器强度来减少幻影伪像。然而,尽管通过这种自动调整,一些幻影伪像不随着时间衰退。因此,期望时域噪声滤波的改进。
附图说明
以下参照附图描述根据本发明原理的示例性实施例,在附图中:
图1示出根据本发明的一个或者更多个实施方式的数字系统的框图;
图2A示出根据本发明的一个或者更多个实施方式的包括时域噪声滤波器的噪声滤波器的框图;
图2B—图2D示出根据本发明的一个实施方式的运动—混合因数函数;
图3—图6示出根据本发明的一个或者更多个实施方式的方法流程图;以及
图7到图9示出根据本发明的一个或者更多个实施方式的示例性数字系统。
具体实施方式
例示本发明的原理的示例实施方式被描述为用于实现以提供用于在数字视频序列的时域噪声滤波中减少幻影伪像的方法和系统。更具体地,所描述的实施方式减少由于对视频序列的帧应用运动自适应时域无限脉冲响应(IIR)噪声滤波器而可能引入的幻影伪像。例如,在运动自适应时域IIR滤波器中,输出帧[Y0(x,y,n),U0(x,y,n),V0(x,y,n)]是滤波器的输入帧[Yc(x,y,n),Uc(x,y,n),Vc(x,y,n)]和滤波器的先前输出帧即参考帧(referenceframe)[Y0(x,y,n-1),U0(x,y,n-1),V0(x,y,n-1)]的加权平均:
Yo(x,y,n)=a(x,y,n)Yc(x,y,n)+(1-a(x,y,n))Yo(x,y,n-1);
Uo(x,y,n)=a(x,y,n)Uc(x,y,n)+(1-a(x,y,n))Uo(x,y,n-1);
Vo(x,y,n)=a(x,y,n)Vc(x,y,n)+(1-a(x,y,n))Vo(x,y,n-1);
其中x和y是空间坐标,n是时域坐标,即,帧索引,Y、U、V是视频序列的三个彩色通道,并且a(x,y,n)是被运动值m(x,y,n)控制的混合因数。
针对像素的运动值m(x,y,n)是L1距离,即,针对全部三个彩色通道的当前输入帧和参考帧之间的绝对差之和:
m(x,y,n)=|Yc(x,y,n)-Yo(x,y,n-1)|+|Uc(x,y,n)-Uo(x,y,n-1)|+|Vc(x,y,n)-Vo(x,y,n-1)|.
如果运动值小,指示像素在此位置对齐的好,则强的时域滤波器被应用。
如果运动值大,指示像素在此位置对齐的不好,则弱的时域滤波器被应用。因而,针对x、y处的每一个像素的混合因数是在该像素位置的运动m的函数:
a(x,y,n)=a0+(1-a0)m(x,y,n)/Tmifm(x,y,n)<Tm;
=1else;
其中,Tm和a0是时域滤波器的输入参数。以下更详细说明这些参数。Tm的大值可能造成幻影伪像。
理想地,输出像素值[Y0(x,y,n),U0(x,y,n),V0(x,y,n)]总接近当前输入值[Yc(x,y,n),Uc(x,y,n),Vc(x,y,n)]。然而,在通常的定点实现中,输入和输出像素值是整数。在这种情况下,可能发生以下数值问题。考虑Y通道。如果全部像素值是整数,则输出帧的Y通道是加权平均的舍入值:
Yo(x,y,n)=round(a(x,y,n)Yc(x,y,n)+(1-a(x,y,n))Yo(x,y,n-1));
=round(Yo(x,y,n-1)+a(x,y,n)(Yc(x,y,n)-Yo(x,y,n-1)));
=Yo(x,y,n-1)+round(a(x,y,n)(Yc(x,y,n)-Yo(x,y,n-1))).
如果|Yc(x,y,n)-Y0(x,y,n-1)|小并且a(x,y,n)也小,则|a(x,y,n)(Yc(x,y,n)-Y0(x,y,n-1))|将小于1/2。在这种情况下,输出像素值Y0(x,y,n)等于先前输出像素值Y0(x,y,n-1)。如果在这些像素位置出现幻影伪像,则伪像将保留,只要条件继续被满足。可见地,在视频序列的运动区域中的粘滞轮廓将被观察到。同样的结论应用于U和V通道。
在本发明的一个或者更多个实施方式中,所选择的混合因数被修改,以补偿这个状况因而减少幻影伪像的出现。在本发明的一些实施方式中,在进行了加权平均之后进行后处理,以补偿这种状况因而减少幻影伪像的出现。
图1示出根据本发明的一个或者更多个实施方式的数字系统的框图。数字系统被配置为对数字视频序列进行时域噪声滤波。该系统包括源数字系统200,其经过通信信道218向目的地数字系统202发送编码的视频序列。源数字系统200包括视频拍摄组件204、视频噪声滤波器组件206、视频编码器组件208和发送器组件210。视频拍摄组件204被配置为提供在被视频编码器组件208编码之前被视频噪声滤波器组件206滤波的视频序列。视频拍摄组件204可以是例如成像传感器、视频相机、视频档案或者来自视频内容提供商的视频馈送。在本发明的一些实施方式中,视频拍摄组件204可以产生计算机图形作为视频序列,或者现场视频和计算机产生的视频的组合。
视频噪声滤波器组件206从视频拍摄组件接收视频序列并且对视频序列的帧进行噪声滤波,包括此处描述的减少幻影伪像的时域噪声滤波的方法的实施方式,以产生滤去噪声的视频序列。在本发明的一些实施方式中,视频噪声滤波器组件206可以包括以下参照图2A描述的功能/组件。
视频编码器组件208从视频噪声滤波器组件206接收滤去噪声的视频序列并且将其编码以便被发送组件210发送。一般地,视频编码器组件208经由视频噪声滤波器组件206从视频拍摄组件204接收滤去噪声的视频序列作为帧序列,将帧划分为编码单元,该编码单元可以是整个帧或者帧的一部分,将编码单元划分为像素块,并且基于这些块对编码单元中的视频数据编码。
发送器组件210经过通信信道218向目的地数字系统202发送经编码的视频数据。通信信道218可以是任意通信介质,或者适用于传送经编码的视频序列的通信介质的组合,诸如,例如有线或者无线通信介质、局域网或者广域网。
目的地数字系统202包括接收器组件212、视频解码器组件214和显示组件216。接收器组件212经过通信信道218从源数字系统200接收经编码的视频数据,并且向视频解码器组件214提供经编码的视频数据以便解码。一般地,视频解码器组件214反转由视频编码器组件208进行的编码处理以重构视频序列的帧。可以接着在显示组件216上显示经重构的视频序列。显示组件216可以是任意适当的显示设备,诸如,例如,等离子体显示器、液晶显示器(LCD)、发光二极管(LED)显示器等。
在本发明的一些实施方式中,源数字系统200还可以包括接收器组件和视频解码器组件和/或目的地数字系统202可以包括发送器组件和视频编码器组件用于针对视频流、视频广播和视频电话的双向视频序列传送。此外,根据一个或者更多个视频压缩标准,诸如,例如,动态图像专家组(MPEG)视频压缩标准,例如,MPEG-1、MPEG-2和MPEG-4;ITU-T视频压缩标准,例如,H.263和H.264;电影电视工程师协会(SMPTE)421M视频CODEC标准(统称为“VC-1”);由中国音频视频编码工作组定义的视频压缩标准(统称为“AVS”)等,视频编码器组件208和视频解码器组件214可以进行编码和解码。视频噪声滤波器组件206、视频编码器组件208和视频解码器组件214可以以软件、固件和硬件的任意适当组合实现,诸如,例如,一个或者更多个数字信号处理器(DSP)、微处理器、分立逻辑器件、专用集成电路(ASIC)、现场可编程门阵列(FPGA)等。
图2A示出根据本发明的一个或者更多个实施方式的噪声滤波器200,例如,图1的视频噪声滤波器组件106的框图。噪声滤波器200被配置为对视频序列上的帧进行空间滤波和时域滤波。输入帧中的像素值和经滤波的输出帧中的像素值是整数值。时域滤波由运动自适应时域IIR滤波器提供,该滤波器包括进行此处描述的幻影伪像减少。此外,在进行空间滤波之后进行时域滤波。如图2所示,噪声滤波器200包括噪声电平估计组件202、IIR滤波器组件220、空间滤波器组件204和用于时域滤波的组件,即运动检测组件206、运动-混合因数转换组件218、帧混合组件222和帧缓冲器208。
此外,T0、β、Tm和a0是噪声滤波器200的输入参数。T0是空间滤波器组件204的参数,其控制空间噪声滤波器的强度。越大的T0值产生越平滑的结果,而越小的值保留越多的细节。β是IIR滤波器220的参数,其控制噪声电平多快地逐帧改变。Tm和a0是针对时域滤波的输入参数。Tm的值是运动阈值,并且用于控制时域噪声滤波器的强度。对于增大的Tm值,帧中的平坦区域,即,没有纹路的区域,看上去更平滑,但是越大Tm的值可能造成运动区域中的更多的幻影伪像。a0的值也用于控制时域噪声滤波器的强度。该值范围可以从0到1,其中当a0接近0时滤波器更强并且当a0接近1时更弱。
噪声电平估计组件202估计输入帧中的噪声的电平。噪声估计针对输入帧的每一个彩色通道,即,Y、U、V进行,并且可以在输入帧上逐块或者逐行进行。可以使用任何适当的噪声估计技术进行噪声电平估计。美国专利申请公布No.2009/0153739中描述了一些适当的技术。
IIR滤波器组件220对噪声电平估计组件202的输出应用低通IIR滤波器以通过产生经滤波的噪声电平来控制噪声电平的变化速度。低通IIR滤波器应用于每一个彩色通道的噪声电平。经滤波的噪声电平接着被提供作为对运动-混合因数转换组件218的输入。此外,使用T0缩放经滤波的噪声电平以产生针对空间滤波器组件204的输入强度参数。
空间滤波器组件204对输入帧210的每一个彩色通道即Y、U、V进行空间滤波,以产生经空间滤波的帧214。此外,空间滤波器可以逐块应用或者逐行应用。经空间滤波的帧被提供作为对运动检测组件206和帧混合组件222的输入。可以根据任何适当的空间滤波技术进行空间滤波。美国专利申请公布No.2009/0153739中描述了一些适当的空间滤波技术。
帧缓冲器208存储噪声虑波器100的先前的输出帧。这些输出帧被运动检测组件206和帧混合组件222用作参考帧。
运动检测组件206计算来自帧缓冲器208的参考帧和经空间滤波的帧214之间的运动。基于三个彩色通道计算针对每一个像素的运动值m(x,y,n),其被计算为两个帧中的对应的像素之间的绝对差的和。
m(x,y,n)=|Yc(x,y,n)-Yo(x,y,n-1)|+|Uc(x,y,n)-Uo(x,y,n-1)|+|Vc(x,y,n)-Vo(x,y,n-1)|;
其中,[Y0(x,y,n-1),U0(x,y,n-1),V0(x,y,n-1)]是参考帧,并且[Yc(x,y,n),Uc(x,y,n),Vc(x,y,n)]是经空间滤波的帧(214)。
运动-混合因数转换组件218使用来自噪声电平估计组件202的经滤波的噪声估计和来自运动检测组件206的运动值计算针对每一个像素的混合因数a(x,y,n)。更具体地,根据针对该像素的a0、Tm和运动值计算像素的混合因数。如先前说明的,a0是对时域噪声滤波器的用于控制滤波器的强度的输入参数。如果运动大,则该参数的值被设定为更接近0以增大滤波器的强度;如果运动大,则该参数的值被设定为更接近1以减小滤波器的强度。在本发明的一些实施方式中,该参数的值被用户设定。在本发明的一些实施方式中,该参数的值由噪声电平估计组件202针对三个彩色通道计算的噪声电平确定。美国专利申请公布No.2009/0153739公开了基于估计的噪声电平设定该参数的值。以下更详细描述本发明的各个实施方式中计算混合因数a(x,y,n)。
帧混合组件222使用由运动-混合因数转换组件218计算出的混合因数a(x,y,n)、来自帧缓冲器208的参考帧和经空间滤波的帧214产生经滤波的输出帧212。更具体地说,输出帧[Y0(x,y,n),U0(x,y,n),V0(x,y,n)]212的在三个彩色通道中的像素值被计算为参考帧[Y0(x,y,n-1),U0(x,y,n-1),V0(x,y,n-1)]和经空间滤波的帧[Yc(x,y,n),Uc(x,y,n),Vc(x,y,n)]中的像素的加权平均:
Yo(x,y,n)=round(a(x,y,n)Yc(x,y,n)+(1-a(x,y,n))Yo(x,y,n-1));
Uo(x,y,n)=round(a(x,y,n)Uc(x,y,n)+(1-a(x,y,n))Uo(x,y,n-1));
Vo(x,y,n)=round(a(x,y,n)Vc(x,y,n)+(1-a(x,y,n))Vo(x,y,n-1)).
在本发明的一个或者更多个实施方式中,运动-混合因数转换组件218计算针对每一个像素的混合因数为:
a(x,y,n)=a0+(1-a0)m(x,y,n)/Tmifm(x,y,n)<Tm;
=1else.
如图2B所例示,针对位置x、y处的像素的混合因数a是在该像素位置的运动m的函数。运动-混合因数函数a(m)可以实现为查找表,该查找表针对每一个帧更新,因而不要求针对每一个像素的附加计算。表1例示针对帧的查找表a(m)的创建的伪码。在伪码中,MAX_m是最大运动值。在如上所示计算混合因数的本发明的实施方式中,帧混合组件(222)可以对经滤波的输出帧(212)进行后处理以减少幻影伪像。
表1
在本发明的一些实施方式中,后处理是三个彩色通道中的输出像素值的逐步收敛(step-wiseconvergence),如果输出像素值等于对应的先前的输出像素值,即,对应的参考像素值,则将输出像素值向输入像素值移动1。表2示出例示逐步收敛的伪码:
表2
在本发明的一些实施方式中,后处理是三个彩色通道中的输出像素值的快速收敛(instantconvergence),如果输出像素值等于对应的先前的输出像素值,即,对应的参考像素值,则迫使输出像素值与输入像素值相同。表3示出例示收敛的伪码:
表3
在本发明的一个或者更多个实施方式中,为了减少幻影伪像,运动-混合因数转换组件218使用图2B的混合函数的修改来计算减少产生可能导致粘滞轮廓的输出像素值的可能性的混合因数。如先前描述的,当在Y通道中|a(x,y,n)(Yc(x,y,n)-Y0(x,y,n-1))|<1/2时出现粘滞轮廓问题,并且类似地对于其它通道也如此。
在本发明的一些实施方式中,混合函数被修改以便当条件|a(x,y,n)(Yc(x,y,n)-Y0(x,y,n-1))|<1/2(或者在其它彩色通道中类似条件)可能出现时,使得输出像素值到输入像素值的逐步收敛。修改的目的是当条件可能出现时计算混合因数,从而得到的输出像素值向输入像素值移动1,即round(a(x,y,n)m(x,y,n))=1或者a(x,y,n)m(x,y,n)=1/2。由于a(x,y,n)=a0+(1-a0)m(x,y,n)/Tm并且|Yc(x,y,n)-Y0(x,y,n-1)|≈m(x,y,n)/3,以上条件可以近似为:
|a(x,y,n)(Yc(x,y,n)-Yo(x,y,n-1))|=(a0+(1-a0)m(x,y,n)/Tm)m(x,y,n)/3<1/2.
表4中示出例示针对包括将造成逐步收敛的混合因数的帧的查找表a(m)的创建的伪码。图2C示出修改的运动-混合因数函数的示例。
表4
在本发明的一些实施方式中,混合函数被修改以造成输出像素值到输入像素值的快速收敛。修改的目的是当条件|a(x,y,n)(Yc(x,y,n)-Y0(x,y,n-1))|<1/2可能出现时,混合因数被计算从而得到的输出像素值与输入像素值相同。表5中示出例示针对包括将造成快速收敛的混合因数的帧的查找表a(m)的创建的伪码。图2D示出修改的运动-混合因数函数的示例。
表5
上述减少幻影伪像的每一个方案具有类似效果:在应用时域噪声滤波器之后将留下少量的噪声。使用逐步收敛的两个方案缓慢地去除幻影但是留下较少的噪声。使用快速收敛的两个方案迅速地去除幻影但是留下较多的噪声。在本发明的一些实施方式中,可以在噪声滤波器100中实现全部四种方案或者其一些组合从而用户可以选择应用哪种。
图3是根据本发明的一个或者更多个实施方式在时域噪声滤波器中减少幻影伪像的方法的流程图。如图3所示,该方法应用于视频序列中的帧。初始地,在300,帧被接收。在本发明的一个或者更多个实施方式中,空间滤波器应用于视频序列的原始帧从而接收到的帧是经空间滤波的帧。任何适当的空间滤波器可以被使用。在本发明的一些实施方式中,接收到的帧是原始帧。
在302,基于参考帧计算针对帧中的每一个像素运动值。在本发明的一个或者更多个实施方式中,参考帧是通过对视频序列中正被处理的帧之前紧邻的帧应用方法而产生的先前滤波的帧。在本发明的一些实施方式中,基于三个彩色通道计算针对每一个像素的运动值m(x,y,n)为两个帧中的对应的像素之间的绝对差的和。
m(x,y,n)=|Yc(x,y,n)-Yo(x,y,n-1)|+|Uc(x,y,n)-Uo(x,y,n-1)|+|Vc(x,y,n)-Vo(x,y,n-1)|:
其中,[Y0(x,y,n-1),U0(x,y,n-1),V0(x,y,n-1)]是参考帧,并且[Yc(x,y,n),Uc(x,y,n),Vc(x,y,n)]是当前帧。
在304,接着基于针对像素计算的运动值针对每一个像素计算混合因数。根据针对该像素的a0、Tm和运动值,计算针对每一个像素的混合因数。在本发明的一个或者更多个实施方式中,针对每一个像素的混合因数被计算为
a(x,y,n)=a0+(1-a0)m(x,y,n)/Tmifm(x,y,n)<Tm;
a(x,y,n)=1else.
在本发明的一些实施方式中,混合因数的计算是使用运动值作为索引的表查找。表1示出例示这种表的创建的伪码。
在308,接着使用混合因数、该帧和参考帧计算经滤波的像素值。更具体地说,输出帧[Y0(x,y,n),U0(x,y,n),V0(x,y,n)]的像素值被计算为参考帧[Y0(x,y,n-1),U0(x,y,n-1),V0(x,y,n-1)]中的像素和对应的当前帧[Yc(x,y,n),Uc(x,y,n),Vc(x,y,n)]中的像素的加权平均:
Yo(x,y,n)=round(a(x,y,n)Yc(x,y,n)+(1-a(x,y,n))Yo(x,y,n-1));
Uo(x,y,n)=round(a(x,y,n)Uc(x,y,n)+(1-a(x,y,n))Uo(x,y,n-1));
Vo(x,y,n)=round(a(x,y,n)Vc(x,y,n)+(1-a(x,y,n))Vo(x,y,n-1)).
在308,所选择的输出帧中的经滤波的像素值接着向当前帧中的对应的像素值逐步收敛以减少幻影伪像。更具体地,如果经滤波的像素值Y0(x,y,n),U0(x,y,n),V0(x,y,n)等于参考帧Y0(x,y,n-1),U0(x,y,n-1),V0(x,y,n-1)中的对应的像素值,则经滤波的像素值Y0(x,y,n),U0(x,y,n),V0(x,y,n)适当地递增或者递减一(1)以将经滤波的像素值Y0(x,y,n),U0(x,y,n),V0(x,y,n)向当前帧中的对应的像素值Yc(x,y,n),Uc(x,y,n),Vc(x,y,n)移动。表2示出例示逐步收敛的伪码。
在310,得到的经滤波的帧接着被输出。在312,如果视频序列中的最后帧已经被处理,则方法结束。否则,下一帧被处理。
图4是根据本发明的一个或者更多个实施方式在时域噪声滤波器中减少幻影伪像的方法的流程图。如图4所示,该方法应用于视频序列中的帧。步骤400-406与图3的步骤300-306相同。当在400-406计算了输出帧的经滤波的像素值时,在408,输出帧中的所选择的经滤波的像素值向当前帧中的对应的像素值快速收敛以减少幻影伪像。更具体地,如果经滤波的像素值Y0(x,y,n),U0(x,y,n),V0(x,y,n)等于参考帧Y0(x,y,n-1),U0(x,y,n-1),V0(x,y,n-1)中的对应的像素值,则经滤波的像素值Y0(x,y,n),U0(x,y,n),V0(x,y,n)在输出帧中被当前帧中的对应的像素值Yc(x,y,n),Uc(x,y,n),Vc(x,y,n)代替。表3示出例示快速收敛的伪码。得到的经滤波的帧接着被输出410。如果视频序列中的最后帧已经被处理412,则方法结束。否则,下一帧被处理。
图5是根据本发明的一个或者更多个实施方式在时域噪声滤波器中减少幻影伪像的方法的流程图。如图5所示,该方法应用于视频序列中的帧。步骤500和502与图3的步骤300-302相同。当计算了运动值时,针对像素计算混合因数,从而所选择的混合因数a(x,y,n)造成使用混合因数计算出的经滤波的输出像素值向当前帧506中的对应的像素值逐步收敛。该收敛具有减少幻影伪像的效果。更具体地,除非条件|a(x,y,n)(Yc(x,y,n)-Y0(x,y,n-1))|<1/2或|a(x,y,n)(Uc(x,y,n)-U0(x,y,n-1))|<1/2或者|a(x,y,n)(Vc(x,y,n)-V0(x,y,n-1))|<1/2可能出现,否则计算混合因数为a0+(1-a0)m(x,y,n)/Tm。如果该条件可能出现,则如果m(x,y,n)>=Tm或者等于零(0)则混合因数被计算为一(1),并且否则被计算为3/(2*m(x,y,n))以补偿该条件。被计算以补偿该条件的混合因数的效果,是得到的经滤波的输出像素值比混合因数被计算为a0+(1-a0)m(x,y,n)/Tm的情况下更接近输入像素值了1。在本发明的一些实施方式中,混合因数的计算是使用运动值作为索引的表查找。表4示出例示这种表的创建的伪码。
在508,接着使用混合因数、该帧和参考帧计算经滤波的像素值。参照图3的步骤308按照上述计算经滤波的像素值。得到的经滤波的帧接着被输出508。如果视频序列中的最后帧已经被处理510,则方法结束。否则,下一帧被处理。
图6是根据本发明的一个或者更多个实施方式在时域噪声滤波器中减少幻影伪像的方法的流程图。如图6所示,该方法应用于视频序列中的帧。步骤500和502与图3的步骤300-302相同。当计算了运动值时,针对像素计算混合因数,从而所选择的混合因数a(x,y,n)造成使用混合因数计算出的经滤波的输出像素值向当前帧中的对应的像素值快速收敛606。该收敛具有减少幻影伪像的效果。更具体地,除非条件|a(x,y,n)(Yc(x,y,n)-Y0(x,y,n-1))|<1/2或|a(x,y,n)(Uc(x,y,n)-U0(x,y,n-1))|<1/2或者|a(x,y,n)(Vc(x,y,n)-V0(x,y,n-1))|<1/2可能出现,否则计算混合因数为a0+(1-a0)m(x,y,n)/Tm。如果该条件可能出现,则混合因数被计算为一(1)以补偿该条件。为了补偿该条件而计算的混合因数的效果,是得到的经滤波的输出像素值等于当前帧中的对应的像素值。在本发明的一些实施方式中,混合因数的计算是使用运动值作为索引的表查找。表5示出例示这种表的创建的伪码。
接着使用混合因数、该帧和参考帧计算经滤波的像素值608。参照图3的步骤308按照上述计算经滤波的像素值。得到的经滤波的帧接着被输出508。如果视频序列中的最后帧已经被处理510,则方法结束。否则,下一帧被处理。
此处描述的本发明的实施方式可以在多种数字系统的任意一种上提供:数字信号处理器(DSP)、通用可编程处理器、专用电路或者芯片上系统(SoC),诸如DSP和减小指令集合(RISC)处理器和各种专用可编程加速器的组合。在板上或者外部(闪存EEP)ROM或者FRAM中存储的程序可以用于实现视频信号处理,包括此处描述的具有幻影伪像减少的用于时域噪声滤波的方法的实施方式。模数转换器和数模转换器提供对真实世界的耦合,调制器和解调器(加上用于空中接口的天线)可以提供用于发射波形的耦合,并且分组器可以提供用于经过诸如因特网这样的网络发射的格式。
此处描述的方法的实施方式可以在硬件、软件、固件或者其组合来实现。如果至少一部分在软件中实现,则该软件可以在一个或者更多个处理器中执行,诸如微处理器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者数字信号处理器(DSP)。实现方法的软件可以初始存储在计算机可读介质(例如,存储器、闪存存储器、DVD等)中并且被处理器加载和执行。此外,计算机可读介质可以被经过网络或者其它通信路径存取以便下载软件。在一些情况下,软件还可以在计算机程序产品中提供,其中包括计算机可读介质和用于计算机介质的包装材料。
此处描述的用于在使用噪声滤波中减少幻影伪像的方法和系统可以实施用于几乎任何类型的数字系统(例如,桌上型计算机、膝上型计算机、诸如移动(即,蜂窝)电话这样的手持设备、个人数字助理、数字相机、数字录像机等),其具有拍摄或者产生数字视频序列或者显示数字视频序列的功能。图7-9示出示例性的数字系统的框图。
图7示出根据本发明的一个或者更多个实施方式的适用于嵌入式系统(例如,数字相机)的数字系统,其包括可以被配置以进行此处描述的方法的实施方式的基于DSP的图像协处理器(ICP)702、RISC处理器704和视频处理引擎(VPE)706等组件。RISC处理器704可以是任何适当配置的RISC处理器。VPE706包括用于从诸如图像传感器、视频解码器等的成像外围设备视频捕获的可配置的视频处理前端(视频FE)708输入接口、用于诸如SDTV显示器、数字LCD面板、HDTV视频编码器等的显示设备的可配置的视频处理后端(视频BE)710输出接口以及被视频FE708和视频BE710共享的存储器接口724。该数字系统还包括用于各种外围设备的外围接口712,外围设备可以包括多媒体卡、音频串行端口、通用串行总线(USB)控制器、串行端口接口等。
视频FE708包括图像信号处理器(ISP)716和3A统计信息产生器(3A)718。ISP716提供对图像传感器和数字视频源的接口。更具体地,ISP716可以从传感器模块726(例如,CMOS或者CCD)接受原始图像/视频数据并且可以接受多种格式的YUV视频数据。ISP716还包括具有从原始CCD/CMOS数据产生彩色格式(例如,RGB)的图像数据的功能的参数化的图像处理模块。ISP716针对每一个传感器类型是可定制的并且支持用于所拍摄的数字图像的预览显示的视频帧速率以及用于视频记录模式的视频帧速率。ISP716还包括图像缩放器、统计信息收集功能和边界信号计算器等功能。3A模块718包括支持控制回路的功能,该控制回路用于通过收集对来自ISP716或者外部存储器的原始图像数据的度量而自动聚焦、自动白平衡和自动曝光。在本发明的一个或者更多个实施方式中,视频FE708被配置以进行如上所述的带有幻影伪像减少的时域噪声滤波。
视频BE710包括屏幕上显示引擎(OSD)720和视频模拟编码器(VAC)722。OSD引擎720包括针对多种不同类型的硬件显示窗口管理各种格式的显示数据的功能,并且还在以彩色空间格式(如,RGB、YUV、YcbCr)提供数据到VAC722之前,采集并混合视频数据和显示/比特图数据到为单个显示窗口。VAC722包括功能,用于从OSD引擎720提取显示帧并将其格式化为期望的输出格式并且向对显示设备的接口输出要求的信号。VAC722可以接口到合成NTSC/PAL视频设备、S视频设备、数字LCD设备、高清视频编码器、DVI/HDMI设备等。
存储器接口724用作视频708和视频BE710中的主源和到模块的接收点(sink),其中视频708和视频BE710从外部存储器请求视频和/或向外部存储器传递视频。存储器接口724包括读缓冲器和写缓冲器以及仲裁逻辑。
ICP702包括对拍摄的图像进行压缩和其它处理要求的计算操作的功能。所支持的视频压缩标准可以包括例如JPEG标准、MPEG标准和H.26x标准中的一个或者更多个。在本发明的一个或者更多个实施方式中,ICP702可以被配置以进行如此处描述的时域噪声滤波方法的计算操作。
在操作中,为了拍摄照片或者视频序列,视频信号被视频FE708接收并且转换为进行视频压缩要求的输入格式。在压缩之前,如上所述带有幻影伪像减少的时域噪声滤波可以应用,作为处理拍摄的视频数据的一部分。视频FE708产生的视频数据被存储在外部存储器中。视频数据接着被编码,即,压缩。在压缩处理期间,视频数据被从外部存储器读取并且对此视频数据的压缩计算被ICP702进行。得到的经压缩的视频数据被存储在外部存储器中。经压缩的视频数据接着被视频BE710从外部存储器读取、解码并且后处理以显示图像/视频序列。
图8是可以被配置为进行此处描述的带有幻影伪像减少的时域噪声滤波的数字系统(例如,移动蜂窝电话)800的框图。信号处理单元(SPU)802包括数字信号处理系统(DSP),该DSP系统包括嵌入式存储器和安全装置。模拟基带单元804从手持麦克风813a接收话音数据流并且向手持单声道扬声器813b发送话音数据流。模拟基带单元804还从麦克风814a接收话音数据流并且向单声道耳机814b发送话音数据流。模拟基带单元804和SPU802可以是分立的IC。在很多实施方式中,模拟基带单元804不嵌入可编程处理器核心,但是基于在SPU802上运行的软件设定的音频路径、滤波器、增益等构造进行处理。显示器820还可以显示从网络、从本地相机828或者从诸如USB826或者存储器812这样的其它源接收的画面和视频流。SPU802还可以向显示器820发送经过RF收发机806从诸如蜂窝网络或者相机828接收到的各个源接收到的视频流。SPU802还可以经过复合输出端子824上的编码器822向外部视频显示单元发送视频流。编码器单元822可以根据PAL/SECAM/NTSC视频标准提供编码。
SPU802包括视频编码和解码要求的计算操作的功能。所支持的视频编码标准可以包括例如JPEG标准、MPEG标准和H.26x标准中的一个或者更多个。在本发明的一个或者更多个实施方式中,SPU802被配置以进行如上所述的带有幻影伪像减少的时域噪声滤波的方法的计算操作。实现方法的软件指令可以存储在存储器812中并且被SPU802执行作为拍摄和/或编码数字图像数据的一部分,例如,照片和视频流和/或在解码接收到的数字图像数据之后和在发射数字图像数据到显示器或者外部显示单元之前。
图9示出数字系统900(例如,个人计算机),包括处理器902、关联的存储器904、存储装置906和通常的数字系统(未示出)的各种其它元件和功能。在本发明的一个或者更多个实施方式中,数字系统可以包括多个处理器和/或这些处理器中的一个或者更多个可以是数字信号处理器。数字系统900还可以包括输入装置,诸如键盘908和鼠标910(或者其它光标控制装置),以及输出装置,诸如监视器912(或者其它显示装置)。数字系统900可以经过网络接口(未示出)连接到网络014(例如,局域网(LAN)、诸如因特网这样的广域网(WAN)、蜂窝网络、任何其它类似类型的网络和/或其任何组合)。本领域技术人员将理解输入装置和输出装置可以采取其它形式。
数字系统900还可以包括图像拍摄装置(未示出),其中包括用于拍摄视频序列的电路(例如,光学装置、传感器、读取电子装置)。数字系统900可以包括对拍摄的视频序列进行此处所示的带有幻影伪像减少的时域噪声滤波的功能。数字系统900可以还包括对经编码的视频序列解码,对解码的视频序列进行此处所述的带有幻影伪像减少的时域噪声滤波以及在监视器912上显示经滤波的解码的序列的功能。可以经过网络接收编码的视频序列,或者可以从存储介质(例如,DVD)等读取。
此外,本领域技术人员理解上述数字系统900的一个或者更多个元件可以位于远程位置并且通过网络连接到其它元件。此外,可以在具有多个节点的分布式系统上实现本发明的实施方式,其中系统和软件指令的每一个部分可以位于分布式系统的不同节点上。在本发明的一个实施方式中,节点可以是数字系统。另选地,节点可以是带有相关联的物理存储器的处理器。节点可以另选地是带有共享存储器和/或资源的处理器。
尽管已经关于有限数量的示例实施方式描述了本发明,但是本领域技术人员根据本公开将理解到可以得到不背离此处公开的本发明的范围的其它实施方式。例如,尽管图1例示根据此处描述的方法的噪声滤波在对视频序列编码之前,但是本领域技术人员将理解本发明的实施方式这种噪声滤波可以在其中其它位置使用。例如,可以在对经编码的视频序列解码之后应用此处描述的噪声滤波,例如在图1的视频解码器114和显示器116之间。作为另一个示例,在包括DVD播放器的数字系统中,可以在DVD上的视频被解码之后并且在电视或者计算机屏幕上显示之前应用此处描述的噪声滤波器。还可以有很多其它实施方式和变形。
Claims (14)
1.一种用于数字视频序列的噪声滤波以减少幻影伪像的方法,所述方法包括:
基于参考帧计算针对所述数字视频序列的帧中的像素的运动值;
基于所述运动值计算针对所述像素的混合因数;
通过应用所述混合因数到所述参考帧和所述帧中的对应的像素值产生经滤波的输出像素值,其中所选择的经滤波的输出像素值向所述帧中对应的像素值收敛以减少幻影伪像;以及
输出经滤波的帧。
2.根据权利要求1所述的方法,其中,所选择的经滤波的输出像素值向所述帧中的对应的像素值快速收敛。
3.根据权利要求1所述的方法,其中,所选择的经滤波的输出像素值向所述帧中的对应的像素值逐步收敛。
4.根据权利要求1所述的方法,其中,产生经滤波的输出像素值包括当经滤波的输出像素值等于所述参考帧中的对应的像素值时,将经滤波的输出像素值递增或者递减1以将经滤波的输出像素值更接近所述帧中的对应的像素值。
5.根据权利要求1所述的方法,其中,产生经滤波的输出像素值包括当经滤波的输出像素值等于所述参考帧中的对应的像素值时,用所述帧中的对应的像素值代替经滤波的输出像素值。
6.根据权利要求1所述的方法,其中,计算混合因数包括当(2(a0+(1-a0)m(x,y,n)/Tm)m(x,y,n)>=3)时计算混合因数为a0+(1-a0)m(x,y,n)/Tm;当m(x,y,n)=Tm或者m(x,y,n)=0时计算混合因数为1;以及否则计算混合因数为3/(2*(x,y,n));其中,n是所述帧的数量,x和y是像素坐标,m(x,y,n)是运动值,Tm是运动阈值,并且a0是强度参数。
7.根据权利要求1所述的方法,其中,计算混合因数包括:
当(2(a0+(1-a0)m(x,y,n)/Tm)m(x,y,n)>=3)并且m(x,y,n)<Tm时计算混合因数为a0+(1-a0)m(x,y,n)/Tm;以及否则计算混合因数为1;其中,n是所述帧的数量,x和y是像素坐标,m(x,y,n)是运动值,Tm是运动阈值,并且a0是强度参数。
8.根据权利要求1所述的方法,所述方法还包括:在计算所述运动值之前对所述帧应用空间滤波器。
9.一种用于对数字视频序列滤波以减少幻影伪像的噪声滤波器,所述噪声滤波器包括:
帧缓冲组件,所述帧缓冲组件被配置为存储要被用作参考帧的所述噪声滤波器的输出帧;
运动检测组件,所述运动检测组件被配置为基于所述参考帧计算针对数字视频序列的帧中的像素的运动值;
运动-混合因数转换组件,所述运动-混合因数转换组件被配置为基于所述运动值计算针对像素的混合因数;以及
帧混合组件,所述帧混合组件被配置为通过应用所述混合因数到所述参考帧和所述帧中的对应的像素值而产生经滤波的输出像素值,其中所选择的经滤波的输出像素值向所述帧中的对应的像素值收敛以减少幻影伪像。
10.根据权利要求9所述的噪声滤波器,其中,所述帧混合组件被配置为执行从以下组成的组选择的一个:当经滤波的输出像素值等于所述参考帧中的对应的像素值时,将经滤波的输出像素值递增或者递减1以使经滤波的输出像素值更接近所述帧中的对应的像素值,以及当经滤波的输出像素值等于所述参考帧中的对应的像素值时,用所述帧中的对应的像素值代替经滤波的输出像素值。
11.根据权利要求9所述的噪声滤波器,其中,所述运动-混合因数转换组件被配置为当(2(a0+(1-a0)m(x,y,n)/Tm)m(x,y,n)>=3)时计算混合因数为a0+(1-a0)m(x,y,n)/Tm;当m(x,y,n)=Tm或者m(x,y,n)=0时计算混合因数为1;以及否则计算混合因数为3/(2*(x,y,n));其中,n是所述帧的数量,x和y是像素坐标,m(x,y,n)是运动值,Tm是运动阈值,并且a0是强度参数。
12.根据权利要求9所述的噪声滤波器,其中,所述运动-混合因数转换组件被配置为当(2(a0+(1-a0)m(x,y,n)/Tm)m(x,y,n)>=3)并且m(x,y,n)<Tm时计算混合因数为a0+(1-a0)m(x,y,n)/Tm;以及否则计算混合因数为1;其中,n是所述帧的数量,x和y是像素坐标,m(x,y,n)是运动值,Tm是运动阈值,并且a0是强度参数。
13.根据权利要求9所述的噪声滤波器,所述噪声滤波器还包括:空间滤波器组件,所述空间滤波器组件被配置为对所述帧应用空间滤波器。
14.一种配置为对数字视频序列进行滤波以减少幻影伪像的数字系统,所述数字系统包括:
用于存储要被用作参考帧的经滤波的输出帧的装置;
基于所述参考帧计算针对数字视频序列的帧中的像素的运动值的装置;
基于所述运动值计算针对所述像素的混合因数的装置;以及
通过应用所述混合因数到所述参考帧和所述帧中的对应的像素值而产生经滤波的输出像素值的装置,其中所选择的经滤波的输出像素值向所述帧中的对应的像素值收敛以减少幻影伪像。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US12/753,897 US8564724B2 (en) | 2010-04-04 | 2010-04-04 | Ghosting artifact reduction in temporal noise filtering |
US12/753,897 | 2010-04-04 | ||
PCT/US2011/031068 WO2011126968A2 (en) | 2010-04-04 | 2011-04-04 | Ghosting artifact reduction in temporal noise filtering |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102948139A CN102948139A (zh) | 2013-02-27 |
CN102948139B true CN102948139B (zh) | 2016-01-20 |
Family
ID=44709265
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201180018106.9A Active CN102948139B (zh) | 2010-04-04 | 2011-04-04 | 在时域噪声滤波中减少幻影伪像 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8564724B2 (zh) |
JP (1) | JP5826249B2 (zh) |
CN (1) | CN102948139B (zh) |
WO (1) | WO2011126968A2 (zh) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8773593B2 (en) * | 2011-01-03 | 2014-07-08 | Arm Limited | Noise reduction filter circuitry and method |
US8811757B2 (en) | 2012-01-05 | 2014-08-19 | Texas Instruments Incorporated | Multi-pass video noise filtering |
US9489706B2 (en) * | 2012-07-02 | 2016-11-08 | Qualcomm Technologies, Inc. | Device and algorithm for capturing high dynamic range (HDR) video |
US9041834B2 (en) * | 2012-09-19 | 2015-05-26 | Ziilabs Inc., Ltd. | Systems and methods for reducing noise in video streams |
US20140267919A1 (en) * | 2013-03-15 | 2014-09-18 | Quanta Computer, Inc. | Modifying a digital video signal to mask biological information |
US9118932B2 (en) * | 2013-06-14 | 2015-08-25 | Nvidia Corporation | Adaptive filtering mechanism to remove encoding artifacts in video data |
US9449371B1 (en) * | 2014-03-06 | 2016-09-20 | Pixelworks, Inc. | True motion based temporal-spatial IIR filter for video |
US10021396B1 (en) * | 2014-12-30 | 2018-07-10 | Ambarella, Inc. | Motion detection based on observing several pictures |
US9633416B1 (en) * | 2015-12-26 | 2017-04-25 | Intel Corporation | Adaptive control for denoise filtering |
DE112017001477T5 (de) * | 2016-03-23 | 2018-12-06 | Koninklijke Philips N.V. | Verbesserte bildqualität durch zweistufige temporale rauschunterdrückung |
US11176649B1 (en) | 2017-06-03 | 2021-11-16 | Interra Systems, Inc. | System and method of identifying presence of digital ghosting artifacts in videos |
EP3785220A1 (en) * | 2018-04-27 | 2021-03-03 | Aselsan Elektronik Sanayi ve Ticaret Anonim Sirketi | A method for confident registration-based non-uniformity correction using spatio-temporal update mask |
GB2583519B (en) * | 2019-05-02 | 2021-12-08 | Apical Ltd | Image processing |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0648047A2 (en) * | 1993-10-11 | 1995-04-12 | THOMSON multimedia | Method and apparatus for forming a video signal using motion estimation and signal paths with different interpolation processing |
US5983251A (en) * | 1993-09-08 | 1999-11-09 | Idt, Inc. | Method and apparatus for data analysis |
CN1259823A (zh) * | 1998-11-12 | 2000-07-12 | Oec医疗系统公司 | 用于减少视频图像处理中的运动失真和噪声的方法和设备 |
CN1812489A (zh) * | 2005-01-18 | 2006-08-02 | Lg电子株式会社 | 用于去除视频信号的噪声的装置 |
CN101123681A (zh) * | 2007-09-20 | 2008-02-13 | 宝利微电子系统控股公司 | 一种数字图像降噪方法及装置 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100624421B1 (ko) * | 2004-05-04 | 2006-09-19 | 삼성전자주식회사 | 디지탈 영상 신호 필터링 장치 및 방법 |
ATE530015T1 (de) * | 2005-01-18 | 2011-11-15 | Lg Electronics Inc | Anordnung zur entfernung von rauschen aus einem videosignal |
TWI324013B (en) * | 2006-02-22 | 2010-04-21 | Huper Lab Co Ltd | Video noise reduction method using adaptive spatial and motion-compensation temporal filters |
US20090153739A1 (en) | 2007-12-14 | 2009-06-18 | Texas Instruments Incorporated | Method and Apparatus for a Noise Filter for Reducing Noise in a Image or Video |
US11677938B2 (en) | 2008-04-30 | 2023-06-13 | Arris Enterprises Llc | Method to reduce contour artifacts on recursive temporal filters |
JP4358283B1 (ja) * | 2008-08-04 | 2009-11-04 | 株式会社東芝 | ノイズ低減装置及びノイズ低減方法 |
US8610826B2 (en) * | 2009-08-27 | 2013-12-17 | Broadcom Corporation | Method and apparatus for integrated motion compensated noise reduction and frame rate conversion |
-
2010
- 2010-04-04 US US12/753,897 patent/US8564724B2/en active Active
-
2011
- 2011-04-04 JP JP2013503809A patent/JP5826249B2/ja active Active
- 2011-04-04 CN CN201180018106.9A patent/CN102948139B/zh active Active
- 2011-04-04 WO PCT/US2011/031068 patent/WO2011126968A2/en active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5983251A (en) * | 1993-09-08 | 1999-11-09 | Idt, Inc. | Method and apparatus for data analysis |
EP0648047A2 (en) * | 1993-10-11 | 1995-04-12 | THOMSON multimedia | Method and apparatus for forming a video signal using motion estimation and signal paths with different interpolation processing |
CN1259823A (zh) * | 1998-11-12 | 2000-07-12 | Oec医疗系统公司 | 用于减少视频图像处理中的运动失真和噪声的方法和设备 |
CN1812489A (zh) * | 2005-01-18 | 2006-08-02 | Lg电子株式会社 | 用于去除视频信号的噪声的装置 |
CN101123681A (zh) * | 2007-09-20 | 2008-02-13 | 宝利微电子系统控股公司 | 一种数字图像降噪方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
US8564724B2 (en) | 2013-10-22 |
WO2011126968A3 (en) | 2012-01-19 |
CN102948139A (zh) | 2013-02-27 |
JP2013526138A (ja) | 2013-06-20 |
WO2011126968A2 (en) | 2011-10-13 |
JP5826249B2 (ja) | 2015-12-02 |
US20110242422A1 (en) | 2011-10-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102948139B (zh) | 在时域噪声滤波中减少幻影伪像 | |
US20220248038A1 (en) | Rate control in video coding | |
US8811757B2 (en) | Multi-pass video noise filtering | |
US20210152840A1 (en) | CABAC Decoder with Decoupled Arithmetic Decoding and Inverse Binarization | |
US8160136B2 (en) | Probabilistic bit-rate and rate-distortion cost estimation for video coding | |
US11115662B2 (en) | Quantization matrix design for HEVC standard | |
US8179446B2 (en) | Video stabilization and reduction of rolling shutter distortion | |
US7880769B2 (en) | Adaptive image stabilization | |
US8619866B2 (en) | Reducing memory bandwidth for processing digital image data | |
US8885714B2 (en) | Method and system for intracoding in video encoding | |
US8994792B2 (en) | Method and system for creating a 3D video from a monoscopic 2D video and corresponding depth information | |
US20100098155A1 (en) | Parallel CABAC Decoding Using Entropy Slices | |
US8810565B2 (en) | Method and system for utilizing depth information as an enhancement layer | |
US9161058B2 (en) | Method and system for detecting global brightness change for weighted prediction in video encoding | |
US20110255597A1 (en) | Method and System for Reducing Flicker Artifacts | |
US20090016623A1 (en) | Image processing device, image processing method and program | |
CN1608378A (zh) | 在视频清晰度增强中改善时间一致性 | |
WO2010010641A1 (ja) | 画像合成符号化方法、画像合成符号化装置、撮像システム | |
CN102630025B (zh) | 一种处理信号的方法及系统 | |
US9681141B2 (en) | Error detection on variable length code decoder | |
WO2006084419A1 (en) | Method for reducing bit rate requirements for encoding multimedia data | |
Bao et al. | Quantitative comparison of lossless video compression for multi-camera stereo and view interpolation applications | |
KR101419419B1 (ko) | 모노스코픽 2d 비디오 및 대응하는 깊이 정보로부터 3d 비디오를 생성하기 위한 방법 및 시스템 | |
CN117676148A (zh) | 视频重编码方法、装置、计算机可读存储介质及终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |