CN111479083A - 图像处理方法及图像处理系统 - Google Patents

图像处理方法及图像处理系统 Download PDF

Info

Publication number
CN111479083A
CN111479083A CN201910062846.0A CN201910062846A CN111479083A CN 111479083 A CN111479083 A CN 111479083A CN 201910062846 A CN201910062846 A CN 201910062846A CN 111479083 A CN111479083 A CN 111479083A
Authority
CN
China
Prior art keywords
field information
pixel
horizontal
pixels
vertical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910062846.0A
Other languages
English (en)
Other versions
CN111479083B (zh
Inventor
林铭达
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Realtek Semiconductor Corp
Original Assignee
Realtek Semiconductor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Realtek Semiconductor Corp filed Critical Realtek Semiconductor Corp
Priority to CN201910062846.0A priority Critical patent/CN111479083B/zh
Publication of CN111479083A publication Critical patent/CN111479083A/zh
Application granted granted Critical
Publication of CN111479083B publication Critical patent/CN111479083B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)

Abstract

本发明涉及一种图像处理方法及图像处理系统。图像处理系统接收第一图场信息、第二图场信息及第三图场信息,第一及第三图场信息对应到多列第一像素,而第二图场信息对应到多列第二像素。根据第一及第三图场信息进行运动检测,并根据运动检测的结果对图场信息进行内插以产生第一像素的动态去交错显示参数。根据第一及第三图场信息进行运动估测以产生水平及垂直运动估测值。根据水平及运动估测值、第一图场信息及第三图场信息计算第一像素的水平补偿显示参数及垂直补偿显示参数。将第一像素之水平或垂直补偿显示参数与其动态去交错显示参数加权平均以产生混合显示参数。

Description

图像处理方法及图像处理系统
技术领域
本发明是有关于一种图像处理方法,特别是一种能够将交错图场去交错化的图像处理方法。
背景技术
一般来说,在传送图像数据以供显示器显示图像时,可以利用循序式(progressive)或者交错式(interlacing)的方式来输入图像数据。当利用循序式扫描的方式来更新图像数据时,显示器之显示框中的所有像素都会在每一帧周期内被更新。也就是说,在每一个帧周期中,显示框中的所有像素都会根据当时对应的图像数据值被赋予新的显示参数,例如各色光的亮度值。
然而在先前技术中,为了减少显示数据传输所需的频宽,就可能会采取交错式的扫描方式来输入图像数据。当利用交错式扫描的方式来更新图像数据时,显示框中的像素会被分成两个彼此交错的图场(field),例如奇数列像素的图场及偶数列像素的图场。在此情况下,在每一个帧周期中,只有其中一个图场所对应到的像素会根据当时对应的图像数据值被赋予新的显示参数,而另一个图场所对应到的像素则需要以内插或是复制的方式来设定对应的显示参数,也就是所谓的去交错化(deinterlacing)。由于图像中的物体可能正在移动或变形,因此在进行去交错化时,常常无法正确预测出每个像素所应该对应的显示参数,使得显示画面中的物体边缘产生毛边或闪烁。
发明内容
本发明之一实施例提供一种图像处理方法。图像处理方法包含接收对应于显示框之第一图场信息(field)、第二图场信息及第三图场信息。第一图场信息及第三图场信息各包含显示框中多列第一像素的多个显示参数,第二图场信息包含显示框中多列第二像素的多个显示参数,且多列第一像素系与多列第二像素交错排列。
根据第一图场信息及第三图场信息进行运动检测(motion detection),根据运动检测的结果及根据第一图场信息、第二图场信息及第三图场信息三者中的至少一者内插出多列第一像素的多个动态去交错显示参数。根据第一图场信息及第三图场信息进行水平运动估测(horizontal motion estimation)以产生每一第一像素的水平运动估测值。根据第一图场信息及第三图场信息进行垂直运动估测(vertical motion estimation)以产生每一第一像素的垂直运动估测值。
根据每一第一像素所对应的水平运动估测值、第一图场信息及第三图场信息计算每一第一像素的水平补偿显示参数,并根据每一第一像素所对应的垂直运动估测值、第一图场信息及第三图场信息计算每一第一像素的垂直补偿显示参数。
根据每一列第一像素所对应的多个水平运动估测值产生每一列第一像素之一水平估测代表值,并根据每一行第一像素所对应的多个垂直运动估测值产生每一行第一像素之垂直估测代表值。根据每一第一像素所对应之水平估测代表值及垂直估测代表值,将每一第一像素之水平补偿显示参数及垂直补偿显示参数的其中之一与每一第一像素之动态去交错显示参数加权平均,以产生每一第一像素之混合显示参数。
于同一画面中显示第二图场信息中多列第二像素的多个显示参数及多列第一像素的多个混合显示参数。
本发明的另一实施例提供一种图像处理方法。图像处理方法包含接收对应于显示框之第一图场信息、第二图场信息及第三图场信息。第一图场信息及第三图场信息各包含显示框中多列第一像素的多个显示参数,第二图场信息包含显示框中多列第二像素的多个显示参数,其中多列第一像素系与多列第二像素交错排列。
根据第一图场信息及第三图场信息进行运动检测,根据运动检测的结果产生多列第一像素的多个动态去交错显示参数。根据第一图场信息及第三图场信息进行特定方向运动估测以产生每一第一像素的运动估测值,其中特定方向为水平方向或垂直方向,根据每一第一像素所对应的运动估测值、第一图场信息及第三图场信息计算每一第一像素的补偿显示参数,根据每一列第一像素所对应的多个运动估测值产生每一列第一像素之估测代表值。根据每一第一像素所对应之估测代表值,将每一第一像素之补偿显示参数与每一第一像素之动态去交错显示参数加权平均,以产生每一第一像素之混合显示参数。
本发明之另一实施例提供一种图像处理系统。图像处理系统包含显示框、接收单元、运动检测电路、动态适应性去交错电路、运动估测电路、运动补偿电路及显示参数混合电路。
接收单元接收对应于显示框之第一图场信息、第二图场信息及第三图场信息。第一图场信息及第三图场信息各包含显示框中多列第一像素的多个显示参数,第二图场信息包含显示框中多列第二像素的多个显示参数,其中多列第一像素系与多列第二像素交错排列。
运动检测电路耦接于接收单元,并根据第一图场信息及第三图场信息进行运动检测。动态适应性去交错电路耦接于运动检测电路,并根据运动检测的结果及根据第一图场信息、第二图场信息及第三图场信息三者中的至少一者内插出多列第一像素的多个动态去交错显示参数。
运动估测电路耦接于接收单元,并根据第一图场信息及第三图场信息进行水平运动估测以产生每一第一像素的水平运动估测值,根据第一图场信息及第三图场信息进行垂直运动估测以产生每一第一像素的垂直运动估测值。
运动补偿电路耦接于运动估测电路,并根据每一第一像素所对应的水平运动估测值、第一图场信息及第三图场信息计算每一第一像素的水平补偿显示参数,根据每一第一像素所对应的垂直运动估测值、第一图场信息及第三图场信息计算每一第一像素的垂直补偿显示参数,根据每一列第一像素所对应的多个水平运动估测值产生每一列第一像素之水平估测代表值,及根据每一行第一像素所对应的多个垂直运动估测值产生每一行第一像素之垂直估测代表值。
显示参数混合电路耦接于运动补偿电路及动态适应性去交错路。显示参数混合电路根据每一第一像素所对应之水平估测代表值及垂直估测代表值,将每一第一像素之水平补偿显示参数及垂直补偿显示参数的其中之一与每一第一像素之动态去交错显示参数加权平均,以产生每一第一像素之混合显示参数。
显示框于同一画面中显示第二图场信息中多列第二像素的多个显示参数及多列第一像素的多个混合显示参数。
附图说明
图1是本发明一实施例之图像处理系统的示意图。
图2为本发明一实施例之第一图场信息所包含的图像示意图。
图3为本发明一实施例之第三图场信息所包含的图像示意图。
图4为本发明一实施例之图像处理方法的流程图。
具体实施方式
图1是本发明一实施例之图像处理系统100的示意图。图像处理系统100包括显示器110、接收单元120、运动检测电路130、动态适应性去交错(motion adaptivedeinterlacing)电路140、运动估测电路150、运动补偿电路160及显示参数混合电路170。
显示器110可包含用以显示图像画面的显示框112,在显示框112包含多个像素,并且可以根据每个像素所接收到显示参数,例如各色光的亮度,来呈现图像画面。
在有些实施例中,显示框112中的像素分别对应至两个彼此交错的图场(field),例如显示框112可包含交错排列的多列第一像素及多列第二像素,而位于偶数列(包含第零列及第二列)的第一像素可对应至图场112A,而位于奇数列(包含第一列及第三列)之第二像素可对应至图场112B。
此外,接收单元120则会交错地接收到对应于图场112A及图场112B的图场信息。举例来说,接收单元120可依序接收对应于显示框112之图场112A的第一图场信息、对应于图场112B的第二图场信息及对应于图场112A的第三图场信息。第一图场信息及第三图场信息可各包含显示框112中多列第一像素的多个显示参数,而第二图场信息则可包含显示框112中多列第二像素的多个显示参数。
由于第二图场信息中并未包含多列第一像素的显示参数,因此当图像处理系统100欲通过显示器110显示第二图场信息所对应的图像时,图像处理系统100需要先计算出每一第一像素可能的显示参数。在本发明的有些实施例中,图像处理系统100可利用运动检测电路130及动态适应性去交错电路140来计算出每一第一像素的动态去交错显示参数。
举例来说,运动检测电路130可耦接于接收单元120,而动态适应性去交错电路140可耦接于运动检测电路130。运动检测电路130可根据第一图场信息及第三图场信息进行运动检测(motion detection)以判断在图像中的物体在第一图场信息及第三图场信息之间是否产生了运动。
接着,动态适应性去交错电路140则可根据运动检测的结果并根据第一图场信息、第二图场信息及第三图场信息三者中的至少一者内插出多列第一像素的多个动态去交错显示参数。
举例来说,当运动检测的结果显示第一图场信息及第三图场信息之间并未发生运动时,表示多列第一像素所对应的显示参数应该会与第一图场信息及第三图场信息中多列第一像素的显示参数相当接近。在此情况下,动态适应性去交错电路140可以根据第一图场信息及第三图场信息中,位于相同位置之第一像素的显示参数来内插出其第一像素的动态去交错显示参数。
然而,当运动检测的结果显示第一图场信息及第三图场信息之间发生运动时,表示多列第一像素所对应的显示参数可能会与第一图场信息及第三图场信息中多列第一像素的显示参数有相当差异,此时动态适应性去交错电路140可根据第二图场信息中与每一第一像素相邻之第二像素的显示参数来内插出其第一像素的动态去交错显示参数。
也就是说,通过运动检测电路130及动态适应性去交错电路140,图像处理系统100就可以根据图场之间是否发生运动来决定是利用图场间(inter field)内插或是利用图场内(intra field)内插的方式来产生每一第一像素的动态去交错显示参数。
由于动态去交错显示参数并未考虑到物体的运动方向及距离,因此无法根据物体的运动方向来进行更精准的内插运算。然而,由于图像中的物体可能是朝着各种不同的方向运动,因此若要检测出物体实际运动的方向和距离,也将会花费许多的运算资源及时间。
此外,在图像画面中,由于字体及符号的结构较为细致,因此倘若边缘出现毛边就可能让观众难以辨识。例如在新闻画面中,常常有新闻快讯的跑马灯。倘若在内插像素的显示参数时,未考虑到跑马灯的水平移动或垂直移动,就可能造成字体的边缘产生瑕疵而无法辨识。
在本发明的有些实施例中,图像处理系统100可以利用运动估测电路150来估测物体在水平及垂直方向上的运动,并通过运动补偿电路160产生每一第一像素的水平补偿显示参数及垂直补偿显示参数。接着,图像处理系统100便可将每一第一像素的水平补偿显示参数或垂直补偿显示参数与每一第一像素的动态去交错显示参数加权平均来产生每一第一像素的混合显示参数,而显示器110便可在显示框112之同一画面中显示第二图场信息中多列第二像素的多个显示参数及多列第一像素的多个混合显示参数。由于混合显示参数已经对物体在水平或垂直方向上的运动进行部分的补偿,因此图像处理系统100能够呈现出品质优选的图像,而可以减少物体边缘产生毛边或闪烁的问题。
在图1中,运动估测电路150可耦接于接收单元120,并且可以根据第一图场信息及第三图场信息进行水平运动估测(horizontal motion estimation)以产生每一第一像素的水平运动估测值,并根据第一图场信息及第三图场信息进行垂直运动估测(verticalmotion estimation)以产生每一第一像素的垂直运动估测值。
图2为本发明一实施例之第一图场信息所包含的图像示意图,而图3为本发明一实施例之第三图场信息所包含的图像示意图。
当运动估测电路150欲判断在第一图场信息中对应于第一像素PA1的物体在第三图场信息中会对应至哪一个像素,以计算出两者之间的水平运动估测值时,运动估测电路150可先以第一像素PA1为中心选取包含多个像素之水平比较区块HA0,并根据水平比较区块HA0为中心,沿着水平方向上选取多个水平候选区块。举例来说,运动估测电路150除了选择与水平比较区块HA0相同位置的水平候选区块之外,可以往左连续选取9个水平候选区块,以及往右连续选取另外9个水平候选区块,亦即共19个水平候选区块。在本发明的其他实施例中,根据实际应用对于精准度和运算资源的需求与限制,运动估测电路150也可能会选择数量更多或更少的水平候选区块。
接着运动估测电路150可以计算第一图场信息中对应于水平比较区块HA0中多个像素的多个显示参数与第三图场信息中对应于多个水平候选区块中多个像素的多个显示参数之间的多个水平绝对值差和(sum of absolute difference,SAD)。当水平比较区块HA0与其中一个水平候选区块的水平绝对值差和越小时,表示两者所对应到的图像内容越相近,因此在有些实施例中,运动估测电路150可根据多个水平绝对值差和中最小的水平绝对值差和所对应的水平候选区块来估测第一像素PA1的水平运动估测值。
举例来说,在图2及图3中,第一图场信息中对应于水平比较区块HA0之像素的显示参数与第三图场信息中对应于水平候选区块HB(2)之像素的显示参数最为接近,而具有最小的水平绝对值差和,表示在第一图场信息中对应于第一像素PA1的物体最有可能在第三图场信息中移动至候选水平区块HB(2)的中心位置,也就是说,在第一图场信息中对应于第一像素PA1的物体可能在第三图场信息中向右移动(例如但不限于以正号代表右方,以负号代表左方)两个像素的位置。在此情况下,便可判断第一像素PA1的水平运动估测值为2。
相似地,当运动估测电路150欲判断在第一图场信息中对应于第一像素PB1的物体在第三图场信息中会对应至哪一个像素,以计算出两者之间的垂直运动估测值时,运动估测电路150可先以第一像素PB1为中心选取包含多个像素之垂直比较区块HC0,并在根据垂直比较区块HC0为中心,沿着垂直方向上选取多个垂直候选区块。举例来说,运动估测电路150除了选择与垂直比较区块HC0相同位置的垂直候选区块之外,可以往上连续选取3个垂直候选区块,以及往下连续选取另外3个垂直候选区块,亦即共7个垂直候选区块。在本发明的其他实施例中,根据实际应用对于精准度和运算资源的需求与限制,运动估测电路150也可能会选择数量更多或更少的垂直候选区块。
接着,运动估测电路150便可计算第一图场信息中对应于垂直比较区块HC0中多个像素的多个显示参数与第三图场信息中对应于多个垂直候选区块中多个像素的多个显示参数之间的多个垂直绝对差值和,并且根据多个垂直绝对值差和中最小的垂直绝对值差和所对应的垂直候选区块估测第一像素PB1之垂直运动估测值。举例来说,在图2及图3中,第一图场信息中对应于水平比较区块HC0之像素的显示参数与第三图场信息中对应于水平候选区块HD(-1)之像素的显示参数最为接近,而具有最小的水平绝对值差和,表示在第一图场信息中对应于第一像素PB1的物体可能在第三图场信息中向下移动(例如但不限于以正号代表上方,以负号代表下方)一个像素的位置,也就是会对应到第一像素PB2的位置。在此情况下,便可判断第一像素PB1的垂直运动估测值为(-1)。
在图2中,水平比较区块HA0与垂直比较区块HC0可具有相异的尺寸。例如水平比较区块HA0可包含3x9个像素,而垂直比较区块HC0可包含5x3个像素。然而本发明并不以此为限,在本发明的其他实施例中,图像处理系统100也可根据实际硬体的设计或精确度的需求,而改变水平比较区块HA0与垂直比较区块HC0的大小及形状。
在图1中,运动补偿电路160可耦接于运动估测电路150。在取得了水平运动估测值及垂直运动估测值之后,运动补偿电路160可根据每一第一像素所对应的水平运动估测值、第一图场信息及第三图场信息计算每一第一像素的水平补偿显示参数,并根据每一第一像素所对应的垂直运动估测值、第一图场信息及第三图场信息计算每一第一像素的垂直补偿显示参数。
举例来说,当运动估测电路150已判断出在第一图场信息中对应于第一像素PA1的物体可能在第三图场信息中向右移动两个像素的位置,亦即移动至第一像素PA3的位置时,表示当图像处理系统100在显示第一图场信息及第三图场信息之间的第二图场信息时,在第一图场信息中对应于第一像素PA1的物体可能会移动至第一像素PA1及第一像素PA3之间的中点位置,亦即第一像素PA2的位置。在此情况下,运动补偿电路160便可对第一图场信息中第一像素PA1的显示参数与第三图场信息中第一像素PA3的显示参数取平均值以作为第一像素PA2所对应的水平运动估测值。
相似地,运动补偿电路160也根据第一像素PB1所对应的垂直运动估测值、第一图场信息及第三图场信息来计算每一个第一像素的垂直补偿显示参数。
虽然每一个第一像素都有对应的水平运动估测值和垂直运动估测值,但为了避免运动估测值与实际的运动有所差异而得出不合理的补偿显示参数,运动补偿电路160还可以根据每一列第一像素所对应的多个水平运动估测值产生每一列第一像素之水平估测代表值,并根据每一行第一像素所对应的多个垂直运动估测值产生每一行第一像素之垂直估测代表值。根据每一第一像素所对应的水平估测代表值及垂直估测代表值便可以得知整列第一像素及整行第一像素的大致运动情形,并减少误判运动方向的情况。
在本发明的有些实施例中,运动估测电路160可将同一列第一像素的多个水平运动估测值中出现次数最多之水平运动估测值的出现总次数作为该列第一像素的水平估测代表值。相似地,运动估测电路160可将多个垂直运动估测值中出现次数最多之垂直运动估测值的出现总次数作为垂直估测代表值。
举例来说,在图2中,若与第一像素PA1位于同一列的27个第一像素中,有20个第一像素的水平运动估测值皆为2,有5个第一像素的水平运动估测值为1,而有2个第一像素的水平运动估测值为0,此时便可将出现次数最多的水平运动估测值2的出现总次数20作为水平估测代表值。
此外,若与第一像素PA1位于同一行的15个第一像素中,有5个第一像素的垂直运动估测值皆为(-1),有6个第一像素的垂直运动估测值为0,而有4个第一像素的垂直运动估测值为1,此时便可将出现次数最多的垂直运动估测值(-1)的出现总次数5作为垂直估测代表值。在此实施例中,由于垂直运动估测值为0表示没有发生运动,因此运动估测电路160会先略过垂直运动估测值为0之第一像素的数量,而选取垂直运动估测值(-1)的出现总次数5作为垂直估测代表值。
也就是说,水平估测代表值可以表示同一列的第一像素之水平运动估测值的相近程度,而垂直估测代表值可以表示同一行第一像素之垂直运动估测值的相近程度,因此可供显示参数混合电路170判断应采用水平补偿参数或是应采用垂直补偿参数。
显示参数混合电路170耦接于运动补偿电路160及动态适应性去交错路140。显示参数混合电路170可以根据每一第一像素所对应之水平估测代表值及垂直估测代表值,将每一第一像素之水平补偿显示参数及垂直补偿显示参数的其中之一与每一第一像素之一动态去交错显示参数加权平均,以产生该每一第一像素之混合显示参数。
在有些实施例中,为了能够有效地比较水平估测代表值和垂直估测代表值,显示参数混合电路160还可将水平估测代表值和垂直估测代表值标准化。举例来说,显示参数混合电路160可以计算水平估测代表值与显示框112之水平宽度值之第一比例值,并可计算垂直估测代表值与显示框112之垂直高度值之第二比例值。
在前述实施例中,若显示框112之水平宽度值为27个像素,而显示框112之垂直高度值为15个像素,则以第一像素PA1为例,第一比例值即为
Figure BDA0001954657680000121
而第二比例值则为
Figure BDA0001954657680000122
在此情况下,第一比例值会大于第二比例值,表示水平移动的结果可能会比垂直移动的结果更加贴近物体实际的运动,在此情况下,显示参数混合电路170便可将第一像素PA1之水平补偿显示参数与第一像素PA1之动态去交错显示参数加权平均,以产生第一像素PA1之混合显示参数。式1为本发明一实施例之第一像素PA1之混合显示参数CP。
CP=(1-HMC_ratio)×MADP+HMC_ratio×HMC_output 式1
在式1中,HMC_ratio表示第一像素PA1所对应之第一比例值,MADP表示第一像素PA1之动态去交错显示参数,而HMC_output表示第一像素PA1之水平补偿显示参数。也就是说,当第一比例值越大时,表示水平运动与实际的情况可能越相符,因此第一像素PA1之水平补偿显示参数占第一像素PA1之混合显示参数的比例也会越大。此外,当第一比例值HMC_ratio越小时,表示整列第一像素的水平运动较不明显,在此情况下,动态去交错显示参数MADP则将占据混合显示参数CP中较大的比例,以避免水平运动估测的误差造成显示参数偏离实际情况。
反之,当第二比例值大于第一比例值时,表示垂直移动的结果可能会比水平移动的结果更加贴近物体实际的运动,因此显示参数混合电路170会将第一像素PA1之垂直补偿显示参数与第一像素PA1之动态去交错显示参数加权平均,以产生第一像素PA1之混合显示参数。式2为本发明一实施例之第一像素PA1之混合显示参数CP。
CP=(1-VMC_ratio)×MADP+VMC_ratio×VMC_output 式2
在式2中,VMC_ratio表示第一像素PA1所对应之第二比例值,MADP表示第一像素PA1之动态去交错显示参数,而VMC_output表示第一像素PA1之垂直补偿显示参数。也就是说,当第二比例值越大时,表示垂直运动与实际的情况可能越相符,因此第一像素PA1之垂直补偿显示参数占第一像素PA1之混合显示参数的比例也会越大。
由于图像处理器100可以估测图像中物体的水平运动和垂直运动,并且可以判断出比较可能的运动方向,进而调整混合显示参数中补偿显示参数和动态去交错显示参数的比例,因此能够更加接近实际可能的显示参数,减少先前技术在内插显示参数时,物体边缘产生毛边或闪烁的问题。
此外,在本发明的有些实施例中,接收单元120、运动检测电路130、动态适应性去交错电路140、运动估测电路150、运动补偿电路160及显示参数混合电路170可分别以相异的专用集成电路(Application Specific Integrated Circuit,ASIC)实施,或者有部分的电路可以互相整合并以实施在相同的集成电路中。而在有些实施例中,接收单元120、运动检测电路130、动态适应性去交错电路140、运动估测电路150、运动补偿电路160及显示参数混合电路170也可由利用处理器或控制器执行对应的程序来实施。
图4为本发明一实施例之图像处理方法200的流程图。
S210:接收对应于显示框112之第一图场信息、第二图场信息及第三图场信息;
S220:根据第一图场信息及第三图场信息进行运动检测;
S230:根据运动检测的结果及根据第一图场信息、第二图场信息及第三图场信息三者中的至少一者内插出多列第一像素的多个动态去交错显示参数;
S240:根据第一图场信息及第三图场信息进行水平运动估测以产生每一第一像素的水平运动估测值;
S242:根据第一图场信息及第三图场信息进行垂直运动估测以产生每一第一像素的垂直运动估测值;
S250:根据每一第一像素所对应的水平运动估测值、第一图场信息及第三图场信息计算每一第一像素的水平补偿显示参数;
S252:根据每一第一像素所对应的垂直运动估测值、第一图场信息及第三图场信息计算每一第一像素的垂直补偿显示参数;
S260:根据每一列第一像素所对应的多个水平运动估测值产生每一列第一像素之水平估测代表值;
S262:根据每一行第一像素所对应的多个垂直运动估测值产生每一行第一像素之垂直估测代表值;
S270:根据每一第一像素所对应之水平估测代表值及垂直估测代表值,将每一第一像素之水平补偿显示参数及垂直补偿显示参数的其中之一与每一第一像素之动态去交错显示参数加权平均,以产生每一第一像素之混合显示参数;
S280:于同一画面中显示第二图场信息中多列第二像素的该多个显示参数及多列第一像素的多个混合显示参数。
由于图像处理方法200可以估测图像中物体的水平运动和垂直运动,并且可以判断出比较可能的运动方向,进而调整混合显示参数中补偿显示参数和动态去交错显示参数的比例,因此能够更加接近实际上像素可能对应的显示参数,减少先前技术在内插显示参数时,物体边缘产生毛边或闪烁的问题。
在本发明的有些实施例中,图像处理方法200可应用于图像处理系统100。举例来说,接收单元120可执行步骤S210,运动检测电路130可执行步骤S220而动态适应性去交错电路140可执行步骤S230。再者,运动估测电路150可执行步骤S240及S242,而运动补偿电路160可执行步骤S250、S252、S260及S262,显示参数混合电路170则可执行步骤S270,而显示器110则可执行步骤S280。因此步骤S210至S280的执行方式亦可参考前述图像处理系统100的操作原理。
此外,在有些实施例中,方法200也可以只检测单一个特定方向的运动,例如水平方向的运动或垂直方向的运动,并据以判断产生混合显示参数。举例来说,方法200可以省略步骤S242、S252及S262,并在步骤S270中,仅根据每一第一像素所对应之水平估测代表值,将每一第一像素之水平补偿显示参数与每一第一像素之动态去交错显示参数加权平均。或者,方法200也可以省略步骤S240、S250及S260,并在步骤S270中,仅根据每一第一像素所对应之垂直估测代表值,将每一第一像素之垂直补偿显示参数与每一第一像素之动态去交错显示参数加权平均。
综上所述,本发明之实施例所提供的图像处理系统及图像处理方法可以估测图像中物体的水平运动和垂直运动,并且可以判断出比较可能的运动方向,进而调整混合显示参数中补偿显示参数和动态去交错显示参数的比例,因此能够更加接近实际上像素可能对应的显示参数,减少先前技术在内插显示参数时,物体边缘产生毛边或闪烁的问题。
以上所述仅为本发明之优选实施例,凡依本发明的权利要求范围所做之均等变化与修改,皆应属本发明之涵盖范围。
【符号说明】
100 图像处理系统
110 显示器
120 接收单元
130 运动检测电路
140 动态适应性去交错电路
150 运动估测电路
160 运动补偿电路
170 显示参数混合电路
112 显示框
112A、112B 图场
PA1、PA2、PA3、PB1、PB2 第一像素
HA0 水平比较区块
HC0 水平候选区块
HB(2) 垂直比较区块
HD(-1) 垂直候选区块
200 方法
S210至S280 步骤。

Claims (10)

1.一种图像处理方法,包含:
接收对应于一显示框之一第一图场信息、一第二图场信息及一第三图场信息,该第一图场信息及该第三图场信息各包含该显示框中多列第一像素的多个显示参数,该第二图场信息包含该显示框中多列第二像素的多个显示参数,其中该多列第一像素系与该多列第二像素交错排列;
根据该第一图场信息及该第三图场信息进行一运动检测;
根据该运动检测的结果及根据该第一图场信息、该第二图场信息及该第三图场信息三者中的至少一者内插出该多列第一像素的多个动态去交错显示参数;
根据该第一图场信息及该第三图场信息进行一水平运动估测以产生每一第一像素的一水平运动估测值;
根据该第一图场信息及该第三图场信息进行一垂直运动估测以产生该每一第一像素的一垂直运动估测值;
根据该每一第一像素所对应的该水平运动估测值、该第一图场信息及该第三图场信息计算该每一第一像素的一水平补偿显示参数;
根据该每一第一像素所对应的该垂直运动估测值、该第一图场信息及该第三图场信息计算该每一第一像素的一垂直补偿显示参数;
根据每一列第一像素所对应的多个水平运动估测值产生该每一列第一像素之一水平估测代表值;
根据每一行第一像素所对应的多个垂直运动估测值产生该每一行第一像素之一垂直估测代表值;
根据该每一第一像素所对应之该水平估测代表值及该垂直估测代表值,将该每一第一像素之该水平补偿显示参数及该垂直补偿显示参数的其中之一与该每一第一像素之该动态去交错显示参数加权平均,以产生该每一第一像素之一混合显示参数;及
于同一画面中显示该第二图场信息中该多列第二像素的该多个显示参数及该多列第一像素的多个混合显示参数。
2.如权利要求1所述的方法,其中根据该每一列第一像素所对应的该多个水平运动估测值产生该每一列第一像素之该水平估测代表值包含:
将该多个水平运动估测值中出现次数最多之水平运动估测值的一出现总次数作为该水平估测代表值。
3.如权利要求1所述的方法,其中根据该每一行第一像素所对应的该多个垂直运动估测值产生该每一行第一像素之该垂直估测代表值包含:
将该多个垂直运动估测值中出现次数最多之垂直运动估测值的一出现总次数作为该垂直估测代表值。
4.如权利要求1所述的方法,其中根据该每一第一像素所对应之该水平估测代表值及该垂直估测代表值,将该每一第一像素之该水平补偿显示参数及该垂直补偿显示参数的其中之一与该每一第一像素之该动态去交错显示参数加权平均,以产生该每一第一像素之该混合显示参数,包含:
计算该水平估测代表值与该显示框之一水平宽度值之一第一比例值;
计算该垂直估测代表值与该显示框之一垂直高度值之一第二比例值;及
当该第一比例值大于该第二比例值时,将该每一第一像素之该水平补偿显示参数与该每一第一像素之该动态去交错显示参数加权平均,以产生该每一第一像素之该混合显示参数。
5.如权利要求4所述的方法,其中:
当该第一比例值越大时,该每一第一像素之该水平补偿显示参数占该每一第一像素之该混合显示参数的比例越大。
6.如权利要求1所述的方法,其中根据该每一第一像素所对应之该水平估测代表值及该垂直估测代表值,将该每一第一像素之该水平补偿显示参数及该垂直补偿显示参数的其中之一与该每一第一像素之该动态去交错显示参数加权平均,以产生该每一第一像素之该混合显示参数,包含:
计算该水平估测代表值与该显示框之一水平宽度值之一第一比例值;
计算该垂直估测代表值与该显示框之一垂直高度值之一第二比例值;及
当该第二比例值大于该第一比例值时,将该每一第一像素之该垂直补偿显示参数与该每一第一像素之该动态去交错显示参数加权平均,以产生该每一第一像素之该混合显示参数。
7.如权利要求6所述的方法,其中:
当该第二比例值越大时,该每一第一像素之该垂直补偿显示参数占该每一第一像素之该混合显示参数中的比例越大。
8.如权利要求1所述的方法,其中根据该第一图场信息及该第三图场信息进行该水平运动估测以产生该每一第一像素的该水平运动估测值包含:
以该第一像素为中心选取包含多个像素之一水平比较区块;
计算该第一图场信息中对应于该水平比较区块中多个像素的多个显示参数与该第三图场信息中对应于多个水平候选区块中多个像素的多个显示参数之间的多个水平绝对值差和;及
根据该多个水平绝对值差和中最小之一水平绝对值差和所对应的水平候选区块估测该每一第一像素之该水平运动估测值。
9.如权利要求8所述的方法,其中根据该第一图场信息及该第三图场信息进行该垂直运动估测以产生该每一第一像素的该垂直运动估测值包含:
以该第一像素为中心选取包含多个像素之一垂直比较区块;
计算该第一图场信息中对应于该垂直比较区块中多个像素的多个显示参数与该第三图场信息中对应于多个垂直候选区块中多个像素的多个显示参数之间的多个垂直绝对差值和;及
根据该多个垂直绝对值差和中最小之一垂直绝对值差和所对应的垂直候选区块估测该每一第一像素之该垂直运动估测值;
其中该水平比较区块与该垂直比较区块具有相异的尺寸。
10.一种图像处理方法,包含:
接收对应于一显示框之一第一图场信息、一第二图场信息及一第三图场信息,该第一图场信息及该第三图场信息各包含该显示框中多列第一像素的多个显示参数,该第二图场信息包含该显示框中多列第二像素的多个显示参数,其中该多列第一像素系与该多列第二像素交错排列;
根据该第一图场信息及该第三图场信息进行一运动检测;
根据该运动检测的结果产生该多列第一像素的多个动态去交错显示参数;
根据该第一图场信息及该第三图场信息进行一特定方向运动估测以产生每一第一像素的一运动估测值,其中该特定方向为水平方向或垂直方向;
根据该每一第一像素所对应的该运动估测值、该第一图场信息及该第三图场信息计算该每一第一像素的一补偿显示参数;
根据每一列第一像素所对应的多个运动估测值产生该每一列第一像素之一估测代表值;及
根据该每一第一像素所对应之该估测代表值,将该每一第一像素之该补偿显示参数与该每一第一像素之该动态去交错显示参数加权平均,以产生该每一第一像素之一混合显示参数。
CN201910062846.0A 2019-01-23 2019-01-23 图像处理方法及图像处理系统 Active CN111479083B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910062846.0A CN111479083B (zh) 2019-01-23 2019-01-23 图像处理方法及图像处理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910062846.0A CN111479083B (zh) 2019-01-23 2019-01-23 图像处理方法及图像处理系统

Publications (2)

Publication Number Publication Date
CN111479083A true CN111479083A (zh) 2020-07-31
CN111479083B CN111479083B (zh) 2021-06-25

Family

ID=71743864

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910062846.0A Active CN111479083B (zh) 2019-01-23 2019-01-23 图像处理方法及图像处理系统

Country Status (1)

Country Link
CN (1) CN111479083B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101366273A (zh) * 2005-12-21 2009-02-11 模拟装置公司 用于交错式视频的逐行扫描的方法和设备
CN101552867A (zh) * 2009-05-06 2009-10-07 凌阳科技股份有限公司 去交错处理系统
US20100110290A1 (en) * 2008-11-03 2010-05-06 Yi-Lin Li Signal processing method by adding odd and even field sync data for neutralized effects and apparatus therefor
CN101783916A (zh) * 2009-01-20 2010-07-21 晨星软件研发(深圳)有限公司 倍频解交错方法及其控制器
CN101888473A (zh) * 2009-05-14 2010-11-17 联咏科技股份有限公司 文字保护装置及动态适应性去交错装置
US20100309333A1 (en) * 2009-06-08 2010-12-09 Scott Smith Image sensors and image reconstruction methods for capturing high dynamic range images
CN102065245A (zh) * 2009-11-13 2011-05-18 李学能 图像传感器的图像取样方法及图像处理方法
CN102104788A (zh) * 2009-12-17 2011-06-22 美国博通公司 一种用于视频处理的方法和系统
CN102369728A (zh) * 2009-04-02 2012-03-07 高通股份有限公司 反向电视电影处理技术
US9918041B1 (en) * 2015-04-24 2018-03-13 Synaptics Incorporated Motion adaptive de-interlacing and advanced film mode detection

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101366273A (zh) * 2005-12-21 2009-02-11 模拟装置公司 用于交错式视频的逐行扫描的方法和设备
US20100110290A1 (en) * 2008-11-03 2010-05-06 Yi-Lin Li Signal processing method by adding odd and even field sync data for neutralized effects and apparatus therefor
CN101783916A (zh) * 2009-01-20 2010-07-21 晨星软件研发(深圳)有限公司 倍频解交错方法及其控制器
CN102369728A (zh) * 2009-04-02 2012-03-07 高通股份有限公司 反向电视电影处理技术
CN101552867A (zh) * 2009-05-06 2009-10-07 凌阳科技股份有限公司 去交错处理系统
CN101888473A (zh) * 2009-05-14 2010-11-17 联咏科技股份有限公司 文字保护装置及动态适应性去交错装置
US20100309333A1 (en) * 2009-06-08 2010-12-09 Scott Smith Image sensors and image reconstruction methods for capturing high dynamic range images
CN102065245A (zh) * 2009-11-13 2011-05-18 李学能 图像传感器的图像取样方法及图像处理方法
CN102104788A (zh) * 2009-12-17 2011-06-22 美国博通公司 一种用于视频处理的方法和系统
US9918041B1 (en) * 2015-04-24 2018-03-13 Synaptics Incorporated Motion adaptive de-interlacing and advanced film mode detection

Also Published As

Publication number Publication date
CN111479083B (zh) 2021-06-25

Similar Documents

Publication Publication Date Title
US7057665B2 (en) Deinterlacing apparatus and method
US7586540B2 (en) Image interpolation device and a frame rate converter and image display apparatus using the same
US6999128B2 (en) Stillness judging device and scanning line interpolating device having it
JP5887764B2 (ja) 動き補償フレーム生成装置及び方法
JP2011082846A (ja) フレームレート変換装置及び方法
US7388617B2 (en) Image conversion device and image conversion method
US20070053013A1 (en) Image signal processing apparatus and interlace-to-progressive conversion method
US20060152620A1 (en) Image processing apparatus and image processing method
US7379120B2 (en) Image processing device and image processing method
JP5350501B2 (ja) 映像処理装置及び映像処理方法
TWI692980B (zh) 影像處理方法及影像處理系統
US8761262B2 (en) Motion vector refining apparatus
CN111479083B (zh) 图像处理方法及图像处理系统
US7733420B2 (en) Judder detection apparatus, de-interlacing apparatus using the same, and de-interlacing method
US7446815B2 (en) Image conversion device and image conversion method
TWI471010B (zh) 一種具有移動補償的解交錯影像處理裝置及其相關方法
JP5737072B2 (ja) 動き補償フレーム生成装置及び方法
US8294819B2 (en) De-interlacing apparatus and method and moving caption compensator
JP4339237B2 (ja) 順次走査変換装置
US8531600B2 (en) Video signal processing apparatus and method
US6377307B1 (en) Line interpolation apparatus and video signal conversion device
KR100594780B1 (ko) 영상변환 장치 및 그 방법
US20070177054A1 (en) Edge adaptive de-interlacing apparatus and method thereof
JP5887763B2 (ja) 動き補償フレーム生成装置及び方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant