CN101686320B - 图像信号处理装置和图像信号处理方法 - Google Patents
图像信号处理装置和图像信号处理方法 Download PDFInfo
- Publication number
- CN101686320B CN101686320B CN200910140629.5A CN200910140629A CN101686320B CN 101686320 B CN101686320 B CN 101686320B CN 200910140629 A CN200910140629 A CN 200910140629A CN 101686320 B CN101686320 B CN 101686320B
- Authority
- CN
- China
- Prior art keywords
- picture signal
- image
- picture
- resolution
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 9
- 238000001914 filtration Methods 0.000 claims description 39
- 238000000034 method Methods 0.000 claims description 18
- 230000000052 comparative effect Effects 0.000 claims description 9
- 238000010586 diagram Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000002266 amputation Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0125—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards being a high definition standard
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4053—Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Television Systems (AREA)
- Editing Of Facsimile Originals (AREA)
- Facsimile Image Signal Circuits (AREA)
Abstract
本发明提供一种图像信号处理装置和图像信号处理方法。即使是分辨率不同的图像同时存在的图像信号，也能更加适当地进行高分辨率化处理。对作为输入图像的第一图像信号进行空间低通滤波处理；对上述低通滤波处理后的图像进行高分辨率化处理，生成第二图像信号；进行比较上述第一图像信号和上述第二图像信号中对应区域的处理，基于该比较结果，对于上述区域选择上述第一图像信号和上述第二图像信号中的一者。
Description
技术领域
本发明涉及图像的高分辨率化处理技术。
背景技术
电视接收机的大画面化得以发展，对于从播送、通信、存储介质等输入的图像信号并非直接显示，而是一般通过数字信号处理增加水平/垂直方向的像素数而显示。此时，通过使用了一般周知的sinc函数的低通滤波器和样条函数等仅增加像素数，不能够提高分辨率。
因此，非专利文献1中公开了通过合成输入的多个图像帧(以下简记为帧)组成1个帧而在高分辨率化的同时增加像素数的超分辨率技术。
非专利文献1：Sina Farsiu、M.Dirk Robinson、Michael Elad、PeymanMilanfar、“Fast and Robust Multiframe Super Resolution”、IEEETransactions on Image Processing、VOL.13，NO.10、October 2004
发明内容
为了用非专利文献1中记载的技术进行高分辨率处理，需要放大处理前的图像尺寸和高分辨率处理后的图像尺寸是已知的，有时不能够进行适当的高分辨率化处理。
本发明就是鉴于上述课题而完成的，其目的在于，即使是分辨率不同的图像同时存在的图像信号，也能更加适当地进行高分辨率化处理。
为了解决上述课题，本发明的一个实施方式，例如只要以权利要求中记载的方式构成即可。
本发明涉及一种图像信号处理装置，其包括：对作为输入图像的第一图像信号进行空间低通滤波处理的低通滤波部；对上述低通滤波处理后的图像进行高分辨率化处理，生成第二图像信号的高分辨率化处理部；和比较选择部，其进行比较上述第一图像信号和上述第二图像信号中对应的区域的处理，基于该比较结果，对于上述区域选择上述第一图像信号和上述第二图像信号中的一者。
本发明还涉及一种图像信号处理装置，其包括：对作为输入图像的第一图像信号进行空间低通滤波处理的低通滤波部；对上述低通滤波处理后的图像进行高分辨率化处理，生成第二图像信号的高分辨率化处理部；算出上述第一图像信号的像素值与上述低通滤波处理后的图像信号的像素值的差值绝对值的第一差值绝对值算出部；算出上述低通滤波处理后的图像信号的像素值与上述第二图像信号的像素值的差值绝对值的第二差值绝对值算出部；比较上述第一差值绝对值与上述第二差值绝对值的比较部；和基于上述比较部的比较结果选择上述第一图像信号和作为输入图像信号的第二图像信号中的一者的选择部。
本发明还涉及一种图像信号处理方法，其包括：对作为输入图像的第一图像信号进行空间低通滤波处理的低通滤波处理步骤；对上述低通滤波处理后的图像进行高分辨率化处理，生成第二图像信号的高分辨率化处理步骤；和比较选择步骤，进行比较上述第一图像信号和上述第二图像信号中对应的区域的处理，基于该比较结果，对于上述区域选择上述第一图像信号和上述第二图像信号中的一者。
本发明还涉及一种图像信号处理方法，其包括：对作为输入图像的第一图像信号进行空间低通滤波处理的低通滤波处理步骤；对上述低通滤波处理后的图像进行高分辨率化处理，生成第二图像信号的高分辨率化处理步骤；算出上述第一图像信号的像素值与上述低通滤波处理后的图像信号的像素值的差值绝对值的第一差值绝对值算出步骤；算出上述低通滤波处理后的图像信号的像素值与上述第二图像信号的像素值的差值绝对值的第二差值绝对值算出步骤；比较上述第一差值绝对值与上述第二差值绝对值的比较步骤；和基于上述比较部的比较结果选择上述第一图像信号和作为输入图像信号的第二图像信号中的一者的选择步骤。
根据本发明，即使是分辨率不同的图像同时存在的图像信号，也能更加适当地进行高分辨率化处理。
附图说明
图1是本发明的实施例1的说明图。
图2是本发明的实施例2的说明图。
图3是本发明的输入图像的一个例子的说明图。
图4是本发明的图像信号处理的一个例子的说明图。
图5是本发明的图像信号处理的一个例子的说明图。
图6是本发明的实施例3的说明图。
图7是本发明的实施例4的说明图。
图8是本发明的实施例1的说明图。
图9是本发明的实施例2的说明图。
图10是本发明的输入信号的一个例子的说明图。
符号说明
100：图像信号处理装置；
101：图像输入部；
102：LPF部；
103：高分辨率化部；
104：比较选择部；
105：高分辨率化部；
106：图像输出部；
200：图像信号处理装置；
201：图像输入部；
202：差值绝对值算出部；
203：差值绝对值算出部；
204：比较部；
205：选择部；
206：高分辨率化处理部；
207：图像输出部；
600：图像显示装置；
601：输入部；
602：录像再现部；
603：内容存储部；
604：图像信号处理部；
605：显示部；
606：声音输出部；
607：控制部；
608：用户界面部；
700：录像再现装置；
701：输入部；
702：录像再现部；
703：内容存储部；
704：图像信号处理部；
705：图像输出部；
706：声音输出部；
707：控制部；
708：用户界面部。
具体实施方式
以下表示本发明的实施方式。
首先，用图10说明本发明的各实施例的输入图像信号的例子。
本发明的各实施例的装置中，例如从DVD、BD播放器等、摄像装置等或电视台等输入SD图像信号(标准画质图像信号)或HD图像信号(高清画质图像信号)。该情况下，特别是从电视台播送的图像信号等中，有时在帧之间或帧内同时存在使得用SD图像信号对应摄影机拍摄的SD图像信号的像素数增加后的增频图像信号、和用HD图像信号对应摄影机拍摄的HD图像信号。本发明的各实施例的装置，将这些图像高清化。例如，如果输入图像是SD图像信号，则向HD图像信号进行变换处理，如果输入图像是HD图像信号则向HD+图像信号(超高清图像信号)进行变换处理。
[实施例1]
接着，用图1说明实施例1的图像信号处理装置的结构。
实施例1的图像信号处理装置中，对图像输入部(101)输入图10所示的图像信号。LPF部(102)通过进行空间低通滤波处理，将输入图像变换为低分辨率图像。该情况下，输入图像的高频成分被截除，所以无论输入图像是高分辨率图像还是低分辨率图像，LPF部(102)后的图像都成为低分辨率图像。接着，高分辨率化处理部(103)对于从LPF部(102)输出的低分辨率图像进行高分辨率化处理，变换为高分辨率图像信号。此处，高分辨率化处理部(103)中的高分辨率化处理，例如是降低重叠失真的超分辨率处理等。比较选择部(104)比较高分辨率化后的图像信号与输入图像信号，选择高分辨率化后的图像信号与输入图像信号中的一方。此处，比较选择部(104)的比较处理和选择处理，可以按1像素单位进行，也可以按多个像素构成的区域单位进行。高分辨率化部(105)对比较选择部(104)选择的图像信号进行高分辨率化处理。此处，高分辨率化部(105)中的高分辨率化处理，例如是进行强调轮廓的处理的高分辨率化处理等。
此处，将如图10所示的输入图像的一个例子示于图3。图3的图像的例子，是如区域(301)和区域(302)这样不同的图像重叠而生成的图像的例子。存在各区域是使得SD图像信号的像素数增加后的增频图像信号即低分辨率图像的情况，或是HD图像信号对应摄影机拍摄的高分辨率图像的情况。图3的例子中，这些图像在帧内同时存在。
接着，用图4和图5说明LPF部(102)、高分辨率化处理部(103)和比较选择部(104)的图像信号比较选择动作。以下例子中，表示比较选择部(104)通过比较处理判别输入图像的区域(302)的图像是高分辨率图像还是低分辨率图像的例子。
首先，图4是例如输入图像的区域(302)是高分辨率图像的情况的例子。此时对LPF部(102)输入高分辨率图像(401)。此处，LPF部(102)对高分辨率图像(401)进行低通滤波处理，生成低分辨率图像(402)并输出到高分辨率化处理部(103)。高分辨率化处理部(103)降低低分辨率图像(402)的重叠失真，进行复原高频成分的高分辨率化处理，生成高分辨率图像(403)。
此处，高分辨率图像(401)、低分辨率图像(402)、高分辨率图像(403)的频率成分，例如分别如频率成分(411)、频率成分(412)、频率成分(413)所示。
即，低分辨率图像(402)的频率成分(412)，通过LPF部(102)的低通滤波处理，与高分辨率图像(401)的频率成分(411)相比高频成分得以降低。
此外，高分辨率图像(403)的频率成分(413)，通过高分辨率化处理部(103)的高分辨率化处理，与低分辨率图像(402)的频率成分(412)相比高频成分增大。
与此相对，图5是例如输入图像的区域(302)是低分辨率图像的情况的例子。此时对LPF部(102)输入低分辨率图像(501)。此处，LPF部(102)对低分辨率图像(501)进行低通滤波处理，将低分辨率图像(502)输出到高分辨率化处理部(103)。高分辨率化处理部(103)降低低分辨率图像(502)的重叠失真，进行复原高频成分的高分辨率化处理，生成高分辨率图像(503)。
此处，低分辨率图像(501)、低分辨率图像(502)、高分辨率图像(503)的频率成分，例如分别如频率成分(511)、频率成分(512)、频率成分(513)所示。
即，低分辨率图像(501)的频率成分(511)，因为本来高频成分就低，所以即使进行LPF部(102)的低通滤波处理，低分辨率图像(502)的频率成分(512)也不像图4的频率成分(411)和频率成分(412)的例子那样发生变化。
但是，高分辨率图像(403)的频率成分(413)，通过高分辨率化处理部(103)的高分辨率化处理，与图4的频率成分(412)和频率成分(413)的例子同样的，与低分辨率图像(402)的频率成分(412)相比高频成分增大。
此处，实施例1的比较选择部(104)比较图4和图5所示的对LPF部(102)的输入图像(对图像信号处理装置(100)的输入图像)的频率成分、和来自高分辨率化处理部(103)的输出图像的频率成分。由此，判别对LPF部(102)的输入图像是低分辨率图像还是高分辨率图像。具体而言，比较对LPF部(102)的输入图像的频率成分和来自高分辨率化处理部(103)的输出图像的频率成分。
此处，如图5所示，对LPF部(102)的输入图像是高分辨率图像的情况下，频率成分(511)和频率成分(513)中，高频成分中的信号强度的差较大。
与此相对，如图4所示，对LPF部(102)的输入图像是高分辨率图像的情况下，频率成分(411)和频率成分(413)的高频成分的信号强度都比低分辨率图像(402)的频率成分(412)高，没有图5的频率成分(511)和频率成分(513)那样的高频成分的差。
由此，实施例1的比较选择部(104)比较对LPF部(102)的输入图像的频率成分和来自高分辨率化处理部(103)的输出图像的频率成分，如果频率成分的差较小，则判别对图像信号处理装置(100)的输入图像是高分辨率图像，选择输入图像并输出。
此外，实施例1的比较选择部(104)比较对LPF部(102)的输入图像的频率成分和来自高分辨率化处理部(103)的输出图像的频率成分，如果频率成分的差较大，则判别对图像信号处理装置(100)的输入图像是低分辨率图像，选择来自高分辨率化处理部(103)的输出图像并输出。
其中，以上说明列举区域(302)中的判别处理为例，但对于区域(301)也能够用同样的处理判别是低分辨率图像还是高分辨率图像。
其中，分辨率是否高的判定，例如，可以基于对象像素周边的图像的一次微分的大小判定，也可以基于像素值的离散值判定。
实施例1的比较选择部(104)，通过使LPF部(102)、高分辨率化处理部(103)和比较选择部(104)为以上说明的结构，对于输入图像中同时存在低分辨率图像区域和高分辨率图像区域的图像信号，能够判别低分辨率图像区域和高分辨率图像区域。
比较选择部(104)中选择的图像信号被高分辨率化处理部(105)高分辨率化处理并输出。但是，也可以不进行高分辨率化处理部(105)中的高分辨率化处理，而直接输出比较选择部(104)选择的图像信号。
由此，图像信号处理装置(100)中，进行高分辨率化处理部(105)的高分辨率化处理的情况下，输入到图像信号处理装置(100)的输入图像中的低分辨率图像区域，对进行了LPF部(102)的低通滤波处理、高分辨率化处理部(103)的重叠失真降低处理的图像信号进一步进行高分辨率化处理部(105)的轮廓强调处理并输出。此时，输入到图像信号处理装置(100)的输入图像中的高分辨率图像区域，不进行LPF部(102)、高分辨率化处理部(103)的处理，输出对输入图像信号进行了高分辨率化处理部(105)的轮廓强调处理的图像信号。如此，进行高分辨率化处理部(105)的高分辨率化处理的情况下，图像信号处理装置(100)中，对于输入图像中同时存在低分辨率图像区域和高分辨率图像区域的图像信号，能够按每个区域的分辨率进行适当的高分辨率处理。
此外，图像信号处理装置(100)中，不进行高分辨率化处理部(105)的高分辨率化处理的情况下，对于输入到图像信号处理装置(100)的输入图像中的低分辨率图像区域，输出进行了LPF部(102)低通滤波处理、高分辨率化处理部(103)的重叠失真降低处理的图像信号。此时，对于输入到图像信号处理装置(100)的输入图像中的高分辨率图像区域，不进行LPF部(102)、高分辨率化处理部(103)、高分辨率化处理部(105)的任何一个处理就输出图像信号。如此，不进行高分辨率化处理部(105)的高分辨率化处理的情况下，图像信号处理装置(100)中，对于输入图像中同时存在低分辨率图像区域和高分辨率图像区域的图像信号，能够按每个区域的分辨率选择有无高分辨率处理，作为输入图像的画面整体进行适当的高分辨率处理。
接着，用图8说明实施例1的图像信号处理的流程。
首先，对输入的图像信号进行LPF处理，从输入图像信号生成低分辨率图像(801)。接着对于进行了LPF处理的图像信号，进行高分辨率化处理(802)。此处，该高分辨率化处理，例如是降低重叠失真的超分辨率处理等。接着比较进行了高分辨率化处理的图像信号和输入图像信号，选择高分辨率化后的图像信号和输入图像信号中的一方(803)。此处，比较处理和选择处理，可以按1像素单位进行，也可以按多个像素构成的区域单位进行。接着在比较选择步骤(803)中选择了输入图像信号的情况下，对输入图像信号进行高分辨率化处理，输出高分辨率图像信号(804)。此处，高分辨率化部(105)中的高分辨率化处理，例如是进行强调轮廓的处理的高分辨率化处理等。
根据以上说明的实施例1的图像信号处理装置，对于输入图像中同时存在低分辨率图像区域和高分辨率图像区域的图像信号，能够比较、判别低分辨率图像区域和高分辨率图像区域。此外，通过基于该比较、判别结果选择输出图像信号，能够分别对低分辨率图像区域和高分辨率图像区域进行适当的高分辨率处理的选择、或有无高分辨率处理的选择。由此，根据实施例1的图像信号处理装置，即使是分辨率不同的图像同时存在的图像信号，也能够更加适当地进行高分辨率化处理。
根据实施例1，能够推定输入的图像信号中的增频图像信号区域和高清分辨率图像信号区域，对各区域进行最佳的高分辨率化处理。
[实施例2]
接着，用图2说明本发明的实施例2。
实施例1的图像信号处理装置(100)中，比较输入图像信号和高分辨率化处理部(103)的高分辨率化处理后的图像信号。实施例2的图像信号处理装置(200)中，对算出高分辨率化处理前后的像素值的差值绝对值的第一差值绝对值算出部(203)的输出、和算出输入图像的像素值与通过LPF部(102)后的像素值的差值绝对值的第二差值绝对值算出部(202)的输出进行比较并控制选择部(205)。即，与实施例1相比图像信号的比较处理不同。此处，通过将LPF处理后的图像信号用于比较处理，能够实现更加稳定的比较运算处理。
以下，说明实施例2的图像信号处理装置(200)的详细结构、动作。
实施例2的图像信号处理装置(200)中，LPF部(102)、高分辨率化处理部(103)、高分辨率化部(105)，与实施例1的图像信号处理装置(100)的LPF部(102)、高分辨率化处理部(103)、高分辨率化部(105)具有同样的结构、动作，所以省略说明。
实施例2的图像信号处理装置(200)中，第一差值绝对值算出部(202)算出输入图像信号的像素值与LPF处理后的图像信号的像素值的差值绝对值。第二差值绝对值算出部(203)算出LPF处理后的图像信号的像素值与高分辨率化处理后的图像信号的像素值的差值绝对值。比较部(204)比较上述第一差值绝对值和上述第二差值绝对值。
此处，用图4和图5说明第一差值绝对值算出部(202)、第二差值绝对值算出部(203)的算出结果和比较部(204)的比较处理。
首先，例如与实施例1同样的，图4和图5表示区域302的输入图像。此处，输入图像是高分辨率图像的情况下，第一差值绝对值算出部(202)算出高分辨率图像(401)与低分辨率图像(402)的差值绝对值。第二差值绝对值算出部(203)算出低分辨率图像(402)与高分辨率图像(403)的差值绝对值。如此，在输入图像是高分辨率图像的情况下，第一差值绝对值算出部(202)和第二差值绝对值算出部(203)都是低分辨率图像与高分辨率图像的绝对差值，都是比较大的值，第一差值绝对值算出部(202)的输出结果和第二差值绝对值算出部(203)的输出结果比较接近，两者的差是比较小的值。
接着，输入图像是低分辨率图像的情况下，第一差值绝对值算出部(202)算出低分辨率图像(501)与低分辨率图像(502)的差值绝对值。第二差值绝对值算出部(203)算出低分辨率图像(502)与高分辨率图像(503)的差值绝对值。如此，在输入图像是低分辨率图像的情况下，第一差值绝对值算出部(202)的输出结果，是低分辨率图像与低分辨率图像的绝对差值，是比较小的值。与此相对，第二差值绝对值算出部(203)的输出结果，是低分辨率图像与高分辨率图像的绝对差值，是比较大的值。如此，第一差值绝对值算出部(202)的输出结果与第二差值绝对值算出部(203)的输出结果相差比较多，其差是比较大的值。
由此，比较部(204)比较第一差值绝对值算出部(202)的输出结果与第二差值绝对值算出部(203)的输出结果，两者的差的绝对值在规定的阈值以下的情况下，判别输入图像是高分辨率图像。此外，两者的差的绝对值大于规定的阈值的情况下，判别输入图像是低分辨率图像。
选择部(205)基于比较部(204)的比较判别结果，基于输入图像是低分辨率图像还是高分辨率而选择输出的图像信号。选择部(205)的选择处理，与实施例1的比较选择部(104)同样，所以省略详细说明。
此处，比较部(204)的比较处理和选择部(205)的选择处理，可以按1像素单位进行，也可以按多个像素构成的区域单位进行。
接着，用图9说明实施例2的图像信号处理的流程。
对输入的图像信号进行LPF处理，从输入图像信号生成低分辨率图像(901)。接着对于进行了LPF处理的图像信号，进行高分辨率化处理(902)。接着算出输入图像信号的像素值与LPF处理后的图像信号的像素值的差值绝对值即第一差值绝对值以及LPF处理后的像素信号的像素值与高分辨率化处理后的图像信号的像素值的差值绝对值即第二差值绝对值(903)。接着比较第一差值绝对值与第二差值绝对值(904)。该比较处理的详细内容如上所述。接着基于该比较处理结果选择输出图像信号(905)。接着，对选择的图像信号进行高分辨率化处理，输出高分辨率图像信号(906)。
根据以上说明的实施例2的图像信号处理装置，与实施例1的图像信号处理装置不同，基于输入图像信号的像素值与LPF处理后的图像信号的像素值的差值绝对值以及LPF处理后的图像信号的像素值与高分辨率化处理后的图像信号的像素值的差值绝对值，能够比较、判别低分辨率图像区域和高分辨率图像区域。由此，实施例2的图像信号处理装置，在实施例1的效果之上，还具有通过将LPF处理后的图像信号用于比较处理、能够实现更加稳定的比较运算处理的效果。由此，根据实施例2的图像信号处理装置，即使是分辨率不同的图像同时存在的图像信号，也能够更加适当地进行高分辨率化处理。
[实施例3]
图6是表示本发明的实施例3的图像显示装置的结构图。
本实施例的图像显示装置，是进行上述实施例1或实施例2记载的图像信号处理的结构的图像显示装置。
该图中，图像显示装置(600)，例如具备：通过包括电视信号等的播送波和网络等输入播送信号、图像内容或图像内容等的输入部(601)，对从输入部(601)输入的内容进行录像或再现的录像再现部(602)，录像再现部(602)记录内容的内容存储部(603)，对于录像再现部(602)再现的图像信号进行处理的实施例1记载的图像信号处理装置即图像信号处理部(604)，显示图像信号处理部(604)处理后的图像信号的显示部(605)，输出录像再现部(602)再现的声音信号的声音输出部(606)，控制图像显示装置(600)的各构成部的控制部(607)，用户进行图像显示装置(600)的操作的用户界面部(608)等。
图像信号处理部(604)的详细结构、动作，与实施例1或实施例2记载的图像信号处理装置相同，所以省略说明。
因为图像显示装置(600)具备实施例1或实施例2记载的图像信号处理装置即图像信号处理部(604)，所以能够使输入到输入部(601)的图像信号成为更加适当地高分辨率化后的图像信号而在显示部(605)显示。
此外，在再现内容存储部(603)中存储的图像内容或图像内容时，也能够更加适当地变换为高分辨率化的图像信号并在显示部(605)中显示。
此外，也可以将图像信号处理部(604)包括在录像再现部(602)中，在录像时也进行上述图像信号处理。该情况下，在再现时不需要进行上述图像信号处理，所以具有能够降低再现时的处理负荷的效果。
根据以上说明的本发明的实施例3的图像显示装置，能够实现具有实施例1或实施例2所示效果的图像显示装置。即，能够更加适当地进行图像的高分辨率化并进行显示。
[实施例4]
图7是表示本发明的实施例4的录像再现装置的结构图。
本实施例的录像再现装置，是进行上述实施例1或实施例2的实施例中记载的图像信号处理的结构的录像再现装置。
该图中，录像再现装置(700)，例如具备：通过包括电视信号等的播送波或网络等输入例如播送信号、图像内容或图像内容等的输入部(701)，对从输入部(701)输入的内容进行录像或再现的录像再现部(702)，录像再现部(702)记录内容的内容存储部(703)，对于录像再现部(702)再现的图像信号进行处理的实施例1记载的图像信号处理装置即图像信号处理部(704)，将图像信号处理部(704)处理后的图像信号输出到其它装置等的图像输出部(705)，将录像再现部(702)再现的声音信号输出到其它装置等的声音输出部(706)，控制录像再现装置(700)的各构成部的控制部(707)，用户进行录像再现装置(700)的操作的用户界面部(708)等。
因为录像再现装置(700)具备实施例1记载的图像信号处理装置即图像信号处理部(704)，所以能够使输入到输入部(701)的图像信号成为更加适当地高分辨率化后的图像信号，并输出到其它装置等。
此外，也可以将图像信号处理部(704)包括在录像再现部(702)中，在录像时也进行上述图像信号处理。该情况下，在再现时不需要进行上述图像信号处理，所以具有能够降低再现时的处理负荷的效果。
根据以上说明的本发明的实施例4的录像再现装置，能够实现具有实施例1或实施例2所示效果的录像再现装置。即，能够更加适当地对图像进行高分辨率化并进行录像、再现或输出。
Claims (15)
1.一种图像信号处理装置，其特征在于，包括：
对作为输入图像的第一图像信号进行空间低通滤波处理的低通滤波部；
对所述低通滤波处理后的图像进行高分辨率化处理，生成第二图像信号的高分辨率化处理部；和
比较选择部，其进行比较所述第一图像信号和所述第二图像信号中对应的区域的处理，基于该比较结果，对于所述区域选择所述第一图像信号和所述第二图像信号中的一者。
2.如权利要求1所述的图像信号处理装置，其特征在于：
对于所述输入图像的所述对应的区域，基于比较对象区域的周边的像素的一次微分的大小或者所述比较对象区域的周边的像素的离散值，判定分辨率的高低。
3.如权利要求1所述的图像信号处理装置，其特征在于：
所述比较选择部，
在所述比较处理中，比较所述第一图像信号的频率成分和所述第二图像信号的频率成分。
4.如权利要求1所述的图像信号处理装置，其特征在于：
所述高分辨率化处理部，
进行降低重叠失真的超分辨率处理。
5.如权利要求1所述的图像信号处理装置，其特征在于：
所述区域是1像素区域。
6.一种图像信号处理装置，其特征在于，包括：
对作为输入图像的第一图像信号进行空间低通滤波处理的低通滤波部；
对所述低通滤波处理后的图像进行高分辨率化处理，生成第二图像信号的高分辨率化处理部；
算出所述第一图像信号的像素值与所述低通滤波处理后的图像信号的像素值的差值绝对值的第一差值绝对值算出部；
算出所述低通滤波处理后的图像信号的像素值与所述第二图像信号的像素值的差值绝对值的第二差值绝对值算出部；
比较所述第一差值绝对值与所述第二差值绝对值的比较部；和
基于所述比较部的比较结果选择所述第一图像信号和所述第二图像信号中的一者的选择部。
7.如权利要求6所述的图像信号处理装置，其特征在于：
所述选择部，
在所述比较部的比较结果中，在所述第一差值绝对值与所述第二差值绝对值的差的绝对值在规定的阈值以下的情况下，选择所述第一图像信号，在所述第一差值绝对值与所述第二差值绝对值的差的绝对值大于规定的阈值的情况下，选择所述第二图像信号。
8.如权利要求6所述的图像信号处理装置，其特征在于：
所述比较部的比较处理或所述选择部的选择处理，按1像素单位进行。
9.如权利要求6所述的图像信号处理装置，其特征在于：
所述高分辨率化处理部，
进行降低重叠失真的超分辨率处理。
10.一种图像显示装置，其特征在于，包括：
作为权利要求1所述的图像信号处理装置的图像信号处理部；和
基于来自所述图像信号处理部的图像信号进行图像的显示的显示部。
11.一种录像再现装置，其特征在于，包括：
存储输入图像的存储部；和
如权利要求1所述的图像信号处理装置，其对由所述存储部存储、再现的图像信号进行图像处理，作为该录像再现装置的图像信号处理部。
12.一种图像信号处理方法，其特征在于，包括：
对作为输入图像的第一图像信号进行空间低通滤波处理的低通滤波处理步骤；
对所述低通滤波处理后的图像进行高分辨率化处理，生成第二图像信号的高分辨率化处理步骤；和
比较选择步骤，进行比较所述第一图像信号和所述第二图像信号中对应的区域的处理，基于该比较结果，对于所述区域选择所述第一图像信号和所述第二图像信号中的一者。
13.如权利要求12所述的图像信号处理方法，其特征在于：
所述区域是1像素区域。
14.一种图像信号处理方法，其特征在于，包括：
对作为输入图像的第一图像信号进行空间低通滤波处理的低通滤波处理步骤；
对所述低通滤波处理后的图像进行高分辨率化处理，生成第二图像信号的高分辨率化处理步骤；
算出所述第一图像信号的像素值与所述低通滤波处理后的图像信号的像素值的差值绝对值的第一差值绝对值算出步骤；
算出所述低通滤波处理后的图像信号的像素值与所述第二图像信号的像素值的差值绝对值的第二差值绝对值算出步骤；
比较所述第一差值绝对值与所述第二差值绝对值的比较步骤；和
基于所述比较部的比较结果选择所述第一图像信号和所述第二图像信号中的一者的选择步骤。
15.如权利要求14所述的图像信号处理方法，其特征在于：
所述比较部的比较处理或所处选择部的选择处理，按1像素单位进行。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008-241959 | 2008-09-22 | ||
| JP2008241959 | 2008-09-22 | ||
| JP2008241959A JP5066041B2 (ja) | 2008-09-22 | 2008-09-22 | 画像信号処理装置、画像信号処理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN101686320A CN101686320A (zh) | 2010-03-31 |
| CN101686320B true CN101686320B (zh) | 2011-12-28 |
Family
ID=41435457
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN200910140629.5A Expired - Fee Related CN101686320B (zh) | 2008-09-22 | 2009-06-08 | 图像信号处理装置和图像信号处理方法 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US8224120B2 (zh) |
| EP (1) | EP2166758B1 (zh) |
| JP (1) | JP5066041B2 (zh) |
| CN (1) | CN101686320B (zh) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9324130B2 (en) | 2010-10-11 | 2016-04-26 | Hewlett-Packard Development Company, L.P. | First image and a second image on a display |
| US20130177242A1 (en) * | 2012-01-10 | 2013-07-11 | James E. Adams, Jr. | Super-resolution image using selected edge pixels |
| US9225979B1 (en) * | 2013-01-30 | 2015-12-29 | Google Inc. | Remote access encoding |
| CN103795993A (zh) * | 2014-03-07 | 2014-05-14 | 青岛威力电子科技有限公司 | 图像显示设备的图像信号处理装置 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1510927A (zh) * | 2002-12-23 | 2004-07-07 | ��˹���´﹫˾ | 按选定分辨率发送感兴趣的数字视频数据选定区域的方法 |
| CN1645899A (zh) * | 2004-01-23 | 2005-07-27 | 三洋电机株式会社 | 图像信号处理装置 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5911124A (en) * | 1997-02-03 | 1999-06-08 | Motorola, Inc. | Method and apparatus for applying echo mitigation in a communication device |
| JP2005328150A (ja) * | 2004-05-12 | 2005-11-24 | Toshiba Corp | 放送受信装置及び放送受信方法 |
| JP4650123B2 (ja) * | 2005-06-27 | 2011-03-16 | ソニー株式会社 | 画像処理装置、画像処理方法、およびプログラム |
| EP1895467A2 (en) | 2006-08-29 | 2008-03-05 | Sony Corporation | Image determination by frequency domain processing |
| JP5056242B2 (ja) * | 2006-08-29 | 2012-10-24 | ソニー株式会社 | 画像判定装置、画像判定方法、およびプログラム |
| EP2012532A3 (en) * | 2007-07-05 | 2012-02-15 | Hitachi Ltd. | Video displaying apparatus, video signal processing apparatus and video signal processing method |
| JP2009015025A (ja) | 2007-07-05 | 2009-01-22 | Hitachi Ltd | 画像信号処理装置および画像信号処理方法 |
-
2008
- 2008-09-22 JP JP2008241959A patent/JP5066041B2/ja not_active Expired - Fee Related
-
2009
- 2009-05-29 US US12/474,803 patent/US8224120B2/en not_active Expired - Fee Related
- 2009-06-02 EP EP09251466.0A patent/EP2166758B1/en not_active Not-in-force
- 2009-06-08 CN CN200910140629.5A patent/CN101686320B/zh not_active Expired - Fee Related
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1510927A (zh) * | 2002-12-23 | 2004-07-07 | ��˹���´﹫˾ | 按选定分辨率发送感兴趣的数字视频数据选定区域的方法 |
| CN1645899A (zh) * | 2004-01-23 | 2005-07-27 | 三洋电机株式会社 | 图像信号处理装置 |
Non-Patent Citations (1)
| Title |
|---|
| JP特开平6-161406A 1994.06.07 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2010073075A (ja) | 2010-04-02 |
| CN101686320A (zh) | 2010-03-31 |
| US8224120B2 (en) | 2012-07-17 |
| US20100074536A1 (en) | 2010-03-25 |
| EP2166758A3 (en) | 2011-11-02 |
| EP2166758A2 (en) | 2010-03-24 |
| JP5066041B2 (ja) | 2012-11-07 |
| EP2166758B1 (en) | 2017-03-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8885099B2 (en) | Methods and systems for improving low resolution and low frame rate video | |
| US8819760B2 (en) | Methods and systems for improving low-resolution video | |
| JP4444354B2 (ja) | 画像処理装置、および画像処理方法 | |
| US20090290063A1 (en) | System and Method for Processing Videos and Images to a Determined Quality Level | |
| CN101686320B (zh) | 图像信号处理装置和图像信号处理方法 | |
| CN101969557B (zh) | 图像记录设备、图像记录方法 | |
| US20240348745A1 (en) | Video conversion technology | |
| JP5172769B2 (ja) | 映像装置、映像処理方法およびこの装置における画質モード設定方法 | |
| CN107155131A (zh) | 一种视频图像分辨率处理系统及方法 | |
| JP5509306B2 (ja) | 画質モード設定方法、映像処理方法、および映像装置 | |
| JP2005159830A (ja) | 信号処理装置および方法、記録媒体、並びにプログラム | |
| EP2285123A2 (en) | Video processing apparatus | |
| JP4991884B2 (ja) | 画像処理装置、および画像処理方法 | |
| US7551233B2 (en) | Image processing circuit having capability of reducing distorted/falsified phenomena of color component of decoded video data, and image processing method thereof | |
| WO2004054273A1 (en) | System and method for creating a high definition visual effect from mpeg-2 mp@ml compressed video | |
| KR100404218B1 (ko) | 디지털 티브이의 영상 출력 장치 | |
| CN100493173C (zh) | 一种电视视频信号的扫描方法 | |
| JP2010028315A (ja) | 画像信号処理装置及び画像信号処理方法 | |
| JPH07312740A (ja) | 映像信号記録再生装置 | |
| JP2007243867A (ja) | 映像記録再生装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20111228 Termination date: 20180608 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |