KR20070115599A - 화상 신호 처리 장치, 화상 표시 장치, 및 화상 신호의고해상도화 방법 - Google Patents

화상 신호 처리 장치, 화상 표시 장치, 및 화상 신호의고해상도화 방법 Download PDF

Info

Publication number
KR20070115599A
KR20070115599A KR1020070036887A KR20070036887A KR20070115599A KR 20070115599 A KR20070115599 A KR 20070115599A KR 1020070036887 A KR1020070036887 A KR 1020070036887A KR 20070036887 A KR20070036887 A KR 20070036887A KR 20070115599 A KR20070115599 A KR 20070115599A
Authority
KR
South Korea
Prior art keywords
image
data
frame
input
frames
Prior art date
Application number
KR1020070036887A
Other languages
English (en)
Other versions
KR100908768B1 (ko
Inventor
마사히로 가게야마
고우이찌 하마다
시게끼 나가야
Original Assignee
가부시키가이샤 히타치세이사쿠쇼
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 가부시키가이샤 히타치세이사쿠쇼 filed Critical 가부시키가이샤 히타치세이사쿠쇼
Publication of KR20070115599A publication Critical patent/KR20070115599A/ko
Application granted granted Critical
Publication of KR100908768B1 publication Critical patent/KR100908768B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4007—Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/015—High-definition television systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)
  • Image Processing (AREA)

Abstract

화상 신호, 특히 동화상의 화상 신호를 적은 프레임수로 바람직하게 고해상도화하기 위한 기술을 제공한다. 본 발명에 따른 화상 신호 처리 장치는, 기준으로 되는 입력 화상 프레임 상의 화상 데이터와 다른 입력 화상 프레임 상의 대응하는 각 화상 데이터를 이용하여 샘플링 위상차를 추정하는 위치 추정부(101)와, 상기 샘플링 위상차의 정보를 이용하여 각 입력 화상 프레임의 화상 데이터를 움직임 보상(motion compensation)함과 함께 화소수를 n배로 증가시키는 움직임 보상(motion compensation)·업 레이트부(115)와, 고밀도화한 각 화상 프레임의 화상 데이터를 일정량만큼 위상 시프트하는 위상 시프트부(116)와, 상기 샘플링 위상차의 정보를 이용하여 계수를 결정하는 계수 결정부(109)와, 상기 위상 시프트의 전후의 각 화상 데이터에 상기 계수를 곱하여 가중 가산함으로써 (n-1)개의 에일리어싱 성분(aliasing component)을 제거하여 출력하는 에일리어싱 성분(aliasing component) 제거부(117)를 구비한다.
위상 시프트부, 움직임 보상, 에일리어싱 성분, 계수 결정부, 샘플링 위상차

Description

화상 신호 처리 장치, 화상 표시 장치, 및 화상 신호의 고해상도화 방법{IMAGE SIGNAL PROCESSING APPARATUS, IMAGE DISPLAY APPARATUS, AND METHOD FOR PRODUCING HIGH RESOLUTION IMAGE SIGNAL}
도 1은 본 발명에 따른 제1 실시예의 설명도.
도 2는 일반적인 고해상도화 화상 신호 처리의 동작을 설명한 도면.
도 3은 종래 기술의 동작을 설명한 도면.
도 4는 본 발명에 따른 제1 실시예의 동작을 설명한 도면.
도 5는 본 발명에 따른 제1 실시예의 설명도.
도 6은 본 발명에 따른 제1 실시예의 설명도.
도 7은 본 발명에 따른 제1 실시예의 설명도.
도 8은 본 발명에 따른 제1 실시예의 설명도.
도 9는 본 발명에 따른 제1 실시예의 설명도.
도 10은 본 발명에 따른 제2 실시예의 설명도.
도 11은 본 발명에 따른 제3 실시예의 설명도.
도 12는 본 발명에 따른 제3 실시예의 설명도.
도 13은 본 발명에 따른 제3 실시예의 설명도.
도 14는 본 발명에 따른 제4 실시예의 설명도.
도 15는 본 발명에 따른 제5 실시예의 설명도.
도 16은 본 발명에 따른 제6 실시예의 설명도.
도 17은 본 발명과 종래 기술의 동작의 차이를 설명한 도면.
도 18은 본 발명에 따른 제7 실시예의 설명도.
도 19는 본 발명에 따른 제7 실시예의 설명도.
<부호의 설명>
101 : 위치 추정(motion estimation)부
102 : 위상차 θ
103, 104 : 업 레이트기
105, 107 : 지연기
106, 108 : π/2 위상 시프트기
109 : 계수 결정부
110, 112, 111, 113 : 승산기
114 : 가산기
115 : 움직임 보상(motion compensation)·업 레이트부
116 : 위상 시프트부
117 : 에일리어싱 성분(aliasing component) 제거부
[참고 문헌 1] 아오키 신 "복수의 디지털 화상 데이터에 의한 초해상 처리", Ricoh Technical Report pp.19-25, No.24, NOVEMBER, 1998
[참고 문헌 2] 안도 시게루 "화상의 시공간 미분산법을 이용한 속도 벡터 분포 계측 시스템", 계측 자동 제어 학회 논문집, pp.1330-1336, Vol.22, No.12, 1986
[참고 문헌 3] 고바야시 히로유키 외 "DCT 변환에 기초하는 화상의 위상 한정 상관법", 신학기법 IEICE Technical Report ITS2005-92, IE2005-299(2006-02), pp.73-78
본 발명은, 화상 신호를 고해상도화하기 위한 기술에 관한 것으로, 특히 복수의 화상 프레임을 합성함으로써, 화상 프레임을 구성하는 화소수를 늘림과 함께 불필요한 에일리어싱 성분(aliasing component)을 제거하여 고해상도화를 행하는 기술에 관한 것이다.
최근 텔레비전 수상기는 대화면화가 진행되고 있어, 방송이나 통신, 축적 매체 등으로부터 입력된 화상 신호를 그대로 표시하는 것은 아니고, 디지털 신호 처리에 의해 수평·수직 방향의 화소수를 늘려서 표시하는 것이 일반적으로 행해지고 있다. 이 때, 일반적으로 알려져 있는 sinc 함수를 이용한 보간(interpolation) 로우 패스 필터나 스플라인 함수 등에 의해 화소수를 늘리는 것만으로는 해상도를 높일 수는 없다.
따라서, 참고 문헌 1에 기재된 바와 같이, 입력된 복수의 화상 프레임(이하, 프레임이라고 약기)을 합성하여 1매의 프레임으로 함으로써, 고해상도화하면서 화소수를 늘리는 기술(이하, 종래 기술)이 제안되어 있다. 이 종래 기술에서는, (1) 위치 추정(motion estimation), (2) 광대역 보간, (3) 가중합의 3개의 처리에 의해 고해상도화를 행한다. 여기에서, (1) 위치 추정(motion estimation)은, 입력된 복수의 화상 프레임의 각 화상 데이터를 이용하여, 각 화상 데이터의 샘플링 위상(표본화 위치)의 차를 추정하는 것이다. (2) 광대역 보간은, 각 화상 데이터를 에일리어싱 성분(aliasing component)도 포함시켜, 원 신호의 고주파 성분을 모두 투과하는 대역이 넓은 로우 패스 필터를 이용하여 화소수(샘플링점)를 보간(interpolation)하여 늘려서, 화상 데이터를 고밀도화하는 것이다. (3) 가중합은, 각 고밀도화 데이터의 샘플링 위상에 따른 가중 계수에 의해 가중합을 취함으로써, 화소 샘플링 시에 발생한 에일리어싱 성분(aliasing component)을 상쇄하여 제거함과 함께, 동시에 원 신호의 고주파 성분을 복원하는 것이다.
도 2에, 이 고해상도화 기술의 개요를 도시한다. 도 2의 (a)에 도시한 바와 같이, 상이한 시간축 상의 프레임#1(201), 프레임#2(202), 프레임#3(203)이 입력되고, 이들을 합성하여 출력 프레임(206)을 얻는 것을 상정한다. 간단히 하기 위해, 우선 피사체가 수평 방향으로 이동(204)한 경우를 고려하여, 수평선(205) 상의 1차원의 신호 처리에 의해 고해상도화하는 것을 고려한다. 이 때, 도 2의 (b)와 도 2의 (d)에 도시한 바와 같이, 프레임#2(202)와 프레임#1(201)에서는, 피사체의 이동(204)의 양에 따라서 신호 파형의 위치 어긋남이 발생한다. 상기 (1) 위치 추정(motion estimation)에 의해 이 위치 어긋남량을 구하고, 도 2의 (c)에 도시한 바와 같이, 위치 어긋남이 없어지도록 프레임#2(202)를 움직임 보상(motion compensation)(207)함과 함께, 각 프레임의 화소(208)의 샘플링 위상(209, 210) 간의 위상차 θ(211)를 구한다. 이 위상차 θ(211)에 기초하여, 상기 (2) 광대역 보간 및 (3) 가중합을 행함으로써, 도 2의 (e)에 도시한 바와 같이, 원래의 화소(208)의 정 중간(위상차 θ=π)의 위치에 신규 화소(212)를 생성함으로써, 고해상도화를 실현한다. 여기에서, 상기 (1) 위치 추정(motion estimation)으로서, 참고 문헌 2나 참고 문헌 3에 기재되어 있는 바와 같은 수많은 방법이 제안되어 있으며, 이들을 그대로 이용할 수 있다. (2) 광대역 보간에 대해서는, 참고 문헌 1에 기재된 바와 같이, 나이키스트 주파수의 2배의 통과 대역을 갖는 일반적인 로우 패스 필터에 의해 실현할 수 있다. (3) 가중합에 대해서는 후술한다. 또한, 실제로는 피사체의 움직임이 평행 이동뿐만 아니라, 회전이나 확대·축소 등의 움직임을 따르는 것도 고려되지만, 프레임간의 시간 간격이 미소한 경우나 피사체의 움직임이 느린 경우에는, 이들의 움직임도 국소적인 평행 이동에 근사하여 고려할 수 있다.
상기한 종래 기술에 의해 1차원 방향의 2배의 고해상도화를 행하는 경우, 상기 (3)의 가중합을 행할 때에, 도 3에 도시한 바와 같이, 적어도 3매의 프레임 화상의 신호를 이용할 필요가 있었다. 여기에서, 도 3은, 1차원의 주파수 영역에서, 각 성분의 주파수 스펙트럼을 도시하는 도면이다. 도 3에서, 주파수축으로부터의 거리가 신호 강도를 나타내고, 주파수축을 중심으로 한 회전각이 위상을 나타낸다. 상기 (3)의 가중합에 대해서, 이하에 자세하게 설명한다.
전술된 바와 같이, 상기 (2)의 광대역 보간에서, 나이키스트 주파수의 2배의 대역(주파수 0∼샘플링 주파수 fs까지의 대역)을 투과하는 광대역 로우 패스 필터에 의해 화소 보간하면, 원 신호와 동일한 성분(이하, 원 성분(original component))과, 샘플링 위상에 따른 에일리어싱 성분(aliasing component)의 합이 얻어진다. 이 때, 3매의 프레임 화상의 신호에 대하여 상기 (2) 광대역 보간의 처리를 행하면, 도 3의 (a)에 도시한 바와 같이, 각 프레임의 원 성분(original component)(301, 302, 303)의 위상은 모두 일치하고, 에일리어싱 성분(aliasing component)(304, 305, 306)의 위상은 각 프레임의 샘플링 위상의 차에 따라서 회전하는 것이 잘 알려져 있다. 각각의 위상 관계를 알기 쉽게 하기 위해, 각 프레임의 원 성분(original component)의 위상 관계를 도 3의 (b)에 도시하고, 각 프레임의 에일리어싱 성분(aliasing component)의 위상 관계를 도 3의 (c)에 도시한다.
여기에서, 3매의 프레임 화상의 신호에 대하여, 승산하는 계수를 적절하게 선택하여 상기 (3) 가중합을 행함으로써, 각 프레임의 에일리어싱 성분(aliasing component)(304, 305, 306)을 서로 상쇄하여 제거할 수 있으며, 원 성분(original component)만을 추출할 수 있다. 이 때, 각 프레임의 에일리어싱 성분(aliasing component)(304, 305, 306)의 벡터합을 0으로 하는, 즉, Re축(실축)의 성분과 Im축(허축)의 성분을 양쪽 모두 0으로 하기 위해서는, 적어도 3개의 에일리어싱 성분(aliasing component)이 필요하게 된다. 따라서, 2배의 고해상도화를 실현하기 위해, 즉 1개의 에일리어싱 성분(aliasing component)을 제거하기 위해, 적어도 3 매의 프레임 화상의 신호를 이용할 필요가 있었다.
마찬가지로, 비특허 문헌 1에 기재된 바와 같이, n배(n은 2이상의 정수)의 고해상도화를 실현하기 위해, 즉 (n-1)개의 에일리어싱 성분(aliasing component)을 제거 하기 위해, 적어도 (2n-1)매의 프레임 화상의 신호를 이용할 필요가 있었다.
따라서 종래 기술은, 프레임 메모리나 신호 처리 회로의 규모가 커져서 경제적이지 않다. 또한, 시간적으로 떨어진 수많은 프레임 화상의 위치 추정(motion estimation)을 정확히 행할 필요가 있기 때문에 구성이 복잡하게 된다. 즉, 종래 기술은, 예를 들면 텔레비전 방송 신호 등의 동화상의 프레임을 고해상도화하는 것이 곤란하다.
본 발명은, 바람직하게 화상 신호를 고해상도화하기 위한 기술을 제공한다. 보다 상세하게는, 본 발명은, 보다 적은 매수의 프레임을 이용함으로써, 동화상의 화상 신호를 바람직하게 고해상도화하기 위한 기술을 제공한다.
본 발명은, n매(n은 2이상의 정수)의 화상 프레임을 합성함으로써, 화상 프레임을 구성하는 화소수를 n배로 증가시켜 출력 화상 프레임을 얻는다. 보다 구체적으로는, 본 발명은, 기준으로 되는 상기 입력 화상 프레임 상의 화상 데이터와 다른 입력 화상 프레임 상의 대응하는 각 화상 데이터를 이용하여 샘플링 위상차를 추정하고, 이 샘플링 위상차의 정보를 이용하여 각 입력 화상 프레임의 화상 데이터를 움직임 보상(motion compensation)함과 함께 화소수를 n배로 증가시킨다. 그 리고, 이 화소수가 증가된 각 화상 프레임의 화상 데이터를 소정량 위상 시프트하고, 이 위상 시프트의 전후의 각 화상 데이터에, 상기 샘플링 위상차에 기초하여 결정된 계수를 곱하여 서로 가산함으로써 (n-1)개의 에일리어싱 성분(aliasing component)을 제거한다.
또한, 화소 보간에 의해 입력 화상 프레임의 화상 데이터를 증가시키는 보조적 화소 보간 수단을 설치하고, 상기 계수를 결정할 수 없을 때에, 상기 에일리어싱 성분(aliasing component)을 제거한 결과 대신에 상기 보조적 화소 보간 수단의 결과를 출력하도록 구성하여도 된다.
본 발명에 따르면, 보다 바람직하게 화상 신호를 고해상도화하는 것이 가능하게 된다.
<실시예>
본원 발명의 상기 목적 및 그 외의 목적, 특징 및 장점은 첨부 도면과 결부하여 후술된 바람직한 실시예의 상세한 설명의 관점에서 더욱 명확해질 것이다.
이상, 본 발명에 따른 여러 가지 실시예를 제시하고 기술하였지만, 본 발명의 범위를 벗어남 없이 변경 및 변경될 수 있다는 것을 이해하여야 한다. 따라서, 본 명세서에 제시되고 기술된 상세 내용에 한정하려는 것은 아니며, 첨부된 특허 청구 범위 내에 있는 바와 같은 모든 변형 및 변경들을 포함하는 것이다.
이하에 설명하는 본 발명의 실시예에 따른 화상 신호 처리 장치, 및 화상 신호를 고해상도화하기 위한 방법, 및 그것을 실행하기 위한 프로그램에서는, 고해상도화를 행할 때에, 입력한 화상 데이터의 위상을 소정량(예를 들면 π/2) 시프트 함으로써, 에일리어싱 성분(aliasing component)을 제거한다. 이하, 본 발명의 실시예에 대하여, 도면을 참조하여 설명한다.
(실시예 1)
도 1에, 본 발명에 따른 화상 신호 처리 장치의 제1 실시예를 도시하고, 그 특징에 대하여 설명한다. 본 실시예에 따른 화상 신호 처리 장치는, 예를 들면 텔레비전 수상기 등의 화상 표시 장치에 적용된다. 이하의 본 실시예의 설명에서는, 화상 신호 처리 장치로서 화상 표시 장치를 예로 하여 설명한다. 도 1에서, 본 실시예에 따른 화상 신호 처리 장치는, 예를 들면 텔레비전 방송 신호 등의 동화상의 프레임열이 입력되는 입력부(1)와, 이 입력부(1)로부터 입력된 프레임을 고해상도화하기 위한 해상도 변환부(2)와, 또한 이 해상도 변환부(2)에 의해 고해상도화된 프레임에 기초하여 화상을 표시하는 표시부(3)를 구비하고 있다. 이 표시부(3)로서, 예를 들면 플라즈마 디스플레이 패널, 액정 표시 패널, 혹은 전자/전해 방출형 디스플레이 패널이 이용된다. 이하, 해상도 변환부(2)의 상세에 대하여 설명한다.
도 1에서, 우선 위치 추정(motion estimation)부(101)에 의해, 입력부(1)에 입력된 프레임#1의 처리 대상의 화소의 샘플링 위상(표본화 위치)을 기준으로 하여, 프레임#2 상의 대응하는 화소의 위치를 추정하고, 샘플링 위상차 θ(102)를 구한다. 다음으로, 움직임 보상(motion compensation)·업 레이트부(115)의 업 레이트기(103, 104)에 의해, 위상차 θ(102)의 정보를 이용하여 프레임#2를 움직임 보상(motion compensation)하여 프레임#1과 위치를 맞춤과 함께, 프레임#1과 프레임#2의 화소수를 각각 2배로 증가시켜 고밀도화한다. 위상 시프트부(116)에서는, 이 고밀도화한 데이터의 위상을 일정량만큼 시프트한다. 여기에서, 데이터의 위상을 일정량만큼 시프트하는 수단으로서, π/2 위상 시프트기(106, 108)를 이용할 수 있다. 또한, π/2 위상 시프트기(106, 108)에서 발생하는 지연을 보상하기 위해, 지연기(105, 107)에 의해 고밀도화한 프레임#1과 프레임#2의 신호를 지연시킨다. 에일리어싱 성분(aliasing component) 제거부(117)에서는, 지연기(105, 107)와 힐버트 변환(Hilbert Transform)기(106, 108)의 각 출력 신호에 대하여, 계수 결정기(109)에서 위상차 θ(102)를 바탕으로 생성한 계수 C0, C2, C1, C3을 승산기(110, 112, 111, 113)에서 각각 승산하고, 가산기(114)에서 이들의 신호를 가산하여 출력을 얻는다. 이 출력은, 표시부(3)에 공급된다. 또한, 위치 추정(motion estimation)부(101)는, 상기 종래 기술을 그대로 이용하여 실현할 수 있다. 업 레이트 기(103, 104), π/2 위상 시프트기(106, 108), 에일리어싱 성분(aliasing component) 제거부(117)의 각 상세에 대해서는 후술한다.
도 4에, 본 발명의 제1 실시예의 동작을 도시한다. 도 4는, 도 1에 도시한 지연기(105, 107)와 π/2 위상 시프트기(106, 108)의 각 출력을 1차원의 주파수 영역에서 나타낸 것이다. 도 4의 (a)에서, 지연기(105, 107)로부터 출력된 업 레이트 후의 프레임#1과 프레임#2의 신호는 각각, 원 성분(original component)(401, 402)과, 원래의 샘플링 주파수(fs)로부터 에일리어싱된 에일리어싱 성분(aliasing component)(405, 406)을 더한 신호가 된다. 이 때, 에일리어싱 성분(aliasing component)(406)은 전술한 위상차 θ(102)만큼 위상이 회전하고 있다. 한편, π/2 위상 시프트기(106, 108)로부터 출력된 업 레이트 후의 프레임#1과 프레임#2의 신 호는 각각, π/2 위상 시프트 후의 원 성분(original component)(403, 404)과, π/2 위상 시프트 후의 에일리어싱 성분(aliasing component)(407, 408)을 더한 신호로 된다. 도 4의 (b) 및 도 4의 (c)는, 도 4의 (a)에 도시한 각 성분의 위상 관계를 알기 쉽게 하기 위해, 원 성분(original component)과 에일리어싱 성분(aliasing component)을 각각 추출하여 나타낸 것이다. 여기에서, 도 4의 (b)에 도시하는 4개의 성분의 벡터합을 취한 때에, Re축의 성분을 1로 하고, Im축의 성분을 0으로 함과 함께, 도 4의 (c)에 도시하는 4개의 성분의 벡터합을 취한 때에, Re축과 Im축의 양방의 성분을 0으로 하도록, 각 성분에 승산하는 계수를 결정하여 가중합을 취하면, 에일리어싱 성분(aliasing component)을 상쇄하여 캔슬하고, 원 성분(original component)만을 추출할 수 있다. 즉, 2매의 프레임 화상만을 이용하여, 1차원 방향의 2배의 고해상도화를 행하는 화상 신호 처리 장치를 실현할 수 있다. 이 계수 결정 방법의 상세에 대해서는 후술한다.
도 5에, 본 발명의 제1 실시예에 이용하는 업 레이트기(103, 104)의 동작을 도시한다. 도 5에서, 횡축은 주파수를, 종축은 이득(입력 신호 진폭에 대한 출력 신호 진폭의 비의 값)을 나타내고, 업 레이트기(103, 104)의 「주파수-이득(frequency-gain)」 특성을 나타내고 있다. 여기에서, 업 레이트기(103, 104)에서는, 원래의 신호의 샘플링 주파수(fs)에 대하여 2배의 주파수(2fs)를 새로운 샘플링 주파수로 하고, 원래의 화소 간격의 정 중간의 위치에 새로운 화소의 샘플링점(=제로점)을 삽입함으로써 화소수를 2배로 하여 고밀도화함과 함께, -fs∼+fs 사이의 주파수를 모두 이득 2.0의 통과 대역으로 하는 필터를 건다. 이 때, 도 5에 도시한 바와 같이, 디지털 신호의 대칭성에 의해, 2fs의 정수배의 주파수마다 반복하는 특성으로 된다.
도 6에, 본 발명의 제1 실시예에 이용하는 업 레이트기(103, 104)의 구체예를 도시한다. 도 6은, 도 5에 도시한 주파수 특성을 역 푸리에 변환하여 얻어지는 필터의 탭 계수를 나타내고 있다. 이 때, 각 탭 계수 Ck(단, k는 정수)는 일반적으로 알려져 있는 sinc 함수로 되고, 위상차 θ(102)를 고려하여, Ck=2sin(πk-θ)/(πk-θ)로 하면 된다. 또한, 업 레이트기(103)에서는, 위상차 θ(102)를 0으로 놓고, Ck=2sin(πk)/(πk)로 하면 된다. 또한, 위상차 θ(102)를, 정수 화소 단위(2π)의 위상차+소수 화소 단위의 위상차로 나타냄으로써, 정수 화소 단위의 위상차의 보상에 대해서는 단순한 화소 시프트에 의해 실현하고, 소수 화소 단위의 위상차의 보상에 대해서는 상기 업 레이트기(103, 104)의 필터를 이용하여도 된다.
도 7에, 본 발명의 제1 실시예에 이용하는 π/2 위상 시프트기(106, 108)의 동작예를 도시한다. π/2 위상 시프트기(106, 108)로서, 일반적으로 알려져 있는 힐버트 변환(Hilbert Transform)기를 이용할 수 있다. 도 7의 (a)에서, 횡축은 주파수를, 종축은 이득(입력 신호 진폭에 대한 출력 신호 진폭의 비의 값)을 나타내고, 힐버트 변환(Hilbert Transform)기의 「주파수-이득(frequency-gain)」 특성을 나타내고 있다. 여기에서, 힐버트 변환(Hilbert Transform)기에서는, 원래의 신호의 샘플링 주파수(fs)에 대하여 2배의 주파수(2fs)를 새로운 샘플링 주파수로 하고, -fs∼+fs 사이의 0을 제외한 주파수 성분을 모두 이득 1.0의 통과 대역으로 한 다. 또한, 도 7의 (b)에서, 횡축은 주파수를, 종축은 위상차(입력 신호 위상에 대한 출력 신호 위상의 차)를 나타내고, 힐버트 변환(Hilbert Transform)기의 「주파수-위상차」 특성을 나타내고 있다. 여기에서, 0∼fs 사이의 주파수 성분에 대해서는 π/2만큼 위상을 늦추고, 0∼-fs 사이의 주파수 성분에 대해서는 π/2만큼 위상을 진행시킨다. 이 때, 도 7에 도시한 바와 같이, 디지털 신호의 대칭성에 의해, 2fs의 정수배의 주파수마다 반복하는 특성으로 된다.
도 8에, 본 발명의 제1 실시예에 이용하는 π/2 위상 시프트기(106, 108)를 힐버트 변환(Hilbert Transform)기로 구성한 예를 도시한다. 도 8은, 도 7에 도시한 주파수 특성을 역 푸리에 변환하여 얻어지는 필터의 탭 계수를 나타내고 있다. 이 때, 각 탭 계수 Ck는, k=2m(단, m은 정수)일 때는 Ck=0으로 하고, k=2m+1일 때는 Ck=-2/(πk)로 하면 된다.
또한, 본 발명의 제1 실시예에 이용하는 π/2 위상 시프트기(106, 108)는, 미분기를 이용하는 것도 가능하다. 이 경우, 정현파를 나타내는 일반식 cos(ωt+α)를 t로 미분하고 1/ω을 곱하면, d(cos(ωt+α))/dt*(1/ω)=-sin(ωt+α)=cos(ωt+α+π/2)로 되어, π/2 위상 시프트의 기능을 실현할 수 있다. 즉, 대상으로 하는 화소의 값과 인접 화소의 값과의 차분을 취한 후에, 1/ω의 「주파수-진폭」특성을 갖는 필터를 거는 것에 의해 π/2 위상 시프트의 기능을 실현하여도 된다.
도 9에, 본 발명의 제1 실시예에 이용하는 계수 결정기(109)의 동작과 구체예를 도시한다. 도 9의 (a)에 도시한 바와 같이, 도 4의 (b)에 도시한 4개의 성분 의 벡터합을 취한 때에, Re축의 성분을 1로 하고, Im축의 성분을 0으로 함과 함께, 도 4의 (c)에 도시한 4개의 성분의 벡터합을 취한 때에, Re축과 Im축의 양방의 성분을 0으로 하도록, 각 성분에 승산하는 계수를 결정하면, 2매의 프레임 화상만을 이용하여, 1차원 방향의 2배의 고해상도화를 행하는 화상 신호 처리 장치를 실현할 수 있다. 도 1에 도시한 바와 같이, 지연기(105)의 출력(업 레이트 후의 프레임#1의 원 성분(original component)과 에일리어싱 성분(aliasing component)의 합)에 대한 계수를 C0, π/2 위상 시프트기(106)의 출력(업 레이트 후의 프레임#1의 원 성분(original component)과 에일리어싱 성분(aliasing component)의 각각의 π/2 위상 시프트 결과의 합)에 대한 계수를 C1, 지연기(107)의 출력(업 레이트 후의 프레임#2의 원 성분(original component)과 에일리어싱 성분(aliasing component)의 합)에 대한 계수를 C2, 힐버트 변환(Hilbert Transform)기(106)의 출력(업 레이트 후의 프레임#2의 원 성분(original component)과 에일리어싱 성분(aliasing component)의 각각의 π/2 위상 시프트 결과의 합)에 대한 계수를 C3으로 하여 도 9의 (a)의 조건을 충족시키도록 하면, 도 4의 (b) 및 도 4의 (c)에 도시한 각 성분의 위상 관계로부터, 도 9의 (b)에 도시하는 연립 방정식을 얻을 수 있으며, 이것을 풀면 도 9의 (c)에 도시하는 결과를 유도할 수 있다. 계수 결정기(109)는, 이와 같이 하여 얻은 계수 C0, C1, C2, C3을 출력하면 된다. 일례로서, 위상차 θ(102)를 π/8 마다 0∼2π까지 변화시켰을 때의 계수 C0, C1, C2, C3의 값을, 도 9의 (d)에 도시한다. 이것은, 원래의 프레임#2의 신호를, 1/16 화소의 정밀도로 위치 추정(motion estimation)하고, 프레임#1에 대하여 움직임 보상(motion compensation)한 경우에 상당한다.
또한, 업 레이트기(103, 104) 및 π/2 위상 시프트기(106, 107)는, 이상적인 특성을 얻기 위해서는 무한대의 탭수를 필요로 하지만, 탭수를 유한개로 잘라서 간략화하여도 실용상 문제는 없다. 이 때, 일반적인 창 함수(예를 들면 허닝 창 함수나 허밍 창 함수 등)를 이용하여도 된다. 간략화한 힐버트 변환(Hilbert Transform)기의 각 탭의 계수를, C0을 중심으로 하여 좌우 점대칭의 값, 즉 C(-k)=-Ck(k는 정수)로 하면, 위상을 일정량만큼 시프트할 수 있다.
이상과 같이 각 부를 구성하면, 바람직하게, 즉 보다 적은 프레임수로, 또한 간단한 구성으로 고해상도화를 실현할 수 있다.
(실시예 2)
도 10에, 본 발명의 제2 실시예를 도시한다. 도 10에 도시한 구성은, 도 9의 (c)에 도시한 계수 C0, C1, C2, C3의 관계를 이용하여, 도 1에 도시한 구성을 간략화한 것이다. 즉, C0=C2=1/2이며, C1=-C3=-(1+cosθ)/sinθ이기 때문에, 업 레이트 후의 프레임#1과 움직임 보상(motion compensation)·업 레이트 후의 프레임#2의 각 신호로부터, 가산기(1001)와 감산기(1004)에 의해 합과 차의 신호를 생성한다. 합 신호에 대해서는, fs 차단(cut-off) 필터(1002)를 통한 후에, 승산기(1003)에서 C0(=0.5)을 곱하여 가산기(1008)에 입력한다. 여기에서, fs 차단(cut-off) 필터(1002)는, 업 레이트 전의 샘플링 주파수(fs)의 성분을 0점으로 하여 차단(cut-off)하는 필터로서, 예를 들면 도 10의 (1011)에 도시하는 탭 계수를 이용함으로써 실현할 수 있다. 이 fs 차단(cut-off) 필터(1002)는, 도 7의 (a) 에 도시한 바와 같이, 힐버트 변환(Hilbert Transform)기(1005)의 「주파수-이득(frequency-gain)」 특성에서 주파수 fs의 이득이 0점으로 되기 때문에 에일리어싱 성분(aliasing component)을 제거할 수 없어, 주파수 fs의 불필요 성분이 잔류하게 되는 것을 방지하는 것이 목적이다. 따라서, 주파수 fs의 성분도 포함시켜서 π/2 위상 시프트할 수 있는 수단을 힐버트 변환(Hilbert Transform)기(1005) 대신에 이용하면, 이 fs 차단(cut-off) 필터(1002)는 불필요하게 된다.
한편, 차신호에 대해서는, 힐버트 변환(Hilbert Transform)기(1005)에서 위상을 일정량(=π/2)만큼 시프트한 후에, 계수 결정기(1007)에서 위상차(102)에 기초하여 결정한 계수 C1을 승산기(1006)에서 승산하고, 가산기(1008)에서 가산하여 출력을 얻는다. 여기에서, 지연기(1002)와 힐버트 변환(Hilbert Transform)기(1005)로 이루어지는 위상 시프트부(1009)는, 도 1에 도시한 위상 시프트부(116)의 반 정도의 회로 규모로 실현할 수 있다. 또한, 계수 결정기(1007)는 도 9의 (c)에 도시한 계수 C1만을 출력하면 되고, 가산기(1001), 감산기(1004), 승산기(1003, 1006), 가산기(1008), 계수 결정기(1007)로 이루어지는 에일리어싱 성분(aliasing component) 제거부(1010)는 승산기의 개수를 줄일 수 있기 때문에, 도 1에 도시한 에일리어싱 성분(aliasing component) 제거부(117)보다도 작은 회로 규모로 실현할 수 있다.
(실시예 3)
도 11에, 본 발명의 제3 실시예를 도시한다. 도 11에 도시하는 구성은, 도 9의 (d)에 도시한 바와 같이, 위상차 θ가 0일 때에 계수 C1, C3이 부정으로 되거 나, 위상차 θ가 0에 근접함에 따라 계수 C1, C3이 커짐으로써 노이즈 등에 취약해지는 것을 방지하기 위해서, 도 10에 도시한 구성을 베이스로 하여, 위상차 θ가 0근방으로 되었을 때에 보조적 화소 보간부(1105)로부터의 출력으로 절환하도록 구성한 것이다. 즉, 일반적인 보간(interpolation) 로우 패스 필터(1101)를 바이패스 경로로서 준비하고, 계수 결정기(1103)에서 전술한 계수 C0, C1 외에 새롭게 C4를 생성하여, 승산기(1102)에서 보간(interpolation) 로우 패스 필터(1101)의 출력과 계수 C4를 승산하고, 가산기(1104)에서 고해상도화한 신호에 더하여 출력한다. 그 이외에는, 도 10에 도시한 구성과 동일하다.
도 12에, 본 발명의 제3 실시예에 이용하는 보간(interpolation) 로우 패스 필터(1101)의 구체예를 도시한다. 도 12는, 원래의 샘플링 주파수 fs의 1/2을 컷 오프 주파수로 하는 주파수 특성을 역 푸리에 변환하여 얻어지는 필터의 탭 계수를 나타내고 있다. 이 때, 각 탭 계수 Ck(단, k는 정수)는 일반적인 sinc 함수로 되고, Ck=sin(π k/2)/(π k/2)로 하면 된다. 도 13에, 본 발명의 제3 실시예에 이용하는 계수 결정기(1103)의 구체예를 도시한다. 도 13은, 도 9의 (d)에 도시한 계수 C0, C1을 베이스로 하고, 통상은 새로운 계수 C4를 0으로 하고 있지만, 위상차 θ가 0 근방으로 되었을 때에, 계수 C0, C1의 값을 강제적으로 0으로 함과 함께, 계수 C4의 값을 1.0으로 하는 동작을 나타내고 있다. 이 동작에 의해, 도 11에 도시하는 구성에서, 위상차 θ(102)가 0 근방으로 되었을 때에, 가산기(1104)의 출력을 자동적으로 보간(interpolation) 로우 패스 필터(1101)의 출력으로 절환할 수 있게 된다. 또한, 위상차 θ가 0에 근접함과 함께, 도 12에 도시한 계수로부터 도 13에 도시한 계수에 연속적으로 서서히 접근하도록 하여도 된다. 또한, 도 1에서의 위치 추정(motion estimation)부(101)에서, 프레임#1 상의 처리 대상의 화소에 대응한 화소가 프레임#2 상이 아니라고 판정된 경우에도, 위상차 θ(102)가 0 근방으로 되었을 때와 마찬가지로 각 계수를 제어하여, 가산기(1104)의 출력을 자동적으로 보간(interpolation) 로우 패스 필터(1101)의 출력으로 절환하여도 된다.
(실시예 4)
도 14에, 본 발명의 제4 실시예를 도시한다. 도 14는, 상기 제1 실시예의 동작을 소프트웨어 프로그램에 의해 실현한 예이다. 도 14에서, 처리는 스텝(1401)로부터 개시하여, 스텝(1418)에서 각 프레임의 화상 데이터를 2배로 업 레이트한다. 즉, 스텝(1402)에서 프레임#1의 화상 데이터를 업 레이트하여 프레임 버퍼#1에 기입하고, 스텝(1403)에서 프레임#2의 화상 데이터를 업 레이트하여 프레임 버퍼#2에 기입한다. 여기에서, 업 레이트란, 각 프레임 버퍼의 값을 일단 0으로 클리어한 후에, 1화소 건너 데이터를 기입함으로써 실현할 수 있다.
다음으로, 스텝(1404)에서, 프레임 버퍼#1의 최초의 화소(예를 들면 좌측 위의 화소)를 처리 대상으로 설정하고, 이하, 프레임 버퍼#1에 대한 모든 화소 데이터의 처리가 종료할 때까지, 처리를 루프한다.
스텝(1405)에서는, 프레임 버퍼#1의 대상 화소를 기준으로 하여 프레임 버퍼#2 내의 대응하는 화소의 위치를 추정하고, 위상차 θ를 출력한다. 이 때, 대응하는 화소의 위치를 추정하는 방법으로서, 상기한 종래 기술을 그대로 이용할 수 있다.
스텝(1406)에서는, 스텝(1405)에서 구한 위상차 θ를 바탕으로, 프레임 버퍼#2 내의 대응하는 화소의 근방의 화소를 움직임 보상(motion compensation)한다. 이 때, 근방의 화소로서, 스텝(1408)의 π/2 위상 시프트의 처리에서 이용하는 화소 데이터, 즉 유한한 탭수가 작용하는 범위의 화소 데이터만을 움직임 보상(motion compensation)하면 된다. 이 움직임 보상(motion compensation)의 동작은, 도 5 및 도 6을 이용하여 설명한 동작과 동일하다.
계속해서, 스텝(1419)에서, 프레임 버퍼#1과 움직임 보상(motion compensation)한 프레임 버퍼#2에 대하여, 위상을 일정량만큼 시프트한다. 즉, 스텝(1407, 1408)에 의해, 각 프레임 버퍼 내의 화소 데이터를 π/2 위상 시프트한다.
계속해서, 스텝(1420)에서, 위상차 θ에 기초하여 프레임 버퍼#1, #2의 화소 데이터로부터 에일리어싱 성분(aliasing component)을 제거하고, 프레임 버퍼#3에 출력한다. 즉, 스텝(1409)에서, 위상차 θ를 바탕으로, 계수 C0, C1, C2, C3을 결정하고, 스텝(1410, 1411, 1412, 1413)에서 각 계수와 프레임 버퍼#1, #2의 화소 데이터 및 π/2 위상 시프트 후의 데이터와 각각 승산한 후, 스텝(1414)에서 모두를 가산하고, 프레임 버퍼#3에 출력한다. 이 에일리어싱 성분(aliasing component) 제거의 동작은, 도 9를 이용하여 설명한 동작과 동일하다.
계속해서, 스텝(1415)에서, 프레임 버퍼#1의 전체 화소의 처리가 완료되었는지의 여부를 판정하여, 완료되지 않았으면, 스텝(1416)에서 다음의 화소(예를 들면 우측 옆의 화소)를 처리의 대상으로 설정하여 스텝(1405) 이후로 되돌아가고, 완료 되었으면 스텝(1417)에서 처리를 종료한다.
이상과 같은 처리를 행함으로써, 프레임 버퍼#1과 프레임 버퍼#2의 화소 데이터를 이용하여, 프레임 버퍼#3에 고해상도화한 신호를 출력할 수 있다. 동화상에 응용하는 경우에는, 스텝(1401)로부터 스텝(1417)에 이르는 처리를, 프레임마다 반복하면 된다.
(실시예 5)
도 15에, 본 발명의 제5 실시예를 도시한다. 도 15는, 상기 제2 실시예의 동작을 소프트웨어 프로그램에 의해 실현한 예이다. 도 15에서, 처리는 스텝(1501)로부터 개시하여, 스텝(1518)에서 각 프레임의 화상 데이터를 업 레이트한다. 즉, 스텝(1502)에서 프레임#1의 화상 데이터를 업 레이트하여 프레임 버퍼#1에 기입하고, 스텝(1503)에서 프레임#2의 화상 데이터를 업 레이트하여 프레임 버퍼#2에 기입한다. 여기에서, 업 레이트란, 각 프레임 버퍼의 값을 일단 0으로 클리어한 후에, 1화소 건너 데이터를 기입함으로써 실현할 수 있다.
다음으로, 스텝(1504)에서, 프레임 버퍼#1의 최초의 화소(예를 들면 좌측 위의 화소)를 처리 대상으로 설정하고, 이하, 프레임 버퍼#1의 모든 화소 데이터의 처리가 종료할 때까지, 처리를 루프한다.
스텝(1505)에서는, 프레임 버퍼#1의 대상 화소를 기준으로 하여 프레임 버퍼#2 내의 대응하는 화소의 위치를 추정하고, 위상차 θ를 출력한다. 이 때, 대응하는 화소의 위치를 추정하는 방법으로서, 상기한 종래 기술을 그대로 이용할 수 있다.
스텝(1506)에서는, 스텝(1505)에서 구한 위상차 θ를 바탕으로, 프레임 버퍼#2 내의 대응하는 화소의 근방의 화소를 움직임 보상(motion compensation)한다. 이 때, 「근방의 화소」로서, 스텝(1510)의 힐버트 변환(Hilbert Transform)의 처리에서 이용하는 화소 데이터, 즉 유한한 탭수가 작용하는 범위의 화소 데이터만을 움직임 보상(motion compensation)하면 된다. 이 움직임 보상(motion compensation)의 동작은, 도 5 및 도 6을 이용하여 설명한 동작과 동일하다.
계속해서, 스텝(1520)에서, 위상차 θ에 기초하여 프레임 버퍼#1, #2의 화소 데이터로부터 에일리어싱 성분(aliasing component)을 제거하고, 프레임 버퍼#3에 출력한다. 우선, 스텝(1507)에서, 프레임 버퍼#1의 화소 데이터의 값과 움직임 보상(motion compensation)한 프레임 버퍼#2의 화소 데이터의 값을 가산하고, 스텝(1509)에서 주파수 fs의 성분을 차단(cut-off)한다. 이 fs 차단(cut-off) 필터(1509)의 동작은, 도 10에 도시한 (1002)의 동작과 동일하다.
또한, 스텝(1508)에서, 프레임 버퍼#1의 화소 데이터의 값으로부터 움직임 보상(motion compensation)한 프레임 버퍼#2의 화소 데이터의 값을 감산한다. 여기에서, 감산한 결과에 대하여, 스텝(1519)에서 위상을 일정량만큼 시프트한다. 즉, 마찬가지로 감산한 근방의 데이터도 이용하여, 스텝(1510)에서 힐버트 변환(Hilbert Transform)한다. 이 위상 시프트의 동작은, 도 7 및 도 8을 이용하여 설명한 동작과 동일하다.
계속해서, 스텝(1511)에서 상기 가산 후의 데이터에 계수 C0(=0.5)을 승산함과 함께, 스텝(1512)에서 위상차 θ에 기초하여 계수 C1을 결정하고, 스텝(1513)에 서 계수 C1과 힐버트 변환(Hilbert Transform) 후의 데이터를 승산한 후에, 스텝(1514)에서 양자의 데이터를 가산하여, 프레임 버퍼#3에 출력한다. 이 에일리어싱 성분(aliasing component) 제거의 동작은, 도 10을 이용하여 설명한 동작과 동일하다.
계속해서, 스텝(1515)에서, 프레임 버퍼#1의 전체 화소의 처리가 완료되었는지의 여부를 판정하여, 완료되지 않았으면, 스텝(1516)에서 다음의 화소(예를 들면 우측 옆의 화소)를 처리의 대상으로 설정하여 스텝(1505) 이후로 되돌아가고, 완료되었으면 스텝(1517)에서 처리를 종료한다.
이상과 같은 처리를 행함으로써, 프레임 버퍼#1과 프레임 버퍼#2의 화소 데이터를 이용하여, 프레임 버퍼#3에 고해상도화한 신호를 출력할 수 있다. 동화상에 응용하는 경우에는, 스텝(1501)로부터 스텝(1517)에 이르는 처리를, 프레임마다 반복하면 된다.
(실시예 6)
도 16에, 본 발명의 제6 실시예를 도시한다. 도 16은, 상기 제3 실시예의 동작을 소프트웨어 프로그램에 의해 실현한 예이다. 도 16에 도시한 처리 스텝의 동작은, 도 9의 (d)에 도시한 바와 같이, 위상차 θ가 0일 때에 계수 C1, C3이 부정으로 되는 것이나, 위상차 θ가 0에 근접함에 따라 계수 C1, C3이 커짐으로써 노이즈 등에 취약해지는 것을 방지하기 위해서, 도 15에 도시한 처리 스텝을 베이스로 하여, 위상차 θ가 0 근방으로 되었을 때에 스텝(1606)의 처리 결과를 프레임 버퍼#3에 출력하도록 구성한 것이다. 즉, 스텝(1601)에서 위상차 θ를 바탕으로, 계수 C0, C1, C4를 결정하고, 스텝(1602)에서 프레임 버퍼#1 내의 대상의 화소 데이터와 그 근방의 화소 데이터를 이용하여 일반적인 보간(interpolation) 로우 패스 필터 처리를 행한 후에, 스텝(1603)에서 계수 C4를 승산하고, 스텝(1604)에서 스텝(1511, 1513)의 출력과 가산하여 프레임 버퍼#3에 출력한다. 그 이외에는, 도 15에 도시한 처리 스텝과 동일하다. 또한, 스텝(1601)에서의 계수 결정의 동작은, 도 13을 이용하여 설명한 동작과 동일하다. 또한, 스텝(1602)에서의 보간(interpolation) 로우 패스 필터의 동작은, 도 12를 이용하여 설명한 동작과 동일하다.
또한, 도 14, 도 15, 도 16에 도시한 처리 스텝을 동작시키는 하드웨어는, 신호 입출력부(I/O), CPU(Central Processing Unit)나 DSP(Digital Signal Processor) 등의 신호 처리 LSI, 프레임 버퍼(메모리)로 구성되는 일반적인 영상 처리 기기나 컴퓨터 등에 의해 용이하게 실현할 수 있기 때문에, 도시는 생략한다.
이상과 같은 기술에 의해, 복수의 화상 프레임을 합성함으로써 불필요한 에일리어싱 성분(aliasing component)을 제거하여 고해상도화를 행하는 장치에서, 적어도 2매의 프레임 화상이 있으면, 1차원 방향의 2배의 고해상도화를 행하는 화상 신호 처리를 실현할 수 있다.
도 17을 이용하여, 본 발명과 상기 종래 기술의 동작의 차이를 설명한다. 도 17의 (a)에서, 프레임#1(1701)로부터 프레임#5(1705) 사이에, 피사체가 우 방향으로 이동하도록 입력 화상을 준비한다. 이 때, 도 17의 (b)에 도시한 바와 같이, 각 프레임에서의 샘플링 위상을 보면, 프레임#1(1701)과 프레임#2(1702) 사이에서 는 대응 화소의 위치가 1/4화소(=π/2) 어긋나 있고, 프레임#1(1701)과 프레임#3(1703) 사이에서는 대응 화소의 위치가 1화소(=2π) 어긋나 있으며, 프레임#1(1701)과 프레임#4(1704) 사이에서는 대응 화소의 위치가 5/4화소(=5π/2) 어긋나고 있고, 프레임#1(1701)과 프레임#5(1705) 사이에서는 대응 화소의 위치가 2화소(=4π) 어긋나 있도록, 의도적으로 피사체를 이동시킨다. 이 때, 각 프레임 상의 신호에 포함되는 각각의 에일리어싱 성분(aliasing component)의 위상은, 프레임#1(1701) 상의 신호에 포함되는 에일리어싱 성분(aliasing component)의 위상을 기준으로 하여, 도 17의 (c)와 같이 나타낼 수 있다. 이 입력 화상 (a)에 대하여 2배의 고해상도화를 행하는 경우, 상기 종래 기술에서는, 프레임#1(1701)로부터 프레임#5(1705) 내의 어느 3프레임을 이용하여도 에일리어싱 성분(aliasing component)의 벡터합을 0으로 할 수 없기 때문에, 고해상도화는 실현할 수 없다. 한편, 본 실시예를 이용하면, 인접하는 2프레임(예를 들면, 프레임#1(1701)과 프레임#2(1702))을 이용하여 에일리어싱 성분(aliasing component)의 벡터합을 0으로 할 수 있기 때문에, 고해상도화를 실현할 수 있다. 즉, 도 17의 (a)의 입력 화상을 테스트 패턴으로서 이용함으로써, 본 실시예의 동작 상황을 확인할 수 있다.
(실시예 7)
상기에서는 2프레임의 신호를 이용하여 2배의 고해상도화를 설명하였지만, 마찬가지로 n프레임(n은 2이상의 정수)의 신호를 이용하여 n배의 고해상도화를 실현할 수 있다. 이 때에, 도 9의 (a)에 도시한 바와 같이, 원 성분(original component)의 합의 Re축=1, 원 성분(original component)의 합의 Im축=0인 조건과 함께, 원래의 샘플링 주파수(fs)의 1∼(n-1)배의 주파수로부터 각각 에일리어싱된 (n-1)개의 에일리어싱 성분(aliasing component)의 벡터합을 각각 0으로 놓고, 연립 방정식을 풀면 된다. 이하, 도 18과 도 19를 이용하여 상기를 상세하게 설명한다.
도 18에, n프레임(n은 2이상의 정수)의 신호를 이용하여 n배의 고해상도화하는 장치의 실시예를 도시한다. 도 18에서, 우선 위치 추정(motion estimation)부(1801)에 의해, 입력된 프레임#1 상의 처리 대상의 화소의 샘플링 위상(표본화 위치)을 기준으로 하여, 입력된 프레임#2∼프레임#n 상의 대응하는 화소의 위치를 추정하고, 위상차 θ1(1802-1)∼위상차 θ(n-1)(1802-(n-1))을 구한다. 다음으로, 움직임 보상(motion compensation)·업 레이트부(1806)의 업 레이트기(1803-0)∼(1803-(n-1))에 의해, 각 위상차 θ의 정보를 이용하여 프레임#2∼프레임#n을 움직임 보상(motion compensation)하여 프레임#1과 위치를 맞춤과 함께, 각 프레임의 화소수를 각각 n배로 늘려서 고밀도화한다. 위상 시프트부(1807)에서는, 이 고밀도화한 데이터의 위상을 일정량만큼 시프트하여, 신호 Si0∼Si(n-1)로 한다. 여기에서, 데이터의 위상을 일정량만큼 시프트하는 수단으로서, π/2 위상 시프트기(1805-0)∼(1805-(n-1))을 이용할 수 있다. 또한, 각 π/2 위상 시프트기에서 발생하는 지연을 보상하기 위해, 지연기(1804-0)∼(1804-(n-1))에 의해 고밀도화한 각 프레임의 신호를 지연시켜서, 신호 Sr0∼Sr(n-1)로 한다. 에일리어싱 성분(aliasing component) 제거부(1808)에서는, 이들의 신호 Si0∼Si(n-1), Sr0∼Sr(n-1), 위상차 θ1∼θ(n-1)을 이용하여 에일리어싱 성분(aliasing component) 제거를 위한 연산을 행하여, 출력을 얻는다. 또한, 위치 추정(motion estimation)부(1801)는, 상기 종래 기술을 그대로 이용하여 실현할 수 있다. 또한, 움직임 보상(motion compensation)·업 레이트부(1806), 위상 시프트부(1807)에 대해서는, 도 5∼도 8에 도시한 내용을 바탕으로, 도면 중의 주파수를 fs로부터 fs*n/2로 변경함으로써 용이하게 유추하여 실현 가능하기 때문에, 도시는 생략한다. 또한, 위상 시프트부(1807)에서, fs*n/2의 주파수의 이득이 0점으로 되어 에일리어싱 왜곡을 제거할 수 없는 경우에는, fs*n/2의 주파수의 이득이 0점으로 되는 차단(cut-off) 필터를 이용한 편이 낫다. 이 차단(cut-off) 필터는, 지연기(1804-0)∼(1804-(n-1))의 위치에 삽입하여도 되지만, 에일리어싱 성분(aliasing component) 제거부(1808)의 출력의 위치에 삽입하여도 마찬가지의 효과가 얻어지는 것은 분명하다.
도 19에, 에일리어싱 성분(aliasing component) 제거부(1808)의 동작의 상세를 도시한다. 도 19의 (a)에, 신호 Si0∼Si(n-1), Sr0∼Sr(n-1), 위상차 θ1∼θ(n-1)을 이용하여 에일리어싱 성분(aliasing component) 제거한 출력을 얻기 위한 계산식을 나타낸다. 여기에서, Ci0∼Ci(n-1), Cr0∼Cr(n-1)은, 각각 신호 Si0∼Si(n-1), Sr0∼Sr(n-1)에 곱하는 계수이다.
도 19의 (b)에, 이들의 계수 Ci0∼Ci(n-1), Cr0∼Cr(n-1)을 구하기 위한 계산식을 나타낸다. 동일 계산식은, 좌변, 우변 모두 매트릭스 형식이 되어 있으며, 위로부터 2행마다, 원 성분(original component), 샘플링 주파수(fs)의 성분, 샘플링 주파수(fs)의 2배의 성분, 이하 마찬가지로, 샘플링 주파수(fs)의 (n-1)배까지 의 성분을 나타내고 있으며, 각 1행째(홀수행)는 Re축, 각 2행째(짝수행)는 Im축의 각 성분을 나타내고 있다. 동일 계산식의 좌변의 매트릭스는, 원 성분(original component)의 Re축의 합이 1이고, 그 외의 성분은 모두 0인 것을 나타내고 있다. 동일 계산식의 우변은 매트릭스의 곱 연산으로 되어 있다. 우변의 좌측의 매트릭스는, 좌로부터 2열마다, 프레임#1의 샘플링 위상(기준), 프레임#2와 프레임#1과의 샘플링 위상차, 이하 마찬가지로, 프레임#n과 프레임#1의 샘플링 위상차에 따라서 길이 1의 벡터를 회전시키는 것을 나타내고 있으며, 각 1열째(홀수열)는 Re축, 각 2열째(짝수열)는 Im축에 각각 길이 1의 벡터를 사영했을 때의 값을 나타내고 있다. 여기에서, 위로부터 2행마다, 샘플링 주파수에 비례하여 샘플링 위상차(회전각)가 커지는 특징이 있다. 우변의 우측의 매트릭스는 구하고자 하는 계수이다. 즉, 도 19의 (b)에 도시하는 계산식은, 불필요한 에일리어싱 성분(aliasing component)을 제거하여 원 성분(original component)의 Re축만을 추출하기 위해, 프레임#1∼프레임#n의 각 성분에 적절한 계수를 곱하여 벡터합을 취한다고 하는 것을 나타내고 있다. 따라서, 도 19의 (b)의 역 매트릭스 연산에 의해 계수 Ci0∼Ci(n-1), Cr0∼Cr(n-1)을 구하고, 그 계수를 도 19의 (a)에 대입하여 연산함으로써 불필요한 (n-1)개의 에일리어싱 성분(aliasing component)을 제거할 수 있어, n배의 고해상도화를 실현할 수 있다. 이 때, n=2로 놓으면, 도 18에 도시한 구성은 도 1에 도시한 구성과 일치하고, 도 19에 도시한 계산식은 도 9에 도시한 계산식과 일치한다. 또한 마찬가지로, 도 14, 도 15, 도 16에 도시한 실시예(플로우차트)의 입력 프레임수를 2로부터 n으로 용이하게 확장 가능하기 때문에, n배의 고해상도화에 대응한 플로우차트의 도시는 생략한다.
또한, 상기에서는 수평 방향의 고해상도화를 예로 들어 설명했지만, 본 발명은 이에 한정되는 것은 아니고, 수직 방향이나 경사 방향의 고해상도화에 적용하는 것이 가능하다. 예를 들면, 본 발명을 인터레이스-프로그레시브 주사 변환(I-P변환)에 적용함으로써, 2매의 필드 화상으로부터 1매의 프레임 화상을 생성할 수 있다. 즉, 필드 화상을 「주사선 수가 1/2인 프레임 화상」이라고 간주하여 본 발명을 적용함으로써, 정지 화상·동화상에 상관없이, 화상 1매당 주사선 수를 2배(즉, 수직 방향의 해상도를 2배)로 한 출력 화상을 얻을 수 있다. 또한, 수평·수직 방향을 조합한 2차원의 고해상도화에도 용이하게 확장 가능하다.
또한, 상기 실시예에서는, 화상 신호 처리 장치로서, 화상 표시 장치를 예로 하여 설명하였지만 이에 한정되는 것은 아니어서, 예를 들면, DVD 플레이어나 HDD 플레이어에도 마찬가지로 적용할 수 있으며, 더 나아가서는 1세그 방송을 수신하기 위한 휴대 화상 표시 단말기(예를 들면 휴대 전화)에도 적용할 수 있는 것은 물론이다. 또한 화상 프레임으로서는, 텔레비전 방송 신호 이외의 신호의 화상 프레임을 이용하여도 된다. 예를 들면 인터넷을 통하여 송신되는 스트리밍 화상이나, DVD 플레이어나 HDD 플레이어로부터 재생된 화상에 대해서도, 마찬가지로 본 발명은 적용할 수 있다.
본 발명에 따르면, 바람직하게 화상 신호를 고해상도화하기 위한 기술을 제공할 수 있다. 보다 상세하게는, 본 발명은, 보다 적은 매수의 프레임을 이용함으 로써, 동화상의 화상 신호를 바람직하게 고해상도화하기 위한 기술을 제공할 수 있다.

Claims (18)

  1. n매(n은 2이상의 정수)의 화상 프레임이 입력되는 입력부, 및
    상기 입력된 n매의 화상 프레임을 합성함으로써, 화상 프레임을 구성하는 화소수를 n배로 증가시켜 출력 화상 프레임을 얻는 해상도 변환부
    를 포함하는 화상 신호 처리 장치.
  2. 제1항에 있어서,
    상기 해상도 변환부는,
    기준으로 되는 상기 입력 화상 프레임 상의 화상 데이터와 다른 입력 화상 프레임 상의 대응하는 각 화상 데이터를 이용하여 샘플링 위상차를 추정하는 위치 추정(motion estimation)부와,
    상기 샘플링 위상차의 정보를 이용하여 각 입력 화상 프레임의 화상 데이터를 움직임 보상(motion compensation)함과 함께 화소수를 n배로 증가시키는 움직임 보상·업 레이트부와,
    상기 화소수가 증가된 각 화상 프레임의 화상 데이터를 소정량 위상 시프트하는 위상 시프트부와,
    상기 샘플링 위상차의 정보를 이용하여 계수를 결정하는 계수 결정부와,
    상기 위상 시프트의 전후의 각 화상 데이터에 상기 계수를 곱하여 가산함으로써 (n-1)개의 에일리어싱 성분(aliasing component)을 제거하여 출력하는 에일리 어싱 성분 제거부
    를 포함하는 화상 신호 처리 장치.
  3. 제2항에 있어서,
    상기 해상도 변환부는,
    화소 보간에 의해 입력 화상 프레임의 화상 데이터를 증가시키는 보조적 화소 보간부를 더 포함하고,
    상기 계수 결정부에서 계수를 결정할 수 없을 때에, 상기 에일리어싱 성분을 제거한 결과 대신에 상기 보조적 화소 보간부의 결과를 출력하는 화상 신호 처리 장치.
  4. 제1항에 있어서,
    상기 해상도 변환부는, 상기 입력부로부터 입력되는 n매의 화상 프레임의 데이터로부터 2n개의 데이터를 생성하고, 상기 2n개의 데이터에 각각 계수를 곱하여, 가산함으로써 하나의 화상 데이터를 생성하여 출력하는 화상 신호 처리 장치.
  5. 제4항에 있어서,
    상기 2n개의 데이터는, 상기 입력부로부터 입력되는 n매의 화상 프레임의 데이터에 기초한 n개의 데이터와, 상기 입력부로부터 입력되는 n매의 화상 프레임의 데이터의 위상을 시프트한 n매의 화상 프레임의 데이터에 기초한 n개의 데이터로 이루어지는 화상 신호 처리 장치.
  6. n매(n은 2이상의 정수)의 화상 프레임을 입력하는 스텝, 및
    상기 입력된 n매의 화상 프레임을 합성함으로써, 화상 프레임을 구성하는 화소수를 n배로 증가시켜 출력 화상 프레임을 얻는 스텝
    을 포함하는 화상 신호의 고해상도화 방법.
  7. 제6항에 있어서,
    상기 출력 화상 프레임을 얻는 스텝은,
    기준으로 되는 상기 입력 화상 프레임 상의 화상 데이터와 다른 입력 화상 프레임 상의 대응하는 각 화상 데이터를 이용하여 샘플링 위상차를 추정하는 스텝과,
    상기 샘플링 위상차의 정보를 이용하여 각 입력 화상 프레임의 화상 데이터를 움직임 보상함과 함께 화소수를 n배로 증가시키는 스텝과,
    상기 화소수가 증가된 각 화상 프레임의 화상 데이터를 소정량 위상 시프트하는 스텝과,
    상기 샘플링 위상차의 정보를 이용하여 계수를 결정하는 스텝과,
    상기 위상 시프트의 전후의 각 화상 데이터에 상기 계수를 곱하여 가산함으로써 (n-1)개의 에일리어싱 성분을 제거하여 출력하는 스텝
    을 포함하는 화상 신호의 고해상도화 방법.
  8. 제7항에 있어서,
    화소 보간에 의해 입력 화상 프레임의 화상 데이터를 증가시키는 보조적 화소 보간 스텝을 더 포함하고,
    상기 계수를 결정하는 스텝에서 계수를 결정할 수 없을 때에, 상기 에일리어싱 성분을 제거한 결과 대신에 상기 보조적 화소 보간 스텝의 결과를 출력하는 화상 신호의 고해상도화 방법.
  9. 제6항에 있어서,
    상기 출력 화상 프레임을 얻는 스텝은, 상기 화상 프레임을 입력하는 스텝에서 입력되는 n매의 화상 프레임의 데이터로부터 2n개의 데이터를 생성하고, 상기 2n개의 데이터에 각각 계수를 곱하여, 가산함으로써 하나의 화상 데이터를 생성하는 화상 신호의 고해상도화 방법.
  10. 제9항에 있어서,
    상기 2n개의 데이터는, 상기 화상 프레임을 입력하는 스텝에서 입력되는 n매의 화상 프레임의 데이터에 기초한 n개의 데이터와, 상기 입력부로부터 입력되는 n매의 화상 프레임의 데이터의 위상을 시프트한 n매의 화상 프레임의 데이터에 기초한 n개의 데이터로 이루어지는 화상 신호의 고해상도화 방법.
  11. 제1 화상 프레임과 제2 화상 프레임이 입력되는 입력부와,
    상기 입력된 제1 화상 프레임과 제2 화상 프레임을 변환 처리하여 합성함으로써, 화상 프레임을 구성하는 화소수를 2배로 증가시켜 출력 화상 프레임을 얻는 해상도 변환부, 및
    상기 해상도 변환부로부터의 출력 화상 프레임에 기초하여 화상의 표시를 행하는 표시부
    를 포함하는 화상 표시 장치.
  12. 제11항에 있어서,
    상기 해상도 변환부는,
    상기 입력된 제1 화상 프레임 및 제2 화상 프레임의 각각의 화소수를 증가시키는 화소수 변환부, 및
    상기 화소수가 증가된 제1 및 제2 화상 프레임의 위상을 각각 π/2 시프트함과 함께, 그 위상이 시프트된 제1 및 제2 화상 프레임과 위상이 시프트되기 전의 제1 및 제2 화상 프레임을 가산하여, 입력 화상 프레임에 포함되는 에일리어싱 성분을 제거하는 에일리어싱 성분 제거부
    를 포함하는 화상 표시 장치.
  13. 제12항에 있어서,
    상기 해상도 변환부는,
    상기 위상이 시프트된 제1 및 제2 화상 프레임과 위상이 시프트되기 전의 제1 및 제2 화상 프레임의 각각에 대응하는 계수를 생성하기 위한 계수 생성부와,
    상기 계수 생성부에서 생성된 계수를 상기 위상 시프트 전후의 제1 및 제2 화상 프레임에 승산하는 승산부
    를 더 포함하고,
    상기 계수 생성부는, 상기 제1 화상 프레임과 상기 제2 화상 프레임의 샘플링 위상차에 기초하여 상기 계수를 생성하는 화상 표시 장치.
  14. 제11항에 있어서,
    상기 제1 및 제2 화상 프레임은 동화상의 화상 프레임인 화상 표시 장치.
  15. 제11항에 있어서,
    상기 제1 및 제2 화상 프레임은, 텔레비전 방송 신호에 포함되는 프레임인 화상 표시 장치.
  16. 제11항에 있어서,
    상기 화소수 변환부는, 상기 제1 및 제2 화상 프레임의 화소수를 2배로 하는 화상 표시 장치.
  17. 제11항에 있어서,
    상기 해상도 변환부는, 상기 입력부로부터 입력되는 제1 화상 프레임의 데이터와 제2 화상 프레임의 데이터로부터, 4매의 화상 프레임의 데이터를 생성하고, 상기 4매의 화상 프레임의 데이터에 각각 계수를 곱하고, 가산함으로써 하나의 화상을 출력하는 화상 표시 장치.
  18. 제17항에 있어서,
    상기 4매의 화상 프레임의 데이터는 각각, 상기 입력부로부터 입력되는 제1화상 프레임의 데이터, 제2 화상 프레임의 데이터, 상기 제1 화상 프레임의 데이터를 위상 시프트한 데이터, 제2 화상 프레임의 데이터를 위상 시프트한 데이터인 화상 표시 장치.
KR1020070036887A 2006-05-31 2007-04-16 화상 신호 처리 장치, 화상 표시 장치, 및 화상 신호의고해상도화 방법 KR100908768B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006150875A JP4518043B2 (ja) 2006-05-31 2006-05-31 画像信号処理装置、及び画像信号を高解像度化するための方法、及びそれを実行するためのプログラム
JPJP-P-2006-00150875 2006-05-31

Publications (2)

Publication Number Publication Date
KR20070115599A true KR20070115599A (ko) 2007-12-06
KR100908768B1 KR100908768B1 (ko) 2009-07-22

Family

ID=38116639

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070036887A KR100908768B1 (ko) 2006-05-31 2007-04-16 화상 신호 처리 장치, 화상 표시 장치, 및 화상 신호의고해상도화 방법

Country Status (5)

Country Link
US (1) US7830369B2 (ko)
JP (1) JP4518043B2 (ko)
KR (1) KR100908768B1 (ko)
CN (1) CN100587792C (ko)
GB (1) GB2438700B8 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10438522B2 (en) 2014-12-22 2019-10-08 Samsung Display Co., Ltd. Display device and driving method thereof

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4988460B2 (ja) * 2007-07-05 2012-08-01 株式会社日立製作所 画像信号処理装置および画像信号処理方法
JP4876048B2 (ja) * 2007-09-21 2012-02-15 株式会社日立製作所 映像送受信方法、受信装置、映像蓄積装置
JP5004856B2 (ja) * 2008-04-18 2012-08-22 キヤノン株式会社 画像形成装置及び画像形成方法及び記憶媒体、プログラム
JP5147572B2 (ja) * 2008-07-04 2013-02-20 キヤノン株式会社 通信装置及びコンピュータプログラム
JPWO2010007719A1 (ja) * 2008-07-16 2012-01-05 株式会社日立製作所 画像符号化装置、画像符号化方法、画像復号装置、及び画像復号方法
JP4508279B2 (ja) * 2008-07-17 2010-07-21 ソニー株式会社 画像処理装置、画像処理方法、及び、プログラム
JP5103314B2 (ja) * 2008-07-28 2012-12-19 株式会社日立製作所 画像信号処理装置、画像信号処理方法、および映像表示装置
KR101464023B1 (ko) * 2008-07-28 2014-11-20 에이저 시스템즈 엘엘시 가변 보상된 플라이 하이트 측정용 시스템들 및 방법들
US8212927B2 (en) 2008-07-28 2012-07-03 Hitachi, Ltd. Image signal processing apparatus, image signal processing method and video display apparatus
DE102008044521A1 (de) * 2008-08-08 2010-02-25 Toshiba Electronics Europe Gmbh Verfahren und Vorrichtung zur Erzeugung von Bildinformationen
JP5146335B2 (ja) * 2009-01-22 2013-02-20 ソニー株式会社 画像処理装置および方法、並びにプログラム
US8300349B2 (en) 2010-08-05 2012-10-30 Lsi Corporation Systems and methods for format efficient calibration for servo data based harmonics calculation
US8345373B2 (en) 2010-08-16 2013-01-01 Lsi Corporation Systems and methods for phase offset based spectral aliasing compensation
US8605381B2 (en) 2010-09-03 2013-12-10 Lsi Corporation Systems and methods for phase compensated harmonic sensing in fly height control
JP2012100129A (ja) * 2010-11-04 2012-05-24 Jvc Kenwood Corp 画像処理方法及び画像処理装置
US8526133B2 (en) 2011-07-19 2013-09-03 Lsi Corporation Systems and methods for user data based fly height calculation
US9293164B2 (en) 2013-05-10 2016-03-22 Avago Technologies General Ip (Singapore) Pte. Ltd. Systems and methods for energy based head contact detection
US8937781B1 (en) 2013-12-16 2015-01-20 Lsi Corporation Constant false alarm resonance detector
US9129632B1 (en) 2014-10-27 2015-09-08 Avago Technologies General Ip (Singapore) Pte. Ltd. Loop pulse estimation-based fly height detector
JP7159057B2 (ja) * 2017-02-10 2022-10-24 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 自由視点映像生成方法及び自由視点映像生成システム

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0779424A (ja) * 1993-09-06 1995-03-20 Hitachi Ltd 多地点映像通信装置
JP3570563B2 (ja) * 1994-01-13 2004-09-29 ソニー株式会社 信号の広帯域化装置
US6023535A (en) * 1995-08-31 2000-02-08 Ricoh Company, Ltd. Methods and systems for reproducing a high resolution image from sample data
JPH10341367A (ja) 1997-06-06 1998-12-22 Toshiba Corp 静止画像生成方法及び静止画像取り込みシステム
US6873368B1 (en) * 1997-12-23 2005-03-29 Thomson Licensing Sa. Low noise encoding and decoding method
JP2000194845A (ja) * 1998-12-25 2000-07-14 Canon Inc 画像処理装置及びその方法、及び画像処理システム
JP4250237B2 (ja) * 1998-11-10 2009-04-08 キヤノン株式会社 画像処理装置、方法及びコンピュータ読み取り可能な記憶媒体
JP2002229547A (ja) * 2001-02-07 2002-08-16 Hitachi Ltd 画像表示システム及び画像情報伝送方法
US6940557B2 (en) * 2001-02-08 2005-09-06 Micronas Semiconductors, Inc. Adaptive interlace-to-progressive scan conversion algorithm
US7221381B2 (en) * 2001-05-09 2007-05-22 Clairvoyante, Inc Methods and systems for sub-pixel rendering with gamma adjustment
CN1685722A (zh) * 2002-09-23 2005-10-19 皇家飞利浦电子股份有限公司 图像变换的方法和单元
KR100504594B1 (ko) * 2003-06-27 2005-08-30 주식회사 성진씨앤씨 데이터 압축 처리된 저해상도 영상으로부터 초해상도 영상복원 및 재구성 방법
JP4182827B2 (ja) 2003-06-27 2008-11-19 ソニー株式会社 信号処理装置および信号処理方法、並びにプログラムおよび記録媒体
JP4761102B2 (ja) 2003-12-10 2011-08-31 ソニー株式会社 画像表示装置および方法、並びにプログラム
US7660487B2 (en) 2003-12-10 2010-02-09 Sony Corporation Image processing method and apparatus with image resolution conversion related to relative movement detection
KR100545379B1 (ko) * 2004-03-09 2006-01-24 삼성전자주식회사 휘도/색차 성분 분리 기능이 내장된 광기록재생 장치
JP4894142B2 (ja) * 2004-12-17 2012-03-14 Ｎｋワークス株式会社 フィルムのベース濃度検出方法
JP2006345472A (ja) * 2005-05-13 2006-12-21 Sanyo Electric Co Ltd 画像信号処理装置、それを備えた撮像装置及び画像信号処理方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10438522B2 (en) 2014-12-22 2019-10-08 Samsung Display Co., Ltd. Display device and driving method thereof

Also Published As

Publication number Publication date
GB0707105D0 (en) 2007-05-23
GB2438700A (en) 2007-12-05
JP2007324789A (ja) 2007-12-13
GB2438700A8 (en) 2009-03-18
GB2438700B8 (en) 2009-03-18
US7830369B2 (en) 2010-11-09
GB2438700B (en) 2008-10-15
CN100587792C (zh) 2010-02-03
CN101083069A (zh) 2007-12-05
US20080018786A1 (en) 2008-01-24
JP4518043B2 (ja) 2010-08-04
KR100908768B1 (ko) 2009-07-22

Similar Documents

Publication Publication Date Title
KR100908768B1 (ko) 화상 신호 처리 장치, 화상 표시 장치, 및 화상 신호의고해상도화 방법
JP4876048B2 (ja) 映像送受信方法、受信装置、映像蓄積装置
JP4775210B2 (ja) 画像信号処理装置、画像高解像度化方法、画像表示装置、記録再生装置
JP2009015025A (ja) 画像信号処理装置および画像信号処理方法
JP4123614B2 (ja) 信号処理装置およびその方法
JPS63313979A (ja) ディジタルテレビジョン画像の動きを補償した補間方法
JPS63313982A (ja) テレビジョン画像の動きベクトル評価方法
JP2004513546A (ja) 画像の動き補償
GB2205713A (en) Motion compensated interpolation of digital television images
JP5103314B2 (ja) 画像信号処理装置、画像信号処理方法、および映像表示装置
JP2009163551A (ja) 画像処理システムおよびこれに用いるカメラと録画再生装置
JP5416899B2 (ja) 映像表示装置
JP5416898B2 (ja) 映像表示装置
JP2009033582A (ja) 画像信号記録再生装置
JP2009017242A (ja) 画像表示装置、画像信号処理装置および画像信号処理方法
JPH07245592A (ja) 信号の広帯域化装置
JP2009163588A (ja) 画像信号処理装置、画像高解像度化方法、画像表示装置
JP2009171370A (ja) 画像信号処理装置、画像表示装置、画像信号処理方法
JP2011223293A (ja) 画像符号化方法、画像符号化装置、画像復号化方法及び画像復号化装置
JP4988460B2 (ja) 画像信号処理装置および画像信号処理方法
JP2009141444A (ja) 画像信号処理装置、画像表示装置、画像信号処理方法
JP2009141445A (ja) サンプリングレート変換装置、およびサンプリングレート変換方法
JP2010109640A (ja) 映像表示装置、映像表示方法及び画像高解像度化方法
JP2009130747A (ja) 高解像度化処理装置
JP2009111721A (ja) 入力画像制御装置、撮像装置、入力画像制御方法およびプログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130621

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140630

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150619

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20160617

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20170616

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20180619

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20190619

Year of fee payment: 11