KR20130001626A - 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치 및 방법 - Google Patents

위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치 및 방법 Download PDF

Info

Publication number
KR20130001626A
KR20130001626A KR1020110062503A KR20110062503A KR20130001626A KR 20130001626 A KR20130001626 A KR 20130001626A KR 1020110062503 A KR1020110062503 A KR 1020110062503A KR 20110062503 A KR20110062503 A KR 20110062503A KR 20130001626 A KR20130001626 A KR 20130001626A
Authority
KR
South Korea
Prior art keywords
pixels
pixel
weight
candidate
directions
Prior art date
Application number
KR1020110062503A
Other languages
English (en)
Other versions
KR101235488B1 (ko
Inventor
정제창
박상준
장진익
홍성민
김영준
Original Assignee
한양대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한양대학교 산학협력단 filed Critical 한양대학교 산학협력단
Priority to KR1020110062503A priority Critical patent/KR101235488B1/ko
Publication of KR20130001626A publication Critical patent/KR20130001626A/ko
Application granted granted Critical
Publication of KR101235488B1 publication Critical patent/KR101235488B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/393—Enlarging or reducing
    • H04N1/3935—Enlarging or reducing with modification of image resolution, i.e. determining the values of picture elements at new relative positions

Abstract

하나의 프레임 내에서 보간 대상 픽셀의 주변에 위치한 픽셀을 이용하여 디인터레이싱을 수행하는 장치 및 방법이 개시된다. 서로 다른 대각방향 P,Q방향과 수직방향인 V방향으로 나타나는 에지의 방향성에 상응하는 각각의 후보화소값을 생성하는 후보화소값 생성부와 후보화소값 생성부에서 생성된 각각의 후보화소값에 위너필터(Wiener filter)를 이용하여 연산된 가중치(α)를 적용하고 가중합하여 화소를 보간하는 화소보간부를 포함하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치를 제공한다. 따라서, 화질을 개선시킨 화소보간 장치 및 방법을 제공할 뿐아니라 계산량도 상대적으로 적어 빠른 처리시간 내에 고화질의 영상을 보간할 수 할 수 있다.

Description

위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치 및 방법{De-interlacing Apparatus Using Weight Based on Wiener Filter and Method of Using the Same}
본 발명은 영상 처리기술에 관한 것으로, 더욱 상세하게는 하나의 프레임 내에서 보간 대상 픽셀의 주변에 위치한 픽셀을 이용하여 디인터레이싱을 수행하는 장치 및 방법에 관한 것이다.
영상의 화면 포맷에는 격행주사방식과 순행주사방식이 있다. 격행주사방식은 1장의 화면(프레임)을 2장의 필드로 나누어 송신하는 방식으로, 한 장의 화면(프레임)을 구성하기 위해서, 우선 짝수 번째의 줄을 건너뛰어 홀수 번째의 주사선에 제 1필드를 주사하고, 다음으로 홀수 번째의 줄을 건너뛰어 짝수 번째의 주사선에 제 2필드를 주사한다. 격행주사방식을 이용하면 같은 대역폭을 사용하는 동안에 프레임율을 2배로 늘릴 수 있는 장점이 있으나, 이 방식은 주사방식의 특성 때문에 영상의 깜박임 현상과 같은 화질의 열화가 발생할 수 있다. 이러한 화질의 열화를 방지하기 위해 다양한 디인터레이싱 기법들이 제시되어 왔다.
특히, PDP나 LCD 등과 같은 HDTV용 디스플레이 장치의 수요가 증가함에 따라 좋은 화질을 얻기 위해서 격행주사방식의 영상신호를 순행주사방식의 영상신호로 변환하는 디인터레이싱 과정이 필수적이다. 즉, 디인터레이싱은 격행주사방식의 특징으로 인하여 프레임내의 비어있는 영상 데이터(라인)를 주변의 영상 데이터를 이용하여 하나의 온전한 프레임으로 바꾸는 것이다.
디인터레이싱 방법은 시간적 정보를 사용하지 않고 현재 필드의 정보만을 사용하여 보간하는 화면 내(Intra-field) 디인터레이싱 방법과 시간적 정보와 현재 필드의 정보까지 사용하는 화면 간(Inter-field) 디인터레이싱 방법으로 크게 분류할 수 있다. 일반적으로 시간적 정보를 사용하는 디인터레이싱 방법이 성능면에서 우수하나, 연산량이 많아 복잡한 하드웨어 구조가 필요하고 정확한 움직임 검출을 수행하지 못할 경우 심각한 화질 열화를 발생시키는 단점이 있다. 또한, 시간적 정보를 사용하는 디인터레이싱 방법은 기본적으로 현재 필드의 정보까지 활용하여야 한다. 현재 필드의 정보를 사용하는 화면 내 디인터레이싱 방법은 다양한 공간 필터를 사용하여 접근하는 방법과 에지의 방향성을 고려하여 접근하는 방법이 있는데, 이 중에서 에지의 방향성을 고려하는 방법이 널리 활용되고 있는 실정이다.
에지의 방향성을 고려한 디인터레이싱 방법으로 ELA(Edge-based Line Average)는 3가지 방향성을 검출하여 화소를 보간하는 방법으로 연산이 빠르다는 장점이 있다. 또한, ELA는 구현의 용이성 때문에 널리 사용되어 왔으나, 화소 단위의 방향성 상관도만을 이용하여 화소를 보간하기 때문에 잘못된 에지정보를 사용하게 되면 잡음의 영향으로 화질이 떨어지는 문제점이 있다. E-ELA(Efficient ELA)는 ELA를 개선한 것으로 좀 더 정확한 에지 방향을 검출하여 화소를 보간하는 방법이다. E-ELA는 ELA 방식보다 정확한 방향성을 찾기 위하여 현재 위치에서 영상의 공간적인 형태를 세 가지로 분류한다. 즉, E-ELA는 공간적인 방향을 P,Q의 대각방향과 V의 수직방향을 분류하여 에지의 방향성을 결정한다. 그러나, E-ELA는 ELA방식에 비해 어느 정도 성능을 개선하였지만, 복잡한 고주파 영역에서 에지 방향의 부적절한 판단으로 화질의 열화를 충분히 줄이지 못하는 문제점이 있다.
ELA를 변형한 MELA(Modified Edge-based Line Average)는 ELA보다 방향성을 확장하여 5가지 방향성을 검출하여 화소를 보간하기 때문에 성능면에서 우수하다. 그러나, MELA도 ELA와 마찬가지로 방향을 잘못 계산하여 오히려 화질의 열화를 야기시킬 수 있는 단점이 있다.
또한, CAD(Covariance-based adaptive deinterlacing) 기술은 보간될 화소는 주변의 8개의 화소들의 가중합으로 구할 수 있다는 가정 하에, 기하 쌍대성(Geometric duality)의 원리를 이용하여 저해상도의 블록의 특성을 구한 후, 이를 고해상도의 블록에 적용한다. 그러나 에지 방향을 고려하지 않은 CAD기술은 계산량이 크다는 단점이 있다.
상기와 같은 문제점을 해결하기 위한 본 발명의 목적은, 하나의 프레임 내에서 화소를 보간하는데 있어서, 잡음의 영향으로 화질이 열화되는 현상을 줄여주는 디인터레이싱 장치를 제공하는데 있다.
상기와 같은 문제점을 해결하기 위한 본 발명의 다른 목적은, 하나의 프레임 내에서 화소를 보간하는데 있어서, 잡음의 영향으로 화질이 열화되는 현상을 줄여주는 디인터레이싱 방법을 제공하는데 있다.
상기 목적을 달성하기 위한 본 발명은, 보간될 화소를 중심으로 하여 서로 다른 대각방향 P,Q방향과 수직방향인 V방향으로 나타나는 에지의 방향성에 상응하는 각각의 후보화소값을 생성하는 후보화소값 생성부와 후보화소값 생성부에서 생성된 각각의 후보화소값에 위너필터(Wiener filter)를 이용하여 연산된 가중치(α)를 적용하고, 가중치(α)가 적용된 후보화소값을 가중합하여 화소를 보간하는 화소보간부를 포함하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치를 제공한다.
여기에서, 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치는 영역특성계수(Di)를 연산하여 영역특성계수(Di)가 미리 설정된 값보다 커질 때까지 윈도우 사이즈를 확대하여, 윈도우 사이즈를 결정하는 윈도우 사이즈 결정부를 더 포함할 수 있다.
여기에서, 후보화소값 생성부는 서로 다른 대각방향인 P,Q 방향과 수직방향인 V방향으로 나타나는 에지의 방향성을 검출하는 에지방향 검출부와 에지방향 검출부에서 검출된 에지의 방향성에 기반한 방향에 놓인 인접한 n(여기서, n은 정수임)개의 화소들에 FDIF(Fixed Directional Interpolation Filter)에서 고정된 필터계수(h(k))를 후보가중치(h)로 적용하고, 후보가중치(h)가 적용된 인접한 n개의 화소들을 가중합하여 P,Q,V방향에 대한 각각의 후보화소값을 추출하는 후보화소값 추출부로 구성된 것을 특징으로 할 수 있다.
여기에서, 화소보간부는 보간될 화소(X(i,j))를 중심으로 한 윈도우내의 가장 상단의 행과 가장 하단의 행에 위치한 주변화소들에 대해 각각 P,Q,V방향의 후보화소값을 추출하여 후소화소값의 행렬(
Figure pat00001
)을 생성하고, 행렬식
Figure pat00002
으로부터 가중치(α)를 연산하는 것을 특징으로 할 수 있다.
상기 목적을 달성하기 위한 본 발명의 다른 측면은, 보간될 화소를 중심으로 하여 서로 다른 대각방향 P,Q방향과 수직방향인 V방향으로 나타나는 에지의 방향성에 상응하는 각각의 후보화소값을 생성하는 후보화소값 생성단계와 후보화소값 생성단계에서 생성된 각각의 후보화소값에 위너필터(wiener filter)를 이용하여 연산된 가중치(α)를 적용하고, 상기 가중치(α)가 적용된 상기 후보화소값을 가중합하여 화소를 보간하는 화소보간단계를 포함하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 방법을 제공한다.
상기와 같은 본 발명에 따른 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치를 이용할 경우에는 에지의 방향성을 잘못 검출하여 화면이 열화되는 현상을 줄여주어 화질을 향상시킬 수 있다.
또한, 본 발명이 제공하는 디인터레이싱 장치 및 방법은 화질을 개선시킨 화소보간 장치 및 방법을 제공할 뿐아니라 계산량도 상대적으로 적어 빠른 처리시간 내에 고화질의 영상을 보간할 수 있는 장점이 있다.
본 발명의 효과들은 이상에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
도 1은 에지 방향을 판정하기 위하여 이용되는 윈도우를 나타낸다.
도 2는 M-ELA방식에 따른 에지의 방향성에 대한 개략도이다.
도 3은 본 발명의 일 실시예에 따른 디인터레이싱 장치를 설명하기 위해 보간 예정화소를 중심으로 화소열을 나타낸 윈도우이다.
도 4는 본 발명의 일 실시예에 따른 디인터레이싱 장치를 설명하기 위해 윈도우 사이즈(WS)로 구획된 주변화소를 나타낸다.
도 5는 본 발명의 일 실시예에 따른 디인터레이싱 방법을 설명하기 위한 절차도이다.
도 6는 다양한 디인터레이싱 방식의 객관적인 성능을 PSNR(Peak Signal to Noise Ratio)로 나타낸 표이다.
도 7은 다양한 디인터레이싱 방식의 주관적인 화질에 대한 평가를 MSSIM으로 나타낸 표이다.
도 8은 본 발명의 일 실시예에 따라 영상을 디인터레이싱한 결과와 기존의 방법으로 디인터레이싱한 결과를 나타내는 사진이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 에지 방향을 판정하기 위하여 이용되는 윈도우를 나타낸다. 도 1을 참조하면, 3×3윈도우에서 보간 예정화소인 x(i,j)을 중심으로 인접한 상위라인에 화소값 U -1 , U 0 , U 1 로 표현되는 화소가 위치하고, 인접한 하위라인에 화소값 L -1 , L 0 , L 1 로 표현되는 화소가 위치한다. 여기서, x(i,j)는 화소의 휘도값을 나타내고, 변수 i,j는 행과 열의 번호를 각각 나타낼 수 있다. 화면 내(Intra-field) 디인터레이싱 방법으로 널리 사용되고 있는 ELA(Edge-based Line Average)방식은 에지를 기반으로 하여 인접라인 사이의 방향성에 대한 상관도 정보를 이용하여 상관도가 높은 쪽으로 방향을 정하고, 해당 방향을 중심으로 두 화소의 평균값으로 화소를 보간한다. ELA방식에서 이용되는 에지의 방향성에 대한 상관계수는 수학식 1과 같이 표현될 수 있다.
Figure pat00003
여기서, C -1 , C 1 는 대각선의 방향성을, C 0 는 수직방향의 방향성을 나타낸다. 즉, 에지의 방향성은 π/4 방향인 C -1 , 3π/4 방향인 C 1 , 수직방향인 C 0 로 표현될 수 있으며, 두 화소의 값의 차이가 최소인 방향을 방향성 상관도가 높은 것으로 보고 에지의 방향으로 결정한다. 그리고 에지의 방향으로 결정된 두 화소의 평균값으로 손실된 화소를 보간한다.
도 2는 M-ELA방식에 따른 에지의 방향성에 대한 개략도이다.
도 1 및 도 2를 참조하면, 화질을 보다 개선하기 위해 ELA방식을 개선한 M-ELA(Modified Edge-based Line Average)방식은 좀 더 정확한 에지의 방향을 찾아서 화소를 보간하는 방법이다. M-ELA방식에 의한 에지의 방향성에 대한 상관도 정보는 P, Q, V 의 방향으로 나타낸다. P, Q, V방향에 대한 상관계수는 수학식 2와 같이 표현될 수 있다.
Figure pat00004
M-ELA는 수학식 2에 표현된 P, Q, V 의 방향과 수학식 1의 상관계수들을 이용하여 에지의 방향성을 결정한다. 그리고 결정된 에지의 방향성을 이용하여 대각선방향의 경우에는 인접한 4개의 화소들의 평균으로 화소를 보간한다. 만약, P, Q, V 방향 중에서 P방향으로 상관도가 가장 높고(P값이 가장 작고), C -1 < C 0 이면, 보간될 화소값은 (U -1 +U 0 +L 0 +L 1 )/4 로 나타난다. 마찬가지로, P, Q, V 방향 중에서 Q방향으로 상관도가 가장 높고(Q값이 가장 작고), C 1 < C 0 이면, 보간될 화소값은 (U 0 +U 1 +L -1 +L 0 )/4 로 나타난다. 마지막으로, 나머지 경우에 있어서는 보간될 화소값은 (U 0 +L 0 )/2로 나타낼 수 있다.
이러한, M-ELA방식을 이용하여 화소를 보간하는 방법을 수식으로 나타내면, 수학식 3과 같이 나타낼 수 있다.
Figure pat00005
여기서,
Figure pat00006
이다. 즉, M-ELA방식은 수직 및 대각선 방향의 두 화소간의 평균값에 1/2라는 가중치를 부여하여 합한 값으로 보간 예정화소인 x(i,j)를 나타낼 수 있고, 이는 두개의 화소의 평균값을 이용하는 2-탭 평균필터를 이용한 것이다. 그리고 수학식 3은 수학식 4와 같이 정리할 수 있다.
Figure pat00007
2-탭 평균필터의 주파수 응답을 보면 반원형태를 보이는 반면에, Sinc함수의 주파수 응답은 직사각형에 가까운 형태를 보인다. 주파수 응답의 형태가 직사각형에 가까우면 고주파의 영역까지 효과적으로 화소를 보간할 수 있다. 따라서, 직사각형에 가까운 주파수 응답 형태를 보이는 필터를 이용하면 보다 정밀하게 화소를 보간할 수 있다. 즉, 디인터레이싱의 수행에 있어서, 평균필터보다 Sinc함수를 이용한 필터를 사용하면 보다 정밀하게 화소를 보간할 수 있다. 즉, 2-탭 평균필터를 이용한 화소의 평균값을 6-탭 Sinc함수를 대략화한 필터를 이용한 값으로 대체하여 화소를 보간한다. 특히, Sinc함수를 대략화한 필터 중에서 필터계수(h(k))를 고정시켜서 사용하는 FDIF(Fixed Directional Interpolation Filter)를 사용한다.
이에, 본 발명은 서로 다른 대각방향 P,Q방향과 수직방향인 V방향으로 나타나는 에지의 방향성에 상응하는 각각의 후보화소값을 생성하는 후보화소값 생성부 및 상기 후보화소값 생성부에서 생성된 각각의 상기 후보화소값에 위너필터(Wiener filter)를 이용하여 연산된 가중치(α)를 적용하고 가중합하여 화소를 보간하는 화소보간부를 포함하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치를 제공한다. 즉, 보간될 화소 X(i,j)는 후보화소값에 적응적인 가중치(α)를 적용하여 가중합한 값으로 표현될 수 있고, 가중치(α)는 위너필터(Wiener filter)를 이용하여 연산할 수 있다.
도 3은 본 발명의 일 실시예에 따른 후보화소값을 생성하는 방법을 설명하기 위해 보간 예정화소를 중심으로 화소열을 나타낸 윈도우이다. 도 3을 참조하면, 보간 예정화소인 x(i,j)를 중심으로 대각방향 또는 수직방향으로 인접하여 각각 6개의 참조화소가 있다. 또한, 회색으로 표시된 화소열이 보간될 영역이다. 6개의 참조화소에 FDIF에서 고정된 필터계수(h(k))를 후보가중치(h)로 적용한 후, 이를 가중합하여 화소를 보간한다.
예를 들어서, 에지의 방향성이 P방향으로 결정되면 보간 예정화소 x(i,j)는 x(i,j)= P 0 h (0) + P 1 h (1) + P 2 h (2) + P 3 h (3) + P 4 h (4) + P 5 h (5) 와 같이 나타낼 수 있다. 또한 에지의 방향성이 Q 방향으로 결정되면 보간 예정화소 x(i,j)는 x(i,j)= Q 0 h(0) + Q 1 h (1) + Q 2 h (2) + Q 3 h (3) + Q 4 h (4) + Q 5 h (5)와 같이 나타낼 수 있다.
FDIF에서 고정된 필터계수를 h(k)라 하면, h(k)는 참조화소에 적용되는 후보가중치(h)를 의미한다. 즉, 본 발명은 보간 예정화소와 인접한 참조화소들의 거리와 상관도를 고려한 적응적 후보가중치(h)를 부여할 수 있다.
이에 본 발명은 보간 예정화소 x(i,j)는 수학식 5와 같이 나타낼 수 있다.
Figure pat00008
여기서, P(k)는 P방향에 놓인 참조화소의 값을 나타내는 것으로 P 0 , P 1 , P 2 , P 3 , P 4 , P 5 등의 화소값을 나타내고, 마찬가지로 Q(k)는 Q방향에 놓인 참조화소의 값이며, V(k)는 V방향에 놓인 참조화소의 값을 나타낸다(도 3 참조). 또한, P=(│U -1 -L 0 │+│U 0 - L 1 │)/2, Q=(│U 0 -L -1 │+│U 1 - L 0 │)/2 , V=(│U -1 -L -1 │+│U 0 - L 0 │+│U 1 - L 1 │)/3 이다. 즉, 각 방향으로 n개의 인접한 참조화소에 필터계수(h(k))를 후보가중치(h)로 적용하고, 후보가중치(h)가 적용된 인접한 n개의 화소를 가중합하여 후보화소값을 생성한다.
즉, 보간 예정화소 x(i,j)는P방향으로 상관도가 가장 높고 C -1 < C 0 이면, P방향에 놓인 인접한 n개의 각각 화소들에 상기 필터계수(h(k))를 각각 곱하여 가중합하며, Q방향으로 상관도가 가장 높고 C 1 < C 0 이면, Q방향에 놓인 인접한 n개의 각각 화소들에 필터계수(h(k))를 각각 곱하여 가중합하여 표시할 수 있다. 따라서, 보간 예정화소 x(i,j)는 수학식 5와 같이 나타낼 수 있다. 또한, FDIF에서 사용되는 필터계수는 다양하게 정의할 수 있으나 , h(k) = {3, -17, 78, 78, -17, 3}/ 128 를 적용할 수 있다. 본 발명은 수학식 5와 같이 나타나는 보간 예정화소 x(i,j)로부터 후보화소값을 추출할 수 있다.
후보화소값을 생성하는 후보화소 생성부는 서로 다른 대각방향인 상기 P,Q 방향과 수직방향인 상기 V방향으로 나타나는 에지의 방향성을 검출하는 에지방향 검출부와 상기 에지방향 검출부에서 검출된 에지의 방향성에 기반한 방향에 놓인 인접한 n(여기서, n은 정수임)개의 화소들에 FDIF(Fixed Directional Interpolation Filter)에서 고정된 필터계수(h(k))를 후보가중치(h)로 적용하고, 상기 후보가중치(h)가 적용된 상기 인접한 n개의 화소들을 가중합하여 상기 P,Q,V방향에 대한 각각의 후보화소값을 추출하는 후보화소값 추출부로 구성된 것을 특징으로 할 수 있다. 또한, 바람직하게는 n은 6일 수 있다.
보간 예정화소 x(i,j)로부터 세 방향으로의 후보화소값을 추출하여 생성할 수 있다. 즉, 보간 예정화소인 x(i,j)에서, P방향으로의 후보화소값은
Figure pat00009
, V방향으로의 후보화소값은
Figure pat00010
및 Q방향으로의 후보화소값은
Figure pat00011
로 나타낼 수 있다.
P, Q, V 방향에 따른 각각의 후보화소값에 위너필터(wiener filter)를 이용하여 연산된 가중치(α)를 적용하고, 가중합하여 보간될 화소값 X(i,j)을 얻을 수 있다.
즉, 보간될 화소값은
Figure pat00012
로 얻을 수 있다. 여기서 가중치(α)를 얻기 위해 위너필터(Wiener filter)를 이용한다. 이는 주변화소들도 후보화소값에 후보가중치(h)를 적용하고 가중합하여 이루어진다는 특성을 이용한 것이다. 또한, 평균제곱오차(mean square error)가 최소가 되도록 하는 위너필터(Wiener filter)는 통계적 성질을 나타내는 공분산 행렬을 이용하여 화소를 보간하는데 활용할 수 있다.
도 4는 본 발명의 일 실시예에 따른 디인터레이싱 장치를 설명하기 위해 윈도우 사이즈별(WS)로 구획된 주변화소를 나타낸다. 도 4를 참조하면, 윈도우 사이즈(WS)가 1이면, 보간될 화소(X(i,j))를 중심으로 U -1 , U 0 , U 1 , L -1 , L 0 , L 1 로 표시되는 6개의 주변화소가 위치한다. 또한, WS=2 이면, 보간될 화소(X(i,j))를 중심으로 U 2 -2 , U 2 -1 , U 2 0 , U 2 1 , U 2 2 , L 2 -2 , L 2 -1 , L 2 0 , L 2 1 , L 2 2 로 표시되는 10개의 주변화소가 위치한다. 마찬가지로, WS=3이면 14개의 주변화소가 위치할 수 있다. 즉, 주변화소는 보간될 화소(X(i,j))를 중심으로 한 윈도우내의 가장 상단의 행과 가장 하단의 행에 위치하는 화소를 의미한다.
윈도우 사이즈(WS)로 정의될 수 있는 주변화소들도 역시 후소화소값에 가중치(α)를 적용하고 가중합하여 나타낼 수 있다는 특징이 있다. 이러한 특징에 기반하여 각각의 주변화소들에 대해 각각 P,Q,V방향의 후보화소값을 추출하여 후소화소값의 행렬(
Figure pat00013
)을 생성하고, 행렬식
Figure pat00014
으로부터 가중치(α)를 연산하는 것을 특징으로 할 수 있다.
본 발명의 일 실시예로 윈도우 사이즈(WS)가 1일 때, 가중치(α)를 구하기 위한 행렬식을 나타내면, 수학식 6과 같이 나타낼 수 있다.
Figure pat00015
수학식 6을 정리하면, 수학식 7과 같이 된다.
Figure pat00016
여기서,
Figure pat00017
은 주변화소들의 화소값에 대한 행렬,
Figure pat00018
은 후보화소값의 행렬,
Figure pat00019
는 가중치이다. 즉,
Figure pat00020
은 각각의 주변화소에 대한 P, Q, V방향으로의 후보화소값으로 이루어진다. 따라서, WS=1일 때,
Figure pat00021
은 6×3의 행렬로 나타낼 수 있고, WS=2 일 때,
Figure pat00022
은 10×3의 행렬로 나타낼 수 있다.
일반적으로 윈도우 사이즈(WS)가 커질수록, 더 많은 후보화소값에 기반하여 가중치(α)를 연산하기 때문에 더욱 정밀한 가중치(α)값을 구할 수 있으나, 계산량이 증가하는 단점이 있다. 따라서, 적절한 윈도우 사이즈(WS)를 결정할 필요가 있다.
수학식 7로부터 가중치(α)를 구하면, 수학식 8과 같다.
Figure pat00023
따라서, 보간될 화소값
Figure pat00024
를 구할 수 있다.
위너필터를 적용하여 가중치(α)를 연산하는데 있어서, 다양한 윈도우 사이즈(WS)를 선택할 수 있다. 일반적으로 윈도우 사이즈(WS)를 크게 할수록 더욱 정밀한 가중치(α)를 연산할 수 있으나, 계산량이 증가한다는 문제점이 있다. 또한, 윈도우 사이즈(WS)가 어느 정도 이상이 되면, 윈도우 사이즈(WS)를 더 크게 하여도 정밀도를 향상하는 정도가 감소하게 된다. 따라서, 윈도우 사이즈(WS)를 적응적으로 선택하는 것이 필요하다.
도 5는 본 발명의 일 실시예에 따른 디인터레이싱 방법을 설명하기 위한 절차도이다. 도 5를 참조하면, 윈도우 사이즈(WS)를 결정하는데 있어서, 영역특성계수(Di)를 활용한다. 영역특성계수(Di)는 화소들간의 상관도를 표현한 값으로, Di 값이 미리 설정된 값보다 커질 때까지 윈도우 사이즈(WS)를 확대시켜 윈도우 사이즈(WS)를 결정한다. Di 값이 작으면, 화소들간에 상관도 높음을 의미하고, Di이 크면, 화소들간에 상관도가 낮음을 의미한다. 즉, Di 값이 작아서 화소들간에 상관도가 높은 경우에는 윈도우 사이즈(WS)를 더 크게 하여도 화질의 열화가 심하지 않을 것이고, Di값이 커서 화소들간에 상관도가 낮은 경우에는 윈도우 사이즈(WS)를 작게 하여야 화질의 열화를 효과적으로 방지할 수 있다.
이에 본 발명은 영역특성계수(Di)를 연산하여 상기 영역특성계수(Di)가 미리 설정된 값보다 커질 때까지 윈도우 사이즈를 확대하여, 윈도우 사이즈를 결정하는 윈도우 사이즈 결정부를 더 포함하는 것을 특징으로 하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치를 제공한다.
영역특성계수(Di)는 윈도우 사이즈별로 보간될 화소(X(i,j))의 인접한 상위 라인과 인접한 하위 라인에서 가장 좌측과 가장 우측에 위치한 윈도우 내의 네 개의 화소의 값(U i , U -i , L i , L -i )과 상기 윈도우 내의 네 개의 화소를 기준으로 행방향으로 가장 인접한 윈도우 밖의 네 개의 화소의 값(U i +1 , U -(i+1) , L i +1 , L -(i+1) )과의 각각의 차이값을 더하여 구하는 것을 특징으로 할 수 있다. 도 4를 참조하면, WS=1일 경우, 윈도우 내의 네개의 화소는 U -1 , U 1 , L -1 , L 1 이고, 윈도우 밖의 네 개의 화소는 U -2 , U 2 , L -2 , L 2 이다.
즉, 영역특성계수(Di)는 수학식 9과 같이 연산할 수 있다. 또한, 수학식 9에서 1≤ i≤ 3 로 하여 윈도우 사이즈(WS)를 총 4가지로 설정할 수 있도록 하는 것이 바람직하다. 윈도우 사이즈(WS)가 커짐에 따라 계산량이 증가하기 때문이다.
Figure pat00025
도 4 및 도 5를 참조하여 설명하면, 윈도우 사이즈(WS)가 1인 경우부터 시작된다. 윈도우 사이즈(WS)가 1인 경우로 시작하여(i=1), D1 연산된다. D1 이 미리 설정된 값보다 작으면, i=i+1이 되고 D2를 연산한다. 연산된 D2가 미리 설정된 값보다 크면 윈도우 사이즈(WS)를 2로 설정하고, D2가 미리 설정된 값보다 작으면 윈도우 사이즈를 3으로 증가시킨다. 이러한 과정을 i<4일 때까지 반복한다. 즉, 영역특성계수(Di)를 이용하여 윈도우 사이즈(WS)를 결정하고, 결정된 윈도우 사이즈(WS)를 기반으로 주변화소들을 선정하여 각각의 주변화소의 P,Q,V 방향의 후보화소값을 추출하여 후보화소값의 형렬(
Figure pat00026
)을 생성하고, 행렬식
Figure pat00027
으로부터 가중치(α)를 연산할 수 있다.
이에, 본 발명은 서로 다른 대각방향 P,Q방향과 수직방향인 V방향으로 나타나는 에지의 방향성에 상응하는 각각의 후보화소값을 생성하는 후보화소값 생성단계와 후보화소값 생성단계에서 생성된 각각의 후보화소값에 위너필터(Wiener filter)를 이용하여 연산된 가중치(α)를 적용하고 가중합하여 화소를 보간하는 화소보간단계를 포함하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 방법을 제공한다.
또한, 본 발명이 제공하는 디인터레이싱 방법은 영역특성계수(Di)를 연산하여 상기 영역특성계수(Di)가 미리 설정된 값보다 커질 때까지 윈도우 사이즈를 확대하여, 윈도우 사이즈를 결정하는 윈도우 사이즈 결정단계를 더 포함할 수 있고, 영역특성계수(Di)는 윈도우 사이즈별로 보간될 화소의 인접한 상위 라인과 인접한 하위 라인에서 가장 좌측과 가장 우측에 위치한 윈도우 내의 네 개의 화소의 값과 상기 윈도우 내의 네 개의 화소를 기준으로 행방향으로 가장 인접한 윈도우 밖의 네 개의 화소값과의 각각의 차이값을 더하여 구할 수 있다.
또한, 후소화소값 생성단계는 서로 다른 대각방향인 상기 P, Q 방향과 수직방향인 상기 V방향으로 나타나는 상기 에지의 방향성을 검출하는 단계와 검출된 상기 에지의 방향성에 기반한 방향에 놓인 인접한 n개의 화소들에 FDIF(Fixed Directional Interpolation Filter)에서 고정된 필터계수(h(k))를 후보가중치(h)로 적용하고, 상기 후보가중치(h)가 적용된 상기 인접한 n개의 화소들을 가중합하여 상기 P,Q,V방향에 대한 각각의 후보화소값을 추출하는 단계로 구성되는 것을 특징으로 할 수 있다.
도 6는 다양한 디인터레이싱 방식의 객관적인 성능을 PSNR(Peak Signal to Noise Ratio)로 나타낸 표이다. 도 6을 참조하면, 본 발명이 기존의 기술들과 비교하여 객관적 화질이 우수하다는 것을 알 수 있다. 특히, 본 발명을 적용한 경우의 평균 PSNR(peak signal to noise rate)이 객관적인 성능이 우수한 FDD기술 및 CAD기술과 비교하여 각각 0.89dB, 0.91dB가 높은 것을 알 수 있다. 또한, 본 발명을 적용한 경우, CPU시간이 FDD기술 및 CAD기술과 비교하여 각각 91.89%, 22.94%로 단축되는 것을 알 수 있다.
도7은 다양한 디인터레이싱 방식의 주관적인 화질에 대한 평가를 MSSIM으로 나타낸 표이다. 주관적 화질 평가를 위하여 SSIM(structure similarity)를 사용하였다. SSIM은 영역 별로 두 지역의 구조적 유사성에 근거하고, mean SSIM(MSSIM)은 영상 전체에 대한 객관적인 지표로 쓰인다. MSSIM 값의 범위는 0~1까지이고, 1에 근접할수록 원본과 유사하다고 볼 수 있다. 도 7을 참조하면, 본 발명을 적용하여 화소를 보간한 경우에 가장 높은 MSSIM값을 나타내는 것을 알 수 있다.
도 8은 본 발명의 일 실시예에 따라 영상을 디인터레이싱한 결과와 기존의 방법으로 디인터레이싱한 결과를 나타내는 사진이다. 도8을 참조하면, 에지 부분을 얼마나 정확하게 보간하였는지 확인하기 위하여 정지 영상을 부분적으로 확대하였다. 여기서, (a) Original Airplane, (b) Original partial image, (c) LA, (d) ELA, (e) EELA, (f) DOI, (g) NEDD, (h) LCID, (i) MELA, (j) FDD, (k) EMD, (l) ECA, (m) CAD, and (n) the proposed method 이다.
각 사진에서 보는 바와 같이 본 발명인 후보화소에 위너필터 기반의 가중치를 부여하는 디인터레이싱 장치 및 방법를 적용한 경우 기존의 방식에 비해 향상된 영상을 보여준다.
본 발명은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 프로그램 또는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의향 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어 분산방식으로 컴퓨터로 읽을 수 있는 프로그램 또는 코드가 저장되고 실행될 수 있다.
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

Claims (12)

  1. 보간될 화소를 중심으로 하여 서로 다른 대각방향 P,Q방향과, 수직방향인 V방향으로 나타나는 에지의 방향성에 상응하는 각각의 후보화소값을 생성하는 후보화소값 생성부; 및
    상기 후보화소값 생성부에서 생성된 각각의 상기 후보화소값에 위너필터(wiener filter)를 이용하여 연산된 가중치(α)를 적용하고, 상기 가중치(α)가 적용된 상기 후보화소값을 가중합하여 화소를 보간하는 화소보간부를 포함하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치.
  2. 제1항에 있어서,
    상기 디인터레이싱 장치는,
    영역특성계수(Di)를 연산하여 상기 영역특성계수(Di)가 미리 설정된 값보다 커질 때까지 윈도우 사이즈를 확대하여, 윈도우 사이즈를 결정하는 윈도우 사이즈 결정부를 더 포함하는 것을 특징으로 하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치.
  3. 제1항에 있어서,
    상기 후보화소값 생성부는,
    서로 다른 대각방향인 상기 P,Q 방향과 수직방향인 상기 V방향으로 나타나는 에지의 방향성을 검출하는 에지방향 검출부; 및
    상기 에지방향 검출부에서 검출된 에지의 방향성에 기반한 방향에 놓인 인접한 n(여기서, n은 정수임)개의 화소들에 FDIF(Fixed Directional Interpolation Filter)에서 고정된 필터계수(h(k))를 후보가중치(h)로 적용하고, 상기 후보가중치(h)가 적용된 상기 인접한 n개의 화소들을 가중합하여 상기 P,Q,V방향에 대한 각각의 후보화소값을 추출하는 후보화소값 추출부로 구성된 것을 특징으로 하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치.
  4. 제1항에 있어서,
    상기 화소보간부는,
    보간될 화소를 중심으로 한 윈도우내의 가장 상단의 행과 가장 하단의 행에 위치한 각각의 주변화소들에 대해 각각 P,Q,V방향의 후보화소값을 추출하여 후소화소값의 행렬(
    Figure pat00028
    )을 생성하고, 행렬식
    Figure pat00029
    (여기서,
    Figure pat00030
    은 주변화소들의 화소값에 대한 행렬)으로부터 가중치(α)를 연산하는 것을 특징으로 하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치.
  5. 제2항에 있어서,
    상기 영역특성계수(Di)는 윈도우 사이즈별로 보간될 화소에 인접한 상위 라인과 인접한 하위 라인에서 윈도우 내의 가장 좌측과 가장 우측에 위치한 네 개의 화소값(U i , U -i , L i , L -i )과 상기 윈도우 내의 네 개의 화소를 기준으로 행방향으로 가장 인접한 윈도우 밖에 위치한 네 개의 화소값(U i +1 , U -(i+1) , L i +1 , L -(i+1) )과의 각각의 차이값을 더하여 구하는 것을 특징으로 하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치.
  6. 제 2항 또는 제5항에 있어서,
    상기 영역특성계수(Di)는 D i = │ U i - U i +1 │+│ U -i -U -(i+1) │+│ L i - L i +1 │+│ L -i -L -(i+1) │인 것을 특징으로 하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치.
  7. 보간될 화소를 중심으로 하여 서로 다른 대각방향 P,Q방향과 수직방향인 V방향으로 나타나는 에지의 방향성에 상응하는 각각의 후보화소값을 생성하는 후보화소값 생성단계; 및
    상기 후보화소값 생성단계에서 생성된 각각의 상기 후보화소값에 위너필터(Wiener filter)를 이용하여 연산된 가중치(α)를 적용하고, 상기 가중치(α)가 적용된 상기 후보화소값을 가중합하여 화소를 보간하는 화소보간단계를 포함하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 방법.
  8. 제7항에 있어서,
    상기 디인터레이싱 방법은,
    영역특성계수(Di)를 연산하여 상기 영역특성계수(Di)가 미리 설정된 값보다 커질 때까지 윈도우 사이즈를 확대하여, 윈도우 사이즈를 결정하는 윈도우 사이즈 결정단계를 더 포함하는 것을 특징으로 하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 방법.
  9. 제7항에 있어서,
    상기 후보화소값 생성단계는,
    서로 다른 대각방향인 상기 P, Q 방향과 수직방향인 상기 V방향으로 나타나는 상기 에지의 방향성을 검출하는 단계; 및
    검출된 상기 에지의 방향성에 기반한 방향에 놓인 인접한 n개의 화소들에 FDIF(Fixed Directional Interpolation Filter)에서 고정된 필터계수(h(k))를 후보가중치(h)로 적용하고, 상기 후보가중치(h)가 적용된 상기 인접한 n개의 화소들을 가중합하여 상기 P,Q,V방향에 대한 각각의 후보화소값을 추출하는 단계로 구성되는 것을 특징으로 하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 방법.
  10. 제7항에 있어서,
    상기 가중치(α)는 보간될 화소를 중심으로 한 윈도우내의 가장 상단의 행과 가장 하단의 행에 위치한 주변화소들에 대해 각각 P,Q,V방향의 후보화소값을 추출하여 후소화소값의 행렬(
    Figure pat00031
    )을 생성하고, 행렬식
    Figure pat00032
    (여기서,
    Figure pat00033
    은 주변화소들의 화소값에 대한 행렬)으로부터 연산하는 것을 특징으로 하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 방법.
  11. 제8항에 있어서,
    상기 영역특성계수(Di)는 윈도우 사이즈별로 보간될 화소에 인접한 상위 라인과 인접한 하위 라인에서 윈도우 내의 가장 좌측과 가장 우측에 위치한 네 개의 화소값(U i , U -i , L i , L -i )과 상기 윈도우 내의 네 개의 화소를 기준으로 행방향으로 가장 인접한 윈도우 밖에 위치한 네 개의 화소값(U i +1 , U -(i+1) , L i +1 , L -(i+1) )과의 각각의 차이값을 더하여 구하는 것을 특징으로 하는 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 방법.
  12. 제8항 또는 11항에 있어서,
    상기 영역특성계수(Di)는 D i = │ U i - U i +1 │+│ U -i -U -(i+1) │+│ L i - L i +1 │+│ L -i -L -(i+1) │인 것을 특징으로 하는 후보화소에 위너필터 기반의 가중치를 부여하는 디인터레이싱 방법.

KR1020110062503A 2011-06-27 2011-06-27 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치 및 방법 KR101235488B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110062503A KR101235488B1 (ko) 2011-06-27 2011-06-27 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110062503A KR101235488B1 (ko) 2011-06-27 2011-06-27 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20130001626A true KR20130001626A (ko) 2013-01-04
KR101235488B1 KR101235488B1 (ko) 2013-02-20

Family

ID=47834602

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110062503A KR101235488B1 (ko) 2011-06-27 2011-06-27 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101235488B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101434530B1 (ko) * 2013-03-05 2014-08-29 광운대학교 산학협력단 적응적 가중치 보간 및 이산 웨이블릿 변환 기반 초해상도 영상 생성 방법
KR20160081652A (ko) * 2014-12-31 2016-07-08 인천대학교 산학협력단 디인터레이싱 방법 및 장치
WO2017057857A1 (ko) * 2015-09-29 2017-04-06 엘지전자 주식회사 영상 코딩 시스템에서 필터링 방법 및 장치

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100931142B1 (ko) 2008-01-16 2009-12-10 한양대학교 산학협력단 디인터레이싱 장치 및 방법
KR100967521B1 (ko) * 2008-02-21 2010-07-07 한양대학교 산학협력단 방향적 상관도를 이용한 디인터레이싱 장치 및 방법
KR101069712B1 (ko) 2009-06-26 2011-10-04 전남대학교산학협력단 에지 방향성의 가중치를 이용한 필드내 주사선 보간 방법 및 그 장치

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101434530B1 (ko) * 2013-03-05 2014-08-29 광운대학교 산학협력단 적응적 가중치 보간 및 이산 웨이블릿 변환 기반 초해상도 영상 생성 방법
KR20160081652A (ko) * 2014-12-31 2016-07-08 인천대학교 산학협력단 디인터레이싱 방법 및 장치
WO2017057857A1 (ko) * 2015-09-29 2017-04-06 엘지전자 주식회사 영상 코딩 시스템에서 필터링 방법 및 장치
US10623778B2 (en) 2015-09-29 2020-04-14 Lg Electronics Inc. Filtering method and apparatus in picture coding system

Also Published As

Publication number Publication date
KR101235488B1 (ko) 2013-02-20

Similar Documents

Publication Publication Date Title
US7483040B2 (en) Information processing apparatus, information processing method, recording medium, and program
US7406208B2 (en) Edge enhancement process and system
US7259794B2 (en) De-interlacing device and method therefor
JP4162621B2 (ja) フレームレート変換時のフレーム補間方法およびその装置
US7012649B2 (en) Image processing apparatus and method, program, and recording medium
US8054380B2 (en) Method and apparatus for robust super-resolution video scaling
US20030086498A1 (en) Apparatus and method of converting frame and/or field rate using adaptive motion compensation
EP1841234A2 (en) Apparatus for creating interpolation frame
US7796191B1 (en) Edge-preserving vertical interpolation
US8305489B2 (en) Video conversion apparatus and method, and program
US8208748B2 (en) Apparatus and method for image interpolation based on low pass filtering
US8300040B2 (en) Coefficient generating device and method, image generating device and method, and program therefor
US20100080299A1 (en) Frame frequency conversion apparatus, frame frequency conversion method, program for achieving the method, computer readable recording medium recording the program, motion vector detection apparatus, and prediction coefficient generation apparatus
US20040126037A1 (en) Apparatus and method for enhancing quality of reproduced image
KR101235488B1 (ko) 위너필터 기반의 가중치를 부여하여 화소를 보간하는 디인터레이싱 장치 및 방법
US7808553B2 (en) Apparatus and method for converting interlaced image into progressive image
KR100422575B1 (ko) 디인터레이싱을 위한 공간축/시간축 보간 시스템 및 방법
US8218075B2 (en) Method and system for efficient de-interlacing
CN111294545B (zh) 图像数据插值方法及装置、存储介质、终端
KR101158847B1 (ko) 에지맵을 이용한 디인터레이싱 장치 및 방법
KR100910208B1 (ko) 디인터레이싱 장치 및 그 방법
KR101174601B1 (ko) Ｆｄｉｆ와 적응적인 가중치를 이용한 디인터레이싱 장치 및 방법
JP4371907B2 (ja) 画素特徴判定装置、画素補間装置、及び映像信号処理装置
KR101192402B1 (ko) 공분산 기반 적응적 디인터레이싱 장치 및 방법, 그리고 복잡도를 고려한 하이브리드 디인터레이싱 장치 및 방법
KR100552685B1 (ko) 비월주사 영상을 순차 영상으로 변환하는 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20151214

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20161227

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee