KR20100005363A - 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로읽을 수 있는 기록매체 - Google Patents

영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로읽을 수 있는 기록매체 Download PDF

Info

Publication number
KR20100005363A
KR20100005363A KR1020080065362A KR20080065362A KR20100005363A KR 20100005363 A KR20100005363 A KR 20100005363A KR 1020080065362 A KR1020080065362 A KR 1020080065362A KR 20080065362 A KR20080065362 A KR 20080065362A KR 20100005363 A KR20100005363 A KR 20100005363A
Authority
KR
South Korea
Prior art keywords
interpolation
interpolation mode
correlation
field
pixel
Prior art date
Application number
KR1020080065362A
Other languages
English (en)
Other versions
KR100950226B1 (ko
Inventor
정제창
구수일
이세영
Original Assignee
한양대학교 산학협력단
중앙대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한양대학교 산학협력단, 중앙대학교 산학협력단 filed Critical 한양대학교 산학협력단
Priority to KR1020080065362A priority Critical patent/KR100950226B1/ko
Publication of KR20100005363A publication Critical patent/KR20100005363A/ko
Application granted granted Critical
Publication of KR100950226B1 publication Critical patent/KR100950226B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)

Abstract

본 발명은 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로 읽을 수 있는 기록매체에 관한 것이다. 본 발명에 따른 영상 보간 장치는 해당 픽셀의 전후 필드들과의 시간적 상관성 여부를 검출하는 상관성 검출부; 상기 상관성 검출부의 검출 결과에 따라 보간 모드를 결정하는 보간모드 결정부; 및 상기 보간모드 결정부가 결정한 보간 모드에 따라 상기 해당 픽셀을 보간하는 픽셀보간부를 포함한다.
이에 따라, 픽셀의 시간의 상관성을 고려하여 적절한 보간 방법을 적응적으로 채택함으로써, 움직임이 빠르거나 느린 것에 상관없이 고르게 우수한 화질을 얻을 수 있다.
영상 보간, 디인터레이싱

Description

영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로 읽을 수 있는 기록매체{APPARATUS FOR VIDEO INTERPOLATION, METHOD THEREOF AND COMPUTER RECORDABLE MEDIUM STORING THE METHOD}
본 발명은 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로 읽을 수 있는 기록매체에 관한 것이다.
격행 주사 방식은 제한된 대역폭을 효율적으로 사용하기 위하여 NTSC, PAL, 그리고 SECAM을 포함하여 많은 TV 시스템에서 널리 사용되고 있다. 격행 주사 방식을 사용하면 대역폭을 줄일 수 있는 장점이 있으나, 주사 방식의 특징 때문에 화면 내 플리커(flicker) 또는 영상의 에지에서의 크롤링(crawling) 혹은 트위터(twitter)와 같이 원치 않는 시각적 열화를 야기할 수 있다. 이러한 화질 열화를 막기 위하여 여러 가지 디인터레이싱(De-interlacing) 기법들이 제안되어 왔다.
종래의 디인터레이싱 기법들은 크게, 시간적 정보를 사용하지 않고 현재필드의 정보만을 사용하여 보간하는 인트라필터(Intra-field) 디인터레이싱 방법과, 시 간적 정보와 현재필드의 정보까지 사용하는 인터필트(Inter-field) 디인터레이싱 방법으로 구분할 수 있다.
인트라필드 디인터레이싱 방법으로는 영상의 방향성을 고려한 ELA (Edge-based Line Averaging) 알고리즘과, ELA 알고리즘즘에 비해 방향성을 더욱 정밀하게 찾을 수 있는 E-ELA(Enhanced ELA) 알고리즘이 대표적이다.
이러한 인트라필드 디인터레이싱 방법은 시간적 정보를 사용하지 않고 현재필드의 정보만을 사용하여 화소를 보간하는 방법이기 때문에, 움직임이 빠르거나 장면이 전환되는 화면과 같이 시간적으로 상관성이 낮은 영상에 대해 좋은 성능을 나타낸다. 그러나, 시간적 상관성이 높은 영상에 대해서는 화질 열화가 발생하는 단점이 있다.
인터필드 디인터레이싱 방법으로는 현재필드와 전후필드의 화소를 미디안 필터를 사용하여 보간하는 2D-ELA 알고리즘, 전경(foreground)과 배경(background)을 구분하고 전경에 해당하는 화소는 2D-ELA 를 적용하고 배경에 해당하는 화소는 같은 위치의 이전필드의 화소를 사용하는 첸스(Chen's) 알고리즘, 전경과 배경을 첸스 알고리즘과 다른 방법으로 구분하고 전경에 해당하는 화소는 현재필드와 이전 2개의 필드를 이용하여 보간하고, 배경에 해당하는 필드는 첸스 방법과 같은 방법으로 보간하는 리즈(Li's) 알고리즘이 있다.
이러한 인터필드 디인터레이싱 방법은 일반적으로 움직임 정보가 신뢰성이 있는 경우 주목할 만한 결과를 이끌어 낸다. 즉, 전체적으로 움직임이 빠르지 않거나 배경화면을 많이 포함하는 화면과 같이, 시간적으로 상관성이 높은 영상에 대해 좋은 성능을 보인다. 다만, 시간적 상관성이 낮은 영상에 대해서는 화질 열화가 발생하는 문제점이 있다.
따라서, 본 발명의 목적은 픽셀의 시간의 상관성을 고려하여 적절한 보간 방법을 적응적으로 채택함으로써, 움직임이 빠르거나 느린 것에 상관없이 고르게 우수한 화질을 얻을 수 있는 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로 읽을 수 있는 기록매체 제공하는 것이다.
상기 목적은 본 발명에 따라, 영상 보간 장치에 있어서, 해당 픽셀의 전후 필드들과의 시간적 상관성 여부를 검출하는 상관성 검출부; 상기 상관성 검출부의 검출 결과에 따라 보간 모드를 결정하는 보간모드 결정부; 및 상기 보간모드 결정부가 결정한 보간 모드에 따라 상기 해당 픽셀을 보간하는 픽셀보간부를 포함하는 것을 특징으로 하는 영상 보간 장치에 의해 달성될 수 있다.
여기서, 상기 상관성 검출부는 이전 필드들과의 상관성을 검출하는 제1 상관성 검출부, 및 다음 필드들과의 상관성을 검출하는 제2 상관성 검출부를 포함하고; 상기 보간모드선택부는 상기 상관성 검출부의 검출 결과에 따라, 현재 필드만을 참조하는 제1 보간모드, 상기 이전 필드들과 상기 현재 필드를 참조하는 제2 보간모 드, 상기 다음 필드와 상기 현재 필드들을 참조하는 제3 보간모드, 및 상기 이전 필드, 상기 다음 필드 및 상기 현재 필드를 참조하는 제4 보간 모드 중 어느 하나의 모드를 선택할 수 있다.
또한, 상기 제1 보간모드는 E-ELA 보간모드를 포함하고, 상기 제2 보간모드는 리즈 보간 모드를 포함하고, 상기 제3 보간모드는 역-리즈 보간모드를 포함하고, 상기 제4 보간모드는 첸스 보간모드를 포함할 수 있다.
한편, 상기 목적은 본 발명에 따라, 영상 보간 방법에 있어서, 해당 픽셀의 전후 필드들과의 시간적 상관성 여부를 검출하는 단계; 상기 시간성 상관성의 검출결과에 따라 보간 모드를 결정하는 단계; 및 상기 결정한 보간 모드에 따라 상기 해당 픽셀을 보간하는 단계를 포함하는 것을 특징으로 하는 영상 보간 방법에 의해서도 달성될 수 있다.
그리고, 상기 시간적 상관성 검출단계는 이전 필드와의 상관성을 검출하는 단계와 다음 필드와의 상관성을 검출하는 단계를 포함하고; 상기 보간모드 결정단계는 상기 시간적 상관성 검출 결과에 따라, 현재 필드를 참조하는 제1 보간모드, 상기 이전 필드들과 상기 현재 필드를 참조하는 제2 보간모드, 상기 다음 필드들과 상기 현재 필드를 참조하는 제3 보간모드, 및 상기 이전 필드, 상기 다음 필드 및 상기 현재 필드를 참조하는 제4 보간 모드 중 어느 하나의 모드를 선택할 수 있다.
또한, 상기 제1 보간모드는 E-ELA 보간모드를 포함하고, 상기 제2 보간모드는 리즈 보간 모드를 포함하고, 상기 제3 보간모드는 역-리즈 보간모드를 포함하고, 상기 제4 보간모드는 첸스 보간모드를 포함할 수 있다.
한편, 상기 목적은 본 발명에 따라, 제4항 내지 제6항 중 어느 하나의 항에 따른 영상 보간 방법이 기록된 컴퓨터로 읽을 수 있는 기록매체에 의해 달성될 수 있다.
이상 설명한 바와 같이, 본 발명에 따르면, 픽셀의 시간의 상관성을 고려하여 적절한 보간 방법을 적응적으로 채택함으로써, 움직임이 빠르거나 느린 것에 상관없이 고르게 우수한 화질을 얻을 수 있는 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로 읽을 수 있는 기록매체가 제공된다.
이하, 도면을 참조하여 본 발명의 구체적인 실시예들에 대해 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 영상 보간 장치를 설명하기 위한 제어블록도이다. 도 1을 참조하면, 본 발명의 영상 보간 장치는 상관성 검출부(10), 보간모드 결정부(20), 및 픽셀보간부(30)를 포함한다.
상관성 검출부(10)는 전후 프레임 데이터에 기초하여 현재 픽셀이 전후 프레임과 상관성이 높은지 여부를 검출하기 위한 것으로, 이전 프레임과의 상관성 여부를 검출하는 제1 상관성 검출부(미도시)와, 다음 프레임과의 상관성 여부를 검출하기 위한 제2 상관성 검출부(미도시)를 포함한다.
보간 대상이 되는 보간 픽셀이 전후 프레임들과 시간적 상관성이 높은지 여부의 판단은 다양한 방법으로 가능하며, 구체적인 판단 기준의 예에 대해서는 도 2 및 <식 1>을 참조하여 설명하기로 한다. 도 2는 시간적 상관성을 판단하는데 참조가 되는 참조 필드들을 도시한 것이다.
Figure 112008048736617-PAT00001
도 2를 참조하면, n은 보간 대상이 되는 보간 픽셀이 포함된 현재 필드를 나타내고, n-1, n-2는 이전 필드들, n+1, n+2 는 다음 필드들을 나타낸다. 도 2에서, 보간 픽셀은 n 필드에서 회색으로 표시된 픽셀에 해당한다.
식 1에서, CDP(Correlation Detector with Previous field)는 이전 필드와의 상관성을 나타내는 검출자를 의미하고, CDN(Correlation Detector with Next field)는 다음 필드와의 상관성을 나타내는 검출자를 의미한다. 제1 상관성 검출부는 식 1의 CDP를 산출하고, 제2 상관성 검출부는 식 1의 CDN을 산출한다.
식 1을 참조하면, 도 2의 a와 c의 차이의 절대값과 b와 d의 차이의 절대값의 합이 소정 문턱값(Threshold; T) 이하인 경우에는 CDP가 1로 결정되며, 이는 보간 픽셀이 이전 필드와 상관성이 높다는 것을 의미한다. 반면, 그 값이 소정 문턱값(Threshold; T) 이상인 경우에는 CDP가 0으로 결정되며, 이는 보간 픽셀이 이전 필드와 상관성이 낮다는 것을 의미한다.
유사하게, 도 2의 a와 e의 차이의 절대값과 b와 f의 차이의 절대값의 합이 소정 문턱값(Threshold; T) 이하인 경우에는 CDN이 1로 결정되며, 이는 보간 픽셀이 이전 필드와 상관성이 높다는 것을 의미한다. 반면, 그 값이 소정 문턱값(Threshold; T) 이상인 경우에는 CDN이 0으로 결정되며, 이는 보간 픽셀이 이전 필드와 상관성이 낮다는 것을 의미한다.
즉, CDP가 1이고, CDN이 0이면, 보간 픽셀이 이전 필드와 상관관계가 높다는 것이고, CDP가 0이고, CDN이 1이면, 다음 필드와 상관관계가 높다는 의미이다. 또한, CDP가 1이고, CDN이 1이면 보간 픽셀이 이전 필드와 다음 필드 둘 다에 상관성이 높다는 것이고, CDP와 CDN이 둘 다 0이면, 보간 픽셀이 전후 필드들과 상관성이 낮다는 의미이다.
여기서, 상관성 여부의 기준이 되는 문턱값은 적절히 결정될 수 있으며, 본 실시예에서는 5로 결정하는 것을 예로 든다.
보간모드 결정부(20)는 전술한 상관성 검출부(10)의 검출 결과에 따라 해당 픽셀의 시간적 상관성 여부를 고려하여 보간 모드를 결정한다.
구체적으로, 보간모드 결정부(20)는 보간 픽셀이 이전필드와 다음 필드 둘 다에 상관성이 낮다면 제1 보간모드를 선택하고, 보간 픽셀이 이전 필드와 다음 필드 둘 다에 상관관계가 높은 경우, 이전 필드, 다음 필드, 현재 필드를 참조 필드로 사용하는 제2 보간모드를 선택하고, 이전 필드에만 상관성이 높은 경우 이전 필드들과 현재 필드를 참조 필드로 이용하는 제3 보간모드를 선택한다. 또한, 보간 픽셀이 다음 필드들과만 상관성이 높다면 다음 필드들과 현재 필드를 참조 필드로 사용하는 제4 보간모드를 선택한다.
본 실시예에서, 보간모드 결정부(20)는 수학식 2에 따라 보간 모드를 선택할 수 있다.
Figure 112008048736617-PAT00002
즉, 상관성 검출부(10)의 검출 결과 CDP와 CDN이 둘 다 0이면, 보간모드 결정부(20)는 E-ELA 보간방법을 선택하고, CDP가 1이고, CDN이 0이면, 리즈 보간방법을 선택한다. 그리고, CDP가 0이고, CDN이 1이면, 역-리즈 보간방법을 선택하고, CDP가 1이고, CDN이 1이면 첸스 보간방법을 선택한다. 여기서, Xo(p,n)은 보간 함수식을 의미하며, p는 픽셀, n은 필드를 가리킨다.
한편, 픽셀보간부(30)는 보간모드 결정부(20)가 선택한 보간모드로 보간 픽셀의 보간을 수행한다.
도 3은 픽셀보간부(30)의 E-ELA 보간을 위한 참조 픽셀들의 예를 도시한 것이다. 도 3에 도시된 바와 같이, E-ELA 보간방법은 두 개의 인접 라인들 사이에 보간 라인을 선형적으로 보간하는데 현재 필드 내에서의 픽셀들 간의 방향 상관을 사용하며, 아래의 수학식 3 내지 5에 따라 보간 픽셀값을 결정한다.
Figure 112008048736617-PAT00003
Figure 112008048736617-PAT00004
Figure 112008048736617-PAT00005
에지 방향은 수직(vertical) 방향과, 대각선(diagonal-1, diagonal-2) 방향이 있을 수 있으며, 좀 더 정확한 에지 방향을 찾기 위해 다음의 수학식 4와 같이 p, q 값을 정의하고, 에지 방향의 픽셀들 값들의 차이 이외에도 p, q 값을 비교하여, 수학식 5에 따라 보간을 수행한다.
도 4는 픽셀보간부(30)의 리즈 보간을 위한 참조 필드들의 예를 도시한 것이다. 도 4에 도시된 바와 같이, 리즈 보간방법은 이전 필드 2 개를 참조하여 보간을 수행한다.
우선, 픽셀보간부(30)는 보간하고자 하는 픽셀이 전경(Foreground)에 해당하 는지 배경(Background)에 해당하는지를 우선 구분하고, 각각 다른 방법으로 보간한다.
전경인지 배경인지 여부의 판별은 아래의 함수식에 따라 결정한다.
Figure 112008048736617-PAT00006
여기서, p=(i,j) 는 보간하고자 하는 현재 픽셀의 위치를 나타내고, n은 현재 필드를 나타낸다. 만약, DFn(p,n)의 값이 1로 결정되면 전경으로 판단하고, 0으로 결정되면 배경으로 판단한다. 여기서, 전경인지 배경인지 구별하는 기준이 되는 문턱값(T)은 적절히 결정될 수 있다.
이때, 리즈 보간 방법은 아래 수식에 의해 정의된다.
Figure 112008048736617-PAT00007
여기서, X(p,n)은 ymod2 =nmod2로 정의되는 입력 필드를 의미하고, Xo(p,n)은 위 수학식 7로부터 얻어지는 결과 프레임을 의미한다. 즉, 리즈 보간 방법은 보간하고자 하는 픽셀이 배경에 해당하면, 이전 필드의 같은 위치의 화소를 사용하고, 전경에 해당하는 픽셀은 현재 필드와 이전 필드의 인접 화소값들을 사용 하여 보간을 수행한다.
한편, 역-리즈 보간방법은 상술한 리즈 보간방법과 처리방법이 동일하지만, 참조 필드로서 2 개의 이전 필드들 대신 2 개의 다음 필드들을 사용한다는 점에서 상이하다. 즉, 도 4에서 필드 숫자 n-1, n-2 대신에 n+1, n+2로 대체하면 역-리즈 보간방법이 된다. 여기서 구체적인 역-리즈 보간방법에 대한 설명은 생략하기로 한다.
도 5는 픽셀보간부(30)의 첸스 보간을 위한 필드들을 도시한 것이다. 픽셀보간부(30)는 리즈 보간방법과 유사하게 전경과 배경을 구분하여 각각 상이한 방법으로 해당 픽셀을 보간한다.
Figure 112008048736617-PAT00008
여기서, p=(i,j) 는 보간하고자 하는 현재 픽셀의 위치를 나타내고, n은 현재 필드, n-1, n-2, n-3은 이전 필드들을 가리키고, n+1은 다음 필드를 나타낸다. 만약, DFor(p,n)이 1인 경우, 보간하고자 하는 현재의 픽셀이 전경에 해당하고, 0인 경우 배경에 해당함을 의미한다.
첸스 보간방법은 다음 식에 따라 정의된다.
Figure 112008048736617-PAT00009
여기서, X(p,n)은 ymod2 =nmod2로 정의되는 입력 필드를 의미하고, Xo(p,n)은 위 수학식 9로부터 얻어지는 결과 프레임을 의미한다. 즉, 첸스 보간 방법은 보간하고자 하는 픽셀이 배경에 해당하면, 이전 필드의 같은 위치의 화소를 사용하고, 전경에 해당하는 픽셀은 2D-ELA 방법을 사용한다.
위 식에서 A는 다음과 같이 정의된다.
A = min(|a-f|, |b-e|, |c-d|, |g-l|, |h-k|, |i-j|)
여기서, A는 6개의 방향적 변화 중에서 최소의 차이값을 의미한다. 즉, 2D-ELA 방법은 보간하고자 하는 픽셀 위아래, 전후 필드의 같은 위치, 그리고, A 값을 미디안 필터를 사용하는 보간한다.
이와 같이, 본 발명은 픽셀의 시간적 상관성 여부에 따라 적응적으로 보간모드를 달리 적용함으로써, 영상의 특성에 따라 품질의 편차가 없는 일정한 품질을 영상을 구현할 수 있다.
도 6은 전술한 영상 보간 장치의 보간방법을 설명하는 제어흐름도이다.
도 6을 참조하면, 수학식 1을 이용하여 보간하고자 하는 현재 픽셀이 전후 필드들과 상관성이 있는지 여부를 검출한다(S10). 만약, 이전 필드와의 상관성 여 부를 나타내는 검출자 CDP=1이고(S11), 다음 필드와의 상관성 여부를 나타내는 검출자 CDN=1인 경우(S12)(즉, 전후 필드 둘 다에 상관성이 높은 경우), 첸스 보간방법으로 픽셀 보간을 수행한다(S13).
또한, 이전 필드와의 상관성 여부를 나타내는 검출자 CDP=1이고(S11), 다음 필드와의 상관성 여부를 나타내는 검출자 CDN=0인 경우(S12)(즉, 이전 필드에만 상관성이 높은 경우), 리즈 보간방법을 이용하여 픽셀 보간을 수행한다(S14).
한편, 이전 필드와의 상관성 여부를 나타내는 검출자 CDP=0이고(S11), 다음 필드와의 상관성 여부를 나타내는 검출자 CDN=1인 경우(S15)(즉, 이후 필드에만 상관성이 높은 경우), 역-리즈 보간방법을 이용하여 픽셀 보간을 수행한다(S16).
마지막으로, 이전 필드와의 상관성 여부를 나타내는 검출자 CDP=0이고(S11), 다음 필드와의 상관성 여부를 나타내는 검출자 CDN=0인 경우(S15)(즉, 전후 필드들 모두에 상관성이 낮은 경우), E-ELA 보간방법을 이용하여 픽셀 보간을 수행한다(S17).
표 1은 종래의 디인터레이싱 기법과 본 발명의 기법을 사용하여 처리한 8개의 영상의 실험 결과값(PSNR)을 나타낸 것이다. 본 실험에서 해당 픽셀이 전후 필드들과 상관성을 갖는지 여부를 판단하는 기준값 즉, <식 1>에서의 문턱값(T)을 5로 설정하였다.
Figure 112008048736617-PAT00010
위 표에서, 스테판, 버스, 풋볼2 영상은 움직임이 보통인 동영상이고, 풋볼, 댄서 영상은 비교적 움직임이 빠른 영상이며, 포맨, 테이블, 마더-도어터의 영상은 움직임이 비교적 느린 영상이다.
위 표의 결과에서 알 수 있듯이, 움직임이 보통인 경우 본 발명의 보간 방법이 종래의 알고리즘에 비해 향상된 결과를 보여주고 있다. 한편, 움직임이 빨라서 시간적 상관성이 낮은 영상의 경우, 현재 필드만 참조하는 E-ELA 방법이 객관적으로 우수한 성능을 가짐을 알 수 있다. 이 경우, 본 발명에 따른 보간방법은 E-ELA 방법의 성능과 거의 유사한 성능을 보여준다.
마자막으로, 움직임이 느려서 시간적 상관성이 높지 않은 영상의 경우, 이전 필드들만을 참조하는 리즈 보간 방법이 좋은 결과를 나타내고, 본 발명에 따른 보간 방법도 이에 뒤지지 않는 결과치를 보여주고 있다.
도 7a 내지 도 7f는 종래의 보간 방법들과 본 발명의 보간 방법의 성능을 주관적으로 살펴보기 위한 처리 결과 영상들이다.
도 7a는 원본영상, 7b는 LD(Line Doubling) 방법, 7c는 E-ELA 방법, 6d는 리즈 방법, 7e는 첸스 방법, 7f는 본 발명이 제안하는 보간 방법을 수행한 결과 영상이다.
도 7a 내지 도 7f를 비교하면, 상대적으로 움직임이 없는 배경과 앵커의 영상부분은 도 7d, 7e, 7f에서 좋은 성능을 보여주고 있지만, 도 7b, 7c에서는 화질이 좋지 않음을 볼 수 있다. 한편, 해당 영상에서 움직임이 빠른 발레리나가 나오는 디스플레이 화면 부분은 도 7c, 도 7f에서 좋은 성능을 보여주는 반면, 도 7b, 7d, 7e에서는 화질이 좋지 않음을 볼 수 있다.
위 실험결과를 통해 본 발명이 느린 영상이든지 빠른 영상이든지 해당 픽셀의 특성을 고려하여 적응적으로 보간방법을 선택적으로 수행함으로써 객관적으로나 주관적으로 우수한 화질을 얻을 수 있음을 확인할 수 있다.
전술한 본 발명에 따른 영상 보간 장치는 영상 보간을 위한 독립된 장치로 구현될 수도 있으나, 상술한 연산 및/또는 처리를 수행하기 위한 소프트웨어가 설치된 컴퓨터 시스템으로 구현될 수도 있다.
비록 본 발명의 몇몇 실시예들이 도시되고 설명되었지만, 본 발명이 속하는 기술분야의 통상의 지식을 가진 당업자라면 본 발명의 원칙이나 정신에서 벗어나지 않으면서 본 실시예를 변형할 수 있음을 알 수 있을 것이다. 발명의 범위는 첨부된 청구항과 그 균등물에 의해 정해질 것이다.
도 1은 본 발명의 일 실시예에 따른 영상 보간 장치를 설명하기 위한 제어블록도;
도 2는 본 발명의 일 실시예에 따라 시간적 상관성을 판단하는데 참조가 되는 참조 필드들을 도시한 것이다.
도 3은 본 발명의 일 실시예에 따른 E-ELA 보간을 위한 참조 픽셀들의 예를 도시한 것이다.
도 4는 본 발명의 일 실시예에 따른 리즈 보간을 위한 참조 픽셀들의 예를 도시한 것이다.
도 5는 본 발명의 일 실시예에 따른 첸스 보간을 위한 참조 픽셀들의 예를 도시한 것이다.
도 6은 도 1의 장치의 영상 보간 방법을 설명하는 제어흐름도이다.
도 7a 내지 도 7f는 종래의 보간 방법들과 본 발명의 보간 방법의 성능을 주관적으로 살펴보기 위한 처리 결과 영상들이다.

Claims (7)

  1. 영상 보간 장치에 있어서,
    해당 픽셀의 전후 필드들과의 시간적 상관성 여부를 검출하는 상관성 검출부;
    상기 상관성 검출부의 검출 결과에 따라 보간 모드를 결정하는 보간모드 결정부; 및
    상기 보간모드 결정부가 결정한 보간 모드에 따라 상기 해당 픽셀을 보간하는 픽셀보간부를 포함하는 것을 특징으로 하는 영상 보간 장치.
  2. 제1항에 있어서,
    상기 상관성 검출부는 이전 필드들과의 상관성을 검출하는 제1 상관성 검출부, 및 다음 필드들과의 상관성을 검출하는 제2 상관성 검출부를 포함하고;
    상기 보간모드선택부는 상기 상관성 검출부의 검출 결과에 따라, 현재 필드만을 참조하는 제1 보간모드, 상기 이전 필드들과 상기 현재 필드를 참조하는 제2 보간모드, 상기 다음 필드와 상기 현재 필드들을 참조하는 제3 보간모드, 및 상기 이전 필드, 상기 다음 필드 및 상기 현재 필드를 참조하는 제4 보간 모드 중 어느 하나의 모드를 선택하는 것을 특징으로 하는 영상 보간 장치.
  3. 제2항에 있어서,
    상기 제1 보간모드는 E-ELA 보간모드를 포함하고, 상기 제2 보간모드는 리즈 보간 모드를 포함하고, 상기 제3 보간모드는 역-리즈 보간모드를 포함하고, 상기 제4 보간모드는 첸스 보간모드를 포함하는 것을 특징으로 하는 영상 보간 장치.
  4. 영상 보간 방법에 있어서,
    해당 픽셀의 전후 필드들과의 시간적 상관성 여부를 검출하는 단계;
    상기 시간성 상관성의 검출결과에 따라 보간 모드를 결정하는 단계; 및
    상기 결정한 보간 모드에 따라 상기 해당 픽셀을 보간하는 단계를 포함하는 것을 특징으로 하는 영상 보간 방법.
  5. 제4항에 있어서,
    상기 시간적 상관성 검출단계는 이전 필드와의 상관성을 검출하는 단계와 다음 필드와의 상관성을 검출하는 단계를 포함하고;
    상기 보간모드 결정단계는 상기 시간적 상관성 검출 결과에 따라, 현재 필드를 참조하는 제1 보간모드, 상기 이전 필드들과 상기 현재 필드를 참조하는 제2 보간모드, 상기 다음 필드들과 상기 현재 필드를 참조하는 제3 보간모드, 및 상기 이 전 필드, 상기 다음 필드 및 상기 현재 필드를 참조하는 제4 보간 모드 중 어느 하나의 모드를 선택하는 것을 특징으로 하는 영상 보간 방법.
  6. 제5항에 있어서,
    상기 제1 보간모드는 E-ELA 보간모드를 포함하고, 상기 제2 보간모드는 리즈 보간 모드를 포함하고, 상기 제3 보간모드는 역-리즈 보간모드를 포함하고, 상기 제4 보간모드는 첸스 보간모드를 포함하는 것을 특징으로 하는 영상 보간 방법.
  7. 제4항 내지 제6항 중 어느 하나의 항에 따른 영상 보간 방법이 기록된 컴퓨터로 읽을 수 있는 기록매체.
KR1020080065362A 2008-07-07 2008-07-07 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로읽을 수 있는 기록매체 KR100950226B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080065362A KR100950226B1 (ko) 2008-07-07 2008-07-07 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로읽을 수 있는 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080065362A KR100950226B1 (ko) 2008-07-07 2008-07-07 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로읽을 수 있는 기록매체

Publications (2)

Publication Number Publication Date
KR20100005363A true KR20100005363A (ko) 2010-01-15
KR100950226B1 KR100950226B1 (ko) 2010-03-29

Family

ID=41814762

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080065362A KR100950226B1 (ko) 2008-07-07 2008-07-07 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로읽을 수 있는 기록매체

Country Status (1)

Country Link
KR (1) KR100950226B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220094347A (ko) 2020-12-29 2022-07-06 경북대학교 산학협력단 복수 광원을 이용한 투광 조명장치

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100913890B1 (ko) * 2002-04-17 2009-09-02 오리온피디피주식회사 움직임 적응 시공간 디인터레이싱 방법
KR20040061244A (ko) * 2002-12-30 2004-07-07 삼성전자주식회사 디-인터레이싱 방법 및 그 장치
KR101127220B1 (ko) * 2004-07-28 2012-04-12 세종대학교산학협력단 움직임 보상 적응형 순차주사화 장치 및 그 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220094347A (ko) 2020-12-29 2022-07-06 경북대학교 산학협력단 복수 광원을 이용한 투광 조명장치

Also Published As

Publication number Publication date
KR100950226B1 (ko) 2010-03-29

Similar Documents

Publication Publication Date Title
JP4847040B2 (ja) ビデオシーケンスでのティッカー処理
US8526502B2 (en) Method and apparatus for line based vertical motion estimation and compensation
US20050249282A1 (en) Film-mode detection in video sequences
US20050068334A1 (en) De-interlacing device and method therefor
KR20060047638A (ko) 필름 모드 판정 방법, 움직임 보상 화상 처리 방법, 필름모드 검출기 및 움직임 보상기
KR20060047630A (ko) 움직임 보상된 출력 이미지 데이터를 생성하는 방법 및움직임 보상기
US7499102B2 (en) Image processing apparatus using judder-map and method thereof
US7898598B2 (en) Method and apparatus for video mode judgement
KR100422575B1 (ko) 디인터레이싱을 위한 공간축/시간축 보간 시스템 및 방법
US8704945B1 (en) Motion adaptive deinterlacer
US8013936B2 (en) De-interlacing method and apparatus
CN111294545B (zh) 图像数据插值方法及装置、存储介质、终端
KR100950226B1 (ko) 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로읽을 수 있는 기록매체
US8294819B2 (en) De-interlacing apparatus and method and moving caption compensator
KR101158847B1 (ko) 에지맵을 이용한 디인터레이싱 장치 및 방법
US7796189B2 (en) 2-2 pulldown signal detection device and a 2-2 pulldown signal detection method
CN113286107A (zh) 视频去隔行方法、系统、设备及存储介质
KR101513395B1 (ko) 모션 적응적 디인터레이싱 시스템
US8373798B2 (en) Text protection device and related motion adaptive de-interlacing device
JP4910579B2 (ja) 画像信号処理装置、画像信号処理方法、およびプログラム
US9324131B1 (en) Method and apparatus for motion adaptive deinterlacing with reduced artifacts
JP2009232402A (ja) ノイズ低減回路及び方法
KR100710236B1 (ko) 화소 보간 장치 및 화소 보간 방법
KR100949137B1 (ko) 영상 보간 장치와 그 방법 및 그 방법이 기록된 컴퓨터로읽을 수 있는 기록매체
KR101109153B1 (ko) 저더 검출을 이용한 디인터레이싱 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130111

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20131230

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20150105

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160104

Year of fee payment: 7

LAPS Lapse due to unpaid annual fee